按照我国婚姻法规定，我国实行的是结婚自由和离婚自由的原则。只要当事人愿意，且符合法律的相关规定，就可以结婚；而对于夫妻离婚，法律设定的限制则更加少，只要能证明夫妻感情确已破裂，就可以判决离婚。实际上，法律并没有对与犯人离婚做任何限制。因为，如果仅仅因为对方是犯人，就限制另一方与犯人离婚，这将严重损害犯人的配偶的婚姻自由权。因此，配偶是可以与服刑人员离婚的。

【法律依据】

《婚姻法》第三十一条规定，男女双方自愿离婚的，准予离婚。双方必须到婚姻登记机关申请离婚。婚姻登记机关查明双方确实是自愿并对子女和财产问题已有适当处理时，发给离婚证。