夫妻遗弃行为达到恶劣程度才能构成犯罪，遗弃行为的恶劣情节是指：受害人因遗弃致重伤或者死亡；因被遗弃而被迫沿街乞讨；因遗弃而无助、被迫自杀；行为人反复教育、拒不改正的，这使得被害人的生命处于危险的境地；遗弃手段非常恶劣（如在遗弃中打架）等。《中华人民共和国刑法》第二百六十一条规定：对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。

司法机关对夫妻遗弃罪怎么处理？

1、对遗弃家庭成员，受害人提出请求的，人民法院应当依法作出支付扶养费、抚养费、赡养费的判决。

2、对重婚的，对实施家庭暴力或虐待、遗弃家庭成员构成犯罪的，依法追究刑事责任。受害人可以依照刑事诉讼法的有关规定，向人民法院自诉；公安机关应当依法侦查，人民检察院应当依法提起公诉。

3、遗弃罪，是指对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的行为。我国刑法第二百六十一条规定：对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。

《中华人民共和国刑法》第二百六十一条规定：遗弃罪

对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。