夫妻有一方是残疾人双方不一定能离婚。如果双方能协议一致，都同意离婚，可以协议离婚；如果协议不成，可以到法院起诉离婚，由法院判决。但是对于女方在怀孕期间、分娩后一年内或者终止妊娠后六个月内，男方不得提出离婚，但女方提出离婚或者人民法院认为确有必要受理男方离婚请求的除外。法院是否会判决离婚还要根据双方情况而定。

有一方是神经病能离婚吗？

可以。一方坚决要求离婚的，经调解无效，可依法判决准予离婚。其中第三条规定了夫妻一方如果患有精神病的，另一方可以起出离婚，具体情况如下。1、婚前隐瞒精神病，婚后经治不愈，一方患有精神病，为了能够稳定婚姻达到婚姻的成立，向婚姻的另一方隐瞒了自己的病情，在结婚后，一方犯病，致使另一方知道了病情。犯病的一方经过多方寻医问诊，并且没有得到控制，而且有可能更加严重。2、婚前知道对方患有精神病而与其结婚，一方婚前有患有精神病，婚姻的另一方也知道其患有精神病的，而且另一方明知道一方有精神病，还要和其登记结婚的。

《中华人民共和国民法典》第一千零七十六条夫妻双方自愿离婚的，应当签订书面离婚协议，并亲自到婚姻登记机关申请离婚登记。

离婚协议应当载明双方自愿离婚的意思表示和对子女抚养、财产以及债务处理等事项协商一致的意见。