如果夫妻双方因为残疾或者其他特殊因素没有抚养子女的能力,可以将子女托付给夫妻的父母抚养,这里需要抚养权的变更,指定子女的监护人。
《婚姻法》第三十六条:父母与子女间的关系,不因父母离婚而消除。离婚后,子女无论由父或母直接抚养,仍是父母双方的子女。离婚后,父母对于子女仍有抚养和教育的权利和义务。离婚后,哺乳期内的子女,以随哺乳的母亲抚养为原则。哺乳期后的子女,如双方因抚养问题发生争执不能达成协议时,由人民法院根据子女的权益和双方的具体情况判决。