根据实际情况来决定

1、如果是双方智力有一个是正常的,那么智力缺失的有可能判给男方,因为智力缺失对孩子成长不利

2、男方也有残疾,那么孩子照顾就在老人身上,那么相对来说两人有同等机会争取抚养权

3、男方没有固定收入,女方虽然智力残缺但是没有伤害孩子行为,女方有经济实力,那么是有很大机会的