借款还房贷的钱不一定算夫妻债务。如果夫妻一方有证据证明该房子没有用于夫妻共同生活、家庭生产经营或者该笔借款不是基于夫妻双方共同意思表示所负，那么债务就不是夫妻共同债务，而应认定为是夫妻个人的债务，离婚后应由债务人以其个人财产对债权人承担偿还责任。

《民法典》第一千零八十九条离婚时，夫妻共同债务应当共同偿还。共同财产不足清偿或者财产归各自所有的，由双方协议清偿；协议不成的，由人民法院判决。