存在违章建筑的房子，如果房屋的结构被更改且被政府部门限期整改，那么改房屋的质量必然存在隐患。如果卖房者在没有恢复房屋结构原装的情况下就出售房产的话，买家可以根据情况要求解除购房合同并退房。

相关法律：

根据我国《民法典》关于合同无效情形的规定：

第一百四十四条【无民事行为能力人实施的民事法律行为的效力】无民事行为能力人实施的民事法律行为无效。

第一百四十六条【虚假表示与隐藏行为的效力】行为人与相对人以虚假的意思表示实施的民事法律行为无效。

第一百五十三条

【违反强制性规定及违背公序良俗的民事法律行为的效力】违反法律、行政法规的强制性规定的民事法律行为无效。但是，该强制性规定不导致该民事法律行为无效的除外。

违背公序良俗的民事法律行为无效。

第一百五十四条【恶意串通的】行为人与相对人恶意串通，损害他人合法权益的民事法律行为无效。

第四百九十七条【格式条款无效的情形】有下列情形之一的，该格式条款无效：

(一)具有本法第一编第六章第三节和本法第五百零六条规定的无效情形；

(二)提供格式条款一方不合理地免除或者减轻其责任、加重对方责任、限制对方主要权利；

(三)提供格式条款一方排除对方主要权利。

第五百零六条【免责条款效力】合同中的下列免责条款无效：

(一)造成对方人身损害的；

(二)因故意或者重大过失造成对方财产损失的。

此外，我国《中华人民共和国城市房地产管理法》还规定符合以下条件的房产，不得转让：

1.司法机关和行政机关依法裁定、决定查封或者以其他形式限制房地产权利的；

2.依法收回土地使用权的；

3.共有房地产，未经其他共有人书面同意的；

4.权属有争议的；

5.未依法登记领取权属证书的。