对于出租人和承租人，只要在以下的情形内解除租赁合同，就不算违约：

房屋出租人在下列条件下可以解除租赁合同，收回全部出租房屋或者部分出租房屋。

1、房屋租赁协议到期，房屋出租人按约收回租赁房屋；

2、出租人家庭人口增多，住房困难，可与承租人协商收回租赁房屋；

3、承租人确实另有住房，承租房屋长期闲置，不能物尽其用的；

4、房屋承租人故意、或者过失将所租房屋损坏，改变房屋用途、拒绝修复或者赔偿的。

对于承租人而言，在房屋租赁期间，如果存在以下情况，就可以单方解除合同。

1、出租人未按时交付房屋，经承租人催告后在合理期限内仍未交付；

2、出租人交付的房屋不符合房屋租赁合同的约定，致使承租人不能实现房屋租赁的目的；

3、出租人已交付的房屋存在缺陷，危及承租人安全或健康的；

4、出租人不履行检查、维修义务，以致危及承租人安全或健康的。

哪些法律规定房屋租赁合同的违约责任

房屋租赁合同违约责任法法律规定是：

1、支付违约金，当合同债务人不履行或不适当履行合同义务时，向对方支付的一定金额的金额；

2、损害赔偿，因违约造成财产损失时，违约方向对方的经济补偿；

3、继续履行，法院或仲裁机关作出要求实际履行的判决，或者发出特殊履行命令，强迫债务人在规定期限内履行合同债务。

《中华人民共和国民法典》第五百七十七条规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。

《民法典》第七百一十六条：承租人经出租人同意，可以将租赁物转租给第三人。承租人转租的，承租人与出租人之间的租赁合同继续有效；第三人造成租赁物损失的，承租人应当赔偿损失。承租人未经出租人同意转租的，出租人可以解除合同。

《民法典》第七百二十二条：承租人无正当理由未支付或者迟延支付租金的，出租人可以请求承租人在合理期限内支付；承租人逾期不支付的，出租人可以解除合同。

《民法典》第七百二十四条：有下列情形之一，非因承租人原因致使租赁物无法使用的，承租人可以解除合同：（一）租赁物被司法机关或者行政机关依法查封、扣押；（二）租赁物权属有争议；（三）租赁物具有违反法律、行政法规关于使用条件的强制性规定情形。