关于如何解除房屋托管合同的问题，主要有三种途径可供选择：

第一，依据合同约定进行解除，这一做法遵循的是合同自由原则，即双方经过友好协商达成一致后解除合同；

第二，在符合法定条件的情况下解除合同，具体而言，就是当出现了法律所规定的特定情形时，合同一方有权依照法律规定行使解除权，从而解除合同并终止其权利和义务；

最后，若托管方存在一定程度上的违约行为，业主也可以通过合法途径与其解除房屋托管合同。

《民法典》第五百六十二条

当事人协商一致，可以解除合同。当事人可以约定一方解除合同的事由。解除合同的事由发生时，解除权人可以解除合同。