原则上当委托人解除合同，应该向对方支付一定的损失赔偿，但不可抗力等情况除外。

《民法典》

第九百一十九条【委托合同定义】委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。

第九百三十三条

【委托合同解除】委托人或者受托人可以随时解除委托合同。因解除合同造成对方损失的，除不可归责于该当事人的事由外，无偿委托合同的解除方应当赔偿因解除时间不当造成的直接损失，有偿委托合同的解除方应当赔偿对方的直接损失和合同履行后可以获得的利益。