对方不履行时，您可以向法院起诉，要求支付赔偿金。根据《民事诉讼法》第九十七条规定，调解达成协议，人民法院应当制作调解书。调解书应当写明诉讼请求、案件的事实和调解结果。调解书由审判人员、书记员署名，加盖人民法院印章，送达双方当事人。调解书经双方当事人签收后，即具有法律效力。

第二百三十六条规定，发生法律效力的民事判决、裁定，当事人必须履行。一方拒绝履行的，对方当事人可以向人民法院申请执行，也可以由审判员移送执行员执行。调解书和其他应当由人民法院执行的法律文书，当事人必须履行。一方拒绝履行的，对方当事人可以向人民法院申请执行。