取保候审结束的时候退还保证金。《刑事诉讼法》第七十三条规定，犯罪嫌疑人、被告人在取保候审期间未违反本法第七十一条规定的，取保候审结束的时候，凭解除取保候审的通知或者有关法律文书到银行领取退还的保证金。第七十一条第一款规定，被取保候审的犯罪嫌疑人、被告人应当遵守以下规定：（一）未经执行机关批准不得离开所居住的市、县；（二）住址、工作单位和联系方式发生变动的，在二十四小时以内向执行机关报告；（三）在传讯的时候及时到案；（四）不得以任何形式干扰证人作证；（五）不得毁灭、伪造证据或者串供。

取保候审保证金退还流程

根据相关的法律规定和司法解释，取保候审保证金的退换程序如下：

1、犯罪嫌疑人在取保候审期间，没有违反刑事诉讼法第五十六条的规定或者具有刑事诉讼法第十五条的规定的情形之一的，在解除取保候审的同时，公安机关应当将保证金如数退还给犯罪嫌疑人。

2、决定退还保证金的，应当经过严格审核后，报县以上公安机关负责人批准，签发《退还保证金决定书》。

3、公安机关决定退还犯罪嫌疑人的保证金后，应当在解除对犯罪嫌疑人取保候审的同时，通知指定的银行将保证金如数退还给犯罪嫌疑人，并责令犯罪嫌疑人在《退还保证金决定书》上签字或者盖章。

《中华人民共和国刑事诉讼法》第七十三条犯罪嫌疑人、被告人在取保候审期间未违反本法第七十一条规定的，取保候审结束的时候，凭解除取保候审的通知或者有关法律文书到银行领取退还的保证金。