退彩礼钱不一定要起诉离婚，未因为存在办理结婚登记手续的情形。应当返还彩礼的情形：

（一）如果男女双方还未办理结婚登记手续的；

（二）双方办理结婚登记手续但确未共同生活；

（三）男方因婚前给付彩礼钱，而导致生活困难的。

彩礼返还如何判

彩礼返还的判决：正常情况下，彩礼是无需返还的，依法归女方所有，但是如果双方未办理结婚登记手续，那么男方和女方分手后可以要求女方返还彩礼；如果双方办理了结婚登记手续但是未共同生活，或者是男方因婚前给付彩礼导致给付人生活困难，那么在离婚后，男方也有权利要求女方将彩礼返还给自己。

《最高人民法院关于适用中华人民共和国民法典婚姻家庭编的解释（一）》第五条

当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：

（一）双方未办理结婚登记手续；

（二）双方办理结婚登记手续但确未共同生活；

（三）婚前给付并导致给付人生活困难。

适用前款第二项、第三项的规定，应当以双方离婚为条件。