男女离婚时候是否要退回彩礼，还需要看实际的情况是否构成了彩礼返还的条件，如果构成了彩礼返还的条件，可以依法要求退回。可以要求返还彩礼的情形包括3种：

1．给付彩礼后悔婚，双方未办理结婚登记的；

2．双方即使已经办理结婚登记手续，但确未共同生活过就离婚的；

3．婚前给付彩礼导致给付人生活困难，离婚时也可以此为由要求返还彩礼。

彩礼钱不返还范围是什么

1、共同花费。一方收到彩礼后，往往会拿出部分用于共同花销，如为办婚礼宴请宾客，送礼以及平时的吃喝玩乐等，在计算返还数额时都应当从中剔除。

2、属于赠与性质的财物。在恋爱中，男女双方为表情意，通常会赠与对方定情物、信物等，可以说，这些是一方自愿赌与另一方的，与有无结婚目的无关，对于该类财物，赠与方不得要求返还。

《最高人民法院关于适用中华人民共和国民法典法若干问题的解释》第十条当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：

（一）双方未办理结婚登记手续的；

（二）双方办理结婚登记手续但确未共同生活的；

（三）婚前给付并导致给付人生活困难的。

适用前款第（二）、（三）项的规定，应当以双方离婚为条件。