需要根据案情来看，诈骗罪一般是要判处刑罚的，但是否将钱退给对方将很大程度上影响诈骗罪的刑期，在司法实务中诈骗财物数额如果不是特别巨大，且有坦白、退赃并取得被害人谅解的话，一般可以以缓刑处理。

根据《最高人民法院关于常见犯罪的量刑指导意见》的规定，对于退赃、退赔的，综合考虑犯罪性质，退赃、退赔行为对损害结果所能弥补的程度，退赃、退赔的数额及主动程度等情况，可以减少基准刑的30%以下;其中抢劫等严重危害社会治安犯罪的应从严掌握。

《中华人民共和国刑事诉讼法》

第二百八十九条

双方当事人和解的，公安机关、人民检察院、人民法院应当听取当事人和其他有关人员的意见，对和解的自愿性、合法性进行审查，并主持制作和解协议书。