退赃既可以退给公安局，也可以退给法院。一般是根据自己所处的程序来决定退给谁。如果在公安机关侦查阶段，应当退还给公安机关；如果是在法院审理阶段，应当退给法院。退赃影响量刑，无论是退给公安机关，还是退给法院，主动退赃优于被动退赃，退赃时间越早越好。

司法局和公安局的区别

工作职能不同

司法局是负责本市司法行政工作的市政府组成部门，其主要职责是：

（一）研究起草司法行政方面的地方性法规、规章草案；编制本市司法行政工作的发展规划及年度计划，并监督实施。

（二）负责组织、指导对刑满释放和解除劳动教养人员的安置帮教工作。

（三）负责本市司法行政系统的队伍建设和思想政治工作。

（四）研究制订本市法制宣传教育工作的总体规划，组织、指导、协调全市法制宣传教育工作。

（五）负责管理本市律师、法律援助工作和公证机构及公证活动；研究律师、公证工作的改革与发展，并提出实施办法。

（六）负责管理本市法律服务机构和在京设立的国（境）外律师机构；监督、指导本系统的社会团体工作。

公安局工作职责：

（一）按照县委、县政府和上级公安机关的指示，研究部署县公安工作，并指导和督促检查全县各部门贯彻执行情况。

（二）及时准确地掌握全县社会治安情况，分析、研究出现的新情况、新问题，为县委、县政府和上级公安机关提供社会治安方面的重要信息，并提出对策。

（三）负责全县各部门公安机关的业务工作和执法活动。

（四）组织、协调、参与或直接对全县重大案件、重大紧急治安事件、重大治安灾害事故的侦破和处置，以及对特务、间谍等危害国家安全的案件的侦破。

《人民法院量刑指导意见（试行）》实施细则试行18、对于退赃、退赔的，综合考虑犯罪性质，退赃、退赔行为对损害结果的弥补程度，退赃、退赔的数额及主动程度等情况，确定从宽的比例。主动全部退赃、退赔的，可以减少基准刑的30％以下；主动部分退赃、退赔的，可以减少基准刑的20％以下；积极配合办案机关追缴赃款赃物，未给被害人造成经济损失或者损失较小的，可以减少基准刑10％以下；刑事案件立案后，犯罪分子及其亲友自行挽回经济损失的，可以减少基准刑的10％以下。