捡到遗忘物拒绝返还他人的违法，涉嫌侵占罪。根据《中华人民共和国刑法》规定：

1、非法占有他人财产，数额较大，拒不退还的，处二年以下有期徒刑、拘役或者并处罚金；

2、数额巨大或者有其他严重情节的，处二年以上五年以下有期徒刑，并处罚金。

非法占有他人遗忘物或者埋藏物的，数额较大，拒不交出的，按照规定处罚。

捡到遗忘物如何处理？

捡到遗忘物，应当返还失主。拾得人应当及时通知失主领取，或者送交公安等有关部门。有关部门收到遗失物，知道失主的，应当及时通知其领取；不知道的，应当及时发布招领公告。遗失物自发布招领公告之日起6个月内无人认领的，归国家所有。

《中华人民共和国刑法》第二百七十条将代为保管的他人财物非法占为己有，数额较大，拒不退还的，处二年以下有期徒刑、拘役或者罚金；数额巨大或者有其他严重情节的，处二年以上五年以下有期徒刑，并处罚金。

将他人的遗忘物或者埋藏物非法占为己有，数额较大，拒不交出的，依照前款的规定处罚。

本条罪，告诉的才处理。