只要拆除程序不违法则不违法，但拆除违法建筑要赔偿。

根据相关法律法规，只要是物，就存在所有权，即使是违章建筑，也不能否定违章建筑物的权利人对建筑材料的所有权，也就是说行为的违法性不等于财产的非法性。建造行为是违法行为，但认定是否为违章建筑是行政部门的职责，强行拆除违章建筑也是执法部门的职责，其他任何单位或个人不能擅自拆除，因此应予以赔偿。

《城乡规划法》第六十四条规定，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。

一、违建处罚方式

1、违法占用集体土地或农用地进行建设，处理：由县级以上人民政府土地行政主管部门责令退还非法占用的土地，对违反土地利用总体规划擅自将农用地改为建设用地的，限期拆除在非法占用的土地上新建的建筑物和其他设施，恢复土地原状，对符合土地利用总体规划的，没收在非法占用的土地上新建的建筑物和其他设施，可以并处罚款；对非法占用土地单位的直接负责的主管人员和其他直接责任人员，依法给予行政处分；构成犯罪的，依法追究刑事责任。

依据为：《中华人民共和国土地管理法》第三十六、四十三、六十三、七十六条

2、未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门或乡镇人民政府责令停止建设；限期拆除或者予以没收；罚款。

依据：《中华人民共和国城乡规划法》第四十、四十一、四十四条、六十三、六十四条。

3、对历史和社会原因形成的违建处理：因为历史原因和社会原因，居民房屋存在大量未办理土地使用手续或规划手续情况，这种情况下不宜按照违章建筑处理，特别是在房屋征收和土地征收中这类矛盾尤为凸出，根据《国有土地上房屋征收与补偿条例》的精神和原则，应当组织规划、土地、执法等部门对于未办理关手续的建筑物进行认定，认定为合法的要给予补偿，认定违法的不予补偿；但是也不能排除一些地方为实现拆迁速度，将一些历史原因形成的违章建筑强制拆除。

二、实施强制拆除房屋过程应注意什么

在实施强制拆除房屋过程中，还应注意：

1、组织强制拆迁的力量

如果强制拆迁户数较多、难度较大，需要组织相应的力量协助执行。在实际工作中，通常是组织当地的公安警察和街道办事处、居委会等多方面人员，配合做好工作。

2、强制拆迁涉及被拆迁户的切身利益，是重大而严肃的执法活动，实施时应着重把握好下列法律环节：

（1）先行告诫说服。在强制拆除之前，仍应由拆迁人、拆迁主管部门、基层组织和从事法律工作的人员对被拆迁户进行说服，讲清道理，说明利害关系，尽可能促使被拆迁人户权衡得失，转变思想，主动让房拆除。对确实无法说通的，再实施强制拆除。

（2）全面保全证据。实施强制拆迁前，拆迁人应当就被拆除的房屋的有关事项，向公证机关办理证据保全。强制拆除房屋前，应请公证人员到场，对被拆迁户的房屋、家具等财产状况予以录像、照相、做好记录、登记在册，并且由有关人员签名确认，以防产生争议时备查。

（3）妥善保管财物。拆房时，须通知被拆迁户家庭成员及街道办事处、居委会、被拆迁人所在的单位负责人到场，将被拆迁户的财产逐一清点登记，并由上述人员和强制拆迁工作人员签名后，交给被拆迁人。被拆迁人不肯接收的，可集中统一保管或提存，不能损坏，更不能丢失。

（4）保障人身安全。注意被拆迁户的思想动态，随时劝解。对确有阻碍强制拆房、行为过激、情节严重的被拆迁户或其他人员，可依法由公安机关采取强制措施，以确保各方人身安全。

（5）事后跟踪。实施强制拆迁后，房屋虽拆除了，但并不等于矛盾解决了，还往往会在拆迁人与被拆迁人有争议的情况下，又形成拆迁人与拆迁主管部门、当地人民政府之间的争议，有关部门、单位应当继续跟踪做好矛盾化解工作。对被拆迁户所提的具有合理因素的要求，仍应重视考虑。被拆迁人所在的基层组织、单位负责人应对被拆迁人多加关心，深入细致地对其讲解有关法律法规、政策、帮助沟通思想，理顺情绪。拆迁主管部门应继续召集拆迁人员和被拆迁人进行调解，以求达成一致。被拆迁人上访时，有关部门应了解情况，掌握法规、政策、有针对性地宣传引导等。