限期拆除违法建筑不属于行政处罚，而是属于行政强制措施。

《中华人民共和国行政强制法》

第九条行政强制措施的种类：

（一）限制公民人身自由；

（二）查封场所、设施或者财物；

（三）扣押财物；

（四）冻结存款、汇款；

（五）其他行政强制措施。

第四十四条对违法的建筑物、构筑物、设施等需要强制拆除的，应当由行政机关予以公告，限期当事人自行拆除。当事人在法定期限内不申请行政复议或者提起行政诉讼，又不拆除的，行政机关可以依法强制拆除。

一、违法建筑拆除需要走哪些程序

一般是由行政机关经调查取证，确认建筑物违章后，对违章搭建人作出责令停止违法行为通知书，责令其停止违法建设行为。

搭建人拒不拆除违章建筑的，行政机关在作出行政处罚决定前，依法向其发出行政处罚告知书，告知拟处罚结果和被处罚人陈述、申辩等权利。法律设定告知程序的主要目的是为了实现处罚公开，保护当事人陈述权、申辩权的充分行使。

当事人逾期拒不拆除的，除法律另有规定外，由行政机关依法申请人民法院强制执行。

二、擅自拆除邻居的违法建筑需赔偿吗

虽然对方未履行法定程序，私自建造属违法建筑，但是擅自进行拆除需要进行赔偿。

《民法典》第一千一百八十四条侵害他人财产的，财产损失按照损失发生时的市场价格或者其他合理方式计算。

《民法典》第一千一百八十七条损害发生后，当事人可以协商赔偿费用的支付方式。协商不一致的，赔偿费用应当一次性支付；一次性支付确有困难的，可以分期支付，但是被侵权人有权请求提供相应的担保。

《民法典》第一千一百六十五条行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。

依照法律规定推定行为人有过错，其不能证明自己没有过错的，应当承担侵权责任。

《民法典》第一千一百七十三条被侵权人对同一损害的发生或者扩大有过错的，可以减轻侵权人的责任。