违章建筑的认定是由县级以上人民政府土地行政主管部门负责的，现实情况中一般是由住建部门和市政管理部门负责的。

具体依据《中华人民共和国土地管理法》规定如下：

（一）第七十四条

违反本法规定，占用耕地建窑、建坟或者擅自在耕地上建房、挖砂、采石、采矿、取土等，破坏种植条件的，或者因开发土地造成土地荒漠化、盐渍化的，由县级以上人民政府土地行政主管部门责令限期改正或者治理，可以并处罚款；构成犯罪的，依法追究刑事责任。

（二）第八十三条

依照本法规定，责令限期拆除在非法占用的土地上新建的建筑物和其他设施的，建设单位或者个人必须立即停止施工，自行拆除；对继续施工的，作出处罚决定的机关有权制止。

一、违章建筑的法律规定

城乡规划法第六十四条明确规定，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设可以说据此明确了拆除违章建筑的权力由县级以上政府主管部门统一行使。违章建筑是指违反《土地管理法》《城市规划法》《建筑法》和《村庄和集镇建设管理条例》等的规定建设的房屋及其设施。违章建筑主要包括：未申请或申请未获得批准，未取得建设用地规划许可证和建设工程规划许可证而建成的建筑；擅自改变建设工程规划许可证的规定建成的建筑；擅自改变使用性质建成的建筑，擅自将临时建筑建设成为永久性的建筑。

二、违章建筑举报应该找哪个部门

（一）可以向当地城建监察大队举报。举报电话12319。

（二）违章建筑是指违反《土地管理法》、《城乡规划法》、《村庄和集镇规划建设管理条例》等相关法律法规的规定动工建造的房屋及设施。

依据：

（三）《城建监察规定》第七条，城建监察队伍的基本职责：

（1）实施城市规划方面的监察。依据《中华人民共和国城乡规划法》及有关法规和规章，对城市规划区内的建设用地和建设行为进行监察；

（2）实施城市市政工程设施方面的监察。依据《城市道路管理条例》及有关法律、法规和规章，对占用、挖掘城市道路、损坏城市道路、桥涵、排水设施、防洪堤坝等方面违法、违章行为进行监察。