限制人身自由的行政处罚权只能由公安机关行使。

一、行政处罚权限

行政处罚权限如下：

1、全国人民代表大会及其常务委员会是国家最高权力机关和立法机关，可以设定任何种类行政处罚。限制人身自由的行政处罚，只能由法律设定；

2、国务院是最高行政机关，可以依法设定除限制人身自由以外的行政处罚。法律对违法行为已经作出行政处罚规定的，行政法规不得超越法律规定的给予行政处罚的行为、种类和幅度的范围另行作出行政处罚规定；

3、地方性法规可以设定除限制人身自由、吊销企业营业执照以外的行政处罚。法律、行政法规对违法行为已经作出行政处罚规定的，地方性法规不得超越法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围另行作出行政处罚规定；

4、国务院各部、委制定的规章可以在法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定；尚未制定法律、行政法规的，部委规章可以设定警告或者一定数量罚款的行政处罚。罚款的限额由国务院规定。国务院可以授权具有行政处罚权的直属机构按照本条的情形规定行政处罚；

5、省、自治区、直辖市人民政府和省、自治区人民政府所在地的市人民政府、经国务院批准的较大的市以及经济特区市人民政府制定的规章可以在法律、法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定；尚未制定法律、法规的，上述人民政府制定的规章可以设定警告或者一定数量罚款的行政处罚。罚款的限额由省级人大常委会规定。

二、法律法规规章一般都可以设定行政处罚正确吗

法律法规规章都可以设定行政处罚正确。1、法律。分为有权可以设定的和必须行使权力进行设定的两方面。全国人大和它的常委会制定的法律，可以设定各种行政处罚。但限制人身自由的行政处罚，只能由法律设定。２、行政法规。分为它可以自主设定的处罚种类和同法律设定的行政处罚的关系两方面。国务院制定的行政法规，可以设定除限制人身自由以外的行政处罚。如果法律对违法行为已经作出行政处罚规定，行政法规需要作出具体规定的，不得超出法律规定的给予行政处罚的行为、种类和幅度的范围。３、地方性法规。分为它可以自主设定的处罚种类和同上位法律、行政法规设定的行政处罚的关系两方面。有权地方人大制定的地方性法规可以设定除限制人身自由、吊销企业营业执照以外的行政处罚。如果法律、行政法规对违法行为已经作出行政处罚规定，地方性法规需要作出具体规定的，不得超出法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围。４、部门规章。分为它可以自主设定的处罚种类和同上位法律、行政法规设定的行政处罚的关系两方面。国务院部门规章可以在法律、行政法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定。尚未制定法律、行政法规的，可以设定警告或一定数量罚款的处罚，罚款的限额由国务院规定。５、地方规章。分为它可以自主设定的处罚种类和同上位法律、法规设定的行政处罚的关系两方面。地方规章可以在法律、法规规定的给予行政处罚的行为、种类和幅度的范围内作出具体规定。这里的法规包括行政法规和地方性法规。尚未制定法律、法规的，地方政府规章对违反行政管理秩序的行为，可以设定警告或一定数量罚款的行政处罚。罚款的限额由省、自治区、直辖市人大常委会规定。行政处罚法规定，除法律、法规和规章以外的其他规范性文件不得设定行政处罚。

三、非法经营罪的管辖权怎么确定

非法经营罪不属于自诉案件，根据属地原则，所以管辖权应由犯罪发生地的公安机关行使。在主观上要求行为人必须是出于故意，且以营利为目的，对于因不知其为非法而进行非法经营且不以营利为目的的，不认为构成，而只能给予行为人以行政处罚。