限制人生自由的行政处罚只能由法律设定，而法律只能由全国人大及其常委会制定。
法律规定，全国人民代表大会及其常务委员会是国家最高权力机关和立法机关，可以设定任何种类行政处罚。限制人身自由的行政处罚，只能由法律设定。
【法律依据】
《行政处罚法》第十条，法律可以设定各种行政处罚。限制人身自由的行政处罚，只能由法律设定。