行政处罚证据不足怎么办

依据我国行政处罚法的规定，对于违法事实不清楚，违法证据不足的违法案件，行政机关是不能作出行政处罚决定的。
相关法律规定
《中华人民共和国行政处罚法》
第三十条公民、法人或者其他组织违反行政管理秩序的行为，依法应当给予行政处罚的，行政机关必须查明事实;违法事实不清的，不得给予行政处罚。