法律分析：有下列情形之一的，人民应当作出确认被诉具体行政行为违法或者无效的判决：
（一）被告不履行法定职责，但判决责令其履行法定职责已无实际意义的；
（二）被诉具体行政行为违法，但不具有可撤销内容的；
（三）被诉具体行政行为依法不成立或者无效的。据此可见，拒绝听取当事人陈述申辩违反了法定程序，应判决该行政处罚无效。
法律依据：《中华人民共和国行政处罚法》 第四十一条 及其执法人员在作出行政处罚决定之前，不依照本法第三十一条、第三十二条的规定向当事人告知给予行政处罚的事实、理由和依据，或者拒绝听取当事人的陈述、申辩，行政处罚决定不能成立；当事人放弃陈述或者申辩权利的除外。