原则上不停止执行，但有例外。这被称为“复议（或诉讼）不停止执行”原则。根据《中华人民共和国行政复议法》第三十四条规定，行政复议期间具体行政行为不停止执行；但是，有下列情形之一的，可以停止执行：（一）被申请人认为需要停止执行的；（二）行政复议机关认为需要停止执行的；（三）申请人申请停止执行，行政复议机关认为其要求合理，决定停止执行的；（四）法律规定停止执行的。因此，虽然罚款决定在复议期间通常仍需履行（如缴纳罚款，否则可能产生滞纳金），但您有权向复议机关申请停止执行。您需要在复议申请中或单独提交书面申请，说明停止执行的理由（例如，执行会造成难以弥补的损失，且停止执行不损害公共利益），由复议机关审查决定。如果复议机关决定停止执行，则罚款决定暂停履行。