一、追究刑事责任后行政处罚该不该撤销

依据我国相关法律的规定，追究刑事责任后行政处罚要不要撤销要依据具体情况才能确定，例如对于醉酒驾驶者，按危险驾驶罪追究刑事责任后，行政处罚是不应该撤销的。

二、相关法律规定

《中华人民共和国道路交通安全法》

第九十一条饮酒后驾驶机动车的，处暂扣六个月机动车驾驶证，并处一千元以上二千元以下罚款。因饮酒后驾驶机动车被处罚，再次饮酒后驾驶机动车的，处十日以下拘留，并处一千元以上二千元以下罚款，吊销机动车驾驶证。

醉酒驾驶机动车的，由公安机关交通管理部门约束至酒醒，吊销机动车驾驶证，依法追究刑事责任;五年内不得重新取得机动车驾驶证。

饮酒后驾驶营运机动车的，处十五日拘留，并处五千元罚款，吊销机动车驾驶证，五年内不得重新取得机动车驾驶证。

醉酒驾驶营运机动车的，由公安机关交通管理部门约束至酒醒，吊销机动车驾驶证，依法追究刑事责任;十年内不得重新取得机动车驾驶证，重新取得机动车驾驶证后，不得驾驶营运机动车。

饮酒后或者醉酒驾驶机动车发生重大交通事故，构成犯罪的，依法追究刑事责任，并由公安机关交通管理部门吊销机动车驾驶证，终生不得重新取得机动车驾驶证。

《中华人民共和国刑法》

第三十七条【非刑罚性处置措施】对于犯罪情节轻微不需要判处刑罚的，可以免予刑事处罚，但是可以根据案件的不同情况，予以训诫或者责令具结悔过、赔礼道歉、赔偿损失，或者由主管部门予以行政处罚或者行政处分。