关于行政处罚与刑事责任的说法，错误的是：（ ）

A、违法行为构成犯罪，应当依法追究刑事责任，不得以行政处罚代替刑事处罚
B、违法行为构成犯罪的，行政机关必须将案件移送司法机关，依法追究刑事责任
C、违法行为构成犯罪，人民法院判处拘役或者有期徒刑时，行政机关已经给予当事人行政拘留的，应当依法折抵相应刑期
D、违法行为构成犯罪，人民法院判处罚金时，行政机关已经给予当事人罚款的，应当折抵相应罚金。这说明行政处罚与刑事处罚可以相互替代