一般情况不轻易更换，但不等于不可以更换。在受理具体的行政执法案件时，轻易的更换办案人员，可能会造成办案时间的延长，因为新来的办案人员对案件，要有一个重新熟悉的时间，会延长这个案件的处理，因此一般是不会轻易更换办案人员的。

但是如有特殊情况，比如办案人员另有重任，或者办案人员生病，那么这种情况下，也是可以更换办案人员的。