首先狄仁杰喜欢微服私访，人数不宜太多，如果带金吾卫，人数多了达不到微服私访的效果，人数少了武力值不够，无法保护狄仁杰，所以狄仁杰经常带武艺高强的李元芳。此外，金吾卫是皇帝亲卫，狄仁杰无权随意调动。