胡斐没有师傅。

他刚出生没几天，父母就双双而亡。胡一刀将他托付给苗人凤，但苗人凤一直没有找到他。胡斐跟着平阿四一起长大，平阿四却全然不会武功，只是个烧火打杂的人。胡斐一直是没有师父的，他完全是凭着“自学”，靠家传的《胡家刀法》刀谱自学成了顶尖高手。