宋江征剿方腊损兵折将返回途中，鲁智深表明不愿意跟随宋江一同回京领赏，鲁智深在六合寺坐化圆寂。鲁智深就是那个时候离开宋江的。