是终归要离开的意思。

终在这里是最终的意思。去是离去，离开。

放在一起就表达了说话人说自己终将离去，不要对他投入太多，也不要挽留的意思。

虽然说话人也有可能舍不得离开，但是现实和客观条件摆在那儿，他是必须离开的。所以他也只好告诉她或者别人，我终归要走的，不要再为他费心了。