国土面积扩大了。

五岳是以中原为坐标的。湖南比安徽更南，汉代湖南还没有完全脱离楚文化影响，所以和中原文化标准相去甚远。

而且汉初南方还有个南越国，所以衡山汉武帝肯定是不会去的。

隋朝统治面积，且经过魏晋南北朝时期的人口南迁。湖南与中原在文化上也没啥区别了，当然可以往更南封。