桓温不敢杀谢安，谢氏作为东晋的顶门阀，不是桓温能轻易得罪的。

面对太原王氏（王坦之）、琅琊王氏（王彪之）和山东谢氏（谢安）这几个影响巨大的豪门士族时，桓温却不敢有什么大动作。即使这几个豪门士族的代表人物公然与桓温作对，桓温也只是恐吓一番，最终不了了之。