五角大楼由美国建筑师乔治·贝格斯特罗姆（George Bergstrom，1876年-1955年）设计，来自宾夕法尼亚州费城的建筑商约翰·麦克沙恩（John McShain）承建。五角大楼于1941年9月11日破土动工，1943年1月15日完成。工程项目负责人是布里恩·萨默维尔将军（Brehon Somervell），而莱斯利·格罗夫斯上校（Leslie Groves）作为军方负责人全程监督了建设过程。