陽樓始建於公元220年前後，其前身相傳為三國時期東吳大將魯肅的\\\"閱軍樓\\\"，西晉南北朝時稱\\\"巴嶽陽樓風景 陵城樓\\\"。
南朝宋元嘉三年(426)，中書侍郎、大詩人顏延之路經巴陵，作《始安郡還都與張湘州登巴陵城樓作》詩，詩中有\\\"清氛霽嶽陽\\\"之句，\\\"嶽陽\\\"之名首次見於詩文。
中唐李白賦詩之後，始稱\\\"嶽陽樓\\\"。此時的巴陵城已改為嶽陽城，巴陵城樓也隨之稱為嶽陽樓了。
北宋慶曆四年(1044)春，滕子京受謫，任嶽州知軍州事。北宋慶曆五年(1045)春，滕子京重修嶽陽樓，並擬修築偃虹堤。北宋元豐元年(1078)十月，嶽陽樓毀於火災。北宋元豐二年(1079)春，嶽州代理知州軍鄭民瞻重修嶽陽樓。元古八年(1085)孟夏，米芾將《嶽陽樓記》寫成條幅饋贈索書者。北宋崇寧年間(1102~1106)嶽州知州軍孫勰重修嶽陽樓。
南宋建炎三年(1129)正月，嶽陽樓受損於大火。南宋慶元四年(1198) 重修嶽陽樓。南宋嘉定十七年(1224)六月二十一日，二十三日，嶽陽樓毀於火。南宋淳祐十一年(1251)重修嶽陽樓。
明宣德年間至正統三年(1426~1438)明威將軍劉彥真整修嶽陽樓。明成化七年(1472)五月嶽州知府吳節重修落成嶽陽樓。明嘉靖二年(1523)嶽州知府韓士英重修嶽陽樓，編刻《嶽陽樓詩集》。明嘉靖六年(1527)五月大水成災，嶽陽樓樓柱被雷擊破。明嘉靖四十三年(1564)嶽州知府李臨陽修整嶽陽樓，作有《重修嶽陽樓記》。明隆慶元年(1567)嶽州知府李是漸繕修城垣，重修嶽陽樓。
清順治三年(1646)九月，嶽陽樓毀於戰亂。清順治七年(1650)知府李若星重修。是年，毀於火災。清康熙二年(1663)重建嶽陽樓。清康熙二十二年(1683)春，嶽州知府李遇時、巴陵知縣趙士珩倡捐重建嶽陽樓。清康熙二十七年(1688)嶽州火災，延燒嶽陽樓。清乾隆五年(1740)湖廣總督班第嶽陽樓景觀 撥舵杆洲歲修繕嶽州府城垣及嶽陽樓。冬，興工重修嶽陽樓及城垣。重建的嶽陽樓其製三層，樓右側建有賓館。清乾隆七年(1742)嶽州知府黃凝道修葺嶽陽樓，捐建賓館前廳。次年，請刑部尚書張照書範仲淹《嶽陽樓記》勒於樓屏。清乾隆三十九年(1774)嶽州知府蘭第錫、巴陵知縣熊懋獎請求修葺府城。經湖南巡撫梁國治等先後具奏，修葺府城垣及嶽陽樓、文星閣。清乾隆四十年(1775)巴陵縣知縣熊懋獎承修嶽陽樓，並於樓右側建\\\"望仙閣\\\"，於樓左側重建\\\"仙梅亭\\\"。
清道光元年(1821)翟聲煥卸任後，新任知府誌勤繼嶽州知府楊廷柱、嶽州知府翟聲煥續勸捐修整，並重修嶽陽樓泊岸。清道光九年(1829)夏嶽州知府呂恩湛勸捐補葺嶽陽樓、仙梅亭。道光十九年(1839)十二月嶽州代理知府翟聲誥集次修葺嶽陽樓。並修建\\\"鬥姆閣\\\"。清同治六年(1867)曾國荃撥嶽卡厘稅重修嶽陽樓。將\\\"鬥姆閣\\\"改建為\\\"三醉亭\\\"。何紹基書\\\"留仙亭\\\"字匾懸於亭額。清同治十二年(1873)嶽州知府張德容勸捐整修嶽陽樓基礎，同時興建宸翰亭。清光緒六年(1880)嶽州知府張德容重建嶽陽樓，將樓址東移六丈多。清光緒二十三年(1897)六月，黃遵憲登嶽陽樓，作《上嶽陽樓》詩。清光緒三十四年至民國4年(1908~1915)日本東亞國文書院，先後已派遣7批學員登覽嶽陽樓，並記入其編寫《支那省別全誌》。清宣統三年(1911)甘興典領兵七八百人占嶽陽樓，向嶽州紳商居民要糧銀。唐莽、宋式奔與湖南都督府智拿甘興典。
中華民國十一年(1922)7月27日湘軍進占嶽陽，嶽陽樓窗梁棟柱等多半被毀。中華民國十二年(1923)是年古城牆僅嶽陽樓與半邊街尚存少許。中華民國十三年(1924)1月21日，葛應龍擬籌款重修嶽陽樓未果。民國二十二年(1933年)湖南省政府撥款重新修葺。中華民國二十三年(1934)2月17日嶽陽樓重修竣工，並舉行落成典禮。是年，蔣介石送\\\"砥柱中流\\\"匾，該匾於1949年前後遺失。何鍵書\\\"嶽陽樓\\\"字匾，該匾1961年被撤換。湖南嶽陽 嶽陽樓