唐代白居易曾随长兄白幼文寓居宣城并作有《窗中列远岫》一诗，抒发登此楼的观感。该诗被当时的宣歙观察使所知，大为赞赏，并举荐其赴京应试，得中为第四名进士，从而步入仕途。直至他晚年还作有《寄题郡斋》诗曰：“……无复新诗题壁上，虚教远岫列窗间。再喜宣城章句动，飞觞遥贺敬亭山。”

    唐咸通末年（874年），御史中丞兼宣州刺史独孤霖将北楼改建，因其地势高且险，崖叠如嶂，故题名“叠嶂楼”，并作记以志。明嘉靖年间知府方逢时重修，并复名“高斋楼”，也作题记。清康熙四十年（1701年）知府许廷式重新修葺，并说：“叠嶂之名以地命也，谢公之称以人传也。北楼为古今所共知，而人而地并在其中矣。”遂题名曰：“古北楼”。清光绪初，知府鲁一员，重修一新。修整后的北楼分上下两层，上圆下方，全木结构，顶盖琉璃瓦，四边飞檐翘角。上层题额曰“叠嶂楼”，围以木栏杆，下层题为“谢眺楼”，四方置屏风门。楼基周围有历代诗文碑刻和修楼碑记。

    抗日战争时期（1937年）该楼被日机炸毁。现已复建如初，重现昔日风采。

   谢眺楼与岳阳楼、黄鹤楼、滕王阁并称为江南四大名楼。