谢脁楼位于宣城市区中心，是一座文化名楼。它不仅是宣城的地方标志，而且也是中国传统诗歌文学的一处标志。
南齐建武二年（495）夏，有个出身显族、年届30的诗人，逆水乘舟，缓缓抵宣。他服已经给萧姓的王侯们当了十余年幕僚的谢脁。虽然曾得到了随王、竟陵王的赏识，还做过明帝的掌中书诏诰，但建康宫廷多变的政治风浪，已使谢眺“疲策倦人世”了；江南的青山秀水，正遂“敛性就幽蓬”、“聊恣山泉”的愿望。
谢的文笔托依对应于宣城的景色，产生出一幅幅萧疏淡远、平和宁静、摇曳出尘的写意水墨图卷：“天际识归舟，云中辨江树”、“日出众鸟散，山螟孤猿吟”、“寒城一以眺，平楚正苍然”、“余雪映青山，寒雾开白日”、“暖暖江村见，离离海树出”、“望山白云里，望水平原夕”……
“玄晖诗变有唐风”。谢脁在文学史上有“继汉开唐之功”。杜甫称：“诗接谢宣城”、“谢脁每篇堪讽味”。狂傲的李白也“一生低首谢宣城”。沈约称谢眺“调与金石谐，思逐风云上”、“二百年无此作也”。谢脁的融情入景山水诗风，直接影响王维、孟浩然等唐代山水诗人。谢眺在中国诗歌史上有特殊的贡献与地位。
谢脁在郡治之北的陵阳峰上自建一室，取名高斋，作为理事起居之所。史志记载：谢脁“视事高斋，吟啸自若，而郡亦治”。唐初高斋改建为楼，取名北楼，后又称北望楼、谢公楼、谢跳楼。咸通末年，御史中丞兼宣州刺史独孤霖将北楼改建为叠蟑楼，得名的原因是其所在之处地势既高且险，崖叠如蟑。明嘉靖年间，知府方逢时重修，复名高斋。清康熙四十年（1701），知府许廷试重修，题名为古北楼。光绪初年（1875），知府鲁一贞又重修，他将上层命名叠蟑楼，下层命名谢眺楼。
高陵自可脁，况复更层楼。登斯楼也，城郭皆在掌中，山川尽人心目，但见山川交错、阡陌纵横、烟霞变幻、云树生辉，北望敬亭崛起于川原之中，东送两水婉转于白云之间。历代文人墨客纷纷然慕名而来，并且赋诗无数。录于志书上的北楼诗文有130多篇，这其中包括李白、白居易、杜牧、梅尧臣、文天祥、贡师泰、施闰章、梅文鼎等著名诗人的上品佳作。李白的两篇名作就产生于此：“江城如画里，山晚望晴空。两水夹明镜，双桥落彩虹。人烟寒橘柚，秋色老梧桐。谁念北楼上，临风怀谢公。”“……长空万里送秋雁，对此可以酣高楼。蓬莱文章建安骨，中间小谢又清发。俱怀逸兴壮思飞，欲上青天揽明月。抽刀断水水更流，举杯销愁愁更愁。”
中国的多数名楼，往往是拥有一篇传世的词赋而誉满天下，招引现代的观光客如潮而至。始建于名人，得名于名人，并且文采相续了1000多年的谢脁楼，在历史上的声誉及在文化史上的影响，难有比肩者。谢脁楼是江南的四大名楼之一。谢脁楼最后一次毁于1937年日军的轰炸。解放后，这儿被建为烈士陵园。1997年，一座四檐高飞、曲径回廊、气势可观的新的谢脁楼在旧址之上重现。它笑对开元塔，俯牵宛溪水，雄踞闹市中心，尽览古城新貌。
1998年5月，谢脁楼遗址被列为省级文物保护单位。遗址为一座高6米、面积1500平方米的高台。为保护谢脁楼遗址，划定的保护范围是遗址基座四周各50米；划定的建设控制地带是保护范围之外向南100米，向西80米，向东、北各50米。谢脁楼管理处及谢脁公园已经成立。有识之士呼吁建设一个谢脁楼景观区，有关部门已在谢脁楼下规划建设一座较大规模的文化广场。
江山留胜迹，我辈复登临。名楼已再现，文运 再兴。
诗云：
弦歌几度忆高斋，小谢留踪李杜来。
漫洒天花文星下，丹阁今又映霞开。