唐大代三年（公元768年）晚秋，杜甫从蜀中远赴湖南，准备投奔旧日好友、正待调任潭州剌史的韦之晋。不料杜甫赶到长沙之日，韦却不幸在此前暴卒，贫病交加的杜甫因此在长沙度过了人生最后两个年头，留下了长沙驿楼和杜甫江阁等史迹。 
　　杜甫初来长沙时寄居舟中，船常停在南湖港。因而南湖港附近的长沙驿楼便成了杜甫送别友人的地方。杜甫两次送别刘判官，写下了“杜陵老翁秋系船，扶病相识长沙驿”和“他日临江待，长沙旧驿楼”的诗句。驿楼即驿站，是古代驿道上供驿吏或来往官员、客人歇宿、换马之地。据《元和郡县志》载，唐代由长安抵郴州的驿道从潭州南通过。因而唐诗中长沙驿楼亦称“南楼”，如柳宗元《长沙驿前南楼感旧》诗有“今日数行泪，独上驿南楼”之句。
　　后来杜甫移居湘江边租佃的楼房（传说在小西门一带），杜自称为“江阁”。《江阁对雨有怀》诗云“层阁凭雷殷，长空面水文”，说明楼房中可正面俯视江中波涛。《江阁卧病走笔》诗中“客人庖厨薄，江楼枕席清”则把江阁的简陋、诗人的潦倒刻画得入木三分。所幸的是，杜甫在江阁中有两次欣喜的友人之会。一位是官至御史“佐湖南幕”睥苏涣，两人在阁中饮酒品茗，谈诗论文，极为融洽。杜甫描写潭州的名句“茅斋定王城郭门，药物楚老渔商市”就出自他《呈苏涣待御》的诗。另一位是大音乐家李龟年。杜甫少年时在洛阳多次听过李龟年的歌唱，没想到在长沙江阁又能相遇。杜甫写下他最后一首七绝：“岐王宅里寻常见，崔九堂前几度闻。正是江南好风光，落花时节又逢君。”据悉，有关部门曾议决在湘江风光带重建杜甫江阁，但因种种原因，未见行动。成都杜甫草堂为该市创造了可观的效益，我们何不可以也开发杜甫留给长沙的这一宝贵资源？