此诗抒发作者对主人公被斥退罢归的惋惜不满与感慨之情。起句以浩叹发出，“征南将”点明归者以前身份，就是这位南征北战的将军，如今却被朝廷罢斥遣归，投老江头，萧条南归，恓惶而去。“流落”二字融注情感，突发领起，总冒全首，含裹通体，撞心触眼，是为一篇主意所在，一起手即与别者连缀纽结，开出下文若大天地。此句从眼前事写起，次句叙其人先前军职显要，重兵在握。“驱”意为统率，下得有力。“十万师”而能驱遣自如，表现其叱咤风云的才干，足见其人的不凡。不过这些都成为过去，一个“曾”字，深深地荡入雄壮的岁月，饱含唏嘘惋叹。首联今昔对比，叙其身世处境，感慨难以名状。
颔联写友人困顿坎坷，仍眷恋朝廷。“罢归”“老去”指出将军“流落”之因，“归无旧业”说明题目的“襄州”，仅家徒四壁而已。也暗示其人一心戎马，为国征战不解营生。在“古木苍苍离乱后，几家同住一孤城”（《新息道中作》）的时代，老去投归，景况可想。两句上二下三，前后转折，意义上中间含个“而”字在，顿挫而沉郁，有杜诗风神。所谓“明时”，实则为作者对时局的微词。戎马一生、屡树战功的将军，却被罢斥，足见朝廷之“不明”。两句为对文，作互文看更有慨触。次句语由直寻，羌无故实，但“老去”犹“恋”，则使人不能不想起廉颇老矣还希重用的史实，而同情这位被迫退职的军人。
颈联两句又荡回过去，承“曾驱”来，追忆将军昔日独镇“三边”（泛指边防），敌寇生畏，关塞晏然，有功于国。次句为“一剑知轻生”的倒句。“一剑知”，意谓奔勇沙场，忠心可鉴，此外，出生入死，效命疆场，也只有随身伙伴——佩剑知道。有感于时局不明，焉得逢人而语，这是感慨系之的话。两句字斟句酌，句凝字稳。谓语“静”“知”殿在句后，以示其人的功业与赤心。独静三边，为国轻生，以示“罢归”，尚非其时。
以上六句都可视为挥手别后所思，尾联“茫茫江汉上，日暮欲何之”结到眼前，以实景束住，念及其故居旧业无存，因此有“欲何之”的忧问。既罢归而无所可去，伤其恓惶流落，老而不遇。这末尾回首一问，既关合“罢归”句，又与起手“流落”语意连成一片。日暮苍苍，汉水茫茫，老将白发，归去何方。沉沉暮色吞去了一片孤帆，茫茫汉江也似乎吞没了诗人关照的疑问，“欲何之”的关注之情，也使人思绪波荡，触动读者深切的寻思和悬念。
诗的前两句“昔日绣衣何足荣，今宵贳酒与君倾”，是写韩歆“昔日”与“今日”的情况，形成鲜明的对比。韩侍御，即韩歆。公元758年（唐至德三载）被贬，由殿中侍御史来广德隐居，此时李白送韩歆去广德。昔日，韩歆是侍御，“或给事殿中，或举劾非法，或督察郡县，或奉旨外出”，“衣以绣者，尊宠之也。”可以说是耀武扬威，富贵荣耀。然而，韩歆“因朝会，闻帝读隗嚣、公孙述相与书，歆曰：‘亡国之君皆有才，桀、纣亦有才。’帝大怒，以为激发。”“今日”李白“贳酒”来招待“昔日”的“侍御”了，如此巨大的落差，形成鲜明的对比。
诗的后两句“暂就东山赊月色，酣歌一夜送泉明”，写欢送韩歆的情景。韩歆被贬，要去广德隐居，人们送别得喝酒，酒要用钱来买，没钱的李白有时用五花马、紫绮裘、龙泉剑去换。然而此时，诗人又身无分文，好友来了，“人情大似债，头顶锅来卖。”李白去赊酒，而且赊了大量的酒，“与君倾”。诗人一边赊酒，一边又去赊月。“清风朗月不用一钱买”（《襄阳歌》），赊月自然要简单得多。“暂就东山赊月色”，这里的“月色”也赊下了，这里的“舞台”是东山，灯光、布景任尔用，诗中将“酒、月、歌”融合在“东山”的大背景下。当夜皓月当空，月光满地，诗人放声歌唱，人们尽兴欢歌，“酣歌一夜”，通宵达旦，这是为欢送一个人：“泉明”。泉明，即渊明，陶渊明。《野客丛书》载：“谓渊明一字泉明，李白诗多用之，不知称渊明谓泉明者，盖避唐高祖讳耳，犹扬渊之称扬泉，非一字泉明也。”诗人有意此时把韩歆比作陶渊明。因陶曾在彭泽县为县令，辞官不做。他“不戚戚于贫贱，不汲汲于富贵”。李白在这里将两人相比，主要是对韩歆的安慰，更是对他的颂扬。
这首诗在艺术上想象新奇，感情强烈，意境奇伟瑰丽，语言清新明快。刘勰在《文心雕龙》中说：“睹物兴情”、“辞以情发”。李白将客观景象溶入自己的主观意象，并达到了形式上的同构与精神上的共鸣，体现了诗人与友人的那种淳朴、真挚的友情。诗句浑然天成，如行云流水。