此诗抒发作者对主人公被斥退罢归的惋惜不满与感慨之情。起句以浩叹发出，“征南将”点明归者以前身份，就是这位南征北战的将军，如今却被朝廷罢斥遣归，投老江头，萧条南归，恓惶而去。“流落”二字融注情感，突发领起，总冒全首，含裹通体，撞心触眼，是为一篇主意所在，一起手即与别者连缀纽结，开出下文若大天地。此句从眼前事写起，次句叙其人先前军职显要，重兵在握。“驱”意为统率，下得有力。“十万师”而能驱遣自如，表现其叱咤风云的才干，足见其人的不凡。不过这些都成为过去，一个“曾”字，深深地荡入雄壮的岁月，饱含唏嘘惋叹。首联今昔对比，叙其身世处境，感慨难以名状。
颔联写友人困顿坎坷，仍眷恋朝廷。“罢归”“老去”指出将军“流落”之因，“归无旧业”说明题目的“襄州”，仅家徒四壁而已。也暗示其人一心戎马，为国征战不解营生。在“古木苍苍离乱后，几家同住一孤城”（《新息道中作》）的时代，老去投归，景况可想。两句上二下三，前后转折，意义上中间含个“而”字在，顿挫而沉郁，有杜诗风神。所谓“明时”，实则为作者对时局的微词。戎马一生、屡树战功的将军，却被罢斥，足见朝廷之“不明”。两句为对文，作互文看更有慨触。次句语由直寻，羌无故实，但“老去”犹“恋”，则使人不能不想起廉颇老矣还希重用的史实，而同情这位被迫退职的军人。
颈联两句又荡回过去，承“曾驱”来，追忆将军昔日独镇“三边”（泛指边防），敌寇生畏，关塞晏然，有功于国。次句为“一剑知轻生”的倒句。“一剑知”，意谓奔勇沙场，忠心可鉴，此外，出生入死，效命疆场，也只有随身伙伴——佩剑知道。有感于时局不明，焉得逢人而语，这是感慨系之的话。两句字斟句酌，句凝字稳。谓语“静”“知”殿在句后，以示其人的功业与赤心。独静三边，为国轻生，以示“罢归”，尚非其时。
以上六句都可视为挥手别后所思，尾联“茫茫江汉上，日暮欲何之”结到眼前，以实景束住，念及其故居旧业无存，因此有“欲何之”的忧问。既罢归而无所可去，伤其恓惶流落，老而不遇。这末尾回首一问，既关合“罢归”句，又与起手“流落”语意连成一片。日暮苍苍，汉水茫茫，老将白发，归去何方。沉沉暮色吞去了一片孤帆，茫茫汉江也似乎吞没了诗人关照的疑问，“欲何之”的关注之情，也使人思绪波荡，触动读者深切的寻思和悬念。
“一饷疑情无语”，显然不是终日无语、整日销凝而是忽然间因触景生情而产生的惆怅。从次句看，很可能是因攀折梅花所致。这情形有类于《西洲曲》“忆梅下西洲，折梅寄江北”，从忆梅到折梅，引起对远人的怀思有一个从无意到有意的过程。折梅与怀人有关，所来自远，南朝刘宋时陆凯赠范晔诗云：“折梅逢驿使，寄与陇头人。江南无所有，聊赠一枝春。”故次句言“手捻梅花何处”，其意仍在怀思远人。“何处”二字则有欲寄无由的苦恼，故“手捻”梅枝，彷徨徘徊。
女子所怀何人，下句更有暗示。“倚竹不胜愁”，系用杜诗《佳人》“天寒翠袖薄，日暮倚修竹”句意，杜诗写了一位为丈夫所遗弃的妇人自保贞洁的德操品行。这里用以暗示词中女主人公离居的忧伤，和对远人一往情深的盼望。同时又沿用杜诗，以翠竹之高节拟人“暗想江归路”，则进一步点出其人远人的踪迹，想当初，他从“江头”扬帆远去的，而此时也该从去路归来了吧！这句“暗想”联上“凝情无语”云云，又进一步通过状态表情，表现女子那深沉的思念，难以用言语表达。而“江头归路”联上“何处”云云，又使人联想到唐诗“妾梦不离江水上，人传郎在凤凰山”（张潮）的意境，使人体会到她的内心之痴迷。
从“暗想江头归路”到末二句“东去，东去，短艇淡烟疏雨”，在意象上有一个跳跃。两字“去”字，可推知不是丈夫归来，倒是出外时的情景。那时，他就乘着一叶行舟在烟雨迷蒙的江头离她东去，那景象是如此凄迷，记忆又是如此犹新，令人难以忘怀。这种倒叙不仅使读者领略到更多忧伤，丰富了词人的内蕴；而且造成一种类乎汉诗“步出城东门，遥望江南路。前日风雪中，故人从此去”的意境，既显示出女主人公企盼的失望，又增加了其性格的温润。
“词人难于令曲，如诗之难于绝句，不过十数句，一句一字闲不得。末句最当留意，有有余不尽之意始佳。”（张炎《词源》卷下）这首词的作者，注意措语用意的深婉，做到了句无闲字而有余意；结尾处所造想象中境界，亦饶悠悠不尽之韵味，故称合作。
前两联是曲江即景。“苑外江头坐不归”，“坐不归”，表明诗人已在江头多时。这个“不”字很有讲究，如用“坐未归”，只反映客观现象，没有回去；“坐不归”，则突出了诗人的主观意愿，不想回去，可见他心中的情绪。这就为三、四联的述怀作了垫笔。
以下三句，接写坐时所见。“水精宫殿转霏微”，在“宫殿”、“霏微”间，又着一“转”字，突出了景物的变化。这表面上是承“坐不归”而来的：久坐不归，时间已经快到晚上，所以宫殿霏微。但是，下面的描写中，却没有日暮的景象，这就透露了诗人另有笔意。浦起龙《读杜心解》曾将诗人这一时期所写的《曲江二首》、《曲江对酒》、《曲江对雨》，跟作于安史之乱以前的《丽人行》作过比较，指出：“此处曲江诗，所言皆‘花’、‘鸟’、‘蜻’、‘蝶’。一及宫苑，则云‘巢翡翠’，‘转霏微’，‘云覆’，‘晚静’而已。视前此所咏‘云幕’，‘御厨’，觉盛衰在目，彼此一时。”这种看法是有道理的。“水精宫殿转霏微”所显示的，即是一种虚空寥落的情景，这个“转”字，则有时过境迁的意味。
与此刚好成对照的，是如期而至的自然界的春色：“桃花细逐杨花落，黄鸟时兼白鸟飞。”短短一联，形、神、声、色、香俱备。“细逐”、“时兼”四字，极写落花轻盈无声，飞鸟欢跃和鸣，生动而传神。两句衬托出诗人的此时的心绪：久坐江头，空闲无聊，因而才这样留意于花落鸟飞。“桃花细逐杨花落”一句，原作“桃花欲共杨花语”，后杜甫“自以淡笔改三字”（胡仔《苕溪渔隐丛话》），由拟人法改为描写法。之所以这样改，是因为“桃花欲共杨花语”显得过于恬适而富有情趣，跟诗人当时仕途失意，懒散无聊的心情不相吻合。
这一联用“自对格”，两句不仅上下对仗，而且这一句的某些字词也相对。此处“桃”对“杨”，“黄”对“白”。鸟分黄白，这是明点，桃杨之色则是暗点：桃花红而杨花白。这般色彩又随着花的“细逐”和鸟的“兼飞”而呈现出上下飘舞的动人景象，把一派春色渲染得异常绚丽。
风景虽好，却是暮春落花时节。落英缤纷，固然赏心悦目，但也很容易勾起伤春之情，于是三、四联对酒述怀，转写心中的牢骚和愁绪。
先写牢骚：“纵饮久判人共弃，懒朝真与世相违。”这两句的意思是：“我整日纵酒，早就甘愿被人嫌弃；我懒于朝参，的确有违世情。”这是诗人的牢骚话，实际是说：“既然人家嫌弃我，不如借酒自遣；既然我不被世用，何苦恭勤朝参？”正话反说，更显其牢愁之盛，又妙在含蓄委婉。这里所说的“人”和“世”，不光指朝廷碌碌无为之辈，牢骚已经发到了唐肃宗李亨的头上。诗人素以“忠君”为怀，但失望过多的时候，也禁不住口出微辞。以此二句，足见诗人的愤懑不平之气。
最后抒发愁绪：“吏情更觉沧洲远，老大徒伤未拂衣。”这一联是说：只因为微官缚身，不能解脱，故而虽老大伤悲，也无可奈何，终未拂衣而去。这里，以“沧洲远”、“未拂衣”，和上联的“纵饮”、“懒朝”形成对照，显示一种欲进既不能，欲退又不得的两难境地。杜甫虽然仕途失意，毕生坎坷，但“致君尧舜上，再使风俗淳”的政治抱负始终如一，直至逝世的前一年（769年），他还勉励友人“致君尧舜付公等，早据要路思捐躯”（《暮秋枉裴道州手札率尔遣兴》），希望以国事为己任。可见诗人之所以纵饮懒朝，是因为抱负难展，理想落空；他把自己的失望和忧愤托于花鸟清樽，正反映出诗人报国无门的苦痛。
