此诗可分三部分。前六句为一部分，描写诗人汉江泛舟和登江中孤屿的情景。先写潮水退后，清悠悠的汉水中，小岛显得更加突兀。这两句诗扣题面而不直接写登孤屿，而只以“水落沙屿出”暗示。紧接着重写汉江：大石下的回水潭，深不可测。岸边的翠竹，密密匝匝。传说中的鲛人，潜伏在水中。江上的渔父唱着歌儿，怡然自得。张华《博物志》载：“南海外有鲛人，水居如鱼，不废绩，其眼能泣珠。”诗人将汉江、汉江两岸的景色、传说中的鲛人、江上的渔父交织在一起，多角度地表现汉江的神奇美丽。既写游汉江，同时也为后文回忆与王迥泛舟作铺垫。
第二部分共四句，回忆与王迥游江和登江中孤屿。诗兴非一，兴致无穷，不一而足，由于有第一部分作铺垫，这里只以“夕阳”一句景语，“中坐”一句情语，就将两人一起游览的情景，清晰地展现在眼前。
最后两句为第三部分，抒写诗人对王迥的思念。因为思念王迥，遥望王迥住的鹿门山；回到家中，仍然怅然若失。诗以美丽的汉江为背景，以游汉江为情节，把相思的感情通过具体的生活抒写出来，真挚而又绵长。结构上以游汉江开始，以归家作结，中间插入一次游汉江的回忆。全诗浑然一体，一气呵成，如同一篇优美的抒情散文。
“主人就我饮”四句为过渡句，引出了扶风客舍的主人——一位久经沙场的老战士。
从“十五役边地”到“路旁谁忍看”是扶风主人自述其军旅生涯。这里明显化用了古诗《十五从军征》的句意：“十五从军征，八十始得归。道逢乡里人：‘家中有阿谁？’‘遥看是君家，松柏冢累累。’兔从狗窦入，雉从梁上飞。”战地归来，家园零落，满目凄凉，虽然满心酸楚，但想到“去时三十万，独自还长安”，心里还是有几分庆幸。这在行文上为下文抒写珍惜太平盛世的生活感慨作了过渡，转承显得十分自然。
“幸逢休明代”以下四句是扶风主人抒发欣逢盛世及年老体衰的感慨。
收尾六句是扶风主人对诗人的劝慰勉励之词，语重心长，感情真挚。
全诗写景叙事，有条不紊。其间颇多转折，如九九回廊，迂回曲致。老人之言语带沧桑，但终不流于伤感，感人至深。此诗从风格上看，虽有几分沉郁，但仍是盛唐气象的回响，内容和形式结合巧妙，谋篇布局颇见匠心，不失为一首优秀的边塞诗作。
整首小令的上半阕，写他为什么要“卜居外家东园” 。“重冈已隔红尘断，村落更年丰。移居要就，窗中远岫，舍后长松。”这就是诗人认为十分理想的卜居之地，是诗人心中向往的优美的幽居佳境。下半阕写移居新环境中的新生活，人活着，总要吃饭穿衣，作为平民种木、种谷之类的事，不干是不行的。而他年事已高，不宜体力劳动，所以“十年种木，一年种谷”的体力劳动，全都交付给子女去干。而自己呢？惟有“醒来明月，醉后清风。”这是诗人晚年的生活写照。
整首小令表面上看，只是对山林间悠然自得的生活，没有任何一字提及诗人对当时的元朝暴政的不满之情。但细细咀嚼，又字字句句语含沉痛，蕴藏着对暴政的不满之意。虽不言情，但通过写景抒情，情藏景中，充满了诗人悲愤之情，情深意挚，可谓是一切景语皆情语。