这首词上片开篇即感慨人生，继而从自己的形貌憔悴以及故人的穷困潦倒进一步感叹时光易逝，毫无建树，处境艰难；下片笔锋转向写景，前半写自己与故人携手林间的南山之游，后半借眼前景色抒发万里归思之情。全词叙述条理分明，犹如一篇感人至深的叙事散文；词句多化用前人诗文，信手拈来，自然贴切；情景交融，音韵和谐，结构如行云流水，毫无生涩之感。
上片叙事抒情，一开始便感慨人生，继而从自己的形貌憔悴以及故人的穷困潦倒进一步感叹时光易逝，毫无建树，处境艰难。开头三句以“漂流江海”和“烟浪云帆”八字总结自己与故人分别数十年间的宦海浮沉，寄慨良深。“故人”二句以故人之“惊怪”眼写自己憔悴之甚。苏轼被贬后的生活是很穷困的，当时被贬为团练副使，官位是很卑微的。据史书记载当时是“无屋可居，无田可食，二十余口，不知所归，饥寒之忧，近在朝夕”。所以在才会说“憔悴老青衫”。“我自”三句以故作不解的问句写故人与自己品格相契，都因“疏狂异趣”而“强自取折”。也就是说他潦倒穷困，是因为不随波逐流，与众不同。“流年”三句补出与故人相见的时间地点和环境，与上面的议论和感慨情景相合，烘托穷途末路的羁旅之思。
词的下片笔锋转向写景，再转入抒情，一唱三叹。前半照应词序，写与故人携手林间的南山之游。过片“巉巉”二字，实写南山高大突起的形象，同时也表现了苏轼傲岸不屈的精神，暗示从舟中到山中的游踪变化，与上片结句的情境构成逆转，为下文写景抒情作铺垫。后半借眼前景色抒发万里归思。“莫上”二句语婉曲而意层深，结尾三句情愈转深，而情深仍不离景物。说自己因对方的询问而梦回故乡，其实作者的乡思根本不需要提醒。这样写既紧扣对方，也使措辞更显回环，行文平添曲折，余波杳渺，荡漾生姿。下片表达了作者对命运的豁达乐观，与老友的相知相得，对故乡的牵挂眷念。
此词情景交融，音韵和谐，结构如行云流水，叙述条理分明，犹如一篇感人至深的叙事散文。全词多处化用前人诗句。如：“万里烟浪云帆”，化用李白《行路难》“长风破浪会有时，宜挂云帆济抢海”和白居易《海漫漫》“云涛烟浪最深处，人传中有三仙山”；“憔悴老青衫”，语出白居易《琵琶行》“坐中泣下谁最多，江州司马青衫湿”；“我自疏狂异趣”，则是化用白居易《代书诗一百韵寄微之》“疏狂属年少，闲散为官卑”；“古寺空岩”，又是袭用杜甫《和裴迪登新津寺寄王侍郎》“蝉声集古寺，鸟影度寒塘”和杨素《山斋独步赠薛内史诗二首》“深溪横古树，空岩卧幽石”诗意；“云海相搀”，化用李白《关山月》“明月出天山，苍茫云海间”；“家何在”，则出自韩愈《左迁至蓝关示侄孙湘》“云横秦岭家何在，雪拥蓝关马不前”。这些化用，信手拈来，自然贴切，可谓此词的一个重要特色。
吴处厚《青箱杂记》卷五记载：“晏元献公虽起田里，而文章富贵，出于天然。尝览李庆孙《富贵曲》云：‘轴装曲谱金书字，树记花名玉篆牌’。公曰：‘此乃乞儿相，未尝谙富贵者。’故公每吟咏富贵，不言金玉锦绣，而唯说其气象。若‘楼台侧畔杨花过，帘幕中间燕子飞’，‘梨花院落溶溶月，杨柳池塘淡淡风’之类是也。故公自以此句语人曰：‘穷儿家有这景致也无？’”这段话颇能道出晏殊富贵词的独特风格。这首词前五句描写景物重在神情，不求形迹，细节刻画，取其精神密契，不在于锦绣字面的堆砌，而在于色泽与气氛上的渲染，故能把环境写得博大高华，充满富贵气象。词中所表达的思想既不是伤春女子的幽愁，又不是羁旅思乡游子的离愁，更不是感时悯乱的深愁，而是富贵者叹息时光易逝，盛筵不再，美景难留的淡淡闲愁。
劈头“小阁重帘有燕过”点出环境与时令。此句看似平淡，实乃传神一笔，有破空而来之势。这匆匆一过的穿帘燕子，莫非是远方使者，给帘内入传递了春将归去的消息。像在平静的水面投下一枚小石，立刻泛起层层波澜。一下子打破了小阁周围宁静的空气，起着沟通重帘内外的作用。阁中人目随燕影，看到“晚花红片落庭莎”。原来时已暮春，庭院满地落红。“晚”，一指傍晚，朝花夕谢，形容落花的时间，一指晚春，花事凋零，形容落花的节令。春末多雨，更兼庭中少行迹，满庭莎草已是一派浓绿。“红片”与“庭莎”，绿肥红瘦，相映成趣。“曲栏干影入凉波”，庭院中池边的曲曲栏干，倒影于池塘碧波之中。“凉波”的“凉”既是时已入暮，池水生凉的真实写照，又是个中人此时此地心境凄凉的折光反射。
以上三句写的是帘外景物，从视觉所及落笔。“重帘”、“过燕”、“晚花”、“庭莎”、“曲栏”、“凉波”诸意象所组成的画面，其色泽或明或暗，或浓或淡，或动或静，使整个庭院呈现出一片凄清冷落。虽然主人公尚未露面，但他的处境、心曲，已跃然纸上了。片两句由帘外转入帘内，从听觉着墨，写阁中人的感受。“一霎”、“几回”乃互文。虽说是“好风”、“疏雨”，小阁里的人却听得分明，感得真切，可见环境是何等的静，人是多么孤独。
上句“翠”、“生”二字，一为冷色，一为动态，这种化虚为实的描写，把周围的景物写活了，给人以质感。好风入槛，翠幕生寒，孤身独处，情何以堪。下句“圆荷”即荷叶。疏雨滴在嫩绿的荷叶上，声音本是极细极微，但偏偏阁中人却听得清清楚楚。帘外之凄清冷落如彼，帘内之空虚寂静如此，这一切本是足以生愁了，何况又值“酒醒人散”之后。末句以情语作结，总束全词，兴起感情波澜，似神龙掉尾，极有跌宕之致。
结句抒发的亦是富贵闲愁。前人评晏殊词圆融平静，多富贵气象。晏殊自云：“余每吟咏富贵，不言金玉锦绣，而悦其气象。”此词可见一斑。