上片写景。先从远处着笔。
“远岸收残雨，雨残稍觉江天暮。”上阕头两句写江天过雨之景，发端“远岸收残雨”，句中词序颠倒实即“残雨收”：意谓远远的江岸一带，雨点疏疏稀稀的快停止了。雨快下完了，才觉得江天渐晚，则可推断出这场雨下了很长时间。孤舟因雨不能行驶，词人此时蜗居小舟，孤寂无依更可知，这就把时间、地点、人物的动作和心情都或明或暗地表现出来了。紧接着，“雨残稍觉江灭暮”，一幅以江天为背景的寥阔画面，那是淡淡的水墨画，雨快停止，而天空开始黑下来了。
“拾翠汀洲人寂静，立双双鸥鹭。”转换了另一个画面，诗人将视线从远岸收向较近的汀洲上。拾翠佳人，就是指在河边拾香草的女子。鸥鹭成双，词人却孤独寂寞地处在小舟之中。这一对照，就更显词人内心的孤独寂寞。汀洲之上，有鸥鹭以之为家，但拾翠者早已归去，虚拟作陪，更以“双双”形容“鸥鹭”，便觉景中有情。时间在流逝，天渐渐更黑了，随着诗人视线的变动，又展现出另一幅画面。
“望几点、渔灯隐映蒹葭浦。”“望几点”句，时间由日暮转向夜晚。诗人放眼望去，只见芦苇荡里，隐隐约约闪动着渔船上的灯火，一点又一点。渔灯已明，但由于是远望，又隔有蒹葭，所以说是“隐映”，这是远处所见。“停画桡”句，就是描绘自己所处之地，附近所闻。“道去程”二句，乃是舟人的语言和动作。“前村烟树”本属实景，而冠以“遥指”二字，又似虚写。此二句将船家对路途的安排，他们的神情、口吻以及隐约可见的江村勾勒了出来，用笔极其简练，而又生动、真切。
“停画桡，两两舟人语。道去程今夜，遥指前村烟树。”这是诗人耳中所闻，船停止了划桨，两个舟子在谈话：他们指着远方的前村烟树朦胧处，说今夜的行程就去那里。后一句词序颠倒且有省略，意谓（舟子）遥指前村烟树，道今夜去程（是那边）：这是词的特殊语言。行文至此，从拾翠人回、鸥鹭双双立、渔人点点灯火归家、直至两舟子语今夜远村去程，无不触动诗人敏感的心，故下片自然地引出抒情。
下阕由今夜的去程而思至长年漂泊的艰苦。
“游宦成羁旅，短樯吟倚闲凝伫。”过片“游宦成羁旅”，正面倾吐出旅愁，点明本词主旨：“短樯吟倚闲凝伫”，又是词序颠倒，正面写出舟中百无聊赖的生活。这句是诗人的立足点，原来上片诗人那些所见所闻，都是从“凝伫”而得。它起着总上启下的作用。
“万水千山迷远近。想乡关何处？”“万水”两句，由“凝伫”转来，由于长久远眺，所见则“万水千山”，所思则“乡关何处”。句渲染出一片万水千山茫茫无际的景色，后句点明诗人的乡愁。“迷远近”虽指目“迷”，也是心“迷”。崔颢《黄鹤楼》云：“日暮乡关何处是，烟波江上使人愁。”与此句正是语近意通。
“自别后、风亭月榭孤欢聚。”“自别后”以下，直接“乡关何处”，而加以发挥。“风亭”七字，回忆过往，嗟叹今夕。昔日良辰美景，胜地欢游，现在只有孤舟一人，乡情郁郁，而用一“孤”字将今昔分开，意谓亭榭风月依然，但人却不能欢聚，就把它们辜负了。想到这里，诗人离愁更浓，故接着唱出全词的最强音。
“刚断肠、惹得离情苦。听杜宇声声，劝人不如归去。”“刚断肠”以下，紧接上文。乡思正浓，归日无期，而杜宇声声，劝人归去，愈觉不堪。杜宇不识人心，却劝人返，则无情而似有情；人不能归，而杜宇不谅，依旧催劝，徒乱人意，则有情终似无情。以听杜宇哀啼结束，更觉深情婉转、凄侧动人，用意层层深入，一句紧接一句，情深意婉而下笔有力，读来浸人心腑。
起句化用《九歌·湘君》“袅袅兮秋风”句。“山河举目虽异”二句，是用《世说新语·言语》中典故。东晋时南渡士大夫常到新亭聚游饮宴，周侯中坐而叹，说：“风景不吾，正自有河山之异”。皆相视流泪。作者登秋风亭时与东晋士大夫有同感，看到风景依旧，山河破碎，西风苍凉，因而无限感慨。以下“功成者去”二句也连用典。《战国策·秦策》：“蔡泽谓应侯日：‘四时之序，成功者去’。”“团扇”句出自《汉书·外戚传》，载班婕妤《怨歌行》：“新裂齐纨素，鲜洁如霜雪。裁为合欢扇，团团似明月。出入君怀袖，动摇微风发。常恐秋节至，凉风夺炎热。弃捐箧笥中，恩情中道绝。”这二句作者借以对宋廷排挤抗金爱国将领的作法表示不满。接下去作者看到，秋风中夕阳西下，可是当年大禹治水的遗迹已茫茫不见，无处寻觅了。据《史记·夏本纪》载，舜、禹时，洪水滔天，大禹与众决九川而致四海，天下为治，大禹即帝位后，东巡狩，至会稽而崩，至今绍兴会稽山有禹陵、禹庙。明末陈子龙曾有诗句：“禹陵风雨思王会，越国山川出霸才。”（《钱塘东望有感》）思念大禹的功迹，哀叹明之将亡。辛弃疾言外之意也是追忆大禹拯救陆沉的勋业，慨叹南宋无英雄人物能力挽狂澜。
下片依然在怀古，又提及历史上一位英雄君主。汉武帝巡行河东时作有《秋风辞》，说：“秋风起兮白云飞，草木黄落兮雁南归……”辛弃疾在秋风亭上联想《秋风辞》，不仅只是节令上的偶合。他借以缅怀汉武帝为抗击匈奴、强盛帝国所作的杰出功绩。这三句表面是说，汉武帝传颂千古的风流辞章，足可以与司马相如的辞赋媲美。这里似是赞扬汉武的文采，实是歌颂他的武略，暗指宋廷的懦弱无能。以下亦用《九歌》句：“帝子降兮北渚，目眇眇兮愁予。嫡娟兮秋风，洞庭波兮木叶下。”作者用此怅望江南半壁河山，缅怀大禹、汉武帝，情绪依然十分愤慨。以下句意一转，说：朋友们来信劝告我，不要留恋官场而忘记归隐。“莼鲈”用东晋张翰因秋风起思归故乡的典故，这里以友人来信的口气说出，还是弃官退隐吧。这是作者回顾历史以后，面对冷酷的现实所产生的心理矛盾。结尾却并不回答朋友，只是说：谁曾想到在这清凉的秋夜，我正挑灯攻读太史公书。《史记》其中一系列爱国英雄的纪传，如廉颇、李广等，效命疆场、威震敌胆且晚年倍受压抑，悲愤壮烈，曾深深激动辛弃疾夜读之心。这时辛弃疾64岁，其老骥伏枥之志不衰。
词中运用典故描绘秋天景象，并表现了怀念北方的爱国思想和在政治上遭受打击的悲凉情绪。篇末通过对友人的答话，表现自己不甘心于长期退隐，而积极关心政治，准备有所作为。
宫体诗专咏女子的一颦一笑，美态艳姿，内容上无甚可取，但在中国诗歌形式趋于完美的过程中，宫体诗也曾起过相当的作用。它们所歌咏的对象本身只是一种形式的美，因而追求辞藻华美、句式工整也就十分自然了。这首诗就体现了这种倾向。乐曲旋律是哀怨的，诗的内容是轻薄的，主题只有三个字——写美人。
“丽宇芳林对高阁，新妆艳质本倾城。”首句描写环境，用“丽宇”“芳林”“高阁”三个意象来刻画后宫的华美精巧，表现这群美人生活的优越。丽宇高楼掩映在散发香气的花园内，以环境之美衬托人物之美。“高阁”即指临春、结绮、望仙三阁，作者要赞美的人就会聚在这里。次句是对这群美人的初步描绘，说她们生来就长得美丽，经过时新的修饰打扮，就更有“一顾倾人城，再顾倾人国”的姿色了。这两句写景和写人都没有什么特色，显得比较空泛而未见精彩，凭借空泛的“新妆艳质”就能倾城是实足的宫体诗八股，任何女子都适用。
“映户凝娇乍不进，出帷含态笑相迎。”从嫔妃们见驾时的种种情态中写她们的活泼可爱，将美人一瞬间的艳态刻画得淋漓尽致，颇具神韵。她们从高阁内走出来时，到门口就停住脚步，好像京剧中主角出场时的一个亮相。她那美艳的神彩映照着门户，窈窕体态好像凝结在那里。“凝娇”一词尽管有点抽象，但仍能把站着不动的美人的神态传出，雕琢得颇见工夫。“出帷含态笑相迎”，写的是她们迎接后主的情态。后主每次去她们那里，她们总是含情脉脉，仪态万方，笑盈盈地从内室出来迎接。接迎时的喜笑正与应召时的“不进”相对照，风流天子更要喜出望外了。前句是写静态的美，后句是写动态的美，由此将娇柔万状、姿态妩媚的女性形象描绘得呼之欲出了。
“妖姬脸似花含露”，妖冶的美人脸蛋像带露的鲜花，含苞欲放，艳丽可爱，充满着青春的活力与女性的柔美。“玉树流光照后庭”是全诗的精华，比喻、照应俱佳。“玉树”照应“含态”，说美人的体态像玉树临风，婀娜多姿。“流光”照应“映户”，说美人的神采好像流动的光辉，闪烁不定。鲜花、玉树虽是两个常用的比喻，但用在对她们的“凝娇”“含态”作了生动的描述之后，就富有表现力，颇具耀眼的光彩、飞动的气势。全诗就此戛然而止，以“后庭”回应“高阁”，使结构紧凑，同时也以热烈的气氛使这首赞歌达到高潮。
由此看来，这首诗不过是描写女性的宫体诗而已，其内容本身虽不足褒，却也不足深贬。至于在艺术表现上，这首诗更有其可取之处。它描写女性不作烦琐细密的刻画，用词也绝不恶俗，而只是着意于对美丽嫔妃的资质、情态的形容，力求略去美人的“形”，而写出美人的“神”。所以，它虽是宫体，却也在某种程度上净化了宫体，这不能不说是作为诗人的陈叔宝在诗歌创作上的突破。