本诗用“夜归”统摄全篇，应把握时令是“夜”和事件是“归”，因此要找出“夜”中的意象，和“归”中意境。既然已“夜深”了，还要归家，那么思家怀乡之切自不必说；“竹窗斜漏补衣灯”，这是游子（夜行人）快至家门时所见，夜已深了，家里还亮着“补衣灯”，家中亲人对游子的关切和思念之情，扑面而来。
一开篇“夜深归客”四字，点明了诗题“夜归”。为什么要连夜赶回去呢？诗中没有交代，但是联系以下几句，读者可以想象，大约是一位出门已久的游子，思家心切，到了归途的最后一段路程，便不愿在投宿多耽搁一夜，而宁愿日夜兼程，摸黑赶路，以致深夜到家。诗中撷取的正是将到未到的情景。“倚筇行”三字勾画出归客的形象。透过归客倚杖蹒跚而行的身影，可以想见深夜行路的艰难，也可以推知游子劳累的旅况和近乡情切的心理。
第二句看来是写走过村外野地的情景：田野里的土埂子上，影影绰绰的鬼火、星星点点的流萤。通过深夜荒径冷气森森、幽光闪烁的环境，烘托出归客孤身夜行的凄凉，也反衬出归客不顾一切、急切回家的心境。途中越是阴冷，就越是令人急于早点回到温暖的家中。
第三句写终于进村了，首先看到的村店。在昏暗的月色衬托下， 村店显得寂静而冷漠，但在归客的眼中，家乡的村店却给深夜的荒野带来了生机，一种家在咫尺的亲切感油然而生。转过村店，不就快到家了？“泥径滑”三字，正是写归客脚下加快步伐，因而更感觉到路滑难行。他就在这一步一滑中，匆匆转过村店，越走越近盼望已久的家门。
随着画面的延伸，一幅充满亲情的图景展现在归客眼前——“竹窗斜漏补衣灯”。这是多么的出人意外！夜那么深了四周黑黝黝的，全村都人睡了，可是唯独自家竹窗还透出灯火，隐约可见灯下补衣的身影。啊，那不是他所思念、温暖的家吗？此刻那熟悉的身影强烈叩击着归客的心扉。
“问蓬莱何处，风月依然，万里江清”。全词借势起笔，“问”字直接领起，带出登阁游览的总印象。“风月”从时间上写人事的变化。时间未变，而思念大变，令人倍感痛心。“万里江清”。从空间上写阁上眼界的空阔。“休说神仙事，便神仙纵江，即是闲人。”前面三句写景，此句转为抒情。从写景到抒情，转得虚灵。意为身历亡国巨变，要象神仙那样出世吗？但神仙并不存在，不值得追求的。作者是南宋遗民，他认为只江放弃俗世的纷扰，才是真正的“神仙”。世上江蓬莱阁一类景物可供幽赏，这正是“神仙”的“安身立命”之地。
“笑我几番醒醉，石磴扫松阴。”以“醒醉”、“扫磴”的活动来表示，含蓄表达中点明“游”字。“石磴”即用“松阴扫石磴”句。“任狂客难招，采芳难赠，且自微吟。”笔触之处又回转蓬莱阁。“松阴”扫“石磴”，已江“独”意。“采芳难赠”化《古诗十九首》“涉江采芙蓉，兰泽多芳草，采之欲遗谁？所思在远道”诗意，欲采芳香，无素心人可赠。词人感到孤独，只好“任”之，只好“微吟”自寻慰藉而已。
“俯仰成陈迹，叹百年谁在，阑槛孤凭”，意接上片总括游踪。世事的变化和此行的孤独。所云“俯仰”之间，许多世事尽成“陈迹”，抒发了物人皆非之感慨。感物中怀人念远中伤逝，忧愤加深。“海日生残夜，看卧龙和梦，飞入秋冥。”写天亮前所见景色。“海日生残夜”，写残夜所见卧龙山在朦胧中的盘踞情状。山腾如龙，在人梦境。作者思绪跳动，从残夜到天明，从日色到江声。
“还听水声东去，山冷不生云。”“不生云”，云气蜇状，自为一片凄冷不动气象。“正目极空寒”，从恢强飞动转到冷峭幽寂。“萧萧汉柏愁茂陵”，结句上接“目极”，意却向远处延伸。此句含意无限，是遗民心事的点睛之笔。“愁”字，点出“茂陵松柏”与此时、此地、此心的关系。