上片两句：“万里飞霜，千林落木”，对偶互文，说万里、千林，都在飞霜中枝零叶落，总写秋天大地；“寒艳不招春妒”，收缩到红叶，红叶是寒天中唯一的浓艳之色，它与春风、春花不同时，不可能为它们所妒。三句直从秋天写到红叶，似乎专在咏物；但秋风横扫万里，其实是亡国后江山、士林备受摧残的写照。红叶可以象征遗民，“春”又是在新朝的富贵场中得意的人物的象征，寄托又极分明。这三句，已正面把红叶说尽。下面又从侧面再作生发。“枫落吴江冷”，是唐人崔信明的断句，枫叶经秋变红，故用这一典故，接以“枫冷吴江，独客又吟愁句”。“独客”表面指崔，实际是自指；“又吟愁句”，流露主观感情，由咏物到写人。物、人交错、化合，目的是求若即若离，主客融成一气，不为咏物而咏物。这里是用这种手法，但脉络转接分明：“枫”承“寒艳”；“吴江”二字又引出“正船舣、流水孤村，似花绕、斜阳归路”两句。“归路”中停船于“流水孤村”之旁，正可挨村傍树；而在“斜阳”映照中远看似春花围绕的，又非红叶莫属。这是借描写停舟之景以烘托红叶。“甚荒沟、一片凄凉，载情不去载愁去”，用唐代宫女红叶题诗故事以写眼前红叶，是熟典活用：不正面承说御沟流红，有关双方获得美满姻缘的事，而说“荒沟”内一片凄凉景象，红叶不载情去，却载愁去。不再是写宫女故事，而是自写当时情境；但典故的影子仍在，红叶的影子仍在。一经活用，就化熟为生，化板为活。“载情”句的“情”，是原故事中男女间之情，但句中“载愁”的“愁”，却是词人自己的国亡家破、飘零失路之愁。句中“载情”是宾，“载愁”是主。意谓若欲题于红叶，托荒沟流水载去的，亦只有无限深愁而已。“载情不去”，为“不载情去”的倒文。从主观方面说，是今已无“情”可供托载，表现出来却成为问沟水为何不与我载情去而载愁去，愈婉转，愈沉痛。
上片从红叶写到人，下片则从人写到红叶。“长安谁问倦旅”，以一疑问句领起写人。“羞见衰颜借酒，飘零如许”，又用自己烘托红叶。上句用郑谷《乖慵》诗“愁颜酒借红”，藏“红”字；加上“羞见”、“飘零”，以增曲折哀叹之意，便切遗民身世。“谩倚新妆，不入洛阳花谱”，又承上句“飘零”一词的双关，转到写红叶，脉络亦分明；指出秋叶虽红，终不是花，终不会为只爱春花的常人所赏，不能载人《花谱》。“洛阳”、“新妆”，皆暗指牡丹：牡丹为洛阳名花；不入《花谱》，即是不挂新朝朝籍、不得富贵的隐喻。“谩倚”是对“新妆”的唾弃，即是勉励红叶不要去羡慕、效法春花，也即是隐喻遗民们不要去羡慕、效法新贵。红叶既不能追随春花，它受秋天“回风”的吹送，也只能在酒人的樽前“起舞”最为合适，因为酒人的“醉貌”可与红叶的颜色互相映照，酒人的身世也可能就同于红叶的遭际。“尽化作、断霞千缕”，写风中落叶众多，一经“起舞”，艳红的颜色就可化为千缕断霞，红叶的这一光彩，也即是遗民们的丹心碧血，他们哀思故国的返照回光，他们忍受风霜、保持坚贞气节的光辉节概。红霞成为“断霞”，可知无法回天，也即无力复国。那么，“记阴阴、绿遍江南，夜窗听暗雨”。只好牢记江南听雨、夏木阴阴的季节，也即只好牢记南宋亡国前尚存半壁河山的偏安时期。着一“暗”字，则当时已入衰残之境，呼应“断”字，使结语呜咽缠绵。自“谩倚”以下，句句写红叶，又句句比遗民。
全词围绕红叶，扣紧题目，不避犯“正位”；但人、物关合，义兼比兴，写得不粘不脱，凄惋沉痛，感染力强。
全词共分三段。第一段，首韵直接入题，以占尽一丘一壑的风流自我形象，领起全篇。下一韵，以茅屋上“松月桂云”，和山上下清泉脉脉的优美风景，具体写占尽这一丘一壑的美景者的风流意态。以下以“寻思前事”退过一层，转写以前入仕的错误，印证今日生活的正确，遥领下文。作者把错误用两个意思来表达，一是此间猿鹤为他的离去而悲鸣烦恼；二是功名本是邓禹那样少年得志者的事。这两个表达，一正一反，反借山间猿鹤来表明自己本性合居于山中，正借邓禹辈人的得志，表明功名之事本不属于自己。“终须是”一语，内藏自己多少努力都以失望的感慨。
第二段明接上段起韵，暗接“前事错”，专言今朝心情的愉快和伸展。起言独自饮酒放歌，仰观天上鹰飞，俯视水中鱼跃，颇有“海阔凭鱼跃，天高任鸟飞”的自由舒畅，鹰与鱼的行迹，虽可能来自于现实的观察，但归根到底是作者心灵自由的幻象。“西风黄菊”一句点明作词的时间，也营造出一种近似于当年陶渊明归隐的生活氛围。作者以“喷薄”写菊花香气，生新脆硬，足见豪情。以下突然转入惆怅的感受中，借用前人诗句，写他对一位曾经约定同游江海、而今不见踪迹的“佳人”即知音的盼望。这位他的想象中像屈原那样身佩芳香饰物的佳人，即使真有所指，也更像作者所创造出的自我精神的化身。而“日暮云合”一词，虽是借词于前人，却能“夺胎换骨”，表达自己作为一个老人时间无多时的特有的精神感受。“入江海”一句，以倒装句式，不仅无碍于押韵，而且显示出一种拗折的风味。
第三段揭明主旨，言自己虽然落魄失志，但不求闻达，甘心笑傲林泉，以退为乐。写得极有气势和风骨，显示出一个不免于精神不平的人，对于出处大节的看重。作者先以“遇合”一韵，从第二段所述的意路上转回，轻轻逗出政治失意的牢骚。但马上以“莫”字，压住要倾发壮志才华不为人知的愠怒。此处虽然借用孔子击磬求知的典故，但作者的傲岸显然远过于孔子。下句仍借用典故，表达自己笑傲泉林，不以穷达为怀的精神风采，说明自己不以退处为忧为耻，而觉得其中自有乐处。这就回应开篇“风流占却”一语，使包孕丰富的慢词长调获得了圆满的结构。
诗的第一句“秋风入窗里”，以朴素本色的口语，写出日常生活极为平常的景象。“秋风”这一意象所特具的萧瑟感和时序易迁，给思妇带来的感触是不难想见的。尤其是“入窗里”三个字，仿佛将秋风那股萧瑟寒凉之气也带入了室内，弥漫于整个闺房。虽未明写思妇的感触，但由此引起的凄寂感固可意合。紧接着第二句，仿佛又只是写极平常的风起帐飘的景象。但罗帐的意象本与夫妻爱情生活密切相关，罗帐飘扬的动象，往往更具有这方面的暗示。可是，如今当秋风入窗、罗帐飘扬之时，这个室内却显得分外空寂，往日双方深情蜜意、鱼水谐和的象征物——罗帐，由于人在千里之外，此刻竟成为触景生悲的媒介物了。这就自然引出了三、四二句。
“仰头看明月，寄情千里光。”有瞥见风飘罗帐到仰头看月，视线由室内移至室外。这本是思妇不假思索而不自觉的目光转换，但在“看月”的过程中，却不由自主地产生连翩浮想。明月光照千里，分隔两地的离人皆可看到它，而且把它看作传递相思的凭籍，在“仰头看明月”的过程之间，思妇已然思扬千里、心飞向远方的亲人；但“隔千里兮共明月”，双方空间的遥隔又使相思之情更为强烈。因此，又进一步产生“寄情千里光”的愿望：既然彼此同在一轮明月的光照之下，想必也能托此“千里光”将自己的相思之情寄给千里之外的远人吧！这个想象极为新奇，也极自然而优美。引起思绪的外物（明月），在女主人公感情的酿化之下，此刻竟成了寄情的载体。由于明月的光波柔和清亮似水，在形态、质感上，与女子相思怀远的柔情有着相似之处，因而把它化为“寄情”的载体，实在是再自然不过的了。
全篇只写了秋风、罗帐和明月这三种物象，但是由于它们作为诗歌意象，各自具有丰富的内涵和特点的色彩，都与思妇怀远之情有着关联，因此就共同组成了一个情调幽美、意境悠远的艺术境界。它有一般民歌的清新明朗、朴素自然，却跟它们在表情上勾画了一幅悲凉的画面，渲染了一种哀婉的气氛，很好地体现了古乐府民歌那种清新浅近风格，也表现出了强烈的艺术感染力。可谓是情景交融的佳作。
