此诗是写诗人欣赏壁画的过程与感受。全诗可分为两段。
首二句点题，写晚上秉烛观看壁画，壁画中画的是山水。第三句概括山水特征：水，洪波汹涌；山，高峻峥嵘。第四句写诗人对壁画的总体印象：就像处在仙境里隔海遥望赤城山一样。五六句说山水间没有雾气，景物清晰得就像山阴道上雪后初晴那样美。七八句说壁画中虽然流水回旋，可是听不到丝毫的湍流声，幽静得就像避乱之秦人处在桃花源一样令人安详。桃花源本来幽静，月下桃花源则更为安静。“窥花源”以上八句写观壁画。
最后六句写诗人观画后的感受。感受之一，心神清净。静极生动，反而觉得在壁画的层峦叠嶂中有秋猿哀鸣。感受之二，欢。因欢而放歌行吟，直至翌日清晨。感受之三，第二天清晨再观画，看到了海客扬帆，诗人于是产生了壮阔的胸怀：直挂云帆济沧海。
诗人依照主观感受和想象所再造出来的，用以表现整个画面意境的艺术意象，是这样迷离，可是细加体味，其暗示性又是那样丰富，不仅不妨碍反而极大地吸引和调动读者，以其丰富的艺术联想去悉心感受它。虽嫌迷离，终觉美好。无怪乎诗人烛照此景而生仙游之想。不写具象写意象，不从实处描摹，而从虚处传神，画之所长，诗之所短，力避之，画之所短，诗之所长，力扬之，正是此诗艺术上的主要成功之所在。
小令在“废圃”的“废”字上做足文章。要表现出废园的光景，当然得让事实来说话。于是作者以八句的大篇幅，来列举出种种例子。这些例示并无一定的排列规则，隐示了“触目皆是”、“信手拈出”的含义。而在具体的表现方式上，又时出变化，避免了獭祭的单调。
起首两句，以断语的形式出现。一是地上的苔藓，厚厚地铺了一层，颜色已现苍黑；一是壁上的题诗，墨迹隐约可辨，显示了陈年的特征。苔上着一“古”字，而题作则重于其“痕”，一苍一旧，呈现着荒凉残败的气象。前者反映自然，后者关合人事，这一起笔就定下了全曲的基调。
三、四两句是另一种写法，出现了动作的形象。花卉无人照料，自开自谢，所余者稀，故曰“疏花”；落叶本已枯凋，飘坠日久，用上一个“老”字，妥帖传神，几无他字可易。“照水”、“沉沟”虽含有动词，到头来却归于静止。这又在荒败的景象上增添了几分沉寂。
“蜂黄”两句是互文见义，作者有意运用“蜂黄”和“蝶粉”的近义词，也可说是一句分作两句表达。“罗袖”在诗歌中多属女性的服饰，在该曲中显然是指绣屏上残存的仕女图像。“绣屏”是室内的布置，而蜂蝶竟纷纷登堂入室，“废圃”的残破不堪，就更不在话下了。
七、八两句为垂杨写照，则用了拟人化的移情手法。前述种种都是作者的观察，虽是着意细绘，却未有直接表达情感的机会。而此两句则表现了强烈的主观感情色彩，推近了作者的主体。这就是王国维在《人间词话》中所谓的“有我之境，以我观物，故物皆着我之色彩”。这就为下文诗人的直接出场安排了过渡。
结尾作者出了场，却已是在离开废圃之后。他甚而没有就此行发表进一步的感想，因为列示的景象本身已经说明了一切。他只是以“寻村问酒”的举动来坐实自己的感伤，而“湖上”竟也是一片无人的死寂。这一结笔更加重了废圃的悲剧气氛。值得一提的是，诗人在作品中有意识地选择了足与废圃前身引起联想的景物，如花叶蜂蝶、绣屏题痕、东风垂杨等。作者虽未言明它们变化衰残的成因，但作品感慨盛衰无常的主题，却在字里行间中表现了出来。
全诗四句，这四句诗包含着一前一后两个场景相同、相互映照的场面。
诗的开头两句是追忆。“去年今日此门中”，点出时间和地点，写得非常具体，足见这个时间和地点，在诗人心中留下了多么深刻难忘的记忆。第二句是写人，诗人拈出一个人们犹知的形象——桃花，春风中的桃花人人都知道是何等的艳丽，而“人面”竟能“映”得桃花分外红艳，则“人面”之美可以想见；再者，本来已经很美的“人面”，在红艳艳的桃花映照之下定是显得更加青春美貌，风韵袭人。一个耀眼的“红”字，正是强烈地渲染出这种相映生色的景象和气氛。面对着这一幅色彩浓丽、青春焕发、两美相辉的人面桃花图，不用说姑娘的神采美貌如在目前，就是她的情态，诗人的心事，彼此藏在心中的欢爱和兴奋，也都是可以“思而得之”的。
下片则是说还是春光烂漫、百花吐艳的季节，还是花木扶疏、桃树掩映的门户，然而，使这一切都增光添彩的“人面”却不知何处去，只剩下门前一树桃花仍旧在春风中凝情含笑。桃花在春风中含笑的联想，本从“人面桃花相映红”得来。去年今日，伫立桃树下的那位不期而遇的少女，想必是凝睇含笑，脉脉含情的；而今，人面杳然，依旧含笑的桃花只能引动对往事的美好回忆和好景不常的感慨了。“依旧”二字，正含有无限怅惘。
整首诗其实就是用“人面”、“桃花”作为贯串线索，通过“去年”和“今日”同时同地同景而“人不同”的映照对比，把诗人因这两次不同的遇合而产生的感慨，回环往复、曲折尽致地表达了出来。对比映照，在这首诗中起着极重要的作用。因为是在回忆中写已经失去的美好事物，所以回忆便特别珍贵、美好，充满感情，这才有“人面桃花相映红”的传神描绘；正因为有那样美好的记忆，才特别感到失去美好事物的怅惘，因而有“人面不知何处去，桃花依旧笑春风”的感慨。
从故事情节来看，这是一首即兴的诗，它给人看到的似乎只是两个简单的画面——桃花相映着的人面，人面去后的桃花。但是，由于人物的活动贯串其间，由于画面与画面、画面里（桃花）与画面外（诗人）的对比、映衬，便巧妙地显示了人物感情的发生、发展和起伏跌宕的变化，诸如初遇的脉脉含情，别后的相思，深情的重访，未遇的失望等等，都或隐或现地表达出来了。全诗自然浑成，犹如从心底一涌而出的清泉，清澈醇美，令人回味不尽。
“寻春遇艳”和“重寻不遇”是可以写成叙事诗的。作者没有这样写，正说明唐人更习惯于以抒情诗人的眼光、感情来感受生活中的情事。