首联写诗人在晚秋时节，冒着早晨的霜露，走在幽深的山谷之中，字里行间流泻出一种跋涉之苦。其实，诗人现实的生活道路也是如此。首句的“杪秋”本已点明季节，但作者却仍嫌不足，在句尾又以“霜露重重”加重笔墨，进一步渲染了秋之已深。次句的“幽”字，则是强调了诗人所行山谷远离市井，幽深僻静。
接着，具体写经荒村所见。厚厚的黄叶覆盖着小溪上的桥面，荒村唯有古树处处可见，寒天的野花，稀疏零落，大地更显得空旷。山谷深处的泉水声微流缓，水声时断时续，更衬出大地的寂静。几句诗，写尽了南谷秋色和荒村的荒僻景象，给人以衰败、寥落之感。
诗人处境险恶，眼前如此萧疏荒寂的景色，很自然地触动了他的身世之感。作者在《始得西山宴游记》中曾这样说道：“自余为僇人，居是州，恒惴栗。”他也想驱除胸中的郁闷。可是，今天南谷之行却没有使他得到“心凝形释，与万化冥合”的轻松，反而更加重了他的孤独落漠之感。诗最后写的“机心久已忘，何事晾麋鹿”，表面上的超脱放达之态，实际上却反映了欲遣愁绪而不能，从而愁上加愁的心境罢了。
全诗紧扣题目，以标题中的“荒”字笼盖全篇，使诗人笔下的画面，涂上了一层惨淡之色，霜露、幽谷、黄叶、溪桥、古木、寒花和幽泉，无一不在它的笼罩之下，因而有力地突出了荒村的特点；而这个特点，又处处不离“杪秋”这个季节，使景物都具有浓厚的时令特色。
诗人笔下的景色写得真实、自然，同时又处处渗透着诗人的主观情憬。诗人特有的心境与眼前寥落衰败的景象相互交融，达到了情景交融的艺术境界。
首联是单株牡丹的特写图。开头借用《典略》典故，以锦帷乍卷、容颜初露的卫夫人形容牡丹初放时的艳丽夺目含羞娇艳。次句用《说苑》典故，原典是鄂君举绣被拥越人，此谓“绣被犹堆越鄂君”，清人马位《秋窗随笔》及桂馥《札朴》已指出其为误用（桂谓当为“楚鄂君”）。诗人将牡丹的绿叶想象成鄂君的绣被，将牡丹花想象成绣被覆盖的越人，传神地描绘初开的牡丹花在绿叶的簇拥中鲜艳的风采。“犹堆”二字刻画花苞初盛时绿叶紧包的形状，与“初卷”相呼应。
颔联展示牡丹随风摇曳时的绰约丰姿。垂手、折越都是舞名，亦指舞姿。玉佩指舞女身上佩戴的玉制饰物；郁金裙指郁金草染色的裙。这两句以舞者翩翩起舞时垂手折越，佩饰翻动，长裙飘扬的轻盈姿态来作比喻，牡丹花叶在迎风起舞时起伏翻卷，摇曳多姿的形象。
前两联重在描绘牡丹静中的形态，颈联具体地描写了牡丹的色香。“石家蜡烛何曾剪”形容牡丹的颜色像燃烧着的大片烛火，却无须修剪烛芯。“何曾剪”西晋石崇豪奢至极，用蜡烛当柴，烛芯自不必剪。“荀令香炉可待熏”是说牡丹的芳香本自天生，岂待香炉熏烘。据说荀彧到人家，坐处三日香。旧时衣香皆由香炉熏成，荀令自然身香，所以说“可待熏”。
尾联写诗人陶醉于国色天香，恍惚梦见了巫山神女，盼望她传授一支生花彩笔，将思慕之情题写在这花叶上，寄给巫山神女。梦中传彩笔，典出《南史·江淹传》，这里反其意而用之，表明诗人心摇神荡的兴奋激动之情。
这首诗构思巧妙，借物比人，又以人拟物，借卫夫人、越人、贵家舞伎、石家燃烛、荀令香炉等故事描写牡丹花叶的风姿绰约、艳丽色彩和馥郁香味，使牡丹的情态毕现。最后诗人突发奇想，欲寄牡丹花叶于巫山神女。明写牡丹，暗颂佳人，一实一虚，别具一格，令人回味无穷。
诗的开头两句：“几年回首梦云关，此日重来两鬓斑。”表明别后几年，经常思念自己的友人，回首前尘，当年聚首的云关，还频频萦现在梦寐之间，那里的东峰，正是溥公栖息之所。而这次重逢，恰好还在云峰，重逢的喜悦是可想而知的。虽说时光流逝，自己的双鬓已经斑白，但能会见故人，也就是莫大的安慰了。接着申足前意：“点检梁间新岁月，招两台上旧溪山。”检点梁间的燕子，它们自去自来，已经经历了不少新的岁月，燕巢犹在，已是新筑的了。那台上所见的溪山，还像旧时一样，妩媚迎人，似乎和老友招两：“你们旧日的游踪，还存留在这儿哩！”这两句进一步写重逢的喜悦，溪山依然如画，燕语如迎敌人，岁月是消失了，却喜旧情还在。
五六两句，转进一层，写重逢以后谈论的内容：“三生漫说终无据，万法由来本自闲。”尽管佛家爱说三生（前生、今生、来生），溥公也不例外，但作者看来“三生”毕竟是无据的。所谓万法归根，实皆本于寂静。佛家主张寂灭，追求不生不灭的涅粲境界。道家则主张清静无为。而儒家主张万物皆备于我，反身而诚；主张居敬镇独。但归根结蒂，佛家、道家的宗旨，其由来只在于一个“闲”字。闲则静，静则百念皆空，神完志适。这和儒家重视人事，主张格物致知、居仁由义，在观点上也是迥然不同的。这两句说明作者和溥公，尽管是知交，但对哲学上的观点不妨各有见解。
结尾两句：“一笑支郎又相恼，新诗不落语言间。”作者知道上面“三生”、“万法”的说法，支郎必定不会同意，甚至还要相恼。诗句中以“又相恼”表示和溥公的解说，早有不同。又以“不落语言间”表示，之奉酬新诗的本意，只是表白自我的情志，真情所在，原是不落于语言之间的。这最后一句意思是说：新诗在语言之外，寓有深情。相逢一笑，溥公于“相恼”之外，当亦为重逢的喜悦，而欣然相谅吧。