诗中露面的人物，仅有诗人一人，他正从一家花园的高墙下经过，尽管墙头的花朵半隐半现，却依然望见了因枝条受到牵动而引起的悠悠的晃动。诗人由此驰骋想象，他推测在墙的那一边，正有一位美人在摘花，而不只是由风吹的缘故。
此诗从第一句到第二句，一进一退。第一句是一个省去“尽管”或“突然”的让步副句，在文势上作一顿挫；第二句是一个省去“尽管”或“虽然”的让步副句，在文势上作一顿挫；第二句以副词“犹”字反接进行强调，文势振起。诗歌形象由“花半隐”的静态描绘随即转换成“动花枝”的动态描写。视觉形象上的这一跌宕变化，引起诗人心中的疑虑与猜想。故后两句由料想之词“当”字引出。诗人判断止于疑是之间，“当由”与“讵止”（岂只之意）一呼一应，情韵回萦，意味绵长。事实上，是否真的有美人在摘花呢？倒也未必。然而诗人想象如此，希望如此，即使读者也无不但愿生活中有过这样一个小小的插曲，在大墙内外曾经发生过如此戏剧性的一幕。
此诗不仅自身值得玩味，且对后世亦有所影响。《西厢记》写莺莺为约会张生，写了一首很有名的《明月三五诗》：“待月西厢下，迎风户半开；拂墙花影动，疑是玉人来。”后两句就可能受到刘孝威的这首《望隔墙花》的启发。苏轼的《蝶恋花·花褪残红青杏小》中写“墙里秋千墙外道。墙外行人,墙里佳人笑。笑渐不闻声渐悄，多情却被无情恼”，从墙里与墙外进行构想，或许也曾借鉴过此诗的思路。
这是一首触景写情之作．细腻动人。前半首写室外勾画了一幅凄清的场景。后半首转入室内，掩紧屏风熏炉中的香早已燃成灰烬，不见一丝温暖。这一切，无不透着凄冷之意。而看花之人此时无言胜有言，是对柔弱之花被摧折的叹息，是对自身命运不能由自己掌握的悲哀。
这首小词结构层次分明，井井有条地描摹出了一幅画面。先写室外，再写室内，最后点到愁怨之人。本篇虽短小精悍，但却层层深入，极见情味。纳兰长于小令，由此篇亦可见一斑。一开始便发问：何时下起了这么大的雨？把屋檐下的花儿都淋湿了。那个惜花之人默默地看着那些被风雨摧残的。
此词或可视为纳兰对自身处境的一个婉曲表达，从中可见词人内心的悲凉。