诗中露面的人物，仅有诗人一人，他正从一家花园的高墙下经过，尽管墙头的花朵半隐半现，却依然望见了因枝条受到牵动而引起的悠悠的晃动。诗人由此驰骋想象，他推测在墙的那一边，正有一位美人在摘花，而不只是由风吹的缘故。
此诗从第一句到第二句，一进一退。第一句是一个省去“尽管”或“突然”的让步副句，在文势上作一顿挫；第二句是一个省去“尽管”或“虽然”的让步副句，在文势上作一顿挫；第二句以副词“犹”字反接进行强调，文势振起。诗歌形象由“花半隐”的静态描绘随即转换成“动花枝”的动态描写。视觉形象上的这一跌宕变化，引起诗人心中的疑虑与猜想。故后两句由料想之词“当”字引出。诗人判断止于疑是之间，“当由”与“讵止”（岂只之意）一呼一应，情韵回萦，意味绵长。事实上，是否真的有美人在摘花呢？倒也未必。然而诗人想象如此，希望如此，即使读者也无不但愿生活中有过这样一个小小的插曲，在大墙内外曾经发生过如此戏剧性的一幕。
此诗不仅自身值得玩味，且对后世亦有所影响。《西厢记》写莺莺为约会张生，写了一首很有名的《明月三五诗》：“待月西厢下，迎风户半开；拂墙花影动，疑是玉人来。”后两句就可能受到刘孝威的这首《望隔墙花》的启发。苏轼的《蝶恋花·花褪残红青杏小》中写“墙里秋千墙外道。墙外行人,墙里佳人笑。笑渐不闻声渐悄，多情却被无情恼”，从墙里与墙外进行构想，或许也曾借鉴过此诗的思路。
此诗抒发了作者虽仕途受阻，遭到一些人的谗伤，但并不气馁，反而鄙视和嘲笑谗佞的小人的坚定胸怀，充分地体现了作者青年时期的高远抱负和奋发精神。全诗语言含蓄犀利，痛快沉着，用典工丽典雅，极富神韵。颈联两句写平生抱负，笔力遒劲，境界阔大，意味深长，是历来广为传诵的名句。
“迢递高城百尺楼，绿杨枝外尽汀洲。”二句登楼即景：登上高耸百尺的安定城楼，远处绿杨树边的洲渚尽收眼底。按泾州城东有“美女湫”广袤数里（见《太平广记》），汀洲殆指其地。登最高之楼；望最远之处，高瞻远瞩，气象万千。即景所以生情，以下六句的豪情壮志、无穷感慨都由此生发。
“贾生年少虚垂泪，王粲春来更远游。”句先以两位古人自比。贾谊献策之日，王粲作赋之年，都与作者一般年轻。贾谊上《治安策》，不为汉文帝所采纳，因《治安策》开头有“臣窃惟事势，可为痛哭者一”之语，故谓“虚垂涕”；作者应博学宏词科试而名落孙山，其心境与贾谊上书未售，同样萦纡抑郁。王粲避乱至荆州，依刘表；作者赴泾州，入王茂元幕，都属寄人篱下。用两位古人的古事，比自己当前的处境和心情，取拟于伦，十分贴切。这是第一层。
“永忆江湖归白发，欲回天地入扁舟。”句抒露志趣和抱负。作者的遭遇虽然困顿，可是他的凌云之志，未稍减损。江湖、扁舟乃使用春秋时代范蠡的典故；范蠡佐越王勾践，“既雪会稽之耻”，“乃乘扁舟，浮于江湖”（见《史记·货殖列传》）。意谓，自己早有归隐江湖之志，但等回天撼地之日，旋乾转坤之时，头飘白发，身入扁舟。永忆江湖，即怀淡于名利之心；欲回天地，即抱建立功业之志。两者似相反，实相成。因为如果没有永忆江湖的志趣，便成为争名逐利的禄蠹巧宦，就不会有欲回天地的宏愿。在这里，这个“永”字下得很好，这个字，有力地表达作者毕生的抱负。
这两句诗，既洒脱，又遒劲。从诗的表达形式着眼，锤字坚实，结响凝固，工力固颇近杜诗；而更为关键的，这两句诗反映了封建社会里才志之士的积极向上思想，既怀着恬淡的心情，又有担当事业的志气，这与杜甫的胸襟怀抱，极为相似，因为王安石也从这两句诗中照到自己的影子，所以击节称赏。这是第二层。
“不知腐鼠成滋味，猜意鹓雏竟未休。”句借庄子寓言表示自己敝履功名利禄，正告他人不要妄加猜测。寓言谓：惠施相梁，生怕庄子争夺他的相位，百般防范，惟恐不周。于是庄子去见惠施，坦率地对他说；鵷鶵（传说中与凤凰同类的鸟，庄子自比）非练实不食，非醴泉不饮，从来不会把鸱（鹞鹰，比惠施）的腐鼠（比相位）当美味而希羡！（见《庄子·秋水》）意为，你的位置我一向不屑一顾，你切莫杞人忧天，自相惊扰。
这两句诗，既阐明自己没有患得患失的私心杂念，胸次光明磊落，淡泊宁静，为上面“永忆江湖”句提供有力的论证；又表示对世间一切恶浊事物，睥睨蔑视，决不妥协容忍；还尖锐地批判那些捧住权位不放的禄蠹，对他们尽调侃奚落的能事。据近人张采田《玉溪生年谱会笺》，作者应博学宏词试被摈，是由于牛党的打击，诚如是，这时句诗乃是有的放矢的。这是第三层。
这首诗，笔力健举：风骨清峻，结构严谨，而语句灵活变化，特别在使用典故方面，非常成功。由于贾谊、王粲的身世遭遇与作者有相似之处，抓住相似的典型事例——贾生垂涕、王粲远游，比拟自己的忧时羁旅之感，若合符券，而使一位奋发有为又遭受压抑的少年志士形象跃然纸上。复次，作者的曲曲心事，本不可能用片言只字表达出来，现在借助庄子寓言，不但足以表露他不汲汲于荣利的狷介品质，又反映他睥睨一切的精神状态，还反击了政敌的恶意中伤，如此用典，既灵活，又确切，既含蓄，又锐利，充分发挥了典故的功能。
这篇文章对在故乡相州起兵和以往战况略作回顾后，自感只是“快国仇之万一”，又简述了这次建康之战。在末段，表达了“蓄锐待敌”、“功期再战”、洗雪国耻、收复中原的决心，是全文的中心所在。全文洋着高昂的爱国激情和忠愤之气，感人至深，语气刚峻，句句铿锵，斩钉截铁，一气贯通。
“自中原板荡，夷狄交侵”，开头以九个字交待了时代的大背景。“板荡”用典，形容天下大乱，局势动荡。自“靖康之变”后，中原大乱，半壁江山仍岌岌可危，金人多次进军试图将大宋彻底覆灭，此时正处于一个国家和民族危亡的“乱世”关头。
紧接着作者叙遭“余发愤河朔，起自相台，总发从戎，历二百余战。虽未能远入夷荒，洗荡巢穴，亦且快国雠之万一。”唐太宗《赐萧璃》诗云：“疾风知劲草，板荡识诚臣。勇夫安识义，智者必怀仁。”河朔的陷落激起了作者“板荡识诚臣”的一腔热血。他少年时便发愤而起，毅然从军，此后数年间经历两百多次战斗。岳飞戎马一生正是他少年立志杀敌雪耻的最好验证。
作者曾作词《满江红》，“总发从军，历二百余战”可与词中“三十功名尘与土，八千里路云和月”交相辉映。在这一段中，岳飞已向“神明”告白自己从小为国征战的夙愿，为后文的立誓作了铺垫。
承前“快国仇之万一”而叙现在：“今又提一旅孤军，振起宜兴。”今次提孤立之师，振奋而起，冲锋陷阵，击杀敌虏，出语如利刃长鞭般气势强锐。金兵南侵时，岳飞率军在广德、宜兴一带接连袭击金兵，取得一次次胜利。“振起宜兴”一句气壮山河，是战斗胜利的写照。
紧接着，“建康之役，一鼓败虏，恨未能使匹马不回耳”。“一鼓败虏”，第一通鼓就将敌人击败，喻明了士气极其高涨、锐不可当；“恨未能使匹马不回耳”既表明了要全歼敌人、洗荡敌巢的雄心壮志，又带有此次战役未能全歼敌军的惋惜。这一段对当前局势作了叙述，为下一段的誓词进一步作铺陈。
“故且养兵休卒，蓄锐待敌”句是叙述的承转。后面誓盟的主文可分为两层来理解。其一是要激励士兵在未来的大战中将敌军彻底打败，向北越过沙漠，杀入胡虏的老巢，把夷人全部消灭。第二层意思是迎接徽、钦两位皇帝回京，收复被侵占的土地，解除朝廷忧虑，使天下归于太平。这一段对“神明”所立的誓言，发自于心，殷殷切切，言之凿凿，滔滔汩汩，一泻而下。这是岳飞当时在五岳祠从血管里喷出的誓言，也是他毕生的宏图大愿，充分表现了一位义烈的爱国英雄强烈的爱国精神和以天下为己任的豪情壮志，令人钦佩之至。
此文篇幅虽小，但内涵丰厚，作者少年从军怀志百战，而今大胜后雄心大起，日后杀敌复国的壮志全都凝结在这短短的盟言里。他热血满腔，慷慨激昂，内心的激越奔涌而出，体现在文字上则感情充沛，语气刚峻，句句铿锵，斩钉截铁，一气贯通。读此《五岳祠盟记》令人想起他的另一诗篇《驻兵新淦题伏魔寺壁》：“雄气堂堂贯斗牛，誓将直节报君仇。斩除顽恶还车驾，不问登坛万户侯。”作者杀敌报国的英雄之气真可谓长贯斗牛。