这首词前的序前半篇写山阳之壮观，后半篇写游赏之快乐，然而末尾笔调突转：“凭虚怅望，因赋是阕。”原来，游赏之乐竟丝毫不能弥补词人心灵的悲伤。序末正是词篇的引子。
上片由小序”山行野吟”引发出词意，起句写自己带着酒意奔走，秋风满怀，形象地表现出“自适其适”的心绪。“草枯”句紧承首句，大得“天高恁鸟飞”的意趣。此二句极写天地之高旷，便见出词人之“凭虚怅望”，于是由景生情。“销魂”句在夕阳西沉的景况里油然生起离别情愫，极精辟地将情与景、人与宇宙融为一境。原来上二句所写天地之高旷，竟似容不下词人无限之惆怅。词意便很自然地折入到下片表现离恨别绪的抒写中去。起到上勾下连，承前启后的作用。下片用“恨”字绾带，过片二句对偶，写想象中之情人对己的刻骨相思。“恨入四弦”指恋人在琵琶之声里倾注进满怀幽怨，伊人在声中亦红颜渐老。何至言老。“思君令人老”，故老之一字，下得沉重。不仅写出伊人对自己相思成疾，亦写出自己对其相知之深，从对方的角度来刻画双方的情深意重和相思之苦，可见其爱情之内蕴原是极高雅亦极深厚。下句词人想象她在梦中相觅，然而山长水阔，天遥地远，纵然寻遍千百个驿站，也难寻到自己。歇拍唱出“何似莫匆匆”，表达了内心的深深悔意，悔恨当初不应该匆匆分袂，轻易放走意中人。下片词纯是刻划恋人的心态，诚挚深切。这都是词人想像出来的，假着恋人说出自己心头的情思，益见两人情关痛痒，心神系之。
全词整体构思颇见白石特色。序与词，上、下片，皆笔无虚设，一脉关联，而又层层翻进，实为浑然一体。序中极写游赏之适意，既引起词中无可排解的忧伤，又反衬忧伤之沉重。上片极写天地之高旷、夕阳之无极，实为下片所写相思之深远、伤心之无限造境。纵观全幅，序作引发之势，上片呈外向张势，下片呈内向敛势，虽是小令之作，亦极变化开阖之能事，此是尺小兴波之一法。
上阕“山寺微茫背夕曛”，如认为确有此山、确有此寺，而欲指某山、某寺以实之，则误矣。此词前片三句，但标举一崇高幽美而渺茫之境界耳。近代西洋文艺有所谓象征主义者，静安先生之作殆近之焉。我国旧诗旧词中，拟喻之作虽多，而象征之作则极少。所谓拟喻者，大别之约有三类：其一曰以物拟人，如吴文英《浣溪沙》词“落絮无声春堕泪，行云有影月含羞”，杜牧《赠别》诗“蜡烛有心还惜别，替人垂泪到天明”，是以物拟人者也：其二曰以物拟物，如东坡《永遇乐》词“明月如霜，好风如水”，端己《菩萨蛮》词“琵琶金翠羽，弦上黄莺语”，是以物拟物者也；其三曰以人托物，屈子《离骚》“何昔日之芳草兮，今直为此萧艾也”，骆宾王《在狱咏蝉》诗“露重飞难进，风多响易沉”，是以人托物者也。要之，此三种皆于虚拟之中仍不免写实之意也。至若其以假造之景象，表抽象之观念，以显示人生、宗教，或道德、哲学，某种深邃之义理者，则近于西洋之象征主义矣。此于古人之作中，颇难觅得例证。《珠玉词》之《浣溪沙》“满目山河空念远，落花风雨更伤春，不如怜取眼前人”，《六一词》之《玉楼春》“直须看尽洛城花，始共东风容易别”，殆近之矣。以其颇有人生哲理存乎其间也。然而此在晏、欧诸公，殆不过偶尔自然之流露，而非有心用意之作也。正如静安先生《人间词话》所云：“遽以此意解释诸词，恐为晏、欧诸公所不许也。”而静安先生之词，则思深意苦，故其所作多为有心用意之作。樊志厚《人间词甲稿序》云：“若夫观物之微、托兴之深，则又君诗词之特色。”此序人言是静安先生自作而托名樊志厚者，即使不然，而其序言亦必深为静安先生所印可者也。“山寺微茫”一起四字，便引人抬眼望向半天高处，显示一极崇高渺茫之境，复益之以“背夕曛”，乃更增加无限要渺幽微之感。黄仲则《都门秋思》有句云“夕阳劝客登楼去”，于四野苍茫之中，而举目遥见高峰层楼之上独留此一片夕阳，发出无限之诱惑，令人兴攀跻之念，故曰“劝客登楼去”，此一“劝”字固极妙也。静安词之“夕曛”，较仲则所云“夕阳”者其时间当更为晏晚，而其光色亦当更为黯淡，然其为诱惑，则或更有过之。常人贵远而贱近，每于其所愈不能知、愈不可得者，则其渴慕之心亦愈切。故静安先生不曰“对”夕曛，而曰“背夕曛”，乃益更增人之遐思幽想也。人于此尘杂烦乱之生活中，恍惚焉一瞥哲理之灵光，而此灵光又复渺远幽微如不可即，则其对人之诱惑为何如，静安先生盖尝深受西洋叔本华悲观哲学之影响，以为“生活之本质何，欲而已矣。欲之为性无厌。一欲既终，欲随之，故究竟之慰藉终不可得也。故人生者如钟表之摆，实往复于苦痛与倦厌之间者也。”锄静安先生既觉人生之苦痛如斯，是其研究哲学，盖欲于其中觅一解脱之道者也。然而静安先生在《静庵文集续编·自序二》中又云：“余疲于哲学有日矣。哲学上之说，大都可爱者不可信，可信者不可爱。知其可信而不能爱，觉其可爱而不能信，此近二三年中最大之烦闷。”然则是此哲理之灵光虽惚若可以瞥见，而终不可以求得者也。故曰：“鸟飞不到半山昏。”人力薄弱，竟可奈何，然而人对彼一境界之向往，彼一境界对人之吸引，仍在在足以动摇人心。有磬声焉，其音孤寂，而揭响遏云，入乎耳，动乎心，虽欲不向往，而其吸引之力有不可拒者焉，故曰“上方孤磐定行云”也。
于是而思试一攀跻之焉，因而下阕乃有“试上高峰窥皓月”之言。曰“试上”，则未曾真筒到达也可知；曰“窥”，则未曾真筒察见也可想。然则此一“试上”之间，有多少努力，多少苦痛。此又静安先生在《红楼梦评论》一文所云：“有能除去此二者（按指苦痛与倦厌），吾人谓之日快乐。然当其求快乐也，吾人于固有之苦痛外，又不得不加以努力，而努力亦苦痛之一也。且快乐之后，其感苦痛也弥深。故苦痛而无回复之快乐者有之矣，未有快乐而不先之或继之以苦痛者也。”（按：此实叔本华之说）是其“试上高峰”原思求解脱、求快乐，而其“试上”之努力固已为一种痛苦矣。且其痛苦尚不止此。盖吾辈凡人，固无时刻不为此尘网所牢笼，深溺于生活之大欲中，而不克自拔，亦正如静安先生在《红楼梦评论》中所云：“于解脱之途中，彼之生活之欲，犹时时起而与之相抗。”夫如是，固终不免于“偶开天眼觑红尘”也。已知其“偶开”必由此不能自己、不克自主之一念耳。陈鸿《长恨歌传》云：“由此一念，又不得居此，复堕下界，且结后缘。”而人生竞不能制此一念之动，则前所云“试上高峰”者，乃弥增人之艰辛痛苦之感矣。窃以为前一句之“窥”，有欲求见而未全得见之憾；后一句之“觑”，有欲求无见而不能不见之悲。而结之日“可怜身是眼中人”，彼“眼中人”者何，固此尘世大欲中扰扰攘攘、忧患劳苦之众生也。夫彼众生虽忧患劳苦，而彼辈春梦方酣，固不暇自哀。此譬若人死后之尸骸，其腐朽靡烂乃全不自知，而今乃有一尸骸焉，独具清醒未死之官能，自视其腐朽，自感其靡烂，则其悲哀痛苦，所以自哀而哀人者，其深切当如何耶，于是此“可怜身是眼中人”一句，乃真有令人不忍卒读者矣。
本首诗表达了诗人对綦毋潜弃官归隐做法的肯定，同时也流露出诗人在仕途上的不得意之情。全诗以“净、澄、清、明、淡”等语言上的冷色调合成了一种“单纯的静穆”，突出了自然界的清幽、静谧，诗中的景物呈现出一种和光一片、浑融无迹的特点，犹如一幅绝妙的水墨画，体现出“诗中有画”的特点。
开篇四句从感慨时遇写起，自己与友人一样都不被朝廷重用，瞬间就缩短了两人之间的距离，产生共鸣。但是诗人并未因怀才不遇而抱怨，而是乐天知命，“天命无怨色，人生有素风”两句实属巧妙，足见诗人开阔的胸襟。诗人虽然劝慰友人，自言要有坦荡的胸怀，但终不免流露不受重用之下的无奈之情，因此这几句的感情很复杂。
“念君拂衣去”以下八句，描绘了作者想象中的友人隐居之乐：秋色如水，天空明净，落日熔金，澄江开阔，在这江天一色的自然里，人的心绪也随之飘到了天之涯、江之头了；而到悠悠清夜明月当空之时，乘坐一叶扁舟，扣舷而歌，荡漾在如烟似雾的芦苇丛中，一切都是那么静谧，又闲适。这几句诗富于清淡之味，隽永之趣如花落香浮，月印水底，清空闲远，神韵超然，一切都已溶入那与大自然的如梦境般的晤谈之中了。
“无庸客昭世”至结尾八句，写出了作者所感所愿：双鬓已经斑白，心灵也很疲倦，帝王遥不可及，没有人愿意举荐我。不愿意在这种“昭世”中奔走了，不如与友人一同归隐田间，安心做一个耕种的老农。结尾既抒发了自己郁郁不得志的情感，又表现了对于友人归隐生涯的赞同与欣赏。看起来诗人似乎是扯远了，其实言远意近，还是围绕送别这一中心的。