此诗开头八句，作者诉说自己政治上“穷拙”的遭际。在“只今道已塞”的景况下，他日暮饮酒，酷爱诵读《楞伽经》和《楚辞》，以排遣内心的苦闷。他已看破官场的黑暗内幕，仕进的前途已经被阻塞，所以产生了“心已朽”的心态。这时他已二十一二岁，诗云“二十”，当为约数。“人生”两句，表达了很深的人生感叹。
第九句至第十六句，写陈商的景况。先形容他寒酸落拓，穿着布衣，雅尚礼仪，他不肯追逐时尚，苦学古文辞，不像时人追求委靡的骈偶文风。次叙他的家很少有人来访，门庭冷落，连车轮的印迹都冻结起来，门前的榆树在夕阳照射下拖着瘦长的影子。这里，写景凄凉，与前文写人“凄凄”相呼应。黄昏时节来寻访作者，固守苦节，春气亦为之郁结不畅。以上八句诗，描述陈商的形貌、品格及其遭际。
第十七句至第二十四句，称颂陈商的品格并表示师法陈商的心意。前四句写华山之高峻，用暗喻手法，比喻陈商人品、才学之崇高。后四句，说公卿们纵使不看重陈商，作者也不能禁口不称赞，他还要师法陈商，宁愿终日箕踞长坐，也不肯奔走权贵之门。诗句生动地表达出作者钦佩陈商的心仪和景行仰止的态度。
第二十五句至第三十二句，诗思又回到自己身上。“朴樕”两句，是自谦之词，承上言，作者才不及陈商，不论何时，都不能成材。“礼节”以下六句，说到作者官职卑微，身为奉礼郎，专司礼仪，与作者的性格相背悖，形容憔悴，如同祭祀后被人抛在路边的刍狗。风雪天在斋坛值班，身穿黑色祭服，神气态度犹如承事箕帚的奴婢。诗句备述作者任职时所受的屈辱。
诗的最后两句，巧妙运用古小说的典故，表达出宏大的志愿。这层诗意，涵盖陈商和作者两人，说何时天眼张开，他们像古剑那样鸣吼而飞去，施展自己的抱负。李贺诗中，“剑飞”“剑吼”之意象屡见，如“自言汉剑当飞去”（《出城寄权璩杨敬之》），“临岐击剑生铜吼”（《开愁歌》），此诗又云“剑吼”，都有自喻之意，期望实现理想，具有画龙点睛之妙。
全诗先分别写李贺、陈商，后写李贺师法陈商，再写李贺直斋坛的情景，各用齐整的八句诗为一个诗段，最后两句，以两人同时收结，形成单起双收的结构特征，自始至终将诗人和陈商交糅起来描写，写李贺，其中有陈商的神骨；写陈商，其中有李贺的气质，完善地创造出诗篇的结构美。
此诗共二章，每章九句。前后两章共用了四个比喻，语言也相似，只是押韵不同。关于诗的主题，有几种不同的说法。《毛诗序》认为是“诲（周）宣王也”，郑笺补充说：“诲，教也，教宣王求贤人之未仕者。”王先谦《诗三家义集疏》举例证明鲁诗、齐诗、韩诗都与毛诗观点一致。到了宋代朱熹《诗集传》则说：“此诗之作，不可知其所由，然必陈善纳诲之辞也。”认为这是一篇意在劝人为善的作品。今人程俊英在《诗经译注》祖毛、郑旧说而加以发展，说：“这是一首通篇用借喻的手法，抒发招致人才为国所用的主张的诗，亦可称为‘招隐诗’。”这种说法较易为今人所理解。
先谈朱熹的说法。他分析第一章说：“盖鹤鸣于九皋，而声闻于野，言诚之不可揜（掩）也；鱼潜在渊，而或在于渚，言理之无定在也；园有树檀，而其下维萚，言爱当知其恶也；他山之石，而可以为错，言憎当知其善也。由是四者引而伸之，触类而长之，天下之理，其庶几乎？”他将诗中四个比喻，概括为四种思想：即诚、理、爱、憎。并认为从这四者引申出去，可以作为“天下之理”——即普遍真理。他的说法看起来很辩证，都是用发展的变化的观点分析问题，而且兼顾一个问题的两个方面；然而他却是用程朱理学来说诗，这一点从他对第二章的解释中看得更加清楚。
《诗集传》释第二章结句引程子曰：“玉之温润，天下之至美也。石之粗厉，天下之至恶也。然两玉相磨，不可以成器，以石磨之，然后玉之为器，得以成焉。犹君子之与小人处也，横逆侵加，然后修省畏避，动心忍性，增益预防，而义理生焉，道理成焉。”程子说诗与朱子说诗，如出一辙，皆为引申之词。“他山之石，可以攻玉”，就字面而言，就是另一座山上的石头，可以用来磨制玉器，今人也常常引以为喻。然而是否为诗的本义呢，似乎很难说。
再谈今人程俊英关于此诗的解释。程先生在《诗经译注》中说：“诗中以鹤比隐居的贤人。”“诗人以鱼在渊在渚，比贤人隐居或出仕。”“园，花园。隐喻国家。”“树檀，檀树，比贤人。”“萚，枯落的枝叶，比小人。”“它山之石，指别国的贤人。”“毛传：‘榖，恶木也。’喻小人。”她从“招隐诗”这一主题出发，将诗中所有比喻都一一与人事挂钩，虽不无牵强附会，倒也自成一说。
其实，就诗论诗，不妨认为这是一首即景抒情小诗。在广袤的荒野里，诗人听到鹤鸣之声，震动四野，高入云霄；然后看到游鱼一会儿潜入深渊，一会儿又跃上滩头。再向前看，只见一座园林，长着高大的檀树，檀树之下，堆着一层枯枝败叶。园林近旁，又有一座怪石嶙峋的山峰，诗人因而想到这山上的石头，可以取作磨砺玉器的工具。诗中从听觉写到视觉，写到心中所感所思，一条意脉贯串全篇，结构十分完整，从而形成一幅远古诗人漫游荒野的图画。这幅图画中有色有声，有情有景，因而也充满了诗意，读之不免令人产生思古之幽情。如此读诗，读者便会受到诗的艺术感染，产生无穷兴趣。若刻意求深，强作解人，未免有高深莫测之感。
1671年（康熙十年）徐渭文去南京，陈维崧有赠序，嘱咐他一访“畸人而隐于绘事者”，也即心怀兴亡之痛的隐逸之流。徐自南京归，成《钟山梅花图》，阳羡词人从不同角度、以不同词调题咏殆遍，形成一次相当独特的凭吊故国的联吟酬唱格局。个中迦陵此篇尤为翘楚，被前人誉为“情词兼胜，骨韵都高，几合苏、辛、周、姜为一手”（陈廷焯《白雨斋词话》卷三）。
从“意”的大处看，则其中蕴涵着极其复杂的遗民心绪。诸如“一夜啼乌，落花有恨”的哀思、对“珠珰贵戚，玉佩公卿”们“十四楼中乐太平”的误国行径的怨慨，以至“寻去疑无，看来似梦”的泪眼愁看，皆是遗民群体“孤臣孽子”感情的披露。悲凉、幻灭、欲哭无泪、欲隐无地，凡此种种尽包蕴于清丽词藻之间，令人不由黯然神伤。
阳羡词人借徐渭文此图遥祭故国，所拈者为“大题目”，寄寓者为“大意义”（谢章铤语）。在清朝初年，因此种民族情绪而遭致诛杀惨祸者不知凡几，故而，“一幅生绡泪写成”的悲凄后面其实隐藏着凶险的刀光剑影和这一词群非凡的胆力和勇气。
这首诗作于江淹被贬为建安吴兴令期间。黄蘖山的地点据旧注说在“吴兴府城”（今浙江吴兴）附近，这不足为信。因为诗中称“闽云连越边”，是在今福建和浙江交界之地，而吴兴则在江浙二省交界处，古人称之为“吴地”，与诗的地望不符。按：《宋书·谢方明传》记谢方明在东晋末孙恩、卢循起义中，从浙东取道“黄蘖峤”经今江西一带，逃到建康。可见“黄蘖峤”在今闽浙赣三省交界处，这地方离江淹被贬的建安吴兴（今福建浦城）不远。此诗当是被贬在建安吴兴后作。此诗写作时间，当比《渡泉峤道出诸山之顶》、《迁阳亭》诸作稍晚。这时他的心情已较迁谪之初稍为平静，所以不像那些诗有明显的怨愤之情而倾向于游仙诗的情调。
江淹的诗风在南朝比较特殊，他的诗一般较具古气，和谢朓、沈约为代表的永明诗人不同。但较之刘宋初年的谢灵运、颜延之又显得略见平易。但他有一些写景诗则用了一些古奥的辞语，似与谢灵运、鲍照等人相近。这首《游黄蘖山》亦属此类。诗中“残杌千代木，廧崒万古烟”二句就很古奥费解。“残杌”当指枝叶已尽的枯树干，“廧崒”据余冠英先生说：“疑‘廧’作‘崷’，‘崷崒’，高峻貌”（《汉魏六朝诗选》）。这两句是借此形容黄蘖山是一个人迹罕到的险僻幽静之地。从全诗看来，作者是到了一个高峻的深山之中，为那里的景色所打动而兴起了求仙的想法。在诗中，作者以形象的语言写出了山势的险峻：“金峰各亏日，铜石共临天”，这“金”、“铜”都是形容南方闽、赣诸省山区的红黄色土壤，“金峰亏日”、“铜石临天”无非形容山石的高峻。“阳岫”、“阴溪”则写面临日光的山峰和背阴的溪谷。山峰在日光下五色缤纷，而溪谷中又有泉水喷流，这一景色也引人入胜。“残杌”两句既写出了这里的偏僻，因此“禽鸣”、“猿啸”二句更突出了深山的特点。这两句诗原是化用鲍照《登庐山望石门》中的“鸡鸣清涧中，猿啸白云里”二句。但江淹这两句所展现的景色与鲍诗颇为不同。“鸡鸣清涧中”仍为人境，只是高山中才为猿猴所居的深山。因为这是庐山，而江淹所写的黄蘖山则不同，在当时，这里是人口稀少的深山。所以这两句诗虽有禽鸣、猿啸，却适见其僻静。正因为这黄蘖山是如此幽僻、险峻之处，就自然而然地给人以一种幻觉即这里是神仙出没之处。因为从西汉司马相如以来，人们总以为神仙是居“山泽间”的。因为想到神仙，作者又联想起了历史上秦皇、汉武这些曾热衷于求仙的帝王。作者说这些人“皆负雄豪威，弃剑为名山”，似乎这些威震一时的帝王尚且求仙，自己当然更有理由持这种观念了。
当然，秦皇、汉武求仙，到头来仍不免一死。求仙的无成，江淹当然不是不知道。他所以要求仙，和他早期的不得志有关。无可否认的是，在江淹的诗文中，有不少篇讲到过求仙，如《丹砂可学赋》、《赠炼丹法和殷长史》和《与交友论隐书》等。这是因为江淹在当时虽对仕途颇有企冀，但又备受压抑，颇知官场的险恶。特别是在建平王刘景素幕下，他深知景素的密谋，屡谏不听，未免产生悲观，而幻想在求仙中找寻解脱。这种情绪，早在贬官以前就有所表现，而谪居建安吴兴以后之作像《采石上菖蒲》等作，亦然如此。但当齐高帝萧道成掌握政权，并拔他为自己的参军，并委以重任之后，这种游仙之作就很少出现了。
江淹这首诗的风格，是继承了元嘉诗人颜延之、谢灵运“极貌写物”的传统，而且在写景时，又并有鲍照那种“不避险仄”的作风。所以风格显得还较古朴。但这种诗风发展到江淹已近尾声，到了齐代永明（483-493）年间，初开唐音的谢朓等人出来，诗风为之一变。于是就有了江淹“才尽”的故事。其实所谓“才尽”并非指他真的不能写作，而是他那种奇险古奥的诗体，已不再适合当时文坛的风气。当然，从江淹自身来说，入齐以后，他在仕途上日益显贵，不再呕心镂骨于文艺创作，也是一个重要原因。