首联写韦处士郊居庭院景物，起句描写整个庭院满是飘飞飘落的红叶，将深秋庭院装点得色彩绚丽、纹饰斑斓，极富诗情画境。所以，诗人以“诗境”二字赞叹共庭院之奇景妙境，虽然抽象，但却绝佳，堪称微妙夺神。而韦处士并不去清扫地面的红叶，顺其自然，一任红叶飘落，表现出韦处士喜爱、欣赏自然野趣的兴致。次句写韦处士室内弹琴，那清泠的琴声在庭院台阶间缭绕回旋，从琴声流荡之间，不时地从暗处传出泉水滴答的声响，琴声有暗泉的泉水滴答声响陪伴，汇成自然美妙的音韵和旋律。古代弹奏琴声，多有觅求知音的寓意。此处，写琴声有暗泉相伴，暗示出韦处士以自然天籁为知音的自得其乐的清高。
次联写韦处士郊居门外的景物。三句写门外正是秋晚黄昏晴好的天气，放眼望去，满目秋色，一个“老”字，点染出秋色的苍翠浓深。末句以“寒玉”、“溪烟”之意象描摹秋色之“老”。“寒玉”，一般形容清冽雅洁的物象，如水、月、竹。此诗“万条寒玉”，是形容、描摹韦处士门外生长了茂密的苍翠挺拔的青竹，好像万条寒洌的碧玉清高地耸立于尘世。“一溪烟”，是写韦处士门外临近一条溪流，那溪流从万条寒玉之间穿过，水面上飘浮着如烟似雾的潆漾水气，更烘衬出韦处士郊居的清幽、雅洁，特别是“寒玉”意象更具隐喻意味，似乎衬托并象征着韦处士的人格与精神。全诗一句一景，按照“满庭”与“门外”两截描摹，借境写入，见境知人，耐人寻味。
这首七绝以韵取胜，妙在如淡墨一点，而四围皆到。诗人把自己的感情密含在风景的描写中，并不明白说出，却能给人以深至的回味。
一、二两句描写水陆风光，再现诗人风尘仆仆的身影和暗淡凄迷的心态。山路蜿蜒，落木萧萧，秋雨纷纷；溪水伸展，秋风浙浙，波摇草动：山程水驿，风雨凄迷，字里行间流露出人行秋风的寒凉心态和冷寂情绪。“萧萧”描落叶纷飞之状，暗含秋风无情、寒意萧疏，枯黄了行人的口光，遮蔽了蜿蜒的山路。“淅淅”状秋风飒飒之态，泛起波光，掀动菖蒲，暗含诗人行舟水、漂泊无依之感。“穷秋”助长寒凉，平添空旷；“一岸”铺展水草，点染秋风。整体而言，诗人善于观察，精于描绘，于细微处传精神，于平淡中显韵致。山路秋雨，风吹草动，叶落江流，这些寻常景物，被诗人用“萧萧”点染，用“浙浙”润饰，立刻营造一种寒凉凄清氛围，烘托奔波劳顿之苦，有声有色之感。当然，诗人笔下的风景从来都不是纯粹自然的描写，自然的风景其实是心灵风景的折射。一、二两句采用对起之格，这在绝句中是不多的。它这样用是为了排比刷色，增强景物的描绘性。寥寥几笔，就把山程水驿、风雨凄迷的行旅图画生动地勾勒出来了。起句对仗，在绝句里宜活脱而不板滞，像“两个黄鹂鸣翠柳，一行白鹭上青天”（杜甫《绝句四首》），虽然色彩鲜活，却迹近合掌，不是当行的家数。这里却不同，它笔势夭矫，如珠走盘，有自然流转之致。
绝句讲究出神奇于百炼，起别趣于寸心，要能曲折回环，穷极变化。这首诗的头两句在外围刷色，展示出一幅风雨凄其的画面。为了下一步发展、深入、掀起感情的漩涡，诗人把目光转向了飞落寒汀的鸿雁，三、四两句以虚间实，故设一问，陡然地翻起波澜，可谓笔力奇横，妙到毫颠。从构思方面说，它意味着：第一，沿着飞鸿的来路，人们的思想从眼前的实景延伸到遥远的天边，扩展了诗的画面；第二，问及禽鸟，痴作一喻，显见出旅程的孤独与岑寂来；第三，寄情归雁，反衬出诗人有家归不得的流离之苦。这些意蕴没有直接说出，而是寓情于景，令人于恬吟密咏中体味而得。有不着一字，尽得风流的妙趣。第三句转折得好，第四句就如顺水下船一样，自然凑泊，有着无限的风致。点出“杜陵”，是因为诗人朝夕难忘的老家——樊川，就在那里。“来时还下杜陵无？”轻声一问，就把作者对故乡、对亲人的怀念，就把他宦途的枨触、羁旅的愁思，宛转深致地表现出来了。
“樊南别有清秋思，不为斜阳不为蝉。”透过景物的描写，蕴藉而含蓄地抒写怀抱，表现情思，这是杜牧绝句的擅胜之处。徐献忠云：“牧之诗含思悲凄，流情感慨，抑扬顿挫之节，尤其所长。”（《唐音癸签》卷八引）持较此诗，可谓刌度皆合了。
李贺当时住在长安崇义里，曾写了首《崇义里滞雨》，表达了壮志成空，愁恨不已之心情，加上穷困孤独，自己的心境也像是阴暗的里巷和淅沥不断的秋雨一样。这很能反映他担任奉礼郎时的处境和心境，与《始为奉礼忆昌谷山居》所要抒发和表达的情感相近。只不过后者更强调家山的美好和对故乡的怀念。诗人将昔日在家山品茶饮酒的悠闲自在景与眼前退衙回来闭门独坐的孤独以及“鹤病悔游秦”的病痛相互比照，旨在强调身在仕途无法实现理想抱负的喟叹。失落加上乡愁，更增添几分愁苦，也更加深了诗人对故乡的怀念。
诗题中提到的“昌谷山居”即是诗人的故乡所在地。昌谷，位于今洛阳西南宜阳县境内。今日的宜阳，显得偏僻和贫穷，但在隋唐时期，此地则是江淮粮赋陆路和漕运的重要中转站。其中李贺居家的三乡驿（今名三乡乡），是当时从洛阳通往长安大道上的一座重要驿站。为唐代诸帝东巡必经之地，在此建有连昌宫、兰昌宫等行宫，武则天、唐玄宗都曾在此驻跸，其中的连昌宫更因元稹的《连昌宫词》而闻名千古。
此诗的前半首，扣住“始为奉礼”行笔，总写居官羁旅无聊之情状。“扫断”、“雅回”两句，叙述官职卑微，门庭冷落；“长枪”、“小树”两句，写江米煮熟，食馔简单，除枣花外，室无珍玩。这四句，全无半点寒酸气却道尽窘迫。即是小官，又全无半点迎逢心思，自是门可罗雀；回到家里自己动手关门，没有仆人书童；特意说出煮的是江米，或许是在暗示除此之外别无其它；至于小树枣花，那不过是平凡窄小的院落里一棵普通的树罢了。如此这般，一个异地为官生活勉强郁郁不得志的年轻人形象跃然纸上。“向壁”、“当帘”两句，写闲对如意、角巾，言外寄托“归欤”之意。
诗的后半首，转而写题上“忆昌谷山居”之意。忆家，故作家书，以付黄犬；忆亲人，因妻病而追悔至京求仕。“土甑封茶叶，山杯锁竹根”，可见主人不在；“不知船上月，谁棹满溪云”，月夜又有谁在船上摇荡着满溪的云影？用反诘句收结，意想飞驰，巧妙表现出“忆”的风韵，“末二尤得忆家神理”（《协律钩玄》卷一引董伯音语）。
李贺很少用律体写诗，《始为奉礼忆昌谷山居》却用五言长律写成，诗韵用上平声十一真、十二文、十三元通押，很有特色。