前四句写早行所感。起早赶路，诗人没有明说早到什么时候，他只说自己上马启程以后，无力地垂着马鞭，而让马自己自由地前进；走过了数里，在这么长的时间里，还未听见鸡鸣。“林下带残梦”使人意会到诗人是由梦乡中被唤起来上路的。以致出发以后，依然梦思缕缕，睡意绵绵，足见其赶路之早。“叶飞时忽惊”，是对上一句诗的承接和申述，进一步强调出“早行”来。“林下”和“叶飞”互文，只有在林下路过，才会被落叶所惊醒。这就把行旅者早行时的情景，十分真切地描摹了出来。
第五、六句是诗人通过自己身处的环境来写早行。“霜凝孤鹤迥，月晓远山横”正反映出晚唐时期动乱的社会现实中，诗人早行时的心理状态。此刻天时尚早，天宇大地还笼罩于一片迷蒙的夜色之中。这种情景，对于一个野旅行役者来说，是会产生一种孤独寂寞之感的。前路漫漫，思绪纷乱，各种各样的操心也就油然而生。“孤鹤”与其说是真实之景，还不如说是作者的自况。诗人的心绪不宁、心神不定，不言而喻。因此，这两句诗明显地表达出诗人早行时的那种特有的悲怆、孤度寂莫的心理感受。至此，早行时的凄清气氛、早行者的孤苦情绪，情景交融地表现了出来。
后两句写作者和僮仆的交流和行为。“僮仆休辞险”，当僮仆抱怨路途艰险，漫漫无际的时候，作者回答说“时平路复平”，当然，此“平”非彼“平”，作者结尾用这种与僮仆之间近乎玩笑般的对话作结，也正反映出了自己对于时局的忧虑和担忧。作为晚唐的一位诗人，杜牧对于晚唐的时局有着较为深切的了解和关切，他的许多诗歌反映了这方面的内容。
诗人首联扣题，抒情写景：“高楼”，指咸阳城西楼，咸阳旧城在西安市西北，汉时称长安，秦汉两朝在此建都。隋朝时向东南移二十城建新城，即唐京师长安。咸阳旧城隔渭水与长安相望；“蒹葭”，即芦荻（蒹，荻；葭，芦），暗用《诗经·国风·秦风·蒹葭》的诗意，表思念心绪；“汀洲”，水边之地为汀、水中之地为洲，这里指代诗人在江南的故乡。诗人一登上咸阳高高的城楼，向南望去，远处烟笼蒹葭，雾罩杨柳，很像长江中的汀洲。诗人游宦长安，远离家乡，一旦登临，思乡之情涌上心头。蒹葭杨柳，居然略类江南。万里之愁，正以乡思为始：“一上”表明触发诗人情感时间之短瞬，“万里”则极言愁思空间之迢遥广大，一个“愁”字，奠定了全诗的基调。笔触低沉，景致凄迷，触景生情，苍凉伤感的情怀落笔即出，意远而势雄。
“溪云初起日沉阁，山雨欲来风满楼。”中“溪”指磻溪，“阁”指慈福寺，诗人有自注：“南近磻溪，西对慈福寺阁。” 诗人傍晚登上城楼，只见磻溪罩云，暮色苍茫，一轮红日渐薄远山，夕阳与慈福寺阁姿影相叠，仿佛靠近寺阁而落。就在这夕照图初展丽景之际，蓦然凉风突起，咸阳西楼顿时沐浴在凄风之中，一场山雨眼看就要到了。这是对自然景物的临摹，也是对唐王朝日薄西山，危机四伏的没落局势的形象化勾画，它淋漓尽致而又形象入神地传出了诗人“万里愁”的真实原因。云起日沉，雨来风满，动感分明；“风为雨头”，含蕴深刻。此联常用来比喻重大事件发生前的紧张气氛，是千古传咏的名句。
“鸟下绿芜秦苑夕，蝉鸣黄叶汉宫秋。”写晚眺近景，虚实结合：山雨将到，鸟雀仓惶逃入遍地绿芜、秋蝉悲鸣躲在黄叶高林，这些是诗人眼前的实景。但早已荡然无存的“秦苑”“汉宫”又给人无尽的联想——禁苑深宫，而今绿芜遍地，黄叶满林；唯有鸟雀和虫鸣，不识兴亡，依然如故。历史的演进，王朝的更替，世事的变化沧桑，把诗人的愁怨从“万里”推向“千古”，以实景叠合虚景，吊古之情油然而生。
“行人莫问当年事，故国东来渭水流。”作结，融情于景：“行人”，过客。泛指古往今来征人游子，也包括作者在内；“故国”，指秦汉故都咸阳；“东来”，指诗人（不是渭水）自东边而来。诗人最后感慨道：羁旅过客还是不要索问当年秦汉兴亡之事吧！我这次来故国咸阳，连遗址都寻不着，只有渭水还像昔日一样长流不止而已。“莫问”二字，并非劝诫之辞 ，实乃令人思索之语，它让读者从悲凉颓败的自然景物中钩沉历史的教训；一个“流”字，则暗示出颓势难救的痛惜之情。渭水无语东流的景象中，融铸着诗人相思的忧愁和感古伤今的悲凉，委婉含蓄，令人伤感。
此诗用云、日、风、雨层层推进，又以绿芜、黄叶来渲染，勾勒出一个萧条凄凉的意境，借秦苑、汉宫的荒废，抒发了对家国衰败的无限感慨。全诗情景交融，景中寓情，诗人通过对景物的描写，赋予抽象的感情以形体，在呈现自然之景的同时又体现丰富的生活经验，以及对历史和现实的深刻思考。景别致而凄美，情愁苦而悲怆，意蕴藉而苍凉，境雄阔而高远，神完气足，为唐人登临诗篇之佳作。
