诗的一开头点出登亭。第一句写自下而上望去，西亭高出鸟外，从登前写亭高。第二句写登临后向四周望，身与浮云相齐，从登后写字高。三、四两句开始写登亭后的“观眺”。用山下的点点树影，千村万落和眼前的苍天，脚下的群山烘托“亭高”，并构织出辽远的画面。五、六两句以西亭所见景物。点出登临时的天气。“残虹”、“急雨”，都符合夏末秋初天气特征，从而暗示“早秋”。一“挂”一“过”，一静一动，景象十分生动；而从“陕北”、“关西”两个大的方位来写，尤其符合登高的特点，场面辽远而开阔。七、八两句由远眺写到近观，均从颜色着笔来写，陡峭“青壁”，弯弯“绿溪”，加上“洒榼”、“瓜田”，把山上山下风光写得别有风致。
以上由登亭写到观眺，以下写登亭观跳所感。“微官”两句反映着诗人的不得意，但却出之以放达之语；而诗的最后两句“唯有乡园处，依依望不迷”，才写出真心思：对长安的留恋，其中包含政治上的希望，如“明主虽然弃，丹心亦未休”（《题虢州西楼》），所反映的显然不单是乡土之情。“望”字也就自然照应了题目“观眺”二字。
这篇作品以“高亭”为观察点，以“观眺”为线索，开头写登亭，接着六句写登亭“观眺”所见，结尾四句写登亭“观眺”所感，层次井然有序。此诗虽为五古，中间写“观眺”六句却两两对偶，上下两句分别从不同角度构成生动画面。最后两句在上文登高远眺基础上，仍扣应“观眺”二字来写所感，线索清楚，结构完整。
这是一首怀古伤今之作。首联点题，写寒秋匹马渡白沟之景，意境苍凉寥廓；颔联怀古，遥想白沟的历史地位与辽金风物，不无赞誉之意，感情为之一扬；颈联转写眼前之景，意象雄阔而悲凉，感情因之而压抑；尾联首句呼应颔联，写出昔盛今衰之感，次句抒发走投无路之悲，寓有故国之思。这首诗诗句凝炼，颇有杜诗的沉郁苍劲之风，给人一种悲壮之美。
首联点明了季节、地点和旅途路线。诗人由蓟门返乡，只身单骑渡过白沟，正值寒冷的落霜季节。蓟门即蓟丘，在当时大都，古代不少诗人，如陈子昂、高适等都曾在此慷慨悲歌，怀古吊今。刘因由蓟门返家。由于白沟所包含的特殊历史问题，自然很容易触发起诗人对历史和现实的无边遐想：兴衰、治乱、荣辱、兴亡、华夷之别……使诗人怀古伤今，心潮滚滚，悲愤难平。寥廓萧瑟的霜天，寒碧呜咽的河水，仿佛也带着历史耻辱的印记，与诗人一起产生了悲愁满腔的共鸣。在这苍茫的秋水长天，寒凝大地的虚空中，羁旅行役、匹马风尘的诗人，是何等的孤独寂寞。“蓟门”、“白沟”、“霜落”、“水天愁”、“匹马”等意象，构成了一种苍凉肃杀的境界、凝重压抑的氛围。
唐时所设军事地理单位，以驻守人员之多寡分为上、中、下三镇，这里以上镇泛指边界，中州泛指中原。颔联极为含蓄，但又高度概括地透露出“水天愁”的原因所在：这里从战国时的燕赵，到唐宋盛世，一直是北方军事重镇。汉代李广，晋代刘琨，唐代张守硅，后周郭荣等人，都曾在这一带抗击匈奴、奚、契丹等外族的入侵，为华夏民族建立了保卫边疆的不朽功勋。自宋代与辽金对峙，这里既是两国的边界，又是华夏汉族与辽金夷族在风俗文化方面的分水岭。一个“异”字，含蓄地表露了诗人华夷之别的思想。可现在，华夏沦丧，蒙古入主中原，这里已成为元朝的畿辅腹地，华夷之大防不复存在了，令诗人感到“水天愁”。
颈联和首两句一样，是“以我观物，故物皆著我之色彩”。黄云滚滚弥漫天空，笼罩着古代边戍之地，孤零零的城堡、落日残照、西风萧索、孤雁南飞，茫茫旷古之思，秋容古淡之景，诗人孤身独骑，遐思渺渺，羁旅风尘，恨无知音，恰似孤雁飘零，何处归宿。表现了诗人无限的孤独惆怅。
尾联顺承此意：“四海知名半凋落，天涯孤剑独谁投？”天下有名于时，与自己相知及交游的朋友，或逝或隐，多已离去，自己孑然一身，书剑飘零天涯，纵然满怀幽思忠愤，亦无处倾诉，无人知晓自己的心曲了。“凋落”、“孤独”尽发悲凉凄怆之情，颇有陈子昂“前不见古人，后不见来者，念天地之悠悠，独怆然而涕下”的胸臆。
这首诗既有历史的深远感，又有现实的寂寥感，首联和颈联皆写景，但景中寓情，颔联和尾联抒情，前者抒国家民族之情，故含蓄幽远；后者写个人身世之情，故淋漓酣畅。而国家民族与个人身世，又有因果内在联系，很好地烘托了诗人的内心世界。