这是诗人从长江北岸的扬子驿坐船渡江到南岸的感怀之作。此诗写的是城景：船儿随波漂流，晚城的天空与水都很清净，扬子驿在树林中闪现出来，润州坐卧在起伏的山冈之中，海边和江边都是寒意浓浓，枫树叶落，传来淅沥之声。从江北的“林开扬子驿”到江南的“山出润州城”，读者似乎看见一条渡船正由北向南开来，还分明见到了诗人立在船头前后眺望的形象。末二句写船近江南，城声淅沥，用一“度”字，很形象地写出了岸上落叶声飘过江面，送进船上诗人耳中的情景。全诗以“望”字贯通全篇，情文并茂，画面清新，构思巧妙，是一篇不可多得的佳作。
当年曹操在广陵（今扬州市）看到长江水面辽阔，水势汹涌，直呼为“天堑”，是“天之所以限南北也”。宋朝以前政治、文化、经济的中心在黄河流域的河南、山西、陕西一带，长江下游以南的地区尚少开发，所以常被视为边陲地区，对做官的人来说，派赴江南是一件无可奈何的事，诗人也不例外。这首诗的前四句写景还算平稳，没有情绪上的反应，但是到了后四句情绪就开始波动了。他到了南岸，发现江边是荒凉阴暗的，江风带有寒气，再加上落叶淅沥的枫树林，诗人突然感受到萧瑟的城天来了。其实城天是由北而南的，诗人在扬子驿的时候没有察觉，而到了对岸就感受到这股城意，这是有原因的。说起来他不是害怕节气上的城天，而是担心前程上的寒意，因此触景伤情，兴起无名的烦恼，这是受到“得失心”的影响。
开头四句语言颇艰涩费解。第一句，“羁心”指一个被迫远游为宦的人满肚皮不情愿的心情。这句意思说在秋天的早晨自己郁积着一种不愉快的羁旅者的心情。接下来第二句说，既然一清早心情就不愉快，那么爽性尽情地眺览沿途的景物吧。第三、四两句似互文见义，实略有差别。“逝湍”指湍急而流逝的江水，则“孤客”当为舟行之客；而“徒旅”虽与“孤客”为对文，乃指徒步行走的人，则当为陆行之客，故下接“苦奔峭”三字。夫舟行于逝湍之中，自然提心吊胆；但其中也暗用“逝川”的典故。《论语·子罕》：“子在川上曰：‘逝者如斯夫，不舍昼夜！’”因知此句的“伤”字义含双关，既伤江上行舟之艰险，又伤岁月流逝之匆遽，与下文“遭物悼迁斥”句正相呼应。第四句，江岸为水势冲激，时有崩颓之处，徒步旅行的人走在这样的路上自然感到很苦。不过从上下文观之，这句毕竟是陪衬，重点还在“伤逝湍”的“孤客”，也就是作者本人。所以“孤客”、“徒旅”是以个别与一般相对举，似泛指而并非全是泛指。
第二节的四句全是景语。这中间也有跳跃。开头明写秋晨，下文却来写“秋晚”，而用“日落山照曜”一句来代表。这种浓缩的手法是我国古典诗歌的特点之一，而谢灵运的诗在这方面显得尤为突出。但是缓是急，仍须研究。汉武帝《瓠子歌》（见《史记·河渠书》引）：“河汤汤兮激潺谖。”可见当训水流急貌。何况“石浅”则水势自急，必非缓流可知。此四句“石浅”句写水，写动态，“日落”句写山，写静态；水为近景，色泽清而浅；山为远景，色泽明而丽。“荒林”句写目之所见，“哀禽”句写耳之所闻。全诗景语，仅此四句，起到承上启下的作用，照理讲它们并非主要内容。只是若把这四句删掉，此诗即无诗味可言。可见情由景生，原是写诗要诀。
第三节从写景转入抒情，却兼有议论。“迁斥”有两层意思，一是主观上指自己被出为郡守，无异于受迁谪和贬斥，二是客观上感到节序迁改推移，时不待人。这二者都是值得伤悼的。但只要存有希望，就可以领悟精微玄妙的道理，不致因外来的干扰影响自己的情绪了。然而这种悟道的境界，只有太古时代的圣君贤哲才能心领神会，处于衰乱末代的人是无法理解的。所以作者说，“我既已持有上古时代的圣贤的一颗心，哪里还在乎当今世人的讥诮呢！”从这里，看得出作者同刘宋王朝的统治阶级是互相对立的，这是豪门世族与军阀新贵之间必然存在的矛盾。最后矛盾激化，谢灵运终于以谋反罪被杀害。从历史主义的观点来分析，这是丝毫不足为怪的。
最后一节，作者借古人以明志。“严子”和“任公”这是两种不同类型的古人。严光是避世的隐者，而任公则象征着具有经世大才的非凡之辈。作者意思说自己纵有经天纬地之才，由于不合时宜，宁可做个隐士。结尾两句，作者明确表示：即使不同时代的人也可以志趣相投，步调一致。言外隐指：本人知音寥落，当世的人对自己并不了解。从而可以推断，上文作者所伤悼的具体内容到底是什么了。
北风裹挟着朝雨，从江面上飘飘洒洒，呼啸而来。江上朝雨的景色，宽阔，空濛，而又略带萧索冷落之意，澹然展现在诗人的眼前。朔风可感，但无形无影，诗人却别具匠心，通过可观之雨将它形象地描写出来。细细体会“飞雨”，既可想见朝雨飞动之状，又能感受到朔风阴助朝雨之势。
百常观，本是汉代的台观之名；九成台，也是古代台名，这里都借指一般的台观。这些亭台楼阁，巍然屹立在曙色朝雨之中，一一映入诗人的眼帘。
“既”、“复”标识时间的先后承接，但决不是写风雨的断而复续，而是在景观迭现之中，暗写出诗人视野的变换和转移。诗人的视角，仿佛摄像机的长镜头，缓缓地扫描过淋漓在风雨之中的煌煌台观，印入诗人心灵的胶片。所以，风雨的飘洒和集结，在诗人心目中便产生了断而复续的“既”、“复”的感觉，从而在客观绘景之中，隐隐流露出主观观照的心迹。
淅淅沥沥的小雨，经过风的挥舞，洒落成了烟雾氤氲、轻埃迷漫。直到此时，诗人才交待了“观朝雨”的时间和地点：“平明振衣坐，重门犹未开。”清晨，深宫重门犹未开启，诗人早已振衣而坐、欣赏晨景了。阴霾雨天，雾气沉沉，本应令人沮丧，心情不振，但他却从江上飞雨之中，从这片刻宁静的观赏之际，领略到了非凡的乐趣，久久沉湎于其间，心驰神往，留连不舍。在大自然的神奇诱惑之下，诗人心旌摇动，神思沸腾。喧嚣的尘扰，纷冗的庶务，暂时都已远他而去，使他直感到一种耳目清新的愉悦，并从这种耳目的清新，进一步体会到了精神的宁静和恬适。“耳目暂无扰”，多么难得的纯净之境、空灵之时啊！所以，此时此刻，他的心思终于摆脱了现实时空的束缚，跨越到无限渺远的自由之境，一下子飞到了远世往古，飞到了向往已久的理想之境了：“怀古信悠哉！”清晨朝雨之中，悠然缅怀亘古圣贤，心情该是非常畅快的。
这种发自心灵的对于自然山水的雅爱，同诗人深层意识中积淀的抚剑跨马、建功立业的正统思想发生了冲撞——如果像大鹏那样敛翼不飞，隐居山水之间，“平生仰令图”（《和王著作八公山》）便无从实现，所以，他仍热切地期望能像骏马一样，骧首奋鬣，千里长鸣；但如果全身心地投入仕途，致力于建功立业，又可能像黄河中的游鱼去跳龙门一样，一旦跳不过去，便有曝鳃枯身之祸。仕途险厄，人生多艰。
诗人深感不可能既从容官场，又优游山林，“动”——出仕与“息”——退隐二者不可得兼，仿佛步行到人生的岔道口上，徘徊良久，举步不定。“方同战胜者，去翦北山莱。”“战胜者”用的是《淮南子》的典故：子夏“出见富贵之乐而欲之，入见先王之道又说（悦）之，两者心战故臞（瘦），先王之道胜故肥。”“北山莱”语出《诗经·小雅·南山有台》“北山有莱”，莱就是草。诗人表示，将抱着归隐林泉的信念到北山去刈草垦荒，耕地种田了。
一阵晨雨，给诗人带来了清新悦目的感受，但同时，又搅乱了他的心绪。出仕意识与归隐意识在诗人的思想上，始终无法将它们统一起来，“动息无兼遂”，总不可能尽如人意。为了心理的平衡、为了心性的自由，他的诗中，流露出走向归隐的试图。然而，这仅仅是诗人这一次“观朝雨”以后的一种暂时的精神解脱，实际上他并没能就此远身官场，去翦北山之莱。诗人的悲剧也正在这里。他始终没有解决“动”（出仕）与“息”（归隐）的矛盾，总是在“歧路多徘徊”。他始终肩载着这种沉重的精神负担，艰难地跋涉着人生的路。
若按写景抒情的一般程式，全诗似乎应以“平明振衣坐”领起，才能顺理成章。但那样势必使全诗结构显得平淡无奇，而且由景入情的转折也将显得生硬、突兀。诗人的高超之处正体现在这里。他以“观”为全诗之眼，前六句直接写“观”时客观之景，后八句写“观”后主观之情，“平明振衣坐”二句置于枢纽关键之处，使写景与抒情有机地结合起来，起到承上启下的重要作用。这样，令人读来既觉层峦叠蟑，一波三折，又感到接转巧妙妥贴，气脉流畅，饶有韵味。