诗的首句“迟日园林悲昔游”，是因眼前的春光回忆起往昔的春游。当年，春日迟迟，园林如绣，游目骋怀，该是心旷神怡的。而这里追叙“昔游”时却用了一个“悲”字。这个悲，是今天的悲，是从今天的悲追溯昔日的乐；而反过来，也可以说，正因为想起当时的游乐，就更觉得当前处境之可悲。吴乔在《围炉诗话》中说：“情能移境，境亦能移情。”这一句诗是用现在的情移过去的境，为昔日的欢乐景物注入了此时的悲伤心情。
诗的第二句“今春花鸟作边愁”，是从昔游的回忆写到今春的边愁。一般说来，鸟语花香是令人欢乐的景物；可是，这些景物却使诗人更想起自己正在流放去边疆的途中。鸟语也好，花香也好，在诗人心目中只构成了远去边疆的哀愁。这一句诗是以心中的情移眼前的境。诗人缘情写景，因而景随情迁。如果就艺术手法来说，以“花鸟”与“边愁”形成对比，是从反面来衬托边愁。与杜审言的这句诗有些近似的有杜甫《春望》诗中的“感时花溅泪，恨别鸟惊心”一联，司马光的《续诗话》评这一联诗说：“花鸟平时可娱之物，见之而泣，闻之而悲，则时可知矣。”这里，以花鸟可娱之物来写“感时”、“恨别”之情，采用的也是反衬法。杜审言是杜甫的祖父，对杜甫有直接影响。“花溅泪”、“鸟惊心”一联，可能就是从“花鸟作边愁”这一句化出的。
诗的第三句“独怜京国人南窜”，是整首诗的中心，起承上启下作用。上两句，忆昔游而悲，见花鸟成愁，以及下一句为江水北流而感叹，都因为诗人远离京国，正在南窜途中。上下三句都是围绕着这一句，从这一句生发的。但这一句还没有点到《渡湘江》这个题目。最后一句“不似湘江水北流”，才提到湘江，点破诗题，而以“水北流”来烘托“人南窜”，也是用反衬手法来加强诗的中心内容。
杜审言渡湘江时，正值春光明媚，绿水映青山，秀丽的异乡风光撩人意绪，使被贬迁异地的诗人缅怀过去，遐想未来，心中怅惘、失落。因此诗的起句感情深沉地直诉：“迟日园林悲昔游”。他触景生情，回忆起从前在这春光晴丽的大好时光里，尽情游赏园林景色的乐趣，间或还有朋友与他一同饮酒赋诗，赏春惜春，好不痛快。如今只身南迁，心中之悲不难想象。“迟日园林”与“昔游”之间加一“悲”字，使句意曲折而丰富，语势跌宕而劲健。对句：“今春花鸟作边愁”。“今春”指出渡江的时间。“花鸟”概括春景，虽没有直接描绘声色，而鸟语花香的境界已在眼前。“作边愁”，是说今春的花和鸟不同往年，它们也含愁带恨。这里用了移情入景的手法，以比兴表达诗人的愁思。一个“作”字，语意双关。既象说花鸟，又是说人，亦可理解为人与花鸟同说，婉曲而有机趣。
这句诗色彩清淡，情意浓挚，七个字，淋漓尽致地抒发了诗人远游伤春的情怀。“独怜京国人南窜”，是这首诗的中心所在，从前两句的忆春、伤春转入叙事抒情，感慨自己从京都流贬到荒僻的南地。“独”字下得有力，使全句生神，激活全篇。“不似湘江水北流”，紧承第三句点题作结，出语自然。管世铭《读雪山房唐诗序例》说：“初唐七绝，味在酸咸之外，‘人情已厌南中苦，鸿雁那从北地来 ’，‘独怜京国人南窜，不似湘江水北流’，‘即今河畔冰开日，正是长安花落时 ’，读之初似常语，久而自知其妙。”所谓“味在酸咸之外”，即指诗中蕴含的情感复杂丰富余味无穷。这些诗句的妙处，不仅在于融情于景，而且还通过时间、空间、景物的不同对比，形成一种杳邈迷茫的意境，仿佛有万般的游丝争惹人的离愁，读者细细体味就能感受其巨大的感染力。“独怜京国人南窜，不似湘江水北流”，初读似常语，并无警策之处，仔细品味，就可看到诗人怅惘的形象。他独立舟头，思悠悠，无限离愁，正如一江春水向北流。杜审言性格爽朗轩豁，喜直抒胸臆，这自是其诗的特色之一。《载酒园诗话》说他“即作磊砢语，亦犹苏子瞻坐桄榔树下食芋饮水，略无攒眉蹙额之态。”这段形象的评语，可帮助我们从多方面去感受欣赏杜审言诗的风格。
胡应麟对这首诗的评价很高，他说：“唐初五言绝，子安诸作已入妙境。七言初变梁陈，音律未谐，韵度尚乏。惟杜审言《渡湘江》、《赠苏绾》二首，结皆作对，而工致天然，风味可掬。”这首诗以押韵对起，又以对作结，俱有整齐美、和谐美以及反复咏叹的韵味。初唐时期是七绝初创的阶段，杜审言这首《渡湘江》是有相当影响的，说它“具有开启诗坛新风的作用”，也不为过誉。
此诗八章，每四句为一章。第一章以菅草和白茅相束起兴，映射夫妇之间相亲相爱正是人间常理。其中的菅草白华和茅草之白有象征纯洁与和谐的爱情意义，与《召南·野有死麕》中的“白茅包之”“白茅纯束”相参证，可见“白茅”在当时是一个常用的带有象征意义的意象。本来常理不言自明，可是这里偏偏是“之子之远，俾我独兮”。一正一反，奠定全诗凄婉哀伤的悲剧基调。
第二章以白云普降甘露滋润那些菅草和茅草，反兴丈夫违背常理，不能与妻子休戚与共。虽然从字面上看是白云甘露对菅草茅草的滋润与命运之神对被弃女主人公的不公平之间存在着直接的对应和映射关系，但实际上看似怨天实为尤人，矛头所向实际是这不遵天理的负心丈夫。
诗的第三章以北流的滮池灌溉稻田，反向对应无情丈夫对妻子的薄情寡义。此章虽然在起兴方法上与前两章一样，以物喻人，以天道常理反兴人情乖戾，故郑笺解释曰：“池水之泽，浸润稻田使之生殖，喻王无恩于申后，滮池之不如也。”但是紧接着长歌当哭的女主人公话锋一转，由“之子”转向“硕人”。关于“硕人”，前人如孔颖达疏引王肃、孙毓说，以为硕人指申后，朱熹《诗集传》以为硕人指幽王。揆诸原诗，以下提及硕人的两章都以物不得其所为喻，暗指人所处位置不当。郑玄笺解“硕人”为“妖大之人，谓褒姒”，与诗意合。话锋既转，下一章的感叹就显得自然而贴切了。
第四章承前三章反兴之意，以桑薪不得其用，兴女主人公美德不被丈夫欣赏，反遭遗弃的命运。与自身命运相反，“维彼硕人”，想起那个“妖大之人”却媚惑丈夫取代了自己的位置，这一切实在是煎熬人心的事情。
第五章以钟声闻于外，兴申后被废之事必然国人皆知。俗语“没有不透风的墙”，此之谓也。自己已经被废，心却念念不忘，于是有了“念子懆懆”的弃妇；既已弃之，必先厌之，于是有了“视我迈迈”的无情丈夫。对比中弃妇的善良和顺、丈夫的轻薄无情显得更为鲜明。
第六章诗意与第四章相近，以鹤鹙失所兴后妾易位。同时鹤的洁白柔顺和鹙的贪婪险恶与申后和褒姒之间存在着隐喻关系。“妖大之人”的媚惑实在是女主人公被弃的一个重要原因，难怪她一次次地“维彼硕人，实劳我心”，想起那个妖冶之人就不能不心情沉痛了。
第七章以总是偶居不离的鸳鸯相亲相爱，适得其所，反兴无情无德的丈夫不能与自己白头偕老的悖德举动。这一章要与第四、五、六章连起来读才会更深一层地理解弃妇的怨恨。她实际上是在说：虽然那个妖冶的女人很有诱惑力，如果做丈夫的考虑天理人情而不是“二三其德”，就不会有今天的结果。
诗最后一章以扁石被踩的低下地位兴申后被黜之后的悲苦命运。被遗弃的妇人不能不考虑自己的命运，“之子之远，俾我疧兮”。面对茫然不知的前途，必然忧思成疾。
最后需要指出的是，诗的首章以咏叹始，三句以“兮”煞尾，末章以咏叹终，亦以“兮”字结句。中间各章语气急促，大有将心中苦痛一口气宣泄干净的气势。缓急之间，颇有章法，诵读之时有余音绕梁之感。
“巴江上峡重复重”，诗中明显有一舟行之旅人的影子。沿江上溯，入峡后山重水复，屡经曲折，于是目击了著名的巫山十二峰。诸峰“碧丛丛，高插天”（李贺《巫山高》），“碧峭”二字是能尽传其态的。十二峰中，最为奇峭，也最令人神往的，便是那云烟缭绕、变幻阴晴的神女峰。而“阳台”就在峰的南面。神女峰的魅力，与其说来自峰势奇峭，毋宁说来自那“朝朝暮暮，阳台之下”的巫山神女的动人传说。次句点出“阳台”二字，兼有启下的功用。经过巫峡，谁都会想起那个古老的神话，但没有什么比“但飞萧萧雨”的天气更能使人沉浸于那本有“朝云暮雨”情节的故事情境中去的。所以紧接着写到楚王梦遇神女之事：“荆王猎时逢暮雨，夜卧高丘梦神女。”本来，在宋玉赋中，楚王是游云梦、宿高唐（在湖南云梦泽一带）而梦遇神女的。而“高丘”是神女居处（《高唐赋》神女自述：“妾在巫山之阳，高丘之阻”）。一字之差，失之千里，却并非笔误，乃是诗人凭借想象，把楚王出猎地点移到巫山附近，梦遇之处由高唐换成神女居处的高丘，便使全诗情节更为集中。这里，上峡舟行逢雨与楚王畋猎逢雨，在诗境中交织成一片，冥想着的诗人也与故事中的楚王神合了。以下所写既是楚王梦中所见之神女，同时又是诗人想象中的神女。诗写这段传说，意不在楚王，而在通过楚王之梦来写神女。
关于“阳台神女”的描写应该是《巫山曲》的画龙点睛处。“主笔有差，余笔皆败。”（刘熙载《艺概·书概》）而要写好这一笔是十分困难的。其所以难，不仅在于巫山神女乃人人眼中所未见，而更在于这个传说“人物”乃人人心中所早有。这位神女绝不同于一般神女，写得是否神似，读者是感觉得到的。而孟郊此诗成功的关键就在于写好了这一笔。诗人是紧紧抓住“旦为朝云，暮为行雨，朝朝暮暮，阳台之下”（《高唐赋》）的绝妙好辞来进行艺术构思的。
神女出场是以“暮雨”的形式：“轻红流烟湿艳姿”，神女的离去是以“朝云”的形式：“行云飞去明星稀”。她既具有一般神女的特点，轻盈飘渺，在飞花落红与缭绕的云烟中微呈“艳姿”；又具有一般神女所无的特点，她带着晶莹湿润的水光，一忽儿又化成一团霞气，这正是雨、云的特征。因而“这一位”也就不同于别的神女了。诗中这精彩的一笔，如同为读者心中早已隐约存在的神女撩开了面纱，使之眉目宛然，光艳照人。这里同时还创造出一种若晦若明、迷离恍惝的神秘气氛，虽然没有任何叙事成分，却能使读者联想到《神女赋》“欢情未接，将辞而去，迁延引身，不可亲附”及“暗然而暝，忽不知处”等等描写，觉有无限情事在不言中。
随着“行云飞去”，明星渐稀，这浪漫的一幕在诗人眼前慢慢消散了。于是一种惆怅若失之感向他袭来，“目极魂断望不见”就写出其如痴如醉的感觉，与《神女赋》结尾颇为神似（那里，楚王“情独私怀，谁者可语，惆怅垂涕，求之至曙”）。最后化用古谚“巴东三峡巫峡长，猿鸣三声泪沾裳”作结。峡中羁旅的愁怀与故事凄艳的结尾及峡中迷离景象打成一片，咀嚼无穷。
全诗把峡中景色、神话传说及古代谚语熔于一炉，写出了作者在古峡行舟时的一段特殊感受。其风格幽峭奇艳。语言凝练优美，意境奇幻幽艳，余味无穷。