诗的一、三、四联着重表现的是兄弟之间的骨肉情谊。首联写在送兄弟到越江边时，双双落泪，依依不舍。起势迅拔奇突，悲情无限，有极大的感染力。在二弟宗直暴病身亡之后，大弟宗一又要北适湘鄂之地安家，作者经不起这样大的打击，故曰“残魂”且已“零落”，神情“黯然”却又加“倍”，其中自有贬谪之苦，孤寂之意。此刻兄弟泣别，双双垂泪，虽为人之常情，却另有深意：诗人在极度艰苦恶劣的环境中生活，需要亲情友情支撑他那即将崩溃的精神世界，然而贬谪以来，亲人相继弃世，此时宗一又要北去，诗人更觉形单影只，愁苦无依。这两句诗既是铺叙，又是情语，充分表现出诗人苦涩的心境和兄弟之间的骨肉情谊。
第三联是景语，也是情语，是用比兴手法把彼此境遇加以渲染和对照。“桂岭瘴来云似墨”，写柳州地区山林瘴气弥漫，天空乌云密布，象征自己处境险恶。“洞庭春尽水如天”，遥想行人所去之地，春尽洞庭，水阔天长，预示宗一有一个美好的前程。一抑一扬，蕴愁其中：由于桂岭洞庭，一南一北，山川阻隔，以后兄弟相见恐怕就非常不易了。因而在这稍见亮色的描述中先笼罩了一层哀愁，十分巧妙地为尾联的表情达意伏下一笔。
诗的最后一联说，自己处境不好，兄弟又远在他方，今后只能寄以相思之梦，在梦中经常梦见“郢”（今湖北江陵西北）一带的烟树。“烟”字颇能传出梦境之神。诗人说此后的“相思梦”在“郢树烟”，情谊深切，意境迷离，具有浓郁的诗味。古往今来，这“郢树烟”似的幻象使失意的迁客骚人趋之若鹜，常愿眠而不醒；但又让所有的失意者无一例外地大失所望。这“烟”字确实状出了梦境相思的迷离惝惚之态，显得情深意浓，十分真切感人。
这首诗所抒发的并不单纯是兄弟之间的骨肉之情，同时还抒发了诗人因参加“永贞革新”而被贬窜南荒的愤懑愁苦之情。诗的第二联，正是集中地表现他长期郁结于心的愤懑与愁苦。从字面上看，“一身去国六千里，万死报荒十二年”，似乎只是对他的政治遭遇的客观实写，因为他被贬谪的地区离京城确有五、六千里，时间确有十二年之久。实际上，在“万死”、“投荒”、“六千里”、“十二年”这些词语里，就已经包藏着诗人的抑郁不平之气，怨愤凄厉之情，只不过是意在言外，不露痕迹，让人“思而得之”罢了。柳宗元被贬的十二年，死的机会确实不少，在永州就曾四次遭火灾，差一点被烧死。诗人用“万死”这样的夸张词语，无非是要渲染自己的处境，表明他一心为国，却被长期流放到如此偏僻的“蛮荒”之地，这是非常不公平、非常令人愤慨的。这两句，有对往事的回顾，也有无可奈何的悲吟，字字有血泪，句句蕴悲戚。
南宋严羽在《沧浪诗话》中说：“唐人好诗，多是征戍、迁谪、行旅、别离之作，往往能感动激发人意。”柳宗元的这首诗既叙“别离”之意，又抒“迁谪”之情。两种情意上下贯通，和谐自然地熔于一炉，确是一首难得的抒情佳作。
第一自然段为第一部分，介绍汉代二疏年老辞位的典故，处处为后文的对照设伏。疏氏权侄的事迹无疑是很多的，但作者只突出了两点：一是年老及时告退；二是其行动得到了人们的充分理解和肯定，不仅送行场面热烈，连路旁的观众也共盲其贤，汉史既传其事，后世工画者又图其迹，所以至今照人耳目。
第二、三、四自然段为第二部分，从与二疏对比的角度写杨君告老归乡。先肯定其同，再展示其异。杨君和二疏一样，也是年满七十，即主动求归，这是二者相同之处。作者首先肯定其同，不仅是为了提高杨君的地位，突出他归乡的意义，而且也是为了批驳“古今人不相及”这个当时颇为流行的错误观点。作者是一个儒家道统论者，并以道统的继承者自居，到处鼓吹先圣先王之道。他认为七十而致仕，归老乡里，这也是儒家道统的一种表现。杨君与二在这方面的一致，正好说明儒家道统可以继承，是对“古今人不相及”这个观点的最好驳斥。杨君告老归乡的行为既然可以和二疏媲美，那么他就应该得到人们同样的理解和赞扬，可实际情况却完全两样。杨君去时，既没有看到热烈的送行场面，也没有听到发自内心的赞扬，史既不传其事，图其迹的画当然就更谈不上了。丞相虽有爱惜之心，告之于朝，为其邑少尹，不绝其禄，又为歌诗以动之，京师的诗友，也相属而和，这些似乎可以减少一点冷落。但是，他们诗歌的主旨都落在那个“劝”字上。无非是动其继续为官，不归其乡罢了。可见他们都为“以官为家”的时尚所束缚，并没有真正了解杨君的志趣，没有真正理解杨君此行的意义，他们并不是杨君真正的知音。正因为如此，所以作者在篇末才发出出了那么深沉的感叹。
最后一段第三部分，直接摹写杨君的归乡情趣，点明杨君告老归乡的意义。这段文字不长，但内容丰富。作者先用“中世士大夫以官为家，罢则无所于归”的不良现象作反衬，意在突出杨君告老归乡的意义。这儿的“中世”应该理解为中世以来，而且主要是影射当时的官场。有人说，不去其乡，这在唐代属“本等之常事”。就科举制度而言，年老致仕归乡，应该是本等常事，但中国的官场历来都是原则归原则，行动归行动。像杨巨源这样按例归乡的官员很可能还是凤毛麟角。唯其稀少，才觉得珍贵，唯其稀少，才值得大力提倡。作者之所以如此热心地宣扬杨君的事迹，其用意大概就在此吧。接着作者又补写一句杨君初出仕的情景，说他是刚成年就离开了家乡，这可能是为了突出他对故乡的深厚感情。最后，作品以深沉的感慨作结“古之所谓‘乡先生没而可祭于社’者，其在斯人欤！其在斯人欤！”这是对杨君的高度赞扬，也是对世风日下的无穷感叹。
文中把杨辞职归乡的情景跟历史上有名的二疏具体进行比较，从而突出了杨巨源思想品德之美。写作注意前后照应，富于变化，并且反复咏叹，言婉情深，作者的思想感情灼然可见。