全词以“妙手写徽真”破题，以下都是从画上真容著笔。为崔徽写真的画师丘夏的姓名赖元稹之歌而传，画像的概貌因秦观此词而见，可以收入画史。
首句为“妙手写徽真”，点出所题者即是高明肖像画师手画的崔徽像。苏东坡写过一首题为《章质夫寄惠崔徽真》的诗，称“卷赠老夫”，知道当时确有这幅画像流传，并辗转归于东坡。据元稹《崔徽歌》中云：“有客有客名丘夏，善写仪容得恣把。”即词首句“妙手写徽真”所指。总提一笔，接下去描写画中人的仪容，同时也映带出画师的神技。
东坡诗中，写画中崔徽形象是“玉钗半脱云（发）垂耳，亭亭荚蓉在秋水”，十四个字只作大略形容。少游用了七个字——“水剪双眸点绛唇”，写她的眼睛和嘴唇，给人的印象便自不同，如工笔画之于剪影，精细得多了。并不是少游比东坡来得高明，这是诗、词性质的不同。东坡写的是七言古诗，宜用大笔勾勒，故粗；少游写的是小词，容许加意点染。故细。李贺《唐儿歌》“一双瞳人剪秋水”，江淹《咏美人春游》诗“昵珠点绛唇”，是其用语所本。眼睛和嘴唇是最能显示美人神采和情韵的部位，况且又加上了水波之光，绛脂之艳，确能动人心目。
“疑是昔年窥宋玉，东邻，只唇墙头一半身”，继续说这幅写真的画面，透唇出所画的是半身像，借宋玉《登徒子好色赋》的一段文字来增加情趣。赋中说，宋玉东邻的女子私慕他，登墙偷望他有三年之久（古人以“三”表多，非必是实数）。这个情节自然与崔徽本事无关，不过是由于画像是半身的而想到邻女窥宋，墙头半遮玉体的形象。这样说，似乎是词人在那里耍笔头，硬拉扯，游离于词情之外，写出败笔来了。其实，“疑是”者，非是而似是也。《登徒子好色赋》中如“著粉则太白，施朱则太赤；眉如翠羽，肌如白雪”云云，宋玉所借以盛称邻女美色之处，也不妨加之于崔徽，以补充上句刻画的不足，这就是词用宋玉赋的言外之意。
不过，崔徽画像上的神态可不是如宋玉东邻女那样的“嫣然一笑，惑阳城，迷下蔡”，而是眉黛含颦。这是由于崔徽请画师丘夏写真时正怀着悲苦的心事，画师又作了精确的反映；词语不仅如实地表述了画面的这一部分——“翠黛颦”，而且深入追求她颦眉的原因——有“酸辛”之事。“往事已酸辛”一句，与东坡《章质夫寄惠崔徽真》诗中的“当时薄命一酸辛”，辞意皆合，当本之于他的老师，这也是少游所题崔徽真即是东坡藏品的一个佳证。“谁记当年翠黛颦”，颦眉承上“酸辛”，绝非写美人的套语，而是反映了画面上的真实。这两句词把崔徽的身世遭逢作一提挈。她的一段辛酸史既成往事，谁复省记，唯有这一幅写真留下，作为艺术精品供人鉴赏而已。言下有无穷的感慨。
最后笔锋一转，写词人赏鉴了画像后的感受：“尽道有些堪恨处，无情。”面对如此美艳绝俗的人物，如此高妙传神的画笔，观赏之后还有“堪恨处”。说是因为画中人“无情”。“无情”云者，盖即是如东坡前题诗中所谓“丹青不解语”，或者如《牡丹亭·玩真》一折中，柳梦梅看着杜丽娘自画的真容时说的：“韵情多，如愁欲语，只少口气儿呵！”谓画上美人，虽是极妍尽态，可惜不是真人，不通情愫。紧接着，词人以拗折之笔挽转一句，说“任是无情也动人。”全用晚唐罗隐《牡丹花》诗句“若教解语应倾国，任是无情也动人”。“不解语”的牡丹花，“少口气儿”的美人图，“无情也动人”。化工之妙，艺术之精，一语说尽。（陈长明）最后几句也表现出作者的些许感慨：毕竟是一幅画，不是活色生香的美人，既表现不出她的情深不寿，彼此之间也无法情感相通。这语气可以见出作者的几分遗憾，也许他希望画中的美女崔徽变成活人，能真的和自己有所交流吧。
全词句句从图画着笔，既有对图画本身的描绘，也有对画中美人身世的同情。在艺术上，此词善借用前人典故和成句，表达自己的情感，突出地展现了秦观博闻强记的才华和随手拈来无不妥帖的艺术功力，确实算得题画词中的佳作，颇富感染力。
第一自然段为第一部分，介绍汉代二疏年老辞位的典故，处处为后文的对照设伏。疏氏权侄的事迹无疑是很多的，但作者只突出了两点：一是年老及时告退；二是其行动得到了人们的充分理解和肯定，不仅送行场面热烈，连路旁的观众也共盲其贤，汉史既传其事，后世工画者又图其迹，所以至今照人耳目。
第二、三、四自然段为第二部分，从与二疏对比的角度写杨君告老归乡。先肯定其同，再展示其异。杨君和二疏一样，也是年满七十，即主动求归，这是二者相同之处。作者首先肯定其同，不仅是为了提高杨君的地位，突出他归乡的意义，而且也是为了批驳“古今人不相及”这个当时颇为流行的错误观点。作者是一个儒家道统论者，并以道统的继承者自居，到处鼓吹先圣先王之道。他认为七十而致仕，归老乡里，这也是儒家道统的一种表现。杨君与二在这方面的一致，正好说明儒家道统可以继承，是对“古今人不相及”这个观点的最好驳斥。杨君告老归乡的行为既然可以和二疏媲美，那么他就应该得到人们同样的理解和赞扬，可实际情况却完全两样。杨君去时，既没有看到热烈的送行场面，也没有听到发自内心的赞扬，史既不传其事，图其迹的画当然就更谈不上了。丞相虽有爱惜之心，告之于朝，为其邑少尹，不绝其禄，又为歌诗以动之，京师的诗友，也相属而和，这些似乎可以减少一点冷落。但是，他们诗歌的主旨都落在那个“劝”字上。无非是动其继续为官，不归其乡罢了。可见他们都为“以官为家”的时尚所束缚，并没有真正了解杨君的志趣，没有真正理解杨君此行的意义，他们并不是杨君真正的知音。正因为如此，所以作者在篇末才发出出了那么深沉的感叹。
最后一段第三部分，直接摹写杨君的归乡情趣，点明杨君告老归乡的意义。这段文字不长，但内容丰富。作者先用“中世士大夫以官为家，罢则无所于归”的不良现象作反衬，意在突出杨君告老归乡的意义。这儿的“中世”应该理解为中世以来，而且主要是影射当时的官场。有人说，不去其乡，这在唐代属“本等之常事”。就科举制度而言，年老致仕归乡，应该是本等常事，但中国的官场历来都是原则归原则，行动归行动。像杨巨源这样按例归乡的官员很可能还是凤毛麟角。唯其稀少，才觉得珍贵，唯其稀少，才值得大力提倡。作者之所以如此热心地宣扬杨君的事迹，其用意大概就在此吧。接着作者又补写一句杨君初出仕的情景，说他是刚成年就离开了家乡，这可能是为了突出他对故乡的深厚感情。最后，作品以深沉的感慨作结“古之所谓‘乡先生没而可祭于社’者，其在斯人欤！其在斯人欤！”这是对杨君的高度赞扬，也是对世风日下的无穷感叹。
文中把杨辞职归乡的情景跟历史上有名的二疏具体进行比较，从而突出了杨巨源思想品德之美。写作注意前后照应，富于变化，并且反复咏叹，言婉情深，作者的思想感情灼然可见。
