诗前小序，交代诗人为庾肩吾补作《宫体谣引》的缘由，说明诗篇抒写庾肩吾“潜难会稽”后的悲伤感受。
诗的开头两句描写宫廷荒凉的情景，壁上的椒粉已经发黄，成为野粉，宫殿里飞满湿萤，已经荒废，一派凄凉景象，正是“国势沦败”的艺术写照。三四句梦忆东宫生活，我本是台城里和皇子唱和诗歌的人，现在秋夜里还常梦见太子的车辇。诗的后半首，叙述肩吾愁苦衰老的近况，表达出甘守屯贱的意愿。“吴霜”，应会稽地望，“塘蒲”，点身已衰老，回想起离开宫门时，依恋不舍，怀念君德，甘愿遭受危难贫贱，“心如砥柱”，绝不变心。全诗不言悲而悲意充溢字里行间。
诗人探寻梁代庾肩吾的前事，应是叹恨那些曾任东宫官而后遭贬斥的人。诗人生活的时代，曾震惊朝野而备受大家关注的事件，便是永贞革新，革新运动参与者之中，确有人曾任太子李诵的东宫官。诗人叹恨他们事业受挫败，命运困厄，不胜感伤，便运用“离绝远去笔墨畦径间”的诗句，抒发悲叹他们不幸遭际的情思。诗人不能无言，又不敢明言，便寓今托古，比物征事，从而形成长吉诗诡异独特的风貌。
杜牧为李贺诗集作叙，以此诗与《金铜仙人辞汉歌》为例，赞叹道：“贺能探寻前事，所以深叹恨古今未尝经道者。”这篇叙是诠解《还自会稽歌》的指导思想。李贺能从二百多年前的庚肩吾“潜难会稽”这件在别人看来极平凡的小事中，塑造了一个流落失意、但又不失刚劲之气的“羁臣”形象，并借以抒发了自己对世事多变的感伤和困顿潦倒中的悲愤之情，构思新颖，立意奇特。杜牧把李贺的这类诗作誉之为“古今未尝经道者”，评价是很高的。杜牧在叙中还说：“求取情状，离绝远去笔墨畦径间，亦殊不能知之。”但结合庾肩吾的遭遇和李贺的身世，还是能看出些端倪的。
这首诗写得含蓄深沉。庾肩吾是宫体诗的代表作家，但不能说这首摹想庾氏情事的作品就是继承了宫体诗的传统，也不能据此诗而说李贺对宫体诗作者的怀念和向往。李贺不过是借和晚年的庾肩吾“心有灵犀一点通”的处境，来抒发自己的忧愤罢了。
词的上片写雨中游西湖所见。起首写西湖概貌。碧波连天，翠浪翻腾，气吞平野，虽然用字不多，却写得极有气势。二三句写雨中游。杜甫《洗兵马》说：“安得壮士挽天河，净洗甲兵长不用。”此处用其前句，言雨从天降犹如有人力挽天河之水使之落入西湖，在卧龙山下形成一片明镜，而游人的影子则从“镜”中倒映出来。作者不说来游西湖，而说不知何人在卧龙山下照影，既点出了出游地点，又不粘皮带骨，可以说是空灵慰藉。以上三句，一句写湖，一句写雨，一句写游，“三山雨中游西湖”之意已全部写出，下边则围绕这一中心，渲染铺叙。“烟雨”三句化用苏轼咏杭州西湖诗意吟咏福州西湖之美。苏轼《饮湖上初晴后雨》诗说：“水光潋滟晴方好，山色空濛雨亦奇。欲把西湖比西子，淡妆浓抹总相宜。”而此处化用苏诗，言游福州西湖在烟雨迷茫中最相宜，因为那空濛如画的景色会给游人以飘然欲仙的感受；然而晴天来游则更好，因为那会使你心情开朗，看得更真切，显得更美。但是，西湖的美又是朴素的，约略是西施未嫁，待字闺中，需要加以打扮，也就是说要使西湖更美，还需要加以开发，还有待于“细把江山图画”，从而引出以下四句词来。其中前两句写福州西湖中的孤山，言其像瞿塘峡之滟滪堆，偃卧在千顷湖光之中，扁舟过此，极为凶险。据《淳熙三山志》说，赵汝愚帅福建，曾上书请疏浚西湖旧迹，匆匆兴役，议者以费多利少为疑，作者以“中有句，浩难写”，说明是是非非，一时也说不清楚，对怀疑疏浚西湖的议论表示了谨慎的异议。这样写，既照应了“有怀丞相经始”的词题，又丰富了“待细把、江山图画。”的具体含义，表明他要继赵汝愚之后，把西湖建设的更美丽的意向，内涵深厚。
词的下片写雨中游湖所感。起句以福州西湖文人社集比作杭州文士的西湖诗社，用“例入”二字表示西湖诗社在文人心目中的崇高地位，从而写出西湖同文人的密切关系。赵汝愚两次知福州，所以二三句化用杜牧《叹花》诗意，言当他“重来”福州时，上次亲手种植的树木，如今已绿树成荫，再次表达他对丞相“经始”功业的肯定与赞许。“陌上”三句写昔日福州西湖的繁华。言远在五代时期，闽王王审知在此立国，在西湖中修建了“十里水晶台榭”，架起复道，“时携后庭游宴，不出庄陌，乃由子城复道跨罗城而下，不数十步至其所。”作者借陌上游人之口夸之，暗示出他对福州西湖旧日繁华的倾慕之意。结尾四句写其今昔变迁。其中前两句写福州西湖的今昔对比。“堂上燕，又长夏。”二句，承上句“鱼鸟”做进一步发挥，言只有堂上的燕子，在长夏时节，又重来此，不知它是否还能寻到昔日的故居。总之是说，今日的福州西湖，皆今非昔比。
上片写黄州、黄石一带山光水色和田园风味。三幅画面组缀成色彩斑斓的乡村长卷。“西塞山”配上“白鹭飞”，“桃花流水”配上“鳜鱼肥”，“散花洲”配上“片帆微”。这就是从船行的角度自右至左依次排列为山—水—洲的画卷。静中有动，动中有静。青、蓝、绿配上白、白、白，即青山、蓝水、绿洲配上白鹭、白鱼、白帆，构成一种素雅恬淡的田园生活图，这是长江中游黄州、黄石一带特有的田园春光。
下片写效法张志和，追求“扁舟草履，放浪山水间，与渔樵杂处”（《答李端叔书》）的超然自由的隐士生活。“自片一身青箬笠，相随到处绿蓑衣”，勾画出了一个典型的渔翁形象。“斜风细雨不须归”，描绘着“一蓑烟雨任平生”乐而忘归的田园生活情调。下片还是采用“青”（箬笠）、“绿”（蓑衣）与白（雨）的色调相配，烘托出了苏轼此时的淡泊明志、宁静致远。
全词虽属隐括词，但写出了新意。所表现的不是一般自然景物，而是黄州、黄石特有的自然风光。所表现的不是一般的隐士生活情调，而是属于苏轼此时此地特有的幽居生活乐趣。全词的辞句与韵律十分和谐，演唱起来，声情并茂，富有音乐感。
