上片追述春光中无缘赏花的缺憾。起笔三句写春天衙斋生活小景，大意是，在今春花开时节，整日深锁斋院，面对袅袅茶烟，只觉一派寂寥。点明“花时”，不单交代了节候，更暗含着词人赏花的兴致，而实际上整天所面对的却是“茶烟”，这使作者感到扫兴。原来，这年春夏间密州地区旱灾蝗灾严重，身为州郡长官的苏轼斋戒吃素，忙于到常山祭神祈雨，所以压根儿顾不上赏花，——这是苏轼在此篇词序及《祭常山祝文五首》之一中所说的。在今天看来，苏轼的作法未免可笑，但历史地看，他忧民所忧，关怀民生疾苦的精神还是值得称道的。在这大好春光中，词人踪迹所至，看到“但有绿苔芳草，柳絮榆钱”，如此而已。言外自然也以良辰美景“不获一赏”而感到遗憾。那么，是否因诸城僻处北国，没有赏花的去处，或者竟无花可赏。以下六句全以“闻道”二字领起，着力写出赏花的好去处，以及“方春牡丹盛开”，花事之盛。不言而喻，这对于浸泡在比较单调乏味的仕宦生活中的词人来说，具有多么巨大的诱惑力。如果说“长”、“古”、“甲”、“名”这些词语传出了词人对春游热点向往的心态的话，那么“国艳带酒，天香染袂”这两句化用唐诗成句，就花王牡丹的色、香进行渲染，更写出对“方春牡丹盛开”的情有独钟。然而词人终究误了佳期，未能如愿以偿，那么他内心的惆怅也就可想而知了。
下片写秋日赏花的感触。换头“清明过了”三句，承上叙事，写暮春花尽的悲哀。“清明过了”，交代时令，表明“花时”已过。“残红无处”，写出“国艳”、“天香”荡然无存的可悲现状。“对此泪洒樽前”，则以重拙之笔直述悲悼之情与沉痛之感。这与前片“闻道”六句叙写的内容有因果联系，或者说前后内在的脉络是相通的，因而使词人在此抒写的情感是真实可信的。从一定意义上说，上片至此全是铺垫，意在突出秋日牡丹的可贵。“秋向晚”三句，便转到写当前秋日牡丹：在这晚秋已近的时节，为什么一枝牡丹忽然开放，默默地朝着我，而香艳如故呢?“秋向晚”，与前文的“花时”、“清明过了”相照应，明点词序中的“九月”这一特定时间。“一枝何事，向我依然”二句，问得无理而有情。本来，作为自然事物的牡丹花开花落，自有其自身的规律或原因，是与人事无关的，所以说词人问得无理。而这一问曲折地表现词人某种微妙的感情：这一枝牡丹仿佛深知词人“方春牡丹盛开”而“不获一赏”的苦衷，因而赶在寒冬到来之前又一度开放，以给他一个意外的惊喜。词人在心理上的缺憾得以填补后的欣慰，对“千叶一朵”的激赏以至道谢等，都余味曲包了。秋日牡丹虽是词人所写的重点，但词人并未展开描写，仅用“依然”二字映带上文，便收到了以少总多的艺术效果，这是词人用笔精炼与老到之处。最后五句紧承前三句，着重写对秋日牡丹的感触：眼前的盛会姑且抓住这短暂的时光，因为秋风不会宽容牡丹，使之常葆艳丽的姿色。牡丹啊，你不如多加珍重，留住尽可能多的春容，以待明年争新斗艳。词人没有陶醉在对秋日牡丹的欣赏之中，凭着他过人的悟性，很快意识到好景不长，意识到自然界的制约因素。“高会聊追短景，清高不假馀妍”两句，扣住词序中“置酒”会客一事，表现了对当前美景的极度珍惜，以及对“美人迟暮”的担忧，富有自然哲理的意味。结穴三句转为词人对秋日牡丹的劝说，语浅情深，出人意表，表露了词人对名花爱赏的真诚，也寄寓了对未来美好生活的憧憬，可谓言有尽而意无穷。从结构上看，“春态”、“明年”与开篇的“花时”、“今岁”遥相呼应，不过后者是写实，前者仅是悬想罢了。
这首词颇有几分像写景词或咏物词，其实都不是。这是一首表现生括实感的写怀之作。词人为百姓疾苦而操劳、奔走，而置一春花事于不顾（虽然“花时”是他所由衷喜爱的），确实从一个侧面表现出词人尽瘁民事的可贵精神。但这首词主要的思想意义并不在于此。词人显然不属于一般意义上的才子佳人一流人物，可是他对牡丹花开花谢那样多情善感，只有一个较合理的解释，这便是词人热爱生活，热爱人生。因为春日盛开的牡丹是人间美好事物的象征，秋日牡丹一枝独放，则可视为不寻常的年头偶尔提供的补偿，所以词人倍加关注，实在是热爱生活、热爱人生的生动体现。苏轼的人生态度具有多重性，主要有三个层面：怀抱理想和热情，热心于济苍生安社稷的事业，即抱有积极进取的人生态度，这是一个层面；追求超越现实功利的审美人生态度，力求无往而不乐，这是又一个层面；更多地从人性出发，执着于现实人生，随处表现出对生活和人生的热爱，这是第三个层面。这第三个层面与苏轼诗人的气质以及坦诚、真率的个性，也都有绝大关系。表现这第三个层面的诗词作品，尽管有士大夫化的成分（如这首词写到的置酒清客的方式——“高会”），但与实际生活的距离比较接近。
这首词表面上看是怀念昔日青楼旧好的词，实际上应是怀念同时遭贬谪的友人。
上片主要写贬谪途中的孤单凄苦及烦乱的心绪。万物勃兴的春天本来能给人以美的享受，使人充满希望和信心。但这在身处逆境的作者眼中，却完全失去了光彩，变成了另外一种样子。开头三句写作者目睹春天的到来，感叹时光流逝，担心自己将终老贬所。这自然是悲哀的，因此在他眼中，梅红柳绿的大好春光包就变成“恼人春色”了。但这种烦恼躲不掉，摆脱不开，心烦意乱，伤感倍增，觉得“随云”“逐水”都无出路。最后四句写夕阳含山，暮霭沉沉，身处“一叶扁舟"之上，漂泊茫茫大江之中的孤寂景况。偏偏此时又传来“数声横笛”，这凄厉的笛声实在叫人断肠，无疑给孤寂的“行人”又增添了几分凄凉。
起首第三句谓“行客老沧洲”，有‘归欤’之叹。作者仕途不顺，所以想要归隐沧洲。此时自然界的景色是美好的。“梅吐旧英，柳摇新绿”，与《望海潮》其三“梅英疏淡”、“柳下桃溪”颇为相似；但那时心情舒畅，宛如“金谷俊游”，无意中还跟随他人女眷的车辆走了一段。然而此时由于在贬谪途中，便觉得春色恼人，心中烦乱。“北随云暗暗，东逐水悠悠”，写的是自汴入淮时的情景。宋朝时汴水在泗州人淮，秦少游《泗州东城晚望》诗云：“林梢一抹青如画，应是淮流转处山。”词人在这里举目北望汴京，只见乌云暗淡，其中寓有落第的悲观情绪。而所乘之船入淮向东，又觉流水悠长，不由感到前路迷茫。这一对句，看似工稳，然而按照词谱，却不全部相符合。秦观同门友张耒所作的《风流子》“亭皋木叶下”一首，清万树《词律》作为词的格式，并评价说：“此词抑扬尽致，不板不滞，用字流转可法，真名手也！”张词这一对句是“白蘋烟尽处，红蓼水边头”，当得上这样的评价。而秦观的“北随云暗暗，东逐水悠悠”，句法一变。前者两句皆为二、三句式，所以让人觉得“用字流转”，后者易为一、四句式，似觉词情拗怒。秦观是填词里手，叶梦得《避暑录话》称其词曰：“知乐者谓之作家歌。”在这里做变化句式，产生拗怒之音的原因大概是心中有一股郁勃情绪在吧！“斜日半山”应当写的是沿淮东去之时，回望泗州南山时所见。此时红日西斜，隐于半山，暮烟四起，笼罩于淮河两岸。直至“数声”二句，才点明身在船上。“数声横笛”，像是从唐人郑谷《淮上与友人别》诗“数声风笛离亭晚，君向潇湘我向秦”化用而来，其中寓藏离情，为下阕之张本。
下阕表面上是在回忆在汴京时的恋情。那时他冶游“平康”，曾遇一歌妓。他俩携手都门，无限欢娱。这情境全像杜牧当年一样：“十年一觉扬州梦，赢得青楼薄悻名。”也像他自己在《梦扬州》一词中所写：“长记曾陪燕游，酬妙舞清歌，丽锦缠头。殢酒为花，十载因谁淹留？”两情缱绻，一朝离别，不免无限思念。自“谁念断肠南陌以下，直至“此恨难休”，皆写对汴京恋人的相思之情。实际上却是追忆了同昔日旧好的深情厚谊，及失去这一切的哀怨，“青门同携手”的欢乐，“南陌”分别时的极度悲伤，西楼中无限的柔情蜜意，这一切都成为过去，永不再来，思之如梦，念之断肠。接下四句写天地有尽，离恨无穷，和情人今生再难相见，将抱恨终生，极言思念之甚。词人痛苦的心情及眼前凄凉的处境，吉凶难卜的命运，无处诉说！只有那心心相印的情人能理解，因此便“拟待倩人说与”，但这凄惨的境遇让她知道了只能使她忧伤，还是不说吧。这种怜念情人，欲言又止的内心矛盾和苦衷，使意更深、情更切。这正是作者在贬谪途中想和同时被贬的友人联系，而又怕招来祸害的矛盾心理的真实反映。其中化用白居易《长恨歌》中两个七言句，为四个偶句，虽有割裂之嫌，而真情流贯，尚属感人。歇拍二句，稍一宕开，旋即收住，有有余不尽之致。
清人周济《宋四家词选》评秦少游《满庭芳》（山抹微云）时说：“将身世之感，打并入艳情，又是一法。”完全可以移作此词的评语。词人屡试不第，落魄归来，只能通过艳情，抒写一腔悲愤。
此词除“北随云”二句外，大体恪守格律。万树《词律》卷二分析此调云：“调中四字四句者，前二段，后一段，作者多用俪语。”秦观也是这样。如同前段“梅吐旧英，柳摇新绿，恼人春色，还上枝头”，以及“斜日半山，暝烟两岸；数声横笛，一叶扁舟”，除“恼人”二句外，都用骈俪语言，对仗工整，音节浏丽，给人以美感。后段“天长地久”四句按照这样写，却不如之前几句的自然流美，带有人工痕迹。
词中描写了江南水乡春汛时的山光水色和怡情悦性的渔人形象：春江水绿、烟雨迷蒙，雨中青山、江上渔舟，天空白鹭、岸畔桃红，江水猛涨，鳜鱼正肥时；青箬笠，绿蓑衣，渔人醉垂忘归时。全词着色明丽，用语活泼，生动地表现了渔夫悠闲自在的生活情趣。这是一幅用诗写成的山水画，这是一首色彩明优意万千，脱离尘俗钓湖烟。思深韵远情融景，生活任行乐自然的抒情诗。
“西塞山前白鹭飞”首句，点明地点；此西塞山何处？鄂州、湖州？虽有异议，对词境来说倒无所谓。白鹭是自由、闲适的象征，“众禽无此格，玉立一间身。清似参禅客，癯如辟谷人”、“漠漠江湖自在飞，一身到处沾渔矶”，写白鹭自在地飞翔，衬托渔父的悠闲自得。
“桃花流水鳜鱼肥”第二句，点出江南水乡最美好的季节——正是桃花盛开，江水猛涨，鳜鱼正肥时。“桃红”与“流水”相映，显现了暮春西塞山前的湖光山色，渲染了渔父的生活环境。
“青箬笠，绿蓑衣，斜风细雨不须归”写的都是他们。“箬笠”就是用竹丝和青色箬竹叶编成的斗笠。“蓑衣”是用植物的茎叶或皮制成的雨衣。如果以龙须草（蓑草）为原料，它就是绿色的。“归”，回家。“不须归”，是说也不须回家了。作者在词里虽然只是概括地叙述了渔夫捕鱼的生活，但是，读者通过自己的想象，完全可以体会到词的言外之意。从渔翁头戴箬笠，身披蓑衣，在斜风细雨里欣赏春天水面的景物，读者便可以体会到渔夫在捕鱼时的愉快心情。
作者是一位山水画家，据说他曾将《渔歌子》画成图画。确实，这首词是富于画意的。苍岩，白鹭，鲜艳的桃林，清澈的流水，黄褐色的鳜鱼，青色的斗笠，绿色的蓑衣，色彩多么鲜明，构思也很巧妙，意境优美，使人读作品时，仿佛是在看一幅出色的水乡春汛图。
此词在秀丽的水乡风光和理想化的渔人生活中，寄托了作者爱自由、爱自然的情怀。词中更吸引读者的不是一蓑风雨，从容自适的渔父，而是江乡二月桃花汛期间春江水涨、烟雨迷蒙的图景。雨中青山，江上渔舟，天空白鹭，两岸红桃，色泽鲜明但又显得柔和，气氛宁静但又充满活力。而这既体现了作者的艺术匠心，也反映了他高远、冲澹、悠然脱俗的意趣。此词吟成后，不仅一时唱和者甚众，而且还流播海外，为东邻日本的汉诗作者开启了填词门径，嵯峨天皇的《渔歌子》五首及其臣僚的奉和之作七首，即以此词为蓝本改制而成。