上片，写“秋池阁”的秋色。“风傍晓庭帘幕”，说晨风吹进庭院，掀开“帘幕”，给“秋池阁”这一类似宫廷园林带来了朝气。此为词人摄取的第一个画面。一个“傍”字，把晨风的清新味反映出来了。“霜叶未衰吹未落”，说“霜叶”还未枯萎，即使晨风吹它，它仍然挂在枝上。此为词人摄取的第二个画面。两个“未”字，把“霜叶”的生命力衬托出来了。“半惊鸦喜鹊”，说晨风发出嗖嗖声，吹动帘幕，也微微惊醒了沉睡的乌鸦和喜鹊。此为词人摄取的第三个画面。一个“半”字，把乌鸦、喜鹊与人的和谐传达出来了。三个画面艺术联缀成一幅生机勃勃的《秋池阁霜天图》长卷，颇有“万类霜天竞自由”的韵味。
下片，正面写秋兴。正是秋池阁霜天景色激起了词人的秋兴。“自笑浮衰情薄，似与世人疏略”，意在嘲笑浮衰薄情。词人此时还不到40岁，初入仕途，大有一番雄心壮志。然而，他面对着的是：自然界呈现一派恬淡和谐的大好秋光，可官场上却充满了谗诽、排挤的血雨腥风。他不禁发出嘲弄：那衰利似浮云，那情意似薄纸，有何追逐的价值，因为追衰逐利，人情冷漠，导致“与世人疏略”的窘境。可谓阅尽人间秋色，于词人这位通判来说，只有走累于文字，“一片懒心双懒脚，好教闲处著”这种得过且过的无奈的道路。词人还多了一颗“懒心”，一颗“懒心”，不去想它什么皇务；一双“懒脚”，也不去奔走什么政事。就让心和脚“闲处著”。嘲笑之言，入木三分。然而，与上片的那种欲寻永葆不衰的秋色的心愿相比，词人显然心头浮起与他“致君尧舜”，“奋厉有当世志”的豪情极不相符的消极心绪了，或许还潜藏着隐退而求恬淡生活的陶情。
全词，以秋色起兴，引出对仕途人生的感慨，心灰意懒，无情嘲弄。上片写景，园中景色宜人；下片议政，现实灰暗，嘲笑任意。
前四句“五月五日天晴明，杨花绕江啼晓莺。使君未出郡斋外，江上早闻齐和声”交代节令、天气、环境，渲染赛前热闹的气氛。
第五、六句写州郡长官前去观看竞渡。第七、八句用“罗衣”、“银钗”借代观看竞渡的女士，从味觉、视觉两方面形容观看比赛的人多。
第九至第十八句描绘第一次竞渡的情景，所用比喻特别多，例如以：飞万剑：形容棹影上下翻飞的快捷，以“鼓声劈浪鸣千雷”比喻鼓声既响又急，以“目如瞬”形容龙目的生动，以“霹雳惊”形容坡上观众喊声突发、惊天动地，以“虹霓晕”形容锦标五彩缤纷，令人五花缭乱。
第十九、二十句“疮眉血首争不定，输岸一朋心似烧”从参赛者和观赛者两个角度写竞渡双方的情绪，“两岸十舟五来往”写双方十艘船又比赛了五次，使竞渡又掀起了一个高潮。
第二十三句“须臾戏罢各东西”中的“各东西”意思是塞外以后各自分开，第二十四句“竞脱文身请书上”的意思是刚赛完，输方不服，双方又脱了上衣，露出刺花的身体，请求再决雌雄。
最后四句是作者观看竞渡后的感慨，由竞渡者的互不相让联想到执政者的朋党之争。