这首词上片写世事变幻莫测，人的政治理想遭到扼杀，功名变成一堆尘土。下片写眼前景物虽与昔日依旧，但时局却发生了巨大的变化。全词言短意深，从主客观多方面开解友人，寓郁愤于旷达开朗。
词的开头“白衣苍狗变浮云”，是从杜甫诗《可叹》中的“天上浮云似白衣，斯须改变如苍狗”二句得来，相较杜甫的比喻手法，词人直陈白衣苍狗变作浮云，将世事的离奇变幻直接和盘托出，出语惊厥，表达了自己的激愤之情，也无形中创造了阔大的境界。
紧接着“千古功名”一句，转言词人政治理想的破灭，表现出深深的惋惜喟叹之感。古人有“意气都成一聚尘”的名句，词人在此处夺胎于前人，借前贤的悲慨牢骚，抒发古今一辙的无奈困顿，情感得到了无限的叠加。
“好是悲歌将进酒”二句进一步借古诗抒发词人对政治上遭受迫害的友人的不平。《将进酒》中抑郁不得志的怨愤意气，《惜余春赋》中念远怀人的伤感氛围，在这首词中叠加呈现，得体且准确，使词作的主旨变得鲜明，词人对于胡铨的深切怀念和对他的不幸遭遇的同情，纤毫毕现，悉达笔端。
“风光全似中原日，臭味要须我辈人”两句为词人对友人处境的想象，谪人远走僻乡，心中时刻不忘中原，以至于目光所到之处全是家乡的影子。而他回顾身畔，却没有一个志趣相投的朋友，不免落寞孤寂，方知“臭味要须我辈人”，此处臭味即气味，指志趣相投，是词人与友人的隔空应答。两句前者是友人处境，后者是词人心绪，两相交叠，共同融合在词人的想象中。
末尾两句，词人将思绪转向现实，传达了对时局和自身命运的思考。“雨后飞花知底数”化自杜甫《曲江》中的“一片花飞减却春，风飘万点正愁人”，抒写暮春时节对无数落花的惋惜之情，也暗示了南宋朝廷的暗淡前途。
“醉来赢取自由身”，以情收束，表达词人对友人的劝勉和对自己的安慰。“自由身”是指不受拘束，此时胡铨已失去自由，“自由身”只得从酒醉中赢来，虽然并非真实，但多少是一种安慰。而对于词人来说，虽未受制，但也是不得自由，同样只能在醉后才能有片刻的自我，这一深刻的表述，将困顿的时局和世人的心绪描写得真实传神。
这是一首写旅愁的小令。
上片开头是：“饮散离亭西去，浮生长恨飘蓬”。词人饮罢饯行酒，与亲故辞别西去，感慨万分，怨恨自己一生象飞蓬那样到处飘泊。离亭，送别的驿亭。“浮生”一词，出自《庄子·刻意》“其生若浮，其死若休”。庄子认为人生在世虚浮不定，后世相沿称人生为浮生。这里，词人感慨自己的身世，如今踏上旅途，从此开始了“飘蓬”一般的生活，遥遥水路，漠漠苍天，词人内心极度凄凉，羁旅之恨油然而生。而这恨又是“长恨”，这就道出了“饮散”“西去”对词人来说并非第一次了，每重演一次，就会增加一分身世飘零之恨。一个“长”字，使恨的情感深化了。
词人生活在唐宋之交的动乱时代，这首词，可能就是徐昌图由闽入宋前的作品，它不仅反映了词人凄清的身世，也包容了唐末宋初离乱社会的影子。这次词人西去，是乘船而行的。他别情依依，禁不住频频回首：“回头烟柳渐重重”。送行的人已不见了，只有那岸上的杨柳象是笼罩着一重重的烟雾。“烟柳重重”既是状景也是写情。这是由于当词人看到烟柳迷茫而看不到人时，必然增添其内心的苦闷。因为柳色是最容易引起人的离情别意的，所以，写“烟柳重重”，实际上也就是“离情重重”，是把抽象、无形的愁情寄托在具体形象的烟柳中来表现而已。
接下去，词人转过头来，顺眼一望，却是“淡云孤雁远，寒日暮天红”。辽远的天际飘浮着几丝淡云：并不时地传来孤雁的鸣声，傍晚的落日，照得满天通红。此时此景，又不免使人感到：“浮云游子意，落日故人情”（李白诗）。词人象浮云一样飘流无依，象孤雁一样孑然影单，而寒日西沉，晚霞映天，却又唤起词人念乡思亲的凄伤之情，这一切既是词人眼前之景，也是他今后“飘蓬”生活的形象概括。这是由当前情景过渡到以后情景的写法，也是融情入景，即景抒情的写法，所以这二句可看作是词人特定心态下摄取的一组画面，既是实景，也是虚景，虚实相用，使画面极富表现力，它给读者的感受就不仅是自然景观了，更深刻的是这种景观中所隐含的离情别恨，它连绵不断，广阔深远。
下片写词人途中的孤寂心情。“今夜画船何处？潮平淮月朦胧”。词人辞别亲故，纵一叶孤舟西去，水路迢迢，暮色苍苍，想到归宿，词人不禁自问，愁绪充塞。夜深了，当词人从船舱里探出头来时，只见船已行在平波万顷的淮水上，空茫迷濛，孤月映水，朦胧凄清。“淮月”，照临淮水上空的月亮。词人通过气氛的渲染和景物的烘托，使内心的感伤之情与外在的空冷之景交融为一，传达出词人此时此地的冷寂情怀。这时候，词人愁绪难以排遣，只有借洒消愁了。然而，醉酒只能求得一时的解脱，“酒醒人静奈愁浓”，一旦酒醒，回到现实，只能更增愁情，不是三杯两盏淡酒就冲刷得掉的。一个“奈”字，突出了词人万般无奈的苦闷心情。结句：“残灯孤枕梦，轻浪五更风。”又进一步写他的这种感情。一个人躺在船里，辗转反侧，愁绪万千。一直熬到夜尽灯残之时，才对着残弱的烛光，勉强伏枕而眠，可惜好景不长，恍惚朦胧中波动船摇，词人梦断，原来是水面上起了风波。“五更风”，指黎明前的寒风，萧瑟凄寒。好一个“晓风残月”，令人难以忍受，可谓悲痛至极。
俞陛云《唐五代两宋词选释》曾评徐昌图的《临江仙》一词，曰：“状水窗风景宛然，千载后犹想见客中情味也”。其所以如此，就在于词人巧妙地融情与景为一体，写离愁却很少直接抒情，而是借助于外在的景物来表现词人内心的离愁别恨。词人沿情布景，景物的转承和变换、环境气氛的渲染和烘托，处处反衬出词人的内心世界。离愁难奈，感人至深。