此词为新楼落成而作，前五句就“安远”字面着想，虚构了一番境界，也客观地显示了筑楼的时代背景。“龙沙”语出《后汉书·班超传赞》：“坦步葱岭，咫尺龙沙”，后世用来泛指塞外，这里则指金邦。“虎落”为护城笆篱。宋朝南渡时，武昌是抵抗金人的战略要地，和议达成，形势安定下来，遂出现了“月冷龙沙，尘清虎落”的和平局面，这便是“安远”的意指了。汉制禁民聚饮，有庆典时则例外，称为“赐酺”。“今年汉酺初赐”是借古典以言近事。据《宋史》军共一百六十万缗，军中载歌载舞，一片欢乐景象。故接云：“新翻胡部曲，听毡幕元戎歌吹。”胡部本是唐代西凉地方乐曲。《新唐书·礼乐志》：“开元二十四年，升胡部于堂上。……后又诏道调、法曲与胡部新声合作。”由此边地胡曲进入殿堂。又据《新唐书》“琵琶、笙、横笛、短笛、拍板，皆八；大小箜篥，皆四。工七十二人，分四列，属舞筵之隅，以导歌咏。”它在盛唐时本是“新声”，今又“新翻”之，用此盛大乐队以为帅府中歌舞伴奏，颇具气象。以边地之曲归为中原之用，亦寓“安远”之意。
以下正面写楼的景观。先写楼的整体形势，然后作细部刻画，从局部反映建筑的壮丽：红漆栏干曲折环绕，琉璃檐牙向外伸张。“槛曲萦红，檐牙飞翠”二句，铸词极工，状物准确生动，特别是“萦红飞翠”的造语，能使人产生形色相乱、目迷心醉的感觉。紧接“人姝丽”三句，又照应前文“歌吹”，写楼中宴会的盛况“粉香吹下，夜寒风细。”夜寒点出冬令，风细则粉香可传，歌吹可闻。全是一派温馨承平的气象。“此地”便是黄鹤山，其西北矶头为著名的黄鹤楼所在，传说仙人子安曾乘鹤路过。所以过片就说：这样的形胜之地，应有妙笔生花的“词仙”乘白云黄鹤来题词庆贺，人仙同乐。仙人乘鹤是本地故事，而“词仙”之说则是就楼成盛典而加以创用。“拥”字较“乘”为虚，“君”乃泛指，都能见出作者运思用笔的灵活自如。说“宜有”并非真有，不免有些遗憾。
其实通观词的下片，多化用崔颢《黄鹤楼》诗意，进而写登楼有感。大抵词人感情很复杂，“安远楼”的落成并不能引起一种生逢盛世之欢，反而使他产生了空虚与寂寞的感受。“玉梯凝望久”，他在想什么？“叹芳草萋萋千里”翻用崔诗“芳草萋萋鹦鹉洲”。“天涯情味”，正是崔诗“日暮乡关何处是，烟波江上使人愁”的况味。这是客愁。“仗酒祓清愁，花销英气。”靠流连杯酒与光景销磨志气，排遣闲愁。这是岁月虚掷之恨。这和“安远”有什么关系呢？关系似乎若有若无。或许“安远”的字面能使人产生返还家乡、施展抱负等等想法，而实际情况却相去很远吧。于是词人干脆来个不了了之，以景结情：“西山外，晚来还卷，一帘秋霁”，仍归到和平的景象，那一片雨后晴朗的暮色，似乎暗寓着一个好的希望。但应指出，这三句乃从王勃《滕王阁诗》“朱帘暮卷西山雨”化出，仍然流露出一种冷清索寞之感。
总之，这首词虽为庆贺安远楼落成而作，力图在“安远”二字上做出一篇喜庆的“文章”；但自觉不自觉地打入作者身世飘零之感，流露出表面承平而实趋衰飒的时代气氛。这就使词的意味显得特别深厚。
这首词的上片触景生怀，因记起昔日与友人共游湖上携手情景，再转写眼前湖上独游，落红无数的伤感。下片再写湖上游人如织、画船争流的繁华景象，反衬自己独游的孤独，极力渲染孤独之苦和怀人之思。全词深婉丽密，曲折有致，生动传神，别具风采。由伤春、忆友、慨叹，到花下独奏，时喜时忧，波澜起伏，格调凄婉。
上阙点明时间地点，在叙事中借景抒情。美好的春光能给人带来欢乐，但也容易触动离人的愁思，萦损柔肠，使人消瘦，古代诗词中写伤春这个内容的非常多。但作者是写离愁，因而在取景时，着眼点是西湖垂柳。古代有折柳赠别的习俗。看到垂柳，极易触发离愁。开端擒题，“何堪”一词，用在“春瘦”与“垂柳”之间，使意思递进一层。对于西湖垂柳能撩拨人的愁思，因为那是与友人“湖上携手”之处。烟外峰峦，虽别具风姿，然而如今“自看”独游，就不能不缅怀昔日的“湖上携手”。由“湖上携手”接着想到对方“归后”的萧瑟风情，于是集中笔力来加以烘染刻画。
“早乱落香红千亩”，是写花兼点时序。商卿离去，独来西湖，时已暮春，那“玉雪照映，吹香薄人”的千亩红梅，如今早已凋败零落，令人低回伤神，既然红梅已不复存在，旧游的踪迹又在何处。“一叶凌波缥缈，过三十六离宫，遗游人回首。”是写游船兼写情思。乘上轻舟，荡漾于烟波之中，那鳞次栉比的离宫别殿让人频频地回首眺望。以上叙事，写作者独游西湖，即景生情，引起对友人的深切思念。
下阙拓展思路，仍紧扣西湖景物，以婉媚密丽之笔，写他人之乐，进行反衬。“犹有”紧承上片，词意断而仍续。词人驾一叶扁舟，于落花缤纷中从水上缥缈而过，闪现在眼前的，是那精美的画船上，美女举袖障面；两岸的歌馆里佳人持扇伫立。她们面容上涂着时兴的宫黄，名贵的头饰闪烁着光彩。这些美女歌娃争艳比美，嬉游如故。而自己，友人已经远去，无人可与共赏良辰佳景，仿佛欢乐只是属于他人！
如今，充溢着词人整个心灵的，只有如同往常一样的无限的春愁，而这伤春的意绪犹如酒一般的浓烈，在词人心怀中荡漾起伏。要把它谱入丝弦自已聆赏吧，并不是所有人都能够理解这伤春怀友的情思，据词序中所言，俞灏风度儒雅，善音乐，每有山林隐居之想，堪称江湖文人白石的知音。“今予离忧，商卿一行作吏，殆无复此乐矣。”语极沉痛。因而，此词煞拍几句所表达的感情，就不仅是一般的怀友之情，它实在是说，知音已人仕途，相伴共享山林、琴曲之乐恐不可复得，难怪他“伤春似旧”，纵“写入吴丝自奏”，也怕无人理解他此时的心境了！陈郁《藏一话腴》谓白石“襟怀洒落，如晋、宋间人。意到语工，不期于高远而自高远”，于此可见。