此词为新楼落成而作，前五句就“安远”字面着想，虚构了一番境界，也客观地显示了筑楼的时代背景。“龙沙”语出《后汉书·班超传赞》：“坦步葱岭，咫尺龙沙”，后世用来泛指塞外，这里则指金邦。“虎落”为护城笆篱。宋朝南渡时，武昌是抵抗金人的战略要地，和议达成，形势安定下来，遂出现了“月冷龙沙，尘清虎落”的和平局面，这便是“安远”的意指了。汉制禁民聚饮，有庆典时则例外，称为“赐酺”。“今年汉酺初赐”是借古典以言近事。据《宋史》军共一百六十万缗，军中载歌载舞，一片欢乐景象。故接云：“新翻胡部曲，听毡幕元戎歌吹。”胡部本是唐代西凉地方乐曲。《新唐书·礼乐志》：“开元二十四年，升胡部于堂上。……后又诏道调、法曲与胡部新声合作。”由此边地胡曲进入殿堂。又据《新唐书》“琵琶、笙、横笛、短笛、拍板，皆八；大小箜篥，皆四。工七十二人，分四列，属舞筵之隅，以导歌咏。”它在盛唐时本是“新声”，今又“新翻”之，用此盛大乐队以为帅府中歌舞伴奏，颇具气象。以边地之曲归为中原之用，亦寓“安远”之意。
以下正面写楼的景观。先写楼的整体形势，然后作细部刻画，从局部反映建筑的壮丽：红漆栏干曲折环绕，琉璃檐牙向外伸张。“槛曲萦红，檐牙飞翠”二句，铸词极工，状物准确生动，特别是“萦红飞翠”的造语，能使人产生形色相乱、目迷心醉的感觉。紧接“人姝丽”三句，又照应前文“歌吹”，写楼中宴会的盛况“粉香吹下，夜寒风细。”夜寒点出冬令，风细则粉香可传，歌吹可闻。全是一派温馨承平的气象。“此地”便是黄鹤山，其西北矶头为著名的黄鹤楼所在，传说仙人子安曾乘鹤路过。所以过片就说：这样的形胜之地，应有妙笔生花的“词仙”乘白云黄鹤来题词庆贺，人仙同乐。仙人乘鹤是本地故事，而“词仙”之说则是就楼成盛典而加以创用。“拥”字较“乘”为虚，“君”乃泛指，都能见出作者运思用笔的灵活自如。说“宜有”并非真有，不免有些遗憾。
其实通观词的下片，多化用崔颢《黄鹤楼》诗意，进而写登楼有感。大抵词人感情很复杂，“安远楼”的落成并不能引起一种生逢盛世之欢，反而使他产生了空虚与寂寞的感受。“玉梯凝望久”，他在想什么？“叹芳草萋萋千里”翻用崔诗“芳草萋萋鹦鹉洲”。“天涯情味”，正是崔诗“日暮乡关何处是，烟波江上使人愁”的况味。这是客愁。“仗酒祓清愁，花销英气。”靠流连杯酒与光景销磨志气，排遣闲愁。这是岁月虚掷之恨。这和“安远”有什么关系呢？关系似乎若有若无。或许“安远”的字面能使人产生返还家乡、施展抱负等等想法，而实际情况却相去很远吧。于是词人干脆来个不了了之，以景结情：“西山外，晚来还卷，一帘秋霁”，仍归到和平的景象，那一片雨后晴朗的暮色，似乎暗寓着一个好的希望。但应指出，这三句乃从王勃《滕王阁诗》“朱帘暮卷西山雨”化出，仍然流露出一种冷清索寞之感。
总之，这首词虽为庆贺安远楼落成而作，力图在“安远”二字上做出一篇喜庆的“文章”；但自觉不自觉地打入作者身世飘零之感，流露出表面承平而实趋衰飒的时代气氛。这就使词的意味显得特别深厚。
上片写作者静坐书室，意外地听窗外上树上有沙鸥前来投宿，十分惊喜。“偶听上梢扑鹿”，“偶”字意即偶然地，或者说是意料之外地，“扑鹿”是象声词。首句说，他偶然听到门前上树梢上有飞鸟拍打翅膀的“扑鹿”声，凭着生活经验，他“知是沙鸥来宿”。首二句无丝毫的渲染与夸饰，似乎是简单地平铺直叙，但只要稍稍揣摩，便不难发现，这十二个字既写出了环境的寂静，又写出了树上鸥鸟的活动，从字面看，人未见形，鸥未露体，而在读者的意念中，却分明“看”到作者凝神谛听的神态，“听”到沙鸥抖动翅膀的扑扑鹿鹿的声音，这足以说明，这两句近似口语的话，并非随意信手写来，而是经过认真推敲锤炼而得，因此颇为传神。
“稚子莫喧哗，恐惊他。”沙鸥前来投宿，作者无限欣喜，他小心翼翼地向正在玩耍的孩子们示意，告诫他们不要吵闹，恐怕惊吓了鸥鸟。这两句于字里行间透露出作者对沙鸥这种鸟儿非常喜欢，同时表现了作者对生活的热爱，而且增加了本词的生活气息。“莫”字和“恐”字表达出作者对沙鸥由衷的喜爱。
下片写鸥鸟远飞，词人不免怅然若有失，进而将鸥鸟人格化，与之沟通思想，借以抒发心志。“俄顷忽然飞去，飞去不知何处？”作者正因为沙鸥落在“诚斋”门前上树上高兴，转瞬间沙鸥忽然振翅远飞，作者深感失望，先前的激情顿时冷落下来。“不知何处”说明作者对鸥鸟十分记挂，面对一片空虚的茫茫夜空，他万分焦虑，却又无可如何。两句中“飞去”二字重复使用，这种手法在现代修辞学上称为“顶真”，因为用得恰切自然，所以读起来丝毫没有重复的感觉。
“我已乞归休，报沙鸥。”结尾两句，作者和盘托出心志，把自己辞官归隐的事告诉沙鸥，表述了他期望求得沙鸥“理解”的心情。据《宋史》记载，杨万里长期被贬，愤而辞官家居，临终前曾有“韩佗胄奸臣，专权无上，动兵残民，谋危社稷。吾头颅如许，报国无路，惟有孤愤！”的话，说明他因为报国无门，又不被人理解，忧愤至死。本词把沙鸥视为“知己”，寄托自己的感情，其意也在于排解内心的苦闷。