文杏馆是辋川园林中的重要建筑，馆在山之最高处。
诗的首二句写题面。“文杏裁为梁”，从司马相如《长门赋》“饰文杏以为梁”化来。文杏是极其名贵的杏树品种，据《西京杂记》卷一记载，当初修建上林苑时，群臣和外地纷纷贡献名果异卉，其中杏树珍品两种，即文杏和蓬莱杏。以后文杏在关中一带逐渐普及。文杏馆的得名，大抵因馆前植有文杏;而诗中却说“文杏裁为梁”，这就如同《楚辞·九歌》中的“桂棹兮兰枻”，意在夸饰馆的高雅。“香茅结为宇”，意谓用香茅结屋檐。香茅是一种有香味的茅草，又名茅菁或琼茅，生长于湖南和江淮之间。文杏馆的茅草也大有讲究，有香味，自非普通的低矮茅舍可比。立馆而不求华丽，茅庐而以馆名，这就使“文杏馆既区别于权贵势要们的亭榭馆阁，也区别于老杜浣花溪畔的经不起八月秋风的茅屋，它是高人王右丞啸傲流连之所，体现了主人的性格特征。
三、四句写其地之高。“不知栋里云，去作人间雨”，栋里有云，这是山居习见景象。而云自栋间出而降雨，人犹不知，则所居在山之绝顶可知。登过华山、泰山这样高山的人都可能有身出云表的体验：头顶是红日，脚下是云海，仿佛置身另一个世界，此时尘虑顿消，心境格外舒坦。当诗人置身文杏馆，注视着奄冉四泻的流云，并遥想它“去作人间雨”的情景，他的心境将不再“惆怅情何极”(《华子冈》)，而很可能变得平静而闲适。称山下为“人间”，诗人俨然以世外人自命。这样刻画文杏馆处境之高，迥出常情之外，动人遐想。
1021年（宋真宗天禧五年），宋祁二十四岁，与其兄宋庠以布衣游学安州（治所在今湖北安陆），投献诗文于知州夏竦，以求引荐。席间各赋“落花”诗，夏竦以为宋祁很有才，必中甲科。宋祁亦因此在宋初文坛崭露头角。足见此诗非一般惜花伤春之作。清代沈德潜说：“诗贵寄意，有言在此而意在彼者。”（《说诗晬语》）该诗即是。
首联破题，刻画落花时一片迷离凄苦的景象，状物而不滞于物。起句，诗人捕捉住所咏物的自然特征，以“素”、“红”代指花。唐人韩偓有“皱白离情高处切，腻红愁态静中深”（《惜花》）之句，么“白”、“红”状花。用借代这一修辞手法，使事物形象逼真。花的娇艳、春的绚丽如在目前。然而，它们却红颜薄命，夭折了，令诗人叹惋。“坠”、“翻”两字形象生动，情态感人，是从杜牧《金谷园》“落花犹似坠楼人”句化出。花本来是无情之物，却道“各自伤”，是说花有人性。落花的自伤飘零，乃诗人绸缪于青楼烟雨，别有难忘的幽恨。
颔联承上“落”意，从时空角度深入描绘了落花的全过程，极缠绵悱恻之致。出句描写落花飞动的舞姿。“更作”二字个性鲜明，感情强烈。“飘飘兮若流风之回雪”（《洛神赋》），其态可掬，“悲回风之摇蕙兮，心冤结而内伤”（《楚辞·九章·悲回风》），情状悲哀。对句写花终于落地之后，在地上仍不甘香消玉殒，虽已着地，仍不失红粉佳人的美容。其执着之情，从“犹成”两字中渗透出来。“半面妆”用的是梁元帝徐妃的典故。此两句不仅刻画落花尽态极妍，栩栩如生，而且融入了诗人自己深沉的感受，一往情深，不能自已。人物交融，托物寓情。表面上是描写外界景物，实则处处有诗人自己在，景物始终着有诗人的色彩。“更作”、“犹成”二语更加强了感情色彩。李商隐《和张秀才落花诗》中有“落花犹自舞，扫后更闻香”之句，是李商隐借落花勉励张秀才，不要因落第而颓废，应似落花一样自振自珍。宋祁此诗于此取法，所以刘克庄《后村诗话》说：“‘将飞更作回风舞，已落犹成半面妆’，宋景文《落花》诗也，为世所称，然义山固已云已。”不过，此诗之学李商隐，不在镂红刻翠，恍惚迷离之貌，而在于缠绵悱恻，一往情深之神。表面上咏物，实质上写诗人自己。至于所写的具体情事，则很难考证，亦不必深究。然而诗人的感受已经表露得很明显了，即是屈原那种“虽九死其犹未悔”的精神。李商隐诗的神髓在此，此诗的神髓也在此，这正是此联能传诵后世的原因所在。颈联以沧海客归，珠犹迸泪，章台人去，骨尚遗香，比喻落花的精诚专一，表现了诗人的忠厚悱恻之情。龚自珍《己亥杂诗》中“落红不是无情物，化作春泥更护花”即由此点化而成，都是加一层描写了“虽九死其犹未悔”的执著精神。
此诗借落花引起象外之义，感情沉郁，寄托遥深，传达给读者的是感受，而不是具体情事，达到了陈廷焯《白雨斋词话》所说“必若隐若现，欲露不露，反复缠绵，终不许一语道破”的境地。
上片主要写景，随着时间的推移，依次写出傍晚带雨的乌云在楼头洒落一阵骤雨之后又飘往他方。水向东流，云收雾敛，夕阳映柳，风吹帘动。这意象纷呈又气脉连贯的景色，组成了一幅幅动态的画面，美不胜收，加之鲜花美酒，使词人情不自禁地赞叹这良辰美景。又用“巫山”为美人的出场作了铺垫。
下片转入描写美人。从“美人”起五句都是刻画美人的情态，这是一个明眸如星、巧笑顾盼、翩若惊鸿、轻歌曼舞的美丽形象，她的舞扇带来的缕缕清风，吹散了凝结在词人心头的愁云。最后三句化用杜牧诗句，似乎自己已沉醉于酒色美景，忘怀一切了。用反问句，流露了他心头的苦闷。词人固然度过了一段美好时光，暂时忘掉了一切，但前不久在颍州因久雪百姓饥饿自己彻夜不眠，到扬州后吏胥催租，百姓无以为生，自己无力拯救的情景，仍历历在目。百姓的疾苦和自己的遭际，酿成浓浓的愁云，积压于心头。他只能借酒浇愁。欢娱吹散春愁只是暂时的，词人尽管狂放豪爽，但深隐于心头的创痛，却是无计消除的，旷达的笔触，只能使读者更体会到他内心的痛苦。