这首咏史诗，就秦始皇筑万里长城事发表议论。前两句写筑城。第一句说长城高而广，城上屯扎着千军万马，铺陈城的高大稳固，守城的人众多，难以撼动。次句说筑城的目的，是为了抵御外部胡人的侵略，巩固自己的政权，以便于“一世而达万世”，永保帝业。三、四句突转，说秦始皇只知道危险来自外边，自以为有了长城，便可高枕无忧，却不知道体恤人民，结果酿成内乱，激起民变，陈胜、吴广揭竿而起，秦政权没多久就完结了。诗揭示的是这样一个历史规律：内政不修，对人民残酷压迫，是国家灭亡的主要原因，外部的侵扰倒是其次的。当时宋朝对人民的压榨也很厉害，百姓怨声载道，诗人在这里明是咏史，也是针对现实，对统治者发出警告。
咏史诗所咏如果是前人没咏过的史实，就应该述清事件的来龙去脉，直接发表议论；如果所咏是熟事，务必转换角度，翻出新意，切忌人云亦云。胡仲参这首诗所咏是秦以暴政失国，这个题目，前人已经作了许多论述，所以这首诗擒住修筑长城备胡这一点，肯定长城的高广及防御功能，然后生发开去，牵出对立面，说秦始皇刻意预防的地方倒没出什么问题，他没想到的地方反而成了导致亡国的关键。这样组织材料加以议论，便给人以思考，也给人以新鲜感。
胡仲参这首诗的构思布局，与唐章碣的《焚书坑》有些相同。章碣诗云：“竹帛烟销帝业虚，关河空锁祖龙居。坑灰未冷山东乱，刘项原来不读书。”说秦始皇提防书生，结果灭秦的人恰是不读书的人，与胡诗一样，都是从相反处做文章。元人陈孚有首《博浪沙》诗，是从正面做文章的，也很有趣味，诗云：“一击军中胆气豪，祖龙社稷已动摇。如何十二金人外，犹有人间铁未销。”说秦始皇收尽民间铁，铸成十二金人，没想到仍然有大铁椎在，使他差点丧命。由此可见，诗材遍地皆是，只要细心挖掘，就能找到好的题目。
这首诗首联点题，写了巴陵山的春色，也写出了岳阳楼的气势；颔联写湖景，水与山皆视野开阔，气势磅礴；颈联前句想象洞庭鱼龙变幻，着眼于自然，后句追思帝子神灵，着眼于神话；尾联写诗人陶醉于湖光山色中，乐而忘返，且运用神奇的典故，借助疑问句式，把读者引向一个诡异惝恍的境界。全诗以乐景开始，以愁意结局，急转收束，余味如笛音，悠悠不尽。
首联从大处落笔，写洞庭湖的无边春色。李白《陪侍郎叔游洞庭醉后》有云：“巴陵无限酒，醉杀洞庭秋。”写的是秋景。杨基笔下所展现的，却是巴陵春色浓如酒，因而更加容光焕发，楚楚动人的景象。“阑干落洞庭”紧承上句，说春色纵横，充溢于洞庭湖面，写出了楼上人与湖中景互相契合的意趣，与首句一气呵成。
颔联山、水分叙。水则气吞三楚见出湖面的辽阔；山则遥接九嶷，显出无限的青苍。寥寥二语，便将洞庭湖及其周围环境勾画出来。“水吞三楚白”之“吞”，与杜甫“吴楚东南拆”之“坼”，孟浩然“波撼岳阳城”之“撼”，堪称异曲同工。“山接九疑青”，一个“接”字，写出洞庭湖的深远幽缈，横无际涯。
因为说到九嶷山，便自然想起传说中南巡死于此地的舜，以及舜亡后没于湘水的娥皇、女英。杨基抓住了这一特点，以空灵之笔写出颈联二句：“空阔鱼龙舞，娉婷帝子灵。”空阔的洞庭，鱼龙潜跃，气象万千，诗人因此给洞庭的山山水水笼上了一层迷人的神话般的色彩。
何人夜吹笛，风急雨冥冥”这结尾两句纯系想象之词，似实而幻，隐约中又辟一灵境。范仲淹说的“朝晖夕阳，气象万千”，在杨基的诗中，则用浪漫的诗情和富有神韵的笔调把它表现出来了。同时，这最后两句又隐约包含着一点范仲淹《岳阳楼记》中所说的迁客骚人之感。联系到杨基入明以后短短几年间一贬河南，二贬钟离，三被免于江西任上的经历，则此时虽然起复，但胸中恐怕也不会毫无芥蒂了，故而有此感。
此诗在明人五律中可称佳作。诗通篇笔墨都是为洞庭湖的“气象万千”图形传神，堪称是一首真正的山水诗。特别是诗人写景虚实结合，实景摹其形态，虚景传其神韵，而且好像有意与前贤比试似的，也用五言律诗来写。《明诗别裁》称其“五言射雕手”洵非虚誉。全诗以乐景开始，以愁意结局，急转收束，显出了诗人深厚的功力。
《奉酬李都督表丈早春作》下截申明上截，通首一气，抒写中有无限曲折。首联“力疾坐清晓，来时悲早春”叙事，说扶病强起，几不知春至，因拜读亲友李表丈寄来的《早春》诗而引发了伤春之感。颔联“转添愁伴客，更觉老随人”转添春愁，又因愁伤老。见得伴客萧条，随人俯仰则更可悲，已透下望乡未已意。颈联“红入添花嫩，青归柳叶新”写实，说岁序更新，添嫩柳青，春色堪娱。“入”“归”二字，炼字极活，为句中之眼，字字皆响，与他人随意点缀者不同，是化腐为新之法。“入”“归”二字极生动、传神地写出早春的意蕴，写出生命的复苏与萌动。 两句实写春景，用笔舒缓，为下文铺垫。尾联“望乡应未已，四海尚风尘”回应上截，翻出已愁。说世乱未靖，归期无日，尤不免于伤春伤老。诗人由眼前春景更触动思乡之情。
全首只一“悲”字；连“红入添花”、“青归柳叶”，俱作“悲”字用，不作“早春”佳字用。“转添”、“更觉”，切上“早春”，透下“红入”、“青归”字。当此添花柳叶之时，而四海风尘，望乡复切，则客之愁而人之老可知，所以见起处“悲早春”“悲”字之妙也。曰“犹未已”、“尚风尘”，说明“转添”、“更觉”之故。诗中抒发了诗人伤春、伤老和流落他乡的羁旅之情。