此诗开头两句，诗人先勾勒出一幅秋日行旅图，把读者引入一个秋浓似酒、旅况萧瑟的境界。“红叶晚萧萧”，用写景透露人物一缕缕悲凉的意绪：“长亭酒一瓢”，用叙事传出客子旅途况味，用笔干净利落。此诗另一版本题作“行次潼关，逢魏扶东归”，这个材料，可以帮助读者了解诗人何以在长亭送别、借瓢酒消愁的原委。
然而诗人没有久久沉湎在离愁别苦之中。中间四句笔势陡转，大笔勾画四周景色，雄浑苍茫，全是潼关的典型风物。骋目远望，南面是主峰高耸的西岳华山；北面，隔着黄河，又可见连绵苍莽的中条山。残云归岫，意味着天将放晴；疏雨乍过，给人一种清新之感。从写景看，诗人拿“残云”再加“归”字来点染华山，又拿“疏雨”再加“过”字来烘托中条山，这样，太华和中条就不是死景而是活景，因为其中有动势——在浩茫无际的沉静中显出了一抹飞动的意趣。
诗人把目光略收回来，就又看见苍苍树色，随关城一路远去。关外便是黄河，它从北面奔涌而来，在潼关外头猛地一转，径向三门峡冲去，翻滚的河水咆哮着流入渤海。“河声”后续一“遥”字，传出诗人站在高处远望倾听的神情。诗人眼见树色苍苍，耳听河声汹汹，把场景描写得绘声绘色，使读者有耳闻目睹的真实感觉。这里，诗人连用四句景句，安排得如巨鳌的四足，缺一不可，丝毫没有臃肿杂乱、使人生厌之感。其中三、四两句，又出现在他的另一首作品《秋霁潼关驿亭》诗的颔联，完全相同，是诗人偏爱的得意之笔。
“帝乡明日到，犹自梦渔樵”。本来，离长安不过一天的路程，作为入京的旅客，总该想着到长安后便要如何如何，满头满脑盘绕“帝乡”去打转子了。可是诗人却出人意外地说：“我仍然梦着故乡的渔樵生活呢！”含蓄地表白了他并非专为追求名利而来。这样结束，委婉得体，优游不迫，有力地显出了诗人的身份。
这首诗作于作者晚年。诗题取首句前二字，实类“无题”。
首句写堂静。用静中之动来反衬其静。虚堂，空堂，用《庄子》“虚室生白”之意。孤身独处，更无他人，所以觉得堂屋是空荡荡的。孤身、夜深，空堂显得分外寂静，只听到堂外草丛中不知什么虫子在鸣叫着。“草虫鸣”是静中之动，因“寂寂”才能听见虫鸣；听得见虫呜，愈见堂之“寂寂”。如此一个静悄悄的堂屋，正可酣眠。
然而，次句却写人不眠。此时，独处于堂屋之中的诗人斜靠在枕头不能成眠。堂寂，虫鸣，都是他在不眠之中感觉到和听到的。之所以“不眠”，是因为“难忘旧情”，旧情萦绕在诗人心头，令他难以忘怀。旧情之“情”，在这里不应解作“恋情”或“爱情”。一是不曾听说诗人生平有过浪漫的或不幸的爱情，再是从三四两句的意境与全诗的氛围看，也与恋情无涉。所以这里的旧情，也是作者《江南春二首》之中的“愁情”，即“暮年迁谪，流落不归之意”。范雍《忠愍公诗序》曾说：“大约公之为诗，多有此意。”那么，这里的“旧情”可以归入“此意”。另外，诗人说成“旧情”，是故意含糊其辞。总之，暮年迁谪，流落不归，是诗人一生中愁沁心髓的不幸，他难以忘怀，袭上心来时，就要欹枕难眠了。
按照作品的思路，下面本来应该倾吐作者难忘旧情的悲伤，而诗人却没有这样，“而今识尽愁滋味，欲说还休”，于是他绕过“旧情”把目光转向窗子，来了个写景句：“斜月半轩疏树影。”月光斜照在半截窗户上，又把稀疏的树影投在堂屋的地上。树影摇曳不定，诗人已感到寒意，所以他觉得夜半更深的风露更加凄清了。诗到此句，便戛然而止。
其实诗人并没有忘记旧情。尽管“旧情”只如一个闪电，瞬间便消逝了，而更多的笔墨用于写景。但是，这些景物的描写已着上了“旧情”的色彩，而使一切景语皆成了情语。起笔的“虚”字就语涉双关：“虚堂寂寂”，是他自己的灵台孤寂，方感到空堂分外寂静；他把目光转向窗户，看那月光，看那树影，原是为了解脱“旧情”的萦绕，但是，看到的又是凄清的环境，而环境的凄清正是他心境凄然的反照。总之，诗人于“旧情”欲言又止，只是在亦即亦离之中，融情入景，描绘眼前景物，构成一种凄迷的氛围，烘托出一缕难忘旧情的凄楚的情感，这就比直陈胸臆，显得更加缠绵悱恻，蕴藉婉曲，余味不尽。同时他身为大臣，政治上的不幸际遇是不好多说的，也只能出之以委婉之词，点到为止。
