全诗四句，这四句诗包含着一前一后两个场景相同、相互映照的场面。
诗的开头两句是追忆。“去年今日此门中”，点出时间和地点，写得非常具体，足见这个时间和地点，在诗人心中留下了多么深刻难忘的记忆。第二句是写人，诗人拈出一个人们犹知的形象——桃花，春风中的桃花人人都知道是何等的艳丽，而“人面”竟能“映”得桃花分外红艳，则“人面”之美可以想见；再者，本来已经很美的“人面”，在红艳艳的桃花映照之下定是显得更加青春美貌，风韵袭人。一个耀眼的“红”字，正是强烈地渲染出这种相映生色的景象和气氛。面对着这一幅色彩浓丽、青春焕发、两美相辉的人面桃花图，不用说姑娘的神采美貌如在目前，就是她的情态，诗人的心事，彼此藏在心中的欢爱和兴奋，也都是可以“思而得之”的。
下片则是说还是春光烂漫、百花吐艳的季节，还是花木扶疏、桃树掩映的门户，然而，使这一切都增光添彩的“人面”却不知何处去，只剩下门前一树桃花仍旧在春风中凝情含笑。桃花在春风中含笑的联想，本从“人面桃花相映红”得来。去年今日，伫立桃树下的那位不期而遇的少女，想必是凝睇含笑，脉脉含情的；而今，人面杳然，依旧含笑的桃花只能引动对往事的美好回忆和好景不常的感慨了。“依旧”二字，正含有无限怅惘。
整首诗其实就是用“人面”、“桃花”作为贯串线索，通过“去年”和“今日”同时同地同景而“人不同”的映照对比，把诗人因这两次不同的遇合而产生的感慨，回环往复、曲折尽致地表达了出来。对比映照，在这首诗中起着极重要的作用。因为是在回忆中写已经失去的美好事物，所以回忆便特别珍贵、美好，充满感情，这才有“人面桃花相映红”的传神描绘；正因为有那样美好的记忆，才特别感到失去美好事物的怅惘，因而有“人面不知何处去，桃花依旧笑春风”的感慨。
从故事情节来看，这是一首即兴的诗，它给人看到的似乎只是两个简单的画面——桃花相映着的人面，人面去后的桃花。但是，由于人物的活动贯串其间，由于画面与画面、画面里（桃花）与画面外（诗人）的对比、映衬，便巧妙地显示了人物感情的发生、发展和起伏跌宕的变化，诸如初遇的脉脉含情，别后的相思，深情的重访，未遇的失望等等，都或隐或现地表达出来了。全诗自然浑成，犹如从心底一涌而出的清泉，清澈醇美，令人回味不尽。
“寻春遇艳”和“重寻不遇”是可以写成叙事诗的。作者没有这样写，正说明唐人更习惯于以抒情诗人的眼光、感情来感受生活中的情事。
上片，咏东园的迷人风光。第一、二句，站在第三者的立场上写“东园好”。“见说”，点明非“听说”，是亲身感受。具体好在哪里，好在“能消”像苏轼这样政治“北客”之“愁”闷，这是铺垫之笔。第三、四、五句，写百闻不如一见，东园风光实属迷人。虽然苏轼不是本乡本土的人，但一“登楼”，纵观全景，气象万千，顿觉豁然开朗，令人神往。这是苏轼“行尽江南南岸”所未曾见到的美景，颇有范仲淹在岳阳楼上所观写山光水色的韵味，令人心旷神怡。正因田园如画的仪真，才把苏轼“淹留”、挽留住了。
下片，特写眼前事物，感叹人生短暂。第一、二句特写白昼“短日”的“枫”虽“明”而已“缬”，微寒“清霜”的“菊”既“暗”而又“球”。这典型的带有双关意义的深秋景物，是在给予苏轼什么。第三句，一语道破此时此地苏轼思想的真谛：“流年回首付东流！”似有人生短暂、不堪回首的愁闷。最后两句，借助古代文人的传统心理来自我安慰：凭借东园的美好景色，让苏轼内心增添了愉悦。凭借潘岳的能耐，延缓苏轼逐渐发白的双鬓。
全词借景抒情，借东园美好迷人的风光事物，敞开了苏轼旷达宽阔的胸怀，消解了多年积抑于心的愁闷。触发了苏轼复杂的思想情绪中的消极心态，也为苏轼内心增添了心事忡忡的忧愁。