诗一起便描绘了一幅凄凉衰败的落梅景象，透露出作者浓重的感伤，奠定了全诗凄怆忧愤的基调。“一片能教一断肠，可堪平砌更堆墙。”每一片飘零的梅花都使诗人触目愁肠，更哪堪那残破凋零的花瓣竟如雪片一般纷落，铺满了台阶又堆上了墙头。这两句诗与李后主《清平乐》词中的名句“砌下落梅如雪乱，拂了一身还满”所描写的意境极为相似，同样生动地表现了诗人惜花复伤春的情感。正是眼前这凄清的自然景象唤起了诗人对社会、人生的丰富联想。
颔联承上，用工整的对仗、形象的比喻进一步刻画落梅：“飘如迁客来过岭，坠似骚人去赴湘。”两句诗不仅生动描绘出落梅在风刀霜剑摧残下枯萎凋零、四散飘坠的凄惨情景，而且高度概括了历史上无数“迁客”、“骚人”颠沛流离的不幸遭遇。“迁客来过岭”，用“一封朝奏九重天，夕贬潮州路八千”的韩愈的典故；“骚人去赴湘”，指柳宗元因“永贞革新”失败被贬永州（今湖南零陵）一事。然而，这里的“迁客”、“骚人”又不仅指韩、柳，而且泛指漫长的封建社会里包括屈原、李白、自居易、刘禹锡、陆游等人在内的一切仕途坎坷的有才有志之士，含蕴极为丰富。在手法上，诗人将典故融化在诗里，如水中着盐，不见痕迹，显示了他在这方面的深厚功力。同时，用“迁客”、“骚人”迁谪放逐的遭遇来比喻“落梅”，不仅表达了对梅花的深刻同情，而且是对“迁客”、“骚人”梅花般高洁品格的赞美。取譬十分贴切。
颈联继写落梅之结局：“乱点莓苔多莫数。偶粘衣袖久犹香。”“乱点莓苔”，写曾经是那么美好高洁的梅花如今却沉沦萎顿于泥土之中，寂寞凄凉地与莓苔之类为伍。“多莫数”，极尽梅花凋残之形容，表现出诗人对其不幸命运的无限叹惋。但接下去却将笔锋一转，写梅花飘摇零落而不失其高洁，香气经久不灭。这两句与陆游《咏梅》中“零落如尘碾作泥，犹有香如故”异衄同工，赞美的显然不只是梅花，更是指那些虽身遭挫折而不改初衷、不易志节的“迁客”、“骚人”，运笔委婉，寄托遥深。
以上三联反复烘托渲染落梅景象，尾联在此基础上抒发议论，点明正意，是全篇的画龙点睛之笔。通常诗人在描写落梅之后多抒发自己的伤感，这里却别具会心地责备东风说：“东风谬掌花权柄，却忌孤高不主张。”表面上谴责东风不解怜香惜玉，却偏偏掌握了对众花生杀予夺的大权，忌妒梅花的孤高，任意摧残它，实则将暗讽的笔触巧妙而曲折地指向了历史上和现实中一切嫉贤妒能、打击人才的当权者。同时寄托了自己仕途不遇的感慨以及对当前这个弃毁贤才的时代的不满。笔力奇横，言近旨远，讽喻之意、不平之气，溢于言表。
这首咏梅诗通篇不着一梅字，却不仅刻画出梅花的品格和遭遇，而且处处透露出诗人的自我感情，是咏物诗的上乘之作。然而运笔却又是那么委婉，写梅又似写人，其旨在有意无意之间，表明诗人十分善于将悲愁感兴巧妙地融汇在诗歌形象之中，故能将咏物与抒怀结合得如此天衣无缝。此诗从咏梅这一常见题材中发掘出不平常的诗意，新颖自然，不落俗套，启人深思。从哀感缠绵中透露出来的那股抑塞不平之气，正是广大文士愤慨不平心声的集中表露，无怪当权者视为“讪谤”，一再加害于他，而这便是此诗的旨趣所在。
作者回到绍兴的时候正值秋季，所以此词从秋景起笔，“扫西风门径，黄叶凋零，白云萧散”。西风有知，似乎知主人归来，殷勤地扫除门径以示迎接。西风吹得黄叶凋零了，白云萧散了。凋零、萧散，其实正是作者当时的心境的反映。此番回到故乡，他并没有感受到一般应有的那种温暖与亲切。内心有着一种难以明言的隐微情绪。“柳换枯阴，赋归来何晚！”辞官四年，自无荣耀之感，却有点悔恨的意思。离开鄞县时，王沂孙曾作《齐天乐》：“正恐黄花，笑人归较晚，”两者心境相同。回归故乡时，词人悔恨出行的失计，不免自怨自艾，心里颇不是滋味。
“萧气霏霏，翠蛾眉妩，聊慰登临眼。”此句从两个方面描写了故山秋天的美景，山中弥漫着清新空气，令人神清气萧，故山的山容像美女的眉毛一般美丽。此情此景，诚然可以使作客归来的人感到赏心悦目。但“故国如尘，故人如梦”，在登临之际，徒增愁思，意兴索然，虽美景在前，也懒于一顾了。欲登临和懒登高相对，以见其愁情之重。登高怀远，招来宋室覆亡之感慨，朋友沦替之伤悼，情难自禁，则又不如不上这山为好了。“登高还懒”，词人这种复杂的感情，和李清照“怕见夜间出去”的心绪相同。
词的下片未作转换，仍然承接上片的抒情线索，作生发开来的描写。“数点寒英，为谁零落”，是作者的自我惋惜。“楚魄难招，暮寒堪揽”，意谓“往者不可谏，来者犹可追”。这几句，写法相当深刻，意味相当沉痛。至于“步屧荒篱，谁念幽芳远”二句，则是与上文的“寒英”“零落”紧相连接的，写得参差错落，显得章法变换多姿。
“一室秋灯，一庭秋雨，更一声秋雁”是此词最精彩的笔墨，用三排比短句。描绘出了一种清冷孤寂的境界，秋灯、秋雨、秋雁，所衬托的不过是一颗秋心而已。“试引芳樽”，借酒浇愁，愁更愁，以“不知消得几多依黯”作结尾，“依黯”这个词语与“依依”和“黯黯”结合，承上“故国如尘，故人如梦”，比泛言“愁苦”，要细致，要准确，值得细细玩味用它来表示这首词所包含的复杂的情感意绪，还是很确切的。
在这首词中，作者多处描写故乡秋季的景物，寄情于景，情景交融，用较为隐蔽的手法表达了他的黍离之悲。