本诗所引武陵，自然是陶渊明名篇《桃花源记》中的武陵源。可以说整首诗都是从其中化出。
陶渊明作《桃源记》，云：‘源中人自言，先世避秦时乱，率妻子邑人来此绝境，不复出焉’……自是之后，诗人多赋《桃源行》，不过称赞仙家之乐。”武陵之于桃源，不仅在唐诗中得以继承和发展，而且对于初唐的山水田园诗创作产生了很大影响。使一些“山水田园诗”的创作不仅具有更浪漫的想象空间和绚丽色彩，而且还产生了神奇诡异的仙化意象。这一现象的产生主要是由于当时唐朝社会道教盛行，再加上富裕的生活和繁荣昌盛的社会使得人们追寻心灵深处中对于生命短暂的忧郁。因此，许多笃信道教的诗人在他们的作品中，常常会描写他们近乎幻觉式的想象。据刘中文先生考证，在现存的唐人诗词中，以“桃花源”为题的作品达21题24首之多，包融的《武陵桃源送人》就是在这样的背景下产生的。
词中上片回忆与叶衡同游钟山，“独立苍茫醉不归，日暮天寒”，点明了具体地点与时间，“独立苍茫”、“日暮天寒”以苍茫无人来表明作者的孤寂，日暮天寒说明了环境的凄清，从而渲染了一种凄凉悲切的氛围，借陶渊明《归去来兮辞》的首句“归去来兮”，说明叶衡即将离开建康奔赴京城。“探梅踏雪几何时。”，回忆与友人当时一起在钟山上踏雪寻梅的经历，“雪”象征着纯洁，“梅”则象征着清高，傲岸的人格，词人与友人一起踏雪寻梅，则是说明两人志同道合，两人的友谊也是纯洁高尚的。“今我来思”和“杨柳依依”是《诗经·小雅·采薇》中的诗句，被作者直接引用，想象友人走后，自己一个人再来钟山那种“物是人非”的凄凉心境，化用即成的诗句，却毫无做作之感。
下片紧承“今我来思，杨柳依依。”“白石冈头曲岸西。一片闲愁，芳草萋萋。”几句，描写了友人离开以后的具体情景：白石岗依旧是长满了萋萋芳草，景色没有变，却没有同游之人，从而而心中充满了愁绪。“多情山鸟不须啼。”，则是对这种愁绪的强调——不用山中多情的鸟儿悲啼，心中自会惆怅不已。最后两句，引用《史记·李将军列传》中赞颂李广的话说明叶衡在建康的德政受到人们的称颂，叶衡本人也受到百姓的爱戴。