这首词写了一座神庙的景象。
上片头二句写出庙词的环境，境界深邃。“翠娥”二句，是写神仙们已去，空留庙宇，含有抚昔伤今之意，与崔灏《黄鹤楼》诗中的“昔人已乘黄鹤去，此地空馀黄鹤楼”意境相似。
下片写庙内清凄的景象：古画犹在，旧日仙人们的车驾犹存，而仙人们已去，清夜沉沉，银灯隐约，一派阴森气象。
“屋下”两句，点明“望湖楼”是座傍山依水的建筑物。楼宇挑出水面，所以“屋下半”有“流水”淙淙；隔着楼顶望去，可以看到青山蜿蜓。“当心”两句，“当心”应作“赏心”。此言是楼面湖而筑，门窗开处，千顷平静似镜的湖水皆入眼中，水光掩映之下，使楼内满室生寒，真是“水光潋滟晴方好”，使人见后赏心悦目。“云起”三句，写远眺。此言如果湖对面的南高峰上罩上了黑云，那末这儿一时半刻还不致会有雨；又如果是楼后面的北高峰上云雾收敛的话，那末这里也就会马上会转晴了。据此，望湖楼应在北高峰前的西湖北面。又看那云来云去，以天作纸，以云作画，像是有一个大手笔在用一支“健笔”着意地挥洒。“俯瞰”两句，形容楼之高。此言从望湖楼上可以低首远望远处古老的城墙，那窗外的栏干，挡不住词人的视线。
“绣鞍马”五句，写游湖之人中午都来楼中休息。此言那些骑在铺着绣鞍的俊马上的游客们，从绿水青山中尽兴返回，到“望湖楼”时刚好日至正午。在等候午餐之间，有人信手翻阅起随身所带的书本。“缃编”，即缃帙，系浅黄色的书套，这里借代为书本。欧阳修《进唐书表》有：“久披缃帙，粗定铅黄”可证之。“残照”三句，写黄昏景。言游客们在楼中酒醉饭饱之后，不知不觉中已临近黄昏。他们还可以从楼上观赏到落日余晖。那时候湖面上已经没有了游船。当蛾眉月升起之时，它似乎是挂在楼门帘边的银钩一般，更显得湖山如画般清新可爱。从“新月”句中可知，“望湖楼” 确在北高峰前的西湖边上，因此游客可从楼中如平湖秋月那样的欣赏月色了。再是“新月”，也点明时在月初。词人从翠绿色的壶形窗中望了出去，岸边游人似乎是行走在镶嵌的画框里一样。“天际”两句。言当远处隐隐约约地响起牧童晚归时的牧笛声时，很快这花花世界又将融入进漫漫长夜之中。
这首词通篇借描写友人归来所见所感，抒发“人面不知何处去，桃花依旧笑春风”的物是人非之伤感。全诗语言清新平淡，是以豪放雄浑著称的辛弃疾的偶有的婉约之作。
词的上片抒写友人归来之感。“人已归来，杜鹃欲劝谁归？”友人已然归来，长作“不如归去”的杜鹃鸟却依然啼叫不止，不知是为谁而啼？这句实质上是为友人归来感到高兴，责备杜鹃鸟不应该胡乱啼叫，破坏了友人归来作者的高兴心情。“绿树如云，等闲借与莺飞。”化用丘迟《与陈伯之书》中的名句，寓情于景，情景交融，责备友人归来太迟，不能共赏春光，自己只能和黄莺作伴。接下来，作者又用唐代诗人刘禹锡两次游玄都观的故事，借用典故来抒发人事代谢无常的感慨。“春风”两句回忆当年初识伊人情景。春风半面春风中袖遮半面，写少女羞涩之态。“翠屏幽梦，觉来水飞山围。”将友人的种种经历归于翠屏一梦，酒醒后抛却烦恼悠闲的在山水间游玩。
词的下片紧承上片乐游山水之意，“有酒重携，小园随意芳菲。往日繁华，而今物是人非。”作者带着美酒重游故园，芳草依旧萋萋，美景依旧，一切似乎并没有改变，小园还是那个小园，芳草环飞，可是人事变化太大，原来的人却都已不在，让人不禁生出物是人，世事无常的感慨。“春风半面，记当年、初识崔徽。”还记得当年仲春时节，认识那位美人的情景，仿佛依旧在眼前。只是可惜“南云雁少，锦书无个因依。”南飞的大雁太少，没有人可以代传音信。佳人的娇羞之态好像仍在眼前，而今却是天涯相别，不同音信。
这首词通篇写的清新哀婉，是稼轩早期婉约词中比较有代表性的作品。