李贺当时住在长安崇义里，曾写了首《崇义里滞雨》，表达了壮志成空，愁恨不已之心情，加上穷困孤独，自己的心境也像是阴暗的里巷和淅沥不断的秋雨一样。这很能反映他担任奉礼郎时的处境和心境，与《始为奉礼忆昌谷山居》所要抒发和表达的情感相近。只不过后者更强调家山的美好和对故乡的怀念。诗人将昔日在家山品茶饮酒的悠闲自在景与眼前退衙回来闭门独坐的孤独以及“鹤病悔游秦”的病痛相互比照，旨在强调身在仕途无法实现理想抱负的喟叹。失落加上乡愁，更增添几分愁苦，也更加深了诗人对故乡的怀念。
诗题中提到的“昌谷山居”即是诗人的故乡所在地。昌谷，位于今洛阳西南宜阳县境内。今日的宜阳，显得偏僻和贫穷，但在隋唐时期，此地则是江淮粮赋陆路和漕运的重要中转站。其中李贺居家的三乡驿（今名三乡乡），是当时从洛阳通往长安大道上的一座重要驿站。为唐代诸帝东巡必经之地，在此建有连昌宫、兰昌宫等行宫，武则天、唐玄宗都曾在此驻跸，其中的连昌宫更因元稹的《连昌宫词》而闻名千古。
此诗的前半首，扣住“始为奉礼”行笔，总写居官羁旅无聊之情状。“扫断”、“雅回”两句，叙述官职卑微，门庭冷落；“长枪”、“小树”两句，写江米煮熟，食馔简单，除枣花外，室无珍玩。这四句，全无半点寒酸气却道尽窘迫。即是小官，又全无半点迎逢心思，自是门可罗雀；回到家里自己动手关门，没有仆人书童；特意说出煮的是江米，或许是在暗示除此之外别无其它；至于小树枣花，那不过是平凡窄小的院落里一棵普通的树罢了。如此这般，一个异地为官生活勉强郁郁不得志的年轻人形象跃然纸上。“向壁”、“当帘”两句，写闲对如意、角巾，言外寄托“归欤”之意。
诗的后半首，转而写题上“忆昌谷山居”之意。忆家，故作家书，以付黄犬；忆亲人，因妻病而追悔至京求仕。“土甑封茶叶，山杯锁竹根”，可见主人不在；“不知船上月，谁棹满溪云”，月夜又有谁在船上摇荡着满溪的云影？用反诘句收结，意想飞驰，巧妙表现出“忆”的风韵，“末二尤得忆家神理”（《协律钩玄》卷一引董伯音语）。
李贺很少用律体写诗，《始为奉礼忆昌谷山居》却用五言长律写成，诗韵用上平声十一真、十二文、十三元通押，很有特色。
诗的第一句开门见山，从诗人自己过去怎样对待邻妇扑枣说起。“扑枣”就是打枣。这里不用那个猛烈的上声字“打”，而用这个短促的、沉着的入声字“扑”，是为了取得声调和情调的一致。“任”就是放任。之所以要放任，第二句说：“无食无儿一妇人。”原来这位西邻竟是一个没有吃的、没有儿女的老寡妇。诗人等于是在对吴郎说：“对于这样一个无依无靠的穷苦妇人，我们能不让她打点枣儿吗？”
三四两句紧接一二句：“不为困穷宁有此？只缘恐惧转须亲。”“困穷”，承上第二句；“此”，指扑枣一事。这里说明杜甫十分同情体谅穷苦人的处境。陕西民歌中唱道：“唐朝诗圣有杜甫，能知百姓苦中苦。”说的正是杜甫。以上四句，一气贯串，是杜甫自叙以前的事情，目的是为了启发吴郎。
五六两句才落到吴郎身上。“即防远客虽多事，便插疏篱却甚真。”这两句上下一气，相互关联，相互依赖，相互补充，要联系起来看。“防”的主语是寡妇。下句“插”字的主语是吴郎。这两句诗言外之意是：这不能怪她多心，倒是吴郎有点太不体贴人。她本来就是提心吊胆的，吴郎不特别表示亲善，也就够了，却不该还要插上篱笆。这两句诗，措词十分委婉含蓄。这是因为怕话说得太直、太生硬，教训意味太重，会引起对方的反感，反而不容易接受劝告。
最后两句“已诉征求贫到骨，正思戎马泪盈巾”，是全诗结穴，也是全诗的顶点。表面上是对偶句，其实并非平列的句子，因为上下句之间由近及远，由小到大是一个发展的过程。上句，杜甫借寡妇的诉苦，指出了寡妇的、同时也是当时广大人民困穷的社会根源。这就是官吏们的剥削，也就是诗中所谓“征求”，使她穷到了极点。这也就为寡妇扑枣行为作了进一步的解脱。下句说得更远、更大、更深刻，指出了使人民陷于水深火热之中的又一社会根源。这就是“安史之乱”以来持续了十多年的战乱，即所谓“戎马”。由一个穷苦的寡妇，由一件扑枣的小事，杜甫竟联想到整个国家大局，以至于流泪。这一方面固然是他那热爱祖国、热爱人民的思想感情的自然流露；另一方面，也是点醒、开导吴郎的应有的文章。让他知道：“在这兵荒马乱的情况下，苦难的人还有的是，决不止寡妇一个；战乱的局面不改变，就连我们自己的生活也不见得有保障，我们现在不正是因为战乱而同在远方作客，而你不是还住着我的草堂吗？”最后一句诗，好像扯得太远，好像和劝阻吴郎插篱笆的主题无关，其实是大有关系，大有作用的。希望他由此能站得高一点，看得远一点，想得开一点，他自然就不会在几颗枣子上斤斤计较了。读者正是要从这种地方看出诗人的“苦用心”和他对待人民的态度。
这首诗的人民性是强烈而鲜明的，在通常用来歌功颂德以“高华典雅”为特征的七言律诗中，尤其值得重视。诗的艺术表现方面也很有特点。首先是现身说法，用诗人自己的实际行动来启发对方，用颠扑不破的道理来点醒对方，最后还用诗人自己的眼泪来感动对方，尽可能地避免抽象的说教，措词委婉，入情入理。其次是，运用散文中常用的虚字来作转接。像“不为”、“只缘”、“已诉”、“正思”，以及“即”、“便”、“虽”、“却”等，因而能化呆板为活泼，既有律诗的形式美、音乐美，又有散文的灵活性，抑扬顿挫，耐人寻味。
清人卢德水说：“杜诗温柔敦厚，其慈祥恺悌之衷，往往溢于言表。如此章，极煦育邻妇，又出脱邻妇；欲开导吴郎，又回护吴郎。八句中，百种千层，莫非仁音，所谓仁义之人其音蔼如也”（《读杜私言》）。全诗正是在这种委婉曲折的夹叙夹议中来展现诗人的心理和品质的。诗作表达了杜甫对穷困人民的深切同情。