全诗大体分两层笔墨。前八句，着重在描写南涧时所见景物。时方深秋，诗人独自来到南涧游览。涧中寂寞，仿佛秋天的肃杀之气独聚于此。虽日当正午，而秋风阵阵，林影稀疏，仍给人以萧瑟之感。诗人初到时若有所得，忘却了疲劳。但忽闻失侣之禽鸣于幽谷，眼见涧中水藻在波面上荡漾，却引起了无穷联想。诗的后八句，便着重抒写诗人由联想而产生的感慨。诗人自述迁谪离京以来，神情恍惚，怀人不见而有泪空垂。人孤则易为感伤，政治上一失意，便动辄得咎。如今处境索寞，竟成何事？于此徘徊，亦只自知。以后谁再迁谪来此，也许会理解这种心情。诗人因参加王叔文政治集团而遭受贬谪，使他感到忧伤愤懑，而南涧之游，本是解人烦闷的乐事，然所见景物，却又偏偏勾引起他的苦闷和烦恼。所以苏轼认为“柳子厚南迁后诗，清劲纡徐，大率类此”（《东坡题跋》卷二《书柳子厚南涧诗》）。这是道出了柳宗元贬后所作诗歌在思想内容方面的基本特色的。
清人何焯在所著《义门读书记》中，也曾对此诗作过较好的分析。他说：“‘秋气集南涧’，万感俱集，忽不自禁。发端有力。‘羁禽响幽谷’一联，似缘上‘风’字，直书即目，其实乃兴中之比也。羁禽哀鸣者，友声不可求，而断迁乔之望也，起下‘怀人’句。寒藻独舞者，潜鱼不能依，而乖得性之乐也，起下‘去国’句。”他这种看法，既注意到了诗人在诗歌中所反映的思想情绪，又注意到了这种思想情绪在诗歌结构安排上的内在联系，是符合作品本身的实际的。“秋气集南涧”一句，虽是写景，点出时令，一个“集”字便用得颇有深意。悲凉萧瑟的“秋气”怎么能独聚于南涧呢？这自然是诗人主观的感受，在这样的时令和气氛中，诗人“独游”到此，自然会“万感俱集”，不可抑止。他满腔忧郁的情怀，便一齐从这里开始倾泻出来。诗人由“秋气”进而写到秋风萧瑟，林影参差，引出“羁禽响幽谷”一联。诗人描绘山鸟惊飞独往，秋萍飘浮不定，不正使人仿佛看到诗人在溪涧深处踯躅徬徨、凄婉哀伤的身影吗？这“羁禽”二句，虽然是直书见闻，“其实乃兴中之比”，开下文着重抒写感慨的张本。诗人以“羁禽”在“幽谷”中哀鸣，欲求友声而不可得，比之为对重返朝廷之无望，因而使他要“怀人泪空垂”了。这诗写得平淡简朴，而细细体会，蕴味深长，“平淡有思致”。苏轼称赞此诗“妙绝古今”，“熟视有奇趣”，道出了它的艺术特色。
“五都矜财雄，三川养声利。”诗人起笔便尖锐地指出，五都的人以财产雄厚而自尊自大，三川的人好追逐名利。诗人谴责的，不仅仅是五都和三川的人，他谴责的还有高门世族和达官贵人。接下来，这种谴责进一步深入：“百金不市死，明经有高位。”在门阀制度盛行的时代，无疑给他造成沉重的压抑之感。使得自己的抱负无法实现，因而内心充满了孤独与苦闷。
下面八句，对于靠明经而出仕、怀巨金而来游的仕子游客的生活，进行了细致的描写：“京城金二衢，飞甍各鳞次。仕子彯华缨，游客竦轻辔。明星晨未晞，轩盖已云至。宾御纷飒沓，鞍马光照地。”大意是：京城里大路四通八达，高屋似鱼鳞一般密布。做官的帽子上摆动着华美的长缨，游者骑着快马来到京城。在明星未稀的清早，官宦们的车子已云涌而至，色彩斑斓，光照大地。诗人抓住这些具有典型性质的场面，用夸张铺陈的手法，极尽渲染描绘之能事，显示了京城的繁华奢靡和游乐之风的盛行。
紧接着，诗的笔锋一转：“寒暑在一时，繁华及春媚。”寒暑的变化快，因此，如今的繁华兴盛、春光明媚也只是暂时的，散热曲折地透露出寄希望于未来的心绪。
“君平独寂寞，身世两相弃。”唯有严君平不慕荣利，弃绝世俗，甘于寂寞。世不用他，他亦不去求仕进。在成都卖卜为生，每日得百钱则闭门下帘读《老子》，一生不求功名。诗人赞扬贫贱不移的严君平，又不乏自身的身世感慨，借此表达了对仕途不介于心的高旷胸怀和豁达的精神。
这首诗在艺术上是高明的。首先，诗的语言华美而生动。诗中运用“飞甍”、“华缨”、“轻辔”等偏正词组形容达官贵人们的房屋、服饰、马匹，形象鲜明地显露出它们的奢华，用“鳞次”来描绘高屋密布，用“云至”来形容官宦们的车子纷纷而来，其多如云。准确的语言、生动的比喻，使诗句显示出华贵的色彩，将统治阶级醉死梦生的生活暴露无遗。
其次，构思超越凡俗，详略描写恰到好处。诗的大部分极力铺叙渲染京城的豪华与奢侈，只用最后二句写君平的生活，便足以衬托出君平的的寂寞。矜财逐利和安贫乐道的鲜明对照，产生强烈的艺术效果。