本篇历叙与王判官聚散行迹，并因世乱而归隐庐山屏风叠。其所以退也，非所谓“社稷苍生曾不系其心膂”（宋罗大经《鹤林玉露》），乃报国无门也。
开篇“昔别黄鹤楼，蹉跎淮海秋”二句，飘然而来，写的是公元726（开元十四年），诗人离开蜀中，自湖北顺江而下，在金陵、扬州一带漫游的往事。屈指算来，流光已经过去整整三十年，自己仍然功业无成，一个“昔”，一个“蹉跎”，包含了无限的感慨。
“俱飘”二句，牵入王判官。自己与王判官分手，就像落叶随风飘散，又像洞庭湖的诸多支派各自流向天之一方。
这一别就是多年。青年惜别，至中年仍未能相见。自己虽曾于公元742（天宝元年），得道士吴筠举荐，应诏赴京，但至公元744（天宝二载），便为谗言所中，而赐金还山。自己于是再次放浪江湖，漫游吴越。这里用了一个“蹭蹬”，蹭蹬者，失道也，反映出诗人政治上失意之后的悲愤心情。
当诗人政治上失意之时，只有美好的大自然能给诗人以心灵的慰藉。那天台山上翠绿的藤萝，剡溪水面清朗的风月，海上变幻的云山，水中清彻的倒影，无不令人心旷神怡，乐而忘返。然而置身于山水风月之间。有一件事诗人始终未能忘却，那就是“思君”，时时思念自己的朋友王判官。
李白极重朋友交谊，尤致慨于知音之难得。诗人是很自负的，认为自己的才气，足可以倾倒生于荆州的屈原、宋玉，在梁孝王门下为客的邹阳、枚乘。但世人多笑我浮夸放诞，我的知音究竟在哪里呢？言外之意，只有您王判官是我的知音，可惜这样的知音是太少了。
“大盗’’以下急转，由对往事的追忆转入当前的现实。“大盗”者，窃国之盗也，指安禄山。“割鸿沟”言其侵占地方之广，“扫秋叶”言其为害之烈。而被扫一方以“秋叶”喻之，也隐约可以见出诗人对唐军软弱涣散、缺乏战斗力的不满。
“济代”即济世，唐人避李世民（唐太宗）讳而改。“吾非济代人”是作者的愤激之言，“且隐屏风叠”是作者此时不得不作出的抉择。这是一个痛苦的抉择。越是这样的时刻，诗人就越是企盼知音，思念自己的知心朋友，然而尽管夜中长望，仍然是思君不见，这更使诗人感到无限的孤独和怅惘。但无论如何，诗人决心拂衣而去，立即踏上隐居的道路，永远与自由飞翔的海鸥为友。这一愿望诗人曾经多次表述过，但诗人的初心是“功成拂衣去，归入武陵源”（《登金陵冶城西北谢安墩》），而这次的表述却是面临着国难当头、自己却不能有所作为的痛苦现实，这对诗人的政治理想来说，不能不说是一个沉重的打击，因此本诗的情调便于豪放和旷达之中又带有激愤和伤感。
吴处厚《青箱杂记》卷五记载：“晏元献公虽起田里，而文章富贵，出于天然。尝览李庆孙《富贵曲》云：‘轴装曲谱金书字，树记花名玉篆牌’。公曰：‘此乃乞儿相，未尝谙富贵者。’故公每吟咏富贵，不言金玉锦绣，而唯说其气象。若‘楼台侧畔杨花过，帘幕中间燕子飞’，‘梨花院落溶溶月，杨柳池塘淡淡风’之类是也。故公自以此句语人曰：‘穷儿家有这景致也无？’”这段话颇能道出晏殊富贵词的独特风格。这首词前五句描写景物重在神情，不求形迹，细节刻画，取其精神密契，不在于锦绣字面的堆砌，而在于色泽与气氛上的渲染，故能把环境写得博大高华，充满富贵气象。词中所表达的思想既不是伤春女子的幽愁，又不是羁旅思乡游子的离愁，更不是感时悯乱的深愁，而是富贵者叹息时光易逝，盛筵不再，美景难留的淡淡闲愁。
劈头“小阁重帘有燕过”点出环境与时令。此句看似平淡，实乃传神一笔，有破空而来之势。这匆匆一过的穿帘燕子，莫非是远方使者，给帘内入传递了春将归去的消息。像在平静的水面投下一枚小石，立刻泛起层层波澜。一下子打破了小阁周围宁静的空气，起着沟通重帘内外的作用。阁中人目随燕影，看到“晚花红片落庭莎”。原来时已暮春，庭院满地落红。“晚”，一指傍晚，朝花夕谢，形容落花的时间，一指晚春，花事凋零，形容落花的节令。春末多雨，更兼庭中少行迹，满庭莎草已是一派浓绿。“红片”与“庭莎”，绿肥红瘦，相映成趣。“曲栏干影入凉波”，庭院中池边的曲曲栏干，倒影于池塘碧波之中。“凉波”的“凉”既是时已入暮，池水生凉的真实写照，又是个中人此时此地心境凄凉的折光反射。
以上三句写的是帘外景物，从视觉所及落笔。“重帘”、“过燕”、“晚花”、“庭莎”、“曲栏”、“凉波”诸意象所组成的画面，其色泽或明或暗，或浓或淡，或动或静，使整个庭院呈现出一片凄清冷落。虽然主人公尚未露面，但他的处境、心曲，已跃然纸上了。片两句由帘外转入帘内，从听觉着墨，写阁中人的感受。“一霎”、“几回”乃互文。虽说是“好风”、“疏雨”，小阁里的人却听得分明，感得真切，可见环境是何等的静，人是多么孤独。
上句“翠”、“生”二字，一为冷色，一为动态，这种化虚为实的描写，把周围的景物写活了，给人以质感。好风入槛，翠幕生寒，孤身独处，情何以堪。下句“圆荷”即荷叶。疏雨滴在嫩绿的荷叶上，声音本是极细极微，但偏偏阁中人却听得清清楚楚。帘外之凄清冷落如彼，帘内之空虚寂静如此，这一切本是足以生愁了，何况又值“酒醒人散”之后。末句以情语作结，总束全词，兴起感情波澜，似神龙掉尾，极有跌宕之致。
结句抒发的亦是富贵闲愁。前人评晏殊词圆融平静，多富贵气象。晏殊自云：“余每吟咏富贵，不言金玉锦绣，而悦其气象。”此词可见一斑。
首联写诗人在晚秋时节，冒着早晨的霜露，走在幽深的山谷之中，字里行间流泻出一种跋涉之苦。其实，诗人现实的生活道路也是如此。首句的“杪秋”本已点明季节，但作者却仍嫌不足，在句尾又以“霜露重重”加重笔墨，进一步渲染了秋之已深。次句的“幽”字，则是强调了诗人所行山谷远离市井，幽深僻静。
接着，具体写经荒村所见。厚厚的黄叶覆盖着小溪上的桥面，荒村唯有古树处处可见，寒天的野花，稀疏零落，大地更显得空旷。山谷深处的泉水声微流缓，水声时断时续，更衬出大地的寂静。几句诗，写尽了南谷秋色和荒村的荒僻景象，给人以衰败、寥落之感。
诗人处境险恶，眼前如此萧疏荒寂的景色，很自然地触动了他的身世之感。作者在《始得西山宴游记》中曾这样说道：“自余为僇人，居是州，恒惴栗。”他也想驱除胸中的郁闷。可是，今天南谷之行却没有使他得到“心凝形释，与万化冥合”的轻松，反而更加重了他的孤独落漠之感。诗最后写的“机心久已忘，何事晾麋鹿”，表面上的超脱放达之态，实际上却反映了欲遣愁绪而不能，从而愁上加愁的心境罢了。
全诗紧扣题目，以标题中的“荒”字笼盖全篇，使诗人笔下的画面，涂上了一层惨淡之色，霜露、幽谷、黄叶、溪桥、古木、寒花和幽泉，无一不在它的笼罩之下，因而有力地突出了荒村的特点；而这个特点，又处处不离“杪秋”这个季节，使景物都具有浓厚的时令特色。
诗人笔下的景色写得真实、自然，同时又处处渗透着诗人的主观情憬。诗人特有的心境与眼前寥落衰败的景象相互交融，达到了情景交融的艺术境界。