此词起首二句忆旧游：“与鸥为客，绿野留吟屐。”上言作鸥鸟的朋友，下言此处园林曾留下自己的足迹。姜夔曾以“冷鸥轻燕”寄托自己的归隐之思，鸥鸟作为姜夔笔下经常出现的鸟类意象，它们所体现的绝不仅是归隐之思。透过鸥鸟的意象，可以体味出作者内心的多种情怀：欲隐无路之悲，怀人相思之苦，世事无常之叹。这里“绿野”代指钱氏园林。次二句点明此处园林风光出自钱良臣的手泽。“两行柳垂阴，是当日、仙翁手植。”“垂阴”连系“绿野”，形容风光清雅。“仙翁”指钱良臣，表明此宅来历，绾合词题。以下写园内风光：“一亭寂寞，烟外带愁横。荷苒苒，展凉云，横卧虹千尺。”“带愁”“寂寞”云云景中含情。
换头转入抒情。“才因老尽，秀句君休觅。”自叹年事日增，诗思减退，不必强求佳句，暗用江郎才尽故事，并与开头“吟屐”联串。“万绿正迷人，更愁入、山阳夜笛。”词意继续翻进，由叹老引发怀友。“万绿”迷人，易触发对培植绿色的“仙翁”的追念，更加听到凄切的“夜笛”之声，则缅忆之情力透纸背。接着推进一步，写思旧心绪深沉：“百年心事，惟有玉阑知。”上句包蕴丰厚，可以是宇宙、人生、今昔、存亡。下句“玉阑知”既形象又含蓄，见出白石凭栏默想，久久沉吟。收尾以记述返程归结。“吟未了，放船回，月下空相忆。”“月下”呼应题面，“空想忆”，思绪绵绵，言已尽而意无尽。
全篇上阕侧重纪游，下阕侧重抒感，在写景纪游笔墨中贯注着怀旧忆友之思。词为咏物词，然作者将身世之感融入所咏之物，家国之慨隐然寓于其中。
印度电影《流浪者》中有一首著名插曲《拉兹之歌》，流浪汉拉兹穿街走巷，举目无亲，哀伤地唱道：“到处流浪，到处流浪。我和任何人都没来往，我看这世界像沙漠。……”那种凄凉，那种幽咽，博得人们洒下一掬同情泪。而当读者读到《诗经·唐风》中的《杕杜》时，心情同样很沉重，因为它也是一首流浪者之歌。当然，它比《拉兹之歌》古老得多。
全诗二章，章九句，复沓章法，二章内容除用韵换字外基本相同。起首“有杕之杜，其叶滑湑”，用孤孤单单的一株赤棠树起兴，与同样是孤孤单单的一株赤棠树起兴，与同样是孤孤单单的流浪汉相对照，既相映成趣，又相对生愁。赤棠虽孤单，还有繁茂树叶作伴，自己却是“光杆司令”一个，相比之下树要比人幸运得多。所以这“兴”又是“反兴”。诗人看到孤树，伫足留连，忽而觉得同病相怜，忽而叹人不如树，感触纷纭。这种独特心理感受与流浪者身份相切合，很有典型意义。关于这流浪者的性别，闻一多《风诗类钞》另有妙诠：“杕杜喻女之未嫁者。《说文》：‘牡曰棠，牝曰杜。’”那末这流浪者竟是一位未婚少女，那就更显悲哀了。此说可备参考。
起首二句，也可谓“兴而赋也”。第三句“独行踽踽”才是全章的灵魂。整首诗就是描写一个“寻寻觅觅，冷冷清清，凄凄惨惨戚戚”的踽踽独行者的苦闷叹息。此句独立锁住，不加铺叙，以少驭多，浓缩了许多颠沛流离的苦境，给人无限想像空间。此句点出了流浪者，成为前后内容的分水岭，前是流浪者所见，后是流浪者所思。
“岂无他人，不如我同父。”路上风尘仆仆的行人还是有的，但心为形役，各有各沉重的精神枷锁与自顾不暇的物质烦恼，没有人肯去对一个陌路人相濡以沫。这时，流浪者想到了同胞手足的兄弟亲情，是“他人”无法比拟和替代的。正如《小雅·常棣》所说：“凡今之人，莫如兄弟。”兄弟，亲人，家园，不知在何方。异域他乡的流浪者在世态炎凉、人情冷暖的现实中想得很多很多，只能在想像中求得一些慰藉。正如安徒生童话《卖火柴的小女孩》，那小女孩孤苦伶仃，只能划火柴在光亮中幻想着已上天国的奶奶来呵护自己，心灵感到一丝温暖。兄弟虽好，毕竟在虚无缥缈中，现实终究是现实，诗人不禁“嗟——”，发出一声长长的叹息。这“嗟”字直贯最末副歌式复唱四句。
叹息的内容很平实浅近，也正是流浪者的最基本需要：行人为什么不来亲近我？我没有兄弟在旁，为什么不来帮助我？孤独寂寞，呼天抢地，两个激问中蕴藏着浓重的绝望和忧伤。落难的人犹如落水的人，非常需要救援，可没有人会来、没有人能来济助他。这确实是一声令人心寒的长叹。
由此推想，这首诗创作的时代背景，或是战乱，或是饥荒。《小雅·常棣》说：“丧乱既平，既安且宁。虽有兄弟，不如友生。”（死丧祸乱既平清，一家生活也安宁。那时虽有亲兄弟，反觉不如朋友亲）可作反证。是战争使骨肉离散，沦为难民。又《大雅·召旻》：“瘨我饥馑，民卒流亡。”（饥馑遍地灾情重，十室九空尽流亡）是灾荒使百姓失所，乞食四方。不管哪种情况，这首抒写心灵感受的流浪者之歌，通过一个人的命运，向后世真实展示了一幅古代难民的流亡图，其艺术视角很独特，给人启迪。
旧说如《毛诗序》谓“《杕杜》，刺时也。君不能亲其宗族，骨肉离散，独居而无兄弟，将为沃所并尔”，为今人所不取；而朱熹《诗集传》谓此为“无兄弟者自伤其孤特而求助于人之辞”，则差为近之。
问世间，情为何物，直教生死相许——大雁的生死至情深深地震撼了作者，他将自己的震惊、同情、感动，化为有力的诘问，问自己、问世人、问苍天，究竟“情是何物”？起句陡然发问似雷霆万钧，破空而来；如熔岩沸腾，奔涌而出。正如后来汤显祖在《牡丹亭·题词》中所说：“情之所至，生可以死，死可以复生，生不可以死，死不可以生者，皆非情之至也。”情至极处，具是何物，竟至于要生死相许？作者的诘问引起读者深深的思索，引发出对世间生死不渝真情的热情讴歌。在“生死相许”之前加上“直教”二字，更加突出了“情”的力量之奇伟。词的开篇用问句，突如者来，先声夺人，犹如盘马弯弓，为下文描写雁的殉情蓄足了笔势，也使大雁殉情的内在意义得以升华。
天南地北双飞客，老翅几回寒暑——这二句写雁的感人生活情景。大雁秋天南下越冬而春天北归，双宿双飞。作者称他们为“双飞客”，赋予它们的比翼双飞以世间夫妻相爱的理想色彩。“天南地北”从空间落笔，“几回寒暑”从时间着墨，用高度的艺术概括，写出了大雁的相依为命、为下文的殉情作了必要的铺垫。
欢乐趣，别离苦，是中更有痴儿女——是中：于此，在这里面。这几句是说大雁长期以来共同生活，既是团聚的快乐，也有离别的酸楚，在平平淡淡的生活中形成了难以割舍的一往深情。长期以来，这对“双飞客”早已心心相印，痴情热爱，矢志不渝。“痴儿女”三字包含着词人的哀婉与同情，也使人联想到人世间更有许多真心相爱的痴情男女。
君应有语。渺万里层云，千山暮雪，只影为谁去——君：指殉情的大雁。这四句是对大雁殉情前心理活动细致入微的揣摩描写。当网罗惊破双栖梦之后，作者认为孤雁心中必然会进行生与死、殉情与偷生的矛盾斗争。但这种犹豫与抉择的过程并未影响大雁殉情的挚诚。相反，更足以表明以死殉情是大雁深入思索后的理性抉择，从而揭示了殉情的真正原因：相依相伴，形影不离的情侣已逝，自己形孤影单，前路渺茫，失去一生的至爱，即使苟活下去又有什么意义呢？于是痛下决心，“自投于地而死”。“万里”、“千山”写征途之遥远，“层云”、“暮雪”状前景之艰难。此四句用烘托的手法，揭示了大雁心理活动的轨迹，交待了殉情的深层原因。
横汾路，寂寞当年箫鼓。荒烟依旧平楚——这几句借助对历史盛迹的追忆与对眼前自然景物的描绘，渲染了大雁殉情的不朽意义。“横汾路”指当年汉武帝巡幸处。“寂寞当年箫鼓”是倒装句，即当年箫鼓寂寞。楚：即从莽，平楚就是平林。这几句说的是，在这汾水一带，当年本是帝王游幸欢乐的地方，可是现在已经一片荒凉，平林漠漠，荒烟如织。据《史记·封禅书》记载，汉武帝曾率文武百官至汾水边巡祭后土，武帝做《秋风辞》，者中有“泛楼船兮济汾河，横中流兮扬素波，箫鼓鸣兮发棹歌”之句，可见当时是箫鼓喧天，棹歌四起，山鸣谷应，何等热闹。而今天却是四处冷烟衰草，一派萧条冷落景象。古与今，盛与衰，喧嚣与冷落，形成了鲜明的对比。在这几句中，词人用当年武帝巡幸，炫赫一时，转瞬间烟消云散，反衬了真情的万古长存。
招魂楚些何嗟及，山鬼自啼风雨——些，句末象声词。《楚辞·招魂》句尾均用“些”字，所以称“楚些”。这句意思是武帝已死，招魂无济于事。山鬼自啼风雨——《楚辞·九歌》中有《山鬼》篇，描写山中女神失恋的悲哀。这里说的是山鬼枉自悲啼，而死者已矣。以上两句借《楚辞》之典反衬了殉情大雁真情的永垂不朽。天也妒。未信与，莺儿燕子俱黄土——大雁生死相许的深情连上天也嫉妒，所以这对殉情的大雁决不会和一般的莺儿燕子一样化为黄土。而是“留得生前身后名”，与世长存。这几句从反面衬托，更加突出了大雁殉情的崇高，为下文寻访雁丘作好铺垫。
千秋万古。为留待骚人，狂歌痛饮，来访雁丘处——这是从正面对大雁的称赞。词人展开想象，千秋万古后，也会有像他和他的朋友们一样的“钟于情”的骚人墨客，来寻访这小小的雁丘，来祭奠这一对爱侣的亡灵。“狂歌痛饮”生动地写出了人们的感动之深。全词结尾，寄寓了词人对殉情者的深切哀思，延伸了全词的历史跨度，使主题得以升华。
首联“地胜遗尘事，身闲念岁华。”“遗”字极佳，与诗题“自遣”相互呼应，与下文中的“念”字形成掎角之势，暗寓诗人面对春秋代序，生发出迟暮之感的喟叹。
颔联与颈联主要描写春日的宁静之美。神秘的夜幕下，万籁俱寂的大自然宁静却不死寂，它有泉声、风声，亦有月光的流动，它与白日一样蕴含着无限的生机。“任”字有气韵，一写听任自然之妙，二写诗人的萧散和闲适。
尾联“陶然恃琴酒，忘却在山家。”陶然幽居“恃琴酒”，可以暂时忘却红尘俗事。“忘却在山家”，表面上看，诗人摆脱了世事纷乱，从而内心从容、恬静、舒适、安详。
这首诗层次分明，围绕诗题层层展开。诗中虽处处见隐者风貌，然诗题中“自遣”二字却暴露出诗人并非甘心情愿地置身红尘之外，景物的幽静更彰显心境的苍凉。竹影风声，月夜花香，幽泉潺潺，径斜苔荒，在幽境与琴酒间颇有悠然自得之趣。但因“地胜”而暂忘“尘事”，因“琴酒”而“陶然”山家，这种“自遣”是所谓举杯浇愁，并非真能超然物外。