此词上片前五句起笔写人间的清凉世界。吴兴自古以来号称“水晶宫”，多溪流湖泊，每到夏秋时节，十里荷花，满塘莲子，一派“水佩风裳无数”的景色。旧时船首画鹢以骇水神，故船也称为鹢。秋雨潇潇，洒在荷花丛中，清风习习，从白苹洲上吹来，词人的画舫在湖中荡漾，渐渐远去。转瞬间雨停风息，溪上寂静异常，四无人声。皎洁明月倒映于清澈明亮的小溪里，荷面浮动着夜露凝成的水珠。一个“点尘飞不到”的清绝境界！绝无俗世的喧器，也无世间悲欢喜怒种种情绪的困扰，心境可谓清澈。“逸兴横生，痛饮狂吟”的发泄此时变为一种宁静的怅想。于是天人合一，落想天外，引出上片的后五句：银河低垂横跨过夜空，遥想天上的牛郎织女，此刻正两地相思，盼望着七夕重逢，在天上世界里今夕何夕呢？
下片抒写高人情怀。是说自从苏东坡去世之后，再也无人能领略这大自然的美丽景色。语气自负而又矜持，大有与古人以心会心的意味。词人们蓬乱着头发，吟咏秋歌，簪花弄水，在船尾吹起悠扬的笛曲，岁月流逝，如同落叶一般。既然如此，因此不必为区区尘事而烦恼，于是斟满大酒杯，唱一曲醉歌吧。
作者在词序中已经提及，这两次秋游是摹仿李白泛舟采石矶、苏轼泛舟赤壁，这一点值得注意。周密在记述这两次雅游活动时曾这样说：“坡翁谓自太白去后，世间二百年无此乐。赤壁之游，实取诸此。坡去今复二百年矣，斯游也，庶几追前贤之清风，为异日之佳话云。”（《草窗韵语》卷二）正因为追慕苏东坡，所以作者的词中可见多处化用苏轼诗文的地方。在词中有许多的前人成句，而作者却能做到的同已出，不露一丝痕迹，不显一丝造作，自然贴切，这的确是一件易事，从中亦可见作者艺术造诣之深。
这首词的语言平易浅显，流畅明快，没有晦涩难懂的地方。但在可以对仗之处，作者还是雕琢字名，尽量“字字敲打得响”。如“散发吟商，簪花弄水”、“洗玉空明，浮珠沆瀣”等，清人的词话还把它们奉为“工于造句”的典范。
因为是送给僧人的诗，所以诗开头便云佛事：“枿坐云游出世尘。”这是写质上人的形象。诗人抓住他的特征，刻画了他的不同凡俗。
第二句进一步写质上人的形象。瓶钵是云游和尚喝水吃饭不可少的器具。可是质上人连应该随身携带的一瓶一钵都没有。这就更突出了质上人超出尘世的性格，成了飘飘然来去无牵挂的大闲人了。
第三、四句，“逢人不说人间事，便是人间无事人。”这是从质上人的精神境界去刻画他的形象。他不说一句有关人世间的话，这才写出精神上大解脱的悟道者形象。人们口上说的，都是心上想的，不说人间事，是他心里根本不想这些事，因为他把人间的名利富贵看做是虚幻、短暂、无意义的。“所谓“世缘终浅道缘深”（苏东坡语），在这位质上人身上表现得非常彻底，他完全游离于尘世之外。
他虽曾赞羡“万般不及僧无事，共水将山过一生”（《题道林寺》）的生活，但无论怎样也不能像质上人那样口不说一句人间事。所以“逢人不说人间事，便是人间无事人”，既有对质上人的称赏和羡慕，也有诗人自己复杂心情的流露，字面上意义虽然浅近，而诗人的感慨颇深。
杜荀鹤的诗在语言上通俗浅近，明白流畅，所以他把严于格律的近体诗通俗化了。正因为这样，他的许多诗句包括《赠质上人》在内都在长期流传中成了人们口头的熟语。
