这是一首描写隐逸高趣的诗。诗以“寻西山隐者不遇”为题，到山中专程去寻访隐者，当然是出于对这位隐者的友情或景仰了，而竟然“不遇”，按照常理，这一定会使访者产生无限失望、惆怅之情。但却出人意料之外，这首诗虽写“不遇”，却偏偏把隐者的生活和性格表现得历历在目；却又借题“不遇”，而淋漓尽致地抒发了自己的幽情雅趣和旷达的胸怀，似乎比相遇了更有收获，更为心满意足。正是由于这一立意的新颖，而使这首诗变得有很强的新鲜感。
诗是从所要寻访的这位隐者的栖身之所写起的。开首两句写隐者独居于深山绝顶之上的“一茅茨”之中，离山下有“三十里”之遥。这两句似在叙事，但实际上意在写这位隐者的远离尘嚣之心，兼写寻访者的不惮艰劳、殷勤远访之意。“直上”二字，与首句“绝顶”相照应，点出了山势的陡峭高峻，也暗示出寻访者攀登之劳。三、四两句，写到门不遇，叩关无僮仆应承，窥室只见几案，杳无人踪。紧接着下两句是写寻访者停在户前的踟蹰想象之词：主人既然不在，到哪儿去了呢？若不是乘着柴车出游，必是临渊垂钓去了吧？乘柴车出游，到水边垂钓，正是一般隐逸之士闲适雅趣的生活。这里不是正面去写，而是借寻访者的推断写出，比直接对隐者的生活做铺排描写反觉灵活有致。“差池不相见，黾勉空仰止”，远路相寻，差池不见，空负了一片景仰之情，失望之心不能没有。但诗写至此，却突然宕了开去，“草色新雨中，松声晚窗里。及兹契幽绝，自足荡心耳。虽无宾主意，颇得清净理”，由访人而变成问景，由失望而变得满足，由景仰隐者，而变得自己来领略隐者的情趣和生活，谁也不能说作者这次跋涉是入宝山而空返。“兴尽方下山，何必待之子”，结句暗用了著名的晋王子猷雪夜访戴的故事。故事出于《世说新语·任诞篇》，记王子猷居山阴，逢雪夜，忽忆起隐居在剡溪的好友戴安道，便立时登舟往访，经夜始至，及至门口又即便返回，人问其故，王子猷回答说：“吾本乘兴而行，兴尽而返，何必见戴？”诗人采用了这一典故，来自抒旷怀。访友而意不在友，在于满足自己的佳趣雅兴。读诗至此，读者似乎遇到了一位绝不亚于隐者的高士。诗人访隐居友人，期遇而未遇；读者由诗人的未遇中，却不期遇而遇──遇到了一位胸怀旷达，习静喜幽，任性所之的高雅之士。而诗人在这首诗中所要表达的，也正是这一点。
首联“涨减水愈急，秋阴未夕昏”所写之景，实际是交待诗人之所以“泊樵舍”的原因：曾上涨的洪水虽正在消退，但水势却比洪水上涨时还要湍急，故不宜行进。这一句不仅写出“泊樵舍”之由，还有其耐人寻味的言外之意，即间接反映了洪水上涨时水势亦甚“急”可以想成其造成的灾害不小。此时，洪水消退当然是好事，但因“愈急”却造成航程的艰险，使人产生担忧不安之感。后句写天空笼罩着秋天的阴云，未至傍晚江面已一片昏暗，亦不宜盲目行进，同时这句又形成令人精神压抑的氛围。这两句之景虽旨在说明作者之所以泊樵舍一是水急，二是天昏，但其中流露出的担忧不安则为全诗定下了低沉的感情基调。
颔联“乱山成野戍，黄叶自江村”，乃描写诗人泊樵舍镇时远望之所成：那新建县之名胜西山到处是军队野外驻扎的营幕，这不仅使风景绝佳之地大煞了风景，更暗示了社会的动乱不安，以“乱山”称西山，即增添了乱世之感；于江岸上的村庄中，诗人只成黄叶飘零，这恰如杜甫《春望》写“城春草木深”一样，乃“明无人”（司马光《续温公诗话》）矣，即百姓四处逃散，这荒寂的江村显得异常萧条。这正是清初战乱的生动写照。
颈联“带雨疏星成，回风绝岸喧”，则转写近处江岸立体空间之所成所闻。仰望天色已晚，闪现出稀疏的星斗，但并未给诗人明朗悦目之感。因为“秋阴”，所以天开始飘洒秋雨，使疏星“带雨成”；耳听则觉回旋的江风，在岸壁间呼啸，显得凄厉，回风再卷起涛声，则令人恐惧矣。前句是静态，后句是动态，静与动的秋风秋雨给人带来亦是凄楚与不安。
尾联回写江上之所成：“经过多战舰，茅屋几家存？”“战舰”乃官家兵船，与“乱山成野戍”呼应；“茅屋”是百姓住所，与“黄叶自江村”呼应。前句是实写，“战舰多”，使人感到政局形势严重，社会秩序混乱；后句是虚写，“几家存”以问句出之，实指“无家存”。两相映衬，益成形势动荡、百姓流离的现实，其中充满诗人深重的忧虑。
这首诗写景采取由远及近的视角：先写江岸“乱山”与“江村”，继写“绝岸”，终写江面，画面颇成层次，意境显得深远。表面看，这是首景物诗，全诗四联皆写景，其实其“景语皆情语也”（王国维《人间词话》）。每一联之景都内含诗人或郁闷、凄苦或不安、忧虑之情，但并不直露，全蕴藏于具体景物的意象之中，诗之风格仍偏于平和。