这首诗由夜游、昼游及感受三部分组成，每部分各占六句。按游览的时间顺序说，是昼游在先，夜游在后，而诗中却将夜游部分置于昼游之前。诗的首二句即从日暮写起，言暮时继续行游，至月夜而泛舟江上。次二句写水面如镜，风波不起。上有月光清朗，下有微波荡漾，水天一色，交相辉映，浸淫在一派闲静轻柔的氛围之中。而“沫”、“涉”二字又透出游者的情态，二字以工整的对仗，表现了主人公在江上纵情嬉戏的欢快情趣。五、六两句写夜行所见的奇异景色以应题。这两句以“竦”字描摹巨石的突起耸立之状，以“倒”字形容飞瀑的倾泻直下之势，仿佛石破天惊，蔚成壮观。以上六句，写出了夜游由陆路到水行，最后抵达目的地的全过程，而所见江水的平静和三山两溪的奇崛又情味迥异，生动地再现了景观的不同风神，可谓摇曳生姿。
“亦既穷登陟”以下六句，以倒叙笔法追忆昼游的所见之景。登山眺览，惟见一片莽莽苍苍的景象。“荒蔼”句为总写，概括了幽僻深杳的总体印象；“窥岩”和“披林”两句则分写山高、林密。重岩叠嶂、树林茂密，以至连天日都仿佛被遮蔽不见了。这里是用夸饰的手法极写环境之艰险，以为下文的张本。接下来“阳乌”两句，为记忆中的白昼游程摄下最后一个镜头：行者披着夕阳的余晖，正在幽深的竹林之中穿越而行。这两句中的“尚倾翰”、“未为邅”，与上两句的“不睹景”、“岂见天”似相牴牾，其实一为记实，一为描写，盖因用笔虚实之不同也。这六句从登山写到返程，最后以“阳乌倾翰”回顾照应到诗的首句，遂以“日垂”为契机，把昼游和夜游、山行和水行连成一气。全诗的写景纪游部分以后一段行程的起点发端，以前一段行程的终点收煞，拦腰说起，首尾承接，不仅使整个纪游部分显得神固气完，而且也使诗的章法布置别开生面，颇有奇观意外之妙。
诗的最后六句抒写感受。诗人由此番登陟的亲身经历，联想到巢居穴处的岩栖之难。巢穴的不蔽风雨固然可忧，然而更可忧的，是没有可以一吐衷肠的知己。这里或指诗人的“方外交”昙隆和法流二法师，这两位友人都是“辞恩爱，弃妻子，轻举入山”而作“高栖之游”的。诗人在《山居赋》中曾说：“苦节之僧，明发怀抱。……虽一日以千载，犹恨相遇之不早。”意谓：朋友相得之欢，一日胜似一千年。志同道合的朋友总是相见恨晚，此日如能同游，应该是十分欢欣雀跃。谢灵运在其吟咏石门的篇什中，每多抒写寂寞之感，如“惜无同怀客，共登青云梯”、“美人竟不来，阳阿徒晞发”等。此诗亦然。诗中的感受既是在登山过程中直接触发的，因而诗人将昼游部分移后，也就不难理解了。因为只有如此才便于使情景相关处连成一体，而避免了将情与景截分两橛的弊病。这种在章法布局上的缜密用意，正是大谢诗惨淡经营的一个重要方面。
首三句写出作者早年为功名利禄奔波于大江南北的辛酸和痛苦。“大江东去”袭自苏轼《念奴娇·赤壁怀占》，但却没有苏词的豪放。它与次句“长安两去”形成对仗，作者在小令《塞鸿秋》所写的“功名万里忙如雁，斯文一脉微如线。光阴寸隙流如电．风霜两鬓自如练”，也是此意。只不过一气呵成，连用四个长句构成“连璧对”。更为酣畅淋漓罢了。
中间三句作者用陶渊明及召平典来写隐居生活。“厌舟车，喜琴书”。喜琴书即陶渊明在《归来去兮辞》中所写的那种文人雅士的诗意生活。一厌一喜，对比鲜明，文气跌宕有致。时人刘将孙称赞薛昂夫：“以公侯胄子人门家地如此，顾萧然如书生，厉志于诗，其志意过流俗远矣。”（《九皋诗集序》）可见，这并非是作者的自我标榜，而是真性情的自然流露。“瓜田暮”是用典，表示隐居生活。据《史记·萧相国世家》记载：“召平者，故秦东陵侯。秦破，为布衣。贫，种瓜于长安城东。瓜美，故世俗谓之‘东陵瓜’，从召平以为名也。”召平是一个非常具有政治远见的有才之士。韩信被诛以后，刘邦派使者拜萧何为相国，“益封五千户，令卒五百人一都尉为相国卫。诸君皆贺，召平独吊”。他为萧何剖析利害关系，劝其让封不受。召平于秦亡汉兴后之所以高蹈远祸，归隐不仕，当是对刘邦大肆屠杀功臣的行为有所不满。在薛昂夫售勺散曲中多次提到召平，如“召圃无荒地”（《双调·庆东原》）、“瓜苦瓜甜，秦衰秦盛，青门浪得名”（《中吕·朝天曲》）等。作者在官场竞逐中青春消尽，两鬓如霜，极度厌倦了官场的倾轧争斗，憧憬向往着召平式的隐逸生活。虽然这种隐居生活注定要远离名利，但“心待足时名便足”，只要能摆脱“名缰利锁”，像召平那样甘于寂寞和平淡，就一定能够让生命自在徜徉。
末尾“高，高处苦；低，低处苦。”是指个人命运的得失穷达。在中国古代文学中较多表现的是“低，低处苦”。即文人的困顿不遇。“高，高处苦”则相对表现的较少。所谓高处苦，这当是作者对宦海生涯的真切体验，而非一般文人想象之词，当然，相对于张养浩所说的“兴，百姓苦；亡，百姓苦”（《山坡羊·潼关怀古》），此作还是过于拘泥于个人的成败得失，在境界上稍逊一筹。
此曲抒写作者身居宦海的苦闷与自省。作者虽有退隐之想，却并未做到。说只要心满足也就得到满足，又说在高处做官也苦，在低处隐居也有低处的苦，道出了人生的矛盾，表现了真实的内心情感。
“柳色”三句，既点出时在春季，又借喻马林屋正是“春风得意”之时。“东风力”，也暗示出马林屋是经人援手，才进入南宫的。“书檠”三句，即景扣题“分韵”填词。言室外气候多变，因“倒春寒”而下起雨夹雪。室内的气温很低，使笔砚冻结发硬，但大家分韵填词的兴趣不减，时而笔走龙蛇，书写的词句如那茫茫细雨绵绵不绝；时而吟诵声起，吟唱声震得窗外的雪花乱舞。“家林”两句，言马林屋取出家乡寄来的经过霜冻显得格外红润的桔子分给大家尝鲜。大家高兴地接受赠桔，好像也分享到朋友进入南宫的荣誉一般。“应茂苑”两句。言马林屋时来运转，流年大吉。词人说：天上的北斗斗柄已经指向苍龙星座，象征着你马老兄官运亨通，进入南宫任职。这种殊荣，好像是获得随潮而来的珍奇的“吴凤”那样幸运。
“玉眉”三句，状马林屋的外貌、气概。言马林屋的秀眉之中隐隐透现出一种中年人的英俊风采，他如今豪气凌云，简直能够平吞云梦大泽。“名笺”三句，“鞚”，马笼头。言马林屋身穿皇上恩赐的草绿色的官服，骑着大红马，手提青色的马勒丝带，牵着马笼头，去南宫赴仕。进宫后，他可以随意在名贵的玉版笺上点染上淡淡的墨色作画，或是挥笔书写。“飞香”两句是说：你可以在那里醉眼朦胧，尽兴游春，空气中飘过来的缕缕杏花香，更激发出你的灵感，新清的诗句由此不断吟诵出来。“杏园”，孔子曾在杏坛设帐授徒，这里以“杏园”暗指马林屋也是在南宫任教授之职。“弄喜音”两句，言马林屋进入南宫的喜讯由喜鹊飞到他家的庭院中不断鸣叫报告，马林屋的爱人正焦急地在帘后来回走动，等候他的归去。马林屋的内眷“一日不见如隔三秋”的焦急心情跃然纸上，由此也可见两人情深意蜜。
