首联，先推出“望海楼”“护江堤”，是因为楼高、堤长足可贯领通篇，它们在辉彩早霞、泛光晴沙的映照下，一“明”一“白”，渲衬成一派秾丽畅朗的气氛，渐启以下佳境。在这里，“照”楼曙踏和霞光属客观现象，“踏”堤遨游则是游人的兴趣，一静一动，皆从诗人眼中见出，紧扣题目的“望”字。诗中原注：“城东楼名望海楼”，又杭城临钱塘江，故筑堤。次联转过一层，始引出显著的季节特征：春潮汹涌，夜涛摩荡，声响直振吴山顶的伍公庙；柳枝掩映，苏小家正当新绿深处，春光似乎就凝汇在她如花的年华和火一般的热情里……这两句声踏交织、虚实相衬，分别从视听感知里生发出“夜入”“春藏”的美妙联想，一并融进涵纳着深沉悠远的历史内容的“伍员庙”“苏小家”里，使古老的胜迹超越时空，带上了现实感，并给读者以审美的愉悦。
第三联从前面连辐直下的四处景点移开目光，注视到民俗人事上来。江南丝织业繁盛，故诗中自注：“杭州出柿蒂，花者尤佳也”，据宋人吴自牧《梦粱录·物产》记载，这是绫的花纹；又当地产美酒，诗中亦自注：“其俗，酿酒趁梨花时熟，号为‘梨花春’”。这里特以二者并举，描写杭州女工织艺的精巧和当时人们争饮佳醪的民俗风情，勾勒出繁荣兴旺的社会景象。而“红袖”与“青旗”、“柿蒂”与“梨花”的颜踏对照、品物相衬，更象一幅工丽雅致的画图，流溢着浓郁活泼的生活情趣。尾联以登高远眺所见的阔大场景收束，暗与首句照应。“湖寺西南路”，指由断桥向西通往湖中到孤山的长堤，两旁杂花草木密布，诗中自注说：“孤山寺路在湖洲中，草绿时，望如裙腰”。请看，满湖清波如同少女的彩裙飘动，白堤上烟柳葱茏，碧草如茵，就像少女裙上的绿踏飘带。上句就“谁开”提唱，故设问答，接着用了“裙腰”这个绝妙的比喻，使人联想到春天的西湖，仿佛是一位风姿绰约的妙龄少女的化身。
“记行云”两句，记梦中景。记得梦景中她像行云流水似的从水面上慢慢移了过来，身上还穿着荷叶剪成的仙衣。“念杯前”三句，忆共处时景。词人说：我（指词人）又回忆起与她曾在夜晚挑灯共饮，她起舞侑酒，纤细的十指按着舞袖翩翩起舞，并随着舞曲散发出阵阵馨香；屏风内（指室内）荡漾着爱人青春的温暖。“分种”两句，忆旧日琐事。词人说：我们也曾拿来几个旧陶罐栽了许多株菊花，又挖来苔藓筑起土穴饲养蟋蟀。“人远”两句，点出伊人离他而去。词人说：如今她却已经像扬帆而去的船消失在茫茫烟水之际一样，远离我（指词人）而去。据词的上片可以推断，该女子就是词人念念不忘的苏州去妾。
“重访”三句，转入亦真亦幻的追觅中。“樊姬”，语出白居易诗“杨柳小蛮腰，樱桃樊素口”，即白的两位侍妾。据此更可以证实，此词系忆苏州去妾，即所谓“樊姬”。“等闲”，作随便、无端解。此言词人重又去苏姬的住家附近走动，希望能再与她相见。但又恐怕无端去见她，容易造成误会，刚一碰面，她就会不辞而别，因此还是硬起心肠强忍住重见她一面的念头吧。“试潜行”四句，述词人忍不住又去见她的经过。“凋”，即凋零；“铜铺”，大门上的衔环动物头形。据《汉书·哀帝记》：“孝文庙殿门，铜龟蛇铺首鸣。”“低亚”，即低哑声。“小眉”，指月影。此言词人不见苏姬终觉心旌荡漾，于是偷偷地又跑到她住处附近的僻巷中焦急地徘徊等候。她居处门前的桐叶凋零，枝叶砸打在大门铜环上发出了一些响声，她刚开门一瞥，就又像孤雁见到月光那样惊慌似的马上又关上了大门。“空惆怅”两句，惆怅归家，一醉解千愁。言词人徒然产生出这种想见又不敢见面的惆怅而矛盾的心理，因此只好郁郁回家，且在秋菊丛畔一醉方休。这样或许能使那些美好的回忆镜头，透过醉眼在朦胧中一一幻现出来吧。
这首诗写作者因见衡山花开而想念久别的故国家园，用衡阳回雁峰故实喻自己与北飞的雁群互相竞逐，表示了归途中心情的急切和喜悦。
“故国名园久别离，今朝楚树发南枝。”此二句诗人从眼前衡山梅树南枝新开的花，自然回想久别的长安家园。以楚树新花象征人生有了新的机遇、新的希望。柳宗元的故乡有数亩良田，山丘上建有亭台馆舍，池塘与深泽碧水相连，这美好的家园引起了游子的思念。更何况那是他施展才华、实现理想和抱负的地方。
以上将蕴藏已久的思归情绪，借早春新花开放表露出来，郁积的愁闷，仿佛豁然开朗。
“晴天归路好相逐，正是峰前回雁时”。衡山有回雁峰，传说雁到此即不再南飞，春至又返回。这里运用了回雁峰的故事，实指北归的鸿雁。在这难得的晴朗春日，我恰好和那些雁群相随北归。敦促弟弟也快点启程，由于心情好，就觉得天气也好，路也好，而且恰逢大雁北归，多好的兆头。
末句以眼前景物作结，雁能传送书信，更点出“寄”弟之意，可谓余音袅袅，情绪开朗，表现了归途中心情的急切和喜悦，也体现了在贬永期间与之相依为命的兄弟情深。
全诗即景生情，温馨脉脉，相邀相约，尽在物物之中。京都名园，令人神往；春和景明，楚树南枝；晴天归梓，载欣载奔；南雁北返，峰前成阵。这一派朝气蓬勃的景象，是心灵的洞察，是寄意的心旌。羡雁阵比翼相逐，恨故国返而不得。深婉蕴藉，期待有嘉。