这首词表面上看是怀念昔日青楼旧好的词，实际上应是怀念同时遭贬谪的友人。
上片主要写贬谪途中的孤单凄苦及烦乱的心绪。万物勃兴的春天本来能给人以美的享受，使人充满希望和信心。但这在身处逆境的作者眼中，却完全失去了光彩，变成了另外一种样子。开头三句写作者目睹春天的到来，感叹时光流逝，担心自己将终老贬所。这自然是悲哀的，因此在他眼中，梅红柳绿的大好春光包就变成“恼人春色”了。但这种烦恼躲不掉，摆脱不开，心烦意乱，伤感倍增，觉得“随云”“逐水”都无出路。最后四句写夕阳含山，暮霭沉沉，身处“一叶扁舟"之上，漂泊茫茫大江之中的孤寂景况。偏偏此时又传来“数声横笛”，这凄厉的笛声实在叫人断肠，无疑给孤寂的“行人”又增添了几分凄凉。
起首第三句谓“行客老沧洲”，有‘归欤’之叹。作者仕途不顺，所以想要归隐沧洲。此时自然界的景色是美好的。“梅吐旧英，柳摇新绿”，与《望海潮》其三“梅英疏淡”、“柳下桃溪”颇为相似；但那时心情舒畅，宛如“金谷俊游”，无意中还跟随他人女眷的车辆走了一段。然而此时由于在贬谪途中，便觉得春色恼人，心中烦乱。“北随云暗暗，东逐水悠悠”，写的是自汴入淮时的情景。宋朝时汴水在泗州人淮，秦少游《泗州东城晚望》诗云：“林梢一抹青如画，应是淮流转处山。”词人在这里举目北望汴京，只见乌云暗淡，其中寓有落第的悲观情绪。而所乘之船入淮向东，又觉流水悠长，不由感到前路迷茫。这一对句，看似工稳，然而按照词谱，却不全部相符合。秦观同门友张耒所作的《风流子》“亭皋木叶下”一首，清万树《词律》作为词的格式，并评价说：“此词抑扬尽致，不板不滞，用字流转可法，真名手也！”张词这一对句是“白蘋烟尽处，红蓼水边头”，当得上这样的评价。而秦观的“北随云暗暗，东逐水悠悠”，句法一变。前者两句皆为二、三句式，所以让人觉得“用字流转”，后者易为一、四句式，似觉词情拗怒。秦观是填词里手，叶梦得《避暑录话》称其词曰：“知乐者谓之作家歌。”在这里做变化句式，产生拗怒之音的原因大概是心中有一股郁勃情绪在吧！“斜日半山”应当写的是沿淮东去之时，回望泗州南山时所见。此时红日西斜，隐于半山，暮烟四起，笼罩于淮河两岸。直至“数声”二句，才点明身在船上。“数声横笛”，像是从唐人郑谷《淮上与友人别》诗“数声风笛离亭晚，君向潇湘我向秦”化用而来，其中寓藏离情，为下阕之张本。
下阕表面上是在回忆在汴京时的恋情。那时他冶游“平康”，曾遇一歌妓。他俩携手都门，无限欢娱。这情境全像杜牧当年一样：“十年一觉扬州梦，赢得青楼薄悻名。”也像他自己在《梦扬州》一词中所写：“长记曾陪燕游，酬妙舞清歌，丽锦缠头。殢酒为花，十载因谁淹留？”两情缱绻，一朝离别，不免无限思念。自“谁念断肠南陌以下，直至“此恨难休”，皆写对汴京恋人的相思之情。实际上却是追忆了同昔日旧好的深情厚谊，及失去这一切的哀怨，“青门同携手”的欢乐，“南陌”分别时的极度悲伤，西楼中无限的柔情蜜意，这一切都成为过去，永不再来，思之如梦，念之断肠。接下四句写天地有尽，离恨无穷，和情人今生再难相见，将抱恨终生，极言思念之甚。词人痛苦的心情及眼前凄凉的处境，吉凶难卜的命运，无处诉说！只有那心心相印的情人能理解，因此便“拟待倩人说与”，但这凄惨的境遇让她知道了只能使她忧伤，还是不说吧。这种怜念情人，欲言又止的内心矛盾和苦衷，使意更深、情更切。这正是作者在贬谪途中想和同时被贬的友人联系，而又怕招来祸害的矛盾心理的真实反映。其中化用白居易《长恨歌》中两个七言句，为四个偶句，虽有割裂之嫌，而真情流贯，尚属感人。歇拍二句，稍一宕开，旋即收住，有有余不尽之致。
清人周济《宋四家词选》评秦少游《满庭芳》（山抹微云）时说：“将身世之感，打并入艳情，又是一法。”完全可以移作此词的评语。词人屡试不第，落魄归来，只能通过艳情，抒写一腔悲愤。
此词除“北随云”二句外，大体恪守格律。万树《词律》卷二分析此调云：“调中四字四句者，前二段，后一段，作者多用俪语。”秦观也是这样。如同前段“梅吐旧英，柳摇新绿，恼人春色，还上枝头”，以及“斜日半山，暝烟两岸；数声横笛，一叶扁舟”，除“恼人”二句外，都用骈俪语言，对仗工整，音节浏丽，给人以美感。后段“天长地久”四句按照这样写，却不如之前几句的自然流美，带有人工痕迹。
这首诗是写采玉民工的艰苦劳动和痛苦心情。首句重叠“采玉”二字，表示采了又采，没完没了地采。头两句是说民工不断地采玉，不过是雕琢成贵妇的首饰，徒然为她们增添一点美色而已。“徒”字表明了诗人对于这件事的态度，既叹惜人力的徒劳，又批评统治阶级的骄奢，一语双关，很有分量。
从第三句开始专写一个采玉的老汉，忍受着饥寒之苦，下溪水采玉，日复一日，就连蓝溪里的龙也被骚扰得不堪其苦，蓝溪的水气也浑浊不清了。“龙为愁”和“水气无清白”都是衬托“老夫饥寒”的，连水中的龙都已经这样了，人就更不用说了。
下面两句就“饥寒”二字作进一步的描写：夜雨之中留宿山头，采玉人的寒冷可想而知；以榛子充饥，采玉人的饥饿可想而知。“夜雨冈头食蓁子”这一句把老夫的悲惨境遇像图画似地展现在读者面前，具有高度的艺术概括力。“杜鹃口血老夫泪”，是用杜鹃啼血来衬托和比喻老夫泪，充分表现了老夫内心的凄苦。
七、八句写采玉的民夫经常死在溪水里，好像溪水厌恶生人，必定要致之死地。而那些惨死的民夫，千年后也消不掉对溪水的怨恨。“恨溪水”三字意味深长。这种写法很委婉，对官府的恨含蓄在字里行间。
接下来作者描绘了令人惊心动魄的一幕：山崖间，柏林里，风雨如啸；泉水从山崖上流下来形成一条条小瀑布，采玉人身系长绳，从断崖绝壁上悬身入水，只见那绳子在狂风暴雨中摇曳着、摆动着。就在这生命攸关的一刹那，采玉老汉看到古台石级上的悬肠草，这种草又叫思子蔓，不禁使他想起了寒村茅屋中娇弱的儿女，他自己一旦丧命，那他的儿女就将很难为生了。
早于李贺的另一位唐代诗人韦应物写过一首《采玉行》，也是取材于蓝溪采玉的民工生活，诗是这样的：“官府征白丁，言采蓝溪玉。绝岭夜无家，深榛雨中宿。独妇饷粮还，哀哀舍南哭。”对比之下，李贺此篇立意更深，用笔也更锋利，特别是对老夫的心理有很细致的刻画。
《老夫采玉歌》是李贺少数以现实社会生活为题材的作品之一。它既以现实生活为素材，又富有浪漫主义的奇想。如“龙为愁”“杜鹃口血”，是奇特的艺术联想。“蓝溪之水厌生人，身死千年恨溪水”二句，更是超越常情的想象。这些诗句渲染了浓郁的感情色彩，增添了诗的浪漫情趣，体现了李贺特有的瑰奇艳丽的风格。
从结构上说，诗一开头就揭露统治阶级强征民工采玉，是为了“琢作步摇徒好色”，语含讥刺。接着写老夫采玉的艰辛，最后写暴风雨中生命危殆的瞬间，他思念儿女的愁苦心情，把诗情推向高潮。这种写法有震撼人心的力量，给读者以深刻难忘的印象，颇见李贺不同凡响的艺术匠心。