此词是作者回忆杭州西湖旖旎风光之词。全词情景交融，先写西湖光景，后写忆者之情。词中正面描写与侧面描写并用 ，景中寄情 ，情中寄景，选景高洁，情调闲雅，用笔淡炼，纯用白描，艺术手法甚为高超。
上片首句一方面，显示西湖风景十分美好，令作者念念不忘；另一方面，经“忆”字提示，下文便从现实中脱开，转入回忆。接下来一句，由今日的不懈思念，引出当年无尽的栖迟，用感情带动写景。“凭阑楼上 ”是词中熟语，极难出新意，然而用在这里，在表明作者终日留恋的同时，还使以下诸景因之入目无遗。“三三两两钓鱼舟，岛屿正清秋。”前句写风物，后句写背景，相映生辉。“三三两两”句点渔舟位置，有悠然自在、不扰不喧的意思。
过片两句 ，继续写当日楼上见闻 ，上句写声，“ 依约 ”是隐约、听不分明的意思，摹笛声渺茫幽远、似有若无的韵致；后句写形，用“忽惊起”状白鸟（即白鹭 ）翩然而逝、倏然而惊的形态，色彩明快，颇具情味，在朴实的白描中透出空灵。“别来”二字将思路从回忆拉到现实。“闲整钓鱼竿”不仅应上片之“钓鱼舟”，而且以收拾鱼竿、急欲赴西湖垂钓的神情，衬托忆西湖忆得不能忍耐、亟想归隐湖上的念头。词之下片，营造出钓翁渔隐出没的寥阔苍茫的背景，以景寓情，寄托了词人的“出尘”思想。
宋杨湜《古今词话》云：“潘逍遥狂逸不羁，往往有出尘之语。”此语从此词中，可见斑。