政和间，余卜筑宛丘，手植众芗，自号芗林居士。建炎初，解六路漕事，中原俶扰，故庐不得返，卜居清江之五柳坊。绍兴癸丑，罢帅南海，即弃官不仕。乙卯起，以九江郡复转漕江东，入为户部侍郎。辞荣避谤，出守姑苏。到郡少日，请又力焉，诏可，且赐舟曰泛宅，送之以归。己未暮春，复还旧隐。时仲舅李公休亦辞舂陵郡守致仕，喜赋是词。

五柳坊中烟绿，百花洲上云红。萧萧白发两衰翁，不与时人同梦。
抛掷麟符虎节，徜徉江月林风。世间万事转头空，个里如如不动。

危言危行是男儿，倚伏相牵岂足悲。
莫向汀洲时独立，悠悠斜日照江蓠。

雨余寒气浅，园林作春媚。
不知海棠花，新来著花未。

玉碗冰寒消暑气。碧簟纱厨，向午朦胧睡。莺舌惺松如会意。无端画扇惊飞起。雨后初凉生水际。人面荷花，的的遥相似。眼看红芳犹抱蕊。业中已结新莲子。

不知春色归何处。但见茂林芳树。庭巷落花如雨。斗乱穿窗户。
晚行溪上东风住。荷点青钱无数。蛱蝶飞来还去。错认花间路。