大宋仁宗年间，江南平江府东门外长乐村中个老者，姓秋，名先，原是农家出身，有数亩田地，一所草房。妻子水氏已故，别无儿女。那秋先从幼酷好栽花种果，把田业都撇弃了，专于其事。若偶觅得种异花，就是拾到珍宝，也没有这般欢喜。或遇见卖花的，有株好花，不论身边有钱没钱，一定要买。日积月累，便建成了一个大花园。
秋先每日清晨起来，扫净花底落叶，汲水逐一灌溉。到晚上又浇一番。若有一花将开，不胜欢跃。或暖壶酒儿，或烹杯茶儿，向花深深作揖，先行浇奠，口称“花万岁”三声，然后坐于其下，浅斟细嚼。酒酣兴到，随意歌啸。身子倦时，就以石为枕，卧在根旁。自含苞至盛开，未尝暂离。如见日色烘烈，乃把棕拂蘸水沃之。遇着月夜，便连宵不寐。倘值狂风暴雨，即披蓑顶笠，周行花间巡看几次。秋先平昔最恨的是攀枝折朵。生平不折一枝，不伤一蕊。就是别人家园上，他心爱着那一种花儿，宁可终日看玩。假使那花主人要取一枝一朵来赠他，他连称“罪过”，决然不要。若有旁人要来折花者，只除他不看见罢了，他若见时，就拿言语再三劝止。人若不从其言，他情愿低头下拜，代花乞命。人虽叫他是“花痴”，多有可怜他一片诚心，因而住手者他又深深作揖称谢。又有小厮们要折花卖钱的，他便将钱与之，不教折损。或他不在时，被人折损，他来见有损处，心凄然伤感，取泥封之，谓之“医花”。为这件上，所以自己园中不轻易放人游玩。偶有亲戚邻友要看，难以回时，先将薄话讲过，才放进去。那老者因得了花中之趣，自少至老，五十余年，略无倦意。筋骨愈觉强健。粗衣淡饭，悠悠自得。有得赢余，就把来周济村中贫乏。自此合村无不敬仰，又呼为“秋公”。他自称为“灌园叟”。
话分两头。却说城中有一人姓张，名委，原是个宦家子弟，为了奸狡诡谲，残忍刻薄，恃了势力，专一欺邻吓舍，损害良善触着他的，风波立至，必要弄得那人破家荡产，方才罢手。手下用一班如狼似虎的奴仆，又有几个助恶的无赖子弟，日夜合做一块，到处闯祸生灾，受其害者无数。不想却遇了一个又似他的，轻轻捉去，打得个臭死。及至告到官司，又被那人弄了些手脚，反问输了。因收了幌子，自觉无颜，带了四五个家人，同那一班恶少，暂在庄上遣闷。那庄正在长乐村中，离秋公家不远。
一日早饭后，吃得半酣光景，向村中闲走，不觉来到秋公门前。只见篱上花枝鲜媚，四周树木繁翳，齐道：“这所在倒也幽雅，是那家的?”家人道：“此是种花秋公园上，有名叫做‘花痴’。”张委道：“我常闻得说庄边有什么秋老儿，种得异样好花，原来就住在此。我们何不进去看?”家人道：“这老儿有些古怪，不许人看的。”张委道：“别人或是不肯，难道我也是这般?快去敲门!”那时园中牡丹盛开，秋公刚刚浇灌完了，正将着一壶酒儿，两碟果品，在花下独酌，自取其乐。饮不上三杯，只听得砰砰的敲门响，放下酒杯，走出来开门一看，见站着五六个人，酒气直冲。秋公料道必是要看花的，便拦住门口道：“列位有甚事到此?”张委道：“你这老儿不认得人么?我乃城里有名的张衙内。那边张家庄，便是我家的，闻得你园中好花甚多，特来游玩。”秋公道：“告衙内，老汉也没种甚好花，不过是桃杏之类，都已谢了，如今并没别样花卉。”张委睁起双眼道：“这老儿恁般可恶!看看花儿，打甚紧，却便回我没有!难道吃了你的?”秋公道：“不是老汉说谎，果然没有。”张委哪里肯听，向前叉开手，当胸一拳，秋公站立不牢，踉踉跄跄，直闪开半边。众人一起拥进。秋公见势头凶恶，只得让他进去，把篱门掩上，随着进来，向花下取过酒果，站在旁边。众人看那四边花草甚多，惟有牡丹最盛。那花不是寻常玉楼春之类，乃五种有名异品。那五种?黄楼子，绿蝴蝶，西瓜瓤，舞青猊，大红狮头。