聚芳斋主人黄君陛，明末嘉定南翔人，爱植花卉，家中“群卉烂然”，尤以天烛最盛。昆山归庄颜其斋曰聚芳斋，并书《聚芳斋记》（不见于归庄文集），共七开。然后黄君陛请当时的名士傅山、严绳孙各绘《聚芳斋图》一开置于前，再请吴梅村书《聚芳斋记》殿于后。接下来还有沈白、曹□邈的跋。六位明末清初文人的书画合为一册，尤其傅、严、归、吴，都是当时的著名文人，他们围绕一个主题作文作书作画。

从归庄文章中“戊申十月寻菊至南翔……”可以推知，这些书画当作于康熙戊申（1668）之后的几年中。这年归庄56岁，黄君陛、傅山年岁更高。傅山的《聚芳斋图》笔触细腻入微，既非老来之笔，也与傅山的怪异画风不合，故我们怀疑是代笔，但落款是傅山亲书的。

这些文人，除了傅山，其余都是江南人。吴梅村，世居昆山，自祖父起移居太仓。归庄，昆山人，与昆山顾炎武同年生，晚年移居太仓。严绳孙，无锡人，顺治六年（1649）参加由吴梅村主盟的慎交社。沈白，上海松江人。而傅山虽然是山西人，与江南相隔甚远，但他与顾炎武是很要好的朋友。