清初，徐家后代有一名叫徐树丕的，写了一本专记吴地趣闻逸事的著作《识小录》，书中记载了他家叔祖骗取拙政园的来龙去脉，让后人知晓了拙政园第一次改换门庭的真相。据说，当时徐少泉拿一千两银子与王献臣的儿子赌博，约定撒出去骸子上六点的颜色都是红色的人获胜。赌了许久，等到他输得差不多了，徐少泉就招呼妓女进酒，而且器乐合奏。等到他开始疲倦的时候，徐少泉就要他以拙政园来赌，并暗暗地拿出六面都是六点红色的骸子一掷，只见骸子上的六点都是红色，在座所有的人都惊奇得大叫，因为一般是绝不可能的事。王献臣儿子不知是作弊，怅然若失，一句话也说不出来，于是拙政园就输给了徐少泉。后来王献臣的儿子一 不振，家道败落，到了孙子一辈，穷得以吊丧为业。