明代绍兴人张岱曾到山东曲阜孔庙游玩，孔家人很自豪地对他说：“天下只三家人家，我家与江西张、凤阳朱而已。江西张，道士气；凤阳朱，暴发人家，小家气。”（见张岱《陶庵梦忆》卷二“孔庙桧”）

张岱文中的“江西张”指龙虎山张天师家族，他家自东汉末年延至明清，是道教天花板式的精神领袖，呼风唤雨，驱神捉鬼，万众膜拜。而“凤阳朱”则指明代最高统治者朱元璋家族，他一家子的职业是皇帝，普天之下，都是他家的。孔氏把“江西张”叫作“道士气；对“凤阳朱”则更加轻蔑，贬作“暴发户、小家之气”，勇气可嘉，的确有一股敢把皇帝拉下马的英雄气概。

战国时期孟子小老儿曾说：民为贵，君为轻。惹得朱元璋老大不高兴，怒气冲冲地把他从圣坛上拉下来，踩翻在地，让他吃不到人间烟火，饿瘪肚皮，还让天下读书人不读他的书。

孔氏自称是天下第一家族，还轻视“凤阳朱”，颇有些张狂，这里头是有一些历史原因的。明亡，清军入关，曲阜孔氏立马向清廷表忠心，上表归顺。张岱游玩孔庙应是入清之后，孔氏刚刚归顺新朝，自然要对旧朝故主进行一番鞭挞，这也是情理之中。

孔氏自春秋战国直至明清，世世代代沐浴历朝历代的皇（王）恩，世袭中国第一贵族的头衔，风风光光了二千年，这是任何一个家族都望尘莫及。不过，孔氏也有一把鼻涕一把泪、颠沛流离的日子。南宋初年，赵宋王朝南渡与金国对峙，孔家的衍圣公在国家、民族的大是大非上，大义凛然，誓死不当亡国奴，坚决紧跟赵家天子，从龙（不是从容，而是匆匆忙忙）渡过长江。明亡，南明在南方建立，这时候的衍圣公没学习他们老祖宗渡江，而选择就地投效爱新觉罗，差别大着咧。

衍圣公一家子来到浙江，宋高宗颇高兴，将衍圣公安置在比较安全的衢州，建立孔氏家庙，供奉孔夫子像，史称南宗，与北方金国册立的衍圣公遥遥相望，各称自家是正统正宗，老死不往来。

衍圣公的几个兄弟也一起过江，朝廷陆续对他们进行安置，永康榉溪（今磐安）定居一位孔家兄弟，也建家庙。衍圣公还有一位弟弟叫孔端朝，他一路颠簸，先落脚徽州。后来儿子在兰溪做主簿，孔端朝又跟着来兰溪。最后，孔端朝他一家子被安置在金华县，也建家庙。