黄家祠堂曾有胡调元撰写的一幅对联——“楚吴闽蜀黔齐列宿轺车半天下，父子兄弟叔侄一堂香火聚词林”。意思是：皇帝派出黄氏一门的乡试考官使车到过湖北、江苏、福建、<--NEWSZW_HZH_BEGIN--> 四川、贵州、山东等地，几乎遍及半个中国；父子兄弟叔侄（指黄体正、黄体立、黄体芳、黄绍箕、黄绍第）五位先生都是通晓韵律的诗坛高手。由此可见黄门当年的显赫声势，黄氏弟子的才学博深。

　　明崇祯甲申春修的《黄氏宗谱》中记载：“黄氏繇唐太尉以才辟为殿中少监，迁福建刺史，遂居长溪赤岸。晋封太尉，生子进兴、进显、绍勋、绍烈。时遭王审知乱，自闽长溪徙居瑞湖岙，迨八世至太尹公凤（也作名凤、字舜仪），分白岩单身竖页，实为江夏鼻祖”宗谱中的“原序”申明：黄氏祖宗非等闲之辈。

　　到25世祖，黄氏大房、二房迁居瑞安小沙巷一带，而三房祖祖辈辈一直居住在鲍田三村，人称“鲍田黄”。每年清明时节，房族内家家户户会聚在祠堂，大家共叙亲情，共商房族大事。即使后来祠堂被拆，这个习俗也不变更。

　　清朝中后叶，是黄氏鼎盛时期，迁居到小沙巷的二十五世大房、二房是黄氏宗族中最显赫的一支。祠堂的那幅对联，就是世人对他们的赞誉，他们兄弟二进士、父子叔侄三进士、同朝为翰林的盛况成为黄族人津津乐道上百年的内容。

　　小沙巷原名振文坊，巷口原有一亭，亭上列着由“东南第一笔”池云珊手书“比户书声”的匾额，是黄家祖上为勉励子孙后辈“十年寒窗苦读，一朝金榜题名”而筑，黄门后裔果然不负祖上期望。“比户书声”在文革中被摧毁，家传遗风却绵延承传，成为黄门传家至宝。黄氏子孙们代代英才不断，在教育、艺术、科技等领域作出卓越贡献。

　　瑞安“五黄先生”指黄体正、黄体立、黄体芳三兄弟及体芳儿子黄绍箕、体立儿子黄绍第。“五黄先生”中除黄体正因科场考官疏忽出事，被列为副榜外，其余四人都先后中进士入翰林，加上黄绍第的儿子黄曾铭即黄宗洛的父亲留学归来后又在清末殿试时中进士，黄家以“一门三代翰林”为瑞安历史上所罕见。