说起化龙镇潭山许氏大宗祠，自然要从潭山村的历史说起。潭山村含乌石岗，古名寿山堡，村内有一小山岗形似寿星公，故名。又因村前有深潭，村后有花山，故名潭山。潭山许氏始于福建莆田县，始祖宋代光禄大夫许彦先卜居潭山，后因官事迁住始兴县，其孙许青为潭山开村之祖。居潭山村务本里，距今已900多年历史，流传近三十代（在珠三角里与巷通，或比巷大，基本建制为村、坊、里、巷、户）。许氏枝繁叶茂，其分支到其它乡村的许氏也都枝繁叶茂，旅居海内外及港澳族人6000多人，是番禺区最大的一个许氏村落。香港著名歌星许志安和香港歌王许冠杰其四兄弟都是潭山许氏后人。

潭山许氏大宗祠是在原广荫堂的基础上重建而成，始建于元朝至治元年，历经680多年沧桑。许氏第三代传人生两子，次子清卿（山吓房），后人居山吓坊。长子复卿生两子，大子充中为（红石房），后人居东街、西街、天南、亨美坊。次子成恭为（白石房）后人居天字、地字、玄字、黄字坊，后人皆出于这三房，共九坊。山吓房只是一间较小的宗祠，红石房建宗祠广荫堂，因全部基础都是褐红色的石头，所以又叫红石祠。而白石房建宗祠滋大堂，因全部基础都是用白色的石头，所以又叫白石祠。滋大堂解放后用作村办小学。在1964年夏天的某个晚上，因连续暴雨后座整座倒塌，以后整间祠堂拆除，再扩充一些地盘，建立了新的小学。改革开放后，由港澳同胞捐资，拆除部校舍建设更高规格的小学。红石祠原用于生产队堆放稻谷的仓库，分田包产到户后闲置。虽经明天启元年、康熙辛酉年、同治甲戌年、2009年等历次重修，但终因年久而破旧不堪，局部倒塌，变成危房。2011年，在族中有识之士的发动倡议下，海内外许氏宗亲积极响应，共筹得200多万元重修资金，重建并更名为许氏大宗祠，为全村及海内外、港澳族人同有。并恢复了以往的立牌位（文化大革命时被破除）挂功名牌匾，立旗杆石等恢复过往历史原貌。

现在的许氏大宗祠金碧辉煌，精雕细琢，大气宏伟。宗祠坐北向南，三间三进，面宽16.27米，总深57米，总面积930平方米，砖木石结构，素胎滴水剪边，硬山顶，灰塑龙船脊，鳌鱼游脊，双凤头龙船垂脊，饰卷单花纹，祥云木雕图案封檐板。前进台阶为七级，形制较高，红砂岩勒脚，祠内梁架为抬梁与穿斗相结合的柁峰斗拱梁架结构型制，前面广场有历代先祖功名旗杆甲石十座，前进门上悬木匾“许氏大宗祠”，门后悬木匾“五凤世家”，中进大堂悬木匾“敦源堂”，后进明间上悬木匾“源远流长”，梁架悬十多块先祖功名牌匾，山墙两边悬挂宗亲送来祝贺木雕对联，祠内有抱柱对联四副，其中有明末清初岭南三大家：屈大均、陈恭尹、梁佩兰撰写的对联。后进明间中心有神龛一个，安放许氏始祖及历代祖先画像及牌位，后墙两边挂木雕“孝弟忠信、礼义廉耻”以警示后人。2011年6月25日，举行了许氏大宗祠重建落成典礼，海内外的许氏宗亲皆回乡祭祖，共享祠堂的重光福泽。

潭山村历来就拥有民族民间艺术的传统底蕴，民俗气氛浓厚，源远流长。修葺一新的许氏大宗祠现在已成为村民休闲活动中心、岁时祭祀、宗亲联宜、寻根问祖、慎宗追远的好地方，2011年被评为番禺区文物保护单位。潭山村委会表示，今后将把祠堂打造成为爱国爱乡的教育基地，同时充分发掘祠堂深厚的历史文化积淀，开发独具本土文化内涵的旅游新热点，让祠堂成为传承文化、共创文明的有效载体。