华山阁位于源潭当铺街衙门口北100米处，始建于清康熙年间。其原集市在河西岸的青龙镇，因洪水频发，康熙六年商人上书唐县县令，遂搬迁东岸，取青龙回源归潭之吉兆，命名源潭。人们为祈求平安和人丁兴旺，就建了一座神圣华丽的华山阁庙。

华山阁的来历缘于华山奶奶的传说。她本是一位村姑，因长相丑陋，终身未嫁，但这位老姑娘却精通医术，且能药到病除，尤其擅长妇女不孕之症。某年舞阴唐河一带发生洪水，灾后瘟疫流行。村姑施药救人，活命无数。最后累死在救人途中。乡人却传说，村姑不是累死而是被华山爷娶走作娘娘了。于是村姑就被称为华山奶奶。

如今，从阁楼拱门穿过，“麒麟门”三个楷书大字镶嵌在拱门上方，格外引人瞩目，一块镌刻有“华山阁”三字的条形长匾立于楼阁大门上方。高耸的阁楼上，神态端庄的华山奶奶塑像端立在阁楼正中，怀抱一个裸体的胖男娃娃，前边是香案和香炉。那些婚后不育或有女无子的妇女，都会前来焚香跪拜，有子之家则由父母带领，登阁上楼，在华山奶奶像前焚香，用一绺白棉线上系铜钱或几元纸币，祈祷后挂于孩子脖子上，叫挂锁子，以此为孩子祈福，保佑平安。由此华山阁整日香雾缭绕，人声鼎沸，祈福求子的、烧香还愿的络绎不绝，香火兴旺。

2014年农历二月十九，值华山阁竣工开光之日 ，传统的源潭华山阁庙会在中断多年之后再次重新兴起，盛况空前，为历史悠久、文化厚重的源潭古镇增添了光彩。