记》所记北岳观，郦道元《水经注》称恒山下庙，此处旧有下阶神殿，汉末丧乱，山道不通，晋、魏改有东西二庙东庙即今曲阳城之北岳庙，西庙即阜平台峪之北岳观，庙前碑阙、坛场相列。东汉光和四年181年恒山下庙碑刻有常山相冯巡之讳名。《畿辅通志·金石》称古恒山北岳观为西汉所建。
金大定时期1161—1189年，陈真人，字道益，住持葛公山清虚观。大定九年1169年于恒山建渊静观。建于金元碑刻者，有恒山各宫观提点道士多人。如蒙古宪宗时任真君观提点的杜志寥，于宪宗二年1252年至世祖至元二年1265年建真君观。元英宗1321——1323年、泰定帝1324——1328年间，孙道微、赵道祥、彭正忠任北岳庙住持、提点。
古恒山还是一座释家名山，东晋中国十大名僧之一的释道安，于永和十年354年率500信众至太行恒山建寺塔，传教说法，各地慕名而来听道安经论，后成为一代佛坛宗师的慧远及其弟慧持，即于此时来恒山学道受戒者，形成以道安为核心的恒山佛教僧团。由于少数民族在河北的战争，政治动乱，天灾频繁，道安师徒无法立足于河北，于东晋隆和元年362年率数百人的僧团至河南王屋女林山。
传古恒山有72座庙宇，现在山阳褶皱处，寺观遗迹随处可见。由于战乱，遭到破坏。该山曾有万余铜神像，其中一尊耳朵眼里能容4人打牌的铜像，均被毁。金龙洞口的圣母五龙庙，一进两殿，依山傍水。
旧县志和庙中13块残碑载，该洞旧称总真观。碑载，传汉末于吉得神符与此，宋守臣薛安抚三诣洞祈雨，敕封利泽侯，复加爵明惠公。旧县志载总真观建于金泰和四年1204年。
古恒山现有北岳庙、玉皇庙、三宵圣母庙、药王庙、眼光庙、关帝庙等10余座，唐县和涞源分别在古恒山东侧、北侧建有北岳行宫。阜平县祭北岳为农历二月初二至三月十五日，涞源为三月十八日。