从有关史料及寺庙遗址、寺庙碑以及金钟等实物推断，佛教在唐朝前已传入县境，在唐宋时期有一定发展。位于县城东南15公里白佛头村附近的白佛寺即为唐代所建，两颗白玉石佛头至今犹存。元、明两代，境内佛教最盛，当时较大的佛寺就有19处，境内寺庙多于此时所建。清光绪年间重修了部分寺庙。清末佛教逐渐衰微。1908年(光绪三十四年)，全县只有佛教徒18名，以香火、布施及寺产为主要生活来源。民国时期，境内城乡寺庙大多拆除。建国后，僧侣皆还俗，寺庙全部废圮。