牛首山是佛教牛头禅宗的开教处与发祥地，从南朝到唐有寺庙30多座，与清凉山、峨眉山并为圣道场地。