Chùa Đại Bi nằm trên đỉnh núi Ngoan Sơn, vốn được khởi dựng từ lâu đời, đến thời Lê Trung Hưng được trùng tu và mở rộng với quy mô rất lớn theo kiểu “trăm gian”.
Khi ấy, ngôi chùa ngoài Tam Bảo ra còn có gác chuông, hậu đường, hai bên hành lang, nhà mẫu, nhà tổ, nhà sư, nhà khách. Thực hiện lệnh tiêu thổ kháng chiến chống Pháp, ngôi chùa cổ đó bị phá dỡ. Năm 1990, dân làng dựng tạm mấy gian Tam Bảo có quy mô nhỏ để làm nơi thờ Phật.