Người dân quen gọi là chùa Hang bởi cổng phụ phía Tây, quay ra Tỉnh lộ 36 (nay là Quốc lộ 54), được xây giống như một hệ thống 3 hang động sát nhau. Trong đó, cổng chính giữa là một hang lớn, hai cổng hai bên là hai hang nhỏ.