Nói về việc tổ chức lễ hội Minh Thề, các cụ cao niên trong làng nhớ lại, vào khoảng giữa thế kỷ XVI, Thái hoàng Thái hậu Vũ Thị Ngọc Toàn, vợ của vua Mạc Đăng Dung đã bỏ tiền và vận động hoàng thân quốc thích, quan lại triều Mạc cả thảy 35 vị góp tiền của để tu tạo lại ngôi chùa cổ ở thôn Hòa Liễu. Thái hoàng Thái Hậu mua 25 mẫu 8 sào 2 thước ruộng cúng Tam Bảo và cho dân Lan Niểu (nay là thôn Hoà Liễu) được sử dụng. Ruộng này làng gọi là Thánh điền. Một phần diện tích ruộng dành cho nhà chùa cấy, một phần dùng vào việc tuần tiết lễ hội, một phần chia cho dân đinh cày cấy hưởng lộc; phần còn lại cho cấy đấu thầu lấy thóc lập quỹ nghĩa thương phòng khi đói khó cấp đỡ cho người nghèo, cố nhân, quả phụ… Để phòng chức dịch tham nhũng trong việc sử dụng hoa lợi từ số ruộng trên, Thái hoàng Thái hậu đã cùng với dân làng lập ra Hịch văn hội Minh thề quy định lấy chí công làm trọng. Hội Minh Thề từ đó diễn ra vào 3 ngày 14, 15 và 16 tháng Giêng hàng năm.

Theo nghi lễ còn lưu truyền đến ngày hôm nay, trong lễ hội Minh Thề, chủ lễ cùng các vị bồi lễ đọc chúc văn lai lịch công đức của Thánh vương. Đồng thời làm lễ dâng hương, dâng rượu, dâng nước trong tiếng nhạc bát âm. Các bô lão, quan khách và dân làng, chức dịch, quần áo chỉnh tề tập trung quanh sân miếu theo thứ bậc. Chủ tế dùng động tác “chỉ trời vạch đất” mô phỏng theo phép biến trong Kinh dịch rồi vẽ một vòng tròn lớn đường kính khoảng 2m ở giữa sân miếu gọi là Đài thề. Trước Đài thề đặt một bàn thờ hướng về cửa miếu thâm nghiêm.

Mọi người trong làng từ hương chức đến nhân dân, trên là bô lão, dưới từ 18 tuổi trở lên, đều thề: "Ai lấy của công dùng vào việc công xin thần linh ủng hộ; ai lấy của công dùng vào việc tư, cầu thần linh đả tử; làm tôi bất trung, làm con bất hiếu, xin thần linh tru diệt". Sau khi mọi người cùng hô vang câu “y như lời thề” hoặc “y như miệng thề”, vị chủ tế cầm dao bầu cắm mạnh xuống trong vòng tròn Đài thề để biểu thị sự quyết tâm.