Lễ hội rước Voi được tổ chức 3 ngày, từ ngày 27 đến hết ngày 29 tháng giêng âm lịch. Tương truyền vào thời Hùng Vương dựng nước, Hùng Hải được anh là Vua Hùng cử đến cai quản vùng Tam Giang (nơi giáp 3 con sông: sông Đà, sông Hồng và sông Bứa) gồm địa phận Đào Xá, Hưng Hoá và Thọ Sơn. Hùng Hải lấy Trang Hoa đã lâu mà chưa có con. Ngày 28 tháng Giêng năm ấy hai ông bà cùng đi thuyền du xuân từ Thọ Sơn sang Đào Xá dựng lầu nghỉ ở đây một đêm sau về Trang Hoa thụ thai, tròn một năm sinh được 3 người con trai là: Đạt Công Long Vương, Mãn Công Long Vương và Uyên Công Long Vương. Các con vừa cất tiếng khóc chào đời thì Trang Hoa hoá thân. Hùng Hải ở lại dạy dân trị thuỷ làm ăn và nuôi dạy các con khôn lớn rồi ông giao miền đất này cho 3 con cai quản còn mình về trông nom miền sông Nhị (địa phận tỉnh Hải Dương) ngày nay. Vua Hùng thấy ông là người có công lớn đã ban thưởng cho 2 thớt voi chiến làm phương tiện đi lại. Trước khi chia tay về sông Nhị, ông đã dẫn đôi voi về làm lễ tạ 3 lần. Cuộc tiễn đưa Hùng Hải ra đi đầy quyến luyến và cảm động. Sau này với đạo lý “Uống nước nhớ nguồn” nhân dân Đào Xá đã tôn ông làm Thành Hoàng làng, lập đình thờ tại đây, hàng năm tổ chức tế lễ, mở hội truyền thống.