Được xây dựng vào thời Vua Tự Đức với mục đích thờ tự bên ngoại của nhà vua. Nhà thờ Đức Quốc Công (tước hiệu ngài Phạm Đăng Hưng, ông ngoại vua Tự Đức, thân phụ của bà Từ Dũ). Bà Từ Dũ người gốc Gò Công thuộc tỉnh Tiền Giang.
Ngài Phạm Đăng Hưng là thượng thư Bộ Lễ phò vua Gia Long và Minh Mạng, mất năm 1825 là phụ thân của bà Phạm Thị Hằng là vợ vua Thiệu Trị, thân mẫu vua Tự Đức) và thân phụ của chồng công chúa Nguyễn Phúc Vĩnh Trinh. Nhà thời này đã được trùng tu vào năm 1968.
Với bố trí 3 gian giữa để thờ tự, ngôi nhà vẫn giữ gìn theo bản gốc. Đến năm 1999 do ảnh hưởng của trận lụt lịch sử nên thành quách bao bọc quanh ngôi nhà đã hư hỏng dần. Ngôi nhà lọt thỏm giữa một khu vườn rộng bao quanh bởi các loại cây ăn trái như mít, dậu, cau, chuối,…
