Gia đình cụ Phan Tam hiện sinh sống và làm việc tại Quảng Ninh. Tổng số thành viên gia đình cụ hiện có khoảng 20 người, con cháu có nhiều người thành đạt công tác tại các vị trí quan trọng của nhà nước.