Il épousa la fille de l'architecte Pierre Prosper Chabrol.
Ils eurent trois enfants ensemble. Leur fils, Prosper Chabrol, devint également architecte et travailla sur plusieurs projets importants à Paris. La famille Chabrol resta proche de l'art et de l'architecture tout au long de leur vie.