| Nicolas Carré de Baudouin - Propriétaire et mécène | Commanda la façade néoclassique en 1770. |
| Pierre-Louis Moreau-Desproux - Architecte | Conçut la façade palladienne du pavillon. |
| Edmond et Jules de Goncourt - Ancien propriétaires | Y passèrent leur enfance au XIXe siècle. |
| Sœurs de Saint-Vincent-de-Paul - Gestionnaires (1836-1992) | Fondèrent un orphelinat sur le site. |
| Stéphane Bigoni et Antoine Mortemard - Architectes (réhabilitation) | Dirigèrent les travaux post-2003. |