| Charles d’Anjou - Frère de Saint-Louis, roi de Naples | Commanditaire initial vers 1265. |
| Jean Balue - Cardinal, évêque d’Évreux | Propriétaire en 1520. |
| Antoine Sanguin de Meudon - Cardinal de Meudon | Reconstructeur vers 1550. |
| François Mansart - Architecte | Transforma l’hôtel en 1635. |
| Léon Bouthillier de Chavigny - Propriétaire et mécène | Donna son nom actuel. |
| Jacques Poulletier - Financier | Acheteur en 1698, réaménagea l’hôtel. |
| Jean-François Le Jeuneux - Commis des finances | Propriétaire au XVIIIe siècle. |