| Pépin le Bref | Roi des Francs impliqué dans la destruction du premier château en 762. |
| Jean II de la Roche-Millay | Seigneur du château condamné à une pénitence publique en 1253. |
| Guillaume de Mello | Propriétaire de la seigneurie et du château en 1381. |
| Marshal de Villars | Propriétaire du château au début du XVIIIe siècle. |
| Michel-Ange Caristie | Architecte responsable de la reconstruction du château au XVIIIe siècle. |
| François de La Ferté-Meun | Comte qui acheta la seigneurie en 1736 et fit achever les travaux. |
| Jacques-Louis de La Ferté-Meun | Comte de La Roche-Millay en 1760. |