| Eudes, seigneur de Grancey | Constructeur du premier château en 1227. |
| Marie de Grancey | Propriétaire du château à la fin du XVe siècle, responsable de sa reconstruction. |
| Claude de Toulongeon-Traves | Mari de Marie de Grancey, impliqué dans la reconstruction du château. |
| Pierre Lenet | Propriétaire du château au XVIIe siècle. |
| Prince de Condé | Acquiert le château en 1780 et le donne à l'hôpital de Chantilly. |
| Germain Verniquet | Responsable de la refonte du terrier du marquisat de Larrey en 1749. |
| Edme Verniquet | Fils de Germain Verniquet, impliqué dans la refonte du terrier du marquisat de Larrey en 1749. |