| Blanchet David | Lieutenant général d'Auxerre, propriétaire initial du manoir. |
| Marie David | Fille de Blanchet David, transmit le manoir à la famille de la Ferté-Meung. |
| Jacques de la Ferté-Meung | Époux de Marie David, propriétaire du manoir. |
| Catherine de la Bussière | Transmit le manoir aux Girard d'Azy par mariage. |
| François de Chastellux | Acheteur du manoir en 1656. |
| Robert Chaponnel | Receveur général des finances de Provence, acheteur du manoir en 1670. |
| Anne Robineau | Veuve de Chaponnel, fit bâtir le nouveau château. |
| Pierre Robineau | Héritier du château après la mort d'Anne Robineau. |
| Louis Gayot | Réunit les deux parts de la seigneurie d'Escolives en 1709. |
| Joseph Le Muet | Procureur du roi, acquiert la seigneurie en 1726. |
| Nicolas Jacques Camusat | Député du tiers-état de Troyes, marié à Anne Françoise Elisabeth Le Muet de Belombre. |
| Louis-Hugues Baudenet d'Annoux | Démolit le château de Chaponnel et fit construire le château actuel. |