| Blanchet David - Luitenant-generaal van Auxerre | Oorspronkelijk eigenaar van het herenhuis in de 16e eeuw. |
| Robert Chaponnel - Ontvanger-generaal Financiën | Initiator van het nieuwe kasteel. |
| Anne Robineau - Weduwe van Chaponnel | Voltooi de bouw na 1678. |
| Joseph Le Muet - Procureur van de koning in Auxerre | Acquiert Besombre in 1726. |
| Nicolas Jacques Camusat - Adjunct van de derde staat | Man van Anne Le Muet, getrouwd met het kasteel. |
| Louis-Hugues Baudenet d’Annoux - Eigenaar in de 19e eeuw | Het huidige kasteel werd omstreeks 1870 herbouwd. |