| Guillaume de Flory | Premier seigneur connu du manoir fortifié. |
| Louis II d'Orléans | Seigneur ayant vendu la terre du Breuil en 1633. |
| Pierre Gauguery | Marchand à Valençay ayant acheté la terre du Breuil. |
| Louis Gauguery | Fils de Pierre Gauguery, supposé avoir fait reconstruire le château. |
| Eugène Hubert | Historien ayant attribué la reconstruction du château à Louis Gauguery. |