| Guillaume de Varye | Financier proche de Jacques Cœur, acquéreur et constructeur initial du château. |
| Charlotte de Bar | Veuve de Guillaume de Varye, elle fit achever la reconstruction du château. |
| Pierre Doriole | Second mari de Charlotte de Bar, général des finances de Languedoïl puis chancelier de France. |
| Jean le Meingre | Ancien propriétaire de la terre de l'Isle-Savary, neveu du maréchal de Boucicaut. |
| Jacques Cœur | Proche de Guillaume de Varye, contrôleur général des finances en Languedoc. |