| Guillaume Boyt | Marchand et bourgeois de Sarlat, acquéreur du moulin de Cluzel. |
| Raymond Boyt | Probable auteur du premier château. |
| Antoine Boyt | Membre de la famille Boyt, père d'Étienne de La Boétie. |
| Étienne de La Boétie | Conseiller du roi au Parlement de Bordeaux, né au château. |
| Anne Boyt | Sœur d'Étienne, héritière du domaine. |
| Berthomieu Le Bigot | Fils d'Anne Boyt, héritier du château. |