| Jean d’Avenières - Seigneur de Douzon | Premier propriétaire connu (XIVe siècle) |
| François du Buysson (1704–1769) - Comte de Douzon, mousquetaire du roi | Commanditaire du château XVIIIe siècle |
| Philibert du Buysson de Douzon (1736–1793) - Député de la noblesse, officier | Guillotiné pendant la Révolution |
| Jacques-Marie-Pierre Loisel (1776–1858) - Maire d’Étroussat, noble | Acquéreur en 1803, ancêtre des propriétaires actuels |
| Clément - Architecte | Concepteur du château du XVIIIe siècle |