| Alain de La Faye | Propriétaire initial ayant fait construire le château au XVIe siècle. |
| Hélie Vigier | Propriétaire de Segonzac dont les filles ont épousé des membres de la famille de La Faye. |
| Pierre de La Faye | Propriétaire du château au début du XVIIe siècle, mentionné dans un document de 1611. |
| Isabeau de Lambertie | Épouse de Pierre de La Faye, mentionnée dans un document de 1611 et décédée en 1653. |