| Peytavin de Montesquiou - Évêque d’Albi | Propriétaire du domaine en 1339. |
| Louis Ier d’Amboise - Évêque d’Albi | Propriétaire avant les guerres de Religion. |
| Claude de Galaup - Bourgeois albigeois | Acheteur et transformateur du château en 1613. |
| Jean-François de Galaup, comte de Lapérouse - Explorateur et officier de marine | Né au château en 1741. |
| Victor-Joseph de Galaup - Père de Lapérouse | Fortune issue du commerce du pastel. |