| François d'André | Capitoul de Toulouse et propriétaire du château au XVIe siècle. |
| Perrette d'André | Fille de François d'André, épouse de Léonard de Bastard. |
| Léonard de Bastard | Bourgeois de Toulouse, capitoul et anobli, époux de Perrette d'André. |
| Adélaïde de Bastard | Fille de Léonard de Bastard, épouse du marquis Charles Gravier de Vergennes. |
| Auguste de Rémusat | Premier chambellan de l'Empereur, achète le château en 1809. |
| Charles de Rémusat | Figure marquante de la famille, modèle pour ses descendants. |
| Gilberte de Coral-Rémusat | Archéologue et écrivaine, spécialiste de l'histoire de l'art khmer. |