| Guillaume de Rouffilhac - Seigneur fondateur présumé | Rend hommage en 1356. |
| Pierre de La Ramière - Capitaine protestant | Propriétaire jusqu’en 1569. |
| Gédéon Ier de La Ramière - Restaurateur du château | Travaux vers 1625. |
| François-Emmanuel de Cardaillac - Marquis et dernier seigneur | Agrandit le château vers 1760. |
| Auguste-Gabriel Savard - Industriel et mécène | Rachète et restaure en 1910. |
| André Chamson - Conservateur du Louvre | Protège des œuvres pendant la guerre. |