| Déodat de Barasc - Chevalier et seigneur | Premier seigneur mentionné en 1259. |
| Alphonse de Poitiers - Comte de Toulouse | Destinataire de l’hommage en 1259. |
| Cardaillac (famille) - Seigneurs de Cabrerets | Possèdent le château de ~1320 à 1439. |
| Antoine de Cardaillac - Dernier seigneur Cardaillac | Échange Cabrerets en 1439 contre des terres en Rouergue. |
| Antoine de Gontaut - Nouveau seigneur en 1439 | Acquiert Cabrerets par échange avec Antoine de Cardaillac. |