| Seigneurs de Luc - Premiers propriétaires | Liés aux barons de Randon. |
| Béraud d'Agrain des Ubas - Seigneur local | Mène le secours en 1380. |
| Famille de Polignac - Propriétaires ultérieurs | Possession partagée avec autres seigneurs. |
| Cardinal de Richelieu - Commanditaire de la destruction | Ordre de démantèlement vers 1630. |