| Seigneurs de Luc - Premiers propriétaires | Alliés aux barons de Randon |
| Béraud d'Agrain des Ubas - Seigneur local | Mène le secours contre les routiers (1380) |
| Famille de Polignac - Propriétaires ultérieurs | Possession partagée avec seigneurs voisins |
| Cardinal de Richelieu - Commanditaire de la destruction | Ordre de démantèlement (après 1630) |