| Guillaume de Broa - Archevêque de Narbonne | Agrandit le château au XIIIe siècle. |
| Cardinal de Richelieu - Ministre de Louis XIII | Ordonna la destruction au XVIIe siècle. |
| Khair Eddin Barberousse - Bey d'Alger et amiral ottoman | Légende locale sur l'origine du nom. |
| Gaspar Dot (Barbe Roussette) - Corsaire au service du duc de Joyeuse | Hypothèse alternative pour le nom. |
| Montmorency - Chef militaire protestant | Prise du château en 1589 et 1592. |