| Odon IV | Seigneur responsable du remaniement de la forteresse au XIIIe siècle. |
| Louis-Napoléon Bonaparte | Prisonnier célèbre qui s'évada du château en 1846. |
| Marquis de Sade | Détenu célèbre de la prison d'État du château. |
| Mirabeau | Détenu célèbre de la prison d'État du château. |