| Monsieur de Sorgues - Propriétaire et constructeur | Unifie les maisons au XVIe siècle. |
| Laudun - Lieutenant du vicomte de Joyeuse | Assassiné dans la tourelle en 1561. |
| Cardinal de Richelieu - Homme d’État et religieux | Séjourne à l’hôtel en 1632. |
| Famille Cavaillé - Propriétaires aux XVIIIe–XIXe siècles | Restaure et décore l’hôtel. |
| Architecte Viviers - Responsable des restaurations | Travaux fin XIXe siècle. |