| François Le Normant d'Ayssènes | Conseiller du roi et receveur de l'élection de Rodez, constructeur de l'hôtel particulier. |
| Amans-Joseph-Henri de Séguret | Propriétaire de l'hôtel particulier avant sa vente au département. |
| Étienne-Joseph Boissonnade | Architecte départemental responsable de l'agrandissement de l'édifice en 1829. |