| Étienne de Montrost - Seigneur de Vallerois (XVe siècle) | Obtient le droit de fortifier le château en 1426. |
| Florent de Vaudrey - Seigneur et bâtisseur (XVIe siècle) | Construisit le quartier Vaudrey et la tourelle en 1526. |
| Philippe-Emmanuel de Salives - Dernier seigneur avant la Révolution | Émigra en 1792, provoquant la vente du château. |
| Pierre Jouffroy - Restaurateur (XXe siècle) | Classa le monument et lança les premières réparations. |