| Jean de Saint-Sauveur | Vicomte de Joyeuse, constructeur du château vers 1540. |
| Guillaume de Joyeuse | Membre de la famille de Joyeuse, seigneur du château. |
| Anne de Joyeuse | Fils de Guillaume de Joyeuse, héritier du château. |
| Henri de Joyeuse | Frère d'Anne de Joyeuse, seigneur du château. |
| Catherine de Joyeuse | Fille d'Henri de Joyeuse, héritière du château. |
| Charles-François de Lorraine-Commercy | Propriétaire du château passé au service de l'Empereur en 1690. |
| Élisabeth de Lorraine | Dite Mlle de Lillebonne, princesse d'Épinoy, reçue le château du roi en 1694. |
| Charles de Rohan-Soubise | Petit-fils de la princesse d'Épinoy, cède le château en 1756. |
| Marie Louise de Rohan-Soubise | Épouse de Gaston Jean-Baptiste Charles de Lorraine, comte de Marsan, vendit le château en 1788. |
| Cerice de Vogüé | Acquéreur du château en 1788 pour 100 000 livres. |