| Jacques Cœur | Propriétaire des terres transmises par mariage à la famille de Harlay. |
| Louis de Harlay | Époux de la petite-fille de Jacques Cœur, recevant les terres de Beaumont. |
| Achille Ier de Harlay | Premier président au Parlement de Paris, il fait ériger la seigneurie en comté. |
| Achille III de Harlay | Responsable de l'embellissement et de l'agrandissement du château. |