| Guillaume de Sars | Seigneur de Sars et premier constructeur du château, prévôt du Quesnoy, bailli de Hainaut et chambellan conseiller de Philippe le Bon. |
| Guillaume II du Mont | Bailli de Chimay et Beaumont puis conseiller souverain de Hainaut, responsable de la transformation du château au XVIIe siècle. |
| Jean du Chasteler | Seigneur mentionnant le château dans son testament de 1525. |