| Hugues II de Campdavaine - Comte de Saint-Pol | Constructeur du donjon carré vers 1120. |
| Guy III de Châtillon-Saint-Pol - Comte de Saint-Pol | Transforma le château en résidence au XIIIe siècle. |
| Louis de Luxembourg-Saint-Pol - Connétable de France | Exécuté en 1475, hôte de Louis XI. |
| Pierre Ier de Luxembourg-Saint-Pol - Seigneur de Lucheux | Répara le château après 1415. |
| Jean Bullant - Architecte (parent) | Participe aux réparations au XVIe siècle. |
| Cardinal de Richelieu - Ministre de Louis XIII | Ordonna le démantèlement en 1640. |