Unique vestige des quatre portes de l'enceinte urbaine construite sous Philippe Auguste.
La ville de Loudun était fortifiée dès la fin de l'Empire Romain. L'enceinte de cette époque a servi de soubassement à l'enceinte du Moyen-Age, y compris pour les tours.
Philippe Auguste fait élever les remparts au XIIIème siècle sur une longueur de plus de deux kilomètres. La ville avait alors trois autres portes semblables à la Porte du Martray (photo ci contre) : la Porte Saint-Nicolas, la Porte Saint-Jean et la Porte Notre Dame.