Le château a été construit au xive siècle puis rebâti au xve siècle. Son nom vient du du bas latin brittisca « [fortification] brittanique », puis « parapet » au Xe siècle et caractérise une tour de défense surplombant la porte principale d?un château. Il est à l'époque un poste avancé de la ville de La Roche-Bernard au sein du Duché de Bretagne.