Non resta nulla della Brest d'anteguerra, fuorché questo castello costruito nell'XI sec. in un luogo fortificato dai Romani. Vauban ha modernizzato il sistema difensivo rimaneggiando le terrazze su cui si trovavano i cannoni. Il castello, ristrutturato dopo l'ultima guerra, ospita oggi la prefettura marittima e il museo nazionale della marina.