Nel 1071, Alan il Rosso intraprese la costruzione del castello. Saldamente edificato sul bordo di una scogliera a strapiombo sul fiume, il castello fu risparmiato dalla guerra delle Due Rose e dalla guerra civile. L'accesso si apre nell'impressionante mastio, costruzione romancia alta 30 m. Si noti il bellissimo arco dell'XI sec. Fatta eccezione per il mastio di Chepstow, si tratta del più vecchio edificio del genere in Inghilterra. Dalla sommità, il panorama si estende dalla piazza del mercato alle lande.