En constante cambio
El castillo se funda con el asentamiento de los Normandos en el área durante el siglo XII quienes hicieron una empalizada en torno a un edificio principal. Con el tiempo se fueron añadiendo edificios y ampliando las murallas hasta que se completa la construcción en el siglo XV cuando la familia de los Hastings se hace cargo del castillo cedido por el rey Edward IV.
El castillo cambia de manos de forma constante, resultando dañado durante la Guerra Civil Inglesa y haciéndose muy famoso en el siglo XIX, cuando fue finalmente abandonado y destinado a las ruinas. Su fama llega cuando el escritor escocés Sir Walter Scott en 1819 publica su famosa novela "Ivanhoe" situando al mismo en este castillo, lo que hace que incluso en ruinas, sea un lugar bastante visitado. Posteriormente, Enflish Heritage se hace cargo y son ellos los encargados de mantener las ruinas y de explotarlas en la actualidad.