Del castillo del siglo XII, sólo queda una de las cuatro torres originales. El castillo original y sus dependencias ocupaban una superficie de 4 hectáreas. En el interior, había otros 3 edificios, un bailey, un palomar, una gran fuente y 2 capillas, entre ellas la de Notre Dame de L'Isle, que todavía se encuentra en el lugar.
Se dice que el castillo fue incendiado en 1637 junto con el pueblo. La torre restante del castillo se utilizó entonces de diferentes maneras: en el siglo XIX se utilizó como prisión, mientras que en el siglo XX se utilizó como vivienda durante un largo periodo.