Del castello del XII secolo, oggi rimane solo una delle quattro torri originali. Il castello originale e i suoi annessi coprivano un'area di 4 ettari. All'interno c'erano altri 3 edifici, un bailamme, una colombaia, una grande fontana e 2 cappelle, tra cui quella di Notre Dame de L'Isle, che si trova ancora sul posto.
Si dice che il castello sia stato bruciato nel 1637 insieme al villaggio. La torre rimanente del castello fu poi utilizzata in modi diversi: nel XIX secolo fu usata come prigione, mentre nel XX secolo fu usata come abitazione per un lungo periodo.