La casa fortificada de Remilly domina los impresionantes valles del Sormonne y del Audry, el territorio conocido como las Pothées, en potestad (en propiedad) de los obispos de Reims durante todo el Antiguo Régimen. El castillo data de 1575-1577 y fue construido por Antoine de Rymbert, hijo de Jean, señor de Arreux. El frontón de la puerta principal lleva la fecha "1577". El castillo, de planta rectangular, estaba flanqueado por dos torres redondas, situadas en dos esquinas opuestas, y dos torres de vigilancia cuadradas, con ménsulas en las otras dos esquinas. Sólo se conserva la torre oriental, con muros de casi 1,5 m de grosor, así como la base de la torre de vigilancia vecina. La torreta con ménsulas de la esquina oeste data de la década de 1920. La bretèche renacentista, sostenida por finas ménsulas, también es decorativa.