Le bâtiment actuel a été construit vers 1270 par Mathieu de Ratilly. La place devient à partir de 1567 un repaire des huguenots dans l'Auxerrois. En 1587, Mary du Puy s'installe à Ratilly après l'avoir restauré. Ses successeurs y Le château est vendu en 1951 à Jeanne et Norbert Pierlot qui en font un atelier de poterie, un lieu de stages et l'un des tout premiers centres d'art contemporain privé.