C’est un imposant édifice rectangulaire encadré d’une tour carré à chacune de ses extrémités.
Au XIXe siècle il fut la propriété de Philippe de Brissac (dernier Maire de Saint-Léger-la-Pallu) avant de devenir celle de la famille de Traversay.
La place centrale de Saint-Léger-la-Pallu porte d’ailleurs le nom de Philippe de Brissac.