La maison dite du Couvent n'a jamais été un couvent.
C'est une maison de maître qui a été construite en 1865 par Mlle Caroline de Passama, l'aînée des trois sœurs du Château. Elle y vivait seule avec deux domestiques.
Conformément à son vœu, après son décès, sa maison est devenue en 1909 une école catholique pour filles.
Mlle Abadie en a été la directrice jusqu'en 1943.
La maison a ensuite été occupée par des particuliers.