Il marque à l'origine l'entrée du grand domaine agricole du Manoir de la Grand’Cour.
Au XVIIIème siècle, le Comte et la comtesse de la Garaye y établissent une « Maison Charitable » tenue par les religieuses de la Congrégation du Saint Esprit.
C'est pourquoi le bâtiment est également connu sous le nom d’ « Ancien Couvent » .