L'œuvre des Dame du Calvaire avait été fondée en 1842. Elle s'est installée à Rouen en 1891, dans les locaux de l'ancienne école normale de filles sécularisée, 3, place de l'église Saint-Gervais.
L'hospice ne recevait que des femmes malades présentant des plaies ou souffrant d'un cancer.
La chapelle comporte quatre travées et un chevet circulaire. Elle n'a ni clocher ni croix.
C'est maintenant l'Hôpital de jour Saint-Gervais.