Im 11. Jahrhundert gab es in Sacro Monte ein kleines romanisches Heiligtum, ein Ziel für die Gläubigen, die von überall her kamen, sogar aus Mailand und dem Kanton Tessin. Um das Heiligtum herum entstand nach und nach ein Dorf, in dem Priester und Laien untergebracht waren, die Pilgerunterkünfte betrieben. Im Laufe der Zeit erlebte das Heiligtum einen immer stärkeren Zustrom von Pilgern, so dass es 1472 nach einem Entwurf des Architekten Bartolomeo Gadio umgebaut und vergrößert wurde.
Außerdem entstand der Orden der Ambrosianer von Rom, der nur zwei Jahre später von Papst Sixtus IV. die Erlaubnis erhielt, ein Kloster zu errichten.