Si narra che la Madonna Addolorata, con in grembo il Cristo morto, apparve alla pastorella Maddalena Chiaravalle, mentre conduceva il gregge al pascolo lungo le rive del torrente Rajale.
La Vergine chiese alla giovane pastorella che venisse eretto un santuario a suo nome.
La facciata venne edificata tra il XIV ed il XV secolo e successivamente ampliata con la realizzazione delle aperture verso il torrente Rajale (1519), l’ingrandimento del corpo centrale (1559) e l’installazione, all’interno dell’edificio, del quadro realizzato da Pompeo Mausonio ed intitolato “Madonna del Santissimo Rosario con i quindici misteri” (1596).