Son histoire commence au 16ème siècle. Deux personnes trouvent une statuette représentant une vierge à l'enfant dans un fossé entre Merville et Haverskerque. Elles lui construisent une niche pour l’abriter un peu plus loin, mais le lendemain, elles la retrouvent au même endroit que la veille. Le seigneur du Sart de Boulan, propriétaire des terrains, fait alors construire une chapelle au lieu même de sa découverte, faisant trôner la statuette sur l'autel. La chapelle étant partiellement détruite en 1785, elle est déplacée et conservée puis installée dans l'église dès sa construction en 1908.