L'enclos de l'Isle comprend, outre la chapelle, un calvaire et une fontaine. Son édification initiale remonte à la fin du 14ème siècle comme l'attestent plusieurs éléments d'architecture visiblement très anciens. Plusieurs fois remaniée, notamment au 17ème siècle (chantier en 1646 stipulé dans les archives de la paroisse), la chapelle est en partie ruinée en 1871 (pignon ouest écroulé) puis réparée mais tombe progressivement en ruine à partir de la première moitié du 20ème siècle. R. Couffon, dans l'inventaire qu'il fait en 1937 des monuments religieux des Côtes du Nord, écrit que "la toiture de la Chapelle de l'Isle est croulante". Pourtant, le pardon de l'Isle est célébré jusqu'en 1969.

Dans les années soixante, un élève de collège, Étienne L., dans une dissertation écrit : " Il ne reste plus de cette chapelle que les murs délabrés et décrépis qui s'écroulent petit à petit et sont envahis de lierre et de mousse... Il y a encore dans les murs la forme de deux fenêtres et de trois portes. Comme pavé, il y a au fond un tas de pierres et de terre recouvert d"herbe et sur le reste des orties et ronces. A côté de la chapelle, il y a la moitié d'une croix surmontée sur un socle de pierres moussues. Tout est calme et paisible autour de ce grand bâtiment. Seul quelquefois le bruit léger du vent berçant les sapins qui l'entourent ou le bruit d'un troupeau de vaches allant au champ vient troubler ce silence si grand. En voyant cette chapelle je pense à tous ceux qui y sont passés pour le pardon et pour les autres fêtes. Et je me dis en moi même qu'il faut être lâche pour laisser une telle demeure s'écrouler. Quelle grande tristesse de voir cette vaste chapelle en ruines..."

En 1975 la commune et le conseil paroissial font une contre proposition à une offre d'achat du site par un particulier. Débute alors la mobilisation des bonnes volontés et des compétences indispensables à la difficile reconstruction de la Chapelle de l'Isle. Une association est rapidement créée en 1976, les Amis de la Chapelle de l'Isle, qui fédère les bénévoles et organise les manifestations qui permettent de trouver les fonds nécessaires à l'achat des matériaux et à la réalisation des travaux. En 1981 est posé le premier vitrail. En 1982 la première partie de l'édifice est couverte. En 1985, la pose du clocher achève le chantier du gros œuvre .

Le Président de l'Association des Amis de la Chapelle de l'Isle dit aujourd'hui "Quand je songe au travail réalisé à l'Isle, je pense aussitôt à la rédaction que mon frère avait faite au collège... Cela me rend heureux et je crois que nous pouvons être fiers de ce que nous avons fait...C'est un travail énorme, je ne suis pas certain qu'il y aurait tant d'énergie à l'heure actuelle. Mais cela prouve qu'avec le bénévolat et la volonté, on peut aller loin, c'est la chose à retenir".

Texte tiré de : " La Chapelle Notre-Dame de l'Isle en Kergrist-Moëlou "- JK - 1990

Voir aussi sur ce site, parmi les témoignages, celui des Amis de la Chapelle Notre Dame de l'Isle