Gâvres faisait partie de la paroisse de Riantec jusqu’au 3 octobre 1868. Le recteur de Riantec célébrait une messe chaque semaine dans la petite chapelle, dédiée à Saint-Gildas depuis l’époque des moines. Cette petite église était rectangulaire avec deux bas-côtés. Les arcades centrales reposaient sur des piliers. La population ne cessant de croître, elle devint trop petite.
Le troisième recteur de Gâvres (1877), Vincent Le Roux, eut la charge de construire une église plus grande, cela demandait des fonds importants et le conseil paroissial n’avait que 1300 francs en caisse. L’abbé Le Roux eut l’idée de lancer une souscription : les pêcheurs prélevèrent une somme d’argent sur leurs ventes, les ouvrières des usines versèrent également une participation, l’évêché fit un don de 500 francs, la commune versa 7000 francs, le conseil général octroya une subvention de 1000 francs. Un devis fut établi par un architecte de Lorient. Mais le montant du devis s’élevait à……..42000 francs.
Le recteur ne se découragea pas, décida de construire la nouvelle église avec l’aide des paroissiens et, en 1884, demanda les autorisations nécessaires….qui ne furent accordées qu’en 1887 ! Mais l’abbé le Roux avait déjà commencé à préparer le futur chantier. Les bateaux des pêcheurs de sardines se transformèrent en bateaux de transport : des pierres de taille étaient chargées à Ploemeur puis déchargées à Porh-Puns à marée haute (on dit que les pêcheurs avaient même construit un ponton, la population se chargeait alors de remonter les blocs de pierre sur la dune, puis de les transporter jusqu’à la future église.
Le 25 juin 1885, alors que des bénévoles travaillaient à la préparation du chantier, un éboulement de sable se produisit. Le recteur fut blessé, Anne-Marie Coriton, 14 ans, perdit la vie. Une croix a été dressée à l’endroit même de l’accident derrière l’église.