Tanguy est un nom d'origine celtique qui signifie " feu" et "guerrier".
De fait, selon la tradition Bretonne, Tanguy, qui avait un caractère extrêmement violent, fut d'abord un meurtrier, et de sa propre soeur ! On rapporte qu'il était le fils du seigneur de Trémaouezan, près de Landerneau dans le Finistère. C'était au VIe siècle ; il avait une soeur qui se prénommait Haude. Leur marâtre, jalouse, ayant accusé la jeune fille de débauche, Tanguy, pris de fureur, aurait tué sa soeur. Pour expier son forfait, il s'enfuit, renonce au monde et se soumet à une pénitence radicale. Après un jeûne de 40 jours dans la forêt du pays de l'Élorn, il se retire au monastère de l'île de Batz.

Un pèlerin lui ayant rapporté de Terre Sainte une relique de l'apôtre saint Matthieu, le moine Tanguy décide de fonder un monastère en l'honneur du premier des Evangélistes. Et c'est ainsi que serait née l'abbaye de Saint-Matthieu de Fine-terre, au Conquet dans le Finistère, donc à la Pointe Saint-Matthieu.