Guide d’annotation des entités nommées au sein d’un corpus persan - Équipe de Recherche : Textes, Informatique, Multilinguisme
Pré-Publication, Document De Travail Année : 2023

Guide d’annotation des entités nommées au sein d’un corpus persan

Résumé

Le projet VITAL (Valorisation de l’Innovation dans le Traitement Automatique des Langues) est le fruit d’une collaboration entre le laboratoire ERTIM de l’INALCO, équipe de recherche en ingénierie multilingue et en Traitement Automatique des Langues (TAL), et l’entreprise Kairntech, éditeur de logiciels. Le projet VITAL vise à développer des outils performants d’assistance à la production de données annotées et à permettre à ces outils de mieux supporter certaines langues moyennement ou peu dotées (kurde, ourdou, hindi, persan, mandarin, cantonais, arabe standard, arabe tunisien). Dans le cadre du projet, différentes campagnes d’annotation de corpus ont eu lieu, dont une sur un corpus persan. Aujourd’hui, la production de données annotées est au cœur d’enjeux importants, dans la mesure où les systèmes neuronaux d’intelligence artificielle ne fonctionnent pas sans données, en partie issues d’annotations réalisées manuellement par des locuteur·ices humain·es. Entre autres types d’annotations, celle des entités nommées permet de faire progresser les outils de reconnaissance automatique des éléments informationnels au sein de textes . Ces outils peuvent être utiles, entre autres, dans le cadre du développement des moteurs de recherche ou des moteurs de traduction automatique. La performance de ces deux types d’outils, encore très inégale entre langues dotées et langues peu dotées, est à la fois révélatrice et reproductrice des inégalités linguistiques . Dans le cadre du projet, ce guide avait pour objectif, d’une part, de rendre accessible aux annotateur·ices la notion d’entité nommée et les notions liées, et d’illustrer ces notions théoriques à l’aide d’exemples en persan. D’autre part, ce guide devait transmettre aux annotateur·ices les instructions de leur mission d’annotation ainsi qu’un certain nombre de préconisations illustrées par des exemples issus du corpus persan. Il s’agit d’un document technique qui s’adresse à des personnes parlant couramment français et persan et ayant des connaissances élémentaires en linguistique. Nous publions ce guide sous licence Creative Commons en nous inscrivant dans le mouvement de la science ouverte, dans une perspective d’accès gratuit à la connaissance et de mutualisation des savoirs. Nous nous inscrivons dans une perspective de promotion des langues minorées, de développement du traitement automatique des langues moins dotées en ressources et en outils numériques, et de lutte contre les inégalités linguistiques, en espérant que notre travail puisse être utile à d’autres projets de recherche dans ce domaine.
Guide d'annotation des entités nommées au sein d'un corpus persan

Le projet VITAL (Valorisation de l'Innovation dans le Traitement Automatique des Langues) est le fruit d'une collaboration entre le laboratoire ERTIM de l'INALCO, équipe de recherche en ingénierie multilingue et en Traitement Automatique des Langues (TAL), et l'entreprise Kairntech, éditeur de logiciels. Le projet VITAL vise à développer des outils performants d'assistance à la production de données annotées et à permettre à ces outils de mieux supporter certaines langues moyennement ou peu dotées (kurde, ourdou, hindi, persan, mandarin, cantonais, arabe standard, arabe tunisien). Dans le cadre du projet, différentes campagnes d'annotation de corpus ont eu lieu, dont une sur un corpus persan.

Aujourd'hui, la production de données annotées est au coeur d'enjeux importants, dans la mesure où les systèmes neuronaux d'intelligence artificielle ne fonctionnent pas sans données, en partie issues d'annotations réalisées manuellement par des locuteur•ices humain•es.

Entre autres types d'annotations, celle des entités nommées permet de faire progresser les outils de reconnaissance automatique des éléments informationnels au sein de textes 1 . Ces outils peuvent être utiles, entre autres, dans le cadre du développement des moteurs de recherche ou des moteurs de traduction automatique. La performance de ces deux types d'outils, encore très inégale entre langues dotées et langues peu dotées, est à la fois révélatrice et reproductrice des inégalités linguistiques 2 . Dans cette campagne, nous travaillons uniquement sur les trois types d'entités nommées les plus courantes, mais il en existe une très grande variété. À titre d'exemple, on pourrait également étiqueter les produits, les oeuvres, les évènements, les titres, les fonctions, les valeurs numériques, les valeurs temporelles, les distances, les coordonnées de contact, les quantités, etc. 4 II.a. Le critère de monoréférentialité Une EN est un mot ou un groupe de mots qui fait référence à un élément à la fois existant et unique. C'est une expression qui ne possède qu'un seul référent possible. Une EN ne désigne pas un objet général mais désigne un objet en particulier : il s'agit d'une personne spécifique, d'un lieu précis, d'une 3 EHRMANN, Maud (2008). Les Entitées Nommées, de la linguistique au

Fichier principal
Vignette du fichier
GUIDE D'ANNOTATION FARSI - version révisée.pdf (367.8 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-04685460 , version 1 (03-09-2024)

Licence

Identifiants

  • HAL Id : hal-04685460 , version 1

Citer

Ronan Grandadam, Kévin Deturck, Damien Nouvel. Guide d’annotation des entités nommées au sein d’un corpus persan. 2023. ⟨hal-04685460⟩
21 Consultations
12 Téléchargements

Partager

More