Évaluation de mesures d’accord sur des structures relationnelles par la dégradation contrôlée d’annotations - Inria - Institut national de recherche en sciences et technologies du numérique Accéder directement au contenu
Communication Dans Un Congrès Année : 2024

Évaluation de mesures d’accord sur des structures relationnelles par la dégradation contrôlée d’annotations

Antoine Boiteau
  • Fonction : Auteur
  • PersonId : 1395832

Résumé

Les mesures d’accord inter-annotateurs sont essentielles pour évaluer la qualité des annotations humaines sur les corpus. Dans le cadre des structures relationnelles, la question de la qualité et de l’interprétabilité de ces mesures reste cependant ouverte. Cet article présente l’adaptation d’un outil déjà utilisé pour d’autres paradigmes d’annotation dont le but est de générer de manière contrôlée des annotations artificielles erronées. Les annotations obtenues sont fournies à des mesures d’accord adaptées aux structures relationnelles, permettant l’identification des comportements des mesures ainsi que les différences entre elles.
Fichier principal
Vignette du fichier
6542.pdf (1.06 Mo) Télécharger le fichier
Origine Fichiers éditeurs autorisés sur une archive ouverte

Dates et versions

hal-04622987 , version 1 (26-06-2024)

Licence

Identifiants

  • HAL Id : hal-04622987 , version 1

Citer

Antoine Boiteau. Évaluation de mesures d’accord sur des structures relationnelles par la dégradation contrôlée d’annotations. 35èmes Journées d'Études sur la Parole (JEP) 31ème Conférence sur le Traitement Automatique des Langues Naturelles (TALN) 26ème Rencontre des Étudiants Chercheurs en Informatique pour le Traitement Automatique des Langues (RECITAL), 2024, Toulouse, France. pp.57-68. ⟨hal-04622987⟩

Relations

11 Consultations
2 Téléchargements

Partager

Gmail Mastodon Facebook X LinkedIn More