ParaPLUIE - une mesure automatique d’évaluation de la qualité sémantique des systèmes de paraphrases - Inria - Institut national de recherche en sciences et technologies du numérique Accéder directement au contenu
Communication Dans Un Congrès Année : 2024

ParaPLUIE - une mesure automatique d’évaluation de la qualité sémantique des systèmes de paraphrases

Résumé

L'évaluation des systèmes de production automatique de paraphrases est une tâche difficile car elle implique, entre autre, d'évaluer la proximité sémantique entre deux phrases. Les mesures traditionnelles s'appuient sur des distances lexicales, ou au mieux des alignements de plongements sémantiques. Dans cet article nous étudions certaines de ces mesures sur des corpus de paraphrases et de non-paraphrases reconnus pour leurs qualités ou difficultés sur cette tâche. Nous proposons une nouvelle mesure, ParaPLUIE, s'appuyant sur l'utilisation d'un grand modèle de langue. D'après nos expériences, celui-ci est plus à même de trier les paires de phrases par proximité sémantique.
Fichier principal
Vignette du fichier
4093.pdf (551.79 Ko) Télécharger le fichier
Origine Fichiers éditeurs autorisés sur une archive ouverte

Dates et versions

hal-04623043 , version 1 (01-07-2024)

Licence

Identifiants

  • HAL Id : hal-04623043 , version 1

Citer

Quentin Lemesle, Jonathan Chevelu, Damien Lolive, Arnaud Delhay, Philippe Martin. ParaPLUIE - une mesure automatique d’évaluation de la qualité sémantique des systèmes de paraphrases. 35èmes Journées d'Études sur la Parole (JEP 2024) 31ème Conférence sur le Traitement Automatique des Langues Naturelles (TALN 2024) 26ème Rencontre des Étudiants Chercheurs en Informatique pour le Traitement Automatique des Langues (RECITAL 2024), Jul 2024, Toulouse, France. pp.605-616. ⟨hal-04623043⟩

Relations

8 Consultations
0 Téléchargements

Partager

Gmail Mastodon Facebook X LinkedIn More