Annotation Linguistique pour l'Évaluation de la Simplification Automatique de Textes

Cardon, Rémi;Bibal, Adrien;Souza Wilkens, Rodrigo;Alfter, David;François, Thomas;et.al.
(2023) 18e Conférence en Recherche d’Information et Applications -- 16e Rencontres Jeunes Chercheurs en RI -- 30e Conférence sur le Tra — Location: Paris, France (6.June.2023)

Files

461795.pdf
  • Open Access
  • Adobe PDF
  • 399.41 KB
Download

Details

Authors
  • Cardon, Rémiorcid-logoUCLouvain
    Author
  • Bibal, Adrien
    Author
  • Souza Wilkens, Rodrigoorcid-logoUCLouvain
    Author
  • Alfter, DavidUCLouvain
    Author
  • Norré, MagaliUCLouvain
    Author
  • Müller, AdelineUCLouvain
    Author
  • Watrin, PatrickUCLouvain
    Author
  • François, Thomasorcid-logoUCLouvain
    Author
Show more
Abstract
L'évaluation des systèmes de simplification automatique de textes (SAT) est une tâche difficile, accomplie à l'aide de métriques automatiques et du jugement humain. Cependant, d'un point de vue linguistique, savoir ce qui est concrètement évalué n'est pas clair. Nous proposons d'annoter un des corpus de référence pour la SAT, ASSET, que nous utilisons pour éclaircir cette question. En plus de la contribution que constitue la ressource annotée, nous montrons comment elle peut être utilisée pour analyser le comportement de SARI, la mesure d'évaluation la plus populaire en SAT. Nous présentons nos conclusions comme une étape pour améliorer les protocoles d'évaluation en SAT à l'avenir.
Affiliations

Citations

  • APA
  • Chicago
  • FWB

Cardon, R., Bibal, A., Souza Wilkens, R., Alfter, D., Norré, M., Müller, A., Watrin, P., & François, T. (2023). Annotation Linguistique pour l’Évaluation de la Simplification Automatique de Textes. In Servan, Christophe et Vilnat, Anne (ed.), Actes de CORIA-TALN 2023. Actes de la 30e Conférence sur le Traitement Automatique des Langues Naturelles (TALN), volume 4 : art (ATALA, p. p. 35-48). ATALA. https://hdl.handle.net/2078.5/229837