LIS@DEFT'23 : les LLMs peuvent-ils répondre à des QCM ? (a) oui; (b) non; (c) je ne sais pas. - Archive ouverte HAL Access content directly
Conference Papers Year : 2023

LIS@DEFT'23 : les LLMs peuvent-ils répondre à des QCM ? (a) oui; (b) non; (c) je ne sais pas.

Abstract

Cet article présente un ensemble d'expériences sur la tâche de réponse à des questions à choix multiple de DEFT 2023. Des grands modèles de langage sont amorcés avec les questions afin de collecter les réponses générées. Les résultats montrent que les modèles ouverts sans affinage obtiennent des performances similaires à celles d'un système supervisé fondé sur BERT, et que l'affinage sur les données de la tâche apporte des améliorations.
Fichier principal
Vignette du fichier
479307.pdf (220.31 Ko) Télécharger le fichier
Origin : Publisher files allowed on an open archive

Dates and versions

hal-04131578 , version 1 (20-06-2023)

Identifiers

  • HAL Id : hal-04131578 , version 1

Cite

Benoit Favre. LIS@DEFT'23 : les LLMs peuvent-ils répondre à des QCM ? (a) oui; (b) non; (c) je ne sais pas.. 18e Conférence en Recherche d'Information et Applications -- 16e Rencontres Jeunes Chercheurs en RI -- 30e Conférence sur le Traitement Automatique des Langues Naturelles -- 25e Rencontre des Étudiants Chercheurs en Informatique pour le Traitement Automatique des Langues, 2023, Paris, France. pp.46-56. ⟨hal-04131578⟩
123 View
51 Download

Share

Gmail Facebook X LinkedIn More