Derby LLM : Évaluation comparative des approches RAG et fine-tuning - Archive ouverte HAL
Communication Dans Un Congrès Année : 2024

Derby LLM : Évaluation comparative des approches RAG et fine-tuning

Christophe Bouvard
  • Fonction : Auteur
Mathieu Ciancone
  • Fonction : Auteur
Antoine Gourru
Marion Schaeffer
  • Fonction : Auteur
  • PersonId : 1150992

Résumé

Les grands modèles de langage ont récemment été largement exploités dans les agents conversationnels, où l’injection de connaissances pour des domaines d’applications spécifiques est un enjeu crucial. Nous comparons deux approches : le fine-tuning et la génération augmentée de récupération. Nous évaluons ces techniques pour deux cas d’usage différents avec des métriques automatiques et la préférence humaine. Bien que la pertinence des réponses soit proche, la fidélité et la préférence humaine avantagent la génération augmentée de récupération.
Fichier principal
Vignette du fichier
PFIA-2024.pdf (364.91 Ko) Télécharger le fichier
Origine Accord explicite pour ce dépôt

Dates et versions

hal-04638460 , version 1 (10-07-2024)

Licence

Identifiants

  • HAL Id : hal-04638460 , version 1

Citer

Christophe Bouvard, Mathieu Ciancone, Antoine Gourru, Marion Schaeffer. Derby LLM : Évaluation comparative des approches RAG et fine-tuning. 10 ème Conférence Nationale sur les Applications Pratiques de l’Intelligence Artificielle, AFIA-Association Française pour l'Intelligence Artificielle, Jul 2024, La Rochelle, France. pp.38-47. ⟨hal-04638460⟩
271 Consultations
147 Téléchargements

Partager

More