Autre Publication Scientifique Année : 2025

La “recette’’ LLM et modèles de fondation

Résumé

Comment les grands modèles de langue (LLM) sont-ils conçus, entraînés, et comment ces méthodes peuvent-elles inspirer d'autres domaines ? Cette présentation explore trois axes: * Pourquoi l'architecture Transformer ? * Les étapes d'entraînement des LLM * Reproduire la recette dans d'autres domaines : modèles de fondation

Mots clés

Fichier principal
Vignette du fichier
presentation-23juin.pdf (1.33 Mo) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Licence

Dates et versions

hal-05153758 , version 1 (09-07-2025)

Licence

Identifiants

  • HAL Id : hal-05153758 , version 1

Citer

Théo Gigant, Alban Perli, Yann Fraigneau, Lucas Ondel Yang. La “recette’’ LLM et modèles de fondation. 2025. ⟨hal-05153758⟩
242 Consultations
148 Téléchargements

Partager

  • More