<?xml version="1.0" encoding="utf-8"?>
<TEI xmlns="http://www.tei-c.org/ns/1.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:hal="http://hal.archives-ouvertes.fr/" xmlns:gml="http://www.opengis.net/gml/3.3/" xmlns:gmlce="http://www.opengis.net/gml/3.3/ce" version="1.1" xsi:schemaLocation="http://www.tei-c.org/ns/1.0 http://api.archives-ouvertes.fr/documents/aofr-sword.xsd">
  <teiHeader>
    <fileDesc>
      <titleStmt>
        <title>HAL TEI export of hal-03701516</title>
      </titleStmt>
      <publicationStmt>
        <distributor>CCSD</distributor>
        <availability status="restricted">
          <licence target="https://creativecommons.org/publicdomain/zero/1.0/">CC0 1.0 - Universal</licence>
        </availability>
        <date when="2026-05-03T15:53:33+02:00"/>
      </publicationStmt>
      <sourceDesc>
        <p part="N">HAL API Platform</p>
      </sourceDesc>
    </fileDesc>
  </teiHeader>
  <text>
    <body>
      <listBibl>
        <biblFull>
          <titleStmt>
            <title xml:lang="fr">Fine-tuning de modèles de langues pour la veille épidémiologique multilingue avec peu de ressources</title>
            <author role="aut">
              <persName>
                <forename type="first">Stephen</forename>
                <surname>Mutuvi</surname>
              </persName>
              <email type="md5">dff512837cf46cb96a0d3961fff4ebfe</email>
              <email type="domain">gmail.com</email>
              <idno type="idhal" notation="string">stephen-mutuvi</idno>
              <idno type="idhal" notation="numeric">1144152</idno>
              <idno type="halauthorid" notation="string">1943007-1144152</idno>
              <idno type="ORCID">https://orcid.org/0000-0002-3067-9806</idno>
              <affiliation ref="#struct-40831"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Emanuela</forename>
                <surname>Boros</surname>
              </persName>
              <email type="md5">b73bc5a853d52584dd07c4f2b86efd4b</email>
              <email type="domain">gmail.com</email>
              <idno type="idhal" notation="string">emanuelaboros</idno>
              <idno type="idhal" notation="numeric">747990</idno>
              <idno type="halauthorid" notation="string">54003-747990</idno>
              <idno type="ORCID">https://orcid.org/0000-0001-6299-9452</idno>
              <idno type="IDREF">https://www.idref.fr/232445699</idno>
              <affiliation ref="#struct-40831"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Antoine</forename>
                <surname>Doucet</surname>
              </persName>
              <email type="md5">6825953aaa4e1a7f1891ff65fb5b42f5</email>
              <email type="domain">univ-lr.fr</email>
              <idno type="idhal" notation="string">antoine-doucet</idno>
              <idno type="idhal" notation="numeric">7183</idno>
              <idno type="halauthorid" notation="string">23275-7183</idno>
              <idno type="ORCID">https://orcid.org/0000-0001-6160-3356</idno>
              <idno type="IDREF">https://www.idref.fr/10312604X</idno>
              <affiliation ref="#struct-40831"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Adam</forename>
                <surname>Jatowt</surname>
              </persName>
              <email type="md5">498a3aedfe8e20dd74f2b74ba5e693ea</email>
              <email type="domain">gmail.com</email>
              <idno type="idhal" notation="numeric">1083067</idno>
              <idno type="halauthorid" notation="string">863442-1083067</idno>
              <affiliation ref="#struct-490478"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Gaël</forename>
                <surname>Lejeune</surname>
              </persName>
              <email type="md5">740064454f6f51a7f88b35f2e820639c</email>
              <email type="domain">paris-sorbonne.fr</email>
              <idno type="idhal" notation="string">gael-lejeune</idno>
              <idno type="idhal" notation="numeric">734695</idno>
              <idno type="halauthorid" notation="string">37811-734695</idno>
              <idno type="ORCID">https://orcid.org/0000-0002-4795-2362</idno>
              <idno type="IDREF">https://www.idref.fr/182283054</idno>
              <idno type="RESEARCHERID">http://www.researcherid.com/rid/DDF-6252-2022</idno>
              <idno type="VIAF">https://viaf.org/viaf/313310259</idno>
              <idno type="RESEARCHERID">http://www.researcherid.com/rid/http://www.researcherid.com/rid/DDF-6252-2022</idno>
              <affiliation ref="#struct-542233"/>
              <affiliation ref="#struct-551720"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Moses</forename>
                <surname>Odeo</surname>
              </persName>
              <email type="md5">4f10875aa51bad9bc2f0f43e00832950</email>
              <email type="domain">mmu.ac.ke</email>
              <idno type="idhal" notation="numeric">1086946</idno>
              <idno type="halauthorid" notation="string">1943008-1086946</idno>
              <affiliation ref="#struct-1099492"/>
            </author>
            <editor role="depositor">
              <persName>
                <forename>Yannick</forename>
                <surname>Parmentier</surname>
              </persName>
              <email type="md5">352bb4f190f0b06536180c4015640614</email>
              <email type="domain">univ-lorraine.fr</email>
            </editor>
          </titleStmt>
          <editionStmt>
            <edition n="v1" type="current">
              <date type="whenSubmitted">2022-06-24 16:42:36</date>
              <date type="whenModified">2025-01-06 16:32:02</date>
              <date type="whenReleased">2022-06-28 15:14:39</date>
              <date type="whenProduced">2022-06-27</date>
              <date type="whenEndEmbargoed">2022-06-24</date>
              <ref type="file" target="https://hal.science/hal-03701516v1/document">
                <date notBefore="2022-06-24"/>
              </ref>
              <ref type="file" subtype="greenPublisher" n="1" target="https://hal.science/hal-03701516v1/file/8981.pdf" id="file-3704266-3238557">
                <date notBefore="2022-06-24"/>
              </ref>
            </edition>
            <respStmt>
              <resp>contributor</resp>
              <name key="102408">
                <persName>
                  <forename>Yannick</forename>
                  <surname>Parmentier</surname>
                </persName>
                <email type="md5">352bb4f190f0b06536180c4015640614</email>
                <email type="domain">univ-lorraine.fr</email>
              </name>
            </respStmt>
          </editionStmt>
          <publicationStmt>
            <distributor>CCSD</distributor>
            <idno type="halId">hal-03701516</idno>
            <idno type="halUri">https://hal.science/hal-03701516</idno>
            <idno type="halBibtex">mutuvi:hal-03701516</idno>
            <idno type="halRefHtml">&lt;i&gt;Traitement Automatique des Langues Naturelles (TALN 2022)&lt;/i&gt;, Jun 2022, Avignon, France. pp.345-354</idno>
            <idno type="halRef">Traitement Automatique des Langues Naturelles (TALN 2022), Jun 2022, Avignon, France. pp.345-354</idno>
            <availability status="restricted">
              <licence target="https://about.hal.science/hal-authorisation-v1/">HAL Authorization<ref corresp="#file-3704266-3238557"/></licence>
            </availability>
          </publicationStmt>
          <seriesStmt>
            <idno type="stamp" n="UNIV-ROCHELLE">Université de La Rochelle</idno>
            <idno type="stamp" n="SORBONNE-UNIVERSITE">Sorbonne Université</idno>
            <idno type="stamp" n="SORBONNE-UNIV" corresp="SORBONNE-UNIVERSITE">Sorbonne Université 01/01/2018</idno>
            <idno type="stamp" n="STIH" corresp="SORBONNE-UNIVERSITE">Sens, Texte, Informatique, Histoire</idno>
            <idno type="stamp" n="SU-LETTRES" corresp="SORBONNE-UNIVERSITE">Faculté des Lettres de Sorbonne Université</idno>
            <idno type="stamp" n="TALN-RECITAL">Conférences TALN RECITAL</idno>
            <idno type="stamp" n="SU-TI">Sorbonne Université - Texte Intégral</idno>
            <idno type="stamp" n="ALLIANCE-SU"> Alliance Sorbonne Université</idno>
            <idno type="stamp" n="TALN-RECITAL2022" corresp="TALN-RECITAL">Actes de la conférence Traitement Automatique des Langues Naturelles (TALN, 29e édition) et Rencontre des Étudiants Chercheurs en Informatique pour le Traitement Automatique des Langues</idno>
            <idno type="stamp" n="SUPRA_SHS3467">SUPRA SHS3467</idno>
          </seriesStmt>
          <notesStmt>
            <note type="audience" n="3">National</note>
            <note type="invited" n="0">No</note>
            <note type="popular" n="0">No</note>
            <note type="peer" n="1">Yes</note>
            <note type="proceedings" n="1">Yes</note>
          </notesStmt>
          <sourceDesc>
            <biblStruct>
              <analytic>
                <title xml:lang="fr">Fine-tuning de modèles de langues pour la veille épidémiologique multilingue avec peu de ressources</title>
                <author role="aut">
                  <persName>
                    <forename type="first">Stephen</forename>
                    <surname>Mutuvi</surname>
                  </persName>
                  <email type="md5">dff512837cf46cb96a0d3961fff4ebfe</email>
                  <email type="domain">gmail.com</email>
                  <idno type="idhal" notation="string">stephen-mutuvi</idno>
                  <idno type="idhal" notation="numeric">1144152</idno>
                  <idno type="halauthorid" notation="string">1943007-1144152</idno>
                  <idno type="ORCID">https://orcid.org/0000-0002-3067-9806</idno>
                  <affiliation ref="#struct-40831"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Emanuela</forename>
                    <surname>Boros</surname>
                  </persName>
                  <email type="md5">b73bc5a853d52584dd07c4f2b86efd4b</email>
                  <email type="domain">gmail.com</email>
                  <idno type="idhal" notation="string">emanuelaboros</idno>
                  <idno type="idhal" notation="numeric">747990</idno>
                  <idno type="halauthorid" notation="string">54003-747990</idno>
                  <idno type="ORCID">https://orcid.org/0000-0001-6299-9452</idno>
                  <idno type="IDREF">https://www.idref.fr/232445699</idno>
                  <affiliation ref="#struct-40831"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Antoine</forename>
                    <surname>Doucet</surname>
                  </persName>
                  <email type="md5">6825953aaa4e1a7f1891ff65fb5b42f5</email>
                  <email type="domain">univ-lr.fr</email>
                  <idno type="idhal" notation="string">antoine-doucet</idno>
                  <idno type="idhal" notation="numeric">7183</idno>
                  <idno type="halauthorid" notation="string">23275-7183</idno>
                  <idno type="ORCID">https://orcid.org/0000-0001-6160-3356</idno>
                  <idno type="IDREF">https://www.idref.fr/10312604X</idno>
                  <affiliation ref="#struct-40831"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Adam</forename>
                    <surname>Jatowt</surname>
                  </persName>
                  <email type="md5">498a3aedfe8e20dd74f2b74ba5e693ea</email>
                  <email type="domain">gmail.com</email>
                  <idno type="idhal" notation="numeric">1083067</idno>
                  <idno type="halauthorid" notation="string">863442-1083067</idno>
                  <affiliation ref="#struct-490478"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Gaël</forename>
                    <surname>Lejeune</surname>
                  </persName>
                  <email type="md5">740064454f6f51a7f88b35f2e820639c</email>
                  <email type="domain">paris-sorbonne.fr</email>
                  <idno type="idhal" notation="string">gael-lejeune</idno>
                  <idno type="idhal" notation="numeric">734695</idno>
                  <idno type="halauthorid" notation="string">37811-734695</idno>
                  <idno type="ORCID">https://orcid.org/0000-0002-4795-2362</idno>
                  <idno type="IDREF">https://www.idref.fr/182283054</idno>
                  <idno type="RESEARCHERID">http://www.researcherid.com/rid/DDF-6252-2022</idno>
                  <idno type="VIAF">https://viaf.org/viaf/313310259</idno>
                  <idno type="RESEARCHERID">http://www.researcherid.com/rid/http://www.researcherid.com/rid/DDF-6252-2022</idno>
                  <affiliation ref="#struct-542233"/>
                  <affiliation ref="#struct-551720"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Moses</forename>
                    <surname>Odeo</surname>
                  </persName>
                  <email type="md5">4f10875aa51bad9bc2f0f43e00832950</email>
                  <email type="domain">mmu.ac.ke</email>
                  <idno type="idhal" notation="numeric">1086946</idno>
                  <idno type="halauthorid" notation="string">1943008-1086946</idno>
                  <affiliation ref="#struct-1099492"/>
                </author>
              </analytic>
              <monogr>
                <title level="m">Actes de la 29e Conférence sur le Traitement Automatique des Langues Naturelles. Volume 1 : conférence principale</title>
                <meeting>
                  <title>Traitement Automatique des Langues Naturelles (TALN 2022)</title>
                  <date type="start">2022-06-27</date>
                  <date type="end">2022-07-01</date>
                  <settlement>Avignon</settlement>
                  <country key="FR">France</country>
                </meeting>
                <editor>Estève, Yannick</editor>
                <editor>Jiménez, Tania</editor>
                <editor>Parcollet, Titouan</editor>
                <editor>Zanon Boito, Marcely</editor>
                <imprint>
                  <publisher>ATALA</publisher>
                  <biblScope unit="pp">345-354</biblScope>
                  <date type="datePub">2022</date>
                </imprint>
              </monogr>
            </biblStruct>
          </sourceDesc>
          <profileDesc>
            <langUsage>
              <language ident="fr">French</language>
            </langUsage>
            <textClass>
              <keywords scheme="author">
                <term xml:lang="fr">extraction d’événements épidémiologiques</term>
                <term xml:lang="fr">langues peu dotées</term>
                <term xml:lang="fr">modèles de langues.</term>
              </keywords>
              <classCode scheme="halDomain" n="info.info-cl">Computer Science [cs]/Computation and Language [cs.CL]</classCode>
              <classCode scheme="halTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halOldTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halTreeTypology" n="COMM">Conference papers</classCode>
            </textClass>
            <abstract xml:lang="fr">
              <p>Les modèles de langues pré-entraînés connaissent un très grand succès en TAL, en particulier dans les situations où l’on dispose de suffisamment de données d’entraînement. Cependant, il reste difficile d’obtenir des résultats similaires dans des environnements multilingues avec peu de données d’entraînement, en particulier dans des domaines spécialisés tels que la surveillance des épidémies. Dans cet article, nous explorons plusieurs hypothèses concernant les facteurs qui pourraient avoir une influence sur les performances d’un système d’extraction d’événements épidémiologiques dans un scénario multilingue à faibles ressources : le type de modèle pré-entraîné, la qualité du tokenizer ainsi que les caractéristiques des entités à extraire. Nous proposons une analyse exhaustive de ces facteurs et observons une corrélation importante, quoique variable ; entre ces caractéristiques et les performances observées sur la base d’une tâche de veille épidémiologique multilingue à faibles ressources. Nous proposons aussi d’adapter les modèles de langues à cette tâche en étendant le vocabulaire du tokenizer pré-entraîné avec les entités continues, qui sont des entités qui ont été divisées en plusieurs sous-mots. Suite à cette adaptation, nous observons une amélioration notable des performances pour la plupart des modèles et des langues évalués.</p>
            </abstract>
          </profileDesc>
        </biblFull>
      </listBibl>
    </body>
    <back>
      <listOrg type="structures">
        <org type="laboratory" xml:id="struct-40831" status="VALID">
          <idno type="IdRef">183449045</idno>
          <idno type="RNSR">199613735B</idno>
          <idno type="ROR">https://ror.org/03r7r0k94</idno>
          <orgName>Laboratoire Informatique, Image et Interaction - EA 2118</orgName>
          <orgName type="acronym">L3I</orgName>
          <desc>
            <address>
              <addrLine>Bâtiment Pascal Avenue Michel Crépeau F-17042 La Rochelle Cedex 1</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://l3i.univ-larochelle.fr/</ref>
          </desc>
          <listRelation>
            <relation name="EA2118" active="#struct-300311" type="direct"/>
          </listRelation>
        </org>
        <org type="institution" xml:id="struct-490478" status="VALID">
          <idno type="ROR">https://ror.org/054pv6659</idno>
          <orgName>Leopold Franzens Universität Innsbruck - University of Innsbruck</orgName>
          <desc>
            <address>
              <addrLine>Innrain 52, A-6020 Innsbruck</addrLine>
              <country key="AT"/>
            </address>
            <ref type="url">https://www.uibk.ac.at/</ref>
          </desc>
        </org>
        <org type="laboratory" xml:id="struct-542233" status="VALID">
          <idno type="IdRef">149171617</idno>
          <idno type="RNSR">201019031X</idno>
          <orgName>Sens, Texte, Informatique, Histoire</orgName>
          <orgName type="acronym">STIH</orgName>
          <desc>
            <address>
              <addrLine>1 rue Victor Cousin 75230 Paris cedex</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.stih.paris-sorbonne.fr/</ref>
          </desc>
          <listRelation>
            <relation name="EA4509" active="#struct-413221" type="direct"/>
          </listRelation>
        </org>
        <org type="researchteam" xml:id="struct-551720" status="VALID">
          <orgName>Équipe Linguistique computationnelle</orgName>
          <orgName type="acronym">STIH-LC</orgName>
          <desc>
            <address>
              <country key="FR"/>
            </address>
          </desc>
          <listRelation>
            <relation active="#struct-542233" type="direct"/>
            <relation name="EA4509" active="#struct-413221" type="indirect"/>
          </listRelation>
        </org>
        <org type="institution" xml:id="struct-1099492" status="INCOMING">
          <orgName>Multimedia University</orgName>
          <desc>
            <address>
              <country key="KE"/>
            </address>
          </desc>
        </org>
        <org type="institution" xml:id="struct-300311" status="VALID">
          <idno type="IdRef">035375043</idno>
          <idno type="ISNI">0000 0001 2169 7335</idno>
          <idno type="ROR">https://ror.org/04mv1z119</idno>
          <orgName>La Rochelle Université</orgName>
          <orgName type="acronym">ULR</orgName>
          <desc>
            <address>
              <addrLine>Technoforum - 23 avenue Albert Einstein - BP 33060 - 17031 La Rochelle - France</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.univ-larochelle.fr</ref>
          </desc>
        </org>
        <org type="regroupinstitution" xml:id="struct-413221" status="VALID">
          <idno type="IdRef">221333754</idno>
          <idno type="ROR">https://ror.org/02en5vm52</idno>
          <orgName>Sorbonne Université</orgName>
          <orgName type="acronym">SU</orgName>
          <date type="start">2018-01-01</date>
          <desc>
            <address>
              <addrLine>21 rue de l’École de médecine - 75006 Paris</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.sorbonne-universite.fr/</ref>
          </desc>
        </org>
      </listOrg>
    </back>
  </text>
</TEI>