<?xml version="1.0" encoding="utf-8"?>
<TEI xmlns="http://www.tei-c.org/ns/1.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:hal="http://hal.archives-ouvertes.fr/" xmlns:gml="http://www.opengis.net/gml/3.3/" xmlns:gmlce="http://www.opengis.net/gml/3.3/ce" version="1.1" xsi:schemaLocation="http://www.tei-c.org/ns/1.0 http://api.archives-ouvertes.fr/documents/aofr-sword.xsd">
  <teiHeader>
    <fileDesc>
      <titleStmt>
        <title>HAL TEI export of hal-01296333</title>
      </titleStmt>
      <publicationStmt>
        <distributor>CCSD</distributor>
        <availability status="restricted">
          <licence target="https://creativecommons.org/publicdomain/zero/1.0/">CC0 1.0 - Universal</licence>
        </availability>
        <date when="2026-05-24T15:56:23+02:00"/>
      </publicationStmt>
      <sourceDesc>
        <p part="N">HAL API Platform</p>
      </sourceDesc>
    </fileDesc>
  </teiHeader>
  <text>
    <body>
      <listBibl>
        <biblFull>
          <titleStmt>
            <title xml:lang="fr">Utiliser des protocoles d'interaction et de la mémoire pour l'apprentissage par renforcement d'actes de communication</title>
            <author role="aut">
              <persName>
                <forename type="first">Shirley</forename>
                <surname>Hoët</surname>
              </persName>
              <email type="md5">87cf4ba5dbee7ab9cb84e0ffcc79182e</email>
              <email type="domain">lip6.fr</email>
              <idno type="idhal" notation="numeric">967950</idno>
              <idno type="halauthorid" notation="string">922358-967950</idno>
              <affiliation ref="#struct-405335"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Nicolas</forename>
                <surname>Sabouret</surname>
              </persName>
              <email type="md5">b57be9e21de1373b3ba7e0084cc705a1</email>
              <email type="domain">limsi.fr</email>
              <idno type="idhal" notation="string">nicolassabouret</idno>
              <idno type="idhal" notation="numeric">20855</idno>
              <idno type="halauthorid" notation="string">912-20855</idno>
              <idno type="ORCID">https://orcid.org/0000-0002-7458-6732</idno>
              <idno type="IDREF">https://www.idref.fr/070373736</idno>
              <idno type="ISNI">http://isni.org/isni/0000000140159233</idno>
              <idno type="VIAF">https://viaf.org/viaf/211878885</idno>
              <affiliation ref="#struct-405335"/>
            </author>
            <editor role="depositor">
              <persName>
                <forename>Lip6</forename>
                <surname>Publications</surname>
              </persName>
              <email type="md5">48f930374cf1d03f2eafeaae16bb5814</email>
              <email type="domain">lip6.fr</email>
            </editor>
          </titleStmt>
          <editionStmt>
            <edition n="v1" type="current">
              <date type="whenSubmitted">2016-03-31 17:52:04</date>
              <date type="whenModified">2023-04-11 15:16:28</date>
              <date type="whenReleased">2016-03-31 17:52:04</date>
              <date type="whenProduced">2009-06-03</date>
            </edition>
            <respStmt>
              <resp>contributor</resp>
              <name key="196566">
                <persName>
                  <forename>Lip6</forename>
                  <surname>Publications</surname>
                </persName>
                <email type="md5">48f930374cf1d03f2eafeaae16bb5814</email>
                <email type="domain">lip6.fr</email>
              </name>
            </respStmt>
          </editionStmt>
          <publicationStmt>
            <distributor>CCSD</distributor>
            <idno type="halId">hal-01296333</idno>
            <idno type="halUri">https://hal.science/hal-01296333</idno>
            <idno type="halBibtex">hoet:hal-01296333</idno>
            <idno type="halRefHtml">&lt;i&gt;MFI’09 - Cinquièmes Journées Francophones MODÈLES FORMELS de l’INTERACTION&lt;/i&gt;, Jun 2009, Lannion, France. pp.159-170</idno>
            <idno type="halRef">MFI’09 - Cinquièmes Journées Francophones MODÈLES FORMELS de l’INTERACTION, Jun 2009, Lannion, France. pp.159-170</idno>
            <availability status="restricted"/>
          </publicationStmt>
          <seriesStmt>
            <idno type="stamp" n="UPMC" corresp="SORBONNE-UNIVERSITE">Université Pierre et Marie Curie</idno>
            <idno type="stamp" n="CNRS">CNRS - Centre national de la recherche scientifique</idno>
            <idno type="stamp" n="LIP6" corresp="SORBONNE-UNIVERSITE">Laboratoire d'Informatique de Paris 6</idno>
            <idno type="stamp" n="UPMC_POLE_1" corresp="UPMC">UPMC Pôle 1</idno>
            <idno type="stamp" n="SORBONNE-UNIVERSITE">Sorbonne Université</idno>
            <idno type="stamp" n="SU-SCIENCES" corresp="SORBONNE-UNIVERSITE">Faculté des Sciences de Sorbonne Université</idno>
            <idno type="stamp" n="ALLIANCE-SU"> Alliance Sorbonne Université</idno>
          </seriesStmt>
          <notesStmt>
            <note type="audience" n="3">National</note>
            <note type="invited" n="0">No</note>
            <note type="popular" n="0">No</note>
            <note type="peer" n="1">Yes</note>
            <note type="proceedings" n="1">Yes</note>
          </notesStmt>
          <sourceDesc>
            <biblStruct>
              <analytic>
                <title xml:lang="fr">Utiliser des protocoles d'interaction et de la mémoire pour l'apprentissage par renforcement d'actes de communication</title>
                <author role="aut">
                  <persName>
                    <forename type="first">Shirley</forename>
                    <surname>Hoët</surname>
                  </persName>
                  <email type="md5">87cf4ba5dbee7ab9cb84e0ffcc79182e</email>
                  <email type="domain">lip6.fr</email>
                  <idno type="idhal" notation="numeric">967950</idno>
                  <idno type="halauthorid" notation="string">922358-967950</idno>
                  <affiliation ref="#struct-405335"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Nicolas</forename>
                    <surname>Sabouret</surname>
                  </persName>
                  <email type="md5">b57be9e21de1373b3ba7e0084cc705a1</email>
                  <email type="domain">limsi.fr</email>
                  <idno type="idhal" notation="string">nicolassabouret</idno>
                  <idno type="idhal" notation="numeric">20855</idno>
                  <idno type="halauthorid" notation="string">912-20855</idno>
                  <idno type="ORCID">https://orcid.org/0000-0002-7458-6732</idno>
                  <idno type="IDREF">https://www.idref.fr/070373736</idno>
                  <idno type="ISNI">http://isni.org/isni/0000000140159233</idno>
                  <idno type="VIAF">https://viaf.org/viaf/211878885</idno>
                  <affiliation ref="#struct-405335"/>
                </author>
              </analytic>
              <monogr>
                <title level="m">Modèles formels de l'interaction</title>
                <meeting>
                  <title>MFI’09 - Cinquièmes Journées Francophones MODÈLES FORMELS de l’INTERACTION</title>
                  <date type="start">2009-06-03</date>
                  <date type="end">2009-06-05</date>
                  <settlement>Lannion</settlement>
                  <country key="FR">France</country>
                </meeting>
                <imprint>
                  <biblScope unit="pp">159-170</biblScope>
                </imprint>
              </monogr>
            </biblStruct>
          </sourceDesc>
          <profileDesc>
            <langUsage>
              <language ident="fr">French</language>
            </langUsage>
            <textClass>
              <classCode scheme="halDomain" n="info">Computer Science [cs]</classCode>
              <classCode scheme="halTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halOldTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halTreeTypology" n="COMM">Conference papers</classCode>
            </textClass>
            <abstract xml:lang="fr">
              <p>Dans ce papier, nous nous intéressons à l’apprentissage par renforcement pour la communication entre agents dans les SMA. L’étude de la littérature nous a permis de mettre en évidence trois principaux problèmes. Tout d’abord il est nécessaire pour l’agent de construire les actes de communication qu’il utilise pour communiquer avec les autres agents. Ensuite il nous faut adapter les actes de communication afin de les modéliser en tant qu’actions pour leur appliquer des techniques d’apprentissage par renforcement. Enfin nous devons résoudre les problèmes liés à la non markovité des systèmes multi-agents afin de pouvoir utiliser les algorithmes usuels d’apprentissage par renforcement utilisé dans le cadre mono-agent. Nous présentons un algorithme d’apprentissage par renforcement qui permet de traiter ces trois problèmes de manière entièrement distribuée. Nous nous appuyons pour cela sur l’utilisation d’agents introspectifs capables de raisonner sur leurs actions et sur leurs états. Puis nous démontrons que nous pouvons assimiler un acte de communication à une action en nous fondant sur la théorie des actes de langage et les travaux sur les PDSMs. Enfin nous montrons comment l’utilisation d’actes de communication peut résoudre le problème de non markovité en étant toutefois complétée par l’utilisation de la mémoire de l’agent.</p>
            </abstract>
          </profileDesc>
        </biblFull>
      </listBibl>
    </body>
    <back>
      <listOrg type="structures">
        <org type="researchteam" xml:id="struct-405335" status="OLD">
          <orgName>Systèmes Multi-Agents</orgName>
          <orgName type="acronym">SMA</orgName>
          <date type="start">2004-01-01</date>
          <date type="end">2017-12-31</date>
          <desc>
            <address>
              <country key="FR"/>
            </address>
          </desc>
          <listRelation>
            <relation active="#struct-233" type="direct"/>
            <relation active="#struct-93591" type="indirect"/>
            <relation name="UMR7606" active="#struct-441569" type="indirect"/>
          </listRelation>
        </org>
        <org type="laboratory" xml:id="struct-233" status="OLD">
          <idno type="RNSR">199712651U</idno>
          <idno type="ROR">https://ror.org/05krcen59</idno>
          <orgName>Laboratoire d'Informatique de Paris 6</orgName>
          <orgName type="acronym">LIP6</orgName>
          <date type="start">1997-01-01</date>
          <date type="end">2017-12-31</date>
          <desc>
            <address>
              <addrLine>4 Place JUSSIEU 75252 PARIS CEDEX 05</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.lip6.fr/</ref>
          </desc>
          <listRelation>
            <relation active="#struct-93591" type="direct"/>
            <relation name="UMR7606" active="#struct-441569" type="direct"/>
          </listRelation>
        </org>
        <org type="institution" xml:id="struct-93591" status="OLD">
          <idno type="ROR">https://ror.org/02en5vm52</idno>
          <orgName>Université Pierre et Marie Curie - Paris 6</orgName>
          <orgName type="acronym">UPMC</orgName>
          <date type="end">2017-12-31</date>
          <desc>
            <address>
              <addrLine>4 place Jussieu - 75005 Paris</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.upmc.fr/</ref>
          </desc>
        </org>
        <org type="regroupinstitution" xml:id="struct-441569" status="VALID">
          <idno type="IdRef">02636817X</idno>
          <idno type="ISNI">0000000122597504</idno>
          <idno type="ROR">https://ror.org/02feahw73</idno>
          <orgName>Centre National de la Recherche Scientifique</orgName>
          <orgName type="acronym">CNRS</orgName>
          <date type="start">1939-10-19</date>
          <desc>
            <address>
              <country key="FR"/>
            </address>
            <ref type="url">https://www.cnrs.fr/</ref>
          </desc>
        </org>
      </listOrg>
    </back>
  </text>
</TEI>