Cet article présente un framework de représentation et de traitement de traces multi-sources hétérogènes provenant d’EIAH dédiés aux domaines impliquant des connaissances perceptivo-gestuelles. La capture de traces perceptuelles et gestuelles dans un EIAH requiert l’utilisation coordonnée de plusieurs périphériques. La difficulté adressée est celle de produire une représentation cohérente des connaissances perceptivo-gestuelles à partir des traces hétérogènes générées par ces périphériques et de faciliter la production d’analyses didactiques et de services tutoriels sur la base de ces connaissances. Notre cas d’étude est le simulateur TELEOS, un Système Tutoriel Intelligent (STI) dédié à la chirurgie orthopédique percutanée. Le traitement des traces recueillies sur les simulations réalisées par des chirurgiens du CHU de Grenoble a permis d’analyser et de démontrer l’influence des perceptions visuelles sur les erreurs liées aux actions et gestes exécutés au cours d’une simulation de vertébroplastie.