Règles d'Edition: fouille et application au nettoyage de données - Archive ouverte HAL Accéder directement au contenu
Communication Dans Un Congrès Année : 2012

Règles d'Edition: fouille et application au nettoyage de données

Thierno Diallo
  • Fonction : Auteur
Jean-Marc Petit
Sylvie Servigne

Résumé

Les problèmes liés à la qualité des données sont de plus en plus critiques. Certaines classes de contraintes comme les dépendances fonctionnelles conditionnelles (DFCs) ont été introduites pour le nettoyage de données. Les méthodes de nettoyage basées sur les CFDs sont efficaces pour capturer les erreurs mais sont limitées pour les corriger. L'essor récent de la gestion de données de référence (Master Data Management, MDM) a permis l'introduction d'une nouvelle classe de règles d'édition qui permet d'identifier exactement les attributs en erreur et de proposer les valeurs correctes correspondantes issues des données de référence. Cependant, concevoir ces règles manuellement est un processus coûteux. Dans cet article nous traitons d'une part le problème de la fouille de ces règles et d'autre part leur utilisation pour le nettoyage de données. Nous proposons dans un premier temps une nouvelle sémantique des règles d'édition, puis des méthodes efficaces de fouille basées sur les DFCs et les correspondances entre attributs. Finalement, dans un cadre d'application de nettoyage de données, nous proposons des heuristiques basées sur ces règles avant de mener des expériences sur des données réelles pour montrer la faisabilité et le passage à l'échelle de nos propositions.
Fichier non déposé

Dates et versions

hal-01353089 , version 1 (10-08-2016)

Identifiants

  • HAL Id : hal-01353089 , version 1

Citer

Thierno Diallo, Jean-Marc Petit, Sylvie Servigne. Règles d'Edition: fouille et application au nettoyage de données. 28ème journées Base de Données Avancées. BDA 2012, Oct 2012, Clermont-Ferrand, France. pp.1-20. ⟨hal-01353089⟩
105 Consultations
0 Téléchargements

Partager

Gmail Facebook X LinkedIn More