Application du contrôle pour garantir la performance des systèmes Big Data - Archive ouverte HAL
Communication Dans Un Congrès Année : 2014

Application du contrôle pour garantir la performance des systèmes Big Data

Résumé

Nous sommes à l'aube d'une énorme explosion de données et la quantité à traiter par les entreprises est de plus en plus grande. Pour faire face à ce chalenge, Google a développé MapReduce, un modèle de programmation parallèle qui est en train de devenir l'outil de facto pour l'analyse des systèmes Big Data. Bien que dans une certaine mesure son utilisation est déjà très répandue dans l'industrie, garantir les performances d'un système aussi complexe pose de grands problèmes et sa gestion nécessite un haut niveau d'expertise. Cet article répond à ces défis en proposant le premier système autonome qui garantit des contraintes de temps de réponse pour une charge de travail MapReduce simultanée. Nous développons le premier modèle dynamique d'une grappe MapRe- duce. De plus, un contrôle en boucle fermée est conçu et implémenté pour garantir un temps de réponse donné. Un contrôle d'anticipation de type ""feedforward"" est également rajouté pour amé- liorer la réponse du système en présence de perturbations, en l'occurrence, la variation du nombre de clients. L'approche est validée en ligne sur une grappe MapReduce avec 40 nœuds utilisant une charge de travail intensive de type Business Intelligence. Nos expériences montrent que le contrôle ainsi conçu peut garantir les contraintes de temps de réponse.
Fichier principal
Vignette du fichier
compas2014.pdf (178.85 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

hal-00982404 , version 1 (24-04-2014)

Identifiants

  • HAL Id : hal-00982404 , version 1

Citer

Mihaly Berekmeri, Damián Serrano, Sara Bouchenak, Nicolas Marchand, Bogdan Robu. Application du contrôle pour garantir la performance des systèmes Big Data. ComPAS 2014 - Conférence francophone d'informatique en parallélisme, architecture et système, Apr 2014, Neuchâtel, Suisse. pp.n/c. ⟨hal-00982404⟩
488 Consultations
786 Téléchargements

Partager

More