Arabic topic identification based on empirical studies of topic models - Archive ouverte HAL
Pré-Publication, Document De Travail Année : 2017

Arabic topic identification based on empirical studies of topic models

Identification thématique Arabe basée sur des études empiriques des topic models

Résumé

This paper focuses on the topic identification for the Arabic language based on topic models. We study the Latent Dirichlet Allocation (LDA) as an unsupervised method for the Arabic topic identification. Thus, a deep study of LDA is carried out at two levels: Stemming process and the choice of LDA hyper-parameters. For the first level, we study the effect of different Arabic stemmers on LDA. For the second level, we focus on LDA hyper-parameters α and β and their impact on the topic identification. This study shows that LDA is an efficient method for Arabic topic identification especially with the right choice of hyper-parameters. Another important result is the high impact of the stemming algorithm on topic identification.
Cet article met l'accent sur l'identification thématique pour la langue arabe basée sur les topic models. Nous étudions l'Allocation de Dirichlet Latente (LDA) comme une méthode non supervisée pour l'identification thématique. Ainsi, une étude approfondie de LDA a été effectuée à deux niveaux: le processus de lemmatisation et le choix des hyper-paramètres. Pour le premier niveau, nous étudions l'effet des différents lemmatiseurs sur LDA. Pour le deuxième niveau, nous nous focalisons sur les hyper-paramètres α et β de LDA et leurs impacts sur l'identification. Cette étude montre que LDA est une méthode efficace pour l'identification thématique Arabe surtout avec le bon choix des hyper-paramètres. Un autre résultat important est l'impact élevé de l'algorithme de lemmatisation sur l'identification thématique.
Fichier principal
Vignette du fichier
Article ARIMA.pdf (800.49 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-01444574 , version 1 (24-01-2017)
hal-01444574 , version 2 (28-07-2017)

Identifiants

  • HAL Id : hal-01444574 , version 1

Citer

Marwa Naili, Anja Habacha Chaibi, Henda Ben Ghézala. Arabic topic identification based on empirical studies of topic models. 2017. ⟨hal-01444574v1⟩
287 Consultations
1885 Téléchargements

Partager

More