Gazouilloire, a command-line tool for long term collections of tweets - Archive ouverte HAL Accéder directement au contenu
Logiciel Année : 2022

Gazouilloire, a command-line tool for long term collections of tweets

Gazouilloire

Benjamin Ooghe
Béatrice Mazoyer
Guillaume Plique

Résumé

Gazouilloire combines two methods to collect tweets from the Twitter API ("search" and "filter") in order to maximize the number of collected tweets, and automatically fills the gaps in the collection in case of connexion errors or reboots. It handles various config options such as: - collecting only during specific time periods - limiting the collection to some locations - resolving redirected urls - downloading only certain types of media contents (only photos and no videos, for example) - unfolding Twitter conversations
Collecter des données sur Twitter en utilisant son API est relativement aisé pour les développeurs en utilisant les nombreuses librairies prévues à cet effet. En revanche, maintenir de telles collectes sur le long terme en vue de constituer de gros corpus longitudinaux peut s'avérer plus complexe. Gazouilloire permet de simplifier la mise en place de telles collectes en assurant le maximum d'exhaustivité par l'emploi combiné de l'API de streaming et de l'API de recherche, ceci tout en offrant une variété de fonctionnalités complémentaires et d'options de configuration de la collecte, notamment : - collecter tous les tweets matchant un ensemble de mots clés, d'utilisateurs ou de morceaux d'urls - limiter la collecte de certains mots-clés à des périodes de temps définies - filtrer sur la langue employée dans les tweets (telle que détectée par les algorithmes de Twitter) - filtrer sur une zone géographique d'envoi des tweets - résoudre automatiquement les urls raccourcies partagées - remonter intégralement le fil d'une conversation lorsqu'un tweet collecté répond à un autre - remonter dans le temps au maximum sur 8 jours comme le permet l'API gratuite de Twitter - collecter systématiquement les contenus images et vidéos embarqués dans les tweets collectés

Mots clés

44 Consultations
58 Téléchargements

Altmetric

Partager

Gmail Facebook X LinkedIn More