An anatomy of the academic ranking of world universities (Shanghai ranking)

Les classements internationaux des universités de recherche sont très largement utilisés et tout aussi fortement critiqués. Parmi les nombreux classements internationaux, le classement de Shanghai est considéré comme l’un des plus influents. Bien que les données primaires de ce classement soient généralement accessibles et que sa méthodologie soit publiée dans ses grandes lignes, il ne s'ensuit pas que ses résultats soient prévisibles ou faciles à calculer. En pratique, les classements annuels de Shanghai reposent sur des données et des règles complexes, variables et non entièrement révélées. De ce fait, les évolutions et les changements dans le classement sont parfois interprétés à tort comme des propriétés intrinsèques des institutions ou des systèmes universitaires à la portée de choix stratégiques universitaires ou nationaux. Cet article décortique les règles qui relient les données institutionnelles brutes aux scores publiés dans le classement, en utilisant l'édition 2020 comme référence. En passant en revue les changements du classement ARWU entre 2004 et 2016, nous montrons comment des changements exogènes ou méthodologiques ont souvent pu causer des modifications de classement. Les parties prenantes peuvent être induites en erreur si elles pensent que de telles modifications sont intrinsèques à la performance des institutions. Nous espérons, par cette étude, informer et mettre en garde les médias, les gouvernements et les institutions sur les mérites et les risques d'utiliser le classement de Shanghai pour évaluer la performance institutionnelle relative et son évolution.