An anatomy of the academic ranking of world universities (Shanghai ranking) - Archive ouverte HAL Accéder directement au contenu
Article Dans Une Revue SN Social Sciences Année : 2022

An anatomy of the academic ranking of world universities (Shanghai ranking)

Les classements internationaux des universités de recherche sont très largement utilisés et tout aussi fortement critiqués. Parmi les nombreux classements internationaux, le classement de Shanghai est considéré comme l’un des plus influents. Bien que les données primaires de ce classement soient généralement accessibles et que sa méthodologie soit publiée dans ses grandes lignes, il ne s'ensuit pas que ses résultats soient prévisibles ou faciles à calculer. En pratique, les classements annuels de Shanghai reposent sur des données et des règles complexes, variables et non entièrement révélées. De ce fait, les évolutions et les changements dans le classement sont parfois interprétés à tort comme des propriétés intrinsèques des institutions ou des systèmes universitaires à la portée de choix stratégiques universitaires ou nationaux. Cet article décortique les règles qui relient les données institutionnelles brutes aux scores publiés dans le classement, en utilisant l'édition 2020 comme référence. En passant en revue les changements du classement ARWU entre 2004 et 2016, nous montrons comment des changements exogènes ou méthodologiques ont souvent pu causer des modifications de classement. Les parties prenantes peuvent être induites en erreur si elles pensent que de telles modifications sont intrinsèques à la performance des institutions. Nous espérons, par cette étude, informer et mettre en garde les médias, les gouvernements et les institutions sur les mérites et les risques d'utiliser le classement de Shanghai pour évaluer la performance institutionnelle relative et son évolution.

D. Docampo
D. Egret
L. Cram

Résumé

International academic rankings of research universities are widely applied and heavily criticised. Amongst the many international rankings, the Shanghai ranking has been particularly influential. Although this ranking's primary data are generally accessible and its methods are published in outline format, it does not follow that its outputs are predictable or straightforward. In practice, the annual and time series Shanghai rankings rely on data and rules that are complex, variable, and not fully revealed. Patterns and changes in the ranking may be misinterpreted as intrinsic properties of institutions or systems when they are actually beyond the influence of any university or nation. This article dissects the rules that connect raw institutional data to the published ranking, using the 2020 edition as a reference. Analysing an ARWU review of ranking changes over 2004-2016, we show how exogenous or methodological changes have often driven changes in ranking. Stakeholders can be misled if they believe that changes are intrinsic to institutions' performance. We hope to inform and warn the media, governments, and institutions about the merits and risks of using the Shanghai ranking to evaluate relative institutional performance and its evolution.
Les classements internationaux des universités de recherche sont très largement utilisés et tout aussi fortement critiqués. Parmi les nombreux classements internationaux, le classement de Shanghai est considéré comme l’un des plus influents. Bien que les données primaires de ce classement soient généralement accessibles et que sa méthodologie soit publiée dans ses grandes lignes, il ne s'ensuit pas que ses résultats soient prévisibles ou faciles à calculer. En pratique, les classements annuels de Shanghai reposent sur des données et des règles complexes, variables et non entièrement révélées. De ce fait, les évolutions et les changements dans le classement sont parfois interprétés à tort comme des propriétés intrinsèques des institutions ou des systèmes universitaires à la portée de choix stratégiques universitaires ou nationaux. Cet article décortique les règles qui relient les données institutionnelles brutes aux scores publiés dans le classement, en utilisant l'édition 2020 comme référence. En passant en revue les changements du classement ARWU entre 2004 et 2016, nous montrons comment des changements exogènes ou méthodologiques ont souvent pu causer des modifications de classement. Les parties prenantes peuvent être induites en erreur si elles pensent que de telles modifications sont intrinsèques à la performance des institutions. Nous espérons, par cette étude, informer et mettre en garde les médias, les gouvernements et les institutions sur les mérites et les risques d'utiliser le classement de Shanghai pour évaluer la performance institutionnelle relative et son évolution.
Fichier principal
Vignette du fichier
Docampo2022_Article_Anatomy-of-ARWU.pdf (1.01 Mo) Télécharger le fichier
Origine : Fichiers éditeurs autorisés sur une archive ouverte

Dates et versions

hal-03744350 , version 1 (02-08-2022)

Identifiants

Citer

D. Docampo, D. Egret, L. Cram. An anatomy of the academic ranking of world universities (Shanghai ranking). SN Social Sciences, 2022, 2 (8), pp.146. ⟨10.1007/s43545-022-00443-3⟩. ⟨hal-03744350⟩
23 Consultations
52 Téléchargements

Altmetric

Partager

Gmail Facebook X LinkedIn More