La transparence des algorithmes est un sujet de préoccupation pour les utilisateurs et les autorités. Parmi les différents aspects de cette notion de transparence, est-il possible d'étu-dier dans quelle mesure les moteurs de recherche sur le web sont honnêtes par rapport à leur politique de personnalisation déclarée, et dans quelle mesure est-il possible d'expliquer leur comportement, ne serait-ce que succinctement ? Cet article décrit un cadre expérimental pour étudier ces aspects, et des résultats obtenus sur l'étude du principal moteur de recherche sur le Web. L'idée suivie est d'étudier les différences dans les résultats du moteur, afin de mesu-rer leur honnêteté et leur explicabilité. Nous avons formalisé le protocole expérimental et les mesures d'évaluations. Nous trouvons, pour plusieurs utilisateurs et plusieurs requêtes choisies avec soin, qu'il y a de larges variations dans les résultats. Nous les quantifions et nous les ordonnons l'importance relative des paramètres étudiés. Nous montrons que ces informations seraient utiles pour améliorer la transparence des moteurs de recherche sur le Web.