Évaluation et pilotage de la recherche

Trouver un équilibre entre évaluation par les pairs et utilisation d’indicateurs quantitatifs : un des enjeux de la CoARA

Suite à de fortes inquiétudes de la communauté des bibliométriciens, des membres de la CoARA (Coalition for Advancing Research Assessment) ont décidé de réexpliquer dans un billet publié sur le blog LSE Impact la position de la CoARA vis à vis de l’usage des indicateurs bibliométriques quantitatifs.

Ils mettent notamment en avant le besoin de contrebalancer les dégâts très bien documentés de l’utilisation non raisonnée des indicateurs bibliométriques quantitatifs : effets négatifs sur la diversité, l’équité et l’inclusion, sur l’adoption de pratiques de recherche ouverte, sur la santé mentale des scientifiques, sur l’intégrité de la recherche, etc.

Ils rappellent que l’engagement numéro 2 de la CoARA place la révision par les pairs au centre du processus d’évaluation mais qu’il indique également qu’elle doit être soutenue par l’utilisation responsable d’indicateurs. Tout est donc dans l’équilibre entre ces deux méthodes.

La place donnée aux indicateurs bibliométriques doit par ailleurs être différente selon les niveaux d’évaluation : il est préférable d’utiliser principalement la révision par les pairs pour les évaluations individuelles, alors que les indicateurs bibliométriques peuvent être utilisés plus largement pour des évaluations d’institutions ou de pays. Toutefois, il ne faut absolument pas les utiliser comme critère de promotion à quelque niveau que ce soit. Ce schéma, issu de la matrice norvégienne d’évaluation des carrières, résume bien cette idée.

Les auteurs concluent qu’il est absolument essentiel que tout le monde se mette autour de la table afin de faire évoluer l’évaluation dans la même direction, pour la rendre plus responsable. La CoARA a d’ailleurs mis en place plusieurs groupes de travail en lien avec cette question, dont notamment le groupe Métriques et indicateurs responsables et le groupe Réforme de l’évaluation des carrières.

Lire l’article complet sur le blog LSE Impact : Luciana Balboa, Elizabeth Gadd, Eva Mendez, Janne Pölönen, Karen Stroobants, Erzsebet Toth Cithra. The role of scientometrics in the pursuit of responsible research assessment, 4 septembre 2024.