Les badges Science Ouverte sont des indicateurs visuels présents sur certaines publications scientifiques qui permettent aux lecteurs de savoir rapidement et simplement si les auteurs ont adopté des pratiques de science ouverte. Ces badges ont été adoptés par certaines revues, qui offrent ainsi à leurs auteurs la possibilité de demander l’attribution d’un ou plusieurs badges. L’objectif est d’encourager le pré-enregistrement du protocole de recherche ainsi que le partage des données, des codes et des autres documents permettant de reproduire les résultats de recherche présentés dans les publications.
L’attribution de badges a été introduite en 2009 par la revue Biostatistics, dans le cadre de sa politique de reproductibilité. Cette pratique a ensuite été popularisée en 2014 par l’initiative du Center for Open Science (COS), qui propose une méthode standardisée d’attribution de badges, pouvant être adoptée par toute revue ou organisation qui le souhaite.
Le COS propose plusieurs catégories de badges :
- Open Data : badge attribué lorsque les données nécessaires à la reproduction des résultats présentés sont accessibles publiquement dans un entrepôt de données, avec un identifiant pérenne et sous licence ouverte, et si les données sont suffisamment documentées.
- Open Data (Protected Access) : badge attribué lorsque certaines données sensibles sont en accès restreint dans un entrepôt de données, selon une procédure documentée.
- Open Materials : badge attribué lorsque lorsque les éléments de la méthodologie de recherche nécessaires à la reproduction de la démarche et de l’analyse décrites sont mis à disposition du public dans un entrepôt de données. Les infrastructures, équipements, matériaux biologiques ou autres éléments qui ne peuvent pas être partagés sous forme numérique doivent également faire l’objet d’une description suffisamment détaillée.
- Open Analytic Code : badge attribué lorsque le code analytique nécessaire à la reproduction des analyses publiées est accessible publiquement dans un entrepôt de données, avec un identifiant pérenne et sous licence ouverte, et si le code est suffisamment documenté.
- Preregistered : badge attribué lorsqu’un protocole de recherche a été préenregistré dans un système d’enregistrement (par exemple, ClinicalTrials.gov ou Open Science Framework) avant le début de l’étude. Le protocole réalisé doit correspondre au protocole préenregistré, et tous les résultats doivent être rendus publics.
- Preregistered + Analysis Plan : badge attribué lorsqu’un protocole de recherche a été préenregistré, accompagné d’un plan d’analyse détaillé et que les résultats sont présentés conformément à ce plan.
Les revues disposent de deux moyens pour attribuer des badges :
- Divulgation : les auteurs fournissent une déclaration publique attestant que les critères d’attribution du badge sont remplis. La revue évalue cette déclaration mais ne procède qu’à une évaluation sommaire des produits de recherche (vérification qu’ils sont bien accessibles sur un entrepôt ou sur un système de pré-enregistrement, et qu’ils sont bien en rapport avec l’article).
- Évaluation par les pairs : une évaluation indépendante des produits de recherche est menée, afin de vérifier que les critères du badge sont respectés. Cette évaluation peut être faite par les reviewers de l’article, par des évaluateurs supplémentaires, par un membre de la revue ou par une organisation indépendante.
Certains éditeurs ont créé leurs propres badges. PLOS, par exemple, affiche un badge « Accessible data » à la seule condition qu’un lien vers un entrepôt soit inclus dans le Data Availability Statement de l’article. Seules les données (et les codes) déposées dans une liste restreinte d’entrepôts sont acceptées.
Chez l’éditeur ACM (Association for Computing Machinery), certaines revues et conférences évaluent les « artefacts » associés aux travaux de recherche (scripts, logiciels, données, etc) et peuvent leur attribuer trois types de badges :
- Artefacts évalués : badge attribué si les artefacts sont complets (tous les éléments pertinents doivent être inclus), documentés et exécutables (pour les scripts et logiciels). Ces artefacts ne sont pas nécessairement accessibles au public mais doivent être mis à disposition des évaluateurs.
- Artefacts disponibles : badge attribué si tous les artefacts en lien avec l’article sont accessibles au public dans un entrepôt, avec un identifiant unique.
- Résultats validés : badge attribué si les principaux résultats de l’article ont été reproduits (en utilisant les données fournies) ou répliqués (sans utiliser les données fournies) par une personne ou une équipe autre que les auteurs.
Ces badges sont indépendants : 1, 2 ou 3 badges peuvent être attribués à un même article.
