Excellent ouvrage (mai 2017) de Chris Chambers, professeur de neurosciences cognitives à Cardiff. Le titre : The 7 deadly sins of psychology. A manifesto for reforming the culture of science practice. Je reprend chaque vendredi un des 7 péchés, et voir ensuite le rachat proposé dans le dernier chapitre.
Le dernier chapitre commence par se demander si ces dérives décrites en psychologie ne s’appliquent pas aux autres sciences, et par supposer que la diffusion des responsabilités dans le système scientifique explique que les réformes seront lentes…. Tout ceci est bien expliqué avec des exemples. Ensuite, les solutions proposées :
Solving the sins of bias and hidden flexibility : La description en détail (20 pages), avec des exemples, du modèle Registered Reports est convaincante. C’est un vaccin contre les biais, mais qui va bouger dans notre système ? Data don’t tell stories, scientists tell stories ! Le modèle Registered Reports est récent, créé en 2012/2013 en psychologie ; il arrive en biologie en 2017.
Solving the sin of unreliability : il faut répliquer les études, répéter les expériences déjà publiées, voire créer un index de réplicabilité.
Solving the sin of data hoarding : ne plus cacher ses données et faire la promotion des recommandations TOP déjà largement adoptées par des revues. TOP pour Transparency and Openess Promotion que nous avons présenté il y a 2 ans.
Solving the sin of corruptibility : Random data audits (j’imagine des institutions françaises auditer au hasard des données publiées d’une équipe de recherche ) ; Profiling of researchers : nous avons vraiment besoin de mieux connaître les profils des fraudeurs..; ; Criminalization of academic fraud : un tabou pas prêt de changer ! Je vous rappelle qu’il y a plus de risques à voler 2 pommes chez un commerçant qu’un tableur excel de données d’un collègue ; Protection and support of whistle-blowers : chez nous, ceux qui dénoncent sont marginalisés et peuvent être mis au placard, alors que les institutions devraient ouvrir les dossiers ! Replication encore….
Solving the sin of internment : ouvrir, preprints, changer les habitudes de cacher nos données, mais les partager.
Solving the sin of bean counting : remplacer les auteurs par la liste des contributeurs en détaillant le travail de chaque auteur, et la question majeure… Comment évaluons nous la recherche ?
Le livre se termine par des étapes concrètes d’une réforme des sciences en psychologie (mais toutes les disciplines sont concernées) pour les chercheurs juniors et seniors, pour les rédacteurs de revues, les financeurs, les sociétés savantes, les universités, pour les journalistes et citoyens.
Du boulot en perspective !
Voici les 7 péchés :
- The sin of bias……Les biais… la convenance sociale (16 juin)
- The sin of hidden flexibility La flexibilité cachée : p-harking et p-HACKing (23 juin)
- The sin of unreliability Manque de fiabilité
- The sin of data hoarding Accumulation de données… je pourrais arrêter de travailler et publier car j’ai beaucoup de données
- The sin of corruption Corruption… no comment !
- The sin of internement La fermeture, c’est le refus de l’ouverture des données, des publications, ..
- The sin of bean counting Comptage de haricots : facteur d’impact, astrologie, auteurs,…
- The redemption Le rachat !…. TOP (Transparency Openess Promotion) guidelines et Registered Reports
Un commentaire
Many thanks Hervé for these reviews of my book. Alas, my French is nowhere near good enough to be able to read them without a translation aid, but it’s been great to follow them each week!
So the big question is: what happens next? And, in particular, what can we do in France to strengthen the transparency and reproducibility of psychology and other life sciences? Are there any changes we can make in institutional or government policies to increase the requirements on researchers to share data and digital study materials, while also providing them with the training and resources to do so? Are there incentives we can build into French academia, and perhaps graduate training, for researchers to publish Registered Reports? The decisions we make now will shape the incentive structures for the next generation of scientists and will hopefully go a long way to repairing them.
The future, as they say, is an open road.
Merci beaucoup!