Il y a des questions lancinantes, surtout depuis que les scientifiques sont évalués au nombre d'articles qu'ils publient et que certains (peu, heureusement) publient à toute vitesse, presque n'importe quoi, ce qui s'ajoute aux mauvais articles du passé, dus à des scientifiques médiocres (il y en a de bons, heureusement) : comment reconnaître un bon article, et que faire d'un mauvais article ?
Il faut dire que la communauté scientifique est consciente du problème, et la question est explicitement posée dans des réunions scientifiques ou pédagogiques. Oui, le système d'évaluation par les pairs commence à être débordé, notamment depuis que des pays comme la Chine ont ouvert leurs frontières, submergeant les revues, les comités de lecture, les rapporteurs potentiels ; et c'est sans doute la brèche dans laquelle se sont engouffrées les revues "open", qui publient contre finances des textes que les auteurs ne parviennent pas à publier dans de bonnes revues. En corollaire, ce fléau pèse sur aussi les scientifiques qui font leurs recherches bibliographiques et doivent être particulièrement vigilant, quant à l'origine des données qu'ils conservent et utilisent.
Comment reconnaître un mauvais article ? Il y a des signes qui ne trompent pas. Par exemple :
- dès le début de l'article, des affirmations sans référence,
- ou encore des informations vagues (depuis longtemps, un certain nombre...),
- des adjectifs ou des adverbes au lieu d'utiles quantifications
- "essentiel" ou "important" : fuyons ces arguments d'autorité...
- des informations accessoires, qui ne seront pas utilisées dans la discussion scientifique, ou qui sont de la simple culture générale : ce n'est pas le lieu !
- des nombres avec des chiffres qui ne sont manifestement pas significatifs : cela, c'est plus grave, parce que si nos auteurs font des comparaisons, elles seront vraisemblablement nulles et non avenues, alors même qu'elles sembleront "établies". Et le plus grave, c 'est que l'article, s'il a été publié, a donc été mal édité, par des éditeurs et des rapporteurs également médiocres, pour ne pas dire plus
- puis, dans les "Matériels et Méthodes", il y a tout une série de fautes possibles, qui vont de l'imprécision dans les descriptions
- à la non justification des méthodes mises en oeuvre
- ou de méthodes qui n'ont pas été validées
- et, dans les résultats, la confusion entre les résultats et leur interprétation
- la publication de données sans évaluation d'une incertitude
- et des conclusions qui vont au delà de ce qui a été établi
Je m'arrête ici, parce que la liste est longue, et mériterait une collaboration de la communauté, afin d'aider les jeunes scientifiques à éviter ces erreurs.
Passons donc à la seconde question, qui est de savoir quoi faire des informations publiées dans un article qui a été reconnu mauvais ?
Par exemple, si les chiffres significatifs ne sont pas bien gérés, alors les comparaisons qui auront été faites d'après ces chiffres n'ont pas lieu d'être. Dans un tel cas, la marche à suivre est donc simple : on peut rien retenir des interprétations. Mais on pourrait aussi imaginer de refaire les calculs, à partir des valeurs ramenées à leur affichage correct, et, d'ailleurs, rendre service à la communauté en publiant un erratum... qui nous vaudra de nous brouiller avec l'équipe qui a publié les résultats initiaux.
Cela suppose évidemment que les données soient justes, à défaut d'être correctement affichées ! Et là se pose la question des "Matériels et méthodes" : je milite pour que cette partie soit toujours avant les résultats, car pourquoi perdre son temps à considérer des résultats qui pourraient être nuls, en raison d'une mauvaise méthode ?
Finalement, je ne vois pas de règle générale à appliquer, pour répondre à cette seconde question, et je compte sur mes amis pour m'aider à en élaborer une.
Ce blog contient: - des réflexions scientifiques - des mécanismes, des phénomènes, à partir de la cuisine - des idées sur les "études" (ce qui est fautivement nommé "enseignement" - des idées "politiques" : pour une vie en collectivité plus rationnelle et plus harmonieuse ; des relents des Lumières ! Pour me joindre par email : herve.this@inrae.fr
Inscription à :
Publier les commentaires (Atom)
Aucun commentaire:
Enregistrer un commentaire
Un commentaire? N'hésitez pas!
Et si vous souhaitez une réponse, n'oubliez pas d'indiquer votre adresse de courriel !