Que faire d'un mauvais article scientifique ?

Il y a des questions lancinantes, surtout depuis que les scientifiques sont évalués au nombre d'articles qu'ils publient et que certains  (peu, heureusement) publient à toute vitesse, presque n'importe quoi, ce qui s'ajoute aux mauvais articles du passé, dus à des scientifiques médiocres (il y en a de bons, heureusement) : comment reconnaître un bon article, et que faire d'un mauvais article ?

Il faut dire que la communauté scientifique est consciente du problème, et la question est explicitement posée dans des réunions scientifiques ou pédagogiques. Oui,  le système d'évaluation par les pairs commence à être débordé, notamment depuis que des pays comme la Chine ont ouvert leurs frontières, submergeant les revues, les comités de lecture, les rapporteurs potentiels ;  et  c'est sans doute la brèche dans laquelle se sont engouffrées les revues "open", qui publient contre finances des textes que les auteurs ne parviennent pas à publier dans de bonnes revues. En corollaire, ce fléau pèse sur aussi les scientifiques qui font leurs recherches bibliographiques et doivent être particulièrement vigilant, quant à l'origine des données qu'ils conservent et utilisent.

Comment reconnaître un mauvais article ? Il y a des signes qui ne trompent pas. Par exemple :
- dès le début de l'article, des affirmations sans référence,
-  ou encore des informations vagues (depuis longtemps, un certain nombre...),
- des adjectifs ou des adverbes au lieu d'utiles quantifications
 - "essentiel" ou "important"   : fuyons ces arguments d'autorité...
- des informations accessoires, qui ne seront pas utilisées dans la discussion scientifique, ou qui sont de la simple culture générale : ce n'est pas le lieu !
- des nombres avec des chiffres qui ne sont manifestement pas significatifs : cela, c'est plus grave, parce que si nos auteurs font des comparaisons, elles seront vraisemblablement nulles et non avenues, alors même qu'elles sembleront "établies". Et le plus grave, c 'est que l'article, s'il a été publié, a donc été mal édité, par des éditeurs et des rapporteurs également médiocres, pour ne pas dire plus
- puis, dans les "Matériels et Méthodes", il y a tout une série de fautes possibles, qui vont de l'imprécision dans les descriptions
 - à la non justification des méthodes mises en oeuvre
- ou de méthodes qui n'ont pas été validées
- et, dans les résultats, la confusion entre les résultats et leur interprétation
- la publication de données sans évaluation d'une incertitude
- et des conclusions qui vont au delà de ce qui a été établi
Je m'arrête ici, parce que la liste est longue, et mériterait une collaboration de la communauté, afin d'aider les jeunes scientifiques à éviter ces erreurs.

Passons donc à la seconde question, qui est de savoir quoi faire des informations publiées dans un article qui a été reconnu mauvais ?
Par exemple, si les chiffres significatifs ne sont pas bien gérés, alors  les comparaisons qui auront été faites d'après ces chiffres n'ont pas lieu d'être. Dans un tel cas, la marche à suivre est donc simple :  on peut rien retenir des interprétations. Mais on pourrait aussi imaginer  de refaire les calculs, à partir des valeurs ramenées à leur affichage correct, et, d'ailleurs, rendre service à la communauté en publiant un erratum... qui nous vaudra de nous brouiller avec l'équipe qui a publié les résultats initiaux.
Cela suppose évidemment que les données soient justes, à défaut d'être correctement affichées ! Et là se pose la question des "Matériels et méthodes" : je milite pour que cette partie soit toujours avant les résultats, car pourquoi perdre son temps à considérer des résultats qui pourraient être nuls, en raison d'une mauvaise méthode ?

Finalement, je ne vois pas de règle générale à appliquer, pour répondre à cette seconde question, et je compte sur mes amis pour m'aider à en élaborer une.

La publication scientifique peut-elle être confiée à des éditeurs privés ? Non ! Et nous en avons la preuve.

Une fois de plus, une revue américaine publie un mauvais article et publie simultanément un éditorial qui dit que cet article est mauvais. Drôle de pratique, non ?

Pourquoi font-ils ainsi ? Sachant que le monde est plein de mauvaise foi, je ne vais pas chercher à le savoir, mais je pressens des explications du style "il ne faut pas censurer", et autres. Qui sont de mauvaises raisons, car la dite revue ne se prive pas de refuser des articles quand cela l'arrange.
Non, plus prosaïquement, je crois que la revue fait un coup de publicité, tout comme quand Nature avait publié l'article de Jacques Benveniste sur la prétendue et inexistante mémoire de l'eau, et que, simultanément, ils avaient envoyé une commission d'enquête en France, afin de prouver qu'il y avait eu fraude.
Tout cela n'est guère conséquent, tout cela est en réalité malhonnête. Et il est vrai que la revue dont je parle vient d'être citée dans la terre entière, par les pour et par les contre... le sujet concerné étant un sujet éminemment politique. Donc l'éditeur est content : son facteur d'impact va grimper, et il vendra plus sa salade. Mais, derrière tout cela, se pose la question de la science, qui est donc publiée encore souvent par des éditeurs privés. Au fond, pourquoi les institutions scientifiques confient-elles la publication de leurs résultats à de telles sociétés privées... qui s'engraissent d'ailleurs avec abonnements, vente d'articles... alors que leur apport est quasi inexistant ,
 Pour ceux qui ne le savent pas, je rappelle que les comités éditoriaux sont constitués de scientifiques bénévoles, tout comme le sont les rapporteurs. Au mieux, l'éditeur fait un vague travail de secrétariat.

Cela est intolérable, et c'est pour cette raison que nous avons créé les Notes Académiques de l'Académie d'agriculture de France : une revue publique, gratuite pour les auteurs comme pour les lecteurs, avec une évaluation propre, en double aveugle, et l'idée d'aider les auteurs à perfectionner leurs articles : ceux-ci ne sont jamais refusés, mais acceptés seulement quand la qualité scientifique "académique" est atteinte.
Et, pour une telle revue, l'idée de publier un article qu'on dézinguerait dans un éditorial est inimaginable, bien sûr !