J’ai traduit le titre d’un billet de Times Higher Education du 17 septembre 2026 car il a attiré mon attention. Serait-ce possible ? Est-ce que cela traduit cette course au Publish or Perish car l’IA accélère la production d’articles ?
Qu’a fait Nihar B Shah, un des rédacteurs en chef de la revue TMLR (Transactions on Machine Learning Research) ?
Il a décrit son intervention dans un billet du 16 septembre dans lequel il décrit sa méthode (25 heures de travail fait en août 2026). Il a pris 10 manuscrits considérés pour un ‘desk rejection‘, c’est à dire un refus immédiat sans relecture sur seule décision du rédacteur en chef. Il a contacté les auteurs pour discuter de leur article. Les auteurs-participants aux réunions comprenaient des étudiants de premier cycle, des étudiants en master, des doctorants, des professeurs et des chercheurs indépendants. Parmi les dix soumissions :
– Les auteurs d’un article ont retiré leur soumission.
– Les auteurs d’un article ont déclaré qu’ils étaient indisponibles en raison d’autres engagements.
– Les auteurs d’un article ont fixé une réunion mais ne se sont pas présentés.
– Les auteurs de trois articles n’ont pas pu répondre aux questions de base sur l’article.
– Les auteurs de trois articles ont répondu à des questions sur des idées de haut niveau dans l’article mais ont eu des difficultés lorsqu’on leur a posé d’autres questions sur des détails techniques.
– Les auteurs d’un article ont répondu à toutes les questions (bien qu’un défaut majeur ait été identifié dans le manuscrit).
Dans son billet N Shah nous informe que la proportion de manuscrits refusés à la soumission chez TMLR était d’environ 6 % en 2023, mais d’environ 53 % en 2026.
Notons que N Shah était un des auteurs du preprint analysé il y a quelques jours sur ce blog (des IA peuvent intervenir sur des données ouvertes).
Développer un questionnaire automatisé (IA) pour interroger les auteurs ayant soumis un manuscrit !
L’idée semble bonne, et sera-t-il possible de le faire ? N Shah explique ensuite que des développements sont en cours pour un questionnement automatique des auteurs sur leur manuscrit avant de le considérer pour un peer-review ! La description de greCAPTCHA a été mise en ligne sur arXiv (non relu pour l’instant). Ce serait un questionnaire rempli par les auteurs et envoyé aux relecteurs. gre vient de Graduate Record Examinations (GRE) ; CAPTCHA (Completely Automated Public Turing test to tell Computers and Humans Apart) est ce test automatique pour différencier un utilisateur humain d’un ordinateur.
TMLR est une revue ouverte, avec peer-review ouvert…. Je n’ai pas d’idées sur la qualité de cette reuve. Restons critiques. Transactions on Machine Learning Research (TMLR) is a new venue for dissemination of machine learning research that is intended to complement JMLR while supporting the unmet needs of a growing ML community. TMLR emphasizes technical correctness over subjective significance, to ensure that we facilitate scientific discourse on topics that may not yet be accepted in mainstream venues but may be important in the future. TMLR caters to the shorter format manuscripts that are usually submitted to conferences, providing fast turnarounds and double blind reviewing. Ci dessous une présentation de 24 minutes, convaincante mais est-ce réaliste de s’assurer de la reproductibilité des manuscrits soumis ?