Magazines spécialisés avec une forte proportion d'articles suspects, caractérisés par des startups d'intégrité scientifique

Magazines spécialisés avec une forte proportion d'articles suspects, caractérisés par des startups d'intégrité scientifique

Quels éditeurs et magazines scientifiques sont les plus affectés par des recherches frauduleuses ou discutables - et lesquelles ont été les moins faites pour nettoyer leurs portefeuilles? Une start-up technologique fondée pour aider les éditeurs à identifier des articles potentiellement problématiques a des réponses et a partagé ses premières découvertes avec la nature.

Le site Web de l'instruction des connaissances Argos, qui a été lancé en septembre par Scitility, une entreprise technologique basée à Sparks, Nevada, publie des revues de risques pour des articles basés sur les données de publication des auteurs et si l'article a de fortes références à des recherches déjà retirées. Un article classé comme «très risqué» peut avoir plusieurs auteurs dont les autres études ont été retirées en raison d'une faute. Un nombre élevé de points ne prouve pas qu'un article est de faible qualité, mais indique qu'une revue pourrait être utile.

Argos fait partie d'un nombre croissant d'instruments pour le contrôle d'intégrité dans la recherche qui recherche des signaux d'avertissement dans les articles. Il s'agit notamment du "Nous voulions développer une technologie qui peut reconnaître les modèles cachés et créer une transparence pour l'industrie", explique Erik de Boer, co-fondatrice de Scitility, qui est basée à Roosendaal, aux Pays-Bas.

L'analyse d'Argos montre que l'éditeur Hindawi - une filiale maintenant fermée de l'éditeur de Londres Wiley - a le nombre le plus élevé et la proportion la plus élevée d'articles déjà retirés (voir "Publisher in Risk"). Ce n'est pas surprenant, car Wiley a , en réponse à des préoccupations qui ont été exprimées par les éditeurs et les examinateurs; Cela correspond à plus de 4% du portefeuille global de la marque au cours de la dernière décennie. L'un de ses magazines, la médecine complémentaire et alternative fondée sur des preuves, a retiré 741 articles, qui représente plus de 7% de sa production.

Springer Nature a rapporté avoir introduit deux outils en juin qui ont aidé à reconnaître des centaines de faux manuscrits depuis lors; Plusieurs éditeurs ont augmenté leur collaboration dans un Cadre de la piste de données communaut , qui propose des logiciels qui peuvent caractériser les articles suspects. Jisuk Kang, responsable de l'édition chez MDPI à Bâle, en Suisse, a déclaré que des produits tels que Argos fournissent de larges références à des problèmes potentiels, mais note que l'éditeur ne peut pas vérifier l'exactitude ou la fiabilité des chiffres sur le site Web. Il ajoute que les plus grands éditeurs et magazines auraient inévitablement un nombre plus élevé d'articles à haut risque, de sorte que la proportion de production est une meilleure figure clé.

Les timbres de publication avec les proportions les plus élevées d'articles à haut risque dans leurs portefeuilles sont, selon les revues sur les données d'Argos (0,82%), Sparard (0,77%) et Ivyspring (0,67%). Impact Journals rapporte que, bien que ses magazines aient eu des problèmes, ils ont maintenant amélioré leur intégrité. L'éditeur déclare que dans le magazine Oncotarget au cours des deux dernières années " 0% irregity/> À l'introduction d'instruments d'examen d'image tels que Image Twin, qui n'ont été disponibles que ces dernières années.

Avis de risques de magazines

Argos propose également des chiffres pour les magazines individuels. Il n'est pas surprenant que les titres de Hindawi se démarquent à la fois en ce qui concerne le nombre et la proportion de l'œuvre retirée, tandis que d'autres magazines ont de nombreux travaux identifiés par Argos (voir "Magazines en risque"). Selon le volume, le Mega Magazine Scientific Reports de Springer Nature avec 450 articles à haut risque et 231 retraits, ce qui représente ensemble environ 0,3% de sa production. Le 16 octobre, un groupe d'examinateurs a écrit un lettre ouverte à Springer Nature , dans laquelle les préoccupations concernant les articles problématiques ont été exprimées dans le magazine.

Dans la réponse, Chris Graf, responsable de l'intégrité de la recherche chez Springer Nature, dit que le magazine examine tout problème mentionné. Il ajoute que la proportion de contenu qui a été mise en évidence est relativement faible par rapport à leur taille.

Magazines avec des écarts particulièrement importants entre le nombre de travaux retirés et les articles potentiellement suspects incluent le magazine de durabilité de MDPI (20 retraits et 312 articles à haut risque; 0,4% de la production) et les matériaux aujourd'hui (28 retraits et 308 articles à haut risque; 0,8% de la production). Elseviers Biomedicine & Pharmacothérapie possède la proportion la plus élevée d'articles à haut risque - 1,61% de sa production.

"Le volume de matériaux frauduleux augmente considérablement, soutenu par des manipulations systématiques telles que les" papeermils ", qui produisent un contenu frauduleux à des fins commerciales, et un contenu généré par l'IA", explique un porte-parole pour Elsevier et ajoute qu'en réponse "nous augmentons nos investissements dans la supervision humaine, les connaissances et la technologie spécialisées.

Open Data

Les développeurs d'Argos soulignent que le site Web est basé sur des données ouvertes collectées par d'autres. Les sources incluent le site Web de Retraction Watch, qui mène une base de données avec des articles retirés - gratuitement via un accord avec l'organisation sans but lucratif CrossRef - qui contient les raisons d'une retraite, afin que les outils qui vérifient les données de l'auteur puissent se concentrer sur les retraites. L'analyse est également basée sur enregistre des articules fortement référés sur le lien de texte fortement référé sur le lien de texte " travail , qui a été assemblé par Guillaume Cabanac, un informaticien de l'Université de Toulouse en France.

Bien qu'Argos suit également les analystes, le se concentrer sur d'autres outils de test d'intégrité qui caractérisent également des articles basés sur du contenu suspect, tels que des similitudes textuelles étroites avec de faux travaux ou des "phrases dérangées", un terme caractérisé par Cabanac lorsque les auteurs Faites un étrange choix de mots pour éviter que les systèmes d'identification du plagiat soient activés.

"Les deux approches ont leur justification, mais l'identification des chercheurs de chercheurs qui participent à l'inconduite pourrait être plus précieuse", explique James Butcher, ancien éditeur de magazines de la nature et Lancet, qui dirige maintenant la société consultative Journalology à Liverpool, au Royaume-Uni. "En effet, les outils d'écriture pris en charge de l'IA pourraient être utilisés pour soutenir les fraudeurs pour éviter des informations textuelles évidentes", ajoute-t-il. Butcher ajoute que de nombreux grands éditeurs ont développé ou acquis leurs propres outils d'intégrité pour vérifier divers signaux d'avertissement dans les manuscrits.

L'un des problèmes les plus délicats pour les outils d'intégrité qui sont principalement basés sur les retraites des auteurs est la distinction correcte entre les auteurs avec un nom similaire - un problème que Argos pourrait déformer les nombres. "Le problème de la discrimination des auteurs est le plus gros problème de l'industrie", explique Adam Day, fondateur de Clear Skies.

de Boer, qui travaillait auparavant chez Springer Nature, dit que tout le monde peut créer un compte pour utiliser Argos gratuitement, mais prévoit de vendre de la scitilité à une version de l'outil à de grands éditeurs et institutions qui pourraient l'intégrer directement dans leurs flux de travail de dépistage de leur manuscrit.

Butcher fait l'éloge de la transparence de l'équipe Argos. "Il doit y avoir plus de visibilité pour les magazines et les éditeurs qui prennent des abréviations et ne font pas preuve de soin adéquat dans l'œuvre publiée et monétisée", dit-il.