Riviste specialistiche con un'alta percentuale di articoli sospetti, caratterizzati da startup di integrità scientifica

Una nuova analisi di Argos rivela quali editori scientifici stanno lottando maggiormente con studi discutibili e come puliscono le loro pubblicazioni.
(Symbolbild/natur.wiki)

Riviste specialistiche con un'alta percentuale di articoli sospetti, caratterizzati da startup di integrità scientifica

Quali editori e riviste scientifiche sono maggiormente colpiti da ricerche fraudolente o discutibili - e quali sono state il meno fatte per ripulire i loro portafogli? Una start-up tecnologica che è stata fondata per aiutare gli editori a identificare articoli potenzialmente problematici ha alcune risposte e ha condiviso i suoi primi risultati con la natura.

Il sito Web di Ingritrity di conoscenza Argos, che è stato avviato a settembre da Scity, una società tecnologica con sede a Sparks, in Nevada, pubblica revisioni dei rischi per articoli basati sui dati di pubblicazione degli autori e se l'articolo ha un forte riferimento alla ricerca già ritirata. Un articolo classificato come "altamente rischioso" può avere diversi autori i cui altri studi sono stati ritirati a causa della cattiva condotta. Un numero elevato di punti non dimostra che un articolo sia di bassa qualità, ma indica che una revisione potrebbe essere utile.

Argos fa parte di un numero crescente di strumenti per il controllo di integrità nella ricerca che cercano segnali di avvertimento negli articoli. Questi includono Argos aveva segnato oltre 40.000 articoli di riserve alti e 180.000 a livello medio all'inizio di ottobre. Ha anche indicato più di 50.000 articoli.

Valutazione del rischio di editori

L'analisi di Argos mostra che l'editore Hindawi - una filiale ora chiusa dell'editore di Londra Wiley - ha il numero più alto e la percentuale più alta di articoli già ritirati (vedi "editore in rischio"). Ciò non è sorprendente, perché Wiley ha , in risposta alle preoccupazioni espresse da redattori ed esaminatori; Ciò corrisponde a oltre il 4% del portafoglio complessivo del marchio negli ultimi dieci anni. Una delle sue riviste, la medicina complementare e alternativa basata sull'evidenza, ha ritirato 741 articoli, che costituiscono oltre il 7% della sua produzione.

Le valutazioni del rischio di Argos segnano più di un migliaio di articoli di Hindawi rimanenti, un altro 0,65%, come ancora "molto rischiosi". Ciò indica che, sebbene Wiley abbia fatto molto per ripulire il suo portafoglio, il problema potrebbe non essere stato ancora completamente risolto. L'editore ha informato la natura che ha salutato Argos e strumenti simili e sta lavorando per risolvere i problemi con Hindawi.

Altri editori sembrano dover fare molti più esami, poiché il numero di prelievi in ​​relazione al numero di articoli ad alto rischio contrassegnati da Argos è basso (gli editori potrebbero già esaminare alcuni di questi articoli e hanno deciso che non sono necessarie misure).

L'editore Elsevier con sede ad Amsterdam ha circa 5.000 prelievi, ma oltre 11.400 articoli ad alto rischio, secondo l'analisi di Argos per natura - sebbene tutti questi insieme costituiscano solo poco più dello 0,2% della produzione dell'editore nell'ultimo decennio. L'editore MDPI ha ritirato 311 articoli, ma ha oltre 3.000 articoli ad alto rischio - circa lo 0,24% della sua produzione. Springer Nature ha più di 6.000 prelievi e oltre 6.000 articoli ad alto rischio; Circa lo 0,3% della sua produzione. (Il team di Nature News è indipendente dal suo editore.)

Nelle risposte alle indagini, tutti gli editori, che sono caratterizzati come i più grandi fornitori di articoli ad alto rischio, vengono utilizzati per utilizzare l'integrità della ricerca, utilizzare le tecnologie per controllare gli articoli presentati e che i loro ritiri per ripulire i contenuti problematici.

Springer Nature ha riferito di aver introdotto due strumenti a giugno che da allora hanno contribuito a riconoscere centinaia di manoscritti falsi; Diversi editori hanno raccolto la loro collaborazione in un , che offre software in grado di caratterizzare articoli sospetti. Jisuk Kang, responsabile editoriale presso MDPI di Basilea, in Svizzera, afferma che prodotti come Argos forniscono ampi riferimenti a potenziali problemi, ma osserva che l'editore non può verificare l'accuratezza o l'affidabilità dei numeri sul sito Web. Aggiunge che i maggiori editori e riviste avrebbero inevitabilmente un numero più elevato di articoli ad alto rischio, in modo che la percentuale di produzione sia una figura chiave migliore.

I timbri editoriali con le più alte proporzioni di articoli ad alto rischio nei loro portafogli sono, secondo i riviste di impatto sui dati Argos (0,82%), SPOARD (0,77%) e IVYSPRING (0,67%). Impact Journals riferisce che, sebbene le sue riviste in passato abbiano avuto problemi, ora hanno migliorato la loro integrità. L'editore afferma che nella rivista Oncotarget negli ultimi due anni Recensioni dei rischi di riviste

Argos offre anche numeri per le singole riviste. Non sorprende che i titoli di Hindawi si distinguano sia per quanto riguarda il numero che la proporzione del lavoro ritirato, mentre altre riviste hanno molti dei lavori identificati da Argos (vedi "riviste in rischio"). Secondo il volume, i Mega Magazine Scientific Reports di Springer Nature con 450 articoli ad alto rischio e 231 prelievi, che insieme sono circa lo 0,3% della sua produzione. Il 16 ottobre, un gruppo di esaminatori ha scritto a Lettera aperta a Springer Nature , in cui sono state espresse preoccupazioni sugli articoli problematici.

Nella risposta, Chris Graf, responsabile dell'integrità della ricerca presso Springer Nature, afferma che la rivista esamina qualsiasi problema menzionato. Aggiunge che la percentuale di contenuti evidenziati è relativamente bassa rispetto alle loro dimensioni.

Le riviste

con discrepanze particolarmente grandi tra il numero di lavori ritirati e gli articoli potenzialmente sospetti includono la rivista di sostenibilità di MDPI (20 prelievi e 312 articoli ad alto rischio; 0,4% della produzione) e i procedimenti di materiali oggi (28 prelievi e 308 articoli ad alto risale; 0,8% di produzione). Elseviers Biomedicine & Pharmacoterapy ha la più alta percentuale di articoli ad alto rischio - 1,61% della sua produzione.

"Il volume di materiali fraudolenti aumenta in modo significativo, supportato da manipolazioni sistematiche come" Papermills ", che producono contenuti fraudolenti per scopi commerciali e contenuti generati dall'intelligenza artificiale", afferma un portavoce di Elsevier e aggiunge che in risposta "Aumentiamo i nostri investimenti nella supervisione umana, nella conoscenza specialistica e nella tecnologia.

Apri dati

Gli sviluppatori di Argos sottolineano che il sito Web si basa su dati aperti raccolti da altri. Le fonti includono il sito Web di Retraction Watch, che conduce un database con articoli ritirati - gratuitamente tramite un accordo con l'organizzazione non profit Crossref - che contiene i motivi di un ritiro, in modo che gli strumenti che controllano i dati dell'autore possano concentrarsi sui ritiri. L'analisi si basa anche su , che è stato messo insieme da Guillaume Cabanac, un informatico dell'Università di Tolosa in Francia.

Sebbene Argos segue anche gli analisti, il Concentrati su altri strumenti di test di integrità caratterizzano anche articoli basati su contenuti sospetti, come strette somiglianze testuali con un lavoro falso o "frasi disturbate", un termine caratterizzato da cabanac quando gli autoratti Fai una strana scelta di parole Per evitare che i sistemi di identificazione del plagio siano attivati.

"Entrambi gli approcci hanno la loro giustificazione, ma l'identificazione dei ricercatori di ricercatori che partecipano alla cattiva condotta potrebbe essere più preziosa", afferma James Butcher, ex editore di Nature Magazines e The Lancet, che ora guida la società di consulenza Journalology a Liverpool, Regno Unito. "Questo perché gli strumenti di scrittura supportati dall'intelligenza artificiale potrebbero essere utilizzati per supportare i truffatori per evitare ovvie informazioni testuali", aggiunge. Butcher aggiunge che molti grandi editori hanno sviluppato o acquisito i propri strumenti di integrità per controllare vari segnali di avvertimento nei manoscritti.

Uno dei problemi più difficili per gli strumenti di integrità che si basano principalmente sui ritiri degli autori è la distinzione corretta tra autori con un nome simile - un problema che Argos potrebbe distorcere i numeri. "Il problema della discriminazione dell'autore è il problema più grande che l'industria ha", afferma Adam Day, fondatore di Clear Skies.

de Boer, che in precedenza ha lavorato a Springer Nature, afferma che tutti possono creare un account per utilizzare Argos gratuitamente, ma prevede di vendere Sciity a una versione dello strumento a grandi editori e istituzioni che potrebbero integrarlo direttamente nei loro flussi di lavoro di screening manoscritti.

Butcher elogia la trasparenza del team Argos. "Deve esserci più visibilità per riviste ed editori che prendono abbreviazioni e non esercitano cure adeguate nel lavoro pubblicato e monetizzato", afferma.