Exklusiv: Die Studien, die am häufigsten auf zurückgezogene Forschungspapiere verweisen

Im Januar erschien ein Übersichtsartikel¹ über Möglichkeiten zur Erkennung menschlicher Krankheiten durch die Untersuchung des Auges in einem Konferenzband des Institute of Electrical and Electronics Engineers (IEEE) in New York City. Doch weder die Autoren noch die Herausgeber bemerkten, dass 60% des von ihm zitierten Papiers bereits zurückgezogen worden war.

Der Fall ist einer der extremsten, die von einem riesigen Projekt zur Identifizierung von Papieren, deren Ergebnisse fragwürdig sein könnten, weil sie zurückgezogene oder problematische Forschung zitieren, entdeckt wurden. Der Schöpfer des Projekts, der Informatiker Guillaume Cabanac von der Universität Toulouse in Frankreich, teilte seine Daten mit dem Nachrichtenteam von Nature, das sie analysierte, um die Papier zu finden, die am meisten zurückgezogene Arbeiten zitieren, aber selbst nicht zurückgezogen wurden (siehe „Zurückgezogene Referenzen“).

“Wir beschuldigen niemanden, etwas falsch gemacht zu haben. Wir beobachten nur, dass in einigen Bibliographien die Referenzen zurückgezogen oder zurückgezogen wurden, was bedeutet, dass das Papier unseriös sein könnte”, sagt Cabanac. Er nennt sein Werkzeug einen Feet of Clay Detector, in Anlehnung an eine Analogie, die ursprünglich aus der Bibel stammt und sich auf Statuen oder Gebäude bezieht, die aufgrund ihrer schwachen Ton-Grundlagen zusammenbrechen.

Das IEEE-Papier steht an zweiter Stelle in der von Nature zusammengestellten Liste, mit 18 der 30 zitierten Studien zurückgezogen. Die Autoren antworteten nicht auf Anfragen zu Kommentaren, aber der Integritätsdirektor des IEEE, Luigi Longobardi, sagt, dass der Verlag von dem Problem nichts wusste, bis Nature nachfragte, und dass er es untersucht.

Cabanac, ein Forschungsintegritätsdetektiv, hat bereits Software entwickelt, um Tausende von problematischen Papieren in der Literatur auf Probleme wie computer-geschriebenen Texten oder verstecktem Plagiat hinzuweisen. Er hofft, dass sein neuester Detektor, den er in den letzten zwei Jahren entwickelt hat und den er diese Woche in einem Kommentar in Nature beschreibt, einen weiteren Weg bietet, um zu verhindern, dass schlechte Forschung sich in der wissenschaftlichen Literatur verbreitet – darunter auch einige gefälschte Arbeiten von „Papermill“-Firmen.

Weitere Untersuchungen

Cabanac listet die Ergebnisse des Detektors auf seiner Website, aber anderswo online – auf der Papierüberprüfungs-Website PubPeer und in sozialen Medien – hat er explizit über 1.700 Papiere markiert, die ins Auge fielen, weil sie sich stark auf zurückgezogene Arbeiten stützen. Einige Autoren haben Cabanac für die Benachrichtigung über Probleme in ihren Referenzen gedankt. Andere argumentieren, dass es unfair ist, ihre Arbeit effektiv zu verdächtigen, nur weil Retraktionen nach der Veröffentlichung gemacht wurde, die ihrer Meinung nach ihre Papers nicht beeinflussen.

Zurückgezogene Referenzen zeigen nicht eindeutig, dass ein Paper problematisch ist, bemerkt Tamara Welschot, Teil des Teams für Forschungsintegrität bei Springer Nature in Dordrecht, den Niederlanden, aber sie sind ein nützliches Zeichen dafür, dass ein Paper von einer weiteren Überprüfung profitieren könnte. (Das Nachrichtenteam von Nature ist unabhängig von seinem Herausgeber, Springer Nature.)

Einige Forscher sind der Ansicht, dass die Zurückziehung von Referenzen in einer narrativen Übersicht – die den Stand der Forschung in einem Bereich beschreibt – das Originalpapier nicht notwendigerweise ungültig macht. Aber wenn Studien, die von einer systematischen Überprüfung oder Meta-Analyse bewertet werden, zurückgezogen werden, sollte das Ergebnis dieser Überprüfung immer neu berechnet werden, um die Literatur auf den neuesten Stand zu bringen, erklärt die Epidemiologin Isabelle Boutron von der Universität Paris City.

Betrüger aufspüren

Einige der Paper, die einen hohen Anteil an zurückgezogenen Arbeiten zitieren, stammen von bekannten akademischen Betrügern, die viele ihrer eigenen Arbeiten zurückgezogen haben. Diese umfassen den Ingenieur Ali Nazari, der 2019 von der Swinburne University of Technology in Melbourne, Australien, entlassen wurde, nachdem eine Untersuchung der Universitätsfälschung seine Aktivitäten untersucht hatte. Zuvor arbeitete er an der Islamic Azad University in Saveh, Iran, und sein aktueller Aufenthaltsort ist unbekannt. Nachdem Nature Verlagen von seinen noch vorhandenen Papieren erzählt hatte^2,3, darunter Elsevier und Fap-Unifesp, eine gemeinnützige Stiftung, die die Bundesuniversität von São Paulo in Brasilien unterstützt, sagten sie, dass sie die Artikel prüfen würden. Eines der relevanten Zeitschriften wurde 2013 eingestellt, bemerkte Elsevier.

Cabanacs Detektor markiert auch Papers⁴ von Chen-Yuan Chen, einem Informatiker, der bis 2014 an der Nationalen Universität für Erziehung in Pingtung, Taiwan, gearbeitet hat. Er war hinter einem Syndikat, das gefälschte Peer-Reviews durchführte und Zitate erhöhte, das 2014 nach einer Untersuchung des Verlags SAGE bekannt wurde. Ein