Academic Jobs - Home of Higher Ed Logo

Krise der Peer-Review: KI-generierte Einreichungen und Paper Mills bedrohen die akademische Veröffentlichung

Postet eine Geschichte
84Ansichten
Native advertising — guest articles from $400See packages
text
Photo by Brett Jordan on Unsplash

Wiley erwarb den Open-Access-Verlag Hindawi für 298 Millionen US-Dollar im Jahr 2021. Zu der Zeit, als Wiley den Namen Hindawi zurückgezogen und sagte, er würde 2024 19 Hindawi-Zeitschriften schließen, wurden Tausende von Papieren gezogen, nachdem Untersuchungen Papiermühleaktivität, gefälschte Peer-Review-Ringe, gefälschte Daten und manipulierte Bilder gefunden hatten.

Diese Zahl geschah nicht, weil die Forscher plötzlich ihre Ethik verloren hatten. Es geschah, weil die industrielle Produktion von gefälschter Wissenschaft billiger und schneller wurde. Generative AI produzierte passable Abstracts und Einführungen im Maßstab. Papierfabriken packten diese Wörter mit gefertigten Daten und verkauften Autorship-Slots. Zeitschriften, die Artikelverarbeitungsgebühren (APCs) auf Akzeptanz berechnen, machten das Volumen profitabel. Peer-Review, der Filter, der dazu diente, den Betrug zu fangen, hängt immer noch von unbezahlter akademischer Arbeit und der Annahme ab, dass eine Einreichung echt ist, bis jemand anderes beweist.

Die Skala ist wichtig, weil Peer-Review wurde nie entworfen, um die Urheber zu authentifizieren. Es wurde entworfen, um Methoden und Argumente zu beurteilen. Ein gefälschtes Manuskript von einem koordinierten Team geschrieben kann sauberer aussehen als ein echtes Papier von einem müden Postdoc.

Papierfabriken haben seit Jahrzehnten auf die gleiche Weise gearbeitet. Ein Broker rekrutiert einen Forscher, der Veröffentlichungen zur Förderung oder beruflichen Weiterentwicklung benötigt. In einer typischen Operation organisiert der Broker ein geistgeschriebenes Manuskript, liefert oder fabriziert einen Datensatz, übermittelt das Papier und schlägt manchmal Bewertungen vor, deren E-Mail-Adressen zurück zur Fabrik gehen. Die Bewertungen kommen günstig zurück. Die Zeitschrift sammelt ihre APC. Der Client erhält eine saubere Publikation.

Generative AI hat dieses Geschäft nicht erfunden, aber es hat seine größten Produktionskosten entfernt. Billige Sprachgeneration bedeutet, dass Mühle Zeitschriften mit Text überfluten können, der keine Grammatik- oder Plagiatsprüfungen mehr durchläuft. Einreichungsvolumen steigt. Redakteure und Rezensenten, in der Regel Fakultätsmitglieder, die ohne Bezahlung arbeiten, sehen mehr Manuskripte, die plausibel aussehen, aber hohl sind.

Gastbearbeitete Sonderausgaben sind ein gemeinsamer Einstiegspunkt.Eine Fabrik kann einen Gasteditor rekrutieren oder vorgeben, ein Problem mit koordinierten Einreichungen ausfüllen, die Notwendigkeit einer Zeitschrift ausnutzen, nach Zeitpunkt zu veröffentlichen, und sich hinter gefälschten Anmeldeinformationen verstecken.

Hier ist der Catch

Der Fang ist nicht, dass Detektionssoftware nicht existiert. Der Fang ist, dass jedes Detektionswerkzeug eine neue Kosten erzeugt, und niemand hat sich darauf geeinigt, wer sie trägt.STM-Integrität Hub, geführt von der International Association of Scientific, Technical and Medical Publishers, die duplizierte Einreichungen und Papiermühlenmarker in teilnehmenden Zeitschriften markiert. Springer Nature betreibt seine eigene Software, Geppetto, um KI-generierte Text- und Bildmanipulationen zu erkennen.

Diese Werkzeuge sind Triage, nicht Beweis. Eine Flagge braucht immer noch eine menschliche Untersuchung, und menschliche Ermittler sind genau die Ressource in der mangelnden Versorgung. Falsche Positiven stapeln sich auch. Formale akademische Prosa von einem Nicht-Englischsprachigen geschrieben kann als maschinell erzeugt gekennzeichnet werden. Jede falsche Flagge verbraucht Redaktionszeit und riskiert, einen echten Autor zu entfremden. Eine Papiermühle kann in der Zwischenzeit ihren Text durch einen Paraphraser reiten und es erneut versuchen. Die Maschinen werden besser, aber die Mühle werden besser in Reaktion.

Close-up of a book page with printed text

Photo by Brett Jordan on Unsplash

Das Detektionswaffenrennen, gradiert

Hype: KI-Detektoren und Integritätssoftware können Peer-Review auflösen.Realität: Sie können Muster identifizieren, aber nicht Absicht.COPE, Ausschuss für VerlagsethikEs ist klar geworden, dass Software-Signale allein kein Beweis für die Beteiligung von Papiermühle sind; Verlage müssen vor der Handlung untersuchen.

  • Duplizieren von Bildern über angeblich unbezogene Papiere
  • Autorennetzwerke, die sich in verschiedenen Zeitschriften ohne plausible Zusammenarbeit wiederholen
  • Datensätze, die nicht mit den in dem Manuskript beschriebenen Experimenten übereinstimmen
  • Reviewer-E-Mail-Adressen, die auf die gleichen kostenlosen Anbieter oder IP-Adressen wie die Autoren zurückverfolgen

Jedes dieser Signale kann in einer legitimen Arbeit erscheinen. Ein echter Autor kann eine Figur versehentlich wiederverwenden, ein Netzwerk mit einem Co-Autor teilen, eine allgemeine E-Mail-Adresse auswählen oder aus dem gleichen Campus-Netzwerk wie ein Kollege einreichen. Der Wert der Software kommt davon, wie schnell sie den Pool für Redakteure einschränkt.

Wer zahlt für die Reinigung

Das Geld ist der Teil, den die Universitäten benachrichtigen. Eine Papiermühle-Einreichung verschwendet nicht nur die Zeit des Reviewer; es kann in einer Recherchenaufenthaltsdatei, einem Zuschussbericht oder einer nationalen Forschungsbewertung enden. Rücktritte kommen oft Jahre später, nachdem die Förderung genehmigt wurde und die Institution bereits die Ausgabe des Autors beworben hat. Forschungsintegritätsbüros verbringen dann Monate damit, das Geschehene zu rekonstruieren. Der Autor kann Unwissenheit geltend machen, der Vermittler ist verschwunden, die Zeitschrift hat sich fortbewegt und die Institution bleibt die Datei halten.

Über den Campus hinweg hat sich die politische Reaktion gespalten.Einige Universitäten überprüfen jetzt Veröffentlichungslisten während der Fakultätsbeschaffung; andere verlassen sich auf Suchkomitees ohne Ausbildung in forensischen Veröffentlichungskontrollen.Die Regeln der akademischen IntegritätOhne einen gemeinsamen Standard kann das gleiche problematische Papier einen Kandidaten sinken und einen anderen Ausschuss überspringen.

Das Problem des Herausgebers will niemand nennen

Herausgeber haben einen unangenehmen Anreiz. Zeitschriften, die APCs auf Akzeptanz berechnen, verdienen Geld, wenn die Papiere überprüft werden. Zeitschriften, die spezielle Themen ausführen, insbesondere Gastbearbeitungssammlungen, wurden von Werkstätten schwer getroffen, weil Gastredakteure rekrutiert oder vorgetäuscht werden können. Der Druck, Seiten zu füllen, kollidiert mit der Pflicht, sie abzulehnen. Einige Herausgeber haben spezielle Ausgabe-Programme geschlossen oder Zeitschriften nach Betrug ausgesetzt.

Die Skala zu verfolgen ist nicht schwer.Retraction Watch pflegt eine öffentliche DatenbankDie Datenbank ist zu einem Arbeitswerkzeug für Journalisten, Forschungsintegritätsbeamte, Einstellungsausschüsse und Amtszeit-Review-Panels geworden.

A close up of a book with writing on it

Photo by Brett Jordan on Unsplash

Das Personalproblem hinter der Software Fix

Die Behebung ist kein intelligenterer Detektor. Es ist eine Änderung, wer überprüft, und wann. Wenn Veröffentlichungslisten bei der Einstellung, Förderung, Beihilfeantragung und der jährlichen Überprüfungszeit überprüft wurden, würde der Markt für gefertigte Papiere schrumpfen, weil die Qualifikation Wert verlieren würde. Daten und Code könnten vor der Überprüfung benötigt werden, nicht danach. Redakteure könnten die Zeit, den Status, das Budget und die Ausbildung erhalten, um verdächtige Einreichungen zu untersuchen, anstatt auf freiwillige Bewertungsmitteilungen zu hoffen.

Anna Abalkina, eine Soziologin an der Freien Universität Berlin, die Papierfabriknetze in mehreren Ländern dokumentiert hat, hat wiederholt gezeigt, dass diese Netzwerke auf den Druck der Veröffentlichung reagieren, nicht auf Software.

Porträt von Dr. Oliver Fenton
Über den Autor

Dr. Oliver FentonAutor ansehen

Academic Jobs In House Author

Die Anerkennung :

Diskussionen

Sort von:

Seien Sie der Erste, der diesen Artikel kommentiert!

Du bist

Sie werden gebeten, sich anzumelden, bevor Ihr Kommentar veröffentlicht wird.

Neue0 comments

Treten Sie dem Gespräch bei!

Fügen Sie jetzt Ihre Kommentare hinzu!

Haben Sie Ihr Wort

Engagement Ebene

Browse nach Fakultät

Browse nach Thema

Frequently Asked Questions

🧾Was ist eine Papiermühle im wissenschaftlichen Publizieren?

Eine Paper Mill ist ein Geschäft, das Autorenschaft an gefälschten oder ghostwrittenen Manuskripten verkauft. Vermittler rekrutieren Forscher, die Veröffentlichungen für eine Beförderung, eine Berufszulassung, einen Antrag auf eine Förderung oder eine Bewerbungsmappe benötigen, und organisieren dann ein Manuskript, manchmal gefälschte Daten oder Bilder, und eine Einreichung. Das Ziel ist ein sauber aussehendes Papier in einer Zeitschrift, normalerweise einer, die eine Artikelverarbeitungsgebühr verlangt. Die Praxis ist eine Form wissenschaftlichen Fehlverhaltens, nicht nur ein Qualitätsproblem.

🤖Wie hat die generative KI Paper Mills verändert?

KI-Sprachmodelle ermöglichen es Mühlen, plausible Abstracts, Einleitungen und Methoden fast ohne Kosten zu generieren. Text löst keine Grammatik- oder Plagiate-Checks aus, was bedeutet, dass Redakteure und Gutachter mehr Zeit damit verbringen, hohle Manuskripte von echten zu unterscheiden. Die gleichen Modelle können verwendet werden, um Texte umzuschreiben und Detektoren auszuweichen, was das Problem zu einem Wettlauf werden lässt.

📉Warum wird die Peer-Review-Praxis als in der Krise befindlich beschrieben?

Die Peer-Review-Praxis basiert auf ehrenamtlicher akademischer Arbeit und geht davon aus, dass die Einreichungen ehrlich sind. Paper Mills missbrauchen dieses Vertrauen im großen Stil, erhöhen die Einreichungszahlen, während legitime Gutachter immer mehr Anfragen ablehnen. Herausgeber brennen aus, die Gutachterwartezeiten verlangsamen sich, schlechte Arbeiten gelangen durch und das Vertrauen schwindet. Die Krise ist nicht ein einzelnes Versagen, sondern der kumulierte Druck auf ein System, das für eine kleinere, langsamere Publikationswirtschaft konzipiert wurde.

📊Wie viele Artikel wurden wegen Papiermühlen zurückgezogen?

Nature berichtete, dass 2023 mehr als 10.000 Artikel zurückgezogen wurden, ein Rekord. Wiley's Hindawi-Journale waren für einen großen Anteil verantwortlich, nachdem der Verlag Aktivitäten von Papiermühlen untersucht hatte. Die Datenbank von Retraction Watch listet nun Zehntausende von Rücknahmen, viele davon in Verbindung mit Papiermühlen und gefälschter Peer-Review.

💷Was sind Artikelverarbeitungsgebühren und warum sind sie hier wichtig?

Article Processing Charges (APCs) sind Gebühren, die Zeitschriften erheben, wenn ein Beitrag angenommen wird. Sie finanzieren den Open-Access-Zugang, schaffen aber auch einen Volumenanreiz. Eine Zeitschrift, die Tausende von Einreichungen erhält, kann durch die Annahme dieser Beiträge erhebliche Einnahmen erzielen, was von Papiermühlen ausgenutzt wird. Kritiker argumentieren, dass die APC-Einnahmen von der Annahme entkoppelt und stattdessen an die Überprüfung und Verifizierung geknüpft werden sollten.

🔎Welche Tools verwenden Verlage, um AI-generierte Einreichungen zu erkennen?

Verlage verwenden eine Kombination von Signalen. Der STM Integrity Hub kennzeichnet doppelte Einreichungen und Papiermühlenmarker in den teilnehmenden Zeitschriften. Springer Nature verwendet Geppetto, um AI-generierte Texte und Bildmanipulationen zu erkennen. Einige Zeitschriften verwenden Plagiatssoftware, Bildforensik und Überprüfungen der Identität von Gutachtern. Diese Tools verengen den Pool für die Herausgeber, sie etablieren jedoch keinen Betrug von selbst.

⚠️Können AI-Detektoren gefälschte Artikel zuverlässig identifizieren?

Nein. Detektoren sind Mustererkennungstools und kein Beweis. Sie können formale Prosa von Nicht-Muttersprachlern als maschinell generiert kennzeichnen und Papiermühlen können Texte so lange umschreiben, bis der Detektor sie übersehen hat. COPEs Richtlinien empfehlen, dass Software-Signale einer menschlichen Überprüfung bedürfen, bevor eine Anschuldigung erhoben wird. Falsche Anschuldigungen können legitime Forscher schädigen und redaktionelle Zeit verschwenden.

🏛️Was passiert mit einem Universitätsforscher, wenn ein Artikel zurückgezogen wird?

Die Konsequenzen hängen von der Institution und den Beweisen ab. Einige Forscher müssen sich mit Feststellungen von Forschungsunredlichkeit, einer Prüfung von Fördermitteln, dem Verlust einer Stelle oder einer eingefrorenen Zusammenarbeit auseinandersetzen. Andere sagen, sie seien von Vermittlern getäuscht worden und entgehen einer offiziellen Sanktion. Da Rücknahmen oft Jahre nach einer Beförderung erfolgen, müssen Universitäten manchmal vergangene Entscheidungen überprüfen, ein Prozess, der mühsam, langsam und öffentlich ist.

📋Wie sollten Universitäten die Publikationslisten von Fakultätsmitgliedern überprüfen?

Bewerbungskommissionen sollten Ansprüche über die Websites von Zeitschriften und DOI-Abfragen überprüfen, nicht nur über Lebensläufe. Sie können Retraction Watch auf zurückgezogene Arbeiten überprüfen und Bewerber bitten, Lücken zu erklären. Einige Universitäten verlangen nun Daten- oder Codeaussagen. Der Schlüssel ist, die Überprüfung vor einem Angebot und nicht nach einem Skandal zur Routine zu machen.

📬Was sollte ein Gutachter tun, wenn ein Artikel wie ein Produkt einer Papiermühle aussieht?

Bewertende sollten dem Herausgeber spezifische Bedenken mitteilen, anstatt stillschweigend abzulehnen. Beweise könnten verdächtige Autorenmuster, duplizierte Bilder, Daten, die nicht zu den Methoden passen, oder eine Liste von Gutachtern mit verdächtigen E-Mail-Adressen umfassen. Die Richtlinien von COPE empfehlen Herausgebern, Bedenken während der Untersuchung vertraulich zu behandeln. Bewertende sollten keine öffentlichen Anschuldigungen vor einer Untersuchung erheben.

🏷️Ändern Verlage ihre Richtlinien?

Einige schon. Wiley hat 19 Hindawi-Zeitschriften geschlossen und Sonderausgaben-Programme ausgesetzt. Springer Nature und andere haben AI-Screening hinzugefügt. STM-Mitglieder teilen Signale über den Integrity Hub. Der Wandel ist jedoch ungleichmäßig und kleinere Verlage haben oft nicht die Ressourcen für forensische Teams.

🧭Wo können Forscher vermutete Papermühlen melden?

Sie können dies den Herausgebern der Zeitschrift melden, dann dem Forschungsteam für Integrität des Verlegers. COPE bietet Leitlinien für Herausgeber und Verlage. Retraction Watch akzeptiert Hinweise auf fragwürdige Artikel. Universitäten haben in der Regel einen Forschungintegritätsbeauftragten, der über Missstandsverfahren beraten kann.