Academic Jobs - Home of Higher Ed Logo

Scopus-AI-Erweiterung entfacht Debatte über Wissenschaftlergenauigkeit und Zitationshalluzination

Postet eine Geschichte
0Ansichten
Native advertising — guest articles from $400See packages
three girls in graduation gowns hold their caps in the air
Photo by Leon Wu on Unsplash

Dr. R, ein Rechenmaterialchemiker an einer europäischen Universität, bat Scopus AI, die jüngste Arbeit an zweidimensionalen kovalenten organischen Rahmenwerken zusammenzufassen. Das Tool gab einen selbstbewussten Absatz und sechs Referenzen zurück. Fünf stimmten mit echten Scopus-Aufzeichnungen überein. Der sechste verband einen plausiblen Autorennamen mit einer Zeitschrift, die sie virologie veröffentlichte, und die DOI wies auf einen unverwandten 2019-Artikel hin. Sie bemerkte den Fehler schnell, weil das Feld klein genug war, um seine Zeitschriften zu erkennen. Die meisten Doktoranden des ersten Jahres hätten es nicht bemerkt.

Scopus AI ist die generative-AI-Schicht von Elsevier, die auf der Spitze der Scopus-Zitate und der abstrakten Datenbank gebaut wurde. Ein Benutzer stellt eine Frage in natürlicher Sprache; das System holt relevante Scopus-Aufzeichnungen ab und verwendet sie, um eine schriftliche Antwort zu gründen. Die Antwort kommt mit Zitaten beigefügt, was es wie ein Literaturbericht eines Labmate liest. Das Problem ist, dass die Zitate aus einer generierten Zusammenfassung stammen, und die Zusammenfassung ist nur so zuverlässig wie der Abrufschritt, der sie füttert.

Was ist Scopus AI und wie funktioniert die Erweiterung

Scopus AI begann als eine begrenzte Beta im Jahr 2023 und wurde im Januar 2024 kommerziell verfügbar.Elsevier beschreibt das Tool als die Verwendung von Peer-Reviewed-Literatur, die in Scopus indexiert wurde, einschließlich Artikel, Bücher, Konferenzpapiere und Bewertungen.Generierte Antworten werden von Quellabstrakten begleitet, so dass Leser von Zusammenfassung zu Originaltext wechseln können.Seit der Einführung hat das Unternehmen den Feature-Set erweitert und Folgemaßnahmen hinzugefügt, um verwandte Themen innerhalb einer Suchsitzung zu erkunden.

Für abonnierende Universitäten ist die praktische Veränderung, dass Scopus AI jetzt in einer Datenbank sitzt, die viele Forscher bereits verwenden. Das senkt die Barriere für die Annahme. Ein Forscher, der kein separates AI-Tool öffnen würde, wird ein Suchfeld ausprobieren, das bereits auf der Entdeckungsseite der Bibliothek steht.

Unabhängige Tests und das Problem der Zitatüberprüfung

Frühe unabhängige Prüfung kam, bevor die kommerzielle Einführung die meisten Campus erreichte.Eine Bewertung vom Januar 2024 in The Scholarly Kitchenfand das Tool nützlich für die breite Themenentdeckung, warnte jedoch, dass seine Antworten von der Scopus-Abdeckung abhängen und Fachkenntnisse erfordern, um zu bewerten.A 2024 News Feature in NaturDie Forscher befragten AI akademische Suchwerkzeuge und berichteten, dass verschiedene Systeme bekannte Papiere verpassen, schwache Referenzen aufweisen und mit interdisziplinärer Arbeit zu kämpfen haben.Elsevier Produktseitezeigt die Quell-Zitate-Anzeige und Notizen an, dass Benutzer die Originalabstracts konsultieren sollten.

Ein halluziniertes Zitat ist eine Referenz, die vollständig aussieht, aber nicht einem realen, abrufbaren Dokument entspricht. Das DOI kann nicht gelöst werden oder es kann auf ein anderes Papier gelöst werden. Der Fehler kann klein sein: ein falscher Autor, eine ausgetauschte Volumennummer, ein Titel, der aus zwei Abstrakten zusammengeführt wurde, oder ein DOI, der aus einer anderen Aufzeichnung kopiert wurde. Weil die erzeugte Prosa fließend ist, passiert der Fehler Standardproofreading.

Das Hauptrisiko konzentriert sich in Feldern, in denen die Scopus-Abdeckung dünner ist oder wo die Terminologie Disziplinen überschreitet. Ein Tool kann ein Abstract aus einem angrenzenden Feld abrufen und eine plausible Zitierung anfügen, die ein Spezialist nie gewählt hätte.

Dies schafft ein Problem mit der Basisrate. Die meisten Ausgaben sind gut, aber ein Forscher, der Hunderte von generierten Referenzen verwendet, ohne zu überprüfen, wird schließlich einen Fehler importieren. Ein gefälschtes Zitat in einem Fördervorschlag oder ein eingereichtes Manuskript kann eine Integritätsabfrage auslösen, und der Rest der Arbeit wird dann unter Verdacht gelesen. Die Ausnahme ist der Fehler, der frühzeitig von einem Fachexperten erfasst wurde, der die erwarteten Zeitschriften, Autoren, Institutionen und Methoden kennt. Diese Ausnahme ist keine Sicherung; es ist ein Argument für die Behandlung jedes Ausgangs als nicht verifiziert.

Was das für Ihr Labor bedeutet

Ein Labor muss Scopus AI nicht verbieten, um es sicher zu machen.Es braucht eine Verifizierungsroutine, die stattfindet, bevor eine Referenz in ein Manuskript gelangt.

  • Fügen Sie jede generierte Referenz in Crossref oder den DOI-Resolver des Journals ein, bevor Sie sie in Ihrem Referenzmanager speichern.
  • Öffnen Sie die abstrakten Scopus AI-Zitate, nicht nur die generierte Zusammenfassung.
  • Haben frühe Karriere-Forscher bringen eine KI-generierte Antwort auf Gruppenbesprechung und überprüfen Sie es gegen die Literatur laut, so dass die Überprüfung Gewohnheit wird öffentlich.
  • Halten Sie in Ihrem Labor-Wiki eine kurze Notiz darüber, welche KI-Tools für welche Aufgaben erlaubt sind und wer die Ausgabe vor der Einreichung überprüft.

Man hat festgestellt, dass Manuskripte Referenzen enthalten, die nicht mit echten Papieren übereinstimmen, undSTM drängt auf Offenlegungsregeln rund um die Verwendung von KIDas Muster ist jetzt in beide Richtungen sichtbar: Tools, die Zitate generieren, und Autoren, die diese Zitate importieren, ohne zu überprüfen.

Institutionen lehren Verifizierung, nicht Verbot

Eine Forschungsunterstützungsbibliothek bei einer großen britischen Universität erzählte mir, dass ihr Standard-Slide jetzt liest: Scopus AI ist ein Ausgangspunkt, nicht eine Quelle.

Dieser pragmatische Ansatz trifft, woJournal Politics auf generative AIAnstatt generative KI zu verbieten, bitten die Redakteure die Autoren, zu enthüllen, wie sie es benutzt haben und zu bestätigen, dass sie Zitate überprüft haben.

Scopus AI wird wahrscheinlich zu einem Standardbestandteil der Entdeckungs-Workflows werden, bevor das Genauigkeitsproblem vollständig gelöst wird. Das macht das Tool nicht unbrauchbar. Es macht die Arbeit des Benutzers um einen Schritt länger. Das nächste Mal, wenn Sie eine Scopus AI-Abfrage ausführen, kopieren Sie das erste Zitat, das Sie in Crossref oder die eigene Seite des Herausgebers begeistert, und bestätigen Sie, dass es existiert. Wenn es nicht existiert, sagen Sie Ihrem Bibliothekar. Diese einzige Gewohnheit, die von genügend Labs wiederholt wird, ist das, was die Debatte über Zitathalluzinationen in eine engere über Randfälle verwandelt.

a scrabbled wooden block with the words integr city on it

Photo by Brett Jordan on Unsplash

Porträt von Dr. Nathan Harlow
Über den Autor

Dr. Nathan HarlowAutor ansehen

Academic Jobs In House Author

Diskussionen

Sort von:

Seien Sie der Erste, der diesen Artikel kommentiert!

Du bist

Sie werden gebeten, sich anzumelden, bevor Ihr Kommentar veröffentlicht wird.

Neue0 comments

Treten Sie dem Gespräch bei!

Fügen Sie jetzt Ihre Kommentare hinzu!

Haben Sie Ihr Wort

Engagement Ebene

Browse nach Fakultät

Browse nach Thema

Frequently Asked Questions

🔍Was ist Scopus-KI?

Scopus AI ist der generative Suchassistent von Elsevier, der auf der Scopus-Zitations- und Abstract-Datenbank basiert. Er akzeptiert natürlichsprachige Fragen, ruft relevante, von Experten begutachtete Aufzeichnungen ab und verfasst eine kurze Antwort mit Quellenangaben. Das Designziel ist es, das Sprachmodell an echten Dokumenten zu orientieren, anstatt nur aus dem Gedächtnis zu generieren. Weitere Informationen finden Sie auf der Scopus AI-Produktseite.

📊Was bedeutet die Erweiterung von Scopus AI für Forscher?

Forscher an abonnierenden Institutionen stoßen nun auf Scopus AI innerhalb einer vertrauten Datenbank anstatt als eigenständiges Tool. Das senkt die Hemmschwelle für die Nutzung und erhöht die Anzahl der generierten Antworten, die in die Arbeitsabläufe einfließen. Es bedeutet auch, dass Trainings- und Verifizierungsgewohnheiten mit der Adoption skaliert werden müssen.

⚠️Was ist eine Zitationshalluzination?

Eine Zitationshalluzination ist ein generierter Verweis, der vollständig aussieht, aber nicht mit einem echten, abrufbaren Dokument übereinstimmt. Er kann einen echten Autor, einen plausiblen Titel, einen Zeitschriftennamen und eine DOI enthalten, die dennoch nicht auf das beschriebene Papier verweist. In einigen Fällen verweist die DOI auf eine ganz andere Studie.

📉Wie oft liefert Scopus AI halluzinierte Zitate?

Veröffentlichte Bewertungen variieren und es gibt keine stabile globale Rate. Das Risiko ist höher in dünn indexierten oder interdisziplinären Bereichen und geringer in stark abgedeckten Feldern. Die sicherste Arbeitsannahme ist, jedes generierte Zitat als unverifiziert zu behandeln, bis Sie den Quellenrekord geöffnet haben.

📝Kann ich in meinem Paper eine Scopus-AI-Zusammenfassung zitieren?

Die meisten Stilguides und Fachzeitschriften behandeln generative KI-Ergebnisse als Werkzeugausgabe und nicht als primäre Quelle. Die bessere Praxis ist, die Zusammenfassung zu verwenden, um die zugrunde liegenden Arbeiten zu finden, diese zu lesen und sie zu zitieren. Überprüfen Sie die Richtlinien der Zielzeitschrift, da die Anforderungen je nach Verlag unterschiedlich sind.

✅Wie überprüfe ich eine von Scopus AI generierte Referenz?

Kopieren Sie den Verweis in Crossref oder den DOI-Auflöser der Zeitschrift und überprüfen Sie, ob Autor, Titel, Band und Jahr übereinstimmen. Öffnen Sie dann das Abstract in Scopus oder auf der Website des Verlags. Wenn der DOI fehlschlägt oder auf ein anderes Papier verweist, verwenden Sie den Verweis nicht.

🧠Warum erfinden AI-Suchwerkzeuge manchmal plausibel aussehende Zitate?

Sprachmodelle sind darauf trainiert, flüssigen Text zu produzieren, und ohne starke Abrufbeschränkungen können sie Lücken mit bibliografischen Details füllen, die plausibel aussehen. Selbst mit retrieval-augmentierter Generierung kann das System Datensätze zusammenfügen, Autoren austauschen oder den falschen DOI anhängen.

🗂️Was empfehlen Universitätsbibliothekare bezüglich Scopus AI?

Viele Bibliothekare beschreiben das Tool als Ausgangspunkt, nicht als Quelle. Ihre Anleitung umfasst in der Regel das Lesen der Originalabstracts, das Überprüfen von DOIs und die Behandlung generierter Zusammenfassungen als Suchhilfen und nicht als Beweise. Einige Bibliotheken haben Scopus AI in die Anleitung zur akademischen Integrität aufgenommen.

🔬Wie vergleicht sich Scopus AI mit anderen AI-Akademischen Suchwerkzeugen?

Scopus AI bezieht sich auf eine kuratierte Zitationsdatenbank, die ihm eine klarere Grenze als allgemeine Chatbots gibt. Unabhängige Tests, die in Nature veröffentlicht wurden, zeigen, dass alle AI-Suchwerkzeuge bekannte Artikel übersehen und sich in der Abdeckung unterscheiden, sodass die gleiche Überprüfungsgewohnheit auf allen Plattformen gilt.

🎓Was sollten frühkarrierierte Forscher tun, bevor sie Scopus AI in einer Literaturübersicht verwenden?

Bringen Sie eine generierte Antwort zu einem Treffen mit einem Betreuer oder in einem Labor und überprüfen Sie sie anhand der Primärliteratur, bevor Sie sich auf sie verlassen. Bauen Sie die Gewohnheit auf, DOIs zu überprüfen, Abstracts zu lesen und nur überprüfbare Referenzen zu speichern. Das Tool spart Zeit bei der Suche, aber die Literaturrecherche hängt immer noch von Primärquellen ab.

🛠️Wird Elsevier Zitationfehler in Scopus AI ansprechen?

Elsevier empfiehlt den Nutzern, die Originalabstracts zu konsultieren, und hat Quellenzitierungen in die Benutzeroberfläche integriert. Das Unternehmen hat die Fehler nicht eliminiert, daher bleiben institutionelle Schulungen und individuelle Überprüfungen wesentliche Bestandteile einer verantwortungsvollen Nutzung.

🌍Deckt Scopus AI alle Disziplinen gleich ab?

Die Abdeckung von Scopus AI folgt der Scopus-Indexierung, die in einigen Bereichen stärker ist als in anderen. In Bereichen mit unvollständigerer Indexierung können Antworten wichtige Arbeiten vermissen oder schwächere Referenzen produzieren. Forscher in interdisziplinären Themen sollten eine fachspezifische Datenbanksuche neben Scopus AI durchführen.