Article
(Wie) kann KI bei der systematischen Literatursuche helfen?
Search Medline for
Authors
-
Irma Klerings
- Universität für Weiterbildung Krems, Department für Evidenzbasierte Medizin und Evaluation, Krems, Österreich
-
Maria-Inti Metzendorf
- Heinrich-Heine-Universität Düsseldorf, Institut für Allgemeinmedizin, Medizinische Fakultät, Düsseldorf, Deutschland
| Published: | March 27, 2025 |
|---|
Outline
Text
Beschreibung: Die Verbreitung von Large Language Models (LLM) hat Ansätzen zur Automatisierung des Systematic-Review-Prozesses neuen Aufschwung gegeben. Eine Bandbreite neuer Tools und Methoden verspricht alle Schritte des zeitaufwändigen Prozesses schneller durchführen zu können. Auch die systematische Literatursuche, deren hohe methodische Anforderungen – Vollständigkeit, Transparenz, und Reproduzierbarkeit – sich von anderen Formen der Literaturrecherche stark unterscheiden, soll durch KI (künstliche Intelligenz) einfacher werden. Doch wie können wir einschätzen, ob ein KI-Tool diese Ansprüche erfüllt?
Dieser Workshop widmet sich der praktischen Anwendung von KI und Automatisierung im Bereich der systematischen Literaturrecherche. Er besteht aus drei Teilen:
- 1.
- Input: Überblick über 1. bereits etablierte Tools zur Unterstützung von systematischen Suchen, 2. LLM-gestützte Tools und ihre potenzielle Rolle bei der systematischen Suche, und 3. Performanz-Indikatoren für Suchprozesse.
- 2.
- Übung: Die Teilnehmenden testen anhand eines praktischen Beispiels einen KI-gestützten Ansatz und bewerten seine Eignung für die systematische Suche.
- 3.
- Diskussion: Basierend auf Input und Übung diskutieren wir die gegenwärtigen Antworten auf die Fragen: Können LLM-basierte Ansätze relevante Studien identifizieren? Können sie zur Erstellung oder zum Peer Review systematischer Suchstrategien genutzt werden? Können sie robuste systematische Suchen durchführen? Welche Kenntnisse sind notwendig, um den Output von KI-basierten Tools zu bewerten oder weiterzuverwenden?
Der Workshop richtet sich an alle, die systematische Suchen erstellen und/oder die Qualität von Suchmethoden einschätzen können müssen.
Ziel des Workshops ist es, den Teilnehmenden Kriterien zu vermitteln mit denen sie die Eignung von neuen KI-Methoden für die systematische Suche selbst kritisch bewerten können.
Geplante Methoden: Der Input besteht aus zwei Vorträgen, die den gegenwärtigen Forschungsstand und Tools/Ansätze darstellen.
In der Übung werden die Teilnehmenden zu zweit eines der vorgestellten Tools anwenden und nach vorgegebenen Kriterien (z.B. Sensitivität der Suche) bewerten. Im Plenum werden die Ergebnisse verglichen und besprochen.
Darauf basierend erfolgt eine kritische Diskussion ob/wie KI zum gegenwärtigen Zeitpunkt im systematischen Suchprozess sinnvoll eingesetzt werden kann.
Interessenkonflikte: keine
