gms | German Medical Science

26. Jahrestagung des Netzwerks Evidenzbasierte Medizin e. V.

Netzwerk Evidenzbasierte Medizin e. V. (EbM-Netzwerk)

26. - 28.03.2025, Freiburg

Künstliche Intelligenz für systematische Literaturrecherchen: Methodik zur Integration von digitalen, offenen Anwendungen für Suche und Screening

Meeting Abstract

Suche in Medline nach

  • author Christopher Jäger - Universitätsklinikum Hamburg-Eppendorf (UKE), Institut und Poliklinik für Allgemeinmedizin (IPA), Hamburg, Deutschland
  • author Stefanie Butz - Universitätsklinikum Hamburg-Eppendorf (UKE), Institut und Poliklinik für Allgemeinmedizin (IPA), Hamburg, Deutschland
  • author Edris Nury - Universitätsklinikum Hamburg-Eppendorf (UKE), Institut und Poliklinik für Allgemeinmedizin (IPA), Hamburg, Deutschland
  • author Dagmar Lühmann - Universitätsklinikum Hamburg-Eppendorf (UKE), Institut und Poliklinik für Allgemeinmedizin (IPA), Hamburg, Deutschland

Die EbM der Zukunft – packen wir’s an!. 26. Jahrestagung des Netzwerks Evidenzbasierte Medizin. Freiburg, 26.-28.03.2025. Düsseldorf: German Medical Science GMS Publishing House; 2025. Doc25ebmEP-01-10

doi: 10.3205/25ebm103, urn:nbn:de:0183-25ebm1035

Veröffentlicht: 27. März 2025

© 2025 Jäger et al.
Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung). Lizenz-Angaben siehe http://creativecommons.org/licenses/by/4.0/.


Gliederung

Text

Hintergrund/Fragestellung: Systematische Literaturrecherchen als zentrales Element jeglicher Evidenzberichte sind zunehmend daten- und aufwandsintensiv. Um diesen Herausforderungen zu begegnen und die Effizienz zu steigern, stellen wir die Entwicklung einer Methodik, die digitale und KI-gestützte Anwendungen in den Such- und Screening-Prozess integrieren soll, vor.

Methoden: Die geplante Methodik umfasst die folgenden Schritte zur Integration (aktuell) frei zugänglicher Anwendungen:

1.
Initiale Vorrecherche: Sollte es nach der PICO-Formulierung an Seed-Publikationen fehlen, wird eine Vorrecherche nach relevanter Literatur (n=5-10) mittels KI-Anwendungen (zB Elicit, Consensus, Semantic Scholar,...) oder durch klassische Recherchemethoden durchgeführt.
2.
Analyse von PICO-Begriffen: Die Titel, Abstracts, Keywords und MeSH-Terms der Seed-Publikationen werden mit „searchbuildR“ [1] analysiert, um relevante Begriffe zu extrahieren.
3.
Erstellung des Suchstrings: Die extrahierten Begriffe werden mithilfe von ChatGPT [2] oder über klassische PICO-Kategorisierungen zu einem vorläufigen Suchstring verarbeitet und getestet.
4.
Suchstring-Optimierung: Der Suchstring wird in „SearchRefinery“ getestet, um sicherzustellen, dass das Testset aus Schritt 2 und relevante Literatur identifiziert wird. Ein iterativer Anpassungsprozess soll hierbei zum Einsatz kommen.
5.
Anpassung an Datenbanken: Der finale Suchstring wird in „Polyglot Search“ an die Syntax relevanter Datenbanken angepasst.
6.
Deduplikation der Treffer: Dedupilkation der Suchtreffer mit Anwendungen wie dem „Deduplicator“ (sr-accelerator.com) oder Referenzprogrammen
7.
Weiterverarbeitung der Ergebnisse: Die deduplizierten Treffer werden in ASReview gescreent

Zur Validierung wurde ein Rahmenwerk entwickelt, um Qualität („Präzision“) und Effizienz („Zeit“) im Vergleich zu herkömmlichen Strategien zu evaluieren.

Vorläufige/erwartete Ergebnisse, Ausblick: Mit der Implementierung dieser Methodik erhoffen wir uns eine messbare Verbesserung der Qualität und Effizienz bei systematischen Recherchen. Die Integration dieser Technologien könnte es Forschenden ermöglichen, effizienter zu fundierten Ergebnissen zu kommen. In Anbetracht der aktuellen Entwicklungen im Bereich KI könnte diese Methodik einen wertvollen Beitrag zur Effizienz und Zuverlässigkeit evidenzbasierter Arbeit leisten. Eine umfassende Validierung und Evaluierung der Praktikabilität sind allerdings notwendig, um die Methodik „EbM-fit“ und nachhaltig in den Forschungsprozess zu integrieren.


Literatur

1.
Kapp C, Fujita-Rohwerder N, Lilienthal J, Sieben W, Waffenschmidt S, Hausner E. The searchbuildR shiny app: a new implementation of the objective approach for search strategy development in systematic reviews. Cochrane Ev Synth. 2024; 2:e12078. DOI: 10.1002/cesm.12078 Externer Link
2.
Wang S, Scells H, Koopman B, Zuccon G. Can ChatGPT Write a Good Boolean Query for Systematic Review Literature Search? In: Proceedings of the 46th International ACM SIGIR Conference on Research and Development in Information Retrieval (SIGIR '23); 2023 Jul 23-27; Taipei, Taiwan. New York, NY: Association for Computing Machinery; 2023. p. 1426-1436. DOI: 10.1145/3539618.3591703 Externer Link