gms | German Medical Science

Hintergrund: Bei der Erstellung einer systematischen Übersichtsarbeit auf Basis von Sekundärliteratur werden Ein-/Ausschlusskriterien nach thematischen und methodischen Aspekten definiert, nach denen Referenzen durch ein Screening der Titel und Abstracts (TA-Scr) gesichtet werden. In der Folge werden die daraus resultierenden potenziell relevanten Volltextpublikationen bewertet. Die vorliegende Validierung bezieht sich auf methodische Aspekte auf Abstract-Ebene. Aus dem Standardvorgehen (SV), bei dem sensitive methodische Kriterien für das TA-Scr definiert werden, resultiert, dass auch viele nicht systematische Arbeiten im Volltext gesichtet und Ressourcen für die Beschaffung der Publikationen bereitgestellt werden müssen. Daher wurde ein restriktives Vorgehen (RV) entwickelt und im Jahr 2008 erstmals an einem Realprojekt evaluiert [1]. Das Ergebnis zeigte eine Reduktion der potenziell relevanten Volltexte auf Abstract-Ebene um 37% (15 Referenzen), ohne dabei eine tatsächlich relevante systematische Arbeit ausgeschlossen zu haben und lieferte einen Hinweis darauf, dass durch ein RV eine Ressourceneinsparung ohne Qualitätseinbußen möglich war.

Ziel der vorliegenden Evaluierung ist eine projektübergreifende Validierung des RV auf Basis eines weiteren Realprojektes.

Material/Methoden: Die Basis für die Evaluierung waren 60 Titel und Abstracts jener Volltexte eines Realprojekts, die über das übliche, sensitive TA-Scr (SV) als potenziell relevant identifiziert worden waren. Das zusätzliche TA-Scr anhand spezifischer hierarchischer Kriterien (RV) wurde von 2 unabhängigen Reviewern durchgeführt, die zuvor nicht in den Screeningprozess eingebunden waren. Die angewandten Kriterien fokussieren auf Aspekte wie Datenquellen, Verschlagwortung und Angaben zur Systematik, und wurden bereits publiziert [1]. Die exkludierten Referenzen des TA-Scr im RV wurden mit den Ergebnissen aus dem SV verglichen.

Ergebnisse: Im SV wurden von den 60 potenziell relevanten Titeln und Abstracts im Volltextscreening, welches eine methodische Bewertung nach dem Qualitätsindex von Oxman & Gyatt [2], [3] einschließt, letztlich 6 Publikationen identifiziert, die für die Beantwortung der Fragestellung des Projektes relevant waren. Durch das RV konnte die Zahl der potenziell relevanten Volltexte bereits auf Abstract-Ebene von 60 auf 47 reduziert werden, was einer Reduktion von 22% entspricht. Wesentlich dabei war, dass nach dem spezifischen TA-Scr alle 6 auch tatsächlich relevanten Arbeiten enthalten waren.

Schlussfolgerung/Implikation: Die Ergebnisse bestätigen den Hinweis, dass durch ein RV beim TA-Scr keine relevante systematische Sekundärliteratur ausgeschlossen wird. In der praktischen Anwendung kann neben den Kosten, die durch die Beschaffung der Publikationen und der daraus resultierenden Zeitverzögerungen entstehen, auch der Arbeitsaufwand im Rahmen der Sichtung nicht relevanter Volltexte eingespart werden.