gms | German Medical Science

Hintergrund/Fragestellung: AMSTAR hat sich als eines der meist verwendeten Bewertungsinstrumente zur Qualitätsbewertung systematischer Reviews (SR) etabliert und wurde vor kurzem grundlegend überarbeitet [1]. Dabei haben die Autoren des AMSTAR 2 einen Vorschlag für eine Gesamteinschätzung in das Vertrauen in die Review-Ergebnisse eingeführt, im folgenden Aussagesicherheit genannt. Die Autoren schlagen vor, 7 der 16 AMSTAR 2-Items als entscheidend (engl. critical) zu definieren, die bei der Gesamteinschätzung besonders stark gewichtet werden. Nach einem im wesentlichen festgelegten Algorithmus wird die Aussagesicherheit als hoch, moderat, gering oder sehr gering bewertet.

Ziel der Studie ist die Validierung der AMSTAR 2-Gesamteinschätzung basierend auf dem Vorschlag der AMSTAR 2-Autoren. Zusätzlich werden die Erfahrungen bei der AMSTAR 2-Anwendung von acht Bewertern qualitativ erhoben und untersucht, welche Items sie für eine Gesamteinschätzung als entscheidend erachten und weiterhin welche Erfahrungen mit AMSTAR 2 gesammelt wurden.

Methoden: AMSTAR 2 wurde an insgesamt 60 SR zu Behandlungsoptionen bei Major Depression bei Erwachsenen angewandt, die nach einer systematischen Literaturrecherche und einem zweistufigen Screening-Prozess zufällig zu zwei Stichproben mit jeweils 30 Reviews zugeordnet wurden. Jeder SR wurde von vier Bewertern begutachtet. In Stichprobe 1 erfolgte zusätzlich eine Bewertung mit AMSTAR, in Stichprobe 2 mit ROBIS. Für die Validierung wurde die Gesamteinschätzung von AMSTAR 2 mit der von AMSTAR (nach dem Vorschlag von Banzi et al. [2]) und ROBIS verglichen. Nach der Bewertung der SR schätzten die Bewerter für jedes AMSTAR 2-Item ein, ob das Item ein entscheidendes Item sein sollte oder nicht.

Ergebnisse: Die SR wurden mit der AMSTAR 2-Gesamteinschätzung überwiegend in die niedrigste Kategorie „sehr geringe Aussagesicherheit“ eingestuft. Ein vergleichbares Bild ergibt sich bei den ROBIS-Bewertungen, während anhand von AMSTAR weniger SR in die niedrigste Kategorie eingestuft wurden.

Für die Gesamteinschätzung identifizierten die Bewerter fünf entscheidende Items, wovon vier den vorgeschlagenen entscheidenden Items entsprechen.

Schlussfolgerungen: AMSTAR 2 und ROBIS zeigten eine hohe Übereinstimmung. Eine Festlegung der entscheidenden Items scheint von der PICO-Fragestellung abhängig zu sein und sollte a priori erfolgen. Die Erfahrungen und Präferenzen der Bewerter werden auf der Konferenz präsentiert und diskutiert.

Interessenkonflikte: keine