gms | German Medical Science

Bei der Nutzenbewertung von Arzneimittel sind Meta-Analysen ein häufig eingesetztes statistisches Werkzeug. In diesem Vortrag werden wir die Rolle von Meta-Analysen (MA) bei der Evidenzsynthese diskutieren. Wir betrachten dabei einerseits die Interpretation von MA-Ergebnissen gegenüber Einzelstudienergebnissen als auch die Modellwahl bei MAs – insbesondere die Frage zufällige vs. feste Studieneffekte - in Abhängigkeit von der Zielsetzung der Untersuchung.

Ausgehend von Beispielen des Einsatzes von MAs bei Nutzenbewertungen, z.B. aus Berichten des Instituts für Wirtschaftlichkeit und Qualität im Gesundheitswesen (IQWiG) und von Richtlinien des National Institute of Clinical Excellence (NICE) wird die Rolle von MAs kritisch beleuchtet.

Kernpunkte der Untersuchung sind die Robustheit der Evidenz, die Voraussetzungen und Konsequenzen der Modellwahl und der praktische Umgang mit den MA-Ergebnissen in Form von Behandlungsschätzern, Konfidenzintervallen, p-Werten und Heterogenitätsmaßen. Dazu werden sowohl MAs mit alternativer Modellwahl durchgeführt als auch mit simulierten Daten gerechnet.

Die quasi mechanische Übertragung von Regeln aus der konfirmatorischen Statistik (z.B. Präspezifikation des Modells, einer Signifikanzschranke, einer Schranke für akzeptable Heterogenität) führt bei der retrospektiven Evidenzsynthese teilweise zu inkonsistenten und manchmal sogar zu unwissenschaftlichen Ergebnissen. Insbesondere die limitierte Anzahl und die unterschiedliche Größe der vorhandenen Einzelstudien führt zu nicht robusten Resultaten.

Als Konsequenz dieser Ergebnisse diskutieren wir theoretische und praktische Implikationen der Modellwahl (feste vs. zufällige Behandlungseffekte) bei MAs und leiten drüber daraus Vorschläge für den Einsatz von MAs bei retrospektiver Evidenzsynthese ab.

In der retrospektiven Nutzenbewertung erhält die MA besonders bei nicht eindeutiger Datenlage der Einzelstudienergebnisse eine hohe Bedeutung. Daneben werden hier typischerweise nur wenige Studien in die MA einbezogen. Gerade in einer solchen Situation erscheint eine konfirmatorische Evidenzsynthese über MA nicht möglich.