Artikel
MATRIX – Entwicklung und Handhabbarkeitsstudien eines Instruments zur Beurteilung der Qualität von Entscheidungshilfen
Suche in Medline nach
Autoren
Veröffentlicht: | 15. März 2007 |
---|
Gliederung
Text
Hintergrund
Verschiedene Evaluationsansätze zur Qualitätsbeurteilung von Patienten-Entscheidungshilfen wurden entwickelt und sind Gegenstand der wissenschaftlichen Diskussion. Bestehende Konzepte sehen eine Prüfung der Herleitung der zur Anwendung kommenden Didaktik nicht vor. Deshalb wurden auf Basis einer systematischen Literaturanalyse ein eigenes Qualitätskonzept sowie das Beurteilungsinstrument MATRIX entwickelt. Ziel der vorliegenden Arbeit war die Prüfung der Handhabbarkeit von MATRIX.
Methoden
Die Instrumente MATRIX und CREDIBLE (Vergleichsstandard) wurden über 3 Studienphasen von Gutachtern (N=4, N=14, N=15) in der Anwendung evaluiert. Verständlichkeit, Handhabbarkeit und Gutachtenqualität wurden mittels Fragebogen erhoben. 10 der Gutachter aus der 2. Studienphase nahmen auch an der 3 Studienphase teil. Nach der Pilotierung (Studienphase 1) sowie zwischen den Phasen 2 und 3 wurde MATRIX strukturell überarbeitet.
Ergebnisse
Die Gutachter der 2. Studie beurteilten CREDIBLE im Vergleich zu MATRIX als inhaltlich besser verständlich. Sie konnten dessen Fragen leichter beantworten und trauten CREDIBLE eine höhere Interrater-Reliabilität zu. Bezogen auf Struktur und Qualitätskonzept unterschieden sich die Ratings im Schnitt nicht. Hinsichtlich Nützlichkeit, Evaluationssystematik sowie Vollständigkeit und Nachvollziehbarkeit der erstellten Gutachten wurde MATRIX höher geratet. Freitextkommentare unterstützten die Revision des Instruments. Die Revisionsmaßnahmen führten in der 3. Studie zur Verbesserung von Verständlichkeit und Handhabbarkeit. Auch trauten die Gutachter MATRIX eher einen Beitrag zur Vollständigkeit der Gutachten zu. Zwar blieb die Gesamteinschätzung zur Begutachtungsvalidität der beiden Instrumente im Verhältnis unverändert. Hinsichtlich Differenziertheit, Genauigkeit und Nachvollziehbarkeit der erstellten Gutachten wurde MATRIX jedoch schlechter geratet.
Schlussfolgerung/Implikation
Die Rückmeldungen zur Verständlichkeit und Handhabbarkeit von MATRIX sowie zur Validität der Gutachten zeigen, dass das Qualitätskonzept im Instrument nicht ausreichend klar operationalisiert ist. MATRIX wird erneut revidiert. Der hohe Anspruch an die Beurteilungssystematik stellt eine Herausforderung bei der Entwicklung eines handhabbaren Manuals dar.
Literatur
- 1.
- Kasper J, Lenz M. Kriterien zur Entwicklung und Beurteilung von Decision Aids. [Criteria for the development and evaluation of decision aids] Z Arztl Fortbild Qualitatssich 2005; 99:359-65.
- 2.
- Lenz M, Kasper J, Mühlhauser I. Searching for diabetes decision aids and related background information. Diabet Med. 2006;23(8):912-6