gms | German Medical Science

Einleitung: Key-Feature-(KF-)Tests sind eine von Page und Bordage speziell zum Prüfen der klinischen Entscheidungsfindung für Diagnostik und Therapieschritte entwickelte Methode [1]. Da insbesondere im Fach Neurologie aufgrund des komplexen Hintergrundes von Neuroanatomie und multipler ätiologischer Möglichkeiten eine sorgfältige und zielgerichtete Diagnostik äußerst wichtig ist, erscheint dieser Testansatz zur Überprüfung der im Neurologie-Blockpraktikum vermittelten Inhalte sehr gut geeignet.

Im WS 12/13 wurde in einem Pilotprojekt die Einführung eines computerbasierten KF-Tests im Fach Neurologie untersucht. Ziel war zum einen die Validierung der einzelnen KF-Probleme. Darüber hinaus sollte die Praktikabilität der Prüfung, die Funktionalität der Prüfungssoftware sowie die Akzeptanz des elektronischen KF-Formats bei den Studierenden untersucht werden.

Methodik: Im WS 12/13 wurde eine KF-Prüfung entwickelt und als fakultative E-Klausur zum Ende des Semesters durchgeführt. Die Prüfung bestand aus 13 neurologischen KF-Problemen mit jeweils 3–5 Einzelitems (insgesamt 51 Items) im Long-Menu- und PickN-Format. 26 Studierende des Blockpraktikums Neurologie nahmen an der Prüfung teil.

Die Prüfung wurde teststatistisch ausgewertet. Zur studentischen Evaluation der KF-Prüfung wurde ein Fragebogen nach Kopp/Fischer [2] eingesetzt. Dieser bestand aus 19 Items, die sich auf die Akzeptanz der KF-Prüfung, die technische Durchführung sowie die Akzeptanz des computerbasierten Formats bezogen. Die Auswertung erfolgte mittels deskriptiver und induktiver Statistik.

Ergebnisse: Im Mittel erreichten die Studierenden in der KF-Prüfung 26,2 von 51 möglichen Punkten. Cronbachs alpha für die KF-Fälle liegt bei 0,53. Die Fälle wiesen Schwierigkeiten zwischen 0,23 und 0,79 sowie Trennschärfen zwischen –0,14 und 0,44 auf.

Die studentische Evaluation zeigte eine insgesamt gute Akzeptanz des KF-Formats. Die KF-Probleme wurden überwiegend als problemorientiert und realitätsnah wahrgenommen. Die technische Durchführung der Prüfung wurde ebenfalls als gut bewertet. In Bezug auf die Bearbeitung der Prüfung am Computer unterscheiden sich weibliche und männliche Studierende signifikant. Die männlichen Studierenden waren dem computerbasierten Prüfungsformat gegenüber im Durchschnitt aufgeschlossener.

Diskussion: Anhand der Erfahrungen des Pilotprojektes erwies sich die computerbasierte KF-Prüfung als praktikabel und wurde von den Studierenden akzeptiert. Es wurden jedoch auch verschiedene praktische Herausforderungen deutlich (z.B. Arbeitsaufwand beim Erstellen der KF-Probleme, Begrenztheit des CIP-Pools etc.). Aufgrund der teststatistischen Ergebnisse wurde ein Teil der KF-Probleme nochmals überarbeitet, wodurch bei der nächsten Durchführung eine insgesamt bessere Teststatistik erwartet wird. Die Gründe für die geschlechtsspezifischen Unterschiede bei der Bewertung des computerbasierten Prüfungsformats sollen bei der erneuten Evaluation durch Freitextfragen näher untersucht werden [3].