gms | German Medical Science

Fragestellung/Zielsetzung: Die Berücksichtigung von sozialen Kompetenzen bei der Auswahl zukünftiger Medizinstudent:innen wird sowohl von der Praxis als auch von der Politik begrüßt. Als eine Methode zur Erfassung von sozialen Kompetenzen bei einer hohen Anzahl an Studienbewerber:innen kann ein Situational Judgement Test (SJT) eingesetzt werden. Das Grundprinzip des SJTs besteht darin, eine interpersonelle Situation zu präsentieren und nach der Beschreibung oder Beurteilung von Reaktionen auf diese Situation zu fragen. Die konkrete Anwendung von SJTs kann allerdings stark variieren, was wiederum mit Unterschieden in Testgütekriterien einhergehen kann. In der vorliegenden Arbeit vergleichen wir drei verschiedene SJT Verfahren hinsichtlich ihrer Testgütekriterien und praktischen Umsetzung in der Medizinstudierendenauswahl.

Methoden: Eingesetzt wurden

1.

ein klassisch konzipierter Papier-Bleistift SJT (HAM-SJT; vgl. [1]),

2.

ein klassisch konzipierter digitaler SJT mit einem offenen Antwortformat (Casper; [2]) und

3.

ein auf zwei vordefinierten Konstrukten basierender Papier-Bleistift SJT (SJT-kb; [3]).

Alle drei Verfahren wurden im Rahmen des Auswahlverfahrens der Hochschulen für das Medizinstudium unter Auswahlbedingungen (HAM-SJT und SJT-kb) oder Studienbedingungen (Casper) eingesetzt.

Ergebnisse: Alle drei Verfahren haben eine akzeptable Reliabilität mit Cronbach’s Alpha um 0.70. Während nur der SJT-kb eine nachvollziehbare Konstruktvalidität aufweist, zeigt vor allem der HAM-SJT konforme Zusammenhänge zu anderen Auswahltests und OSCE Ergebnissen. Die Akzeptanz für alle drei Verfahren bei Bewerber:innen ist gut. Muttersprachler:innen zeigten bei allen Verfahren eine bessere Leistung als Nicht-Muttersprachler:innen, insbesondere aber beim Casper (d=0.89). Durch den Fokus auf einzelne Konstrukte könnte der SJT-kb anfälliger für Faking- und Coachingstrategien sein.

Diskussion: Die Ergebnisse zeigen Unterschiede in den Testgütekriterien sowie Vor- und Nachteile verschiedener SJT Verfahren. Dabei ist die Evidenz aufgrund einer größeren Datenlage für den HAM-SJT am besten dokumentiert. Für Casper und den SJT-kb sind weitere Datenerhebungen für zuverlässige Aussagen notwendig. Generell sollten vor dem Einsatz von SJTs für die Auswahl von Medizinstudierenden Kosten und Nutzen des Verfahrens kritisch untersucht und abgewägt werden.

Take Home Message: SJTs sind eine Methode zur Erfassung von sozialen Kompetenzen und können sich in ihrer konkreten Umsetzung deutlich unterscheiden. Ergebnisse zur Testgüte lassen sich daher nicht vorbehaltlos generalisieren, sondern sind mit Rücksicht auf die eingesetzte SJT-Variante zu betrachten.