gms | German Medical Science

Kongress Medizin und Gesellschaft 2007

17. bis 21.09.2007, Augsburg

Einsatz des Fragetyps ‚Long Menu’ für elektronische Prüfungen im Studiengang Medizinische Informatik

Meeting Abstract

  • Petra Knaup-Gregori - Universität Heidelberg, Abteilung Medizinische Informatik, Heidelberg
  • Jörn Heid - Universität Heidelberg, Labor Computergestützte Lehr- und Lernsysteme in der Medizin, Heidelberg
  • Christian Kohl - Universität Heidelberg, Abteilung Medizinische Informatik, Heidelberg
  • Marcel Zimmermann - Universität Heidelberg, Abteilung Medizinische Informatik, Heidelberg
  • Maria Pritsch - Universität Heidelberg, Abteilung Medizinische Biometrie, Heidelberg

Kongress Medizin und Gesellschaft 2007. Augsburg, 17.-21.09.2007. Düsseldorf: German Medical Science GMS Publishing House; 2007. Doc07gmds201

The electronic version of this article is the complete one and can be found online at: http://www.egms.de/en/meetings/gmds2007/07gmds201.shtml

Published: September 6, 2007

© 2007 Knaup-Gregori et al.
This is an Open Access article distributed under the terms of the Creative Commons Attribution License (http://creativecommons.org/licenses/by-nc-nd/3.0/deed.en). You are free: to Share – to copy, distribute and transmit the work, provided the original author and source are credited.


Outline

Text

Einleitung: Am Universitätsklinikum Heidelberg wird ein elektronisches Prüfungssystem entwickelt und seit Ende 2004 für Medizinprüfungen eingesetzt. Stärken der Software sind vor allem die Vermeidung technischer und rechtlicher Risiken [1].

Das System unterstützt den Key-Feature-Ansatz und neun Fragetypen, die teilweise aus den Anforderungen an medizinische Prüfungen entwickelt wurden. Im Studiengang Medizinische Informatik wurde bisher der Fragetyp ‚multiple choice’ [2] erfolgreich getestet. Der Fragetyp ‚Long Menu’ wird als vergleichbar zum ‚Freitext’ betrachtet [3]: Studierende können durch Eintippen von Begriffen Antwortmöglichkeiten aus einem sehr umfangreichen, von Dozenten zusammengestellten Katalog auswählen. Nach Eingabe weniger Buchstaben, werden die Antwortmöglichkeiten entsprechend eingeschränkt. ‚Long Menu’ wurde in medizinischen Prüfungen mit Antwortkatalogen von über 1000 Begriffen getestet. Unklar ist auch, ob er im Studium der Medizinischen Informatik sinnvoll eingesetzt werden kann.

Methodik: Kohorte aus zwei Semestern (WS06/07 und SS07), Crossover-Vergleich. Die Zulassungsprüfung zum Praktikum Informationssysteme des Gesundheitswesens [4] wurde in zwei formal gleiche Teile gegliedert. Jede Prüfungsfrage wurde sowohl als Freitext- als auch als Long-Menu-Frage formuliert. Jeder Studierende absolviert je einen Prüfungsteil Long-Menu und Freitext, die Reihenfolge wurde randomisiert. Zur Überprüfung, ob die Prüfungsergebnisse unabhängig vom Fragetyp sind, wird ein lineares Modell mit den Faktoren Fragentyp (Long-Menu/Freitext), Prüfungsteil (1/2) und der Wechselwirkung zugrunde gelegt.

Ergebnisse: Der Katalog der Antwortmöglichkeiten umfasst 514 Begriffe zu 46 Fragen. Insgesamt haben 40 Studierende teilgenommen. Die zweite Prüfung findet erst in diesen Tagen statt. Die Ergebnisse werden gemeinsam ausgewertet und auf der Tagung vorgestellt. Der Fragetyp Long-Menu wird sehr unterschiedlich bewertet. Für die Dozenten ist die Auswertung jedoch sehr effizient.

Diskussion: Mit Long-Menu können Begrifflichkeiten abgefragt werden. Ausformulierte Sätze sind als Antworten nicht möglich. Dies ist im Studiengang Medizinische Informatik nur für wenige Fächer angemessen, erweist sich für die Zulassungsprüfung zum Praktikum aber als hilfreich, zumal sehr schnell Ergebnisse vorliegen.


Literatur

1.
Heid J, Bauch M, Brass K, Hess F, Jünger J, Haag M, Leven FJ. Entwicklung und Einsatz eines sicheren Prüfungssystems für die medizinische Ausbildung. GMS Med Inform Biom Epidemiol. 2006;2(3):Doc10 (20061123).
2.
KNAUP-GREGORI P, HEID J, PRITSCH M. Elektronische Prüfungen im Studium der Medizininformatik: Sind elektronische und papierbasierte Ergebnisse vergleichbar? In: LÖFFLER M, WINTER A. Klinische Forschung vernetzen. Programm- und Abstractband der 51. Jahrestagung der GMDS. 2006. S. 83. Elektronisch unter http://www.egms.de//en/meetings/gmds2006/06gmds220.shtml. External link
3.
Rotthoff T, Baehring T, Dicken HD, Fahron U, Richter B, Fischer MR, Scherbaum WA. Comparison between Long-Menu and Open-Ended Questions in computerized medical assessments. A randomized controlled trial. BMC Med Educ. 2006;10(6):50.
4.
HAUX R, AMMENWERTH E, HÄBER A, HÜBNER-BLODER G, KNAUP-GREGORI P, LECHLEITNER G, LEINER F, WEBER R, WINTER A, WOLFF AC. Medical Informatics Education Needs Information System Practicums in Health Care Settings - Experiences and Lessons Learned from 32 Practicums at Four Universities in Two Countries. Methods of Information in Medicine. 2006;46:294-9.