gms | German Medical Science

An den tiermedizinischen und medizinischen Bildungsstätten werden seit einigen Jahren eLearning-Applikationen zum Selbstlernen oder kollaborativen Lernen angeboten [12], [14]. Dabei werden freiwillige Nutzungsraten von über 60% erreicht [37]. Als große Vorteile des eLearnings werden neben der Orts- und Zeitunabhängigkeit [21] vor allem die Interaktivität [38] und Möglichkeiten des Feedbacks [24] angesehen.

Auch in der Präsenzlehre werden oft neue Wege, wie z.B. Problem-basiertes Lernen in Kleingruppen [33], [16] oder Peer-to-Peer-Learning [9] gewählt. Trotzdem findet v. a. in der Tiermedizin weiterhin ein Großteil der Veranstaltungen als Vorlesungen vor großem Auditorium statt, da diese als die ökonomischste Lehrform gelten. Über die Effektivität solcher Veranstaltungen wird in der Literatur viel diskutiert [4].

Als Nachteile von Vorlesungen werden unter anderem die Stofffülle [36], mangelnde Selbsteinschätzung des Lernerfolges bei Studierenden, fehlende Interaktion zwischen Lehrenden und Lernenden [26], Passivität der Lernenden [15] und das fehlende beidseitige Feedback angesprochen.

Damit in Lehrveranstaltung nicht nur Verständnis, sondern tatsächlich Lernen gefördert wird, beschrieb Döring den Prozess des „Einatmens“ (Rezeptive Phase) und „Ausatmens“ (Expressive Phase) [7]. Um diese Expression in Großveranstaltungen leicht zu fördern können elektronische Testverfahren eingesetzt werden [30]. Dabei werden folgende Formen des elektronischen Prüfens unterschieden [20]:

• Diagnostisch (Eingangstests zur Auswahl von Teilnehmenden)
• Formativ (Überprüfung des Lernerfolgs zur Erteilung von Feedback an die Lernenden)
• Summativ (Abschlussprüfung zur Erreichung eines Zertifikates)

Um die Interaktion in der Vorlesung zu steigern und den Lernenden ein direktes Feedback zu ermöglichen können formative Tests eingesetzt werden. Dabei werden vier Generationen elektronischen Prüfens unterschieden [28]:

• 1. Generation: Computerized testing
• 2. Generation: Computerized adaptive testing
• 3. Generation: Continuous measurement
• 4. Generation: Intelligent measurement

Durch den Einsatz eines anonymen Feedbacksystems wird einerseits den Lernenden die individuelle Leistungsmessung ermöglicht und andererseits den Dozierenden die Einsicht in den Leistungsstand des gesamten Auditoriums gestattet. Hierfür können Testsysteme der ersten Generation eingesetzt werden, da bekannte Szenarien in organisatorisch-ökonomischer Hinsicht in Großgruppen anzuwenden sind [1].

Die gesteigerte Interaktion, das Gefühl, den Unterricht selbst mitzugestalten, und die Möglichkeit, Feedback auf den eigenen Lernerfolg zu bekommen, steigert die Motivation bei den Lernenden [19]. Durch die Integration der Lernenden findet ein Übergang von einem gegenstandszentrierten in einen lernerzentrierten Unterricht statt. Bransford et al. beschreiben für problemorientierten Unterricht vier Prinzipien der integrativen Funktion (learner-, community-, knowledge- und assessment-centered), die unter Umständen auch mit dem Einsatz von Feedbacksystemen erreicht werden könne [2]. Die Abkehr von der reinen Instruktion kann hierbei dem Aufbau „trägem Wissen“ [18] vorbeugen und die gelernten Lerninhalte durch die Mitarbeit vertiefen.

Ziel dieser Studie war es, den Einsatz von Feedbacksystemen in der Präsenzlehre und –fortbildung zu testen. Dabei sollte die Frage beantwortet werden, ob elektronische Systeme in Großveranstaltungen eingesetzt werden können, um Feedback zu ermöglichen, und ob damit eine Akzeptanz bei den Nutzenden zu erreichen ist.

Um Präsenzveranstaltungen interaktiv zu gestalten, werden Fragen direkt an das Auditorium gestellt, die anonym beantwortet werden können. Die Antworten werden daraufhin sofort in der Präsentation dargestellt, sodass die Zuhörer ihr Wissen testen können und die Vortragenden direkt auf die Ergebnisse eingehen können, um ein entsprechendes „Feedback“ zu geben. Dazu wurden in dieser Studie über den Einsatz von elektronischen Testsystemen in der Lehre zwei verschiedene Systeme eingesetzt:

1. In Vorlesungen und für formative Testate wurden in der Tiermedizin seit 2005 Abstimmgeräte (PowerVote) mit direktem PowerPoint Plug-in verwendet (siehe Abbildung 1 [Abb. 1]). Teilweise (in 20% Prozent der Studie) hatte nicht jeder Zuhörer ein eigenes Gerät, sondern Gruppen mit bis zu vier Teilnehmern konnten gemeinsam die Frage erarbeiten. Die Multiple-Choice-Fragen wurden per Beamer projiziert und die Antworten des Auditoriums in der folgenden Folie präsentiert. Als Fragetypen wurden TypA und PickN [25] verwendet. Die Fragen konnten zu Beginn eines Themas zur Aktivierung des Vorwissens [17] oder abschließend als Lernerfolgskontrolle [22] gestellt werden. Teilweise wurden in diesem Szenario auch CASUS-Fälle [11] präsentiert, die dann mit dem Feedback-System kollaborativ bearbeitet werden sollten.

Die Akzeptanz dieses Systems wurde mit einem Fragebogen (Likert-Werte 1-6, vergleichbar mit Schulnoten) direkt nach 13 Veranstaltungen bei insgesamt 472 Studierenden erhoben. Wertungen von 1-3 wurden als Zustimmung und Wertungen von 4-6 als Ablehnung zusammengefasst. Um auch die Meinung der Dozierenden darstellen zu können, wurden acht Dozierende qualitativ im Rahmen von einzelnen Experteninterviews befragt.

2. In der Sportmedizin wurden 2008 mit vernetzten Tablet-PCs (Q[kju:]) interaktive Vorlesungen (http://www.youtube.com/watch?v=p0wbddk1pYE) durchgeführt (siehe Abbildung 2 [Abb. 2]). Die 82 Studierenden wurden in 20 Gruppen eingeteilt und bekamen die komplette Patientenakte auf jeweils ein Tablet gespeist. So konnten sie in Gruppen parallel zur Präsentation die Fälle kollaborativ studieren. Zwischen den Ausführungen des Dozenten müssten die Studierendengruppen regelmäßig Aufgaben in der Patientenakte bearbeiten (Freitext, TypA, Bildanalyse), deren Ergebnisse dann dem ganzen Auditorium anonym präsentiert wurden. Die Patientendiskussion konnte so mit allen Teilnehmern erfolgen.

Dem Dozierenden stand bei dieser Methode immer eine Hilfsperson zur Seite, die sich um die Technik kümmerte und den Transfer der Daten zwischen Server, Präsentationslaptop und Tablets regelte.

Die Evaluierung der 82 Teilnehmer erfolgte in 20 Gruppen direkt anschließend an die Vorlesung mit einem elektronischen Fragebogen (Likert-Werte 1-6, vergleichbar mit Schulnoten) auf den Tablets.

3. Diese Technologie der interaktiven Patientenakten wird seit 2000 auch für interaktive Präsenzfortbildungen in der tiermedizinischen Neurologie und medizinischen Pharmazie eingesetzt. Die Teilnehmer können während der Fortbildung mit den interaktiven Patientenakten arbeiten und kollaborativ über die Fragen gemeinsam mit den Dozierenden z.B. Diagnosen entwickeln.

Dieser Studie wurde eine Auswertung über 37 Fortbildungen der pharmazeutischen Industrie mit 1278 Teilnehmern im Zeitraum 2005 bis 2008 zugrunde gelegt. Die Evaluation der Fortbildung per elektronischem Fragebogen (Likert-Werte 1-5, 1=ja, sehr bis 5= nein, gar nicht; Werte von 1-2 wurden als Zustimmung, Werte von 4-5 als Ablehnung gewertet) wurde direkt auf dem Tablet durchgeführt und enthielt neben fachlichen Fragen und Einzelbewertungen der Dozierenden auch eine Frage zur Akzeptanz der Methode der interaktiven Fortbildung.

Der Einsatz der Feedbacksysteme funktionierte in allen drei Settings (Abstimmgeräte und Tablet PCs) technisch sehr gut und die Vorlesungen konnten problemlos gehalten werden. Der Einsatz der Systeme erzeugte keinen deutlichen Mehraufwand. Gerade im ersten Szenario konnten auch kurzfristig Entscheidungen für den Einsatz getroffen werden. Der technische Aufwand tritt hierbei deutlich hinter dem didaktischen zurück. Wichtig waren die Entscheidungen was gefragt werden sollte und wie dies am besten erfolgt.

Bei der Befragung der Studierenden der Tiermedizin (siehe Abbildung 3 [Abb. 3]) wurde deutlich, dass sich 43,2% in herkömmlichen Vorlesungen eher nicht melden, wenn sie etwas nicht verstanden haben. Auch die Möglichkeit zur Diskussion wurde in solchen Veranstaltungen von 57,2% der Befragten nicht genutzt. An den hier durchgeführten Vorlesungen beteiligten sich allerdings alle Studierenden durch das anonyme Feedback-System.

Den Vorlesungen mit Feedbacksystem wurde von den Studierenden ein höherer subjektiver Lernerfolg (2,4) als den normalen Vorlesungen (3,1) attestiert. Auch die Sportmediziner (siehe Abbildung 4 [Abb. 4]) gaben an, sich durch den Einsatz der Tablets besser in die Veranstaltung einbringen zu können (2,9). Einen tatsächlichen Gewinn durch die Geräte konnten dabei 60% der Sportstudierenden bei sich feststellen.

Die Teilnehmer aus allen drei Gruppen haben den Einsatz der elektronischen Hilfsmittel begrüßt (Tiermedizin: 1,5; Sportmedizin: 1,8; Fortbildung: 1,4, siehe Abbildung 5 [Abb. 5]). Der Einsatz der Geräte wurde dabei von 98,5% der Studierenden der Tiermedizin und von 95% der Sportmediziner als technisch problemlos empfunden.

Die Studierenden der Tiermedizin wünschten sich einen häufigeren Einsatz der Feedback-Technik (1,9) allerdings nicht in jeder Vorlesung (3,7). Dabei bevorzugten Sie den Einsatz für Evaluationen (2,1) und formative Tests (2,0) gegenüber einer möglichen Anwendung in summativen Prüfungen (3,6). Auch bei den Studierenden der Sportmedizin wünschten sich 60% einen weiteren Einsatz dieser Methode in den Vorlesungen.

Die Befragung der Dozierenden der Tiermedizin zeigte, dass alle das Feedbacksystem gerne im Unterricht eingesetzt haben und dass es komplikationslos in die Vorlesung integriert werden konnte. Einige Dozierende nahmen hier die Hilfe der eLearning-Beratung an. Durch die Arbeitsteilung konnten sie sich ganz auf die Vorlesung und die Diskussion konzentrieren. Als Hauptvorteil wurde genannt, dass es durch das Feedbacksystem ermöglicht wurde, den Studierenden Feedback auf ihr Wissen und Verständnis zu geben und einige Themen genauer zu erläutern, wenn Verständnisschwierigkeiten auftraten. Weiterhin bekamen auch die Dozierenden ein Feedback zu ihrem Unterricht und konnten sich besser auf das Auditorium einstimmen. Es wurde nicht als Nachteil gesehen, wenn mehrere Studierende als Gruppe die Frage mit einem Gerät beantworteten, da so eine Diskussion über den Lernstoff aufkam. Durch das Durchbrechen des typischen Frontalunterrichtes wurde allgemein die Diskussion verstärkt und es wurden auch mehr Fragen aus dem Auditorium gestellt als bei herkömmlichen Vorlesungen. Die Dozierenden konnten eine deutliche Motivationssteigerung der Studierenden feststellen. Aber auch den Vorlesenden machte diese interaktive Form des Unterrichtes mehr Spaß. Weiterhin wurde angemerkt, dass der Einsatz des Systems auch sinnvoll sein, um hohe Beteiligungen an Unterrichtsevaluationen zu gewährleisten.

Als Nachteile wurden der erhöhte technische und zeitliche Aufwand genannt. Während die Technik schnell beherrscht werden konnte, kann in Vorlesungen mit Feedback-System durch die Interaktion nicht so viel vermittelt werden wie in reinem Frontalunterricht. Hierdurch ergab sich die Meinung der Dozierenden, dass der Einsatz des Systems genau geplant und auf den Themenkomplex abgestimmt werden muss. So hätte es weniger Sinn, es für die Vorstellung einer Systematik einzusetzen und deutlich mehr Anwendungsmöglichkeiten bei der Abfrage der Lernziele am Ende eines Themenkomplexes. Da an der TiHo Hannover zur Zeit nur ein Feedback-System und nur wenige Lizenzen für die Software vorrätig sind, ist ein gewisser organisatorischer Aufwand und eine Absprache mit den verschiedenen Kliniken und Instituten vor dem Einsatz notwendig.

Als Ausblick wurde beschrieben, dass der Einsatz des Feedbacksystems für formatives Prüfen und zur Evaluation intensiviert werden soll. Dabei wäre es gut, wenn jeder Dozent mit seinem eigenen Rechner interaktive Präsentationen erstellen könnte und ausreichend Transponder zur Verfügung ständen. An der TiHo zeigte sich bereits, dass das System auch für Fortbildungen und studentische Referate eingesetzt wird. Auch für summatives Prüfen bei Multiple-Choice-Klausuren sei die Nutzung eines analogen Systems denkbar. Eine weitere Schulung der Dozierenden für den technischen und didaktischen Einsatz (z.B. Gestaltung der Fragen) sei dabei wünschenswert.

Eine Befragung der Dozierenden in den Fortbildungen mit interaktiven Patientenakten zeigte ein gleiches Bild. Auch hier wurde die Möglichkeit der Interaktivität und gemeinsamen Diskussion als Bereicherung angesehen. Die Möglichkeit, die Teilnehmer einzubeziehen und ihnen Feedback zu geben, erhöhe die Qualität der Fortbildung sehr. Durch den externen Betreuer hält sich der technische Aufwand in Grenzen. Allerdings zeigt sich auch hier ein organisatorischer Mehraufwand, da umfangreicheres Material notwendig ist und die Vorträge frühzeitig aufbereitet werden müssen und nicht erst kurz vor der Veranstaltung erstellt werden können.

Anhand der Untersuchung konnte nachgewiesen werden, dass der Einsatz elektronischer, formativer Tests auch in Großveranstaltungen möglich ist und dass eine hohe Akzeptanz bei Lernenden und Lehrenden erreicht wird, wie es auch in anderen Fachdisziplinen beschrieben wurde [27], [29], [32], [8], [3]. Es konnte nicht als Nachteil angesehen werden, wenn teilweise mehrere Teilnehmer zusammen ein Abstimmgerät bedienten. Während es bei den einzelnen Teilnehmern um rein formatives Testen ging, wurde bei Gruppenabstimmungen ein kollaboratives Lernen und Arbeiten im Sinne des problemorientierten Unterrichtes beobachtet [2]. Dies konnte durch den Einsatz von CASUS-Lernfällen [11] in der Präsenzlehre und die Verknüpfung mit dem Feedback-System noch verstärkt werden. Dieses gemeinsame Bearbeiten praxisnaher Fälle führte zu einem wichtigen Theorie-Praxis-Bezug und kann daher dem Pragmatismus zugeordnet werden [21]. Fallbasiertes Lernen wurde in Großveranstaltungen mit dieser Technik ermöglicht. Hierbei geht es in der Medizin weniger um das freie Suchen nach Wissen als viel mehr um die interdisziplinäre Anwendung einer Hypothese und das Zurückgreifen auf einen Bestand vorhandenen Wissens [35].

Sehr deutlich wurde in dieser Untersuchung, dass die Kommunikation und Integration der Lernenden in die Vorlesung durch den Einsatz der Feedback-Systeme gesteigert werden konnten. Dies kann gerade in Fachbereichen mit abschließenden mündlichen Prüfungen [23] durch dieselben Dozierenden an der Möglichkeit der anonymen Teilnahme liegen. Doch auch über die vorbereiteten Fragen hinaus sorgte die neue Methode für eine vermehrte Diskussion und gab den Studierenden Anreiz, selbst Verständnisfragen zu äußern. Durch den erhöhten subjektiven Lernerfolg und der verstärkten Auseinandersetzung mit dem Thema konnte die intrinsische Motivation der Studierenden erhöht werden, sodass sie sich stärker in den Unterricht integrierten. In herkömmlichen Vorlesungen dominiert oft die extrinsische Motivation mit dem Ziel, die nachfolgenden Examina zu bestehen [6]. Dieser Motivationsanstieg wird durch den Wechsel von gegenstands- zum lernerzentrierten Unterricht erreicht. Auch für die Lehrenden bedeutete dies einen Anstieg der Motivation, da sie es mit aktiveren und begeisterteren Studierenden zu tun hatten.

Die unterschiedliche Ausprägung in den einzelnen Gruppen wird auch auf das Vertrauen und den gewohnten Umgang mit der Technik zurückgeführt. Während die Technik in der Tiermedizin schon länger eingesetzt wurde, fand in der Sportmedizin ein Erstversuch statt. Bei der Befragung der Dozierenden zeigte sich ebenso eine anfängliche Ungewissheit beim Umgang mit der neuen Methode, die durch Unterstützung und Schulungen abgebaut werden konnte. Außerdem musste der Unterricht deutlich flexibler gestaltet werden, da er vermehrt einer Diskussion denn einem Monolog glich. Hier zeigt sich, wie wichtig auch bei dem Lehrpersonal eine didaktische Fortbildung ist [34], die auch in naturwissenschaftlichen und medizinischen Fächern den Wert guter Lehre unterstreicht. Erste Ansätze dazu schaffen zum Beispiel das Programm „Master of Medical Education“ [13] oder der Kurs „Professionelle Lehre“ an der TiHo Hannover [31].

Die Studierenden wünschten sich in der Evaluation einen vermehrten Einsatz des formativen Testsystems. Dabei konnten sie sich auch eine Nutzung für die Evaluierung der Lehrveranstaltungen vorstellen. Ein Vorteil dieser Nutzungserweiterung wäre die stärkere Teilnahme an Evaluationen, die bisher rein online erfolgen [5]. Weder die Studierenden noch die Dozierenden konnten sich vorstellen, dass System in jeder Vorlesung einzusetzen, da der Aufwand deutlich erhöht ist. Hier ist auch abzugrenzen, zwischen Vorlesungen, die nur eine Systematik vorstellen und das Verstehen erfordern, und Vorlesungen, in denen tiefergehend gelernt werden soll [7].

Während bei den Studierenden der Einsatz elektronischer Systeme für summative Prüfungen eher abgelehnt wurde, bedeutete dieser sowohl für die Lehrenden als auch die Hochschulleitungen eine Zeitersparnis und bessere Berücksichtigung der Qualitätskriterien (Objektivität, Validität, Reliabilität) gegenüber den bestehenden mündlichen Prüfungen. Daher wurden mittlerweile auch summative elektronische Prüfungen in den Examina eingeführt, die auch von den Studierenden nach einer Eingewöhnungsphase gut akzeptiert werden [10].

Durch die guten Ergebnisse der Studie sollen elektronische Testsysteme an den beteiligten Institutionen verstärkt eingesetzt werden. Dabei soll neben der individuellen Leistungsmessung und dem Feedback für die Studierenden auch die Gruppenleistung als Feedback für die Dozierenden helfen, die Qualität der Lehre zu verbessern. Die Stiftung Tierärztliche Hochschule setzt mittlerweile alle drei Formen elektronischen Prüfens ein. Diagnostisch wird das Auswahlverfahren der Hochschulbewerber durchgeführt, formativ die Lernerfolgskontrollen und interaktive Vorlesungen sowie summativ Abschlussprüfungen und Staatsexamina. Für die formativen Tests wird überlegt, dem Beispiel der Medizinischen Fakultät der Universität Münster (https://medicampus.uni-muenster.de/mars.html) zu folgen und jedem Studierenden einen Transponder für die Studiendauer zur Verfügung zu stellen.

Zusammenfassend lässt sich sagen, dass die Ergebnisse dieser Untersuchung darauf hin deuten, dass sich durch den Einsatz elektronischer Feedback-Systeme eine Qualitätsverbesserung der Lehre erreichen lässt, die auf die Lernerzentrierung des Unterrichts und die erhöhte Motivation aller Teilnehmergruppen zurückzuführen ist.