Erst nachdenken, dann anklicken!

Einige Ergebnisse psychologischer Untersuchungen deuten darauf hin, es sei unter bestimmten Bedingungen für das Behalten förderlicher, auf eine Frage selbst eine Antwort zu produzieren, statt aus einer Auswahl von Alternativen die korrekte Lösung wieder zu erkennen. Der Short Answer Aufgabentyp zwingt den Lerner dazu, sich intensiv um ein Erinnern zu bemühen, erfordert mehr geistige Anstrengung als Wiedererkennen und führt im Erfolgsfalle zu einem verstärkten Behalten. Insofern wäre es nützlich, für bestimmte Übungszwecke den Short Answer Aufgabentyp zugrunde zu legen. Da dieser aber Schreibarbeit erfordert und manchmal etwas höhere Anforderungen an die Auswertung stellt, ergibt sich die Frage, wie man die Vorteile dieses Aufgabentyps nutzen könnte, ohne die Nachteile in Kauf nehmen zu müssen. Eine Variante wäre etwa, die Antwort nur im Geiste beantworten zu lassen und auf Wunsch dann die korrekte Antwort rückzumelden, z. B.:

Wer hat die Relativitätstheorie erfunden ? Albert Einstein
Hierbei muss der Lerner die Korrektheit selbst überprüfen. Ein möglicher Nachteil könnte darin vermutet werden, manche Lerner würden diese Art der Fragestellung nicht ernst nehmen und direkt die Lösung anfordern.

Nachfolgende Aufgabenkonstruktion stellt eine Mischung aus Short-Answer und MC dar. Zunächst sollte der Lerner über die Frage nachdenken und eine Antwort mental vorbereiten. Danach kann er durch Mausklick die MC-Aufgabe anfordern und seine Antwort anklicken, die dann objektiv ausgewertet wird. Park, J. (2005) konnte den Vorteil einer ähnlichen Variante [Computerized Modified Multiple-Choice (CMMT)] gegenüber einfachen MC-Aufgaben in 2 Experimenten belegen und verweist auf ein drittes erfolgreiches Experiment. Leider fehlt in diesen Experimenten ein Vergleich zum echten Short Answer- Aufgabentyp. Bei Park ist der gesamte Test in bestimmter Weise aufgebaut und die Antwortzeit für die MC-Aufgabe beschränkt. Die Rückmeldungen folgen erst nach Beantwortung aller Aufgaben.
Hier wird lediglich das Grundprinzip verdeutlicht: "The crux of this manipulation is to force students to solve the problem as if they were solving an open-ended question but to respond in a multiple-choice format." Park, J. (2005).
Einen zusätzlichen Vorteil dieses Aufgabentyps für Übungszwecke sehe ich darin, Fragen zu ermöglichen, die eventuell mehr oder ungewöhnlichen Text als Antwort verlangen und sehr schwer automatisiert mit Short Answer auf Richtigkeit überprüft werden können.

Aufgabenbeispiele

Schaap (2013) untersuchte die Auswirkungen zweier MC-Test-versionen [generate response versus direct choice] mit KCR-Feedback auf das langfristige Behalten. In der Lernaneignungsphase lasen die Probanden 20 Minunten lang zunächst einen Text über den Mount Pinatubo (Umfang ca. 3000 Worte). Danach wurden die Probanden nach Zufall auf nachfolgende Testversionen aufgeteilt:

generate response MC [zunächst die Short Answer Frage schriftlich beantworten, dann die MC-Aufgabe anklicken, anschließend Feedback]
direct choice MC condition [übliches MC-Format mit Rückmeldung der korrekten Antwort]
restudying. Die korrekt beantworteten MC-Fragen studieren

Die Bearbeitung jeder Aufgabe war Zeit beschränkt [insgesamt 25 Sekunden] und führte dazu, dass beide Testvarianten sowie die Studiermethode gleiche Bearbeitungszeiten aufwiesen. Als Lernerfolgtest diente ein klassischer MC-Test mit identischen Fragen wie im Übungstest, der allen Probanden eine Woche später ohne Zeitbegrenzung zur Bearbeitung vorgelegt wurde. Zwischen beiden Testversionen sowie der reinen Studiervariante ließen sich keinerlei Unterschiede feststellen. Die Probanden der generate response MC- Gruppe empfanden die Testbearbeitung jedoch signifikant anstrengender als die Probanden der übrigen Lernmethoden.

Schaap (2013) referierte auch die Studien von Crocker & Schmitt (1987) sowie Sensenig (2010, experiment 2a and 2b), die ebenfalls keine Vorteile der speziellen MC-Methode nachweisen konnten.

Smith und Karpicke (2013) Überprüften in insgesamt 4 Experimenten die Wirksamkeit von 4 Übungsmethoden

Reines Studieren
MC mit KCR Feedback
Short Answer mit KCR Feedback
Hybrid format questions (erst Short Answer beantworten, dann MC mit Feedback)

Zunächst mussten die Probanden einen Text oder mehrere Texte lesen. Anschließend bearbeiteten sie die Übungsmethoden. Nach einer Woche folgte der Behaltenstest in Form von identischen- sowie Inferenzfragen im MC- und Short-Answer-Format.

Insgesamt deuten die Ergebnisse aller Experimente ziemlich konsistent auf vergleichbare Behaltensleistungen aller 3 Testübungsmethoden hin. MC-Aufgaben führten gelegentlich zu etwas besseren Erfolgsquoten bei Inferenzfragen. Die Autoren machten auch Angaben zu den Übungszeiten der einzelnen Aufgabenformate, wobei sie aber nur die Zeiten für die korrekten Antworten mitteilten. Erwartungsgemäß erforderte die Bearbeitung der MC-Fragen weniger Übungszeit als die der Short-Answer-Aufgaben. Da das Hybrid-questing-format beide Aufgabentypen vereinigt, wundert es nicht, dass bei dieser Methode die Bearbeitungszeit noch deutlich höher ausfiel. Unter dem Gesichtspunkt einer effizienten Übung bietet der Aufgabentyp "erst Short-Answer, dann MC mit KCR-Feedback" den Ergebnissen dieser Studie zufolge eher Nachteile gegenüber den einfachen Aufgabenformaten.