AKGU 

Ziel war es, dass nach Abschluss des Projektes für Lehrende an der GU die Möglichkeit existiert, kompetenzorientierte, adaptive E-Klausuren gemäß aktuellen wissenschaftlichen Standards in der universitären Lehre einzusetzen.

Rahmendaten

Voraussetzungen

Als Voraussetzung für die Nutzung der kompetenzorientierten E-Klausuren über die KAT-HS-App gilt hauptsächlich, dass die Lehrzielerreichung der Studierenden in der jeweiligen Lehrveranstaltung mit einer Abschlussklausur geprüft wird. Prinzipiell sind solche Klausuren daher fächerübergreifend einsetzbar. Da es für eine adaptive Aufgabenauswahl allerdings notwendig ist, dass Aufgaben automatisch in Echtzeit ausgewertet werden, ist das Klausurenkonzept insbesondere auf Klausuren mit einem automatisch auswertbarem Antwortformat ausgerichtet. 

Zur Verortung der Personen auf einer gemeinsamen Bewertungsskala und zur Qualitätssicherung werden Modelle der Item Response Theory (IRT) genutzt. Zur Schätzung solcher Modelle sollte die Anzahl an Studierenden pro Klausurdurchlauf nicht niedriger als 50 sein. 

Evaluationsergebnisse aus der Pilotphase

Die Evaluation wurde als Studierendenbefragung nach der BW-A-Klausur über den zur Veranstaltung gehörenden Moodle-Kurs durchgeführt. Von N = 694 Personen die an der Klausur teilgenommen haben, haben N = 350 die Evaluation ausgefüllt. Erfragt wurden Einschätzungen der Studierenden zum Aufgabenformat, zum Klausurformat, der Benutzeroberfläche und Bedienbarkeit der Klausursoftware. Jede Evaluationsfrage wurde auf einer 4-stufigen Antwortskala beantwortet (1= trifft gar nicht zu, 2 = trifft eher nicht zu, 3 = trifft eher zu, 4 = trifft völlig zu).

Insgesamt konnten hier zufriedenstellende Ergebnisse erzielt werden. Die Mehrheit der Studierenden schätzte die Übersichtlichkeit (M = 2,99) und Benutzerfreundlichkeit (M = 3,43) der Software als hoch ein. Auch die Form der Klausur als computerbasierte Klausur anstatt papierbasierte Klausur, wurde positiv wahrgenommen (M = 3,23). 

Zudem wurde die Wahrnehmung der Studierenden bezüglich der geprüften Kompetenzbereiche erfragt. Konkret sollte so geprüft werden, ob die mit der Vorlesung anvisierten kognitiven Anforderungsniveaus (Wissen, Verständnis, Anwendung) sowie die verschiedenen Inhaltsbereiche der Vorlesung in angemessenem Umfang geprüft wurden. Auch diese Ergebnisse sind zufriedenstellend. Die Mehrheit der Studierenden ist der Meinung, dass die mit der Vorlesung anvisierten kognitiven Anforderungsniveaus und Inhalte auch in der Klausur geprüft wurden (Wissen: M = 3,1; Verständnis: M = 2,98; Anwendung: M = 2,87). Zudem hatten die Studierenden auch den Eindruck, dass alle Themenblöcke in vergleichbaren Anteilen in der Klausur repräsentiert waren (M = 3,2).