Dr. Christian Spoden, Prof. Andreas Frey, Aron Fink und Patrick Naumann haben einen Beitrag über kompetenzorientierte elektronische Hochschulklausuren im Lehramtsstudium verfasst (siehe auch hier), welcher nun im Waxmann Sammelband „Bildung, Schule, Digitalisierung“ (Hrsg.: Kaspar, Becker-Mrotzek, Hofhues, König, & Schmeinck) veröffentlicht wurde.

In dem Beitrag wird ein Konzept für adaptive, kompetenzorientierte E-Klausuren vorgestellt (KAT-HS) und die Implementation solcher E-Klausuren in der Hochschullehre beschrieben. Mit dem KAT-HS Konzept können Probleme typischer Hochschulklausuren überwunden und Forderungen aus der Bologna-Reform umgesetzt werden.

Der Beitrag ist ab jetzt frei abrufbar unter:

Spoden, C., Frey, A., Fink, A. & Naumann, P. (2020). Kompetenzorientierte elektronische Hochschulklausuren im Studium des Lehramts. In K. Kaspar, M. Becker-Mrotzeck, J. Hofhues, J. König & D. Schmeinck (Hrsg.), Bildung, Schule und Digitalisierung. Waxmann.

Ab jetzt wird der Workshop zum KAT-HS-Konzept über diese Seite als Video-on-Demand kostenlos zur Verfügung gestellt.

Der Workshop mit dem Titel „Hochschulklausuren besser machen: Einführung in die Erstellung, Administration und Auswertung kompetenzorientierter Klausuren am Computer“ fand am 08. Oktober 2019 statt und wurde per Video aufgezeichnet. Wir haben die Videos geschnitten, bearbeitet und ergänzt um einen kompakten und lehrreichen Online-Workshop zur Konstruktion fairer Klausuren zu konzipieren.

Im Video-Workshop wird ein umfassender Überblick zu direkt umsetzbaren Verfahren zur Erstellung, Nutzung und Auswertung hochwertiger kompetenzorientierter elektronischer Klausuren gegeben.

Behandelt werden:

• die Konkretisierung von Lernzielen,
• die Überführung der Lernziele in Kompetenzanforderungen,
• die Entwicklung von Klausuraufgaben,
• das Setzen von Notenstufen und Bestehensgrenzen,
• die Auswertung von Klausuren,
• die Identifikation problematischer Klausuraufgaben,
• das Konstanthalten des Bewertungsmaßstabes über mehrere Klausuranwendung,
• die Rückmeldung von Klausurergebnissen und
• das computerbasierte Klausursystem KAT-HS und dessen Konfiguration.

Der Video-Workshop wurde von Patrick Naumann, Andreas Frey, Christian Spoden und Aron Fink erstellt. Registrierte Nutzer können die Videos im Download-Bereich dieser Seite kostenlos ansehen.

Am 18. September 2019 fand das Symposium „Anwendungen der Item-Response-Theorie (IRT)“ im Rahmen der 14. Tagung der Fachgruppe Methoden & Evaluation (FGME 2019) der Deutschen Gesellschaft für Psychologie (DGPs) in Kiel statt. Bei dem Symposium wurde ein Einblick in die Anwendungen der IRT in verschiedenen diagnostischen Anwendungskontexten gegeben. Patrick Naumann präsentierte die Ergebnisse einer Simulationsstudie mit dem Titel „Itemparameter-Drift in kleinen Stichproben“, bei der die Leistungsfähigkeiten dreier Methoden zur Detektion von Itemparameter-Drift bei Nutzung der kontinuierlichen Kalibrierungsstrategie (KKS) gegenübergestellt wurden. Im Beitrag „Berücksichtigung von Itempositionseffekten beim computerisierten adaptiven Testen (CAT) mit der kontinuierlichen Kalibrierungsstrategie“ berichtete Prof. Dr. Andreas Frey umfassende Ergebnisse zur Leistungsfähigkeit der KKS unter Berücksichtigung von Itempositionseffekten. Dr. Christian Spoden hielt einen Vortrag mit dem Titel „Adaptive und partiell-adaptive Messung individueller Veränderung“, in welchem er über die Anwendung von CAT bei Veränderungsmessungen von Lernverläufen berichtete. Weitere Informationen zur FGME finden Sie hier.

Vom 10. bis 13. Juni 2019 fand die Konferenz der International Association for Computerized Adaptive Testing (IACAT) in Minneapolis statt. Unter dem Titel „Consideration of Item Position Effects in CAT with the Continuous Calibration Strategy” präsentierte Andreas Frey dort Ergebnisse zu Item Positionseffekten bei der kontinuierlichen Kalibrierungsstrategie, welche er gemeinsam mit Aron Fink und Christian Spoden untersuchte. Die kontinuierliche Kalibrierungsstrategie (Fink et al., 2018) ermöglicht die Verwendung von computerisierten adaptiven Tests auch in kleinen Stichproben. Auf der IACAT-Konferenz wurden Ergebnisse einer Monte-Carlo Simulationsstudie präsentiert, bei der die Tauglichkeit der kontinuierlichen Kalibrierungsstrategie bei Vorliegen von Item Positionseffekten untersucht wurde.

Weitere Informationen zur IACAT-Konferenz finden Sie unter http://iacat.org/.

KAT-HS auf der 7. Tagung der Gesellschaft für emprische Bildungsforschung (GEBF) mit zahlreichen Beiträgen vertreten. Dr. Christian Spoden aus dem Projekt KAT-HS und Franziska Wenzel aus dem Projekt „Computerbasiertes adaptives Testen im Studium (CaTS)” geben im gemeinsam organiserten Symposium ” Methodische Entwicklungen, Akzeptanzbefunde und Implementationsstrategien zu computerbasierten, formativen und summativen Assessements in der Hochschul- und Erwachsenenbildung” einen differenzierten Einblick zu akutellen Entwicklungen im Bereich des computerisierten adaptiven Testens in der Hochschule und der Erwachsenenbildung. Dr. Christian Spoden leitete in diesem Symposium mit seinem Vortrag “Psychometrische Optimierungen bei kontinuierlich kalibrierten Hochschulklausuren” Empfehlungen für die Konfiguration der kontinuierlichen Kalibrierungsstrategie (Fink, Born, Spoden & Frey, 2018) ab. Auch Aron Fink hielt in diesem Symposium einen Vortrag mit dem Titel “Einflussfaktoren auf die Intention zur Nutzung (adaptiver) E-Klausuren seitens Hochschullehrender”. Prof. Dr. Andreas Frey präsentierte in seinem Vortrag “Nutzung computerisierten adaptiven Testens bei wiederkehrenden Erhebungen mit kleinen Stichproben” wie man von den Vorteilen computerisierten adaptiven Testens auch unter eher ungünstigen Rahmenbedingungen profitieren kann. Shirin Esmaeili-Bijarsari hielt einen Vortrag über den Einfluss verschiedener Klauusurformate auf das emotionale Erleben von Klausuren seitens Studierender.