TBA II
Weiterentwicklung der ländergemeinsamen Testinfrastruktur zur adaptiven und formativen Administration und Auswertung onlinebasierter Verfahren zur Diagnostik und Leistungsfeststellung – Technologiebasiertes Assessment
Projektleitung
Wissenschaftliche Mitarbeitende
Studentische Mitarbeitende
- Katharina Wonesch
Laufzeit
1. Juli 2023 - 31. Dezember 2026
Förderung
Weitere Informationen
Projektbeschreibung
Worum geht es?
Das frei verfügbare IQB-Testsystem umfasst Webanwendungen zur Erstellung, Durchführung und Aufbereitung digitaler Tests und ist vielseitig einsetzbar (s. TBA I). Ziel des TBA II Projektes ist die Erweiterung des IQB-Testsystems um Funktionen zum adaptiven und formativen Testen. Beim adaptiven Testen passt sich das Anforderungsniveau der Aufgaben an das individuelle Kompetenzniveau der Schüler*innen an (Frey, 2012; Wainer & Dorans, 2000). Formatives Testen dient der lernbegleitenden Kompetenzerfassung durch wiederholte Testungen, um Lernverläufe und -entwicklungen sichtbar zu machen (Schmidt, 2020). Alle IQB-Webanwendungen können über standardisierte Schnittstellen in länderspezifische Portale/Lernplattformen integriert werden und sind umfassend dokumentiert.
Was wird untersucht?
- Im Projekt TBA II wird ein sogenanntes Multi-Stage-Testdesign erprobt, bei dem unterschiedlich schwierige Testmodule anhand der zuvor bearbeiteten Aufgaben automatisch ausgewählt werden. Zudem werden verschiedene Verfahren zur automatischen Kodierung von Freitextantworten entwickelt und erprobt.
- Mittels formativer Basiskompetenztests, die im Projektzeitraum entwickelt, normiert und prototypisch implementiert werden, werden basale Kompetenzen und Fähigkeiten in den Blick genommen (z. B. Lesegeschwindigkeit oder Zahl- und Operationsverständnis), die grundlegend für das Erreichen der Mindeststandards am Ende der Primarstufe sind (vgl. SWK, 2022).
Das Projekt gliedert sich in drei Phasen:
Weiterentwicklung der Webanwendungen:
- Entwicklung geeigneter adaptiver Multi-Stage-Testdesigns und Abschätzung der Messeffizienzsteigerung;
- Integration der Funktionserweiterungen für adaptives und formatives Testen in die IQB-Webanwendungen;
- Implementation von Kodierverfahren, Verlinkungen von Messzeitpunkten;
- Weiterentwicklung von Rückmeldeformaten
Weiterentwicklung der Schnittstellen:
- Entwicklung und Erprobung einer Metadateninfrastruktur, die für länderspezifische Rückmeldungen genutzt werden kann;
- API-Entwicklung entsprechend der Schnittstellenspezifikation für automatische Kodier- und Scoringprozesse;
- Spezifikation und Weiterentwicklung der Programmkomponentendaten für automatische Kodierung und Steuerungsstrategien zum Routing
Test-, Optimierungs- und Transferphase:
Iterative technische und empirische Erprobung und Optimierung des adaptiven Multi-Stage-Online-Testsystems und angepasster Rückmeldeformate sowie technische Erprobung des formativen Testsystems und angepasster Rückmeldeformate im Schulkontext zu drei Messzeitpunkten, einschließlich der Verknüpfung mehrerer Messzeitpunkte.
Welche Ergebnisse werden erwartet?
Zum Ende der Projektlaufzeit stehen den Ländern optimierte prototypische Webanwendungen des weiterentwickelten IQB-Online-Testsystems sowie erprobte und optimierte Rückmeldeformate zur Verfügung. Ab Januar 2027 können die Länder zudem die IQB-Basiskompetenztests für die Unterrichtsentwicklung nutzen.
Frey, A. (2012). Adaptives Testen. In H. Moosbrugger & A. Kelava (Hrsg.), Testtheorie und Fragebogenkonstruktion (S. 275–293). Springer Berlin Heidelberg. https://doi.org/10.1007/978-3-642-20072-4_11
Henschel, S., Weirich, S., Becker, B., Schnitzler, C., Koelm, J., & Mechtel, M. (2021). Schlusssachbericht des Projekts „Technologiebasiertes Assessment (TBA) – Machbarkeitsstudie“. IQB.
KMK (2016) = Sekretariat der Ständigen Konferenz der Kultusminister der Länder in der Bundesrepublik Deutschland (2016). Strategie der Kultusministerkonferenz "Bildung in der digitalen Welt" (Beschluss der KMK vom 08.12.2016 i.d.F. vom 07.12.2017).
Schmidt, C. A. (2020). Formatives Assessment in der Grundschule: Konzept, Einschätzungen der Lehrkräfte und Zusammenhänge. Springer VS. https://doi.org/10.1007/978-3-658-26921-0
Wainer, H., & Dorans, N. J. (2000). Computerized adaptive testing: A primer (2nd ed). Lawrence Erlbaum Associates.
TBA II
Weiterentwicklung der ländergemeinsamen Testinfrastruktur zur adaptiven und formativen Administration und Auswertung onlinebasierter Verfahren zur Diagnostik und Leistungsfeststellung – Technologiebasiertes Assessment