Gültigkeit des Tests: Bewertung
Die Entwicklung eines Instruments, mit dem sich die Fortschritte der Lernenden feststellen lassen, ist von entscheidender Bedeutung. Diese Aufgabe wird umso wichtiger in den Bereichen, die die Fähigkeit erfordern, die Informationen in Büchern mit den Phänomenen, die sie selbst beobachten können, in Beziehung zu setzen. Hier liegt die Bedeutung von Quizfragen; sie geben Aufschluss über das Verständnis der Lernenden für den Lernstoff. Das vorgeschlagene Geographie-Quiz (siehe Anhang A) kann als recht gut angesehen werden, obwohl es einen besseren thematischen Ablauf gebrauchen könnte.
Inhalt
Die Fragen des Tests spiegeln die wichtigsten Inhalte wider, die in der fünften Klasse in Geografie behandelt werden. Die Fragen im Quiz ermöglichen es zum Beispiel, das Wissen der Lernenden über die Konzepte der Tektonik, Verwitterung und Gebirgsbildung zu ermitteln. Das angegebene Wissen kann als die Schlüsselinformationen betrachtet werden, die die Schüler während ihres fünften Jahres im Geografieunterricht erwerben müssen (Florida Department of Education, 2016). Die angegebenen Themen entsprechen den Standards, die der Bundesstaat Georgia für Schüler der fünften Klasse in Geowissenschaften festgelegt hat (“Grade 5 – Science Georgia Standards of Excellence (GSE)”, 2015).
Prozess des Denkens
Obwohl die Aufgabe die Beantwortung von Multiple-Choice-Fragen beinhaltet, regt sie auch zum Nachdenken an. Insbesondere fordert der Test die Lernenden auf, die Auswirkungen bestimmter Prozesse auf die Erde zu bedenken und bestimmte Informationen miteinander zu verbinden, um die richtige Antwort zu finden. Zum Beispiel erfordert die Frage nach der Liste der Faktoren, die zur Erosion beitragen, analytische Fähigkeiten.
Kohärenz mit den Zuweisungen
Das Quiz (siehe Anhang A) stimmt mit den wesentlichen Informationen überein, die den Schülern im Unterricht vermittelt wurden. Keine der Fragen enthält Daten, die im Unterricht ausgelassen oder nicht behandelt wurden. Daher kann die Aufgabe als vollständig übereinstimmend mit den Aufgaben angesehen werden, die die Schüler bearbeitet haben.
Es könnte jedoch argumentiert werden, dass die Reihenfolge, in der die Fragen dargestellt werden, nicht vollständig mit der Reihenfolge übereinstimmt, in der die Informationen während des Kurses vermittelt wurden. Die festgestellte Änderung wurde jedoch absichtlich vorgenommen, um festzustellen, ob die Lernenden ihre analytischen und kritischen Denkfähigkeiten einsetzen können. Somit kann das Quiz als lehrplankonform angesehen werden, trägt aber gleichzeitig die individuellen Merkmale, die die Lernenden herausfordern.
Verlässlichkeit und Objektivität
Das Quiz enthält nur die Informationen, die in der Lehrveranstaltung dargestellt wurden. Außerdem enthält es nur die Daten, die keine eigenständige Recherche der Studierenden erforderten. Daher kann es als völlig objektiv angesehen werden. Da das Instrument eine klare und genaue Möglichkeit bietet, die Richtigkeit der Antworten der Studierenden zu bestimmen, kann es auch als zuverlässig bezeichnet werden. Da jeder Multiple-Choice-Fragebogen nur eine richtige Antwort enthält und keine Mehrdeutigkeit aufweist, bietet das Instrument eine objektive Möglichkeit, die Kenntnisse und Fähigkeiten der Schüler zu bewerten (Attali & Arieli-Attal, 2015).
Fairness
Keine der Aufgaben enthält Elemente, die von Lernenden mit unterschiedlichem Hintergrund falsch interpretiert werden könnten. Der Test enthält keine Zweideutigkeiten oder unbekannte Konzepte, die es Lernenden mit multikulturellem Hintergrund unmöglich machen würden, ihn zu bestehen. Obwohl die Fragen im Test keine vollständige Kopie der Lehrbuchdefinitionen der erforderlichen Phänomene und Konzepte sind, sind sie einfach und leicht zu verstehen.
Wirtschaftlichkeit und Effizienz
Der Test ist sehr einfach zu konstruieren. Darüber hinaus lässt er sich ebenso leicht in jeder Schule einsetzen. Um ihn im Unterricht einzusetzen, muss man ihn ausdrucken und den Schülern Kopien aushändigen. Nachdem die Lehrkraft das Ziel und das Thema des Tests erklärt hat, kreisen die Schüler die richtige Antwort mit Stiften ein (Virtanen et al., 2017).
Mehrfachbewertung
Der Test kann mehrmals verwendet werden, wenn er am Computer durchgeführt wird. Außerdem kann das Konzept des Tests erfolgreich für andere Fünftklässler wiederverwendet werden. Daher kann er als legitime Testmethode angesehen werden.
Positive Konsequenzen
Obwohl der Test zugegebenermaßen kurz ist, kann er als Entscheidungshilfe für die Lehrkräfte dienen. So können beispielsweise Probleme im Verständnis der Schülerinnen und Schüler bei bestimmten Konzepten oder Prozessen, wie Verwitterung oder Kontinentaldrift, erkannt und entsprechend angegangen werden. Daher sollte die Bewertung als ein legitimes Instrument zur Beurteilung der Fortschritte der Lernenden angesehen werden (Mortimore, 2014).
Auf der Grundlage der oben genannten Merkmale kann die Bewertung als gültig angesehen werden. Ihre Ergebnisse geben Aufschluss über die weitere Wahl der Unterrichtsstrategien und zeigen, in welchen Bereichen Verbesserungen erforderlich sind. Außerdem hilft er, die Fortschritte der Lernenden aus einer objektiven Perspektive zu betrachten. Somit ist die Validität des Tests hoch.
Verbesserung der Validität: Vorschläge
Um die Validität der Bewertung zu erhöhen, sollte man in Betracht ziehen, Erklärungen und Definitionen in die Bewertung aufzunehmen. Zum Beispiel können ESL-Studierende Schwierigkeiten mit bestimmten Begriffen und Konzepten haben (Markus & Borsboom, 2013). Daher kann eine kurze Liste von Definitionen oder eine einfachere Formulierung als notwendige Ergänzung zu den Bewertungsanweisungen angesehen werden.
Referenzen
Attali, Y., & Arieli-Attali, M. (2015). Gamification in assessment: Do points affect test performance? Computer & Bildung, 83, 57-63.
Bildungsministerium von Florida. (2016). Sozialkunde. Web.
Klasse 5 – Wissenschaft Georgia Standards of Excellence (GSE). (2015). Web.
Markus, K. A., & Borsboom, D. (2013). Frontiers of test validity theory: Measurement, causation, and meaning. New York, NY: Routledge.
Mortimore, P. (2014). Der Weg zur Verbesserung. New York, NY: Routledge.
Virtanen, T. E., Pakarinen, E., Lerkkanen, M. K., Poikkeus, A. M., Siekkinen, M., & Nurmi, J. E. (2017). Eine Validierungsstudie des Classroom Assessment Scoring System-Sekundarstufe im finnischen Schulkontext. The Journal of Early Adolescence, 1(1), 0272431617699944.
Anhang A: Test