Nichtwertung Textverständnis 2015: Unterschied zwischen den Versionen

Version vom 23. Juli 2015, 21:19 Uhr

2 Texte der Aufgabengruppe „Textverständnis“ mit je 6 Einzelfragen waren vorher bekannt, einer nicht. Auch 2015 sind diese Aufgaben vergleichbar schwer wie aufgrund der Entwicklungsdaten zu erwarten, es zeigen sich keine statistischen Auffälligkeiten für Teilgruppen. Zusätzliche Ursache kann sein, dass in den übereinstimmenden Texten in diesem Jahr Abweichungen und auch Fehler im Trainingsmaterial enthalten sind. Dennoch ist die Komplexität der Aufgaben so hoch, dass sie nicht nach dem Test aus dem Gedächtnis reproduziert sein können. Der Ausschluss ist "formaljuristisch" zu begründen, dass die Aufgaben in einer zu ähnlichen Struktur einer unbekannten Teilnehmerzahl vorher bekannt waren (auch ohne dass sich dadurch Vorteile statistisch nachweisen lassen).

Um zu gewährleisten, dass die Zulassung unter gleichen Bedingungen für alle auf der Basis der Eignung erfolgt, haben swissuniversities und ZTD nach Konsultation des deutschen Kooperationspartners beschlossen, die gesamte Aufgabengruppe „Textverständnis“ aus Sicherheitsgründen aus der Wertung herauszunehmen, um mögliche bzw. auch hypothetische Verstösse gegen die Gleichbehandlung auszuschliessen. Da alle 10 Aufgabengruppen in getrennten "Zeitfenstern" bearbeitet worden sind, werden die Bearbeitungsbedingungen der gewerteten 9 nicht dadurch beeinflusst.

In einer der beiden Parallel-Formen des EMS wären die 6 zu wertenden Aufgaben am Ende, in der anderen in der Mitte der Aufgabengruppe zu bearbeiten. Trotz der Instruktion beim EMS, möglichst alle Aufgaben mit gleicher Aufmerksamkeit zu bearbeiten, ist uns bekannt, dass einige Personen sich lieber intensiver den ersten beiden Texten widmen und den dritten Text mit etwas weniger Aufmerksamkeit bearbeiten. Dadurch würden 50% der Personen mit dem einzigen gewerteten Text erst an dritter Stelle im Mittel 0.5 Punkte weniger erzielen als diejenigen, die den Text an zweiter Stelle vorfanden. Zugleich ist durch Nichtwertung aller Aufgaben auch der hypothetische Einwand entkräftet, dass Personen mit Vorkenntnissen in diesen Aufgaben irgendwelche Zeitvorteile bei der Lösung der 6 für alle unbekannten Aufgaben haben könnten.

Der EMS weist auch mit nur 9 von 10 Aufgabengruppen eine für die Zulassung nach der Eignung ausreichende Differenzierung auf: Der prognoserelevante Faktor „Schlussfolgerndes Denken", zu welchem „Textverständnis“ gehört, ist mit 4 statt 5 Aufgabengruppen und 80 statt 100 Aufgaben immer noch der am meisten repräsentierte Faktor, bis 2004 umfasste er bekanntlich ebenfalls nur 4 Aufgabengruppen mit nur 78 Aufgaben. Die „Schwankungsbreite“ (frühere und auch der Vorbehalt für zukünftige Änderungen zum Zwecke der Weiterentwicklung) wurde nicht verlassen – der Test wurde und wird bekanntlich fortlaufend weiterentwickelt.

„Textverständnis“ als wichtige Anforderung der Studierfähigkeit ist auch noch mehrfach im Test repräsentiert: „Diagramme und Tabellen“, „Mechanisch-technisches-Grundverständnis sowie „Planen und Organisieren“ erfordern auch eine hohe Lesekompetenz, um die dortigen Aufgaben zu lösen (das ist auch einer der Gründe, dass sie statistisch einen einheitlichen Faktor bilden).

Die Äquivalenz der Punktwerte mit und ohne „Textverständnis“ beträgt als sogenannte Paralleltest-Reliabilität 0.99. Die Rangreihen nach den Punkwerten differenzieren daher praktisch identisch und verschieben sich nicht (ab 0.85 werden Messungen allgemein als äquivalent angesehen).

Weder statistisch, noch aus der Analyse des mitterweile sehr umfangreichen bei uns verfügbaren und jetzt neu übergebenen Materials der Trainingsanbieter lassen sich weitere Aufgaben finden, deren Ausschluss notwendig wäre.

Wir bedauern diesen Zwischenfall und sind genauso verärgert wie die Kandidatinnen und Kandidaten, die mit einem reibungslosen Zulassungsverfahren gerechnet haben. Nach Abwägung aller Vor- und Nachteile ist diese Lösung aber alternativlos die beste, um die Chancengleichheit für alle wiederherzustellen. Ein Neuansetzen des EMS im September, eine Zulassung aller Personen sind als Alternativen weder notwendig, noch realistisch und auch nicht verhältnismässig, da die gewerteten Ergebnisse unter gleichen Bedingungen zustande gekommen sind und dank der hohen Äquivalenz diesen bezüglich der Erfassung der Eignung voll entsprechen.