Diagnostik von studentischen Kompetenzen im Hochschulsektor

Im Kontext umfassender Reformen im Hochschulsektor und einer damit einhergehenden zunehmenden Kompetenzorientierung in den letzten Jahren (Wissenschaftsrat, 2015; Schaper, Reis, Wildt, Horvath & Bender, 2012), ist die Diagnostik von studentischen fachlichen und fachübergreifenden Kenntnissen, Fähigkeiten und Fertigkeiten in den aktuellen Forschungsfokus gerückt (Kim & Lalancette, 2013; Zlatkin-Troitschanskaia, Pant, Kuhn, Toepper & Lautenbach, 2016). In Deutschland beginnen zunehmend mehr junge Menschen ein akademisches Studium (BMBF, 2017; Statistisches Bundesamt, 2017) und fast jeder Vierte bzw. an vielen Standorten bereits jeder Dritte bricht das aufgenommene Studium wieder ab (Heublein, 2014). Vor dem Hintergrund stetig steigender Studierendenzahlen, Internationalisierung, überregionaler und interinstitutioneller Mobilität sowie zunehmender Diversifikation von Studienbedingungen, u. a. auch durch die vielfältigen Zugangsmöglichkeiten zum Studium inkl. internationaler Mobilität sowie auch im Kontext von verschiedenen Bedingungen in den einzelnen Bundesländern, auch im Schul- bzw. Abiturbereich, hat die Heterogenität der Studierenden i. S. von zunehmend großen Unterschieden der Studieneingangsvoraussetzungen der Studierendenschaft dramatisch zugenommen.

Diese Entwicklungen im deutschen Hochschulsektor weisen auf die Notwendigkeit hin, objektive, valide und zuverlässige Methoden zur Diagnostik der Kompetenzen von Studierenden in den verschiedenen Studienphasen und Domänen in Betracht zu ziehen (Zlatkin-Troitschanskaia et al., 2016). Mittels auf verschiedenen diagnostischen Verfahren basierenden binnendifferenzierten Angeboten, könnten bereits in der Studieneingangsphase Unterschiede in den Eingangsvoraussetzungen zwischen Studierenden frühzeitig aufgedeckt und angemessen berücksichtigt werden, um so auch den Studienerfolg nachhaltig zu unterstützen (Wissenschaftsrat, 2015; Leutner, Hartig & Jude, 2008). In Ergänzung zu einer validen und aussagekräftigen Eingangsdiagnostik, könnte mittels Lernverlaufsdiagnostik, basierend auf objektiven und zuverlässigen Testverfahren, die Kompetenzentwicklung von Studierenden im Studium valide erfasst werden. Die Daten aus formativen Testungen wären eine signifikante Bereicherung in der bisherigen hochschulischen Prüfungspraxis, die aufgrund ihrer auf die einzelnen Studienmodule isolierten und ihres summativen Charakters kaum Schlüsse über die Lernverläufe im Studium zulässt (Lindner, Strobel & Köller, 2015). Neue technologie-basierte Verfahren, wie adaptives Testen, versprechen hier besondere Potenziale für eine Lernprozessdiagnostik und -analyse (z. B. Souvignier, 2018).

Trotz einer zunehmenden Fokussierung auf die Kompetenzforschung im Hochschulbereich wie es sich bspw. an einer steigenden Zahl an Studien in diesem Bereich zeigen lässt (Zlatkin-Troitschanskaia et al., 2017), mangelt es im deutschsprachigen Raum jedoch immer noch an validierten Testinstrumenten für eine Eingangs- sowie Lernverlaufsdiagnostik im Hochschulbereich. In den letzten Jahren wurden dafür im Kontext des durch das Bundesministerium für Bildung und Forschung (BMBF) geförderten Forschungsprogramms „Kompetenzmodelle und Instrumente der Kompetenzerfassung im Hochschulsektor – Validierungen und methodische Innovationen“¹ neue Messinstrumente zur Erfassung von verschiedenen Kompetenzfacetten, wie Fachwissen und generische Fähigkeiten, entwickelt und nach international gültigen Standards für das psychologische und pädagogische Testen (AERA, NCME & APA, 2014) umfassend validiert. Die meisten Entwicklungs- und Forschungsarbeiten in diesem Kontext haben sich auf die Domäne der Lehrkräftebildung sowie auf verschiedene fachübergreifende Kompetenzfacetten wie bspw. wissenschaftliches Denken fokussiert.

Das vorliegende Themenheft beleuchtet aktuelle Forschungsarbeiten aus diesem Bereich und präsentiert fünf neu entwickelte und umfassend validierte Testverfahren. Für das Forschungsgebiet exemplarisch dargestellt werden drei Messinstrumente aus dem Bereich der Lehrkräftebildung sowie zwei Tests zur domänenübergreifenden Erfassung von generischen Fähigkeiten von Studierenden.

Olga Kunina-Habenicht, Christina Maurer, Kristin Wolf, Doris Holzberger, Maria Schmidt, Theresa Dicke, Ziwen Teuber, Marta Koc-Januchta, Hendrik Lohse-Bossenz, Detlev Leutner, Tina Seidel und Mareike Kunter präsentieren in ihrem Beitrag einen revidierten Test zur Erfassung des bildungswissenschaftlichen Wissens von (angehenden) Lehrkräften – den BilWiss-2.0-Test. Basierend auf den Hinweisen zur psychometrischen Güte des Testinstruments, zeigen die Autorinnen und Autoren weitreichende Potenziale für den Einsatz des BillWiss-Tests in der Lehramtsausbildung auf.

Der darauf folgende Beitrag von Johannes König und Albert Bremerich-Vos stellt einen neu entwickelten und validierten Test zur Erfassung von fachdidaktischem Wissen angehender Deutschlehrkräfte als eine zentrale Facette professionellen Lehrendenwissens der Sekundarstufen I und II vor. Die Ergebnisse zeigen, dass der Test eine reliable und valide Messung bei Probandinnen und Probanden mit verschiedenen Expertiseniveaus (Lehramtstudierende [Bachelor, Master], Referendarinnen und Referendare) erlaubt.

Der anschließende Beitrag von Caroline Felske (geb. Nehls), Johannes König, Gabriele Kaiser, Stefan Klemenz, Natalie Ross und Sigrid Blömeke gibt Einblicke in die Validierung des TEDS-M-Tests zur Erfassung pädagogischen Wissens am Ende der Lehramtsausbildung. Die Autorinnen und Autoren zeigen, dass der Test das Wissen der Lehrkräfte reliabel und differenziert erfasst, und sich eignet, um quantitative und qualitative Aussagen zum pädagogischen Wissen von berufstätigen Mathematiklehrkräften treffen zu können.

Die beiden darauf folgenden Beiträge stellen Befunde zu neu entwickelten und validierten Testinstrumenten zur domänenübergreifenden Erfassung von generischen Fähigkeiten von Studierenden dar.

Der Beitrag von Cornelia Schoor, Carolin Hahnel, Cordula Artelt, Daniel Reimann, Ulf Kröhne und Frank Goldhammer beschreibt die Entwicklung und Skalierung eines neuen computerbasieten Testverfahrens zur Erfassung des Verständnisses multipler Dokumente von Studierenden. Die präsentierten Ergebnisse liefern empirische Belege dafür, dass der Testwert aus dem MDC-Test die fächerübergreifende Fähigkeit von Studierenden wiedergibt, aus verschiedenen Informationsquellen eine integrierte Repräsentation eines inhaltlichen Gegenstandsbereichs zu konstruieren.

Ein weiterer Beitrag des Themenhefts von Hannes Münchow, Tobias Richter, Sarah von der Mühlen, Sebastian Schmid, Katherine E. Bruns und Kirsten Berthold präsentiert Ergebnisse zur Reliabilität und Validität des computergestützten Argumentstrukturtests (AST) zur Erfassung von Verstehen und Bewerten von (informellen) Argumenten in wissenschaftlichen Texten von Studierenden. Die dargestellten Befunde liefern Hinweise zur validen und reliablen Messung dieser Kompetenz mittels des AST.

Insgesamt liegt der Fokus der im Themenheft präsentierten Studien auf der kritischen Betrachtung der neuen Messverfahren mit Blick auf deren Validität als zentrales Gütekriterium pädagogisch-psychologischer Messinstrumente (AERA et al., 2014; Kane, 2013; Testkuratorium, 2009, 2010) und diagnostischer Qualität für die Hochschulpraxis. Die dargestellten Forschungsarbeiten verdeutlichen das Leistungs- und Wirkungspotenzial einer auf validen Testinstrumenten basierenden Diagnostik von studentischen Kompetenzen im Hochschulsektor. Die Beiträge in diesem Themenheft zeigen, wie sich diagnostische Verfahren sinnvoll für den Bereich der Lehrkräfteausbildung sowie domänenübergreifend nutzen lassen.

Wir bedanken uns herzlich bei allen Autorinnen und Autoren für die interessanten Beiträge, bei den Gutachterinnen und Gutachtern für die kritisch-konstruktiven Rückmeldungen zu den Manuskripten, sowie bei der Redaktion für die Betreuung und Unterstützung bei der Erstellung dieses Themenheftes.