Vignettentest zur Erfassung des fachdidaktischen Wissens im Leseunterricht bei angehenden Lehrkräften
Abstract
Zusammenfassung. Es wird ein standardisiertes vignettenbasiertes Testverfahren zur Erfassung des fachdidaktischen Wissens im Leseunterricht bei angehenden Lehrkräften vorgestellt. Basierend auf Evidenzen der lesedidaktischen und kognitionspsychologischen Forschung wurden hierzu Unterrichtsvignetten erstellt. In diesen Vignetten werden authentische Situationen aus dem Leseunterricht beschrieben, die hinsichtlich einer fachdidaktisch relevanten Fragestellung in einem geschlossenen Antwortformat bewertet wurden. Das Testinstrument wurde 576 Deutschlehramtsstudierenden aller Semester vorgelegt (Alter: M = 23.08 Jahre, SD = 3.32). Der Vignettentest wurde mit dem Partial Credit Modell skaliert. Die Analysen zur Datenstruktur sprechen für ein eindimensionales Modell des fachdidaktischen Wissens im Leseunterricht; die Infit- und Outfitstatistiken für die verbleibenden Vignetten weisen auf eine gute Passung der Vignetten zum Modell hin (Werte zwischen 0.98 und 1.00, alle p ≤ .05 für alle Modelle). Die Verteilung der Itemkategorieschwellen und der Personenparameter werden graphisch illustriert. Die Ergebnisse zur Datenstruktur und zur Skalierung sind als vielversprechend zu bezeichnen und sollen in nachfolgenden (längsschnittlichen) Analysen ergänzt und präzisiert werden.
Abstract. A standardized test to assess the pedagogical content knowledge of pre-service teachers in the reading domain is introduced. Based on findings in cognitive psychology and reading research, so-called vignettes were constructed. These vignettes describe authentic situations in reading classes that were rated by pre-service teachers using closed-ended questions in a rating scale format. Thus, vignette testing should allow for a situated assessment of pedagogical content knowledge in the reading domain. Empirical evidence from mathematics and natural sciences supports the assumption that vignette testing is appropriate for assessing pedagogical content knowledge. Since equivalent findings are still missing in reading research, this study aimed at closing this gap. The sample of the main study comprised 576 pre-service teachers (age: M = 23.08 years, SD = 3.32). The vignette test was scaled using the partial credit model. The analyses of the data structure support a one-dimensional model and the infit and outfit indices for the vignettes are good (values between 0.98 and 1.00, all p values ≤ .05); the distributions of person abilities and item difficulties are illustrated graphically. The results on the psychometric properties of the vignette test appear to be promising and should therefore be complemented and specified in further (longitudinal) studies.
Literatur
(2012). The Rasch rating model and the disordered threshold controversy. Educational and Psychological Measurement, 72, 547 – 573. doi: 10.1177/0013164411432166
(2014). Standards for educational and psychological testing. Washington, DC: American Educational Research Association.
(2015). An NCME instructional module on item-fit statistics for item response theory models. Educational Measurement: Issues and Practice, 34 (3), 39 – 48. doi: 10.1111/emip.12067
(1973). A goodness of fit test for the Rasch model. Psychometrika, 38, 123 – 140. doi: 10.1007/BF02291180
(2010).
Förderung von Lesekompetenz als Aufgabe aller Fächer. Forschungsergebnisse und Anregungen für die Praxis . In H. RuchHrsg., ProLesen – auf dem Weg zur Leseschule. Leseförderung in den gesellschaftswissenschaftlichen Fächern, Aufsätze und Materialien aus dem KMK-Projekt „ProLesen“ (S. 13 – 36). Donauwörth: Auer.(2009). Diagnostische Kompetenz von Lehrkräften. Zeitschrift für Pädagogische Psychologie, 23, 157 – 160. doi: 10.1024/1010-0652.23.34.157
(2004).
Die PISA-Studie zur Lesekompetenz: Überblick und weiterführende Analysen . In U. SchiefeleC. ArteltW. SchneiderP. StanatHrsg., Struktur, Entwicklung und Förderung von Lesekompetenz. Vertiefende Analysen im Rahmen von PISA 2000 (S. 139 – 168). Wiesbaden: VS Verlag für Sozialwissenschaften.(2007). Werden angehende Lehrpersonen durch das Studium kompetenter? Kompetenzaufbau und Standarderreichung in der berufswissenschaftlichen Ausbildung an drei Pädagogischen Hochschulen in der Schweiz und in Deutschland. Unterrichtswissenschaft, 35, 15 – 47.
(2006). Stichwort: Professionelle Kompetenz von Lehrkräften. Zeitschrift für Erziehungswissenschaft, 4, 469 – 520.
(2011).
Das Kompetenzmodell von COACTIV . In M. KunterJ. BaumertW. BlumU. KlusmannS. KraussM. NeubrandHrsg., Professionelle Kompetenz von Lehrkräften. Ergebnisse des Forschungsprogramms COACTIV (S. 29 – 53). Münster: Waxmann.(2013).
Professionelle Kompetenz von Lehrkräften . In I. GogolinH. KuperH. -H. KrügerJ. BaumertHrsg., Stichwort: Zeitschrift für Erziehungswissenschaft (S. 277 – 337). Wiesbaden: Springer Fachmedien. doi: 10.1007/978-3-658-00908-3_13(2010). Teachers’ mathematical knowledge, cognitive activation in the classroom, and student progress. American Educational Research Journal, 47, 133 – 180. doi: 10.3102/0002831209345157
(2007). Lesekompetenz – Leseleistung – Leseförderung. Grundlagen, Modelle und Materialien. Seelze-Velber: Klett, Kallmeyer.
(2010). TEDS-M 2008. Professionelle Kompetenz und Lerngelegenheiten angehender Mathematiklehrkräfte für die Sekundarstufe I im internationalen Vergleich. Münster: Waxmann.
(2010). Physikalisch-fachdidaktisches Wissen: Was kommt in der Praxis an? Praxis der Naturwissenschaften – Physik in der Schule, 5 (95), 5 – 8.
(2012). IGLU 2011: Lesekompetenzen von Grundschulkindern in Deutschland im internationalen Vergleich. Münster: Waxmann. doi: 10.5159/IQB_IGLU_2011_v1
(2013).
Professionelles Wissen im Studienverlauf: Lehramt Deutsch . In S. BlömekeA. Bremerich-VosG. KaiserG. NoldH. HaudeckJ.-U. KeßlerHrsg., Professionelle Kompetenzen im Studienverlauf Weitere Ergebnisse zur Deutsch-, Englisch- und Mathematiklehrerausbildung aus TEDS-LT (S. 47 – 72). Münster: Waxmann.(2013). Erfassen professioneller Kompetenzen für den naturwissenschaftlichen Unterricht – Ein Vignettentest mit authentisch komplexen Unterrichtssituationen und offenem Antwortformat. Unterrichtswissenschaft, 41, 306 – 329.
(2011). Einführung in die Test- und Fragebogenkonstruktion (Psychologie, 3., aktual. und erw. Aufl.). München: Pearson Studium.
(2014). Improving reading comprehension in reading and listening settings: The effect of two training programmes focusing on metacognition and working memory. The British Journal of Educational Psychology, 84, 194 – 210. doi: 10.1111/bjep.12022
(2015). Package „mirt“. Zugriff am 21. 01. 2016. Verfügbar unter https://cran.r-project.org/web/packages/mirt/mirt.pdf.
(1997). Local dependence indexes for item pairs using item response theory. Journal of Educational and Behavioral Statistics, 22, 265 – 289.
(1991). Pedagogical content knowledge: A tentative model for teacher preparation. Zugriff am 04. 04. 2016. Verfügbar unter http://files.eric.ed.gov/fulltext/ED340683.pdf.
(1999). A comparison of three polytomous item response theory models in the context of testlet scoring. Journal of Outcome Measurement, 3, 1 – 20.
(1985). Intrinsic motivation and self-determination in human behavior. New York: Plenum.
(2013). Pedagogical content knowledge: A systematic review of the way in which the concept has pervaded mathematics educational research. Teaching and Teacher Education, 34, 12 – 25. doi: 10.1016/j.tate.2013.03.001
(2010). Evolution im Unterricht: Eine Studie über fachdidaktisches Wissen von Lehrerinnen und Lehrern. Zeitschrift für Didaktik der Naturwissenschaften, 16, 7 – 21.
(2015). Lokale Abhängigkeit von Items im TestDaF-Leseverstehen. Diagnostica, 61, 93 – 106. doi: 10.1026/0012-1924/a000134
(2000). Item response theory for psychologists. Mahwah, NJ: Lawrence Elbaum Associates.
(1995). The generic nature of pedagogical content knowledge among college professors. Teaching and Teacher Education, 11 (3), 293 – 306. doi: 10.1016/0742-051X(94)00030-A
(2001). Oral reading fluency as an indicator of reading competence: A theoretical, empirical, and historical analysis. Scientific Studies of Reading, 5, 239 – 256. doi: 10.1207/S1532799XSSR0503_3
(1977). Kernkonzepte des Schullernens. Zeitschrift für Entwicklungspsychologie und Pädagogische Psychologie, 9, 207 – 228.
(2013).
Das Advokatorische Messverfahren: Die stellvertretende Art Kompetenzen zu messen . In F. OserT. BauderP. SalzmannS. HeinzerHrsg., Ohne Kompetenz keine Qualität. Entwickeln und Einschätzen von Kompetenzprofilen bei Lehrpersonen und Berufsbildungsverantwortlichen (S. 139 – 168). Bad Heilbrunn: Klinkhardt-Verlag.(2015). Unterrichtsqualität und Lehrerprofessionalität (6. Auflage). Seelze-Velber: Klett / Kallmeyer.
(2016). Lehrerberuf und Lehrerbildung. Bad Heilbrunn: Klinkhardt.
(2013).
Lesekompetenz in PISA 2012: Veränderungen und Perspektiven . In M. PrenzelC. SälzerE. KliemeO. KöllerHrsg., Pisa 2012: Fortschritte und Herausforderungen in Deutschland (S. 217 – 244). Münster: Waxmann.(2009). Pedagogical content knowledge in science education: Perspectives and potential for progress. Studies in Science Education, 45, 169 – 204. doi: 10.1080/03057260903142285
(2015). Kontextualisierte Erfassung von Lehrerkompetenzen. Zeitschrift für Pädagogik, 61, 305 – 309.
(2013). Pädagogisches Professionswissen im Studienverlauf. In S. BlömekeA. Bremerich-VosG. KaiserG. NoldH. HaudeckJ.-U. KeßlerHrsg., Professionelle Kompetenzen im Studienverlauf. Weitere Ergebnisse zur Deutsch-, Englisch- und Mathematiklehrerausbildung aus TEDS-LT (S. 145 – 166). Münster: Waxmann.
(2015). Wie situationsbezogen ist die Kompetenz von Lehrkräften? Zeitschrift für Pädagogik, 61 (3), 310 – 327. doi: 10.3262/ZP1503310
(2011).
Konzeptualisierung und Testkonstruktion zum fachbezogenen Professionswissen von Mathematiklehrkräften . In M. KunterJ. BaumertW. BlumU. KlusmannS. KraussM. NeubrandHrsg., Professionelle Kompetenz von Lehrkräften. Ergebnisse des Forschungsprogramms COACTIV (S. 135 – 161). Münster: Waxmann.(2014).
Das Experten-Paradigma in der Forschung zum Lehrerberuf . In E. TerhartHrsg., Handbuch der Forschung zum Lehrerberuf (2., überarb. und erw. Aufl., S. 241 – 261). Münster: Waxmann.(2008). Die Untersuchung des professionellen Wissens deutscher Mathematik-Lehrerinnen und -Lehrer im Rahmen der COACTIV-Studie. Journal für Mathematikdidaktik, 29, 233 – 258. doi: 10.1007/BF03339063
(2011). Professionelle Kompetenz von Lehrkräften. Ergebnisse des Forschungsprogramms COACTIV. Münster: Waxmann.
(2013). Cognitive Activation in the Mathematics Classroom and Professional Competence of Teachers. Results from the COACTIV Project. Boston, MA: Springer.
(2004). Konzepte von Deutschunterricht. Eine Studie zu individuellen didaktischen Theorien von Lehrerinnen und Lehrern. Wiesbaden: VS Verlag für Sozialwissenschaften.
(2013). Rethinking strategy instruction: Direct reading strategy instruction versus computer-based guided practice. Journal of Research in Reading, 36, 223 – 240. doi: 10.1111/j.1467-9817.2011.01505.x
(1982). A Rasch model for partial credit scoring. Psychometrika, 47, 149 – 174. doi: 10.1007/BF02296272
(1997). The partial credit model. In W. J. van der Linden & R. K. Hambleton (Eds.), Handbook of modern item response theory (pp. 101 – 121). New York: Springer.
(2009). Systematic reading training in the family: Development, implementation, and initial evaluation of the Berlin Parent-Child Reading Program. Learning and Instruction, 19, 79 – 95. doi:0.1016/j.learninstruc.2008.02.002
(2015).
Lese- und Sprachförderung – Theoretische und empirische Implikationen für die Unterrichtsentwicklung . In H. -G. RolffHrsg., Handbuch der Unterrichtsentwicklung (S. 44 – 61). Weinheim, Basel: Beltz Juventa.(2009).
Förderung von Lesekompetenz . In W. LenhardW. SchneiderHrsg., Diagnostik und Förderung des Leseverständnisses (S. 148 – 151). Göttingen: Hogrefe.(1989).
Validity . In R. L. LinnHrsg., Educational measurement (3. Aufl., S. 13 – 103). New York: American Council on Education; Macmillan Pub. Co.; Collier Macmillan Publishers.(2004). Bildungsplan 2004. Realschule. Zugriff am 18. 10. 2013. Verfügbar unter http://www.bildung-staerkt-menschen.de/service/downloads/Bildungsplaene/Realschule/Realschule_Bildungsplan_Gesamt.pdf
(2012). Bildungsplan 2012. Werkrealschule. Zugriff am 18. 10. 2013. Verfügbar unter http://www.bildung-staerkt-menschen.de/service/downloads/Bildungsplaene/Werkrealschule/Bildungsplan2012_WRS_Internet.pdf
(2014). Relation of reading motivation to reading achievement in seventh-grade students from Kenya and the United States. International Perspectives in Psychology: Research, Practice, Consultation, 3, 154 – 166. doi: 10.1037/ipp0000012
(1992). A generalized partial credit model: Application of an EM algorithm. Applied Psychological Measurement, 16, 159 – 176. doi: 10.1177/014662169201600206
(1993). Information functions of the generalized partial credit model. Applied Psychological Measurement, 17, 351 – 363.
(2000). National Reading Panel: Reports of the subgroups. Washington, D.C.: National Institute of Child Health and Human Development.
(2015). Kontextualisierte Kompetenzmessung. Eine Bilanz zu aktuellen Konzeptionen und forschungsmethodischen Zugängen. Zeitschrift für Pädagogik, 61, 377 – 383. doi: 10.3262/ZP1503377
(2007). Kompetenzmessung in der Lehrerbildung als Notwendigkeit: Fragen und Zugänge. Beiträge zur Lehrerinnen- und Lehrerbildung, 25, 14 – 25.
(2015). Wer setzt das Maß? Eine kritische Auseinandersetzung mit dem Advokatorischen Ansatz. Zeitschrift für Pädagogik, 61 (3), 361 – 377. doi: 10.3262/ZP1503361
(2008). The effect of content knowledge on pedagogical content knowledge: The case of teaching phases of matters. Educational Sciences: Theory & Practice, 8, 633 – 645.
(2005). Identifying teacher expertise: An examination of researchers’ decision making. Educational Psychologist, 40, 13 – 25. doi: 10.1207/s15326985ep4001_2
(2008). Revisiting the conceptualisation of pedagogical content knowledge (PCK): PCK as a conceptual tool to understand teachers as professionals. Research in Science Education, 38, 261 – 284. doi: 10.1007/s11165-007-9049-6
(2015). Fachspezifische Lehrerkompetenzen im Fach Deutsch messen? Modellierung und Konstruktvalidierung eines Erhebungsinstruments im Rahmen der Projektgruppe FALKO Regensburg. In C. R. BräuerHrsg., Lehrende im Blick. Empirische Lehrerforschung in der Deutschdidaktik (S. 321 – 342). Wiesbaden: Springer VS.
(2013). PISA 2012: Fortschritte und Herausforderungen in Deutschland. Münster: Waxmann.
(2005). The fluent reader. Oral reading strategies for building word recognition, fluency, and comprehension. New York: Scholastic Professional Books.
(2014). Grundlagen der Lesedidaktik und der systematischen schulischen Leseförderung. Baltmannsweiler: Schneider Hohengehren.
(2008). Evaluation von zentralen Inhalten der Lehrerbildung: Ansätze zur Diagnostik des fachdidaktischen Wissens von Biologielehrkräften. Lehrerbildung auf dem Prüfstand, 1, 641 – 663.
(2010). „Observer“ – Validierung eines videobasierten Instruments zur Erfassung der professionellen Wahrnehmung von Unterricht. Zeitschrift für Pädagogik, 56. Beiheft, 296 – 306.
(1986). Those who understand: Knowledge growth in teaching. Educational Researcher, 15 (2), 4 – 14.
(1987). Knowledge and teaching: Foundations of the new reform. Harvard Educational Review, 57, 1 – 21.
(2009). Förderung des Leseverstehens in der Grundschule. Fortbildungsbausteine für Lehrkräfte. Baltmannsweiler: Schneider Hohengehren.
(2015). Professional vision of classroom management and learning support in science classrooms – Does professional vision differ across general and content-specific classroom interactions? International Journal of Science and Mathematics Education, 13, 351 – 368. doi: 10.1007/s10763-014-9607-0
(2004).
Zur Förderung der Lesekompetenz . In U. SchiefeleC. ArteltW. SchneiderP. StanatHrsg., Struktur, Entwicklung und Förderung von Lesekompetenz. Vertiefende Analysen im Rahmen von PISA 2000 (S. 275 – 306). Wiesbaden: VS Verlag für Sozialwissenschaften.(2012). Das Rasch-Modell. Eine verständliche Einführung für Studium und Praxis (2. Aufl.). München, Mering: Rainer Hampp Verlag.
(2015). Assessing professional vision in teacher candidates. Zeitschrift für Psychologie, 223, 54 – 63. doi: 10.1027/2151-2604/a000200
(2014).
Entwicklung eines Testverfahrens zur Analyse fachdidaktischen Wissens . In D. KrügerI. ParchmannH. ScheckerHrsg., Methoden in der naturwissenschaftsdidaktischen Forschung (S. 311 – 323). Berlin, Heidelberg: Springer. doi: 10.1007/978-3-642-37827-0_25(2015). Stichwort Pädagogisches Wissen von Lehrkräften. Empirische Zugänge und Befunde. Zeitschrift für Erziehungswissenschaft, 18, 187 – 223. doi: 10.1007/s11618-015-0626-6
(2011). Assessing teacher candidates’ general pedagogical / psychological knowledge: Test construction and validation. Journal of Educational Psychology, 103, 952 – 969. doi: 10.1037/a0025125
(1987). Item clusters and computized adaptive testing: A case for testlets. Journal of Educational Measurement, 37, 185 – 201. doi: 10.1111/j.1745-3984.1987.tb00274.x
(1989). Weighted likelihood estimation of ability in item response theory. Psychometrika, 54, 427 – 450. doi: 10.1007/BF02294627
(2002). Beurteilerübereinstimmung und Beurteilerreliabilität. Methoden zur Bestimmung und Verbesserung der Zuverlässigkeit von Einschätzungen mittels Kategoriensystemen und Ratingskalen. Göttingen: Hogrefe.
(1993). Scaling performance assessments: Strategies for managing local item dependence. Journal of Educational Measurement, 30 (3), 187 – 213. doi: 10.1111/j.1745-3984.1993.tb00423.x
