Abstract
Zusammenfassung. Für den Bereich „Sprache und Sprachgebrauch untersuchen” der KMK-Bildungsstandards wurden basierend auf Kategorien sprachbewusster Tätigkeiten neun schwierigkeitsbestimmende Aufgabenmerkmale abgeleitet. Auf Grundlage einer Stichprobe von 3.276 Schülerinnen und Schülern der dritten und vierten Klassenstufe wurde im ersten Analyseschritt der Zusammenhang der Aufgabenmerkmale mit den Schwierigkeiten von 107 Testaufgaben untersucht. Im zweiten Schritt wurde untersucht, inwieweit die schwierigkeitsgenerierenden Effekte der Aufgabenmerkmale von der sprachlichen Herkunft der Schülerinnen und Schüler unter Berücksichtigung des kulturellen Kapitals sowie der Klassenstufe moderiert werden, d.h. Differential Facet Functioning (DFF) vorliegt. Für Schritt 1 wurde das linear-logistische Testmodell (LLTM) in der Formulierung als generalisiertes lineares gemischtes Modell (GLMM) verwendet, welches für Schritt 2 um Schülermerkmale als Prädiktoren ergänzt wurde. Die Aufgabenmerkmale weisen einen sehr hohen Erklärungswert für die Aufgabenschwierigkeiten auf (R2 = .695), wobei die Beziehung zur Aufgabenschwierigkeit bei acht der neun Aufgabenmerkmale von mindestens einem der Schülermerkmale oder der Klassenstufe abhängt.
Abstract. Based on the concept of language awareness, we defined nine item properties concerning the area ”Sprache und Sprachgebrauch untersuchen” (speech and speech use) of the KMK educational standards. In a first step, we investigated the relationship between these item properties and the difficulty of 107 German grammar items using a sample of 3,276 third and fourth grade students. In a second step, we examined whether this relationship is moderated by students’ language background (German as a second language), cultural capital, and years of schooling. Analyses for step 1 were based on the linear logistic test model (LLTM) and a mixed model approach. In step 2, the LLTM was supplemented by the student attributes and grade level as predictor variables. The item properties explained item difficulty very well (R2 = .695). However, for eight out of nine item properties, the effects on item difficulty were moderated by at least one student attribute, or grade level providing evidence of Differential Facet Functioning (DFF).
Literatur
(1985). Schriftspracherwerb und die Entstehung von Sprachbewusstheit. Opladen: Westdeutscher Verlag.
(2006). Entwicklung sprachlichen Wissens und sprachlicher Bewusstheit. In , Didaktik der deutschen Sprache (Bd. 1, S. 438–451). Paderborn: Ferdinand Schöningh.
(1993). Perspectives on differential item functioning methodology. In , Differential item functioning (pp. 3–24). Hillsdale, NJ: Lawrence Erlbaum.
(2001). Schulleistungsstudien und soziale Gerechtigkeit. Zeitschrift für Pädagogik, 47 (2), 161–177.
(2004). Die PISA-Studie zur Lesekompetenz: Überblick und weiterführende Analysen. In , Struktur, Entwicklung und Förderung von Lesekompetenz. Vertiefende Analysen im Rahmen von PISA 2000 (S. 139–168). Wiesbaden: VS Verlag für Sozialwissenschaften.
(2001). Metalinguistic aspects of bilingual processing. Annual Review of Applied Linguistics, 21, 169–181.
. (2007). Language acquisition and bilingualism: Special issue of Applied Psycholinguistics. New York: Cambridge University Press.
(2009). Kompetenzdiagnostik im Bereich „Sprache und Sprachgebrauch untersuchen”. In , Bildungsstandards Deutsch und Mathematik (S. 376–392). Weinheim: Beltz.
(1983). Meanings and concepts. In , Handbook of child psychology (Vol. III, pp. 787–840). New York: Wiley.
(2000). Language, power and pedagogy: Bilingual children in the crossfire (Bilingual education and bilingualism). Clevedon: Multilingual Matters.
. (2004). Explanatory item response models. New York: Springer.
(2004). Sprachbewusstheit und grammatisches Wissen. Grundschule, 36 (10), 58–61.
(2007). Sprachbewusstheit. In , Sprachliche Kompetenzen. Konzepte und Messung (S. 147–157). Weinheim: Beltz.
(2007). Sprachbewusstheit. In , Sprachliche Kompetenzen. Konzepte und Messung (S. 63–82). Weinheim: Beltz.
(2007). Implicit and explicit knowledge about language. In , Encyclopedia of Language and Education (Vol. 6, pp. 119–132). New York: Springer.
(1983). Construct validity: Construct representation versus nomothetic span. Psychological Bulletin, 93 (1), 179–197.
(2001). Improving construct validity with cognitive psychology principles. Journal of Educational Measurement, 38 (4), 343–368.
(1992). The measurement of writing ability with a manyfacet Rasch model. Applied Measurement in Education, 5, 171–191.
(1973). The linear logistic test model as an instrument in educational research. Acta Psychologica, 37, 359–374.
(1990). The effects of learning two languages on levels of metalinguistic awareness. Cognition, 34, 1–56.
(1997). Language Awareness. Geschichte, Grundlagen, Anwendungen. Praxis des neusprachlichen Unterrichts, 44, 227–236.
(1997). Metalinguistic development in first-language acquisition. In , Encyclopedia of language and education (Knowledge about language, Vol. 6, pp. 43–51). Dordrecht: Kluwer.
(2004). Methoden zur Bildung von Kompetenzstufenmodellen. In , Qualitätssicherung im Bildungswesen. Riezlern-Reader XIII (S. 74–93). Frankfurt a.M.: Institut für Psychologie der J.-W.-Goethe-Universität.
(2007). Skalierung und Definition von Kompetenzniveaus. In , Sprachliche Kompetenzen. Konzepte und Messung (S. 83–99). Weinheim: Beltz.
(2004). Vergleichsarbeiten – Kompetenzmodelle – Standards. In , Lernprozesse, Lernumgebungen und Lerndiagnostik (S. 56–75). Landau: VEP.
(2002). Sozialer und sprachlicher Hintergrund. In , Das Projekt MARKUS. Mathematik-Gesamterhebung Rheinland-Pfalz: Kompetenzen, Unterrichtsmerkmale, Schulkontext (S. 71–153). Landau: VEP.
(2008). Sprachliche Kompetenzen von mehrsprachigen Jugendlichen und Jugendlichen nicht-deutscher Erstsprache. In , Unterricht und Kompetenzerwerb in Deutsch und Englisch (S. 208–230). Weinheim: Beltz
. (1993). Differential item functioning. Hillsdale, NJ: Lawrence Erlbaum.
(2007). Anlage und Durchführung von IGLU 2006. In , IGLU 2006. Lesekompetenzen von Grundschulkindern in Deutschland im internationalen Vergleich (S. 21–45). Münster: Waxmann.
(2007). Psycholinguistic perspectives on second language acquisition. In , The international handbook on English language teaching (pp. 701–713). Norwell: Springer.
(2006). Qualitätsentwicklung und Lehrerprofessionalisierung durch Vergleichsarbeiten. Die Deutsche Schule, 98 (1), 107–111.
(2001). Item analysis by the hierarchical generalized linear model. Journal of Educational Measurement, 38 (1), 79–93.
(2007). Multilevel Rasch models. In , Multivariate and mixture distribution Rasch models (pp. 217–232). New York: Springer.
(1995). Beyond modularity: A developmental perspective on cognitive science. Cambridge, MA: MIT Press.
(2001). Identifying national cultures of mathematics education: Analysis of cognitive demands and differential item functioning in TIMSS. European Journal of Psychology of Education, 16, 385–402.
(2008). The concept of competence in educational contexts. In , Assessment of competencies in educational contexts (pp. 3–22). Göttingen: Hogrefe.
(2006). Kompetenzmodelle zur Erfassung individueller Lernergebnisse und zur Bilanzierung von Bildungsprozessen. Beschreibung eines neu eingerichteten Schwerpunktprogramms der DFG. Zeitschrift für Pädagogik, 52 (6), 876–903.
. (2005). Bildungsstandards im Fach Deutsch für den Primarbereich. Beschluss vom 15.10.2004. München: Wolters Kluwer.
(1983). Monitoring and self-repair in speech. Cognition, 14 (1), 41–104.
(1999). The bookmark standard setting procedure. Monterey, CA: McGraw-Hill.
(1993). The use of differential item functioning statistics: A discussion of current practice and future implications. In , Differential item functioning (pp. 349–364). Hillsdale, NJ: Lawrence Erlbaum.
(1992). Zur Entwicklung metasprachlicher Fähigkeiten. Aus der Sicht der Sprachpsychologie. Der Deutschunterricht, 44 (4), 15–23.
(2004). Person-by-item predictors. In , Explanatory item response models (pp. 212–240). New York: Springer.
(2007). Odds Ratio, delta, ETS Classification, and standardization measures of DIF magnitude for binary logistic regression. Journal of Educational and Behavioral Statistics, 32 (1), 92–109.
(2002). Kompetenzstufen und Schwierigkeitsmodelle für den PISA-Test zur mathematischen Grundbildung. Unterrichtswissenschaft, 30 (2), 100–119.
. (2009). PISA 2006 technical report. Paris: OECD.
(2006). Entwicklung sprachlichen Wissens und Bewusstseins im mehrsprachigen Kontext. In , Didaktik der deutschen Sprache (Bd. 1, S. 452–463). Paderborn: Ferdinand Schöningh.
(2010). Standard-Setting für Kompetenztests im Large-Scale-Assessment. Zeitschrift für Pädagogik, Beiheft 56, 175–188.
(2002). Der PISA-Naturwissenschaftstest: Lassen sich die Aufgabenschwierigkeiten vorhersagen? Unterrichtswissenschaft, 30 (2), 120–135.
(2004). HLM 6 for Windows [Computer-Software]. Lincolnwood, IL: SSI.
(2003). A nonlinear mixed model framework for item response theory. Psychological Methods, 8 (2), 185–205.
(2005). Mixed model estimation methods for the Rasch model. Journal of Applied Measurement, 6, 273–288.
(2008). Soziale und kulturelle Disparitäten der Schülerleistungen in den Ländern der Bundesrepublik Deutschland. In , IGLU 2006. Die Länder der Bundesrepublik Deutschland im nationalen und internationalen Vergleich (S. 103–109). Münster: Waxmann.
(1984). The development of metalinguistic abilities in children learning to read and write. In , Language awareness and learning to read (pp. 207–226). New York: Springer.
(2005). Assessing and explaining differential item functioning using logistic mixed models. Journal of Educational and Behavioral Statistics, 30 (4), 443–464.
(2002). Denken und Sprechen. Weinheim: Beltz.
(2006). Modellierung von Kompetenzstufen mit Hilfe der latenten Klassenanalyse. Empirische Pädagogik, 20 (3), 321–336.
(2004). Descriptive and explanatory item response models. In , Explanatory item response models (pp. 43–74). New York: Springer.
(2008). Investigating DIF and extensions using an LLTM approach and also an individual differences approach: An international testing context. Psychology Science Quarterly, 50 (3), 403–416.
