Skip to main content
Search
Search
    Quick Search anywhere
    Quick search in Citations
Advanced Search
Skip main navigationClose Drawer MenuOpen Drawer Menu
Previous article
Next article
Originalartikel

The Relation Between Teachers' Diagnostic Sensitivity, their Instructional Activities, and their Students' Achievement Gains in Reading*

Published Online:October 10, 2013https://doi.org/10.1024/1010-0652/a000112

Abstract

Single studies suggest that the effectiveness of certain instructional activities depends on teachers' judgment accuracy. However, sufficient empirical data is still lacking. In this longitudinal study (N = 75 teachers and 1,865 students), we assessed if the effectiveness of teacher feedback was moderated by judgment accuracy in a standardized reading program. For the purpose of a discriminant validation, moderating effects of teachers' judgment accuracy on their classroom management skills were examined. As expected, multilevel analyses revealed larger reading comprehension gains when teachers provided students with a high number of feedbacks and simultaneously demonstrated high judgment accuracy. Neither interactions nor main effects were found for classroom management skills on reading comprehension. Moreover, no significant interactions with judgment accuracy but main effects were found for both feedback and classroom management skills concerning reading strategy knowledge gains. The implications of the results are discussed.


Die Beziehung zwischen der diagnostischen Sensitivität von Lehrkräften, ihrem Unterrichtshandeln und den Lesekompetenzzuwächsen ihrer Schülerinnen und Schüler

Einzelne Studien zeigen, dass bestimmte instruktionale Aktivitäten von Lehrkräften dann zu überlegenen Leistungszuwächsen von Schülern führen, wenn diese mit einer hohen Urteilsgenauigkeit (Einschätzung von Schülerleistungen) einhergehen. In einer über ein Schuljahr angelegten Längsschnittstudie (N = 75 Lehrkräfte, 1865 Schüler) wurde untersucht, inwiefern diese Befunde replizierbar sind, wenn ein standardisiertes Leseförderprogramm im Leseunterricht durchgeführt wird. Es wurde überprüft, ob die Effektivität der Rückmeldehäufigkeit von der Urteilsgenauigkeit der Lehrkräfte moderiert wurde. Weiterhin wurde im Sinne einer diskriminanten Validierung untersucht, ob diese bedingte Abhängigkeit von der Urteilsgenauigkeit der Lehrkräfte auch bei der generell wirksamen Klassenführungskompetenz vorhanden ist. Wie erwartet, verbesserte sich das Leseverständnis der Schüler dann, wenn Lehrkräfte sowohl eine hohe Urteilsgenauigkeit aufwiesen als auch überdurchschnittlich viele individuelle Leistungsrückmeldungen gaben. Die Klassenführungsqualitäten der Lehrkräfte erwiesen sich nicht als prädiktiv für die Entwicklung des Leseverständnisses. Bezüglich des Lesestrategiewissens wurden signifikante Haupteffekte der Rückmeldehäufigkeit und der Klassenführungskompetenz, jedoch keine Interaktionen mit der Urteilsgenauigkeit gefunden.

Literatur

  • Anders, Y. , Kunter, M. , Brunner, M. , Krauss, S. , Baumert, J. (2010). Diagnostische Fähigkeiten von Mathematiklehrkräften und ihre Auswirkungen auf die Leistungen ihrer Schülerinnen und Schüler [Mathematics teachers' diagnostic skills and their impact on students' achievements]. Psychologie in Erziehung und Unterricht, 57, 175–193. doi: 10.2378/peu2010.art13d First citation in articleCrossref, Google Scholar

  • Artelt, C. , Stanat, P. , Schneider, W. , Schiefele, U. (2001). Lesekompetenz: Testkonzeption und Ergebnisse [Reading competencies: test conception and results]. In Deutsches PISA- Konsortium (Eds.), PISA 2000 – Basiskompetenzen von Schülerinnen und Schülern im internationalen Vergleich (S. 69–137). Opladen: Leske + Budrich. First citation in articleGoogle Scholar

  • Asparouhov, T. , Muthén, B. O. (2010). Multiple imputation with Mplus. Retrieved March 28, 2012, from www.statmodel.com First citation in articleGoogle Scholar

  • Bates, C. , Nettelbeck, T. (2001). Primary school teachers' judgements of reading achievement. Educational Psychology, 21, 177–187. doi: 10.1080/01443410020043878 First citation in articleCrossref, Google Scholar

  • Baumert, J. , Kunter, M. (2006). Stichwort: Professionelle Kompetenz von Lehrkräften [Professional competencies of teachers]. Zeitschrift für Erziehungswissenschaft, 9, 469–520. doi: 10.1007/s11618-006-0165-2 First citation in articleCrossref, Google Scholar

  • Begeny, J. C. , Buchanan, H. (2010). Teachers' judgments of students' early literacy skills measured by the Early Literacy Skills Assessment: Comparisons of teachers with and without assessment administration experience. Psychology in the Schools, 47, 859–868. doi: 10.1002/pits First citation in articleCrossref, Google Scholar

  • Begeny, J. C. , Eckert, T. L. , Montarello, S. A. , Storie, M. S. (2008). Teachers' perceptions of students' reading abilities: An examination of the relationship between teachers' judgments and students' performance across a continuum of rating methods. School Psychology Quarterly, 23, 43–55. doi: 10.1037/1045-3830.23.1.43 First citation in articleCrossref, Google Scholar

  • Brophy, J. E. (2000). Teaching (Educational Practices Series, Vol.1). Retrieved April 02, 2012, from the International Academy of Education & International Bureau of Education Web site: www.ibe.unesco.org/fileadmin/user_upload/archive/publications/EducationalPracticesSeriesPdf/prac01e.pdf First citation in articleGoogle Scholar

  • Brophy, J. E. (2006). Observational research on generic aspects of classroom teaching. In P. A. Alexander & P. H. Winne (Eds.), Handbook of educational psychology (pp. 755–780). Mahwah, NJ: Erlbaum. First citation in articleGoogle Scholar

  • Cohen, J. , Cohen, P. , West, S. G. , Aiken, L. S. (2003). Applied multiple regression/correlation analysis for the behavioral sciences. Mahwah, NJ: Erlbaum. First citation in articleGoogle Scholar

  • Coladarci, T. (1992). Teachers' knowledge of what students know: The case of reading. Reading Improvement, 29, 34–39. First citation in articleGoogle Scholar

  • Cronbach, L. (1955). Processes affecting scores on “understanding of others” and “assumed similarity”. Psychological Bulletin, 52, 177–193. doi: 10.1037/h0044919 First citation in articleCrossref, Google Scholar

  • Ditton, H. (2000). Qualitätskontrolle und -sicherung in Schule und Unterricht. Ein Überblick über den Stand der empirischen Forschung [Quality controls and management in schools and classes]. In A. Helmke, W. Hornstein & E. Terhart (Eds.), Qualität und Qualitätssicherung im Bildungsbereich: Schule, Sozialpädagogik, Hochschule. Zeitschrift für Pädagogik, 41 . Beiheft (S. 73–92). Weinheim: Beltz. First citation in articleGoogle Scholar

  • Eckert, T. L. , Arbolino, L. A. (2005). The role of teacher perspectives in diagnostic and program evaluation decision-making. In R. Brown-Chidsey (Ed.), Beyond labels: Noncategorical individualized assessment methods (S. 65–81). New York, NY: Guilford. First citation in articleGoogle Scholar

  • Geiser, C. (2012). Data analysis with Mplus. New York, NY: Guilford. First citation in articleGoogle Scholar

  • Gold, A. , Mokhlesgerami, J. , Rühl, K. , Schreblowski, S. , Souvignier, E. (2006). Wir werden Textdetektive: Lehrermanual [Becoming a text-detective] (2nd ed.). Goettingen: Vandenhoeck & Ruprecht. First citation in articleGoogle Scholar

  • Gold, A. , Trenk-Hinterberger, I. , Souvignier, E. (2009). Die Textdetektive. Ein strategieorientiertes Programm zur Förderung des Leseverständnisses [The text-detectives. A strategy-based program to foster reading comprehension]. In W. Lenhard & W. Schneider (Eds.), Diagnose und Förderung des Leseverständnisses (Test und Trends N.F. Vol. 7) (pp. 207–226). Göttingen: Hogrefe. First citation in articleGoogle Scholar

  • Hattie, J. (2009). Visible Learning: A Synthesis of Over 800 Meta-Analyses Relating to Achievement. London: Routledge. First citation in articleGoogle Scholar

  • Helmke, A. (2003). Unterrichtsqualität: Erfassen, Bewerten, Verbessern [Instructional quality: Assessment, judgment, improvement]. Seelze: Kallmeyer. First citation in articleGoogle Scholar

  • Helmke, A. , Weinert, F. E. (1997). Unterrichtsqualität und Leistungsentwicklung: Ergebnisse aus dem SCHOLASTIK-Projekt [Instructional quality and achievement gains]. In F. E. Weinert & A. Helmke (Eds.), Entwicklung im Grundschulalter (S. 241–251). Weinheim: Psychologie. First citation in articleGoogle Scholar

  • Helmke, A. , Schrader, F.-W. (1987). Interactional effects of instructional quality and teacher judgment accuracy on achievement. Teaching and Teacher Education, 3, 91–98. First citation in articleCrossref, Google Scholar

  • Hoge, R. D. (1983). Psychometric properties of teacher judgment measures of pupil aptitudes, classroom behaviors, and achievement levels. Journal of Special Education, 17, 401–429. doi: 10.1177/002246698301700404 First citation in articleCrossref, Google Scholar

  • Hoge, R. D. , Coladarci, T. (1989). Teacher-based judgments of academic achievement: A review of literature. Review of Educational Research, 59, 297–313. doi: 10.3102/00346543059003297 First citation in articleCrossref, Google Scholar

  • Hurwitz, J. T. , Elliott, S. N. , Braden, J. P. (2007). The influence of test familiarity and student disability status upon teachers' judgments of students' test performance. School Psychology Quarterly, 22, 115–144. doi: 10.1037/1045-3830.22.2.115 First citation in articleCrossref, Google Scholar

  • Jones, V. (1996). Classroom management. In J. Sikula (Ed.), Handbook of research on teacher education (pp. 503–521). New York, NY: Macmillan. First citation in articleGoogle Scholar

  • Karing, C. , Pfost, M. , Artelt, C. (2011). Hängt die diagnostische Kompetenz von Sekundarstufenlehrkräften mit der Entwicklung der Lesekompetenz und der mathematischen Kompetenz ihrer Schülerinnen und Schüler zusammen? [Is there a relationship between lower secondary school teacher judgment accuracy and the development of students' reading and mathematical competence?]. Journal for Educational Research Online, 3, 119–147. First citation in articleGoogle Scholar

  • Lorenz, C. (2011). Diagnostische Kompetenz von Grundschullehrkräften [Diagnostic competencies of primary school teachers]. Bamberg: University of Bamberg Press. First citation in articleGoogle Scholar

  • Moely, B. E. , Hart, S. S. , Leal, L. , Santulli, K. A. , Rao, N. , Johnson, T. et al. (1992). The Teacher's Role in Facilitating Memory and Study Strategy Development in the Elementary School Classroom. Child Development, 63, 653–672. doi: 10.1111/j.1467-8624.1992.tb01653.x First citation in articleCrossref, Google Scholar

  • Paris, S. G. , Lipson, M. Y. , Wixson, K. K. (1983). Becoming a strategic reader. Contemporary Educational Psychology, 8, 293–316. doi: 10.1016/0361-476X(83)90018–8 First citation in articleCrossref, Google Scholar

  • Pearson, P. D. , Roehler, L. R. , Dole, J. A. , Duffy, G. G. (1992). Developing expertise in reading comprehension. In S. J. Samuels & A. E. Farstrup (Eds.), What research has to say about reading instruction (pp. 145–199). Newark, DE: International Reading Association. First citation in articleGoogle Scholar

  • Rubin, D. B. (1996). Multiple Imputation after 18 + years. Journal of the American Statistical Association, 434, 473–489. doi: 10.1080/01621459.1996.10476908 First citation in articleCrossref, Google Scholar

  • Schrader, F.-W. , Helmke, A. (1987). Diagnostische Kompetenz von Lehrern: Komponenten und Wirkungen [Teachers' diagnostic competencies: components and effects]. Empirische Pädagogik, 1, 27–52. First citation in articleGoogle Scholar

  • Snijders, T. , Bosker, R. (1999). Multilevel analysis: An introduction to basic and advanced modeling. London: Sage. First citation in articleGoogle Scholar

  • Souvignier, E. , Mokhlesgerami, J. (2005). Implementation eines Programms zur Vermittlung von Lesestrategien im Deutschunterricht [Moving strategy-oriented reading instruction into the classroom: The role of the teacher]. Zeitschrift für Pädagogische Psychologie, 19, 249–261. doi: 10.1024/1010-0652.19.4.249 First citation in articleLink, Google Scholar

  • Souvignier, E. , Mokhlesgerami, J. (2006). Using self-regulation as a framework for implementing strategy instruction to foster reading comprehension. Learning and Instruction, 16, 57–71. doi: 10.1016/j.learninstruc.2005.12.006 First citation in articleCrossref, Google Scholar

  • Souvignier, E. , Trenk-Hinterberger, I. , Adam-Schwebe, S. , Gold, A. (2008). Frankfurter Leseverständnistest für 5. und 6. Klassen (FLVT 5–6) [Frankfurt reading-comprehension test for classes 5 to 6]. Göttingen: Hogrefe. First citation in articleGoogle Scholar

  • Spinath, B. (2005). Akkuratheit der Einschätzung von Schülermerkmalen durch Lehrer und das Konstrukt der diagnostischen Kompetenz [Accuracy of teacher judgments on student characteristics and the construct of diagnostic competence]. Zeitschrift für Pädagogische Psychologie, 19, 85–95. doi: 10.1024/1010-0652.19.12.85 First citation in articleLink, Google Scholar

  • Südkamp, A. , Kaiser, J. , Möller, J. (2012). Accuracy of teachers' judgments of students' academic achievement: A Meta-Analysis. Journal of Educational Psychology. Advance online publication. doi: 10.1037/a0027627 First citation in articleCrossref, Google Scholar

  • Trenk-Hinterberger, I. , Souvignier, E. (2006). Wir sind Textdetektive: Lehrermanual [We are text-detectives]. Goettingen: Vandenhoeck & Ruprecht. First citation in articleGoogle Scholar

  • Wang, M. C. , Haertel, G. D. , Walberg, H. J. (1993). Toward a knowledge base for school learning. Review of Educational Research, 63, 249–294. doi: 10.3102/00346543063003249 First citation in articleCrossref, Google Scholar

  • Weinert, F. E. , Schrader, F.-W. , Helmke, A. (1990). Educational expertise: Closing the gap between educational research and classroom practice. School Psychology International, 11, 163–180. doi: 10.1177/0143034390113002 First citation in articleCrossref, Google Scholar