Abstract
Zusammenfassung. Mitarbeiterbefragungen gehören zum festen Bestandteil personalpolitischer Führungs- und Controllinginstrumente vieler Unternehmen. In dieser Studie wird die Interraterreliabilität von Ergebnissen aus Mitarbeiterbefragungen untersucht. Dies geschieht mithilfe der Generalisierbarkeitstheorie von Cronbach. Die Ergebnisse zeigen, dass individuelle Urteile von Mitarbeitern im Wesentlichen auf die Mitarbeiter selbst und auf zufällige Fehlereinflüsse zurückzuführen sind und nur zu einem geringen Anteil Bedingungen in Organisationseinheiten beschreiben. Durch Aggregation von Urteilen mehrerer Mitarbeiter auf der Grundlage mehrerer Items kann bei den meisten Befragungsthemen jedoch eine zufriedenstellende Interraterreliabilität insbesondere für Organisationseinheiten auf höherer Hierarchieebene erreicht werden. Bei einigen Themen zeigt sich jedoch, dass Mitarbeiterbefragungen zu keinen zuverlässigen Befunden führen.
Abstract. Employee surveys are part of many companies' management systems, human resources strategies, and controlling practices. This article examines the interrater reliability of employee survey results. This is done on the basis of Cronbach's generalizability theory. Results show that individual judgments depend heavily on individual and random factors rather than describing working conditions in organizational units. Aggregation of judgments of many employees based on several items can lead to adequate interrater reliability regarding to the majority of survey topics, especially for organizational units on a higher hierarchical level. Concerning some topics, employee surveys fail to provide reliable findings.
Literatur
(2000). Führungsinstrument Mitarbeiterbefragung. Göttingen: Verlag für Angewandte Psychologie.
(2003). Affektiver Halo in Mitarbeiterbefragungen. Zeitschrift für Arbeits- und Organisationspsychologie, 47 , 1–11.
(1992). Elements of generalizability theory. (2 ed.). Iowa City: American College Testing Program.
(1997). Mitarbeiterbefragung als Instrument eines Qualitäts- und Innovationsmanagements. Weinheim: Psychologie Verlags Union.
(1997). Mitarbeiterbefragung: Verbreitung, Einsatzformen und Erfahrungen bei den 100 umsatzgrößten Unternehmen in der Bundesrepublik Deutschland. In W. Bungard & I. Jöns (Hrsg.), Mitarbeiterbefragung. Ein Instrument des Innovations- und Qualitätsmanagements (S.246-263). Weinheim: Psychologie Verlags Union.
(1956). Average values of mean squares in factorials. Annals of Mathematical Statistics, 27 , 907–949.
(1972). The dependability of behavioral measurement. Theory of generalizability for scores and profiles. New York: Wiley.
(1986). Zum Problem der Bestimmung der Reliabilität von Organisationsklimamessungen. Zeitschrift für Arbeits- und Organisationspsychologie, 30 , 116–124.
(1991). Social Cognition. (2nd ed.). New York: Random House.
(1998). A new look at within-source interrater reliability of 360-degree feedback ratings. Journal of Applied Psychology, 83 , 960–968.
(2000). Organisationales Lernen in selbstmoderierenden Survey-Feedback-Prozessen. Lengerich: Pabst.
(1978). Die Messung des Führungsverhaltens. Zur Validität von Fragebogen zur Beschreibung des Vorgesetztenverhaltens. Bern: Huber.
(1990). Estimating the reliability of aggregate-level variables based on individual-level characteristics. Sociological Methods and Research, 18 , 473–504.
(1991). Generalizability theory. A primer. Newbury Park, CA: Sage.
(1996). Thinking about answers. The application of cognitive processes to survey methodology. San Francisco: Jossey-Bass.
(1997). Das Antwortverhalten befragter Mitarbeiter. Eine kognitionspsychologische Perspektive. In W. Bungard & I. Jöns (Hrsg.), Mitarbeiterbefragung. Ein Instrument des Innovations- und Qualitätsmanagements (S.130-147). Weinheim: Psychologie Verlags Union.
(2001). Die Messung und Analyse lateraler Kooperation bei Mitarbeiterbefragungen. Anwendung der Generalisierbarkeitstheorie zur Überprüfung von Konzepten der sozialen Netzwerkanalyse. München: Rainer Hampp Verlag.
(1999). Mitarbeiterbefragung. Augsburg: Weka.
(2003). 360-Grad-Beurteilung als Führungsaudit. Eine Überprüfung der Konstruktvalidität mit der Generalisierbarkeitstheorie. München: Rainer Hampp Verlag.
