Lernen mit Texten und Bildern
Der Anteil akustisch-sensorischer Information am Zustandekommen des Modalitätseffekts
Abstract
Liegt der Modalitätseffekt beim Lernen mit Texten und Bildern darin begründet, dass Bild und visueller Text gleichzeitig im visuell-räumlichen Arbeitsgedächtnissystem verarbeitet werden und dieses dadurch überfordert ist? Das in diesem Artikel vorgestellte Experimentalparadigma erlaubt die Überprüfung einer alternativen Erklärung, die sich aus der Grundlagenforschung zum verbalen Behalten ergibt. Als Material dienten Items, die aus jeweils einem kurzen Text zu einem anschließend präsentierten Pseudo-Sternbild bestanden. Als kritischer Faktor wurde die Textmodalität (auditiv vs. visuell) zwischen Versuchspersonen variiert. Die Probanden beantworteten zu jedem Text vier Fragen und reproduzierten dann das Sternbild. Der einzig signifikante Einfluss der Textmodalität fand sich in Form einer Interaktion mit der Position der Textinformation: Nur die zuletzt präsentierte Information wurde in der auditiven Bedingung besser erinnert als in der visuellen. Dieser Befund steht in Einklang mit der Annahme eines behaltenswirksamen akustisch-sensorischen Codes, der nur bei auditiver Präsentation verfügbar ist, und auch dort nur für Information, die noch nicht überschrieben wurde – allerdings unabhängig von der visuell-räumlichen Arbeitsgedächtnisbelastung.
Is the advantage of auditory over visual text presentation in multimedia learning caused by the picture and the visual text both being processed in the visuo-spatial system of working memory, which is thus overloaded? In the present paper, we consider an alternative explanation, which is derived from basic research in verbal short-term memory. In order to test it, we introduce a paradigm in which subjects are presented with short texts each followed by a corresponding pseudo-constellation. As a critical factor, modality of text presentation (auditory vs. visual) was varied between subjects. The participants had to answer four questions each regarding a piece of text information and then to reproduce the constellation within a matrix frame. Modality of text presentation exerted a significant influence only in interaction with the position of the information in the text. Participants in the auditory group showed enhanced memory performance only for the most recently presented information. This pattern of data is in accordance with the assumption of an acoustic-sensory code which helps retention of auditory information as long as it is not overwritten by further input. This can be explained without reference to visuo-spatial working memory load.
Literatur
(2005). The split-attention principle in multimedia learning. In , The Cambridge handbook of multimedia learning (pp. 135–146). New York: Cambridge University Press.
(1986). Working memory. Oxford: Oxford University Press.
(1999). Essentials of human memory . Hove, UK: Psychology Press.
(1983). Encoding and retaining information in the visuals and verbals of an educational movie. Educational Communication and Technology Journal, 31, 23–32.
(2001). Aufmerksamkeitsverteilung oder Aufmerksamkeitsfokussierung? Empirische Ergebnisse zur «Split-Attention-Hypothese» beim Lernen mit Multimedia. Unterrichtswissenschaft, 29, 357–366.
(1968). Input modality and the serial position curve in short-term memory. Psychonomic Science, 10, 135–136.
(1967). Prefix effect in immediate memory. Canadian Journal of Psychology, 21, 450–461.
(1969). Precategorical acoustic storage (PAS). Perception & Psychophysics, 5, 365–373.
(1979). Positionseffekte und Reihenfolge der Wiedergabe bei optisch und akustisch gebotenen Wortketten. Archiv für Psychologie, 132, 1–18.
(2005). Meta-analysis of the modality effect. Learning and Instruction, 15, 313–331.
(2006). Perceptual organization masquerading as phonological storage: Further support for a perceptual-gestural view of short-term memory. Journal of Memory and Language, 54, 265–281.
(2007). Lehren und Lernen. Einführung in die Instruktionspsychologie. Weinheim: Beltz, Psychologie Verlags Union.
(2001). Multimedia learning . Cambridge, UK: Cambridge University Press.
(2007). Learning and instruction . Upper Saddle River, NJ: Prentice-Hall.
(1998). A split-attention effect in multimedia learning: Evidence for dual processing systems in working memory. Journal of Educational Psychology, 90, 312–320.
(1999). Cognitive principles of multimedia learning: The role of modality and contiguity. Journal of Educational Psychology, 91, 358–368.
(1995). Reducing cognitive load by mixing auditory and visual presentation modes. Journal of Educational Psychology, 87, 319–334.
(1998). Human memory: An introduction to research, data, and theory . Pacific Grove, CA: Brooks/Cole.
(1989). Modality effects and the structure of short term verbal memory. Memory and Cognition, 17, 398–422.
(2001). Phonological information contributes to short-term recall of auditorily presented sentences. Journal of Memory and Language, 45, 451–467.
(2003). Phonological information in immediate and delayed sentence recall. The Quarterly Journal of Experimental Psychology, 56A, 83–95.
(2005). Evidence for a modality effect in sentence retention. Psychonomic Bulletin & Review, 12, 1094–1099.
(submitted). What causes the modality effect in multimedia learning? Testing a specification of the modality assumption.
(2008). Lernen mit Multimedia: Die kognitiven Grundlagen des Modalitätseffekts. Psychologische Rundschau, im Druck.
(2006). Pädagogische Psychologie. Weinheim: Beltz, PVU.
(1960). The information available in brief visual presentation. Psychological Monographs, 74, 1–29.
(1999). Instruction design in technical areas. Camberwell, Australia: ACER.
(2000). Sensory load and information load: Examining the effects of timing on multisensory processing. International Journal of Instructional Media, 27, 183–199.
(2004). Psychologie. München: Pearson Studium.
