TY - JOUR A1 - Tseng, Chiao-I A1 - Laubrock, Jochen A1 - Bateman, John A. T1 - The impact of multimodal cohesion on attention and interpretation in film JF - Discourse, context & media N2 - This article presents results of an exploratory investigation combining multimodal cohesion analysis and eye-tracking studies. Multimodal cohesion, as a tool of multimodal discourse analysis, goes beyond lin-guistic cohesive mechanisms to enable the construction of cross-modal discourse structures that system-atically relate technical details of audio, visual and verbal modalities. Patterns of multimodal cohesion from these discourse structures were used to design eye-tracking experiments and questionnaires in order to empirically investigate how auditory and visual cohesive cues affect attention and comprehen-sion. We argue that the cross-modal structures of cohesion revealed by our method offer a strong methodology for addressing empirical questions concerning viewers' comprehension of narrative settings and the comparative salience of visual, verbal and audio cues. Analyses are presented of the beginning of Hitchcock's The Birds (1963) and a sketch from Monty Python filmed in 1971. Our approach balances the narrative-based issue of how narrative elements in film guide meaning interpretation and the recipient -based question of where a film viewer's attention is directed during viewing and how this affects comprehension. KW - Film KW - Cohesion KW - Discourse semantics KW - Multimodality KW - Eye-tracking KW - Attention Y1 - 2021 U6 - https://doi.org/10.1016/j.dcm.2021.100544 SN - 2211-6958 VL - 44 PB - Amsterdam [u.a.] CY - Oxford ER - TY - THES A1 - Pauly, Dennis Nikolas T1 - The effect of noun capitalization when reading German and English N2 - Das Promotionsprojekt hatte als Ziel, die Fragestellung zu beantworten, ob die strukturelle wortinitiale Substantivgroßschreibung, wie sie sich neben dem Deutschen sonst nur noch im Luxemburgischen finden lässt, über eine Funktion verfügt, die dem Leser einen Vorteil bringt. Die übergeordnete Hypothese war, dass ein Vorteil dadurch erreicht wird, dass durch die parafoveale Wahrnehmung der Majuskel bereits eine syntaktische Kategorie, nämlich der Kern einer Nominalgruppe, aktiviert wird. Durch diese Wahrnehmung aus dem Augenwinkel sollte das nachfolgende Substantiv schon vorverarbeitet werden können. Im Ergebnis sollte eine Erleichterung der Satzverarbeitung bewirkt werden, was sich letztlich in insgesamt schnelleren Lese- bzw. Fixationszeiten zeigen sollte. Die Struktur des Projekts beinhaltet drei Studien, die teilweise jeweils unterschiedliche Versuchspersonengruppen umfassten: Studie 1: - Studiendesign: Semantisches Priming mittels sogenannter Holzwegsätze sollten die Funktionsweise der Substantivgroßschreibung für den Leser hervorbringen - Versuchspersonen: Deutsche L1-Sprecher lesen Deutsch Studie 2: - Studiendesign: gleiches Design wie Studie 1, allerdings auf Englisch - Versuchspersonengruppen: Studie 3: 1. Englische L1-Sprecher gänzlich ohne Deutschkenntnisse, 2. englische L1-Sprecher, die regelmäßig deutsche Texte lesen, 3. deutsche L1-Sprecher mit exzellenten Englischkenntnissen. - Studiendesign: Einfluss der Substantivfrequenz auf eine potentielle Vorverarbeitung mittels boundary paradigm; Untersuchungsprachen: Deutsch und Englisch - Versuchspersonengruppen: 1. Deutsche L1-Sprecher lesen Deutsch, 2. englische L1-Sprecher gänzlich ohne Deutschkenntnisse lesen Englisch, 3. deutsche L1-Sprecher mit exzellenten Englischkenntnissen lesen Englisch. Zusammenfassung der Ergebnisse: Die Substantivgroßschreibung hat eindeutig einen Einfluss auf die Satzverarbeitung sowohl im Deutschen als auch im Englischen. Dass dieser einen substanziell entscheidenden Vorteil bringt, kann nicht bestätigt werden. N2 - The aim of the doctoral project was to answer the question of whether the structural word-initial noun capitalization, as it can otherwise only be found in Luxembourgish alongside German, has a function that is advantageous for the reader. The overriding hypothesis was that an advantage is achieved by activating a syntactic category, namely the core of a noun phrase, through the parafoveal perception of the capital letters. This perception from the corner of the eye should make it possible to preprocess the following noun. As a result, sentence processing should be facilitated, which should ultimately be reflected in overall faster reading times and fixation durations. The structure of the project includes three studies, some of which included different participant groups: Study 1: Study design: Semantic priming using garden-path sentences should bring out the functionality of noun capitalization for the reader Participant groups: German natives reading German Study 2: Study design: same design as study 1, but in English Participant groups: English natives without any knowledge of German reading English English natives who regularly read German reading English German with high proficiency in English reading English Study 3: Study design: Influence of the noun frequency on a potential preprocessing using the boundary paradigm; Study languages: German and English Participant groups: German natives reading German English natives without any knowledge of German reading English German with high proficiency in English reading English Brief summary: The noun capitalization clearly has an impact on sentence processing in both German and English. It cannot be confirmed that this has a substantial, decisive advantage. T2 - Der Einfluss der Substantivgroßschreibung beim Lesen von Deutsch und Englisch KW - Eye-tracking KW - Noun capitalization KW - Orthography KW - Blickbewegungen KW - Orthographie KW - Lesen KW - Substantivgroßschreibung Y1 - 2021 U6 - http://nbn-resolving.de/urn/resolver.pl?urn:nbn:de:kobv:517-opus4-498031 ER -