Gesproche Sprache in Bewegung: Lernen und Anpassung gesprochener Sprache im Kontext von Körperbewegungen
Zusammenfassung der Projektergebnisse
Wer kennt das nicht: man wird von einem Freund angerufen, der auf dem Weg zu einem Treffen ist. Obwohl man ihn nicht sieht, kann man doch deutlich am Telefon hören, dass er schnell läuft. Im Salammbo-Projekt untersuchen wir, d.h. Forscherinnen aus den Bewegungswissenschaften, der Psychologie und der Linguistik aus Deutschland und Frankreich, welchen Einfluss Bewegungen auf gesprochene Sprache hat. Im Speziellen gehen wir davon aus, dass der Atmung eine Vermittlerrolle zwischen Bewegung und gesprochener Sprache zukommt, denn sie ist für beide Prozesse wichtig: Unter körperlicher Anstrengung gibt es einen erhöhten Bedarf an Sauerstoff und die Ausatemluft wird für gesprochene Sprache benötigt. Das erste Ziel von Salammbo ist die Erstellung neuartiger multimodaler Korpora mit gleich zeitigen Aufzeichnungen von Bewegungen, Atem-, und akustischen Daten gesprochener Sprache unter Verwendung neuster Technologie. Für den ersten Korpus wurden 25 deutsche Muttersprachler*innen drei Mal innerhalb einer Woche bis zu maximal 10 Tagen aufgenommen. Ihnen wurden Geschichten mit neuen Namen per Video präsentiert und die Pro banden gebeten, die Details der Geschichten unter verschiedenen Bewegungsbedingungen (ohne Bewegung, mit freien Händen, rhythmische Bewegungen mit den Armen oder Beinen) zu erinnern und nachzuerzählen. Im zweiten Korpus variierten wir die körperliche Anstrengung und die Sprechaufgaben. Es wurden 48 weibliche Probanden aufgenommen. Sie fuhren unter leichter und moderater Belastung auf einem stationären Ergometer Fahrrad und produzierten angehaltene Vokale, lasen einen Text oder produzierten Spontansprache. Als Kontrollbedingung wurden dieselben Sprachaufgaben ohne Bewegung aufgenommen. In unseren Analysen konzentrierten wir uns auf die folgenden Schwerpunkte: a) die Auswirkungen der körperlichen Anstrengung auf respiratorische, laryngeale und supralaryngeale Eigenschaften gesprochener Sprache, b) den Zusammenhang von Bewegungsgeschwindigkeit und Sprechgeschwindigkeit unter verschiedenen Anstrengungsstufen, c) den Einfluss von Beschleunigungsmaxima der Bewegungen auf lokale akustische Parameter wie die Grundfrequenz und Intensitätshüllkurven und d) die Stabilität und Flexibilität der individuellen Atmung in verschiedenen Aufgaben. Die erhobenen Ergebnisse zeigen a) einen deutlichen Einfluss auf alle untersuchten Ebenen gesprochener Sprache, b) kein lineares Zusammenspiel zwischen Bewegungs- und Sprechgeschwindigkeit, c) einen Einfluss von Beschleunigungsmaxima auf die Gipfel der Intensität (aber nicht f0), wenn ein bestimmter Grenzwert der Beschleunigung überschritten wird und d) die Stabilität individueller Atmung für spezifische Aufgaben. Diese Ergebnisse deuten auf ein komplexes Zusammenspiel zwischen Bewegung – Atmung – Sprechen hin. Sie gelten als empirische Evidenz, dass Modelle der Sprachproduktion die Bewegung des Gesamtkörpers mit einbeziehen sollten und bisher unvollständig sind. Mit unserer Arbeit schließen wir eine Forschungslücke.
Projektbezogene Publikationen (Auswahl)
-
Speech production
and perception: Learning and memory. Series: Speech production and perception 6.
Berlin: Peter Lang.
Fuchs, Susanne; Joanne Cleland; & Amelie Rochet-Capellan
-
Speaking while moving: Does the head compensate for the hands not
being able to move? Proceedings of the 12th International Seminar on Speech Production.
Providence, RI, USA.
Serré et al.
-
Speech during light and moderate
physical activity: Effect on f0 and vocal intensity. Proceedings of the 12th International
Seminar on Speech Production. Providence, RI, USA.
Weston, H., Fuchs, S. & Rochet-Capellan, A.
-
Changes in glottal source parameter values
with light to moderate physical load. Proceedings of Interspeech, Brno, Czechia.
Weston, H., Koenig, L.L. & Fuchs, S
-
Speech breathing: variable but individual over time and according to limb movements. Annals of the
New York Academy of Sciences, 1505(1), 142-155.
Serré, Hélène; Dohen, Marion; Fuchs, Susanne; Gerber, Silvain; & Rochet‐Capellan, Amélie
-
The respiratory foundations of spoken language.
Annual Review of Linguistics, 7, 13-30.
Fuchs, Susanne; & Rochet-Capellan, Amélie
-
Leg movements affect speech intensity. Journal of Neurophysiology, 128(5), 1106-1116.
Serré, Hélène; Dohen, Marion; Fuchs, Susanne; Gerber, Silvain; & Rochet-Capellan, Amélie
-
Origins of vocal-entangled gesture. Neuroscience & Biobehavioral Reviews, 104836.
Pouw, Wim; & Fuchs, Susanne
-
Speech-breathing-limb interaction and coordination during the production
and the memorization of verbal information.
Serré, Hélène
-
Speech breathing during physical activity is opportunistic. In: Radek
Skarnitzl & Jan Volín (Eds.), Proceedings of the 20th International Congress of Phonetic
Sciences (pp. 1082–106). Prague. Guarant International.
Weston, H.
-
On the relation between leg-motion rate and speech tempo during submaximal cycling exercise Journal of Speech, Language
and Hearing Research
Weston, Heather; Pouw, Wim; & Fuchs, Susanne
