SPP 2236:  Auditive Kognition in interaktiven virtuellen Umgebungen – AUDICTIVE

• Fachliche Zuordnung: Maschinenbau und Produktionstechnik ; Informatik, System- und Elektrotechnik ; Medizin ; Sozial- und Verhaltenswissenschaften
• Förderung: Förderung seit 2020
• Projektkennung: Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 422686707

In den letzten Jahren hat sich unser Verständnis von auditiven kognitiven Prozessen erheblich verbessert - von Wahrnehmung, Aufmerksamkeit und Gedächtnis bis zu komplexen Leistungen wie Szenenanalyse und Kommunikation. AUDICTIVE zielt auf Grundlagenforschung zu den drei Forschungsschwerpunkten ab: (a) "auditive Kognition", (b) "interaktive audiovisuelle virtuelle Umgebungen" und (c) "Qualitätsbewertungsmethoden", wobei letztere an der Schnittstelle zwischen (a) und (b) angesiedelt sind. Die erste Phase von AUDICTIVE konzentrierte sich vor allem auf die Übertragung der gut kontrollierten, aber oft unrealistischen Stimuluspräsentationen, die in der auditiven Kognitionsforschung verwendet werden, auf umfassendere virtuelle oder Mixed-Reality-Umgebungen. Hier spiegelten sich die jüngsten Entwicklungen in der Hard- und Softwaretechnologie wider, wobei die audiovisuelle virtuelle und gemischte Realität (VR, MR) ein hohes Maß an Wahrnehmungsplausibilität erreichte. Auf Basis der Ergebnisse der ersten Phase zielt die zweite Phase von AUDICTIVE darauf ab, geeignete Paradigmen zu identifizieren oder (weiter) zu entwickeln, um sie in realistischeren Szenen zu nutzen, mit dem Ziel, natürliche Wahrnehmung, Erfahrung und/oder Verhalten hervorzurufen. In der zweiten Phase von AUDICTIVE wollen wir deshalb den wissenschaftlichen Kenntnisstand, die Theorien und Modelle, die in der auditiven Wahrnehmungs- und Kognitionsforschung entwickelt wurden, auf noch realistischere Alltagssituationen ausweiten. Hier sollen neue Erkenntnisse, Methoden und Techniken (z. B. psychometrische und kognitive Bewertung, Bewertung der Lebensqualität, physiologische oder verhaltensbezogene Analyse, Signalerfassung und -analyse, Verbesserung der VR/MR-Technologie) für reichhaltigere und komplexere Szenarien unter Einbeziehung interaktiver VR- und/oder MR-Technologie entwickelt werden. Das Koordinationsprojekt wird einen offenen wissenschaftlichen Ansatz fördern, um eine umfassende Ergebnisdatenbank zu entwickeln. Alle Projekte sollen eine Evaluierung der Qualität von VR- und/oder MR-Umgebungen für die Erforschung der auditiven Kognition oder der Validität von Forschungsergebnissen zur auditiven Kognition in VR- und/oder MR-Umgebungen beinhalten und alle Projekte müssen zum zentralen Forschungsdatenmanagement beitragen. Darüber hinaus wird das Koordinationsprojekt das Forschungsdatenmanagement in der Praxis testen, indem ein Ringversuch an verschiedenen Einrichtungen durchgeführt wird. An diesem Punkt wird ein gutes FDM sichtbar und offensichtlich. Denn ein guter Austausch von Experimenten, Szenen und der verwendeten Technik ist nur möglich, wenn die einzelnen Schritte gut dokumentiert und offen verfügbar sind. Zusätzlich wird das Koordinationsprojekt eine Buchpublikation koordinieren, die die Ergebnisse aus beiden Förderperioden einem breiten Publikum zugänglich machen soll.

• DFG-Verfahren: Schwerpunktprogramme

Projekte

• APlausE-MR - Audiovisuelle Plausibilität und und Erleben in Mixed Reality mit mehreren Teilnehmern (Antragsteller Brandenburg, Karlheinz ;  Fröhlich, Bernd ;  Raake, Alexander )
• Audiovisuelle Wahrnehmung von Fahrzeugen in Verkehrssituationen, Phase 2 (Antragsteller Altinsoy, Ercan ;  Oberfeld-Twistel, Daniel )
• Einfluss des Audio-Renderings in virtuellen Umgebungen auf Realismus, Präsenz und sozio-kognitive Verarbeitung (Antragsteller Blau, Matthias ;  Kroczek, Leon ;  Mühlberger, Andreas ;  van de Par, Steven )
• Evaluierung auditiver Kognition in Klassenräumen für verschiedene Altersgruppen, von Vorschulkindern bis zu Erwachsenen, mit Hilfe audiovisueller virtueller Realität - EArAge-VR (Antragstellerinnen / Antragsteller Fels, Janina ;  Klatte, Maria ;  Raake, Alexander )
• EVOLVE-QoE - Gültigkeitsbewertung von interaktiven virtuellen Umgebungen: Ein Rahmenwerk zur Qualität des Erlebens audiovisueller Szenen (Antragsteller Habets, Emanuël ;  Raake, Alexander )
• Kognitive Leistungen beim Zuhören in komplexen audiovisuellen Kommunikationssituationen mit virtuellen Agenten: Untersuchungen zu Aufmerksamkeit, Erinnerungsleistung und Höranstrengung (exAMPLE) (Antragstellerinnen / Antragsteller Fels, Janina ;  Kuhlen, Torsten Wolfgang ;  Schlittmeier, Sabine J. )
• Kognitive und signalgetriebene Faktoren in der Wahrnehmung von statischen und dynamischen Abständen (Antragstellerinnen / Antragsteller Ewert, Stephan ;  Flanagin, Virginia ;  van de Par, Steven )
• Koordinationsfonds (Antragstellerin Fels, Janina )
• Kortikale und Verhaltenmaße der aktiven Kommunikation (Antragsteller Debener, Stefan ;  Hohmann, Volker )
• Mechanismen der Aufmerksamkeit und Integration entlang der drei Dimensionen des auditiven Raums (Antragsteller Schönwiesner, Marc ;  Weinzierl, Stefan )
• Untersuchung auditiver und audio-visueller Bewegungswahrnehmung in realen und virtuellen 3D-Umgebungen sowie der Einflüsse von Aufmerksamkeit und Training (Antragsteller Getzmann, Stephan ;  Martin, Rainer )

• Sprecherin: Professorin Dr.-Ing. Janina Fels