Untersuchung von Rauschen und Stille in großen Sprachmodellen (C05)

• Fachliche Zuordnung: Künstliche Intelligenz und Maschinelle Lernverfahren ; Bild- und Sprachverarbeitung, Computergraphik und Visualisierung, Human Computer Interaction, Ubiquitous und Wearable Computing
• Förderung: Förderung seit 2026
• Projektkennung: Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 551281144

Dieses Projekt erforscht die interne Repräsentation von Stille und Rauschen in sprachlichen Phänomenen. Rauschen wird als strukturelle Instabilität in Modellrepräsentationen verstanden; Stille hingegen als lernbares Diskursmerkmal, das pragmatische Funktionen wie Zögern oder Sprecherwechsel signalisiert. Mit feinjustierten Large Language Modellen (LLMs) und annotierten Korpora untersuchen wir die Phänomene mit Visual-Analytics Werkzeugen, die ihre Propagierung durch Modellschichten erklärbar machen. Neben technischen Erkenntnissen trägt C05 zur linguistischen Theoriebildung bei, indem es latente Mechanismen in LLMs aufdeckt.

• DFG-Verfahren: Sonderforschungsbereiche
• Teilprojekt zu: SFB 1760: Zu Stille und Rauschen im sprachlichen Signal
• Antragstellende Institution: Universität Konstanz
• Teilprojektleiter: Professor Dr. Daniel Keim