Die Grenzen der Variabilität im Prompt-Verständnis großer Sprachmodelle verstehen und verbessern (D01 {ehem. B06})

• Fachliche Zuordnung: Allgemeine und Vergleichende Sprachwissenschaft, Experimentelle Linguistik, Typologie, Außereuropäische Sprachen
• Förderung: Förderung seit 2021
• Projektkennung: Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 317633480

Dieses Projekt untersucht prompt (in)stability in Large Language Models. Wird dieses Phänomen normalerweise als technisches Ärgernis behandelt, soll es hier als diagnostisches Instrument dienen, mittels dessen durch systematische Manipulation der Prompts der Grad der Übereinstimmung mit linguistischen Annahmen über Grenzen der Variation gemessen wird. Darüber hinaus werden die Stimuli verwendet, um den Mechanismen des Instruction Following näherzukommen.

• DFG-Verfahren: Sonderforschungsbereiche
• Teilprojekt zu: SFB 1287: Die Grenzen der Variabilität in der Sprache: Kognitive, komputationale und grammatische Aspekte
• Antragstellende Institution: Universität Potsdam
• Teilprojektleiter: Professor Dr. David Schlangen