Detailseite
Projekt
Methoden des Reinforcement Lernens in realen, verteilten, kooperierenden Systemen
Antragsteller
Professor Dr. Martin Riedmiller
Fachliche Zuordnung
Automatisierungstechnik, Mechatronik, Regelungssysteme, Intelligente Technische Systeme, Robotik
Förderung
Förderung von 2001 bis 2008
Projektkennung
Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 5318734
Inhalt des Antrags ist die Konzeption und Weiterentwicklung von Reinforcement Lernverfahren zur Steuerung von realen, verteilten Robotersystemen. Der Antrag weist dabei zwei Schwerpunkte auf: 1. die Entwicklung von schnellen Lernalgorithmen für die Individualfähigkeiten eines realen Roboters. Hier existiert ein solider theoretischer Unterbau; allerdings benötigen die heutigen Algorithmen eine um mehrere Größenordnung zu hohe Anzahl an Trainingserfahrungen. Nach heutiger Einschätzung kann dieser Aufwand nur durch eine Kombination verschiedener Methoden (Simulation, Speicherung relevanter Erfahrungen, aktives Lernen) auf ein praktisch vertretbares Maß reduziert werden. Der 2. Schwerpunkt des Antrags liegt in der Konzeption von Lernverfahren zur verteilten Steuerung eines Teams von Robotern in kooperativen Multi-Agenten-Systemen. Hier existieren zur Zeit nur punktuell theoretisch fundierte Lernalgorithmen. Im Zusammenhang mit der Gesamtausrichtung des Schwerpunkts fehlen insbesondere Lernalgorithmen für verteilte, unabhängige, kooperierende Lerner in stochastischer Umgebung. Basierend auf Vorarbeiten unserer Gruppe sollen solche Algorithmen erarbeitet werden. Die Validierung der entwickelten Konzepte soll zum einen durch das Erlernen zentraler Fähigkeiten eines realen Roboters zum anderen durch die Umsetzung in unserem Simulationsklasseteam "Karlsruhe Brainstormers" (dem amtierenden Vizeweltmeister) durchgeführt werden.
DFG-Verfahren
Schwerpunktprogramme
