BehavE: Verhalten verstehen durch Situationsmodelle situationsadaptiver Assistenz
Zusammenfassung der Projektergebnisse
Ein Situationsmodell (SM) ist eine semantische Struktur, die die relevanten Elemente einer bestimmten Domäne (d.h. Handlungen, Objekte, Orte, Eigenschaften von Objekten, Abstraktionen von Objekten) und die entsprechenden kausalen, räumlichen, funktionalen und abstrakten Beziehungen zwischen den Elementen darstellt. Situationsmodelle ermöglichen es, Domänenwissen über Personen strukturiert und konsolidiert darzustellen. Diese Modelle werden später für Schlussfolgerungen über das Verhalten, die Bedürfnisse und die Unterstützungsstrategien der Person verwendet. Derzeit werden Situationsmodelle entweder manuell erstellt oder bei der automatischen Generierung werden nur wenige Informationsquellen verwendet. Um dieses Problem zu lösen, wurde in diesem Projekt eine verallgemeinerte Methodik zur Erstellung von Situationsmodellen aus verschiedenen heterogenen Quellen entwickelt. Diese Methodik ermöglicht das Lernen von Modellen für verschiedene Problemdomänen. Genauer gesagt geht es um die folgenden Probleme: (1) automatische Extraktion der Domänenelemente und der Semantik aus heterogenen Quellen; (2) die automatische Konsolidierung des heterogenen Wissens in ein einheitliches Situationsmodell; (3) die automatische Optimierung des erlernten Modells auf der Grundlage der beobachteten Benutzerpräferenzen; (4) die Entwicklung einer Bewertungsmethode für Situationsmodelle für reale Probleme. Um dies zu erreichen, werden bestehende und neuartige Methoden kombiniert, die verschiedene Probleme der Wissensextraktion und des Modelllernens aus heterogenen Quellen angehen. Dazu gehören überwachte und nicht überwachte Techniken zur Extraktion von Semantik und zur Entdeckung von Beziehungen, die Nutzung von vorhandenem strukturiertem Wissen zur Verbesserung der entdeckten Semantik, Optimierungstechniken zur Anpassung des Situationsmodells sowie verschiedene maschinelle Lerntechniken zum Erlernen des Modells mithilfe von Heuristiken. Ausgehend von einer Texteingabe und vorhandenen strukturierten Wissensbasen generiert die Methodik ein Situationsmodell, auf dessen Grundlage computergestützte Zustandsraummodelle (CSSMs) zur Aktivitätserkennung erstellt werden. Durch die zusätzliche Bereitstellung von Sensordaten und entsprechenden Annotationen kann das SM mit der Dauer von Aktionen (als Verteilungen) erweitert werden. Da die generierten Modelle relativ allgemein sind, besteht ein Problem bei der Aktivitätserkennung darin, dass das Modell die ausgeführten Aktivitäten aufgrund zu vieler Optionen nicht korrekt erkennen kann. Um dieses Problem zu beheben, folgt eine Optimierungsphase, in der die Aktionsgewichte auf der Grundlage vorhandener Planspuren und Sensordaten angepasst werden. Um den Ansatz zu evaluieren, werden die gelernten Modelle auf ein Aktivitätserkennungsproblem aus dem Alltag älterer Menschen angewendet. Der vorgeschlagene Ansatz ermöglicht es uns, den Bedarf an Expertenwissen und manueller Entwicklung zu reduzieren, indem er durch automatisch extrahierte Modelle ersetzt wird. Er reduziert den Zeit- und Ressourcenaufwand für die Erstellung von qualitativ hochwertigen Situationsmodellen und für die Entwicklung von Systemen, die auf Domänenwissen angewiesen sind, um die Lösung eines bestimmten Problems zu ermitteln.
Projektbezogene Publikationen (Auswahl)
-
Towards Automated Generation of Semantic Annotation for Activity Recognition Problems. 2020 IEEE International Conference on Pervasive Computing and Communications Workshops (PerCom Workshops), 1-6. IEEE.
Yordanova, Kristina
-
BehavE: Behaviour Understanding Through Automated Generation of Situation Models. Lecture Notes in Computer Science, 362-369. Springer International Publishing.
Stoev, Teodor & Yordanova, Kristina
-
Coping With Imbalanced Data in the Automated Detection of Reminiscence From Everyday Life Conversations of Older Adults. IEEE Access, 9, 116540-116551.
Stoev, Teodor; Ferrario, Andrea; Demiray, Burcu; Luo, Minxia; Martin, Mike & Yordanova, Kristina
-
Annotation Scheme for Named Entity Recognition and Relation Extraction Tasks in the Domain of People with Dementia. 2022 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), 236-241. IEEE.
Suravee, Sumaiya; Stoev, Teodor; Schindler, David; Hochgraeber, Iris; Pinkert, Christiane; Holle, Bernhard; Halek, Margareta; Kruger, Frank & Yordanova, Kristina
-
Pervasive Healthcare: Privacy and Security in Data Annotation. IEEE Pervasive Computing, 21(4), 83-87.
Tonkin, Emma L. & Yordanova, Kristina
-
A Tool for Automated Generation of Domain Specific Symbolic Models From Texts. 2023 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), 276-278. IEEE.
Stoev, Teodor; Sosnowski, Tomasz & Yordanova, Kristina
-
ARDUOUS: Tutorial on Annotation of useR Data for UbiquitOUs Systems - Developing a Data Annotation Protocol. Adjunct Proceedings of the 2023 ACM International Joint Conference on Pervasive and Ubiquitous Computing & the 2023 ACM International Symposium on Wearable Computing, 755-758. ACM.
Tonkin, Emma L.; Tourte, Gregory J. L.; Stoev, Teodor & Yordanova, Kristina
-
Challenges in Modelling Cooking Task Execution for User Assistance. Proceedings of the 8th international Workshop on Sensor-Based Activity Recognition and Artificial Intelligence, 1-4. ACM.
Sosnowski, Tomasz; Stoev, Teodor; Kirste, Thomas & Yordanova, Kristina
-
Experiencing Annotation: Emotion, Motivation and Bias in Annotation Tasks. 2023 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), 534-539. IEEE.
Stoev, Teodor; Yordanova, Kristina & Tonkin, Emma L.
-
Sensor-Based Locomotion Data Mining for Supporting the Diagnosis of Neurodegenerative Disorders: A Survey. ACM Computing Surveys, 56(1), 1-36.
Zolfaghari, Samaneh; Suravee, Sumaiya; Riboni, Daniele & Yordanova, Kristina
-
A Comparative Analysis on Machine Learning Techniques for Research Metadata: the ARDUOUS Case Study. In Porceedings of the 8th ARDUOUS Workshop. 2024
Dipendra Yadav, Emma Tonkin, Teodor Stoev & Kristina Yordanova
-
Assessing Large Language Models for annotating data in Dementia-Related texts: A Comparative Study with Human Annotators. In Porceedings of the 8th ARDUOUS Workshop. 2024
Sumaiya suravee, Teodor Stoev, Kristina Yordanova & Sara Konow
-
Enhancing Kitchen Activity Recognition: A Benchmark Study of the Rostock KTA Dataset. IEEE Access, 12, 14364-14384.
Zolfaghari, Samaneh; Stoev, Teodor & Yordanova, Kristina
-
Variability of annotations over time. An experimental study in the dementia-related named entity recognition domain. In Porceedings of the 8th ARDUOUS Workshop. 2024
Teodor Stoev, Sumaiya Suravee & Kristina Yordanova
