Nicht-intrusive intentions-adaptive Interaktionen in HCI-Umgebung

Der Fokus des PhD-Projektes liegt auf der Entwicklung eines nicht-intrusiven bildbasierten Systems zur intentionsbasierten Interpretation von Benutzeraktionen auf der Grundlage von Multi-Modalitäten (z.B. Audio-, Mimik- und Aktionsanalyse), dessen Grundidee unabhängig von der Anwendung möglichst allgemein gültig sein soll.

Da die Interpretation von längeren Benutzeraktionen aufgrund von Benutzerfehlern, ungewöhnlicher Artikulation oder ungewöhnlichen Rahmenbedingungen immer komplexer wird, liegen die Forschungsschwerpunkte in diesem PhD-Projekt einerseits in der nicht-intrusiven Erfassung von Aktionen inklusive der Interpretation, andererseits in der geeigneten Repräsentation des Diskurskontextes und der Implementierung einer Bewertungsstrategie zum bestehenden emotionalen und intentionalen Zustand des Benutzers im Mehrpersonenszenario.

Non-intrusive intention-adaptive interactions in an HCI environment

The focus of the PhD project is on the development of a non-intrusive image-based system for the intention-based interpretation of user actions based on multi-modalities (e.g. audio, facial expression and action analysis), the basic idea of which should be as generally valid as possible regardless of the application.

Since the interpretation of longer user actions is becoming increasingly complex due to user errors, unusual articulation or unusual framework conditions, the research focus in this PhD project lies on the one hand in the non-intrusive recording of actions including the interpretation, and on the other hand in the appropriate representation of the discourse context and the implementation of an evaluation strategy for the existing emotional and intentional state of the user in the multi-person scenario.