Mechanismen nonverbaler Kommunikation: Mimische Emotionserkennung sowie Analyse der Kopf- und Körpergestik

Benutzeradaptives Verhalten stellt eine grundlegende Eigenschaft von Companion-Technologien dar. Voraussetzung hierfür sind sensorische Fähigkeiten, die das System in die Lage versetzen, Rückschlüsse auf den Nutzerzustand (Disposition) und weitere situationsbedingte kommunikationsrelevante Parameter aus nonverbalen Signalen zu ziehen. Teilprojekt C3 leistet durch die visuelle Analyse der Gesichtsmimik sowie der Kopf- und Körperpostur/-gestik einen elementaren Beitrag, um eine möglichst reichhaltige systemseitige Repräsentation der Nutzerdisposition abzuleiten. Die zeitliche Analyse der Kopf- und Körpergestik ermöglicht es zudem, Aktionen und Intentionen eines Nutzers zu erkennen oder solche zu prädizieren. Die Modellierung kognitiver Architekturen basierend auf biologischen Prinzipien hilft, universelle Ansätze zur Informationsverarbeitung und der lernbasierten Adaptationsfähigkeit zu entwickeln.

Mechanisms of non-verbal communication: Mimic emotion recognition and analysis of head and body gestures

User-adaptive behavior is a fundamental characteristic of companion technologies. This requires sensory capabilities that enable the system to draw conclusions about the user's state (disposition) and other situation-related communication-relevant parameters from non-verbal signals. By visually analyzing facial expressions as well as head and body posture/gestures, sub-project C3 makes a fundamental contribution to deriving the richest possible system-side representation of the user's disposition. The temporal analysis of head and body gestures also makes it possible to recognize or predict a user's actions and intentions. The modeling of cognitive architectures based on biological principles helps to develop universal approaches to information processing and learning-based adaptability.