Adaptive Strategien für Assistenztechnologien in Mehrpersonen-Interaktionen II (ASAMI II)

Übergeordnete Ziele von ASAMI II sind das Verständnis des Verhältnisses zwischen sprachlich erfassbaren Dispositionen und Handlungsintentionen und darüber hinaus die Strategien von Nutzern eines Assistenzsystems in einer Mehrpersonensituation. Dafür wird die Entwicklung, Evaluierung und Optimierung der situationsbezogenen Dispositionserkennung des Benutzers durch gesprochene Sprache weiterhin im Fokus bleiben. Dies wird um die Komponente der Handlungsintentionserkennung im dialogischen Umfeld erweitert. Die Bewertung von Nutzercharakteristiken stellt für das Dialogmanagement eine wichtige Voraussetzung dar. Es wird eine informierte Dispositionserkennung etabliert, die sich auf akustische Ereignisse stützt, welche aus spektralen, prosodischen und paralinguistischen Merkmalen ableitbar sind. Die gewonnenen Erkenntnisse werden dabei direkt in die Handlungsintentions- und Interaktionsstilerkennung einfließen, die für eine adaptive, zielorientierte Dialogstrategie genutzt werden. Komplementär dazu werden die akustischen Nutzersignale innerhalb einer Mehrpersonensituation analysiert. Dazu wird das dynamische Wechselspiel zwischen aktiven und passiven Interaktionsanteilen (Involvement) eines Kommunikationspartners auf akustischer Ebene analysiert. Solch dynamische Änderungen sind integrales Merkmal einer Konversation und geben Aufschluss über Strategien des Nutzers. Insbesondere lässt sich dieses Wechselspiel bei einem Szenario bestehend aus einem Assistenzsystem und mehreren Personen beobachten. Hier geht es vor allem um die Etablierung adaptiver Problemlösungsstrategien.

Adaptive strategies for assistance technologies in multi-person interactions II (ASAMI II)

The overarching goals of ASAMI II are to understand the relationship between verbal dispositions and intentions to act, as well as the strategies of users of an assistance system in a multi-person situation. For this, the development, evaluation and optimization of the situation-related disposition recognition of the user through spoken language will remain in focus. This is expanded to include the component of recognizing action intentions in the dialogic environment. The evaluation of user characteristics is an important prerequisite for dialogue management. An informed disposition recognition is established, which is based on acoustic events, which can be derived from spectral, prosodic and paralinguistic features. The knowledge gained will flow directly into the recognition of action intentions and interaction style, which will be used for an adaptive, goal-oriented dialogue strategy. Complementary to this, the acoustic user signals are analyzed within a multi-person situation. For this purpose, the dynamic interplay between active and passive interaction parts (involvement) of a communication partner is analyzed on an acoustic level. Such dynamic changes are an integral feature of a conversation and provide information about the user's strategies. In particular, this interplay can be observed in a scenario consisting of an assistance system and several people. The focus here is on establishing adaptive problem-solving strategies.