TRR 318 - Echtzeitmessung der Aufmerksamkeit im Mensch-Roboter-Erklärdialog (Teilprojekt A05)

Project Period: 2021-07-01 – 2025-06-30
Externally Funded
Alternative Name
TRR 318 - Contextualized and online parametrization of attention in human–robot explanatory dialog (Subproject A05)
Acronym
TRR 318 - A05
Coordinator
Kai Biermeier
Principal Investigator
Katharina Rohlfing, Ingrid Scharlau, Britta Wrede
Member
Ngoc Chi Banh, Amit Singh, André Groß
Department(s)
Kognitive Psychologie und Psychologiedidaktik
Psycholinguistik (Rohlfing)
Description

Das Projekt A05 beschäftigt sich mit Mensch-Roboter-Interaktion und analysiert, wie die Aufmerksamkeit im Erklärprozess gelenkt werden kann. Ziel der experimentellen Untersuchungen ist es, zu verstehen, ob bestimmte Arten der Aufmerksamkeitslenkung auf der Mikro- und Aufgabenebene der Interaktion zu unterschiedlichen Ausprägungen der Aufmerksamkeitspara-metern beim Menschen führen, um diese in das Verhalten eines Roboters im Sinne von Scaffolding und Monitoring zu implementieren. Die Untersuchungen auf der Aufgabenebene adressieren die Interaktionsgeschichte, die Voraussetzung für das Entstehen einer sozialen Praktik ist.


Die Forschenden aus den Bereichen Linguistik, Psychologie und Informatik untersuchen im Projekt A05 den Aspekt der Aufmerksamkeit in der Mensch-Roboter-Interaktion: Wo liegt die Aufmerksamkeit der Menschen, wenn ihnen etwas erklärt wird, wie kann sie gelenkt werden und welchen Einfluss hat sie auf das Verstehen? Um diese Fragen zu beantworten, messen die Wissenschaftler*innen die Aufmerksamkeit in einer laufenden Interaktion zwischen einer Roboter-Simulation und einem Menschen. Darüber hinaus untersuchen sie, unter welchen Bedingungen sprachliche Formulierungen wie „mache X und nicht Y“ dem Erklär- und Verstehprozess zuträglich sind. Aus den Ergebnissen können die Forschenden Rückschlüsse darauf ziehen, wie ein Roboter die Aufmerksamkeit der Interaktionspartner*innen interpretieren und lenken kann, um verständliche Erklärungen zu generieren.

Grant Number
Funding Organisation
Deutsche Forschungsgemeinschaft
Cooperator
Universität Bielefeld

15 Publications

2023 | Journal Article | LibreCat-ID: 49516
RISE: an open-source architecture for interdisciplinary and reproducible human–robot interaction research
A. Groß, C. Schütze, M. Brandt, B. Wrede, B. Richter, Frontiers in Robotics and AI 10 (2023).
LibreCat | Files available | DOI
 
2023 | Journal Article | LibreCat-ID: 51371
EEG Correlates of Distractions and Hesitations in Human–Robot Interaction: A LabLinking Pilot Study
B. Richter, F. Putze, G. Ivucic, M. Brandt, C. Schütze, R. Reisenhofer, B. Wrede, T. Schultz, Multimodal Technologies and Interaction 7 (2023).
LibreCat | DOI
 
2022 | Journal Article | LibreCat-ID: 51348
What is Missing in XAI So Far?
U. Schmid, B. Wrede, KI - Künstliche Intelligenz 36 (2022) 303–315.
LibreCat | DOI
 
2022 | Journal Article | LibreCat-ID: 51366
Explainable AI
U. Schmid, B. Wrede, KI - Künstliche Intelligenz 36 (2022) 207–210.
LibreCat | DOI
 
2022 | Journal Article | LibreCat-ID: 51349
Exploring Monological and Dialogical Phases in Naturally Occurring Explanations
J.B. Fisher, V. Lohmer, F. Kern, W. Barthlen, S. Gaus, K. Rohlfing, KI - Künstliche Intelligenz 36 (2022) 317–326.
LibreCat | DOI
 
2022 | Journal Article | LibreCat-ID: 51344
Which “motionese” parameters change with children's age? Disentangling attention-getting from action-structuring modifications
K. Rohlfing, A.-L. Vollmer, J. Fritsch, B. Wrede, Frontiers in Communication 7 (2022).
LibreCat | DOI
 
2022 | Conference Paper | LibreCat-ID: 51346
An Architecture Supporting Configurable Autonomous Multimodal Joint-Attention-Therapy for Various Robotic Systems
A. Groß, C. Schütze, B. Wrede, B. Richter, in: INTERNATIONAL CONFERENCE ON MULTIMODAL INTERACTION, ACM, 2022, pp. 154–159.
LibreCat | DOI
 
2022 | Conference Paper | LibreCat-ID: 51347
Enabling Non-Technical Domain Experts to Create Robot-Assisted Therapeutic Scenarios via Visual Programming
C. Schütze, A. Groß, B. Wrede, B. Richter, in: INTERNATIONAL CONFERENCE ON MULTIMODAL INTERACTION, ACM, 2022, pp. 166–170.
LibreCat | DOI
 
2023 | Conference Abstract | LibreCat-ID: 46283 | OA
First steps towards real-time assessment of attentional weights and capacity according to TVA
N.C. Banh, I. Scharlau, in: S. Merz, C. Frings, B. Leuchtenberg, B. Moeller, S. Mueller, R. Neumann, B. Pastötter, L. Pingen, G. Schui (Eds.), Abstracts of the 65th TeaP, ZPID (Leibniz Institute for Psychology), 2023.
LibreCat | DOI | Download (ext.)
 
2023 | Journal Article | LibreCat-ID: 48543 | OA
Scaffolding the human partner by contrastive guidance in an explanatory human-robot dialogue
A. Groß, A. Singh, N.C. Banh, B. Richter, I. Scharlau, K.J. Rohlfing, B. Wrede, Frontiers in Robotics and AI 10 (2023).
LibreCat | DOI | Download (ext.)
 
2024 | Conference Abstract | LibreCat-ID: 53069 | OA
Effects of task difficulty on visual processing speed
N.C. Banh, I. Scharlau, in: 2024.
LibreCat | Files available | Download (ext.)
 
2022 | Conference Abstract | LibreCat-ID: 46282 | OA
Effects of verbal negation on TVA’s capacity and weight parameters
N.C. Banh, I. Scharlau, in: S. Malejka, M. Barth, H. Haider, C. Stahl (Eds.), TeaP 2022 - Abstracts of the 64th Conference of Experimental Psychologists , Pabst Science Publishers, 2022.
LibreCat | DOI | Download (ext.)
 
2022 | Conference Abstract | LibreCat-ID: 46289 | OA
Folgen wiederholter Negation auf die Aufmerksamkeit
N.C. Banh, I. Scharlau, K.J. Rohlfing, in: C. Bermeitinger, W. Greve (Eds.), 52. Kongress Der Deutschen Gesellschaft Für Psychologie, 2022.
LibreCat | Download (ext.)
 
2023 | Conference Paper | LibreCat-ID: 46067 | OA
Contrastiveness in the context of action demonstration: an eye-tracking study on its effects on action perception and action recall
A. Singh, K.J. Rohlfing, in: Proceedings of the Annual Meeting of the Cognitive Science Society 45 (45), Cognitive Science Society, Sydney, Australia, 2023.
LibreCat | Files available | Download (ext.)
 
2024 | Conference Paper | LibreCat-ID: 56660
Coupling of Task and Partner Model: Investigating the Intra-Individual Variability in Gaze during Human–Robot Explanatory Dialogue
A. Singh, K.J. Rohlfing, in: Proceedings of 26th ACM International Conference on Multimodal Interaction (ICMI 2024), 2024.
LibreCat | DOI