跳到正文
OpenReview · Representation learning· Chao Wang; Michael Gienger; Fan Zhang·· 2026-07-10AI 评分62

从混合现实中的人类示范学习生成实时机器人情绪表达

Generation of Real-time Robotic Emotional Expressions Learning from Human Demonstration in Mixed Reality

AI 导读

基于摘要分析。该研究面向人机交互中机器人情绪状态的表达,提出从混合现实(Mixed Reality,MR)中的专家示范学习机器人情绪行为的框架。其贡献是将人类多模态表达映射到机器人部件,并利用基于 flow matching 的生成过程,在明确给定情绪状态的条件下,实时生成响应移动物体的连贯、多样行为。 示范采集阶段,专家以第一人称视角遥操作虚拟机器人,系统捕获面部表情、头部运动和上半身手势,并映射到机器人的眼睛、耳朵、颈部和手臂。生成阶段采用情绪条件控制;移动物体信息的具体表示、示范与情绪状态的标注方式、时序建模、训练目标及实时推理实现尚未验证。 作者报告,初步测试验证了该方法生成自主情绪表达的有效性。摘要未提供样本规模、数据划分、对照方法、效果指标或推理延迟,因此尚不能判断其表达真实性、多样性、情绪可辨识性及实时性的量化表现;实验协议、消融及统计信息尚未验证。 平台推测(待验证):该框架对 BCI 的潜在关联更接近情绪驱动的机器人输出端,而非 EEG 解码方法。若用于 EEG 驱动交互,可考虑复用情绪条件生成模块,但需另建 EEG 到情绪条件的估计接口,并处理输出不确定性、时间对齐和机器人动作安全约束。其依赖的人类动作示范与明确情绪条件,不能直接替代低信噪比、跨被试差异显著的 EEG 监督。一个可证伪的小实验是固定生成器,比较参考情绪条件与 EEG 估计条件驱动下的情绪可辨识性和动作稳定性,以检验条件误差是否破坏表达质量;这不是论文已验证的结果,已有 EEG 相关工作尚未检索确认。

来源:OpenReview · Representation learning · openreview.net