跳到正文
arXiv · 表征与预训练· Bo Chen; Huanzhang Hu; Junyang Ma; Bo Yue; Fangdi Yu; Haijier Chen; Xianxin Lai; Shuyu Pan; Zhen Yang; Xiaoquan Sun; Wenze Cui; Zhongliang Jiang; Shaopeng Liu; Jiayu Chen·· 1 天前精选AI 评分77

TACROSS:面向灵巧机器人学习的跨异构触觉传感器高效、低成本、可扩展人类触觉系统

TACROSS: An Efficient and Low-Cost Scalable Human Touch System Across Heterogeneous Tactile Sensors for Dexterous Robot Learning

AI 导读

基于摘要分析。TACROSS 针对机器人触觉演示采集成本高、速度慢,以及人类手套与机器人触觉传感器难以直接对齐的问题,提出在接触事件层面对齐触觉流,并将人类触觉演示用于机器人学习的软硬件系统。 核心机制是避开原始传感器数值的直接匹配:不同传感器在换能原理、布局、空间分辨率和动态响应上存在差异,系统通过 canonicalizers 与 residual adapters,结合具有跨手指注意力的 temporal Transformer,将异构信号映射到共享的 256 维触觉潜在表征。硬件采用五层压阻式手套;作者报告该手套具有 285 个感测点,成本为 USD 10.86,具体成本核算范围尚未验证。 策略学习采用机器人锚定的监督方案:机器人演示是动作真值监督的唯一来源,人类演示用于触觉表征学习,并通过有效的重定向手部目标提供置信度加权辅助监督。摘要未给出接触事件定义、损失形式、重定向有效性判定或置信度计算细节。 作者报告,在四项接触密集型操作任务中,相较传统遥操作,系统实现 3.5 倍效率提升,并将演示采集设备成本降低 95.7%。效率指标的定义、任务划分、机器人与传感器配置、对照设置、消融及统计信息尚未验证,因此这些数字不能直接解释为策略成功率提升。作者计划开源硬件与软件,并公开超过 150 小时的触觉记录数据集;摘要中的计划不等于已发布。 平台推测(待验证):其事件级对齐机制可为异构 EEG 设备的表征学习提供假设,但依赖可跨设备识别的事件语义,不能直接将触觉接触事件等同于 EEG 神经活动。可考虑复用共享潜在空间与残差适配思路,重新设计通道映射和时间对齐;低信噪比、跨被试差异及小样本可能使事件表征失效。一个可证伪的小实验是在具有共同刺激标记的跨设备 EEG 数据上,对比事件级对齐与原始通道对齐,并按被试隔离评估迁移表现。相关 EEG 工作尚未检索确认。

阅读价值

值得核对其以接触事件而非原始通道对齐异构传感器、并以机器人动作真值约束人类演示辅助学习的机制,但采集效率与成本收益的具体评估协议尚未验证。

来源:arXiv · 表征与预训练 · arxiv.org