跳到正文

算法、任务与模态

Human-in-the-loop 最新动态

Human-in-the-loop 研究索引;按可核对的标签归档,不以热度评价质量。

42 条精选近 30 天 9 条共收录 57 条

更新

精选归档 · 第 3 页

1月1日周二第 41–42 条
  1. OpenReview · State space models76

    决策理论规划中的策略解释与模型细化

    基于摘要分析。本学位论文研究不确定性下序贯决策的策略解释与模型细化:先解释 Markov Decision Processes(MDPs)的最优策略,再将专家反馈转化为参数约束,修正 Bayesian networks 和 MDPs,使重新计算的策略符合专家意见。主要贡献是把策略推荐的解释与决策模型的迭代修正联系起来,而非提出神经信号解码方法。 策略解释需要处理随机效应、可能冲突的多个目标以及行动的长期影响。作者提出领域无关的解释模板,以及确定完整论证策略推荐所需最少模板数量的过程。在该框架中,专家拒绝某项解释被视为生成该策略的模型存在不足的信号;但这种解释拒绝是否确实对应模型缺陷,需要结合具体应用核对。 模型细化方面,专家反馈被转换为模型参数上的非凸约束。对于 Bayesian networks,作者采用 Gibbs sampling 与 stochastic hill climbing 寻找满足约束的模型;对于 MDPs,则通过划分参数空间,使用交替线性优化学习能够产生符合专家反馈之策略的参数。摘要未给出约束的具体形式、优化收敛条件或计算成本。 论文还将解释与细化方法扩展到 Factored MDPs:以状态变量表示状态空间,并用 dynamic Bayesian networks 建模转移函数,以缓解大型问题中显式状态表示的组合膨胀。作者报告在本科生选课指导、失智症患者辅助洗手及制造业诊断三个领域开展了实证评估;摘要没有提供样本规模、对照基线或定量结果,实验协议、消融及统计信息尚未验证。 平台推测(待验证):若 BCI 系统另有基于 MDP 的辅助决策层,该框架可能用于解释行动推荐,并通过专家反馈修正决策模型;它并不直接解决 EEG 的低信噪比或跨被试解码问题。可复用部分是解释模板和反馈约束机制,需改造的是状态、动作、奖励及转移模型;神经信号状态估计误差和有限交互数据可能使约束不稳定或相互冲突。一个可检验的小实验是在固定解码器的离线辅助决策任务中,比较模型细化前后的专家约束满足率与任务回报,检验反馈一致性是否以任务性能下降为代价。相关 EEG/BCI 工作尚未检索确认。

    阅读价值:值得阅读的具体机制是将策略解释、专家异议与模型参数约束连接起来,并针对 Bayesian networks 和 MDPs 分别设计约束下的参数修正方法;其解释完整性及修正效果仍需结合全文实验核对。

1月1日周六
  1. OpenReview · EEG71

    用于类人机器人控制的自适应脑机接口

    基于摘要分析。该研究针对机器人 BCI 中固定预设高层行为缺乏灵活性、低层控制又可能增加用户认知负荷的问题,将作者此前提出的自适应分层 BCI 应用于 PR2 机器人控制:用户即时教授新技能,之后可直接通过高层命令调用这些技能。 核心机制是将技能教授与分层命令调用结合,而非仅依赖预先编排的机器人行为。研究还探索由用户显式定义命令序列,以描述涉及多个状态空间的复杂任务。这里的“自适应”主要指技能可在交互过程中学习并供后续调用;摘要未明确 EEG 解码器是否在线更新,也未说明技能学习算法、状态空间定义或命令序列的执行机制,不能将其直接解释为域适应或测试时自适应。 作者报告,三名被试通过基于 EEG 的分层 BCI,成功训练并控制 PR2,在模拟家庭任务中操纵机械臂,将牛奶倒入装有麦片的碗。摘要未提供任务成功率、完成时间、指令识别 Accuracy、训练时长或认知负荷测量,因此该结果支持的是小样本任务可行性演示,尚不足以量化相对固定行为控制或纯低层控制的收益。作者声称,这是首次训练分层 BCI 执行非导航任务,以及首次用其训练涉及多个状态空间的更复杂任务;这些优先性主张尚未独立核对。 复现需进一步核对 EEG 输入范式、信号处理与解码方法、技能表示及学习规则、用户反馈、机器人执行约束和任务成功判据。被试内或跨被试设置、对照条件、消融及统计信息尚未验证,代码与设备配置也未从所给材料确认。

    阅读价值:值得阅读的具体原因是其将 EEG 指令与可即时教授、随后作为高层命令调用的机器人技能结合,并以三名被试的任务演示探索非导航控制与多状态空间任务;性能和认知负荷收益尚需全文验证。