跳到正文
热点事件观察中

Hidden Cartographer:双预算数据选择

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

基于摘要分析。Hidden Cartographer(HC,arXiv:2610.25215)研究专家标注与微调资源均受限时,如何选择领域LLM指令微调数据。方法分两阶段:以隐藏状态引导候选扩展,迭代标注并更新代理;再按已标注样本的精确训练动态筛选最终训练子集,分别控制标注与训练预算。 作者报告,在医疗、法律、金融领域,标注原始池的20–30%、使用原始池的10–15%微调时,平均Accuracy在所比较的预算基线中最高。摘要未给出具体数值、数据集、模型规模、划分及基线预算配置,提升幅度与稳定性尚未验证。 本次新增为方法与摘要结果报道,无可核对的版本差异。平台分析:代理更新和训练动态计算的额外成本、评分定义及消融尚未验证;摘要无EEG或BCI实验,不能外推为神经信号任务的已验证效果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月18日
  1. arXiv · 学习目标与优化精选
    Hidden Cartographer:隐藏状态引导的双预算约束指令微调数据选择

    基于摘要分析。本文研究在专家标注成本高、微调资源有限的条件下,如何从大规模未标注数据池中选择指令微调数据,提出 Hidden Cartographer(HC),分别控制标注预算与最终训练预算。其核心贡献是将隐藏状态引导的候选扩展与基于精确训练动态的子集筛选串联,而非将标注集合直接作为最终训练集合。 第一阶段 Progressive Candidate Expansion 使用代理迭代筛选未标注候选并交由专家标注,将新增标注样本合并后重新计算训练动态、更新代理,直至耗尽标注预算。第二阶段 Exact Cartography Pruning 根据已标注候选的精确训练动态得分排序,在最终训练预算内保留紧凑子集。摘要将依赖标签的方法在使用伪标签时可能出现选择偏差,以及传统主动学习未显式刻画指令微调动态,作为方法动机;代理如何由隐藏状态构建、动态得分如何定义尚未验证。 作者报告,在医疗、法律和金融领域实验中,HC 的平均 Accuracy 高于所比较的预算约束基线,标注量仅占原始数据池的 20–30%,最终微调数据量占原始数据池的 10–15%。摘要未提供具体 Accuracy、数据集、模型规模、划分方式或各基线预算配置,不能据此判断提升幅度及跨设置稳定性。 复现需核对代理训练与更新成本、训练动态计算方式、专家标注流程,以及不同方法是否采用一致的标注和训练预算口径;实验协议、消融及统计信息尚未验证。该研究的主要对象是领域 LLM 指令微调,摘要未提供 EEG 或 BCI 实验,不能将其数据效率结论视为神经信号任务中的已验证效果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。