跳到正文

算法、任务与模态

Domain Adaptation 最新动态

Domain Adaptation 研究索引;按可核对的标签归档,不以热度评价质量。

2 条精选近 30 天 2 条共收录 2 条

更新

Domain Adaptation的精选

10月4日周日第 1–2 条
  1. arXiv · 表征与预训练75

    KALEIDO:通过门控折叠几何实现视觉模型用于时间序列预测的输入空间适配

    基于摘要分析。KALEIDO 研究如何将 ImageNet 预训练的 masked autoencoder 用于时间序列预测,核心贡献是将序列渲染的折叠几何作为可控制、可混合的适配维度,以缩小时间序列图像与自然图像之间的差异。 方法先检测主导周期,按规则生成一组折叠几何,将序列渲染成图像并通过图像补全获得预测;随后使用仅在验证集上拟合的逐位置凸组合门控融合各几何的补全结果,再以一个固定融合比例与零样本基线输出结合。作者称,除基线已公布的设置外,不引入逐数据集超参数。这里的验证集门控拟合应与基线的零样本属性区分,完整的数据划分、验证信息使用方式及推理流程尚未验证。 作者报告,在 LTSF 上,仅训练 LayerNorm、所训练参数占比为 0.05% 时,相对已公布的零样本基线,MSE 降低 13%;冻结模型时,MSE 降低 6.6%。在 GIFT-Eval 上,作者报告相对基线的 MASE 改善 7.4%、CRPS 改善 19.3%,但摘要未明确这两项结果对应冻结模型还是 LayerNorm 适配。具体预测长度、任务聚合方式、门控拟合规模、消融及统计信息尚未验证,不宜跨协议直接比较这些结果。 平台推测(待验证):该机制可能用于具有周期结构的 EEG 时间序列预测,但不能据此推断 BCI 解码收益。可复用部分是周期检测、多几何渲染和门控融合;需改造的是多通道组织、幅值归一化及预测任务接口。低信噪比、非平稳周期、跨被试差异及小验证集可能使周期估计或门控不稳定。可检验的小实验是在同一 EEG 预测任务与严格分离的数据划分下,对比单一几何、多几何均匀融合及验证集门控,检查收益是否在跨会话测试中保持。已有相关 EEG 工作尚未检索确认。

    阅读价值:值得核对其周期感知折叠几何与验证集门控如何改善视觉模型的时序预测,尤其是冻结模型的收益及验证集适配与零样本评估的协议边界。

10月3日周六
  1. arXiv · 表征与预训练80

    ZeroMAG:面向即插即用 EEG 基础模型的零样本多模态适配器生成

    基于摘要分析。ZeroMAG 研究如何在保留 EEG 基础模型预训练知识的同时,利用伴随生理信号扩展到异构多模态记录。其核心贡献是从无标签目标记录推断并生成适配器,在冻结 EEG 编码器与预测头的条件下实现多模态扩展,不使用目标标签,也不进行目标端优化。 机制上,ZeroMAG 以不随模态配置变化的适配器组织伴随模态,从无标签记录及任务上下文构建“模态—被试—任务”条件,并在由源适配器学习得到、受功能约束的潜在空间中生成适配器权重。这一路径区别于直接回归权重:生成过程不仅依赖权重表征,还通过功能监督约束表征学习与条件生成。具体适配器结构、条件编码方式、功能监督定义及损失形式尚未验证。 作者报告,在六个留出的目标数据集和三个 EEG 基础模型骨干上,ZeroMAG 的 Balanced Accuracy 相比仅使用 EEG 的推理平均提高 7.22 个百分点,相比直接权重回归提高 4.89 个百分点,与有监督多模态适配的平均差距在 0.50 个百分点以内。作者明确说明,目标数据集未参与 ZeroMAG 流程中的任何模型训练与选择;摘要未给出具体数据集、任务、伴随模态、被试数量及被试内或跨被试等划分协议,因此这些平均结果不能直接外推至特定 BCI 场景。 作者报告,移除表征学习或条件生成任一阶段的功能监督都会降低生成适配器的表现,支持两个组件的贡献。复现时需核对源适配器的训练与监督来源、任务上下文的可用信息、无标签目标记录的使用范围,以及有监督多模态对照的协议。实验协议、消融及统计信息尚未验证;对低信噪比、不同通道配置和伴随模态变化的稳健性也尚未验证。

    阅读价值:值得核对其利用无标签目标记录生成多模态适配器的机制,以及目标数据集隔离与功能监督的实现;作者报告的结果为冻结 EEG 基础模型的零样本多模态扩展提供了具体评估依据。