跳到正文
OpenReview · Representation learning· Chen Feng; Jian Cheng; Yang Xiao; Zhiguo Cao·· 2025-01-01精选AI 评分74

基于通用表征的单样本跨域实例检测

One-Shot Cross-Domain Instance Detection With Universal Representation

AI 导读

基于摘要分析。本文研究 One-shot Cross-domain Instance Detection(OCID):给定一个域中的单个实例样本,在另一域中检测该实例的特定对应对象,例如由可见光样本检索并定位红外图像中的对应实例。核心贡献是以多种预训练视觉骨干的动态融合,同时应对数据稀缺、域偏移与实例级区分问题;研究对象是视觉实例检测,并非 EEG 或 BCI。 方法利用多个在不同数据集上预训练、具有不同表征偏置的深度网络,通过 Transformer 为不同骨干分配注意力权重,形成适配当前单样本实例的通用表征。训练结合跨域与域内对比学习及困难样本挖掘,以共同增强域适应能力和实例判别能力。作者将其描述为元学习式的可迁移方案,并称可在不微调的情况下适应新的、甚至未见过的 OCID 任务;具体损失、监督要求和任务构造尚未验证。 作者报告构建了包含 14 个数据来源、超过 6K 个实例的测试数据集,覆盖多种对象类型及显著外观变化,并考虑跨光谱、图像退化等域偏移。作者报告实验支持该方法的优势与通用性,但所给摘要未列出指标、数值、数据划分及对照结果,因而无法判断优势幅度或未见任务的具体评估边界。作者称代码和数据集已公开,其可用性及复现条件尚未核验;实验协议、消融及统计信息尚未验证。 平台推测(待验证):可迁移的假设是,多骨干动态融合有望针对 EEG 跨会话变化选择互补表征,而非直接迁移视觉检测能力。可复用的是融合和对比学习思路,需改造为 EEG 编码器、时序输入及合适的跨域正负样本定义;视觉实例对应关系不能直接等同于 EEG 类别或被试对应关系。低信噪比、通道不一致和小数据可能使融合权重过拟合,或使困难样本挖掘放大噪声。一个可检验的小实验是在固定 EEG 跨会话划分与相同标签预算下,比较单骨干、固定融合和动态融合,检验收益是否来自动态组合。相关 EEG 工作尚未检索确认。

阅读价值

值得关注的是其以 Transformer 动态融合多种预训练表征、联合跨域与域内对比学习来处理单样本实例检测的机制,但具体性能优势与 EEG 迁移价值尚未验证。

来源:OpenReview · Representation learning · openreview.net