利用 Occ-SDF 混合表示学习房间场景:融合有符号距离函数与占据表示以辅助场景表示
Learning A Room with the Occ-SDF Hybrid: Signed Distance Function Mingled with Occupancy Aids Scene Representation
基于摘要分析。本文研究从图像重建房间级场景时,基于有符号距离函数(SDF)的隐式神经渲染容易遗漏低强度区域结构及小型、薄型物体的问题,提出基于特征的颜色渲染损失与 Occ-SDF 混合表示,分别改善优化信号和几何表示。 在优化机制上,作者报告,原有颜色渲染损失对低强度区域存在优化偏置,会导致梯度消失,使这些区域未能得到充分优化。所提损失利用非零特征值恢复优化信号;摘要未给出特征的来源、提取方式或损失的具体形式。 在表示机制上,作者指出,SDF 表示可能受到查询射线路径上其他物体的影响,扰乱单个物体情况下 SDF 值的单调变化。为此,作者引入逐点编码的 occupancy 表示,并将其与 SDF 结合;作者认为这种逐点表示不受查询射线上其他物体的影响。两种表示的具体融合方式及训练安排尚未验证。 作者报告在三个数据集上开展实验,结果表明上述损失与混合表示联合使用可获得高质量重建,尤其适用于具有挑战性的房间级场景。摘要未列出数据集名称、划分、对照基线或定量指标,实验协议、消融及统计信息尚未验证。摘要提供了代码仓库地址,但实现内容与复现条件尚未核验。 研究的主要对象是三维室内场景重建,而非神经信号分析。当前材料没有提供与 EEG/BCI 的具体机制对应关系,因此不据此提出迁移效果或复现实验建议。
值得关注的是作者将室内重建中低强度区域的优化信号不足与 SDF 表示受沿射线物体影响的问题分开分析,并提出对应机制;其价值目前限于场景表示,材料尚不支持 EEG/BCI 迁移判断。
来源:OpenReview · Representation learning · openreview.net