Reliable 3D mesh saliency ground truth (GT) is essential for human-centric visual modeling in virtual reality (VR). However, current 3D mesh saliency GT acquisition methods are generally consistent with 2D image methods, ignoring the differences between 3D geometry topology and 2D image array. Current VR eye-tracking pipelines rely on single ray sampling and Euclidean smoothing, triggering texture attention and signal leakage across gaps. This paper proposes a robust framework to address these limitations. We first introduce a view cone sampling (VCS) strategy, which simulates the human foveal receptive field via Gaussian-distributed ray bundles to improve sampling robustness for complex topologies. Furthermore, a hybrid Manifold-Euclidean constrained diffusion (HCD) algorithm is developed, fusing manifold geodesic constraints with Euclidean scales to ensure topologically-consistent saliency propagation. By mitigating "topological short-circuits" and aliasing, our framework provides a high-fidelity 3D attention acquisition paradigm that aligns with natural human perception, offering a more accurate and robust baseline for 3D mesh saliency research.


翻译:可靠的3D网格显著性真值对于虚拟现实中以人为中心的视觉建模至关重要。然而,当前3D网格显著性真值获取方法通常沿用2D图像方法,忽略了3D几何拓扑与2D图像阵列之间的本质差异。现有虚拟现实眼动追踪流程依赖单射线采样与欧几里得平滑,易引发纹理注意力干扰及跨越间隙的信号泄漏。本文提出一个鲁棒框架以解决这些局限。我们首先引入视锥采样策略,通过高斯分布的射线束模拟人类中央凹感受野,以提升复杂拓扑结构的采样鲁棒性。进一步,我们开发了混合流形-欧几里得约束扩散算法,融合流形测地约束与欧几里得尺度,确保显著性传播的拓扑一致性。通过抑制“拓扑短路”与混叠效应,本框架提供了符合人类自然感知的高保真3D注意力获取范式,为3D网格显著性研究提供了更精确、更鲁棒的基准。

0
下载
关闭预览

相关内容

几种典型的虚实融合技术发展研究
专知会员服务
93+阅读 · 2023年12月17日
虚实结合仿真在军事领域的应用综述
专知会员服务
99+阅读 · 2023年11月19日
《深度伪造检测模型的准确性和鲁棒性》2023最新论文
专知会员服务
41+阅读 · 2023年10月29日
【博士论文】多视光场光线空间几何模型研究
专知会员服务
24+阅读 · 2021年12月6日
专知会员服务
50+阅读 · 2021年4月15日
实战 | 如何制作一个SLAM轨迹真值获取装置?
计算机视觉life
12+阅读 · 2019年10月16日
【学科发展报告】计算机视觉
中国自动化学会
43+阅读 · 2018年10月12日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员