Gaussian splatting (GS) struggles with degraded rendering quality on low-cost devices. To address this issue, we present edge collaborative GS (ECO-GS), where each user can switch between a local small GS model to guarantee timeliness and a remote large GS model to guarantee fidelity. However, deciding how to engage the large GS model is nontrivial, due to the interdependency between rendering requirements and resource conditions. To this end, we propose integrated rendering and communication (IRAC), which jointly optimizes collaboration status (i.e., deciding whether to engage large GS) and edge power allocation (i.e., enabling remote rendering) under communication constraints across different users by minimizing a newly-derived GS switching function. Despite the nonconvexity of the problem, we propose an efficient penalty majorization minimization (PMM) algorithm to obtain the critical point solution. Furthermore, we develop an imitation learning optimization (ILO) algorithm, which reduces the computational time by over 100x compared to PMM. Experiments demonstrate the superiority of PMM and the real-time execution capability of ILO.


翻译:高斯泼溅(GS)在低成本设备上存在渲染质量下降的问题。为解决此难题,本文提出边缘协同高斯泼溅(ECO-GS)框架,允许每个用户在保证实时性的本地小型GS模型与保证保真度的远程大型GS模型之间动态切换。然而,由于渲染需求与资源条件之间的相互依赖关系,如何有效调用大型GS模型成为关键挑战。为此,我们提出集成渲染与通信(IRAC)机制,通过最小化新推导的GS切换函数,在通信约束下联合优化多用户间的协同状态(即决定是否调用大型GS)与边缘功率分配(即实现远程渲染)。尽管该问题具有非凸性,我们提出高效的惩罚主化最小化(PMM)算法以获得临界点解。进一步,我们开发了模仿学习优化(ILO)算法,其计算时间较PMM缩短超过100倍。实验验证了PMM的优越性能以及ILO的实时执行能力。

0
下载
关闭预览

相关内容

三维高斯泼溅应用综述:分割、编辑与生成
专知会员服务
15+阅读 · 2025年8月14日
【ICML2025】解决3D语言高斯溅射中的视角依赖语义
专知会员服务
8+阅读 · 2025年6月2日
【CVPR2025】DropGaussian: 稀视角高斯溅射的结构正则化
专知会员服务
9+阅读 · 2025年4月2日
边缘大型语言模型综述:设计、执行与应用
专知会员服务
41+阅读 · 2024年10月21日
机器人中的三维高斯溅射:综述
专知会员服务
28+阅读 · 2024年10月17日
移动边缘智能与大型语言模型综述
专知会员服务
40+阅读 · 2024年7月31日
《“边缘计算+”技术白皮书》,82页pdf
专知
11+阅读 · 2022年8月28日
【泡泡点云时空】Potree:基于Web浏览器的大规模点云渲染
高翔:谈谈语义SLAM/地图
计算机视觉life
37+阅读 · 2019年3月26日
【边缘智能】边缘计算驱动的深度学习加速技术
产业智能官
20+阅读 · 2019年2月8日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Arxiv
0+阅读 · 2月3日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员