【CVPR2020-Oral-牛津-Facebook】从单个图像进行端到端的视图合成,SynSin-View Synthesis

2020 年 3 月 26 日 专知


http://www.robots.ox.ac.uk/~ow/synsin.html


我们提出了一种单一图像视图合成方法,允许从单一输入图像生成新的场景视图。这是一个挑战,因为它需要从一个单一的图像全面理解3D场景。因此,目前的方法通常使用多幅图像,在地面真实深度上训练,或者局限于合成数据。为此,我们提出了一种新颖的端到端模型;它被训练在真实的图像上,没有使用任何真实的3D信息。为此,我们引入了一种新的可微点云渲染器,用于将潜在的3D点云特征转换为目标视图。我们的细化网络对投影特征进行解码,插入缺失区域,生成逼真的输出图像。我们的生成模型内部的3D组件允许在测试时对潜在特征空间进行可解释的操作,例如,我们可以从单个图像动画轨迹。与以前的工作不同,我们可以生成高分辨率的图像,并推广到其他输入分辨率。我们在Matterport、Replica和RealEstate10K数据集上超越基线和前期工作。



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“VS3D” 就可以获取《【CVPR2020-Oral-牛津-Facebook】从单个图像进行端到端的视图合成》专知下载链接

专知,专业可信的人工智能知识分发,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取5000+AI主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询!
点击“ 阅读原文 ”,了解使用 专知 ,查看获取5000+AI主题知识资源
登录查看更多
1

相关内容

【CVPR2020-Facebook AI】前置不变表示的自监督学习
专知会员服务
47+阅读 · 2020年4月19日
【论文推荐】小样本视频合成,Few-shot Video-to-Video Synthesis
专知会员服务
24+阅读 · 2019年12月15日
最新《生成式对抗网络GAN进展》论文
专知
95+阅读 · 2019年4月5日
新任务&数据集:视觉常识推理(VCR)
专知
50+阅读 · 2018年12月1日
Video-to-Video Synthesis
Arxiv
9+阅读 · 2018年8月20日
Arxiv
9+阅读 · 2018年1月4日
VIP会员
最新内容
世界模型入门:从序贯决策到通用智能体
专知会员服务
6+阅读 · 10月24日
军事域更好使用人工智能的实用指南
专知会员服务
9+阅读 · 10月22日
《衡量语言模型中的作战规划能力》
专知会员服务
14+阅读 · 10月20日
Maven智能系统:帕兰提尔军事人工智能平台详解
专知会员服务
17+阅读 · 10月20日
《测试自动化框架在敏捷软件开发中的角色》
专知会员服务
9+阅读 · 10月20日
俄罗斯如何拦截乌克兰无人机与巡航导弹
专知会员服务
13+阅读 · 10月15日
《武器-目标分配问题:精确与近似求解算法》
专知会员服务
19+阅读 · 10月15日
Top
微信扫码咨询专知VIP会员