We introduce an interactive Soft Shadow Network (SSN) to generates controllable soft shadows for image compositing. SSN takes a 2D object mask as input and thus is agnostic to image types such as painting and vector art. An environment light map is used to control the shadow's characteristics, such as angle and softness. SSN employs an Ambient Occlusion Prediction module to predict an intermediate ambient occlusion map, which can be further refined by the user to provides geometric cues to modulate the shadow generation. To train our model, we design an efficient pipeline to produce diverse soft shadow training data using 3D object models. In addition, we propose an inverse shadow map representation to improve model training. We demonstrate that our model produces realistic soft shadows in real-time. Our user study shows that the generated shadows are often indistinguishable from shadows calculated by a physics-based renderer.


翻译:我们引入了一个互动软影阴影网络(SSN), 用于生成可控的软阴影, 用于图像合成。 SSN将 2D 对象遮罩作为输入, 因而对绘画和矢量艺术等图像类型具有不可知性。 使用环境光图来控制阴影的特性, 如角和软性。 SSN使用一个“ 环境封闭预测” 模块来预测一个中间环境封闭性地图, 用户可以对此进行进一步的改进, 以提供几何导线来调节阴影生成。 为了培训我们的模型, 我们设计了一个高效的管道, 以使用 3D 对象模型生成各种软影子培训数据。 此外, 我们提出一个反向的阴影映像来改进模型培训。 我们证明我们的模型实时产生现实的软阴影。 我们的用户研究表明, 生成的阴影往往与物理成型的阴影无法区分开来。

0
下载
关闭预览

相关内容

【ICLR 2019】双曲注意力网络,Hyperbolic  Attention Network
专知会员服务
84+阅读 · 2020年6月21日
 【SIGGRAPH 2020】人像阴影处理,Portrait Shadow Manipulation
专知会员服务
29+阅读 · 2020年5月19日
专知会员服务
110+阅读 · 2020年3月12日
【快讯】CVPR2020结果出炉,1470篇上榜, 你的paper中了吗?
已删除
将门创投
5+阅读 · 2019年10月29日
Arxiv
7+阅读 · 2018年11月27日
Recurrent Fusion Network for Image Captioning
Arxiv
3+阅读 · 2018年7月31日
Arxiv
5+阅读 · 2018年5月1日
VIP会员
最新内容
美国当前高超音速导弹发展概述
专知会员服务
0+阅读 · 今天15:03
《高超音速武器:一项再度兴起的技术》120页slides
无人机蜂群建模与仿真方法
专知会员服务
1+阅读 · 今天14:08
澳大利亚发布《国防战略(2026年)》
专知会员服务
0+阅读 · 今天13:42
【CMU博士论文】迈向基于基础先验的 4D 感知研究
专知会员服务
0+阅读 · 今天13:46
全球高超音速武器最新发展趋势
专知会员服务
1+阅读 · 今天13:17
相关资讯
已删除
将门创投
5+阅读 · 2019年10月29日
Top
微信扫码咨询专知VIP会员