We present a new versatile building block for deep point cloud processing architectures that is equally suited for diverse tasks. This building block combines the ideas of spatial transformers and multi-view convolutional networks with the efficiency of standard convolutional layers in two and three-dimensional dense grids. The new block operates via multiple parallel heads, whereas each head differentiably rasterizes feature representations of individual points into a low-dimensional space, and then uses dense convolution to propagate information across points. The results of the processing of individual heads are then combined together resulting in the update of point features. Using the new block, we build architectures for both discriminative (point cloud segmentation, point cloud classification) and generative (point cloud inpainting and image-based point cloud reconstruction) tasks. The resulting architectures achieve state-of-the-art performance for these tasks, demonstrating the versatility and universality of the new block for point cloud processing.


翻译:我们为深点云层处理结构展示了新的多功能构件,这种构件同样适合多种任务。 这个构件将空间变压器和多视图变速网络的理念与标准变速层在两维和三维密度电网中的效率相结合。 新构件通过多个平行头部运行,而每个头部将单个点的特征表达方式不同地分解成一个低维空间,然后用密集的变速来在不同点传播信息。 然后将单个头的处理结果合并在一起,从而更新点特征。 我们利用新构件,为区分性(点云分解、点云分级)和基因(点云的成形和图像的点云重造)任务构建了结构。 由此形成的构件可以实现这些任务的最新性表现, 展示了点云处理新块的多功能性和普遍性。

0
下载
关闭预览

相关内容

根据激光测量原理得到的点云,包括三维坐标(XYZ)和激光反射强度(Intensity)。 根据摄影测量原理得到的点云,包括三维坐标(XYZ)和颜色信息(RGB)。 结合激光测量和摄影测量原理得到点云,包括三维坐标(XYZ)、激光反射强度(Intensity)和颜色信息(RGB)。 在获取物体表面每个采样点的空间坐标后,得到的是一个点的集合,称之为“点云”(Point Cloud)
一份简单《图神经网络》教程,28页ppt
专知会员服务
127+阅读 · 2020年8月2日
ExBert — 可视化分析Transformer学到的表示
专知会员服务
32+阅读 · 2019年10月16日
BERT/Transformer/迁移学习NLP资源大列表
专知
19+阅读 · 2019年6月9日
Unsupervised Learning via Meta-Learning
CreateAMind
44+阅读 · 2019年1月3日
利用 Universal Transformer,翻译将无往不利!
谷歌开发者
5+阅读 · 2018年9月4日
Arxiv
17+阅读 · 2021年3月29日
Arxiv
6+阅读 · 2019年9月25日
The Evolved Transformer
Arxiv
5+阅读 · 2019年1月30日
VIP会员
相关资讯
相关论文
Arxiv
17+阅读 · 2021年3月29日
Arxiv
6+阅读 · 2019年9月25日
The Evolved Transformer
Arxiv
5+阅读 · 2019年1月30日
Top
微信扫码咨询专知VIP会员