Image deblurring is a challenging problem in imaging due to its highly ill-posed nature. Deep learning models have shown great success in tackling this problem but the quest for the best image quality has brought their computational complexity up, making them impractical on anything but powerful servers. Meanwhile, recent works have shown that mobile Lidars can provide complementary information in the form of depth maps that enhance deblurring quality. In this paper, we introduce a novel low-complexity neural network for depth-guided image deblurring. We show that the use of the wavelet transform to separate structural details and reduce spatial redundancy as well as efficient feature conditioning on the depth information are essential ingredients in developing a low-complexity model. Experimental results show competitive image quality against recent state-of-the-art models while reducing complexity by up to two orders of magnitude.


翻译:图像去模糊因其高度不适定性而成为成像领域中的一个具有挑战性的问题。深度学习模型在解决此问题上已显示出巨大成功,但对最佳图像质量的追求使其计算复杂度不断攀升,导致它们只能在强大的服务器上运行,缺乏实用性。与此同时,近期研究表明,移动激光雷达能够以深度图的形式提供补充信息,从而提升去模糊质量。本文提出了一种新颖的低复杂度神经网络,用于深度引导的图像去模糊。我们证明了利用小波变换来分离结构细节并减少空间冗余,以及对深度信息进行高效特征条件化,是开发低复杂度模型的关键要素。实验结果表明,与当前最先进的模型相比,该方法在图像质量上具有竞争力,同时将复杂度降低了多达两个数量级。

0
下载
关闭预览

相关内容

低层视觉中的扩散模型:综述
专知会员服务
20+阅读 · 2024年6月18日
【AAAI 2022】跨模态目标跟踪: 模态感知表示和统一基准
专知会员服务
44+阅读 · 2022年1月6日
数据受限条件下的多模态处理技术综述
专知
21+阅读 · 2022年7月16日
CVPR 2019 | 无监督领域特定单图像去模糊
PaperWeekly
14+阅读 · 2019年3月20日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
相关VIP内容
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员