在许多浅水和沿海水域应用中,视觉制导水下机器人与人类潜水员一起执行合作勘探、检查和监测任务。这类陪伴机器人最基本的能力是在水下任务的各个阶段以视觉解读周围环境并协助潜水员。尽管近年来技术不断进步,但现有的实时视觉感知系统和解决方案在很大程度上受到能见度低、光照变化和突出特征稀少等海洋因素的影响。而水下光传播的脆弱性(如与波长相关的衰减、吸收和散射)所导致的一系列非线性图像失真又加剧了这些困难。在本论文中,我们提出了一套新颖的改进型视觉感知解决方案,以应对这些挑战,从而实现有效的水下人机合作。研究成果包括底层视觉和基于学习的算法的新颖设计和高效实施,以及广泛的现场实验验证和单板部署的实时可行性分析。

论文分为三个部分。第一部分侧重于为自动潜航器(AUV)开发实用的解决方案,以便在执行水下任务期间陪伴人类潜水员。其中包括基于视觉的强大模块,使自动潜航器能够理解人类的游泳动作、手势和身体姿势,以便在保持平稳的时空协调的同时跟随人类并与之互动。一系列封闭水域和开放水域现场实验证明了我们提出的感知算法在水下人机合作中的实用性和有效性。我们还确定并量化了这些算法在不利视觉条件下不同操作约束条件下的性能变化。论文的第二部分致力于设计高效的技术,通过恢复水下图像的感知和统计质量来克服能见度低和光学失真的影响。我们进一步证明了这些技术作为视觉导航自动潜航器自主流水线预处理器的实际可行性。最后,本论文的第三部分开发了高层次决策方法,如为快速视觉搜索建立空间注意力模型,学习识别何时需要图像增强和超分辨率模块来实现详细感知等。我们证明,这些方法可将机载视觉感知模块的处理速度提高 45%,使自动潜航器能够做出智能导航和操作决策,尤其是在自主探索任务中。

总之,本论文描述了我们为解决水下人机合作实时机器视觉所面临的环境和操作挑战而进行的尝试。针对各种重要应用,我们开发了稳健、高效的模块,让自动潜航器在仅依靠嘈杂的视觉传感的情况下,通过准确感知周围环境来跟随同伴潜水员并与之互动。此外,我们提出的感知解决方案能让视觉引导机器人在嘈杂条件下看得更清楚,并在有限的计算资源和实时限制条件下做得更好。除了推动最先进技术的发展之外,我们提出的方法和系统还让我们朝着缩小理论与实践之间的差距、改善野外人机合作的方向迈进了一步。

成为VIP会员查看完整内容
29

相关内容

军事防务数据板块介绍:系统化采集、存储、管理、分析与军事国防安全相关信息的专用数据板块,其核心在于整合全球新兴国防技术(军事人工智能、无人系统等)、热点案例(俄乌战争、美以伊战争)等方面的最新时讯、研究报告/论文、条令法规、案例分析,为战略研判、情报分析、决策支持等提供知识支撑。
《通信受限环境中机器人网络的高效任务规划》172页
专知会员服务
74+阅读 · 2024年4月15日
《基于图像识别的持续目标跟踪》163页
专知会员服务
59+阅读 · 2024年4月9日
《无人水面航行器的集群协同优化》131页
专知会员服务
75+阅读 · 2024年3月30日
《利用传感器融合和机器学习增强毫米波雷达功能》145页
《无人机智能控制系统》228页
专知会员服务
120+阅读 · 2024年3月13日
《水下机器人的自然、鲁棒和多模态人机交互》345页
专知会员服务
37+阅读 · 2024年3月11日
《基于深度学习的航空图像车辆检测》276页书籍
专知会员服务
76+阅读 · 2023年6月12日
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
52+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
176+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
501+阅读 · 2023年3月31日
Arxiv
182+阅读 · 2023年3月24日
Arxiv
27+阅读 · 2023年3月17日
VIP会员
最新内容
《Palantir的科技生态系统》
专知会员服务
1+阅读 · 今天15:23
《反无人机系统传感器融合》90页报告
专知会员服务
4+阅读 · 今天14:57
运用人工智能与卫星通信驱散“战争迷雾”
专知会员服务
2+阅读 · 今天14:45
ACL 2026 | LLMSurgeon:从生成文本诊断大模型训练数据
【综述】世界模型:架构、方法、推理与应用全景
综述 | OPSD:大语言模型的在线策略自蒸馏
专知会员服务
4+阅读 · 6月1日
帕兰蒂尔Maven:军事人工智能的新纪元
专知会员服务
8+阅读 · 6月1日
相关VIP内容
《通信受限环境中机器人网络的高效任务规划》172页
专知会员服务
74+阅读 · 2024年4月15日
《基于图像识别的持续目标跟踪》163页
专知会员服务
59+阅读 · 2024年4月9日
《无人水面航行器的集群协同优化》131页
专知会员服务
75+阅读 · 2024年3月30日
《利用传感器融合和机器学习增强毫米波雷达功能》145页
《无人机智能控制系统》228页
专知会员服务
120+阅读 · 2024年3月13日
《水下机器人的自然、鲁棒和多模态人机交互》345页
专知会员服务
37+阅读 · 2024年3月11日
《基于深度学习的航空图像车辆检测》276页书籍
专知会员服务
76+阅读 · 2023年6月12日
相关基金
国家自然科学基金
11+阅读 · 2015年12月31日
国家自然科学基金
52+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员