In complex environments, autonomous robot navigation and environmental perception pose higher requirements for SLAM technology. This paper presents a novel method for semantically enhancing 3D point cloud maps with thermal information. By first performing pixel-level fusion of visible and infrared images, the system projects real-time LiDAR point clouds onto this fused image stream. It then segments heat source features in the thermal channel to instantly identify high temperature targets and applies this temperature information as a semantic layer on the final 3D map. This approach generates maps that not only have accurate geometry but also possess a critical semantic understanding of the environment, making it highly valuable for specific applications like rapid disaster assessment and industrial preventive maintenance.


翻译:在复杂环境中,自主机器人导航与环境感知对SLAM技术提出了更高要求。本文提出一种利用热信息增强三维点云语义地图的新方法。系统首先对可见光与红外图像进行像素级融合,再将实时LiDAR点云投影至该融合图像流。通过分割热成像通道中的热源特征,系统可即时识别高温目标,并将温度信息作为语义层叠加至最终三维地图。该方法生成的地图不仅具有精确的几何结构,还能实现对环境的关键语义理解,在快速灾害评估与工业预防性维护等特定应用场景中具有重要价值。

0
下载
关闭预览

相关内容

多模态融合与视觉-语言模型:面向机器人视觉的综述
专知会员服务
35+阅读 · 2025年4月5日
面向无人机视角的多源信息融合目标检测
专知会员服务
18+阅读 · 2025年2月2日
一文详解50多种多模态图像融合方法
专知会员服务
48+阅读 · 2024年4月6日
数据受限条件下的多模态处理技术综述
专知
22+阅读 · 2022年7月16日
综述 | 激光与视觉融合SLAM
计算机视觉life
18+阅读 · 2020年10月8日
专家报告|深度学习+图像多模态融合
中国图象图形学报
12+阅读 · 2019年10月23日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
VIP会员
相关VIP内容
多模态融合与视觉-语言模型:面向机器人视觉的综述
专知会员服务
35+阅读 · 2025年4月5日
面向无人机视角的多源信息融合目标检测
专知会员服务
18+阅读 · 2025年2月2日
一文详解50多种多模态图像融合方法
专知会员服务
48+阅读 · 2024年4月6日
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
Top
微信扫码咨询专知VIP会员