解决遮挡与错误映射的影像序列与点云数据融合的方法【中国发明】

一、专利名称及专利号

名称：《解决遮挡与错误映射的影像序列与点云数据融合的方法》

专利号：ZL 202011058164.1

二、应用领域

本发明涉及计算机视觉与点云数据处理技术领域，尤其涉及的是一种解决遮挡与错误映射的影像序列与点云数据融合的方法。

三、专利说明

1、摘要：

本发明公开了一种解决遮挡与错误映射的影像序列与点云数据融合的方法，其特征在于，包括步骤：获取影像序列中影像和所述影像对应的激光点云；根据所述影像和所述激光点云，确定激光点云点与影像像素点的投影关系；根据所述激光点云点与影像像素点的投影关系以及所述激光点云，确定所述影像对应的索引图；根据所述索引图、所述影像以及所述激光点云，确定所述影像对应的融合影像；对所述影像序列中所有影像各自分别对应的融合影像拼接，得到拼接图像。由于将影像序列中各影像各自分别对应的融合影像进行拼接，不会出现因单张影像导致的遮挡和错误映射的问题。

2、背景：

激光雷达和相机作为两种主要的对环境进行感知的传感器具有其各自的优缺点，激光点云中的激光点具有准确的三维位置信息，而影像数据中有丰富的颜色信息。对激光雷达数据与影像数据进行融合的目的主要是融合激光点云数据提供的三维空间几何信息与影像数据提供的颜色信息，相比于原始激光点云，可以提供更加丰富的信息。

现有的激光点云与影像融合方案基于已有的激光雷达与相机的转换矩阵将单帧激光点云与影像像素点对应起来，选择对应影像将像素点的颜色信息赋给激光点云点，然后再将多帧彩色激光点云进行拼接生成最终的彩色激光点云。现有技术中，影像与激光雷达点云数据融合,一般通过确定相机与激光雷达的变换矩阵，然后对每一帧的激光点云和对应的影像进行激光点对应像素点的融合，容易出现遮挡及错误映射的问题。

因此，现有技术还有待于改进和发展。

四、相关文件下载

专利证书：/UploadFiles/20220621/20220621100535663566.pdf

专利详情：/UploadFiles/20220621/20220621100531633163.pdf