定位模型的训练方法和点云数据定位方法及装置与流程

文档序号:32708838发布日期:2022-12-28 00:39阅读:31来源:国知局
定位模型的训练方法和点云数据定位方法及装置与流程

1.本技术属于定位技术领域,尤其涉及一种定位模型的训练方法和点云数据定位方法及装置。


背景技术:

2.随着定位技术的发展,越来越多的可移动设备通过自身定位实现导航和自动移动。由于可移动设备的应用场景的越来越多,例如,在复杂的户外场景、多样的室内场景中,导航系统对机器人和自动驾驶汽车的高鲁棒,到高精度定位有着极高的要求;又例如拥有自动驾驶功能的智能车辆、扫地机器人,以及无人机等产品,因此,可移动设备在应用过程中对定位精度的要求越来越高。
3.目前,为了便于在可移动设备中实现精确定位,常常利用激光雷达通过相关点云算法来实现定位功能。例如,现有的点云定位方式中,需要利用组合导航数据预测车辆位姿,并利用扩展卡尔曼滤波进行车辆定位。其中,整个算法计算量大,步骤复杂冗余,且定位欠缺鲁棒性,因此,如何基于点云数据实现提高定位精度的问题亟需解决。


技术实现要素:

4.本技术实施例提供一种定位模型的训练方法和点云数据定位方法及装置,能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
5.第一方面,本技术实施例提供一种定位模型的训练方法,该方法包括:获取预设训练样本,其中,预设训练样本包括训练集和验证集,训练集包括第一预设数量的第一点云数据,验证集包括第二预设数量的第二点云数据;根据训练集中的第一点云数据,对预先构建的点云定位模型进行训练,得到训练后的点云定位模型;将验证集中的第二点云数据输入训练后的点云定位模型,并获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据对应位置的预测特征信息;根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。
6.在第一方面的一些可实现方式中,预先构建的点云定位模型包括向量转换网络、特征提取网络和预设特征聚合函数;根据训练集中的第一点云数据,对预先构建的点云定位模型进行训练,得到训练后的点云定位模型,包括:将每个第一点云数据输入向量转换网络,得到每个第一点云数据对应的第一转换向量;
将每个第一转换向量输入特征提取网络,得到每个第一点云数据的初始特征信息;将每个第一点云数据的初始特征信息输入预设特征聚合函数,得到每个第一点云数据对应的第一全局描述符,其中,第一全局描述符用于表示第一点云数据的定位的特征信息;根据预设损失函数和每个第一点云数据对应的第一全局描述符,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
7.在第一方面的一些可实现方式中,根据预设损失函数和每个第一点云数据对应的第一全局描述符,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型,包括:根据预设损失函数和每个第一点云数据对应的第一全局描述符,确定点云定位模型的损失值;根据损失值,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
8.在第一方面的一些可实现方式中,训练集还包括每个第一点云数据的标记信息,标记信息包括第m个第一点云数据的正样本和第m个第一点云数据的负样本,正样本包括第一预设数量个第一点云数据中与第m个第一点云数据相似的第一点云数据的标识,负样本包括第一预设数量个第一点云数据中与第m个第一点云数据不相似的第一点云数据的标识,其中,m∈m,m为第一预设数量;根据预设损失函数和每个第一点云数据对应的第一全局描述符,确定点云定位模型的损失值,包括:计算每个所述第一点云数据对应的第一全局描述符与所述正样本对应的全局描述符的第一欧氏距离,以及,计算每个所述第一点云数据对应的第一全局描述符与所述负样本对应的全局描述符的第二欧氏距离;对应每个第一点云数据,计算第一欧氏距离与第二欧氏距离的差值,并对m个差值进行求和计算得到初始损失值;计算预设超参数与初始损失值的和;其中,当预设超参数与初始损失值的和大于或等于零时,将预设超参数与初始损失值的和作为损失值;当预设超参数与初始损失值的和小于零时,将损失值设置为预设数值。
9.在第一方面的一些可实现方式中,根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值,包括:获取预设点云地图;根据每个第二点云数据的预测特征信息和预设点云地图,确定每个第二点云数据的预测位置信息;根据每个第二点云数据的预设位置信息和第二点云数据的实际位置信息,确定训练后的点云定位模型的定位精度值。
10.在第一方面的一些可实现方式中,根据每个第二点云数据的预测特征信息和预设点云地图,确定每个第二点云数据的预测位置信息,包括:
根据第二点云数据的预测特征信息,计算第二点云数据与预设点云地图之间的最小欧氏距离;将预设点云地图中最小欧氏距离对应位置,作为第二点云数据的预测位置信息。
11.第二方面,本技术实施例提供一种点云数据定位方法,该方法包括:获取实时采集的点云数据;将点云数据输入目标定位模型,通过目标定位模型输出点云数据的全局描述符,其中,目标定位模型根据实现第一方面或者第一方面任一可实现方式中的定位模型的训练方法训练得到,全局描述符用于表示点云数据对应位置的预测特征信息;根据点云数据的预测特征信息,计算点云数据与预设点云地图之间的最小欧氏距离;将预设点云地图中最小欧氏距离对应位置,确定为点云数据的目标位置。
12.第三方面,本技术实施例提供一种定位模型的训练装置,包括:获取模块,用于获取预设训练样本,其中,预设训练样本包括训练集和验证集,训练集包括第一预设数量的第一点云数据,验证集包括第二预设数量的第二点云数据;处理模块,用于根据训练集中的第一点云数据,对预先构建的点云定位模型进行训练,得到训练后的点云定位模型;处理模块,还用于将验证集中的第二点云数据输入训练后的点云定位模型,并获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据对应位置的预测特征信息;处理模块,还用于根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;处理模块,还用于在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。
13.第四方面,本技术实施例提供一种点云数据定位装置,包括:获取模块,用于获取实时采集的点云数据;处理模块,用于将点云数据输入目标定位模型,通过目标定位模型输出点云数据的全局描述符,其中,目标定位模型根据实现第一方面或者第一方面任一可实现方式中的定位模型的训练方法训练得到,全局描述符用于表示点云数据对应位置的预测特征信息;处理模块,还用于根据点云数据的预测特征信息,计算点云数据与预设点云地图之间的最小欧氏距离;处理模块,还用于将预设点云地图中最小欧氏距离对应位置,确定为点云数据的目标位置。
14.第三方面,本技术提供一种电子设备,该设备包括:处理器以及存储有计算机程序指令的存储器;处理器执行计算机程序指令时实现第一方面或者第一方面任一可实现方式中的定位模型的训练方法,或者实现如第二方面中的点云数据定位方法。
15.第四方面,本技术提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现第一方面或者第一方面任一可实现方式中的定位模型的训练方法,或者实现如第二方面中的点云数据定位方法。
16.第五方面,本技术实施例提供了一种计算机程序产品,计算机程序产品中的指令
由电子设备的处理器执行时,使得电子设备执行如第一方面或者第一方面任一可实现方式中的定位模型的训练方法,或者如第二方面中的点云数据定位方法。
17.本技术实施例的定位模型的训练方法和点云数据定位方法及装置,获取预设训练样本,通过使用预设训练样本中训练集和验证集中的点云数据,对预先构建的点云定位模型进行训练和验证。其中。在验证过程中,通过使用获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据的定位的预测特征信息;根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。如此,根据本技术实施例得到的目标定位模型,能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
附图说明
18.为了更清楚地说明本技术实施例的技术方案,下面将对本技术实施例中所需要使用的附图作简单的介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
19.图1是本技术实施例提供的一种定位模型的训练方法的流程示意图;图2是本技术实施例提供的一种预先构建的点云定位模型的示意图;图3是本技术实施例提供的一种点云数据定位方法的流程示意图;图4是本技术实施例提供的一种定位模型的训练装置的流程示意图;图5是本技术实施例提供的一种定位模型的训练装置的结构示意图;图6是本技术实施例提供的一种电子设备的结构示意图。
具体实施方式
20.下面将详细描述本技术的各个方面的特征和示例性实施例,为了使本技术的目的、技术方案及优点更加清楚明白,以下结合附图及具体实施例,对本技术进行进一步详细描述。应理解,此处所描述的具体实施例仅意在解释本技术,而不是限定本技术。对于本领域技术人员来说,本技术可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本技术的示例来提供对本技术更好的理解。
21.需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
22.随着定位技术的发展,越来越多的可移动设备通过自身定位实现导航和自动移动。由于可移动设备的应用场景的越来越多,例如,在复杂的户外场景、多样的室内场景中,导航系统对机器人和自动驾驶汽车的高鲁棒,到高精度定位有着极高的要求;又例如拥有自动驾驶功能的智能车辆、扫地机器人,以及无人机等产品,因此,可移动设备在应用过程
中对定位精度的要求越来越高。
23.目前,为了便于在可移动设备中实现精确定位,常常利用激光雷达通过相关点云算法来实现定位功能。例如,现有的点云定位方式中,需要利用组合导航数据预测车辆位姿,并利用扩展卡尔曼滤波进行车辆定位。其中,整个算法计算量大,步骤复杂冗余,且定位欠缺鲁棒性,因此,如何基于点云数据实现提高定位精度的问题亟需解决。
24.为了解决现有技术问题,本技术实施例提供了一种定位模型的训练方法和点云数据定位方法及装置。下面首先对本技术实施例所提供的定位模型的训练方法进行介绍。
25.图1示出了本技术一个实施例提供的定位模型的训练方法的流程示意图。如图1所示,该方法可以包括步骤110至步骤150。
26.步骤110,获取预设训练样本。
27.其中,预设训练样本包括训练集和验证集,训练集包括第一预设数量的第一点云数据,验证集包括第二预设数量的第二点云数据;步骤120,根据训练集中的第一点云数据,对预先构建的点云定位模型进行训练,得到训练后的点云定位模型;步骤130,将验证集中的第二点云数据输入训练后的点云定位模型,并获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符。
28.其中,预测全局描述符用于表示第二点云数据对应位置的预测特征信息。
29.步骤140,根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值。
30.步骤150,在所述定位精度值满足预设精度条件的情况下,将所述训练后的点云定位模型确定为目标定位模型。
31.下面介绍上述各个步骤的具体实现方式。
32.具体地,涉及上述步骤110,获取预设训练样本。在预设训练样本中包括多个点云数据。示例性的,可以对预设应用场景采集得到的点云数据,在预设应用场景中对应已建立有点云地图。预设应用场景例如预设的路段、商场等公共场所,预设应用场景还可以是居住空间等个人使用场所,在此并不具体限定。在对预设应用场景采集的多个点云数据中每个点云数据包括具体地位置信息。
33.在一些实施例中,可以根据模型训练的需求,对预设应用场景采集的多个点云数据进行划分,例如,可以从多个点云数据中随机提取第一预设数量的点云数据,生成模型的训练集;可以从多个点云数据中随机提取第二预设数量的点云数据,生成模型的验证集。可选地,可以根据实际训练需求,在提取点云数据的过程中,可以设置提取条件。例如,提取条件可以是训练集的点云数据和验证集的点云数据不重合。为了便于描述,在本技术实施例中,可以将训练集中的点云数据描述为第一点云数据,将验证集中的点云数据描述为第二点云数据。
34.在一些实施例中,为了提高模型训练速度和模型训练精度。可以对预设应用场景采集得到的点云数据进行预处理,将预处理后的点云数据作为在预设训练样本中包括的多个点云数据。示例性的,预处理可以包括对采集的点云数据进行剪裁,保留点云数据中的主要区域。具体例如,可以基于采集点云数据的激光雷达建立三维坐标系,并预设保留点云数据的坐标范围。
35.示例性的,通过激光雷达对预设应用场景采集得到点云数据后,将坐标范围之外的点移除。以激光雷达为坐标原点为例,对应每个坐标轴的坐标范围可以设置(-80,80),即,x,y,z中每个坐标轴对应坐标的取值在(-80,80)范围内。由于在采集的每帧点云数据中超出坐标范围的点包括信息量较少,因此,在移除坐标范围的之外的点后,并不影响模型训练精度。
36.可选地,在预处理过程中还可以包括对点云数据进行下采样处理和归一化处理。例如,在剪裁得到固定坐标范围内的点云数据后,还可以对固定坐标范围内的点云数据进行下采样处理。示例性的,下采样处理例如可以是随机均匀的从每帧固定坐标范围内的点云数据中采样的预设数量个点。其中,预设数量个点可以为4096,在此并不具体限制。
37.接下来,将每帧点云数据对应的预设数量个点的坐标进行归一化处理,从而将每帧点云数据中每个点的坐标值转换到[-1,1]之间。示例性的,归一化公式可以如公式(1)所示。
[0038]
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
(1)其中,a为归一化后的坐标值,a
(x,y,z)
表示每帧点云数据中每个点的坐标,avg(x,y,z)表示固定坐标范围内的点云数据中坐标平均值,c为预设常数。示例性的,c可以根据固定坐标范围确定。例如,每个坐标轴对应的取值范围为(-80,80),c可以取值为80。
[0039]
根据本技术实施例,通过对上述预设应用场景中采集得到的点云数据进行预处理,将预处理后的点云数据作为在预设训练样本中包括的多个点云数据,并基于预设训练样本生成训练集和验证集,可以有效提高模型的训练速度和训练后模型的定位精度。
[0040]
涉及上述步骤120,可以使用训练集中的第一点云数据,对预先构建的点云定位模型进行训练。
[0041]
在一些实施例中,预先构建的点云定位模型包括向量转换网络、特征提取网络和预设特征聚合函数。具体地,将每个第一点云数据输入向量转换网络,得到每个第一点云数据对应的第一转换向量;将每个第一转换向量输入特征提取网络,得到每个第一点云数据的初始特征信息;将每个第一点云数据的初始特征信息输入预设特征聚合函数,得到每个第一点云数据对应的第一全局描述符,其中,第一全局描述符用于表示第一点云数据的定位的特征信息;根据预设损失函数和每个第一点云数据对应的第一全局描述符,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
[0042]
示例性的,向量转换网络例如可以是transform转换网络,在transform转换网络中,可以分别预先设定卷积层(conv)、最大池化层(maxpooling)以及全连接层(fully connected layer,fcl)的数量。
[0043]
例如,图2是本技术实施例提供的一种预先构建的点云定位模型的示意图。结合图2所示,点云定位模型中的transform转换网络可以包括三层卷积层211,一层最大池化层212和三层全连接层213。
[0044]
在卷积层211中, conv(h,w,c)用于表示使用(h*w)大小的卷积核,其输出通道大小为c,即有c个大小为(h*w)的卷积核进行卷积操作。继续结合图2所示,第一层卷积层211a可以表示为conv(1,3,64),第二层卷积层211b可以表示为conv(1,1,128),第三层卷积层
211c可以表示为conv(1,1,1024)。
[0045]
最大池化层212可以表示最大池化操作。
[0046]
在全连接层213中,fc(x)用于表示尺寸大小为x的全连接层。继续结合图2所示,第一层全连接层213a可以表示为fc(512),第二层全连接层213b可以表示为fc(256),第三层全连接213c可以表示为fc(9)。
[0047]
将训练集中的第一点云数据输入向量转换网络后,其中,由于最大池化操作采用具有对称性的对称函数,通过最大池化层可以克服点云数据的无序性,实现聚合点云数据中每个点的信息。根据本技术实施例,点云数据经过卷积层、最大池化层、三层全连接层,从而可以不受输入顺序的影响,得到每个第一点云数据的第一转换向量,可选地,可以通过向量l1表示,其中,第一转换向量可以用来表征第一点云数据的底层特征。
[0048]
在一些实施例中,特征提取网络可以包括inception二分支结构卷积分支。在inception二分支结构中可以包括多个模块,在每个模块中可以包括两个卷积分支,其中,inception二分支结构中模块的数量可以根据实际应用需求进行设置。继续结合图2所示,以inception二分支结构包括5个模块为例,在模块221中两个卷积分支的卷积核分别为conv(3,3,32)和conv(5,3,32),在模块222中两个卷积分支的卷积核分别为conv(3,1,32)和conv(5,1,32),在模块223中两个卷积分支的卷积核分别为conv(3,1,32)和conv(5,1,32),在模块224中两个卷积分支的卷积核分别为conv(3,1,64)和conv(5,1,64),在模块225中两个卷积分支的卷积核分别为conv(3,1,128)和conv(5,1,128)。
[0049]
在每个模块中,两个卷积分支分别的卷积结果进行拼接,并将拼接后的卷积结果输入下一模块中。基于此,每个点云数据的第一转换向量,依次经过模块221、模块222、模块223、模块224、模块225,得到每个第一点云数据的初始特征信息。在一些实施例中,通过使用多分支多尺度的inception卷积结构,可以保证训练后的点云定位模型可以捕获点云之间点与点的拓扑结构信息,使用不同尺寸的感受野可以提取点云中不同尺寸物体的信息,保证训练后的点云定位模型高精度检索点云。
[0050]
通过特征提取网络输出初始特征信息后,初始特征信息输入预设特征聚合函数,可以生成初始特征信息的全局描述符。由于第一全局描述符用于表示第一点云数据的定位的特征信息,从而可以保证训练后点云定位模型的定位精度,且能够有效减少模型的计算量,便于快速部署训练后的点云定位模型。
[0051]
可选地,预设特征聚合函数可以是平均池化(generalized mean pooling,gem)池化函数。示例性的,继续结合图2所示,初始特征信息输入预设特征聚合函数230,从而输入第一点云数据对应的第一全局描述符。
[0052]
作为一个具体地示例,预设特征聚合函数可以如公式(2)所示。
[0053]
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
(2)其中,f
(g)
表示通过预设特征聚合函数输出的第一全局描述符,共有k维,每一维度
共有xk个值,对于第k个值求由该维度的xk个值求pk次方再相加后除以xk总和,再开pk次方根,其中的pk为k维对应的超参数,由网络模型学习而得。f
(g)
是由k个值组成的新向量,[

]
t
为转置。
[0054]
根据本技术实施例,通过结合特征提取网络中的多分支多尺度的卷积结构和预设特征聚合函数,可以有效提高点云定位模型的定位精度和鲁棒性。
[0055]
在获得第一点云数据对应的第一全局描述符后,可以结合预设损失函数自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
[0056]
在一些实施例中,根据预设损失函数和每个第一点云数据对应的第一全局描述符,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型,具体可以包括:根据预设损失函数和每个第一点云数据对应的第一全局描述符,确定点云定位模型的损失值;根据损失值,自动调整预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
[0057]
作为一个具体地示例,训练集还可以包括每个第一点云数据的标记信息,标记信息包括第m个第一点云数据的正样本和第m个第一点云数据的负样本,正样本包括第一预设数量个第一点云数据中与第m个第一点云数据相似的第一点云数据的标识,负样本包括第一预设数量个第一点云数据中与第m个第一点云数据不相似的第一点云数据的标识,其中,i∈n,n为所述第一预设数量。
[0058]
具体地,在上述步骤120中,将训练集中的第一点云数据输入预先构建的点云定位模型之前,还可以为训练集中每个第一点云数据标记正样本和负样本,从而得到每个第一点云数据的标记信息。
[0059]
以训练集中包括m个第一点云数据为例,对第m个第一点云数据,将m个第一点云数据中与第m个第一点云数据的距离小于第一预设距离的第一点云数据标记为第m个第一点云数据的正样本,将m个第一点云数据中与第m个第一点云数据的距离大于第二预设距离的第一点云数据标记为第m个第一点云数据的负样本。可选地,第一预设距离可以为3米,第二预设距离可以为10米。其中,正样本中的点云数据可以确定为与第m个第一点云数据相似的点云数据,负样本中的点云数据可以确定为与第m个第一点云数据不相似的的点云数据。
[0060]
示例性的,根据公式(3)可以计算得到m个第一点云数据中每个第一点云数据与第m个第一点云数据的距离。
[0061]
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
(3)其中,dist(

)表示m个第一点云数据中每个第一点云数据与第m个第一点云数据的距离,x表示第m个第一点云数据,y表示m个第一点云数据中任一个第一点云数据,每个点云数据共有n个点,i表示第一点云数据中的点,sqr(

)为平方根函数。
[0062]
具体地,在根据预设损失函数和每个第一点云数据对应的第一全局描述符,确定点云定位模型的损失值时,可以参考以下步骤:计算每个第一点云数据对应的第一全局描述符与正样本对应的全局描述符的第一欧氏距离,以及,计算每个第一点云数据对应的第一全局描述符与负样本对应的全局描述符的第二欧氏距离;对应每个第一点云数据,计算
第一欧氏距离与第二欧氏距离的差值,并对m个差值进行求和计算得到初始损失值;计算预设超参数与初始损失值的和。其中,当预设超参数与初始损失值的和大于或等于零时,将预设超参数与初始损失值的和作为损失值;当预设超参数与初始损失值的和小于零时,将损失值设置为预设数值。
[0063]
示例性的,预设损失函数可以如公式(4)所示。
[0064]
ꢀꢀꢀꢀꢀꢀ
(4)其中,l为损失值,表示第m个点云数据,表示第i个点云数据对应正样本中的点云数据,表示第m个点云数据对应负样本中的点云数据,表示第m个点云数据的第一全局描述符,||

||2表示两个点云数据的全局描述符之间的欧氏距离。其中α为预设超参数,表示设置的边缘值。[

]
+
用于表示预设超参数与初始损失值的和大于或等于零时,将预设超参数与初始损失值的和作为损失值,当预设超参数与初始损失值的和小于零时,将损失值设置为预设数值。
[0065]
根据本技术实施例提供的预设损失函数,可以第一点云数据与其对应的正样本的距离,并拉远第一点云数据与其对应的负样本的距离。也就是说,通过本技术实施例提供的预设损失函数,可以将第一点云数据靠近与其相似点云数据离近,并远离与第一点云数据不相似点云数据,能够实现提高点云定位模型的训练速度,并使训练后的点云定位模型在给定点云地图中实现高精度点云定位。
[0066]
为确保点云定位模型能够实现高精度点云定位,在通过训练集对预先构建的点云数据进行训练之后,可以使用验证集对训练后的点云定位模型进行验证。
[0067]
具体地,涉及上述步骤130,将验证集中的第二点云数据输入训练后的点云定位模型,并获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符。通过预测全局描述符用于表示第二点云数据对应位置的预测特征信息。
[0068]
接下来,涉及上述步骤140,根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值。具体地,可以参考以下步骤:获取预设点云地图;根据每个第二点云数据的预测特征信息和预设点云地图,确定每个第二点云数据的预测位置信息;根据每个第二点云数据的预设位置信息和第二点云数据的实际位置信息,确定训练后的点云定位模型的定位精度值。
[0069]
具体地,预设点云地图可是在预设应用场景中对应已建立有点云地图。在预设点云地图中可以包括每个点的特征信息,根据预设点云地图中每个点的特征信息,将第二点云数据的预测特征信息与预设点云地图进行匹配计算,确定预设点云地图中与第二点云数据相匹配的点。由此,预设点云地图中与第二点云数据相匹配的点在预设点云地图中的位置信息,即为第二点云数据的预测位置信息。
[0070]
可选地,根据第二点云数据的预测特征信息,计算第二点云数据与预设点云地图之间的最小欧氏距离;将预设点云地图中最小欧氏距离对应位置,作为第二点云数据的预测位置信息。其中,预设点云地图中最小欧氏距离对应位置即预设点云地图中与第二点云数据相匹配的点的位置。
[0071]
由于第二点云数据为预设训练样本中已知的点云数据,第二点云数据对应的实际
位置信息也是已知的,因此,在确定每个第二点云数据对应预测位置信息后,可以根据每个第二点云数据的预设位置信息和第二点云数据的实际位置信息,确定训练后的点云定位模型的定位精度值。
[0072]
涉及上述步骤150,在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。
[0073]
其中,预设精度条件可以根据实际应用需求进行设置。例如,可以确定计算每个第二点云数据的预设位置信息和第二点云数据的实际位置信息的差值,得到第二预设数量个差值。可以根据第二预设数量个差值的离散度评估训练后点云定位模型的定位精度值。其中,预设精度条件可以是定位精度值小于预设精度阈值。即,预设精度条件为第二预设数量个差值的离散度小于预设精度阈值。当第二预设数量个差值的离散度小于预设精度阈值时,可以确定当前训练后的点云定位模型可以作为目标定位模型。
[0074]
可以理解的是,当定位精度值不满于预设精度条件时,可以对点云定位模型继续训练。
[0075]
根据本技术实施例,获取预设训练样本,通过使用预设训练样本中训练集和验证集中的点云数据,对预先构建的点云定位模型进行训练和验证。其中。在验证过程中,通过使用获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据的定位的预测特征信息;根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。如此,根据本技术实施例得到的目标定位模型,能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
[0076]
基于在本技术实施例提供的定位模型的训练方法得到目标定位模型,本技术实施例还提供了一种点云数据定位方法。图3是本技术是实施例提供的一种点云数据定位方法的流程示意图,点云数据定位方法可以包括步骤310至步骤340。
[0077]
步骤310,获取实时采集的点云数据。
[0078]
步骤320,将点云数据输入目标定位模型,通过目标定位模型输出点云数据的全局描述符。
[0079]
其中,目标定位模型根据本技术上述实施例提供的定位模型训练方法训练得到,其中,全局描述符用于表示点云数据对应位置的预测特征信息。
[0080]
步骤330,根据点云数据的预测特征信息,计算点云数据与预设点云地图之间的最小欧氏距离。
[0081]
步骤340,将预设点云地图中最小欧氏距离对应位置,确定为点云数据的目标位置。
[0082]
具体地,可以通过激光雷达实时采集的点云数据。为了提高定位速度,减少冗余计算,可以对实时采集的点云数据进行预处理。其中,预处理可以包括对实时采集的点云数据进行下采样处理和归一化处理。例如,将实时采集的点云数据进行剪裁,得到固定坐标范围内的点云数据,再对固定坐标范围内的点云数据进行下采样处理,从而得到用于输入目标定位模型的点云数据。
[0083]
在一些实施例中,预设点云地图可是在应用场景中对应已建立有点云地图。在预
设点云地图中可以包括每个点的特征信息,根据预设点云地图中每个点的特征信息,结合点云数据的预测特征信息,计算点云数据与预设点云地图之间的最小欧氏距离;将预设点云地图中最小欧氏距离对应位置,确定为点云数据的目标位置。
[0084]
根据本技术实施例,根据本技术实施例得到的目标定位模型,在对实时采集的点云数据定位的过程中,通过目标定位模型,能够快速、准确的得到点云数据对应位置的预测特征信息。接下来,只需要根据预设特征信息,计算点云数据与预设点云地图之间的最小欧氏距离,从而能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
[0085]
基于相同的发明构思,本技术还提供了与上述定位模型的训练方法对应的定位模型的训练装置400。具体结合图4进行详细说明。
[0086]
图4是本技术实施例提供的一种定位模型的训练装置的结构示意图,如图4所示,该定位模型的训练装置400可以包括:获取模块410和处理模块420。
[0087]
获取模块410,用于获取预设训练样本,其中,预设训练样本包括训练集和验证集,训练集包括第一预设数量的第一点云数据,验证集包括第二预设数量的第二点云数据;处理模块420,用于根据训练集中的第一点云数据,对预先构建的点云定位模型进行训练,得到训练后的点云定位模型;处理模块420,还用于将验证集中的第二点云数据输入训练后的点云定位模型,并获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据对应位置的预测特征信息;处理模块420,还用于根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;处理模块420,还用于在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。
[0088]
在一些实施例中,所述预先构建的点云定位模型包括向量转换网络、特征提取网络和预设特征聚合函数;处理模块420,还用于将每个所述第一点云数据输入所述向量转换网络,得到每个所述第一点云数据对应的第一转换向量;处理模块420,还用于将每个第一转换向量输入所述特征提取网络,得到每个所述第一点云数据的初始特征信息;处理模块420,还用于将每个所述第一点云数据的初始特征信息输入所述预设特征聚合函数,得到每个所述第一点云数据对应的第一全局描述符,其中,所述第一全局描述符用于表示所述第一点云数据的定位的特征信息;处理模块420,还用于根据预设损失函数和每个所述第一点云数据对应的第一全局描述符,自动调整所述预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型。
[0089]
在一些实施例中,处理模块420,还用于所述根据预设损失函数和每个所述第一点云数据对应的第一全局描述符,确定所述点云定位模型的损失值;处理模块420,还用于根据所述损失值,自动调整所述预先构建的点云定位模型中的模型参数,得到训练后的点云定位模型
在一些实施例中,训练集还包括每个第一点云数据的标记信息,标记信息包括第m个第一点云数据的正样本和第m个第一点云数据的负样本,正样本包括第一预设数量个第一点云数据中与第m个第一点云数据相似的第一点云数据的标识,负样本包括第一预设数量个第一点云数据中与第m个第一点云数据不相似的第一点云数据的标识,其中,m∈m,m为第一预设数量;处理模块420,还用于计算每个所述第一点云数据对应的第一全局描述符与所述正样本对应的全局描述符的第一欧氏距离,以及,计算每个所述第一点云数据对应的第一全局描述符与所述负样本对应的全局描述符的第二欧氏距离;处理模块420,还用于对应每个第一点云数据,计算第一欧氏距离与第二欧氏距离的差值,并对m个差值进行求和计算得到初始损失值;处理模块420,还用于计算预设超参数与初始损失值的和;其中,当预设超参数与初始损失值的和大于或等于零时,将预设超参数与初始损失值的和作为损失值;当预设超参数与初始损失值的和小于零时,将损失值设置为预设数值。
[0090]
在一些实施例中,获取模块410,还用于获取预设点云地图;处理模块420,还用于根据每个第二点云数据的预测特征信息和所述预设点云地图,确定每个第二点云数据的预测位置信息;处理模块420,还用于根据每个所述第二点云数据的预设位置信息和所述第二点云数据的实际位置信息,确定所述训练后的点云定位模型的定位精度值。
[0091]
在一些实施例中,处理模块420,还用于根据所述第二点云数据的预测特征信息,计算所述第二点云数据与所述预设点云地图之间的最小欧氏距离;处理模块420,还用于将所述预设点云地图中所述最小欧氏距离对应位置,作为所述第二点云数据的预测位置信息。
[0092]
可以理解的是,本技术实施例的定位模型的训练装置400,可以对应于本技术实施例提供的定位模型的训练方法的执行主体,定位模型的训练装置400的各个模块/单元的操作和/或功能的具体细节可以参见上述本技术实施例的定位模型的训练方法中的相应部分的描述,为了简洁,在此不再赘述。
[0093]
根据本技术实施例,获取预设训练样本,通过使用预设训练样本中训练集和验证集中的点云数据,对预先构建的点云定位模型进行训练和验证。其中。在验证过程中,通过使用获取训练后的点云定位模型输出的每个第二点云数据的预测全局描述符,预测全局描述符用于表示第二点云数据的定位的预测特征信息;根据每个第二点云数据的预测特征信息,确定训练后的点云定位模型的定位精度值;在定位精度值满足预设精度条件的情况下,将训练后的点云定位模型确定为目标定位模型。如此,根据本技术实施例得到的目标定位模型,能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
[0094]
基于相同的发明构思,本技术还提供了与上述点云数据定位方法对应的点云数据定位装置500。具体结合图5进行详细说明。
[0095]
图5是本技术实施例提供的一种点云数据定位装置的结构示意图,如图5所示,该点云数据定位装置500可以包括:获取模块510和处理模块520。
[0096]
获取模块510,用于获取实时采集的点云数据;处理模块520,用于将点云数据输入目标定位模型,通过目标定位模型输出点云数据的全局描述符。
[0097]
其中,目标定位模型根据本技术上述实施例提供的定位模型训练方法训练得到,其中,全局描述符用于表示点云数据对应位置的预测特征信息。
[0098]
处理模块520,还用于根据点云数据的预测特征信息,计算点云数据与预设点云地图之间的最小欧氏距离;处理模块520,还用于将预设点云地图中最小欧氏距离对应位置,确定为点云数据的目标位置。
[0099]
可以理解的是,本技术实施例的点云数据定位装置500,可以对应于本技术实施例提供的点云数据定位方法的执行主体,点云数据定位装置500的各个模块/单元的操作和/或功能的具体细节可以参见上述本技术实施例的点云数据定位方法中的相应部分的描述,为了简洁,在此不再赘述。
[0100]
根据本技术实施例,根据本技术实施例得到的目标定位模型,在对实时采集的点云数据定位的过程中,通过目标定位模型,能够快速、准确的得到点云数据对应位置的预测特征信息。接下来,只需要根据预设特征信息,计算点云数据与预设点云地图之间的最小欧氏距离,从而能够有效减少获取定位信息过程中的冗余计算,提高定位的鲁棒性,实现高精度定位。
[0101]
图6示出了本技术一个实施例提供的电子设备的结构示意图。如图6所示,该设备可以包括处理器601以及存储有计算机程序指令的存储器602。
[0102]
具体地,上述处理器601可以包括中央处理器(central processing unit,cpu),或者特定集成电路(application specific integrated circuit ,asic),或者可以被配置成实施本技术实施例的一个或多个集成电路。
[0103]
存储器602可以包括用于信息或指令的大容量存储器。举例来说而非限制,存储器602可包括硬盘驱动器(hard disk drive,hdd)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(universal serial bus,usb)驱动器或者两个或更多个以上这些的组合。在一个实例中,存储器602可以包括可移除或不可移除(或固定)的介质,或者存储器602是非易失性固态存储器。存储器602可在电子设备的内部或外部。
[0104]
存储器可包括只读存储器(rom),随机存取存储器(ram),磁盘存储介质设备,光存储介质设备,闪存设备,电气、光学或其他物理/有形的存储器存储设备。因此,通常,存储器包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介质(例如,存储器设备),并且当该软件被执行(例如,由一个或多个处理器)时,其可操作来执行参考根据本技术的一方面的方法所描述的操作。
[0105]
处理器601通过读取并执行存储器602中存储的计算机程序指令,以实现本技术实施例所描述的方法,并达到本技术实施例执行其方法达到的相应技术效果,为简洁描述在此不再赘述。
[0106]
在一个示例中,该电子设备还可包括通信接口603和总线610。其中,如图6所示,处理器601、存储器602、通信接口603通过总线610连接并完成相互间的通信。
[0107]
通信接口603,主要用于实现本技术实施例中各模块、装置、单元和/或设备之间的
通信。
[0108]
总线610包括硬件、软件或两者,将在线信息流量计费设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(accelerated graphics port,agp)或其他图形总线、增强工业标准架构(extended industry standard architecture,eisa)总线、前端总线(front side bus,fsb)、超传输(hyper transport,ht)互连、工业标准架构(industry standard architecture,isa)总线、无限带宽互连、低引脚数(lpc)总线、存储器总线、微信道架构(mca)总线、外围组件互连(pci)总线、pci-express(pci-x)总线、串行高级技术附件(sata)总线、视频电子标准协会局部(vlb)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线610可包括一个或多个总线。尽管本技术实施例描述和示出了特定的总线,但本技术考虑任何合适的总线或互连。
[0109]
该电子设备可以执行本技术实施例中的定位模型的训练方法和/或点云数据定位方法,从而实现本技术实施例描述的定位模型的训练方法和/或点云数据定位方法的相应技术效果。
[0110]
另外,结合上述实施例中的定位模型的训练方法和/或点云数据定位方法,本技术实施例可提供一种可读存储介质来实现。该可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种定位模型的训练方法和/或点云数据定位方法。可读存储介质的示例可以是非暂态机器可读介质 ,如电子电路、半导体存储器设备、只读存储器(read-only memory,rom)、软盘、只读光盘(compact disc read-only memory,cd-rom)、光盘、硬盘等。
[0111]
需要明确的是,本技术并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本技术的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本技术的精神后,做出各种改变、修改和添加,或者改变步骤之间的顺序。
[0112]
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(application specific integrated circuit,asic)、适当的固件、插件、功能卡等等。当以软件方式实现时,本技术的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、只读存储器(read-only memory,rom)、闪存、可擦除只读存储器(erasable read only memory,erom)、软盘、只读光盘(compact disc read-only memory,cd-rom)、光盘、硬盘、光纤介质、射频(radio frequency,rf)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
[0113]
还需要说明的是,本技术中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或系统。但是,本技术不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
[0114]
本技术实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现本技术实施例提供的定位模型的
训练方法和/或点云数据定位方法。
[0115]
另外,结合上述实施例中的定位模型的训练方法和/或点云数据定位方法、装置,以及可读存储介质,本技术实施例可提供一种计算机程序产品来实现。所述计算机程序产品中的指令由电子设备的处理器执行时,使得所述电子设备执行上述实施例中的任意一种定位模型的训练方法和/或点云数据定位方法。
[0116]
上面参考根据本技术的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本技术的各方面。应当理解,流程图和/或框图中的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给通用计算机、专用计算机、或其它可编程数据处理装置的处理器,以产生一种机器,使得经由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的一个或多个方框中指定的功能/动作的实现。这种处理器可以是但不限于是通用处理器、专用处理器、特殊应用处理器或者现场可编程逻辑电路。还可理解,框图和/或流程图中的每个方框以及框图和/或流程图中的方框的组合,也可以由执行指定的功能或动作的专用硬件来实现,或可由专用硬件和计算机指令的组合来实现。
[0117]
以上所述,仅为本技术的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本技术的保护范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1