1.基于图像匹配和配准的列车底部零部件的松动检测方法,包括,其特征在于:
2.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述项点标定单元通过视觉传感器对各检测子区域进行图像采集,得到各检测子区域的2d模板大图,并对车底零部件类型以及项点位置进行标定,标定的零部件包括螺栓、线路管夹、管线接头、配合件、接地线端子、锁孔以及绝缘子;
3.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述语义分割模型训练单元用于对所述目标检测模型得到的带有防松线的项点图进行标注,放入pp-liteseg轻量级语义分割网络中进行训练,得到语义分割模型;
4.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述目标检测单元用于对任务2d图片进行目标检测,得到以项点为单位的任务小图,并给任务小图添加“是否包含防松线”的属性;语义分割单元通过将包含防松线的任务小图传入语义分割网络,得到项点防松线的任务标签;图像匹配单元用于对每一张任务小图,使用superglue和superpoint匹配网络,与对应的模板小图进行匹配,得到第i个检测子区域的变换矩阵。
5.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述图像匹配步骤利用变换矩阵对任务标签进行仿射变换,并与模板标签进行交并比计算,如果得到的交并比值大于第i个检测子区域项点的设定阈值,第i个检测子区域任务小图中的项点没有发生防松线的松动,如果小于设定的阈值,则进行图像配准步骤。
6.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述图像匹配步骤计算得到的交并比值大于第i个检测子区域项点的设定阈值时,第i个检测子区域任务小图中的项点没有发生防松线的松动,小于第i个检测子区域设定的阈值时,则将第i个检测子区域任务标签和对应模板标签进行图像配准,设定配准模式为平移,将得到的变换矩阵作为初始参数传入基于互相关系数的ecc图像配准方法中,得到新的变换矩阵,i表示第i个检测子区域。
7.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述图像配准步骤利用变换矩阵对任务标签进行仿射变换,并与模板标签进行交并比计算,如果得到的交并比值大于第i个检测子区域项点的设定阈值,第i个检测子区域任务小图中的项点没有发生防松线的松动,如果小于设定的阈值,则再次将第i个检测子区域任务标签和对应模板标签进行图像配准,设定配准模式为平移,不传入任何初始参数进行ecc图像配准,得到新的变换矩阵,i表示第i个检测子区域。
8.根据权利要求1所述的基于图像匹配和配准的列车底部零部件的松动检测方法,其特征在于:所述图像配准步骤利用变换矩阵对任务标签进行仿射变换,并与模板标签进行交并比计算,如果得到的交并比值大于第i个检测子区域项点的设定阈值,第i个检测子区域任务小图中的项点没有发生防松线的松动,如果小于设定的阈值,则第i个检测子区域项点的防松线发生了松动,并发出预警信号。