基于无人机航空摄影和无人船水上水下一体化扫描方法与流程

本发明涉及防波堤健康监测，更具体的说是涉及一种基于无人机航空摄影和无人船水上水下一体化扫描方法。

背景技术：

1、作为港口基础设施的重要组成部分，防波堤能够防御波浪、冰凌、泥沙、水中激流等入侵港口区域，为港口提供一个安全稳定的掩蔽水域，从而保证港内船舶的平稳工作以及保护港内各种设施装备的安全。

2、防波堤工作环境比较恶劣，由风暴潮及近岸台风大浪直接导致的防波堤、护岸、海堤等海岸基础设施破坏案例屡见不鲜。防波堤破坏会造成巨大的经济损失，还将直接影响到港口内工作人员的安全以及各种装备设施的正常运转，因而开展防波堤巡检及时监测其结构健康状况具有重要经济和社会意义。

3、目前防波堤结构健康监测主要依靠目测、人工摄影、卷尺、水准仪、全站仪、gnssrtk、潜水员水下勘察等方式，存在诸多明显缺点：检测劳动效率低，强度大且人员安全风险高；检测结果难以由点及面，展示结构物整体面貌；人工测量存在人为主观因素，导致测量误差较大，测量结果比较粗放，数字化程度低；gnss rtk自动监测系统成本高(仅适于测点较少的直立堤身监测，不适用于数量众多含护面块体块石的斜坡堤、引堤及护岸)。

4、基于对防波堤、护岸损坏危害的认识以及针对现有监测技术的不足，已经有人提出采用无人机和无人船结合的方式对水上水下部分分别进行观测，但是这种检测方法往往存在以下不足：水上水下坐标基准不统一、水上水下数据精度不一致、水上水下数据不连续，存在数据空白需进行插值等后处理工作，作业效率不高等技术瓶颈。

5、因此，水上水下一体化测绘是对传统水域相关测绘技术方法的变革和创新，如何提出基于“无人机+无人船”水上水下一体化测绘的防波堤、护岸等智能巡检及健康监测的解决方案是本领域技术人员亟需解决的技术问题。

技术实现思路

1、有鉴于此，本发明提供了一种基于无人机航空摄影和无人船水上水下一体化扫描方法，通过对无人机和无人船的多源数据进行融合，可以建立呈现码头、防波堤及水下结构等整体面貌的三维模型。

2、为了实现上述目的，本发明提供如下技术方案：

3、一种基于无人机航空摄影和无人船水上水下一体化扫描方法，包括以下步骤：

4、将无人机和无人船搭载的所有传感器通过船载刚性稳定平台固联；

5、量取各个传感器在水上水下一体化系统物方坐标系下的坐标值；

6、将量取的杆臂值输入实时采集软件中进行水上水下数据采集，获取多源数据；

7、将组合定位定姿解算后的数据导入水上水下一体化系统，将获取的多源数据转换至统一的当地工程坐标系；

8、将转换至同一坐标系下的多源数据融合，建立防波堤整体面貌的三维模型。

9、可选的，传感器包括：激光扫描仪、360°全景相机、多波束测深仪、gnss-imu组合导航设备；

10、激光扫描仪搭载在无人机、无人船上，用于获取防波堤两侧斜坡水上部分的空间信息数据；

11、多波束测深仪搭载在无人船上，用于获取防波堤两侧斜坡水下部分的空间信息数据；

12、360°全景相机搭载在无人机上，用于获取防波堤顶部结构的图像数据；

13、gnss-imu组合导航设备搭载在无人机上，用于为激光扫描仪、多波束测深仪和360°全景相机提供定位信息、时间信息、姿态信息和航向信息。

14、可选的，将通过360°全景相机获取的防波堤顶部结构的图像数据转换至物方坐标系下，具体包括以下步骤：

15、获取360°全景相机拍摄图像数据时对应的拍摄参数信息，其中拍摄参数信息包括天线相位中心三维坐标和传感器姿态角；

16、将天线相位中心三维坐标记为(xc、yc、zc)，传感器姿态角包括滚动角俯仰角θ、航偏角ψ；将拍摄参数信息转换至物方坐标系下的公式为：

17、

18、式中：表示从物方坐标系到影像坐标系的旋转矩阵；表示影像坐标系到传感器坐标系的旋转矩阵；表示传感器坐标系到载体坐标系的旋转矩阵；表示地心地固坐标系到导航坐标系的旋转矩阵；表示载体坐标系到导航坐标系的旋转矩阵；为固定矩阵，用于导航坐标系和物方坐标系之间的转换。

19、可选的，杆臂值的获取方法包括以下步骤：

20、采集多个采样时刻的imu数据和gnss数据，获得先验状态信息和各个相邻gnss采样时刻之间的imu状态增量残差；

21、结合待优化的杆臂值构建目标函数，当目标函数收敛时，求解杆臂值。

22、可选的，在获取多源数据之后，所述方法还包括：

23、利用硬件同步控制器为各个传感器提供相应的同步信号，并记录相应的时间，建立一个时间同步标准；

24、利用ie进行基准站和流动站数据结算，输出pos数据；

25、对pos数据进行点云数据预处理，得到标准las数据文件。

26、可选的，对pos数据进行点云数据预处理，包括点云滤波和点云抽稀；

27、点云滤波包括回波信号去噪、距离去噪和时间去噪；

28、点云抽稀是对密集的点云数据进行缩减。

29、可选的，组合定位定姿解算的过程包括：

30、定义无人机在初始时刻的位移值为0mm，则无人机在n时刻的x、y、z方向的位移值＝无人机在n时刻x、y、z方向的坐标值-无人机在初始时刻x、y、z方向的坐标值；

31、定义无人机在n时刻的速度为无人机在n-1时刻和n+1时刻之间的平均速度，则无人机在n时刻x、y、z方向的速度＝(无人机在n+1时刻x、y、z方向三维的空间坐标-无人机在n-1时刻x、y、z方向三维的空间坐标)/2/相邻时刻的时间间隔；

32、定义无人机在n时刻的加速度为无人机在n-1时刻和n+1时刻间的平均加速度，则无人机在n时刻x、y、z方向的加速度＝(无人机在n+1时刻x、y、z方向的速度-无人机在n-1时刻x、y、z方向的速度)/2/相邻影像的时间间隔。

33、可选的，对无人机和无人船的控制包括：

34、控制无人船按照预设路径航行以及无人机跟随无人船同步飞行于无人船上方，且无人机与无人船之间通信连接；

35、当无人机的剩余电量低于预设阈值时，控制无人机降低飞行高度，将无人机停落在无人船上并通过无人船为无人机充电。

36、经由上述的技术方案可知，与现有技术相比，本发明提供了一种基于无人机摄影和无人船水上水下一体化扫描方法，通过无人机和无人船多源数据融合，建立可呈现防波堤整体面貌的三维模型，为实际工程测绘提供决策依据；集成化高，可提高工作效率；无人化，可保障工作人员安全；时间同步，水上水下数据无缝拼接，精度更高。

技术特征：

1.一种基于无人机航空摄影和无人船水上水下一体化扫描方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种基于无人机航空摄影和无人船水上水下一体化扫描方法，其特征在于，传感器包括：激光扫描仪、360°全景相机、多波束测深仪、gnss-imu组合导航设备；

3.根据权利要求2所述的一种基于无人机航空摄影和无人船水上水下一体化扫描方法，其特征在于，将通过360°全景相机获取的防波堤顶部结构的图像数据转换至物方坐标系下，具体包括以下步骤：

4.根据权利要求1所述的一种基于无人机航空摄影和无人船水上水下一体化扫描方法，其特征在于，杆臂值的获取方法包括以下步骤：

5.根据权利要求1所述的一种基于无人机摄影和无人船水上水下一体化扫描方法，其特征在于，在获取多源数据之后，所述方法还包括：

6.根据权利要求5所述的一种基于无人机摄影和无人船水上水下一体化扫描方法，其特征在于，对pos数据进行点云数据预处理，包括点云滤波和点云抽稀；

7.根据权利要求1所述的一种基于无人机摄影和无人船水上水下一体化扫描方法，其特征在于，组合定位定姿解算的过程包括：

8.根据权利要求1所述的一种基于无人机摄影和无人船水上水下一体化扫描方法，其特征在于，对无人机和无人船的控制包括：

技术总结
本发明公开了一种基于无人机航空摄影和无人船水上水下一体化扫描方法，涉及防波堤健康监测技术领域，包括：将无人机和无人船搭载的所有传感器通过船载刚性稳定平台固联；量取各个传感器在水上水下一体化系统物方坐标系下的坐标值；将量取的杆臂值输入实时采集软件中进行水上水下数据采集，获取多源数据；将组合定位定姿解算后的数据导入水上水下一体化系统，将获取的多源数据转换至统一的当地工程坐标系；将转换至同一坐标系下的多源数据融合，建立防波堤整体面貌的三维模型。本发明通过对无人机和无人船的多源数据进行融合，可以建立呈现码头、防波堤及水下结构等整体面貌的三维模型。

技术研发人员：赵旭,耿宝磊,张华庆,陈汉宝,金瑞佳,王昊,朱婷婷
受保护的技术使用者：交通运输部天津水运工程科学研究所
技术研发日：
技术公布日：2024/1/14