设备的AR交互方法、装置、电子设备及存储介质与流程

文档序号:24648609发布日期:2021-04-13 16:31阅读:来源:国知局

技术特征:
1.一种设备的ar交互方法,其特征在于,包括:主设备向从设备发起ar交互请求,并在所述从设备接受所述ar交互请求后,接收从设备拍摄的目标场景中任意局部的图像数据,其中,所述从设备为一个或多个,一个或多个所述从设备以不同的位置和/或不同的视角拍摄所述目标场景中任意局部的图像数据;基于所述主设备拍摄的所述目标场景中任意局部的图像数据和所述从设备拍摄的所述目标场景中任意局部的图像数据,对所述目标场景进行三维重建,得到所述目标场景整体的三维场景;将所述目标场景整体的三维场景同步给所述从设备,使所述主设备和所述从设备同步显示同一个三维场景,以便所述主设备和所述从设备计算自身在同一个所述三维场景中的位姿,并分别基于自身在所述三维场景中的位姿实现所述主设备和从设备在同一个所述三维场景中任意位置上的ar交互。2.根据权利要求1所述的设备的ar交互方法,其特征在于,在所述主设备向从设备发起ar交互请求之前,还包括:从备选从设备中选择出需要进行ar交互的一个或多个从设备;向选择出需要进行ar交互的从设备发送连接申请,以便在所述从设备确认连接后,所述主设备建立与所述从设备的交互连线,并在交互连线后,所述主设备向从设备发起ar交互请求。3.根据权利要求2所述的设备的ar交互方法,其特征在于,在所述主设备对所述目标场景进行三维重建之前,还包括:如果所述主设备掉线,则从所述从设备中重新选定一个从设备为新的主设备,并由所述新的主设备接管已掉线的主设备执行相应的操作。4.根据权利要求1

3任一项所述的设备的ar交互方法,其特征在于,所述主设备和所述从设备计算自身在同一个所述三维场景中的位姿,具体包括:所述主设备和所述从设备观测所述三维场景,对应地得到预设的多个特征点在二维平面的坐标;将对应的所述特征点在所述三维场景中进行特征点匹配,以得到所述特征点在所述三维场景中的空间坐标;根据所述特征点在二维平面的坐标和所述特征点在所述三维场景中的空间坐标,对应地得到所述主设备和所述从设备自身在所述三维场景中的位姿。5.根据权利要求4所述的设备的ar交互方法,其特征在于,所述根据所述特征点在二维平面的坐标和所述特征点在所述三维场景中的空间坐标,对应地得到所述主设备和所述从设备自身在所述三维场景中的位姿,包括:根据公式pc=tcw*pw,得到多个特征点的坐标变换,其中,所述pc为特征点在二维平面的坐标,pw为特征点在所述三维场景中的空间坐标,所述tcw为特征点的坐标变换;根据多个特征点的坐标变换,对应地得到所述主设备和所述从设备自身在所述三维场景中的位姿。6.根据权利要求1所述的设备的ar交互方法,其特征在于,实现所述主设备和从设备在同一个所述三维场景中任意位置上的ar交互的过程中,还包括:所述主设备或者从设备向所述三维场景中任意位置添加ar信息;
所述主设备和从设备根据自身在所述三维场景中的位姿,调整所述ar信息在所述三维场景中的视角。7.根据权利要求1所述的设备的ar交互方法,其特征在于,所述基于所述主设备拍摄的所述目标场景中任意局部的图像数据和所述从设备拍摄的所述目标场景中任意局部的图像数据,对所述目标场景进行三维重建,得到所述目标场景整体的三维场景,具体包括:对所述主设备的摄像机进行标定,得到标定参数;对所述主设备拍摄的所述目标场景中任意局部的图像数据和所述从设备拍摄的所述目标场景中任意局部的图像数据进行特征提取,得到特征集合;根据所述特征集合,建立所述主设备拍摄的所述目标场景中任意局部的图像数据和所述从设备拍摄的所述目标场景中任意局部的图像数据之间的对应关系;根据所述对应关系以及所述标定参数,对所述目标场景进行三维重建,得到所述目标场景整体的三维场景。8.一种设备的ar交互装置,其特征在于,包括:接收模块,用于向从设备发起ar交互请求,并在所述从设备接受所述ar交互请求后接收从设备拍摄的目标场景中任意局部的图像数据,其中,所述从设备为一个或多个,一个或多个所述从设备以不同的位置和/或不同的视角拍摄所述目标场景的图像数据;三维重建模块,用于基于所述主设备拍摄的所述目标场景中任意局部的图像数据和所述从设备拍摄的所述目标场景中任意局部的图像数据,对所述目标场景进行三维重建,得到所述目标场景整体的三维场景;发送模块,用于将所述目标场景整体的三维场景同步给所述从设备,使所述主设备和所述从设备同步显示同一个三维场景,以便所述主设备和所述从设备计算自身在同一个所述三维场景中的位姿,并分别基于自身在所述三维场景中的位姿实现所述主设备和从设备在同一个所述三维场景中任意位置上的ar交互。9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现根据权利要求1至7任一所述的设备的ar交互方法。10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现根据权利要求1至7任一所述的设备的ar交互方法。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1