AR导览领域的图像数据的风格转换方法、数据采集装置和服务器与流程

本发明涉及图像领域，尤其涉及一种应用于ar文旅领域的图像数据的风格转换方法、数据采集装置和服务器。

背景技术：

1、针对数文场景中的博物馆沉浸式体验，游客可以佩戴ar眼镜观看文物，ar眼镜端识别算法识别对应文物，并触发ar视频内容。视频内容可以呈现通过技术手段进行动态修复、还原文物原貌的场景，同时结合讲解给游客带来视听新体验。

2、由于ar眼镜采集图像数据效率较低，这类识别算法背后的数据收集是运营人员通过手机采集指定文物图像，然后提取特征并建模，部署在ar眼镜终端，由于手机的isp模块和眼镜isp存在不一致，特别是目前市面大部分手机自带ai算法进行图像美化、增亮等，最终导致手机和ar眼镜拍摄的图像成像差异大，特别是博物馆场景为突出主题，通过明暗度突出文物本身，特意调暗了灯光，最终导致一些弱纹理、低光照场景识别召回率(recall)低。

3、目前已有的一些技术方案是通过在难识别的场景增加标签，即增加特征点检出或者指定ar识别区域，游客只能站在目标区域内才能识别出文物，不能从任意方向上识别，影响体验效果。

技术实现思路

1、本发明的目的在于提供一种新的图像数据的风格转换方法和数据采集装置，可以实现将由不同设备拍摄的图像数据的风格转换。

2、根据本发明的一个方面，本发明的一个或多个实施例公开了一种图像数据的风格转换方法，应用于ar导览领域，包括，s1、获取ar眼镜设备和手机设备对于同一目标物体进行拍摄的图像数据，所述图像数据包括：ar眼镜设备图像和手机设备图像；s2、对所述图像数据进行预处理，以得到标准化图像数据，所述标准化图像数据包括：标准化ar眼镜设备图像和标准化手机设备图像，其中所述标准化ar眼镜设备图像和所述标准化手机设备图像相互匹配；s3、重复步骤s1和步骤s2，对不同目标物体进行拍摄，以获得标准化图像数据集；s4、将标准化图像数据集中的标准化ar眼镜设备图像作为真值，标准化手机设备图像作为输入值，对风格转换神经网络模型进行训练；s5、基于所述训练好的风格转换神经网络模型，对由所述手机设备拍摄的其他图像进行风格转换，以获得和所述ar眼镜设备拍摄风格一致的图像。

3、根据本发明的另一个方面，本发明的一个或多个实施例公开了一种数据采集装置，所述数据采集装置包括：刚性支架，所述刚性支架上设置有ar眼镜设备和手机设备，所述ar眼镜设备和手机设备被配置为分别采集目标物体的图像数据；处理单元，所述处理单元被配置为对所述图像数据执行如上述图像数据的风格转换方法。

4、根据本发明的又一个方面，本发明的一个或多个实施例公开了一种服务器，包括存储器和处理器，所述存储器存储有计算机软件指令；当所述计算机软件指令在被所述处理器运行时，使得所述处理器执行如上述的图像数据的风格转换方法。

5、本发明的一个或多个实施例通过设计一套简易的方法和装置用于收集ar眼镜和手机拍摄的数据集，并通过预处理步骤对齐两个设备拍摄的图像，确保图像的形态一致，然后设计一个神经网络做手机端到ar眼镜端的图像重建以解决手机采集到眼镜应用的数据一致性问题。业务上为方便流程，可统一使用一台固定型号的手机，降低不同手机成像风格的影响。整体上统一了数据采集的流程、简化了算法端的调优流程，对于ar导览领域有较强的实用价值。

技术特征：

1.一种图像数据的风格转换方法，应用于ar导览领域，包括，

2.根据权利要求1所述的图像数据的风格转换方法，其特征在于，

3.根据权利要求1所述的图像数据的风格转换方法，其特征在于，

4.根据权利要求3所述的图像数据的风格转换方法，其特征在于，所述标准化ar眼镜设备图像和所述标准化手机设备图像为针对同一目标物体在同一位置的拍摄图像，且图像分辨率相同。

5.根据权利要求3所述的图像数据的风格转换方法，其特征在于，

6.根据权利要求1所述的图像数据的风格转换方法，其特征在于，

7.根据权利要求6所述的图像数据的风格转换方法，其特征在于，

8.根据权利要求6所述的图像数据的风格转换方法，其特征在于，对特征图构建colorloss和reconstruction loss，

9.一种数据采集装置，所述数据采集装置包括

10.一种服务器，包括存储器和处理器，所述存储器存储有计算机软件指令；

技术总结
本发明涉及一种应用于AR文旅领域的图像数据的风格转换方法、数据采集装置和服务器。本发明的一个或多个实施例通过设计一套简易的方法和装置用于收集AR眼镜和手机拍摄的数据集，并通过预处理步骤对齐两个设备拍摄的图像，确保图像的形态一致，然后设计一个神经网络做手机端到AR眼镜端的图像重建以解决手机采集到眼镜应用的数据一致性问题。整体上统一了数据，简化了算法端的调优流程，对于AR导览领域有较强的实用价值。

技术研发人员：陈国特,陈凯迪,王文兵
受保护的技术使用者：杭州灵伴科技有限公司
技术研发日：
技术公布日：2024/1/14