增强现实数据呈现方法、装置、电子设备及存储介质与流程

文档序号:26541847发布日期:2021-09-07 22:09阅读:143来源:国知局
增强现实数据呈现方法、装置、电子设备及存储介质与流程

1.本公开涉及增强现实技术领域,具体而言,涉及一种增强现实数据呈现方法、装置、电子设备及存储介质。


背景技术:

2.增强现实(augmented reality,ar),是一种将真实世界信息和虚拟世界信息进行集成的新技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。随着科技的发展,ar技术被应用于各种场景内,比如,旅游场景、购物场景、教育场景等等。
3.因此提出一种ar数据的展示方法尤为重要。


技术实现要素:

4.有鉴于此,本公开至少提供一种增强现实数据呈现方法、装置、电子设备及存储介质。
5.第一方面,本公开提供了一种增强现实数据呈现方法,包括:
6.获取增强现实ar设备的定位信息;
7.基于所述定位信息,确定所述ar设备与任一预设知识点对应的讲解区域之间满足预设位置条件的情况下,获取所述任一预设知识点对应的音频讲解数据、以及与所述音频讲解数据匹配的ar特效数据;
8.控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据。
9.上述方法中,通过控制ar设备播放任一预设知识点对应的音频讲解数据,在播放音频讲解数据的同时,展示与当前播放的音频讲解数据匹配的ar特效数据,利用ar特效数据对音频讲解数据进行辅助说明,使得预设知识点的讲解过程较为清楚直观,提高了预设知识点的讲解效率。
10.一种可能的实施方式中,所述控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据,包括:
11.在基于所述定位信息确定所述ar设备满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备播放所述音频讲解数据,并展示所述ar特效数据。
12.这里,在ar设备满足ar特效数据的触发展示条件时,控制ar设备播放音频讲解数据,并展示ar特效数据,以避免ar设备的定位信息不适宜时,造成ar特效数据的播放效果较差的情况发生,提高ar特效数据的展示效果。
13.一种可能的实施方式中,所述方法还包括:
14.在基于所述定位信息确定所述ar设备不满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备展示用于指引调整所述ar设备的定位信息的第一指引信息。
15.这里,在ar设备不满足ar特效数据的触发展示条件时,可以控制ar设备展示用于指引调整ar设备的定位信息的第一指引信息,以便可以根据第一指引信息,对ar设备的定
位信息进行调整,使得调整后的ar设备能较为清楚直观的展示ar特效数据,避免对预设知识点的遗漏,提高预设知识点的讲解效率。
16.一种可能的实施方式中,所述方法还包括:
17.在所述任一预设知识点对应的音频讲解数据播放完毕,和/或,所述ar特效数据展示结束的情况下,控制所述ar设备展示以下至少一种信息:
18.用于指示所述ar设备移动至下一预设知识点对应的讲解区域的第二指引信息;
19.用于指示所述ar设备未游览的预设知识点的列表信息;
20.用于指示所述ar设备已播放各预设知识点分别对应的音频讲解数据的导航结束信息。
21.这里,设置了多种待展示的信息类型,以便在任一预设知识点对应的音频讲解数据播放完毕和/或ar特效数据展示结束后,可以控制ar设备展示至少一种信息,提高了展示的多样性和灵活性。
22.一种可能的实施方式中,所述展示与当前播放的音频讲解数据对应的ar特效数据,包括:
23.在播放所述音频讲解数据的过程中,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。
24.这里,音频讲解数据可以对应多种ar特效数据,使得在播放音频讲解数据的过程中,可以切换展示与当前播放的音频讲解数据对应的多种ar特效数据,提高ar特效数据的展示灵活性和多样性。
25.一种可能的实施方式中,所述切换展示与当前播放的音频讲解数据对应的多种ar特效数据,包括:
26.响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;
27.控制所述ar设备展示所述待展示ar特效数据。
28.这里,在音频讲解数据对应有多种ar特效数据时,可以响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中确定待展示ar特效数据,使得确定的待展示ar特效数据能够满足用户需求,提高ar特效数据展示的灵活性。
29.一种可能的实施方式中,所述获取增强现实ar设备的定位信息,包括:
30.获取所述ar设备采集的实时场景图像;
31.基于所述实时场景图像和构建的三维场景模型,确定所述ar设备的定位信息。
32.这里,通过利用ar设备采集的实时场景图像和构建的三维场景模型,能够较为准确的确定ar设备的定位信息。
33.一种可能的实施方式中,根据以下步骤预先确定各个预设知识点对应的音频讲解数据:
34.获取目标区域对应的待处理音频讲解数据;
35.根据预设的知识点库,从所述待处理音频讲解数据中确定与多个预设知识点分别匹配的目标关键词;
36.根据各个所述目标关键词在所述待处理音频讲解数据中对应的播放时间位置,从所述待处理音频讲解数据中,分别确定与各个所述预设知识点对应的音频讲解数据。
37.这里,可以根据预设的知识点库,对待处理音频讲解数据进行识别,确定待处理音频数据中与预设知识点分别匹配的目标关键词;再可以根据各个目标关键词在待处理音频讲解数据中对应的播放时间位置,从待处理音频讲解数据中,较为准确、快速的确定与每个预设知识点对应的音频讲解数据。
38.一种可能的实施方式中,所述方法应用于客户端应用平台,所述客户端应用平台为网页web端应用平台或小程序端应用平台。
39.以下装置、电子设备等的效果描述参见上述方法的说明,这里不再赘述。
40.第二方面,本公开提供了一种增强现实数据呈现装置,包括:
41.第一获取模块,用于获取增强现实ar设备的定位信息;
42.第二获取模块,用于基于所述定位信息,确定所述ar设备与任一预设知识点对应的讲解区域之间满足预设位置条件的情况下,获取所述任一预设知识点对应的音频讲解数据、以及与所述音频讲解数据匹配的ar特效数据;
43.控制模块,用于控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据。
44.一种可能的实施方式中,所述控制模块,在控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据时,用于:
45.在基于所述定位信息确定所述ar设备满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备播放所述音频讲解数据,并展示所述ar特效数据。
46.一种可能的实施方式中,所述装置还包括:第一展示模块,用于:
47.在基于所述定位信息确定所述ar设备不满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备展示用于指引调整所述ar设备的定位信息的第一指引信息。
48.一种可能的实施方式中,所述装置还包括:第二展示模块,用于:
49.在所述任一预设知识点对应的音频讲解数据播放完毕,和/或,所述ar特效数据展示结束的情况下,控制所述ar设备展示以下至少一种信息:
50.用于指示所述ar设备移动至下一预设知识点对应的讲解区域的第二指引信息;
51.用于指示所述ar设备未游览的预设知识点的列表信息;
52.用于指示所述ar设备已播放各预设知识点分别对应的音频讲解数据的导航结束信息。
53.一种可能的实施方式中,所述控制模块,在展示与当前播放的音频讲解数据对应的ar特效数据时,用于:
54.在播放所述音频讲解数据的过程中,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。
55.一种可能的实施方式中,所述控制模块,在切换展示与当前播放的音频讲解数据对应的多种ar特效数据时,用于:
56.响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;
57.控制所述ar设备展示所述待展示ar特效数据。
58.一种可能的实施方式中,所述第一获取模块,在获取增强现实ar设备的定位信息时,用于:
59.获取所述ar设备采集的实时场景图像;
60.基于所述实时场景图像和构建的三维场景模型,确定所述ar设备的定位信息。
61.一种可能的实施方式中,所述装置还包括确定模块,用于根据以下步骤预先确定各个预设知识点对应的音频讲解数据:
62.获取目标区域对应的待处理音频讲解数据;
63.根据预设的知识点库,从所述待处理音频讲解数据中确定与多个预设知识点分别匹配的目标关键词;
64.根据各个所述目标关键词在所述待处理音频讲解数据中对应的播放时间位置,从所述待处理音频讲解数据中,分别确定与各个所述预设知识点对应的音频讲解数据。
65.一种可能的实施方式中,所述方法应用于客户端应用平台,所述客户端应用平台为网页web端应用平台或小程序端应用平台。
66.第三方面,本公开提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述第一方面或任一实施方式所述的增强现实数据呈现方法的步骤。
67.第四方面,本公开提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述第一方面或任一实施方式所述的增强现实数据呈现方法的步骤。
68.为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
69.为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
70.图1示出了本公开实施例所提供的一种增强现实数据呈现方法的流程示意图;
71.图2示出了本公开实施例所提供的一种增强现实数据呈现方法中,ar特效数据对应的触发展示条件的示意图;
72.图3示出了本公开实施例所提供的一种ar设备的界面示意图;
73.图4a示出了本公开实施例所提供的一种ar设备的界面示意图;
74.图4b示出了本公开实施例所提供的一种ar设备的界面示意图;
75.图4c示出了本公开实施例所提供的一种ar设备的界面示意图;
76.图4d示出了本公开实施例所提供的一种ar设备的界面示意图;
77.图5示出了本公开实施例所提供的另一种增强现实数据呈现方法的流程示意图;
78.图6示出了本公开实施例所提供的一种增强现实数据呈现装置的架构示意图;
79.图7示出了本公开实施例所提供的一种电子设备的结构示意图。
具体实施方式
80.为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
81.增强现实(augmented reality,ar),是一种将真实世界信息和虚拟世界信息进行集成的新技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。随着科技的发展,ar技术被应用于各种场景内,比如,旅游场景、购物场景、教育场景等等。基于此,本公开实施例提供了一种增强现实数据呈现方法、装置、电子设备及存储介质。
82.针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
83.应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
84.为便于对本公开实施例进行理解,首先对本公开实施例所公开的一种增强现实数据呈现方法进行详细介绍。本公开实施例所提供的增强现实数据展示方法的执行主体可以为ar设备,ar设备为能够支持ar功能的智能设备,比如,ar设备包括但不限于手机、平板、ar眼镜等。
85.参见图1所示,为本公开实施例所提供的增强现实数据呈现方法的流程示意图,该方法包括s101

s103,其中:
86.s101,获取增强现实ar设备的定位信息;
87.s102,基于所述定位信息,确定所述ar设备与任一预设知识点对应的讲解区域之间满足预设位置条件的情况下,获取所述任一预设知识点对应的音频讲解数据、以及与所述音频讲解数据匹配的ar特效数据;
88.s103,控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据。
89.上述方法中,通过控制ar设备播放任一预设知识点对应的音频讲解数据,在播放音频讲解数据的同时,展示与当前播放的音频讲解数据匹配的ar特效数据,利用ar特效数据对音频讲解数据进行辅助说明,使得预设知识点的讲解过程较为清楚直观,提高了预设知识点的讲解效率。
90.下述对s101

s103进行具体说明。
91.针对s101:
92.在ar设备到达目标区域后,可以通过扫描目标区域内设置的信息码,进入到ar导览的流程,即可以通过获取到的ar设备的定位信息,为ar设备匹配对应的音频讲解数据、以及与音频讲解数据匹配的ar特效数据,为ar设备提供音频导览和ar特效导览。其中,在文旅场景中,目标区域可以为任一目标景区对应的区域,也可以为目标景区内的各个展览区域
等。
93.实施时,可以根据ar设备上设置的传感器,确定ar设备的定位信息,比如,传感器可以为全球定位系统(global positioning system,gps)、惯性传感器(inertial measurement unit,imu)等。
94.一种可选实施方式中,在s101中,获取增强现实ar设备的定位信息,可以包括:获取所述ar设备采集的实时场景图像;基于所述实时场景图像和构建的三维场景模型,确定所述ar设备的定位信息。
95.获取ar设备采集的实时场景图像后,可以提取实时场景图像中的特征点,将该特征点与三维场景模型中包括的特征点云进行匹配,确定ar设备采集实时场景图像时的定位信息。其中,该定位信息可以包括位置信息和/或朝向信息,比如该位置信息可以为ar设备在三维场景模型对应的坐标系下的坐标信息;朝向信息可以为ar设备对应的欧拉角。
96.实施时,可以根据下述步骤构建三维场景模型:采集目标区域内不同位置、不同角度、不同时间下的多帧场景图像,对每帧场景图像进行特征点提取,得到每帧场景图像对应的点云集合;利用多帧场景图像分别对应的点云集合,得到目标区域对应的特征点云,该目标区域对应的特征点云构成了三维场景模型。
97.或采集不同位置、不同角度、不同时间下的场景视频,从采集的场景视频中获取多帧视频帧,对每帧视频帧进行特征点提取,得到每帧视频帧对应的点云集合;利用多帧视频帧分别对应的点云集合,得到目标区域对应的三维场景模型。
98.这里,通过利用ar设备采集的实时场景图像和构建的三维场景模型,能够较为准确的确定ar设备的定位信息。
99.针对s102:
100.预设知识点可以为目标区域内设置任一可讲解的知识点,比如,在目标区域为书画展览馆时,预设知识点可以为展览的任一书画的名称;比如在目标区域为故宫博物馆时,预设知识点可以为展览的任一建筑物的名称等。
101.实施时,可以在构建的三维场景模型中,确定每个预设知识点的空间位置、以及每个预设知识点对应的讲解区域,比如,可以将目标区域内真实物体所在的位置,确定为该真实物体对应的预设知识点的空间位置;也可以将目标区域内真实物体的周围区域,设置为该真实物体对应的预设知识点的讲解区域。
102.示例性的,预设位置条件可以为ar设备与预设知识点对应的讲解区域之间的距离小于设置的距离阈值,或者,预设位置条件也可以为ar设备位于预设知识点对应的讲解区域内等。
103.实施时,可以基于ar设备的定位信息指示的位置信息,确定ar设备与每个预设知识点对应的讲解区域之间的距离,比如,可以确定ar设备与讲解区域的中心点之间的距离。在ar设备与预设知识点之间的距离小于预设距离阈值时,获取该预设知识点对应的音频讲解数据、以及与音频讲解数据匹配的ar特效数据。
104.或者,还可以基于预设知识点对应的讲解区域和ar设备的定位信息指示的位置信息,确定ar设备是否位于预设知识点的讲解区域内,若是,则获取该预设知识点对应的音频讲解数据、以及与音频讲解数据匹配的ar特效数据。
105.音频讲解数据可以为预先设置的对该预设知识点进行讲解的音频数据;ar特效数
据可以为包含以下一种或多种内容的ar数据:视频内容、图像内容、文字内容。比如,在预设知识点为太和殿时,则音频讲解数据可以为对太和殿的用途、历史文化、建筑风格等信息进行讲解的音频数据;ar特效数据可以为皇帝在太和殿上朝的ar数据;或者,ar特效数据也可以为历史时间段内太和殿的建筑全貌的ar数据等。其中,音频讲解数据匹配的ar特效数据可以根据需要进行设置;以及音频讲解数据可以对应一种ar特效数据、也可以对应多种ar特效数据。
106.其中,ar特效数据的展示位姿可以根据需要在三维场景模型中进行设置。比如,ar特效数据的展示位姿可以位于预设知识点的讲解区域内。或者,也可以基于预设知识点对应的空间位置,确定ar特效数据的展示位姿。
107.实施时,可以预先为每个音频讲解数据匹配对应的ar特效数据,在获取到音频讲解数据后,可以确定与该音频讲解数据匹配的ar特效数据。
108.或者,也可以在获取到任一预设知识点对应的音频讲解数据之后,实时的确定与音频讲解数据匹配的ar特效数据。比如,可以在获取到任一预设知识点对应的音频讲解数据后,识别音频讲解数据对应的目标关键词;基于音频讲解数据对应的目标关键词、以及每个ar特效数据对应的关键词,确定与音频讲解数据匹配的ar特效数据。
109.在获取到任一预设知识点对应的音频讲解数据后,可以对音频讲解数据进行识别,确定音频讲解数据中包括的目标关键词;或者,也可以确定音频讲解数据的文本内容,对音频讲解数据对应的文本内容进行识别,确定音频讲解数据中包括的目标关键词;该目标关键词可以为与预设知识点相关的词语。再可以基于音频讲解数据对应的目标关键词,以及每个ar特效数据对应的关键词,确定与音频讲解数据匹配的ar特效数据。
110.实施时,在控制ar设备播放音频讲解数据时,可以根据当前播放的音频讲解数据的目标关键词,控制ar设备展示与该目标关键词相关的ar特效数据,以便播放的ar特效数据与播放的音频讲解数据的内容保持一致,能够较为清楚明了的对预设知识点进行讲解和展示。
111.一种可选实施方式中,可以根据以下步骤预先确定各个预设知识点对应的音频讲解数据:
112.步骤a1,获取目标区域对应的待处理音频讲解数据;
113.步骤a2,根据预设的知识点库,从所述待处理音频讲解数据中确定与多个预设知识点分别匹配的目标关键词;
114.步骤a3,根据各个所述目标关键词在所述待处理音频讲解数据中对应的播放时间位置,从所述待处理音频讲解数据中,分别确定与各个所述预设知识点对应的音频讲解数据。
115.实施时,可以根据目标区域内包括的多个知识点信息,生成目标区域对应的待处理音频讲解数据,其中,该待处理音频讲解数据可以为分别对各个知识点进行讲解的、完整的音频数据。再可以根据预设的知识点库,从待处理音频讲解数据中确定与多个预设知识点分别匹配的目标关键词;或者,从待处理音频讲解数据对应的文本内容中确定与多个预设知识点分别匹配的目标关键词。最后,根据各个目标关键词在待处理音频讲解数据中对应的播放时间位置,将待处理音频讲解数据进行分段,从分段后得到的多个音频讲解数据中,确定与每个预设知识点对应的音频讲解数据。
116.这里,可以根据预设的知识点库,对待处理音频讲解数据进行识别,确定待处理音频数据中与预设知识点分别匹配的目标关键词;再可以根据各个目标关键词在待处理音频讲解数据中对应的播放时间位置,从待处理音频讲解数据中,较为准确、快速的确定与每个预设知识点对应的音频讲解数据。
117.针对s103:
118.这里,可以通过ar设备的语音播放装置,播放音频讲解数据,以及控制ar设备展示与当前播放的音频讲解数据匹配的ar特效数据。
119.一种可选实施方式中,所述控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据,可以包括:
120.方式一、在基于所述定位信息确定所述ar设备满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备播放所述音频讲解数据,并展示所述ar特效数据。
121.方式二、在基于所述定位信息确定所述ar设备不满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备展示用于指引调整所述ar设备的定位信息的第一指引信息。
122.这里,在ar设备满足ar特效数据的触发展示条件时,控制ar设备播放音频讲解数据,并展示ar特效数据,以避免ar设备的定位信息不适宜时,造成ar特效数据的播放效果较差的情况发生,提高ar特效数据的展示效果。
123.以及在ar设备不满足ar特效数据的触发展示条件时,可以控制ar设备展示用于指引调整ar设备的定位信息的第一指引信息,以便可以根据第一指引信息,对ar设备的定位信息进行调整,使得调整后的ar设备能较为清楚直观的展示ar特效数据,避免对预设知识点的遗漏,提高预设知识点的讲解效率。
124.实施时,可以为每个ar特效数据设置对应的触发展示条件,比如,该触发展示条件可以包括触发展示方向和/或触发展示距离。在触发展示条件包括触发展示方向时,在ar设备的定位信息指示ar设备的朝向位于设置的触发展示方向内时,确定该ar设备满足ar特效数据的触发展示条件。在触发展示条件包括触发展示距离时,在ar设备的定位信息指示ar设备与ar特效数据的展示位姿之间的距离小于设置的第一距离值、和/或大于设置的第二距离值时,确定该ar设备满足ar特效数据的触发展示条件。
125.参见图2所示,该图2中针对ar特效数据,可以基于该ar特效数据的展示位姿,生成该ar特效数据对应的触发展示方向和触发展示距离。示例性的,在ar设备的朝向位于该触发展示方向对应的方向范围内时,确定ar设备满足触发展示条件,比如,图2中的ar设备一21,在ar设备的朝向为方向211时,则该ar设备的朝向位于设置的触发展示方向对应的方向范围内,该ar设备满足触发展示条件;在ar设备的朝向为方向212时,则该ar设备不满足触发展示条件。
126.在比如,图2中的ar设备一21与ar特效数据的展示位置之间的距离,小于设置的第一距离值且大于设置的第二距离值,则该ar设备一21满足设置的触发展示距离。图2中的ar设备二22与ar特效数据的展示位置之间的距离大于设置的第一距离值,故该ar设备二22不满足设置的触发展示距离。
127.在触发展示条件包括触发展示方向和触发展示距离时,则在ar设备的定位信息指示的朝向满足触发展示方向条件、以及ar设备的定位信息指示的位置信息满足触发展示距
离的条件时,确定ar设备满足ar特效数据的触发展示条件。在ar设备的定位信息指示的朝向不满足触发展示方向的条件,和/或ar设备的定位信息指示的位置信息不满足触发展示距离的条件时,确定ar设备不满足ar特效数据的触发展示条件。
128.若ar设备满足ar特效数据对应的触发展示条件,则控制ar设备播放音频讲解数据,并展示ar特效数据。
129.若ar设备不满足ar特效数据对应的触发展示条件,则生成用于指引调整ar设备的定位信息的第一指引信息,并通过ar设备展示该第一指引信息,以便通过该第一指引信息对ar设备的位姿进行调整,使得ar设备能够较为清晰的展示ar特效数据。
130.参见图3所示的一种ar设备的界面示意图,该图3中展示有第一指引信息,比如,第一指引信息可以为“请向右移动ar设备,查看预设知识点a对应的ar特效数据”。
131.一种可选实施方式中,所述方法还包括:在所述任一预设知识点对应的音频讲解数据播放完毕,和/或,所述ar特效数据展示结束的情况下,控制所述ar设备展示以下至少一种信息:用于指示所述ar设备移动至下一预设知识点对应的讲解区域的第二指引信息;用于指示所述ar设备未游览的预设知识点的列表信息;用于指示所述ar设备已播放各预设知识点分别对应的音频讲解数据的导航结束信息。
132.这里,设置了多种待展示的信息类型,以便在任一预设知识点对应的音频讲解数据播放完毕和/或ar特效数据展示结束后,可以控制ar设备展示至少一种信息,提高了展示的多样性和灵活性。
133.在任一预设知识点对应的音频讲解数据播放完毕和/或ar特效数据展示结束后,在ar设备还存在未游览的预设知识点时,可以控制ar设备展示用于指示ar设备移动至下一预设知识点对应的讲解区域的第二指引信息,参见图4a所示,图4a中包括的第二指引信息可以为“请向前移动,查看预设知识点b”。示例性的,图4a中还可以包括从当前位置至下一预设知识点(即预设知识点b)的导航信息。
134.或者,可以控制ar设备展示用于指示ar设备未游览的预设知识点的列表信息;参见图4b所示。
135.再或者,还可以控制ar设备展示全部预设知识点的列表信息,并在全部预设知识点中标记出已游览的预设知识点和未游览的预设知识点,参见图4c所示,其中,存在对钩“√”的预设知识点可以为已浏览的预设知识点,不存在对钩“√”的预设知识点可以为未浏览的预设知识点;进而可以响应于触发操作,确定ar设备下一个游览的预设知识点,并控制ar设备展示用于指示ar设备移动至确定的下一个游览的预设知识点对应的讲解区域的第二指引信息,其中,触发操作可以为语音数据、触屏操作等。
136.在ar设备不存在未游览的预设知识点时,还可以控制ar设备展示用于指示ar设备已播放完各预设知识点分别对应的音频讲解数据的导航结束信息,参见图4d所示,导航结束信息可以为“本次导航结束,欢迎下次使用”。还可以控制ar设备显示导航结束标识,比如,图4d中的笑脸标识可以为导航结束标识。
137.一种可选实施方式中,所述展示与当前播放的音频讲解数据对应的ar特效数据,包括:在播放所述音频讲解数据的过程中,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。
138.在音频讲解数据匹配有多种ar特效数据时,在播放音频讲解数据的过程中,可以
切换展示与当前播放的音频讲解数据对应的多种ar特效数据。比如,在音频讲解数据为对历史人物进行讲解的音频数据时,多种ar特效数据可以包括不同姿态的历史人物的ar特效,例如,多种ar特效数据可以包括处于学习姿态的历史人物的ar特效、处于休息姿态的历史人物的ar特效等。在音频讲解数据为对建筑物进行讲解的音频数据时,多种ar特效数据可以包括不同光照下的建筑物的ar特效,或者,ar特效数据可以包括位于不同历史时期时该建筑物的ar特效等。
139.比如,可以根据当前播放的音频讲解数据中正在讲解的目标关键词,切换展示多种ar特效数据,以便展示的ar特效数据与正在讲解的目标关键词相匹配。或者,在播放音频讲解数据的过程中,用户可以通过调整ar设备的位置,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。比如,在播放音频讲解数据的过程中,用户可以通过左右移动ar设备、或者顺时针转动ar设备的方式,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。
140.这里,音频讲解数据可以对应多种ar特效数据,使得在播放音频讲解数据的过程中,可以切换展示与当前播放的音频讲解数据对应的多种ar特效数据,提高ar特效数据的展示灵活性和多样性。
141.一种可选实施方式中,所述切换展示与当前播放的音频讲解数据对应的多种ar特效数据:
142.步骤b1,响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;
143.步骤b2,控制所述ar设备展示所述待展示ar特效数据。
144.在ar设备播放音频讲解数据时,可以同步控制ar设备播放音频讲解数据对应的ar特效数据,比如,可以随机从多种ar特效数据中选择一种进行播放,若用户想要查看其他ar特效数据时,可以执行目标触发操作,响应于该目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;控制ar设备展示待展示ar特效数据。
145.目标触发操作可以根据实际需要进行设置,比如目标触发操作可以为语音数据、触屏操作、ar设备的位姿变化状态等。示例性的,可以在ar设备中输入语音数据,比如,输入的语音数据可以为“特效一”,响应于该语音数据,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据。或者,可以在ar设备上进行触屏操作,响应于该触屏操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据。或者,可以通过ar设备的位姿变化状态,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;比如,若ar设备的位姿变换状态为左右移动,则可以将多种特效数据中位于当前播放的ar特效数据后面的下一个ar特效数据,确定为待展示ar特效数据。进而可以控制ar设备展示确定的待展示ar特效数据。
146.这里,在音频讲解数据对应有多种ar特效数据时,可以响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中确定待展示ar特效数据,使得确定的待展示ar特效数据能够满足用户需求,提高ar特效数据展示的灵活性。
147.一种可选实施方式中,所述方法可以应用于客户端应用平台,所述客户端应用平台为网页web端应用平台或小程序端应用平台。
148.实施时,该方法可以应用于客户端应用平台,该客户端可以为ar设备上的web应用
平台,也可以为ar设备上的小程序端应用平台。或者,该客户端应用平台还可以为ar设备上的用于进行ar导览的应用程序。
149.实施时,参见图5所示,该增强现实数据呈现方法可以包括:
150.s501,在ar设备到达目标区域后,获取ar设备的定位信息。
151.s502,基于ar设备的定位信息,判断ar设备与任一预设知识点对应的讲解区域之间是否满足预设位置条件。
152.s503,若满足,则获取任一预设知识点对应的音频讲解数据、以及音频讲解数据匹配的ar特效数据。比如,在ar设备与任一预设知识点对应的讲解区域之间的距离小于2米时,则确认ar设备满足预设位置条件。若不满足,则可以继续获取ar设备的定位信息。
153.s504,基于定位信息,判断ar设备是否满足ar特效数据的触发展示条件。
154.s505,若满足,控制ar设备播放音频讲解数据,并展示ar特效数据。
155.s506,若不满足,则控制ar设备展示用于指引调整ar设备的定位信息的第一指引信息,以引导ar设备查看该ar特效数据。比如,在ar设备的朝向位于ar特效数据对应的触发展示方向内时,和/或,ar设备与ar设备与ar特效数据的展示位姿之间的距离在0.5米

5米(包括0.5米和5米)范围内时,确定ar设备满足ar特效数据的触发展示条件。
156.s507,在任一预设知识点的音频讲解数据播放结束,和/或,ar特效数据展示完毕后,可以提示ar设备查看下一预设知识点,直至目标区域内的全部预设知识点分别对应的音频讲解数据全部播放结束,则确认导航结束。
157.本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
158.基于相同的构思,本公开实施例还提供了一种增强现实数据呈现装置,参见图6所示,为本公开实施例提供的增强现实数据呈现装置的架构示意图,包括第一获取模块601、第二获取模块602、控制模块603,具体的:
159.第一获取模块601,用于获取增强现实ar设备的定位信息;
160.第二获取模块602,用于基于所述定位信息,确定所述ar设备与任一预设知识点对应的讲解区域之间满足预设位置条件的情况下,获取所述任一预设知识点对应的音频讲解数据、以及与所述音频讲解数据匹配的ar特效数据;
161.控制模块603,用于控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据。
162.一种可能的实施方式中,所述控制模块603,在控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据时,用于:
163.在基于所述定位信息确定所述ar设备满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备播放所述音频讲解数据,并展示所述ar特效数据。
164.一种可能的实施方式中,所述装置还包括:第一展示模块604,用于:
165.在基于所述定位信息确定所述ar设备不满足所述ar特效数据的触发展示条件的情况下,控制所述ar设备展示用于指引调整所述ar设备的定位信息的第一指引信息。
166.一种可能的实施方式中,所述装置还包括:第二展示模块605,用于:
167.在所述任一预设知识点对应的音频讲解数据播放完毕,和/或,所述ar特效数据展
示结束的情况下,控制所述ar设备展示以下至少一种信息:
168.用于指示所述ar设备移动至下一预设知识点对应的讲解区域的第二指引信息;
169.用于指示所述ar设备未游览的预设知识点的列表信息;
170.用于指示所述ar设备已播放各预设知识点分别对应的音频讲解数据的导航结束信息。
171.一种可能的实施方式中,所述控制模块603,在展示与当前播放的音频讲解数据对应的ar特效数据时,用于:
172.在播放所述音频讲解数据的过程中,切换展示与当前播放的音频讲解数据对应的多种ar特效数据。
173.一种可能的实施方式中,所述控制模块603,在切换展示与当前播放的音频讲解数据对应的多种ar特效数据时,用于:
174.响应于目标触发操作,从与当前播放的音频讲解数据对应的多种ar特效数据中,确定待展示ar特效数据;
175.控制所述ar设备展示所述待展示ar特效数据。
176.一种可能的实施方式中,所述第一获取模块601,在获取增强现实ar设备的定位信息时,用于:
177.获取所述ar设备采集的实时场景图像;
178.基于所述实时场景图像和构建的三维场景模型,确定所述ar设备的定位信息。
179.一种可能的实施方式中,所述装置还包括确定模块606,用于根据以下步骤预先确定各个预设知识点对应的音频讲解数据:
180.获取目标区域对应的待处理音频讲解数据;
181.根据预设的知识点库,从所述待处理音频讲解数据中确定与多个预设知识点分别匹配的目标关键词;
182.根据各个所述目标关键词在所述待处理音频讲解数据中对应的播放时间位置,从所述待处理音频讲解数据中,分别确定与各个所述预设知识点对应的音频讲解数据。
183.一种可能的实施方式中,所述方法应用于客户端应用平台,所述客户端应用平台为网页web端应用平台或小程序端应用平台。
184.在一些实施例中,本公开实施例提供的装置具有的功能或包含的模板可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
185.基于同一技术构思,本公开实施例还提供了一种电子设备。参照图7所示,为本公开实施例提供的电子设备的结构示意图,包括处理器701、存储器702、和总线703。其中,存储器702用于存储执行指令,包括内存7021和外部存储器7022;这里的内存7021也称内存储器,用于暂时存放处理器701中的运算数据,以及与硬盘等外部存储器7022交换的数据,处理器701通过内存7021与外部存储器7022进行数据交换,当电子设备700运行时,处理器701与存储器702之间通过总线703通信,使得处理器701在执行以下指令:
186.获取增强现实ar设备的定位信息;
187.基于所述定位信息,确定所述ar设备与任一预设知识点对应的讲解区域之间满足预设位置条件的情况下,获取所述任一预设知识点对应的音频讲解数据、以及与所述音频
讲解数据匹配的ar特效数据;
188.控制所述ar设备播放音频讲解数据,并展示与当前播放的音频讲解数据匹配的ar特效数据。
189.此外,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的增强现实数据呈现方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
190.本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的增强现实数据呈现方法的步骤,具体可参见上述方法实施例,在此不再赘述。
191.其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(software development kit,sdk)等等。
192.所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
193.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
194.另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
195.所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read

only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
196.以上仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1