可穿戴显示设备及注视点的位置的确定方法与流程

文档序号:26480197发布日期:2021-08-31 17:37阅读:115来源:国知局
可穿戴显示设备及注视点的位置的确定方法与流程

本申请涉及虚拟现实技术领域,特别涉及一种可穿戴显示设备及注视点的位置的确定方法。



背景技术:

虚拟现实(virtualreality,vr)设备是指能够通过显示的图像创建虚拟环境,使用户沉浸到该虚拟环境中的设备。

相关技术中,vr设备包括显示面板,摄像头,处理器以及驱动电路。摄像头用于拍摄用户的眼睛图像。处理器根据眼睛图像确定用户在显示面板上的注视点的位置,并根据注视点的位置对所需显示的显示图像进行局部渲染。驱动电路基于接收到处理器发送的局部渲染的显示图像驱动显示面板显示。由于处理器可以仅对显示图像中注视点的位置所在区域进行局部渲染,无需对显示图像进行全局渲染,因此不仅能够降低处理器的负荷,而且能够保证显示面板的显示效果。

但是,相关技术中处理器根据摄像头拍摄的眼睛图像确定注视点的位置的效率较低,进而导致显示面板的显示效率较低。



技术实现要素:

本申请提供了一种可穿戴显示设备及注视点的位置的确定方法,可以解决相关技术中确定注视点的位置的效率较低的问题。所述技术方案如下:

一方面,提供了一种可穿戴显示设备,所述可穿戴显示设备包括:发光元件,第一偏光层,显示面板,多个第一光电传感组件,多个第二光电传感组件,以及第二偏光层;

其中,所述发光元件用于发出的光线;

所述第一偏光层位于所述发光元件的出光侧,所述第一偏光层用于将所述发光元件发出的光线转换为偏振光后照射至用户眼睛;

所述显示面板具有显示区域以及围绕所述显示区域的周边区域,所述多个第一光电传感组件和所述多个第二光电传感组件位于所述周边区域;

所述第二偏光层位于所述多个第一光电传感组件远离所述显示面板的一侧,所述第二偏光层在所述显示面板上的正投影覆盖所述多个第一光电传感组件在所述显示面板上的正投影,且与所述多个第二光电传感组件在所述显示面板上的正投影不重叠,所述第二偏光层的偏振方向与所述第一偏光层的偏振方向相交;

每个所述第一光电传感组件用于接收所述第二偏光层透射的被所述用户眼睛反射的第一光信号,并将所述第一光信号转换为第一电信号,每个所述第二光电传感组件用于接收被所述用户眼睛反射的第二光信号,并将所述第二光信号转换为第二电信号;第一电信号和所述第二电信号用于确定所述用户眼睛在所述显示面板上的注视点的位置。

可选的,所述第二偏光层的偏振方向与所述第一偏光层的偏振方向垂直。

可选的,所述发光元件为红外发光二极管。

可选的,所述可穿戴显示设备还包括:位于所述多个第一光电传感组件远离所述显示面板的一侧的滤光片,所述滤光片在所述显示面板上的正投影覆盖所述多个第一光电传感组件在所述显示面板上的正投影,且覆盖所述多个第二光电传感组件在所述显示面板上的正投影;

其中,所述滤光片用于透过红外光以及吸收可见光。

可选的,所述可穿戴显示设备还包括:光学结构;

所述光学结构位于所述第二偏光层远离所述显示面板的一侧,且所述光学结构具有遮光区域和多个透光区域,每个所述透光区域用于向至少一个所述第一光电传感组件透射所述第一光信号,和/或,用于向至少一个所述第二光电传感组件透射所述第二光信号。

可选的,所述可穿戴显示设备包括:第一透光层和第二透光层;

所述第一透光层在所述显示面板上的正投影覆盖所述多个第二光电传感组件在所述显示面板上的正投影,且与所述多个第一光电传感组件在所述显示面板上的正投影不重叠;

所述第二透光层在所述显示面板上的正投影覆盖所述多个第一光电传感组件在所述显示面板上的正投影,且覆盖所述多个第二光电传感组件在所述显示面板上的正投影。

可选的,所述可穿戴显示设备还包括:透镜以及透镜边框;

其中,所述透镜位于所述显示面板的显示侧,所述透镜边框位于所述透镜的边缘;所述发光元件与所述透镜边框远离所述显示面板的一侧固定连接。

可选的,所述周边区域包括:沿第一方向延伸的第一区域以及沿第二方向延伸的第二区域,所述第一方向与所述第二方向相交;

所述多个第一光电传感组件包括多个第一子光电传感组件以及多个第二子光电传感组件;所述多个第一子光电传感组件位于所述第一区域,且沿所述第一方向排布,所述多个第二子光电传感组件位于所述第二区域,且沿所述第二方向排布;

所述多个第二光电传感组件包括与所述多个第一子光电传感组件一一对应的多个第三子光电传感组件,以及与所述多个第二子光电传感组件一一对应的多个第四子光电传感组件;所述多个第三子光电传感组件位于所述第一区域,且沿所述第一方向排布,所述多个第四子光电传感组件位于所述第二区域,且沿所述第二方向排布;

其中,每个所述第一子光电传感组件与对应的一个所述第三子光电传感组件沿所述第二方向排布,每个所述第二子光电传感组件与对应的一个所述第四子光电传感组件沿所述第一方向排布。

另一方面,提供了一种注视点的位置的确定方法,所述方法应用于上述方面所述的可穿戴显示设备,所述方法包括:

接收第一光电传感组件发送的第一电信号,所述第一电信号是所述第一光电传感组件对用户眼睛反射的第一光信号进行光电转换得到的;

接收第二光电传感组件发送的第二电信号,所述第二电信号是所述第二光电传感组件对所述用户眼睛反射的第二光信号进行光电转换得到的;

基于所述第一电信号和所述第二电信号确定所述用户眼睛在显示面板上的注视点的位置。

可选的,所述基于所述第一电信号和所述第二电信号确定所述用户眼睛在显示面板上的注视点的位置,包括:

确定所述第一电信号和所述第二电信号的差值信号;

基于所述第一电信号和所述差值电信号确定所述用户眼睛在显示面板上的注视点的位置。

可选的,所述差值信号dδ满足:dδ=d2-d1/t,所述d1表示所述第一电信号,所述d2表示所述第二电信号,所述t为第二偏光层的透过率。

可选的,所述基于所述第一电信号和所述差值电信号确定用户眼睛在显示面板上的注视点的位置,包括:

基于所述第一电信号确定第一目标光电传感组件以及第二目标光电传感组件;

基于所述差值信号确定第三目标光电传感组件以及第四目标光电传感组件;

基于所述第一目标光电传感组件的位置,所述第二目标光电传感组件的位置,所述第三目标光电传感组件的位置以及所述第四目标光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置;

其中,所述第一目标光电传感组件为所述多个第一子光电传感组件中发送的第一电信号的信号值小于或等于第一阈值的第一子光电传感组件,所述第二目标光电传感组件为所述多个第二子光电传感组件中发送的第一电信号的信号值小于或等于第二阈值的第二子光电传感组件,所述第三目标光电传感组件为所述多个第一子光电传感组件中发送的第一电信号所对应的差值信号的信号值大于或等于第三阈值的第一子光电传感组件,所述第四目标光电传感组件为所述多个第二子光电传感组件中发送的第一电信号所对应的差值信号的信号值大于或等于第四阈值的第二子光电传感组件。

可选的,所述基于所述第一目标光电传感组件的位置,所述第二目标光电传感组件的位置,所述第三目标光电传感组件的位置以及所述第四目标光电传感组件的位置确定用户眼睛在显示面板上的注视点的位置,包括:

确定所述第一目标光电传感组件的第一序号以及所述第三目标光电传感组件的第二序号的第一差值绝对值,其中所述第一序号与所述第一目标光电传感组件的位置相关,所述第二序号与所述第三目标光电传感组件的位置相关;

确定所述第二目标光电传感组件的第三序号以及所述第四目标光电传感组件的第四序号的第二差值绝对值,其中所述第三序号与所述第二目标光电传感组件的位置相关,所述第四序号与所述第四目标光电传感组件的位置相关;

采用定位模型处理所述第一差值绝对值以及第二差值绝对值,得到用户眼睛在显示面板上的注视点沿第一方向的第一坐标以及沿第二方向的第二坐标。

可选的,所述第一坐标x满足:

x=c1δx+c2δy+c3δxδy+c4δx2+c5δy2+c5;

所述第二坐标y满足:

y=c7δx+c8δy+c9δxδy+c10δx2+c11δy2+c12;

其中,所述c1,所述c2,所述c3,所述c4,所述c5,所述c6,所述c7,所述c8,所述c9,所述c10,所述c11,所述c12均为所述定位模型的校准参数;所述δx为所述第一差值绝对值;所述δy为所述第二差值绝对值。

又一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,所述指令由可穿戴显示设备执行以实现如上述方面所述的注视点的位置的确定方法。

再一方面,提供了一种包含指令的计算机程序产品,当所述计算机程序产品在所述计算机上运行时,使得所述计算机执行上述方面所述的注视点的位置的确定方法。

本申请提供的技术方案带来的有益效果至少包括:

本申请提供了一种可穿戴显示设备及注视点的位置的确定方法,该可穿戴显示设备对各个光电传感组件发送的电信号的处理效率较高,因此可穿戴显示设备能够基于各个光电传感组件发送的电信号较快的确定出用户眼睛在显示面板上的注视点的位置,进而能够提高显示面板显示图像的效率,显示面板的刷新率较高。

并且,由于本申请的方案在确定注视点的位置时,不仅可以考虑到用户眼睛对发光元件发出的光线的漫反射,还可以考虑到用户眼睛对发光元件发出的光线的镜面反射,因此能够提高确定的注视点的位置的准确性。

附图说明

为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种可穿戴显示设备的结构示意图;

图2是本申请实施例提供的一种显示面板的俯视图;

图3是本申请实施例提供的一种显示面板,第一光电传感组件以及第二光电传感组件的示意图;

图4是本申请实施例提供的另一种可穿戴显示设备的结构示意图;

图5是本申请实施例提供的又一种可穿戴显示设备的结构示意图;

图6是本申请实施例提供的一种光学结构和光电传感组件的示意图;

图7是本申请实施例提供的另一种光学结构和光电传感组件的示意图;

图8是本申请实施例提供的另一种显示面板,第一光电传感组件以及第二光电传感组件的示意图;

图9是本申请实施例提供的一种注视点的位置的确定方法的流程图;

图10是本申请实施例提供的另一种注视点的位置的确定方法的流程图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。

本申请的实施方式部分使用的术语仅用于对本申请的实施例进行解释,而非旨在限定本申请。除非另作定义,本申请的实施方式使用的技术术语或者科学术语应当为本申请所属领域内具有一般技能的人士所理解的通常意义。本申请专利申请说明书以及权利要求书中使用的“第一”、“第二”、“第三”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。同样,“一个”或者“一”等类似词语也不表示数量限制,而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现在“包括”或者“包含”前面的元件或者物件涵盖出现在“包括”或者“包含”后面列举的元件或者物件及其等同,并不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系,当被描述对象的绝对位置改变后,则所述相对位置关系也可能相应地改变。

图1是本申请实施例提供的一种可穿戴显示设备的结构示意图。参考图1可以看出,该可穿戴显示设备10包括:发光元件101,第一偏光层102,显示面板103,多个第一光电传感组件104,多个第二光电传感组件105以及第二偏光层106。图1中示出了一个第一光电传感组件104和一个第二光电传感组件105。

其中,发光元件101用于发出光线。第一偏光层102位于发光元件101的出光侧,该第一偏光层102用于将发光元件101发出的光线转换为偏振光后照射至用户眼睛。

图2是本申请实施例提供的一种显示面板的俯视图。参考图2可以看出,该显示面板103具有显示区域103a以及围绕显示区域103a的周边区域103b。图3是本申请实施例提供的一种显示面板,第一光电传感组件以及第二光电传感组件的示意图。结合图1至图3,多个第一光电传感组件104和多个第二光电传感组件105均位于周边区域103b,该多个第一光电传感组件104和多个第二光电传感组件105不会对显示面板103的正常显示造成影响,显示面板103的显示效果较好。

并且,图1和图3中,多个第一光电传感组件104相对于多个第二光电传感组件105靠近显示区域103a。当然,多个第一光电传感组件104相对于多个第二光电传感组件105远离显示区域103a。本申请实施例对多个第一光电传感组件104和多个第二光电传感组件105相对于显示区域103a的位置不做限定。

参考图1还可以看出,第二偏光层106位于多个第一光电传感组件104远离显示面板103的一侧。该第二偏光层106在显示面板103上的正投影覆盖多个第一光电传感组件104在显示面板103上的正投影,且与多个第二光电传感组件105在显示面板103上的正投影不重叠。其中,第二偏光层106的偏振方向与第一偏光层102的偏振方向相交。

在本申请实施例中,由于第一光电传感组件104远离显示面板103的一侧具有第二偏光层106,因此发光元件101发出的光线可以经过第一偏光层102后照射至用户眼睛,之后被用户眼睛反射的光线可以先经过第二偏光层106,然后再照射至第一光电传感组件104。由此,该第一光电传感组件104用于接收第二偏光层106透射的被用户眼睛反射的第一光信号,并将接收到的第一光信号转换为第一电信号。

其中,发光元件101发出的光线经过第一偏光层102之后转换为偏振光。该偏振光照射至用户眼睛,并在用户眼睛处发生镜面反射以及漫反射。被用户眼睛镜面反射的光线以及漫反射的光线可以照射至第二偏光层106。

由于镜面反射的光线是由偏振光被反射后平行的沿一个方向射出,且第二偏光层106的偏振方向与第一偏光层102的偏振方向相交,因此被用户眼睛镜面反射的光线无法从第二偏光层106透过。而由于漫反射的光线是由偏振光被反射后沿各个方向出射,因此即使第二偏光层106的偏振方向与第一偏光层102的偏振方向相交,被用户眼睛漫反射的光线也能够从第二偏光层106透过。也即是,第一光电传感组件104接收到的第一光信号是发光元件101发出的光线被用户眼睛漫反射的光线的信号。

在本申请实施例中,由于第二光电传感组件105远离显示面板103的一侧没有设置第二偏光层106,因此发光元件101发出的光线可以经过第一偏光层102后照射至用户眼睛,之后被用户眼睛反射的光线直接照射至第二光电传感组件105。由此,该第二光电传感组件105用于接收被用户眼睛反射的第二光信号,并将接收到的第二光信号转换为第二电信号。

其中,发光元件101发出的光线经过第一偏光层102之后转换为偏振光。该偏振光照射至用户眼睛,并在用户眼睛处发生镜面反射以及漫反射。被用户眼睛镜面反射的光线以及漫反射的光线可以照射至第二光电传感组件105。也即是,第二光电传感组件105接收到的第二光信号包括:发光元件101发出的光线被用户眼睛镜面反射的光线的信号,以及发光元件101发出的光线被用户眼睛漫反射的光线的信号。

在本申请实施例中,第一电信号和第二电信号可以用于确定用户眼睛在显示面板103上的注视点的位置。由于第一电信号是用户眼睛漫反射的第一光信号转换得到的,第二电信号是用户眼睛漫反射以及镜面反射的第二光信号转换得到的,因此能够基于第一电信号和第二电信号确定出发光元件101发出的光线被用户眼睛镜面反射的光线的电信号。

由此,可穿戴显示设备基于第一电信号和第二电信号确定用户眼睛在显示面板103上的注视点的位置时,可以同时基于用户眼睛漫反射的光线的电信号以及镜面反射的光线的电信号确定注视点的位置,能够提高确定注视点的位置的准确性。

并且,通常情况下,电信号的数据量较少,而图像的数据量较多,因此可穿戴显示设备对电信号的处理效率相对于对图像的处理效率高。在本申请实施例中,可穿戴显示设备对各个第一光电传感组件104以及各个第二光电传感组件105发送的电信号的处理效率较高,能够较快的确定出用户眼睛在显示面板103上的注视点的位置,进而能够提高显示面板103显示图像的效率,显示面板103的刷新率较高。

综上所述,本申请实施例提供了一种可穿戴显示设备,该可穿戴显示设备对各个光电传感组件发送的电信号的处理效率较高,因此可穿戴显示设备能够基于各个光电传感组件发送的电信号较快的确定出用户眼睛在显示面板上的注视点的位置,进而能够提高显示面板显示图像的效率,显示面板的刷新率较高。

并且,由于本申请实施例提供的方案在确定注视点的位置时,不仅可以考虑到用户眼睛对发光元件发出的光线的漫反射,还可以考虑到用户眼睛对发光元件发出的光线的镜面反射,因此能够提高确定的注视点的位置的准确性。

可选的,第二偏光层106的偏振方向与第一偏光层102的偏振方向垂直。将第二偏光层106的偏振方向设计为与第一偏光层102的偏振方向垂直,可以进一步确保被用户眼睛镜面反射的发光元件101的光线不会从第二偏光层106透过,确保第一光电传感组件104接收到第一光信号不包括镜面反射的光线的信号。

可选的,发光元件101可以为红外发光二极管。由于用户眼睛的瞳孔,巩膜以及虹膜对红外光的反射率的差异较大,因此将发光元件101设计为红外发光二极管,可以使得各个光电传感组件接收到的瞳孔反射的红外光的光信号,巩膜反射的红外光的光信号以及虹膜反射的红外光的光信号的差异较大,便于可穿戴设备的处理器确定用户眼睛在显示面板103上的注视点的位置。示例的,发光元件发出的光线的波长范围可以为850nm(纳米)至940nm。

图4是本申请实施例提供的另一种可穿戴显示设备的结构示意图。参考图4可以看出,该可穿戴显示设备10还可以包括:滤光片107。该滤光片107可以位于多个第一光电传感组件104远离显示面板103的一侧,且该滤光片107在显示面板103上的正投影可以覆盖多个第一光电传感组件104在显示面板103上的正投影。并且,该滤光片107还位于多个第二光电传感组件105远离显示面板103的一侧,且该滤光片107在显示面板103上的正投影可以覆盖多个第二光电传感组件105在显示面板103上的正投影。其中,该滤光片107可以用于透过红外光以及吸收可见光。

通过在第一光电传感组件104和第二光电传感组件105远离显示面板103的一侧设置滤光片107,以滤除可见光,避免显示面板103发出的光线对第一光电传感组件104和第二光电传感组件105接收到的光信号造成影响,保证确定出的注视点的位置的准确性。

参考图4,该可穿戴显示设备10还可以包括光学结构108。该光学结构108可以位于第二偏光层106远离显示面板103的一侧。该光学结构108可以具有遮光区域以及多个透光区域。

其中,每个透光区域可以用于向至少一个第一光电传感组件104透射第一光信号,和/或,用于向至少一个第二光电传感组件105透射第二光信号。示例的,一个透光区域可以仅向至少一个第一光电传感组件104透射第一光信号。或者,一个透光区域可以仅向至少一个第二光电传感组件105透射第二光信号。又或者,一个透光区域可以向至少一个第一光电传感组件104透射第一光信号,并向至少一个第二光电传感组件105透射第二光信号。

参考图5,光学结构108可以为环状结构,且该光学结构108在显示面板103上的正投影位于周边区域103b。可选的,光学结构108的遮光区域的材料可以为不透光材料。光学结构108上可以具有通孔108a,则透光区域可以由光学结构108上的通孔108a构成。其中,图5中示出了四个通孔108a,四个通孔108a分别位于光学结构108的一侧的中部。

或者,光学结构108上还可以具有其他数量的通孔。可选的,光学结构108的每一侧可以具有更多数量的通孔,该多个通孔可以形成孔阵列,则光学结构108的每一侧的透光区域可以由孔阵列构成。示例的,光学结构108上具有的通孔的数量,可以与可穿戴显示设备包括的第一光电传感组件104和第二光电传感组件105的数量之和相同,且一一对应。

又或者,光学结构108上可以具有狭缝,则透光区域可以由光学结构108上的狭缝构成。再或者,光学结构108的每一侧可以具有多个狭缝,该多个狭缝可以形成狭缝阵列,则光学结构108的每一侧的透光区域可以由狭缝阵列构成。再或者,光学结构108的透光区域可以由透镜111或柱镜等透光结构构成。

在本申请实施例中,参考图4,该可穿戴显示设备10还可以包括:第一透光层109。该第一透光层109在显示面板103上的正投影覆盖多个第二光电传感组件105在显示面板103上的正投影重叠,且与多个第一光电传感组件104在显示面板103上的正投影不重叠。

由于第一光电传感组件104远离显示面板103的一侧具有第二偏光层106,而第二光电传感组件105远离显示面板103的一侧不具有第二偏光层106,因此会使得可穿戴显示设备中第一光电传感组件104所在区域的厚度,大于第二光电传感组件105所在区域的厚度。由此,为了保证第一光电传感组件104所在区域的厚度与第二光电传感组件105所在区域的厚度的一致性,可以在第二光电传感组件105远离显示面板103的一侧设计以第一透光层109。其中,该第一透光层109远离显示面板103的一面可以与第二偏光层106远离显示面板103的一面共面。

可选的,参考图4,该可穿戴显示设备10还可以包括:第二透光层110。该第二透光层110在显示面板103上的正投影覆盖多个第一光电传感组件104在显示面板103上的正投影,且覆盖多个第二光电传感组件105在显示面板103上的正投影。

图6是本申请实施例提供的一种光学结构与光电传感组件的示意图。图7是本申请实施例提供的另一种光学结构与光电传感组件的示意图。其中,图6中所示的可穿戴显示设备10包括第二透光层110。图7中所示的可穿戴显示设备10不包括第二透光层110。另外,图6和图7中的光电传感组件可以为第一光电传感组件104或者第二光电传感组件105,采用104/105的方式标注。

结合图6和图7,设置第二透光层110的方案中光学结构108与光电传感组件之间的距离d1,大于不设置第二透光层110的方案中光学结构108与光电传感组件之间的距离d2。也即是,可穿戴显示设备10中设置有第二透光层110,能够减小每个光电传感组件所能够接收的光信号所对应的用户眼睛的区域,提高光电传感组件接收到的光信号的精度,进而提高确定的注视点的位置的准确性。

另外,参考图4,可穿戴显示设备10还可以包括:透镜111以及透镜边框112。该透镜111可以位于显示面板103的显示侧,用户可以透过该透镜111观看显示面板103显示的图像。透镜边框112可以位于透镜111的边缘,用于支撑和固定透镜111。

参考图4,发光元件101位于显示面板103的显示侧的情况下,该发光元件101可以固定于透镜边框112远离显示面板103的一侧。当然,该发光元件101还可以集成在显示面板101中,该发光元件101不用固定在透镜边框112上,只需使得发光元件101发出的光线能够经过第一偏光层102照射至用于眼睛即可。

参考图2可以看出,该显示面板103的周边区域103b包括:沿第一方向x延伸的第一区域103b1以及沿第二方向y延伸的第二区域103b2。其中,第一方向x与第二方向y相交。

结合图2和图3可以看出,该多个第一光电传感组件104可以包括:多个第一子光电传感组件104a以及多个第二子光电传感组件104b。多个第一子光电传感组件104a位于第一区域103b1,且沿第一方向x排布。多个第二子光电传感组件104b位于第二区域103b2,且沿第二方向y排布。并且,多个第二光电传感组件105可以包括:与多个第一子光电传感组件104a一一对应的多个第三子光电传感组件105a,以及与多个第二子光电传感组件104b一一对应的多个第四子光电传感组件105b。该多个第三子光电传感组件105a位于第一区域103b1,且沿第一方向x排布。该多个第四子光电传感组件105b位于第二区域103b2,且沿第二方向y排布。

其中,每个第一子光电传感组件104a与对应的一个第三子光电传感组件105a沿第二方向y排布。每个第二子光电传感组件104b与对应的一个第四子光电传感组件105b沿第一方向x排布。

可选的,多个第一子光电传感组件104a沿第一方向x均匀排布,多个第二子光电传感组件104b沿第二方向y均匀排布。相应的,多个第三子光电传感组件105a沿第一方向x均匀排布,多个第四子光电传感组件105b沿第二方向y均匀排布。

对于每个第一子光电传感组件104a,该第一子光电传感组件104a与对应的第三子光电传感组件105a之间的第一距离可以为固定值。也即是,各个第一子光电传感组件104a与对应的第三子光电传感组件105a之间的距离相等。对于每个第二子光电传感组件104b,该第二子光电传感组件104b与对应的第四子光电传感组件105b之间的第二距离可以为固定值。也即是,各个第二子光电传感组件104b与对应的第四子光电传感组件105b之间的距离相等。

可选的,第一距离与第二距离可以相等。或者,第一距离与第二距离可以不相等。本申请实施例对此不做限定。

在本申请实施例中,可穿戴显示设备可以包括处理器,该处理器可以与每个第一光电传感组件104以及每个第二光电传感组件105连接。也即是,处理器可以与每个第一子光电传感组件104a,每个第二子光电传感组件104b,每个第三子光电传感组件105a以及每个第四子光电传感组件105b连接。

该处理器可以接收到多个第一子光电传感组件104a中每个第一子光电传感组件104a发送的第一电信号,并基于各个第一子光电传感组件104a的第一电信号从多个第一子光电传感组件104a中确定出至少一个第一目标光电传感组件。

处理器还可以接收到多个第二子光电传感组件104b中每个第二子光电传感组件104b发送的第一电信号,并基于各个第二子光电传感组件104b的第一电信号从多个第二子光电传感组件104b中确定出至少一个第二目标光电传感组件。

相应的,处理器还可以接收到多个第三子光电传感组件105a中每个第三子光电传感组件105a的第二电信号,并基于各个第三子光电传感组件105a的电信号从多个第一子光电传感组件104a中确定出至少一个第三目标光电传感组件。处理器还可以接收到多个第四子光电传感组件105b中每个第四子光电传感组件105b的第二电信号,并基于各个第四子光电传感组件105b的电信号从多个第二子光电传感组件104b中确定出至少一个第四目标光电传感组件。

之后,处理器可以基于至少一个第一目标光电传感组件的位置,至少一个第二目标光电传感组件的位置,至少一个第三目标光电传感组件的位置以及至少一个第四目标光电传感组件的位置确定用户眼睛在显示面板103上的注视点的位置。

其中,第一目标光电传感组件为多个第一子光电传感组件104a中发送的第一电信号的信号值小于或等于第一阈值的第一子光电传感组件104a。第二目标光电传感组件为多个第二子光电传感组件104b中发送的第一电信号的信号值小于或等于第二阈值的第二子光电传感组件104b。该第一阈值与第二阈值可以相等,也可以不相等,本申请实施例对此不做限定。

另外,第三目标光电传感组件为多个第一子光电传感组件104a中发送的第一电信号所对应的差值信号的信号值大于或等于第三阈值的第一子光电传感组件104a。第四目标光电传感组件为多个第二子光电传感组件104b中发送的第一电信号所对应的差值信号的信号值大于或等于第四阈值的第二子光电传感组件104b。该第三阈值与第四阈值可以相等,也可以不相等,本申请实施例对此不做限定。

可选的,第一子光电传感组件104a中发送的第一电信号所对应的差值信号用于表示:第一子光电传感组件104a的第一电信号,以及与该第一子光电传感组件104a对应的第三子光电传感组件105a的第二电信号的差值信号。第二子光电传感组件104b中发送的第一电信号所对应的差值信号用于表示:第二子光电传感组件104b的第一电信号,以及与该第二子光电传感组件104b对应的第四子光电传感组件105b的第二电信号的差值信号。

第一子光电传感组件104a和第二子光电传感组件104b接收到的第一光信号为发光元件101发出的光线被用户眼睛漫反射的光线的信号。也即是,第一子光电传感组件104a和第二子光电传感组件104b发送给处理器的第一电信号用于表示发光元件101发出的光线被用户眼睛漫反射的光线的电信号。

第三子光电传感组件105a和第四子光电传感组件105b接收到的第二光信号包括发光元件101发出的光线被用户眼睛镜面反射的光线,以及发光元件101发出的光线被用户眼睛漫反射的光线的信号。也即是,第三子光电传感组件105a和第四子光电传感组件105b发送给处理器的第二电信号用于表示发光元件101发出的光线被用户眼睛漫反射以及镜面反射的光线的电信号。

由此,第一子光电传感组件104a的第一电信号与对应的第三子光电传感组件105a的第二电信号的差值信号可以用于表示:发光元件101发出的光线被用户眼睛镜面反射的光线的电信号。第二子光电传感组件104b的第一电信号与对应的第四子光电传感组件105b的第二电信号的差值信号也可以用于表示:发光元件101发出的光线被用户眼睛镜面反射的光线的电信号。

通常情况下,用户眼睛包括瞳孔,巩膜以及虹膜。由于瞳孔的颜色最深,因此瞳孔反射的光信号最小。进一步的,瞳孔反射的光信号转换得到的电信号最小。由此,基于小于或等于第一阈值的第一子光电传感组件104a发送的第一电信号的信号值,可以确定出用户眼睛的瞳孔所对应的第一目标光电传感组件。基于小于或等于第二阈值的第二子光电传感组件104b发送的第一电信号的信号值,可以确定出用户眼睛的瞳孔所对应的第二目标光电传感组件。

另外,发光元件101发出的光线照射至用于眼睛,由于光线会在用户眼睛发生镜面反射,因此会在用户眼睛上产生亮点。由于亮点处反射的光信号最大,因此基于大于或等于第三阈值的第一子光电传感组件104a和第三子光电传感组件105a的差值信号的信号值,可以确定出用户眼睛的亮点所对应的第三目标光电传感组件。并且,基于大于或等于第四阈值的第二子光电传感组件104b和第四子光电传感组件105b的差值信号的信号值,可以确定出用户眼睛的亮点所对应的第四目标光电传感组件。

可选的,该第一阈值,第二阈值,第三阈值以及第四阈值可以是处理器中预先存储的固定值。或者,该第一阈值可以是处理器根据接收到的多个第一子光电传感组件104a的第一电信号的信号值确定的。第二阈值可以是处理器根据接收到的多个第二子光电传感组件104b的第一电信号的信号值确定的。第三阈值可以是处理器根据接收到的多个第一子光电传感组件104a的第一电信号所对应的差值信号的信号值确定的。第四阈值可以是处理器根据接收到的多个第二子光电传感组件104b的第一电信号所对应的差值信号的信号值确定的。

示例的,处理器可以对n个第一子光电传感组件104a发送的n个第一电信号的信号值按照由小到大的顺序排列,并可以将位于第n位的信号值确定为第一阈值。其中,n为大于1的整数,n为大于1且小于n/2的整数。

处理器可以对m个第二子光电传感组件104b发送的m个第一电信号的信号值按照由小到大的顺序排列,并可以将位于第m位的信号值确定为第二阈值。其中,m为大于1的整数,m为大于1且小于m/2的整数。

处理器可以对r个第一子光电传感组件104a发送的r个第一电信号对应的r个差值信号的信号值按照由小到大的顺序排列,并可以将位于第r位的信号值确定为第三阈值。其中,r为大于1的整数,r为大于r/2且小于r的整数。

处理器可以对t个第二子光电传感组件104b发送的t个第一电信号对应的t个差值信号的信号值按照由小到大的顺序排列,并可以将位于第t位的信号值确定为第四阈值。其中,t为大于1的整数,t为大于t/2且小于t的整数。

或者,处理器将接收到的多个第一子光电传感组件104a中第一电信号的信号值最小的信号值确定为第一阈值。处理器将接收到的多个第二子光电传感组件104b中第一电信号的信号值最小的信号值确定为第二阈值。处理器将接收到的多个第一子光电传感组件104a的第一电信号所对应的差值信号的信号值最大的信号值确定为第三阈值。处理器将接收到的多个第二子光电传感组件104b的第一电信号所对应的差值信号的信号值最大的信号值确定为第四阈值。

在本申请实施例中,处理器可以确定出多个第一子光电传感组件104a中发送的第一电信号的信号值最小的第一目标光电传感组件的第一序号,以及可以确定出多个第二子光电传感组件104b中发送的第一电信号的信号值最小的第二目标光电传感组件第三序号。并且,处理器可以确定出多个第一子光电传感组件104a中发送的第一电信号所对应的差值信号的信号值最大的第三目标光电传感组件的第二序号,以及可以确定出多个第二子光电传感组件104b发送的第一电信号所对应的差值信号的信号值最大的第四目标光电传感组件的第四序号。

之后,处理器可以确定出第一序号和第二序号的第一差值绝对值,以及确定出第三序号和第四序号的第二差值绝对值。并且,处理器中可以预先存储有定位模型,处理器可以采用该定位模型处理第一差值绝对值以及第二差值绝对值,从而得到用户眼睛在显示面板103上的注视点沿第一方向x的第一坐标以及沿第二方向y的第二坐标,即得到用户眼睛在显示面板103上的注视点的位置。

参考图2,第一方向x与第二方向y垂直。该第一方向x可以为显示面板103的像素行方向,该第二方向y可以为显示面板103的像素列方向。

参考图2,周边区域103b可以包括两个第一区域103b1以及两个第二区域103b2。该两个第一区域103b1可以沿第二方向y排布,且分别位于显示区域103a的两侧。两个第二区域103b2可以沿第一方向x排布,且分别位于显示区域103a的两侧。

参考图8,多个第一光电传感组件104包括的多个第一子光电传感组件104a中,一部分第一子光电传感组件104a位于一个第一区域103b1,另一部分子第一光电传感组件104位于另一个第一区域103b1。相应的,多个第二光电传感组件105包括的多个第三子光电传感组件105a中,一部分第三子光电传感组件105a位于一个第一区域103b1,另一部分第三子光电传感组件105a位于另一个第一区域103b1。

参考图8,多个第一光电传感组件104包括的多个第二子光电传感组件104b中,一部分第二子光电传感组件104b位于一个第二区域103b2,另一部分第二子光电传感组件104b位于另一个第二区域103b2。相应的,多个第二光电传感组件105包括的多个第四子光电传感组件105b中,一部分第四子光电传感组件105b位于一个第二区域103b2,另一部分第四子光电传感组件105b位于另一个第二区域103b2。

由此,处理器可以基于较多数量的光电传感组件发送的电信号确定用户眼睛在显示面板103上的注视点的位置,可以提高确定的注视点的位置的准确性。

在本申请实施例中,每个第一光电传感组件104以及每个第二光电传感组件105均可以包括开关晶体管以及光电二极管(图中未示出)。开关晶体管可以集成在显示面板103中。或者,开关晶体管可以贴附在显示面板103上。又或者,可穿戴显示设备10还可以包括贴附在显示面板103的周边区域103b的电路板,开关晶体管可以贴附在该电路板上。其中,该电路板可以为柔性电路板或非柔性电路板。

若开关晶体管贴附在电路板,则因此光电传感组件的排列方式通常指的是光电传感组件中光电二极管的排列方式。例如,多个第一子光电传感组件104a沿第一方向x排布是指:多个第一子光电传感组件104a中的光电二极管沿第一方向x排布。多个第二子光电传感组件104b沿第二方向y排布是指:多个第二子光电传感组件104b中的光电二极管沿第二方向y排布。多个第三子光电传感组件105a沿第一方向x排布是指:多个第三子光电传感组件105a中的光电二极管沿第一方向x排布。多个第四子光电传感组件105b沿第二方向y排布是指:多个第四子光电传感组件105b中的光电二极管沿第二方向y排布。

综上所述,本申请实施例提供了一种可穿戴显示设备,该可穿戴显示设备对各个光电传感组件发送的电信号的处理效率较高,因此可穿戴显示设备能够基于各个光电传感组件发送的电信号较快的确定出用户眼睛在显示面板上的注视点的位置,进而能够提高显示面板显示图像的效率,显示面板的刷新率较高。

并且,由于本申请实施例提供的方案在确定注视点的位置时,不仅可以考虑到用户眼睛对发光元件发出的光线的漫反射,还可以考虑到用户眼睛对发光元件发出的光线的镜面反射,因此能够提高确定的注视点的位置的准确性。

图9是本申请实施例提供的一种注视点的位置的确定方法。该方法可以应用于上述实施例提供的可穿戴显示设备,例如可以应用于可穿戴显示设备包括的处理器中。参考图9,该方法可以包括:

步骤201、接收第一光电传感组件发送的第一电信号。

在本申请实施例中,可穿戴显示设备10包括显示面板103以及多个第一光电传感组件104。显示面板103具有显示区域103a以及围绕显示区域103a的周边区域103b。多个第一光电传感组件104位于周边区域103b。

发光元件101发出的光线先经过第一偏光层102,然后照射至用户眼睛。用户眼睛可以反射经过第一偏光层102后的偏振光。并且,被用户眼睛镜面反射的偏振光无法从第二偏光层106透过,而被用户眼睛漫反射的偏振光可以从第二偏光层106透过。

由此,第一光电传感组件104不会接收到被用户眼睛镜面反射的光线,仅能够接收到被用户眼睛漫反射的光线。也即是,在本申请实施例中,第一光电传感组件104接收到的用户眼睛反射的发光元件101的第一光信号是指:用户眼睛漫反射的发光元件101的光信号。

在第一光电传感组件104接收到用户眼睛漫反射的发光元件101的第一光信号之后,第一光电传感组件104可以对该第一电信号进行光电转换以得到第一电信号。并且,可穿戴显示设备10还包括处理器,该处理器与每个第一光电传感组件104连接。每个第一光电传感组件104可以将其接收到的第一电信号转换为第一电信号之后发送给处理器。也即是,处理器能够接收到每个第一光电传感组件104发送的第一电信号。

步骤202、接收第二光电传感组件发送的第二电信号。

在本申请实施例中,可穿戴显示设备还包括多个第二光电传感组件105。多个第二光电传感组件105位于周边区域103b。

发光元件101发出的光线先经过第一偏光层102,然后照射至用户眼睛。用户眼睛可以反射经过第一偏光层102后的偏振光,该偏振光可以直接照射至第二光电传感组件105。由此,该第二光电传感组件105接收到的用户眼睛反射的第二光信号包括:发光元件101发出的光线被用户眼睛镜面反射的光线的信号,以及发光元件101发出的光线被用户眼睛漫反射的光线的信号。

在第二光电传感组件105接收到用户眼睛镜面反射以及漫反射的发光元件101的第二光信号之后,第二光电传感组件105可以对该第二电信号进行光电转换以得到第二电信号。并且,可穿戴显示设备中的处理器与每个第二光电传感组件105连接。每个第二光电传感组件105可以将其接收到的第二电信号转换为第二电信号之后发送给处理器。也即是,处理器能够接收到每个第二光电传感组件105发送的第二电信号。

步骤203、基于第一电信号和第二电信号确定用户眼睛在显示面板上的注视点的位置。

在本申请实施例中,处理器在接收到各个第一光电传感组件104发送的第一电信号以及各个第二光电传感组件105发送的第二电信号之后,可以基于各个第一光电传感组件104发送的第一电信号,以及各个第二光电传感组件105发送的第二电信号确定用户眼睛在显示面板103上的注视点的位置。

由于第一电信号是用户眼睛漫反射的第一光信号转换得到的,第二电信号是用户眼睛漫反射以及镜面反射的第二光信号转换得到的,因此能够基于第一电信号和第二电信号确定出发光元件101发出的光线被用户眼睛镜面反射的光线的电信号。

由于人眼的不同区域对光线(例如红外光)的反射率不同,因此第一光电传感组件104接收到人眼不同区域反射的第一光信号不同,第二光电传感组件105接收到人眼不同区域反射的第二光信号不同。进一步的,第一光电传感组件104基于不同的第一光信号转换得到的第一电信号不同,第二光电传感组件105基于不同的第二光信号转换得到的第二电信号不同。基于不同的第一电信号和不同第二电信号确定出的发光元件101发出的光线被用户眼睛镜面反射的光线的电信号不同。

由此,处理器基于第一电信号和第二电信号确定用户眼睛在显示面板103上的注视点的位置时,可以同时基于用户眼睛漫反射的光线的电信号以及镜面反射的光线的电信号确定注视点的位置,能够提高确定注视点的位置的准确性。

并且,通常情况下,电信号的数据量较少,而图像的数据量较多,因此处理器对电信号的处理效率相对于对图像的处理效率高。在本申请实施例中,处理器对各个第一光电传感组件104以及各个第二光电传感组件105发送的电信号的处理效率较高,能够较快的确定出用户眼睛在显示面板103上的注视点的位置,进而能够提高显示面板103显示图像的效率,显示面板103的刷新率较高。

综上所述,本申请实施例提供了一种注视点位置的确定方法,该可穿戴显示设备对各个光电传感组件发送的电信号的处理效率较高,因此可穿戴显示设备能够基于各个光电传感组件发送的电信号较快的确定出用户眼睛在显示面板上的注视点的位置,进而能够提高显示面板显示图像的效率,显示面板的刷新率较高。

并且,由于本申请实施例提供的方案在确定注视点的位置时,不仅可以考虑到用户眼睛对发光元件发出的光线的漫反射,还可以考虑到用户眼睛对发光元件发出的光线的镜面反射,因此能够提高确定的注视点的位置的准确性。

图10是本申请实施例提供的另一种注视点的位置的确定方法。该方法可以应用于上述实施例提供的可穿戴显示设备中。参考图10可以看出,该方法可以包括:

步骤301、多个第一子光电传感组件和多个第二子光电传感组件接收从第二偏光层透射的用户眼睛反射的第一光信号。

在本申请实施例中,可穿戴显示设备10包括显示面板103以及多个第一光电传感组件104。显示面板103具有显示区域103a以及围绕显示区域103a的周边区域103b。用户通常位于显示面板103显示侧,以查看显示面板103中显示的图像。并且,多个第一光电传感组件104可以位于显示面板103的显示侧,且位于周边区域103b。

发光元件101发出的光线可以经过第一偏光层102之后照射至用户眼睛。用户眼睛可以反射经过第一偏光层102后的偏振光。并且,被用户眼睛镜面反射的偏振光无法从第二偏光层106透过,而被用户眼睛漫反射的偏振光可以从第二偏光层106透过。

由此,各个第一光电传感组件104不会接收到被用户眼睛镜面反射的光线,仅能够接收到被用户眼睛漫反射的光线。也即是,在本申请实施例中,第一光电传感组件104接收的从第二偏光层透射的用户眼睛反射的发光元件101的第一光信号是指:用户眼睛漫反射的发光元件101的光信号。

可选的,多个第一光电传感组件104包括沿第一方向x排布的多个第一子光电传感组件104a以及沿第二方向y排布的多个第二子光电传感组件104b。其中,多个第一子光电传感组件104a以及多个第二子光电传感组件104b均能够接收用户眼睛漫反射的第一光信号。

步骤302、多个第一子光电传感组件和多个第二子光电传感组件中每个光电传感组件将接收到的第一光信号转换为第一电信号。

在本申请实施例中,多个第一子光电传感组件104a和多个第二子光电传感组件104b接收到第一光信号之后,每个光电传感组件可以将其接收到的第一光信号转换为第一电信号。

并且,第一光电传感组件104转换后的第一电信号的信号值与该第一光电传感组件104接收到的第一光信号的信号值正相关。也即是,第一光电传感组件104接收到的第一光信号的信号值越大,第一光电传感组件104将其接收到的第一光信号转换得到的第一电信号的信号值越大;第一光电传感组件104接收到的第一光信号的信号值越小,第一光电传感组件104将其接收到的第一光信号转换得到的第一电信号的信号值越小。

其中,光信号的信号值用于表示光线的强度大小。例如,第一光信号的信号值用于表示第一光电传感组件104接收的光线的强度大小。

步骤303、多个第一子光电传感组件和多个第二子光电传感组件将第一电信号发送至处理器。

在本申请实施例中,可穿戴显示设备10还包括处理器。该处理器可以与每个第一子光电传感组件104a以及每个第二子光电传感组件104b连接。每个第一子光电传感组件104a可以将接收到的第一光信号转换后的第一电信号发送至处理器。并且,每个第二子光电传感组件104b可以将接收到的第一光信号转换后的第一电信号发送至处理器。

步骤304、多个第三子光电传感组件和多个第四子光电传感组件接收用户眼睛反射的第二光信号。

在本申请实施例中,可穿戴显示设备10还包括多个第二光电传感组件105。该多个第二光电传感组件105可以位于显示面板103的显示侧,且位于周边区域103b。

发光元件101发出的光线可以经过第一偏光层102之后照射至用户眼睛。用户眼睛可以反射经过第一偏光层102后的偏振光。该偏振光可以直接照射至第二光电传感组件105。由此,该第二光电传感组件105接收到的用户眼睛反射的第二光信号包括:发光元件101发出的光线被用户眼睛镜面反射的光线的信号,以及发光元件101发出的光线被用户眼睛漫反射的光线的信号。

可选的,多个第二光电传感组件105包括:与多个第一子光电传感组件104a一一对应的多个第三子光电传感组件105a,以及与多个第二子光电传感组件104b一一对应的多个第四子光电传感组件105b。其中,该多个第三子光电传感组件105a沿第一方向x排布,该多个第四子光电传感组件105b沿第二方向y排布。多个第三子光电传感组件105a以及多个第四子光电传感组件105b均能够接收用户眼睛镜面反射以及漫反射的第二光信号。

步骤305、多个第三子光电传感组件和多个第四子光电传感组件中每个光电传感组件将接收到的第二光信号转换为第二电信号。

在本申请实施例中,多个第三子光电传感组件105a和多个第四子光电传感组件105b接收到第二光信号之后,每个光电传感组件可以将其接收到的第二电信号转换为第二电信号。

并且,第二光电传感组件105转换后的第二电信号的信号值与该第二光电传感组件105接收到的第二光信号的信号值正相关。也即是,第二光电传感组件105接收到的第二光信号的信号值越大,第二光电传感组件105将其接收到的第二光信号转换得到的第二电信号的信号值越大;第二光电传感组件105接收到的第二光信号的信号值越小,第二光电传感组件105将其接收到的第二光信号转换得到的第二电信号的信号值越小。

步骤306、多个第三子光电传感组件和多个第四子光电传感组件将第二电信号发送至处理器。

在本申请实施例中,可穿戴显示设备10还包括处理器。该处理器可以与每个第三子光电传感组件105a以及每个第四子光电传感组件105b连接。每个第三子光电传感组件105a可以将接收到的第二光信号转换后的第二电信号发送至处理器。并且,每个第四子光电传感组件105b可以将接收到的第二光信号转换后的第二电信号发送至处理器。

步骤307、处理器确定第一电信号和第二电信号的差值信号。

在本申请实施例中,处理器可以接收到多个第一子光电传感组件104a和多个第二子光电传感组件104b的第一电信号,且可以接收到多个第三子光电传感组件105a和多个第四子光电传感组件105b的第二电信号。

对于每个第一子光电传感组件104a以及该第一子光电传感组件104a对应的第三子光电传感组件105a,处理器可以确定该第一子光电传感组件104a发送的第一电信号与第三子光电传感组件105a的第二电信号的差值信号。并且,对于每个第二子光电传感组件104b以及该第二子光电传感组件104b对应的第四子光电传感组件105b,处理器可以确定该第二子光电传感组件104b发送的第一电信号与第四子光电传感组件105b的第二电信号的差值信号。

可选的,差值信号dδ满足:

dδ=d2-d1/t公式(1)

其中,上述公式(1)中,d1表示第一电信号,d2表示第二电信号,t为第二偏光层106的透过率。

示例的,处理器在接收到第一电信号和第二电信号之后,可以对该第一电信号和第二电信号进行数字化处理,得到第一电信号的第一数字信号以及第二电信号的第二数字信号。上述公式(1)中的d1可以为第一数字信号,d2可以为第二数字信号。

在本申请实施例中,处理器确定出的差值信号的数量,可以与可穿戴显示设备包括的第一子光电传感组件104a和第二子光电传感组件104b的数量之和相等。

步骤308、处理器基于多个第一子光电传感组件发送的第一电信号确定第一目标光电传感组件。

在本申请实施例中,处理器接收到多个第一子光电传感组件104a发送的第一电信号之后,可以从多个第一子光电传感组件104a中确定出至少一个第一目标光电传感组件。并且,处理器还可以确定出每个第一目标光电传感组件的第一序号。

可选的,处理器可以预先存储有各个第一子光电传感组件104a的第一序号与标识的第一对应关系。第一子光电传感组件104a在向处理器发送第一电信号时,还可以向处理器发送该第一子光电传感组件104a的标识。处理器在基于该第一子光电传感组件104a发送的第一电信号确定出该第一子光电传感组件104a为第一目标光电传感组件时,可以基于该第一目标光电传感组件的标识从第一对应关系中确定该第一目标光电传感组件的第一序号。

其中,第一目标光电传感组件为多个第一子光电传感组件104a中发送的第一电信号的信号值小于或等于第一阈值的第一子光电传感组件104a。该第一阈值可以是处理器中预先存储的固定值。或者,该第一阈值可以是处理器根据接收到的多个第一子光电传感组件104a的第一电信号的信号值确定的。

例如,处理器可以对n个第一子光电传感组件104a发送的n个第一电信号的信号值按照由小到大的顺序排列,并可以将位于第n位的信号值确定为第一阈值。其中,n为大于1的整数,n为大于1且小于n/2的整数。或者,处理器可以将接收到的多个第一子光电传感组件104a中第一电信号的信号值最小的信号值确定为第一阈值。

若第一阈值为多个第一子光电传感组件104a中发送的第一电信号的信号值最小的信号值,则处理器可以从多个第一子光电传感组件104a中确定出一个第一目标光电传感组件。由此,处理器可以确定多个第一光电传感组件104中发送的第一电信号的信号值最小的第一目标光电传感组件的第一序号。

步骤309、处理器基于多个第二子光电传感组件发送的第一电信号确定第二目标光电传感组件。

在本申请实施例中,处理器接收到多个第二子光电传感组件104b发送的第一电信号之后,可以从多个第二子光电传感组件104b中确定出至少一个第二目标光电传感组件。并且,处理器还可以确定出每个第二目标光电传感组件的第三序号。

可选的,处理器可以预先存储有各个第二子光电传感组件104b的第三序号与标识的第二对应关系。第二子光电传感组件104b在向处理器发送第一电信号时,还可以向处理器发送该第二子光电传感组件104b的标识。处理器在基于该第二子光电传感组件104b发送的第一电信号确定出该第二子光电传感组件104b为第二目标光电传感组件时,可以基于该第二目标光电传感组件的标识从第二对应关系中确定该第二目标光电传感组件的第三序号。

其中,第二目标光电传感组件为多个第二子光电传感组件104b中发送的第一电信号的信号值小于或等于第二阈值的第二子光电传感组件104b。该第二阈值可以是处理器中预先存储的固定值。或者,该第二阈值可以是处理器根据接收到的多个第二子光电传感组件104b的第一电信号的信号值确定的。

例如,处理器可以对m个第二子光电传感组件104b发送的m个电信号的信号值按照由小到大的顺序排列,并可以将位于第m位的信号值确定为第二阈值。其中,m为大于1的整数,m为大于1且小于m/2的整数。或者,处理器可以将接收到的多个第二子光电传感组件104b中第一电信号的信号值最小的信号值确定为第二阈值。

若第二阈值为多个第二子光电传感组件104b中发送的第一电信号的信号值最小的信号值,则处理器可以从多个第二子光电传感组件104b中确定出一个第二目标光电传感组件。由此,处理器可以确定多个第二子光电传感组件104b中发送的第一电信号的信号值最小的第二目标光电传感组件的第三序号。

步骤310、处理器基于多个第一子光电传感组件发送的第一电信号所对应的差值信号确定第三目标光电传感组件。

在本申请实施例中,多个第一子光电传感组件104a发送的第一电信号所对应的差值信号是指:第一子光电传感组件104a的第一电信号,以及与该第一子光电传感组件104a对应的第三子光电传感组件105a的第二电信号的差值信号。

处理器确定出多个第一子光电传感组件104a以及一一对应的多个第三子光电传感组件105a的多个差值信号之后,可以基于该多个差值信号从多个第一子光电传感组件104a中确定出至少一个第三目标光电传感组件。并且,处理器还可以确定出每个第三目标光电传感组件的第二序号。

可选的,处理器可以预先存储有各个第一子光电传感组件104a的第二序号与标识的第三对应关系。第一子光电传感组件104a在向处理器发送第一电信号时,还可以向处理器发送该第一子光电传感组件104a的标识。处理器在基于该第一子光电传感组件104a发送的第一电信号对应的差值信号确定出该第一子光电传感组件104a为第三目标光电传感组件时,可以基于该第三目标光电传感组件的标识从第三对应关系中确定该第三目标光电传感组件的第二序号。

其中,第三目标光电传感组件为多个第一子光电传感组件104a发送的第一电信号所对应的差值信号的信号值大于或等于第三阈值的第一子光电传感组件104a。该第三阈值可以是处理器中预先存储的固定值。或者,该第三阈值可以是处理器根据多个第一子光电传感组件104a的第一电信号所对应的差值信号的信号值确定的。

例如,处理器可以对r个第一子光电传感组件104a发送的r个第一电信号对应的r个差值信号的信号值按照由小到大的顺序排列,并可以将位于第r位的信号值确定为第三阈值。其中,r为大于1的整数,r为大于r/2且小于r的整数。或者,处理器可以将多个第一子光电传感组件104a中第一电信号所对应的差值信号的信号值最小的信号值确定为第三阈值。

若第三阈值为多个第一子光电传感组件104a中的第一电信号所对应的差值信号的信号值最小的信号值,则处理器可以从多个第一子光电传感组件104a中确定出一个第三目标光电传感组件。由此,处理器可以确定多个第一光电传感组件104中第一电信号所对应的差值信号的信号值最大的第三目标光电传感组件的第二序号。

步骤311、处理器基于多个第二子光电传感组件发送的第一电信号所对应的差值信号确定第四目标光电传感组件。

在本申请实施例中,多个第二子光电传感组件104b发送的第一电信号所对应的差值信号是指:第二子光电传感组件104b的第一电信号,以及与该第二子光电传感组件104b对应的第四子光电传感组件105b的第二电信号的差值信号。

处理器确定出多个第二子光电传感组件104b以及一一对应的多个第四子光电传感组件105b的多个差值信号之后,可以基于该多个差值信号从多个第二子光电传感组件104b中确定出至少一个第四目标光电传感组件。并且,处理器还可以确定出每个第四目标光电传感组件的第四序号。

可选的,处理器可以预先存储有各个第二子光电传感组件104b的第四序号与标识的第四对应关系。第二子光电传感组件104b在向处理器发送第一电信号时,还可以向处理器发送该第二子光电传感组件104b的标识。处理器在基于该第二子光电传感组件104b发送的第二电信号对应的差值信号确定出该第二子光电传感组件104b为第四目标光电传感组件时,可以基于该第四目标光电传感组件的标识从第四对应关系中确定该第四目标光电传感组件的第四序号。

其中,第四目标光电传感组件为多个第二子光电传感组件104b发送的第一电信号所对应的差值信号的信号值大于或等于第四阈值的第二子光电传感组件104b。该第四阈值可以是处理器中预先存储的固定值。或者,该第四阈值可以是处理器根据多个第二子光电传感组件104b的第一电信号所对应的差值信号的信号值确定的。

例如,处理器可以对t个第二子光电传感组件104b发送的t个第一电信号对应的t个差值信号的信号值按照由小到大的顺序排列,并可以将位于第t位的信号值确定为第四阈值。其中,t为大于1的整数,t为大于t/2且小于t的整数。或者,处理器可以将多个第二子光电传感组件104b中第一电信号所对应的差值信号的信号值最小的信号值确定为第四阈值。

若第四阈值为多个第二子光电传感组件104b中的第一电信号所对应的差值信号的信号值最小的信号值,则处理器可以从多个第二子光电传感组件104b中确定出一个第四目标光电传感组件。由此,处理器可以确定多个第二光电传感组件105中第一电信号所对应的差值信号的信号值最大的第四目标光电传感组件的第四序号。

步骤312、确定第一序号以及第二序号的第一差值绝对值。

在本申请实施例中,处理器在确定出第一目标光电传感组件的第一序号以及第三目标光电传感组件的第二序号之后,可以计算该第一序号和第二序号的差值,并对该差值取绝对值,得到第一差值绝对值。其中第一序号与第一目标光电传感组件的位置相关,第二序号与第三目标光电传感组件的位置相关。

作为一种可能的情况,假设处理器确定出多个第一目标光电传感组件,则处理器可以确定出目标多个第一光电传感组件104中每个第一目标光电传感组件的第一序号。之后,处理器可以确定出多个第一目标光电传感组件的第一序号的第一平均值。

相应的,假设处理器确定出多个第三目标光电传感组件,则处理器可以确定出多个第三目标光电传感组件中每个第三目标光电传感组件的第二序号。之后,处理器可以确定出多个第三目标光电传感组件的第二序号的第二平均值。

之后,处理器可以基于第一平均值以及第二平均值确定第一差值绝对值。例如,处理器可以计算该第一平均值和第二平均值的差值,并对该差值取绝对值,得到第一差值绝对值。

作为另一种可能的情况,假设处理器确定出一个第一目标光电传感组件,则处理器可以确定出该第一目标光电传感组件的第一序号。相应的,假设处理器确定出一个第三目标光电传感组件,则处理器可以确定出该第三目标光电传感组件的第二序号。之后,处理器可以基于第一序号以及第二序号确定第一差值绝对值。

步骤313、确定第三序号以及第四序号的第二差值绝对值。

在本申请实施例中,处理器在确定出第二目标光电传感组件的第三序号以及第四目标光电传感组件的第四序号之后,可以计算该第三序号和第四序号的差值,并对该差值取绝对值,得到第二差值绝对值。其中第三序号与第二目标光电传感组件的位置相关,第四序号与第四目标光电传感组件的位置相关。

作为一种可能的情况,假设处理器确定出多个目标第二光电传感组件105,则处理器可以确定出多个第二目标光电传感组件中每个第二目标光电传感组件的第三序号。之后,处理器可以确定出多个第二目标光电传感组件的第三序号的第三平均值。

相应的,假设处理器确定出多个第四目标光电传感组件,则处理器可以确定出多个第四目标光电传感组件中每个第四目标光电传感组件的第四序号。之后,处理器可以确定出多个第四目标光电传感组件的第四序号的第四平均值。

之后,处理器可以基于第三平均值以及第四平均值确定第二差值绝对值。例如,处理器可以计算该第三平均值和第四平均值的差值,并对该差值取绝对值,得到第二差值绝对值。

作为另一种可能的情况,假设处理器确定出一个第二目标光电传感组件,则处理器可以确定出该第二目标光电传感组件的第三序号。相应的,假设处理器确定出一个第四目标光电传感组件,则处理器可以确定出该第四目标光电传感组件的第四序号。之后,处理器可以基于第三序号以及第四序号确定第二差值绝对值。

步骤314、采用定位模型处理第一差值绝对值以及第二差值绝对值,得到用户眼睛在显示面板上的注视点沿第一方向的第一坐标以及沿第二方向的第二坐标。

在本申请实施例中,处理器中可以预先存储有定位模型。处理器在基于上述步骤312和步骤313确定出第一差值绝对值以及第二差值绝对值之后,可以将该第一差值绝对值和第二差值绝对值输入至定位模型中,该定位模型的输出结果即为用户眼睛在显示面板103上的注视点沿第一方向x的第一坐标,以及沿第二方向y的第二坐标。

可选的,定位模型可以用于表示:用户眼睛在显示面板103上的注视点沿第一方向x的第一坐标x,第一差值绝对值和第二差值绝对值的关系,以及用户眼睛在显示面板103上的注视点沿第二方向y的第二坐标y,第一差值绝对值和第二差值绝对值的关系。

其中,用户眼睛在显示面板103上的注视点沿第一方向x的第一坐标x,第一差值绝对值以及第二差值绝对值满足:

x=c1δx+c2δy+c3δxδy+c4δx2+c5δy2+c5公式(2)

用户眼睛在显示面板103上的注视点沿第二方向y的第二坐标y,第一差值绝对值以及第二差值绝对值满足:

y=c7δx+c8δy+c9δxδy+c10δx2+c11δy2+c12公式(3)

上述公式(2)和公式(3)中,c1,c2,c3,c4,c5,c6,c7,c8,c9,c10,c11,c12均为定位模型的校准参数,δx为第一差值绝对值,δy为第二差值绝对值。

在本申请实施例中,定位模型的校准参数可以是用户佩戴可穿戴显示设备时,可穿戴显示设备对用户眼睛进行标定得到的。其中,标定过程可以包括:显示面板103显示第一标记物,且处理器能够确定用户注视该第一标记物时的第一差值绝对值和第二差值绝对值。显示面板103显示第二标记物,且处理器能够确定用户注视该第二标记物时的第一差值绝对值和第二差值绝对值。显示面板103显示第三标记物,且处理器能够确定用户注视该第三标记物时的第一差值绝对值和第二差值绝对值。显示面板103显示第四标记物,且处理器能够确定用户注视该第四标记物时的第一差值绝对值和第二差值绝对值。显示面板103显示第五标记物,且处理器能够确定用户注视该第五标记物时的第一差值绝对值和第二差值绝对值。显示面板103显示第六标记物,且处理器能够确定用户注视该第六标记物时的第一差值绝对值和第二差值绝对值。在标定过程中,上述公式(2)和公式(3)中显示面板103显示的各个标记物的第一坐标x,第二坐标y,第一差值绝对值以及第二差值绝对值为已知参数,因此经过六次标定之后可以得到12个方程。由此处理器可以基于12个方程计算出上述12个校准参数。

当然,在标定过程中,也可以经过更多次数的标定,即可以得到更多数量的方程,以确定上述公式(2)和公式(3)中的12个校准参数。本申请实施例对标定次数不做限定,只需使得标定次数大于或等于6即可。

在本申请实施例中,在标定完成后,上述公式(2)和公式(3)中的c1,c2,c3,c4,c5,c6,c7,c8,c9,c10,c11,c12均为已知参数。处理器在确定出第一差值绝对值以及第二差值绝对值之后,可以基于上述公式(2)确定用户眼睛在显示面板103上的注视点沿第一方向x的第一坐标,并基于上述公式(3)确定用户眼睛在显示面板103上的注视点沿第二方向y的第二坐标。

需要说明的是,本申请实施例提供的注视点的位置的确定方法的步骤的先后顺序可以进行适当调整,步骤也可以根据情况进行相应增减。例如,步骤308和步骤309可以在步骤304之前执行,步骤308至步骤311可以同步执行,步骤312和步骤313可以同步执行。任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化的方法,都应涵盖在本申请的保护范围之内,因此不再赘述。

综上所述,本申请实施例提供了一种注视点位置的确定方法,该可穿戴显示设备对各个光电传感组件发送的电信号的处理效率较高,因此可穿戴显示设备能够基于各个光电传感组件发送的电信号较快的确定出用户眼睛在显示面板上的注视点的位置,进而能够提高显示面板显示图像的效率,显示面板的刷新率较高。

并且,由于本申请实施例提供的方案在确定注视点的位置时,不仅可以考虑到用户眼睛对发光元件发出的光线的漫反射,还可以考虑到用户眼睛对发光元件发出的光线的镜面反射,因此能够提高确定的注视点的位置的准确性。

本申请实施例来提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,该指令由可穿戴显示设备执行以实现上述方法实施例所提供的注视点的位置的确定方法。

本申请实施例提供了一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行如上述方法实施例提供的注视点的位置的确定方法。

以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1