视线检测方法、装置、电子设备、存储介质以及程序产品与流程

本申请涉及计算机，尤其涉及一种视线检测方法、装置、电子设备、计算机可读存储介质及计算机程序产品。

背景技术：

1、相关增强现实(ar，augmented reality)或虚拟现实(vr，virtualreality)技术中，用户在使用头戴式设备时，在利用头戴式设备中的眼动定位系统对用户的视线方向进行检测的过程中，大多需要额外在眼动定位系统中嵌入红外光(ir，infrared)发光二极管(led，light emitting diode)，这样，结构设计复杂、也可能遮挡视线，无法应用到轻量级头戴式设备；或者，额外在眼动定位系统中嵌入红外光发光二极管以及晶圆级摄像头，如此，则成本高、不适合量产。

2、综上所述，相关技术中的眼动定位系统，实现针对用户的视线方向检测的过程较为复杂，视线检测的效率低。

技术实现思路

1、本申请实施例提供一种视线检测方法、装置、电子设备、计算机可读存储介质及计算机程序产品，能够提高视线检测效率。

2、本申请实施例的技术方案是这样实现的：

3、本申请实施例提供一种视线检测方法，基于眼动定位系统，所述眼动定位系统至少包括：明瞳照明装置、暗瞳照明装置、图像采集装置、以及二维阵列光波导；其中，所述二维阵列光波导包括水平扩瞳区和垂直扩瞳区，所述方法包括：

4、交替控制所述明瞳照明装置及所述暗瞳照明装置发射照明光线至眼球；

5、其中，所述眼球对所述照明光线进行反射，形成反射光线，所述明瞳照明装置发射照明光线时，眼球处于明瞳模式下，所述暗瞳照明装置发射照明光线时，眼球处于暗瞳模式下；

6、在所述眼球分别处于所述明瞳模式及暗瞳模式的过程中，通过所述图像采集装置，采集所述反射光线依次经所述垂直扩瞳区及所述水平扩瞳区后所形成的图像，得到明瞳图像及暗瞳图像；

7、结合所述明瞳图像以及所述暗瞳图像，对所述眼球进行视线检测，得到所述眼球的视线方向。

8、本申请实施例提供一种视线检测装置，应用于眼动定位系统，所述眼动定位系统至少包括：明瞳照明装置、暗瞳照明装置、图像采集装置、以及二维阵列光波导；其中，所述二维阵列光波导包括水平扩瞳区和垂直扩瞳区，所述装置包括：

9、发射控制模块，用于交替控制所述明瞳照明装置及所述暗瞳照明装置发射照明光线至眼球；其中，所述眼球对所述照明光线进行反射，形成反射光线，所述明瞳照明装置发射照明光线时，眼球处于明瞳模式下，所述暗瞳照明装置发射照明光线时，眼球处于暗瞳模式下；

10、图像采集模块，用于在所述眼球分别处于所述明瞳模式及暗瞳模式的过程中，通过所述图像采集装置，采集所述反射光线依次经所述垂直扩瞳区及所述水平扩瞳区后所形成的图像，得到明瞳图像及暗瞳图像；

11、视线检测模块，用于结合所述明瞳图像以及所述暗瞳图像，对所述眼球进行视线检测，得到所述眼球的视线方向。

12、本申请实施例提供一种电子设备，包括：

13、存储器，用于存储可执行指令；

14、处理器，用于执行所述存储器中存储的可执行指令时，实现本申请实施例提供的视线检测方法。

15、本申请实施例提供一种计算机可读存储介质，其中存储有计算机可执行指令，当计算机可执行指令被处理器执行时，将引起处理器执行本申请实施例提供的视线检测方法。

16、本申请实施例提供了一种计算机程序产品，该计算机程序产品包括计算机程序或计算机可执行指令，该计算机程序或计算机可执行指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机可执行指令，处理器执行该计算机可执行指令，使得该电子设备执行本申请实施例提供的视线检测方法。

17、本申请实施例具有以下有益效果：

18、首先交替控制眼动定位系统中的明瞳照明装置及暗瞳照明装置发射照明光线至眼球，在眼球分别处于明瞳照明装置发射照明光线时的明瞳模式、及暗瞳照明装置发射照明光线时的暗瞳模式的过程中，通过眼动定位系统中的图像采集装置采集反射光线、依次经眼动定位系统中二维阵列光波导所包括的垂直扩瞳区及水平扩瞳区后所形成的图像，得到明瞳图像及暗瞳图像，其中，反射光线为眼球对照明光线进行反射形成的，从而结合明瞳图像以及暗瞳图像，对眼球进行视线检测，得到眼球的视线方向。如此，基于二维阵列光波导的光学特性，利用二维阵列光波导完成视线检测过程，优化了眼动定位系统的设计，在实现基于眼动定位系统进行视线检测过程的基础上，降低了眼动定位系统的制造成本，进而降低了基于眼动定位系统进行视线检测过程的复杂性，提高了视线检测效率。

技术特征：

1.一种视线检测方法，其特征在于，基于眼动定位系统，所述眼动定位系统至少包括：明瞳照明装置、暗瞳照明装置、图像采集装置、以及二维阵列光波导；其中，所述二维阵列光波导包括水平扩瞳区和垂直扩瞳区，所述方法包括：

2.如权利要求1所述的方法，其特征在于，所述交替控制所述明瞳照明装置及所述暗瞳照明装置发射照明光线至眼球，包括：

3.如权利要求2所述的方法，其特征在于，所述控制所述明瞳照明装置发射照明光线至所述眼球，包括：

4.如权利要求2所述的方法，其特征在于，所述控制所述明瞳照明装置发射照明光线至所述眼球，包括：

5.如权利要求1所述的方法，其特征在于，所述反射光线包括第一反射光线以及第二反射光线，所述第一反射光线为，处于所述明瞳模式的所述眼球对所述照明光线进行反射后所形成，所述第二反射光线为，处于所述暗瞳模式的所述眼球对所述照明光线进行反射后所形成；

6.如权利要求1所述的方法，其特征在于，所述结合所述明瞳图像以及所述暗瞳图像，对所述眼球进行视线检测，得到所述眼球的视线方向，包括：

7.如权利要求6所述的方法，其特征在于，所述对所述明瞳图像进行图像识别，得到所述眼球的瞳孔中心，包括：

8.如权利要求6所述的方法，其特征在于，所述对所述暗瞳图像进行图像识别，得到所述眼球的光线反射点，包括：

9.如权利要求6所述的方法，其特征在于，所述暗瞳照明装置的数量为至少两个，每个所述暗瞳照明装置对应一个所述光线反射点，以至少两个所述光线反射点为顶点形成第一多边形，所述第一多边形中包含所述瞳孔中心，以至少两个所述暗瞳照明装置为顶点形成第二多边形，所述第二多边形中包括所述注视点，所述第一多边形与所述第二多边形存在投射关系，所述投射关系用于指示，将所述第二多边形投射为所述第一多边形时的形变比例；

10.如权利要求6所述的方法，其特征在于，所述基于所述瞳孔中心、以及所述注视点，对所述眼球进行视线检测，得到所述眼球的视线方向，包括：

11.如权利要求10所述的方法，其特征在于，所述将所述瞳孔中心与所述注视点进行连接，得到视线向量，包括：

12.如权利要求1所述的方法，其特征在于，所述眼动定位系统还包括成像装置，所述成像装置用于实现虚像成像；所述方法还包括：

13.一种视线检测装置，其特征在于，应用于眼动定位系统，所述眼动定位系统至少包括：明瞳照明装置、暗瞳照明装置、图像采集装置、以及二维阵列光波导；其中，所述二维阵列光波导包括水平扩瞳区和垂直扩瞳区，所述装置包括：

14.一种电子设备，其特征在于，包括：

15.一种计算机可读存储介质，其特征在于，存储有可执行指令，用于引起处理器执行时，实现权利要求1至12任一项所述的视线检测方法。

16.一种计算机程序产品，包括计算机程序或计算机可执行指令，其特征在于，所述计算机程序或计算机可执行指令被处理器执行时，实现权利要求1至12任一项所述的视线检测方法。

技术总结
本申请提供了一种视线检测方法、装置、电子设备、计算机可读存储介质及计算机程序产品，基于眼动定位系统，眼动定位系统至少包括：明瞳照明装置、暗瞳照明装置、图像采集装置及包括水平扩瞳区和垂直扩瞳区的二维阵列光波导；方法包括：交替控制明瞳照明装置及暗瞳照明装置发射照明光线至眼球；在眼球分别处于明瞳照明装置发射照明光线的明瞳模式、及暗瞳照明装置发射照明光线的暗瞳模式的过程中，通过图像采集装置采集反射光线、依次经垂直扩瞳区及水平扩瞳区后所形成的图像，得到明瞳图像及暗瞳图像；结合明、暗瞳图像对眼球进行视线检测，得到眼球的视线方向。如此，能够提高视线检测效率。

技术研发人员：顾照鹏,丁寻
受保护的技术使用者：腾讯科技（深圳）有限公司
技术研发日：
技术公布日：2024/1/15