一种图像信息处理方法、装置和电子设备

本发明属于信息处理，具体是一种图像信息处理方法、装置和电子设备。

背景技术：

1、随着互联网的发展，在线学习即e-learning也随之兴起。在线学习是指在由通讯技术、微电脑技术、计算机技术、人工智能、网络技术和多媒体技术等所构成的电子环境中进行的学习，它的好处在于不受时间，地点，空间的限制，并且可以实现和现实当中一样的互动。

2、例如中国专利公布号为cn107103802a的专利公开了基于在线教育的实时人眼甄别系统和方法；该基于在线教育的实时人眼甄别系统包括教师机客户端、学生机客户端和数据处理服务器；所述教师机客户端和学生机客户端分别与数据处理服务器通过网络相连接；该基于在线教育的基于在线教育的实时人眼甄别的方法，包括以下步骤：(1)设备初始化；(2)初始捕捉；(3)数据的处理；(4)教学段数据监控处理。该系统提供一种高效实时的基于java和c++的人眼甄别系统，并能实时传递数据；即本发明提供了教学过程中的学生状态的检测提示功能，可实时的完成学生状态的反馈，让上课讲师可实时判断学生学习状态，并能根据学生状态优化教学过程，并可完成对状态不佳学生进行提醒。

3、但是，该系统通过反馈学生状态让讲师判断学习状态，督促效果差，且数据传输量大，容易导致网络拥堵，影响直播视频画面；且在讲师授课过程中，讲师讲课的注意力容易被分散，影响授课内容。

技术实现思路

1、本发明的目的是提供一种图像信息处理方法、装置和电子设备，在教师授课过程中，代替教师督促学生进行学习，督促效果好。

2、为了实现上述目的，本发明的技术方案如下：

3、一种图像信息处理方法，包括如下步骤：s1、当学生通过电子设备的直播软件观看教师直播授课时，电子设备通过摄像头采集学生的图像信息；

4、s2、检测所述图像信息中是否存在人眼图像，并将图像信息存储至电子设备中，电子设备并将图像信息上传至直播软件；

5、s3、若存在，则获取所述人眼图像中的眼睛信息，眼睛信息包括眼睛尺寸信息和眼球信息，并根据所述眼睛信息控制所述电子设备对学生进行督促提醒；

6、所述督促提醒包括所述直播软件进行弹幕显示和所述电子设备播放语音提醒；若不存在，则所述电子设备播放语音提醒。

7、采用上述方案后实现了以下有益效果：学生通过电子设备上的直播软件观看教师直播授课，便于学生根据实际情况选择电子设备进行观看；

8、在后续教师授课完成后，教师通过直播软件查看图像信息，便于确认学生的学习情况；

9、在教师授课过程中，通过眼睛尺寸信息和眼球信息眼睛信息控制所述电子设备对学生进行督促提醒，判断学生观看视频情况进行督促提醒，与对比文件相比，通过图像信息处理方法代替教师督促学生进行学习，督促效果好，从而提高教师授课效果。

10、进一步，在s1中，所述电子设备上的摄像头位于所述直播软件的界面正上方。

11、有益效果：摄像头的位置在后续进行视线偏转的方向判断时，便于摄像头采集学生的桌面图像信息。

12、进一步，在s2中，所述眼睛信息控制所述电子设备对学生进行督促提醒的方法包括尺寸判断法和视线偏转法。

13、有益效果：尺寸判断法和视线偏转法这两种方式，便于根据眼睛信息判断学生观看视频情况进行督促提醒。

14、进一步，所述视线偏转法包括：根据人眼图像的眼睛尺寸信息得到相邻相邻眼框的中心处，根据人眼图像的眼球信息得到眼球的中心处；将相邻眼框的中心处与眼球的中心处进行分析计算，得到两者的偏差值，并将偏差值与设定的正常范围进行对比，若偏差值大于或小于正常范围，则视线偏转，若偏差值在正常范围内，则正常；

15、在一定时间内，根据偏差值确定偏移次数和偏移持续时间，其中，所述偏移次数根据每一次视线偏转进行计数，所述偏移持续时间根据偏差值大于正常范围时，直至记录到偏差值小于正常范围的持续时间；

16、先将偏移持续时间与设定的时限进行对比，若偏移持续时间大于时限，则所述电子设备播放语音提醒，若偏移持续时间小于时限，则将偏移次数与设定的比对值进行对比，若偏移次数大于比对值，则所述直播软件进行弹幕显示，若偏移次数小于比对值，则终止。

17、有益效果：将相邻眼框的中心处与眼球的中心处进行分析计算，得到两者的偏差值，根据偏差值偏移次数和偏移持续时间，从而确定学生在直播授课期间是否向周围偏转视线，观看其他东西或注意力被分散；对于多次视线偏转造成分散注意力的采取弹幕显示的方式提醒该学生认真授课，对于长时间盯着直播软件的界面外的学生，电子设备播放语音提醒学生进行授课。

18、进一步，所述偏移次数根据每一次视线偏转进行计数时，视线偏移的方向包括眼球的中心处位于相邻眼框的中心处的左侧、右侧、上侧或下侧；

19、若视线偏移的方向为左侧、右侧或上侧，则偏移次数计数一次并记录偏移持续时间，若视线偏移的方向为下侧，则通过摄像头采集学生的桌面图像信息，根据桌面图像信息判断学生是否在写作，若是，则终止，且不记录偏转持续时间，若否，则偏移次数计数一次并记录偏移持续时间。

20、有益效果：将视线偏转方向进行区分，由于所述电子设备上的摄像头位于所述直播软件的界面正上方，便于摄像头对桌面进行拍照，根据视线偏转的方向可以确定是否对偏移次数进行计数并记录偏移持续时间，督促学生进行学习；当视线偏移的方向为下侧时，学生一般在进行笔记记录或进行玩手机、看漫画等不学习操作，通过对这一情况进行识别，便于确认学生是否在认真听课，便于对学生进行督促。

21、进一步，所述尺寸判断法包括；根据眼睛尺寸信息得到眼框边缘形状信息，判断眼框边缘形状信息是否为橄榄型，若是，则终止，若否，则所述电子设备播放语音提醒。

22、有益效果：眼框边缘形状信息为橄榄型与人眼睛睁开时的形状匹配，通过这一情况便于判断学生是否在闭着眼睛睡觉。

23、进一步，当眼框边缘形状信息为橄榄型时，在一定时间内，还实时计算眼框边缘形状信息的上下两侧之间的间距，将当前时间的间距a1与之间时间间隔的间距a2进行对比，若a1大于或等于a2，则终止，若a1小于a2，则将a1与设定的比对值a进行对比，若a1大于比对值a，则所述电子设备播放语音提醒，若a1小于比对值a，则终止。

24、有益效果：在一定时间内，眼框的上下两侧之间的间距不断减小，说明眼睛在逐渐闭合，通过对这一情况进行监视，通过电子设备播放语音提醒唤醒学生，使学生集中注意力进行听讲，提高教师授课效果。

25、进一步，一种图像信息处理装置，包括监测模块、处理模块、尺寸判断控制模块、视线偏转控制模块和人员提醒模块；

26、所述监测模块用于当学生通过电子设备的直播软件观看教师直播授课时，采集学生的图像信息，并将图像信息发送至处理模块；

27、所述处理模块用于获取图像信息中的眼睛信息，眼睛信息包括眼睛尺寸信息和眼球信息，将眼睛尺寸信息发送至尺寸判断控制模块，将眼睛尺寸信息和眼球信息发送至视线偏转控制模块；

28、所述尺寸判断控制模块用于所述图像信息中存在人眼图像时，通过尺寸判断法控制所述电子设备对学生进行督促提醒；

29、所述视线偏转控制模块用于所述图像信息中存在人眼图像时，通过视线偏转法控制所述电子设备对学生进行督促提醒；

30、所述人员提醒模块，用于所述图像信息中不存在人眼图像时，人员提醒模块则向所述电子设备发送播放语音提醒指令。

31、有益效果：通过监测模块便于获取图像信息，通过处理模块便于将图像信息转换为眼睛尺寸信息和眼球信息，便于尺寸判断控制模块和视线偏转控制模块分别通过尺寸判断法和视线偏转法督促学生；通过人员提醒模块便于在学生未进行听讲时，提醒学生进行授课。

32、进一步，一种电子设备，包括相互电连接的处理器和存储器，所述处理器用于执行1-7所述任一项的图像信息处理方法的步骤；

33、所述存储器用于存储弹幕显示、播放语音提醒和图像信息处理过程中产生的图像信息。

34、有益效果：通过处理器便于对图像信息处理方法的步骤进行判断，通过存储器对弹幕显示、播放语音提醒和图像信息进行储存，即便于在图像信息处理方法中调用弹幕显示和播放语音提醒，也便于教师在授课完成后调用图像信息进行观看，确认学生在直播授课过程中的表现。