一种专注力评价和预警方法、系统、电子设备及介质

本发明涉及教育教学管理和人工智能，特别涉及一种专注力评价和预警方法、系统、电子设备及介质。

背景技术：

1、传统的线下教学老师可以通过观察学生听课状态获取注意力集中程度并完成教学质量评估。线上课程通常由于老师无法及时全面的获取所有学生的状态信息，因此无法通过学生专注力评价来完成教学质量评估。同时也没法对注意力不集中的同学进行提醒，导致线上课程教学效果达不到预期要求。

技术实现思路

1、本发明的目的是提供一种专注力评价和预警方法、系统、电子设备及介质，用以实现线上课程学生专注力评价和预警，从而线上完成教学质量评估工作。

2、为实现上述目的，本发明提供了如下方案：

3、一种专注力评价和预警方法，包括：

4、获取目标对象的线上教学实时视频图像；

5、基于所述视频图像，采用训练好的目标检测模型以及图像分割模型，得到目标区域图像；所述目标区域图像包括：人脸区域图像、眼睛区域图像以及嘴巴区域图像；

6、采用opencv轮廓面积函数计算所述目标区域图像的面积；所述目标区域图像的面积包括：人脸区域面积、眼睛区域面积和嘴巴区域面积；

7、基于所述目标区域的面积以及预先获取到的专注度面积，确定状态信息反馈分数；所述专注度面积包括专注状态下的人脸区域面积、眼睛区域面积以及嘴巴区域面积；

8、获取目标对象线上教学的互动反馈分数；

9、基于所述状态信息反馈分数和所述互动反馈分数，确定专注力集中程度；

10、基于所述专注力集中程度对所述目标对象进行预警。

11、可选地，还包括：

12、对所述目标区域图像进行高斯滤波处理。

13、可选地，基于所述视频图像，采用训练好的目标检测模型以及图像分割模型，得到目标区域图像，具体包括：

14、将所述视频图像输入至训练好的目标检测模型中，检测得到所述视频图像中的目标矩形框；所述目标矩形框包括：人脸矩形框、眼睛矩形框以及嘴巴矩形框；

15、将所述目标矩形框输入至训练好的图像分割模型中，得到目标区域图像。

16、可选地，所述目标检测模型包括依此连接的主干网络、颈部网络、卷积注意力网络及头部网络。

17、可选地，基于所述目标区域的面积以及预先获取到的专注度面积，确定状态信息反馈分数，具体包括：

18、根据所述人脸区域面积与专注状态下的人脸区域面积的比值确定第一得分；

19、根据所述眼睛区域面积与专注状态下的眼睛区域面积的比值确定第二得分；

20、根据所述嘴巴区域面积与专注状态下的嘴巴区域面积的比值确定第三得分；

21、将所述第一得分、所述第二得分以及所述第三得分相加，确定状态信息反馈分数。

22、本发明还提供了一种专注力评价和预警系统，包括：

23、视频图像获取模块，用于获取目标对象的线上教学实时视频图像；

24、目标区域图像确定模块，用于基于所述视频图像，采用训练好的目标检测模型以及图像分割模型，得到目标区域图像；所述目标区域图像包括：人脸区域图像、眼睛区域图像以及嘴巴区域图像；

25、面积计算模块，用于采用opencv轮廓面积函数计算所述目标区域图像的面积；所述目标区域图像的面积包括：人脸区域面积、眼睛区域面积和嘴巴区域面积；

26、状态信息反馈分数确定模块，用于基于所述目标区域的面积以及预先获取到的专注度面积，确定状态信息反馈分数；所述专注度面积包括专注状态下的人脸区域面积、眼睛区域面积以及嘴巴区域面积；

27、互动反馈分数获取模块，用于获取目标对象线上教学的互动反馈分数；

28、专注力集中程度确定模块，用于基于所述状态信息反馈分数和所述互动反馈分数，确定专注力集中程度；

29、预警模块，用于基于所述专注力集中程度对所述目标对象进行预警。

30、本发明还提供了一种电子设备，包括存储器及处理器，所述存储器用于存储计算机程序，所述处理器运行所述计算机程序以使所述电子设备执行上述专注力评价和预警方法。

31、本发明还提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现上述专注力评价和预警方法。

32、根据本发明提供的具体实施例，本发明公开了以下技术效果：

33、本发明通过通过目标检测模型以及图像分割模型对视频图像进行检测分割，进而对研究对象专注程度进行量化打分并提醒专注度较低的对象，从而能够提高线上教学质量，方便线上教学质量评估。

技术特征：

1.一种专注力评价和预警方法，其特征在于，包括：

2.根据权利要求1所述的专注力评价和预警方法，其特征在于，还包括：

3.根据权利要求1所述的专注力评价和预警方法，其特征在于，基于所述视频图像，采用训练好的目标检测模型以及图像分割模型，得到目标区域图像，具体包括：

4.根据权利要求1所述的专注力评价和预警方法，其特征在于，所述目标检测模型包括依此连接的主干网络、颈部网络、卷积注意力网络及头部网络。

5.根据权利要求4所述的专注力评价和预警方法，其特征在于，基于所述目标区域的面积以及预先获取到的专注度面积，确定状态信息反馈分数，具体包括：

6.一种专注力评价和预警系统，其特征在于，包括：

7.一种电子设备，其特征在于，包括存储器及处理器，所述存储器用于存储计算机程序，所述处理器运行所述计算机程序以使所述电子设备执行权利要求1-5中任一项所述的专注力评价和预警方法。

8.一种计算机可读存储介质，其特征在于，其存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-5中任一项所述的专注力评价和预警方法。

技术总结
本发明公开了一种专注力评价和预警方法、系统、电子设备及介质。该方法包括：获取目标对象的线上教学实时视频图像；基于所述视频图像，采用训练好的目标检测模型以及图像分割模型，得到目标区域图像；采用OpenCV轮廓面积函数计算所述目标区域图像的面积；基于所述目标区域的面积以及预先获取到的专注度面积，确定状态信息反馈分数；获取目标对象线上教学的互动反馈分数；基于所述状态信息反馈分数和所述互动反馈分数，确定专注力集中程度；基于所述专注力集中程度对所述目标对象进行预警。本发明能够实现线上课程学生专注力评价和预警，从而线上完成教学质量评估工作。

技术研发人员：杨阳,荆鹏霏,赵晗,柳琳,翟阳
受保护的技术使用者：西安音乐学院
技术研发日：
技术公布日：2024/1/13