驾驶员的缺水状态检测方法及装置与流程

本发明涉及智能座舱，特别涉及一种驾驶员的缺水状态检测方法及装置。

背景技术：

1、在现代驾驶环境中，确保驾驶员的健康和警觉状态对于提高道路安全至关重要。驾驶员的缺水状态可以显著影响其反应时间和判断能力，因此需要一个系统来实时监测和提醒驾驶员关于其水分状态，以减少由缺水引起的驾驶风险。

2、当前的驾驶员监测系统主要关注于行为和车辆运行状态，很少有系统能够综合驾驶员的生理信号进行实时分析和反馈。现有一般监测驾驶员的缺水状态主要通过人脸识别或者借助单独设备，但这些方式存在无法有效地监测驾驶员的缺水状态、缺乏将车辆行驶状态与驾驶员行为有效结合的机制、侵犯隐私等缺点，例如：

3、(1)一种基于视觉的舱内喝水状态检测算法，基于人体上肢关键点检测器检测判断驾驶员的状态，若检测到驾驶员单手离开方向盘则基于喝水检测器判断驾驶员是否在喝水，如果驾驶员在喝水则判断图像中是否存在喝水容器；基于精细分类器对喝水容器进行分类，判断为敞口容器或吸管杯；若喝水容器为敞口容器，则基于人脸关键点检测来判断司机头部俯仰角度判断是否影响视线，基于人脸关键点检测来判断司机头部俯仰角度判断是否影响视线。该方法依赖对驾驶员特征的感知，容易受到外部环境的影响，且面部感知会造成隐私侵犯的问题；

4、(2)基于深度学习的喝水等异常行为检测方法，该方法需要借助dlib等基于transformer模型，无法在车载芯片上部署；

5、(3)一种驾驶状态监测方法和装置，对驾驶员图像进行驾驶员状态检测，根据驾驶员状态检测的结果，输出驾驶员的驾驶状态监测结果，进行智能驾驶控制，同样存在对驾驶员隐私侵犯的问题。

技术实现思路

1、本发明提供一种驾驶员的缺水状态检测方法及装置，以解决现有通过人脸识别或者借助单独设备的方式无法有效地监测驾驶员的缺水状态，且缺乏将车辆行驶状态与驾驶员行为有效结合的机制，容易侵犯隐私等问题。

2、本发明第一方面实施例提供一种驾驶员的缺水状态检测方法，包括以下步骤：采集驾驶员的多个驾驶行为图像帧；从每个驾驶行为图像帧中，提取所述驾驶员的至少一个关键特征；获取对应于所述每个驾驶行为图像帧的车辆的行驶状态，并根据所述行驶状态和所述至少一个关键特征识别所述驾驶员的实际缺水状态。

3、可选地，所述提取所述驾驶员的至少一个关键特征，包括：

4、识别每个驾驶行为图像帧中的嘴唇区域；将所述嘴唇区域中存在的舌头进行分割，以获得真实嘴唇区域；确定所述真实嘴唇区域中驾驶员的人物嘴唇的至少一个关键点，作为所述至少一个关键特征。

5、可选地，所述根据所述行驶状态和所述至少一个关键特征识别所述驾驶员的实际缺水状态，包括：

6、根据所述行驶状态计算所述真实嘴唇区域的第一膨胀系数；获取所述驾驶员的喝水动作，并根据所述喝水动作计算所述真实嘴唇区域的第二膨胀系数；

7、根据膨胀系数基数、所述第一膨胀系数、所述第二膨胀系数计算最终膨胀系数；根据所述至少一个关键特征和所述最终膨胀系数获取所述驾驶员的舔舐动作，以根据所述舔舐动作确定所述实际缺水状态。。

8、可选地，还包括：根据所述实际缺水状态匹配所述驾驶员的缺水提醒动作；

9、基于所述缺水提醒动作控制所述车辆进行缺水提醒。

10、可选地，所述根据所述实际缺水状态匹配所述驾驶员的缺水提醒动作，包括：

11、获取所述驾驶员的提醒偏好和/或驾驶习惯；基于所述提醒偏好和/或所述驾驶习惯，根据所述实际缺水状态匹配所述驾驶员的缺水提醒动作，其中，所述缺水提醒动作包括提醒频率、提醒方式、提醒强度中的至少之一。

12、可选地，还包括：

13、判断所述实际缺水状态是否满足预设休息条件；如果满足所述预设休息条件，则对所述驾驶员进行休息提醒，且在提醒持续时长大于预设时长时，规划所述车辆的休息路径，并控制所述车辆沿着所述休息路径停车。

14、本发明第二方面实施例提供一种驾驶员的缺水状态检测装置，包括：采集模块，用于采集驾驶员的多个驾驶行为图像帧；提取模块，用于从每个驾驶行为图像帧中，提取所述驾驶员的至少一个关键特征；识别模块，用于获取对应于所述每个驾驶行为图像帧的车辆的行驶状态，并根据所述行驶状态和所述至少一个关键特征识别所述驾驶员的实际缺水状态。

15、本发明第三方面实施例提供一种电子设备，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序，以实现如上述实施例所述的驾驶员的缺水状态检测方法。

16、本发明第四方面实施例提供一种计算机程序产品，该计算机程序/指令被处理器执行时实现如上的驾驶员的缺水状态检测方法。

17、本发明第五方面实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储计算机程序，该程序被处理器执行时实现如上的驾驶员的缺水状态检测方法。

18、本发明实施例提出的驾驶员的缺水状态检测方法及装置，通过综合考虑驾驶员的舔嘴唇行为，车辆行驶状态和驾驶员的喝水行为，实时评估驾驶员的缺水状态，解决了现有通过人脸识别或者借助单独设备的方式无法有效地监测驾驶员的缺水状态，且缺乏将车辆行驶状态与驾驶员行为有效结合的机制，容易侵犯隐私等问题，不仅减少由缺水引起的精神不集中或疲劳驾驶，提高了驾驶安全，还提供个性化反馈，例如对驾驶员提供及时的水分补充提醒，可适应不同驾驶员的行为和需要。

19、本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

技术特征：

1.一种驾驶员的缺水状态检测方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的驾驶员的缺水状态检测方法，其特征在于，所述提取所述驾驶员的至少一个关键特征，包括：

3.根据权利要求2所述的驾驶员的缺水状态检测方法，其特征在于，所述根据所述行驶状态和所述至少一个关键特征识别所述驾驶员的实际缺水状态，包括：

4.根据权利要求1所述的驾驶员的缺水状态检测方法，其特征在于，还包括：

5.根据权利要求4所述的驾驶员的缺水状态检测方法，其特征在于，所述根据所述实际缺水状态匹配所述驾驶员的缺水提醒动作，包括：

6.根据权利要求1所述的驾驶员的缺水状态检测方法，其特征在于，还包括：

7.一种驾驶员的缺水状态检测装置，其特征在于，包括：

8.一种车辆，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序，以实现如权利要求1-6任一项所述的驾驶员的缺水状态检测方法。

9.一种计算机程序产品，其特征在于，该计算机程序/指令被处理器执行时实现权利要求1-6任一项所述的驾驶员的缺水状态检测方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行，以用于实现如权利要求1-6任一项所述的驾驶员的缺水状态检测方法。

技术总结
本发明涉及智能座舱技术领域，特别涉及一种驾驶员的缺水状态检测方法及装置，其中，方法包括：采集驾驶员的多个驾驶行为图像帧；从每个驾驶行为图像帧中，提取驾驶员的至少一个关键特征；以及获取对应于每个驾驶行为图像帧的车辆的行驶状态，并根据行驶状态和至少一个关键特征识别驾驶员的实际缺水状态。由此，解决了现有通过人脸识别或者借助单独设备的方式无法有效地监测驾驶员的缺水状态，且缺乏将车辆行驶状态与驾驶员行为有效结合的机制，容易侵犯隐私等问题。

技术研发人员：付振,赵兴科,袁鲁峰,孙建蕾,何金鑫,王明月,刘相超,张俊,侯睿,王紫烟
受保护的技术使用者：中国第一汽车股份有限公司
技术研发日：
技术公布日：2025/1/9