基于热成像传感器的体温和呼吸率提取方法及应用

1.本发明涉及一种非接触式测量体温及呼吸率的方法。


背景技术：

2.目前较为成熟的非接触式呼吸信号监测方法多为两类：(1)基于胸部运动的呼吸信号提取，该方法采用rgb相机追踪胸部运动提取呼吸信号。由于受试者处于站立姿势下身体会有不自主的颤动，导致该方法无法准确提取受试者在站立姿势下的呼吸信号。(2)基于光电容积脉搏波(photo plethsmography，ppg)的呼吸信号提取，该方法采用rgb相机或近红外相机监测心脏搏动而导致的皮肤区域光强的变化来提取呼吸信号。由于受试者佩戴口罩等特殊情况下，该方法无法从有限的皮肤区域提取呼吸信号。此外上述两种方法的使用需要光源，因此测量准确度容易受环境光干扰。


技术实现要素：

3.本发明的目的是：使用热成像传感器或热电堆传感器对处于站立姿势下的受试者(包括戴或不戴口罩者)进行体温和呼吸率提取。
4.为了达到上述目的，本发明的一个技术方案是提供了一种基于热成像传感器的体温和呼吸率提取方法，其特征在于，包括以下步骤：
5.步骤1、在目标位置设置热成像单元，由热成像单元获取位于目标位置的受试者的热成像图片；
6.步骤2、获取当前帧热成像图片中每个像素点的温度信号；
7.步骤3、基于步骤2获得的所有像素点的温度信号，判断各像素点属于前景区域还是属于背景区域，基于判断得到的结论对热成像图片进行前景区域与背景区域的分割，提取当前帧的前景区域图片；
8.步骤4、获取下一帧的热成像图片，从下一帧的热成像图片中提取与当前帧的前景区域位置相当的区域作为下一帧的前景区域图片；
9.步骤5、重复步骤4获得连续n个下一帧的前景区域图片后，n≥5，进入步骤6或进入步骤7；
10.步骤6、对n+1帧的前景区域图片的相应位置像素点的温度信号进行处理，依据同一位置像素点的温度信号变化获得受试者的呼吸率，同时，利用任意前景区域图片各像素点的温度信号获得受试者的体温，进入步骤8；
11.步骤7、获得n+1帧的前景区域图片中与受试者胸部区域相对应的n+1帧的区域图片，基于n+1帧的区域图片测量得到胸部区域的运动，进而获得受试者的呼吸率，同时，利用任意前景区域图片各像素点的温度信号获得受试者的体温，进入步骤8；
12.步骤8、通过同一受试者的呼吸率及对应的体温对受试者的健康状况进行识别。
13.优选地，步骤1中，所述热成像单元为高分辨率热成像传感器或低分辨率热电堆传感器；若所述热成像单元为低分辨率热电堆传感器，则通过加载镜头聚焦的方式缩小监测
区域，增加距离。
14.优选地，步骤3中，设置温度信号阈值，若当前像素点的温度信号大于温度信号阈值，则将当前像素点判定为属于前景区域，否则将当前像素点判定为属于背景区域。
15.本发明的另一个技术方案是提供了一种上述的基于热成像传感器的体温和呼吸率提取方法的应用，其特征在于，应用在闸机或者安检门上，用于同时监测受试者的体温和呼吸率，对受试者的健康状况进行识别；或应用在医院监护科室内，用于连续非接触的体温和呼吸监测。
16.本发明结合创新的信号提取算法，在公共场所的入口，对处于站立姿势的受试者(包括戴或不戴口罩者)进行非接触式的体温和呼吸率提取，并对受试者的健康状况进行评估，用于发热与呼吸异常个体的识别及传染性呼吸疾病的预防(如新冠肺炎(covid
‑
19))。
17.与基于运动、基于ppg的方法相比，本发明的创新体现在通过检测呼吸气流导致的温度变化来提取受试者的呼吸信号。本发明提供的方案不仅能够提取呼吸率还能提取受试者的体温，从而将提取的生理特征结合，对受试者的健康状况进行评估。
18.本发明提供的基于热成像传感器或热电堆传感器的体温和呼吸率提取方法具有如下三大优点：(1)比基于运动的方案能够更精确地监测处于站立状态下受试者的呼吸信号；(2)比基于ppg的方案能够监测戴口罩的受试者的呼吸信号；(3)能够同时监测体温和呼吸率，更准确的识别受试者的健康状况。
附图说明
19.图1为提取受试者正面的前景区域图片示意图；
20.图2为提取受试者侧面的前景区域图片示意图；
21.图3为采用高分辨率热成像传感器获得的热成像图片示意图；
22.图4为采用高分辨率热成像传感器获得的一维信号示意图；
23.图5为采用低分辨率热电堆传感器获得的热成像图片示意图；
24.图6为采用低分辨率热电堆传感器获得的一维信号示意图；
25.图7为通过热电堆传感器获取的呼吸信号实例。
具体实施方式
26.下面结合具体实施例，进一步阐述本发明。应理解，这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解，在阅读了本发明讲授的内容之后，本领域技术人员可以对本发明作各种改动或修改，这些等价形式同样落于本申请所附权利要求书所限定的范围。
27.基于运动和基于光电容积脉搏波(photoplethsmography，ppg)已用于非接触式的呼吸信号提取。本发明采用一种基于热成像传感器(thermal sensor)的方式来非接触式地提取温度及呼吸率，具体包括以下步骤：
28.步骤1、在目标位置设置热成像单元，由热成像单元获取位于目标位置的受试者的热成像图片。本实施例中，热成像单元可以采用高分辨率热成像传感器，也可以采用低分辨率热电堆传感器。若将本发明应用在公共场合入口，用于提取处于站立姿势下戴口罩或未戴口罩的受试者的体温和呼吸率，监测受试者的健康状况时，可以采用高分辨率热成像传
感器，此时，受试者和传感器的距离可以相对较远(如5米以内)。若将本发明应用在医院的监护室(如睡眠监护、重症监护、婴儿孵化器)，用于非接触地测量体温和呼吸信号时，可以采用低分辨率热电堆传感器，受试者和传感器的距离需要更近(如1.5米以内)。将本发明应用在医院的监护室时，受试者的监测位置固定，如病床、婴幼儿孵化器等，低分辨率热电堆可以通过加载镜头聚焦的方式缩小监测区域，增加距离。
29.热成像传感器或热电堆传感器能在一定温度范围内检测所有物体发出的红外辐射，从而获得相应物体的温度信息。此外，呼吸过程中(吸气与呼吸)会在口、鼻区域附近产生热量的变化。通过热成像传感器或热电堆传感器监测热交换区域的热量变化，可以准确的提取受试者的呼吸信号。在戴口罩的特殊情况下，口罩的佩戴会增加热交换区域的面积，成像传感器或热电堆传感器同样能通过监测热交换区域的热量变化，从而准确提前戴口罩受试者的呼吸信号。
30.步骤2、获取当前帧热成像图片中每个像素点的温度信号。
31.步骤3、基于步骤2获得的所有像素点的温度信号，判断各像素点属于前景区域还是属于背景区域，基于判断得到的结论对热成像图片进行前景区域与背景区域的分割，提取当前帧的前景区域图片。
32.可以通过设置温度信号阈值的方式来判断各像素点是属于前景区域还是属于背景区域，也可以通过其他方式进行判断，其为本领域技术人员的常识，此处不再赘述。本实施例中，提取受试者正面的前景区域图片如图1所示，图1中，background表示背景、forehead表示额头、face表示面部、body表示身体，提取受试者侧面的前景区域图片如图2所示，图2中，subject表示前景。
33.步骤4、获取下一帧的热成像图片，从下一帧的热成像图片中提取与当前帧的前景区域位置相当的区域作为下一帧的前景区域图片。
34.步骤5、重复步骤4获得连续n个下一帧的前景区域图片后，n≥5，进入步骤6或进入步骤7。
35.步骤6、对n+1帧的前景区域图片的相应位置像素点的温度信号进行处理，依据同一位置像素点的温度信号变化获得受试者的呼吸率，同时，利用任意前景区域图片各像素点的温度信号获得受试者的体温，进入步骤8。
36.本步骤中，采用均值法、信噪比法、温度变化幅度法等方法对n+1帧的前景区域图片的相应位置像素点的温度信号进行处理，获得一维信号(如图4及图6所示，图中，avg表示平均值(average)、std表示标准差(standard deviation)、var表示方差(variance)、frames表示视频帧，并从一维信号中提取呼吸率。
37.步骤7、获得n+1帧的前景区域图片中与受试者胸部区域相对应的n+1帧的区域图片，基于n+1帧的区域图片测量得到胸部区域的运动，进而获得受试者的呼吸率，同时，利用任意前景区域图片各像素点的温度信号获得受试者的体温，进入步骤8。
38.步骤8、通过同一受试者的呼吸率及对应的体温对受试者的健康状况进行识别。
39.本发明所提及的热成像传感器也可通过热电堆(thermopile array sensor)实现，分辨率更低对受试者的距离要求更高，但是价格更低廉。本发明提出的方法可用于专业的检测设备，用于及早发现发热或呼吸异常个体，防止传染性疾病(如新冠肺炎)的传播。