一种基于视觉识别的输液进程监测系统及其监测方法与流程

1.本发明涉及监测系统技术领域，具体涉及一种基于视觉识别的输液进程监测系统及其监测方法。


背景技术：

2.当前市场上传统的输液监测手段主要有称重、红外等输液管理模式，推出至今虽已有十余年，很多技术痛点至今未能得到有效解决。比如在操作上，护理人员在称重设备挂钩上挂上输液袋/瓶后每次都要根据不同规格的瓶子、袋子设定初始值，然后在护士站监视输液进程。操作比较复杂，无法查看输液袋/瓶的实时图片，告警后须到现场确认，定期还需要更换电池。在准确率方面，受外界因素影响较大，比如牵拉、压坠等都会影响到称重装置的称重结果，造成误报、漏报，准确率比较低。且重力传感器的精度随环境、时间变化而变化，因此需要定期对称重装置计量、归零。在数据安全方面，无论称重和红外都是采用rfid、lora等传输模式，最远可被1-3km以外的接收器接收到数据，有不可控的数据外泄风险。
3.目前，市场上的输液检测方式还存在操作复杂、准确率较低的问题。
4.基于上述情况，本发明提出了一种基于视觉识别的输液进程监测系统及其监测方法，可有效解决以上问题。


技术实现要素：

5.本发明的目的在于提供一种基于视觉识别的输液进程监测系统及其监测方法。本发明的基于视觉识别的输液进程监测系统及其监测方法，在不改变护士原有工作模式的前提下，大幅度减少了误报、漏报的情况，还可以直观地从护士站实时查看输液进程，远程掌控所有患者输液情况。护士可根据监测信息和专业判断科学安排工作优先级，减少频繁无效地奔波，提高护士工作效率。
6.本发明通过下述技术方案实现：
7.一种基于视觉识别的输液进程监测系统，包括：
8.终端，用于采集和处理输液进程的数据；
9.服务器，用于处理和转送接收到的数据；
10.显示屏，用于展示输液进程和查看输液结束时的数据；
11.其中，所述终端、服务器和显示屏依次通讯连接。
12.本发明的目的在于提供一种基于视觉识别的输液进程监测系统及其监测方法。本发明的基于视觉识别的输液进程监测系统及其监测方法，在不改变护士原有工作模式的前提下，大幅度减少了误报、漏报的情况，还可以直观地从护士站实时查看输液进程，远程掌控所有患者输液情况。护士可根据监测信息和专业判断科学安排工作优先级，减少频繁无效地奔波，提高护士工作效率。
13.优选的，包括计算盒，所述终端、计算盒、服务器和显示屏依次通讯连接。
14.一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
15.步骤s1：通过终端定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
16.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
17.若采用服务器对数据进行算法处理，则需要返回识别结果至终端；
18.若采用计算盒对数据进行算法处理，则需要将识别结果传送至服务器，并返回识别结果至终端；
19.步骤s3：服务器将识别结果传送至护士站，并在显示屏中显示输液进程。
20.优选的，所述步骤s1的数据处理模式包括：
21.步骤s11：若医院网络流量压力较小，则将所有数据传送至服务器处理；
22.步骤s12：若医院网络流量压力偏小，则将数据传送至服务器处理，且只上传带有输液袋的数据；
23.步骤s13：若医院网络流量压力偏大，则将所有数据传送至计算盒处理；
24.步骤s14：若医院网络流量压力较大，则数据直接在终端处理，且只上传经识别后的结果及裁剪后的数据。
25.优选的，所述步骤s12包括：
26.步骤s121：将数据送入床头终端app程序；
27.步骤s122：通过app程序对数据进行处理，将数据送入api接口，进入预训练模型进行目标识别，判断当前是否有输液袋；
28.步骤s123：若有输液袋，则进入步骤s2，若无输液袋，则返回步骤s1。
29.优选的，所述算法处理包括以下步骤：
30.步骤s211：由服务器、计算盒或终端的其中一种处理器接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
31.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
32.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
33.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
34.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
35.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
36.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
37.优选的，所述数据为图像或视频。
38.优选的，所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏输液进程显示为绿色；
39.当识别到药液余量小于70％且大于20％时，护士站显示屏输液进程显示为蓝色；
40.当识别到药液余量小于20％且大于5ml时，护士站显示屏输液进程显示为橙色；
41.当识别到药液余量小于5ml时，护士站显示屏输液进程显示为红色。
42.优选的，包括步骤s4：床头终端和护士站显示屏同步语音播报“输液结束”，且护士站显示屏弹窗提示“**床输液结束”，并同步显示该床号输液袋数据。
43.本发明与现有技术相比，具有以下优点及有益效果：
44.本发明的基于视觉识别的输液进程监测系统及其监测方法，在不改变护士原有工作模式的前提下，大幅度减少了误报、漏报的情况，还可以直观地从护士站实时查看输液进程，远程掌控所有患者输液情况。护士可根据监测信息和专业判断科学安排工作优先级，减少频繁无效地奔波，提高护士工作效率，具体有益效果如下：
附图说明
45.图1为本发明所述实施例3的示意框图；
46.图2为本发明所述实施例4的示意框图；
47.图3为本发明所述实施例5的示意框图；
48.图4为本发明所述实施例6的示意框图。
具体实施方式
49.为了使本领域的技术人员更好地理解本发明的技术方案，下面结合具体实施例对本发明的优选实施方案进行描述，但是应当理解，附图仅用于示例性说明，不能理解为对本专利的限制；为了更好说明本实施例，附图某些部件会有省略、放大或缩小，并不代表实际产品的尺寸；对于本领域技术人员来说，附图中某些公知结构及其说明可能省略是可以理解的。附图中描述位置关系仅用于示例性说明，不能理解为对本专利的限制。
50.实施例1：
51.如图1至4所示，一种基于视觉识别的输液进程监测系统，包括：
52.终端1，用于采集和处理输液进程的数据；
53.服务器2，用于处理和转送接收到的数据；
54.显示屏3，用于展示输液进程和查看输液结束时的数据；
55.其中，所述终端1、服务器2和显示屏3依次通讯连接。
56.进一步地，在另一个实施例中，包括计算盒4，所述终端1、计算盒4、服务器2和显示屏3依次通讯连接。
57.实施例2：
58.如图1至4所示，一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
59.步骤s1：通过终端1定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
60.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
61.若采用服务器2对数据进行算法处理，则需要返回识别结果至终端1；
62.若采用计算盒4对数据进行算法处理，则需要将识别结果传送至服务器2，并返回
识别结果至终端1；
63.步骤s3：服务器2将识别结果传送至护士站，并在显示屏3中显示输液进程。
64.进一步地，在另一个实施例中，所述步骤s1的数据处理模式包括：
65.步骤s11：若医院网络流量压力较小，则将所有数据传送至服务器2处理；
66.步骤s12：若医院网络流量压力偏小，则将数据传送至服务器2处理，且只上传带有输液袋的数据；
67.步骤s13：若医院网络流量压力偏大，则将所有数据传送至计算盒4处理；
68.步骤s14：若医院网络流量压力较大，则数据直接在终端1处理，且只上传经识别后的结果及裁剪后的数据。
69.进一步地，在另一个实施例中，所述步骤s12包括：
70.步骤s121：将数据送入床头终端1的app程序；
71.步骤s122：通过app程序对数据进行处理，将数据送入api接口，进入预训练模型进行目标识别，判断当前是否有输液袋；
72.步骤s123：若有输液袋，则进入步骤s2，若无输液袋，则返回步骤s1；
73.进一步地，在另一个实施例中，所述算法处理包括以下步骤：
74.步骤s211：由服务器2、计算盒4或终端1的其中一种处理器接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
75.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
76.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
77.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
78.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
79.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
80.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
81.进一步地，在另一个实施例中，所述数据为图像或视频。
82.进一步地，在另一个实施例中，所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏3输液进程显示为绿色；
83.当识别到药液余量小于70％且大于20％时，护士站显示屏3输液进程显示为蓝色；
84.当识别到药液余量小于20％且大于5ml时，护士站显示屏3输液进程显示为橙色；
85.当识别到药液余量小于5ml时，护士站显示屏3输液进程显示为红色。
86.进一步地，在另一个实施例中，包括步骤s4：床头终端1和护士站显示屏3同步语音播报“输液结束”，且护士站显示屏3弹窗提示“**床输液结束”，并同步显示该床号输液袋数据。
87.实施例3：
88.如图1所示，一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
89.步骤s1：通过终端1定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
90.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
91.采用服务器2对数据进行算法处理，则需要返回识别结果至终端1；
92.步骤s3：服务器2将识别结果传送至护士站，并在显示屏3中显示输液进程；
93.步骤s4：床头终端1和护士站显示屏3同步语音播报“输液结束”，且护士站显示屏3弹窗提示“**床输液结束”，并同步显示该床号输液袋图像或视频。
94.所述步骤s1的数据处理模式包括：
95.步骤s11：医院网络流量压力较小，则将所有图像或视频传送至服务器2处理；
96.所述算法处理包括以下步骤：
97.步骤s211：由服务器2接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
98.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
99.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
100.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
101.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
102.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
103.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
104.所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏3输液进程显示为绿色；
105.当识别到药液余量小于70％且大于20％时，护士站显示屏3输液进程显示为蓝色；
106.当识别到药液余量小于20％且大于5ml时，护士站显示屏3输液进程显示为橙色；
107.当识别到药液余量小于5ml时，护士站显示屏3输液进程显示为红色。
108.实施例4：
109.如图2所示，一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
110.步骤s1：通过终端1定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
111.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
112.采用服务器2对数据进行算法处理，则需要返回识别结果至终端1；
113.步骤s3：服务器2将识别结果传送至护士站，并在显示屏3中显示输液进程；
114.步骤s4：床头终端1和护士站显示屏3同步语音播报“输液结束”，且护士站显示屏3弹窗提示“**床输液结束”，并同步显示该床号输液袋图像或视频。
115.所述步骤s1的数据处理模式包括：
116.步骤s12：医院网络流量压力偏小，则将图像或视频传送至服务器2，且只上传带有输液袋的图像或视频；
117.所述步骤s12包括：
118.步骤s121：将图像或视频送入床头终端1app程序；
119.步骤s122：通过app程序对图像或视频进行处理，将图像或视频送入api接口，进入预训练模型进行目标识别，判断当前是否有输液袋；
120.步骤s123：若有输液袋，则进入步骤s2，若无输液袋，则返回步骤s1；
121.所述算法处理包括以下步骤：
122.步骤s211：由服务器2接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
123.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
124.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
125.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
126.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
127.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
128.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
129.所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏3输液进程显示为绿色；
130.当识别到药液余量小于70％且大于20％时，护士站显示屏3输液进程显示为蓝色；
131.当识别到药液余量小于20％且大于5ml时，护士站显示屏3输液进程显示为橙色；
132.当识别到药液余量小于5ml时，护士站显示屏3输液进程显示为红色。
133.实施例5：
134.如图3所示，一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
135.步骤s1：通过终端1定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
136.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
137.采用计算盒4对数据进行算法处理，则需要将识别结果传送至服务器2，并返回识别结果至终端1；终端1可根据识别结果调整图片采集频率。
138.步骤s3：服务器2将识别结果传送至护士站，并在显示屏3中显示输液进程；
139.步骤s4：床头终端1和护士站显示屏3同步语音播报“输液结束”，且护士站显示屏3弹窗提示“**床输液结束”，并同步显示该床号输液袋图像或视频。
140.所述步骤s1的数据处理模式包括：
141.步骤s13：医院网络流量压力偏大，则将所有图像或视频传送至计算盒4；
142.所述算法处理包括以下步骤：
143.步骤s211：由计算盒4接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
144.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
145.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
146.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
147.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
148.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
149.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
150.所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏3输液进程显示为绿色；
151.当识别到药液余量小于70％且大于20％时，护士站显示屏3输液进程显示为蓝色；
152.当识别到药液余量小于20％且大于5ml时，护士站显示屏3输液进程显示为橙色；
153.当识别到药液余量小于5ml时，护士站显示屏3输液进程显示为红色。
154.实施例6：
155.如图4所示，一种基于视觉识别的输液进程监测系统的监测方法，包括以下步骤：
156.步骤s1：通过终端1定时采集单张病床前的实时数据，根据医院网络流量压力，选择数据处理模式；
157.步骤s2：对采集的数据进行算法处理，根据生成的识别结果判断输液进程，保存识别结果到数据库；
158.若采用服务器2对数据进行算法处理，则需要返回识别结果至终端1；
159.若采用计算盒4对数据进行算法处理，则需要将识别结果传送至服务器2，并返回识别结果至终端1；
160.步骤s3：服务器2将识别结果传送至护士站，并在显示屏3中显示输液进程；
161.步骤s4：床头终端1和护士站显示屏3同步语音播报“输液结束”，且护士站显示屏3弹窗提示“**床输液结束”，并同步显示该床号输液袋图像或视频。
162.所述步骤s1的数据处理模式包括：
163.步骤s14：医院网络流量压力较大，则将图像或视频传送至服务器2，且只上传经识别后裁剪的图像或视频。
164.所述算法处理包括以下步骤：
165.步骤s211：由终端1接收数据，调整为训练模型预定义比例，传送给数据推理服务接口api；
166.步骤s212：数据推理服务接口api接收数据，张量化处理后传给模型；
167.步骤s213：预训练模型对输入的数据张量做实例分割运算，在像素层面识别目标轮廓，进行特征提取；
168.步骤s214：用fpn生成n个proposals窗口，把proposals窗口映射到最后一层卷积map上；
169.步骤s215：通过全连接分类+回归+分割，同时进行分析数据液面特征，以及生成边界框和掩码；
170.步骤s216：根据生成的输液袋边界框，取最高点及最低点的两条水平线、最左侧与最右侧两条垂直线，将四条线围成的封闭区域设为待裁剪区域，在原图上将该区域裁剪后保存；
171.步骤s217：根据分析后数据液面特征，通过预定义的输液进程判断当前数据输液状态。
172.所述判断输液进程的方式为当识别到药液余量大于70％以上时，护士站显示屏3输液进程显示为绿色；
173.当识别到药液余量小于70％且大于20％时，护士站显示屏3输液进程显示为蓝色；
174.当识别到药液余量小于20％且大于5ml时，护士站显示屏3输液进程显示为橙色；
175.当识别到药液余量小于5ml时，护士站显示屏3输液进程显示为红色。
176.依据本发明的描述及附图，本领域技术人员很容易制造或使用本发明的基于视觉识别的输液进程监测系统及其监测方法，并且能够产生本发明所记载的积极效果。
177.如无特殊说明，本发明中，若有术语“长度”、“宽度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系是基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此本发明中描述方位或位置关系的用语仅用于示例性说明，不能理解为对本专利的限制，对于本领域的普通技术人员而言，可以结合附图，并根据具体情况理解上述术语的具体含义。
178.除非另有明确的规定和限定，本发明中，若有术语“设置”、“相连”及“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
179.以上所述，仅是本发明的较佳实施例，并非对本发明做任何形式上的限制，凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化，均落入本发明的保护范围之内。