一种装卸作业流程识别系统的制作方法

本发明涉及计算机视觉领域，尤其是一种装卸作业流程识别系统。

背景技术：

1、在石油，化工场景中，识别并记录槽罐车的装卸作业是有必要的，槽罐车的装卸作业是非常危险的，如果操作不当会带来严重后果，因为装卸的物体都是高危液体。目前装卸作业都是通过人工的方式来记录，对于企业来说成本增加，且智能化程度低。因此我们引入了视觉的方法来识别记录整个装卸作业流程，再生成一个作业报表。整个过程实现了智能化，能有效的节省人力物力，同时企业的装卸管理也能进入到智能化的发展。

2、车辆运输装卸情况的记录方法及装置(申请号：200410004553.0)公开一种车辆运输装卸情况的记录方法和装置，通过gps接收模块计算当前时间、车辆位置和速度，通过传感器检测汽车弹簧钢板的变形量，在多次判断结果均为速度为零且变形量发生变化时，确定本次装卸的状态，同时记录当前装卸时间、位置和状态，并通过无线收发模块将装卸情况的数据发送到监控中心。否则只记录和发送行车路线的数据。本发明方法和装置采用集成化的设计，将gps准确定位的特点和车辆的载重相结合，使现有技术中不能实现的对物流的监控功能得以实现，还可同时对车辆的行车路线进行记录。该方案的缺点是需要通过gps来定位车来，记录车辆的行驶路线，未实现车辆装卸作业的记录。

3、一种油品装卸记录仪(申请号：201721207370.8)适用新型属于油品监测技术领域，公开了一种油品装卸记录仪，包括中央控制器、存储模块、触发器、通讯模块、油品容量传感器、视频监控器和定位模块。所述油品容量传感器为防爆型磁浮球液位传感器，垂直安装在油罐车的油罐罐体内，用来测量油罐内油品容量；所述触发器用来感应油罐车卸油阀和人孔是否被开启；所述视频监控器有两个；所述定位模块与触发器电性连接，用于通过gps定位装卸事件发生地点；所述中央控制器电性连接触发器、通讯模块、油品容量传感器和视频监控器，所述通讯模块电性连接油品容量传感器、视频监控器和存储模块。本实用新型可以实现对油品容量的实时监控，避免违法添加或掺配行为的发生，提高加油站油品品质。该发明的缺陷是只关注了油品的装卸，而不考虑整体流程的规范和安全作业。

4、一种运煤车辆入厂信息采集方法及系统(申请号：202111485754.7)公开了一种运煤车辆入厂信息采集方法及系统，其方法包括：获取车载终端发送的入厂请求信息，入厂请求信息包含车辆信息；基于车辆信息确定车辆是否属于入厂车辆名单内，车辆属于所述入厂测量名单内将信息采集指令发送至车载终端；接收车载终端反馈的煤炭装卸信息，从炭装卸信息中提取订单信息；提取订单信息中的订货方信息并判断订货方是否属于订货名单内，若订货方属于订货名单内，则向订货方系统发送订单核实信息；接收订货方系统反馈的订单核实结果，若订单核实结果表示订单有效，则放行所述车辆入厂。本方案以运煤车辆的车辆信息为纽带，实现了煤厂系统、车载终端和订货方的信息互通，以简单的网络结构实现了高集成度的信息化采集通道。该发明的缺点是只关注了车辆是否有权限进行厂区，未关注车辆装卸过程，同时也没有根据车辆信息生成作业报表。

5、因此为了解决现有的装卸作业记录未能实现对作业安全的全程监控，同时未对整个作业生成一个详细报表的问题，急需提供一种槽罐车装卸作业流程识别系统，从视频流到图片，同时从图片的检测与识别，槽罐车的驶入，车牌识别，警示牌的放置移除，装车臂的断开连接，静电线的连接断开，车辆的驶出的整体过程进行自动记录的系统。提高系统安全性，降低人力成本。

技术实现思路

1、本发明的目的在于解决现有的装卸作业记录未能实现对作业安全的全程监控，未对整个作业生成详细报表的问题，提供了一种装卸作业流程识别系统，能有效地识别记录现场装卸作业的流程，同时生成作业报表，完整记录，监控了整个装卸流程，提升企业发展中的智能化管理。

2、为了实现这一目的本发明提供了一种装卸作业流程识别系统，包括前摄像头，后摄像头，装卸台，槽罐车和车头，还包括五个核心模块：

3、视频处理模块，将视频流切成图片；

4、车辆驶入驶出模块，识别车辆是否是驶入或者驶出；

5、警示牌放置移除模块，检测警示牌是否放置和移除；

6、静电线和装车臂连接断开模块，识别静电线和撞车臂是否连接和断开；

7、装卸作业记录生成模块，记录整个装卸作业流程，生成装卸作业记录报表。

8、视频处理模块，使用开源的技术ffmpeg，将视频流按照一秒一帧的方式截取出图片。

9、车辆驶入驶出模块，采用的yolov5检测算法，将图片送到车辆驶入检测模型，识别车辆是否是驶入或者驶出。

10、警示牌放置移除模块，采用yolov5检测算法检测警示牌是否放置和移除。

11、静电线和装车臂连接断开模块，采用yolov5检测算法和分割算法识别静电线和撞车臂是否连接和断开。

12、装卸作业记录生成模块，在车辆驶出后，记录整个装卸作业流程，同时每个操作都有一个记录时间，后续将生成装卸作业记录报表。

13、本发明的有益效果是从视频流开始到车辆的驶入驶出记录，警示牌的放置移除记录，静电线和装车臂的连接断开记录，同时包含最后装卸作业的报表，每个模块之间目的明确，整个流程清晰可见，并详细记录装卸作业中的所有细节，可提升企业发展中的智能化管理。

14、为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

技术特征：

1.一种装卸作业流程识别系统，包括前摄像头，后摄像头，装卸台，槽罐车和车头，其特征在于还包括以下核心模块：

2.如权利要求1所述的一种装卸作业流程识别系统，其特征在于所述的视频处理模块，使用开源的音视频处理工具ffmpeg，将视频流按照一秒一帧的方式截取出图片。

3.如权利要求1所述的一种装卸作业流程识别系统，其特征在于所述的视频处理模块，使用开源的音视频处理工具opencv，将视频流按照一秒一帧的方式截取出图片。

4.驶入驶出模块，采用的yolov5检测算法，将图片送到车辆驶入检测模型，识别车辆是否是驶入或者驶出。

5.如权利要求1所述的一种装卸作业流程识别系统，其特征在于所述的警示牌放置移除模块，采用yolov5检测算法检测警示牌是否放置和移除。

6.如权利要求1所述的一种装卸作业流程识别系统，其特征在于所述的静电线和装车臂连接断开模块，采用yolov5检测算法和分割算法识别静电线和撞车臂是否连接和断开。

7.如权利要求1所述的一种装卸作业流程识别系统，其特征在于所述的装卸作业记录生成模块，在车辆v驶出后，记录整个装卸作业流程，同时每个操作都有一个记录时间，后续将生成装卸作业记录报表。

技术总结
本发明提供了一种装卸作业流程识别系统，包括前摄像头，后摄像头，装卸台，槽罐车和车头，还包括五个核心模块：视频处理模块，将视频流切成图片；车辆驶入驶出模块，识别车辆是否是驶入或者驶出；警示牌放置移除模块，检测警示牌是否放置和移除；静电线和装车臂连接断开模块，识别静电线和撞车臂是否连接和断开；装卸作业记录生成模块，记录整个装卸作业流程，生成装卸作业记录报表。本发明每个模块之间目的明确，整个流程清晰可见，并详细记录装卸作业中的所有细节，可提升企业发展中的智能化管理。

技术研发人员：王朔,张昭智
受保护的技术使用者：上海湃道智能科技有限公司
技术研发日：
技术公布日：2024/3/27