技术总结
本发明公开了一种雷达与摄像机融合的行人检测方法和系统,方法包括:构建用于行人检测的Mask RCNN网络结构,并对Mask RCNN网络结构进行预训练;接收雷达获取的待检测区域的雷达数据,对雷达数据进行聚类处理得到多种聚类点簇,并根据行人的物理属性对聚类点簇进行过滤,得到针对行人的聚类点簇;接收摄像机获取的待检测区域的图像数据,根据摄像机内外参将针对行人的聚类点簇转换为图像中的像素坐标,并通过卷积变换规则提取图像的感兴趣区域;将提取的感兴趣区域输入至预训练好的Mask RCNN网络结构中进行行人识别,输出行人检测结果。本发明将雷达和摄像机数据融合行人检测,利用硬件优势代替软件计算,降低了软件计算的复杂度,兼顾了准确性和时效性。
技术研发人员:刘云鹏;智伟;王谦;朱芸
受保护的技术使用者:中电海康集团有限公司
技术研发日:2019.11.18
技术公布日:2020.03.24