• 论文
主办单位:煤炭科学研究总院有限公司、中国煤炭学会学术期刊工作委员会

基于多特征融合的露天矿区道路负障碍检测

2024-08-25


创新点

通过实地拍摄调研,构建了多矿区道路障碍检测数据;依托现有现有障碍检测技术,通过构建适配露天矿区的检测网络,完成矿区无人车障碍检测任务,为矿区无人车的运行发展提供有力的技术支撑。

长按识别二维码阅读全文

基于多特征融合的露天矿区道路负障碍检测

作者:阮顺领1, 2, 3 , 鄢盛钰1, 2 , 顾清华1, 2, 3 , 卢才武1, 3
单位:1. 西安建筑科技大学 资源工程学院2. 西安建筑科技大学 矿山系统工程研究所3. 西安市智慧工业感知计算与决策重点实验室
研究背景
 RESEARCH  BACKGROUND 

随着矿山智能化建设的快速发展,无人驾驶技术在矿区的应用也日益成熟,但由于露天矿区非结构化道路时常出现路面坑洼、塌陷、凹陷积水等负障碍,这些障碍特征与道路特征相似度较高,在无人矿卡行进的过程中很难发现,很容易导致重载矿卡的车身倾斜和颠簸,并给无人矿卡的生产运输带来极大安全隐患,因此亟待研究一种能对矿区负障碍进行准确、快速自动检测的新方法。 

国内外部分学者已对结构化道路和非结构化道路上的负障碍进行了一些研究。刘家银等提出一种基于多激光雷达与组合特征的方法,设计了一种具有互补能力的多激光雷达安装方式。其次,提出了基于幅向局部凸性和后沿壁局部密集特征的64线雷达负障碍物特征点对检测方法,以及基于径向距离跳变和后沿壁局部密集特征的32线雷达负障碍物特征点对检测方法。汪佩等提出一种基于单线激光雷达和单目视觉的负障碍检测算法,对检测到的负障碍区域在摄像机画面中进行跟踪,结合跟踪结果对负障碍区域做进一步判别。蔡云飞等把双多线激光雷达数据映射到多尺度栅格,统计栅格点云密度与相对高度等特征并标记,对其特征点进行聚类并过滤之后识别出负障碍。笔者对露天矿区道路负障碍特征进行深入分析,构建了基于机器视觉的轻量化目标检测模型,其召回率、平均精确度均值、检测精度均明显高于当时的主流网络。LI等通过自定义算式判断负障碍距离,将3D点云转变成二维高程栅格图像,基于图像滤波技术和点云去噪技术提出了一种基于高程栅格图像的几何特征估计方法,以此来判断负障碍信息。 

露天矿非结构化道路因重型卡车碾压容易出现路面下陷的情况。例如露天矿装载区,不停的改变道路结构使路面易出现坑洼,尤其是雨天过后,露天矿非结构化道路变的泥泞,在碾压过后的道路出现坑洞、水坑等负障碍易使卡车出现轮胎下陷,甚至出现翻车的可能性。笔者基于以上论文分析并结合露天矿非结构化道路特点,提出了一种基于改进YOLOv5(You Only Look Once v5)多特种融合的负障碍检测方法,使露天矿区非结构化道路负障碍检测更加高效、精准和智能。为了使负障碍检测模型更注重路面负障碍信息,笔者改进了原模型的特征提取模块,在每个特征提取模块后加入CBAM卷积注意力机制,提高网络对图像重要特征的提取。为了检测到更小更精细的负障碍,笔者修改FPN的连接方式,将池化金字塔修改为加权双向池化金字塔BiFPN(Bidirectional Feature Pyramid Network),增加网络对小目标检测的能力。选择SGD为优化器,SIoU作为边界回归损失函数并且使用Kmeans++方法对笔者数据集进行聚类生成新的Anchor,通过动态的学习率防止模型拟合,提升算法准确度,使用遗传算法为数据找到更适配的超参数,最终实现对复杂环境下露天矿区道路负障碍的快速、精准和智能识别。 

摘要
 ABSTRACT
随着智慧矿山概念的逐步落实,智能化、无人化逐渐在矿区落实,露天矿卡车无人驾驶日益成为矿山智能化建设的主要内容,为解决露天矿区复杂多变的道路因坑洼、塌陷等路面小部分下陷出现的非规则负障碍而导致矿区无人车、重载卡车侧翻等安全难题,提升矿区安全驾驶系数,提出一种多特征融合的露天矿区道路负障碍检测方法。
该方法使用BiFPN特征融合模块,提高小型负障碍检测权重占比;引入空间和通道双注意力机制提高对负障碍边缘的特征提取和特征融合能力,从而提高对道路小尺度负障碍的检测精度;采用SIoU Loss作为模型边界框损失函数并使用K-means++方法优化Anchor以提高负障碍检测模型的收敛速度和边界框定位效果,并基于遗传算法优化超参数让模型更贴合矿区场景,最终实现对矿区道路负障碍的快速精准识别。实验表明该检测模型能快速准确识别复杂背景下露天矿区道路负障碍目标,对道路负障碍目标的检测精度、召回率、平均精确度均值分别达到了96.9%、89.9%、95.3%,且该模型大小仅有12.7 MB。对比其他主流检测网络,该网络模型更适合复杂环境下露天矿区非结构化道路行驶安全需求,且该检测模型的鲁棒性好,可适配于多种情况的露天矿区,为实际环境复杂多变的露天矿区非结构化道路负向障碍检测提供了可行的方法,为露天矿无人卡车安全生产运输提供安全预警。
部分图表






 1    负障碍检测模型结构


 2    特征融合方式结构


 3    特征提取优化 C3CBAM 结构


 4    CBAM 注意力机制结构


 5    CAM 通道注意力模块结构


 6    SAM 空间注意力模块结构


 7    动态优化详细参数


作者简介


阮顺领,男,1981年生,河南周口人,博士,教授,硕士生导师,西安市智慧工业感知计算与决策重点实验室副主任。主持参与国家自然科学基金4项、省重点研发计划项目1项、省部科研项目10余项,获得省部级科技奖励6项,发表学术论文40余篇,专利与软著20余项。


研究方向

矿山智能化建设


主要成果

主要针对我国金属矿产资源综合利用率低、信息化程度低等特点,围绕金属露天矿生产智能管控和安全智能分析,开展了基础性、创新性研究和工程应用,尤其在露天矿无人运输装备智能控制、金属矿生产管控集成关键技术、尾矿坝稳定性智能分析理论与方法等方面取得了一系列重要成果,先后在国内多座金属露天矿进行了推广应用。




来源:

阮顺领鄢盛钰顾清华基于多特征融合的露天矿区道路负障碍检测[J]. 煤炭学报202449(5):2561−2572.

  责任编辑:宫在芹

主办单位:煤炭科学研究总院有限公司 中国煤炭学会学术期刊工作委员会

©版权所有2015 煤炭科学研究总院有限公司 地址:北京市朝阳区和平里青年沟东路煤炭大厦 邮编:100013
京ICP备05086979号-16  技术支持:云智互联