通过实地拍摄调研,构建了多矿区道路障碍检测数据;依托现有现有障碍检测技术,通过构建适配露天矿区的检测网络,完成矿区无人车障碍检测任务,为矿区无人车的运行发展提供有力的技术支撑。
长按识别二维码阅读全文
基于多特征融合的露天矿区道路负障碍检测
随着矿山智能化建设的快速发展,无人驾驶技术在矿区的应用也日益成熟,但由于露天矿区非结构化道路时常出现路面坑洼、塌陷、凹陷积水等负障碍,这些障碍特征与道路特征相似度较高,在无人矿卡行进的过程中很难发现,很容易导致重载矿卡的车身倾斜和颠簸,并给无人矿卡的生产运输带来极大安全隐患,因此亟待研究一种能对矿区负障碍进行准确、快速自动检测的新方法。
国内外部分学者已对结构化道路和非结构化道路上的负障碍进行了一些研究。刘家银等提出一种基于多激光雷达与组合特征的方法,设计了一种具有互补能力的多激光雷达安装方式。其次,提出了基于幅向局部凸性和后沿壁局部密集特征的64线雷达负障碍物特征点对检测方法,以及基于径向距离跳变和后沿壁局部密集特征的32线雷达负障碍物特征点对检测方法。汪佩等提出一种基于单线激光雷达和单目视觉的负障碍检测算法,对检测到的负障碍区域在摄像机画面中进行跟踪,结合跟踪结果对负障碍区域做进一步判别。蔡云飞等把双多线激光雷达数据映射到多尺度栅格,统计栅格点云密度与相对高度等特征并标记,对其特征点进行聚类并过滤之后识别出负障碍。笔者对露天矿区道路负障碍特征进行深入分析,构建了基于机器视觉的轻量化目标检测模型,其召回率、平均精确度均值、检测精度均明显高于当时的主流网络。LI等通过自定义算式判断负障碍距离,将3D点云转变成二维高程栅格图像,基于图像滤波技术和点云去噪技术提出了一种基于高程栅格图像的几何特征估计方法,以此来判断负障碍信息。
露天矿非结构化道路因重型卡车碾压容易出现路面下陷的情况。例如露天矿装载区,不停的改变道路结构使路面易出现坑洼,尤其是雨天过后,露天矿非结构化道路变的泥泞,在碾压过后的道路出现坑洞、水坑等负障碍易使卡车出现轮胎下陷,甚至出现翻车的可能性。笔者基于以上论文分析并结合露天矿非结构化道路特点,提出了一种基于改进YOLOv5(You Only Look Once v5)多特种融合的负障碍检测方法,使露天矿区非结构化道路负障碍检测更加高效、精准和智能。为了使负障碍检测模型更注重路面负障碍信息,笔者改进了原模型的特征提取模块,在每个特征提取模块后加入CBAM卷积注意力机制,提高网络对图像重要特征的提取。为了检测到更小更精细的负障碍,笔者修改FPN的连接方式,将池化金字塔修改为加权双向池化金字塔BiFPN(Bidirectional Feature Pyramid Network),增加网络对小目标检测的能力。选择SGD为优化器,SIoU作为边界回归损失函数并且使用Kmeans++方法对笔者数据集进行聚类生成新的Anchor,通过动态的学习率防止模型拟合,提升算法准确度,使用遗传算法为数据找到更适配的超参数,最终实现对复杂环境下露天矿区道路负障碍的快速、精准和智能识别。
图 1 负障碍检测模型结构
图 2 特征融合方式结构
图 3 特征提取优化 C3CBAM 结构
图 4 CBAM 注意力机制结构
图 5 CAM 通道注意力模块结构
图 6 SAM 空间注意力模块结构
图 7 动态优化详细参数
阮顺领,男,1981年生,河南周口人,博士,教授,硕士生导师,西安市智慧工业感知计算与决策重点实验室副主任。主持参与国家自然科学基金4项、省重点研发计划项目1项、省部科研项目10余项,获得省部级科技奖励6项,发表学术论文40余篇,专利与软著20余项。
研究方向
矿山智能化建设
主要成果
主要针对我国金属矿产资源综合利用率低、信息化程度低等特点,围绕金属露天矿生产智能管控和安全智能分析,开展了基础性、创新性研究和工程应用,尤其在露天矿无人运输装备智能控制、金属矿生产管控集成关键技术、尾矿坝稳定性智能分析理论与方法等方面取得了一系列重要成果,先后在国内多座金属露天矿进行了推广应用。
来源:
阮顺领,鄢盛钰,顾清华,等. 基于多特征融合的露天矿区道路负障碍检测[J]. 煤炭学报,2024,49(5):2561−2572.