基于改进YOLOv8n的井下人员多目标检测

问永忠, 贾澎涛, 夏敏高, 张龙刚, 王伟峰

问永忠,贾澎涛,夏敏高,等. 基于改进YOLOv8n的井下人员多目标检测[J]. 工矿自动化,2025,51(1):31-37, 77. DOI: 10.13272/j.issn.1671-251x.2024110035
引用本文: 问永忠,贾澎涛,夏敏高,等. 基于改进YOLOv8n的井下人员多目标检测[J]. 工矿自动化,2025,51(1):31-37, 77. DOI: 10.13272/j.issn.1671-251x.2024110035
WEN Yongzhong, JIA Pengtao, XIA Mingao, et al. Multi-target detection of underground personnel based on an improved YOLOv8n model[J]. Journal of Mine Automation,2025,51(1):31-37, 77. DOI: 10.13272/j.issn.1671-251x.2024110035
Citation: WEN Yongzhong, JIA Pengtao, XIA Mingao, et al. Multi-target detection of underground personnel based on an improved YOLOv8n model[J]. Journal of Mine Automation,2025,51(1):31-37, 77. DOI: 10.13272/j.issn.1671-251x.2024110035

基于改进YOLOv8n的井下人员多目标检测

基金项目: 陕西省重点研发计划(2022QCY−LL−70);陕西省秦创原“科学家+工程师”队伍建设项目(2023KXJ−052)。
详细信息
    作者简介:

    问永忠(1970—),男,陕西澄城人,高级工程师,硕士,主要研究方向为采矿工程,E-mail:531395120@qq.com

    通讯作者:

    贾澎涛(1977—),女,陕西蒲城人,教授,博士,主要从事人工智能及应用、机器学习、智能矿山等方面的教学与科研工作,E-mail:jiapengtao@xust.edu.cn

  • 中图分类号: TD323

Multi-target detection of underground personnel based on an improved YOLOv8n model

  • 摘要:

    针对井下危险区域人员监测视频存在光照不均匀、目标尺度不一致、遮挡等复杂情况,基于YOLOv8n网络结构,提出一种改进的井下人员多目标检测算法—YOLOv8n−MSMLAS。该算法对YOLOv8n的Neck层进行改进,添加多尺度空间增强注意力机制(MultiSEAM),以增强对遮挡目标的检测性能;在C2f模块中引入混合局部通道注意力(MLCA)机制,构建C2f−MLCA模块,以融合局部和全局特征信息,提高特征表达能力;在Head层检测头中嵌入自适应空间特征融合(ASFF)模块,以增强对小尺度目标的检测性能。实验结果表明:① 与Faster R−CNN,SSD,RT−DETR,YOLOv5s,YOLOv7等主流模型相比,YOLOv8n−MSMLAS综合性能表现最佳,mAP@0.5和mAP@0.5:0.95分别达到93.4%和60.1%,FPS为80.0帧/s,参数量为5.80×106个,较好平衡了模型的检测精度和复杂度。② YOLOv8n−MSMLAS在光照不均、目标尺度不一致、遮挡等条件下表现出较好的检测性能,适用于现场检测。

    Abstract:

    This study aims to address the complex challenges in monitoring underground personnel in hazardous areas, including uneven lighting, target scale inconsistency, and occlusion. An innovative multi-target detection algorithm, YOLOv8n-MSMLAS, was proposed based on the YOLOv8n network structure. The algorithm modified the Neck layer by incorporating a Multi-Scale Spatially Enhanced Attention Mechanism (MultiSEAM) to enhance the detection of occluded targets. Furthermore, a Hybrid Local Channel Attention (MLCA) mechanism was introduced into the C2f module to create the C2f-MLCA module, which fused local and global feature information, thereby improving feature representation. An Adaptive Spatial Feature Fusion (ASFF) module was embedded in the Head layer to boost detection performance for small-scale targets. Experimental results demonstrated that YOLOv8n-ASAM outperformed mainstream models such as Faster R-CNN, SSD, RT-DETR, YOLOv5s, and YOLOv7 in terms of overall performance, achieving mAP@0.5 and mAP@0.5: 0.95 of 93.4% and 60.1%, respectively,with a speed of 80.0 frames per second,the parameter is 5.80×106, effectively balancing accuracy and complexity. Moreover, YOLOv8n-ASAM exhibited superior performance under uneven lighting, target scale inconsistency, and occlusion, making it well-suited for real-world applications.

  • 在煤矿智能化建设背景下,智能化钻探技术已成为满足地质保障需求的钻探装备智能化、探测过程数字化及地质工程信息化有效融合的技术支撑[1]。钻孔机器人是煤矿智能化钻探技术系统中的重要载体[2],在国家煤矿安全监察局2019年发布的《煤矿机器人重点研发目录》中,明确提出了3种钻孔机器人,分别为探水、防突和防冲钻孔机器人,其基本要求具有自感知、自学习、自决策与自执行的4个智能要素。

    为提高钻探过程的智能化程度,脱离或弱化对于人工经验的依赖,确保钻探安全与提升钻探效率,近年来在煤矿井下自动化钻孔机器人的基础上,自适应控制技术作为智能化钻探的关键技术不断取得进步。许多学者提出通过采集钻孔机器人运行参数,建立精确的数学模型[3-6],以实现钻压、钻速和回转压力等的优化控制。翁寅生等[7]使用编码器、流量传感器和压力变送器等构建了钻孔机器人参数测量系统,对钻孔机器人转速、钻速和钻压等进行实时监测,以便施工人员及时调整参数。马斌等[8]研究了分布式传感器的布置方法,通过对比传感器检测数据与给定阈值,实施钻孔机器人相关机构的调整。王清峰等[9-10]开发了基于差分进化算法的自适应控制技术,实现了钻孔机器人控制向量的自动优化。董洪波等[11]在钻孔机器人单动控制基础上进行了钻孔机器人自动钻进和自动起钻技术研究,有效提高了钻孔机器人的自动化水平。张锐等[12]采用钻孔机器人控制系统实时监测和反馈控制钻进参数,实现常规回转钻孔机器人的自动钻进。

    由于含煤地层的地质力学环境复杂,断层、陷落柱、构造带等地质异常体非线性、强耦合、强干扰特征突出,导致钻孔机器人给进系统的给进阻力和回转系统的负载转矩复杂多样。这就要求钻孔机器人给进回转系统能够适应煤岩的变化,而现有技术仅通过既定程序控制执行机构进行流程化动作,钻进过程的自适应智能控制水平低,对钻进过程中遇到的工况变化调节能力弱,当钻进工况变化时易造成卡钻、断钻等事故,降低钻孔机器人的钻进效率,影响工作周期。

    本文以钻进效率和钻进安全为控制目标,建立钻孔机器人给进回转自适应控制系统。研究钻孔机器人给进系统的钻速、回转系统的转矩适应煤岩变化的智能感知与控制技术,建立基于煤岩可钻性的给进回转模型,提出钻孔机器人给进回转双回路PID自适应控制方法,基于恒转矩和恒钻速控制策略,实现钻孔机器人给进回转系统钻速和转矩的自适应调节。

    钻孔机器人给进回转自适应控制系统旨在钻进状态感知的基础上通过智能控制中心决策,适应煤岩的硬度变化,实现安全高效钻进。钻孔机器人给进回转自适应控制系统如图1所示。该系统基于智能钻探系统软件架构与数据框架的分层递阶设计思想,集成包括基础自动化层、过程控制层和智能决策层的闭环控制系统。其中智能决策层是钻孔机器人实现智能化钻探的核心,通过钻进状态智能感知,结合钻进过程控制,实现闭环控制。本文重点研究钻进过程控制,最优化地调整钻压、流量等可控参数,实现基于煤岩可钻性的推荐钻速、转速和目标转矩的自适应控制,从而实施安全高效钻进。

    图  1  钻孔机器人给进回转自适应控制系统
    Figure  1.  Drilling robot feed and rotary adaptive control system

    复杂地质环境下的钻进状态智能感知是人工智能技术与坑道钻探技术的交叉融合,其原理是运用人工智能技术,将物理世界的信息通过传感器等感知硬件映射到数字空间,再将这些数字信息进一步提升至可认知层次,用于记忆、理解、规划和决策等活动,为钻孔机器人控制系统实现复杂钻探环境感知理解、地层判定、安全辨识等提供基础支撑[13-16]

    根据钻孔机器人对自身功能信息的数据要求,利用先进的传感技术,构建钻探装备状态智能感知系统,将钻孔机器人施工过程中的钻压、钻速、转速、转矩、泵压、钻孔深度等相关信息,实时显示在机载防爆计算机上,同时采用各种智能诊断算法判断设备健康状态,对初发故障提供前期检测,对预兆故障进行预报和管理。典型钻孔机器人状态智能感知系统采用上下位机模块化结构设计方式,通过CAN总线进行通信。下位机包括传感器和信号采集器等硬件,对钻孔机器人状态参数进行采集;上位机为防爆计算机,其内置监测诊断软件,对数据进行转换、显示和存储。

    针对常规回转钻进过度依赖人工操控问题,通过状态智能感知获取高价值密度的钻进数据,以实现最优钻速、转速、钻压等钻进参数的在线优化设计和钻进操作参数的智能决策[17-19]

    钻孔机器人智能控制中心基于状态智能感知、煤岩可钻性、工程历史数据等多源信息,决策当前最优操作参数,能够将钻进工艺与自动化、智能化技术相结合,通过网络和通信系统实现数据自动采集、信息双向高速传输、实时分析与决策、钻进优化控制,形成基于煤岩地层条件的自适应钻进控制技术,实现基于PID的恒转矩控制和恒钻速控制,从而有效提升煤矿坑道钻探过程的施工安全和钻进效率。

    基于煤岩可钻性的给进回转模型主要通过煤岩可钻性建模获取当前钻进工况下的推荐钻速和转速,进而在恒转矩控制的基础上实现对钻孔机器人钻速和转速的控制。

    1) 特征获取。钻孔机器人钻进过程中工况复杂,传感器获取的回转压力和钻压信号频率不集中,受到煤岩干扰多,且信号波动较大,难以用确定的函数进行拟合,难以从信号本身判断当前工况下的煤岩可钻性,因此,采用小波包变换对钻孔机器人的状态参数进行特征提取。

    选取钻孔机器人的钻压和转矩作为煤岩可钻性识别的输入信号,采用三级小波包分解法将钻压和转矩进行分解[19],分解后信号重构函数的数学表达式为

    $$ {{{S}}_3} = {S_{31}} + {S_{32}} + {S_{33}} + {S_{34}} + {S_{35}} + {S_{36}} + {S_{37}} + {S_{38}} $$ (1)

    式中:${{{S}}_3}$为信号重构函数;${{{S}}_{3j}}$为三级小波包分解后第j个频段信号重构函数,j=1,2,…,8。

    重构信号的能量为

    $$ {{\boldsymbol{E}}_{3j}} = \int {{{\left| {{S_{3j}}(t)} \right|}^2}{\rm{d}}t} $$ (2)

    式中t为时间。

    将重构信号的能量${{\boldsymbol{E}}_{3j}}$作为各频段信号的特征,对钻压和转矩进行特征提取,则特征向量为

    $$ {\boldsymbol{E}} = [{{\boldsymbol{E}}_{31j}}\;\;{{\boldsymbol{E}}_{32j}}] $$ (3)

    式中:${{\boldsymbol{E}}_{31j}}$为钻压分解后的第j个频段信号特征向量;${{\boldsymbol{E}}_{3{\text{2}}j}}$为转矩分解后的第j个频段信号特征向量。

    2) 特征筛选。不是每个频段的信息都能够反映煤岩可钻性,需要对特征分量进行筛选,因此,采用皮尔逊相关性分析方法将特征向量E中的每个分量与煤岩可钻性进行相关性分析,得到与煤岩可钻性相关性强的分量,组成强相关特征向量:

    $$ {{\boldsymbol{E}}'} = [{\boldsymbol{E}}_{31m}'\;\;{\boldsymbol{E}}_{32n}'] $$ (4)

    式中:$ {\boldsymbol{E}}_{31m}' $为钻压分解后的第m个频段信号强相关特征向量;$ {\boldsymbol{E}}_{32n}' $为转矩分解后的第n个频段信号强相关特征向量。

    对强相关性特征向量${\boldsymbol{E}}'$进行归一化,得到归一化特征向量:

    $$ {\boldsymbol{E}}''=\left[\frac{{\boldsymbol{E}}_{31 m}^{\prime}}{\displaystyle\sum_{m=1}^{8} {\boldsymbol{E}}_{31 m}^{\prime}+\displaystyle\sum_{n=1}^{8} {\boldsymbol{E}}_{32 n}^{\prime}} \frac{{\boldsymbol{E}}_{32 n}^{\prime}}{\displaystyle\sum_{m=1}^{8} {\boldsymbol{E}}_{31 m}^{\prime}+\displaystyle\sum_{n=1}^{8} {\boldsymbol{E}}_{32 n}^{\prime}}\right] $$ (5)

    3) 煤岩可钻性模型建立。以归一化后的强相关性特征向量作为BP神经网络的输入量,对BP神经网络进行训练,得到煤岩可钻性模型。

    $$ y = O\left( {\left[ {{\omega _1}{\omega _2} \cdots {\omega _g}} \right] {{\left[ {{y_1}{y_2} \cdots {y_g}} \right]}^{\rm{T}}} + b} \right) $$ (6)

    式中:$ y $为BP神经网络的输出;O$(\cdot) $为输出函数;$\omega {}_i$为第i个(i=1,2,···,gg为输出层总数)输出层的权值;yi为第i个BP神经网络的输出;b为输出层的阈值。

    在煤岩可钻性模型中,BP神经网络的输出范围为[0,1]。由于在煤岩中可能存在硬度大于5的岩层,所以煤岩硬度的取值范围为[0.5,10]。通过线性映射将BP神经网络的输出映射为煤岩硬度:

    $$ f = 9.5y + 0.5 $$ (7)

    Tiberius Cove的研究表明[20],针对不同种类的岩石,不同钻具都存在推荐转速,且该推荐转速与岩石的硬度和钻具有效直径的平方根的乘积呈反比例关系。因此,根据煤岩可钻性模型获取的煤岩硬度和钻具有效直径,得到当前工况下的推荐转速:

    $$ l = {l_0} + \frac{{{a_1}}}{{\sqrt D f}} $$ (8)

    式中:l0为钻孔机器人在相同工况下转速的均值;a1为回转切削速度常数;$ D $为钻具有效直径。

    根据煤矿井下坑道钻探装备实际钻进经验可知,推荐钻速与岩石的硬度和钻具有效直径的乘积呈反比例关系。因此,根据煤岩可钻性模型获取的煤岩硬度和钻具有效直径,得到当前工况下的推荐钻速:

    $$ v = {v_0} + \frac{{{a_2}}}{{Df}} $$ (9)

    式中:$ {v_0} $为钻孔机器人在相同工况下钻速的均值;a2为给进钻速常数。

    钻孔机器人给进回转控制系统采用双回路PID自适应控制方法,该控制系统主要由恒转矩控制模块PID1、恒钻速控制模块PID2和钻速微调模块3个部分组成。钻孔机器人在煤岩负载中的转矩信号输入PID1,输出钻压信号;钻孔机器人在煤岩负载中的钻速信号和基于煤岩可钻性模型的推荐钻速信号输入PID2,输出目标转矩信号;回转系统的转速信号和钻孔机器人在煤岩负载中的转速信号输入钻速微调模块,输出钻速微调量。给进回转自适应控制系统结构如图2所示。基于煤岩可钻性获取当前钻进工况的推荐钻速和转速,在恒转矩控制回路PID1和恒钻速控制回路PID2的相互作用下实现钻孔机器人推荐钻速的微调,保证钻孔机器人安全高效运行。

    图  2  给进回转自适应控制系统结构
    Figure  2.  Structure of feed and rotary adaptive control system

    恒转矩控制回路PID1通过调整钻压实现恒转矩控制。当回转转矩较大时,适当减小钻压,降低钻速,防止钻进负载过大,造成卡钻等事故;当回转转矩较小时,可以适当增加钻压,提高钻速。基于设定的目标转矩,使系统能够时刻保持最佳钻进负载,使系统在安全的基础上以最大效率工作。考虑到转矩与回转压差呈正相关关系,因此恒转矩控制器的设定值为目标转矩对应的回转压差,反馈量为当前时刻对应的回转压差,控制器采用积分分离PI控制器,可有效避免恒转矩控制系统中积分项过大,减小影响系统调节时间。控制器的输出为

    $$ {P_{\rm{F}}} = {k_{\rm{p}}}{e_{\rm{p}}} + \varepsilon ({e_{\rm{p}}}){k_{\rm{i}}}{e_{\rm{p}}} $$ (10)
    $$ \varepsilon ({e_{\rm{p}}}){{ = }}\left\{ {\begin{array}{*{20}{c}} {\text{0}}&{{e_{\rm{p}}} > {e_{{\rm{p}}\_}}_{{\rm{set}}}} \\ {\text{1}}&{{e_{\rm{p}}} \leqslant {e_{{\rm{p}}\_}}_{{\rm{set}}}} \end{array}} \right. $$ (11)

    式中:${P_{\rm{F}}}$为控制器输出给钻孔机器人给进系统的钻压;kp为比例调节系数;${e_{\rm{p}}}$为误差;ε为启动信号;ki为积分调节系数;${e_{{\rm{p}}\_}}_{{\rm{set}}}$为根据钻孔机器人性能设置的误差积分上限。

    在钻孔机器人钻进过程中,煤层负载复杂多样,只采用恒转矩控制难以实现理想的控制效果。当煤层硬度突然变小,如果保持回转压差不变,会使系统的钻压过高,钻速过快,钻进过程的安全性降低;当煤层硬度突然变大,会使系统的钻速较慢,此时应适当地增加回转压差。因此,根据钻速对目标转矩进行微调,以推荐钻速和实际钻速的误差为输入,设计控制器PID2,PID2输出的转矩信号作为最优转矩信号输入到PID1中,实现恒钻速控制,使系统能够安全高效地运行。

    当推荐钻速对于当前工况过大时,会导致钻孔机器人的回转转矩过大,进而导致系统的转速降低。因此,以实际转速与推荐转速的偏差对推荐钻速进行微调,设定钻速为

    $$ {v_{{\rm{set}}}} = v - \frac{{{k_{\rm{i}}}}}{{\rm{s}}}\varepsilon( R_{{{\rm{now}}}}) $$ (12)
    $$\varepsilon( R_{{{\rm{now}}}}) = \left\{ {\begin{array}{*{20}{c}} 0&{R_{{\rm{now}}} > R_{{{\rm{set}}}} - R_{0}} \\ 1&{R_{{{\rm{now}}}} < R_{{{\rm{set}}}} - R_{0}} \end{array}} \right. $$ (13)

    式中:$R_{{{\rm{now}}}}$为转速的测量值;$R_{{{\rm{set}}}}$为转速的设定值;$R_{0}$为转速可降低的阈值;1/s为积分运算。

    当实际转速小于推荐转速的转速区间时,减小推荐钻速,进而降低系统的回转转矩和钻压,使得钻孔机器人工作在安全范围内。

    在钻孔机器人钻进过程中,钻头的钻压主要是由煤岩阻力产生,内聚阻尼模型描述了钻头和煤岩在轴向的相互作用[21]

    $$ {F_{\rm{d}}} = {k_{\rm{r}}}\dot x $$ (14)

    式中:${F_{\rm{d}}}$为钻头和煤层之间的相互作用力;${k_{\rm{r}}}$为煤层的渗透阻力系数,取决于煤层硬度;$\dot x$为钻头的钻速。

    钻孔机器人的回转转矩是由于钻进过程中钻头旋转切削煤岩,使钻头和煤岩在旋转方向相互作用,产生回转转矩,Karnopp模型[22]描述了转速、钻压和回转阻力之间的关系。

    $$ T\left( {l,{F_{\rm{d}}}} \right) = {\mu _{\rm{b}}}\left( l \right){F_{\rm{d}}}{L_{\rm{b}}}{{\rm{sgn}}} (l) $$ (15)
    $$ {\mu _{\rm{b}}}\left( l \right) = {\mu _{{\rm{cb}}}} + \left( {{\mu _{{\rm{sb}}}} + {\mu _{{\rm{cb}}}}} \right)\exp ( - {\gamma _{\rm{b}}}l) $$ (16)

    式中:$T$为回转转矩;$\;{\mu _{\rm{b}}}$为干摩擦因数;${L_{\rm{b}}}$为钻头直径;$\;{\mu _{{\rm{sb}}}},{\mu _{{\rm{cb}}}}$分别为钻头的静摩擦因数和滑动摩擦因数,取决于煤岩硬度;${\gamma _{\rm{b}}}$为速度衰减率。

    通过Karnopp模型和实际钻进工艺分析,建立反映给进回转负载的钻头−煤岩相互作用模型,回转系统反映钻进负载的回转转矩,通过改变钻压可实现转矩和钻速的改变。

    为了对钻孔机器人给进回转自适应控制系统的控制效果进行验证,设计了仿真试验进行测试。设钻孔机器人正常工作时的额定转矩为2 000 N·m,推荐钻速为6 mm/s,推荐转速为100 r/min,此时系统对应的钻压为10 MPa,给进力为60 kN,得出的仿真结果如图3图7所示。可看出在煤岩硬度不变时,该控制系统可实现恒转矩和恒钻速控制,转矩保持在2 000 N·m,钻速保持在6 mm/s;在50 s时,增大煤岩硬度,若对推荐钻速不作任何调整,则由于煤岩硬度变高,导致负载增加,使系统转矩增大至2 350 N·m,转速降低至85 r/min;采用自适应调整策略后,系统的钻压、转速等可以很快达到稳定状态;若推荐钻速6 mm/s对应的实际转矩2 350 N·m超过钻孔机器人工作允许的负载转矩,且其实际转速85 r/min小于推荐转速的95%时,则可以通过钻速微调模块降低推荐钻速设定值,进而通过调整钻压使系统的转矩调整至最优转矩,使钻孔机器人再次稳定在恒转矩和恒钻速控制状态,确保钻孔机器人安全高效工作。

    图  3  设定钻速调整下的转矩变化
    Figure  3.  Torque change under set drilling speed adjustment
    图  4  设定钻速调整下的钻速变化
    Figure  4.  Drilling speed change under set drilling speed adjustment
    图  5  设定钻速调整下的转速变化
    Figure  5.  Rotational speed change under set drilling speed adjustment
    图  6  设定钻速调整下的钻压变化
    Figure  6.  Drilling pressure change under set drilling speed adjustment
    图  7  设定钻速调整下的给进力变化
    Figure  7.  Feed force change under set drilling speed adjustment

    1) 根据钻孔机器人的钻进过程和工作特性,基于钻孔机器人状态智能感知系统提取与煤岩可钻性强相关的状态特征,建立煤岩可钻性模型,并获取基于煤岩可钻性的推荐钻速和转速。

    2) 提出基于煤岩可钻性的钻孔机器人给进回转双回路PID自适应控制方法,包括基于PID控制的恒转矩控制策略和基于PID控制的恒钻速控制策略,可实现基于煤岩可钻性的推荐钻速和转矩的自适应控制。

    3) 通过Karnopp模型和实际钻进工艺分析,建立钻头−煤岩相互作用仿真模型并进行仿真测试分析,验证了该控制系统可实现恒转矩和恒钻速的智能控制,有效提升钻进过程效率,降低钻进过程风险,可解决传统钻进过程对于人工经验的过度依赖。

  • 图  1   YOLOv8n−MSMLAS网络结构

    Figure  1.   YOLOv8n−MSMLAS network structure

    图  2   MultiSEAM结构

    Figure  2.   MultiSEAM structure

    图  3   C2f_MLCA结构

    Figure  3.   C2f_MLCA structure

    图  4   MLCA机制结构

    Figure  4.   MLCA mechanism structure

    图  5   ASFF结构

    Figure  5.   Adaptively Spatial Feature Fusion(ASFF) structure

    图  6   部分图像样本

    Figure  6.   Sample images

    图  7   部分数据增强图像

    Figure  7.   Augmented data images

    图  8   部分不同算法检测结果

    Figure  8.   Detection results of various algorithms

    表  1   环境配置参数

    Table  1   Environmental configuration parameters

    环境 配置参数
    CPU 12th Gen Intel(R) Core(TM) i7−12650H
    GPU RTX 3030 (24 GiB)
    运行环境 Python3.9,CUDA 11.8
    深度学习框架 Pytorch 1.12.1
    编程语言 Python 3.9.7
    下载: 导出CSV

    表  2   消融实验结果

    Table  2   Ablation experiment results

    模型 MLCA MultiSEAM ASFF 准确率/% 召回率/% mAP@0.5/% mAP@0.5:0.95/% FPS/(帧·s−1 参数量/106
    YOLOv8n × × × 91.7 87.2 92.0 59.0 128.2 3.01
    改进模型1 × × 93.7 86.3 92.9 59.1 109.9 3.01
    改进模型2 × × 96.5 86.2 92.5 58.4 108.7 4.42
    改进模型3 × × 95.6 88.8 93.4 58.9 104.2 4.38
    改进模型4 × 95.3 89.6 93.4 58.3 101.1 4.43
    改进模型5 × 95.8 85.8 92.9 56.5 91.7 4.38
    改进模型6 × 96.2 89.0 92.6 59.1 88.5 5.80
    改进模型7 97.0 87.3 93.4 60.1 80.0 5.80
    下载: 导出CSV

    表  3   对比实验结果

    Table  3   Comparison experiment results

    模型 mAP@0.5/% mAP@0.5:0.95/% FPS/(帧·s−1 参数量/106
    Faster R−CNN 91.9 52.7 71.6 137.10
    SSD 91.5 55.7 95.1 26.29
    RT−DETR 93.3 59.0 88.5 19.87
    YOLOv5s 92.7 59.2 109.9 9.11
    YOLOv7 93.2 53.5 59.5 36.48
    YOLOv8n 92.0 59.0 128.2 3.01
    YOLOv8s 93.4 59.9 120.5 11.13
    YOLOv8n−MSMLAS 93.4 60.1 80.0 5.80
    下载: 导出CSV
  • [1]

    GIRSHICK R,DONAHUE J,DARRELL T,et al. Rich feature hierarchies for accurate object detection and semantic segmentation[C]. IEEE Conference on Computer Vision and Pattern Recognition,New York,2014:580-587.

    [2]

    GIRSHICK R. Fast R-CNN[C]. IEEE International Conference on Computer Vision,Santiago,2015:1440-1448.

    [3]

    REN Shaoqing,HE Kaiming,GIRSHICK R,et al. Faster R-CNN:towards real-time object detection with region proposal networks[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence,2017,39(6):1137-1149. DOI: 10.1109/TPAMI.2016.2577031

    [4]

    LIU Wei,ANGUELOV D,ERHAN D,et al. SSD:single shot MultiBox detector[C]. European Conference on Computer Vision,Cham,2016:21-37.

    [5] 王渊,郭卫,张传伟,等. 融合注意力机制和先验知识的刮板输送机异常煤块检测[J]. 西安科技大学学报,2023,43(1):192-200.

    WANG Yuan,GUO Wei,ZHANG Chuanwei,et al. Detection of abnormal coal block in scraper conveyor integrating attention mechanism and prior knowledge[J]. Journal of Xi'an University of Science and Technology,2023,43(1):192-200.

    [6] 赵云辉,程小舟,董锴文,等. 基于MK−YOLOV4的矿区人员无标注视频检索方法[J]. 激光与光电子学进展,2022,59(4):301-309.

    ZHAO Yunhui,CHENG Xiaozhou,DONG Kaiwen,et al. Unlabeled video retrieval method of mining personnel based on MK-YOLOV4[J]. Laser & Optoelectronics Progress,2022,59(4):301-309.

    [7] 谢斌红,袁帅,龚大立. 基于RDB−YOLOv4的煤矿井下有遮挡行人检测[J]. 计算机工程与应用,2022,58(5):200-207. DOI: 10.3778/j.issn.1002-8331.2009-0449

    XIE Binhong,YUAN Shuai,GONG Dali. Detection of blocked pedestrians based on RDB-YOLOv4 in coal mine[J]. Computer Engineering and Applications,2022,58(5):200-207. DOI: 10.3778/j.issn.1002-8331.2009-0449

    [8] 汝洪芳,王珂硕,王国新. 改进YOLOv4网络的煤矿井下行人检测算法[J]. 黑龙江科技大学学报,2022,32(4):557-562. DOI: 10.3969/j.issn.2095-7262.2022.04.023

    RU Hongfang,WANG Keshuo,WANG Guoxin. Coal mine pedestrian detection algorithm based on improved YOLOv4 network[J]. Journal of Heilongjiang University of Science and Technology,2022,32(4):557-562. DOI: 10.3969/j.issn.2095-7262.2022.04.023

    [9]

    LI Xiaoyu,WANG Shuai,LIU Bin,et al. Improved YOLOv4 network using infrared images for personnel detection in coal mines[J]. Journal of Electronic Imaging,2022,31. DOI: 10.1117/1.JEI.31.1.013017.

    [10]

    YAO Wei,WANG Aiming,NIE Yifan,et al. Study on the recognition of coal miners' unsafe behavior and status in the hoist cage based on machine vision[J]. Sensors,2023,23(21). DOI: 10.3390/s23218794.

    [11] 张磊,李熙尉,燕倩如,等. 基于改进YOLOv5s的综采工作面人员检测算法[J]. 中国安全科学学报,2023,33(7):82-89.

    ZHANG Lei,LI Xiwei,YAN Qianru,et al. Personnel detection algorithm in fully mechanized coal face based on improved YOLOv5s[J]. China Safety Science Journal,2023,33(7):82-89.

    [12] 白培瑞,王瑞,刘庆一,等. DS−YOLOv5:一种实时的安全帽佩戴检测与识别模型[J]. 工程科学学报,2023,45(12):2108-2117.

    BAI Peirui,WANG Rui,LIU Qingyi,et al. DS-YOLOv5:a real-time detection and recognition model for helmet wearing[J]. Chinese Journal of Engineering,2023,45(12):2108-2117.

    [13] 张辉,苏国用,赵东洋. 基于FBEC−YOLOv5s的采掘工作面多目标检测研究[J]. 工矿自动化,2023,49(11):39-45.

    ZHANG Hui,SU Guoyong,ZHAO Dongyang. Research on multi object detection in mining face based on FBEC-YOLOv5s[J]. Journal of Mine Automation,2023,49(11):39-45.

    [14]

    SHAO Xiaoqiang,LIU Shibo,LI Xin,et al. FM-YOLOv7:an improved detection method for mine personnel helmet[J]. Journal of Electronic Imaging,2023,32(3). DOI: 10.1117/1.JEI.32.3.033013.

    [15] 田子建,阳康,吴佳奇,等. 基于LMIENet图像增强的矿井下低光环境目标检测方法[J]. 煤炭科学技术,2024,52(5):222-235. DOI: 10.12438/cst.2023-0675

    TIAN Zijian,YANG Kang,WU Jiaqi,et al. LMIENet enhanced object detection method for low light environment in underground mines[J]. Coal Science and Technology,2024,52(5):222-235. DOI: 10.12438/cst.2023-0675

    [16] 薛小勇,何新宇,姚超修,等. 基于改进YOLOv8n的采掘工作面小目标检测方法[J]. 工矿自动化,2024,50(8):105-111.

    XUE Xiaoyong,HE Xinyu,YAO Chaoxiu,et al. Small object detection method for mining face based on improved YOLOv8n[J]. Journal of Mine Automation,2024,50(8):105-111.

    [17] 肖振久,严肃,曲海成. 基于多重机制优化YOLOv8的复杂环境下安全帽检测方法[J]. 计算机工程与应用,2024,60(21):172-182. DOI: 10.3778/j.issn.1002-8331.2402-0147

    XIAO Zhenjiu,YAN Su,QU Haicheng. Safety helmet detection method in complex environment based on multi-mechanism optimization of YOLOv8[J]. Computer Engineering and Applications,2024,60(21):172-182. DOI: 10.3778/j.issn.1002-8331.2402-0147

    [18]

    FAN Yingbo,MAO Shanjun,LI Mei,et al. CM-YOLOv8:lightweight YOLO for coal mine fully mechanized mining face[J]. Sensors,2024,24(6). DOI: 10.3390/S24061866.

    [19]

    SHAO Xiaoqiang,LIU Shibo,LI Xin,et al. Rep-YOLO:an efficient detection method for mine personnel[J]. Journal of Real-Time Image Processing,2024,21(2). DOI: 10.1007/S11554-023-01407-3.

    [20]

    YU Ziping,HUANG Hongbo,CHEN Weijun,et al. YOLO-FaceV2:a scale and occlusion aware face detector[J]. Pattern Recognition,2024,155. DOI: 10.1016/J.PATCOG.2024.110714.

    [21]

    WAN Dahang,LU Rongsheng,SHEN Siyuan,et al. Mixed local channel attention for object detection[J]. Engineering Applications of Artificial Intelligence,2023,123. DOI: 10.1016/J.ENGAPPAI.2023.106442.

    [22]

    LIU Songtao,HUANG Di,WANG Yunhong. Learning spatial fusion for single-shot object detection[EB/OL]. (2024-08-22]. https://arxiv.org/abs/1911.09516v2.

    [23]

    YANG Wenjuan,ZHANG Xuhui,MA Bing,et al. An open dataset for intelligent recognition and classification of abnormal condition in longwall mining[J]. Scientific Data,2023,10(1). DOI: 10.1038/S41597-023-02322-9.

  • 期刊类型引用(3)

    1. 贾龙,张哲豪,石成虎,马战鹏,杨皓月,李思雯. 采煤机状态数据实时特效渲染技术. 陕西煤炭. 2024(03): 29-40 . 百度学术
    2. 宁银龙. 双电机驱动采煤机的牵引特性研究. 机械管理开发. 2024(02): 69-70+73 . 百度学术
    3. 白建华. 采煤机电动机检修时常见故障分析. 内蒙古煤炭经济. 2022(13): 144-146 . 百度学术

    其他类型引用(0)

图(8)  /  表(3)
计量
  • 文章访问数:  98
  • HTML全文浏览量:  20
  • PDF下载量:  28
  • 被引次数: 3
出版历程
  • 收稿日期:  2024-11-11
  • 修回日期:  2025-01-17
  • 网络出版日期:  2024-12-18
  • 刊出日期:  2025-01-24

目录

/

返回文章
返回