基于YOLOv7的直升机航巡电塔目标检测算法研究.pdf

为了提升直升机航巡的智能化水平，解决人工作业效率低下的问题，提出了一种基于 的直升机航巡电塔目标检测算法。首先，建立直升机航巡电塔数据集，将其分为训练集和测试集。然后，构建 目标检测网络模型，并利用训练样本库进行聚类分析，获取目标候选区域的先验尺寸，使用随机梯度下降迭代地修改网络参数，最终实现直升机航巡电塔目标检测。实验结果表明，该方法精度较高、时效性较好，准确度达到 ，召回率达到 ，算法时间消耗仅 ，满足直升机航巡电塔目标检测的需求。关键词：目标检测；深度学习；电力巡检；直升机；航巡；电塔中图分类号：文献标志码：文章编号：（），（，；，）：，：；上海电力大学学报 年随着社会对电力供电可靠性要求的日益提高和电力巡检技术的快速发展，直升机电力巡检正逐渐成为常用的电力巡检方式。由于计算机视觉发展迅速，许多先进的目标检测方法已广泛应用于各种民用和军事任务，如地覆被测绘、智慧农业、智慧城市、交通监测、灾害监测等。由于工业实际需求，面向直升机航巡的电塔目标检测成为一个重要的研究热点。随着直升机和无人机在电力巡检领域的应用逐步推广，以及现代科学智能技术的不断发展，其巡检系统效率远超人工巡检方式，有效地提升了电路巡检作业的自动化、智能化工作水平 。无人机电力巡检具有非常强的巡查便利性，但是目前电力巡检中常用无人机的滞空时间都在 ，由于单架次作业时间不够长，工作人员需要携带大量电池，且只能由工作人员携带无人机在线路之间移动，使得每日巡检的总长度严重受限。另外，该巡检方式对巡检人员的无人机操作水平和维护技能要求较高，且后期需要进行大量图像数据分析处理工作 。相比之下，大型直升机巡检距离长、载荷能力大，可装载多种高性能传感器对输电线路进行长距离巡检。但是巡检线路较长、操作设备多，人工手持相机拍摄的方式需要飞行员和拍摄人员时刻紧密配合，作业人员长时间精神高度紧张、容易疲惫出错，且大型直升机的使用成本和运营成本也较高。综上所述，有必要对轻量化且续航能力强的巡航装备、智能化的影像采集和数据处理技术等关键技术开展研究。近年来，航巡的电塔目标检测方法大多是基于小型无人机平台。周仿荣等人 基于 训练了输电线路缺陷快速检测网络。曹志勇等人 将 应用到无人机视角下的电塔目标检测。黄芹芹等人 利用反卷积融合单元改进了单激发多框探测器，最终实现了输电线路电力小部件的目标检测。然而，随着深度学习的逐渐发展，目标检测算法也在更新换代。本文深入研 究 了 目 前 系 列 的 最 新 算 法 ，并将其应用于直升机航巡电塔目标检测领域，提出了一种精度较高、时效性较好的检测算法，满足了直升机航巡电塔目标检测的需求。基于 的直升机航巡电塔目标检测架构 整体架构本文所提算法的整体架构如图 所示。首先，通过卷积层对输入图片进行处理，以提取低层特征。然后，使用高效长程距离网络（，）与池化层逐渐增加特征的通道维度，获取多尺度的高层特征。将这些特征作为 的多尺度特征融合层的输入，采用多分支结构训练结构化重参数，推理时将模型转化为简单的卷积层，有效提升模型的推理速度。最后，使用目标、类别、位置 种损失函数作为判据，不断修正迭代模型参数，从而完成 模型的训练。图 基于 的直升机航巡电塔目标检测算法整体架构 损失函数目标损失 和类别损失 均采用带有 的交叉熵损失函数 来计算。其公式为 （）（）（）（）（）（）式中：样本总量；样本；目标或类别的标签；交叉熵；目标或类别的预测值。采用 损失函数来计算位置损失 。其公式为 （）（）杜伟，等：基于 的直升机航巡电塔目标检测算法研究式中：两个边界框的交并比；、调节系数；边界框的长宽比；边界框中心点的距离。整个网络训练的总损失 为 种损失的加权和，公式为 （）式中：目标损失函数的权重，取 ；类别损失函数的权重，取 ；位置损失函数的权重，取 。实验设计与分析 实验平台搭建本文使用搭载光电吊舱的 轻小型直升机搭建了实验平台，具体安装示意如图 所示。拍摄设备由双光云台和可见光云台组成，双光云台包括广角相机和热成像相机，可见光云台包括可见光相机。稳定平台采用三轴结构，由航向轴、俯仰轴和横滚轴组成，带有广角相机和热成像相机的小型双光云台吊装于稳定支架内，位于可见光相机上方。个相机的航向轴保持一致，通过驾驶舱内的操纵设备对光电吊舱方位和俯仰运动、传感器控制、跟踪锁定等进行实时操纵，实现对目标的搜索、瞄准和跟踪。通过软件实现巡检图像和视频的自动拍摄和存储等功能，以供后续算法使用。图 直升机光电吊舱安装示意 实验数据集利用直升机电力线巡航时拍摄的 个视频，按照每 帧抽样一张图片的频率进行抽取，共得到 张图片，形成了直升机可见光相机视角下的电塔目标检测数据集。其中，训练集有 张图片，测试集有 张图片。实验设置采用 和 作为目标检测模型，权重均在 数据集上初始化。所有模型的训练和测试平台均为 。输入图像的分辨率分别采用了 ，。批尺寸的选择原则是尽量占满显存。优化器采用了 （），权重衰减为 ，动量为 。数据增强采用 、左右翻转、随机平移、尺度变化、域增强。训练共 个周期，初始学习率为 ，前 个周期为热身周期。学习率衰减过程采用余弦退火（）方法，将学习率逐步衰减为 。评价指标采用目标检测中常用的指标来衡量算法的性能，包括准确度 、召回率 、分数，公式分别为（）（）（）式中：被模型预测为正类的正样本；被模型预测为正类的负样本；被模型预测为负类的正样本。除此之外，其他采用的指标包括平均准确度（，）以及时间消耗。其中 代表 曲线的平均面积，选取交并比阈值为 。时间消耗定义为网络的推理时间与非极大值抑制的时间之和。实验结果不同模型和参数的目标检测算法性能对比如表 所示。由表 可知，当输入图像分辨率为 时，模型 需要的训练时间和目标检测的时间消耗均最少。随着输入图像分辨率增加到 时，召回率从 提升到 ，时间消耗也从 增加到 。然而，当进一步增大分辨率到 时，从 下降到 ，分数也上海电力大学学报 年从 下降到 。这是由于显存的限制，大分辨率的输入图像往往仅能使用较小的批尺寸，导 致 模 型 缺 少 泛 化 能 力，容 易 过 拟 合。的模型大小适当，输入分辨率仅为 ，准确度达到 ，分数达到 ，达到 ，均 为 所 有 实 验 设 置 最 佳 性 能，的时间消耗也表示算法基本可以满足在直升机电塔巡检中的实时使用要求。表 不同模型和参数的目标检测算法性能对比模型批尺寸 张输入图像分辨率准确度 召回率 分数 训练时间 时间消耗 目标检测算法在本文数据集上的测试结果如图 所示。图 电塔目标检测算法测试结果示例由图 可知，在复杂森林背景和简单天空背景下，算法都可以有效地识别和定位电塔目标，且置信度均维持在较高的水平。与此同时，尽管置信度有所降低，远处较小的电塔和识别难度较高的电塔均可以被精准地识别和定位。实验结果证明，算法可以较好地识别和检测电塔目标，同时具备处理复杂背景和小目标问题的能力。结语本文提出了一种基于 的直升机航巡电塔目标检测算法。测试结果表明，该算法精度较高、时效性较好，航巡电塔目标检测的准确度达到 ，召回率达到 ，算法的时间消耗仅 ，满足直升机航巡电塔目标检测的需求，可以进一步支撑电网线路弱小目标的缺陷检测与分类、识别能力，有助于实现电网线路缺陷的智能化快速检测。参考文献：缪希仁，刘志颖，鄢齐晨 无人机输电线路智能巡检技术综述 福州大学学报（自然科学版），（）：涂洁，冯智慧，梁文勇，等 小型无人机在电力线路巡检中的应用分析 电气时代，（）：周仿荣，方明，马御棠，等 基于 的输电线路缺陷快速检测方法 云南电力技术，（）：曹志勇，丰佳，毛文利，等 基于特征融合 的电力塔基目标检测 浙江电力，（）：黄芹芹，董洁，陈癑，等 一种改进 算法的输电线路目标检测方法 电工电气，（）：，：（）：（责任编辑白林雪）