Research on Stress Field Detection of Building Blasting Environment Based on Infrared Digital Holography
-
摘要: 红外数字全息具有实时性强、可在复杂环境检测等优点；爆破环境的粉尘类气溶胶对可见光有较强的吸收、散射效应，红外波段处于“大气窗口”波长的红外光受气溶胶影响较小，该优势与数字全息相结合，本文提出一种可在高浓度粉尘环境下测量应力场的研究方法。将大小适中的光滑水泥板固定于三维施力架上作为研究对象，采用红外数字全息方法，改变环境粉尘浓度，分别测量光滑水泥板在不同压力作用下的应力场变化，对比全息图、相位差，验证了该方法的可行性，并设置可见光数字全息为对照实验。结果表明，红外数字全息可在高浓度粉尘环境下测量出应力场的施力点、压力相对大小及应力影响区域，实现实时、无损、全场检测，而可见光数字全息在此环境下检测效果不佳甚至无法完成检测，本文所提方法极大拓展了基于数字全息干涉计量应力检测手段的实用性。Abstract: Infrared digital holography has strong real-time performance, is not easily disturbed by visible light, and can be detected in complex environments. It is widely used in special fields. For example, dust aerosols in a blasting environment have strong absorption and scattering effects on visible light, and infrared light at the wavelength of the "atmospheric window" in the infrared band is less affected by aerosols. This advantage has been combined with digital holography. A smooth cement plate of moderate size was fixed on a three-dimensional force application frame as the research object, and the infrared digital holography method was used to change the dust concentration in the environment. The stress field changes of smooth cement plates under different pressures were measured, and the feasibility of this method was verified by comparing holograms and phase differences. Visible light digital holography was used as a control experiment. The results show that infrared digital holography can measure the force application point, relative pressure, and stress influence area of the stress field in an environment of high-concentration dust and realize real-time, nondestructive, and full-field detection, while visible digital holography in this environment is poor or even unable to complete the detection. The method proposed in this paper significantly expands the practicality of the stress detection method based on digital holographic interferometry.
-
0. 引言
随着我国推进“碳达峰、碳中和”的目标，光伏发电产业迅速发展[1]。截至2024年6月底，全国光伏装机容量为712.93 GW[2]。然而，光伏组件多安装在环境恶劣的地区，长期受到环境的影响产生不同程度的损伤，导致局部发热，危害光伏电站的正常运行[3]。因此，为保证光伏电站的安全运行，对光伏板定期进行检测是非常必要的。
随着光伏电站规模的扩大，传统人工巡检方式已不适用于大规模电站巡检，搭载工业相机的无人机巡检方式已成为主流。目前，基于红外图像的光伏板缺陷检测方法有两种：一种是采用传统图像处理方法，另一种是采用深度学习方法。传统图像处理方法通过对图像进行二值化、形态学处理等操作进行缺陷检测[3]。蒋琳等[4]采用B样条最小拟合方法处理红外图像的灰度直方图，通过抑制红外图像的噪声对热斑进行检测。孙海蓉[5]等提出一种改进自私羊群算法的热斑识别方法，可以有效抑制边缘干扰，提高热斑的检测效率。蒋琳[6]采用大津法提取红外图像的热斑，采用红外图像与可见光图像融合的方式消除热斑虚警，提高检测效率。基于传统图像处理的方法存在着耗时长、泛化性差等问题，易受外界环境的干扰。
相较于传统检测方法，基于深度学习的方法符合智能化巡检需求，能够较为准确地进行缺陷检测与精确定位，有助于大规模光伏电站的运维[7]。Zhao S.[8]等人设计了一种基于尺度感知的邻域相关特征网络SNCF-Net，能克服复杂背景的干扰，提高小目标热斑的检测精度。刘宇宸[9]等人首先通过U2-Net生成显著图，与红外图像进行融合，对图像进行增强，其次将注意力机制融入检测网络中，提高了检测精度。Su B[10]等人提出了残差通道式注意力门控模块（Residual channelwise attention gate，RCAG），该模块可以抑制特征融合过程中无用的背景信息，突出缺陷特征，实现了缺陷精确检测。
上述研究取得了一定的成果，但是缺陷检测种类较为单一，难以满足巡检需求。现阶段无人机航拍红外图像存在以下问题：①由于无人机飞行高度的限制，缺陷只占图像的一小部分，存在缺陷目标小的问题；②所拍摄的红外图像具有图像特征对比度低、背景复杂的特点，影响缺陷的检测精度，导致缺陷难以定位。
为解决上述问题，以YOLOv7算法框架为基础，提出一种用于检测光伏板航拍红外图像缺陷的算法模型，可以有效解决背景复杂、对比度低与小目标难检测的问题。通过消融实验验证了改进算法的有效性，并与同类算法进行对比，验证了改进后算法的先进性。
1. YOLOv7原理
YOLOv7[11]是由Chien-Yao等人在2022年7月提出的，该算法在5~16 f/s范围内的检测速度与检测精度均领先于当前主流的目标检测器[12]。YOLOv7首先通过输入端（Input）将输入图像调整为640×640的大小；之后送入主干网络（Backbone），经过CBS卷积层、高效层聚合网络ELAN（Efficient path aggregation characteristic pyramid network）和MPConv等模块提取图像特征，生成三个不同尺度的特征图；送入颈部网络（Neck），利用引入扩展高效聚合网络E-ELAN（Extended efficient path aggregation characteristic pyramid network）的路径聚合特征金字塔网络[13]进一步提取特征信息；最后经过头部网络（Head），采用重参数化卷积[14]（RepVGG Block）结构对颈部网络Neck的输出的3个不同尺度的特征进行调整，经过3个1×1卷积得到最后的输出，用于最终的预测。
2. 改进YOLOv7网络模型
原YOLOv7中的ELAN模块采用卷积提取特征信息，易忽略小目标显著性信息，保留无用的背景信息，无法准确表达缺陷特征，且原损失函数对于小目标的位置偏差非常敏感，不利于小目标定位，导致检测精度下降。为此，提出一种基于YOLOv7-EPAN的目标检测算法模型，其整体结构如图 1所示。首先提出融合CSWin Transformer的扩展高效聚合网络CS-ELAN模块，获得全局空间位置信息，捕获关键特征信息；其次构建了基于CS-ELAN模块的高效路径特征聚合网络提高特征表达能力；最后，设计了一种新的损失函数，使模型关注高质量anchors，提高小目标的定位精度。
2.1 融合CSWinT扩展高效聚合网络
2.1.1 CSWinT原理
随着Transformer[15]在自然语言领域的成功，一些学者尝试将其应用到视觉领域。ViT（Vision Transformer）[16]成功地将计算机视觉任务与自然语言处理结合起来，打开了视觉自注意力机制的大门。ViT为保证Transformer的结构，将图像x∈RH×W×C有序地展成二维图像块$ {x_{\text{p}}} \in {R^{N \times ({P^2} \times C)}} $，其中(H, W)为原图像大小，C是通道数量，(P, P)是每个图像块的大小，N＝HW/P2对应变换后的图像块的数量，采用可训练的线性投影将xp映射到D维实现编码。ViT由于其本身计算量的限制，不能应用于密集视觉任务或输入图像分辨率高时的通用网络。
为减少计算量，一些学者进行了深入研究，提出了许多变体。CSWin Transformer[17]由此被提出，其是Swin Transformer[18]的衍生版本。CSWinT采用十字交叉窗口注意力机制取代原注意力机制，其原理如图 2所示。CSWinT将多头注意力平均分成两个部分，一部分做水平注意力，另一部分做垂直注意力，最后将两部分输出进行拼接。
假设输入特征为X∈RH×W×C，线性投影到K个注意力头部（每个头部的通道数为C/K），平均分成两个部分，一部分是h1到hK/2，另一部分是hK/2+1到hK。设条纹的宽度为SW，对于水平自注意力来说，特征X被平均划分成等宽的非重叠水平带[X1, …, XM]，其中M＝H/SW，第n个水平自注意力输出定义为：
$$ \left\{ {\begin{array}{*{20}{c}} {X = [{X^1},{X^2}, \cdots ,{X^M}]} \\ {Y_n^i = {\text{Attention}}({X^i}W_n^Q,{X^i}W_n^K,{X^i}W_n^V)} \\ {H - {\text{Attentio}}{{\text{n}}_n}(X) = [Y_n^1,Y_n^2, \cdots ,Y_n^k]} \end{array}} \right. $$ (1) 式中：Xi∈R(SW×W×C)，$ W_n^Q,W_n^K,W_n^V \in {R^{C \times {d_k}}} $，dk＝C/K，对应的垂直注意力也可以类似地推导出，记第n个垂直注意力输出为V-Attentionn(X)。最终的输出如下：
$$ \left\{ {\begin{array}{*{20}{c}} {{\text{CSWin - Attention}}(X) = {\text{Concat}}({h_1}, \cdots ,{h_k}){W^O}} \\ {{h_k} = \left\{ {\begin{array}{*{20}{c}} {H - {\text{Attentio}}{{\text{n}}_n}(X),n = 1, \cdots ,{K \mathord{\left/ {\vphantom {K 2}} \right. } 2}} \\ {V - {\text{Attentio}}{{\text{n}}_n}(X),n = {K \mathord{\left/ {\vphantom {K 2}} \right. } 2} + 1, \cdots ,K} \end{array}} \right.} \end{array}} \right. $$ (2) 2.1.2 CS-ELAN原理
为增强模型提取小目标特征的能力，受CSWinT的启发，提出了一种融合CSWinT的扩展高效聚合网络CS-ELAN。通过卷积操作与交叉十字窗口注意力机制捕获全局有用的特征信息与上下文信息。相比于原模块，其能保留更多的空间位置信息，使模型更高效地捕获关键信息，突出缺陷细节信息并抑制复杂背景信息。
CS-ELAN模块的结构如图 3(c)所示，为减少模块的参数量，将原模块的3×3卷积分解为1×3卷积与3×1卷积相加的形式。假设输入特征为xin∈RH×W×C，首先经过两个1×1卷积操作得到特征$ {x_1} \in {R^{H \times W \times {C_1}}} $与$ {x_2} \in {R^{H \times W \times {C_1}}} $，其中C1＝C/2；再将其送入到Conv3中得到$ {x_3} \in {R^{H \times W \times {C_2}}} $，Conv3结构如图 3(b)所示，其中C2＝C/4；将张量重构后送入到CSWin中，CSWin结构如图 3(a)所示，再经过张量重构后得到特征$ {x_4} \in {R^{H \times W \times {C_3}}} $，其中C3＝C/4，将x4送入到Conv3中得到特征$ {x_5} \in {R^{H \times W \times {C_4}}} $，其中C4＝C/4，将特征x1、x2、x3、x4与x5在通道方向进行拼接，最后经过一个卷积操作得到最终的输出$ {x_{{\text{out}}}} \in {R^{H \times W \times {C_5}}} $，其中C5＝C。计算过程如公式(3)所示：
$$ \left\{ {\begin{array}{*{20}{l}} {{x_1} = {\text{CBS}}({x_{{\text{in}}}})} \\ {{x_2} = {\text{CBS}}({x_{{\text{in}}}})} \\ {{x_3} = {\text{Conv3}}({x_1})} \\ {{y_1} = {\text{TensorRefactor}}({x_3})} \\ {{y_2} = {\text{CSWin}}({y_1})} \\ {\begin{array}{*{20}{l}} {{x_4} = {\text{TensorRefactor}}({y_2})} \\ {\begin{array}{*{20}{l}} {{x_5} = {\text{Conv3}}({x_4})} \\ {{x_{{\text{out}}}} = {\text{CBS}}({\text{Cat}}({x_1},{x_2},{x_3},{x_4},{x_5}))} \end{array}} \end{array}} \end{array}} \right. $$ (3) 2.2 EPAN原理
对于单阶段检测器，不同尺度的特征层负责预测不同尺度的目标。应用多尺度的方法可以增加对目标尺度的鲁棒性，提高小目标的检测精度。为挖掘CS-ELAN模块的潜力，构建了以CS-ELAN为基础的高效路径特征聚合网络EPAN，加强不同特征层特征信息交互，增强特征表达能力，增强模型对缺陷的灵敏度，从而提高检测精度。
如图 1所示，EPAN的输入为来自特征提取网络下采样{8, 16, 32}倍的特征层{C3, C4, C5}，特征C5经过卷积操作调整通道后得到C5′，上采样之后与经过卷积操作的特征C4在通道维度上拼接，送入CS-ELAN模块中获得C4′，上采样之后与经过卷积的特征C3在通道维度上拼接，送入CS-ELAN模块获得输出特征P3，形成自顶向下的信息传递；特征P3经过MP模块下采样与特征C4′在通道维度上拼接，送入CS-ELAN模块获得输出特征P4，经过MP模块下采样与特征C5′在通道维度上拼接，送入CS-ELAN模块获得输出特征P5，形成自下而上的信息传递。输出特征{P3, P4, P5}进行不同尺度目标的检测。
本文所采用的光伏红外图像为640×512，送入EPAN的特征为特征提取网络下采样{8, 16, 32}倍的特征，其所对应的大小为{80×64，40×32，20×16}。由于CSWinT中条纹宽度SW必须被宽和高整除，而在CSWinT中SW最大被设为7，为保证其有足够的感受野并尽量与CSWinT相同，针对本文下采样{8, 16, 32}倍的特征层SW设为{8, 8, 4}。
2.3 损失函数改进
YOLOv7损失函数包含3部分，分别是置信度损失函数Lossconf、分类损失函数Lossclass与回归损失函数Lossre，公式如下所示：
$$ \text{Loss}_{\text{total}}＝\text{Loss}_{\text{re}}+\text{Loss}_{\text{conf}}+\text{Loss}_{\text{class}} $$ (4) 置信度损失函数与分类损失函数均采用BCEWithLogits Loss函数进行计算，回归损失函数采用CIOU Loss函数进行计算，计算公式如下所示：
$$ {\text{Los}}{{\text{s}}_{{\text{re}}}} = {\text{Los}}{{\text{s}}_{\text{CIOU}}} = 1 - {I_{{\text{IOU}}}} + \frac{{{\rho ^2}(b,{b_{{\text{gt}}}})}}{{{c^2}}} + \alpha v $$ (5) $$ v = \frac{4}{{{{{\rm{ \mathsf{ π} }}}^2}}}{(\arctan \frac{{{w_{{\text{gt}}}}}}{{{h_{{\text{gt}}}}}} - \arctan \frac{w}{h})^2} $$ (6) $$ \alpha = \frac{v}{{(1 - {I_{{\text{IOU}}}}) + v}} $$ (7) 式中：b表示预测框；bgt表示真实框；c表示能包含真实框与预测框的包闭区域的对角线距离；α表示平衡参数；v用来度量长宽比的相似性。
虽然CIOU损失函数考虑了框的重叠面积、中心点距离与纵横比3个因素的影响，但其对于小目标BBox的偏移非常敏感，不利于小目标的定位。因此，引入Normalized Wasserstein Distance（NWD）[19]损失函数，加强模型对于小目标的定位，提高收敛速度。NWD损失函数将BBox建模成为二维高斯分布，用此来衡量BBox之间的相似度。
对于由边界框BBox A＝(cxa, cya, wa, ha)和B＝(cxb, cyb, wb, hb)建模的高斯分布Na和Nb，其距离公式定义为：
$$ W_2^2({N_{\text{a}}},{N_{\text{b}}}) = \left\| {({{[c{x_{\text{a}}},c{y_{\text{a}}},\frac{{{w_{\text{a}}}}}{2},\frac{{{h_{\text{a}}}}}{2}]}^{\text{T}}},{{[c{x_{\text{b}}},c{y_{\text{b}}},\frac{{{w_{\text{b}}}}}{2},\frac{{{h_{\text{b}}}}}{2}]}^{\text{T}}})} \right\|_2^2 $$ (8) 因此，NWD损失函数公式如下所示：
$$ {\text{Los}}{{\text{s}}_{{\text{NWD}}}} = 1 - {\text{NWD}}({N_{\text{a}}},{N_{\text{b}}}) = 1 - \exp ( - \frac{{\sqrt {W_2^2({N_{\text{a}}},{N_{\text{b}}})} }}{c}) $$ (9) 式中：c为常数，其数值与数据集相关。
为使得训练过程能够稳定收敛，对NWD损失函数融合原CIOU损失函数，优化后的回归损失函数Lossre如下：
$$ \text{Loss}_{\text{re}}＝(1－λ)\text{Loss}_{\text{NWD}}+λ\text{Loss}_{\text{CIOU}} $$ (10) 式中：λ为平衡系数，当λ＝0时，Lossre即为LossNWD；当λ＝1时，Lossre即为LossCIOU。
3. 实验相关工作
3.1 实验环境搭建
本次实验平台参数如表 1所示。
表 1 实验平台参数Table 1. Experimental platform parametersParameters Configuration Operating system Ubuntu18.04 Framework Pytorch 1.11.0 CPU Intel(R) Core(TM) i9-12900 GPU NVIDIA GeForce RTX 3090 Ti Memory 24G Programming language Python 3.2 数据集
本次实验所采用的数据集来自某光伏电厂。红外图像在天气状况良好的情况下由带有红外相机的无人机拍摄不同功率机组的光伏组件获得。本次所拍摄的光伏缺陷数据集共3013张，分辨率为640×512。如图 4所示，图中共包含3类光伏组件缺陷，分别为电池片故障（Cell failure）、二极管故障（Dioda failure）与遮挡（Occlude）。使用Labelimg标注工具标注，共9234个标注框，将数据集划分为训练集与测试集，其中训练集2553张，测试集460张，数量比约为5:1，详情如表 2所示。按照MS COCO数据集规定的小、中、大目标尺寸的定义进行标注框面积占比分析，结果如图 5所示。从结果中可以看出光伏航拍数据集中大部分为小目标。
表 2 数据集样本统计Table 2. Data set sample statisticsData set Number Category Number of boxes Image Box Train 2553 7668 Cell failure 5894 Dioda failure 1367 Occlude 407 Test 460 1566 Cell failure 1382 Dioda failure 119 Occlude 65 ![]()
图 5 标注实例框（GT）大、中、小目标的内部情况Figure 5. Annotate the inside of large, medium, and small targets in the instance box (GT)3.3 评价指标
本次实验将从平均精度均值（mAP）、参数量（Params）和每秒帧率（FPS）来评价模型的检测性能。为展示模型对中、小目标的检测精度，采用COCO评价指标中的APM、APS来评价模型性能。在计算平均精度均值mAP的过程中，需计算平均精度（AP），代表某类的检测精度，如公式(11)所示，对不同类别的AP取平均值得到mAP，如公式(12)所示：
$$ {\text{AP}} = \int_0^1 {P(R){\text{d}}(R)} $$ (11) $$ {\text{mAP}} = \frac{1}{N}\sum\limits_1^N {A{P_i}} $$ (12) 式中：P表示精确度；R表示查全率；N表示数据集样本类别数量。
APS为标注框面积小于322的AP值，APM为标注框面积大于322小于962的AP值。参数量（Params）表示模型参数量大小，每秒帧率（FPS）表示模型每秒检测图像的数量，用来衡量模型的检测速度，FPS越大表明模型检测速度越快。
3.4 训练参数设置
在训练网络模型时，为保证训练过程中的稳定性，采用原YOLOv7的权重文件进行预训练。输入图像尺寸设置为640×640，训练批次Batchsize设为4，训练轮数epoch设置为400，采用SGD优化器进行梯度下降，初始学习率设为0.01，动量设为0.937，权重衰减系数设为0.0005，并采用余弦退火算法进行学习率调整，训练过程中采用MixUp与Masioc进行数据增强，增强模型的泛化能力。
3.5 消融实验
为验证本文所提改进策略的有效性，通过消融实验来对比分析不同改进策略对于模型检测效果所带来的影响。将原YOLOv7作为基线模型，通过向原YOLOv7模型中逐步加入改进策略进行消融实验，分别选取最优模型在光伏数据集进行验证。本文对损失函数进行了优化，如公式(10)所示，为选取平衡参数λ的最优值，以步长0.2从0.1到0.9进行消融实验。实验结果如表 3所示，表中A表示在原模型中添加CS-ELAN模块，即将颈部网络替换为EPAN网络，B表示将损失函数替换为优化后的损失函数，设置λ为0.1，C~F与B相似，即将损失函数替换为优化后的损失函数，设置λ分别为0.3、0.5、0.7、0.9。不同改进策略的损失函数如图 6所示。
表 3 消融实验结果Table 3. Ablation results% Groups Modules mAP50 mAP50:95 APS APM params/M FPS/(f/s) 1 Baseline 75.1 38.8 32.4 36.4 37.2 120 2 Baseline+A 80.3 40.9 35.5 36.5 35.3 83 3 Baseline+A+B 80.9 40.6 35.8 36.2 35.3 83 4 Baseline+A+C 80.6 40.3 35.6 35.2 35.3 83 5 Baseline+A+D 81.5 42.1 37.4 37.9 35.3 83 6 Baseline+A+E 79.9 40.5 36.1 35.7 35.3 83 7 Baseline+A+F 77.3 39.7 34.1 36.4 35.3 83 从表 3中可以看出，对比实验1与实验2，将原模型中的ELAN模块替换为CS-ELAN模块，即将原颈部网络替换为EPAN网络结构，相比于原模型的mAP50与mAP50:95分别提高了5.2%与2.1%，表明改进是有效的。改进后的模型小目标检测精度APS提高了3.1%，说明引入CS-ELAN模块使模型捕获更多的关键特征信息，摒弃复杂的背景信息，增强特征信息之间交互，从而提高特征表达能力，加强小目标检测能力。从参数量与FPS来看，将颈部网络替换为EPAN网络结构，相比于原模型参数量降低了1.9 M，但由于计算复杂度的增加，FPS降低了37帧，但仍然满足工业实时性的要求。从实验3~实验7可以看出，当平衡参数λ取{0.1，0.3，0.5，0.7，0.9}时，对应的mAP50为{80.9，80.6，81.5，79.9，77.3}，由此得出平衡参数的λ最优值为0.5。从图 6中也可以看出，改进后的损失曲线收敛更快，更加平滑，说明有更好的回归与定位精度。对比实验2与实验5，在实验2的基础上引入改进损失函数，精测精度mAP50与mAP50:95分别提高了1.2%与1.2%，说明改进策略是有效的。对比于APS与APM，检测精度分别提高了1.9%与1.4%，说明改进损失函数可以提高模型对小目标的定位能力，增强回归精度。
为进一步阐述改进策略的有效性，选取了5张不同场景下的光伏红外缺陷图像，利用Grad-CAM[20]算法生成热力图，如图 7所示。从图 7中可以看出，相较于原YOLOv7算法，本文算法在不同场景下具有很好的检测效果，说明本文算法可以具有很好的泛化性。引入两种改进策略之后，热力图高亮区域定位更加准确，能摒弃无用区域信息，使模型更高效关注关键区域，捕获更多关键性特征，从而提高小目标检测的能力。
综上所述，改进后的YOLOv7-EPAN算法与原YOLOv7算法相比，参数规模下降了1.9 M，检测精度（mAP50）提高了6.4%。虽然FPS下降了37帧，但仍然达到了83 f/s，能够满足实时性的要求。
3.6 对比实验
为进一步验证本文所提算法对光伏板缺陷检测的先进性与优越性，更加全面地评估模型的性能，从检测精度、模型大小及检测速度等方面进行评估，并与目前比较流行的算法进行比较。本实验所采用的先进算法为SSD[21]、RetinaNet[22]、YOLOv3[23]、YOLOv4[24]、YOLOv5s、YOLOv5l、TPH-YOLOv5[25]、YOLOX[26]、YOLOv7与YOLOv8，所有算法均在同一实验平台上进行训练，采用相同的训练集与验证集，实验结果如表 4所示。
表 4 不同模型的性能对比Table 4. Performance comparison of different models% Modules AP50 mAP50 APS APM Params/M FPS/(f/s) Cell failure Diode failure Occlude SSD 35.1 87.5 36.2 52.9 19.6 25.6 23.75 16 RetinaNet 57.6 93.4 59.3 70.1 24.3 34.1 32.24 40 YOLOv3 74.7 90.2 64.2 76.3 33.1 31.8 62.6 92 YOLOv4 77.5 92.9 47.6 72.7 30.4 35.2 63.9 97 YOLOv5s 77.2 94.0 58.9 76.7 33.6 30.8 7.02 101 YOLOv5l 77.1 91.8 65.1 78.0 34.7 37.6 46.1 62 YOLOX 79.4 93.7 63.4 78.9 - - 8.94 89 TPH-YOLOv5 76.7 93.3 62.9 77.6 37.1 36.3 45.4 60 YOLOv7 78.7 93.9 52.6 75.1 32.4 36.4 37.2 120 YOLOv8 77.7 93.7 68.3 79.9 33.8 36.7 3.0 200 Ours 79.2 94.9 70.8 81.5 37.4 37.9 35.3 83 从表 4中可以看出，对比同类型的单阶段检测算法，本文所提出的算法在检测精度上达到了81.5%，在检测精度上有着明显的优势。从APS与APM两个评价指标上可以看出，本文所提算法也要优于其他的算法，证明了改进策略的有效性。小目标TPH-YOLOv5算法由于引入了过多的注意力，尽管提高了对小目标的检测能力，但也增加了参数量，降低了检测速度，而本文以较少的参数量在APS与APM指标上达到37.4%与37.9%最优检测精度，并且检测速度也要高于TPH-YOLOv5算法，证明了本文算法兼顾了速度与小目标识别能力。SSD算法由于没有采用多尺度特征融合结构，导致丢失太多缺陷特征信息，其检测效果最差，说明多尺度特征融合可以提高多尺度目标检测能力。相比于原YOLOv7模型，本文算法在各类缺陷检测精度上均有所提升，图 4中的3种缺陷AP值分别提升了0.5%、1.0%、18.2%，其中缺陷“遮挡”的AP值提升较大，这是由于该缺陷尺度变化大，且多为小缺陷目标，证明本文算法具有较强的特征感知与表达能力，能解决多尺度目标检测问题。从检测速度上看，相比较于其它单阶段检测算法，比如YOLOv5、YOLOv8，虽然检测速度有所下降，但mAP50分别提高了4.8与1.6个百分点。从表 4中可以看出，本文算法虽然速度不是最高的，但也达到了83 f/s，能满足实时性的要求。
综上实验结果表明：本文算法在光伏板缺陷的检测精度与检测速度之间有较好的平衡，可以解决光伏数据集中复杂背景下小目标难检测的问题，在提高检测精度的同时也保证了检测的实时性。
3.7 实验结果可视化
为直观地展示本文算法对光伏板缺陷的检测效果，同时定性地分析改进策略的有效性，将本文算法与标准YOLOv7、YOLOv5、TPH-YOLOv5与YOLOv8算法在验证集中的检测结果进行了对比分析，检测结果如图 8所示。
从图 8中可以看出，在第一组图片中，由于缺陷较小，YOLOv7与YOLOv5出现了漏检情况。在第二组图片中，由于缺陷与背景差异不大，YOLOv8与YOLOv7没有检测出全部的缺陷。在第三组图片中，YOLOv7与TPH-YOLOv5出现了误检的情况。在第四组图片中，其他算法均存在漏检与误检现象，如将背景识别成了缺陷目标，且未检测出全部缺陷。在第五组图片中，YOLOv7检测框未能框出全部缺陷，YOLOv5未能检测出全部的缺陷，YOLOv8出现了重叠框，检测精度不高。在这五组图片中，本文算法均未出现漏检与误检现象，能准确识别定位，具有较高的置信度。以上情况表明，本文改进策略一方面可以加强模型提取全局信息与上下文信息的能力，提高特征表达能力，另一方面可以提升定位精度，在一定程度上改善复杂背景下小目标难检测的问题。
4. 结论
本文针对航拍红外光伏图像复杂背景下小目标难检测的问题，提出一种基于YOLOv7-EPAN的检测算法模型，实验结果表明：
1）融合CSWin Transformer的CS-ELAN模块可以捕获全局关键信息，抑制无用背景信息，使模型更高效地关注重点目标区域。
2）以CS-ELAN模块构建的EPAN网络结构可以进一步挖掘该模块的潜力，加强不同尺度特征的信息交互，获取更加丰富的语义特征信息，加强特征表达能力。
3）优化损失函数使模型关注高质量先验框，提高回归精度，加快损失函数的收敛，提高小目标的定位精度。
4）本文算法较YOLOv7算法mAP50提高了6.4%，达到了81.5%的检测精度。定量与定性实验结果表明，相较于其它主流算法，本文算法能更好地识别缺陷，具有更高的预测置信度。
综上所述，本文算法在小幅度降低检测速度的情况下，提高小目标缺陷的检测精度，在一定程度上改善了光伏红外图像复杂背景下小目标缺陷难检测的问题，为光伏智能检测提供了新思路。
-
![]()
图 3 无粉尘环境不同压力相位差重建
Figure 3. Reconstruction of different pressure phase difference in dust-free environment
![]()
图 4 不同粉尘浓度环境下压力35N红外全息图
Figure 4. Pressure 35N infrared hologram under different dust concentration environments
![]()
图 5 不同粉尘浓度环境下压力35 N可见光全息图
Figure 5. Pressure 35 N visible light hologram under different dust concentration environments
![]()
图 6 不同粉尘浓度环境下压力35 N红外相位差重建
Figure 6. Pressure 35 N infrared phase difference reconstruction under different dust concentration environments
-
[1] 郑德香, 张岩, 沈京玲, 等. 数字全息技术的原理和应用[J]. 物理, 2004(11): 843-847. DOI: 10.3321/j.issn:0379-4148.2004.11.011 ZHENG Dexiang, ZHANG Yan, SHEN Jingling, et al. Principle and application of digital holography[J]. Physics, 2004(11): 843-847. DOI: 10.3321/j.issn:0379-4148.2004.11.011
[2] 范美霞, 张永安, 李忠芳. 反射式数字实时全息法对岩石应力场的研究[J]. 激光技术, 2010, 34(4): 502-505. DOI: 10.3969/j.issn.1001-3806.2010.04.019 FAN Meixia, ZHANG Yongan, LI Zhongfang. Application of reflecting real-time digital holography in thermal stress field of rock[J]. Laser Technology, 2010, 34(4): 502-505. DOI: 10.3969/j.issn.1001-3806.2010.04.019
[3] 刘诚, 朱健强. 数字全息形貌测量的基本特性分析[J]. 强激光与粒子束, 2002(3): 328-330. https://www.cnki.com.cn/Article/CJFDTOTAL-QJGY200203002.htm LIU Cheng, ZHU Jianqiang. Basic characters of digital holographic profiling[J]. High Power Laser and Particle Beams, 2002(3): 328-330. https://www.cnki.com.cn/Article/CJFDTOTAL-QJGY200203002.htm
[4] 闫浩, 隆军, 刘驰越, 等. 数字全息技术及散斑干涉技术在形变测量领域的发展及应用[J]. 红外与激光工程, 2019, 48(6): 154-166. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201906011.htm YAN Hao, LONG Jun, LIU Chiyue, et al. Review of the development and application of deformation measurement based on digital holography and digital speckle interferometry[J]. Infrared and Laser Engineering, 2019, 48(6): 154-166. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201906011.htm
[5] GELTRUDE A, LOCATELLI M, POGGI P, et al. Infrared Digital Holography for large objects investigation[C]//Optical Measurement Systems for Industrial Inspection Ⅶ., 2011: 80820C-1-80820C-7.
[6] Pasquale Poggi, Locatelli M, Pugliese E, et al. Remote monitoring of building oscillation modes by means of real-time mid infrared digital holography[J]. Scientific Reports, 2016, 6(1): 3042-3063. https://www.nature.com/articles/srep23688
[7] SD Nicola, P Ferraro, S Grilli, et al. Infrared digital reflective-holographic 3D shape measurements[J]. Optics Communications, 2008, 281(6): 1445-1449. DOI: 10.1016/j.optcom.2007.11.059
[8] Locatelli M, Pugliese E, Paturzo M, et al. Seeing through smoke and flames: a challenge for imaging capabilities, met thanks to digital holography at far infrared[C]//Optical Measurement Systems for Industrial Inspection Ⅷ, 2013, doi: 10.1117/12.2020921.
[9] Locatelli M, Pugliese E, Paturzo M, et al. Imaging live humans through smoke and flames using far-infrared digital holography[J]. Optics Express, 2013, 21(5): 5379-90. DOI: 10.1364/OE.21.005379
[10] Ferrar O, Pietr O. Infrared digital holography as new 3D imaging tool for first responders and firefighters: Recent achievements and perspectives[C]//2014 Conference on Lasers and Electro-Optics, 2014: 1-2.
[11] Bianco V, Paturzo M, Finizio A, et al. Revealing fire survivors hidden behind smoke and flames by IR active imaging systems[C]//2014 International Carnahan Conference on Security Technology (ICCST). IEEE, 2014: 1-3.
[12] Bianco V, Paturzo M, Finizio A, et al. Portable IR laser system for real-time display of alive people in fire scenes[J]. Journal of Display Technology, 2015, 11(10): 834-838. DOI: 10.1109/JDT.2014.2381366
[13] 刘万里. 红外全息检测技术的研究[D]. 昆明: 昆明理工大学, 2019. LIU Wanli. Research on Infrared Holographic Detection Technology[D]. Kunming: Kunming University of Science and Technology, 2019.
[14] 柴金燕, 黄晁, 陈春燕, 等. 透火焰红外数字全息图像的分辨率增强算法[J]. 光电工程, 2019, 46(4): 39-46. https://www.cnki.com.cn/Article/CJFDTOTAL-GDGC201904005.htm CHAI Jinyan, HUANG Chao, CHEN Chunyan, et al. Resolution enhancement algorithm of through flame infrared digital hologram [J]. Optoelectronic Engineering, 2019, 46(4): 39-46. https://www.cnki.com.cn/Article/CJFDTOTAL-GDGC201904005.htm
[15] 杨超. 红外数字全息图像增强关键技术研究[D]. 南京: 南京邮电大学, 2019. YANG Chao. Research on Key Technologies of Infrared Digital Hologram Enhancement[D]. Nanjing: Nanjing University of Posts and Telecommunications, 2019.
[16] 钟杰, 李作友, 刘振清, 等. 测量粒子场的红外激光同轴全息技术[J]. 激光与红外, 2009, 39(11): 1251-1254. DOI: 10.3969/j.issn.1001-5078.2009.11.028 ZHONG Jie, LI Zuoyou, LIU Zhenqing, et al. Infrared laser coaxial holography for particle field measurement [J]. Laser and Infrared, 2009, 39(11): 1251-1254. DOI: 10.3969/j.issn.1001-5078.2009.11.028
[17] 史宁昌, 王迅, 张存林. 红外热波成像技术在文物保护修复中的应用[J]. 中国国家博物馆馆刊, 2017(5): 149-157. https://www.cnki.com.cn/Article/CJFDTOTAL-ZLBK201705018.htm SHI Ningchang, WANG Xun, ZHANG Cunlin. The Application of Infrared Thermal Wave Imaging Technology in Conservation[J]. Journal of Natioal Museum of China, 2017(5): 149-157. https://www.cnki.com.cn/Article/CJFDTOTAL-ZLBK201705018.htm
[18] 张慧慧. 红外热成像无损检测石质文物渗水病害的实验研究[J]. 辽宁省交通高等专科学校学报, 2013, 15(6): 20-22. https://www.cnki.com.cn/Article/CJFDTOTAL-LJTX201306007.htm ZHANG Huihui. The Experimental Study on the Use of Infrared Thermal Imaging for Nondestructive Detection of Deterioration Disease in Stone Relics[J]. Journal of Liaoning Provincial College of Communications, 2013, 15(6): 20-22. https://www.cnki.com.cn/Article/CJFDTOTAL-LJTX201306007.htm
[19] 张延岗. 火灾烟颗粒群多分散与单分散模型及干扰颗粒光散射特性的比较研究[D]. 合肥: 合肥工业大学, 2012: 14-19. ZHANG Yangang. Study on the Characteristics of Light Scattering by Compare Polydisperse with Monodisperse of Fire Smoke Particles, and with Interfering Particles[D]. Hefei: Hefei University of Technology, 2012: 14-19.
[20] 钱晓凡. 信息光学数字实验室[M]. 北京: 科学出版社, 2015: 99-136. QIAN Xiaofan. Information Optics Digital Lab[M]. Beijing: Science Press, 2015: 99-136.
[21] 崔宝. 城市废弃建筑物爆破拆除中的污染防治[J]. 建材技术与应用, 2004(1): 30-31. https://www.cnki.com.cn/Article/CJFDTOTAL-SXJC200401010.htm CUI Bao. Pollution prevention in blasting demolition of urban abandoned buildings[J]. Research and Application of Building Materials, 2004(1): 30-31. https://www.cnki.com.cn/Article/CJFDTOTAL-SXJC200401010.htm
[22] 刘智. 激光烟雾衰减测试系统的研制[D]. 长春: 长春光学精密机械学院, 2001. LIU Zhi. Development of Laser Smoke Attenuation Testing System[D]. Changchun: Changchun Institute of Optics and Fine Mechanics, 2001.
[23] 李丽芳. 大气气溶胶粒子散射对激光大气传输影响的研究[D]. 太原: 中北大学, 2013. LI Lifang. The Study of Atmospheric Aerosol Particles Scattering Impact on Laser Propagation in the Atmosphere[D]. Taiyuan: North University of China, 2013.
[24] 冯继青, 高春清, 刘义东, 等. 激光对于烟雾的穿透特性分析[J]. 光学技术, 2006, 32(6): 883-885. https://www.cnki.com.cn/Article/CJFDTOTAL-GXJS200606022.htm FENG Jiqing, GAO Chunqing, LIU Yidong, et al. Analysis of the characteristic of laser transmitting in smog[J]. Journal of Optical Technology, 2006, 32(6): 883-885. https://www.cnki.com.cn/Article/CJFDTOTAL-GXJS200606022.htm
[25] 江恒. 激光羽烟透过率测试系统[D]. 武汉: 华中科技大学, 2005. JIANG Heng. Transmissivity Testing System of the Plume Penetrated by Laser[D]. Wuhan: Huazhong University of Science and Technology, 2005.
[26] 朱金华, 夏军, 梁钱福, 等. 建筑物爆破粉尘控制[J]. 采矿技术, 2009, 9(5): 125-126. https://www.cnki.com.cn/Article/CJFDTOTAL-SJCK200905047.htm ZHU Jinhua, XIA Jun, LIANG Qianfu, et al. Building blasting dust control[J]. Journal of Mining Technology, 2009, 9(5): 125-126. https://www.cnki.com.cn/Article/CJFDTOTAL-SJCK200905047.htm
-
期刊类型引用(3)
1. 邹麒，牛硕，刘帅，徐强. 智能集成式轻小型落地抱杆的液压绞磨自动化控制. 自动化与仪表. 2024(06): 120-123 . 
百度学术
2. 范立，杨荣军，孙美芸，郭晓博，张斌，张有会. 全自动喷光油设备的研制. 今日制造与升级. 2024(05): 26-28 . 百度学术
3. 王昱棠，田大鹏. 航空光电成像像移与像旋运动补偿控制技术综述. 光学精密工程. 2022(24): 3128-3138 . 百度学术
其他类型引用(3)
下载:
计量
- 文章访问数:
- HTML全文浏览量:
- PDF下载量:
- 被引次数: 6
