Deep Residual UNet Network-based Infrared Image Segmentation Method for Electrical Equipment
-
摘要: 红外图像处理是实现电气故障诊断的有效手段,而电气设备分割是故障检测的关键环节。针对复杂背景下红外图像电气设备分割难问题,本文采用深度残差网络与UNet网络相结合,深度残差网络替代VGG16对UNet网络进行特征提取和编码,构建深度残差系列Res-Unet网络实现对电气设备的分割。以电流互感器和断路器两种电气设备红外图像分割为例测试Res-Unet网络分割效果,并与传统的UNet网络和Deeplabv3+网络进行对比。通过对数量为876的样本进行测试,实验结果表明,Res18-UNet能够准确地分割电气设备,对电流互感器和断路器的分割准确率超93%,平均交并比大于89%,且分割准确性优于UNet及Deeplabv3+网络模型,为实现电气故障智能诊断奠定基础。Abstract: Infrared thermal image processing is an effective method for detecting defects in electrical equipment. Aiming at the problem of electrical equipment segmentation in infrared thermal images with a complex background, in this study we propose a deep residual UNet network for infrared thermal image segmentation. Using a deep residual network to replace VGG16 to perform feature extraction and coding for the UNet network, a deep residual series UNET network was constructed to segment electrical equipment. To validate the effectiveness of the Res-UNet network, infrared images, including current transformers and circuit breakers, were used to test the segmentation results and were compared with the traditional UNet and Deeplabv3+ networks. The networks were tested using 876 images. The experimental results show that RES18-UNET can accurately segment electrical equipment; the segmentation precision of current transformers and circuit breakers is greater than 93%, and the mean intersection over union (MIoU) is greater than 89%. Our method obtains more accurate segmentation results than UNet and Deeplabv3+, setting the basis for intelligent diagnosis of electrical faults.
-
Keywords:
- infrared image /
- electrical fault diagnosis /
- image segmentation /
- UNet
-
0. 引言
红外成像技术根据辐射原理得到红外图像,像素亮度表征了物体表面的温度。由于具有隐蔽性好、可全天候工作、可穿透烟雾等优良特性,红外成像技术在军用和民用领域都得到了广泛应用。受制于红外图像的成像机理、成像系统特性和各种外界噪声的影响,红外图像通常具有分辨率低、对比度差和边缘模糊等特点。
边缘特征在红外图像处理中极为重要,是目标检测、跟踪和识别的基础。为满足人们对红外图像进一步分析和识别的需求,红外图像边缘检测技术体现出了较大难度和重要意义。相比于可见光图像边缘检测,红外图像边缘检测发展较晚,相关研究也较少,且大多都是根据可见光图像边缘检测方法改进而来,而红外图像与可见光图像的边缘检测任务存在很大不同,相比于可见光图像,红外图像的特点主要有:无立体感、空间分辨率低、对比度低和边缘模糊、非均匀性、信噪比低,等等。
近十年来,一些研究者针对红外图像边缘检测问题提出了解决方法,如基于边缘检测算子改进的方法[1-4]、基于蚁群算法的方法[5-6]、基于数学形态学的方法[7-8],这些方法的本质都是只考虑红外图像局部的急剧变化,尤其是亮度、梯度的变化,以此来检测边缘,但这些低层次特征难以反映较为复杂的场景。因此,虽然这些算法取得了较大的发展,却始终存在一定限制,而打破这一限制的重要方向就是加入高层次的语义信息。
近年来,随着深度学习技术的快速发展,大量研究[9-14]表明,卷积神经网络(Convolutional Neural Network,CNN)具有强大的分层特征学习能力,并在自然图像边缘检测中超过了人类视觉水平[11-14]。因此,有研究者开始尝试将深度CNN应用到红外图像边缘检测中。文献[15]将改进的HED(Holistically-Nested Edge Detection)[10]网络与匹配滤波对红外图像处理的结果进行融合以提取边缘,但该方法处理较为复杂,没有发挥出深度CNN端到端的优势,且受限于HED网络的性能,检测效果不太理想。
将深度学习技术应用于红外图像边缘检测也面临着较大的问题。在自然图像边缘检测任务中,我们可以利用多个公开数据集训练和评估模型[16-21],但目前暂时没有可以用于红外图像边缘检测的公开数据集。
总的来说,相比于自然图像,红外图像的诸多缺点大大增加了边缘检测任务的难度,无数据集可用的现状使得任务更加艰巨。为此,本文提出了一种基于深度学习的红外图像边缘检测算法,在DexiNed[14]的基础上,缩减了网络规模,并在损失函数中引入了图像级的差异,精心设计了函数参数,进而优化了网络性能。此外,还通过调整可见光图像边缘检测数据集来近似模拟红外图像边缘检测数据集,对改进后的模型进行训练,进一步提高了网络对红外图像中边缘信息的提取能力。
1. 边缘检测方法
本文主要涉及红外图像边缘检测方法和基于深度学习的图像边缘检测方法,下面分别对其进行简要介绍。
1.1 红外图像边缘检测方法
作为图像边缘检测领域的一个分支,有关红外图像的边缘检测方法研究较少,绝大多数都是基于传统的可见光图像边缘检测技术改进而来,根据图像的低层次特征提取边缘信息。这些方法主要可分为3类:一是基于边缘检测算子改进的方法[1-4],大多是结合各种去噪技术对图像进行预处理,然后采用边缘检测算子提取边缘,最后结合边缘连接等图像后处理技术优化结果,此类方法结构简单、处理速度快,但处理结果往往不符合人眼视觉,较为生硬;二是基于蚁群算法的方法[5-6],通过蚁群搜索最优路径的方式寻找边缘区域,具有较强的鲁棒性、优良的分布式计算和一定的抗干扰能力,然而,受制于蚁群算法本身计算量大、收敛速度慢、易过早陷入局部最优和参数设置带有明显经验性的特点,此类算法在处理效率和自适应性上还有待于后续研究的不断改进;三是基于数学形态学的方法[7-8],需要针对具体问题,精心设计结构元素和运算方法,以在抑噪和检测精度之间达到良好的平衡。
1.2 基于深度学习的图像边缘检测
近年来,CNN得到了快速发展和广泛应用,得益于其强大的特征提取能力,CNN在图像边缘检测领域表现出了优异的性能。图 1对比展示了传统的和基于深度学习的图像边缘检测算法用于红外图像的边缘提取结果。
图 1 几种图像边缘检测方法提取红外图像边缘的效果对比:(a)红外图像(来源于FLIR红外数据集);(b)Canny算子的边缘检测结果;(c)BDCN[12]的边缘检测结果;(d)本文方法的边缘检测结果Figure 1. Comparison of several image edge detection methods to extract infrared image edge: (a) is an example infrared image from FLIR Thermal Dataset (www.flir.com); (b) is the result of the Canny edge detector; (c) is the result of BDCN[12]; (d) is the result of our methodDeepEdge[9]提取边缘候选点周围的多个图像块,并将这些图像块输入多尺度CNN以确定其是否为边缘像素。HED[10],即Holistically-Nested Edge Detection,Holistically表示该算法试图训练一个端到端的网络,Nested则强调在生成的输出过程中通过不断地集成和学习得到更精确的边缘预测图的过程。RCF[11](Richer Convolutional Features)提出了一种基于丰富卷积特征的精确边缘检测算法。BDCN[12](Bi-Directional Cascade Network)提出了一种双向级联网络结构,在该结构中,单个层由其特定尺度上的标记边进行监督,而不是直接对不同的层应用相同的监督。LPCB[13](Learning to Predict Crisp Boundaries)提出了一种新的边缘检测方法,该方法能有效地对不平衡数据进行分类,并使网络能够产生清晰的边界。DexiNed[14]可以生成适于人眼视觉的细化边缘图像,并且无需事先训练或微调,就可以在任意边缘检测任务中使用。以上网络几乎都采用VGG[22](Visual Geometry Group)作为其主干。
2. 本文方法
本文采用了基于深度学习的红外图像边缘检测方法,选用了目前自然图像边缘检测领域性能最好的网络模型,并在此基础上进行了相应优化,精心构造了损失函数,并制作了近似的红外图像边缘检测数据集以微调网络,进一步提升了神经网络提取红外图像边缘信息的性能。
2.1 网络结构
选用DexiNed[14]作为红外图像边缘检测网络结构的基础并加以改进。作为目前最先进的边缘检测网络模型之一,文献[14]声称其不需要事先训练和微调就能直接用于任意边缘检测任务。
DexiNed的结构如图 2所示,它由6个主块组成,每个主块输出特征映射,使用一个上采样块生成中间边缘映射。所有由上采样块产生的边缘映射被连接起来,以馈送网络末端的学习滤波器堆栈,并产生融合的边缘映射。DexiNed具有优异性能的原因主要在于其具有密集的网络层和层与层之间有效的联接。此外,上采样块也起着重要的作用,它由条件叠加子块组成。每个子块有两层,即卷积层和反卷积层。本文也尝试使用其他更为简单的上采样方法,例如双线性采样和depth-to-space(由Tensorflow提供),发现其效果远不如该上采样块。
图 2 DexiNed网络结构和精简后的网络(位于虚线框中)Figure 2. Network architecture of DexiNed[14] and simplified one(in dotted box)然而,DexiNed在拥有良好的性能的同时也牺牲了模型的容量,它包含了35.2M可训练参数,相较于BDCN为16.3M,RCF为14.8M,其规模显得较为庞大。DexiNed网络具有6个主块,其预测结果为6个主块输出结果的融合或平均。在训练和测试时,总是发现其第五和第六个主块的输出结果非常相似。据此猜想,第六个主块输出的有无对最终融合结果的影响并不是决定性的(验证见3.2节)。因此,为精简网络结构、减小网络容量,只保留了5个主块,将参数减少至30.4M,相比于原网络容量缩减了13.6%,改进后的网络结构如图 2的虚线框中所示。
2.2 损失函数
在其他条件不变的情况下,网络的精简或多或少都会造成其性能的下降。而在训练过程中,损失函数是最为重要的环节之一,因此,本文对DexiNed[14]原有的损失函数进行了改进。
DexiNed[14]使用的损失函数为加权交叉熵损失(weighted cross-entropy loss),它是每个对应像素对之间的预测和真值的差异的加权总和,主要显示了像素级的差异。为了获得更好的性能,在损失函数中引入了图像级的差异,与LPCB[13]相同,使用Dice系数来度量预测P和真值G之间的差异。
Dice系数是一种集合相似度的度量函数,通常用于计算两个样本的相似度。采用Dice系数计算的损失为:
$${L_{\rm{d}}}\left( {P,G} \right) = \frac{{\sum\limits_i^N {p_i^2} {\rm{ + }}\sum\limits_i^N {g_i^2} }}{{2\sum\limits_i^N {{p_i}{g_i}} }}$$ (1) 式中:pi和gi分别表示预测P和真值G中的第i个像素值。
最终的损失函数为交叉熵损失(cross-entropy loss)和Dice损失的结合:
$$ \mathit{L}(\mathit{P},\mathit{G}) = \mathit{\alpha }{\mathit{L}_\mathit{d}}(\mathit{P},\mathit{G}) + \mathit{\beta }{\mathit{L}_\mathit{c}}(\mathit{P},\mathit{G}) $$ (2) 式中:${L_{\rm{c}}}\left( {P,G} \right) = - \sum\limits_j^N {\left( {{g_j}\log {p_j} + \left( {1 - {g_j}} \right)\left( {1 - \log {p_j}} \right)} \right)} $。这里没有采用加权交叉熵损失,因为实验表明采用该损失函数未能改善训练效果。
另外,有一个细节需要说明:在计算交叉熵损失时,将网络第五个主块输出结果的交叉熵损失乘以2,以近似表示叠加原网络第六个主块的交叉熵损失,这样做有效地改善了精简后网络的训练效果(分别训练1个epoch后,相比于去掉第六个主块而不改变损失函数的网络,仅将损失函数中的第五个主块的损失乘以2,就能将loss降低21.4%、accuracy提升2.5%)。
2.3 模拟红外图像边缘检测数据集
在前文中,已对红外图像边缘检测的难点进行了分析,红外图像与自然图像存在的显著区别,意味着红外图像边缘检测任务的难度要远大于自然图像。考虑到目前没有公开的红外图像边缘检测数据集,本文认为有必要建立红外图像边缘检测数据集,进一步地训练网络,提升其对于红外图像的边缘提取能力。
利用现有的自然图像边缘检测数据集,可以在自然图像的基础上模拟相应的红外图像,以此来建立近似的红外图像边缘检测数据集。要想通过自然图像较为准确的模拟红外图像,则必须在原始景物红外辐射分布的基础上,从时间、空间、光谱和辐射量等方面进行[23],这并非本文研究的重点,且实现起来比较复杂。
针对红外图像的特点,提出了一种较为简单的方法来近似模拟红外成像的视觉效果:首先将自然图像灰度化,然后降低对比度,接着添加高斯噪声,最后得到近似模拟的红外图像,如图 3所示。结合这种方法,基于BIPED[14]数据集建立了近似的红外图像边缘检测数据集。BIPED[14]数据集包含了250幅分辨率为1280×720的户外图像,通过裁剪、旋转、翻转等操作,得到增强后的数据集,再通过图 3方法进行处理,最终得到的模拟红外图像边缘检测数据集中包含72000个模拟红外图像与边缘真值图像对,称该数据集为IR-BIPED。
3. 实验
3.1 与DexiNed的性能对比
首先,需要知道本文所做的一系列工作,相比于其基础——DexiNed,是否在提取红外图像边缘的效果上获得了提升。
前文中提到,文献[14]声称DexiNed不需要事先训练和微调就能直接用于任意边缘检测任务。因此,先将[14]中训练好的DexiNed(在BIPED数据集上训练了24个轮次)直接用于红外图像边缘检测,得到结果1。在本文方法中,将改进后的模型加载训练好的DexiNed部分权重后,在IR-BIPED数据集上继续训练3个轮次,测试得到结果2。公平起见,同样将训练好的DexiNed继续在IR-BIPED数据集上微调3个轮次,测试得到结果3。测试结果1~3对比如图 4所示,其中的红外图像来源于FLIR红外数据集。
由图 4可见,3个结果比较相似,但结果2提取得到的红外图像边缘最为清晰、细节最为丰富。根据结果2,我们能够清楚地分辨各景物,总体来说其视觉效果最好。这里需要强调,本文方法中使用的网络容量较DexiNed缩减了13.6%,这意味着本文方法较DexiNed使用更少的资源,却取得了更好的红外图像边缘检测效果。
此外,将结果3与结果1对比,可见经过3个轮次的微调后,DexiNed提取的红外图像边缘明显更细,这也反映出IR-BIPED数据集对提升红外图像边缘检测效果起到了一定的作用,下节将进一步研究该数据集的影响。
3.2 消融实验
下面通过实验来验证本文方法各组成部分的有效性。
在3.1节中,已经验证本文方法相对于DexiNed[14]的改进既减小了网络容量,又改善了红外图像的边缘检测效果。在本节中,将分别研究网络容量的缩减、损失函数的设计和模拟红外数据集各带来了怎样的影响。
网络容量的缩减。通过去除DexiNed[14]网络的最后一个主块来精简网络,将网络容量缩减了13.6%。显然,在此过程中损失了部分边缘信息。为了量化容量缩减给边缘检测性能带来的影响,将基础网络(baseline)和精简后的网络(simplified)在相同条件下各自从头开始训练3个轮次,发现两者的边缘检测准确度变化如表 1所示。由此可见,经过3个轮次的训练后,精简后的网络与原网络准确度差别不大,甚至有轻微程度的提升。
表 1 网络准确度对比1Table 1. Comparison of network accuracy-1Baseline Simplified epoch 1 0.8991782 0.8991683 epoch 2 0.8993612 0.8995107 epoch 3 0.8993013 0.8994964 精心设计的损失函数。网络结构的精简势必会造成部分信息的损失,自然地,我们想到通过改进损失函数来提升性能。在精简后的网络模型中应用3.2节所述的损失函数后,同样将原网络和精简后的网络在相同条件下各自训练3个轮次,发现两者的准确度变化如表 2所示。由此可见,精心设计的损失函数有效地改善了网络的性能,相比于原网络,精简后网络的准确度提高了约2.6%,利用更少资源达到了更好的效果。
表 2 网络准确度对比2Table 2. Comparison of network accuracy-2Baseline Simplified+designed loss epoch 1 0.8991875 0.9012373 epoch 2 0.8991702 0.9105164 epoch 3 0.8992519 0.9097796 模拟红外图像边缘检测数据集。为了检验模拟红外图像边缘检测数据集——IR-BIPED是否对提升网络提取红外图像边缘的性能有所助益,测试了在IR-BIPED数据集上训练前后的改进网络,图 5展示了测试结果。其中的红外图像来源于OSU红外数据集[24]。该数据集中的红外图像背景对比度低、边缘模糊,选用这些图像进行测试,能够让结果对比更鲜明。由图 5可见,训练后网络的边缘提取结果明显更加清晰,显然,IR-BIPED数据集提升了模型的抗噪性能和对红外图像的适应性。
3.3 对比评价
我们选择了文献[3]、[5]、[11]、[12]中的方法与本文方法进行对比,并进行了定性和定量评价。
3.3.1 定性结果
前述几种算法的红外图像边缘检测结果如图 6所示,测试红外图像来源于Terravic Motion红外数据集,FLIR红外数据集和OSU红外数据集[24]。由图可见,文献[3]检测出的边缘较细、定位较准确,但受噪声影响较大,整体观感较生硬;文献[5]受噪声影响较小,但检测出的边缘不连续、定位精度低;文献[11]和文献[12]提取的边缘连续、细节较为丰富,但边缘较粗、观感较差,文献[12]的效果优于文献[11];本文方法定位精度高,检出的边缘较细,且具有较好的连续性,细节丰富、清晰,人眼观感良好。总体来说,本文方法的边缘检测效果最好。
3.3.2 定量结果
由于缺少用于评价红外图像边缘检测效果的标准数据集,这里采用了SSIM[25]和FSIM[26]两个指标来定量评价红外图像的边缘检测效果。
SSIM是一种符合人眼视觉系统特性的图像质量客观评判标准,其具体形式为:
$${\rm{SSIM}}\left( {x,y} \right) = \frac{{\left( {2{\mu _x}{\mu _y} + {C_1}} \right)\left( {2{\sigma _{xy}} + {C_2}} \right)}}{{\left( {\mu _x^2 + \mu _y^2 + {C_1}} \right)\left( {\sigma _x^2 + \sigma _y^2 + {C_2}} \right)}}$$ (3) 式中:x表示原图;y表示边缘图像;μx和μy分别表示对应图像的均值;σx和σy分别表示对应图像的方差;σxy表示x和y的协方差。SSIM衡量了两幅图像的相似度,其取值范围为[0, 1],其值越大表示边缘检测效果越好。
FSIM映射特征并测量两个图像之间的相似性。因为人类视觉系统(human visual system,HVS)是基于一些低层次特征来感知图像的,而相位一致性特征(phase congruency, PC)可以很好地刻画局部结构。同时由于PC对于图像的变化具有相对不变性,这有利于提取图像中稳定的特征,但是有时图像的变化确实会影响观感,所以需要使用梯度幅值(gradient magnitude,GM)来弥补。FSIM中使用了PC和GM两个特征互为补充。FSIM的计算较为繁琐,这里不再列出。FSIM值越大表示边缘检测效果越好。
图 7~10展示了图像1~4边缘检测效果的定量结果。由图可见,仅在图 7中,本文方法的SSIM和FSIM值略低于文献[5]的方法,其余表现均明显优于其他方法。此外,综合来看,文献[11]和文献[12]的表现优于文献[3]和文献[5],这也在一定程度上表明了基于深度学习的方法相对于传统方法的优越性。
4. 总结
本文研究了现有的各类红外图像边缘检测方法,并分析了红外图像边缘检测的难点和挑战,提出了一种基于深度学习的红外图像边缘检测方法,在DexiNed的基础上,对网络结构和损失函数进行改进,缩减了网络规模、优化了网络性能;此外,还通过调整自然图像边缘检测数据集来近似模拟红外图像边缘检测数据集进行训练,进一步提高了网络对红外图像中边缘信息的提取能力。通过实验,我们验证了本文对于DexiNed所做的一系列改进的有效性,并证明了本文方法相比于其他方法的优越性。
为将本文方法应用到实际生产和生活中,后续将研究算法的嵌入式实现,提升计算效率,以实现实时的红外图像边缘检测。
-
表 1 不同分割方法得到的MIOU值
Table 1 The MIOU values based on different segmentation methods
表 2 测试数据集的准确率
Table 2 The accuracy of the test dataset
network Segmentation object IoU MIoU Precision Deeplabv3+ Current transformer 0.79 0.8011 0.90 Circuit breaker 0.67 0.84 Background 0.95 0.97 UNet Current transformer 0.8023 0.8272 0.9150 Circuit breaker 0.7179 0.8960 Background 0.9615 0.9805 Res18-UNet Current transformer 0.8623 0.8963 0.9470 Circuit breaker 0.8579 0.9347 Background 0.9686 0.9907 Res34-UNet Current transformer 0.6306 0.7139 0.7110 Circuit breaker 0.6064 0.7396 Background 0.9047 0.9872 Res50-UNet Current transformer 0.4747 0.5906 0.5174 Circuit breaker 0.4249 0.3700 Background 0.8722 0.9689 -
[1] 康龙. 基于红外图像处理的变电站设备故障诊断[D]. 北京: 华北电力大学, 2016. KANG Long. Substation Equipment Fault Diagnosis Based on Infrared Image[D]. Beijing: North China Electric Power University, 2016.
[2] 曾亮. 基于红外图像的变电站设备故障精准定位方法的研究[D]. 重庆: 重庆理工大学, 2019. ZENG Liang. Research on Precise Fault Location Method of Substation Equipment Based on Infrared Image[D]. Chongqing: Chongqing University of Technology, 2019.
[3] ZOU H, HUANG F. A novel intelligent fault diagnosis method for electrical equipment using infrared thermography[J]. Infrared Physics & Technology, 2015, 73: 29-35.
[4] 周建国, 雷民, 杨褚明, 等. 带电设备红外诊断应用规范: DL/T 664-2008. [S]. 国家能源局, [2016-12-05]. ZHOU Jianguo, LEI Min, YANG Chuming, et al. Application Specification for Infrared Diagnosis of Live Equipment[S]. National Energy Administration, [2016-12-05].
[5] 许志浩, 郑诗泉, 康兵, 等. 基于三相自搜寻比较法的电气设备过热故障识别方法[J]. 红外技术, 2021, 43(11): 1112-1118. http://hwjs.nvir.cn/article/id/35d8419e-d42a-4472-bc86-a4292e5976a4 XU Zhihao, ZHENG Shiquan, KANG Bing, et al. Overheat fault identification method for electrical equipment based on three-phase self-searching comparison method[J]. Infrared Technology, 2021, 43(11): 1112-1118. http://hwjs.nvir.cn/article/id/35d8419e-d42a-4472-bc86-a4292e5976a4
[6] Rahmani A, Haddadnia J, SeryasatO. Intelligent fault detection of electrical equipment in ground substations using thermo vision technique[C]//2010 2nd International Conference on Mechanical and Electronics Engineering, 2010: V2-150-V2-154.
[7] LIN K C, LAI C S. Fault recognition system of electrical components in scrubber using infrared images[C]//International Conference on Knowledge-Based and Intelligent Information and Engineering Systems, 2003: 1303-1310.
[8] 王晶, 姚邹静, 赵春晖. 基于红外图像时空特征的电力设备故障诊断[J]. 控制工程, 2021, 28(8): 1683-1690. https://www.cnki.com.cn/Article/CJFDTOTAL-JZDF202108025.htm WANG Jing, YAO Zoujing, ZHAO Chunhui. A fault diagnosis method for power equipment based on spatiotemporal features of infrared images[J]. Control Engineering of China, 2021, 28(8): 1683-1690. https://www.cnki.com.cn/Article/CJFDTOTAL-JZDF202108025.htm
[9] 李文璞, 谢可, 廖逍, 等. 基于Faster RCNN变电设备红外图像缺陷识别方法[J]. 南方电网技术, 2019, 13(12): 79-84. https://www.cnki.com.cn/Article/CJFDTOTAL-NFDW201912012.htm LI Wenpu, XIE Ke, LIAO Xiao, et al. Intelligent diagnosis method of infrared image for transformer equipment based on improved faster RCNN[J]. Southern Power System Technology, 2019, 13(12): 79-84. https://www.cnki.com.cn/Article/CJFDTOTAL-NFDW201912012.htm
[10] 王旭红, 李浩, 樊绍胜, 等. 基于改进SSD的电力设备红外图像异常自动检测方法[J]. 电工技术学报, 2020, 35(S1): 302-310. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS2020S1034.htm WANG Xuhong, LI Hao, FAN Shaosheng, et al. Infrared image anomaly automatic detection method for power equipment based on improved single shot multi box detection[J]. Transactions of China Electrotechnical Society, 2020, 35(S1): 302-310. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS2020S1034.htm
[11] 郑含博, 李金恒, 刘洋, 等. 基于改进YOLOv3的电力设备红外目标检测模型[J]. 电工技术学报, 2021, 36(7): 1389-1398. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS202107009.htm ZHENG Hanbo, LI Jinheng, LIU Yang, et al. Infrared object detection model for power equipment based on improved YOLOv3[J]. Transactions of China Electrotechnical Society, 2021, 36(7): 1389-1398. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS202107009.htm
[12] 黄新宇, 张洋, 王黎明, 等. 基于Mask-RCNN算法的复合绝缘子串红外图像分割与温度读取[J]. 高压电器, 2021, 57(9): 87-94. https://www.cnki.com.cn/Article/CJFDTOTAL-GYDQ202109012.htm HUANG Xinyu, ZHANG Yang, WANG Liming, et al. Infrared image segmentation and temperature reading of composite insulator strings based on mask⁃RCNN algorithm[J]. High Voltage Apparatus, 2021, 57(9): 87-94. https://www.cnki.com.cn/Article/CJFDTOTAL-GYDQ202109012.htm
[13] 李文璞, 毛颖科, 廖逍, 等. 基于旋转目标检测的变电设备红外图像电压致热型缺陷智能诊断方法[J]. 高电压技术, 2021, 47(9): 3246-3253. https://www.cnki.com.cn/Article/CJFDTOTAL-GDYJ202109022.htm LI Wenpu, MAO Yingke, LIAO Xiao, et al. Intelligent diagnosis method of infrared image for substation equipment voltage type thermal defects based on rotating target detection [J]. High Voltage Apparatus, 2021, 47(9): 3246-3253. https://www.cnki.com.cn/Article/CJFDTOTAL-GDYJ202109022.htm
[14] 刘云鹏, 张喆, 裴少通, 等. 基于深度学习的红外图像中劣化绝缘子片的分割方法[J]. 电测与仪表, 2022, 59(9): 63-68. https://www.cnki.com.cn/Article/CJFDTOTAL-DCYQ202209009.htm LIU Yunpeng, ZHANG Zhe, PEI Shaotong, et al. Faulty insulator segmentation method in infrared image based on deep learning[J]. Electrical Measurement & Instrumentation, 2022, 59(9): 63-68. https://www.cnki.com.cn/Article/CJFDTOTAL-DCYQ202209009.htm
[15] 袁刚, 许志浩, 康兵, 等. 基于DeepLabv3+网络的电流互感器红外图像分割方法[J]. 红外技术, 2021, 43(11): 1127-1134. http://hwjs.nvir.cn/article/id/b9df2f53-2244-471b-b0ec-42159cfaa654 YUAN Gang, XU Zhihao, KANG Bing, et al. Deep Labv3+ network-based infrared image segmentation method for current transformer[J]. Infrared Technology, 2021, 43(11): 1127-1134. http://hwjs.nvir.cn/article/id/b9df2f53-2244-471b-b0ec-42159cfaa654
[16] 谷世举, 卜雄洙, 靳建伟, 等. 基于改进Unet网络的炮口火焰分割方法[J]. 国外电子测量技术, 2021, 40(4): 16-21. https://www.cnki.com.cn/Article/CJFDTOTAL-GWCL202104006.htm GU Shiju, BU Xingzhu, JIN Jianwei, et al. Muzzle flame segmentation method based on improved Unet network[J]. Foreign Electronic Measurement Technology, 2021, 40(4): 16-21. https://www.cnki.com.cn/Article/CJFDTOTAL-GWCL202104006.htm
[17] CHEN Z, ZHU H. Visual quality evaluation for semantic segmentation: subjective assessment database and objective assessment measure[J]. IEEE Transactions on Image Processing, 2019, 28(12): 5785-5796.
-
期刊类型引用(9)
1. 田文豪,汪繁荣,乔一航. 基于VMF-UNet的液基细胞制染机缺陷图像分割. 现代电子技术. 2025(05): 36-42 . 百度学术
2. 郑铁华,王飞,赵格兰,杜春晖. 基于单分类支持向量机的煤矿防爆电气设备振动故障自动检测. 工矿自动化. 2025(02): 106-112 . 百度学术
3. 刘慧慧,裴庆庆. 改进U-Net网络的多视觉图像特征张量分割仿真. 计算机仿真. 2024(03): 237-241 . 百度学术
4. 于晓,姜晨慧. 基于深度学习的重叠红外刑侦目标提取算法研究. 黑龙江工业学院学报(综合版). 2024(02): 85-93 . 百度学术
5. 林颖,张峰达,李壮壮,郑文杰,戈宁. 基于大模型的红外图像电力设备交互式分割. 网络新媒体技术. 2024(02): 53-60+67 . 百度学术
6. 张宇,袁小翠,许志浩,康兵. 复杂背景下断路器红外图形精确分割方法. 江西电力. 2024(03): 1-7 . 百度学术
7. 严如强,周峥,杨远贵,李亚松,胡晨烨,陶治宇,赵志斌,王诗彬,陈雪峰. 可解释人工智能在工业智能诊断中的挑战和机遇:归因解释. 机械工程学报. 2024(12): 21-40 . 百度学术
8. 龚律凯,彭伊丽,陈绪兵,韩桂荣,李慧怡. 基于改进U-Net算法的焊缝特征识别研究. 现代制造工程. 2024(11): 18-25 . 百度学术
9. 林颖,张峰达,李壮壮,孙艺玮,于文牮. 基于交互式分割的电力设备红外图像自动标注方法. 山东电力技术. 2023(12): 20-25+44 . 百度学术
其他类型引用(10)