EnFCM Clustering Segmentation Method for Infrared Image of Electrical Equipments Based on Fusion Reconstruction
-
摘要: 红外图像分割是电气设备红外故障诊断的关键环节，而电气设备的不均匀散热、较低的对比度与多源噪声的干扰，会导致目标区域过分割，严重影响分割精度。对此本文提出一种基于融合重构的EnFCM（Enhanced Fuzzy C-Means）聚类电气设备红外图像分割方法。首先对梯度图像进行自适应形态学重建操作，保证算法对噪声图像的分割能力；其次对图像进行显著性检测，将显著图与梯度图融合得到重构后的图像，凸显故障部位的特征，避免过分割；然后对重构后的图像进行分水岭分割获取超像素图像，最后对超像素图像直方图聚类得到分割结果。对电气设备红外图像的实验结果表明：本文算法在电气设备红外图像上能准确分割出故障区域，获取其位置与轮廓，有效改善了过分割现象，在选取的交并比与DICE系数指标对比中，本文方法对比选取的FRFCM、FCM、SFFCM、FCM_SICM、RSSFCA、AFCF平均提升了81%与79%；同时对噪声有较强的鲁棒性，在选取的分割准确率指标对比中，本文方法对比选取的FRFCM、FCM、SFFCM、FCM_SICM、RSSFCA、AFCF平均提升了73%，取得了较优的分割效果。Abstract: Infrared image segmentation plays a pivotal role in diagnosing faults in electrical equipment using infrared imagery. However, uneven heat dissipation, lower contrast, and interference from multiple sources of noise in electrical equipment can lead to over-segmentation of the target region, seriously affecting segmentation accuracy. In this study, we propose an Enhanced Fuzzy C-Means (EnFCM) clustering method based on fusion reconstruction for infrared image segmentation of electrical equipment. First, the gradient image was subjected to an adaptive morphological reconstruction operation to ensure the segmentation ability of the algorithm on noisy images; second, the image was tested for saliency, and the reconstructed image was obtained by fusing the saliency map with the gradient map to highlight the features of the fault site and avoid over-segmentation; then, watershed segmentation was performed on the reconstructed image to obtain the super-pixel image; finally, the histogram clustering of the super-pixel image was obtained by segmentation. The experimental results on the infrared image of electrical equipment show that the algorithm in this paper can accurately segment the fault area on it, obtain its location and contour, and effectively improve the phenomenon of over-segmentation and in the comparison of the selected intersection and concatenation ratio and DICE coefficient indexes, this paper's method improves 81% and 79% on average compared to selected FRFCM, FCM, SFFCM, FCM_SICM, RSSFCA, and AFCF; meanwhile, it is extremely robust to noise, and in the comparison of selected segmentation accuracy indexes, this paper's method achieves segmentation results that are on average 73% superior compared to selected FRFCM, FCM, SFFCM, FCM_SICM, RSSFCA, and AFCF, thus, superior segmentation results were achieved.
-
0. 引言
红外成像技术根据辐射原理得到红外图像，像素亮度表征了物体表面的温度。由于具有隐蔽性好、可全天候工作、可穿透烟雾等优良特性，红外成像技术在军用和民用领域都得到了广泛应用。受制于红外图像的成像机理、成像系统特性和各种外界噪声的影响，红外图像通常具有分辨率低、对比度差和边缘模糊等特点。
边缘特征在红外图像处理中极为重要，是目标检测、跟踪和识别的基础。为满足人们对红外图像进一步分析和识别的需求，红外图像边缘检测技术体现出了较大难度和重要意义。相比于可见光图像边缘检测，红外图像边缘检测发展较晚，相关研究也较少，且大多都是根据可见光图像边缘检测方法改进而来，而红外图像与可见光图像的边缘检测任务存在很大不同，相比于可见光图像，红外图像的特点主要有：无立体感、空间分辨率低、对比度低和边缘模糊、非均匀性、信噪比低，等等。
近十年来，一些研究者针对红外图像边缘检测问题提出了解决方法，如基于边缘检测算子改进的方法[1-4]、基于蚁群算法的方法[5-6]、基于数学形态学的方法[7-8]，这些方法的本质都是只考虑红外图像局部的急剧变化，尤其是亮度、梯度的变化，以此来检测边缘，但这些低层次特征难以反映较为复杂的场景。因此，虽然这些算法取得了较大的发展，却始终存在一定限制，而打破这一限制的重要方向就是加入高层次的语义信息。
近年来，随着深度学习技术的快速发展，大量研究[9-14]表明，卷积神经网络（Convolutional Neural Network，CNN）具有强大的分层特征学习能力，并在自然图像边缘检测中超过了人类视觉水平[11-14]。因此，有研究者开始尝试将深度CNN应用到红外图像边缘检测中。文献[15]将改进的HED（Holistically-Nested Edge Detection）[10]网络与匹配滤波对红外图像处理的结果进行融合以提取边缘，但该方法处理较为复杂，没有发挥出深度CNN端到端的优势，且受限于HED网络的性能，检测效果不太理想。
将深度学习技术应用于红外图像边缘检测也面临着较大的问题。在自然图像边缘检测任务中，我们可以利用多个公开数据集训练和评估模型[16-21]，但目前暂时没有可以用于红外图像边缘检测的公开数据集。
总的来说，相比于自然图像，红外图像的诸多缺点大大增加了边缘检测任务的难度，无数据集可用的现状使得任务更加艰巨。为此，本文提出了一种基于深度学习的红外图像边缘检测算法，在DexiNed[14]的基础上，缩减了网络规模，并在损失函数中引入了图像级的差异，精心设计了函数参数，进而优化了网络性能。此外，还通过调整可见光图像边缘检测数据集来近似模拟红外图像边缘检测数据集，对改进后的模型进行训练，进一步提高了网络对红外图像中边缘信息的提取能力。
1. 边缘检测方法
本文主要涉及红外图像边缘检测方法和基于深度学习的图像边缘检测方法，下面分别对其进行简要介绍。
1.1 红外图像边缘检测方法
作为图像边缘检测领域的一个分支，有关红外图像的边缘检测方法研究较少，绝大多数都是基于传统的可见光图像边缘检测技术改进而来，根据图像的低层次特征提取边缘信息。这些方法主要可分为3类：一是基于边缘检测算子改进的方法[1-4]，大多是结合各种去噪技术对图像进行预处理，然后采用边缘检测算子提取边缘，最后结合边缘连接等图像后处理技术优化结果，此类方法结构简单、处理速度快，但处理结果往往不符合人眼视觉，较为生硬；二是基于蚁群算法的方法[5-6]，通过蚁群搜索最优路径的方式寻找边缘区域，具有较强的鲁棒性、优良的分布式计算和一定的抗干扰能力，然而，受制于蚁群算法本身计算量大、收敛速度慢、易过早陷入局部最优和参数设置带有明显经验性的特点，此类算法在处理效率和自适应性上还有待于后续研究的不断改进；三是基于数学形态学的方法[7-8]，需要针对具体问题，精心设计结构元素和运算方法，以在抑噪和检测精度之间达到良好的平衡。
1.2 基于深度学习的图像边缘检测
近年来，CNN得到了快速发展和广泛应用，得益于其强大的特征提取能力，CNN在图像边缘检测领域表现出了优异的性能。图 1对比展示了传统的和基于深度学习的图像边缘检测算法用于红外图像的边缘提取结果。
![]()
图 1 几种图像边缘检测方法提取红外图像边缘的效果对比：(a)红外图像（来源于FLIR红外数据集）；(b)Canny算子的边缘检测结果；(c)BDCN[12]的边缘检测结果；(d)本文方法的边缘检测结果Figure 1. Comparison of several image edge detection methods to extract infrared image edge: (a) is an example infrared image from FLIR Thermal Dataset (www.flir.com); (b) is the result of the Canny edge detector; (c) is the result of BDCN[12]; (d) is the result of our methodDeepEdge[9]提取边缘候选点周围的多个图像块，并将这些图像块输入多尺度CNN以确定其是否为边缘像素。HED[10]，即Holistically-Nested Edge Detection，Holistically表示该算法试图训练一个端到端的网络，Nested则强调在生成的输出过程中通过不断地集成和学习得到更精确的边缘预测图的过程。RCF[11]（Richer Convolutional Features）提出了一种基于丰富卷积特征的精确边缘检测算法。BDCN[12]（Bi-Directional Cascade Network）提出了一种双向级联网络结构，在该结构中，单个层由其特定尺度上的标记边进行监督，而不是直接对不同的层应用相同的监督。LPCB[13]（Learning to Predict Crisp Boundaries）提出了一种新的边缘检测方法，该方法能有效地对不平衡数据进行分类，并使网络能够产生清晰的边界。DexiNed[14]可以生成适于人眼视觉的细化边缘图像，并且无需事先训练或微调，就可以在任意边缘检测任务中使用。以上网络几乎都采用VGG[22]（Visual Geometry Group）作为其主干。
2. 本文方法
本文采用了基于深度学习的红外图像边缘检测方法，选用了目前自然图像边缘检测领域性能最好的网络模型，并在此基础上进行了相应优化，精心构造了损失函数，并制作了近似的红外图像边缘检测数据集以微调网络，进一步提升了神经网络提取红外图像边缘信息的性能。
2.1 网络结构
选用DexiNed[14]作为红外图像边缘检测网络结构的基础并加以改进。作为目前最先进的边缘检测网络模型之一，文献[14]声称其不需要事先训练和微调就能直接用于任意边缘检测任务。
DexiNed的结构如图 2所示，它由6个主块组成，每个主块输出特征映射，使用一个上采样块生成中间边缘映射。所有由上采样块产生的边缘映射被连接起来，以馈送网络末端的学习滤波器堆栈，并产生融合的边缘映射。DexiNed具有优异性能的原因主要在于其具有密集的网络层和层与层之间有效的联接。此外，上采样块也起着重要的作用，它由条件叠加子块组成。每个子块有两层，即卷积层和反卷积层。本文也尝试使用其他更为简单的上采样方法，例如双线性采样和depth-to-space（由Tensorflow提供），发现其效果远不如该上采样块。
![]()
图 2 DexiNed网络结构和精简后的网络（位于虚线框中）Figure 2. Network architecture of DexiNed[14] and simplified one(in dotted box)然而，DexiNed在拥有良好的性能的同时也牺牲了模型的容量，它包含了35.2M可训练参数，相较于BDCN为16.3M，RCF为14.8M，其规模显得较为庞大。DexiNed网络具有6个主块，其预测结果为6个主块输出结果的融合或平均。在训练和测试时，总是发现其第五和第六个主块的输出结果非常相似。据此猜想，第六个主块输出的有无对最终融合结果的影响并不是决定性的（验证见3.2节）。因此，为精简网络结构、减小网络容量，只保留了5个主块，将参数减少至30.4M，相比于原网络容量缩减了13.6%，改进后的网络结构如图 2的虚线框中所示。
2.2 损失函数
在其他条件不变的情况下，网络的精简或多或少都会造成其性能的下降。而在训练过程中，损失函数是最为重要的环节之一，因此，本文对DexiNed[14]原有的损失函数进行了改进。
DexiNed[14]使用的损失函数为加权交叉熵损失（weighted cross-entropy loss），它是每个对应像素对之间的预测和真值的差异的加权总和，主要显示了像素级的差异。为了获得更好的性能，在损失函数中引入了图像级的差异，与LPCB[13]相同，使用Dice系数来度量预测P和真值G之间的差异。
Dice系数是一种集合相似度的度量函数，通常用于计算两个样本的相似度。采用Dice系数计算的损失为：
$${L_{\rm{d}}}\left( {P,G} \right) = \frac{{\sum\limits_i^N {p_i^2} {\rm{ + }}\sum\limits_i^N {g_i^2} }}{{2\sum\limits_i^N {{p_i}{g_i}} }}$$ (1) 式中：pi和gi分别表示预测P和真值G中的第i个像素值。
最终的损失函数为交叉熵损失（cross-entropy loss）和Dice损失的结合：
$$ \mathit{L}(\mathit{P},\mathit{G}) = \mathit{\alpha }{\mathit{L}_\mathit{d}}(\mathit{P},\mathit{G}) + \mathit{\beta }{\mathit{L}_\mathit{c}}(\mathit{P},\mathit{G}) $$ (2) 式中：${L_{\rm{c}}}\left( {P,G} \right) = - \sum\limits_j^N {\left( {{g_j}\log {p_j} + \left( {1 - {g_j}} \right)\left( {1 - \log {p_j}} \right)} \right)} $。这里没有采用加权交叉熵损失，因为实验表明采用该损失函数未能改善训练效果。
另外，有一个细节需要说明：在计算交叉熵损失时，将网络第五个主块输出结果的交叉熵损失乘以2，以近似表示叠加原网络第六个主块的交叉熵损失，这样做有效地改善了精简后网络的训练效果（分别训练1个epoch后，相比于去掉第六个主块而不改变损失函数的网络，仅将损失函数中的第五个主块的损失乘以2，就能将loss降低21.4%、accuracy提升2.5%）。
2.3 模拟红外图像边缘检测数据集
在前文中，已对红外图像边缘检测的难点进行了分析，红外图像与自然图像存在的显著区别，意味着红外图像边缘检测任务的难度要远大于自然图像。考虑到目前没有公开的红外图像边缘检测数据集，本文认为有必要建立红外图像边缘检测数据集，进一步地训练网络，提升其对于红外图像的边缘提取能力。
利用现有的自然图像边缘检测数据集，可以在自然图像的基础上模拟相应的红外图像，以此来建立近似的红外图像边缘检测数据集。要想通过自然图像较为准确的模拟红外图像，则必须在原始景物红外辐射分布的基础上，从时间、空间、光谱和辐射量等方面进行[23]，这并非本文研究的重点，且实现起来比较复杂。
针对红外图像的特点，提出了一种较为简单的方法来近似模拟红外成像的视觉效果：首先将自然图像灰度化，然后降低对比度，接着添加高斯噪声，最后得到近似模拟的红外图像，如图 3所示。结合这种方法，基于BIPED[14]数据集建立了近似的红外图像边缘检测数据集。BIPED[14]数据集包含了250幅分辨率为1280×720的户外图像，通过裁剪、旋转、翻转等操作，得到增强后的数据集，再通过图 3方法进行处理，最终得到的模拟红外图像边缘检测数据集中包含72000个模拟红外图像与边缘真值图像对，称该数据集为IR-BIPED。
![]()
图 3 可见光图像转变为模拟红外图像的过程Figure 3. The process of transforming an optical image into a simulated infrared image3. 实验
3.1 与DexiNed的性能对比
首先，需要知道本文所做的一系列工作，相比于其基础——DexiNed，是否在提取红外图像边缘的效果上获得了提升。
前文中提到，文献[14]声称DexiNed不需要事先训练和微调就能直接用于任意边缘检测任务。因此，先将[14]中训练好的DexiNed（在BIPED数据集上训练了24个轮次）直接用于红外图像边缘检测，得到结果1。在本文方法中，将改进后的模型加载训练好的DexiNed部分权重后，在IR-BIPED数据集上继续训练3个轮次，测试得到结果2。公平起见，同样将训练好的DexiNed继续在IR-BIPED数据集上微调3个轮次，测试得到结果3。测试结果1~3对比如图 4所示，其中的红外图像来源于FLIR红外数据集。
![]()
图 4 测试结果对比Figure 4. Comparison of test resultsInfrared image Result 1 Result 2 Result 3 由图 4可见，3个结果比较相似，但结果2提取得到的红外图像边缘最为清晰、细节最为丰富。根据结果2，我们能够清楚地分辨各景物，总体来说其视觉效果最好。这里需要强调，本文方法中使用的网络容量较DexiNed缩减了13.6%，这意味着本文方法较DexiNed使用更少的资源，却取得了更好的红外图像边缘检测效果。
此外，将结果3与结果1对比，可见经过3个轮次的微调后，DexiNed提取的红外图像边缘明显更细，这也反映出IR-BIPED数据集对提升红外图像边缘检测效果起到了一定的作用，下节将进一步研究该数据集的影响。
3.2 消融实验
下面通过实验来验证本文方法各组成部分的有效性。
在3.1节中，已经验证本文方法相对于DexiNed[14]的改进既减小了网络容量，又改善了红外图像的边缘检测效果。在本节中，将分别研究网络容量的缩减、损失函数的设计和模拟红外数据集各带来了怎样的影响。
网络容量的缩减。通过去除DexiNed[14]网络的最后一个主块来精简网络，将网络容量缩减了13.6%。显然，在此过程中损失了部分边缘信息。为了量化容量缩减给边缘检测性能带来的影响，将基础网络（baseline）和精简后的网络（simplified）在相同条件下各自从头开始训练3个轮次，发现两者的边缘检测准确度变化如表 1所示。由此可见，经过3个轮次的训练后，精简后的网络与原网络准确度差别不大，甚至有轻微程度的提升。
表 1 网络准确度对比1Table 1. Comparison of network accuracy-1Baseline Simplified epoch 1 0.8991782 0.8991683 epoch 2 0.8993612 0.8995107 epoch 3 0.8993013 0.8994964 精心设计的损失函数。网络结构的精简势必会造成部分信息的损失，自然地，我们想到通过改进损失函数来提升性能。在精简后的网络模型中应用3.2节所述的损失函数后，同样将原网络和精简后的网络在相同条件下各自训练3个轮次，发现两者的准确度变化如表 2所示。由此可见，精心设计的损失函数有效地改善了网络的性能，相比于原网络，精简后网络的准确度提高了约2.6%，利用更少资源达到了更好的效果。
表 2 网络准确度对比2Table 2. Comparison of network accuracy-2Baseline Simplified+designed loss epoch 1 0.8991875 0.9012373 epoch 2 0.8991702 0.9105164 epoch 3 0.8992519 0.9097796 模拟红外图像边缘检测数据集。为了检验模拟红外图像边缘检测数据集——IR-BIPED是否对提升网络提取红外图像边缘的性能有所助益，测试了在IR-BIPED数据集上训练前后的改进网络，图 5展示了测试结果。其中的红外图像来源于OSU红外数据集[24]。该数据集中的红外图像背景对比度低、边缘模糊，选用这些图像进行测试，能够让结果对比更鲜明。由图 5可见，训练后网络的边缘提取结果明显更加清晰，显然，IR-BIPED数据集提升了模型的抗噪性能和对红外图像的适应性。
![]()
图 5 在IR-BIPED数据集上训练前后的网络测试结果对比Figure 5. Network test before and after training on IR-BIPED dataset3.3 对比评价
我们选择了文献[3]、[5]、[11]、[12]中的方法与本文方法进行对比，并进行了定性和定量评价。
3.3.1 定性结果
前述几种算法的红外图像边缘检测结果如图 6所示，测试红外图像来源于Terravic Motion红外数据集，FLIR红外数据集和OSU红外数据集[24]。由图可见，文献[3]检测出的边缘较细、定位较准确，但受噪声影响较大，整体观感较生硬；文献[5]受噪声影响较小，但检测出的边缘不连续、定位精度低；文献[11]和文献[12]提取的边缘连续、细节较为丰富，但边缘较粗、观感较差，文献[12]的效果优于文献[11]；本文方法定位精度高，检出的边缘较细，且具有较好的连续性，细节丰富、清晰，人眼观感良好。总体来说，本文方法的边缘检测效果最好。
![]()
图 6 不同边缘检测方法的结果对比Figure 6. Results of different methodsImage-1 Image-2 Image-3 Image-4 Infrared image Enhanced Canny[3] Improved ant colony [5] RCF[11] BDCN[12] Our method 3.3.2 定量结果
由于缺少用于评价红外图像边缘检测效果的标准数据集，这里采用了SSIM[25]和FSIM[26]两个指标来定量评价红外图像的边缘检测效果。
SSIM是一种符合人眼视觉系统特性的图像质量客观评判标准，其具体形式为：
$${\rm{SSIM}}\left( {x,y} \right) = \frac{{\left( {2{\mu _x}{\mu _y} + {C_1}} \right)\left( {2{\sigma _{xy}} + {C_2}} \right)}}{{\left( {\mu _x^2 + \mu _y^2 + {C_1}} \right)\left( {\sigma _x^2 + \sigma _y^2 + {C_2}} \right)}}$$ (3) 式中：x表示原图；y表示边缘图像；μx和μy分别表示对应图像的均值；σx和σy分别表示对应图像的方差；σxy表示x和y的协方差。SSIM衡量了两幅图像的相似度，其取值范围为[0, 1]，其值越大表示边缘检测效果越好。
FSIM映射特征并测量两个图像之间的相似性。因为人类视觉系统（human visual system，HVS）是基于一些低层次特征来感知图像的，而相位一致性特征（phase congruency, PC）可以很好地刻画局部结构。同时由于PC对于图像的变化具有相对不变性，这有利于提取图像中稳定的特征，但是有时图像的变化确实会影响观感，所以需要使用梯度幅值（gradient magnitude，GM）来弥补。FSIM中使用了PC和GM两个特征互为补充。FSIM的计算较为繁琐，这里不再列出。FSIM值越大表示边缘检测效果越好。
图 7~10展示了图像1~4边缘检测效果的定量结果。由图可见，仅在图 7中，本文方法的SSIM和FSIM值略低于文献[5]的方法，其余表现均明显优于其他方法。此外，综合来看，文献[11]和文献[12]的表现优于文献[3]和文献[5]，这也在一定程度上表明了基于深度学习的方法相对于传统方法的优越性。
![]()
图 7 不同方法在图像1上测试后的定量结果对比Figure 7. Comparison of quantitative results of different methods on image1![]()
图 8 不同方法在图像2上测试后的定量结果对比Figure 8. Comparison of quantitative results of different methods on image2![]()
图 9 不同方法在图像3上测试后的定量结果对比Figure 9. Comparison of quantitative results of different methods on image3![]()
图 10 不同方法在图像4上测试后的定量结果对比Figure 10. Comparison of quantitative results of different methods on image44. 总结
本文研究了现有的各类红外图像边缘检测方法，并分析了红外图像边缘检测的难点和挑战，提出了一种基于深度学习的红外图像边缘检测方法，在DexiNed的基础上，对网络结构和损失函数进行改进，缩减了网络规模、优化了网络性能；此外，还通过调整自然图像边缘检测数据集来近似模拟红外图像边缘检测数据集进行训练，进一步提高了网络对红外图像中边缘信息的提取能力。通过实验，我们验证了本文对于DexiNed所做的一系列改进的有效性，并证明了本文方法相比于其他方法的优越性。
为将本文方法应用到实际生产和生活中，后续将研究算法的嵌入式实现，提升计算效率，以实现实时的红外图像边缘检测。
-
![]()
图 1 基于融合重构的EnFCM聚类分割方法整体框架
Figure 1. Integral framework of EnFCM cluster segmentation method based on fusion reconstruction
![]()
图 2 自适应形态学重建去噪效果。(a)含噪图像；(b)去噪结果
Figure 2. Adaptive morphological gradient reconstruction denoising effect. (a) noisy image; (b) denoising result
![]()
图 3 自适应形态学重建后梯度图像。(a)原梯度图像；(b)重建后的梯度图像
Figure 3. Gradient image after adaptive morphological reconstruction. (a) Original gradient image; (b) reconstructed gradient image
![]()
图 4 FCM方法分割效果。(a)定子匝间短路；(c)转子断条故障；(b)、(d)分割结果
Figure 4. Segmentation effect of FCM method. (a) Stator turn-to-turn short-circuit fault; (c) fault of the rotor break; (b)(d) segmentation results
![]()
图 5 融入了SR前后的梯度图像。(a)融入SR前的梯度；(b)融入SR后的梯度
Figure 5. Gradient images before and after SR are incorporated. (a) Gradient before integration into SR; (b) gradient after integration into SR
![]()
图 6 定子匝间短路（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 6. Stator turn-to-turn short-circuit fault (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
![]()
图 7 转子断条故障（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 7. Fault of the rotor break (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
![]()
图 8 刀闸故障（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 8. Breaker failure (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
![]()
图 9 线夹故障1（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 9. Contact terminal failure 1 (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
![]()
图 10 线夹故障2（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 10. Contact terminal failure 2 (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
![]()
图 11 电抗器故障（含噪声）。(a)原图；(b)AFCF；(c)FRFCM；(d)FCM；(e)SFFCM；(f)FCM_SICM；(g)RSSFCA；(h)本文算法
Figure 11. Inductor failure (Contains noise). (a) Original iamge; (b) AFCF; (c) FRFCM; (d) FCM; (e) SFFCM; (f) FCM_SICM; (g) RSSFCA; (h) proposed
表 1 不同分割方法的IOU与DICE系数值
Table 1 IOU and DICE coefficient values of different segmentation methods
Experimental results Index Methods FRFCM FCM SFFCM FCM_SICM RSSFCA AFCF Proposed Fig.6 IOU 0.5823 0.3658 0.4897 0.5431 0.3256 0.0827 0.9486 DICE 0.6521 0.4046 0.5215 0.6418 0.3391 0.8517 0.9587 Fig.7 IOU 0.7015 0.8019 0.7259 0.5681 0.4033 0.8002 0.9635 DICE 0.7825 0.8693 0.7652 0.5852 0.4231 0.8213 0.9635 Fig.8 IOU 0.8369 0.3845 0.3652 0.6485 0.4988 0.6378 0.9368 DICE 0.8722 0.4316 0.3596 0.6716 0.5021 0.6521 0.9465 Fig.9 IOU 0.8701 0.5864 0.3142 0.4163 0.4374 0.8115 0.9662 DICE 0.7711 0.6364 0.3212 0.4623 0.4516 0.8311 0.9732 Fig.10 IOU 0.8652 0.4562 0.3021 0.6523 0.6881 0.3225 0.9625 DICE 0.8699 0.4214 0.3124 0.7024 0.6557 0.3314 0.9718 Fig.11 IOU 0.8421 0.3022 0.6625 0.7968 0.3225 0.6337 0.9568 DICE 0.8235 0.3158 0.6538 0.8024 0.3126 0.6118 0.9589 
下载: 导出CSV
表 2 不同方法的分割准确率（SA）值
Table 2 Segmentation accuracy (SA) values of different methods
Experimental results FRFCM FCM SFFCM FCM_SICM RSSFCA AFCF Proposed Fig. 6 0.7654 0.4254 0.6535 0.5674 0.4885 0.8005 0.9654 Fig. 7 0.8243 0.7635 0.7224 0.7423 0.7214 0.7968 0.9824 Fig. 8 0.8535 0.4575 0.4635 0.5663 0.8957 0.5671 0.9633 Fig. 9 0.3525 0.4012 0.8026 0.4685 0.7135 0.8213 0.9736 Fig. 10 0.8221 0.4115 0.4021 0.6587 0.5425 0.5732 0.9689 Fig. 11 0.8365 0.4965 0.4215 0.6652 0.4002 0.5235 0.9775
下载: 导出CSV
-
[1] Kim H J, Lee J H, Baek D H, et al. A study on the thermal performance of batteries using thermal imaging and infrared radiation[J]. Journal of Industrial and Engineering Chemistry, 2017, 45: 360-365. DOI: 10.1016/j.jiec.2016.10.003
[2] 赵庆生, 王雨滢, 王旭平, 等. 基于新型阈值选择方法的变电站红外图像分割[J]. 光学学报, 2019, 39(8): 109-116. https://www.cnki.com.cn/Article/CJFDTOTAL-GXXB201908014.htm ZHAO Qingsheng, WANG Yuying, WANG Xuping, et al. Substation infrared image segmentation based on novel threshold selection method[J]. Acta Optica Sinica, 2019, 39(8): 109-116. https://www.cnki.com.cn/Article/CJFDTOTAL-GXXB201908014.htm
[3] 黄志鸿, 洪峰, 黄伟. 形状自适应低秩表示的电力设备热故障诊断方法研究[J]. 红外技术, 2022, 44(8): 870-874. http://hwjs.nvir.cn/article/id/8f0f8a69-4b47-46b4-bcdf-ea623287093f HUANG Zhihong, HONG Feng, HUANG Wei. Shape adaptation low rank representation for thermal fault diagnosis of power equipments[J]. Infrared Technology, 2022, 44(8): 870-874. http://hwjs.nvir.cn/article/id/8f0f8a69-4b47-46b4-bcdf-ea623287093f
[4] 朱惠玲, 牛哲文, 黄克灿, 等. 基于单阶段目标检测算法的变电设备红外图像目标识别及定位[J]. 电力自动化设备, 2021, 41(8): 217-224. https://www.cnki.com.cn/Article/CJFDTOTAL-DLZS202108032.htm ZHU Huiling, NIU Zhewen, HUANG Kecan, et al. Identification and location of infrared image for substation equipment based on single-stage object detection algorithm[J]. Electric Power Automation Equipment, 2021, 41(8): 217-224. https://www.cnki.com.cn/Article/CJFDTOTAL-DLZS202108032.htm
[5] 陈达, 何全才, 迪二镇, 等. 自适应权重的偏微分分割模型在变电设备红外图像中的应用[J]. 红外技术, 2022, 44(2): 179-188. http://hwjs.nvir.cn/article/id/24c18eab-82d8-4403-bb0a-891418242d98 CHEN Da, HE Quancai, DI Erzhen, et al. Application of partial differential segmentation model with adaptive weight in infrared image of substation equipment[J]. Infrared Technology, 2022, 44(2): 179-188. http://hwjs.nvir.cn/article/id/24c18eab-82d8-4403-bb0a-891418242d98
[6] 郭锋, 郑雷, 葛黄徐, 等. 基于相似度阈值模糊聚类的红外区域提取方法[J]. 红外技术, 2022, 44(8): 863-869. http://hwjs.nvir.cn/article/id/2db6a354-f9b9-4fd3-9e18-d032468a6ee6 GUO Feng, ZHEN Lei, GE Huangxu, et al. Infrared image segmentation method based on fuzzy clustering with similarity thresholding[J]. Infrared Technology, 2022, 44(8): 863-869. http://hwjs.nvir.cn/article/id/2db6a354-f9b9-4fd3-9e18-d032468a6ee6
[7] 王晓飞, 胡凡奎, 黄硕. 基于分布信息直觉模糊c均值聚类的红外图像分割算法[J]. 通信学报, 2020, 41(5): 120-129. https://www.cnki.com.cn/Article/CJFDTOTAL-TXXB202005013.htm WANG Xiaofei, HU Fankui, HUANG Shuo. Infrared image segmentation algorithm based on distribution information intuitionistic fuzzy c-means clustering[J]. Journal on Communications, 2020, 41(5): 120-129. https://www.cnki.com.cn/Article/CJFDTOTAL-TXXB202005013.htm
[8] 邢致恺, 贾鹤, 宋文龙. 基于莱维飞行樽海鞘群优化算法的多阈值图像分割[J]. 自动化学报, 2021, 47(2): 363-377. https://www.cnki.com.cn/Article/CJFDTOTAL-MOTO202102009.htm XING Zhikai, JIA He, SONG Wenlong. Levy flight trajectory-based salpswarm algorithm for multilevel thresholding image segmentation[J]. Acta Automatica Sinica, 2021, 47(2): 363-377. https://www.cnki.com.cn/Article/CJFDTOTAL-MOTO202102009.htm
[9] 李云红, 张秋铭, 周小计, 等. 基于形态学及区域合并的分水岭图像分割算法[J]. 计算机工程与应用, 2020, 56(2): 190-195. https://www.cnki.com.cn/Article/CJFDTOTAL-JSGG202002028.htm LI Yunhong, ZHANG Qiuming, ZHOU Xiaoji, et al. Watershed image segmentation algorithm based on morphology and region merging[J]. Computer Engineering and Applications, 2020, 56(2): 190-195. https://www.cnki.com.cn/Article/CJFDTOTAL-JSGG202002028.htm
[10] 周可慧, 廖志伟, 肖异瑶, 等. 基于改进CNN的电力设备红外图像分类模型构建研究[J]. 红外技术, 2019, 41(11): 1033-1038. https://www.cnki.com.cn/Article/CJFDTOTAL-HWJS201911007.htm ZHOU Kehui, LIAO Zhiwei, XIAO Yiyao, et al. Construction of infrared image classification model for power equipment based on improved CNN[J]. Infrared Technology, 2019, 41(11): 1033-1038. https://www.cnki.com.cn/Article/CJFDTOTAL-HWJS201911007.htm
[11] Krinidis S, Chatzis V. A Robust fuzzy local information c-means clustering algorithm[J]. IEEE Transactions on Image Processing, 2010, 19(5): 1328-1337. DOI: 10.1109/TIP.2010.2040763
[12] GONG M G, ZHOU Z Q, MA J J. Change detection in synthetic aperture radar images based on image fusion and fuzzy clustering[J]. IEEE Transactions on Image Processing, 2012, 21(4): 2141-2151. DOI: 10.1109/TIP.2011.2170702
[13] 王小鹏, 张永芳, 王伟, 等. 基于自适应滤波的快速广义模糊C均值聚类图像分割[J]. 模式识别与人工智能, 2018, 31(11): 1040-1046. https://www.cnki.com.cn/Article/CJFDTOTAL-MSSB201811011.htm WANG Xiaopeng, ZHANG Yongfang, WANG Wei, et al. Image segmentation using fast generalized fuzzy c-means clustering based on adaptive filtering[J]. Pattern Recognition and Artificial Intelligence, 2018, 31(11): 1040-1046. https://www.cnki.com.cn/Article/CJFDTOTAL-MSSB201811011.htm
[14] 李昌兴, 张晓璐, 雷柳. 基于粒子群优化非局部模糊聚类图像分割算法[J]. 光电子·激光, 2019, 30(7): 759-767. https://www.cnki.com.cn/Article/CJFDTOTAL-GDZJ201907013.htm LI Changxing, ZHANG Xiaolu, LEI Liu. Non-local fuzzy clustering image segmentation algorithm based on particle swarm optimization[J]. Journal of Optoelectronics Laser, 2019, 30(7): 759-767. https://www.cnki.com.cn/Article/CJFDTOTAL-GDZJ201907013.htm
[15] 火忠彩. 基于改进FCM的图像分割算法研究[D]. 兰州: 兰州交通大学, 2019. HUO Zhongcai. Research of Image Segmentation Algorithm Based on Improved FCM[D]. Lanzhou: Lanzhou Jiaotong University, 2019.
[16] WANG Qingsheng, WANG Xiaopeng, FANG Chao, et al. Robust fuzzy c-means clustering algorithm with adaptive spatial & intensity constraint and membership linking for noise image segmentation[J]. Applied Soft Computing, 2020, 92: 106318. DOI: 10.1016/j.asoc.2020.106318
[17] LEI Tao, JIA Xiaohong, ZHANG Yanning, et al. Significantly fast and robust fuzzy c-means clustering algorithm based on morphological reconstruction and membership filtering[J]. IEEE Transactions on Fuzzy Systems, 2018, 26(5): 3027-3041. DOI: 10.1109/TFUZZ.2018.2796074
[18] 刘剑秋, 阮秋琦. 形态学重建滤波器的研究与应用[J]. 通信学报, 2002(1): 116-121. https://www.cnki.com.cn/Article/CJFDTOTAL-TXXB200201016.htm LIU Jianqiu, RUAN Qiuqi. The research and application of morphological filter by reconstruction[J]. Journal on Communications, 2002(1): 116-121. https://www.cnki.com.cn/Article/CJFDTOTAL-TXXB200201016.htm
[19] 袁芊芊, 邓洪敏, 王晓航. 基于超像素快速模糊C均值聚类与支持向量机的柑橘病虫害区域分割[J]. 计算机应用, 2021, 41(2): 563-570. https://www.cnki.com.cn/Article/CJFDTOTAL-JSJY202102039.htm YUAN Qianqian, DENG Hongmin, WANG Xiaohang. Citrus disease and insect pest area segmentation based on superpixel fast fuzzy C -means clustering and support vector machine[J]. Journal of Computer Applications, 2021, 41(2): 563-570. https://www.cnki.com.cn/Article/CJFDTOTAL-JSJY202102039.htm
[20] 刘岳, 王小鹏, 王金全, 等. 基于形态学重建和梯度分层修正的分水岭脑肿瘤分割[J]. 计算机应用研究, 2015, 32(8): 2487-2491. https://www.cnki.com.cn/Article/CJFDTOTAL-JSYJ201508061.htm LIU Yue, WANG Xiaopeng, WANG Jinquan, et al. Watershed algorithm for brain tumor segmentation based on morphological reconstruction and gradient layered modification[J]. Application Research of Computers, 2015, 32(8): 2487-2491. https://www.cnki.com.cn/Article/CJFDTOTAL-JSYJ201508061.htm
[21] 王小鹏, 李新娜, 杨文婷. 自适应形态学重建的遥感图像道路提取[J]. 测绘科学, 2022, 47(5): 83-90. https://www.cnki.com.cn/Article/CJFDTOTAL-CHKD202205011.htm WANG Xiaopeng, LI Xinna, YANG Wenting. Road extraction from remote sensing image based on adaptive morphological reconstruction[J]. Science of Surveying and Mapping, 2022, 47(5): 83-90. https://www.cnki.com.cn/Article/CJFDTOTAL-CHKD202205011.htm
[22] LEI Tao, JIA Xiaohong, LIU Tongliang, et al. Adaptive morphological reconstruction for seeded image segmentation[J]. IEEE Transactions on Image Processing: a Publication of the IEEE Signal Processing Society, 2019, 28(11): 5510-5523. DOI: 10.1109/TIP.2019.2920514
[23] 陈霄, 沈洪健, 李菲, 等. 基于谱残差与笔画宽度变换的显著性文本检测方法[J]. 吉林大学学报: 理学版, 2017, 55(6): 1528-1532. https://www.cnki.com.cn/Article/CJFDTOTAL-JLDX201706033.htm CHEN Xiao, SHEN Hongjian, LI Fei, et al. Salient text detection method based on spectral residual and stroke width transform[J]. Journal of Jilin University: Science Edition, 2017, 55(6): 1528-1532. https://www.cnki.com.cn/Article/CJFDTOTAL-JLDX201706033.htm
[24] 沈洪健. 基于农用车辆牌照特征识别系统研究[D]. 长春: 吉林农业大学, 2020. SHEN Hongjian. Research on the Feature Recognition System of Agricultural Vehicle License Plates[D]. Changchun: Jilin Agricultural University, 2020.
[25] 罗其俊, 曹志芬, 牛国臣. 基于加强模糊聚类的航空行李图像超像素分割[J]. 航空学报, 2020, 41(S2): 205-212. https://www.cnki.com.cn/Article/CJFDTOTAL-HKXB2020S2023.htm LUO Qijun, CAO Zhifen, NIU Guochen. Super-pixel segmentation of air baggage image based on enhanced fuzzy clustering[J]. Acta Aeronautica et Astronautica Sinica, 2020, 41(S2): 205-212. https://www.cnki.com.cn/Article/CJFDTOTAL-HKXB2020S2023.htm
[26] 张聪炫, 裴刘继, 陈震, 等. FRFCM聚类与深度优化的RGBD场景流计算[J]. 电子学报, 2020, 48(7): 1380-1386. https://www.cnki.com.cn/Article/CJFDTOTAL-DZXU202007018.htm ZHANG Congxuan, PEI Liuji, CHEN Zhen, et al. RGBD scene flow estimation based on FRFCM clustering and depth optimization[J]. Acta Electronica Sinica, 2020, 48(7): 1380-1386. https://www.cnki.com.cn/Article/CJFDTOTAL-DZXU202007018.htm
[27] JIA Xiaohong, LEI Tao, DU Xiaogang, et al. Robust self-sparse fuzzy clustering for image segmentation[J]. IEEE Access, 2020, 9: 146182-146195. http://www.xueshufan.com/publication/3048714307
[28] LEI Tao, LIU Peng, JIA Xiaohong, et al. Automatic fuzzy clustering framework for image segmentation[J]. IEEE Transactions on Fuzzy Systems, 2020, 9(28) : 2078-2092.
[29] LI Chunming, HUANG Rui, DING Zhaohua, et al. A level set method for image segmentation in the presence of intensity inhomogeneities with application to MRI[J]. IEEE Transactions on Image Processing, 2011, 20(7): 2007-2016.
[30] 宋小鹏, 李国熊, 张权, 等. 结合局部和非局部信息的FCM图像分割算法[J]. 火力与指挥控制, 2020, 45(10): 28-33. https://www.cnki.com.cn/Article/CJFDTOTAL-HLYZ202010006.htm SONG Xiaopeng, LI Guoxiong, ZHANG Quan, et al. An FCM algorithm incorporating with local and non-local information for image segmentation[J]. Fire Control & Command Control, 2020, 45(10): 28-33. https://www.cnki.com.cn/Article/CJFDTOTAL-HLYZ202010006.htm
-
期刊类型引用(9)
1. 田文豪，汪繁荣，乔一航. 基于VMF-UNet的液基细胞制染机缺陷图像分割. 现代电子技术. 2025(05): 36-42 . 
百度学术
2. 郑铁华，王飞，赵格兰，杜春晖. 基于单分类支持向量机的煤矿防爆电气设备振动故障自动检测. 工矿自动化. 2025(02): 106-112 . 百度学术
3. 刘慧慧，裴庆庆. 改进U-Net网络的多视觉图像特征张量分割仿真. 计算机仿真. 2024(03): 237-241 . 百度学术
4. 于晓，姜晨慧. 基于深度学习的重叠红外刑侦目标提取算法研究. 黑龙江工业学院学报(综合版). 2024(02): 85-93 . 百度学术
5. 林颖，张峰达，李壮壮，郑文杰，戈宁. 基于大模型的红外图像电力设备交互式分割. 网络新媒体技术. 2024(02): 53-60+67 . 百度学术
6. 张宇，袁小翠，许志浩，康兵. 复杂背景下断路器红外图形精确分割方法. 江西电力. 2024(03): 1-7 . 百度学术
7. 严如强，周峥，杨远贵，李亚松，胡晨烨，陶治宇，赵志斌，王诗彬，陈雪峰. 可解释人工智能在工业智能诊断中的挑战和机遇：归因解释. 机械工程学报. 2024(12): 21-40 . 百度学术
8. 龚律凯，彭伊丽，陈绪兵，韩桂荣，李慧怡. 基于改进U-Net算法的焊缝特征识别研究. 现代制造工程. 2024(11): 18-25 . 百度学术
9. 林颖，张峰达，李壮壮，孙艺玮，于文牮. 基于交互式分割的电力设备红外图像自动标注方法. 山东电力技术. 2023(12): 20-25+44 . 百度学术
其他类型引用(10)
计量
- 文章访问数: 75
- HTML全文浏览量: 13
- PDF下载量: 17
- 被引次数: 19
