Overheat Fault Identification Method for Electrical Equipment Based on Three-phase Self-searching Comparison Method
-
摘要: 电力设备过热故障图谱识别是判断电力设备故障程度的重要手段。工程实际中通常是对变电设备热拍照并进行人工甄别。为提高设备热像图故障判定准确率和效率,本文针对电力三相设备的特点,提出了一种通过三相分区块自动搜寻及温度对比的过热区域判定方法,通过将三相设备热像图每相分离,调整为相似大小与姿态,将新图像分块进行对比,判定对应区块是否有异常温升,从而判定某相设备出现的热故障。试验结果表明,本文基于计算机自动搜寻和判定的设备热诊断方法能够更加高效准确地判定识别三相设备热故障,从而能够提高电力设备热故障检测的效率、准确性与自动化程度。Abstract: Overheat fault atlas identification of power equipment is an important tool for judging the fault degree of power equipment. In engineering practice, thermal photography of substation equipment and manual screening are usually carried out. To improve the heat equipment's figure fault decision accuracy and efficiency according to the characteristics of the three-phase power, this study proposes an automatic search determination method; this method involves the use of the three-phase partition piece temperature contrast of overheating area to separate every figure of the three-phase equipment heat, adjustment of images of similar size and attitude, comparing the new image block, and determining whether there is a corresponding block of abnormal temperature rise to identify the thermal faults of certain phase equipment. The test results show that the equipment thermal diagnostic method based on computer automatic search and determination can identify the thermal fault of three-phase equipment more efficiently and accurately, which improves the efficiency, accuracy, and automation degree of thermal fault detection of power equipment.
-
0. 引言
当前,以红外成像技术为基础的红外警戒系统、红外制导导弹等军事装备已经在现代战争中逐渐占据重要地位[1]。这些装备在性能测试阶段,通常需要通过外场试验来对其目标跟踪能力、抗干扰能力和虚警率等性能指标进行测试与评估[2],但红外成像系统受试验环境和气象条件等因素的影响较大,依据单次外场试验的结果难以对装备在不同作战环境和气象条件下的性能指标作出客观精确的测试和评估,需要采用红外图像仿真技术来模拟战场环境和军事目标进行多次可重复的测试试验[3];而为了保证红外装备能在战时发挥最大的作战效能,也需要生成大量军事目标在不同作战环境和气象条件下的红外仿真图像来对作战人员进行模拟训练[4]。因此,早在20世纪70年代,国外就通过外场试验结合理论建模对红外图像仿真技术展开了研究,先后研发出Vega Prime、SE Workbench等较为完善的红外视景仿真软件[5],但存在逼真度差、普适性不好的问题。而且由于存在技术封锁,国内红外视景仿真软件发展缓慢,主要以自建模型和依托仿真软件包建模渲染为主[6]。
近年来,深度学习技术异军突起,涌现出许多基于神经网络的仿真图像生成技术,特别是Goodfellow等人率先提出的生成对抗网络(Generative Adversarial Networks,GAN)[7]可以实现图像风格的迁移。考虑到国内可见光图像仿真技术比较成熟,而且军事目标在不同作战环境和气象条件下的可见光图像远比红外图像丰富,本文将建立在GAN网络基础上、但无需使用配准图像进行训练的循环一致生成对抗网络(Cycle Generative Adversarial Networks,CycleGAN)[8]引入到红外图像仿真领域,提出了一种水上目标可见光图像生成红外仿真图像的方法。
1. 基于循环生成对抗网络的红外仿真图像生成方法
要生成效果出色的红外仿真图像,仿真结果不仅需要满足红外图像的风格分布,还需要保持与可见光图像对应的内容特征。CycleGAN是一种基于GAN发展而来的无监督机器学习。克服了GAN结果不可控的缺点,继承了Pix2Pix[9]定向生成特定分布图像优势的同时突破了数据集配准的限制。
本文以水上目标的可见光与红外图像为数据集,对CycleGAN网络模型不断训练优化得到训练模型,可通过输入新的水上目标可见光图像生成相应效果出色的红外仿真图像。如图 1所示,CycleGAN在传统GAN的基础上额外增加一个生成器和判别器构成对称的环形网络。两个GAN共享两个生成器G、F,并各带一个判别器DX、DY。在本文中,训练集X为水上目标的可见光数据集,训练集Y为水上目标的红外数据集。x∈X表示可见光数据集中图像样本,y∈Y表示红外数据集中图像样本。将训练集X和Y中图像数据x、y作为输入,为提高训练效率,对每张图像按照像素大小256×256、步长3像素进行裁剪。以前向循环X→Y图像处理流程为例:可见光图像x通过生成器G生成具有红外风格的生成图像G(x),加入红外训练集Y。生成器G首先对x进行3层卷积,第一层卷积提取可见光图像中船舶目标特征,卷积核大小为7×7、步长设置为1,边界补充设为SAME。得到的结果依次进行批规范化处理加速收敛并激活,得到尺度为1×256×256×64的结果c0。第二层卷积对c0进行特征提取,卷积核大小为3×3、步长为2、边界补充设为SAME,将特征图下采样到一半得到结果c1,尺度为1×128×128×128;第三层卷积对第二层输出特征图进行高级特征提取,参数设置与第二测定相同,再次将特征图下采样到原尺寸一半,增大卷积核对输入特征图的感受域,卷积结果c2尺度为1×64×64×256。网络中还包含非线性激活层,激活函数Relu(x)=max(0, x)。
随着网络深度增加,神经网络会产生梯度消失的现象,生成器采用残差网络ResNet优化这一问题。G中构建了9层深层残差块r1~r9,卷积核大小为3×3、步长为1。将c2作为输入并将结果依次作为下一层的输入,最终得到r9。r9不改变c2尺度。用与三次下采样相对的反卷积网络对r9上采样保持网络输出与输入维度一致,卷积核大小依次为3×3、3×3、7×7,步长依次为2、2、1,边界补充设为SAME。最后经过函数$ \tanh \left( x \right) = \frac{{{{\text{e}}^x} - {{\text{e}}^{ - x}}}}{{{{\text{e}}^x} + {{\text{e}}^{ - x}}}} $激活得到生成的输出G(x)。
判别器DY用以判定训练集Y中出现的图像样本真假。因为只需要构建高频信息,不需要将整张图片作为输入,判别器继承pix2pix的PatchGAN网络,先对图像进行若干次patches块大小70×70的随机剪裁,将剪裁后图像输入判别器得到30×30的特征图,特征图的每一个点对应原图片上一个patch,将特征图降维取均值来衡量生成图像的每一个patch与真图像的差异。
同时G(x)通过生成器F生成风格图像F(G(x))加入训练集X,判别器DX判定F(G(x))标签并计算与X中真实图像的损失。
后向循环Y→X图像处理流程与此类似。通过两组生成器与判别器相互博弈,最终生成使判别器无法判别真假的图像G(x)、F(y)时,模型达到训练效果。
2. 建立数据集
由于缺乏公开的船舶红外图像数据集,本文自建了江面船舶可见光与红外数据集。原始图像数据为在武汉市鹦鹉洲长江大桥实地晴好天气下,采集了江面行驶的集装箱船、干散货船、轮渡船、巡逻艇等多种船舶图像。在深度学习中,训练数据集规模和质量直接影响模型性能。训练集越丰富,质量越高,模型训练性能越好[10]。因采集地点为桥梁附近,数据集中原始图像场景中存在大量桥墩以及两岸楼房、堤岸等复杂物体,若图像中同时存在船舶目标与干扰物体,该图像作为训练集会降低模型准确率。
本文采用区域生长算法对原始图像进行目标识别和分割提取,去除了复杂背景的干扰。
2.1 区域生长算法
区域生长算法(region seeds growing, RSG)是一种图像分割技术,能将具有相同特征的联通区域分割出来,并提供良好的边界信息和分割结果。在无先验知识可利用时可以取得最佳性能,常用于分割较为复杂的图像[11]。
其基本思想是将有相似性质的像素点合并起来构成联通区域。首先对需要分割的区域选取一个种子像素作为生长起点,然后根据事先确定的生长准则将种子像素周围领域中与种子有相同或相似性质的像素合并到种子像素所在区域中。新像素作为种子继续向四周生长,直到没有满足条件的像素为止。
2.2 数据处理
本文采用区域生长算法进行目标识别与分割,筛选出完整船舶的图像轮廓,最终获得可见光船舶图片6285张,红外船舶图片8246张。对可见光和红外图像预处理结果示例如图 2所示。
3. 模型训练
模型训练阶段,按照训练集、验证集2:1的比例划分数据,经预处理和筛选后最终划分可见光图像训练集图像样本3346张,验证集图像样本1672张;红外图像训练集图像样本3744张,验证集图像样本1871张。参数设置如表 1所示,模型训练时将所有图像缩放成256×256像素,优化器选择基于低阶矩的自适应估计Adam(adaptive moment estimation)算法优化梯度。前100轮迭代(N_epochs)保持初始学习率,第100轮迭代后学习率开始线性衰减,每隔50轮迭代衰减一次(decay iters),第200代时衰减到0(N_epochs decay)。
表 1 模型参数值Table 1. Model parametersParameters Learning rate Epoch N_epochs N_epochs decay Beta1 Beta2 Decay iters Value 0.0002 200 100 100 0.5 0.999 50 模型训练过程中有两个损失函数,对抗损失和循环一致损失。前者尽可能让生成器生成的数据分布接近于真实的数据分布,后者用于保证两生成器可以实现互逆,即互相迭代回自身。
设X、Y为可见光数据集和红外数据集,x表示可见光数据集中图像样本,y表示红外数据集中图像样本,对生成器G: X→Y和它的判别器DY,对抗损失函数为:
$$ \begin{gathered} {L_{{\text{GAN}}}}\left( {G,{D_Y},X,Y} \right) = {E_{y \sim {P_{{\text{data}}}}\left( y \right)}}\left[ {\log {D_Y}\left( y \right)} \right] + \hfill \\ \quad {E_{x \sim {P_{{\text{data}}}}\left( x \right)}}\left[ {\log \left( {1 - {D_Y}\left( {G\left( x \right)} \right)} \right)} \right] \hfill \\ \end{gathered} $$ (1) 式中:E为数学期望;Pdata为真实图像数据分布;DY(y)表示真实的红外数据库Y中的样本y在判别器DY中的评分,越接近1表示判别器认为此红外图像越真实。G(x)为生成器根据可见光图像x生成的与具有Y中红外图像特性的红外仿真图像,DY(G(x))表示判别器DY根据生成的红外仿真图像得到的评分,如果DY认为生成的红外仿真图像真实度越低,DY(G(x))越接近于0,1-DY(G(x))越接近于1。当判别器DY越强,即更能区分出真实的红外图像与生成器生成的红外仿真图像时,此损失函数值越大,而生成器G希望尽可能生成以假乱真的红外仿真图像以欺骗判别器,即希望此损失函数值越小越好。生成器在与判别器DY对抗的过程中,损失函数值不断下降,最终达到纳什平衡,生成器G生成样本达到判别器DY无法判定出来的效果$ {\min _G}{\max _{{D_Y}}}{L_{{\text{GAN}}}}\left( {G,{D_Y},X,Y} \right) $。同理生成器F: Y→X和它的判别器Dx对抗损失函数也是如此:
$$ \begin{gathered} {L_{{\text{GAN}}}}\left( {F,{D_X},Y,X} \right) = {E_{x \sim {P_{{\text{data}}}}\left( x \right)}}\left[ {\log {D_X}\left( x \right)} \right] + \hfill \\ \quad {E_{y \sim {P_{{\text{data}}}}\left( y \right)}}\left[ {\log \left( {1 - {D_x}\left( {F\left( y \right)} \right)} \right)} \right] \hfill \\ \end{gathered} $$ (2) 当生成器G试着生成与Y相似的图片G(x)时,G希望通过优化减小的项目与生成器F希望优化增大的项目相对抗,最终达到$ {\min _F}{\max _{{D_X}}}{L_{{\text{GAN}}}}\left( {G,{D_X},X,Y} \right) $。
循环一致损失函数是CycleGAN的核心,也是实现无配对图像相互转换的核心,为了尽可能保证循环一致性。Lcyc设定为两个相似的结构:
$$ \begin{gathered} {L_{{\text{cyc}}}}\left( {G,F} \right) = {E_{x \sim {P_{{\text{data}}}}\left( x \right)}}\left[ {{{\left\| {F\left( {G\left( x \right)} \right) - x} \right\|}_1}} \right] + \hfill \\ \quad {E_{y \sim {P_{{\text{data}}}}\left( y \right)}}\left[ {{{\left\| {G\left( {F\left( y \right)} \right) - y} \right\|}_1}} \right] \hfill \\ \end{gathered} $$ (3) 式中:||⋅||1表示l1范数。综上所述,CycleGAN网络的总损失函数为:
$$ L_{\rm CycleGAN}=L_{\rm GAN}(G,D_{Y},X,Y)+L_{\rm GAN}(F, D_{x}, Y, X) \\ \;\;\;\;\;\;\;\;\;\;\;+λL_{\rm cyc}(G,F) $$ (4) 式中:λ为平衡对抗损失和循环一致损失的权重,一般取10。
如图 3所示,当网络模型进行20轮迭代时,已经能够实现从可见光图像生成初具红外特征的仿真图像,但是存在的问题是仿真图像中船舶边缘模糊,内部纹理与真实红外风格存在偏差,水面波纹呈现的灰度变化更接近可见光图像风格;当进行到40轮迭代时,船舶目标边缘逐渐清晰,目标内部呈现较为符合红外特征风格的灰度分布,水面纹理表征更为自然;进行到120轮迭代时,可以生成视觉上较为逼真的红外仿真图像;但进行到140轮迭代后,生成图像会出现伪影现象。经过对比,本文选择第120轮作为截止代际。
4. 实验验证
4.1 验证方案
利用训练好的网络对测试集进行测试,在耗时95 h后得到训练模型。统计表明转换单张可见光图像平均时间约为0.2 s,可在短时间大量生成红外仿真图像。图 4展示了江面部分型号的集装箱船、干散货船的可见光图像及生成的红外图像。
为验证算法有效性,本文从图像真实度、质量、相似度3个方面评价实验结果。
验证方案示意图如图 5所示,首先将水上目标的原始可见光(Visible image)和红外图像(Infrared image)送入训练好的CycleGAN模型获取红外仿真图像(Infrared simulation)。从3个方面对红外仿真图像进行评价:
1)真实度:采用主观视觉效果评价生成的红外图像真实度;
2)相似度:采用结构相似性指数(structural similarity index measure, SSIM)评估红外仿真图像与原可见光图像的图像相似度,SSIM的取值范围是[-1, 1],越接近1,表明生成的红外图像与原可见光图像的相似度越高;
3)质量:采用信息熵(entropy)、平均梯度(average gradient)、边缘强度(edge intensity)、标准差(standard deviation)和空间频率(spatial frequency)5个指标评价生成的红外图像的质量,并与红外数据库中图像进行质量比较。
4.2 实验结果分析
从主观视觉效果上看,本文中生成的红外图像真实度较高。红外仿真图像中船舶目标的几何形状和空间关系与可见光图像基本一致,目标与背景温差明显,边界清晰。红外仿真图像内部细节丰富,区别于其他区域,船只内部温度较高的部件,如船舱动力系统、排气系统等,在仿真图像中表现为灰度值较大。红外仿真图像水面波纹与船舶尾流效果较好,与可见光图像相符。
评价红外仿真图像与原始可见光图像相似度时,本文在模型训练结束后计算测试集生成的红外仿真图像与相匹配的可见光图像的SSIM。红外仿真图像与相匹配的可见光图像SSIM均值为0.5194。参考从公共数据集中获取的21张已配准的红外与可见光图像,SSIM均值为0.3749,其结果表明与真实红外图像相比,本文生成的红外图像与可见光图像结构相似度较高,图像相似性高。
本文将生成红外仿真图像与原始数据集中所有真实红外图像样本进行对比,从信息熵、平均梯度、边缘强度、标准差、空间频率5个维度对生成图像质量进行评价,评价结果如图 6所示。生成的红外图像信息熵均值为5.46,数据库内红外图像信息熵均值为6.03,结果表明仿真图像与红外图像平均信息量上较为接近;平均梯度反映图像中的微小细节反差和纹理变化特征,生成的红外图像平均梯度均值为4.81,数据库内红外图像平均梯度均值为8.92,这是由于仿真图像是基于可见光图像生成的,转化过程中纹理信息有部分损失,仍需进一步提高;仿真图像边缘强度均值为8.52,数据库内红外图像边缘强度均值8.58,两者边缘强度相近,反映仿真图像边缘清晰程度达到红外图像水平;标准差反映了图像清晰程度,生成的红外图像标准差均值为28.53,数据库内红外图像标准差均值36.68,清晰度差别不大。图像空间频率反应图像灰度在空间中的变化情况,生成的红外图像空间频率均值为9.41,数据库内红外图像空间频率均值为15.23,生成的红外图像变化较慢,灰度值分布平坦,但仍能基本满足需求。
综上所述,本文中生成的红外图像真实度较高,与可见光图像结构相似度高,保持了目标对应内容特征,图像质量接近真实红外图像,细节丰富程度较高,基本符合红外图像的风格分布特征。
5. 结论
本文围绕快速生成水上目标红外图像问题,通过区域生长算法识别提取目标,结合循环生成对抗网络将可见光图像转换为红外图像,在无监督的情况下,可短时间内将大量可见光图像转换为红外仿真图像。红外仿真图像在图像质量、图像真实性和图像相似性上均有不错表现,可以用作装备性能测试时的红外信号源头,具有一定实用价值。该方法可弥补当前与水上目标可见光图像同轴红外图像数据库不足的问题,也可以推广应用于其他目标,解决红外图像采集困难的问题。
-
-
[1] 康龙. 基于红外图像处理的变电站设备故障诊断[D]. 北京: 华北电力大学, 2016. KANG Long. Substation equipment fault diagnosis based on infrared image processing[D]. Beijing: North China Electric Power University, 2016.
[2] 杨洋. 电气设备红外图像分析与处理[D]. 北京: 北京交通大学, 2015. YANG Yang. Infrared Image Analysis and Processing of Power Equipments[D]. Beijing: Beijing Jiaotong University, 2015.
[3] 王旭红, 李浩. 基于改进SSD的电力设备红外图像异常自动检测方法[J]. 电工技术学报, 2020, 35(1): 302-310. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS2020S1034.htm WANG Xuhong, LI Hao. Infrared image anomaly automatic detection method for power equipment based on improved single shot multi box detection[J]. Transactions of China Electrotechnical Society, 2020, 35(1): 302-310. https://www.cnki.com.cn/Article/CJFDTOTAL-DGJS2020S1034.htm
[4] 刘嵘, 刘辉, 贾然, 等. 一种智能型电网设备红外诊断系统的设计[J]. 红外技术, 2020, 42(12): 1198-1202. http://hwjs.nvir.cn/article/id/a00b6f68-052d-40c0-a00f-1f0ff120ce69 LIU Rong, LIU Hui, JIA Ran, et al. Design of Intelligent Infrared Diagnosis System for Power Grid Equipment[J]. Infrared Technology, 2020, 42(12): 1198-1202. http://hwjs.nvir.cn/article/id/a00b6f68-052d-40c0-a00f-1f0ff120ce69
[5] 张明. 基于红外图像的变电设备分类及在故障诊断中的应用[D]. 合肥: 合肥工业大学, 2012. ZHANG Ming. Substation Equipment Classification and Its Application in Fault Diagnosis Based on Infrared Image[D]. Hefei: Hefei University of Technology, 2012.
[6] 胡世征. 电气设备红外诊断的相对温差判断法及判断标准[J]. 电网技术, 1998, 22(10): 47-50. https://www.cnki.com.cn/Article/CJFDTOTAL-DWJS810.013.htm HU Shizheng. Method and Criterion of Relative Temperature Difference Determination of Infrared Diagnosis for Electric Eouipment[J]. Power System Technology, 1998, 22(10): 47-50. https://www.cnki.com.cn/Article/CJFDTOTAL-DWJS810.013.htm
[7] 郭英军, 孙丽华, 孙会琴, 等. 电力变压器热故障的在线诊断技术[J]. 河北科技大学学报, 2007(2): 147-149. https://www.cnki.com.cn/Article/CJFDTOTAL-HBQJ200702016.htm GUO Yingjun, SUN Lihua, SUN Huiqin, et al. An online diagnosis method of transformer hot fault[J]. Journal of Hebei University of Science and Technology, 2007(2): 147-149. https://www.cnki.com.cn/Article/CJFDTOTAL-HBQJ200702016.htm
[8] 王如意. 变电站电力设备红外图像分割技术研究[D]. 西安: 西安科技大学, 2011. WANG Ruyi. Research of Infrared Image Segmentation for Power Equipment in Substation[D]. Xi'an: Xi'an University of Science and Technology, 2011.
[9] 孙怡, 吴邦树, 刘仪卜, 等. 基于红外图像处理的电气设备故障诊断方法[J]. 机电工程技术, 2016, 45(6): 59-62. https://www.cnki.com.cn/Article/CJFDTOTAL-JXKF201606016.htm SUN Yi, WU Bangshu, LIU Yibu, et al. Method of default diagnosing of electric equipments based on infrared image processing[J]. Mechanical & Electrical Engineering Technology, 2016, 45(6): 59-62. https://www.cnki.com.cn/Article/CJFDTOTAL-JXKF201606016.htm
[10] 王淼, 杜伟, 孙鸿博, 等. 基于红外图像识别的输电线路故障诊断方法[J]. 红外技术, 2017, 39(4): 383-386. http://hwjs.nvir.cn/article/id/hwjs201704015 WANG Miao, DU Wei, SUN Hongbo, et al. Transmission Line Fault Diagnosis Method Based on Infrared Image Recognition[J]. Infrared Technology, 2017, 39(4): 383-386. http://hwjs.nvir.cn/article/id/hwjs201704015
[11] 冯振新, 许晓路, 周东国, 等. 基于局部区域聚类的电力设备故障区域提取方法[J]. 电测与仪表, 2020, 57(8): 45-50. https://www.cnki.com.cn/Article/CJFDTOTAL-DCYQ202008008.htm FENG Zhenxin, XU Xiaolu, ZHOU Donggu, et al. Extraction method of power device fault region based on local clustering algorithm[J]. Electrical Measurement & Instrumentation, 2020, 57(8): 45-50. https://www.cnki.com.cn/Article/CJFDTOTAL-DCYQ202008008.htm
[12] 冈萨雷斯. 数字图像处理[M]. 北京: 电子工业出版社, 2011. Rafael C. Gonzalez. Digital Image Processing[M]. Beijing: Publishing House of Electronics Industry, 2011.
-
期刊类型引用(3)
1. 王浩,吴易泽,王涛. 基于阵列热风激励的航发叶片近表面缺陷红外检测方法. 红外技术. 2022(10): 1112-1117 . 本站查看
2. 马宁强,陈黄鹂,乔旭,何舜晗. 阻态下晶闸管的温度场模型计算及热失效分析. 电力电子技术. 2021(12): 51-54 . 百度学术
3. 孙吉伟,孙浩,谢敏,李泓江,邓栋栋,曹涛. 涡流脉冲热像技术中基于神经网络的检出/漏检预测研究. 红外技术. 2020(08): 795-800 . 本站查看
其他类型引用(6)