Performance Evaluation Model for Infrared Polarization Imaging System
-
摘要: 红外偏振成像系统快速发展且应用广泛，但评估其性能的成像系统性能模型发展不足。迫切需要能够与先进的偏振成像系统相匹配的性能模型。利用深度学习网络的训练过程与人脑提取认知信息过程的相似性，本文首次将深度学习方法引入系统性能模型领域，提出了一种基于二维图像的可自动评估系统性能的红外偏振成像系统性能模型。该模型主要包含两个主要模块：退化模块、性能感知模块。在评估一个新的系统时，需要输入高质量的原始图像，并根据系统的硬件参数量身定制成像系统退化模块，退化完成后输入性能感知模块，从而得到最终的目标获取性能。为验证模型有效性，本文基于红外辐射理论自建了面向海面场景的红外偏振数据集，训练网络并进行测试。应用该模型对红外偏振成像系统的性能进行评估，评估结果与主观感知具有较好的一致性。Abstract: Although infrared polarization imaging systems have been developed rapidly and widely, a model for evaluating their performance has not been sufficiently developed. Performance models that can match advanced polarization imaging systems are urgently required. Regarding the similarity between the training process of a deep learning network and the process of extracting cognitive information from the human brain, this paper introduces a deep learning method in the field of system performance modeling for the first time and proposes a performance model for infrared polarization imaging systems that can automatically evaluate system performance based on two-dimensional images. The model includes two main modules: a degradation module and a performance awareness module. When evaluating a new system, high-quality original images are input and sequentially passed through an imaging system degradation module, customized according to the hardware parameters of the system, and input into a performance awareness module to obtain the final target acquisition performance. Moreover, to verify the effectiveness of the model, we realized a self-built infrared polarization dataset for sea surface scenes based on infrared radiation theory, and trained and tested the networks. The results obtained when the model was applied to evaluate the performance of infrared polarization imaging systems showed good agreement with subjective perception.
-
Keywords:
- infrared polarization imaging /
- performance model /
- deep learning /
- sea scene dataset
-
0. 引言
航空发动机是航空飞行器中的核心部分，它的机械结构异常复杂，其可以产生足够动力支持航空飞行器的正常运行。航空发动机的正常运转将直接决定航空飞行器的可靠性和安全性，影响了航空飞行器的飞行安全[1-2]。航空发动机叶片正常工作对整个航空飞行器的飞行安全非常关键，在生产和服役过程中一直都需要对其进行检测和监测。作为航空发动机的重要组成部分，航空发动机长期在高温、高压、缺氧的恶劣环境下，在高频率振动、高温、高压的共同作用下，发动机叶片的结构强度和振动问题比较明显，容易导致叶片出现裂纹甚至是断裂情况。叶片裂纹根据断裂力学理论，处于扩展区域的裂纹将呈现指数形式的扩展，微小裂纹的危害将很快显现出来[3]。因此针对航空发动机的叶片检测显得尤为重要，不仅可以对叶片裂纹的状态进行判断，也可以对航空发动机的安全进行评估[4]。
目前对航空发动机叶片裂纹的检测主要为两大类：破坏性检测方法和非破坏性检测方法。破坏性检测方法是指通过破坏叶片样品进行微晶分析; 非破坏性方法是指采用无损检测方式对叶片样品进行检测，不破坏叶片表面结构，采用常见的物理或者化学方法对叶片进行无损检测，敲击法、磁粉检测、孔探仪、渗透检测、超声检测等[5-9]。敲击法对发动机叶片进行敲击，根据声音判断叶片是否存在裂纹，但该方式需要丰富的经验，并且容易误判或者漏检; 磁粉检测根据试件表面磁力线局部异常产生磁场吸附磁粉，在特殊光照下形成磁痕从而检测出缺陷，但该检测方式需要消磁和清理检测区域，响应速度慢、检测效率低; 渗透检测主要采用荧光等渗透剂喷洒在试件表面，通过紫外灯检测出样品表面裂纹，渗透检测过程中不仅需要喷洒荧光剂，还需要同时施加显影剂; 磁粉检测过程中需要消磁和清理被测区域，响应速度慢、耗时长、不适合现场批量检测[5-7]。超声检测利用超声波在试件内部传播，遇到声阻抗不同的界面发生反射、折射，对接收到的反射波进行分析来检测缺陷，但对于叶片类异形曲面结构，由于超声波在试件内部传播异常复杂，难以有效把握超声波传播规律，因而难于应用到实际检测中[10]。
超声红外热成像技术作为一种新型的红外检测技术，结合了超声激励和红外热成像技术，采用主动热激励方式对试件内部进行热激励[11-12]，; 超声激励为体加热方式，相对于脉冲红外热成像技术的面加热方式，体加热方式可以多维度区域加热，同时超声激励属于选择性激励，仅在缺陷区域产生温升，非缺陷区域不产生温升，能更有效避免周围热波信号的干扰，从而超声激励方式能更有效地检测试件内微小裂纹[13-14]。目前在西方先进工业国家已经成功地应用在航天航空领域的关键金属部件的裂纹缺陷检测[15-16]，如发动机的叶片等。
1. 基本原理
该技术主要是利用高功率超声波作为热激励源，超声波在试件内部传播引起内部裂纹摩擦生热、塑性变形、热弹效应等产生热量而引起试件缺陷区域局部温升，局部温升由于三维热扩散效应，温升区域热量从缺陷区域传递到试件表面，通过红外热像仪采集试件表面连续变化的温度信息，超声红外热成像技术原理示意图如图 1所示，主要包括红外热像仪、超声激励装置、图像处理和控制系统。最终根据采集到试件表面温度信号可以分析出试件内部缺陷的信息，从而可以实现试件内部缺陷信息的检测。
![]()
图 1 超声红外热成像技术原理示意图Figure 1. Schematic diagram of ultrasonic thermal wave imaging technology与其他激励方式红外热成像技术相比，超声激励红外热成像技术具有如下特点：一是超声激励不需要考虑热激励均匀性，属于选择性激励方式，仅对裂纹缺陷区域产生温升，对非缺陷区域基本不产生温升; 二是对复杂形状的试件依然可以取得较好的检测效果，不需要试件表面基本处于同一平面; 三是超声激励属于试件内部激励，相对于表面激励方式，热波传递到试件表面时间更短，更适合于检测出内部微小裂纹。
超声红外热成像技术对于航空发动机叶片内部裂纹比较有效，特别是对于叶片微小裂纹，裂纹更容易在超声激励作用下摩擦发热，由于三维热扩散，发热区域比实际裂纹区域要大，这将有助于微小裂纹的检测，而这种内部微小裂纹用其他方法难于有效检测。
2. 实验验证
2.1 实验平台系统
超声红外热成像实验平台系统实物如图 2所示，系统主要由超声激励源、超声发射器、超声枪、信号发生器、红外热像仪、结构支架、激光测振仪、计算机等组成。其中超声激励源包括超声驱动器、超声换能器及变幅杆等。激光测振仪主要用于测量试件表面振动信号，用于表征超声信号是否正常耦合进试件，信号发生器主要用于确保超声激励和红外热像仪采集之间的同步，以利于红外图像信号的处理和分析。红外热像仪正对航空发动机叶片试件，确保试件在红外热像仪视场中央，采集图像过程中不能移动叶片试件。计算机系统主要用于控制预紧力大小、热像仪采集时间、超声激励与采集同步、红外图像处理。
![]()
图 2 超声红外热成像技术实验平台Figure 2. Structural sketch of ultrasonic thermal wave imaging technology为了保证超声波能有效耦合进试件，需要超声枪头压在试件上，同时施加一定的预紧力，预紧力的大小需要通过压力传感器实时测量，从而能负反馈控制预紧力的大小。
超声枪的激励频率为20 kHz，激励功率为800 W，超声激励时间可设为200 ms~10 s，预紧力可设为0~2000 N，红外热像仪为FLIR公司生产的FLIR SC3000制冷热像仪，等效噪声温差（noise equivalent temperature difference, NETD）低于20 mK，探测波长范围8~9 μm，分辨率为320×240，采集帧频50 Hz。
2.2 航空发动机叶片
航空发动机叶片分为工作叶片和导向叶片，工作叶片称为转子叶片，导向叶片称为静子叶片，工作叶片位于导向叶片后方位置，如图 3所示。工作叶片需要承受较大的气流速度，因而工作叶片叶身厚，沿着叶高的截面变化相对明显，叶尖部分常常带有特殊构造，采用耐高温的镍基合金，在高温下有高的抗氧化和抗热腐蚀的能力，工作叶片的异形构造特性和表面涂层给实际检测带来了很大困难。
3. 实验结果对比
为了验证超声红外热成像检测效果，开展对比研究，分别采用渗透检测和金相技术对试件进行检测。
3.1 超声红外热成像结果
采用超声红外热成像技术对航空发动机工作叶片进行检测，实验中参数设置如下：超声激励时间设置为600 ms，超声激励预紧力设置为200 N，幅值输出设置100%，采集频率为50 Hz，采集时间3 s，采集帧数为150帧。选取采集序列中的6帧图像，如图 4所示，0 s时刻为超声激励前图像，是采集前背景图像，图 4中可以看出，缺陷从无到有、从逐渐变亮到逐渐变暗的过程，在超声激励过程中由于缺陷区域摩擦生热导致温度升高，超声激励结束后通过热传导效应传热至试件表面，热传导过程中会向三维方向扩散，热波在传播中会逐渐衰减，物理表现出热波强度逐渐减小、热波面积逐渐增大; 在红外图像中表现出亮斑区域逐渐扩大并逐渐消失的过程。
![]()
图 4 超声红外热成像不同时刻检测图像Figure 4. Ultrasonic infrared thermography images at different times超声激励前背景图像为温度平衡基本处于稳态的过程，叶片表面温度基本一致，看不出缺陷信息，超声激励后有缺陷区域开始温升，0.5 s时刻亮斑区域较小，0.86 s时刻亮斑区域增大，1.2 s时刻亮斑区域增至最大，之后时刻亮斑区域强度逐渐变暗至消失。
从不同时刻检测到的序列图像中可以看出，该航空发动机工作叶片存在3个缺陷区域，提取3个缺陷区域的信息，得到缺陷标注图像，3个缺陷区域分别为①、②、③号缺陷，如图 5所示。
![]()
图 5 超声红外热成像检测缺陷标注图像Figure 5. Defects labeled images of ultrasonic infrared thermography3.2 渗透检测结果
渗透检测是将一种荧光的渗透涂覆剂涂在试件表面，在毛细管现象的作用下，荧光渗透剂渗入表面开口的缺陷区域; 然后去除试件表面多余的荧光渗透液; 最后在试件表面喷上一层显像剂，同样在毛细管作用下，显像剂将缺陷区域的荧光渗透液回渗到显像剂中，在一定的光源下荧光渗透痕迹被显示，从而检测出缺陷，但渗透检测只能用于检测致密性试件且只能检测表面开口裂纹。
渗透检测结果如图 6所示，在叶片进气靠近叶尖位置看到1处裂纹，裂纹长度约1.5 mm，对应于超声红外热成像检测结果的缺陷①。
3.3 金相检测结果
为了验证超声红外热成像技术检测到的3个缺陷具体信息，采用金相显微镜对缺陷区域进行放大显示。
缺陷①金相显微镜放大图像结果如图 7所示，图 7(a)显示的是98×放大图像，图 7(b)显示的是1000×放大图像，从两个放大倍数的显微图像中都可以明显看到有裂纹，从图 7(b)中可以测量得到裂纹的宽度大致为15 μm。
缺陷②金相显微镜放大图像结果如图 8所示，图 8(a)显示的是98×放大图像，图 8(b)显示的是5000×放大图像，图 8(a)显微图像中无法看到缺陷裂纹图像，从图 8(b)显微图像像中可以明显看到有一裂纹缺陷，从图 8(b)中可以测量得到裂纹的宽度大致为0.5 μm。
3.4 结果对比分析
对于图 3所示的航空发动机工作叶片，超声红外热成像技术检测出了3个缺陷，缺陷编号分别是①、②、③，采用渗透检测，以荧光剂作为渗透液，仅检测出缺陷编号①的一处缺陷，采用金相显微镜对缺陷编号为①、②的缺陷放大，可以很清晰看到缺陷①处裂纹宽度约为15 μm，缺陷②处裂纹宽度约为0.5 μm，缺陷③从可见光图像观察可以明显看到有一开口缺陷。对于渗透检测的最小宽度裂纹，在理想情况下，侧壁绝对光滑、长宽比大于1、深宽比大于1的开口裂纹，理论上可以检测出0.1 μm宽度的缺陷裂纹。由于实际裂纹与理论上的裂纹存在差异，实际上的裂纹不会是理想中笔直的形状，且实际检测过程中存在外界条件、渗透液物理性能、渗透液化学性能、着色强度等干扰因素，因而采用渗透检测无法检测出约为0.5 μm宽度的缺陷②裂纹缺陷，但可检测出约为15 μm宽度缺陷①裂纹缺陷。对于超声红外热成像技术，由于缺陷②相比于缺陷①，裂纹缺陷宽度更窄，在20 kHz超声频率激励下，缺陷②摩擦振动的幅度比缺陷①摩擦振动的幅度更大，因而缺陷②局部温升比缺陷①局部温升高; 缺陷③为开口缺陷，开口处的不平整区域导致在超声激励下的摩擦生热等效应产生局部温升。
4. 结语
本文基于超声红外热成像技术对航空发动机叶片进行检测，该技术结合了超声激励技术与红外热像技术的优势，对试件表面的形状、粉尘及污染等不敏感。通过搭建的超声红外热成像实验平台检测了服役过程中产生裂纹的航空发动机叶片，实验结果表明，采用超声红外热成像技术可有效发现宽度约为0.5 μm的微小裂纹，渗透检测无法有效发现该微小裂纹。说明该技术在裂纹缺陷检测中有特殊的应用优势。
-
![]()
图 1 基本系统性能模型结构（绿色）。灰色：两个主要模块; 蓝色：性能感知模块
Figure 1. Basic system performance model structure(green). Gray: two main components; Blue: performance awareness module
![]()
图 2 PRI-YOLOv5的结构及输出定义示意图
Figure 2. Illustration of the PRI-YOLOv5 structure and output definition
![]()
图 9 几款待评估偏振系统的退化效果示意图
Figure 9. Schematic diagram of degradation effects of several polarization systems
![]()
图 10 不同距离处的目标获取概率（三款系统）
Figure 10. Target acquisition probability as a function of range(three systems)
表 1 红外偏振成像系统性能模型研究现状
Table 1 Research status of performance models for infrared polarization imaging systems
Name Year Principle Illustration Edson Guimaraes[9] 1999 MRTD, Johnson Criterion Based on the MRTD, this model further consider the transfer function and transmittance of the polarizer. Mehmet Yildirim[10] 2000 Designed for the second generation forward looking infrared sensor. Zhou Chenghao[11] 2013 Emphatically analyzed the models of different targets such as point source targets and extended source targets. Xia Runqiu[12] 2016 Ignore registration errors and the impact of the polarizer on MTF, the MRTD model of the polarization system is calculated. Liang Jianan[13] 2019 Modify the MRTD model and Johnson criterion based on interference factors such as background clutter. 
下载: 导出CSV
表 2 船模型及类别
Table 2 Ship models and classes
Target class Frigate Destroyer Patrol Target type ship1 
Size
X: 0.280m
Y: 1.948mship3 
Size
X: 0.436m
Y: 3.919mship5 
Size
X: 0.367m
Y: 2.001mship2 
Size
X: 0.344m
Y: 2.830mship4 
Size
X: 0.395m
Y: 3.108mship6 
Size
X: 0.482m
Y: 2.000mNote: All 3D models are downloaded from https://www.3d66.com/
下载: 导出CSV
表 3 仿真中变量和常量参数设置
Table 3 Variables and constant settings during simulation
Variables Group 1: Model ship Group 2: Real ship Name Number of values Values(unit) Number of values Values(unit) Focal length(f) 2 60, 85(mm) 1 105(mm) Pixel size(p) 3 14, 17, 20(μm) 3 14, 17, 20(μm) View radius(r) 2 100, 150(m) 4 2, 3, 4, 5(km) View zenith angle 4 30, 45, 60, 75(°) 4 30, 45, 60, 75(°) Wind speed 1 2(m/s) 1 13(m/s) Sea surface size 1 8 m×8 m 1 338 m×338 m Target class 6/3 see Table 1 6/3 see Table 1 Constants Name Values Name Values Solar zenith angle/° 45 Solar azimuth angle/° 60 Max reflected number 3 Detected wavelength/μm 3.8 Image size 300×300 Sea temperature/ K 300 Deck temperature/K 318.15 Hull temperature/K 303.15 Hot part temperature/K 328.15 Others temperature/K 313.15
下载: 导出CSV
表 4 待评估红外偏振成像系统主要参数
Table 4 The main parameters of infrared polarization imaging systems to be evaluated
System Focal length/mm Wave-length/μm F# Resolution Pixel size/μm System A 105 3~5.2 3.5 160×120 20 System B 135 3~5.2 1.5 640×480 17 System C 105 3~5.2 2 320×240 20
下载: 导出CSV
-
[1] Scott L B, Condiff L R. C2NVEO advanced FLIR systems performance model[C]//Proc. SPIE, 1990, 1309: 168-180.
[2] Scott L B, D'Agostino J A. NVEOD FLIR92 thermal imaging systems performance model[C]//Proc. SPIE, 1992, 1689: 194-203.
[3] Maurer T, Driggers R G, Vollmerhausen R H. 2002 NVTherm improve-ments[C]//Proc. SPIE, 2002, 4719: 15-23.
[4] Edwards T C, Vollmerhausen R H, Driggers R G, et al. NVESD time-limited search model[C]//Proc. SPIE, 2003, 5076: 53-59.
[5] Bijl P, Valeton J M. Triangle orientation discrimination: the alternative to minimum resolvable temperature difference and minimum resolvable contrast[J]. Optical Engineering, 1998, 37: 1976-1983. DOI: 10.1117/1.601904
[6] Vollmerhausen R H, Jacobs E and Driggers R G. New Metric for Predicting target acquisition Performance [J]. Optical Engineering, 2004, 43(11): 2806-2818. DOI: 10.1117/1.1799111
[7] Greif H J, Weiss A R, Wittenstein W. pcSitoS: A new tool for image-based IR system simulation [C]//Proc. SPIE, 2009, 7481: 748107.
[8] Hogervorst M A, Bijl P, Valeton J M. Capturing the sampling effects: a TOD sensor performance model [C]//Proc. SPIE, 2001, 4372: 62-73.
[9] Guimaraes E F. Investigation of minimum resolvable temperature difference formulation for polarized thermal imaging range prediction[D]. America: Naval Postgraduate School, 1999.
[10] Yildirim M. Modeling second generation FLIR sensor detection recognition and identification range with polarization filtering[D]. America: Naval Postgraduate School, 2000.
[11] 周程灏. 红外偏振成像系统作用距离建模与分析[D]. 哈尔滨: 哈尔滨工业大学, 2013. ZHOU Chenghao. Modeling and Analysis of the Operating Range of Infrared Polarization Imaging System[D]. Harbin: Harbin Institute of Technology, 2013.
[12] 夏润秋, 王霞, 金伟其, 等. 海面环境中红外偏振成像系统作用距离模型[J]. 红外与激光工程, 2016, 45(3): 74-78. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201603010.htm XIA Runqiu, WANG Xia, JIN Weiqi, et al. Distance model of infrared polarization imaging system used in sea-surface environment[J]. Infrared and Laser Engineering, 2016, 45(3): 74-78. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201603010.htm
[13] 梁建安. 基于红外偏振成像技术的水面杂波抑制方法研究[D]. 北京: 北京理工大学, 2019. LIANG Jianan. Research on Water Surface Clutter Suppression Method Based on Infrared Polarization Imaging Technology[D]. Beijing: Beijing Institute of Technology, 2019.
[14] ZHANG J Q, WANG X R. Modeling and Performance Evaluation Theory of Photoelectric Imaging System[M]. Xi'an: Xidian University Publishing House, 2010.
[15] Redmon J, Divvala S, Girshick R. You only look once: Unified, real-time object detection[C]//IEEE Conference on Computer Vision and Pattern Recognition, 2016: 779-788.
[16] Jocher G. YOLOv5 release v4.0[EB/OL]. [2023-01-20]. https://github.com/ultralytics/yoloV5.
[17] SU Shaolin, YAN Qingsen, ZHU Yu, et al. Blindly assess image quality in the wild guided by a self-adaptive hyper network[C]//IEEE/CVF Conference on Computer Vision and Pattern Recognition, 2020: 3664-3673.
[18] HE Si, WANG Xia, XIA Runqiu, et al. Polarimetric infrared imaging simulation of a synthetic sea surface with Mie scattering[J]. Applied Optics, 2018, 57(7): B150-B159. DOI: 10.1364/AO.57.00B150
-
期刊类型引用(14)
1. 董荣伟. 基于ADRC的高精度红外热成像仪温度控制系统设计. 计算机测量与控制. 2024(07): 162-168+175 . 
百度学术
2. 李瑞，陈飞. 组合砌体墙损伤红外热像检测方法研究. 粉煤灰综合利用. 2024(05): 92-96 . 百度学术
3. 沈久利，张玉存. 改进烟花算法计算热态轴类锻件内圆柱体空洞缺陷深度. 中国机械工程. 2023(04): 387-394 . 百度学术
4. 温飞娟，温奇飞，龙樟，蒲京辰，邓荣. 基于超声红外热波技术的再制造零件裂纹检测研究现状. 材料导报. 2023(06): 169-176 . 百度学术
5. 刘毅，储银贺，李波. 基于持续热激励红外检测的风机叶片腐蚀检测. 激光与红外. 2023(05): 716-722 . 百度学术
6. 梁嘉辉，贾宇，汤雷，张盛行. 耦合压力加载对超声热激励效果影响研究. 水利水运工程学报. 2023(03): 104-110 . 百度学术
7. 李胤，宋远佳，江海军，陈飞，张凯. 编织复合材料低速冲击损伤超声热成像检测. 红外技术. 2023(08): 876-883 . 本站查看
8. 江海军，盛涛，郑金华，向苹. 超声红外热成像技术国内研究现状与进展. 红外技术. 2023(10): 1020-1028 . 本站查看
9. 谢有浩，任杰，姜阔胜. 汽车散热器焊合率热成像检测系统. 河南科技大学学报(自然科学版). 2022(04): 41-45+6 . 百度学术
10. 王浩，吴易泽，王涛. 基于阵列热风激励的航发叶片近表面缺陷红外检测方法. 红外技术. 2022(10): 1112-1117 . 本站查看
11. 乔俊明. 大坝心墙河床段基座混凝土裂缝的远程红外监测. 无损检测. 2022(10): 35-39 . 百度学术
12. 冯辅周，朱俊臻，李志农. 超声红外热像技术发展现状及其在航空材料缺陷检测中的应用. 航空制造技术. 2022(20): 36-53 . 百度学术
13. 韩梦，尹嘉雯，黄军科，李伟，魏勤. 铝合金板疲劳微裂纹超声红外成像检测的数值及实验研究. 应用声学. 2022(05): 727-734 . 百度学术
14. 蔡亮. 基于超声红外热波成像的桥梁结构损伤识别方法. 现代交通技术. 2022(06): 55-59 . 百度学术
其他类型引用(7)
计量
- 文章访问数: 243
- HTML全文浏览量: 95
- PDF下载量: 99
- 被引次数: 21
