Infrared Weak Target Detection Method Based on Sparse Attention
-
摘要:
针对复杂背景下红外弱小目标像素占比少,细节纹理特征匮乏导致特征提取困难、检测率低、虚警率高的问题,提出一种基于稀疏注意力和多尺度特征融合的红外弱小目标检测网络。该网络利用Resnest的分割注意力提取不同尺度特征,引入Biformer注意力模块学习目标与背景之间的远程关系,采用融合模块将高、低层特征进行融合,经过Head模块输出检测结果二值图。实验结果表明,本文方法在IoU和Fmeasure这两项指标中均取得最优,与DNANet方法相比,所提方法的交并比(IoU)提高3.9%、Fmeasure提高5.6%;与ABCNet方法相比,所提方法的IoU提高5.8%、Fmeasure提高10%;并且在不同复杂背景下均可有效检测出红外弱小目标,体现良好的鲁棒性和适应性,可以有效应用于复杂背景中的红外弱小目标检测。
Abstract:In this study, a novel weak infrared small target detection network based on sparse attention and multiscale feature fusion is proposed to address the challenges of low pixel occupancy and limited texture features for weak infrared small targets within complex backgrounds, leading to difficulties in feature extraction, low detection rates, and high false alarm rates. The network utilizes the segmentation attention of ResNest to extract features at different scales. A BiFormer attention module is introduced to learn the distant relationships between targets and backgrounds. Furthermore, a fusion module is employed to merge both high- and low-level features, with the final detection results represented as a binary image through a head module. The experimental results demonstrate that the proposed method achieves the best performance in terms of both Intersection over Union (IoU) and F-measure. Compared with the dense nested attention network (DNANet), the proposed method improved the IoU by 3.9% and F-measure by 5.6%. Compared with the attentive bilateral contextual network (ABCNet), the proposed method improved the IoU by 5.8% and F-measure by 10%. Moreover, the proposed approach exhibited robustness and adaptability in effectively detecting small weak infrared targets in diverse, complex backgrounds. This method is applicable to weak infrared small-target detection in complex backgrounds, exhibiting superior performance.
-
Keywords:
- infrared weak target detection /
- sparse attention /
- feature fusion /
- robustness
-
0. 引言
微通道板(microchannel plate,MCP)是由数百万个孔径微米级的通道式电子倍增器排列而成的二维电子倍增器阵列,因其出色的位置分辨及时间分辨性能,广泛应用于微光像增强器、微通道板光子探测器、微通道板型光电倍增管、质谱分析、空间粒子探测等领域[1-7]。开口面积比是微通道板的一项重要指标,指的是微通道板工作区的通道开口面积与整个工作区面积之比,开口面积比决定微通道板的探测效率,并在一定程度上影响微通道板的噪声因子[1]。近年来,随着微通道板制造技术进步,像增强器用小孔径MCP的开口面积比可超过65%,部分探测级微通道板开口面积比可达到70%,进一步追求大的开口面积比给微通道板的工艺制造带来非常大的困难。
在常规MCP制造工艺之外,提升微通道板开口面积比的另一个途径为MCP扩口技术,即将微通道板输入面的通道口处理成漏斗状,使开口面积比显著提升,达到80%甚至90%以上,在微光夜视仪、粒子探测器等军用、民用领域具有巨大的应用潜力。美国Galileo、日本Hamamatsu、南京理工大学等国内外单位在MCP扩口方向开展了研究工作,使用湿法腐蚀制作出的扩口MCP在电流增益、噪声因子、离子探测效率等方面性能优于常规MCP,但是由于工艺难度大,这项技术目前仅日本Hamamatsu能够提供孔径12μm科研用MCP,并没有得到大批量的实质性应用[8-11]。提高MCP对电子的探测效率方面,通过在MCP表面镀制具有二次电子发射能力的膜层也是一种有效措施,在微通道板型光电倍增管以及微光像增强器中均能够得到应用,但是同时也会带来一定的负面影响,如:微光像增强器中分辨力和调制传递函数性能会有一定的降低、微通道板型光电倍增管中会有延时脉冲等,扩口MCP有利于提高微通道板的时间和空间分辨能力,为解决以上问题提供可能[12-15]。
针对湿法腐蚀扩口技术所存在的工艺一致性差、选择性腐蚀造成锥度尺寸难以达标等问题,本文提出一种新的MCP扩口技术:利用微纳加工领域已成熟应用的干法刻蚀技术进行MCP扩口,通过建立理想模型研究刻蚀工艺对于扩口MCP开口面积比、锥形深度以及形状等参数的影响,为开展实验研究及可能的批量应用奠定基础。
1. 干法刻蚀技术实现MCP扩口原理
干法刻蚀技术是目前工业上最成熟也是应用最广泛的刻蚀技术。广义上讲,所有不涉及化学溶液腐蚀的刻蚀技术都称为干法刻蚀,干法刻蚀具有可控性好、精度高、可流水线批量刻蚀等优点,已成为半导体工业微纳制造工艺中主要的刻蚀技术。常用的干法刻蚀技术包括反应离子刻蚀(reaction ion etching, RIE)、感应耦合等离子体刻蚀(inductively coupled plasma, ICP)、离子束刻蚀(ion beam etching, IBE)、聚焦离子束刻蚀(focused ion beam, FIB)等[16]。实现MCP扩口需要具有定向刻蚀能力的干法刻蚀,如ICP、RIE、IBE,本文以IBE为例进行理论模型研究。离子束刻蚀技术是利用一定能量的离子撞击固体表面原子,使材料表面原子发生溅射,达到刻蚀的目的,属于纯物理过程,离子束刻蚀的优点在于:各向异性、方向性好、刻蚀控制精度高、可刻蚀材料种类多、离子束入射角度调节方便等[17]。
与湿法腐蚀的选择性腐蚀不同,干法刻蚀的方向性好但选择性很差,因此干法刻蚀形成MCP扩口的原理与湿法腐蚀有本质的不同。采用干法刻蚀形成扩口MCP示意图如图 1所示,离子束以一定的角度入射至MCP输入面,示意图中看向通道内壁的视线角度与离子束入射至MCP表面的角度相同,即离子束在通道内能够刻蚀的最深处为d点、d′点,在非剖面图中,视线看到的通道内的最深处也是d点。为便于计算,本文中MCP斜切角以0°计算:
① A为MCP表面,离子束刻蚀对于A面为均匀的刻蚀,对于锥形通道的形成没有作用;
② B为通道内壁表面,MCP通道相对于离子束不进行自转时,a′、b′、c′、d′四个点刻蚀掉的材料厚度相同,不会形成差别,而a、b、c、d四个点离子束并未能够刻蚀到;
③ 如果MCP通道相对于离子束实现以通道指向为轴进行自转,则a′、b′、c′、d′四个点与a、b、c、d四个点均能够被离子束刻蚀到,且a′与a、b′与b、c’与c、d′与d因两两处于完全对称的位置,刻蚀情况分别相同;
④ 由于微通道板圆形通道的特殊形状对于一定角度入射离子束的局部遮挡作用,不同深度处的位置点暴露于离子束中的时间不同,造成了刻蚀材料厚度的差异,以示意图中的4个点为例,a→b→c→d暴露于离子束的时间依次减短,而通道内比d点位置更深的地方,不会暴露于离子束,随着刻蚀时间的延长,会形成如图中虚线所示的有锥度的扩口。
2. 刻蚀工艺对扩口MCP性能参数的影响
2.1 模型建立
离子束以与MCP表面呈角度θ入射,MCP以通道指向为轴进行自转,构建模型如图 2,其中:D为微通道板孔间距;R为微通道板孔径;θ为离子束与MCP表面角度;h为通道内刻蚀深度;x为刻蚀厚度;Vα为离子束与刻蚀表面法线角度为α时的刻蚀速率。
在离子束刻蚀如石英玻璃、BK7玻璃时,刻蚀速率会随着入射角度的变化而有明显变化,随着入射角度的增大,刻蚀速率先增大再降低,在40°~65°之间有最大值出现[18]。由于微通道板在自转时,离子束与通道内不同位置处的入射角度时刻在变化中,为便于计算,理想模型中设定刻蚀速率不随着入射角度而变化,均为V。
2.2 刻蚀工艺条件对于开口面积比的影响
刻蚀工艺对于开口面积比的影响主要是刻蚀时间,开口面积比随着刻蚀时间的延长为非线性增加,主要分为3个阶段:阶段1:相邻通道边界尚未接触,如图 3(b)所示;阶段2:相邻通道边界已接触,相邻的3个通道边界尚未接触,如图 3(c)所示;阶段3:相邻的3个通道边界已接触,输入面已无平面,如图 3(d)所示。
图 3 不同刻蚀阶段开口面积比:(a) 未刻蚀,OAR=60%;(b) 刻蚀,OAR=75%;(c) 刻蚀至相邻通道接触,OAR=90.7%;(d)刻蚀至输入面无平面,OAR=100%Figure 3. Open area ratio at different etching stages: (a) Unetched, OAR=60%; (b) Etched, OAR=75%; (c) Etched until adjacent channel contact, OAR=90.7%; (d) Etch until there is no plane on the input surface, OAR=100%分阶段计算开口面积比随刻蚀时间的变化:
阶段1:$ 0 \leqslant t \leqslant \frac{{D - R}}{V} $时,
$$ \mathrm{OAR}=\frac{\sqrt{3} \pi}{6} \times\left(\frac{R+V t}{D}\right)^{2} $$ (1) 阶段2:$ \frac{{D - R}}{V} < t \leqslant \frac{{2D - \sqrt 3 R}}{{\sqrt 3 V}} $时,
$$ \text { OAR }=\frac{\left[\pi-6 \cos ^{-1}\left(\frac{D}{R+V t}\right)\right](R+V t)^{2}+6 D \sqrt{(R+V t)^{2}-D^{2}}}{2 \sqrt{3} D^{2}} $$ (2) 阶段3:$ t > \frac{{2D - \sqrt 3 R}}{{\sqrt 3 V}} $之后,
$$ \mathrm{OAR}=100 \% $$ (3) 如图 4所示,随着刻蚀时间的增加,开口面积初始以基本线性的规律增大,在达到90.7%之后,增大速度逐渐减缓,在阶段2的末期开口面积比接近100%,在阶段3中,开口面积比不再发生变化,也并未再引入其他问题,允许过刻蚀对于工艺控制非常有利。在开口面积比达到90%以上的前提下,影响干法刻蚀工艺时间的因素主要是通道之间的壁厚,壁厚越厚所需刻蚀时间越长,因此,干法刻蚀工艺对于小孔径微通道板的扩口效率更高。
2.3 刻蚀工艺条件对刻蚀深度影响
通道内刻蚀深度与离子束入射角度直接相关:
$$ h=R \times \tan \theta $$ (4) 理论计算结果如图 5所示。考虑到可实现性,离子入射角度太小时,工装夹具容易对离子束形成遮挡,且扩口深度较浅时对于扩口MCP性能也有一定的影响[9];离子入射角度太大时,离子束对于通道内壁的刻蚀效率显著下降[18],不利于扩口MCP的实现。综合考虑多种影响因素,离子束入射角度在30°~70°之间比较合适,对应的刻蚀深度范围为0.6倍~2.7倍通道孔径。
2.4 刻蚀工艺条件对刻蚀锥度影响
通道的锥度对于扩口MCP应用在不同领域时的性能有很大的影响,锥度不合适时无法获得最佳的效果。使用干法刻蚀进行MCP扩口,对于锥度有很强的可控性。求解通道刻蚀的锥度,可以转化为通道内不同深度处暴露于离子束的空间在圆周范围内的占比。在MCP表面的平面建立如下坐标系进行计算,β是E点与坐标系中心点的连线与角度0位置的夹角,如图 6所示:在[-π/2,-π]、[π/2,π]区间内均未暴露于离子束中,仅需计算[-π/2,π/2]区间,且为对称结构。
在角度为β处,E、F分别为通道内壁能够暴露于离子束中的最上与最下的位置,深度为:
$$ f(\beta)=h_{\mathrm{EF}}=R \cos \beta \tan \theta $$ (5) 将通道进行平面展开,不同角度处暴露于离子束中的最大深度分布如图 7所示。
根据通道内一周不同位置暴露于离子束最大深度的不同,计算不同深度h处刻蚀厚度相较于通道口入口处刻蚀厚度的比例:
$$ f(h)=\frac{2 \arccos \left(\frac{h}{R \tan \theta}\right)}{\pi} $$ (6) 式中:h∈[0, Rtanθ]。
如图 8所示,随着深度的增加,刻蚀厚度的减小并非线性,在MCP通道内壁成一个不规则的向内壁凹陷的弧面,此种形状下,进入到通道内的信号有更高的比例与更深处的通道内壁发生作用,对于扩口MCP在各类应用中都是更加有利的。
3. 结论
通过建立模型进行理论计算,验证采用干法刻蚀技术进行MCP扩口,在输入面形成漏斗形通道口可行性,计算了干法刻蚀工艺参数如刻蚀角度、刻蚀时间等对扩口MCP开口面积比、刻蚀深度、通道口锥度等参数的影响:
① MCP在自转状态下,由于其圆形通道结构的自遮挡效应,均匀的面离子源能够在圆形通道上制作出非均匀的结构,即实现MCP通道的扩孔。
② MCP开口面积比随着刻蚀时间的延长而增大,达到90%之前基本线性,后期逐步趋近于100%的极限,允许过刻蚀,对于工艺控制有利;工艺的时间主要受通道之间壁厚影响,通道壁越厚,所需加工时间越长,因此干法刻蚀技术对于小孔径微通道板的扩口效率更高。
③ 刻蚀角度决定了通道内刻蚀深度,综合考虑各种影响因素,离子束入射角度在30°~70°之间比较合适,对应的刻蚀深度范围为0.6倍~2.7倍通道孔径。
④ 通道口的锥度受到刻蚀时间与刻蚀角度的双重影响,计算出了不同深度处刻蚀的厚度。随着深度的增加,刻蚀厚度的减小并非线性,在MCP通道内壁成一个不规则的向内壁凹陷的弧面,此种形状下,进入到通道内的信号有更高的比例与更深处的通道内壁发生作用,对于扩口MCP在各类应用中都是更加有利。
本文开展的理论模型研究结果,为开展干法刻蚀进行MCP扩口实验研究奠定了的基础,下一步工作的重点是在理论模型的基础上,开展相应的试验研究。
-
表 1 不同方法对复杂背景下红外弱小目标检测结果的指标对比
Table 1 Comparison of metrics for infrared weak small target detection results under complex backgrounds using different methods
SCRG BSF IoU Pr Re Fmeasure FC3Net 66.8 26.2 0.612 0.739 0.754 0.727 AGPCNet 77.6 28.1 0.628 0.695 0.694 0.659 ACM 74.1 34.9 0.586 0.710 0.754 0.714 LSPM 89.7 25.1 0.543 0.822 0.607 0.682 DNANet 76.6 23.8 0.610 0.799 0.770 0.713 ABCNet 67.6 19.7 0.599 0.699 0.727 0.682 Ours 96.8 36.8 0.634 0.755 0.789 0.750 表 2 不同方法的参数量和检测时间比较
Table 2 Comparison of parameter count and detection time among different methods
AGPC DNA FC3 ACM ABC LSPM Ours Parameter count 12423175 4696517 7043282 530335 73508047 31583202 5205458 Detection time/s 51 25 14 10 151 77 21 表 3 不同模块组合检测结构的指标对比
Table 3 Comparison of metrics for different module combinations in detection structures
Biformer1 Biformer2 Biformer3 AFM IoU Fmeasure × × × × 0.264 0.341 × × × √ 0.549 0.660 √ × × √ 0.556 0.673 √ √ × √ 0.573 0.680 √ √ √ × 0.592 0.693 √ √ √ √ 0.634 0.750 -
[1] KOU R, WANG C, PENG Z, et al. Infrared small target segmentation networks: A survey[J]. Pattern Recognition, 2023, 143: 109788. DOI: 10.1016/j.patcog.2023.109788
[2] 崔晨辉, 蔺素珍, 李大威, 等. 基于孪生网络和Transformer的红外弱小目标跟踪方法[J]. 计算机应用, 2024, 44(2): 563-571. CUI C H, LIN S Z, LI D W, et al. Infrared weak target tracking method based on twin network and transformer[J]. Journal of Computer Applications, 2024, 44(2): 563-571.
[3] 蔺素珍, 张海松, 禄晓飞, 等. RBNSM: 一种复杂背景下红外弱小目标检测新方法[J]. 红外技术, 2022, 44(7): 667-675. http://hwjs.nvir.cn/article/id/fb6071f5-08ab-4944-b4a1-9921a68c5948 LIN S Z, ZHANG H S, LU X F, et al. RBNSM: A new method for infrared dim and small target detection in complex backgrounds[J]. Infrared Technology, 2022, 44(7): 667-675. http://hwjs.nvir.cn/article/id/fb6071f5-08ab-4944-b4a1-9921a68c5948
[4] LIANG X, LIU L, LUO M, et al. Robust infrared small target detection using hough line suppression and rank-hierarchy in complex backgrounds[J]. Infrared Physics & Technology, 2022, 120: 103893.
[5] LIU F, GAO C, CHEN F, et al. Infrared small and dim target detection with transformer under complex backgrounds[J]. IEEE Transactions on Image Processing, 2023, 32: 5921-5932. DOI: 10.1109/TIP.2023.3326396
[6] DENG L, ZHANG J, XU G, et al. Infrared small target detection via adaptive M-estimator ring top-hat transformation[J]. Pattern Recognition, 2021, 112: 107729.
[7] ZHANG T, PENG Z, WU H, et al. Infrared small target detection via self-regularized weighted sparse model[J]. Neurocomputing, 2021, 420: 124-148.
[8] LU Y, HUANG S, ZHAO W, et al. Sparse representation based infrared small target detection via an online-learned double sparse background dictionary[J]. Infrared Physics & Technology, 2019, 99: 14-27.
[9] CHEN C L P, LI H, WEI Y, et al. A local contrast method for small infrared target detection[J]. IEEE Transactions on Geoscience and Remote Sensing, 2013, 52(1): 574-581.
[10] Pustokhina I V, Pustokhin D A, Vaiyapuri T, et al. An automated deep learning based anomaly detection in pedestrian walkways for vulnerable road users safety[J]. Safety Science, 2021, 142: 105356.
[11] XIE S H, ZHANG W Z, CHENG P, et al. YOLOv4 fire and smoke detection model with embedded channel attention[J]. Chinese Journal of Liquid Crystal & Displays, 2021, 36(10): 1445-1453.
[12] DAI Y, WU Y, ZHOU F, et al. Asymmetric contextual modulation for infrared small target detection[C]//Proceedings of the IEEE/CVF Winter Conference on Applications of Computer Vision, 2021: 950-959.
[13] DAI Y, WU Y, ZHOU F, et al. Attentional local contrast networks for infrared small target detection[J]. IEEE Transactions on Geoscience and Remote Sensing, 2021, 59(11): 9813-9823.
[14] WANG H, ZHOU L, WANG L, et al. Miss detection vs. false alarm: Adversarial learning for small object segmentation in infrared images [C]// Proceedings of the IEEE/CVF International Conference on Computer Vision, 2019: 8509-8518.
[15] LI B, XIAO C, WANG L, et al. Dense nested attention network for infrared small target detection[J]. IEEE Transactions on Image Processing, 2022, 32: 1745-1758.
[16] CARION N, MASSA F, SYNNAEVE G, et al. End-to-end object detection with transformers[J/OL]. arXiv: 2005.12872, https://arxiv.org/abs/2005.12872.
[17] ZHANG F, LIN S, XIAO X, et al. Global attention network with multiscale feature fusion for infrared small target detection[J]. Optics & Laser Technology, 2024, 168: 110012.
[18] HUANG L, DAI S, HUANG T, et al. Infrared small target segmentation with multiscale feature representation[J]. Infrared Physics & Technology, 2021, 116: 103755.
[19] PAN P, WANG H, WANG C, et al. ABC: attention with bilinear correlation for infrared small target detection[J]. arXiv preprint arXiv: 2303.10321, 2023.
[20] ZHANG H, WU C, ZHANG Z, et al. Resnest: split-attention networks[C]//Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition, 2022: 2736-2746.
[21] ZHU L, WANG X, KE Z, et al. BiFormer: vision transformer with bi-level routing attention[C]//Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition, 2023: 10323-10333.
[22] ZHANG M, YUE K, ZHANG J, et al. Exploring feature compensation and cross-level correlation for infrared small target detection[C]// Proceedings of the 30th ACM International Conference on Multimedia, 2022: 1857-1865.
[23] ZHANG T, LI L, CAO S, et al. AGPCNet: Attention-guided pyramid context networks for detecting infrared small target under complex background[J]. IEEE Transactions on Aerospace and Electronic Systems, 2023, 59(4): 4250-4261.
-
期刊类型引用(1)
1. 邱祥彪,杨晓明,孙建宁,王健,丛晓庆,金戈,曾进能,张正君,潘凯,陈晓倩. 高空间分辨微通道板现状及发展. 红外技术. 2024(04): 460-466 . 本站查看
其他类型引用(0)