直耦增强型CMOS相机技术研究

李亚情, 李晗艳, 张立昀, 陈旭华, 李晓露, 邱永生, 何俊, 高天礼, 杜培德, 周盛涛

李亚情, 李晗艳, 张立昀, 陈旭华, 李晓露, 邱永生, 何俊, 高天礼, 杜培德, 周盛涛. 直耦增强型CMOS相机技术研究[J]. 红外技术, 2024, 46(6): 699-706, 721.
引用本文: 李亚情, 李晗艳, 张立昀, 陈旭华, 李晓露, 邱永生, 何俊, 高天礼, 杜培德, 周盛涛. 直耦增强型CMOS相机技术研究[J]. 红外技术, 2024, 46(6): 699-706, 721.
LI Yaqing, LI Hanyan, ZHANG Liyun, CHEN Xuhua, LI Xiaolu, QIU Yongsheng, HE Jun, GAO Tianli, DU Peide, ZHOU Shengtao. Evaluation of Direct-coupled Intensified CMOS Camera[J]. Infrared Technology , 2024, 46(6): 699-706, 721.
Citation: LI Yaqing, LI Hanyan, ZHANG Liyun, CHEN Xuhua, LI Xiaolu, QIU Yongsheng, HE Jun, GAO Tianli, DU Peide, ZHOU Shengtao. Evaluation of Direct-coupled Intensified CMOS Camera[J]. Infrared Technology , 2024, 46(6): 699-706, 721.

直耦增强型CMOS相机技术研究

基金项目: 

国家自然科学基金 11535014

详细信息
    作者简介:

    李亚情(1993-),女,云南人,硕士,工程师,主要从事微光夜视技术研究。E-mail:liyaqing1742@dingtalk.com

  • 中图分类号: TN22

Evaluation of Direct-coupled Intensified CMOS Camera

  • 摘要:

    直耦增强型CMOS(intensified complementary metal-oxide-semiconductor, ICMOS)相机通过将像增强器输出窗与CMOS直接耦合而成,具备灵敏度高、响应速度快、光谱范围可调等特点。本文根据ICMOS的组成结构,分析了阴极、微通道板、荧光屏、CMOS等各组成部件对直耦ICMOS成像性能的影响,提出ICMOS用像增强器、CMOS成像器件的选型依据,并结合公司对像增强器的加工优势,基于18 mm NVT-7像增强器和1英寸CMOS开展了实际微光成像验证。结果表明,采用直耦方式的ICMOS相机能够在5×10-4 lx条件下清晰成像,分辨力达到16 lp/mm。此外,用于ICMOS耦合的像增强器增益不宜过高,4000 cd/(m2·lx)比较适宜,另外,在增益适宜的条件下,荧光屏输出亮度对其性能影响不大。

    Abstract:

    An ICMOS is fabricated by directly coupling the output window of the image intensifier with a CMOS resulting in the characteristics of high sensitivity, fast response, and adjustable spectral range. In this study, the influence of the cathode, microchannel plate, phosphor screen, CMOS, and other components on the imaging performance of direct-coupled ICMOS are analyzed according to the composition of ICMOS, thereby proposing the principle for selecting the image intensifier and CMOS for ICMOS. The advantages of image intensifier manufacturing combined with the actual low-light imaging performance of direct-coupling ICMOS are verified on an 18 mm NVT-7 image intensifier and 1-inch CMOS. The results show that the ICMOS camera can be used under 5×10-4 lx light conditions with a resolution of 16 lp/mm. In addition, the gain of the image intensifier for ICMOS should not exceed 4000 cd/(m2·lx), and the output brightness of the phosphor screen has minimal effect on performance under the condition of an appropriate gain.

  • 冷反射是制冷红外系统中一种普遍的杂光效应[1],也是评价和计算红外系统性能的重要指标之一[2]。冷反射是制冷型红外系统中探测器能够“看到”“自身反射”的“冷像”,它是从系统中各透镜表面反射回来进入光敏面的辐射[3]。因此,在制冷红外光学系统设计中,需合理选择光学结构形式,约束透镜形状、镜面像高、光线入射角、膜层透过率等指标,但上述指标与光学系统成像质量及边界尺寸要求相互制约,在含头罩窗口的光学成像制导系统中影响尤其明显。因此,在制冷红外光学系统研制生产前,通过建立数学仿真模型,进行光线追迹。对冷反射影响强度进行合理评价非常重要。

    在进行制冷红外光学系统设计时,通常利用YNI(指近轴边缘光线在该面上的投射高度Y、入射角I和折射率N的乘积)与I/I-BAR(I是近轴边缘光线的入射角,I-BAR是近轴主光线的入射角,I/I-BAR反映的是该面产生的冷像噪声在系统视场范围内的变化情况)两个参数作为光学系统中各表面产生的冷反射强度的评价标准[4]。近年来,已经有相关文献讨论了相关的设计方法,如文献[5-7]推导并总结了冷反射引入温差(Narcissus induced equivalent temperature difference, NITD)和成像系统参数及环境参数的关系式,并进行了定量分析。文献[8]提出了差分阈值制冷红外系统冷反射校正法,文献[9]分析了一种基于光学优化设计的冷反射抑制的设计方法,文献[10]开展了制冷型红外热像仪冷反射效应的数理分析,文献[11-13]讨论了中波红外系统中冷反射的抑制等相关工作。

    本文针对某中波红外制冷光学成像制导系统的需求,在满足系统指标要求的前提下合理布局,对系统的冷反射强度进行仿真分析和评估,利用工程样机进行冷反射对比实验,经实测仿真结果与实验现象基本一致,仿真方法准确有效。

    在制冷红外光学系统中,可以通过光学设计软件进行光线追迹仿真分析,根据分析结果进一步优化改进设计或者通过后期图像处理算法对图像进行标定校正进而对冷反射进行抑制。本文提出了一种通过ZEMAX光学设计软件,建立非序列数学仿真模型,通过逆向光线追迹方法,对由于镜片表面反射所形成的系统冷反射进行相对强度仿真,并给出仿真结果。冷反射示意图如图 1

    图  1  冷反射光路示意图
    Figure  1.  Diagrammatic sketch of narcissus ray

    制冷红外光学系统冷反射分析流程如下所述:

    1)由于冷反射现象为一种特殊的鬼像,所以在进行冷反射分析前,应先利用ZEMAX鬼像分析功能Ghost focus generator对系统进行鬼像分析,根据鬼像距离探测器像面的距离、成像大小、放大倍率等,找出鬼像比较严重的表面,对表面曲率半径进行修正优化,通过鬼像的筛选,给仿真分析提出方向性建议,减少后期ZEMAX的数据分析量;

    2)在ZEMAX中建立非序列仿真模型,光学系统中透镜的透过率依据镀膜经验数据曲线设置,材料自身的透过率按照ZEMAX软件自定义进行设置。系统中所涉及的结构件如镜筒、隔圈、压圈建模导入系统中,并按照零件表面反射率进行赋值;

    3)在探测器像面处设置黑体辐射光源及接收探测器,进行真实光线追迹,光源出射能量经透镜表面反射,在探测器光敏面上形成能量分布,即由于系统冷反射所引起的像面非均匀性。

    通过上述方法建立数学仿真模型,模型示意图如图 2所示。

    图  2  冷反射数学仿真模型
    Figure  2.  Mathematics simulation model of Narcissus

    通过上述分析可知,消除或降低冷反射的主要技术途径有以下3种:

    ① 在进行光学设计时,严格控制透镜形状和光线偏折角度,提高冷光线在各个透镜表面上的反射角度,使其经过多次震荡返回光线无法反射到探测器像面处,不能形成明显光斑,并通过鬼像分析快速确定造成较严重冷反射的问题面,进行优化设计,在优化过程中自动减小或消除其影响。

    ② 对结构件尤其是镜筒、隔圈、压圈等进行表面氧化发黑或涂覆消光漆处理,降低结构件表面的反射率,加强对杂散光的散射,降低系统的冷反射。

    ③ 根据空间尺寸布局,合理选择结构形式,减少镜片数量,提升系统透过率,同时提高光学镜片的膜层透过率,降低单面反射率。从而降低杂散辐射光源经透镜表面反射进入系统形成冷反射。

    以某中波红外制冷光学系统为例,原设计冷反射现象明显,在满足系统指标要求的情况下,对系统改进设计,进行冷反射仿真分析,同时开展冷反射实验进行对比,表 1为该光学系统的技术指标要求。图 3为改进前后光学系统图。

    表  1  光学系统技术指标要求
    Table  1.  The technical requirements of optical system
    Project Numerical value
    Focal length 27 mm
    FOV 20°×16°
    F# 2
    Format 640×512
    Pixel pitch 15 μm×15 μm
    Operating temperature -40℃~+70℃
    下载: 导出CSV 
    | 显示表格
    图  3  中波制冷红外光学系统
    Figure  3.  Layout of an MWIR optical system

    针对光学系统冷反射问题主要采取如下改进措施:

    1)优化光学结构,增加光学非球面,减少镜片数量,提高增透膜透过率要求,单个镜片透过率由98%提升至99%,降低由于透镜镀膜剩余反射所产生的冷反射现象,光学系统透过率由88.6%提高至96.1%(不含整流罩)。

    2)控制透镜曲率半径,增大各光学表面的YNI数值,最小值由改进前的0.3585增加至1.2798,降低系统的冷反射。

    3)利用ZEMAX软件建立非序列仿真模型,反向追迹,对系统各表面进行冷反射追迹,确定影响严重表面,在满足成像质量要求前提下,修改曲率半径,降低系统的冷反射。

    改进前后光学系统对比表如表 2所示。

    表  2  改进前后光学系统对比
    Table  2.  The comparison of optical system before and after improvement
    Project Optical system (exclude gairing)
    Before improvement After improvement
    Lens number 6 4
    YNImin 0.3585 (optical lens 5) 1.2798 (optical lens 1)
    Optical transmittance 88.6% 96.1%
    Aspheric surface 0 1(optical lens 3)
    下载: 导出CSV 
    | 显示表格

    分析改进后光学系统各个透镜表面的冷反射影响,经分析透镜1(optical lens 1)的前表面影响较大,在满足成像质量要求前提下,修改曲率半径,进行迭代分析优化,降低系统的冷反射,透镜1优化前后分析结果如图 4

    图  4  透镜1改进前后分析对比
    Figure  4.  The comparative analysis of optical lens 1 before and after improvement

    来自于光学系统外部非目标产生的杂散辐射及工作过程中内部机械件由于升温产生的杂散辐射是影响像面非均匀性的主要因素。为了降低由于镜筒内壁反射及自身辐射所产生的杂散光影响,在光线经过的镜筒内壁增加消光螺纹和消光漆。假设镜筒内壁为镜面反射,反射率为3%,经过5次反射到达探测器像面,根据公式(1)可以计算到达像面能量。

    $$ {R}_{系统}={R}^{n} $$ (1)

    式中:R系统为系统杂光总反射率;R为镜筒内壁反射率,R=3%;n为反射次数[14]n=5;经计算,R系统=2.43×10-8

    通过ZEMAX光学设计软件对改进前后的光学系统进行对比仿真分析(环境参数赋值相同),建立非序列仿真,该模型主要包括整流罩、光学系统、机械件及探测器光敏面4部分。其中光学系统、探测器将模型直接导入,整流罩膜层透过率为0.85,其他光学镜片膜层透过率单面为0.98,结构支撑件反射率设为5%,光源的辐射能量设为1 W,进行实际光线追迹,非序列仿真模型如图 5所示,分析结果如图 6图 7所示。

    图  5  非序列仿真模型
    Figure  5.  Non-sequential analysis model
    图  6  改进前后像面非均匀性灰度图分析对比
    Figure  6.  The comparison of non-uniformity grayscale image before and after improvement
    图  7  改进前后像面非均匀性曲线分析对比
    Figure  7.  The comparison of non-uniformity curve of the image before and after improvement

    从分析结果可以看出,改进前系统像面非均匀性灰度图有明显凸台边界,改进后系统的像面非均匀性灰度图弥散性好,无明显边界突变;改进前系统像面非相干照度非均匀性为40%,冷反射较明显,改进后系统像面非相干照度非均匀性曲线平滑,中心与边缘差异较小,像面均匀性较好,非均匀性为13%,冷反射现象基本消除。

    完成精密装校的工程样机如图 8所示,成像效果如图 9所示。同时开展了工程样机冷反射成像实验,改进前后冷反射成像效果如图 10所示,从实验结果可以看出,改进后系统成像质量优良,冷反射成像效果与仿真结果基本一致,进一步证明仿真方法的有效性。

    图  8  工程样机
    Figure  8.  The engineering prototype
    图  9  成像效果
    Figure  9.  Imaging effect
    图  10  冷反射实验结果
    Figure  10.  The result of narcissus experiment

    本文利用ZEMAX光学设计软件建立非序列数学仿真模型,提出了进行冷反射分析的分析流程及有效解决和降低冷反射的效应的技术途径。并以某中波红外光学系统为例,对光学系统进行改进优化设计,经分析改进后光学系统冷反射由40%下降到13%。并开展了工程样机研制和冷反射实验,实验与仿真结果基本一致。表明该分析方法能准确地反映红外光学系统中的冷反射实际情况,可作为制冷红外光学系统研制生产前的判定依据。

  • 图  1   直耦型ICMOS组成结构示意图

    Figure  1.   Composition structure schematic diagram of direct-coupled ICMOS

    图  2   不同光电阴极量子效率曲线[9]

    Figure  2.   Quantum efficiency curves of different photocathodes[9]

    图  3   MCP工作原理示意图[10]

    Figure  3.   Schematic diagram of MCP working principle[10]

    图  4   光在光锥和光纤面板中的传播过程对比示意图

    Figure  4.   Comparison diagram of the transmission path of light in the fiber optical taper and the fiber optical plate

    图  5   像增强器用常规电源和选通电源实物

    Figure  5.   Conventional and gating power supply of image intensifier

    图  6   直耦ICMOS理想耦合截面图

    Figure  6.   Ideal coupling cross section of direct-coupled ICMOS

    图  7   相同光纤尺寸匹配不同像元耦合剖面示意图

    Figure  7.   Coupling profile diagram of the same optical fiber with different pixel size

    图  8   直耦ICMOS耦合剖面图

    Figure  8.   Coupling profile diagram of direct-coupled ICMOS

    图  9   直耦用像增强器及CMOS相机

    Figure  9.   Image intensifier and CMOS camera for direct-coupling

    图  10   光纤面板与CMOS靶面尺寸图

    Figure  10.   Size diagram of fiber optical plate and CMOS target area

    图  11   进行尺寸加工和灌封后的像增强器

    Figure  11.   Image intensifier after size processing and potting

    图  12   直耦ICMOS耦合工艺过程

    Figure  12.   Coupling process of direct-coupled ICMOS

    图  13   像增强器不同增益亮度时ICMOS成像效果

    Figure  13.   Performance of ICMOS while image intensifier in different gain and brightness

    表  1   常用荧光粉发光特性参数

    Table  1   Luminescence characteristic parameters of commonly used phosphors

    Parameters P22 P43 P45 P46 P47
    Luminous efficiency/(lm/W) 18.85 13.2 7.8 - -
    Afterglow color Yellow-green(green) Yellow-green White Yellow-green Blue
    Peak wavelength/nm 534.8 544.1 544.2 530 400
    Fluorescence lifetime/ms 0.66 0.60 1.34 - -
    Lasting time/ms 8 1.2 1.7 0.3 0.055
    下载: 导出CSV

    表  2   直耦用像增强器及CMOS模组主要技术指标

    Table  2   Main parameters of image intensifier and CMOS camera for coupling

    Image intensifier CMOS camera
    Effective diameter 18 mm Effective area 15.04 mm×11.32 mm
    Sensitivity(2856 K) 1157 μA/lm Video-output XGA
    SNR 31.76 Size of pixel 13 μm
    Central resolution 68 lp/mm Frame rate 60 fps
    MTF 2.5 lp/mm 93% Exposure mode Rolling shutter
    7.5 lp/mm 73%
    15 lp/mm 54%
    30 lp/mm 34%
    EBI 0.15 μlx
    Luminance gain 2000-16000/
    (cd/(m2·lx))
    MOB 0.5-8.5 cd/m2
    下载: 导出CSV
  • [1]

    Roberto S, Mark A, Maurizio C, et al. A novel approach to night vision imaging systems development, integration and verification in military aircraft[C]//Aerosp. Sci. Technol., 2013, 31: 10-23.

    [2]

    Beal G, Boucharlat G, Cappechi F. 512×512 CCD visible imager with a fiber-optic faceplate[C]//Proc. of SPIE, 1985, 570: 20-26.

    [3]

    WANG L L. Fibre-optical light corn and its application[J]. Sci/tech Information Development and Economy, 2002, 12(6): 87-88.

    [4] 王红球. 用于生物探测的制冷型ICCD系统[D]. 北京: 清华大学, 2007.

    WANG Hongqiu. Refrigerated ICCD System for Biological Detection[D]. Beijing: Tsinghua University, 2007.

    [5] 闫晓梅, 王志社. 基于光锥耦合的X射线像增强器[J]. 光学学报, 2010(5): 1478-1482. https://www.cnki.com.cn/Article/CJFDTOTAL-GXXB201005051.htm

    YAN Xiaomei, WANG Zhishe. X-ray image intensifier based on optical cone coupling [J]. Acta Opticasinica, 2010(5): 1478-1482 https://www.cnki.com.cn/Article/CJFDTOTAL-GXXB201005051.htm

    [6] 高天阳, 曹峰梅, 王霞, 等. 微光像增器与大尺寸CMOS的直接耦合[J]. 红外技术, 2021, 43(6): 537-542. http://hwjs.nvir.cn/cn/article/id/4804f6ce-941d-4429-bd63-9fa7674c861d

    GAO Tianyang, CAO Fengmei, WANG Xia, et al. Direct coupling of low light image intensifier with large size CMOS[J]. Infrared Technology, 2021, 43(6): 537-542. http://hwjs.nvir.cn/cn/article/id/4804f6ce-941d-4429-bd63-9fa7674c861d

    [7] 崔志刚, 白廷柱, 高稚允. 翻修贴片设备在ICCD光锥耦合中的应用[J]. 光学技术, 2008, 34(2): 1002-1582. https://www.cnki.com.cn/Article/CJFDTOTAL-GXJS200802024.htm

    CUI Zhigang, BAI Tingzhu, GAO Zhiyun. Rework placement system applied in ICCD fiber optic taper mounting procedure[J]. Optical Technique, 2008, 34(2): 1002-1582. https://www.cnki.com.cn/Article/CJFDTOTAL-GXJS200802024.htm

    [8]

    de Groot A, Linotte P, van Veen D, et al. Performance of compact ICU (intensified camera unit) with autogating based on video signal[C]//Electro-Optical and Infrared Systems: Technology and Applications Ⅳ of SPIE, 2007, 6737: 73-82.

    [9]

    Photonis Scientific Detectors. Quantum Efficiency of Photo-cades [EB/OL]. [2019-12][2024-01-05]. https://cmsimg01.71360.com/data/u22435/file/2020031717232210132.pdf.

    [10] 中智科仪. 微通道板MCP简介[EB/OL]. [2021-01-27][2024-02-12]. http://www.cis-systems.com/newsinfo/1121333.html.

    Intelligent Scientific Systems. Introduction of MCP[EB/OL]. [2021-01-27] [2024-02-12]. http://www.cis-systems.com/newsinfo/1121333.html.

    [11] 杨武丽, 来悦颖, 张晓辉, 等. 微光像增强器常用荧光粉性能研究[J]. 应用光学, 2022, 43(6): 1207-1216. https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX202206023.htm

    YANG Wuli, LAI Yueyin, ZHANG Xiaohui, et al. Research on properties of commonly-used phosphors for low-level-light image intensifiers[J]. Journal of Applied Optics, 2022, 43(6): 1207-1216. https://www.cnki.com.cn/Article/CJFDTOTAL-YYGX202206023.htm

    [12]

    Beam Imaging Solutions. Products 2022[EB/OL]. [2022-01] [2024-01-20]. https://beamimaging.com/wp-content/uploads/2023/02/catalog-2022-new.pdf.

    [13] 崔志刚. ICCD光锥耦合技术研究及性能分析[D]. 北京: 北京理工大学, 2008.

    CUI Zhigang. Research and Performance Analysis of Optical Cone Coupling Technology of ICCD[D]. Beijing: Beijing Institute of Technology, 2008.

    [14] 刘德森, 殷宗敏, 祝颂来, 等. 纤维光学[M]. 北京: 科学出版社, 1987.

    LIU Desen, YIN Zongmin, ZHU Songlai, et al. Fiber Optics[M]. Beijing: Science Press, 1987.

    [15] 王耀祥, 田维坚, 章兴龙, 等. 纤维光锥有效透过率的理论分析[J]. 光子学报, 2005, 34(4): 529-533. https://www.cnki.com.cn/Article/CJFDTOTAL-GZXB20050400C.htm

    WANG Yaoxiang, TIAN Weijian, ZHANG Xinglong, et al. Theoretical analysis of the effective transmission about fiber taper[J]. Acta Photonica Sinica, 2005, 34(4): 529-533. https://www.cnki.com.cn/Article/CJFDTOTAL-GZXB20050400C.htm

    [16] 王耀祥, 田维坚, 黄琨, 等. 光锥与CCD耦合效率的理论分析[J]. 光子学报, 2004, 33(3): 318. https://www.cnki.com.cn/Article/CJFDTOTAL-GZXB200403016.htm

    WANG Yaoxiang, TIAN Weijian, HUANG Kun, et al. Theoretical analysis of the coupling efficient between fiber taper and CCD[J]. Acta Photonica Sinica, 2004, 33(3): 318. https://www.cnki.com.cn/Article/CJFDTOTAL-GZXB200403016.htm

    [17] 李晓峰, 李莉, 邓华斌, 等. 光纤面板及光锥传像特性研究(英文)[J]. 红外技术, 2014, 36(8): 617-623. http://hwjs.nvir.cn/cn/article/id/hwjs201408003

    LI Xiaofeng, LI Li, DENG Huabin, et al. Study on light transmission characteristics of fiber optic faceplate and fiber optic taper[J]. Infrared Technology, 2014, 36(8): 617-623. http://hwjs.nvir.cn/cn/article/id/hwjs201408003

    [18] 辛福学. ICCD的光纤耦合技术[J]. 红外与激光工程, 2001(3): 210-213. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201507033.htm

    XIN Fuxue. Optical fiber coupling technique of ICCD[J]. Infrared and Laser Engineering, 2001(3): 210-213. https://www.cnki.com.cn/Article/CJFDTOTAL-HWYJ201507033.htm

    [19]

    Smith A W. Textured fiber optic coupled image intensified camera: U. S. Patent 9, 201, 193[P]. 2015-12-1.

    [20]

    DU Y, HUANG Y, JIAO P, et al. Coupling resolution of tapered optical fiber array and CCD[C]//Ninth Symposium on Novel Photoelectronic Detection Technology and Applications of SPIE, 2023, 12617: 2002-2008.

    [21] 何欢. 距离选通ICCD及其控制电路设计与实现[D]. 中国科学院研究生院(西安光学精密机械研究所), 2015.

    HE Huan, Design for a Range-Gated ICCD and Its Control Circuit[D]. Xi'an: Xi'an Institute of Optics and Precision Mechanics, Chinese Academy of Sciences, 2015.

图(13)  /  表(2)
计量
  • 文章访问数:  84
  • HTML全文浏览量:  22
  • PDF下载量:  45
  • 被引次数: 0
出版历程
  • 收稿日期:  2023-11-19
  • 修回日期:  2024-01-12
  • 网络出版日期:  2024-06-23
  • 刊出日期:  2024-06-19

目录

/

返回文章
返回
x 关闭 永久关闭

尊敬的专家、作者、读者:

端午节期间因系统维护,《红外技术》网站(hwjs.nvir.cn)将于2024年6月7日20:00-6月10日关闭。关闭期间,您将暂时无法访问《红外技术》网站和登录投审稿系统,给您带来不便敬请谅解!

预计6月11日正常恢复《红外技术》网站及投审稿系统的服务。您如有任何问题,可发送邮件至编辑部邮箱(irtek@china.com)与我们联系。

感谢您对本刊的支持!

《红外技术》编辑部

2024年6月6日