Distortion Correction Method for Large Field-of-View Infrared Camera
-
摘要:
本文针对大视场红外相机的畸变校正过程复杂的问题，提出了一种新的畸变校正方法。首先，选择单参数除法模型（division model，DM）作为相机畸变模型，使用改进的加速特征稳健算法（speed-up robust features，SURF）自动获取两幅有相同场景的畸变红外图像的特征点对，然后利用九点非迭代算法和核密度估计方法获取图像的畸变参数，最后根据求得的畸变参数使用基于边缘保持的灰度插值方法对图像进行畸变校正。在整个过程中，不需要预先知道相机的参数和场景信息，通过输入两幅具有相同场景的图像，完成畸变校正，为大视场红外相机的畸变校正提供了一种新的解决方法。实验结果表明，使用该方法对大视场红外相机进行畸变校正具有可行性和鲁棒性。
Abstract:This paper proposes a distortion correction method suitable for large field of view infrared cameras. First, the single-parameter division model is selected as the camera distortion model, and the improved speed-up robust features algorithm is used to automatically obtain the feature point pairs of two distorted infrared images with the same scene. The nine-point non-iterative algorithm and kernel density estimation method are then used to obtain the distortion parameters of the image. Finally, according to the obtained distortion parameters, the grayscale interpolation method based on edge preservation is used to correct the distortion of the image. In the entire process, it is not necessary to determine the parameters and scene information of the camera in advance, and the distortion correction is completed by entering two images with the same scene, which provides a new solution for the distortion correction of large-field infrared cameras. The experimental results show that it is feasible and robust to use this method to correct the distortion of large field infrared cameras.
-
0. 引言
由两条金属线通过溅射的方式形成了一组窄缝，这组窄缝的距离小于入射光的波长，这就形成了亚波长金属光栅偏振器，它的体积属于纳米级别，但其偏振性能却非常好且容易集成，因此它被广泛应用于光通讯及液晶显示屏的制造中。其中双层金属纳米光栅偏振器属于纳米光栅偏振器件中的一种，由于其偏振效果更好得到人们的青睐。
纳米压印光刻技术在1995年首次由美国人提出[1]，是近20年才发展起来的新型的微细加工工艺，它是利用高分辨率的模板来复制加工微纳结构的一种新工艺，所以可以说这种技术首先建立在光刻技术上。第一个提出亚波长金属光栅具有检偏的偏振特性的是Hertz教授[2-3]，随后才相继出现了有关亚波长金属光栅相关理论及其制造方法。2005年，韩国LG电子研究院利用周期140 nm的硅基亚波长光栅作为压印模板制作了单层金属偏振光栅。2006年瑞士保罗谢尔研究所[4-5]在石英板上通过极紫外干涉光刻技术制备了周期为100 nm的亚波长光栅。随后几年，美国密歇根大学[6-7]开发一种可以连续制备周期为200 nm的亚波长结构的亚波长光栅，利用电子束在光栅上方沉积一层金属铝，经过测量其消光比为1000。这种压印技术在当时被认为是未来制备亚波长金属光栅的有效方法[8]。但是随着社会的快速发展，越来越多的曲面屏及可折叠屏成为了人们生活的主流[9-10]，这就让人不得不往柔性偏振器上思考。但是，目前对柔性纳米光栅偏振器的研究甚少。所以，通过对柔性纳米光栅偏振器在结构和制作工艺方面的研究，以制作出成本低、产出高的偏振器，这对柔性电子器件的工艺推进起到了很大的支撑作用。
基于以上分析，本文在严格耦合波理论[11]的基础上以复眼结构中的偏振敏感单元为模仿对象，利用微加工工艺制备了一种可用于仿生的偏振光光电传感器的偏振器。该偏振器是以柔性材料PC（Polycarbonate）作为基底利用纳米压印和磁控溅射技术制作而成的柔性双层金属光栅偏振器，并对制作的偏振器利用光谱测试系统进行偏振特性测试。
1. 实验
图 1为PC上制作的偏振器的模型图，将入射光中垂直和平行与于电场方向的光分别称为TM偏振光和TE偏振光。当TM偏振光照射在偏振器上时，由于电子振荡通过栅线方向时会受到阻碍，此时的光栅层就如同介质层可使TM光透过。电子会在TE光入射时以自由振荡的形式出现，导致TE光反射。
1.1 模板介绍
模板对于纳米压印相当重要，因此选择上海纳腾公司提供的模板，模板的周期是278 nm，线宽是139 nm，高度100 nm，模板的扫描电子显微镜图如图 2所示。模板防粘使用了来自Sigma-Aldrich公司的Trichloro (1H，1H，2H，2H-heptadecafluorodecyl) silane[12-13]。这种硅烷可以很好地与Si或SiO2表面的OH键结合形成含有C-F功能基单分子层，这种分子层在衬底表面表现出了很好的抗粘性能。做过表面处理的Si模版接触角从30°增大为110°，如图 3所示，表现出较好的疏水性能，将有利于压印时脱模。
![]()
图 2 模板的SEM图Figure 2. Scanning electron microscope (SEM) image of nanoimprint template1.2 双层金属纳米光栅偏振片的制作
在介质光栅的顶端和底端都沉积一层金属层的光栅称之为双层金属光栅。包含双层金属光栅的偏振器的制作只需在光栅上镀一次铝膜，比单层或包裹型金属光栅不仅降低了制作工艺难度，而且偏振和滤波效果更佳。①选择铝作为偏振器的金属层，是因为铝可以实现可见光波段的最优偏振特性；②0.5的占空比在同一波段具有最大的透射率和最大的消光比，由于透射率与金属的厚度成正比关系，但是，随着金属高度的增加，偏振器的消光比呈指数倍增大。但是，金属线栅高度的增加又会增大加工难度。因此，综合考虑，溅射金属铝的厚度为70 nm；③偏振器的消光比会因为金属光栅层之间距离的逐渐增大呈周期性震荡，根据文献[14]中的仿真本文选择金属光栅层的距离是50 nm；④光栅的周期和PC光栅高度是由模板决定的，目前的模板参数是周期278 nm，高度为100 nm[14]。
使用纳米压印的热压过程在柔性材料PC（聚碳酸酯）上压印纳米光栅。纳米压印技术最早由周郁教授提出的，它的优点在于可完成纳米结构的制作[15-16]。将模板与含有压印胶的基底紧密结合，等压印结束后小心地将模板和基底分开，这样就会在基底上形成模板上的图案。图 4所示为压印，脱模，和铝沉积的双层金属线栅偏振器的制造过程的示意图。本文使用的PC基底材料的厚度为0.2 mm。PC具备非常优异的性能，包括高透光率、高折射率、高抗冲性、尺寸稳定性及易加工成型等，因此PC被广泛应用于光学器件的制备中。另外，其热稳定性好，成型温度范围宽，是作为压印基底的一种理想材料。所使用的纳米压印仪（型号为NIL-150）是从中国上海纳腾仪器有限公司引进的最新微纳结构加工设备。
![]()
图 4 柔性双层金属光栅偏振器的制作工艺流程图Figure 4. Manufacturing process flow chart of flexible double layer metal grating polarizer实验前需要将去掉保护膜的PC基底材料裁剪为20 mm×20 mm的正方形备用。但是剪切下来的PC片表面并不是很平整，会使其在压印过程中不能和模板完全接触，这就会影响应力的分布在加压和保压的过程中不能使结构完全地转移到基底上。为了解决这个问题，如图 5所示在压印的过程中在PC基底下面又增加了一片1 mm厚的聚二甲基硅氧烷（Polydimethylsiloxane：PDMS）柔性薄膜，因为PDMS具有很好的柔韧性和高温稳定性，在高温施压的过程中可以很好地分散加载在硬质模板上的应力，同时对模板起到一个保护作用。
压印参数为：真空度为0.07 MPa，压力为0.65 MPa，压印温度为160℃，压印时间设定为5 min。等压印时间一到立马开启冷却水进行腔室的降温，直到操作面板上的温度显示40℃时关闭压力阀往里面充氮气，待室门自动开启后用镊子取出样品然后小心地将两者分开，就可得到光栅结构，实物图和SEM图如图 6所示。
最后，利用真空度为7×10－6 Mbar的磁控溅射在光栅结构上表面溅射一层厚度为70 nm的Al，加工参数如表 1所示。
表 1 柔性双层金属光栅偏振器的参数Table 1. Parameters of subwavelength metal grating polarizerMaterials and structures Materials and parameters Substrate materials PC Metallic materials Al Period/nm 278 Duty cycle 0.5 Aluminum thickness/nm 70 Distance between two metal grating layers/nm 50 PC grating height/nm 100 2. 结果和讨论
偏振器的性能由透过率和消光比决定，因此利用搭建的光谱测试系统对制造的金属光栅偏振器进行了透过率和消光比的测量[17]，光谱测试系统如图 7所示。
利用氙气灯发出的白光作为检测光源，经透镜聚光后再经过小孔光阑后作为点光源，非线偏光透过偏振片后形成线偏光。透过的偏振光直接垂直照射在光栅上，光栅后面放置爱万提斯光纤光谱仪，利用光纤探头测试透射光光谱。旋转偏振片的相应位置分别得到TE和TM偏振光的最大与最小透射强度。然后利用公式：
$$ {\rm{ER}}={T_{{\rm{TM}}}}/{T_{{\rm{TE}}}} $$ 计算得到消光比，式中TTM、TTE分别表示TM和TE偏振光的透射率。
应用严格耦合波理论对制造的柔性双层金属光栅偏振器进行了TM透射率及消光比的计算，由于一般只有TM偏振光才能透过偏振器，而且计算消光比也已用到TE偏振光的信息，所以文中不单独对TE偏振光进行分析。如图 8所示为本文制造的柔性双层金属光栅偏振器的性能测试图，从图上可以看出本文制造的偏振器在入射光波长范围为350~800 nm时的透过率可达48%，消光比可达100000，具有非常好的偏振效果，达到了用于偏振导航的需求。
![]()
图 8 柔性双层金属光栅偏振器的性能测试图Figure 8. Performance test chart of flexible double layer metal grating polarizer3. 结论
利用纳米压印技术和磁控溅射在柔性材料上通过简单的方法制作出了柔性双层金属光栅偏振器，并进行了透过率和消光比的测试。实验结果显示，当入射光的波长在350~800 nm之间，加工的偏振器性能优良，透过率和消光比分别高达48%和100000，具有较好的偏振效果，达到了用于偏振导航的要求。制作的柔性双层金属光栅偏振器只涉及纳米压印和磁控溅射两个工艺，并且不包括任何抗蚀剂旋涂、剥离和刻蚀工艺，制作过程是非常简单的，适合大批量生产。本文制造的柔性双层金属光栅偏振器有望应用到光学系统中，特别是在液晶显示器领域。
-
![]()
图 2 不同成像模型的视场角与投影半径关系
Figure 2. The relationship between the field of view and the projection radius of different imaging models
![]()
图 4 改进的SURF算法特征点检测流程
Figure 4. Improved SURF algorithm extracts feature point flowcharts
![]()
图 5 基于边缘保持的插值方法原理
Figure 5. The principle of interpolation method based on edge holding
-
[1] 黄文文, 彭小红, 李丽圆, 等. 相机标定方法及进展研究综述[J]. 激光与光电子学进展, 2023, 60(16): 1600001. DOI: 10.3788/LOP221494. HUANG Wenwen, PENG Xiaohong, LI Liyuan, et al. Camera calibration method and progress research review[J]. Advances in Laser and Optoelectronics, 2023, 60(16): 1600001. DOI: 10.3788/LOP221494.
[2] 叶晴旻. 大视场相机畸变校正相关技术的研究[D]. 杭州: 浙江大学, 2016. YE Qingmin. Research on Distortion Correction Technology of Large Field Camera[D]. Hangzhou: Zhejiang University, 2016.
[3] Tsai R Y. A versatile camera calibration technique for high-accuracy 3D machine vision metrology using off-the-shelf TV cameras and lenses[C]//IEEE Conference on Computer Vision & Pattern Recognition, 1987, 3(4): 323-344.
[4] 孟晓桥, 胡占义. 摄像机自标定方法的研究与进展[J]. 自动化学报, 2003, 29(1): 110-120. https://www.cnki.com.cn/Article/CJFDTOTAL-MOTO200301014.htm MENG Xiaoqiao, HU Zhanyi. Research and progress of camera self-calibration method[J]. Acta Automatica Sinica, 2003, 29(1): 110-120. https://www.cnki.com.cn/Article/CJFDTOTAL-MOTO200301014.htm
[5] WENG J, Cohen P, Herniou M. Camera calibration with distortion models and accuracy evaluation[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 1992, 14(10): 965-980. DOI: 10.1109/34.159901
[6] LI Hongdong, Hartley R. A non-iterative method for correcting lens distortion from nine point correspondences[C]//Proceedings of IEEE International Conference on Image Processing, 2005: 273-282.
[7] 刘亚强, 陈文艺. 桶形畸变图像的一种校正方法[J]. 西安邮电大学学报, 2012, 17(2): 27-30. LIU Yaqiang, CHEN Wenyi. A correction method for barrel distortion images[J]. Journal of Xi'an University of Posts and Telecommunications, 2012, 17(2): 27-30.
[8] Conrady B. Lens-systems, Detected[J]. Monthly Notices of the Royal Astronomical Society, 1919, 79: 384-390. DOI: 10.1093/mnras/79.5.384
[9] Claus D, Fitzgibbon A W. A rational function lens distortion model for general cameras[C]//Proceedings of IEEE Computer Society Conference on Computer Vision and Pattern Recognition, 2005: 213-219.
[10] 杨济瑞, 张晓燕, 罗攀. 基于图像匹配的特征点检测方法综述[J]. 电子测试, 2021(6): 53-54. DOI: 10.3969/j.issn. 1000-8519.2021.06.022. YANG Jirui, ZHANG Xiaoyan, LUO Pan. Review of feature point detection methods based on image matching[J]. Electronic Testing, 2021(6): 53-54. DOI: 10.3969/j.issn. 1000-8519.2021.06.022.
[11] 陈秀芳. 基于改进SURF的图像匹配算法研究[D]. 大庆: 东北石油大学, 2021. DOI: 10.26995/d.cnki.gdqsc.2021.000228. CHEN Xiufang. Research on Image Matching Algorithm Based on Improved SURF[D]. Daqing: Northeast Petroleum Science, 2021. DOI: 10.26995/d.cnki.gdqsc.2021.000228.
[12] Hartley R, Kang S B. Parameter-free radial distortion correction with centre of distortion estimation[C]//International Conference on Computer Vision. IEEE, 2005: 1834-1841. DOI: 10.1109/ICCV.2005.184.
[13] 任德清, 张天宇, 王钢. 改进型高性能静态像差校正技术[J]. 光电工程, 2022, 49(3): 210319. https://www.cnki.com.cn/Article/CJFDTOTAL-GDGC202203003.htm REN Deqing, ZHANG Tianyu, WANG Gang. An optimized high-performance technique for adaptive optics static aberration correction[J]. Opto-Electron Eng, 2022, 49(3): 210319. https://www.cnki.com.cn/Article/CJFDTOTAL-GDGC202203003.htm
[14] 石恬. 车载鱼眼相机自标定研究[D]. 西安: 西安电子科技大学, 2015. DOI: 10.7666/d.D01066412. SHI Tian. Research on Self-calibration of Vehicle-Mounted Fisheye Camera[D]. Xi'an: Xidian University, 2015. DOI: 10.7666/d.D01066412.
-
期刊类型引用(2)
1. 汪会达，张栋，肖焰辉，张潇云，刘宇，陈德明. 改进SSD算法的光伏板污损检测. 上海电机学院学报. 2025(01): 52-57 . 
百度学术
2. 李春亚，王建华，尹土兵，卢建飞，邹晓波，叶儒桦. 个人防护装备穿戴安全检测技术的进展与应用. 武汉理工大学学报. 2024(10): 149-155+162 . 百度学术
其他类型引用(2)
下载:
计量
- 文章访问数: 96
- HTML全文浏览量: 6
- PDF下载量: 46
- 被引次数: 4
