High-speed IR Temperature Measurement System
-
摘要:
针对于高速测温系统存在的响应时间慢、校准复杂、不适用特殊环境等问题,设计了以STM32F429IGT6微控制器为控制核心,以光学系统、制冷型红外探测器为主体的制冷型高速红外测温系统。光学系统采用金属抛物面反射镜构建光学组件,结合制冷型红外探测器完成光电转换,由微控制器进行高速采集。系统采样率为1 MHz,采用SD卡进行数据存储,可在屏幕上显示温度变化波形。采用黑体炉静态标定法进行温度标定,对温度与电压信号之间的关系进行最小二乘拟合,得到了电压-温度关系式,测量误差为±1℃,温度测量有效范围为10~200℃。标定后使用霍普金森压杆冲击实验进行了系统应用测试。测试结果表明,制冷型高速红外测温系统具有微秒级温度变化的探测能力,响应时间快,操作与校准简单,在动态高速测温领域具有广泛的应用前景。
Abstract:To address issues such as slow response time, complex calibration, and limited suitability for special environments in high-speed temperature measurements, a refrigeration-based high-speed IR temperature measurement system is designed with an STM32F429IGT6 microcontroller as the core controller and an optical system combined with a refrigeration-type IR detector as the main components. The optical system employs a metal parabolic reflector to construct the optical components. In conjunction with a refrigeration-type IR detector, photoelectric conversion is accomplished with high-speed data acquisition performed by the microcontroller. The system has a sampling rate of 1 MHz, utilizes an SD card for data storage, and displays the temperature-change waveforms on the screen. Temperature calibration is conducted using the blackbody furnace method, and a least squares fitting is applied to establish the voltage-temperature relationship formula, resulting in a measurement error of ±1℃. The effective temperature measurement range is 10-200℃. Following calibration, the system underwent Hopkinson pressure bar impact testing for practical application. The test results indicated that the refrigeration-based high-speed IR temperature measurement system possesses a microsecond-level detection capability for temperature changes, with a fast response time, simple operation, and calibration, thus demonstrating its promising applications in the field of dynamic high-speed temperature measurements.
-
0. 引言
目标的三维重建被广泛地应用在生产生活、军事侦查等领域,其主要采用激光扫描点云重构的方法实现[1]。由于待测目标表面的反射率、粗糙度、入射角等的不同,从而对激光扫描结果产生很大的影响,故多手段结合、多方法集成、多数据格式融合的目标点云滤波与算法优化设计成为提高三维目标重建效果的研究热点之一[2]。激光扫描获得的点云数据是离散的,所以并不能像二维图像处理那样通过像素点邻域特征算法完成目标识别,从而造成目标局部点云数据提取时夹杂噪声点或剔除目标点,降低目标三维重建质量。故点云扫描常常需要配合相应的特征提取算法才能更好地完成目标三维重建,例如数模边界法、包络盒法、立体投影法、光谱限定法等[3-6]。数模边界法以待测目标数模作为点云边界条件,可以获得准确的局部特征,速度快、精度高,但不适用于非合作目标;王果等人[7]采用已知数模为车载激光雷达点云数据分离单木目标,可分度较优化前得到了大幅提升。包络盒法可以根据目标类型自适应调节点云选框范围,可适用于非合作目标、更灵活,但易受目标外形及照射角度影响。Dominik等人[8-9]采用三维包络盒反向投影目标点云数据,实现了车辆局部数据的快速提取,但算法在车型结构复杂时识别率仅达53.1%。立体投影法与以上两种方法相近,都是基于目标几何特性实现的,存在普适性差的问题。Mousavian[10]将目标投影方向的点云映射位置作为特征边界,获取自动驾驶中外部障碍物的目标三维位置,相比传统方法的测距精度提升了23.4%。
相比之下,采用多光谱融合等手段提供边界限制的方法更具通用性。仝选悦[11]将红外特征作为点云提取边界,完成了非合作坦克目标的快速识别。Choi等[12]采用RGB分通道图像滤波的方式,对点云数据的特征点进行分离,噪声均值降低了约30%。王宏涛等[13]人采用融合光谱对机载LiDAR进行杂散点滤波,分类精度提升了13.4%。本文将多偏振光谱叠加形成目标局部特征区域,再把限定范围与激光扫描截面相结合,从而得到了经滤波抑噪的三维重建点云数据。
1. 系统设计
如图 1所示,本系统由3个部分组成:(a)偏振多光谱模块。处理模块控制步进电机选择不同的偏振片,入射光经偏振处理后照射在被测目标上,目标反射光由透镜组、检偏器接收光信号导入CCD;(b)双目激光扫描模块。扫描模块完成对目标整个区域的点云进行采集,CCD1和CCD2同时获取被测目标的激光回波信号,从而实现三维重建;(c)处理模块。将偏振多光谱模块的偏振图像数据作为映射边界条件,通过多光谱融合算法与点云特征对双目扫描的点云数据进行分类与降噪,最终完成目标三维视觉重建。
传统目标三维重建采用激光扫描实现,但扫描获得的点云数据往往受限于目标纹理、反光特性等影响而使局部重建误差过大,甚至出现数据空洞等现象。为了提高三维视觉重建效果,系统在扫描结构的基础上增加了(a)模块,通过步进电机驱动包含4个不同偏振态偏振片的旋转装置,使系统在任意扫描位置可以实现对目标表面分时采集4组偏振图像,并由CCD完成4幅偏振图像的采集。为了避免更换偏振片造成系统位置偏差导致的测试误差,选用旋转结构,即通过分时采集的方式保证空间位置不变,从而保证系统测试的稳定性。在测试过程中,采用偏振光源与双目成像系统中的光源同时照射待测目标,由于目标漫反射光与杂散光的偏振特性差异大,即在对原始多光谱进行适当滤波的条件下就能够提取目标光谱信息。同时,偏振光谱不受制于目标纹理特征,可以为三维点云数据提供准确的边界条件。
2. 数据融合模型构建
2.1 双目激光三维扫描
线激光属于结构光,设其入射方向与基准面的入射角为θ1,漫反射光与基准面的法线夹角为θ2,根据三角测量关系可知:
$$ \frac{X}{{X'}} \cdot \frac{{\sin ({\theta _1} + {\theta _2})}}{{\cos \alpha \cos {\theta _1}}} = \frac{{{L_1}\cos {\theta _1} - X\cos ({\theta _1} + {\theta _2})}}{{\left( {{L_2} - X'\cos \alpha } \right)\cos {\theta _1}}} $$ (1) 式中:X和X′分别为像面和标准面在X轴向的距离值;L1和L2分别为CCD像面到透镜,透镜到标准面的距离;α为像面法向与光轴之间的夹角。当CCD放置于透镜焦距f位置时,则有:
$$ X = \frac{{X'{L_1}\cos {\theta _1}\cos \alpha }}{{(f - X'\cos \alpha )\sin ({\theta _1} + {\theta _2}) + X'\cos ({\theta _1} + {\theta _2})\cos \alpha }} $$ (2) 系统采用主点坐标标定方法,光路示意如图 2中双目成像部分。设主点的坐标是(u0, v0),任意目标点P1在像面的映射点为(u1, v1)。相机采集p1点的3个特征位置分别是(u1, v1)、(u2, v2)、(u3, v3),则可得:
$$ \left({u}_{0}\text{,}{v}_{0}\right)=\left(\frac{2{u}_{2}{u}_{3}-{u}_{2}{u}_{1}-{u}_{1}{u}_{3}}{{u}_{3}-2{u}_{1}+{u}_{2}}\text{,}\frac{2{v}_{2}{v}_{3}-{v}_{2}{v}_{1}-{v}_{1}{v}_{3}}{{v}_{3}-2{v}_{1}+{v}_{2}}\right) $$ (3) 通过标定完成主点位置提取,将Halcon标定板放置于与光轴平行的位置上,沿光轴方向平行运动,在预设位置上分别提取3张图像(P1,P2,P3所在平面,如图 2所示),把黑色圆心当作特征点位。
2.2 偏振多光谱
根据菲涅尔原理,反射率会因光矢量方向的不同而不同,则通过旋转偏振片,可以改变反射光的亮度。在CCD前放置线偏振片,设偏振片透光轴和参考位置之间的夹角为v,则光照强度I(μ, λ, v)可表示为:
$$ I\left( {\mu , \lambda , v} \right) = \frac{{{I_{\max }} + {I_{\min }}}}{2} + \frac{{{I_{\max }} - {I_{\min }}}}{2}\cos \left( {2v - 2\phi } \right) $$ (4) 式中:μ为多光谱偏振图像中的像素点;λ为波长;Imax和Imin分别为最大光强值和最小光强值;ϕ为偏振角。由于系统是正定的,故设系数矩阵x的解为x=[x1, x2, x3]T,则有:
$$ \begin{array}{l}{I}_{\mathrm{max}}\text{=}{x}_{1}+\sqrt{{x}_{2}^{2}+{x}_{3}^{2}}\text{,}{I}_{\mathrm{min}}\text{=}{x}_{1}-\sqrt{{x}_{2}^{2}+{x}_{3}^{2}}\text{,}\\ \varphi \text{=0}\text{.5}\;\mathrm{arctan}\left({x}_{3}/{x}_{2}\right)\end{array} $$ (5) 2.3 数据融合
如图 2所示,由于偏振光谱坐标系与双目测距坐标系在测试过程中是固定的,所以可以通过三维位置换算完成坐标系的统一。对于双目扫描系统而言,任意截面上的点云集合只能表征目标的距离信息,所以三维重建时容易产生局部位置分割错误的问题。采用多光谱偏振图像就相当于在对应截面上给出了一个具有偏振特性的边界区域(如图 2中P1面上的阴影区),由此重建目标时有了明确的边界,则局部细节完整,避免了数据空洞与边界不清等问题。将(4)式代入(3)式,得到包含边界特征的坐标函数:
$$ \left\{\begin{array}{l} \left(u_0, v_0\right)\;=\;\left(\frac{2 u_2 u_3-u_2 u_1-u_1 u_3}{u_3-2 u_1+u_2}, \frac{2 v_2 v_3-v_2 v_1-v_1 v_3}{v_3-2 v_1+v_2}\right) \\ \;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;\;I_0 \geq I\left(\mu, \lambda, v)\right. \\ \left(u_0, v_0\right)=\left(u_{0+1}, v_{0+1}\right) \;\;\; I_0<I(\mu, \lambda, v) \end{array}\right.$$ (6) 式中:I0表示根据目标表面特性预设的光强度识别阈值,只有当在有效测试范围内超过测试阈值的光强度值才会被保留。当I0≥I(μ, λ, v)时,则说明其符合阈值设定,标记为同一局部单元,即符合同一局部的边界特征。当I0<I(μ, λ, v)时,该点序号加1,进入下一个局部分段的判断,以此类推,当迭代计算所有目标点时完成对目标的分类与识别。
3. 实验
3.1 激光扫描标定实验
模型中需要获取3个位置的图像信息进行位置标定,激光器采用ColdRay-660 nm结构光激光器(实验中采用线型扫描),相机选用MER-240型面阵CCD,电控平台选用ZXT400MA06步进平台。CCD1和CCD2的间距为50.0 cm,标定板尺寸为60.0 cm×60.0 cm,标定板到相机像面距离为150.0 cm。因为系统完成后主要应用于工业生产流水线上目标表面质量的快速检测,其工作距离在1.2~1.8 m之间,故采用150.0 cm的标定距离。前置透镜组典型焦距1200 mm,可电控调焦,相机最高帧率为100 fps/s。系统与标定板如图 3所示。
在获得线激光的能量分布后,对中心位置进行曲线拟合可以得到结构激光扫描线的拟合方程;然后通过两个CCD中标准板的图像位置,计算基线长度、测试目标与测试平台的夹角;最后将每个测量截面点云在三维空间复现,构成目标三维点云集合。以P1面的光强分布为例,对光束照射位置处能量进行采样拟合,如图 4(a),在对比了极值采样与高斯采样的基础上,选用了高斯采样,获得了亚像素级的标准位置坐标点,再结合Halcon标定板上圆点坐标,如图 4(b),即可将该截面的二维信息转化为三维点云。
如图 4(a)可以看出,高斯分布拟合的中心线对各个测试点的方差均值更小,当系统存在杂散点、照明不均匀、背景强光等时,其对总体分布的波动影响较小,而极值采样更偏向于峰值位置。在本系统应用中,高斯分布的拟合线更符合实际测试要求。在图 4(b)中,高斯采样拟合与极值采样拟合的直线映射位置与实际位置的偏差均值分别是0.59 mm与0.93 mm,故采用高斯采样误差更小。
3.2 偏振多光谱边界
对于杂散光引入的白噪声干扰,仅采用传统灰度图像处理算法就能够很好的抑制,但在双目识别中采用的是激光扫描获取的方式,数据点是离散的,传统算法仅能计算某一界面,这样会导致目标不同局部区域存在混叠的问题。故单纯采用灰度图像处理算法无法对空间离散的白噪声进行有效抑制,所以限定滤波的边界显得尤为重要。本系统以CCD感光面法向为参考方向,设置前置偏振片线偏振度为0°、45°、90°和135°,采集4幅不同偏振图像I1、I2、I3和I4,对4幅偏振光谱图像进行线性加权,生成单幅滤噪后图像,避免耀光、杂散光的干扰。将抑噪后图像中目标所在区域范围作为目标三维点云在该截面的二维边界。无偏振原始图像与经偏振多光谱叠加滤噪后的图像如图 5所示。
如图 5(a)所示,线激光外的区域中存在的杂散光等白噪声并不是二维平面上的噪声,所以不能将其全部滤除,其中包含了目标其它部分的有效信号及不同分区的噪声,所以需要通过不同偏振角条件下点云数据的分区进行分别滤波。如图 5(b)所示,当根据4个偏振态图像的边界分区分别进行滤波后,从而得到解算后的融合图像,该图像完成了目标不同部分的分区滤波。滤波后线激光灰度图像的背景噪声被大幅降低,线激光照射的区域以外噪声强度均值得到了很好的抑制。取背景区域内10×10像素范围计算噪声强度均值,滤波前后分别为49.5和13.4,说明采用偏振多光谱叠加可以对不具备偏振特征的白噪声起到很好地抑制作用。而对5×5像素范围的线激光照射区域灰度图像进行分析发现,滤波前后分别为238.6和229.1,强度衰减远小于背景区,即滤波对提高图像信噪比是有效的。
3.3 数据融合与三维重建
实验选用两段局部具有不同曲率的测试目标,对其进行扫描采集的点云数据,并利用偏振多光谱测试中提供的边际条件对点云数据进行滤波,获得目标三维可视化图像。在此基础上与数模位置对比,重建图像与偏差分布如图 6所示。
图 6(a)中是在测试目标表面分别选取了100个坐标点,绝大部分分布在目标两个局部表面上。测试结果显示,大部分的测试点位重建精度偏差很小,超过80%的测试点的误差小于3.05 μm,这些点优化前后的平均偏差为1.49 μm。但未优化的测试点中存在3处明显偏差位置,偏差最大值为62.32 μm,显然已不在同一个表面,其被判定为杂散点噪声,可见采用本算法对点云内异常点具有很好的识别效果。由图 6(b)可以看出,经过优化滤波后的目标三维点云数据分布均匀,在主要的两个局部表面上基本没有杂散点,可以很好地反映目标表面结构,提供较好的视觉效果。
4. 结论
本文针对三维目标重建过程中容易误将目标位置附近的杂散点混入的问题、对目标表面光滑度高容易产生数据空洞的问题,提出了基于偏振多光谱融合的双目激光扫描成像系统。双目激光扫描实验中,得到了高斯采样可以获得更好的中心位置反演精度的结论。偏振图像叠加测试时将目标界面的噪声进行了抑制,得到了较好的效果。最终,对待测目标点云数据的三维视觉重建得到了优化,验证了本算法的可行性。
-
表 1 光学系统参数
Table 1 Optical system parameters
Main parameters Value/Range Diameter/mm 25.4 Primary focal length PFL/mm 25.4 Focal length tolerance/% ±1% Effective focal length/mm 50.8 Off-axis amount/mm 50.8 Angle of deviation/° 90 表 2 HgCdTe探测器的主要参数
Table 2 Key parameters of HgCdTe detectors
Main parameters Value/Range Photosensitive area/mm² 1×1 Response time/μs 0.5 Response band/μm 2~14 Wavelength peak/μm 12 Temperature resolution/K 0.1 表 3 不同温度下电压的峰峰值
Table 3 Peak-to-Peak voltage at different temperatures
Temperature value/℃ Voltage peak value/V Temperature value/℃ Voltage peak value/V 50 1.0880 130 1.8907 60 1.1472 140 2.0428 70 1.2264 150 2.1982 80 1.3079 160 2.3559 90 1.4099 170 2.5312 100 1.5124 180 2.7215 110 1.6360 190 2.9131 120 1.7690 200 3.1065 表 4 各拟合温度与标准温度的误差
Table 4 Deviation between fitted temperatures and standard temperatures
Standard temperature/℃ Fitted temperature/℃ Error/℃ Standard temperature/℃ Fitted temperature/℃ Error/℃ 50 50.9 0.9 130 130.4 0.4 60 59.7 0.3 140 140.8 0.8 70 69.2 0.8 150 150.5 0.5 80 79.0 1 160 159.7 0.3 90 89.2 0.8 170 169.3 0.7 100 99.3 0.7 180 179.4 0.6 110 110.4 0.4 190 189.7 0.3 120 120.3 0.3 200 200.7 0.7 -
[1] ZHANG X, MENG Q, LUY Y, et al. Assessment of InSb infrared detector arrays assembly procedure employing ANSYS[J]. Optical and Quantum Electronics, 2019, 51(4): 92. DOI: 10.1007/s11082-019-1805-0
[2] Craig S J, Gaskell D R, Rockett P, et al. An experimental technique for measuring the temperature rise during impact testing[J]. Journal de Physique Ⅳ Colloque, 1994, 4: C8(41-46).
[3] LI Z, J Lambros. Dynamic thermomechanical behavior of fiber reinforced composites[J]. Composites Part A: Applied Science and Manufacturing, 2000, 31(6): 537-547. DOI: 10.1016/S1359-835X(99)00102-5
[4] Rittel D, WANG Z G. Thermo-mechanical aspects of adiabatic shear failure of AM50 and Ti6Al4V alloys[J]. Mechanics of Materials, 2008, 40(8): 629-635. DOI: 10.1016/j.mechmat.2008.03.002
[5] Hartley K A, Duffy J, Hawley R H. Measurement of the temperature profile during shear band formation in steels deforming at high strain rates [J]. Journal of the Mechanics & Physics of Solids, 1987, 35(3): 283-301.
[6] 夏源明, 饶世国. 红外瞬态测温装置及其在冲击拉伸试验中的应用[J]. 实验力学, 1990, 5(2): 170-177. XIA Yuanming, RAO Shiguo. Infrared transient temperature measuring device and its Application in impact tensile test [J]. Journal of Experimental Mechanics, 1990, 5(2): 170-177.
[7] 陈浩森, 郭亚洲, 朱盛鑫, 等. 多点式高速红外测温系统研制[J]. 实验力学, 2019, 34(2): 240-248. CHEN Haosen, GUO Yazhou, ZHU Shengxin, et al. Development of multi-point high-speed infrared temperature measurement system[J]. Journal of Experimental Mechanics, 2019, 34(2): 240-248.
[8] 宋旭尧, 董伟, 潘奕捷, 等. 基于集成黑体法1000~1500℃石墨材料高温红外光谱发射率测量[J]. 红外与毫米波学报, 2021, 40(2): 204-213. SONG Xuyao, DONG Wei, PAN Yijie, et al. Measurement of high temperature infrared spectral emissivity of graphite materials at 1000 ~ 1500℃ based on integrated blackbody method[J]. Journal of Infrared and Millimeter Waves, 2021, 40(2): 204-213.
[9] 陈伟孟, 苏明义. 红外测温仪与黑体辐射定律[J]. 物理教师, 2021(4): 42. CHEN Weimeng, SU Mingyi. Infrared thermometer and blackbody radiation law[J]. Physics Teacher, 2021(4): 42.
[10] 晏敏, 彭楚武, 颜永红, 等. 红外测温原理及误差分析[J]. 湖南大学学报: 自然科学版, 2004, 31(5): 110-112. DOI: 10.3321/j.issn:1000-2472.2004.05.025 YAN Min, PENG Chuwu, YAN Yonghong, et al. Principle and error analysis of infrared temperature measurement [J]. Journal of Hunan University: Natural Science Edition, 2004, 31(5): 110-112. DOI: 10.3321/j.issn:1000-2472.2004.05.025
[11] 张宇峰, 邬玉玲, 吴元庆, 等. 表面结构对面源黑体光谱发射率的影响[J]. 光谱学与光谱分析, 2023, 43(2): 389-393. ZHANG Yufeng, WU Yuling, WU Yuanqing, et al. Effect of surface structure on spectral emissivity of blackbody[J]. Spectroscopy and Spectral Analysis, 2019, 43(2): 389-393.
[12] 贺磊, 侯彬, 王仁浩, 等. 制冷红外光学系统中冷反射的非序列仿真分析[J]. 红外技术, 2023, 45(6): 592-597. http://hwjs.nvir.cn/article/id/d2f9988b-8c83-45c9-879c-bd28cdbda3d1 HE Lei, HOU Bin, WANG Renhao, et al. Non-sequence simulation analysis of cold reflection in refrigerating infrared optical system [J]. Infrared Technology, 2023, 45(6): 592-597. http://hwjs.nvir.cn/article/id/d2f9988b-8c83-45c9-879c-bd28cdbda3d1
[13] 冷丽国, 王模昌, 郁蕴健. 一种宽波段大视场红外辐射探测器[J]. 红外, 2003(8): 4. LENG Liguo, WANG Mochang, YU Yunjian. A kind of wide-band and wide-field infrared radiation detector[J]. Infrared, 2003(8): 4.
[14] 赵俊, 王晓璇, 李雄军, 等. 昆明物理研究所碲镉汞红外探测器研究进展[J]. 中国科学: 技术科学, 2023, 53(9): 1419-1433. ZHAO Jun, WANG Xiaoxuan, LI Xiongjun, et al. Research progress of mercury Cadmium telluride infrared detector in Kunming Institute of Physics[J]. Science in China: Technical Science, 2023, 53(9): 1419-1433
[15] 陈军, 习中立, 秦强, 等. 碲镉汞高温红外探测器组件进展[J]. 红外与激光工程, 2023, 52(1): 16-22. CHEN Jun, XI Zhongli, QIN Qiang, et al. Progress in tellurium cadmium mercury high-temperature infrared detector components[J]. Infrared and Laser Engineering, 2023, 52(1): 16-22.
[16] 刘永贵, 唐志平, 崔世堂. 冲击载荷下瞬态温度的实时测量方法[J]. 爆炸与冲击, 2014, 34(4): 471-475. LIU Yonggui, TANG Zhiping, CUI Shitang. Real-time measurement method of transient temperature under impact load[J]. Explosion and Shock Waves, 2014, 34(4): 471-475.
[17] 戴景民, 曹欣荣, 孙晓刚. 红外辐射式体温计的研制[J]. 红外技术, 2002, 24(3): 4. DOI: 10.3969/j.issn.1001-8891.2002.03.014 DAI Jingmin, CAO Xinrong, SUN Xiaogang. Development of infrared radiation thermometer [J]. Infrared Technology, 2002, 24(3): 4. DOI: 10.3969/j.issn.1001-8891.2002.03.014
[18] Zehnder A T, Guduru P R, Rosakis A J, et al. Million frames per second infrared imaging system [J]. Review of Scientific Instruments, 2000, 71(10): 3762-3768. DOI: 10.1063/1.1310350
[19] 胡剑虹, 宁飞, 沈湘衡, 等. 目标表面发射率对红外热像仪测温精度的影响[J]. 中国光学与应用光学, 2010, 3(2): 152-156. HU Jianhong, NING Fei, SHEN Xiangheng, et al. Effect of target surface emissivity on temperature measurement accuracy of infrared thermal imager [J]. Chinese Optics and Applied Optics, 2010, 3(2): 152-156.