基于天然气组分红外光谱图的数据预处理方法研究

康明, 韩森坪, 杨洪杰, 唐德东, 李妍君, 汪智琦

康明, 韩森坪, 杨洪杰, 唐德东, 李妍君, 汪智琦. 基于天然气组分红外光谱图的数据预处理方法研究[J]. 红外技术, 2021, 43(8): 804-808.
引用本文: 康明, 韩森坪, 杨洪杰, 唐德东, 李妍君, 汪智琦. 基于天然气组分红外光谱图的数据预处理方法研究[J]. 红外技术, 2021, 43(8): 804-808.
KANG Ming, HAN Senping, YANG Hongjie, TANG Dedong, LI Yanjun, WANG Zhiqi. Data Preprocessing Method for Infrared Spectra Analysis of Natural Gas Components[J]. Infrared Technology , 2021, 43(8): 804-808.
Citation: KANG Ming, HAN Senping, YANG Hongjie, TANG Dedong, LI Yanjun, WANG Zhiqi. Data Preprocessing Method for Infrared Spectra Analysis of Natural Gas Components[J]. Infrared Technology , 2021, 43(8): 804-808.

基于天然气组分红外光谱图的数据预处理方法研究

基金项目: 

重庆市技术创新与应用发展专项 cstc2019jscx-msxmX0054

重庆市重庆科技学院研究生科技创新计划项目 YKJCX1920405

详细信息
    作者简介:

    康明(1997-),女,硕士研究生,主要从事天然气组分图谱解析研究。E-mail:1551043341@qq.com

  • 中图分类号: TE81

Data Preprocessing Method for Infrared Spectra Analysis of Natural Gas Components

  • 摘要: 利用红外光谱分析仪对天然气组分进行组分分析时所获得光谱信号往往会受杂散光、噪声、基线漂移等因素的干扰,从而影响最终定量分析结果,故需要在建模前对原始光谱进行预处理。为解决仪器测量光谱图的噪声干扰问题,本文提出一种Savitzky-Golay平滑法结合sym6小波函数软阈值去噪法对光谱图进行预处理。将传统的预处理方法与SG平滑法结合小波函数法进行对比分析。结果表明,以SG平滑法结合sym6小波函数软阈值去噪法对光谱图进行预处理,其拟合优度数值最高为0.98652,残差平方和数值最低为5.50694,证明使用该方法后的函数分峰拟合效果最佳,处理效果优于传统方法。
    Abstract: When using infrared spectroscopy to analyze the components of natural gas, the obtained spectral signals often contain interference from stray light, noise, baseline drift, and other factors, which affects the resulting quantitative analysis. Therefore, it is necessary to preprocess the original spectrum before modeling. As a potential solution, an SG smoothing method combined with the soft threshold denoising method of the sym6 wavelet function was proposed to preprocess the spectrogram. The traditional preprocessing method and the proposed method are compared and analyzed. The results show that when the proposed method is used to preprocess the spectrogram, the highest goodness of fit value is 0.98652, and the lowest residual sum of squares value is 5.50694, which proves that the function peak fitting effect is the best after using this method, and the processing effect is better than that of the traditional method.
  • 高光谱探测技术能够获取目标连续光谱信息,通过精确分析目标光谱特征能够识别目标的物化特性,进而区分不同的目标。这使得高光谱探测技术在物质检测领域具有巨大的潜力,近十余年涌现出大量利用高光谱探测对物质特性或杂质进行检测的实例。对于空基高光谱成像探测,以JPL研制的AVIRIS为开端,各国研制了多型机载成像光谱仪,目前在使用中的机载高光谱载荷有Hymap[1]、CASI-SASI[2]、APEX[3]、AVIRIS-NG[4]、AISA FENIX[5]以及我国的SITP AHSI[6]等,上述载荷的光谱范围通常为0.4~2.5 μm,光谱分辨率为5~15 nm,视场角28°~60°不等。由于这些载荷的总重量通常在150 kg以上,其中最轻的AISA FENIX重量也达到32 kg,功耗超过150 W,载荷必须搭载在具有三轴稳定平台的载重能力较大的飞机上。

    随着无人机遥感技术的快速发展,受航线约束小,实验成本低廉,时间灵活的无人机平台成为机载高分辨率相机、激光雷达、多光谱、高光谱相机等载荷开展遥感模型及应用研究的重要平台。与之相应,高光谱载荷小型化需求也得到了快速提升,根据web of science对关键词UAV和hyperspectral的检索,每年相关文献的数量自2011年的6篇增长到2022年的175篇。其中,应用领域主要涉及卫星遥感数据的地表真实性检验和定标,农业遥感测量、生态环境监测、工业视觉等。为满足不断增长的市场需求,SPECIM[7-8]、Headwall[9-10]、Resonon[11-12]、HySpex[13-14]等公司均推出了适用于无人机平台的成像光谱仪,载荷指标如表 1所示。对比表 1中的9款无人机成像光谱仪,其光谱范围主要分为可见光-近红外谱段的0.4~1.0 μm和近红外-短波红外谱段的0.9~1.7 μm两种。除此之外,HySpex在SWIR-620上使用斯特林制冷型MCT探测器实现了0.97~2.5 μm谱段的高光谱成像。对比上述成像光谱仪的光谱分辨率,可见光谱段为1.9~10 nm,短波红外谱段为5.1~8 nm。可见光谱段的空间维像元数量多数为1000 pixel左右,少数可达1600 pixel,短波红外谱段为620~640 pixel。视场角以20°为主,最大可达38°。为适应无人机平台,不考虑前光学系统和数据采集终端,成像光谱仪的重量应小于4.5 kg,目前使用最普遍的FX10、Nano HyperSpec、Pika L、Pika XC2重量在0.64~2.51 kg之间。

    表  1  常用无人机平台光谱仪
    Table  1.  Commonly used UAV platform spectrometer
    Manufacturers Project Spectral region/μm Spectral resolution /nm Pixel elements /pixel Field angle/° Mass/kg
    Specim FX10 0.4-1.0 5.5 b 1024 38c 1.26 d
    FX17 0.9-1.7 8 b 640 1.7 d
    Headwall Nano HyperSpec 0.4-1.0 6 b 640 17c 1.2 d
    Micro HyperSpec 0.4-1.0 5.8 b 1600 34c 3.9 d
    Resonon Pika L 0.4-1.0 3.3 b 900 13c 1.59 e
    Pika XC2 0.4-1.0 1.9 b 1600 23c 3.37 e
    Pika IR+ 0.9-1.7 5.6 b 640 21c 4.31 e
    HySpex Mjolnir V-1024 0.4-1.0 3 a 1024 20c 4 d
    Mjolnir S-620 0.97-2.5 5.1 a 620 4.5 d
    Note:a Spectral sampling interval. b Full width of spectral response function at half maximum. c FOV at common focal length.
    d Lens and image acquisition system not included. e Including image acquisition system.
    下载: 导出CSV 
    | 显示表格

    尽管目前市场上已经有多个型号的无人机平台高光谱成像仪,但这些仪器在各领域的推广仍然面临各种问题。导致目前无人机应用主要采用多光谱成像仪,而高光谱成像仪主要用于科学研究[15]。根据F. Nex等的总结,目前无人机平台应用高光谱成像仪时仍存在一些问题,例如成本高、重量大、数据量大且不直观、探测效率低等;还需面临同时适应不同的应用需求,进行实时数据处理和分析,生产不同应用的数值产品等挑战[16]

    针对上述问题,本文将实时高光谱数据处理平台、紧凑型高通量分光系统、高速工业CMOS相机、像方光学系统、物方扫描机构相结合,设计研制了可同时满足工业视觉检测、植被监测、土地管理、地物光谱特性测量研究等多种需求的轻小型高光谱成像仪。成像仪光学系统和数据处理模块总重小于1.5 kg,结合扫描模块系统后总重小于3 kg,能够满足无人机。

    针对轻小型高光谱成像仪搭载与无人机平台的潜在应用需求,成像仪需要具备以下特点。首先仪器光谱分辨率需要与现有星载高光谱成像仪相当,参考目前在轨的GF-5 AHSI[17]、PRISMA[18]、HISUI[19],设计光谱分辨率5 nm。光谱范围上,根据工业生产、农业及生态监测、土地管理、植被及相关地物光谱特性测量等应用方向的需求,设计为使用最广泛的0.4~1.0 μm[7, 9-11, 13]。空间分辨率上,针对工业生产需优于5 mm[20-22],观测植被叶片需达到厘米量级[23-24],土地管理中需分辨率优于0.5 m。视场角既关系到数据采集效率、光学系统的像质和复杂程度,又关系到数据采集中双向反射分布函数(Bidirectional Reflectance Distribution Function,BRDF)特性。综合考虑上述因素,同时参考表 1中无人机高光谱成像仪的视场角,设计载荷在推扫模式下的FOV(Field of View)为25°,摆扫模式下视场总FOV>38°。数据处理层面,表 1中的高光谱载荷在进行无人机飞行任务中开展了数据预处理。例如Specim和Resonon仅提供了成像控制软件和配套的定标参数,后续的数据处理流程均在地面完成,其中Resonon的后处理软件提供了反射率反演和基于主成分的目标分类功能[25]。Headwall的航拍系统采用与Specim相同的思路,机上高光谱成像仪仅按预设的成像参数开展图像采集。但针对时效性更高的工业视觉应用,Headwall的最新型号MV.X将嵌入式计算平台与光谱仪相结合,实现了高光谱分类结果的实时生产。根据实际应用中对及时提取场景中的目标分布和光谱异常的需求,数据处理模块需要具备实时光谱异常提取和进行监督/非监督分类的功能和性能。

    根据上述设计需求,轻小型高光谱成像仪的总体架构如图 1所示。前光学系统计划采用像方远心光路,分光系统采用Offner分光构型,从而最大程度降低大视场光谱成像的像差和畸变。探测器焦面及视频电路采用集成多路读出设计,配合自动开窗的读取方式以适配不同应用环境对帧频的要求。数据处理模块采用低功耗紧凑型板卡为硬件平台与视频电路、驱动电路和GNSS+IMU系统相连接。软件平台包含数据采集模块、预处理模块、数据反演模块、交互模块等,实现高光谱数据采集到信息提取的全链路处理。除此之外,为实现地物多角度光谱特征的采集和宽幅高光谱数据采集,系统配备扫描模块,模块通过数据处理模块驱动。

    图  1  轻小型高光谱成像仪系统架构设计
    Figure  1.  Compact hyperspectral imager system architecture

    物方扫描机构采用传统的线型扫描方式。根据工作模式分为前向多角度测量、天底方向固定推扫、摆扫成像3种,如图 2所示。前向多角度测量模式通过扫描机构在沿轨方向调整多个观测天顶角,配合3~5条航带对地表形成上半球空间多个方位的BRDF光谱测量,如图 2(a)所示。天底方向固定推扫模式下,固定摆镜对地表进行线阵推扫光谱探测,如图 2(b)所示。摆扫成像模式通过扫描机构在穿轨方向进行40°视场角的线型扫描,如图 2(c)所示。

    图  2  高光谱成像仪扫描模式设计图
    Figure  2.  Imaging spectrometer scanning mode design

    轻小型高光谱成像仪安装于无人机的稳定平台上,由于扫描过程中平台沿轨飞行,摆扫轨迹需要利用稳定平台进行扫描线校正,消除物方扫描的重叠和漏扫[26]。设计扫描模块及其与高光谱成像仪连接方式如图 3所示。

    图  3  扫描模块结构设计
    Figure  3.  Scanning module structure design

    根据1.1节的技术指标分析,光学系统FOV为25°,目前无人机实验中航高多设计为50~100 m[23-24],幅宽对应为22~44 m。系统空间分辨率为1~2 cm。综合考虑成本、功耗及噪声特性,采用像元尺寸为5.5 μm的CMV4000ES探测器。为便于产品统型,采用复消色差的25 mm焦距像方远心镜头作为前光学系统。由于该探测器满阱电荷数较小,而主要目标植被的反射率差异较大。为确保信噪比,利用探测器光谱维的全部像元进行光谱探测,采用光谱维合并的方式提升探测的动态范围和信噪比。最终光学结构及其调制传递函数(modulation transfer function,MTF)分别如图 4图 5所示,系统设计指标如表 2所示。

    图  4  光学系统结构
    Figure  4.  Optical system structure diagram
    图  5  光学系统典型波长MTF
    Figure  5.  Optical system typical wavelength MTF
    表  2  光学系统设计指标
    Table  2.  Optical system design indexes
    Parameters Indexes
    Spectrum range /μm 0.4~1.0
    F number 2.4
    Focal length /mm 25
    FOV/° 25
    Scanning angle /° -20~20
    Spectral resolution /nm 5
    Spectral sampling interval/nm 2.5
    Slits size 11.3 mm×0.09 μm
    Diffraction order -1
    MTF ≥0.45
    下载: 导出CSV 
    | 显示表格

    根据轻小型高光谱成像仪的应用需求,成像仪的数据采集与实时处理模块需要同时具备以下功能:数据采集、预处理、数据反演以及相应的人机交互。模块总体架构如图 6所示。

    图  6  数据采集与实时处理模块结构
    Figure  6.  Structure diagram of data acquisition and real-time processing module

    为实现数据的实时处理,需要根据不同的应用需求针对每个功能中耗时较长的环节进行优化。首先,数据采集子模块充分利用探测器电路的多路读出功能,将探测模式由全谱段读取模式,改为全谱段读取模式和针对不同数值产品生产的多谱段选择读取模式两种。全谱段读取模式主要用于物质特性测量,数据采集时采用多路读出方式加速读取全部数据。多谱段选择读取模式用于工业视觉检测和大面积制图需要高速多光谱数据采集的场景。这种模式在视频电路层面根据预设的中心波长和波段宽度进行分区图像采集,通过在成像过程中筛选特定波长的方式减小数据量提升探测效率。在第三章的工业视觉检测实验中可见,此模式能实现超过2000行/s的超高速高光谱数据采集和处理。

    数据预处理子模块集成多种近地表遥感实验常用的算法以满足不同的遥感实验要求。为确保处理效率,辐射校正和大气校正算法都采用基于查找表的加速处理。对于辐射校正算法,根据谱段设置对定标数据进行预处理,使校正过程可以通过一次矩阵运算实现。对于大气校正,根据飞行航迹对应的实验条件确定部分大气校正参数,包括大气类型、气溶胶类型、照明-成像几何参数飞行高度对应的大气分层等。利用上述大气校正参数对水汽参数查找表、气溶胶参数查找表及大气校正光学参量查找表进行简化。最后在成像中实时计算大气光谱特征,利用查找表提取大气光学参量,求解地表反射率。

    根据应用需求,目前数据反演子模块中集成了植被光谱指数算法、光谱异常提取算法和基于二维奇异谱分解的高光谱非监督分类算法。植被光谱指数算法用于对地表农作物及其他植被的分布和生长胁迫情况进行及时调查。其中集成目前生态研究和植被胁迫研究使用的各种植被光谱指数[27],在获取植被冠层表观反射率后,根据指数的定义对每个像元进行光谱特征计算。光谱异常提取算法用于对工业检测中的产品质量进行在线检测,以及在其他应用场景中,进行弱小目标的实时提取。由于不同应用中场景的光谱特征有显著差异,光谱异常检测对不同应用场景所需的波段也不同。

    实际应用中,需要首先利用全谱段采集模式获取的光谱数据进行波段选择。确定显著性波段后再利用光谱异常检测算法对由显著性波段组成的数据进行异常检测。具体方法如图 7所示,首先对全谱段光谱影像数据利用CTBS(constrained-target band selection)方法选取代表性波段子集,之后构建实时异常和目标检测算法RTAD(real time anomaly detection)和RTCEM(real time constrained energy minimization),利用异常检测的历史信息优化检测效率[28]。最后对RTAD和RTCEM的检测结果进行阈值分割和图形学处理提取异常目标位置。

    图  7  光谱异常提取算法架构
    Figure  7.  The architecture of pectral anomaly extraction algorithm

    基于二维奇异谱分解的高光谱非监督分类算法用于大范围制图。其主要思路为先从高分辨率的彩色图像中获取同质区域,再对同质区域提取最佳波段,构建低维特征子空间。最后再利用SVM算法在特征子空间对高光谱影像数据同时采用2DSSA进行空间特征增强,提升数据提取质量。最佳波段选择可采用PSO(particle swarm optimization)方法筛选,得到低维度的特征子空间。最后在维度更低的特征子空间进行非监督分类[29]。算法架构如图 8所示。

    图  8  基于二维奇异谱分解的高光谱非监督分类算法架构
    Figure  8.  Architecture of hyperspectral unsupervised classification algorithm based on 2DSSA

    根据光学设计和探测器指标参数,核算不同太阳天顶角和地表反射特性下轻小型高光谱成像仪在全谱段读取模式下的信噪比。其中成像仪入瞳辐亮度数据采用Modtran6.0大气辐射传输模型[30]中如表 3所示的成像条件下仿真。系统透过率和光栅衍射效率以研制的Offner分光模块和前置光学系统实测值作为输入,探测器量子效率曲线及其噪声特性由厂商的研制手册提供。信噪比核算结果表明,积分时间4 ms条件下,探测器满阱占比最大值超过70%。不同场景下,探测数据的信噪比如图 9所示,在植被反射率红谷位置(670 nm附近)处优于100,在红边位置(720 nm附近)反射率优于230。满足植被光谱特性和工业生产中产品检测的探测需求。

    表  3  不同场景下的成像条件
    Table  3.  Imaging conditions in different scenes
    Surface reflection characteristic Solar zenith angle/°
    Forest 30
    Soil 30
    Albedo0.3 30
    Albedo0.3 45
    Albedo0.3 60
    下载: 导出CSV 
    | 显示表格
    图  9  光谱探测信噪比
    Figure  9.  Spectral probe signal-to-noise ratio

    根据前文的光学系统设计,本文进行了系统光机总结构设计及加工。完成系统装调后,集成数据处理模块的高光谱成像仪外观如图 10所示,重量小于1.1 kg。利用积分球、靶标和平行光管进行MTF测量,测试结果如图 11所示。利用对比度传递函数(contrast transfer function)CTF法计算系统总MTF约为0.19。利用激光器、积分球对系统进行扫频测试,描绘出0.4 μm、0.7 μm和1.0 μm三个波长的光谱分辨率,并拟合定标方程。典型波长的光谱响应如图 12所示,光谱分辨率为3.5~5.4 nm。

    图  10  轻小型高光谱成像仪外观
    Figure  10.  Appearance of a light and small hyperspectral imager
    图  11  中心视场靶标影像
    Figure  11.  Central field of view target image
    图  12  光谱响应拟合曲线
    Figure  12.  Spectral response fitting curves

    为验证系统对实时目标检测的能力,本文分别对流水线中的白硬塑、绿片、蓝片、长纸壳、黄片、木块、灰泡沫、灰纸壳、红片、麻绳等10种进行了多次检测。实验场景如图 13所示。结合天底方向固定推扫成像模式和多谱段选择读取模式,利用8个典型波长对流水线物料进行高速杂质提取。为适配700 mm/s的传送带速度,空间分辨率0.5 mm,采用1400 fps的采集速度。由于本实验中传送带的物料宽度有限,数据采集中进行开窗处理,仅对物料成像,图像宽度为600 pixel,每500帧图像拼接为1景数据。每景数据尺寸为500×600×8。此外,采用每类杂质检出准确率与无杂质误检率作为性能评估指标,即每类杂质检出数与该杂质图像数比值以及无杂质图像被检测为含杂质图像所占比率。

    图  13  实验场景图
    Figure  13.  Experimental scene

    实验针对未知杂质和已知目标两种条件在两种算法下开展对比验证。针对未知杂质的条件,采用10种样本杂质,每种杂质样本数超过9个。为验证杂质检测准确率,采用杂质数据130幅,检出114幅,平均检测准确率87%。为验证误检率,采用无杂质数据655幅,误检62幅,误检率10%。表 4统计了各杂质类型的检测准确率,图 14展示了未知杂质类型时杂质图像的检测结果。针对已知杂质检测准确率的验证总共检测10种杂质,每种杂质图像超过9幅,采用无杂质图像数据730幅,结果如表 5所示。杂质图像平均检测准确率96%。无杂图像误检率7.59%。

    表  4  未知杂质类型时各杂质检测准确率
    Table  4.  The detection accuracy of each impurity when the impurity type is unknown
    Impurity number Impurity type Impurity image Textual algorithm RXD
    Detection accuracy rate Detection accuracy rate
    1 White plastic 14 14 100% 14 100%
    2 Green plastic 13 12 92% 11 85%
    3 Blue plastic 11 9 82% 10 91%
    4 Cardboard 10 10 100% 9 90%
    5 Yellow plastic 14 9 64% 10 71%
    6 Bits of wood 12 10 83% 9 75%
    7 Froth 17 15 88% 13 76%
    8 Grey cardboard 14 13 93% 13 93%
    9 Red plastic 14 13 93% 14 100%
    10 Hemp rope 11 9 82% 8 73%
    Average - - 87% - 85%
    下载: 导出CSV 
    | 显示表格
    图  14  未知杂质类型检测结果
    Figure  14.  Detection results of unknown impurity type
    表  5  已知杂质类型时各杂质检测准确率
    Table  5.  The detection accuracy of each impurity when the impurity type is known
    Impurity number Impurity type Impurity image No impurity image Textual algorithm RXD algorithm
    Detection Accuracy rate False detection Rate for error detection Detection Accuracy rate False detection Rate for error detection
    1 White plastic 10 730 10 100% 68 9.32% 10 100% 59 8.08%
    2 Green plastic 10 730 10 100% 11 1.51% 10 100% 34 4.67%
    3 Blue plastic 10 730 10 100% 66 9.04% 10 100% 63 8.63%
    4 Cardboard 10 730 10 100% 72 9.86% 9 90% 68 9.32%
    5 Yellow plastic 10 730 10 100% 10 1.37% 10 100% 27 3.70%
    6 Bits of wood 10 730 10 100% 69 9.45% 10 100% 65 8.90%
    7 Froth 9 731 9 100% 67 9.17% 9 100% 56 7.67%
    8 Grey cardboard 10 730 10 100% 68 9.32% 10 100% 75 10.27%
    9 Red plastic 10 730 10 100% 43 5.89% 10 100% 31 4.25%
    10 Hemp rope 10 730 6 60% 80 10.96% 7 70% 95 13.01%
    - Average - - - 96% - 7.59% - 96% - 7.85%
    下载: 导出CSV 
    | 显示表格

    本文使用了RXD算法对杂物同样进行了检测,未知杂质的情况下部分杂物检出率虽优于本文算法,但在总体的平均精度85%是低于本文算法的。对于无杂质图像,误检率为7.85%。综上所述,针对未知杂物场景,系统的杂质检测精度可达87%,误检率10%,通过统计每景数据的读取时间和检出时间。对于500×600×8数据,光谱异常检测时间为0.05 s。针对每景2000×2000×8的设计数据尺寸,检测速度能够达到0.67 s/景,能够适配轻小型高光谱成像仪2000 fps的图像采集速度。针对已知杂物的场景,目标检测时间为0.045 s,设计尺寸数据的检测速度可达0.6 s/景,检测精度可达96%,误检率达7.59%。工业视觉实验证明,本文中研制的轻小型高光谱成像仪集成了光谱异常检测功能,在天底方向固定推扫成像+多谱段选择读取的工作模式下,可以实现精度超过87%,误检率10%的光谱异常检测,能在光谱探测的过程中实时提取光谱异常目标。

    为解决目前无人机平台高光谱成像仪重量大、数据量大且不直观、探测效率低等问题,使光谱仪满足多种应用需求,实时生产多种数值产品,本文提出了一种具有多种图像采集模式和数据读取模式的多模轻小型高光谱成像仪。成像仪采用扫描模块通过改变物方扫描方式满足目标光谱特性研究、生产检测、区域调查等多个场景对探测模式的需求,尤其实现了高分辨率宽视场的光谱成像需求。通过低畸变、高通量、紧凑型分光光学系统设计满足无人机平台对光谱成像仪的重量要求和探测精度要求,根据仿真和性能测试,系统典型场景下系统的SNR满足探测需求,MTF达到0.19,光谱分辨率3.5~5.4 nm。通过设计不同的数据采集模式应对不同应用场景对数据量的要求,提升数据在生产应用中的使用效率。在低功耗紧凑型板卡上开发贯穿数据采集、预处理、数值产品生产的全流程数据处理系统,实现在高光谱探测过程中实时生产数据产品的目的,全面提升高光谱探测效率。实验表明,系统能够实现每秒2048 pixel×2048 pixel场景的高精度光谱异常目标探测,探测精度优于87%。未来笔者将继续分光系统的小型化、数据模块的加速和探测功能扩展。

  • 图  1   标准库建立实验结构图

    Figure  1.   Experiment structure of the standard library

    图  2   混合光谱经SG+db3小波去噪后的光谱图

    Figure  2.   The mixed spectrum is denoised by SG+db3 wavelet

    图  3   经SG+sym小波去噪后混合气体光谱图

    Figure  3.   Spectrum of mixed gas after denoising by SG+ sym wavelet

    图  4   经SG平滑后的高斯拟合图

    Figure  4.   Gaussian fit after SG smoothing

    图  5   经滤波后的高斯拟合图

    Figure  5.   Gaussian fit after wave filtering

    图  6   经SG+db3小波去噪后的高斯拟合图

    Figure  6.   Gaussian fit after SG+db3 wavelet denoising

    图  7   经SG+sym6小波去噪后的高斯拟合图

    Figure  7.   Gaussian fit after SG+sym6 wavelet denoising

    表  1   SG平滑+sym6小波变换与传统方法性能指标对比

    Table  1   Performance index comparison of SG smoothing + sym6 wavelet transform and traditional methods

    Pretreatment method Fitting performance evaluation index Various fitting parameters
    R-Square SSE xc w FWHM A Area
    SG smoothing method(N=20) 0.97405 11.79833 2834.49055 39.20784 92.32725 5.59823 550.1827
    2981.79713 43.97818 103.56054 2.81837 310.68118
    Median filter 0.97146 14.0104 2837.10274 45.2766707 106.618 5.27621 598.804
    2987.60154 37.49498 88.29445 2.94599 296.87252
    SG(N=20)+db3 3-layer decomposition wavelet 0.9732 11.82987 2833.61284 38.94472 91.7078 5.60191 546.85842
    2982.83007 47.12747 110.97672 2.74588 324.37366
    SG(N=20)+sym6 4-layer decomposition wavelet 0.98652 5.50694 2836.78074 47.98166 112.9881 5.03243 605.2586
    2988.78528 34.83569 82..03177 2.8878 252.1598
    下载: 导出CSV
  • [1]

    JIAO Y, LI Z, CHEN X, et al. Preprocessing methods for near-infrared spectrum calibration[J]. Journal of Chemometrics, 2020, 34(11): e3306.

    [2]

    YANG J, DU L, GONG W, et al. Analyzing the performance of the first-derivative fluorescence spectrum for estimating leaf nitrogen concentration[J]. Optics Express, 2019, 27(4): 3978. DOI: 10.1364/OE.27.003978

    [3]

    LI Y, HUANG Y, XIA J, et al. Quantitative analysis of honey adulteration by spectrum analysis combined with several high-level data fusion strategies[J]. Vibrational Spectroscopy, 2020, 108: 103060. DOI: 10.1016/j.vibspec.2020.103060

    [4] 第五鹏瑶, 卞希慧, 王姿方, 等. 光谱预处理方法选择研究[J]. 光谱学与光谱分析, 2019, 39(9): 2800-2806. https://www.cnki.com.cn/Article/CJFDTOTAL-GUAN201909027.htm

    DIWU Pengyao, BIAN Xi Hui, WANG Zifang, et al. Selection of spectral pretreatment methods[J]. Spectroscopy and Spectral Analysis, 2019, 39 (9): 2800-2806 https://www.cnki.com.cn/Article/CJFDTOTAL-GUAN201909027.htm

    [5]

    Bastiaansen W, Klein S, Steegers㏕heunissen R P, et al. VP24.02: towards a novel human embryonic brain atlas: fully automated preprocessing of prenatal ultrasound using artificial intelligence[J]. Ultrasound in Obstetrics and Gynecology, 2020, 56(S1): 159-159.

    [6]

    HUANG X, HUANG C, ZHAI G, et al. Data processing method of multibeam bathymetry based on sparse weighted LS-SVM machine algorithm[J]. IEEE Journal of Oceanic Engineering, 2019, 45(4): 1538-1551.

    [7]

    DING Y, ZHANG W, ZHAO X, et al. A hybrid random forest method fusing wavelet transform and variable importance for the quantitative analysis of K in potassic salt or using laser-induced breakdown spectroscopy[J]. Journal of Analytical Atomic Spectrometry, 2020, 35(6): 1131-1138. DOI: 10.1039/D0JA00010H

    [8]

    ZHANG J, WEN H, TANG L. Improved smoothing frequency shifting and filtering algorithm for harmonic analysis with systematic error compensation[J]. IEEE Transactions on Industrial Electronics, 2019, 66(12): 9500-9509. DOI: 10.1109/TIE.2019.2892664

    [9] 杨帆, 王鹏, 张宁超, 等. 一种基于小波变换的改进滤波算法及其在光谱去噪方面的应用[J]. 国外电子测量技术, 2020, 39(8): 98-104. https://www.cnki.com.cn/Article/CJFDTOTAL-GWCL202008021.htm

    YANG Fan, WANG Peng, ZHANG Ningchao, et al. An improved filtering algorithm based on wavelet transform and its application in spectral denoising[J]. Foreign Electronic Measurement Technology, 2020, 39 (8): 98-104. https://www.cnki.com.cn/Article/CJFDTOTAL-GWCL202008021.htm

    [10]

    Mahajan G R, Das B, Gaikwad B, et al. Monitoring properties of the salt-affected soils by multivariate analysis of the visible and near- infrared hyperspectral data[J]. Catena, 2021, 198: 105041. DOI: 10.1016/j.catena.2020.105041

    [11] 侯培国, 李宁, 常江, 等. SG平滑和IBPLS联合优化水中油分析方法的研究[J]. 光谱学与光谱分析, 2015, 35(6): 1529-1533. DOI: 10.3964/j.issn.1000-0593(2015)06-1529-05

    HOU Peiguo, LI Ning, CHANG Jiang, et al. Research on SG smoothing and IBPLS joint optimization of oil-in-water analysis method[J]. Spectroscopy and Spectral Analysis, 2015, 35(6): 1529-1533. DOI: 10.3964/j.issn.1000-0593(2015)06-1529-05

    [12]

    Zikiou N, Lahdir M, Helbert D. Hyperspectral image classification using graph-based wavelet transform[J]. International Journal of Remote Sensing, 2020, 41(7): 2624-2643. DOI: 10.1080/01431161.2019.1694194

    [13]

    Bunaciu A A, Aboul-Enein H Y. Adulterated drug analysis using FTIR spectroscopy[J]. Applied Spectroscopy Reviews, 2021, 56(5): 423-437. DOI: 10.1080/05704928.2020.1811717

    [14]

    LIU F, ZHANG Y, Yildirim T, et al. Signal denoising optimization based on a Hilbert-Huang transform-triple adaptable wavelet packet transform algorithm[J]. EPL (Europhysics Letters), 2019, 124(5): 54002. DOI: 10.1209/0295-5075/124/54002

    [15]

    ZHANG M, LU C, LIU C. Improved double-threshold denoising method based on the wavelet transform[J]. OSA Continuum, 2019, 2(8): 2328-2342. DOI: 10.1364/OSAC.2.002328

  • 期刊类型引用(7)

    1. 王喆波. 基于无线网络的钩缓检修数据采集和传输系统. 自动化技术与应用. 2025(01): 101-104+114 . 百度学术
    2. 林智慧,何颖. 一种基于可编程逻辑器件的多功能信号源设计. 计算技术与自动化. 2024(03): 50-54 . 百度学术
    3. 郭利军,张治国,赵翔彦,杜巧玲. 基于J2EE架构的铁路区间信号集中监测采集系统. 电子设计工程. 2023(17): 56-60 . 百度学术
    4. 岑远遥,刘聪,万军,贺琼瑶,何建新,周俊. 基于双电极传感器的腐蚀电流检测系统抗扰技术. 装备环境工程. 2023(08): 142-151 . 百度学术
    5. 郑阳,王旭强,王堃,刘新波,杨一帆. 基于无线传感网的机械式电能表用电数据采集方法. 机械与电子. 2023(10): 70-74 . 百度学术
    6. 龚岩. 基于稀疏傅里叶变换的电子通信弱信号采集系统设计. 电子技术与软件工程. 2022(19): 113-116 . 百度学术
    7. 刘长甲,潘水. 某型产品电流采集电路的设计与优化. 电脑知识与技术. 2022(36): 85-87 . 百度学术

    其他类型引用(3)

图(7)  /  表(1)
计量
  • 文章访问数:  281
  • HTML全文浏览量:  98
  • PDF下载量:  42
  • 被引次数: 10
出版历程
  • 收稿日期:  2021-01-04
  • 修回日期:  2021-01-18
  • 刊出日期:  2021-08-19

目录

/

返回文章
返回