赛斯拜克中国核心技术品牌 博士专业研发团队   18年专注高光谱

咨询热线:400-888-5135

揭秘高光谱成像技术:打开多维视觉的新世界

来源:赛斯拜克 发表时间:2023-06-29 浏览量:600 作者:awei

随着科技的不断发展,成像技术进入了一个全新的时代。高光谱成像技术,作为一种新兴的成像方式,正在逐渐改变着我们对世界的观察和认知。它不仅在多个领域具有广泛的应用前景,而且对人类生活的许多方面产生了深远的影响。

高光谱成像技术,顾名思义,是一种能够捕捉物体光谱信息的成像技术。与传统的成像技术相比,高光谱成像技术可以获取更多的光谱信息,从而呈现出更丰富、更精确的图像。这种技术利用光谱仪将光谱分解成多个不同的波长,进而捕捉到超出人类视觉范围的光谱信息。

揭秘高光谱成像技术:打开多维视觉的新世界

高光谱成像技术是一个怎样的高科技

高光谱成像仪作为新一代传感器,能够获取连续窄波段的光谱信息,从而识别出具有诊断性波谱的地物。现有的高光谱传感器主要是航天高光谱传感器、航空高光谱传感器、地面高光谱成像仪及无人机载高光谱成像载荷,搭载在包括卫星、飞机、无人机和地面工作平台等不同高度的遥感平台上。


高光谱成像的目标是获得场景图像中每个像素的光谱,目的是发现物体、识别材料或检测过程。光谱成像仪一般有三个分类,有推扫式扫描仪和相关的扫扫式扫描仪(空间扫描),可以随时间读取图像,带序列扫描仪(光谱扫描),可以获取不同波长区域的图像,以及快照高光谱成像,使用凝视阵列在瞬间生成图像。

1688010404370198.png


形象地说,高光谱传感器将信息收集为一组“图像”。每个图像代表电磁频谱的一个狭窄波长范围,也称为光谱带。这些“图像”被组合成三维(x,y,λ)高光谱数据立方体,用于处理和分析,其中x和y表示场景的两个空间维度,λ表示光谱维度(包括一系列波长)。高光谱图像的采集和处理也称为成像光谱学,或参考高光谱立方体,称为3D光谱学。



有许多参数可以表征获得的数据:

空间分辨率,可以用整个图像的像素数或表面上可分辨的最小平方面积来描述。如果像素太大,则在同一像素中捕获多个对象,并且难以识别。如果像素太小,则每个传感器单元捕获的强度较低,降低的信噪比会降低测量特征的可靠性。通常,它取决于照相相机的百万像素数。

光谱分辨率,定义系统能够区分的最小光谱变化。对于设备来说,它是所捕获光谱的每个频带的宽度。如果扫描仪检测到大量相当窄的频带,即使仅在少数像素中捕捉到物体,也可以识别物体。

辐射测量精度,即系统测量光谱反射率百分比的精度。


光谱成像技术的介绍


光源发出包含各个频率(不同波长)的光,这些光照射到物体上,由于物体表面物质的物理性质导致一部分光被物体表面吸收,另一部分光被反射出去。其机理是物质内部不同的分子、原子和离子对应着不同特征分布的能级,在特定频率的波谱下产生跃迁,由此引起不同波长的光谱发射和吸收,从而产生不同的光谱特征。

高光谱成像技术的介绍

图1 蔬菜叶子在太阳光下的简单光谱曲线

在同样条件下,不同物质(对应不同的原子、分子或分子基团)的光谱特性具有唯一性和一些特性,依据这些特性就可以对被测物体进行分析。

传统光谱技术,都是通过待测物自发光或者与光源的相互作用而进行分析的物体的,从空间维度上看,传统光谱技术大多是针对一个单点位置,也就是单点的光谱仪。而光谱成像则是结合了光谱技术和成像技术,将光谱分辨能力和图形分辨能力相结合,造就了空间维度上的面光谱分析,也就是现在的多光谱成像和高光谱成像技术。


1.      多光谱与高光谱

       光谱成像技术,其本质是充分利用了物质对不同电磁波谱的吸收或辐射特性,在普通的二维空间成像的基础上,增加了一维的光谱信息。成像光谱可以同时获取影像信息与像元的光谱信息,根据光谱分辨率不同介绍下多光谱成像、高光谱成像技术;

       多光谱技术(Multispectral):目标物波段数在3~30之间(通常大于等于3个);

       高光谱成像(Hypespectral):目标物波段数在100~300之间,光谱分辨率一般会更精细。

高光谱成像技术的介绍

图2  RGB 成像、多光谱成像和高光谱成像的比较 2

       高光谱成像是一种基于光谱分析的新技术。它收集数百幅不同波长的图像对于相同的空间区域。收集到的数据形成一个所谓的高光谱立方体,通常图像的横纵坐标分别表示光谱的波长和光谱强度。该数据立方体由沿着光谱轴的以一定光谱分辨率间隔的连续二维图像组成。

高光谱成像技术的介绍

图3 光谱立方示意图



1.      多光谱或高光谱简单分类

从光谱信息的获取方式来看,高光谱成像主要存在以下两大类,如图4:

(1)       基于扫描方法(多次曝光),该方法还可分为3种形式:点扫描、线扫描、谱扫描;

(2)       计算成像方法(单次曝光的高光谱成像);

高光谱成像技术的介绍

图4 基于扫描方法与计算成像方法示意图 2



1.      高光谱与多光谱的区别

      很多时候材料的反射率特征光谱相对于波长的变化可能非常复杂,而其他微小特征使用较粗糙的多光谱成像方法也有可能无法分辨。

高光谱成像技术的介绍

 图5 多光谱与高光谱区别示意图 3

      上图中使用多光谱成像(左)识别无法分辨的物质,通过使用高光谱成像(右)被分辨出来。其原因是由于高光谱具有更多的光谱频带,因此可以通过更高的光谱分辨率准确地获得更复杂的指纹特征。

      总结来说,高光谱相对多光谱有以下优势:

l  通过更高光谱分辨率获得更复杂、更精准的光谱特征信息;

l  获取更丰富的光谱波段信息,应用场景更丰富;

l  可用一套硬件根据应用灵活选择光谱序列,免去系统重新设计的过程;


1.      高光谱成像技术关键参数

       对于多种多样的光谱成像技术如何评价和了解,可以重点关注空间分辨率、光谱分辨率和准确率等主要参数,同时关注成像系统在设计复杂度、物理尺寸、系统成本、可量产性、可靠性方面。总的来说,就是得到一个稳定可靠的高质量的光谱图像,是整个技术的核心。下面简单介绍几个关键参数。


空间分辨率(Spatial Resolution)

      空间分辨率是评价传感器性能和图像的重要指标之一,同样也是用成像像素来表征空间分辨率,一般分辨率在一百万以下。


光谱分辨率(Spectral Resolution)

       指光谱系统所选用的波段数多少、各波段的波长位置、及波长间隔的大小。即通道数、中心波长、带宽三个因素共同决定光谱分辨率,可理解为能够区分或识别光谱中各波段光的能力。与光谱仪的分辨能力密切相关。分得愈细,波段愈多,光谱分辨率就愈高。

       光谱分辨率是一个概念,狭义的光谱分辨率仅指波段宽度,如何计算需要一个指标,半波宽度就是这个指标。

半峰全宽(Full width at half maximum)

      英文简称FWHM,也称作半高全宽、或半高宽、半波宽。指达到光谱峰高一半处的光谱宽度。如下图。半波宽是衡量高光谱成像系统的一个关键技术参数,可表征其对光谱细分和区分的能力。多光谱常见半波宽在10-1λ量级 ,高光谱通常在10-2λ量级。

高光谱成像技术的介绍

 图6 FWHW示意图



光谱采样率

      通俗理解为通道数,即能获取的不同中心波长的波段数。多光谱常见3-30个 ,高光谱通常在100-300个。相同条件下,高光谱成像系统支持的通道数的多少,由光谱调节精细度、灵活度决定。

可靠性

      毕竟光谱信息属于光与物体相互作用所产生的信息,比较敏感。那么稳定性、一致性、抗震动等就变得非常重要。有很多的器件随温度变化、机械和时间变化形成的漂移是成像系统的主要误差来源,实际应用中的测试精度很大依赖于成像系统在此方面的稳定性。主要关注温度漂移特性、震动稳定性等。没有稳定一致的物理数据采集,要保证基于数据的算法运行有良好应用效果有很大难度。


1.      高光谱主流技术类型分析

      目前高光谱成像技术发展迅速,主流常见的包括光栅分光、声光可调谐滤波分光AOTF、液晶光学滤波LCTF、棱镜分光、芯片镀膜、法珀腔MEMS芯片等。下面简单介绍现基本原理和差异:


光栅分光

       空间中的一维信息通过镜头和狭缝后,不同波长的光按照不同程度的弯散传播,这一维图像上的每个点,再通过光栅进行衍射分光,形成一个谱带,照射到探测器上,探测器上的每个像素位置和强度表征光谱和强度。一个点对应一个谱段,一条线就对应一个谱面,因此探测器每次成像是空间一条线上的光谱信息,为了获得空间二维图像再通过机械推扫,完成整个平面的图像和光谱数据采集。

高光谱成像技术的介绍


棱镜分光

       入射光通过棱镜后被分成不同的方向,然后照射到不同方向的探测器上进行成像。棱镜分光后,在棱镜的出射面镀了不同波段的滤光膜,使得不同方向的探测器可以采集到不同光谱信息,实现同时采集空间及光谱信息。

高光谱成像技术的介绍

图8 棱镜分光原理图 6

      由于系统是基于单个分立器件的,为了保证空间分辨率和光谱分辨率,必须引入物镜、光阑、准直器、各类透镜等光学器件,同时必须考虑各种器件之间的聚焦、准直问题,这就导致传统的系统复杂度很高、体积较大、成本颇高、应用范围受到极大限制。针对不同应用要求的修改,系统再设计复杂度非常高。目前市场上主要这类系统多为面向科研及大型检测单位应用。


声光可调谐滤波分光(AOTF)

      AOTF由声光介质、换能器和声终端三部分组成。射频驱动信号通过换能器在声光介质内激励出超声波。改变射频驱动信号的频率,可以改变AOTF衍射光的波长,从而实现电调谐波长的扫描。

高光谱成像技术的介绍

图9 AOTF原理图 5

    AOTF系统组成:成像物镜+准直镜+偏振片+晶体+偏振片+物镜+detector,为了保证入射光经过准平行镜之后能够完全变化成平行光,因此对前端的物镜视场角有一定的要求。本技术的缺陷是无法做大尺寸,目前可看到的只是单点的光谱仪。


液晶光学滤波(LCTF)

     LCTF滤光型光谱成像技术特征是:施加不同的电压,调节双折射液晶造成的相位差,从而使不同波长的光发生干涉,实现对不同波长的连续可调性扫描。基本结构如下:

高光谱成像技术的介绍

图10 LCTF结构图 6

LCTF的液晶对外界的环境温度非常敏感,造成温漂,使检测结果不准,另外的缺陷就是成本高,无法降低,至今从研究成果和已推出市场的产品看,技术路线不是太乐观。

芯片镀膜

      欧洲微电子研究中心IMEC在这方面投入了大量的研究,采用高灵敏CCD芯片及SCMOS芯片研制了一种新的高光谱成像技术,在探测器的像元上分别镀不同波段的滤波膜实现高光谱成像。如图所示

高光谱成像技术的介绍

图11 4x4滤光片阵列拼接的马赛克镀膜示意图 6

        该方式在CMOS表面镀膜,对应带来的限制空间解析度较多低,要求每个镀膜高度一致性,那么芯片生产工艺要求高,对批量生产有很大挑战。也因为无法全光谱连续可调,在应用场景不灵活,会有一定的限制,一般可作定性。


法珀腔MEMS芯片

       法布里-珀罗干涉仪简称FPI或法珀腔,是一种由两块平行的玻璃板组成的多光束干涉仪。特性为当入射光的频率满足其共振条件时,其透射频谱会出现很高的峰值,对应着很高的透射率。

高光谱成像技术的介绍

图12 Fabry-Perot Interferometer

        基于法布里珀罗腔体原理设计,结合MEMS芯片微加工工艺及成熟的图像传感器技术实现的高光谱成像,能快速实现宽光谱输入,特定光谱选通输出,完成不同光谱图像信息采集。此种方式与现有器件产业链及模组工艺很好地结合,同时拥有这种MEMS器件尺寸极小、性价比高的优点,适合大批量生产。当然这种方式目前全世界只有个别的研究所和公司在研究,技术门槛高。

高光谱成像技术的介绍

图13 基于法珀腔MEMS芯片的高光谱原理



高光谱成像技术的应用领域

在农业领域,高光谱成像技术通过对农作物的高光谱图像进行分析,我们可以了解植物的生长状态、土壤的营养状况、病虫害的存在等。这些信息能够帮助农民提前探测并诊断作物的问题,从而及时采取相应的措施,提高农作物的产量和质量。


在环境监测领域,高光谱成像技术通过对城市、森林、湖泊等地区进行高光谱成像,我们可以分析出大气污染物、水质变化、植被覆盖度等信息。这有助于监测环境污染程度,提前发现并及时处理潜在的环境问题,保护我们的地球。



在在医学诊断和生命科学研究领域,高光谱成像技术够提供大量的生物组织或细胞的光谱信息,从而帮助医生进行早期疾病检测和诊断。例如,通过高光谱成像可以检测出癌症细胞与正常细胞的光谱差异,从而实现早期癌症的诊断和治疗。


在环境监测领域,高光谱成像技术也有着不可替代的作用。例如,在监测水污染方面,高光谱成像技术可以捕捉到不同污染物在不同光谱段的吸收和反射信息,从而可以更准确地判断污染物的种类和浓度。此外,在大气污染监测、土地利用调查等方面,高光谱成像技术也有着出色的表现。


在军事侦察领域,高光谱成像技术同样具有重要的意义。由于高光谱成像技术可以在夜间和恶劣的天气条件下捕捉到更多的信息,因此它可以用于侦察敌方目标,提高军事行动的效率和安全性。此外,高光谱成像技术还可以用于军事领域的其他方面,如地形测绘、资源调查等。


在矿物勘探领域,高光谱成像技术也成为了一种重要的探测手段。由于不同矿物在不同光谱段的吸收和反射信息不同,因此高光谱成像技术可以捕捉到这些差异,从而实现矿物的快速、准确勘探。


高光谱成像技术的应用案例

在水果和蔬菜检测方面的应用


02

在谷物和谷物成分分析领域中的应用

高光谱成像技术已成功应用在谷物和谷物成分分析领域中。这一技术已是实时评估和分拣的核心部分。HSI不仅可以提供出:尺寸、形状、颜色等参数。同时,还可以评估出影响食物的营养价值的参数,比如:油脂、含水率、蛋白质等,甚至是否含有致病物质。而且,还可以分选出遭受霉菌毒素、黄曲霉毒素、寄生虫侵害的谷类。

03

在检查家禽、鱼肉类的领域中的应用

由于鱼肉类的营养价值较高,但它们容易受到微生物污染,因此可能会危害消费者健康。而高光谱成像技术是一种快速、准确的检测技术,已广泛应用于牛肉、猪肉以及鱼肉监测中。该技术可用来衡量高营养价值鱼类生产线上,鱼肉的鲜度、贮存条件和时间,也可以检测氨基酸和脂肪酸,脂类物质是否氧化,是否含有污血及霉菌等。



04

其他方面应用

  • 文物检测

文物高光谱扫描成像系统(HS-VN-CR (380-2500))是中科谱光团队为故宫文物医院研发的目前世界上最大的一台针对文物检测的高光谱扫描成像系统,包括高光谱扫描成像仪和文物高光谱图像分析软件,是为文物鉴定和保护提供光谱数据服务的专用设备,在文物数字化存档、文物诊断与修复等方面发挥了重要作用。



  • 物证检测

物证高光谱成像仪(HS-VN-PE (330-1050))是中科谱光团队为上海司法鉴定科学研究院定制的一款物证检测智能设备,该产品能够无接触、无损、准确快速采集目标光谱影像,可自动检测指纹、体液、毛发、皮屑等生物特征,也可用于现场快速文检,识别文件涂改、覆盖等物证信息,为公安人员提升物证现场采集能力、提高办案效率提供了强有力的高科技手段。



· 工业质量控制--高光谱成像可检测生产线上的异物;

· 医学--高光谱成像在医学中有广泛的应用,可区分不同类型组织中异常血流或氧气供应;

· 回收--红外高光谱成像可以区分不同类型的塑料,有助于废弃塑料回收。

一套完整的桌面式高光谱扫描方案,包括: 光谱相机、扫描台、样品架、照明系统、聚焦目标、数据采集和分析软件等。

高光谱成像技术发展趋势与应用展望

高光谱成像技术作为一种新兴的成像方式,正在逐渐改变着我们对世界的观察和认知。随着高光谱成像技术的不断发展,它将在更多领域得到广泛应用,为人类生活带来更多便利和创新。


相关产品

高光谱相机技术排行榜top10

高光谱相机技术相关推荐