如何在传统RGB拜耳色彩相机中采集三个独立的多光谱通道(波段)?

相机图像传感器由像素点构成,这些像素通过测量光线强度生成从纯白(高光量)、灰色(中等光量)到纯黑(无光量)的连续灰度信息。本质上,所有图像传感器都是单通道灰度传感器,除非在其表面增加特殊滤光层。

传统RGB彩色相机虽然只使用单个图像传感器,却能生成三通道图像,其核心技术是在传感器表面覆盖拜耳色彩滤光阵列。该阵列通常采用RGGB(红-绿-绿-蓝)的四像素重复排列模式,通过插值算法将原始数据重建为完整的红、绿、蓝三通道图像。这种插值过程实际上是通过计算相邻像素平均值来填补缺失的色彩信息,从而实现从单通道灰度传感器到三通道彩色传感器的”转换”。

拜耳滤光片的透射特性通常呈现如下规律:

随后,MAPIR会在拜耳滤光阵列前加装我们自主研发的带通滤光片,确保只有目标测量波段的光线能被传感器捕获。下图为我们广受欢迎的RGN(红/绿/近红外)滤光片的透射特性曲线:

在MAPIR的RGN相机中,入射光线需经过双重过滤:首先通过RGN滤光片进行波段选择,再经过拜耳滤光阵列进行色彩分离,最终被传感器捕获。

通过观察前文所示的拜耳滤光透射率曲线可发现,其红/绿/蓝各通道不仅会透过对应色彩的光线,还会同时透过红边波段(700-800nm)和近红外光(800-1000nm)。当我们使用允许近红外光透过的RGN滤光片时,拜耳阵列的所有三个色彩通道都会让近红外光抵达传感器。这意味着原始RGN图像通道实际包含以下混合数据:红色+近红外、绿色+近红外、纯近红外。为消除干扰性的近红外光,需要进行深度数据处理。

通过测量组装完成相机的各通道光谱响应特性,我们可以实现通道分离(以RGN为例即为剔除各通道中的近红外干扰)。经过校正后,最终才能获得纯净的红、绿、近红外三个独立图像通道(对应通道1,2,3)。

若未通过传感器响应测量来校正像素数据,获得的数值将存在偏差。当采集到”红色+近红外”的混合信号时,我们无法确定其中红色光的实际比例。如果在使用多光谱指数(如NDVI)处理这些图像时,未对图像通道进行传感器响应校正,生成的指数值(如NDVI)将失去准确性。

这是一张来自MAPIR Survey3W RGN相机的RAW格式图像经过反拜耳处理(应用拜耳插值算法后)的示例。请注意,图中顶部的白色参考标靶呈现出明显的绿色调,这正是由于拜耳色彩滤波阵列中绿色滤光片数量是红/蓝滤光片的两倍所致。

这是经过传感器响应校正与反射率校准后的图像效果,其视觉呈现类似于执行白平衡处理后的画面。

我们的RGN滤光片允许红光、绿光和近红外光穿透至传感器。校准标靶周围的绿草主要反射近红外光,这解释了为何其在图像中呈现异常浓郁的蓝色——由于蓝光被阻隔无法到达传感器,波长为850nm的近红外光被记录在蓝色(第三)图像通道中。人眼感知的绿色光强度,远低于植物反射的不可见近红外光强度。

下方为经过反拜耳处理的原始图像三通道展示(从左至右):红色通道、绿色通道、近红外通道。需特别注意:红色与绿色通道实际上同时捕获了可见光与近红外光的混合信号。

这是经过传感器响应校正与反射率校准后的同一组三通道图像,从左至右分别为:红色通道、绿色通道、近红外通道。

请注意,在每一行的最后一张图像中,经过校正后的近红外通道亮度显著高于中间的绿色通道。这是因为健康的绿草反射的近红外光量远超其反射的绿光量。如果人类肉眼能感知近红外光,当我们注视阳光下的健康植被时,可能会因强烈的近红外反射而感到刺眼。

对比度反映了明暗像素之间的差异。可以观察到,经过校正后,红色通道与近红外通道之间的对比度显著增强。

NDVI指数正是通过量化红色与近红外通道的对比差异来计算。对于植被而言,NDVI值通常在0.3(不健康)到0.8(健康)区间内变化。

左侧为基于原始RAW图像生成的非校准NDVI图,右侧为经过校正的校准NDVI图。图中NDVI刻度采用植被分析典型量程0至1。

上方未经校准的图像其NDVI数值存在偏差,这解释了为何所有数值都明显偏低。若将色阶范围调整为-0.5至1(如下图所示),即可更清晰地辨识图像中的植被特征。

请将NDVI数值与中间渐变颜色查找表图例进行匹配。需要牢记的是,健康草地的NDVI值通常大于0.6,由此可以明显看出左上方未校准图像中草地数值低至0.2是不准确的。由于图像未经校准,这些数据也无法与次日采集的图像进行有效比对。

正确处理图像并相应调整对比度(颜色查找表)范围至关重要,否则可能导致分析结果失真。