一种多光谱图像传感器的制造方法及其设备与流程

1.本发明属于传感器技术领域，尤其涉及一种多光谱图像传感器的制造方法 及设备。


背景技术：

2.光谱成像是现有主要的成像技术之一，由于基于光谱成像的数据不仅包含 有图像信息，还包含有光谱信息，光谱信息能够体现拍摄图像时每个像素点在 各个波段的光谱强度，利用光谱信息可以对图像中的拍摄对象进行定性甚至定 量分析，能够应用于多种不同需求的场合。因此，如何能够制造一个识别准确 率较高的多光谱图像传感器，成为了亟需解决的问题。
3.现有的多光谱图像传感器的制造技术，生成的是基于切换滤光片方式的多 光谱图像传感器，在需要获取多光谱图像时，通过切换感光芯片上对应不同预 设波长的滤光片，从而采集得到多光谱图像，然而基于上述方式生成的多光谱 图像传感器，在获取多光谱图像时，由于不同光谱是分时采集的，因此实时性 较低，不同光谱并非同时采集，从而会影响成像的精度以及效率。


技术实现要素：

4.有鉴于此，本发明实施例提供了一种多光谱图像传感器的制造方法及设备， 以解决现有的多光谱图像传感器的制造技术，生成的是基于切换滤光片方式的 多光谱图像传感器，然而基于上述方式生成的多光谱图像传感器，在获取多光 谱图像时，由于不同光谱是分时采集的，因此实时性较低，不同光谱并非同时 采集，从而导致了成像的精度以及效率较低的问题。
5.本发明实施例的第一方面提供了一种多光谱图像传感器的制造方法，包括：
6.分别获取滤光单元组内多个对应不完全相同的波长的滤光片的特征参数组； 所述多光谱图像传感器包含至少一个所述滤光单元组；所述多光谱图像传感器 以任一候选制造方式制造得到，且不同的所述特征参数组对应不同的所述候选 制造方式；
7.将所有所述滤光片对应的所述特征参数组及预设参数组导入到预设的特征 向量转换模型，得到多个基于不同探测目标获取的特征向量；
8.将多个所述特征向量导入到所述多光谱图像传感器关联应用场景类型对应 的检测模型，并计算对应的检测准确率；
9.根据所有所述候选制造方式对应的所述检测准确率，选取最高检测准确率 对应的所述滤光单元组的特征参数组，并将与其对应的所述多光谱图像传感器 的候选制造方式作为所述多光谱图像传感器的初始制造方式。
10.本发明实施例的第二方面提供了一种多光谱图像传感器的制造装置，包括：
11.特征参数组获取单元，用于分别获取滤光单元组内多个对应不完全相同的 波长的滤光片的特征参数组；所述多光谱图像传感器包含至少一个所述滤光单 元组；所述多光
谱图像传感器以任一候选制造方式制造得到，且不同的所述特 征参数组对应不同的所述候选制造方式；
12.特征向量获取单元，用于将所有所述滤光片对应的所述特征参数组及预设 参数组导入到预设的特征向量转换模型，得到多个基于不同探测目标获取的特 征向量；
13.检测准确率计算单元，用于将多个所述特征向量导入到所述多光谱图像传 感器关联应用场景类型对应的检测模型，并计算对应的检测准确率；
14.初始制造方式确定单元，用于根据所有所述候选制造方式对应的所述检测 准确率，选取最高检测准确率对应的所述滤光单元组的特征参数组，并将与其 对应的所述多光谱图像传感器的候选制造方式作为所述多光谱图像传感器的初 始制造方式。
15.本发明实施例的第三方面提供了一种终端设备，包括存储器、处理器以及 存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行 所述计算机程序时实现第一方面的各个步骤。
16.本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可 读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现第一方面 的各个步骤。
17.实施本发明实施例提供的一种多光谱图像传感器的制造方法及其设备具有 以下有益效果：
18.本发明实施例通过获取基于任一种候选制造方式得到的滤光单元组内多个 对应不同预设波长的滤光片的特征参数组，并将所有滤光片对应的所述特征参 数组以及预设参数组导入到预设的特征向量转换模型，确定滤光单元组对应的 特征向量，从而得到了该候选制造方式对应的检测准确率，以判断以该候选制 造方式制造的多光谱图像传感器与应用场景是否适配，继而确定出适应性最好 的候选制造方式，并将该候选执行方式作为多光谱图像传感器的初始制造方式， 以制造一个包含有多个对应不完全相同的预设波长的滤光片的滤光单元组的多 光谱图像传感器，以实现在成像时同时采集不同光谱的目的，以提高成像精度、 效率以及准确性。
附图说明
19.为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技 术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅 仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳 动性的前提下，还可以根据这些附图获得其他的附图。
20.图1是本发明实施例提供的一种多光谱图像传感器的结构示意图；
21.图2是本技术另一实施例提供的感光芯片103的结构示意图；
22.图3是本技术一实施例提供的像素单元与滤光片之间的结构示意图；
23.图4是本技术另一实施例提供的像素单元与滤光片之间的结构示意图；
24.图5是本技术一实施例提供的滤光片阵列的示意图；
25.图6是本技术一实施例提供的入射光线透过滤光单元组的示意图；
26.图7是本技术另一实施例提供的多光谱图像传感器的结构示意图；
27.图8是本技术一实施例提供的成像模块的结构示意图；
28.图9是本发明另一实施例提供的一种多光谱图像传感器的结构示意图；
29.图10是本技术一实施例提供的滤光片矩阵以及滤光片阵列的示意图；
30.图11是本技术一实施例提供的多光谱图像传感器所采用的rgb恢复算法 的示意图；
31.图12是本技术一实施例提供的滤光片阵列中rgb通道的不同滤光片的排 布位置的示意图；
32.图13是本技术一实施例提供的畸变距离的计算示意图；
33.图14是本技术另一实施例提供的滤光片矩阵内各个滤光片的排布方式；
34.图15是本技术提供的所有候选方式在上述三种参量的参数表；
35.图16是本发明第一实施例提供的多光谱图像传感器的制造方法的实现流 程图；
36.图17是本技术一实施例提供的多光谱图像传感器的制造流程示意图；
37.图18是本发明第一实施例提供的多光谱图像传感器的制造方法的实现流 程图；
38.图19是本发明一实施例提供的一种多光谱图像传感器的制造装置的结构 框图；
39.图20是本发明另一实施例提供的一种终端设备的示意图。
具体实施方式
40.为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实 施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅 仅用以解释本发明，并不用于限定本发明。
41.基于光谱成像的数据不仅包含有图像信息，还包含有光谱信息，是一种图 谱合一的数据类型，光谱成像得到的数据能够体现拍摄图像时每个像素点在各 个波段的光谱强度；利用光谱成像技术可以对物体进行定性和定量分析，以及 定位分析等。光谱成像技术按照光谱分辨率的从低到高可分为三类：多光谱成 像、高光谱成像和超光谱成像技术。光谱成像技术不仅具有光谱分辨能力，还 具有图像分辨能力，可应用于地质矿物、植被生态的识别以及军事目标的侦察 等场合。
42.目前的成像光谱的器件主要可以通过以下几种方案实现，第一种是切换滤 光片方法，基于上述方法的多光谱图像传感器内包含有多个滤光片，多个滤光 片一般位于被测对象和镜头之间，需要进行图像采集时，会基于预设的切换次 序切换到特定的滤光片，单次曝光只能输出特定滤波特性的单张图像，并通过 连续切换滤光片进行多次曝光后，从而得到一帧多通道的光谱图像，即多光谱 图像；第二种多光谱图像传感器的实现是推扫方法，单次曝光只能输出被测对 象一个像素宽度上的(即一列像素点对应的)多光谱信息，为了获得被测对象 在空间上完整的二维图像，则需要通过推扫的方式，每次曝光获得多列像素点 对应的多光谱信息，最终合成一帧多通道的光谱图像。
43.然而，无论是基于滤光片切换的方式抑或是基于推扫方式生成的多光谱图 像，均存在实时性的问题，例如通过滤光片切换的方式得到的多光谱图像，不 同光谱之间采集时刻不一致，即在时域上存在实时偏差；而通过推扫的方式获 取的多光谱图像，由于每次获取只能获得一列像素点的多光谱信息，不同列获 取的时刻不一致，即在空间域上存在实时性偏差，从而大大影响了多光谱图像 的成像精度以及效率。
44.因此，为了解决现有技术的问题，本发明提供了一种多光谱图像传感器以 及该多光谱图像传感器的制造方法，以实现同时获取被测对象整体的多光谱信 息，以满足多光谱
图像在空间域以及时域上的实时性，提高多光谱图像的成像 精度以及小。
45.实施例一：
46.图1示出了本发明实施例提供的一种多光谱图像传感器的结构示意图。为 了便于说明，仅示出了与本发明实施例相关的部分。详述如下：
47.参见图1所示，在本发明实施例提供的一种多光谱图像传感器，该多光谱 图像传感器包括：沿入射光方向依次排列的微透镜阵列101、滤光片阵列102 以及感光芯片103；
48.该感光芯片103，包括多个像素单元；
49.该滤光片阵列102，包括至少一个滤光单元组；每个所述滤光单元组包含 多个对应不完全相同的预设波长的滤光片；每个所述滤光片用于通过入射光线 中所述滤光片对应的所述预设波长的光线；
50.该微透镜阵列101，包括至少一个微透镜单元，所述微透镜单元用于汇聚 所述入射光线，并使得汇聚后的所述入射光线经过所述滤光片阵列聚焦于所述 感光芯片上。
51.在本实施例中，该多光谱图像传感器中包含有感光芯片103，可以将采集 到的光学图像信息转换为电信号，从而得到包含多光谱的图像数据并存储。
52.在一种可能的实现方式中，该感光芯片103可以是互补金属氧化物半导体 (complementary metal
‑
oxide
‑
semiconductor，cmos)传感器芯片，也可以是 电荷耦合元件(charge
‑
coupled device，ccd)芯片，当然，其他可以将光信号 转换为电信号的芯片也可以用于本实施例中的感光芯片103。
53.进一步地，图2示出了本技术另一实施例提供的感光芯片103的结构示意 图。参见图2所示，该实施例中的感光芯片103可以包括光电二极管1031以及 信号处理模块1032，也可以称为电路部分，光电二极管1031与信号处理模块 1032之间为电连接，一个感光芯片中可以包含多个光电二极管1031，每个像素 单元包含至少一个光电二极管1031。其中，光电二极管1031可以基于光电效 应，将采集到的光信号转换为电信号，并传输给信号处理模块(即电路部分)， 信号处理模块读取光电二极管产生的电信号后，并对电信号进行处理，得到对 应的感光结果，在多光谱图像传感器中，上述感光结果也可以称为多光谱图像。 当然，电路部分还可以将电信号传输给接入的设备，如将采集到的多光谱图像 传输给处理器。可选地，该感光芯片103的布局方式可以采用前照式、背照式 或者堆栈式等，而感光芯片103的曝光方式可以采用全局曝光或者滚动曝光等， 在此不对曝光方式以及布局方式进行限制。
54.在本实施例中，感光芯片103包含多个像素单元，每个像素单元可以采集 对应的多光谱数据，将多个像素单元对应的多光谱数据合成得到多光谱图像数 据。需要说明的是，一个感光芯片103包含的像素单元可以根据其采集的分辨 率以及图像尺寸决定，也可以根据使用场景进行对应的调整，在此不对像素单 元的个数进行限定。
55.在一种可能的实现方式中，图3示出了本技术一实施例提供的像素单元与 滤光片之间的结构示意图。参见图3所示，每个所述像素单元上覆盖有一个所 述滤光片。在该情况下，一个滤光片获取过滤得到的包含光信号会照射到对应 的像素单元内，该像素单元用于将上述光信号转换为电信号，并基于所有像素 单元的电信号生成多光谱图像。
56.在一种可能的实现方式中，图4示出了本技术另一实施例提供的像素单元 与滤光片之间的结构示意图。参见图4所示，每个所述滤光片覆盖于多个所述 像素单元上。在该情
况下，一个滤光片覆盖于多个像素单元上，从而每个像素 单元可以用于记录同一滤光片的光谱信号，并转换为对应的电信号，上述结构 在透光率较低的场景下也能够提高采集的精确性，虽然降低一定程度的图像分 辨率，但提高了每个光信号的采集精度。
57.在本实施例中，多光谱图像传感器包括有微透镜阵列101，该微透镜阵列 内包含有至少一个微透镜单元，当然，也可以包含两个或两个以上的微透镜单 元，具体微透镜单元的数量可以根据实际场景或传感器需要进行相应配置，在 此不对微透镜单元的个数进行限定。该微透镜阵列具体用于将入射光线进行汇 聚，并使得汇聚后的所述入射光线经过所述滤光片阵列聚焦于所述感光芯片上。 其中，上述入射光线可以是由预设光源发射并经过被测对象反射后的光线，也 可以是由被测对象自身产生的光线。
58.在一种可能的实现方式中，微透镜阵列101中每个微透镜单元对应滤光片 矩阵中的一个滤光单元组，即微透镜单元与滤光单元组之间是一一对应的关系， 每个微透镜单元用于将入射光线汇聚于该滤光单元组对应的区域，并透过滤光 单元组将入射光线照射到感光芯片103上。当然，一个微透镜单元还可以对应 两个或以上的滤光单元组，具体对应方式可以根据实际情况确定。
59.在本实施例中，多光谱图像传感器包括有滤光片阵列102，该滤光片阵列 102内包含有至少一个滤光单元组，一个滤光单元组内包含有多个滤光片，不 同的滤光片可以对应不完全相同的预设波长，即一个滤光单元组内可以存在两 个以上对应相同预设波长的滤光片，也存在两个以上对应不同预设波长的滤光 片，可以采集不同光谱对应的光信号，由于一个滤光单元组内包含有不同预设 波长的滤光片，且不同的滤光片只能够让特定波长的光线通过，即从入射光线 中过滤得到预设波长的光线，因此，通过一个滤光单元组可以获取得到的多光 谱的光信号，并入射光线经过滤光单元组后，感光芯片可以采集到包含多光谱 的光信号，并将光信号转换为对应的电信号，从而生成多光谱图像数据。
60.在本实施例中，由于多光谱图像传感器的滤光片阵列102中包含有多个对 应不同预设波长的滤光片，因此当入射光经过滤光片阵列102照射到感光芯片 103后，感光芯片可以在可见光和近红外光范围内(例如波段在300nm～1100nm 之间的光线)可以经过滤光片过滤后得到多光谱图像，该多光谱图像的带宽可 以在50nm～700nm之间，当然，也可以大于或小于上述的带宽范围。通过本实 施例提供的多光谱图像传感器采集得到的多光谱图像或重建后的多光谱图像， 可以用于对被拍摄对象的成分进行定性解析，例如进行物质成分识别，或者获 得更为精确的环境色温，并基于环境色温对被拍摄对象进行色彩还原，还可以 进行更为准确的活体检测以及人脸识别等，即基于多光谱采集的图像数据可以 应用于多个不同的使用场景下。
61.在一种可能的实现方式中，一个滤光单元组可以包含大于或等于4个滤光 片，如4个滤光片、9个滤光片或16个滤光片等等，具体根据多光谱图像传感 器的通道数量决定，若该滤光单元组内包含9个滤光片，则该滤光单元组具体 可以是一个3*3的滤光片矩阵。
62.在一种可能的实现方式中，同一滤光单元组内的不同滤光片具体是基于预 设的排布方式在二维平面上进行排列。当滤光片阵列中包含两个或以上的滤光 单元组，由于每个滤光单元组内不同预设波长对应的滤光片均是以相同的排布 方式进行排列，因此，对于整个滤光片阵列而言，不同预设波长对应的滤光片 会以预设的排列次序在二维平面上周期排列。示例性地，图5示出了本技术一 实施例提供的滤光片阵列的示意图。该滤光片阵列
包含有四个滤光单元组，每 个滤光单元组包含9个滤光片，根据对应的波长不同，分别为滤光片1～9，每 个滤光单元组内的滤光片排布方式相同，从而形成了以预设的排列次序周期排 列的结构。
63.在一种可能的实现方式中，该滤光单元组具体为一宽带滤光矩阵。同样地， 该宽带滤光矩阵具体包含有对应不同预设波长的多个滤光片。与现有的多光谱 图像传感器相比，本技术实施例提供的多光谱图像传感器内的滤光单元组可以 视为一个宽带滤光矩阵，即由多个对应不同预设波长的滤光片构成的“宽带滤 光片”，即将多个滤光片组合而成的滤光单元组可以视为一个宽带滤光片，因此， 该滤光单元组内包含所有滤光片所对应的预设波长所构成的波段，可以在一个 较宽的范围内，例如在300nm～1100nm之间，也可以在350nm～1000nm之间， 即光谱范围可以针对可见光以及近红外光的波段，其中，上述带宽滤光矩阵的 光谱透光率曲线可以与拜耳bayer滤光片的光谱透光率曲线相似。透过光谱的 半高全宽(半高全宽：即峰值高度一半时的透射峰宽度)在50nm
‑
700nm之间， 不同的光谱透过特性对应不同的颜色，即白光入射到宽带滤光矩阵内预设波长 的滤光片后，只有该对应波长的光线可以透过，其余波段的光线均被阻挡，示 例性地，图6示出了本技术一实施例提供的入射光线透过滤光单元组的示意图， 参见图6可见，不同滤光片只允许对应波段的光线透过，而其他波段的光线则 拦截，而由于一个滤光单元组内包含有多个不同波段的滤光片，因此整个滤光 单元组内过滤得到的波段较宽，可以视为一个宽带滤光片，即宽带滤光矩阵。
64.在一种可能的实现方式中，上述宽带滤光矩阵中包含有可通过近红外波段 光线的滤光片，从而可以扩大整个宽带滤光矩阵可通过的光谱范围。在现有的 大部分彩色摄像模块中，往往会在彩色摄像模块中(镜头和感光芯片之间)加 入过滤掉近红外波段的滤光片(即不允许近红外波段通过)，即ir
‑
cut，将近红 外(650nm
‑
1100nm)的光谱全部截止，以便更好的还原颜色。但是为了扩大光 谱利用范围，以及获取更多的光谱数据以便适应不同应用场景的需求，本技术 提供的多光谱图像传感器将近红外的光谱也利用上(光谱利用的范围越宽，光 谱信息越丰富)，所以该多光谱图像传感器可以选择不采用红外截止滤光片，即 可以在宽带滤光矩阵中加入允许近红外光透过的滤光片，在保证同样能还原颜 色的同时，引入更多的光谱信息。其中，上述允许近红外光通过的滤光片与其 它预设波段的滤光片在近红外波段有相近的响应曲线，将除近红外波段外的其 他所有预设波段的滤光片采集到的光谱信息，减去黑色滤光片采集到的光谱信 息，即可以恢复每种预设波长对应的光谱曲线，此处的只对近红外光响应的滤 光片充当ir
‑
cut作用。
65.进一步地，作为本技术的另一实施例，该多光谱图像传感器还包括基底104， 感光芯片103、滤光片阵列102以及微透镜单元101依次排布于基底上，示例 性地，图7示出了本技术另一实施例提供的多光谱图像传感器的结构示意图。 参见图7所示，该多光谱图像传感器包括基底104，感光芯片103排布于基底 104上方，而感官芯片103的上方则为滤光片阵列102，以及微透镜单元101， 从而入射光线可以通过微透镜单元101汇聚于滤光片阵列102上，并通过滤光 片阵列102对入射光线进行过滤，从而将包含多光谱的光线照射在感光芯片103 上，从而采集得到包含多光谱的图像数据。
66.进一步地，作为本技术的另一实施例，本技术还提供了一种基于上述多光 谱图像传感器的成像模块，该成像模块包含上述任一实施例提供的多光谱图像 传感器，除了上述
多光谱图像传感器外，该成像模块还包括镜头以及电路板。 示例性地，图8示出了本技术一实施例提供的成像模块的结构示意图。参见图 8所示，该成像模块中包含有多光谱图像传感器81、镜头82以及电路板83， 其中，多光谱图像传感器81设于电路板83上，该镜头82设于该多光谱图像传 感器81上方并固定于电路板83上，从而使得入射光线可以透过镜头照射于多 光谱图像传感器81上。需要说明的是，该成像模块上可以包含有一个多光谱图 像传感器81，也可以设置有两个或以上的多光谱图像传感器83。若该成像模块 包含多个多光谱图像传感器81，则上述镜头82可以设于多个多光谱图像传感 器81的上方，即多个多光谱图像传感器81对应一个镜头82，当然，可以为每 一个多光谱图像传感器81配置独立的一个镜头82，具体配置可以根据实际使 用场景进行配置，在此不做限定。
67.在一种可能的实现方式中，该成像模块中的镜头82包括有成像透镜821 以及底座822，所述成像透镜821设置于所述底座822上；所述电路板83上设 有与所述底座822连接的所述多光谱图像传感器81，即在实际安装后，底座822 会覆盖于多光谱图像传感器81上方，即罩住整个多光谱图像传感器81，并设 于电路板83上。
68.在本技术实施例中，多光谱图像传感器包含有滤光片阵列，该滤光片阵列 包含有至少一个滤光单元组，且每个滤光单元组内包含有对应不同预设波长的 滤光片，从而能够实现同时采集多个不同波段的光信号，生成多光谱图像数据， 保证了多光谱图像数据中不同通道采集的实时性，提供了成像精度以及效率。
69.实施例二：
70.图9示出了本发明另一实施例提供的一种多光谱图像传感器的结构示意图。 为了便于说明，仅示出了与本发明实施例相关的部分。详述如下：
71.多光谱图像传感器包括：沿入射光方向依次排列的微透镜阵列901、滤光 片阵列902以及感光芯片903；
72.所述感光芯片903，包括多个像素单元；
73.所述滤光片阵列902，包括至少一个滤光单元组；每个所述滤光单元组包 含多个对应不完全相同的预设波长的滤光片；每个所述滤光片用于通过入射光 线中所述滤光片对应的所述预设波长的光线；每个所述滤光单元组内的所述滤 光片以目标方式进行排布；所述目标方式是所述滤光单元组对应的图像采集指 标最优对应的排布方式；
74.所述微透镜阵列901，包括至少一个微透镜单元，所述微透镜单元用于汇 聚所述入射光线，并使得汇聚后的所述入射光线经过所述滤光片阵列聚焦于所 述感光芯片上。
75.在本实施例中，感光芯片903以及微透镜阵列901与实施例一种的感光芯 片103以及微透镜阵列101相同，均是用于将光信号转换为电信号，以及用于 汇聚光线，具体描述可以参见实施例一的相关描述，在此不再赘述。
76.在本实施例中，滤光片阵列902与上一实施例中的滤光片阵列102相似， 均包含至少一个滤光单元组，且该滤光单元组内包含有对应不同预设波长的滤 光片。与实施例一的滤光片阵列102不同的是，本实施例中的滤光片阵列902 中的滤光单元组内的滤光片，是以预设的目标方式进行排布，并且以该方式进 行排布时，滤光单元组对应的图像采集指标最优。
77.在一种可能的实现方式中，在确定目标方式之前，可以分别确定各个候选 方式对应的图像采集指标，并基于所有候选方式的图像采集指标，确定出最优 的图像采集指标，
并将最优的图像采集指标对应的候选方式作为上述的目标方 式。可选地，该图像采集指标包含有多个指标维度，不同指标维度可以根据使 用场景的不用，配置不同的权重值，根据候选方式在各个指标维度对应的指标 值以及配置好的权重值进行加权运算，从而可以计算得到该候选方式对应的图 像采集指标，若该图像采集指标的数值越大，则表示与使用场景的适配度更高， 成像效果越好，识别准确率越高，基于此，可以选取数值最大的图像采集指标 对应的候选方式作为上述的目标方式。
78.在一种可能的实现方式中，该滤光单元组具体包括一m*n的滤光片矩阵， 即一个滤光单元组内，各个滤光片以m行n列的方式进行排布，从而形成一个 m*n的滤光片矩阵。该滤光片矩阵内的各个滤光片具体可以为正方形的滤光片， 还可以是矩形的滤光片。其中，m和n均为大于1的正整数。例如，m可以为 2、3或者4等，对应地，n也可以为2、3或4等，m和n之间的数值可以相同， 也可以不同，在此不对m和n的具体数值进行限定。
79.示例性地，根据滤光单元组内包含的滤光片的颜色，滤光单元组(即上述 的滤光片矩阵)可以分为以下几个类型，分比为：grbg滤光片、rggb滤光 片、bggr滤光片以及gbrg滤光片，其中，g代表可通过绿色的滤光片，r 代表可通过红色的滤光片，b代表可通过蓝色的滤光片。
80.以滤光片矩阵为3*3的滤光片矩阵为例进行说明，示例性地，图10示出了 本技术一实施例提供的滤光片矩阵以及滤光片阵列的示意图。参见图10所示， 该滤光片矩阵内包含9个滤光片，如图10中的(a)所示，上述9个滤光片可 以为对应不同预设波长的滤光片，当然，也可以为少于9种不同预设波长的滤 光片，在该情况下，则在一个滤光片矩阵内包含预设波长重复的两个或以上的 滤光片，优选地，上述滤光片矩阵内包含至少4种不同的预设波长不同的滤光 片。对于一个滤光片矩阵，由于可以包含多个滤光单元组，例如包含a*b个滤 光单元组(即滤光片阵列)，则整个滤光片阵列如图10中的(b)所示，则滤光 片阵列每列包含m*a个滤光片，而每行包含n*b个滤光片，若每个滤光片关联 一个像素单元，则生成的多光谱图像传感器的分辨率为(m*a)*(n*b)。同理 地，若滤光片矩阵为一4*4的滤光片矩阵，则该滤光片矩阵内可以包含对应16 种不同预设波长的滤光片，还可以少于16种预设波长的滤光片，例如只包含对 应8种不同预设波长的滤光片，即每种滤光片需要重复出现两次，且保证均匀 的空间分布。
81.继续以3*3共9种不同预设波长(即通过不同特定颜色)的滤光片矩阵为 例进行说明，在确定滤光片矩阵内的各个滤光片的位置时，主要基于以下几个 方面进行考量：1)从整个滤光片阵列来看，单个颜色在3*3矩阵中的位置无确 定性要求，因此需要考虑的是在一个滤光片矩阵(即滤光单元组)内不同颜色 之间的相对位置；2)后续的场景应用对颜色的相对位置是否有特定的要求；3) 彩色图像(如rgb图像)的恢复效果与颜色间的相对位置有强烈相关性。因此， 若场景应用对于颜色的相对位置没有特定要求的情况下，滤光片阵列中对应不 同预设波长的滤光片的空间排布设计主要考虑彩色图像恢复算法(后续成为 rgb恢复算法)的需求。
82.在本实施例中，图11示出了本技术一实施例提供的多光谱图像传感器所采 用的rgb恢复算法的示意图，参见图11中的(a)所示，滤光片阵列中的滤光 片矩阵为rggb滤光片矩阵，因此整个滤光片矩阵内包含有两个可通过绿色的 滤光片g1和g0、一个可通过红色的滤光片r以及一个可通过蓝色的滤光片b， 除此之外，还包括有可通过近红外光的滤光片
ir，其他滤光片对应的波长(即 可通过的颜色)可以根据实际需求进行选择。其中，进行rgb恢复算法具体可 以划分为以下3个步骤：
83.1)将r、g0、g1、b四个通道的灰度值分别减去ir通道的灰度值，即 r＝r
‑
ir，g0＝g0
‑
ir，g1＝g1
‑
ir，b＝b
‑
ir，进行该步骤操作的原因为r、g、b 滤光片本身无法完全截止近红外光，即都对近红外光有响应(其透过率曲线如 下图11中的(b)所示，其中，纵坐标为幅值，横坐标为波长)，只有消除了近 红外光的响应才能够得到无其他颜色干扰的r、g、b信息(普通的彩色图像传 感器由于带有过滤近红外光的滤光片，所以无需这一步操作，而本技术的多光 谱图像传感器为了能够对采集多样的光谱信息，因此会包含有可通过近红外光 的滤光片，以采集近红外光的光谱数据)；
84.2)完成上述操作后，将r、g0、g1、b四个通道的灰度值后，整个滤光 片矩阵(即滤光单元组)可以近似看成如图11中的(c)一样的方式排布；
85.3)将重新排布后的rgb数据输入对应的彩色信号处理模型，从而输出彩 色图像，至此，完成了rgb颜色恢复。
86.上述方式虽然牺牲了滤光片矩阵内部分的分辨率，且有5/9的空间信息被 采样过程丢弃，对于原始分辨率输出为3a*3b的多光谱图像传感器而言，其rgb 输出的图像分辨率为2a*2b，然而上述方式能够利用通用的彩色信号处理模型 完成多光谱图像传感器的rgb恢复，能够提高了彩色图像恢复的通用性以及效 率。因此，在确定了适用上述rgb恢复算法后，可以根据不同排布方式下，上 述rgb恢复算法的恢复效果，来确定图像采集指标，并基于图像采集指标确定 滤光片矩阵内各个滤光片的目标方式。
87.进一步地，作为本技术的另一实施例，所述图像采集指标包括：信息采样 度、畸变距离、与基准通道之间的距离参量以及基于透过率曲线计算得到的光 谱相似度，所述图像采集指标最优具体指：所述滤光片以所述目标方式进行排 布时，所述信息采样度大于采样度阈值、所述畸变距离小于畸变阈值，所述距 离参量小于预设的距离阈值，相邻的各个所述滤光片之间的所述光谱相似度大 于预设的相似阈值；其中，所述采样度阈值是基于所有候选方式的信息采样度 确定的；所述距离阈值是基于所有所述候选方式的畸变距离确定的。
88.在本实施例中，上述图像采集指标具体包含四种类型的特征参量，分别为： 信息采样度、畸变距离、与基准通道之间的距离参量以及不同滤光片之间的光 谱相似度。以下分别说明上述三种特征参量的含义以及相关的计算方式。具体 描述如下：
89.1)信息采样度：
90.继续以3*3的滤光片矩阵为例进行说明，如上所述，在进行rgb恢复算法 时，由于只有4个滤光片提供rgb恢复算法的彩色信息，即丢弃了3*3阵列中 5个通道的信息(即五个位置的滤光片采集到的数据)，只保留的其中4个。这 4个滤光片在3*3阵列中的不同位置时，对整个滤光片矩阵的空间信息的采样 作用是不同的，因此可以通过信息采样度来表示上述四种颜色的滤光片在不同 位置上时在空间信息上的采样效果。示例性地，图12示出了本技术一实施例提 供的滤光片阵列中rgb通道的不同滤光片的排布位置的示意图，如图12所示， 滤光片阵列中的滤光片矩阵具体为rggb矩阵，其中，上述四种滤光片(分别 为1～4滤光片)在滤光片矩阵中的位置如图所示，从而基于滤光片矩阵构成对 应的滤光片阵列。由于像素a对应的采集信息在进行rgb恢复算法的过程中 会被丢弃，因此若想恢复像素a的
信息，利用其邻域内的其他像素信息进行补 全；在像素a的8个邻域像素中，由于上下左右4个像素与中心(即像素a) 之间的距离比左上、右上、左下、右下4个像素与中心之间的距离小，因此所 贡献的信息更准确。因此，可以将像素a的上下左右邻域的像素，在恢复像素 a的信息时贡献的信息量识别为1，而左上、右上、左下、右下邻域的像素， 在恢复像素a的信息时贡献的信息量识别为0.707(即)。基于此，滤光片 矩阵以图12的方式进行排布时，像素a的8邻域只有其中左上、右上、左、 右4个像素配置有rggb滤光片，即上述四个像素采集的信息有效，其他的邻 域像素在进行rgb恢复时会被丢弃，即属于无效信息，因此像素a能够从邻 域获取的信息量为上述四个邻域的总和，即sa＝0.707+0.707+1+1＝3.414，同理 也可以通过上述方式分别计算像素b、c、d、e对应的信息量，最终计算3*3 排布中5个被丢弃像素所能够得到的总信息量s＝sa+sb+sc+sd+se＝16.484。 将总信息量s作为该排布方式的信息采样度，s反映了rggb滤光片以上述排 布方式对应的滤光片矩阵能够为全分辨率图像恢复提供的信息总量，由于信息 总量提供得越多，则数据损失越少，因此信息采样度越大越好。在确定目标方 式时，可以配置有对应的采样度阈值。若某一候选方式对应的信息采样度大于 上述的采样度阈值，则可以进行其他特征参量的比对，以判断该候选方式是否 为目标方式。
91.进一步地，该采样度阈值可以根据所有候选方式对应的信息采样度决定， 例如，可以将所有候选方式中信息采样度数值第二大的信息采样度作为上述的 采样度阈值，从而选择出数值最大的信息采样度。
92.2)畸变距离
93.示例性地，图13示出了本技术一实施例提供的畸变距离的计算示意图。参 见图13所示，本技术提供了两种滤光片矩阵的排布方式，第一种方式如图13 中的(a)所示，另一种方式如图13中的(b)所示，以3*3的滤光片矩阵为例 进行说明，以图13的方式建立一个坐标系(当然，也可以其他方式建立坐标系)， 左上角为坐标零点，且每个滤光片对应的长和宽均为4，则在该滤光片矩阵中， r像素的中心坐标为(2,2)，在进行rgb恢复算法后(参见1)中所述进行矩 阵的近似转换)，等效近似的rgb恢复后的矩阵中，用4个滤光片(即rggb 四个滤光片)代替原有的9个滤光片所占的空间，因此每个像素的长和宽均变 为了6，此时r像素的中心坐标为(3,3)。上述矩阵的相似变换的操作，对r 通道(即红色滤光片)而言，引入了一个畸变量，畸变量为：即1.414，同理可以计算其他3个通道的畸变量，而上述畸变距离等于各通道畸 变距离的总和，在不同的4通道排布设计下，畸变距离越小越好，由此可见， 以图13中的(a)方式进行排布时，该滤光片矩阵对应的畸变距离为9.153。此 外，畸变距离的计算需要注意另外一种情况，如上图13中的(a)的右边所示， 在原有的3*3阵列设计中，b通道在g0通道的右方，而在近似变换后，b通道 位于g0通道的下方，这种改变4通道之间空间拓扑位置的近似变换会对rgb 效果带来较大的负面影响，因此这种排布设计在计算总畸变量时对g0通道的 畸变量乘上惩罚因子，例如该惩罚因子为2，同理b通道畸变量也需要乘以惩 罚因子2，因此计算上惩罚因子后，以图13中的(b)方式进行排布时，该滤 光片矩阵对应的畸变具体为27.2039。由此可见，在选取目标方式时，应该选取 畸变距离较小的候选方式作为目标方式，因此若某一候选方式对应的畸变距离 小于上述的畸变阈值，则可以进行其他特征参量的比对，以判断该候选方式是 否为目标方式。
94.进一步地，该畸变阈值可以根据所有候选方式对应的畸变距离决定，例如， 可以将所有候选方式中畸变距离中数值第二小的畸变距离作为上述的畸变阈值， 从而选择出数值最小的畸变距离。
95.3)与基准通道之间的距离参量
96.如上所述，在进行rgb恢复算法时，首先需要用4通道的灰度值分别减去 近红外光ir通道的灰度值，因此可以将ir通道作为基准通道。当然在其他应 用场景下，若采用其他波段的滤光片对应的通道作为基准通道，也可以将ir通 道替换为对应波段的通道。在进行上述rgb恢复算法时，由于4通道灰度值中 的ir分量与ir通道的灰度值相同。因此在确定滤光片矩阵的排布方式时，需 要让4个通道(即rggb通道)对应的滤光片在滤光片矩阵内的位置应离ir 通道对应的滤光片的位置尽可能近，并且上述4个通道与ir通道之间的距离尽 可能相同。为此，定义四个通道的滤光片与ir滤光片之间的距离，以及上述距 离的波动值。示例性地，图14示出了本技术另一实施例提供的滤光片矩阵内各 个滤光片的排布方式，参见图13所示，b通道(即可以通过蓝色的滤光片)离 ir通道的距离为1，由于g0通道在ir通道的左上方，因此与ir通道之间的 距离被为1.414(即)，剩余可以通过上述方式确定，因此，以上述排布方式 得到的滤光片矩阵中，上述四个通道与ir通道之间的距离之和，为 1+1+1.414+1.414＝4.828；ir距离波动为4通道与ir通道之间距离的标准差， 为0.239。在不同的滤光片矩阵的候选方式中，距离之和与ir距离波动越小越 好。
97.4)基于透过率曲线计算得到的光谱相似度
98.在计算得到各个候选方式对应的信息采样度、畸变距离、距离参量(即距 离之和以及ir距离波动)后，就可以对所有候选方式进行定量评价。示例性地， 图15示出了本技术提供的所有候选方式在上述三种参量的参数表。如图15中 的(a)所示，从左到右从上到下编号为1至18，具体的参数可以参见图15中 的(a)的表格，因此，根据比对各个候选方式中信息采样度、畸变距离、与基 准通道之间的距离参量(即ir通道的距离之和以及ir距离波动)，可以确定出 采样度阈值、畸变阈值以及距离阈值，并确定出上述四个通道以及基准通道(即 ir通道)最优的排布方式如图15中的(b)所示。
99.在确定了上述5个通道对应的位置后，可以确定该矩阵中剩余的其他4个 位置所需放置的滤光片。由于不同颜色在空间中应尽可能均匀分布，应避免相 近的颜色的滤光片在3*3的滤光片矩阵中过于集中，即尽可能使相近的颜色不 相邻。以上图15为例进行说明，确定剩余的4种待确定位置的滤光片对应的透 过率曲线，并将任一待确定位置的滤光片放置于空余的位置内，计算该待确定 位置的滤光片的通过率曲线与邻近的已确定位置的滤光片的透过率曲线之间的 光谱相似度，其中，两条透过率曲线相似性可以基于采用光谱测量领域内对光 谱曲线的相似性度量指标确定，例如可以采用两条透过率曲线的欧式距离、光 谱角、相关系数等相似性度量指标，在此不做特定限定，在多个空余的位置中 确定出相似度最小的位置作为该待确定位置的滤光片的位置，通过上述方式得 到待确定位置的滤光片在滤光片矩阵内的位置，从而使得每个滤光片对应的透 过率曲线均与其邻域的滤光片的透过率曲线具有预设的加权相关性。对于所有 待确定位置的滤光片均依次执行上述步骤，从而可以从所有候选方式中确定出 各个滤光片在滤光片矩阵内排布时对应的目标方式。
100.在一种可能的实现方式中，基于上述四种特征参量的计算方式，终端设备 可以遍
历计算所有滤光片矩阵的候选方式关于上述四种特征参量对应的参数值， 并基于各个特征参量对应的参数值计算出各个候选方式对应的图像采集指标， 从而可以选取出最优的图像采集指标，并将最优的图像采集指标对应的候选方 式作为目标方式。
101.在一种可能的实现方式中，本实施例提供的多光谱图像传感器也可以集成 于一成像模块中，在该情况下，成像模块包括：所述多光谱图像传感器、镜头 以及电路板；所述电路板上设有至少一个多光谱图像传感器以及镜头；镜头设 于所述多光谱图像传感器上，以使入射光线透过所述镜头照射于所述多光谱图 像传感器上。
102.在本技术实施例中，通过多个特征维度来确定图像采集指标，特征维度包 含有信息采集度、畸变程度、滤光片之间的相关性以及与中心点之间的波动范 围，从多个方面来定量评定滤光片矩阵的采集效果，能够准确有效地确定出最 优的目标排布方式，从而提高了后续多光谱图像传感器的采集精度以及与应用 场景之间的适配性。
103.实施例三：
104.在本发明实施例中，流程的执行主体为终端设备，该终端设备具体用于制 造实施例一或实施例二所述的多光谱图像传感器，即上述终端设备具体可以为 一多光谱图像传感器的制造装置。图16示出了本发明第一实施例提供的多光谱 图像传感器的制造方法的实现流程图，详述如下：
105.在s1601中，在衬底上任一预设波长对应的滤光片填充区域内均匀填充目 标颜色的光阻剂；所述目标颜色为与所述预设波长相匹配的颜色。
106.在本实施例中，终端设备在制作多光谱图像传感器的滤光片阵列时，由于 滤光片阵列内包含有多个对应不同预设波长的滤光片，因此需要依次填充不同 的光阻剂从而得到各个对应不同预设波长的滤光片。终端设备首先可以确定各 个滤光片阵列中各个预设波长对应的填充次序，并确定出当前填充周期对应的 目标波长。其中，该目标波长为待填充的预设波长中填充次序最前的预设波长。
107.例如，滤光片阵列中的滤光单元组为3*3的滤光片矩阵，即滤光片阵列中 包含有9个滤光片，若9个滤光片对应9种不同的预设波长，则可以为每个预 设波长预先配置对应的填充次序，分别为1～9，若填充次序为1的预设波长并 未被填充，则在当前的填充周期时会选取填充次序为1的预设波长为目标波长， 并执行s1602的操作；若填充次序为1～4的预设波长均被填充完成，则在当前 的填充周期时会选择填充次序为5的预设波长为目标波长，直到所有预设波长 均被填充完成。
108.需要说明的是，不同预设波长对应的填充次序可以预先设置，在实际制造 时可以根据需要对填充次序进行调整。其中，由于滤光片阵列中对应相同预设 波长的滤光片的个数可以为多个，因此在该情况下，可以同时在多个滤光单元 组内对应相同预设波长的滤光片的位置填充光阻剂，从而提高制造效率。
109.在本实施例中，终端设备在确定了目标波长后，即确定所需填充的预设波 长后，可以确定目标波长在滤光片阵列中所需填充的区域，即上述滤光片填充 区域。如上所述，由于一个滤光片阵列内可以包含多个滤光单元组，而每个滤 光单元组中均包含目标波长对应的滤光片，因此，每个滤光单元组均对应至少 一个目标波长的滤光片填充区域，终端设备会将与目标波长相匹配的目标颜色 的光阻剂填充到每个滤光单元组中对应的滤光片填充区域内。
110.在一种可能的实现方式中，在将光阻剂填充到滤光片填充区域时，可以采 用旋涂的方式将光阻剂均匀覆盖在位于衬底上的滤光片填充区域内。
111.在一种可能的实现方式中，该衬底具体可以为感光芯片，即在感光芯片上 直接填涂不同预设波长的滤光片。
112.在s1603中，在预设的照射时间内开启照射光源，并在所述照射光源与填 充了所述光阻剂后的衬底之间设置光掩模板，得到预设波长对应的滤光片。
113.在本实施例中，终端设备在滤光片填充区域内填充完成目标颜色的光阻剂 后，可以在开启照射光源，并在预设的照射时间内对填充了光阻剂的衬底进行 照射，其中，在光源与衬底之间的光路中间会配置有预先设置的光掩模板，通 过光掩模板照射后的衬底，会只保留滤光上述选取的预设波长对应的滤光片填 充区域内填充的所述光阻剂，即上述选取的预设波长对应的滤光片已经完成， 并固定于该衬底上，可以制造其他预设波长的滤光片。
114.在一种可能的实现方式中，终端设备可以将照射完成后的衬底放置于显影 机内，通过显影机中的显影液去除多余的未被固化的光阻剂，即清除除目标波 长对应的滤光片填充区域外其他区域可能存在的光阻剂，从而在衬底上只保留 有上述滤光片填充区域的光阻剂，即生成目标波长对应的滤光片。
115.在s1604中，在照射完毕后，返回执行所述在衬底上任一预设波长对应的 滤光片填充区域内均匀填充目标颜色的光阻剂的操作，直到所有所述预设波长 在所述衬底上均有对应的所述滤光片。
116.在本实施例中，在得到上述目标波长对应的滤光片后，可以基于填充次序 继续制造其他预设波长对应的滤光片，即重复执行s1601～s1603的操作，直到 得到所有预设波长对应的滤光片。
117.在一种可能的实现方式中，填充上述光阻剂具体可以采用以下五个类型的 方式，分别为：
118.1)染色法，此方法主要包括两大步骤，具体为图案化光阻制备步骤和染色 步骤。首先，在衬底上涂布无色的光阻剂，干燥硬化之后通过掩模板进行紫外 线曝光，再经显影后便形成透明图案化的透明滤光片；接着用染料(即与目标 波长对应的目标颜色)对这些图案化中关联的位置(即目标波长对应的滤光片 填充区域)的透明光阻进行染色，便得到了单色的滤光片；重复上述过程，可 分别不同预设波长的滤光片，最终制成彩色光阻层。然而，此方法耐热、耐光、 耐化学性、耐水性较差，工艺复杂，成本较高。
119.2)颜料分散法，具有工艺简单、性能稳定、可靠等优点。颜料分散法的制 备方法具体为：首先，制造对应不同预设波长的光阻剂，再将该任一预设波长 对应的光阻剂涂布在衬底内与预设波长关联的滤光片填充区域上，经过曝光、 显影等光刻工艺后便可制成预设波长对应的滤光片；重复上述过程即对应多个 不同预设波长的滤光片。
120.3)喷墨法，具体包含以下步骤：首先在衬底上形成由黑色矩阵组成的微点 阵的像素框架,再利用喷墨方式,把对应不同预设波长的目标颜料的光阻精 准地喷布在像素框架相应的滤光片填充区域内,再经由固化,制备保护层,形 成包含不同预设波波长的滤光片。此方法的优点是成本低、工艺简单、颜料利 用率高、可制备大尺寸多光谱的滤光片,然而要求较高的打印精度。
121.4)光刻胶热熔法，方法主要分为三个步骤：1、以目标图案为曝光团(正 六边形，矩形或者圆形)利用掩模板的遮蔽使基板的光刻胶曝光。2、清洗残留 杂物。3、在加热平台上和加热，使之热熔成型。优点：工艺简单，材料以及设 备的要求低，易于扩大化生产和控制工艺参数。
122.5)激光直写技术，激光直写方法主要有如下的步骤：1、计算机上设计微 透镜阵列的曝光结构；2、设计图案写入激光直写设备中；3、带有光刻胶的基 板放在直写设备对应的刻写平台上，进行激光刻写，刻写后清理表面残留物。 得到阵列结构。其优点是：精度高，适合于模型制作，便于扩大生产，高品质 低成本。
123.在s1605中，将填充有所有所述预设波长对应的所述滤光片的衬底识别为 滤光片阵列，并基于所述滤光片阵列得到多光谱图像传感器；所述滤光片阵列 包含至少一个滤光单元组；所述滤光单元组内的滤光片以预设的目标排布方式 进行排布；所述目标排布方式是所述滤光单元组对应的图像采集指标最优对应 的排布方式。
124.在本实施例中，终端设备通过上述可以将对应不同预设波长的滤光片均制 造于在衬底上，因此可以将上述填充有多种不同颜色的光阻剂的衬底识别为滤 光片阵列，并将滤光片阵列、感光芯片以及微透镜阵列进行封装，从而得到多 光谱图像传感器。由于在确定各个预设波长在衬底上的滤光片填充区域时，各 个滤光片填充区域是基于图像采集指标最优的目标排布方式确定的，因此，衬 底上形成的滤光单元组内的各个滤光片也是以预设的目标排布方式进行排布， 以达到最优的图像采集效果。
125.在一种可能的实现方式中，在制造完成所有滤光片后，其表面可能存在凹 凸不平的情况，容易提高了入射光的反射率，导致通光量减少；因此，在制造 微透镜阵列之前，可以在填充完成的衬底的顶部再涂布一层顶部平坦层，用来 改善感光芯片表面的平坦度，降低入射光的反射率。制作这层平坦层采用涂布 工艺，将平坦层材料涂布于感光芯片表面的滤光层之上；再经过烘烤或者紫外 固化，形成顶部平坦层，其中，除了能够减少反射率外，该顶部平坦层还起到 保护滤光层的作用。
126.在一种可能的实现方式中，制造微透镜阵列的方式具体可以为：采用涂布 机在顶部平坦层上以旋涂的方式均匀涂上光刻胶(光刻胶也是一种光阻剂，此 处的光刻胶是一种透过率较高的透明光阻剂)，控制旋涂过程中温度和速度在预 设的范围内；然后，与制备滤光片类似，采用紫外光对光刻胶上方的掩模版进 行曝光，对特定区域的光刻胶进行固化，然后利用显影液去除未固化的光刻胶； 最后，将感光芯片置于加热平台上加热烘烤，使得固化的光刻胶熔融为微透镜 阵列，单个微透镜可以为正六边形，矩形或者圆形等。
127.进一步地，作为本技术的另一实施例，在s1601之前，终端设备可以确定 滤光片的目标方式，具体包含以下步骤：根据所述目标排布方式，确定所述预 设波长在每个滤光单元组中对应的所述滤光片填充区域。
128.其中，终端设备可以计算各个候选排布方式对应的图像采集指标，并基于 图像采集指标确定目标排布方式。其中，图像采集指标包括：信息采样度、畸 变距离、与基准通道之间的距离参量以及基于透过率曲线计算得到的光谱相似 度，所述图像采集指标最优具体指：所述滤光片以所述目标方式进行排布时， 所述信息采样度大于采样度阈值、所述畸变距离小于畸变阈值，所述距离参量 小于预设的距离阈值，相邻的各个所述滤光片之间的所述光谱相似度大于预设 的相似阈值；其中，所述采样度阈值是基于所有候选方式的信息
采样度确定的； 所述距离阈值是基于所有所述候选方式的畸变距离确定的。其中，具体计算方 式以及确定方式可以参见上一实施例的描述，在此不再赘述。
129.进一步地，作为本技术的另一实施例，在s1602之前，还可以包括：在所 述衬底上均匀填涂胶水，并将所述胶水进行固化，以在所述衬底上形成一平坦 化层；在所述衬底的平坦化层上的所述滤光片填充区域内均匀填充所述目标颜 色的光阻剂。
130.在本实施例中，为了保证滤光片阵列的底部平整，在制作滤光片阵列内的 各个滤光片之前可以先对衬底进行平台化，即在衬底上制造一层平坦化层 (planarization layer,pl)，覆盖在感光芯片的衬底表面。平坦化层制作的流程 是先在衬底表面涂布一层平坦胶水，然后进行烘烤或者紫外固化。平坦化层在 改善底部感光芯片平整度的同时也增加彩色滤光片的黏附力，同时起到保护感 光芯片的作用。
131.示例性地，图17示出了本技术一实施例提供的多光谱图像传感器的制造流 程示意图。参见图17所示，具体包含以下多个步骤：1)对衬底(即感光芯片) 进行前期测试，对衬底的外观进行初步识别，若感光芯片并未识别异常，则执 行下一步骤；2)在感光芯片上制造平坦化层pl，如图17中的(a)所示，具 体实现过程可以参见上面的描述，在此不再赘述；3)采用s1601～s1604的步 骤依次在衬底上填充对应不同预设波长的滤光片，如图17中的(b)所示；4) 顶部平坦化，在完成各个滤光片后配置对应的顶部平坦层，如图17中的(c) 所示；5)制造微透镜阵列，如图17中的(d)所示；6)开焊盘，在微透镜工 艺的最后，采用曝光的形式将覆盖在焊盘上的材料(如树脂等)去除掉，将焊 盘打开，以便后续封装及测试制程采用，如图17中的(e)所示；7)封装，对 上述制备得到的器件进行封装，从而得到制备后的多光谱图像传感器。
132.以上可以看出，本发明实施例提供的一种多光谱图像传感器的制造方法通 过分别在衬底上填充不同预设波长的光阻剂，从而得到包含多种不同预设波长 的滤光片阵列，并基于该滤光片阵列生成多光谱图像传感器，基于该方式生成 的多光谱图像传感器可以同时采集被测对象的多光谱图像，从而能够实现同时 采集多个不同波段的光信号，生成多光谱图像数据，保证了多光谱图像数据中 不同通道采集的实时性，提供了成像精度以及效率。
133.实施例四
134.在本发明实施例中，流程的执行主体为终端设备，该终端设备具体用于确 定制造实施例一或实施例二所述的多光谱图像传感器的具体制造方式，即上述 终端设备具体可以为一多光谱图像传感器的制造装置，并在多种候选的制造方 式中确定目标制造方式。图18示出了本发明第一实施例提供的多光谱图像传感 器的制造方法的实现流程图，详述如下：
135.在s1801中，分别获取滤光单元组内多个对应不完全相同的波长的滤光片 的特征参数组；所述多光谱图像传感器包含至少一个所述滤光单元组；所述多 光谱图像传感器以任一候选制造方式制造得到，且不同的所述特征参数组对应 不同的所述候选制造方式。
136.在本实施例中，在制造多光谱图像传感器时，为了提高多光谱图像传感器 与应用场景之间的适配性，以及提高多光谱图像传感器采集图像的准确性，可 以确定多光谱图像传感器的最优的一个制造方式，并确定得到最优的制造方式 作为目标制造方式，并基于目标制造方式制造上述多光谱图像传感器。基于此， 终端设备需要获取不同候选制造方式对
应的检测准确率，并基于检测准确率确 定出目标制造方式。
137.在本实施例中，终端设备可以通过不同的候选制造方式制造得到对应的多 光谱图像传感器，该多光谱图像传感器内包含至少一个滤光单元组，且该滤光 单元组内包含有对应不同预设波长的滤光片。
138.不同的制造方式对于多光谱图像传感器中的滤光片的滤光特征均有影响。 举例性地，滤光片是基于光阻剂得到的，因此，光阻剂的制造方式也属于多光 谱图像传感器的制造步骤之一，因此，在确定多光谱图像传感器的制造方式时， 可以包括各个原料的制造步骤，以及基于各个原料制造步骤组装得到多光谱图 像传感器的步骤。
139.以光阻剂这一原料的制造步骤为例进行说明，该光阻剂的主要成分包括： 碱可溶性树脂、光固化树脂、颜料、光引发剂、有机溶剂以及添加剂。基于颜 料分散法得到的光阻剂属于负型光阻剂；负型光阻剂的分子键会因为光线的照 射产生交联而紧密结合，被掩模版遮蔽的部分因为分子间没有产生交联作用， 而易被显影液洗去，从而会保留被照射区域的光阻剂，从而得到滤光片。碱可 溶性树脂的作用是为了在显影时洗去未被曝光区域的光阻剂。由于显影时用碱 性溶液，所以要求该树脂具有一定的酸值，以便在显影时与碱性显影液发生反 应，从而洗净未曝光区。光引发剂是在光照时能快速形成自由基或离子活性基， 以便光固化树脂间发生交联反应。颜料使光阻彩色化，彩色光阻的色度由其决 定。颜料分散法中常用的颜料可以为酞著类、dpp类等有机颜料，可以对颜料 进行适当的表面细化处理，以使颜料粒径在预设的阈值范围内，从而提高滤光 片的透过率。颜料分散法中先将颜料预分散在分散剂中，使颜料、分散剂、有 机溶剂充分混合，然后将预分散的液体倒入砂磨机中，设定适当的转速与能量 输入。经砂磨后的颜料母液的粒径应在预设的粒径范围内，且呈正态分布。颜 料母液可以具有良好的存储稳定性，以使颜料母液在室温下保存个月粒径无大 变化。有机溶剂可以调整彩色光阻的粘度，使其接近理想牛顿流体，便于填充 时能够均匀旋转涂布。其他添加剂，如消泡剂，能加快消除光阻剂中的气泡， 改善成膜性能润湿；分散剂，能保证固体颗粒在光阻剂中较好地分散并保持稳 定；流平剂，它能改善涂层的平整性及光泽等等。因此，在确定光阻剂的制造 步骤时，需要确定上述各个原料的添加比例以及相关的制造步骤，即在确定目 标制造方式时，也需要确定制造光阻剂时，各个原料的添加比例以及相关的制 造步骤。
140.在本实施例中，上述滤光片对应的特征参数组具体用于确定基于候选制造 方式得到的滤光片对应的滤光特征，上述特征参数组可以包括：滤光片的透过 率曲线、中心波长、半高全宽等。
141.在一种可能的实现方式中，终端设备可以分别采集基于不同制造方式得到 的滤光片的特征参数组，并基于所有制造方式得到的特征参数组构成了特征数 据库。终端设备在需要制造某一应用场景对应的多光谱图像传感器时，可以直 接从该特征数据库内提取对应候选制造方式生成的滤光片的特征参数组即可， 无需再次重新制造基于该候选制造方式生成的滤光片，以及对应的多光谱图像 传感器，能够大大提高了目标制造方式确定的效率。
142.在s1802中，将所有所述滤光片对应的所述特征参数组及预设参数组导入 到预设的特征向量转换模型，得到多个基于不同探测目标获取的特征向量。
143.在本实施例中，终端设备除了获取基于候选制造方式得到的滤光片对应的 特征
参量组外，还可以获取基于多个不同探测目标获取得到的预设参数组。该 预设参数组是通过在预设光源下照射探测目标后，采集得到的。上述预设参数 组可以包括有关于预设光源的光谱曲线，以及关于探测目标的反射率曲线。其 中，上述探测目标的选取是基于该滤光单元组所使用的应用场景确定的，例如， 若滤光单元组需要应用于活体检测场景，则上述探测目标可以为多个活体人以 及多个假体。
144.在本实施例中。终端设备可以将处于同一滤光单元组内的所有滤光片的特 征参数组以及上述的预设参数组均导入到预设的特征向量转换模型内，从而可 以得到基于多个不同探测目标获取的特征向量，不同的探测目标可以对应一个 特征向量。该特征向量可以用于确定对于该探测目标对应的识别灰度值，从而 可以根据多个不同探测目标对应的识别灰度值来确定该基于预设方式排布各个 滤光片的滤光单元组是否与对应的应用场景相匹配。
145.进一步地，作为本技术的另一实施例，特征参数组内包含光源经过对应的 滤光片后的反射率曲线以及该滤光片的透过率曲线；在该情况下，s1802具体 可以包含以下步骤：
146.步骤1：将所述滤光片对应的所述透过率曲线、所述多个光源的光谱曲线、 所述探测目标的反射率曲线导入到所述特征向量转换模型，计算得到基于所述 探测目标获取的特征值；所述特征向量转换模型具体为：
[0147][0148]
其中，dn
i
为所述滤光单元组内第i个所述滤光片对应的特征值；s(λ)为光 源的光谱曲线；r
i
(λ)为所述探测目标的所述反射率曲线；t
i
(λ)为第i个所述滤 光片的透过率曲线；η(λ)为所述多光谱图像传感器的量子效率曲线；k为所述多 光谱图像传感器的光电转换系数；λ0与λ1为多个所述光谱对应的波段范围。
[0149]
步骤2：基于所述滤光单元组内所有所述滤光片对应的所述特征值，得到 所述特征向量。
[0150]
在本实施例中，在获取滤光片的特征参数组时，终端设备可以开启预设的 光源，将光源照射于探测目标上，入射光线会经过探测目标进行反射，得到对 应的反射光线，反射光线可以照射到滤光单元组上，即反射光线会透过滤光单 元组内的各个滤光片被记录下来，终端设备可以获取基于预设光源下不同探测 目标对应的预设参数组以及滤光片对应的透过率曲线，确定对应的特征向量， 因此上述预测参数内包含有光源的光谱曲线以及探测目标的反射率曲线，光源 的波段范围在λ0与λ1之间。其中，终端设备已预先存储有多光谱图像传感器 中感光芯片对应的量子效率曲线，基于此，终端设备可以将上述采集到的各类 参数均导入到上述特征向量转换函数，从而分别计算基于各个探测目标获取的 特征值，最后，根据所有滤光片的特征值，生成特征向量；该特征向量内包含 有各个滤光片对应的特征值。由于每个特征向量会对应一个探测目标，因为， 为了确定滤光单元组对应的识别准确性，会获取多个不同探测目标的特征向量。
[0151]
在s1803中，将多个所述特征向量导入到所述多光谱图像传感器关联应用 场景类型对应的检测模型，并计算对应的检测准确率。
[0152]
在本实施例中，终端设备可以在确定了基于候选特征方式制造的多光谱图 像传感器对应的特征向量后，可以确定该特征向量与多光谱图像传感器所使用 的应用场景之
间的契合度，即通过检测准确率来衡量，若该检测准确率的数值 越大，则该多光谱图像传感器与应用场景之间的契合度越高；反之，若该检测 准确率的数值越小，则该光谱图像传感器与应用场景之间的契合度越低，因此， 通过计算该检测准确率，可以选取出最优的候选制造方式。
[0153]
示例性地，该应用场景类型可以为活体检测场景类型，终端设备可以获取 用于确定活体检测准确率的检测模型，则该检测模型具体为活体识别检测模型， 在该情况下，s1803具体包括：获取所述活体识别场景类型关联的活体识别检 测模型；所述活体识别评分模型用于确定所述特征向量在进行活体识别时的准 确率；将多个所述特征向量导入到所述活体识别检测模型，计算通过所述候选 制造方式得到的多光谱图像传感器进行活体识别时的检测准确率。
[0154]
在本实施例中，终端设备可以将特征向量导入到活体识别检测模型内，可 以确定基于多光谱图像传感器进行活体识别时，对应的识别准确率。将该特征 向量导入到评分模型内，可以确定利用该多光谱图像传感器进行活体检测时的 识别准确性以及检测速率，即上述的检测准确率。
[0155]
在一种可能的实现方式中，上述应用场景类型包括：活体检测场景类型、 人脸检测场景类型、植被生态识别的场景类型等。不同的场景类型对应不同的 检测模型，并将所有检测模型存于模型库内。基于此，终端设备可以根据该多 光谱图像传感器所需使用的应用场景类型，从模型库内选取匹配的检测模型， 并将特征向量导入到该检测模型，计算得到检测准确率。
[0156]
进一步地，作为本技术的另一实施例，在s1803之前，终端设备还可以生 成评分模型，具体包括以下三个步骤：
[0157]
步骤1：获取在不同光源场景下多个光源对应的所述光谱曲线，得到光源 数据库。
[0158]
步骤2：基于所述光源数据库，确定所述应用场景类型关联的若干探测目 标在不同所述光源场景下对应的反射率曲线，得到识别对象数据库。
[0159]
步骤3：基于所述光源数据库以及所述识别对象数据库，生成所述检测模 型。
[0160]
在本实施例中，为了确定多光谱图像传感器与应用场景类型之间的匹配度， 终端设备可以构建对应的光源数据库以及对象数据库，该光源数据库是基于多 个不同光源场景下多个光源对应的光谱曲线，而对象数据库是根据不同探测目 标的反射率曲线确定的，例如，在活体识别场景类型下，上述不同对象类型分 别为活体探测目标以及非活体探测目标；在人脸识别场景类型下，上述不同对 象类型则可以为男性人脸探测目标、女性探测目标等。由于多光谱图像传感器 的特征向量是基于滤光片的透过率曲线以及探测目标的反射率曲线生成的，因 此，基于光源数据库与对象数据库构建的检测模型，则可以判断出该特征向量 在该应用场景类型下，识别的准确性。
[0161]
其中，对象数据库内具体可以根据多个探测目标的样本，以及探测目标的 样本标签构成，上述样本标签用于确定该探测目标所属的对象类型。其中，多 个探测目标可以划分为训练集以及测试集两部分，训练集用于对原生的网络模 型进行训练，测试集用于确定训练后的网络模型的识别准确率，将基于测试集 以及训练集调整后的网络模型作为上述的评分模型。
[0162]
在s1804中，根据所有所述候选制造方式对应的所述检测准确率，选取最 高检测
准确率对应的所述滤光单元组的特征参数组，并将与其对应的所述多光 谱图像传感器的候选制造方式作为所述多光谱图像传感器的初始制造方式。
[0163]
在本实施例中，终端设备可以根据各个候选制造方式对应的检测准确率， 选取出与应用场景类型之间的匹配度最高的一个候选制造方式，作为多光谱图 像传感器对应的初始制造方式。其中，上述初始制造方式具体是确定了该滤光 单元组内所选取的滤光片的种类，以及各个种类的滤光片相互之间的相对位置 关系，换而言之，该初始制造方式具体用于确定滤光单元组内各个滤光片的排 布方式。
[0164]
进一步地，作为本技术的另一实施例，在所述根据所有所述候选制造方式 对应的所述检测准确率，选取最高检测准确率对应的所述滤光单元组的特征参 数组，并将与其对应的所述多光谱图像传感器的候选制造方式作为所述多光谱 图像传感器的初始制造方式之后，还包括：对所述多光谱图像传感器的初始制 造方式对应的所述滤光片的特征参数组进行迭代优化以确定所述多光谱图像传 感器的最优制造方式；上述方式具体包括以下两种方式：
[0165]
方式1：提高特定工作波段范围的透过率在所述多个滤光片的透过率曲线 中的权重并得到更新后的所述多个滤光片的特征参数组；所述特定工作波段范 围是基于多个所述探测目标的所述反射率曲线确定的。
[0166]
方式2：将更新后的所述特征参数组及所述预设参数组导入到所述预设的 特征向量转换模型，得到多个基于不同探测目标获取的更新特征向量；
[0167]
将所述多个更新特征向量导入所述活体检测模型，并计算更新的检测准确 率；
[0168]
根据更新后的所述检测准确率调整所述滤光片对应的透过率曲线的形状与 幅值。
[0169]
在本实施例中，制造方式包括确定滤光单元组内不同滤光片的排布方式以 及制造工艺。基于此，终端设备可以首先确定多光谱图像传感器内各个滤光片 的初始制造后，可以对该初始制造方式进行迭代优化，从而提高该滤光单元组 的识别准确性。其中，进行迭代优化的方式具体是调整在预设工作波段范围的 透过率在各个滤光片的透过率曲线中的权重值。
[0170]
在本实施例中，终端设备可以对各个滤光片的制造工作进行调整，以改变 滤光片的透过率曲线的形状以及幅值，以提高在特定工作波段上对应的权重值， 以增加在识别不同类型的探测目标时的差异性，以使识别准确率达到最优。基 于此，由于制造工艺可以改变滤光片的透过率曲线，而在不同的应用场景下， 关联有不同的特定工作波段范围，终端设备可以根据应用场景类型，确定与之 关联的特定工作波段范围。
[0171]
在本实施例中，终端设备在对滤光片的透过率曲线进行迭代优化后，可以 进行验证操作，即基于更新后的透过率曲线确定对应的特征参数组，并重新计 算更新后的透过率曲线以及预设参数组对应的更新特征向量，从而能够确定对 应的检测准确率，在基于该检测准确率对透过率曲线进行优化，依次类推，重 复上述步骤，直到检测准确率达到最优值，并将达到最优值的透过率曲线对应 的制造方式，作为该滤光单元组的目标制造方式。
[0172]
可选地，在所述步骤2之前，可以确定应用场景类型对应的关键特征波段， 具体可以包括以下步骤：
[0173]
步骤11：获取所述应用场景类型对应的不同类型所述探测目标的反射率曲 线。
[0174]
步骤12：根据所述不同类型所述探测目标的反射率曲线，确定各个波段对 应的离散指标。
[0175]
步骤13：选取所述离散指标大于预设离散阈值的波段作为所述特定工作波 段范围。
[0176]
在本实施例中，应用场景类型可以关联有不同类型的探测目标，终端设备 可以获取不同类型的探测目标的反射率曲线，该反射率曲线可以是各个类型的 探测目标在预设的光源下反射得到的曲线。终端设备可以比对不同类型的探测 目标的反射率曲线在不同波段对应的离散指标，由于离散程度越大，则表示在 该波段下，不同类型的探测目标之间的反射率曲线的差异越大，因此，在进行 探测目标的类型识别时，该波段的更能够体现不同类型的探测目标之间的差异。 基于此，选取离散指标大于预设的离散阈值的波段作为关键特征波段。
[0177]
以上可以看出，本发明实施例提供的一种多光谱图像传感器的制造方法通 过获取基于任一种候选制造方式得到的滤光单元组内多个对应不完全相同的预 设波长的滤光片的特征参数组，并将所有滤光片对应的所述特征参数组以及预 设参数组导入到预设的特征向量转换模型，确定滤光单元组对应的特征向量， 从而得到了该候选制造方式对应的检测准确率，以判断以该候选制造方式制造 的多光谱图像传感器与应用场景是否适配，继而确定出适应性最好的候选制造 方式，并将该候选执行方式作为多光谱图像传感器的初始制造方式，其中，初 始制造方式确定了所需选取的各个滤光片之间的排布方式，之后，可以对上述 初始制造方式进行迭代优化，以进一步提高后续检测的准确性，通过本技术实 施例可以制造一个包含有多个对应不完全相同的预设波长的滤光片的滤光单元 组的多光谱图像传感器，以实现在成像时同时采集不同光谱的目的，以提高成 像精度、效率以及准确性。
[0178]
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后， 各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施 过程构成任何限定。
[0179]
图19示出了本发明一实施例提供的一种多光谱图像传感器的制造装置的 结构框图，该多光谱图像传感器的制造装置包括的各单元用于执行图18对应的 实施例中的各步骤。具体请参阅图18与图18所对应的实施例中的相关描述。 为了便于说明，仅示出了与本实施例相关的部分。
[0180]
参见图19，所述多光谱图像传感器的制造装置包括：
[0181]
特征参数组获取单元191，用于分别获取滤光单元组内多个对应不完全相 同的波长的滤光片的特征参数组；所述多光谱图像传感器包含至少一个所述滤 光单元组；所述多光谱图像传感器以任一候选制造方式制造得到，且不同的所 述特征参数组对应不同的所述候选制造方式；
[0182]
特征向量获取单元192，用于将所有所述滤光片对应的所述特征参数组及 预设参数组导入到预设的特征向量转换模型，得到多个基于不同探测目标获取 的特征向量；
[0183]
检测准确率计算单元193，用于将多个所述特征向量导入到所述多光谱图 像传感器关联应用场景类型对应的检测模型，并计算对应的检测准确率；
[0184]
目标制造方式确定单元194，用于根据所有所述候选制造方式对应的所述 检测准
确率，选取最高检测准确率对应的所述滤光单元组的特征参数组，并将 与其对应的所述多光谱图像传感器的候选制造方式作为所述多光谱图像传感器 的初始制造方式。
[0185]
可选地，所述特征参数组内包含所述多个对应不完全相同的波长的滤光片 分别对应的透过率曲线；所述预设参数组包含多个光源的光谱曲线、多个所述 探测目标的反射率曲线；
[0186]
所述特征向量获取单元192包括：
[0187]
特征值计算单元，用于将所述滤光片对应的所述透过率曲线、所述多个光 源的光谱曲线、所述探测目标的反射率曲线导入到所述特征向量转换模型，计 算得到基于所述探测目标获取的特征值：
[0188][0189]
其中，dn
i
为所述滤光单元组内第i个所述滤光片对应的特征值；s(λ)为光 源的光谱曲线；r
i
(λ)为所述探测目标的所述反射率曲线；t
i
(λ)为第i个所述滤 光片的透过率曲线；η(λ)为所述多光谱图像传感器的量子效率曲线；k为所述多 光谱图像传感器的光电转换系数；λ0与λ1为多个所述光谱对应的波段范围；
[0190]
特征向量生成单元，用于基于所述滤光单元组内所有所述滤光片对应的所 述特征值，得到所述特征向量。
[0191]
可选地，所述多光谱图像传感器的制造装置还包括：
[0192]
迭代优化单元，用于对所述多光谱图像传感器的初始制造方式对应的所述 滤光片的特征参数组进行迭代优化以确定所述多光谱图像传感器的最优制造方 式，包括：提高特定工作波段范围的透过率在所述多个滤光片的透过率曲线中 的权重并得到更新后的所述多个滤光片的特征参数组；所述特定工作波段范围 是基于多个所述探测目标的所述反射率曲线确定的。
[0193]
可选地，迭代优化单元还包括：
[0194]
更新特征向量获取单元，用于将更新后的所述特征参数组及所述预设参数 组导入到所述预设的特征向量转换模型，得到多个基于不同探测目标获取的更 新特征向量；
[0195]
检测准确率更新单元，用于将所述多个更新特征向量导入所述活体检测模 型，并计算更新的检测准确率；
[0196]
透过率曲线优化单元，用于根据更新后的所述检测准确率调整所述滤光片 对应的透过率曲线的形状与幅值。
[0197]
可选地，所述多光谱图像传感器的制造装置还包括：
[0198]
反射率曲线获取单元，用于获取所述应用场景类型对应的不同类型所述探 测目标的反射率曲线；
[0199]
离散指标获取单元，用于根据所述不同类型所述探测目标的反射率曲线， 确定各个波段对应的离散指标；
[0200]
关键特征波段确定单元，用于选取所述离散指标大于预设离散阈值的波段 作为所述特定工作波段范围。
[0201]
可选地，多光谱图像传感器的制造装置还包括：
[0202]
光源数据库获取单元，用于获取在不同光源场景下多个光源对应的所述光 谱曲
线，得到光源数据库；
[0203]
对象数据库获取单元，用于基于所述光源数据库，确定所述应用场景类型 关联的若干探测目标在不同所述光源场景下对应的反射率曲线，得到识别对象 数据库；
[0204]
评分模型生成单元，用于基于所述光源数据库以及所述识别对象数据库， 生成所述检测模型。
[0205]
可选地，所述应用场景类型为活体识别场景类型，则所述检测准确率计算 单元193包括：
[0206]
活体识别评分模型获取单元，用于获取所述活体识别场景类型关联的活体 识别检测模型；所述活体识别评分模型用于确定所述特征向量在进行活体识别 时的准确率；
[0207]
准确率计算单元，用于将多个所述特征向量导入到所述活体识别检测模型， 计算通过所述候选制造方式得到的多光谱图像传感器进行活体识别时的检测准 确率。
[0208]
图20是本发明另一实施例提供的一种终端设备的示意图。如图20所示， 该实施例的终端设备20包括：处理器200、存储器201以及存储在所述存储器 201中并可在所述处理器200上运行的计算机程序202，例如多光谱图像传感器 的制造程序。所述处理器200执行所述计算机程序202时实现上述各个多光谱 图像传感器的制造方法实施例中的步骤，例如图18所示的s1801至s1804。或 者，所述处理器200执行所述计算机程序202时实现上述各装置实施例中各单 元的功能，例如图19所示模块191至194功能。
[0209]
示例性的，所述计算机程序202可以被分割成一个或多个单元，所述一个 或者多个单元被存储在所述存储器201中，并由所述处理器200执行，以完成 本发明。所述一个或多个单元可以是能够完成特定功能的一系列计算机程序指 令段，该指令段用于描述所述计算机程序202在所述终端设备20中的执行过程。
[0210]
所述终端设备可包括，但不仅限于，处理器200、存储器201。本领域技术 人员可以理解，图20仅仅是终端设备20的示例，并不构成对终端设备20的限 定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件， 例如所述终端设备还可以包括输入输出设备、网络接入设备、总线等。
[0211]
所称处理器200可以是中央处理单元(central processing unit，cpu)，还 可以是其他通用处理器、数字信号处理器(digital signal processor，dsp)、专 用集成电路(application specific integrated circuit，asic)、现成可编程门阵列 (field
‑
programmable gate array，fpga)或者其他可编程逻辑器件、分立门或 者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理 器也可以是任何常规的处理器等。
[0212]
所述存储器201可以是所述终端设备20的内部存储单元，例如终端设备 20的硬盘或内存。所述存储器201也可以是所述终端设备20的外部存储设备， 例如所述终端设备20上配备的插接式硬盘，智能存储卡(smart media card， smc)，安全数字(secure digital，sd)卡，闪存卡(flash card)等。进一 步地，所述存储器201还可以既包括所述终端设备20的内部存储单元也包括外 部存储设备。所述存储器201用于存储所述计算机程序以及所述终端设备所需 的其他程序和数据。所述存储器201还可以用于暂时地存储已经输出或者将要 输出的数据。
[0213]
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中， 也可以
是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元 中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的 形式实现。
[0214]
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照 前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其 依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特 征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发 明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。