多光谱传感器、成像装置和图像处理方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113676628A(43)申请公布日2021.11.19(21)申请号202110907039.1H04N9/73(2006.01)(22)申请日2021.08.09(71)申请人OPPO广东移动通信有限公司地址523860广东省东莞市长安镇乌沙海滨路18号(72)发明人王昂(74)专利代理机构北京清亦华知识产权代理事务所(普通合伙)11201代理人黄琼(51)Int.Cl.H04N5/225(2006.01)H04N5/232(2006.01)H04N5/243(2006.01)H04N9/04(2006.01)H04N9/64(2006.01)权利要求书2页说明书10页附图8页(54)发明名称多光谱传感器、成像装置和图像处理方法(57)摘要本申请公开了一种多光谱传感器、成像装置和图像处理方法。该多光谱传感器包括：像素单元阵列和滤光片单元阵列。像素单元阵列包括多个像素单元，每个像素单元包括多个感光像素。滤光片单元阵列包括多个滤光片单元。每个滤光片单元包括至少六种带通滤光片，至少六种带通滤光片的带宽在预设光谱范围内连续。预设光谱至少包括可见光谱，滤光片单元的每个带通滤光片覆盖对应像素单元的一个感光像素。多光谱传感器用于采集第一光线信号以获取光谱信息。本申请结合目前成熟的染料工艺，将色彩光谱通道扩展到6个及以上，提供多维度光谱信息，以更加准确、精度更高的色温云图，代替目前的色温传感器的整体光源判断，实现更精确的白平衡判断。CN113676628ACN113676628A权利要求书1/2页1.一种多光谱传感器，其特征在于，包括：像素单元阵列，所述像素单元阵列包括多个像素单元，每个所述像素单元包括多个感光像素；和滤光片单元阵列，所述滤光片单元阵列包括多个滤光片单元，每个所述滤光片单元包括至少六种带通滤光片，所述至少六种带通滤光片的带宽在预设光谱范围内连续，所述预设光谱至少包括可见光谱，所述滤光片单元的每个所述带通滤光片覆盖对应所述像素单元的一个所述感光像素；所述多光谱传感器用于采集第一光线信号以获取光谱信息。2.根据权利要求1所述的多光谱传感器，其特征在于，所述至少六种带通滤光片包括第一颜色空间对应的滤光片、第二颜色空间对应的滤光片、红外滤光片和全透滤光片。3.根据权利要求2所述的多光谱传感器，其特征在于，每个所述滤光片单元包括第一滤光片子单元和第二滤光片子单元，所述第一滤光片子单元包括所述第一颜色空间对应的滤光片和所述红外滤光片，所述第二滤光片子单元包括所述第二颜色空间对应的滤光片和所述全透滤光片。4.根据权利要求2或3所述的多光谱传感器，其特征在于，所述第一颜色空间包括红色、绿色和蓝色，所述第二颜色空间包括青色、品红色和黄色；或所述第一颜色空间包括青色、品红色和黄色，所述第二颜色空间包括红色、绿色和蓝色。5.根据权利要求4所述的多光谱传感器，其特征在于，所述多光谱传感器还用于对所述第一光线信号进行处理以得到彩色图像。6.一种成像装置，包括；权利要求1‑5任一项所述的多光谱传感器；和成像传感器，所述成像传感器用于采集第二光线信号以生成待处理图像以及获取所述成像传感器的对焦参数、曝光参数和第一白平衡参数；所述多光谱传感器用于根据所述对焦参数和所述曝光参数采集所述第一光线信号以获取所述光谱信息，以及根据所述光谱信息和所述第一白平衡参数获取第二白平衡参数；所述成像传感器用于根据所述第二白平衡参数对待处理图像进行白平衡处理。7.一种图像处理方法，用于权利要求6所述的成像装置，其特征在于，图像处理方法包括：控制所述成像传感器采集第二光线信号以生成待处理图像以及获取所述对焦参数、所述曝光参数和所述第一白平衡参数；控制所述多光谱传感器根据所述对焦参数、所述曝光参数采集所述第一光线信号以获取所述光谱信息；根据所述光谱信息和所述第一白平衡参数获取第二白平衡参数；根据所述第二白平衡参数对所述待处理图像进行白平衡处理。8.根据权利要求7所述的图像处理方法，其特征在于，所述根据所述光谱信息和所述第一白平衡参数获取第二白平衡参数，包括：根据所述第一光线信号生成多光谱图像；对所述多光谱图像进行预处理得到预处理图像；2CN113676628A权利要求书2/2页根据所述待处理图像对所述预处理图像进行对齐配准；对所述对齐配准后的预处理图像进行色温标定得到色温标定参数；根据所述预处理图像、所述色温标定参数和所述第一白平衡参数进行色温拟合以得到所述第二白平衡参数。9.根据权利要求8所述的图像处理方法，其特征在于，所述根据所述预处理图像、所述色温标定参数和所述第一白平衡参数进行色温拟合以得到所述第二白平衡参数，包括：根据所述色温标定参数和所述第一白平衡参数确定色温分布信息；对所述预处理图像进