CN114449137A - 滤光片结构、拍摄方法、装置、终端及存储介质 - Google Patents

滤光片结构、拍摄方法、装置、终端及存储介质 Download PDF

Info

Publication number
CN114449137A
CN114449137A CN202011202136.2A CN202011202136A CN114449137A CN 114449137 A CN114449137 A CN 114449137A CN 202011202136 A CN202011202136 A CN 202011202136A CN 114449137 A CN114449137 A CN 114449137A
Authority
CN
China
Prior art keywords
image
sub
determining
images
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011202136.2A
Other languages
English (en)
Inventor
杨宗保
郑严
王辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202011202136.2A priority Critical patent/CN114449137A/zh
Priority to US17/329,815 priority patent/US20220137275A1/en
Priority to EP21176604.3A priority patent/EP3993399A1/en
Publication of CN114449137A publication Critical patent/CN114449137A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/20—Filters
    • G02B5/28—Interference filters
    • G02B5/285—Interference filters comprising deposited thin solid films
    • G02B5/286—Interference filters comprising deposited thin solid films having four or fewer layers, e.g. for achieving a colour effect
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/20—Filters
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/20—Filters
    • G02B5/201—Filters in the form of arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00—Details of colour television systems
    • H04N2209/04—Picture signal generators
    • H04N2209/041—Picture signal generators using solid-state devices
    • H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/047—Picture signal generators using solid-state devices having a single pick-up sensor using multispectral pick-up elements

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

本公开是关于一种滤光片结构、拍摄方法、装置、终端及存储介质。滤光片结构包括多个滤光单元组，每个滤光单元组包括多个滤光片；每个滤光单元组中，多个滤光片用于透过多个设定波段的光，多个滤光片与多个设定波段一一对应；多个设定波段中，至少两个设定波段对应同一设定通道。该滤光片结构中，设置了更加波长范围更窄的多个设定波段，可满足不同的需求，提升了使用体验。

Description

滤光片结构、拍摄方法、装置、终端及存储介质
技术领域
本公开涉及图像处理技术领域，尤其涉及一种滤光片结构、拍摄方法、装置、终端及存储介质。
背景技术
目前的手机等终端中的图像传感器中，在同一颜色通道所在的波段内，只能采集一个图像，局限性较大，限制了拍摄效果以及拍摄结果的多样化，一般仅仅能够满足日常的拍摄需求，并且成像效果很难再有提高。。
发明内容
为克服相关技术中存在的问题，本公开提供一种滤光片结构、拍摄方法、装置、终端及存储介质。
根据本公开实施例的第一方面，提供一种图像传感器的滤光片结构，所述滤光片结构包括多个滤光单元组，每个所述滤光单元组包括多个滤光片；
每个所述滤光单元组中，所述多个滤光片用于透过多个设定波段的光，多个所述滤光片与多个所述设定波段一一对应；
所述多个设定波段中，至少两个所述设定波段对应同一设定通道。
可选地，每个所述滤光单元组包括多个滤光片单元，所述多个滤光片单元用于透过多个所述设定通道的光，每个所述滤光片单元包括多个所述滤光片；
每个所述滤光片单元组中，至少一个所述设定通道对应多个所述滤光片。
可选地，每个所述滤光单元组中，至少一个所述滤光片单元中的所有滤光片用于透过同一所述设定通道的光；和/或，
每个所述滤光片单元中，多个所述滤光片对应于至少两个所述设定通道。
可选地，每个所述滤光片单元组中，所述对应多个所述滤光片的设定通道对应的多个所述设定波段呈线性分布。
可选地，每个所述滤光单元组中，多个所述设定波段呈线性分布。
可选地，所述多个设定通道包括以下中的至少一个：近红外光通道、红色光通道、绿色光通道和蓝色光通道。
根据本公开实施例的第二方面，提供一种图像传感器，所述图像传感器包括如第一方面所述的图像传感器的滤光片结构。
根据本公开实施例的第三方面，提供一种终端，所述终端包括如第二方面所述的图像传感器。
根据本公开实施例的第四方面，提供一种拍摄方法，应用于终端，所述方法包括：
获取多个子图像；其中，每个所述子图像对应一个设定波段，多个所述设定波段中，至少两个所述设定波段对应同一设定通道；
根据所述多个子图像，确定拍摄结果。
可选地，所述根据所述多个子图像，确定拍摄结果，包括：
基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，所述目标子图像指用于确定所述目标物体的轮廓信息的子图像；
根据所述至少一个目标子图像确定目标物体的轮廓信息；其中，所述轮廓信息指用于确定所述目标物体的轮廓的信息；
根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像；其中，所述突出显示图像作为所述拍摄结果。
可选地，所述基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像，包括：
基于接收到的第一控制指令，确定目标物体对应的目标像素区域；其中，所述目标像素区域指所述子图像中用于显示所述目标物体的像素所在的区域；
根据所述多个目标像素区域以及所述多个子图像，确定至少一个目标子图像；其中，所述目标子图像指所述目标像素区域的超过设定比例的像素的亮度信息小于或等于亮度阈值的子图像。
可选地，所述根据所述至少一个目标子图像确定物体的轮廓信息，包括：
根据所述至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。
可选地，所述根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像，包括：
将所述多个子图像进行融合处理，确定基础图像；
根据所述轮廓信息与所述基础图像，确定目标物体的突出显示图像。
可选地，所述根据所述多个子图像，确定拍摄结果，包括：
确定增强用波段；
获取与增强用波段对应的至少一个增强用子图像；
将所述多个子图像进行融合处理，确定基础图像；
将所述至少一个增强用子图像与所述基础图像进行融合处理，确定增强后图像；其中，所述增强后图像作为所述拍摄结果，所述增强后图像指对所述基础图像提高了所述增强用波段的图像信息的图像。
可选地，所述根据所述多个子图像，确定拍摄结果，包括：
根据所述多个子图像确定待识别物体的光谱特性曲线；
根据所述光谱特性曲线以及第一预存映射表，确定所述待识别物体的类型；其中，所述待识别物体的类型作为所述拍摄结果，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
可选地，所述根据所述多个子图像，确定拍摄结果，包括：
根据所述多个子图像确定待判定物体的光谱特性曲线；
根据所述光谱特性曲线以及第二预存映射表，确定所述待判定物体的成分；其中，所述待判定物体的成分作为所述拍摄结果，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
根据本公开实施例的第五方面，提供一种拍摄装置，应用于终端，所述装置包括：
获取模块，用于获取多个子图像；其中，每个所述子图像对应一个设定波段，多个所述设定波段中，至少两个所述设定波段对应同一设定通道；
确定模块，用于根据所述多个子图像，确定拍摄结果。
可选地，所述确定模块，还用于：
基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，所述目标子图像指用于确定所述目标物体的轮廓信息的子图像；
根据所述至少一个目标子图像确定目标物体的轮廓信息；其中，所述轮廓信息指用于确定所述目标物体的轮廓的信息；
根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像；其中，所述突出显示图像作为所述拍摄结果。
可选地，所述确定模块，还用于：
基于接收到的第一控制指令，确定目标物体对应的目标像素区域；其中，所述目标像素区域指所述子图像中用于显示所述目标物体的像素所在的区域；
根据所述多个目标像素区域以及所述多个子图像，确定至少一个目标子图像；其中，所述目标子图像指所述目标像素区域的超过设定比例的像素的亮度信息小于或等于亮度阈值的子图像。
可选地，所述确定模块，还用于：
根据所述至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。
可选地，所述确定模块，还用于：将所述多个子图像进行融合处理，确定基础图像；
根据所述轮廓信息与所述基础图像，确定目标物体的突出显示图像。
可选地，所述确定模块，还用于：
确定增强用波段；
获取与增强用波段对应的至少一个增强用子图像；
将所述多个子图像进行融合处理，确定基础图像；
将所述至少一个增强用子图像与所述基础图像进行融合处理，确定增强后图像；其中，所述增强后图像作为所述拍摄结果，所述增强后图像指对所述基础图像提高了所述增强用波段的图像信息的图像。
可选地，所述确定模块，还用于：
根据所述多个子图像确定待识别物体的光谱特性曲线；
根据所述光谱特性曲线以及第一预存映射表，确定所述待识别物体的类型；其中，所述待识别物体的类型作为所述拍摄结果，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
可选地，所述确定模块，还用于：
根据所述多个子图像确定待判定物体的光谱特性曲线；
根据所述光谱特性曲线以及第二预存映射表，确定所述待判定物体的成分；其中，所述待判定物体的成分作为所述拍摄结果，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
根据本公开实施例的第六方面，提供了一种一种终端，其特征在于，所述终端包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如第四方面所述的拍摄方法。
根据本公开实施例的第七方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由终端的处理器执行时，使得终端能够执行如第四方面所述的拍摄方法。
本公开的实施例提供的技术方案可以包括以下有益效果：该滤光片结构中，设置了更加精细的多个设定波段，通过每个滤光片的光的波段更窄，因此可获取更细分的子图像，然后根据需求将获取到的多个子图像进行处理，即可满足不同的需求，提升了使用体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是根据相关技术示出的滤光片结构的原理示意图。
图2是根据一示例性实施例示出的滤光结构的原理示意图。
图3是根据一示例性实施例示出的滤光片结构的透过率的示意图。
图4是根据一示例性实施例示出的拍摄方法的流程图。
图5是根据一示例性实施例示出的拍摄方法的流程图。
图6是根据一示例性实施例示出的拍摄方法的流程图。
图7是根据一示例性实施例示出的拍摄方法的流程图。
图8是根据一示例性实施例示出的拍摄方法的流程图。
图9是根据一示例性实施例示出的拍摄方法的流程图。
图10是根据一示例性实施例示出的拍摄方法的流程图。
图11是根据一示例性实施例示出的拍摄方法的流程图。
图12是根据一示例性实施例示出的拍摄装置的框图。
图13是根据一示例性实施例示出的终端的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
相关技术中，参考图1所示，图像传感器的拜耳阵列像素结构，依靠彩色滤光片的排布，将自然界的光拆解成红、绿、蓝三个通道用于感应相应的波段的光，该滤光片结构中，每个虑光单元组包括四个滤光片，依次为a、b、c和d，其中，a、b和d为彩色滤光片，c为透明的滤光片，a对应红色光通道，b对应绿色光通道，d对应蓝色光通道，c用于透过所有的可见光。然后通过去马赛克算法和白平衡等算法处理得到完整的彩色图像。
由于该图像传感器中，每个虑光单元组中滤光片仅仅粗略的分成与红、绿、蓝三个通道的光对应的滤光片以及与可见光对应的滤光片，而没有进行更细的划分，无法获取更细分的波段对应的图像，无法获得更详细的图像信息，导致其功能比较单一，仅仅能用于常规的拍摄，并且成像效果也较差。
本公开提供了一种图像传感器的滤光片结构，该滤光片结构中，设置了更加精细的多个设定波段，通过每个滤光片的光的波段更窄，因此可获取更细分的子图像，然后根据需求将获取到的多个子图像进行处理，即可满足不同的需求，提升了使用体验。例如，可以通过多个子图像生成拍摄物体的光谱特性曲线，用于物体识别；例如可以通过不同物体在不同波段形成的子图像的亮度不同，对拍摄物体在拍摄过程中直接进行局部突出显示的处理等等。
在一个示例性实施例中，提供了一种滤光片结构，参考图2和3所示，该滤光片结构包括多个滤光单元组，每个滤光单元组包括多个滤光片。每个滤光单元组中，多个滤光片用于透过多个设定波段的光，多个滤光片与多个设定波段一一对应，也就是说，每个滤光片对应一个设定波段，且每个滤光片对应的设定波段均不相同，滤光片的数量与设定波段种类相同。其中，多个设定波段中，至少两个设定波段对应同一设定通道，也就是说，多个滤光片中，至少两个滤光片对应同一设定通道。
可以理解地，该示例性实施例中同一设定通道可以是近红外光通道，此时，设定波段可以包括近红外光所在的波段，并且在近红外光所在的波段内进行了至少两个设定波段的设置；或者，该示例性实施例中同一设定通道也可以是可见光范围内的颜色通道，此时，设定波段可以包括可见光中某颜色光所在的波段，并且在某颜色光所在波段内进行了至少两个设定波段的设置。由此，便可获取更加丰富的图像信息，实现更多的拍摄功能，根据需求得到更多样化的拍摄结果，以更好地满足用户的需求，提升用户使用体验。
该滤光片结构中，在同一个设定通道内，可以获取两个子图像。例如，传统方案中，仅仅能够获得蓝色光通道内的一个子图像，此时，便仅仅能够获得拍摄对象反射的蓝色光的大致信息。如果至少两个设定波段对应的同一设定通道为蓝色光通道时，便可在蓝色光通道对应的波段内获取两个子图像，也就是可以获取蓝色光对应的波段范围内的两个细分波段的图像信息，进而实现对该蓝色光通道内的子图像的细分，以更好地确定更丰富的图像信息，便于进行图像的分析，实现更多的功能。如果拍摄结果为图像类型的结果，那么便可获取更多种类的图像，以及更高效果的图像。
可以理解的，某一设定通道对应的设定波段越多，便可获得更多的细分子图像，因此也能获得更详细的图像信息，进而可以实现更多的图像处理功能，获得更高质量的拍摄结果。例如拍摄结果为图像时，便可获取更好的图像效果的图像。相应的，对应有多个设定波段的设定通道越多，便可在更多的设定通道内获取更详细的图像信息，进而可以实现更多的图像处理功能，获得更高质量的拍摄结果。也就是说，单个设定波段对应的波长范围小，便可获得更详细的图像信息，进而可以实现更多的图像处理功能，获得更高质量的拍摄结果。
在一个示例性实施例中，提供了一种滤光片结构，参考图2和3所示，该滤光片结构中，每个滤光单元组包括多个滤光片单元，多个滤光片单元用于透过多个设定通道的光，每个滤光片单元包括多个滤光片。每个滤光片单元组中，至少一个设定通道对应多个滤光片。
这里的多个设定通道包括以下中的至少一个：近红外光通道、红色光通道、绿色光通道和蓝色光通道。即，多个设定通道可以分别为近红外光通道、红色光通道、绿色光通道和蓝色光通道，也可以只有上述四个通道中的其中一个，剩余设定通道可设置为用于透过其他可见光的颜色通道，例如用于透过紫色光的紫色光通道，以满足不同的需求。当然，如果有需要，也可以将设定通道设置为用于透过远红外光的远红外光通道，进行更加复杂的光谱分析。
该滤光片结构中，设置了多个设定通道，并且至少一个设定通道对应多个滤光片，其中，“多个”指大于一个。设置有该滤光片结构的图像传感器工作时，可以获取多个设定通道的子图像，并且，在至少一个设定通道内获得多个子图像，相比于现有技术，可以获得更丰富的图像信息，实现更多的拍摄功能。
其中，滤光片单元组的结构包括以下两种方式。
方式一：每个滤光单元组中，至少一个滤光片单元中的所有滤光片用于透过同一所述设定通道的光。
也就是说，在同一个虑光单元组中，可以是，有一个滤光片单元中的所有滤光片用于透过同一设定通道的光；也可以是，有多个滤光片单元中的所有滤光片用于透过同一设定通道的光；甚至是，每个滤光片单元中的所有滤光片均用于透过同一设定通道的光，即，多个滤光片单元与多个设定通道一一对应。
在一个实施方式中，参考图2所示，每个滤光片单元中的所有滤光片均用于透过同一设定通道的光。
滤光单元组中设置了每个滤光单元组所对应的设定通道包括用于透过近红外光的近红外光通道、用于透过蓝色光的蓝色光通道(B通道)、用于透过红色光的红色光通道(R通道)和用于通过绿色光的绿色光通道(G通道)，每个虑光单元组包括四个滤光片单元，依次用于透过上述近红外光通道、蓝色光通道、红色光通道和绿色光通道的光，也就是，依次用于透过近红外光、蓝色光、红色光和绿色光，每个滤光片单元包括四个滤光片。用于透过近红外光的滤光片单元中，四个滤光片全部用于透过近红外光，用于透过蓝色光的滤光片单元中，四个滤光片全部用于透过蓝色光，依次类推。
该实施方式中，相当于每个设定通道均对应四个设定波段，也就是，在每个设定通道内均可获取四个子图像。相对于现有技术中，在每个设定通道只能获取一个子图像。该实施方式显然可以获取更加丰富且精确的图像信息，对提升拍摄效果有很大的帮助。另外，由于获取了更丰富的图像信息，便可实现更多的功能，得到更多的拍摄结果。例如，该实施方式中，由于设置了16个设定波段，因此便可获取16个设定波段对应的16个子图像，根据该16个子图像确定光谱特性曲线，然后根据光谱特性曲线便可确定与之对应的物体的类型或成分，即，使用该滤光片结构可以获得物体的类型或成分的拍摄结果。
方式二：每个滤光片单元中，多个滤光片对应于至少两个设定通道。
也就是说，每个滤光片单中，可以是，部分滤光片对应同一设定通道，另一部分滤光片对应另一设定通道；也可以是，每个滤光片均对应不同的设定通道。当每个滤光片均对应不同的设定通道时，每个虑光单元组对应的设定通道的数量与每个滤光片单元中多个滤光片对应的设定通道的数量，可以相同，也可以不同。
在一个实施方式中(图中未示出该实施方式)，每个滤光片单中，每个滤光片均对应不同的设定通道，并且，每个虑光单元组对应的设定通道的数量与每个滤光片单元中多个滤光片对应的设定通道的数量相同。
每个虑光单元组对应四个设定通道，依次为近红外光通道、蓝色光通道、红色光通道和绿色光通道。每个虑光单元组包括四个滤光片单元，四个滤光片单元也对应上述四个设定通道。每个滤光片单元包括四个滤光片，在每个滤光片单元中，每个滤光片也对应上述四个设定通道。
具体地，每个虑光单元组包括16个滤光片，分别记作a1、a2、a3、a4、b1、b2、b3、b4、c1、c2、c3、c4、d1、d2、d3和d4，其中，a1、a2、a3和a4对应的红色光通道，b1、b2、b3和b4对应绿色光通道，、c1、c2、c3、c4对应近红外光通道，d1、d2、d3和d4对应蓝色光通道。四个滤光片单元中，第一个滤光片单元包括的滤光片分别为a1、b1、c1和d1，第一二滤光片单元包括的滤光片分别为a2、b2、c2和d2，第三个滤光片单元包括的滤光片分别为a3、b3、c3和d3，第四个滤光片单元包括的滤光片分别为a4、b4、c4和d4。
在一个示例性实施例中，提供了一种滤光片结构，该滤光片结构包括多个滤光单元组，每个滤光单元组包括以下两种结构中的一种：
结构一(图中未示出该结构)：每个滤光单元组包括多个滤光片，每个滤光单元组中，多个滤光片用于透过呈线性分布的多个设定波段的光，滤光片与设定波段对应。
该结构中，每个滤光单元组中，每个滤光片仅仅用于透过一种设定波段的光，并且，多个滤光片对应的多个设定波段呈线性分布，从而可以生成根据多个呈线性分布的设定波段对应的子图像，然后对上述多个子图像进行处理，便可满足不同的用户需求。
结构二：每个滤光单元组包括多个滤光片单元，多个滤光片单元用于透过多个设定通道的光，每个滤光片单元包括多个滤光片，多个滤光片用于透过多个设定波段的光，滤光片与设定波段对应，并且，每个滤光单元组中，同一设定通道对应的多个设定波段呈线性分布。
该结构中，至少包括两种方式。
方式一：参考图2和3所示，每个滤光单元组中，每个滤光片单元用于透过同一设定通道的光，且滤光片单元与设定通道对应。也就是说，每个滤光单元组包括的滤光片单元的数量与设定通道的数量相同，每个滤光片单元对应一个设定通道。
例如，参考图2所示，每个滤光单元组所对应的设定通道包括近红外光通道、红色光通道、绿色光通道和蓝色光通道。那么，每个滤光单元组则包括分别用于与所述四个设定通道对应的四个滤光片单元，每个滤光片单元中，多个滤光片所对应的设定波段均属于相应通道所在的波段。并且，每个滤光片单元中，多个滤光片所对应的多个设定波段呈线性分布，以保证通过该滤光片结构可以确定更加精细的多个子图像。
方式二(图中未示出该方式)：每个滤光单元组包括多个滤光片单元，多个滤光片单元用于透过多个设定通道的光，每个滤光片单元包括多个滤光片，多个滤光片用于透过多个设定波段的光，滤光片与设定波段对应，并且，每个滤光单元组中，同一设定通道对应的多个设定波段呈线性分布。也就是说，每个滤光单元组对应的设定通道与每个滤光片单元对应的设定通道的种类相同，每个滤光片单元包括的滤光片的数量与每个滤光单元组所对应的设定通道的种类的数量相同。
例如，每个滤光单元组所对应的设定通道包括近红外光通道、红色光通道、绿色光通道和蓝色光通道。那么，每个滤光片单元也对应近红外光通道、红色光通道、绿色光通道和蓝色光通道。其中，每个滤光片单元包括与上述四个设定通道分别对应的四个滤光片。并且，在每个滤光单元组中，用于通过相同设定通道的光的多个滤光片对应的多个设定波段呈线性分布，以保证通过该滤光片结构可以确定更加精细的多个子图像。
需要说明的是，上述的多个设定波段呈线性分布指在某个波段内进行线性分布，其中线性分布指每个设定波段的波长范围相同，例如每10nm/20nm/30nm设定一个设定波段。
在一个实施方式中，在350nm-510nm的波长范围内，每10nm设置一个设定波段，共设置16个波段，分别为350nm-360nm、360nm-370nm、370nm-380nm、、、、、、480nm-490nm、490nm-500nm、500nm-510nm，其中，每个设定波段内可均包括该设定波段内波长范围的端值，也可只包括较小的端值，或者只包括较大的端值，或者不包括端值。
该滤光片结构中，设置了更加精细的设定波段，通过每个滤光片的光的波段更窄，因此可获取更细分的子图像，然后根据需求将获取到的多个子图像进行处理，即可满足不同的需求，提升了使用体验。例如，可以通过多个子图像生成拍摄物体的光谱特性曲线，用于物体识别；例如可以通过不同物体在不同波段形成的子图像的亮度不同，对拍摄物体在拍摄过程中直接进行抠图处理等等。
在一个示例性实施例中，提供了一种滤光片结构，参考图2和3所示，该滤光片结构中，
每个所述滤光片单元中的多个滤光片呈N*N阵列分布，其中N为大于或等于2的整数；和/或，
每个所述滤光单元组的多个滤光片单元呈M*M陈列分布，其中M为大于或等于2的整数。
该滤光片结构中，每个滤光片单元至少包括4个滤光片，每个滤光单元组至少包括16个。利用该滤光片结构制作的图像传感器中，在进行图像拍摄时，每个像素至少对应16个设定波段的子图像，相对于传统的R通道、G通道和B通道的三个子图像，本申请的方案显然可以获取更多的子图像，对拍摄物体进行了更多设定波段的成像，以便于更好地对拍摄物体进行分析，同时可根据上述16个设定波段的子图像进行更加精准和更加多样化的图像处理，满足不用的用户需求。
需要说明的是，同一滤光单元组中，多个设定波段所覆盖的光的波长的范围一般是300nm-1000nm，也可以设计8000-14000nm范围，对应图像传感器的材料采用跟对应波长相匹配的材料，从硅锗到氧化钒、砷化镓等。
在一个实施方式中，参考图2所示，滤光单元组对应有四个设定通道，分别为近红外光通道、红色光通道、绿色光通道和蓝色光通道。每个滤光单元组包括呈2*2陈列分布的四个滤光片单元，每个滤光片单元分别用于透过上述四个设定通道中的一个设定通道的光。每个滤光片单元包括呈2-*阵列分布的四个滤光片，四个滤光片均用于透过同一设定通道的光。
也就是说，每个滤光单元组包括16个滤光片，每个滤光片的尺寸相同，以确保每个设定波段的透光面积相同。参考图所示，分别记作a1、a2、a3、a4、b1、b2、b3、b4、c1、c2、c3、c4、d1、d2、d3和d4，其中，a1、a2、a3和a4对应的红色光通道，b1、b2、b3和b4对应绿色光通道，、c1、c2、c3、c4对应近红外光通道，d1、d2、d3和d4对应蓝色光通道。a1对应的设定波段为600nm±10nm，a2对应的设定波段为630nm±10nm，a3对应的设定波段为660nm±10nm，a4对应的设定波段为690nm±10nm，c1对应的设定波段为800nm±10nm，c2对应的设定波段为850nm±10nm，c3对应的设定波段为900nm±10nm，c4对应的设定波段为950nm±10nm，b1对应的设定波段为500nm±10nm，b2对应的设定波段为530nm±10nm，b3对应的设定波段为560nm±10nm，b4对应的设定波段为590nm±10nm，d1对应的设定波段为400nm±10nm，d2对应的设定波段为430nm±10nm，d3对应的设定波段为460nm±10nm，d4对应的设定波段为490nm±10nm。该滤光片结构的光线透过率参考图4所示。
该实施方式中，每个滤光单元组中，将多个同一设定通道的滤光片设置在一起，形成一个2*2的阵列，工作时，可将多个像素的同一设定通道的子图像合成一个图像输出，提升与设定通道对应的光的进光量。也可以根据马赛克算法，将多个像素的同一设定通道的子图像通过插值得到其他设定通道的图像，然后进行融合处理，实现高分辨率输出，提升细节表现。
该实施方式中，将常规滤光片透过光的波长范围收窄，即，该实施方式中设定波段比技术中的滤光片对应的波段的波长范围更窄。具体地，将原近红外光通道、红色光通道、绿色光通道和蓝色光通道共四个通道对应的波段进行了线性分布的细分，以便于进行更加精细化和多样化的拍摄处理。
需要说明的是，本申请提供的滤光片结构，不仅仅可以用于相机领域，也可应用于其他技术领域，比如石油化工、医药卫生、环境保护、冶金、地质勘测等等领域，只要需要进行图像信息的采集，均可应用本申请提出的滤光片结构。
另外，该滤光片结构主要是对波段进行了更加窄范围的细分，使得每个滤光片对应的设定波段的波长范围更窄，设置多个设定波段，便可获得更加详细丰富且精确的图像信息，以此来实现更多的功能，得到更多的拍摄结果。也就是说，该滤光片结构中的多个滤光片的布置形式还可以是除上述介绍的形式之外其他形式，只要能够保证每个滤光片对应一个设定波段，并且，多个设定波段中，至少两个设定波段对应同一设定通道即可。
本公开还提出了一种图像传感器，包括上述的滤光片结构，使得该图像传感器具有与上述滤光片结构相对应的效果。
本公开还提出了一种终端，该终端例如为手机、摄像机、照相机、笔记本电脑、平板电脑等具有拍摄功能的设备。该终端包括上述的图像传感器，使得该终端具有与上述图像传感器相对应的效果，也就是说，该终端具有与上述滤光片结构相对应的效果。
在一个实施方式中，终端为手机，手机包括的图像传感器中，参考图2和3所示，滤光单元组对应有四个设定通道，分别为近红外光通道、红色光通道、绿色光通道和蓝色光通道。每个滤光单元组包括呈2*2陈列分布的四个滤光片单元，每个滤光片单元分别用于透过上述四个设定通道中的一个设定通道的光。每个滤光片单元包括呈2-*阵列分布的四个滤光片，四个滤光片均用于透过同一设定通道的光。
也就是说，每个滤光单元组包括16个滤光片，每个滤光片的尺寸相同，以确保每个设定波段的透光面积相同。参考图所示，分别记作a1、a2、a3、a4、b1、b2、b3、b4、c1、c2、c3、c4、d1、d2、d3和d4，其中，a1、a2、a3和a4对应的红色光通道，b1、b2、b3和b4对应绿色光通道，、c1、c2、c3、c4对应近红外光通道，d1、d2、d3和d4对应蓝色光通道。a1对应的设定波段为600nm±10nm，a2对应的设定波段为630nm±10nm，a3对应的设定波段为660nm±10nm，a4对应的设定波段为690nm±10nm，c1对应的设定波段为800nm±10nm，c2对应的设定波段为850nm±10nm，c3对应的设定波段为900nm±10nm，c4对应的设定波段为950nm±10nm，b1对应的设定波段为500nm±10nm，b2对应的设定波段为530nm±10nm，b3对应的设定波段为560nm±10nm，b4对应的设定波段为590nm±10nm，d1对应的设定波段为400nm±10nm，d2对应的设定波段为430nm±10nm，d3对应的设定波段为460nm±10nm，d4:对应的设定波段为490nm±10nm。
使用该手机在进行拍摄时，每个像素上接受对应波段的物体反射光，并转换成电讯号，确定每个像素对应的每个设定波段的图像信息，根据同一设定波段对应的所有像素的图像信息确定该设定波段对应的子图像，通过各个设定波段的子图像灵活运用，确定用户所需要的图像或其他拍摄结果。
具体地，该手机可在如下场景中使用。
场景一：完成日常的拍照功能。
该场景下，直接将获取的多个子图像进行融合处理，即可获取正常图像。比如可用于拍摄人物、风景、建筑、艺术品等等。该场景下的具体拍摄方法与传统的拍摄方法的原理相同，再次不作赘述。
场景二：实现多光谱图像采集功能。该场景下可用于进行物体识别和成分判定。
确定不同设定波段下的物体的子图像。比如拍摄苹果，确定苹果表面反射的不同设定波段的子图像，然后对各个设定波段的子图像的指定位置进行光谱分析，确定该位置的光谱特性曲线，通过与预存映射表的比对，确定该位置对应的物体类型，或者确定该位置对应的成分。其中，预存映射表包括光谱特性曲线与物体的类型的映射关系，或者包括光谱特性曲线与物体成分的映射关系。
具体地，物体识别是指根据图像传感器检测到的物体表面反射出不同波段的光的强度不同，其强度与物体本身固有颜色的特性相匹配，从而确定物体的类型，比如区分苹果、梨、橘子等。
成分判定是指根据物体不同波段下反射出光的强弱，判定物体成分，比如苹果糖度，酸度，或者判定物体内部缺陷，比如苹果是否变质。
场景三：实现图像增强功能。
由于滤光单元组中设定了更加细分的设定波段，因此可通过不同波段的子图像，实现不同的图像增强效果。
例如，在夜间，可见光很少，此时利用850nm或者940nm等波段及附近波段(近红外光通道对应的波段)的子图像作为增强用子图像，与可见光所处波段的子图像进行融合处理，实现夜景增强效果。
再例如，在白天，利用红色光所在的波段(红色光通道对应的波段)的子图像作为增强用子图像，与可见光所处波段的子图像进行融合处理，实现单一通道的增强效果，以实现特定的滤镜效果。
场景四：实现对特定目标的突出显示效果。
在确定了各个设定波段的子图像后，通过各个子图像的比对，可以确定想要突出显示的目标物体的轮廓图像，然后将该轮廓图像与多个子图像进行融合处理，即可突出显示该目标物体，抠出目标物体，虚化背景。
由于物体本身材质不同，对不同波长的光的吸收和反射情况不同，获取到的多个子图像在不同材质物体的交接处会有明显的差异(例如亮度差异)，根据上述差异即可确定目标物体的轮廓。
例如，拍摄花盆里的绿植。绿植吸收绿光，反射其他颜色的光，花盆则本身材质不同于绿植，所以手机获取的多个子图像中，在绿光所在的波段，绿植的图像信息较弱，花盆的图像信息较强，以此便可根据绿植对应的像素点在绿色光通道内的亮度值较低，确定绿植的轮廓图像，实现对绿植的突出显示，或者直接将绿植抠出，实现精准的抠图效果。
具体地，例如获取的子图像为三个，分别为第一子图像、第二子图像和第三子图像，如第一子图像与第二子图像进行比对，确定目标物体的轮廓信息，再将结果与第一子图像、第二子图像和第三子图像的融合图像做匹配，抠出目标物体的主体，实现更精准更快捷的抠图效果。
当然，实际使用时会获取不止三个子图像，更多的子图像便可确定更准确的轮廓信息，进而实现更精准的抠图。
场景五：灵活提取某个波段下的图像。
根据用户需求，在获取的多个子图像中，直接提出相应设定波段的子图像即可。
场景六：提取不同分辨率的图像。
根据用户对分辨率需求，对获取的多个子图像进行合适的组合，以确定所需分辨率的图像。例如，可在每个设定通道所对应的多个设定波段中，提取部分设定波段所对应的子图像，然后将其融合，以获取较低分辨率的图像。再例如，直接将所有子图像进行融合，以获取较高分辨率的图像。
该终端中，在保证普通拍摄功能的同时，可以带来更丰富的功能，且成本底，可行性高，提升用户体验。
本公开还提出了一种拍摄方法，应用于上述终端，具体地，参考图4所示，该方法包括：
S11、获取多个子图像；其中，每个子图像对应一个设定波段，多个设定波段中，至少两个设定波段对应同一设定通道；
S12、根据多个子图像，确定拍摄结果。
在步骤S11中，首先确定每个像素在每个设定波段的图像信息，然后根据同一设定波段的所有像素的图像信息确定与该设定波段对应的子图像，以获取每个设定波段的子图像，可以获取更加准确的呈线性分布的多个设定波段的子图像，进而通过不同的处理方式确定拍摄对象的相应特征，以更好地的获取相应的拍摄结果。
在一个实施方式中，每个像素对应的多个设定波段呈线性分布，以获取更加准确的呈线性分布的多个设定波段的子图像，进而通过不同的处理方式确定拍摄对象的相应特征，以更好地的获取相应的拍摄结果。
在一个实施方式中，每个像素对应多个设定通道，且，每个像素的所述多个设定波段中，属于同一设定通道的多个设定波段呈线性分布。可以获取某个设定通道的多个子图像，确定该设定通道的更加详细和精确的图像信息，进而通过不同的处理方式确定拍摄对象的相应特征，以更好地的获取相应的拍摄结果。
在步骤S12中，可通过设置不同的控制指令确定相应的设定方式，即不同的控制指令对应不同的设定方式，进而实现不同的拍摄结果。其中，控制指令与设定方式之间的对应关系预设在终端中。例如，突出显示子控制指令对应的设定方式用于突出显示所述突出显示子控制指令对应的目标物体的图像。再例如，增强波段子控制指令对应的设定方式用于利用增强波段的子图像对待增强波段的子图像进行图像增强处理，等等。
其中，拍摄结果并不局限于现有技术中的图像类型的结果，该方法中，拍摄结果包括以下中的至少一种：常规拍摄的基础图像、突出显示某个物体的突出显示图像、提高了某个波段的图像信息的增强后图像、所拍摄的物体的类型、所拍摄的物体的成分等。
该拍摄方法中，设置了更加精细的设定波段，可获取更细分的子图像，然后根据需求将获取到的多个子图像进行处理，即可满足不同的需求，提升了使用体验。
在一个示例性实施例中，提供了一种拍摄方法，该方法是对上述方法中步骤S12的改进，具体地，参考图5所示，根据多个子图像，确定拍摄结果，包括：
S21、确定增强用波段；
S22、获取与增强用波段对应的至少一个增强用子图像；
S23、将多个子图像进行融合处理，确定基础图像；
S24、将至少一个增强用子图像与基础图像进行融合处理，确定增强后图像；其中，增强后图像作为拍摄结果，增强后图像指对基础图像提高了增强用波段的图像信息的图像。
在步骤S21中，增强用波段可根据用户的选择进行确定。例如，根据用户输入的用于确定增强用波段的第二控制指令，确定相应的增强用波段。增强用波段还可根据当前环境信息确定。例如，当前环境处于夜晚，为了实现夜景增强的拍摄效果，自动确定增强用波段为可见光所处的波段，通过可见光所处的波段的多个设定波段的子图像进行夜景增强。
在一个实施方式中，在拍夜晚摄图像时，用户想要进行夜景增强，此时用户可选择拍摄界面上的“夜景增强”对应的功能，终端基于用户的选择，确定执行夜景增强功能，进而确定增强用波段(例如近红外光对应的波段)。
在一个实施方式中，在夜晚拍摄图像时，终端根据当前时间自动识别当前拍摄场景为夜晚拍摄，便可自动启动夜景增强功能，进而确定增强用波段(例如近红外光对应的波段)。
在步骤S22中，在确定了增强用波段后，从多个设定波段中查找与增强用波段对应的设定波段。由于设定波段设置的波长范围较小，因此，可能存在增强用波段包括多个设定波段的情况。如果增强用波段只对应一个设定波段，则只获取一个增强用子图像；如果增强用波段对应多个设定波段，则获取多个增强用子图像。可以理解的，设置的设定波段的波长范围越窄，增强用波段对应设定波段的数量越多，获得的用于增强的增强用子图像也会越多，也就是说，获得的增强用的图像信息越丰富，便可实现更加精确且效果更好的图像增强。
该方法中，步骤S23还可以与步骤S22同时进行，或者先于步骤S22进行。当然，步骤S23还可以与步骤S21同时进行，或者先于步骤S21进行。在步骤S23中，将多个子图像进行融合处理确定基础图像的方法，可直接通过现有技术实现，在此不做赘述。需要说明的是，在获取基础图像时，可以将所有的子图像进行融合处理获得，也可以仅仅将部分子图像进行融合处理获得，具体的用于进行容和处理的子图像，可以根据用户的选择确定。
在步骤S24中，可将增强用子图像与多个子图像进行融合处理，确定增强后图像。根据增强需求，确定增强用子图像中参加融合处理的图像的数量。可以理解的，增强需求越高，用于参加融合处理的增强用子图像的数量越多。
当然，如果该终端具有正常拍摄功能，并且，每次拍摄时均可确定一个正常拍摄得到的基础图像，该实施例中，也可通过增强用子图像与正常拍摄得到的基础图像进行融合处理，确定增强后图像。可以理解的，基础图像也是根据多个子图像中的部分子图像或全部子图像确定的。
在一个实施方式中，夜间拍摄时，由于可见光很少，因此确定波长850nm附近的设定波段或者波长940nm附近的设定波段(近红外光对应的波段)的子图像作为增强用子图像，实现夜景增强效果。
在一个实施方式中，利用红色光所在的波段的子图像作为增强用子图像，实现单一通道的增强效果，以实现特定的滤镜效果。
该方法中，可通过不同设定波段的子图像，实现不同的图像增强效果，以满足用户的不同需求。
在一个示例性实施例中，提供了一种拍摄方法，该方法是对上述方法中步骤S12的改进，具体地，参考图6所示，根据多个子图像，确定拍摄结果，包括：
S31、根据多个子图像确定待识别物体的光谱特性曲线；
S32、根据光谱特性曲线以及第一预存映射表，确定所述待识别物体的类型；其中，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
不同的物体反射出的不同波段的光的强度是不同的，根据物体该特性，便可确定物体的类型，比如区分苹果、梨、橘子等。
该方法中，提前在终端预存第一预存映射表，该第一预存映射表包括光谱特性曲线与物体的类型的对应关系，上述第一预存映射表可根据多次试验确定光谱特性曲线与物体的类型对应关系。然后通过该方法确定待识别物体的在多个设定波段的多个子图像，然后根据上述多个子图像确定该待识别物体的光谱特性曲线，从第一预存映射表中查找与该待识别物体的光谱特性曲线对应的光谱特性曲线，进而确定该待识别物体的类型。
在一个示例性实施例中，提供了一种拍摄方法，该方法是对上述方法中步骤S12的改进，具体地，参考图7所示，根据多个子图像，确定拍摄结果，包括：
S41、根据多个子图像确定待判定物体的光谱特性曲线；
S41、根据光谱特性曲线以及第二预存映射表，确定待判定物体的成分；其中，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
不同成分反射出的不同波段的光的强度是不同的，根据该特性，便可确定物体的成分，比如确定苹果的糖度、酸度，或者判定苹果是否变质等。
该方法中，提前在终端预存第二预存映射表，该第二预存映射表包括光谱特性曲线与物体的成分的对应关系，上述第二预存映射表可根据多次试验确定光谱特性曲线与物体的成分对应关系。然后通过该方法确定待判定物体的在多个设定波段的多个子图像，然后根据上述多个子图像确定该待判定物体的光谱特性曲线，从第二预存映射表中查找与该判定别物体的光谱特性曲线对应的光谱特性曲线，进而确定该待判定物体的成分。
在一个示例性实施例中，提供了一种拍摄方法，该方法是对上述方法中步骤S12的改进，具体地，参考图8所示，根据多个子图像，确定拍摄结果，包括：
S51、基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，目标子图像指用于确定目标物体的轮廓信息的子图像；
S52、根据至少一个目标子图像确定目标物体的轮廓信息；其中，轮廓信息指用于确定目标物体的轮廓的信息；
S53、根据轮廓信息和所述多个子图像，确定目标物体的突出显示图像；其中，突出显示图像作为拍摄结果。
在步骤S51中，用户可直接在多个子图像中选择至少一个相应的子图像，将其确定为目标物体对应的至少一个目标子图像。
例如，用户可直接输入某个设定通道，将该设定通道对应的子图像作为目标子图像。
例如，用户可直接输入某个设定波段，或某些设定波段，将该某个设定波段或该某些设定波段对应的子图像确定为目标子图像。
例如，用户可直接点击某个子图像或某些子图像，将其点击的子图像确定为目标子图像。
当然，用户也可输入用于确定目标物体的第一控制指令，先确定目标物体，然后根据算法实现自动确定至少一个目标子图像。
当拍摄时，在终端显示预览图像。根据用户点击的预览图像中的位置，确定与上述位置对应的目标物体；或者根据用户输入的触控轨迹，确定触控轨迹内的图像对应的物体为目标物体。可以理解的，也可根据其他现有技术中的方式确定目标物体，在此不做赘述。
具体地，参考图9所示，基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像，包括：
S511、基于接收到的第一控制指令，确定目标物体对应的目标像素区域；
S512、根据多个目标像素区域以及多个子图像，确定至少一个目标子图像。
在步骤S511中，每个图像中均包括多个像素，目标像素区域指子图像中用于显示目标物体的像素所在的区域。每个子图像中，目标像素区域内的图像信息便是目标物体在该子图像中的图像信息，也就是目标物体该在子图像对应的设定波段的图像信息，也即目标物体反射的该设定波段内的光的亮度信息。
在一个实施方式中，当拍摄时，在终端显示预览图像，根据用户输入的触控轨迹，确定触控轨迹内的图像对应的物体为目标物体，所有子图像中，与该触控轨迹所围成的区域对应的像素区域便为目标像素区域。
需要说明的是，从一个图像中确定目标物体的目标像素区域，还可通过其他现有技术实现，在此并不做限定。
在步骤S512中，目标子图像指目标像素区域的设定比例的像素的亮度信息小于或等于亮度阈值的子图像。在确定了各个设定波段对应的子图像以及目标像素区域后，根据各个子图像的目标像素区域的亮度信息与亮度阈值的比对，便可确定可以提现目标物体的轮廓信息的至少一个目标子图像。该步骤中，设定比例和亮度阈值可根据用户的选择确定，也可根据以往的记录自动生成，或者提现预设。
在一个实施方式中，确定的目标像素区域包括一万个像素点，设定比例为80％，亮度阈值为100lux。如果某个子图像在目标像素区域内的像素点中，超过八千个像素点的亮度值小于或等于100lux，则确定该子图像为目标子图像。如果某个子图像在目标像素区域内的像素点中，只有七千个像素点的亮度值小于或等于100lux，则确定该子图像不是目标子图像。
在步骤S52中，在确定了至少一个目标子图像后，可根据至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。具体地，在目标子图像中，目标物体的图像与其他图像对应的亮度信息差距较大，根据二者的亮度值的差距，便可确定目标物体在目标子图像中的轮廓信息，轮廓信息例如为轮廓轨迹的坐标。然后根据轮廓信息便可实现抠图效果或者目标物体突出显示的效果。
在步骤S53中，根据轮廓信息和多个子图像，确定目标物体的突出显示图像，包括以下两种方式。
参考图10所示，方式一：
S531、将多个子图像进行融合处理，确定多个子图像的基础图像；
S532、根据轮廓信息与基础图像，确定目标物体的突出显示图像。
该方式中，先将获取的多个子图像进行融合处理，确定基础图像，然后再根据轮廓信息和融合图像确定目标物体的突出显示图像。例如，根据轮廓信息对融合图像进行抠图处理，从基础图像中确定目标物体的图像与其他图像的边界，然后降低其他图像所在区域的亮度值，从而确定目标物体的更加突出显示的突出显示图像；当其他图像所在区域的亮度值姜维零后，则确定只有目标物体的图像。该方式中，基于轮廓信息对基础图像信息，操作简单，利用该方式确定只有目标物体的突出显示图像时，只需要经过一次抠图操作即可实现，操作简单，并且抠图更加精准。
需要说明的是，上述基础图像即为正常拍摄照片时确定的图像。因此，在该方式中，基础图像可以直接另存为正常图像，以供用户用作他处。
参考图11所示，方式二：
S53-1、根据轮廓信息和多个子图像，确定目标物体对应的多个突出显示子图像；
S53-2、将多个突出显示子图像进行融合处理，确定目标物体的突出显示图像。
该方式中，多个突出显示子图像与所述多个子图像一一对应，也就是，一个子图像对应生成一个突出显示子图像。该方式确定了多个突出显示子图像，多个突出显示子图像均为目标物体突出显示的图像。然后将多个突出显示子图像进行融合处理，便可确定目标物体的突出显示图像。
需要说明的是，该方式中确定的多个突出显示子图像与多个子图像的数量相同，二者区别仅仅在突出显示子图像对目标物体进行了突出显示。因此，可以用该该多个突出显示子图像代替原始的多个子图像，进行处理，获取相应的拍摄结果。
例如，可对该多个突出显示子图像进行另一目标物体的突出显示处理，便可获取两个目标物体均突出显示的突出显示图像。
再例如，对该多个突出显示子突出进行低分辨率处理，便可获取低分辨率的目标物体的突出显示图像。
可以理解的，也可根据上述多个突出显示子图像进行物体的类型的确定或者物体的成分的判定。并且，由于已经对目标物体进行突出显示的处理，因此，可以更加准确地确定物体的类型或物体的成分。
在一个示例性实施例中，提供了一种拍摄装置，该拍摄装置用于实施上述的拍摄方法，参考图12所示，该拍摄装置包括获取模块101和确定模块102，在实施过程中，
获取模块101，用于获取多个子图像；其中，每个所述子图像对应一个设定波段，多个所述设定波段中，至少两个所述设定波段对应同一设定通道；
确定模块102，用于根据多个子图像，确定拍摄结果。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，所述目标子图像指用于确定所述目标物体的轮廓信息的子图像；
根据至少一个目标子图像确定目标物体的轮廓信息；其中，所述轮廓信息指用于确定所述目标物体的轮廓的信息；
根据轮廓信息和多个子图像，确定目标物体的突出显示图像；其中，所述突出显示图像作为所述拍摄结果。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
基于接收到的第一控制指令，确定目标物体对应的目标像素区域；其中，所述目标像素区域指所述子图像中用于显示所述目标物体的像素所在的区域；
根据多个目标像素区域以及多个子图像，确定至少一个目标子图像；其中，所述目标子图像指所述目标像素区域的超过设定比例的像素的亮度信息小于或等于亮度阈值的子图像。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
根据至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
确定增强用波段；
获取与增强用波段对应的至少一个增强用子图像；
将多个子图像进行融合处理，确定基础图像；
将至少一个增强用子图像与所述基础图像进行融合处理，确定增强后图像；其中，所述增强后图像作为所述拍摄结果，所述增强后图像指对所述基础图像提高了所述增强用波段的图像信息的图像。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
根据多个子图像确定待识别物体的光谱特性曲线；
根据光谱特性曲线以及第一预存映射表，确定待识别物体的类型；其中，所述待识别物体的类型作为所述拍摄结果，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
在一个示例性实施例中，提供了一种拍摄装置，该装置是对上述装置改进，具体地，参考图12所示，该装置中，确定模块102，还用于：
根据多个子图像确定待判定物体的光谱特性曲线；
根据光谱特性曲线以及第二预存映射表，确定待判定物体的成分；其中，所述待判定物体的成分作为所述拍摄结果，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
在一个示例性实施例中，提供了一种终端，终端可以是手机、计算机、平板设备、电视机等具有拍摄功能的设备。
参考图13所示，终端400可以包括以下一个或多个组件：处理组件402，存储器404，电力组件406，多媒体组件408，音频组件410，输入/输出(I/O)的接口412，传感器组件414，以及通信组件416。
处理组件402通常控制设备400的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件402可以包括一个或多个模块，便于处理组件402和其他组件之间的交互。例如，处理组件402可以包括多媒体模块，以方便多媒体组件408和处理组件402之间的交互。
存储器404被配置为存储各种类型的数据以支持在设备400的操作。这些数据的示例包括用于在设备400上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电力组件406为设备400的各种组件提供电力。电力组件406可以包括电源管理系统，一个或多个电源，及其他与为设备400生成、管理和分配电力相关联的组件。
多媒体组件408包括在设备400和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件408包括一个前置摄像头和/或后置摄像头。当终端400处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件410被配置为输出和/或输入音频信号。例如，音频组件410包括一个麦克风(MIC)，当设备400处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中，音频组件410还包括一个扬声器，用于输出音频信号。
I/O接口412为处理组件402和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件414包括一个或多个传感器，用于为终端400提供各个方面的状态评估。例如，传感器组件414可以检测到终端400的打开/关闭状态，组件的相对定位，例如组件为终端400的显示器和小键盘，传感器组件414还可以检测设备400或终端400一个组件的位置改变，用户与设备400接触的存在或不存在，设备400方位或加速/减速和设备400的温度变化。传感器组件414可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件414还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件416被配置为便于设备400和其他设备之间有线或无线方式的通信。设备700可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，通信组件416还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，终端400可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器404，上述指令可由设备400的处理器420执行以完成上述方法。例如，非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。当存储介质中的指令由终端的处理器执行时，使得终端能够执行上述方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (26)

1.一种图像传感器的滤光片结构，其特征在于，所述滤光片结构包括多个滤光单元组，每个所述滤光单元组包括多个滤光片；
每个所述滤光单元组中，所述多个滤光片用于透过多个设定波段的光，多个所述滤光片与多个所述设定波段一一对应；
所述多个设定波段中，至少两个所述设定波段对应同一设定通道。
2.根据权利要求1所述的图像传感器的滤光片结构，其特征在于，每个所述滤光单元组包括多个滤光片单元，所述多个滤光片单元用于透过多个所述设定通道的光，每个所述滤光片单元包括多个所述滤光片；
每个所述滤光片单元组中，至少一个所述设定通道对应多个所述滤光片。
3.根据权利要求2所述的图像传感器的滤光片结构，其特征在于，
每个所述滤光单元组中，至少一个所述滤光片单元中的所有滤光片用于透过同一所述设定通道的光；和/或，
每个所述滤光片单元中，多个所述滤光片对应于至少两个所述设定通道。
4.根据权利要求2所述的图像传感器的滤光片结构，其特征在于，每个所述滤光片单元组中，所述对应多个所述滤光片的设定通道对应的多个所述设定波段呈线性分布。
5.根据权利要求1所述的图像传感器的滤光片结构，其特征在于，每个所述滤光单元组中，多个所述设定波段呈线性分布。
6.根据权利要求1-5任一项所述的图像传感器的滤光片结构，其特征在于，所述多个设定通道包括以下中的至少一个：近红外光通道、红色光通道、绿色光通道和蓝色光通道。
7.一种图像传感器，其特征在于，所述图像传感器包括如权利要求1-6任一项所述的图像传感器的滤光片结构。
8.一种终端，其特征在于，所述终端包括如权利要求7所述的图像传感器。
9.一种拍摄方法，应用于终端，其特征在于，所述方法包括：
获取多个子图像；其中，每个所述子图像对应一个设定波段，多个所述设定波段中，至少两个所述设定波段对应同一设定通道；
根据所述多个子图像，确定拍摄结果。
10.根据权利要求9所述的拍摄方法，其特征在于，所述根据所述多个子图像，确定拍摄结果，包括：
基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，所述目标子图像指用于确定所述目标物体的轮廓信息的子图像；
根据所述至少一个目标子图像确定目标物体的轮廓信息；其中，所述轮廓信息指用于确定所述目标物体的轮廓的信息；
根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像；其中，所述突出显示图像作为所述拍摄结果。
11.根据权利要求10所述的拍摄方法，其特征在于，所述基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像，包括：
基于接收到的第一控制指令，确定目标物体对应的目标像素区域；其中，所述目标像素区域指所述子图像中用于显示所述目标物体的像素所在的区域；
根据所述多个目标像素区域以及所述多个子图像，确定至少一个目标子图像；其中，所述目标子图像指所述目标像素区域的超过设定比例的像素的亮度信息小于或等于亮度阈值的子图像。
12.根据权利要求10或11所述的拍摄方法，其特征在于，所述根据所述至少一个目标子图像确定物体的轮廓信息，包括：
根据所述至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。
13.根据权利要求10或11所述的拍摄方法，其特征在于，所述根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像，包括：
将所述多个子图像进行融合处理，确定基础图像；
根据所述轮廓信息与所述基础图像，确定目标物体的突出显示图像。
14.根据权利要求9所述的拍摄方法，其特征在于，所述根据所述多个子图像，确定拍摄结果，包括：
确定增强用波段；
获取与增强用波段对应的至少一个增强用子图像；
将所述多个子图像进行融合处理，确定基础图像；
将所述至少一个增强用子图像与所述基础图像进行融合处理，确定增强后图像；其中，所述增强后图像作为所述拍摄结果，所述增强后图像指对所述基础图像提高了所述增强用波段的图像信息的图像。
15.根据权利要求9所述的拍摄方法，其特征在于，所述根据所述多个子图像，确定拍摄结果，包括：
根据所述多个子图像确定待识别物体的光谱特性曲线；
根据所述光谱特性曲线以及第一预存映射表，确定所述待识别物体的类型；其中，所述待识别物体的类型作为所述拍摄结果，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
16.根据权利要求9所述的拍摄方法，其特征在于，所述根据所述多个子图像，确定拍摄结果，包括：
根据所述多个子图像确定待判定物体的光谱特性曲线；
根据所述光谱特性曲线以及第二预存映射表，确定所述待判定物体的成分；其中，所述待判定物体的成分作为所述拍摄结果，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
17.一种拍摄装置，应用于终端，其特征在于，所述装置包括：
获取模块，用于获取多个子图像；其中，每个所述子图像对应一个设定波段，多个所述设定波段中，至少两个所述设定波段对应同一设定通道；
确定模块，用于根据所述多个子图像，确定拍摄结果。
18.根据权利要求17所述的拍摄装置，其特征在于，所述确定模块，还用于：
基于接收到的第一控制指令，确定目标物体对应的至少一个目标子图像；其中，所述目标子图像指用于确定所述目标物体的轮廓信息的子图像；
根据所述至少一个目标子图像确定目标物体的轮廓信息；其中，所述轮廓信息指用于确定所述目标物体的轮廓的信息；
根据所述轮廓信息和所述多个子图像，确定目标物体的突出显示图像；其中，所述突出显示图像作为所述拍摄结果。
19.根据权利要求17所述的拍摄装置，其特征在于，所述确定模块，还用于：
基于接收到的第一控制指令，确定目标物体对应的目标像素区域；其中，所述目标像素区域指所述子图像中用于显示所述目标物体的像素所在的区域；
根据所述多个目标像素区域以及所述多个子图像，确定至少一个目标子图像；其中，所述目标子图像指所述目标像素区域的超过设定比例的像素的亮度信息小于或等于亮度阈值的子图像。
20.根据权利要求18或19所述的拍摄装置，其特征在于，所述确定模块，还用于：
根据所述至少一个目标子图像的亮度信息，确定目标物体的轮廓信息。
21.根据权利要求18或19所述的拍摄装置，其特征在于，所述确定模块，还用于：将所述多个子图像进行融合处理，确定基础图像；
根据所述轮廓信息与所述基础图像，确定目标物体的突出显示图像。
22.根据权利要求17所述的拍摄装置，其特征在于，所述确定模块，还用于：
确定增强用波段；
获取与增强用波段对应的至少一个增强用子图像；
将所述多个子图像进行融合处理，确定基础图像；
将所述至少一个增强用子图像与所述基础图像进行融合处理，确定增强后图像；其中，所述增强后图像作为所述拍摄结果，所述增强后图像指对所述基础图像提高了所述增强用波段的图像信息的图像。
23.根据权利要求17所述的拍摄装置，其特征在于，所述确定模块，还用于：
根据所述多个子图像确定待识别物体的光谱特性曲线；
根据所述光谱特性曲线以及第一预存映射表，确定所述待识别物体的类型；其中，所述待识别物体的类型作为所述拍摄结果，所述第一预存映射表包括光谱特性曲线与物体的类型的对应关系。
24.根据权利要求17所述的拍摄装置，其特征在于，所述确定模块，还用于：
根据所述多个子图像确定待判定物体的光谱特性曲线；
根据所述光谱特性曲线以及第二预存映射表，确定所述待判定物体的成分；其中，所述待判定物体的成分作为所述拍摄结果，所述第二预存映射表包括光谱特性曲线与物体的成分的对应关系。
25.一种终端，其特征在于，所述终端包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如权利要求9至16任一项所述的拍摄方法。
26.一种非临时性计算机可读存储介质，其特征在于，当所述存储介质中的指令由终端的处理器执行时，使得终端能够执行如权利要求9至16任一项所述的拍摄方法。
CN202011202136.2A 2020-11-02 2020-11-02 滤光片结构、拍摄方法、装置、终端及存储介质 Pending CN114449137A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202011202136.2A CN114449137A (zh) 2020-11-02 2020-11-02 滤光片结构、拍摄方法、装置、终端及存储介质
US17/329,815 US20220137275A1 (en) 2020-11-02 2021-05-25 Color filter structure, related photographing method, device, terminal, and storage medium
EP21176604.3A EP3993399A1 (en) 2020-11-02 2021-05-28 Color filter structure, related photographing method, device, terminal, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011202136.2A CN114449137A (zh) 2020-11-02 2020-11-02 滤光片结构、拍摄方法、装置、终端及存储介质

Publications (1)

Publication Number Publication Date
CN114449137A true CN114449137A (zh) 2022-05-06

Family

ID=76197250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011202136.2A Pending CN114449137A (zh) 2020-11-02 2020-11-02 滤光片结构、拍摄方法、装置、终端及存储介质

Country Status (3)

Country Link
US (1) US20220137275A1 (zh)
EP (1) EP3993399A1 (zh)
CN (1) CN114449137A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3130369B1 (fr) * 2021-12-14 2024-06-28 Safran Electronics & Defense Caméra multispectrale à acquisition instantanée

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150077617A1 (en) * 2012-06-21 2015-03-19 Olympus Corporation Image capturing module and image capturing apparatus
WO2019144956A1 (zh) * 2018-01-29 2019-08-01 维沃移动通信有限公司 图像传感器、镜头模组、移动终端、人脸识别方法及装置
CN110336907A (zh) * 2019-08-21 2019-10-15 惠州Tcl移动通信有限公司 终端、拍摄方法及存储介质
WO2020119505A1 (zh) * 2018-12-12 2020-06-18 杭州海康威视数字技术股份有限公司 一种图像处理方法和系统
CN111866318A (zh) * 2019-04-29 2020-10-30 北京小米移动软件有限公司 多光谱成像方法、多光谱成像装置、移动终端和存储介质
CN213126203U (zh) * 2020-11-02 2021-05-04 北京小米移动软件有限公司 滤光片结构、图像传感器及终端

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6759646B1 (en) * 1998-11-24 2004-07-06 Intel Corporation Color interpolation for a four color mosaic pattern
JP3699873B2 (ja) * 1999-10-27 2005-09-28 オリンパス株式会社 画像処理装置
JP2004228662A (ja) * 2003-01-20 2004-08-12 Minolta Co Ltd 撮像装置
US7375803B1 (en) * 2006-05-18 2008-05-20 Canesta, Inc. RGBZ (red, green, blue, z-depth) filter system usable with sensor systems, including sensor systems with synthetic mirror enhanced three-dimensional imaging
KR100835894B1 (ko) * 2007-06-18 2008-06-09 (주)실리콘화일 다이내믹 레인지가 넓고, 색재현성과 해상능력이 우수한픽셀어레이 및 이미지센서
JP5090146B2 (ja) * 2007-12-06 2012-12-05 オリンパス株式会社 色変換係数算出装置、色変換係数算出プログラム、色変換係数算出方法
EP2547992A4 (en) * 2010-03-17 2014-06-18 Haishan Zeng METHODS AND APPARATUS FOR QUICK MULTISPECTRAL IMAGING AND CANCER DETECTION AND LOCATION APPLICATIONS
US9930316B2 (en) * 2013-08-16 2018-03-27 University Of New Brunswick Camera imaging systems and methods
WO2015170515A1 (ja) * 2014-05-09 2015-11-12 オリンパス株式会社 固体撮像素子、内視鏡および内視鏡システム
US9425227B1 (en) * 2015-05-20 2016-08-23 Visera Technologies Company Limited Imaging sensor using infrared-pass filter for green deduction
JP2017139286A (ja) * 2016-02-02 2017-08-10 ソニー株式会社 撮像素子、及び、カメラシステム
US9848118B2 (en) * 2016-03-11 2017-12-19 Intel Corporation Phase detection autofocus using opposing filter masks
US11223783B2 (en) * 2017-05-22 2022-01-11 Washington University Multispectral imaging sensors and systems
JP2019080245A (ja) * 2017-10-26 2019-05-23 ソニーセミコンダクタソリューションズ株式会社 画像処理装置、画像処理方法、及び撮像装置
US11388323B2 (en) * 2018-02-05 2022-07-12 Sony Corporation Imaging apparatus and imaging method
DE102019123356A1 (de) * 2019-08-30 2021-03-04 Schölly Fiberoptic GmbH Sensoranordnung, Verfahren zur Berechnung eines Farbbildes und eines hyperspektralen Bildes, Verfahren zur Durchführung eines Weißabgleichs und Verwendung der Sensoranordnung in der medizinischen Bildgebung
EP3933461A3 (en) * 2020-07-02 2022-03-16 Samsung Electronics Co., Ltd. Spectral filter, and image sensor and electronic device including the spectral filter
US11765470B2 (en) * 2020-10-26 2023-09-19 Samsung Electronics Co., Ltd. Pixel array including evenly arranged phase detection pixels and image sensor including the pixel array
US11836888B2 (en) * 2020-12-21 2023-12-05 Texas Instruments Incorporated Method and apparatus for processing RGB-infrared (RGB-IR) sensor

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150077617A1 (en) * 2012-06-21 2015-03-19 Olympus Corporation Image capturing module and image capturing apparatus
WO2019144956A1 (zh) * 2018-01-29 2019-08-01 维沃移动通信有限公司 图像传感器、镜头模组、移动终端、人脸识别方法及装置
WO2020119505A1 (zh) * 2018-12-12 2020-06-18 杭州海康威视数字技术股份有限公司 一种图像处理方法和系统
CN111866318A (zh) * 2019-04-29 2020-10-30 北京小米移动软件有限公司 多光谱成像方法、多光谱成像装置、移动终端和存储介质
CN110336907A (zh) * 2019-08-21 2019-10-15 惠州Tcl移动通信有限公司 终端、拍摄方法及存储介质
CN213126203U (zh) * 2020-11-02 2021-05-04 北京小米移动软件有限公司 滤光片结构、图像传感器及终端

Also Published As

Publication number Publication date
EP3993399A1 (en) 2022-05-04
US20220137275A1 (en) 2022-05-05

Similar Documents

Publication Publication Date Title
CN105430295B (zh) 图像处理装置及方法
US9754422B2 (en) Systems and method for performing depth based image editing
US20140168463A1 (en) Image-processing device and imaging apparatus
CN106134189B (zh) 图像处理装置、摄像装置、图像处理方法及程序
CN109345485A (zh) 一种图像增强方法、装置、电子设备及存储介质
CN106797453A (zh) 图像处理装置、摄像装置、图像处理方法以及图像处理程序
CN105245863A (zh) 进行白平衡控制的图像处理装置及其控制方法和摄像设备
CN105872402A (zh) 智能电视的拍照方法及系统
CN113329172B (zh) 拍摄方法、装置及电子设备
CN113542573A (zh) 一种拍照方法和电子设备
CN114449137A (zh) 滤光片结构、拍摄方法、装置、终端及存储介质
CN113965687A (zh) 拍摄方法、装置和电子设备
US20210190594A1 (en) Personal electronic device with built-in visible camera and thermal sensor with thermal information available in the visible camera user interface and display
CN213126203U (zh) 滤光片结构、图像传感器及终端
CN111355879B (zh) 包含特效图案的图像获取方法、装置和电子设备
CN109005360B (zh) 拍摄环境的补光方法、装置及计算机可读存储介质
CN110460783B (zh) 阵列摄像模组及其图像处理系统、图像处理方法和电子设备
JP6100279B2 (ja) Ｕｉ提供方法及びそれを適用した映像撮影装置
CN111835977B (zh) 图像传感器、图像生成方法及装置、电子设备、存储介质
CN116051368B (zh) 图像处理方法及其相关设备
CN114765654B (zh) 一种拍摄组件、终端设备、拍摄方法、拍摄装置
CN110463184A (zh) 图像处理装置、图像处理方法及程序
EP4068271A1 (en) Method and apparatus for processing brightness of display screen
CN118158545A (zh) 拍照方法、装置及存储介质
CN112822465A (zh) 一种终端设备及图像处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination