CN113225470A - 滤光器阵列、图像处理方法、图像传感器、成像装置及终端 - Google Patents

滤光器阵列、图像处理方法、图像传感器、成像装置及终端 Download PDF

Info

Publication number
CN113225470A
CN113225470A CN202110652154.9A CN202110652154A CN113225470A CN 113225470 A CN113225470 A CN 113225470A CN 202110652154 A CN202110652154 A CN 202110652154A CN 113225470 A CN113225470 A CN 113225470A
Authority
CN
China
Prior art keywords
color
pixel
filter
interference
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110652154.9A
Other languages
English (en)
Other versions
CN113225470B (zh
Inventor
张召杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202110652154.9A priority Critical patent/CN113225470B/zh
Priority to CN202310621701.6A priority patent/CN116723377A/zh
Publication of CN113225470A publication Critical patent/CN113225470A/zh
Application granted granted Critical
Publication of CN113225470B publication Critical patent/CN113225470B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/72Modifying the appearance of television pictures by optical filters or diffusing screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/77Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

一种滤光器阵列包括多个滤光器,滤光器阵列包括多个区域阵列,每个区域阵列包括多个子单元。每个子单元包括多个滤光器,每个区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个普通滤光器仅允许一种颜色的光线通过,每个抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个抗干扰滤光器允许通过的光线颜色与至少一个普通滤光器允许通过的光线颜色一致;在同一个区域阵列中,多个普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。本申请还公开一种图像处理方法、图像传感器、成像装置及终端。

Description

滤光器阵列、图像处理方法、图像传感器、成像装置及终端
技术领域
本申请涉及成像技术领域,更具体而言,涉及一种滤光器阵列、图像处理方法、图像传感器、成像装置及终端。
背景技术
受城市光污染的影响,用户在拍摄环境较暗,如在夜景环境下拍摄天空时,所拍摄的图像往往会出现天空发黄或不通透等情况,影响用户观感。
为了提高拍摄图像的质量,专业摄影师通常会使用抗光害滤镜以过滤掉人工光源发出的光,比如钠灯或汞灯等光源发出的光。然而,这种滤镜往往具有较高的成本,并且在实际应用中,不是所有拍摄场景都需要用到,用户需要根据拍摄需求进行抗光害滤镜的安装与拆卸,操作复杂度较高,难以根据用户对于抗光害拍摄的需求进行灵活的调整,使用非常不便捷。
发明内容
本申请实施方式提供一种滤光器阵列、图像处理方法、图像传感器、成像装置及终端。
本申请实施方式的滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。
本申请实施方式的图像处理方法包括:按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,所述第一色块由抗干扰像素和普通像素形成,所述抗干扰像素与抗干扰滤光器对应,所述普通像素与普通滤光器对应,所述普通滤光器仅允许一种颜色的光线通过,所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数;及根据所述像素调整系数对所述初始图像进行处理,以获得目标图像。
本申请实施方式的图像传感器包括滤光器阵列及像素阵列。所述滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。所述像素阵列包括多个像素点,每个所述像素点对应一个所述滤光器,所述像素点用于接收穿过对应的所述滤光器的光线以生成电信号。
本申请实施方式的成像装置包括图像传感器及处理器。所述图像传感器包括滤光器阵列及像素阵列。所述滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。所述像素阵列包括多个像素点,每个所述像素点对应一个所述滤光器,所述像素点用于接收穿过对应的所述滤光器的光线以生成电信号。所述处理器用于实现本申请实施方式所述的图像处理方法。所述图像处理方法包括:按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,所述第一色块由抗干扰像素和普通像素形成,所述抗干扰像素与抗干扰滤光器对应,所述普通像素与普通滤光器对应,所述普通滤光器仅允许一种颜色的光线通过,所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数;及根据所述像素调整系数对所述初始图像进行处理,以获得目标图像。
本申请实施方式的电子设备包括图像传感器,所述图像传感器包括滤光器阵列及像素阵列。所述滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。所述像素阵列包括多个像素点,每个所述像素点对应一个所述滤光器,所述像素点用于接收穿过对应的所述滤光器的光线以生成电信号。
本申请实施方式的电子设备包括成像装置。所述成像装置包括图像传感器及处理器。所述图像传感器包括滤光器阵列及像素阵列。所述滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。所述像素阵列包括多个像素点,每个所述像素点对应一个所述滤光器,所述像素点用于接收穿过对应的所述滤光器的光线以生成电信号。所述处理器用于实现本申请实施方式所述的图像处理方法。所述图像处理方法包括:按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,所述第一色块由抗干扰像素和普通像素形成,所述抗干扰像素与抗干扰滤光器对应,所述普通像素与普通滤光器对应,所述普通滤光器仅允许一种颜色的光线通过,所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数;及根据所述像素调整系数对所述初始图像进行处理,以获得目标图像。
本申请实施方式的电子设备包括处理器。所述处理器用于实现本申请实施方式所述的图像处理方法。所述图像处理方法包括:按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,所述第一色块由抗干扰像素和普通像素形成,所述抗干扰像素与抗干扰滤光器对应,所述普通像素与普通滤光器对应,所述普通滤光器仅允许一种颜色的光线通过,所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数;及根据所述像素调整系数对所述初始图像进行处理,以获得目标图像。
本申请实施方式的滤光器阵列、图像传感器、成像装置和电子设备中,滤光器阵列包括多个区域阵列,多个区域阵列均包括多个普通滤光器和至少一个抗干扰滤光器,普通滤光器可以允许一种颜色的光通过,抗干扰滤光器可以仅允许一种颜色的光线通过,并且能够滤除该中颜色光线中的干扰信息,使得根据穿过滤光器阵列的光线生成的图像可以具有抗干扰像素和普通像素,可以减少干扰信息对图像质量的影响,进而得到的图像的品质更高。
本申请实施方式的图像处理方法、图像传感器、成像装置和电子设备中,本申请实施方式的图像处理方法中,首先从多个第一色块中选取一个作为标准色块,并且第一色块包括抗干扰像素和普通像素,抗干扰像素中的干扰信息较少或者不包括干扰信息,然后依据标准色块中的抗干扰像素的像素值和普通像素的像素值,计算像素调整系数,进而根据像素调整系数对初始图像进行处理获得目标图像,使得获取到的整张目标图像的干扰信息较少甚至不存在干扰信息,图像质量更好。
本申请的实施方式的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实施方式的实践了解到。
附图说明
本申请的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本申请某些实施方式的图像传感器的结构示意图;
图2至图12是本申请某些实施方式的图像传感器的滤光器阵列的结构示意图;
图13至图17是本申请某些实施方式的图像传感器的结构示意图;
图18是本申请实施方式的图像处理方法的流程示意图;
图19是本申请实施方式的图像处理方法的场景示意图;
图20是本申请实施方式的图像处理方法的场景示意图;
图21是本申请实施方式的图像处理方法的场景示意图;
图22至图27是本申请实施方式的图像处理方法的场景示意图;。
图28至图40是本申请实施方式的图像处理方法的流程示意图;
图41是本申请某些实施方式的图像传感器的结构示意图;
图42是本申请某些实施方式的成像装置的结构示意图;
图43是本申请某些实施方式的终端的结构示意图。
具体实施方式
以下结合附图对本申请的实施方式作进一步说明。附图中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。
另外,下面结合附图描述的本申请的实施方式是示例性的,仅用于解释本申请的实施方式,而不能理解为对本申请的限制。
在本申请中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可以是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
请参阅图1和图2,本申请实施方式的图像传感器10包括滤光器阵列11及像素阵列12,本申请实施方式的滤光器阵列11包括多个滤光器1111,滤光器阵列11包括多个区域阵列110,每个区域阵列110包括多个子单元111,每个子单元111包括多个滤光器1111,每个区域阵列110均包括多个普通滤光器(例如图2中的A、B、C三种滤光器)及至少一个抗干扰滤光器(例如图2中的AL、BL、CL三种滤光器),每个普通滤光器仅允许一种颜色的光线通过,每个抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个抗干扰滤光器允许通过的光线颜色与至少一个普通滤光器允许通过的光线颜色一致;在同一个区域阵列110中,多个普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器A、仅允许第二颜色的光线通过的第二颜色普通滤光器B、及仅允许第三颜色的光线通过的第三颜色普通滤光器C。像素阵列12包括多个像素点121,每个像素点121对应一个滤光器1111,像素点121用于接收穿过对应的滤光器1111的光线以生成电信号。
本申请实施方式的滤光器阵列11和图像传感器10中,滤光器阵列11包括多个区域阵列110,多个区域阵列110均包括多个普通滤光器和至少一个抗干扰滤光器,普通滤光器可以允许一种颜色的光通过,抗干扰滤光器可以仅允许一种颜色的光线通过,并且能够滤除该中颜色光线中的干扰信息,使得根据穿过滤光器阵列11的光线生成的图像可以具有抗干扰像素和普通像素,可以减少干扰信息对图像质量的影响,进而得到的图像的品质更高。
进一步地,本申请的滤光器阵列11中的区域阵列110并非全部为抗干扰滤光器,而是包括抗干扰滤光器和普通滤光器,避免因抗干扰滤光器数量过多导致拍摄到的图像较暗,同时,还可以减少滤光器阵列11的制造成本。
下面结合附图对本申请的图像传感器10进行进一步说明。
具体地,图像传感器10具体可以采用互补金属氧化物半导体(CMOS,Complementary Metal Oxide Semiconductor)感光元件或者电荷耦合元件(CCD,Charge-coupled Device)感光元件。
请参阅图1,本申请实施方式的图像传感器10包括滤光器阵列11及像素阵列12。沿图像传感器10的收光方向,滤光器阵列11和像素阵列12依次设置,光线经滤光器阵列11后到达像素阵列12。
滤光器阵列11可包括多个滤光器1111,滤光器1111可用于过滤除光线中的部分光线。
像素阵列12可包括多个像素点121,每个像素点121对应滤光器阵列11中的一个滤光器1111,像素点121可以用于接收穿过对应的滤光器1111的光线以生成电信号。
请参阅图2,滤光器阵列11可包括多个区域阵列110,一个滤光器阵列11可由多个区域阵列110拼接形成。多个区域阵列110中滤光器1111的分布可相同或者不同,每个区域阵列110均包括多个普通滤光器及至少一个抗干扰滤光器。每个区域阵列110可包括多个子单元111,每个子单元111可包括多个滤光器1111。部分子单元111既可包括普通滤光器,又可包括抗干扰滤光器;部分子单元111可只包括普通滤光器;部分子单元111可只包括抗干扰滤光器。
进一步地,请参阅图2,在某些实施方式中,每个区域阵列110可包括2n*2n个子单元111,n≥1,每个子单元111包括2*2个滤光器1111,每个子单元111包括的滤光器1111的种类可相同或者不同。其中,n可以为1、2、3、4、5、6或更多数值,在此不一一列举。
在图3、图5至图9、图11和图12所示的实施例中,每个区域阵列110可包括2*2个子单元111。在图2、图10所示的实施例中,每个区域阵列110可包括4*4个子单元111。在图4所示的实施例中,每个区域阵列110可包括8*8个子单元111。当然,在其他实施例中,区域阵列110还可以包括其他数量个子单元111,例如,16*16、32*32等,在此不一一列举,也不做限制。
请参阅图2至图7,在某些实施方式中,每个子单元111包括M*M个滤光器1111。其中,M≥2,同一个子单元111中的滤光器1111允许通过的光线的颜色不同。例如,图2至图7所示的实施例中,每个子单元111均包括一个允许第一颜色的光线穿过的滤光器1111(第一颜色普通滤光器A或第一颜色抗干扰滤光器AL)、两个允许第二颜色的光线穿过的滤光器1111(第二颜色普通滤光器B或第二颜色抗干扰滤光器BL)和一个允许第三颜色的光线穿过的滤光器1111(第三颜色普通滤光器C或第三颜色抗干扰滤光器CL)。
请参阅图8和图11,在某些实施方式中,每个子单元111包括M*M个滤光器1111,其中,M≥2,同一个子单元111中的滤光器1111允许通过的光线的颜色相同。可以理解,即,M可以是2、3、4、5、6或更多数值,在此不一一列举。在图8所示的实施例中,一个区域阵列110包括四个子单元111,每个子单元111可包括2*2个滤光器1111,且同一个子单元111中的2*2个滤光器1111允许通过的光线的颜色相同。在图11所示的实施例中,一个区域阵列110包括四个子单元111,每个子单元111包括3*3个滤光器1111,且同一个子单元111中的3*3个滤光器1111允许通过的光线的颜色相同。
在图8所示的实施例中,图8中的四个子单元111分别为第一子单元111a、第二子单元111b、第三子单元111c和第四子单元111d。第一子单元111a和第三子单元111c中的2*2个滤光器1111均仅允许第二颜色的光线穿过,第二子单元111b中的2*2个滤光器1111均仅允许第三颜色的光线穿过,第四子单元111d中的2*2个滤光器1111均仅允许第一颜色的光线穿过。
当然,在其他一些实施方式中,每个子单元111也可包括4*4个滤光器1111、5*5个滤光器1111、6*6个滤光器1111,在此不一一列举。
请参阅图9、图10和图12,在某些实施方式中,每个子单元111可包括多个孙单元1110,每个孙单元1110包括K*K个滤光器1111。其中,K≥2,同一个孙单元1110中的滤光器1111允许通过的光线的颜色相同。可以理解,K可以是2、3、4、5、6或更多数值,在此不一一列举。例如,在图9和图10所示的实施例中,一个区域阵列110包括四个子单元111。更具体地,在图9中,每个子单元111包括四个孙单元1110,每个孙单元1110包括2*2个滤光器1111,同一个孙单元1110的2*2个滤光器1111允许通过的光线的颜色相同。在图10中,每个子单元111包括16个孙单元1110,每个孙单元1110包括2*2个滤光器1111,同一个孙单元1110的2*2个滤光器1111允许通过的光线的颜色相同。在图12所示的实施例中,一个区域阵列110包括四个子单元111,每个子单元111包括四个孙单元1110,每个孙单元1110包括3*3个滤光器1111,同一个孙单元1110的3*3个滤光器1111允许通过的光线的颜色相同。
在图12所示的实施例中,图12中的四个孙单元1110分别为第一孙单元1110a、第二孙单元1110b、第三孙单元1110c和第四孙单元1110d。第一孙单元1110a和第三孙单元1110c中的3*3个滤光器1111均仅允许第二颜色的光线穿过,第二孙单元1110中的3*3个滤光器1111均仅允许第三颜色的光线穿过,第四孙单元1110d中的3*3个滤光器1111均仅允许第一颜色的光线穿过。
当然,在其他一些实施方式中,每个孙单元1110也可包括4*4个滤光器1111、5*5个滤光器1111、6*6个滤光器1111,在此不一一列举。
请参阅图2至图12,多个滤光器111可包括多个普通滤光器和至少一个抗干扰滤光器,普通滤光器可以仅允许一种颜色的光线通过。同一个区域阵列110中,多个普通滤光器可包括第一颜色普通滤光器A、第二颜色普通滤光器B和第三颜色普通滤光器C。第一颜色普通滤光器A可以仅允许第一颜色的光线通过,第二颜色普通滤光器B可以仅允许第二颜色的光线通过,第三颜色普通滤光器C可以仅允许第三颜色的光线通过。
其中,第一颜色、第二颜色和第三颜色互不相同,且第一颜色、第二颜色和第三颜色的颜色组成方式可以有多种。在一个例子中,第一颜色可为红色R、第二颜色可为绿色G、第三颜色可为蓝色Bu。在另一个例子中,第一颜色可为红色R、第二颜色可为黄色Y、第三颜色可为蓝色Bu。在又一个例子中,第一颜色可为红色R、第二颜色可为绿色Y、第三颜色可为青色CB。第一颜色、第二颜色和第三颜色还可以为其他颜色,在此不一一列举。
同一个区域阵列110中,第一颜色普通滤光器A的数量、第二颜色普通滤光器B的数量和第三颜色普通滤光器C的数量可相同或者不同。例如,在同一个区域阵列110中,第一颜色普通滤光器A的数量、第二颜色普通滤光器B的数量和第三颜色普通滤光器C的数量可相同。再例如,在同一个区域阵列110中,第一颜色普通滤光器A的数量和第三颜色普通滤光器C的数量相同,第一颜色普通滤光器A的数量和第二颜色普通滤光器B的数量不同。还例如,在同一个区域阵列110中,第一颜色普通滤光器A的数量和第二颜色普通滤光器B的数量相同,第一颜色普通滤光器A的数量和第三颜色普通滤光器C的数量不同。又例如,在同一个区域阵列110中,第一颜色普通滤光器A的数量、第二颜色普通滤光器B的数量和第三颜色普通滤光器C的数量互不相同。另例如,在同一个区域阵列110中,第二颜色普通滤光器B的数量和第三颜色普通滤光器C的数量相同,第二颜色普通滤光器B的数量和第一颜色普通滤光器A的数量不同。需要说明的是,数量不同可以是小于或者大于,在此不做限制。
请参阅图2、图5和图6,在某些实施方式中,多个区域阵列110中的普通滤光器的分布完全相同,如此,只需制作一个区域阵列110的模具即可得到滤光器阵列11,可以节省普通滤光器阵列11的制作成本。例如,在图5和图6中,多个区域阵列110分别为第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d,可以看到,在图5和图6中,第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d中第一颜色普通滤光器A、第二颜色普通滤光器B和第三颜色普通滤光器C的分布完全相同。
请参阅图7,在某些实施方式中,至少两个区域阵列110中的普通滤光器的分布不同,例如,多个区域阵列110中部分区域阵列110的普通滤光器的分布相同,部分区域阵列110的普通滤光器的分布不相同;或者,多个区域阵列110的普通滤光器的分布均不相同。
在图7所示的实施例中,多个区域阵列110分别为第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d。第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d中第一颜色普通滤光器A、第二颜色普通滤光器B和第三颜色普通滤光器C的分布完全不相同。当然,在其他一些实施例中,第一区域阵列110a、第二区域阵列110b中的普通滤光器的分布可相同,第三区域阵列110c和第四区域阵列110d中普通滤光器的分布可不同,且均与第一区域阵列110a、第二区域阵列110b中的普通滤光器的分布不同;或者,第一区域阵列110a、第二区域阵列110b、第三区域阵列110c中的普通滤光器的分布可相同,第四区域阵列110d中的普通滤光器的分布可与第一区域阵列110a、第二区域阵列110b、第三区域阵列110c中的普通滤光器的分布不同。
当然,在其他的实施方式中,区域阵列110中还可包括第四颜色普通滤光器、第四颜色可以为白色。进一步地,区域阵列110中还可包括第五颜色普通滤光器、第六颜色普通滤光器等等,在此不一一列举,例如第五颜色可为红外光对应的颜色,第六颜色紫外光对应的颜色。
请参阅图2,每个区域阵列110中包括至少一个抗干扰滤光器。例如,每个区域阵列110中可以包括一个或多个(例如,2个、3个、4个、5个、6个或更多个)抗干扰滤光器,抗干扰滤光器可以仅允许一种颜色的光线通过并可以滤除该颜色光线中的干扰信息。其中,干扰信息可以包括人工光源发出的光线、或者颜色光线中沿预定方向偏振的偏振光等等,在此不一一列举。
本申请实施例中以抗干扰信息为人工光源发出的光线为例进行示例性说明。即,抗干扰滤光器可以滤除光线中的人工光源发出的光线,人工光源可包括钠灯、汞灯等光源。更具体地,钠灯发出的光线主要为波长为589纳米的光线,汞灯发出的光线主要为波长为435.8纳米、546.1纳米、577.0纳米和579.1纳米的光线,则抗干扰滤光器可以滤除光线中波长为435.8纳米、546.1纳米、577.0纳米、579.1纳米和589纳米的光线,由于钠灯和汞灯发出的光线会使图像发黄且不通透,如此,抗干扰滤光器削弱了钠灯和汞灯等人工光源发出的光进入图像传感器10中的光线,从而可以减小人工光源发出的光对成像质量的影响,进而用户拍摄得到的图像中不易发黄、比较通透,例如用户拍摄天空时,天空将会接近于真实的天空(例如天空更蓝、云朵更白),不会存在发黄和不通透的情况。
更具体地,请参阅图13至图17,抗干扰滤光器可以是在普通滤光器(图13所示)的基础上设置抗干扰滤光件101(图14至图17所示)。抗干扰滤光件101具体可以是抗干扰滤镜或者抗干扰滤光膜,抗干扰滤镜或抗干扰滤光膜可以滤除光线中的干扰信息,干扰信息无法穿过抗干扰滤镜或者抗干扰滤光膜。其中,抗干扰滤镜或者抗干扰滤光膜可以位于普通滤光器与像素之间,如图14和图15所示;抗干扰滤镜或者抗干扰滤光膜也可以位于普通滤光器的背离像素点121的一侧,如图16和图17所示,在此不做限制。
请参阅图2,在某些实施方式中,同一个区域阵列110可包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的至少一个。例如,同一个区域阵列110可包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的一个。又例如,同一个区域阵列110可包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的两种。再例如,同一个区域阵列110可同时包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL
具体地,第一颜色抗干扰滤光器AL可以是在第一颜色普通滤光器A的基础上设置抗干扰滤光件101而形成,第一颜色抗干扰滤光器AL可以仅允许第一颜色的光线通过,并能滤除第一颜色的光线中的干扰信息。第二颜色抗干扰滤光器BL可以是在第二颜色普通滤光器B的基础上设置抗干扰滤光件101而形成,第二颜色抗干扰滤光器BL可以仅允许第二颜色的光线,并能滤除第二颜色的光线中的干扰信息。第三颜色抗干扰滤光器CL可以在第三颜色普通滤光器C的基础上设置抗干扰滤光件101而形成,第三颜色抗干扰滤光器CL可以仅允许第三颜色的光线,并能滤除第三颜色的光线中的干扰信息。
请参阅图2,在某些实施方式中,滤光器阵列11可同时包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL可分别包括一个抗干扰滤光件101,如图14和图16所示。
或者,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL在滤光器阵列11中两两相邻设置,相邻的第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL三者可共用一个抗干扰滤光件101,如图15和图17所示。
或者,相邻的第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的两种可共用一个抗干扰滤光件101,另一个可单独用一个抗干扰滤镜或者镀有抗干扰滤光膜。例如,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL共用一个抗干扰滤光件101,第三颜色抗干扰滤光器CL单用一个抗干扰滤光件101。
或者,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中相邻的可共用一个抗干扰滤光件101,不相邻的可单独用一个抗干扰滤镜或者镀有抗干扰滤光膜。例如,第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL相邻,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL不相邻,第一颜色抗干扰滤光器AL和第三颜色抗干扰滤光器CL也不相邻,则第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL可共用一个抗干扰滤光件101,第一颜色抗干扰滤光器AL可单独用一个抗干扰滤光件101。
在某些实施方式中,同一个区域阵列110包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的至少两种。第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的至少两种可以分布在同一个子单元111中;第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的至少两种也可以分别分布在不同的子单元111中。
例如,同一个区域阵列110包括第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL可以分布在同一个子单元111中,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL也可以分布在不同的子单元111中。
再例如,同一个区域阵列110包括第一颜色抗干扰滤光器AL和第三颜色抗干扰滤光器CL,第一颜色抗干扰滤光器AL和第三颜色抗干扰滤光器CL可以分布在同一个子单元111中,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL也可以分布在不同的子单元111中。
另例如,同一个区域阵列110包括第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL,第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL可以分布在同一个子单元111中,第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL也可以分布在不同的子单元111中。
又例如,同一个区域阵列110包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL可以分布在同一个子单元111中。例如,在图5所示的实施例中,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL均分布在同一个子单元111中。再例如,请参阅图2,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL也可以分别分布在不同的子单元111中。
进一步地,同一个区域阵列110中第一颜色抗干扰滤光器AL的数量、第二颜色抗干扰滤光器BL的数量和第三颜色抗干扰滤光器CL的数量可相同或者不同。其中,同一个区域阵列110中第一颜色抗干扰滤光器AL的数量、第二颜色抗干扰滤光器BL的数量和第三颜色抗干扰滤光器CL的数量可根据用户的实际需求进行选择性设置。或者,同一个区域阵列110中第一颜色抗干扰滤光器AL的数量、第二颜色抗干扰滤光器BL的数量和第三颜色抗干扰滤光器CL的数量可分别根据对应的第一颜色普通滤光器A的数量、第二颜色普通滤光器B的数量和第三颜色普通滤光器C的数量确定。例如,抗干扰滤光器的数量可以是对应的普通滤光器的数量的十分之一、八分之一、五分之一、四分之一等,在此不做详细说明。因为抗干扰滤光器的进光量小于普通滤光器的进光量,则生成的图像中与抗干扰滤光器对应的像素的亮度值将小于与普通滤光器对应的亮度值,因此,抗干扰滤光器的数量不能过多。
在一些实施方式中,第一颜色抗干扰滤光器AL的数量小于第一颜色普通滤光器A的数量,第二颜色抗干扰滤光器BL的数量小于第二颜色普通滤光器B的数量,第三颜色抗干扰滤光器CL的数量小于第三颜色普通滤光器C的数量,以避免第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL的数量过多而导致生成的图像亮度较低,而影响图像成像质量。
进一步地,请参阅图2、图3和图6,在某些实施方式中,每个区域阵列110均包括第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL。在一个例子中,在同一个区域阵列110中,可以是第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL两两相邻,如图2所示,即,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL相邻,第二颜色抗干扰滤光器BL相邻和第三颜色抗干扰滤光器CL相邻。
在另一个例子中,在同一个区域阵列110中,也可以是第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL中的至少两种相互间隔。例如,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL相邻,第三颜色抗干扰滤光器CL和第一颜色抗干扰滤光器AL间隔,第三颜色抗干扰滤光器CL与第二颜色抗干扰滤光器BL也间隔;或者,第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL相邻,第一颜色抗干扰滤光器AL和第二颜色抗干扰滤光器BL间隔,第一颜色抗干扰滤光器AL与第三颜色抗干扰滤光器CL也间隔;或者,第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL三者两两相互间隔。
请参阅图5和图6,在一些实施方式中,在滤光器阵列11中,多个区域阵列110中抗干扰滤光器的分布完全相同。在图5和图6中,多个区域阵列110分别为第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d,第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d中第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL的分布完全相同。
请参阅图7,在另一些实施方式中,在滤光器阵列11中,至少两个不同的区域阵列110中抗干扰滤光器的分布不同。例如,部分不同的区域阵列110中抗干扰滤波器的分布相同,部分不同的区域阵列110中抗干扰滤波器的分布不同。或者,所有的不同的区域阵列110中,抗干扰滤光器的分布均不同,如图7所示。在图7中,多个区域阵列110分别为第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d,第一区域阵列110a、第二区域阵列110b、第三区域阵列110c和第四区域阵列110d中第一颜色抗干扰滤光器AL、第二颜色抗干扰滤光器BL和第三颜色抗干扰滤光器CL的分布均完全不相同。
在一些实施例中,区域阵列110的数量为四个,分别为区域阵列110a、区域阵列110b、区域阵列110c和区域阵列110d。在图2、图5和图6所示的实施例中,区域阵列110a、区域阵列110b、区域阵列110c和区域阵列110d中的滤光器1111的分布均相同。在图7所示的实施例中,区域阵列110a、区域阵列110b、区域阵列110c和区域阵列110d中的滤光器1111的分布均不相同。在其他一些实施例中,区域阵列110a、区域阵列110b、区域阵列110c和区域阵列110d中的滤光器1111的分布中的部分相同,部分不同。
需要说明的是,本申请实施方式的滤光器阵列的分布并不限于图2至图12所示的分布,还可以是其他分布,在此不做具体限制。
请参阅图1,在某些实施方式中,图像传感器10还可包括微透镜阵列13,微透镜阵列13可包括多个微透镜131,多个微透镜131可对应设置于多个滤光器1111的远离像素阵列12的一侧,并与该滤光器1111对应的像素121相对应,沿图像传感器10的收光方向,光线经微透镜131到达滤光器1111。微透镜131可以汇聚光线,可以将入射的光线更多地导引至滤光器1111。
请参阅图18至图20,本申请还提供了一种图像处理方法,图像处理方法包括以下步骤:
01:按照预定规则从初始图像中的多个第一色块C中选取一个作为标准色块,第一色块C由抗干扰像素和普通像素形成,抗干扰像素与抗干扰滤光器对应,普通像素与普通滤光器对应,普通滤光器仅允许一种颜色的光线通过,抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个抗干扰滤光器允许通过的光线颜色与至少一个普通滤光器允许通过的光线颜色一致;
02:根据标准色块中的抗干扰像素的像素值和普通像素的像素值,计算像素调整系数;及
03:根据像素调整系数对初始图像进行处理,以获得目标图像。
本申请实施方式的图像处理方法中,首先从多个第一色块C中选取一个作为标准色块,并且每个第一色块C包括抗干扰像素和普通像素,抗干扰像素中的干扰信息较少或者不包括干扰信息,然后依据标准色块中的抗干扰像素的像素值和普通像素的像素值,计算像素调整系数,进而根据像素调整系数对初始图像进行处理获得目标图像,使得获取到的整张目标图像的干扰信息较少甚至不存在干扰信息,图像质量更好。
具体地,初始图像可以经由上述实施实施方式的图像传感器10生成,使得初始图像中可包括与抗干扰滤光器对应的抗干扰像素和与普通滤光器对应的普通像素,可以根据抗干扰像素和普通像素的分布在初始图像划分出多个第一色块C,每个第一色块C均包括抗干扰像素和普通像素,抗干扰像素与普通像素相比,抗干扰像素中不存在干扰信息或者干扰信息较少。例如,可以先识别初始图像中的抗干扰像素的位置,然后以每组抗干扰像素为中心,设定预定宽度w和预定高度h内的像素组成一个第一色块C,预定宽度w和预定长度h可以为固定值也可以根据实际需求进行设置,例如,第一色块C可为4*4、8*8、10*10、16*16等,在此不一一列举。
其中,第一色块C越小,则第一色块C中的普通像素数量越小,计算量较小,但是容易受到噪点的影响;第一色块C越大,则第一色块C中的普通像素数量越大,则不易受到噪点的影响,但是计算量较大。因此,可以根据拍摄场景合理划分第一色块C的大小。
进一步地,可以按照预定规则从多个第一色块C中选取一个作为标准色块,标准色块可以是多个第一色块C中颜色差异最小的第一色块C。
其中,预定规则具体可以是:根据第一色块C中的抗干扰像素的像素值和普通像素的像素值,从多个第一色块C中选取一个作为标准色块,或者也可以是:根据多个第一色块C中抗干扰像素和普通像素的分布从第一色块C中选取一个作为标准色块。或者也可以确定初始图像中每个像素的像素值,根据每个像素的像素值确定初始图像中颜色相同或者颜色相近的区域,判断多个第一色块C中哪个第一色块C位于该颜色相同或相近的区域中,预定规则可以是位于该区域中的第一色块C为标准色块,则选取该第一色块C为标准色块。例如,请结合图21,在图21中识别到云朵区域Y为初始图像中颜色相同或者颜色差异较小,而左上角的第一色块C1位于云朵区域Y中,则可以选取左上角的第一色块C1作为标准色块。
进一步地,在步骤02中,根据标准色块中的抗干扰像素的像素值和普通像素的像素值,计算像素调整系数。例如,可以根据标准色块中抗干扰像素和与抗干扰像素对应的普通像素之间的比值计算像素调整系数,或者也可以根据标准色块中抗干扰像素和抗干扰像素周围范围内的普通像素之间的比值计算像素调整系数。计算像素调整系数可以分析抗干扰像素和普通像素之间的差异,便于根据两者的差异对初始图像中的普通像素和/或抗干扰像素的像素值进行调整,进而对初始图像进行处理。
再进一步地,在步骤03中,根据像素调整系数对初始图像进行处理,以获得目标图像。可以根据像素调整系数对初始图像中的每个普通像素进行处理,然后可以得到目标图像。例如将每个普通像素的像素值乘以或者除以对应的像素调整系数,可以得到每个普通像素的新的像素值,然后以新的像素值更新初始图像可以得到目标图像。
请参阅图22至图27,图22至图27中的图像P1为初始图像,图像P2为经上述图像处理方法处理后得到的目标图像。图像P2较图像P1更加通透,天空更蓝、白云更白、树木草地更绿等。
请参阅图28,在某些实施方式中,步骤01包括以下步骤:
011:从多个第一色块C中获取待选色块;及
012:从待选色块中选取一个颜色变化幅值最小的待选色块,以作为标准色块。
具体地,可以将所有的第一色块C作为待选色块,即,每个第一色块C均为待选色块;也可以将部分数量的第一色块C作为待选色块,例如将4个中的2个第一色块C作为待选色块。具体可以根据每个第一色块C的抗干扰像素和普通像素的分布确定该第一色块C是否为待选色块,或者根据每个第一色块C的颜色变化幅值从多个第一色块C中选取部分数量的第一色块C作为待选色块。或者,根据初始图像中的颜色分布,将位于初始图像中颜色相同的区域的第一色块C作为待选色块。或者,根据每个第一色块C中每个普通像素的像素值获取待选色块。
然后可以计算待选色块中每个待选色块的颜色变化幅值,选择颜色变化幅值最小的待选色块作为标准色块,使得标准色块中的各个位置的颜色均相同或者近似相同。颜色变化幅值可以体现待选色块中各个位置之间的颜色的变化幅度,如果采用颜色变化幅度较大的待选色块作为标准色块计算像素调整系数,将容易导致计算得到的像素调整系数不准确而使目标图像不真实。本实施例选用颜色变化幅值最小的第一色块C作为标准色块可以使得计算的像素调整系数比较准确。
请结合图19,图19中一共包括四个第一色块C,可以将四个第一色块C均作为待选色块,也可以将四个第一色块C中的一个、两个、三个作为待选色块,在此不做限制。本实施例中,四个第一色块C均作为待选色块,则待选色块的数量为四个,假设分别为第一待选色块、第二待选色块、第三待选色块和第四待选色块。然后可以分别计算第一待选色块、第二待选色块、第三待选色块和第四待选色块的颜色变化幅值,得到第一待选色块、第二待选色块、第三待选色块和第四待选色块的颜色变化幅值分别为f1、f2、f3和f4。经过比较f1、f2、f3和f4的大小,发现f1最小,则可以将第一待选色块作为标准色块。
其中,颜色变化幅值可以根据每个普通像素的像素值和普通像素的像素均值之间的差值计算得到,或者颜色变化幅值可以为每个普通像素的像素值的方差之和得到。
请参阅图29,在某些实施方式中,步骤01包括以下步骤:
011:从多个第一色块C中获取待选色块;及
013:从待选色块中筛选出颜色变化幅值小于预定阈值的待选色块;及
014:从颜色变化幅值小于预定阈值的待选色块中任选一个作为标准色块。
具体地,步骤011和上一个实施例中的步骤011相同,在此不详细展开。在获取到待选色块后,可以计算待选色块中的每个待选色块的颜色变化幅值。然后从待选色块中筛选出颜色变化幅值小于预定阈值的待选色块,进而从颜色变化幅值小于预定阈值的待选色块中任选一个作为标准色块,使得标准色块中颜色变化幅值不会太大,进而依据标准色块计算的像素调整系数更加准确,根据像素调整系数对初始图像进行处理后,初始图像不易失真。
例如,请结合图19,四个第一色块C均作为待选色块,则待选色块的数量为四个,假设分别为第一待选色块、第二待选色块、第三待选色块和第四待选色块。然后可以分别计算第一待选色块、第二待选色块、第三待选色块和第四待选色块的颜色变化幅值,得到第一待选色块、第二待选色块、第三待选色块和第四待选色块的颜色变化幅值分别为f1、f2、f3和f4。通过比较f1、f2、f3和f4和预定阈值之间的大小,发现f1和f3大于预定阈值,f2和f4小于预定阈值,则可以将第一待选色块和第三待选色块中的任意一个作为标准色块。
其中,颜色变化幅值可以根据每个普通像素的像素值和普通像素的像素均值之间的差值计算得到,或者颜色变化幅值可以为每个普通像素的像素值的方差之和得到。
请参阅图30,在某些实施方式中,多个普通像素包括多种不同颜色的普通像素,步骤012包括以下步骤:
0121:计算每个待选色块中每种普通像素的像素值的第一均值;
0122:根据每种普通像素的像素值和该种普通像素的第一均值,计算每个待选色块的颜色变化幅值;及
0123:选择最小的颜色变化幅值所对应的待选色块作为标准色块。
具体地,初始图像中可包括多种颜色不同的普通像素,例如,三种、四种、五种、六种、七种等不同颜色的普通像素,由多种颜色不同的普通像素可组合呈现多种颜色。在一个待选色块中,每种普通像素的数量可为多个,可以首先计算每个待选色块中每种普通像素的多个像素值的均值,得到每种普通像素的像素值的第一均值。即,将待选色块中同一种颜色的普通像素的多个像素值求和后除以该种颜色的普通像素的数量得到该种普通像素的第一均值。
进一步地,可以根据每种普通像素的像素值和该种普通像素的第一均值,计算每个待选色块的颜色变化幅值。由此,通过颜色变化幅值可以确定待选色块的颜色变化幅度。
在一个例子中,可以计算每种普通像素的每个普通像素的像素值与该种普通像素的第一均值之间的差值,然后将该种普通像素的所有的差值求和可以得到该种普通像素的颜色变化幅值,然后可以对每种普通像素的颜色变化幅值求和可以得到该待选色块的颜色变化幅值。
在另一个例子中,可以计算每种普通像素的每个普通像素的像素值与该种普通像素的第一均值之间的差值,然后将差值除以该种普通像素的第一均值得到该个普通像素的变化值,对该种普通像素的每个普通像素的变化值进行求和可以得到该种普通像素的颜色变化幅值,进而对每种普通像素的颜色变化幅值求和可以得到该待选色块的颜色变化幅值。本例子中,考虑到了初始图像图中不同的位置处会有明暗差异,因此在得到差值后还除以对应的均值,使得颜色变化幅值更加准确。
在计算得到每个待选色块的颜色变化幅值后,可以选择最小的颜色变化幅值所对应的待选色块作为标准色块,由此,标准色块中各个位置之间的颜色相同或者近似相同,每种普通像素的多个普通像素之间的像素值接近相同,在后续步骤中计算得到的每种普通像素的像素调整系数更加精确。
请参阅图31,在某些实施方式中,普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器A、仅允许第二颜色的光线通过的第二颜色普通滤光器B、及仅允许第三颜色的光线通过的第三颜色普通滤光器C,多个普通像素至少包括与第一颜色普通滤光器对应第一颜色普通像素R、与第二颜色普通滤光器对应的第二颜色普通像素G、及与第三颜色普通滤光器对应第三颜色普通像素B,步骤0121包括步骤:
1211:计算每个待选色块中第一颜色普通像素R的像素值的第一颜色均值、第二颜色普通像素G的像素值的第二颜色均值、第三颜色普通像素B的像素值的第三颜色均值。
步骤0122包括步骤:
1221:根据每个待选色块中的每个第一颜色普通像素R的像素值、每个第二颜色普通像素G的像素值、每个第三颜色普通像素B的像素值、第一颜色均值、第二颜色均值、第三颜色均值,计算每个第一色块C的颜色变化幅值。
具体地,本实施例中,请结合图19和图20,以第一颜色普通像素、第二颜色普通像素和第三颜色普通像素分别为R(红色)、G(绿色)、B(蓝色)进行示例性说明。需要说明的是,第一颜色普通像素、第二颜色普通像素和第三颜色普通像素并不限于R、G、B,还可以是R、Y(黄色)、B,或者其他的三种颜色,在此不一一列举。并且,普通像素还可包括第四颜色普通像素,例如W(白色),普通像素还可包括第五颜色普通像素、第六颜色普通像素、第七颜色普通像素等。
待选色块中可以包括多个第一颜色普通像素R、多个第二颜色普通像素G、多个第三颜色普通像素B。首先,针对待选色块而言,可以计算其中的多个第一颜色普通像素R的第一颜色均值Rave、计算其中的多个第二颜色普通像素G的第二颜色均值Gave和计算其中的多个第三颜色普通像素B的第一颜色均值Bave。然后可以计算每个第一颜色普通像素R的像素值和第一颜色普通像素R的第一颜色均值Rave之间的像素差值R1,将每个第一颜色普通像素R的像素差值R1除以第一颜色均值Rave得到R2,可以对R2进行平方得到每个第一颜色普通像素R的颜色相对值R3,将所有的第一颜色普通像素R的颜色相对值R3进行求和可以得到第一颜色普通像素R的颜色变化幅度ΔR。具体的计算公式可以如下:
Figure BDA0003111126500000111
其中,
Figure BDA0003111126500000112
Rij表示待选色块中第i行第j列的第一颜色普通像素R的像素值,w,h分别表示待选色块的宽和高。
进一步地,第二颜色普通像素G的颜色变化幅值ΔG及第三颜色普通像素B的颜色变化幅值ΔG的计算过程和第一颜色普通像素R的颜色变化幅值ΔR相同,在此不做详细描述。
ΔG的计算公式为:
Figure BDA0003111126500000113
其中,
Figure BDA0003111126500000114
Gij表示待选色块中第i行第j列的第二颜色普通像素G的像素值,Gave为第二颜色普通像素的像素值的像素均值,w,h分别表示待选色块的宽和高。
ΔB的计算公式为:
Figure BDA0003111126500000115
其中,
Figure BDA0003111126500000116
Bij表示待选色块中第i行第j列的第三颜色普通像素B的像素值,Bave为第二颜色普通像素的像素值的像素均值,w,h分别表示待选色块的宽和高。
进一步地,待选色块的颜色变化幅值ΔRGB=ΔR+ΔG+ΔB,即,
Figure BDA0003111126500000117
Figure BDA0003111126500000118
或者,
Figure BDA0003111126500000119
因此,本实施例可以计算得到每个待选色块的颜色变化幅值ΔRGB,以便于可以根据颜色变化幅值ΔRGB选取标准色块。
当然,在其他一些实施例中,可以计算每个第一颜色普通像素R的像素值和第一颜色普通像素R的第一颜色均值Rave之间的像素差值R1,然后对多个像素差值R1求和得到第一颜色普通像素R的颜色变化幅度ΔR。计算每个第二颜色普通像素G的像素值和第二颜色普通像素G的像素值的第二颜色均值Gave之间的像素差值G1,然后对多个像素差值G1求和得到第二颜色普通像素G的颜色变化幅度ΔG。计算每个第三颜色普通像素B的像素值和第三颜色普通像素B的第三颜色均值Bave之间的像素差值B1,然后对多个像素差值B1求和得到第三颜色普通像素B的颜色变化幅度ΔB。
在其他一些实施方式中,可以根据每个第一颜色普通像素R的像素值和第一颜色普通像素R的第一颜色均值Rave计算第一颜色普通像素R的方差,将得到第一颜色普通像素R的方差作为第一颜色普通像素R的颜色变化幅度ΔR。根据每个第二颜色普通像素G的像素值和第二颜色普通像素G的像素值的第二颜色均值Gave计算第二颜色普通像素G的方差,将得到第二颜色普通像素G的方差作为第二颜色普通像素G的颜色变化幅度ΔG。根据每个第三颜色普通像素B的像素值和第三颜色普通像素B的第三颜色均值Bave计算第三颜色普通像素B的方差,将得到的第三颜色普通像素B的方差作为第三颜色普通像素B的颜色变化幅度ΔB。
请参阅图32,在某些实施方式中,步骤0121还可包括以下步骤:
1212:在每个待选色块中,去除每种普通像素中像素值大于第一预定数值的普通像素;及
1213:根据余下的普通像素计算每种普通像素的像素值的第一均值。
具体地,如果一个像素接近于饱和或者已经饱和了,则无法知道其真正的颜色。例如,黄色光源,在非常亮时,其RGB三种像素都接近饱和或者饱和时,则R≈/=G≈/=B,则在图像中将表现为白色。因为计算每个待选色块的颜色变化幅值是为了寻找颜色相同或者颜色变化较小的色块,如果以接近饱和或者已经饱和的像素选取标准色块的话,由于不知道其实际的颜色无法找到符合预期的标准色块。
因此,需要在每个待选色块中,去除掉每种普通像素中的异常像素,即,像素值大于或等于第一预定数值的像素。其中,第一预定数值可以根据像素格式的位数确定,例如像素为8位时,则第一预定数值可以为250、251、252、253、254、255等数值;像素为10位时,则第一预定数值可以为1020、1021、1022、1023等数值。当像素的像素值大于或等于第一预定数值时,则可以认为该像素已经饱和或接近饱和,需要去除这个像素。然后根据余下的每种普通像素计算每种普通像素的第一均值。
更具体地,在某些实施方式中,在每个待选色块中,去除每种普通像素中像素值大于第一预定数值的普通像素,可包括以下步骤:
在每个待选色块中,去除第一颜色普通像素R中像素值大于或等于第一预定数值的第一颜色普通像素R、去除第二颜色普通像素G中像素值大于或等于第一预定数值的第二颜色普通像素G、去除第三颜色普通像素B中像素值大于或等于第一预定数值的第三颜色普通像素B;及
根据余下的第一颜色普通像素R计算第一颜色普通像素R的像素值的第一颜色均值、根据余下的第二颜色普通像素G计算第二颜色普通像素G的像素值的第二颜色均值和根据余下的第三颜色普通像素B计算第三颜色普通像素B的像素值的第三颜色均值。
例如,请结合图19,在每个待选色块(即第一色块C)中,有3个第一颜色普通像素R、6个第二颜色普通像素G、3个第三颜色普通像素B。如果3个第一颜色普通像素R的像素值均小于第一预定数值,则根据3个第一颜色普通像素R的像素值计算第一颜色均值,如果1个第一颜色普通像素R的像素值大于或等于第一预定数值,则根据余下的2个第一颜色普通像素R的像素值计算第一颜色均值。如果6个第二颜色普通像素G的像素值均小于第一预定数值,则根据6个第二颜色普通像素G的像素值计算第二颜色均值,如果1个第二颜色普通像素G的像素值大于或等于第一预定数值,则根据余下的5个第二颜色普通像素G的像素值计算第二颜色均值。如果3个第三颜色普通像素B的像素值均小于第一预定数值,则根据3个第三颜色普通像素B的像素值计算第三颜色均值,如果1个第三颜色普通像素B的像素值大于或等于第三预定数值,则根据余下的2个第三颜色普通像素B的像素值计算第三颜色均值。
请参阅图33,在某些实施方式中,步骤011可包括以下步骤:
0111:在第一色块C中的像素值大于第一预定数值的普通像素的数目大于第一预定数量时,查看该第一色块C中抗干扰像素周围预设范围内的普通像素的像素值;及
0112:若预设范围内的普通像素的像素值大于第一预定数值的普通像素的数量大于第二预定数量,且预设范围内的普通像素的像素值的均值大于第二预定数值时,剔除第一色块C,并将剔除后的第一色块C作为待选色块。
具体地,比较第一色块C中的每个普通像素的像素值与第一预定数值之间的大小关系,并累计第一色块C中像素值大于第一预定数值的普通像素的数量。如果第一色块C中像素值大于第一预定数值的普通像素的数量小于第一预定数量时,则该第一色块C可以作为待选色块。如果第一色块C中像素值大于第一预定数值的普通像素的数量大于或等于第一预定数量时,则查看该第一色块C中的抗干扰像素周围预设范围内的普通像素的像素值,例如,预设范围可以是往第一色块C中抗干扰像素的左侧、右侧、上侧、下侧中的至少一侧扩大的范围,预设范围内的普通像素的数量将大于第一色块C中普通像素的数量。请结合图19,在第一色块C2中的像素值大于第一预定数值的普通像素的数量大于或等于第一预定数量,则可查看抗干扰像素周围两圈(左右侧各两列、上下侧各两行)的普通像素的像素值,即,查看图19中的色块F中的普通像素的像素值。
进一步地,判断该预设范围内普通像素的像素值大于第一预定数值的普通像素的数量,如果该预设范围内普通像素的像素值大于第一预定数值的普通像素的数量小于第二预定数量,则可以选取该第一色块C作为待选色块;如果该预设范围内普通像素的像素值大于第一预定数值的普通像素的数量大于第二预定数量,则进一步计算该预设范围内的普通像素的像素值的均值,并判断该均值是否大于第二预定数值,第二预定数值小于第一预定数值,如果该均值小于第二预定数值,则可以选取该第一色块C作为待选色块;如果该均值大于或等于第二预定数值,则可认为该区域的存在过曝现象,因此剔除该第一色块C。由此,可以避免从待选色块中选取到的标准色块不符合实际预期而导致得到的目标图像失真。
例如,继续结合图19,如果图19中色块F中的普通像素的像素值大于第一预定数值的普通像素的数量大于第二预定数量,且色块F中的普通像素的像素值的均值大于第二预定数值,则认为色块F存在过曝现象,则剔除第一色块C2。如果图19中色块F中的普通像素的像素值大于第一预定数值的普通像素的数量大于第二预定数量,且色块F中的普通像素的像素值的均值小于第二预定数值,则可以选取第一色块C2作为待选色块。
请参阅图34,在某些实施方式中,抗干扰像素包括多种不同颜色的抗干扰像素,多种抗干扰像素分别对应多种普通像素,每个抗干扰像素接收的光线颜色与至少一个普通像素接收的光线颜色一致,步骤02可包括以下步骤:
021:计算标准色块中每种普通像素的像素值的第二均值;及
022:根据每种抗干扰像素的像素值和对应的普通像素的像素值的第二均值,计算每种普通像素的像素调整系数。
具体地,本申请一个实施方式中,多种抗干扰像素和多种普通像素可一一对应,“一一对应”是指抗干扰像素和普通像素的颜色种类对应,例如若当前图像中仅存在第一颜色普通像素(例如R、G或B),则抗干扰像素仅存在第一颜色抗干扰像素(例如RL、GL或BL);若当前图像中存在第一颜色普通像素和第二颜色普通像素,则抗干扰像素则存在第一颜色抗干扰像素和第二颜色抗干扰像素;若当前图像中存在第一颜色普通像素、第二颜色普通像素、和第三颜色普通像素,则抗干扰像素则存在第一颜色抗干扰像素、第二颜色抗干扰像素、和第三颜色抗干扰像素。
一个标准色块中可包括多种普通像素,每种普通像素的数量可为多个,需计算标准色块中每种普通像素的第二均值,第二均值可以表征该标准色块中该种普通像素的像素值。然后根据标准色块中每种抗干扰像素的像素值和对应的普通像素的像素值的第二均值,计算每种普通像素的像素调整系数,例如,将抗干扰像素的像素值除以对应的普通像素的像素值的第二均值得到普通像素的像素调整系数。其中,在标准色块中存在一种抗干扰像素的数量为多个时,则需计算该多个抗干扰像素的均值,然后根据该均值和与该抗干扰像素对应的普通像素的第二均值,计算该种普通像素的像素调整系数。本实施方式中,根据每种普通像素的像素值的均值和每种抗干扰像素的像素值计算每种普通像素的像素调整系数,便于根据像素调整系数对初始图像进行处理。同时,以每种普通像素的像素值的均值作为基准,避免了以单个普通像素的像素值作为基准导致偏差较大的情况。
更具体地,请结合图19,本实施例以多种抗干扰像素分别为第一颜色抗干扰像素RL、第二颜色抗干扰像素GL和第三颜色抗干扰像素BL为例进行示例性说明,第一颜色抗干扰像素RL、第二颜色抗干扰像素GL和第三颜色抗干扰像素BL分别由上述实施方式中的穿过第一颜色抗干扰滤光器、第二颜色抗干扰滤光器和第三颜色抗干扰滤光器的光线生成,第一颜色抗干扰像素RL和第一颜色普通像素R对应,第二颜色抗干扰像素GL和第二颜色普通像素G对应,第三颜色抗干扰像素BL和第三颜色普通像素B对应。
在标准色块中,第一颜色抗干扰像素RL、第二颜色抗干扰像素GL和第三颜色抗干扰像素BL的数量分别为一个、两个和一个。计算第一颜色普通像素R的第一像素调整系数KR=RL/Rave。计算第二颜色普通像素G的第二像素调整系数KG时,则需计算两个第二颜色抗干扰颜色像素的像素值的均值GLave,然后计算第二像素调整系数KG=GLave/Gave。计算第三颜色普通像素B的第三像素调整系数KB=BL/Bave。在标准色块中,第一颜色抗干扰像素RL、第二颜色抗干扰像素GL和第三颜色抗干扰像素BL均只有一个时,则在计算对应的像素调整系数时,直接使用第一颜色抗干扰像素RL、第二颜色抗干扰像素GL和第三颜色抗干扰像素BL分别除以对应的第一颜色普通像素R的第二均值Rave、第二颜色普通像素G的第二均值Gave和第三普通像素B的第二均值Bave
当然,在本申请其他实施方式中,多种抗干扰像素和多种普通像素也可不一一对应,只要抗干扰像素的颜色种类与其中一种普通像素的颜色种类相同即可。例如,若初始图像中存在第一颜色普通像素、第二颜色普通像素、和第三颜色普通像素,则抗干扰像素可仅存在第一颜色抗干扰像素、第二颜色抗干扰像素、和第三颜色抗干扰像素中的任意一种或多种。若仅存在第一颜色抗干扰像素,则可以利用前述方式仅计算第一颜色普通像素R的第一像素调整系数KR=RL/Rave或KR=RLave/Rave;若仅存在第二颜色抗干扰像素,则可以利用前述方式仅计算第二颜色普通像素G的第二像素调整系数KG=GL/Gave或KG=GLave/Gave;若仅存在第三颜色抗干扰像素,则可以利用前述方式仅计算第三颜色普通像素B的第三像素调整系数KB=BL/Bave或KB=BLave/Bave;若存在第一颜色抗干扰像素和第二颜色抗干扰像素,则可以利用前述方式计算第一颜色普通像素R的第一像素调整系数KR=RL/Rave或KR=RLave/Rave、及计算第二颜色普通像素G的第二像素调整系数KG=GL/Gave或KG=GLave/Gave,另外的组合情形依此类推,在此不一一列举。
进一步地,请参阅图35,在某些实施方式中,步骤03包括以下步骤:
031:依据初始图像中的每个普通像素的像素值与对应的像素调整系数,计算每个普通像素的像素新值;及
032:以计算后的像素新值更新初始图像,以得到目标图像。
具体地,在步骤02中得到了每种普通像素对应的像素调整系数,为了对初始图像进行处理,需对初始图像中的普通像素的像素值进行更新,以得到目标图像。例如,可以将初始图像中的每个普通像素的像素值乘以与该普通像素对应的像素调整系数,分别得到每个普通像素的像素新值,然后将初始图像中的普通像素全部更新为对应的像素新值,从而可以得到目标图像。如此,目标图像中每个像素均不含干扰信息或者干扰信息较少,使得目标图像的美感更好,拍摄到的图像没有人工光源的干扰,不会发黄且比较通透。
在步骤022中得到了每种普通像素对应的像素调整系数,如继续以多种普通像素分别为第一颜色普通像素R、第二颜色普通像素G和第三颜色普通像素B为例进行说明。在步骤022中分别得到了第一颜色普通像素R、第二颜色普通像素G和第三颜色普通像素B所对应的第一像素调整系数KR、第二像素调整系数KG和第三像素调整系数KB。进而可以将初始图像中的每个第一颜色普通像素R的像素值R乘以第一像素调整系数KR得到每个第一颜色普通像素R的像素新值R新值,即,R新值=R*KR。将初始图像中的每个第二颜色普通像素G的像素值G乘以第二像素调整系数KG得到每个第二颜色普通像素G的像素新值G新值,即,G新值=G*KG。将初始图像中的每个第三颜色普通像素B的像素值B乘以第三像素调整系数KB得到每个第三颜色普通像素B的像素新值B新值,即,B新值=B*KB。然后将初始图像中的每个第一颜色普通像素、第二颜色普通像素和第三颜色普通像素的像素值均更新为所对应的像素新值,更新后的图像即为目标图像。
需要说明的是,若初始图像中存在第一颜色普通像素R、第二颜色普通像素G、和第三颜色普通像素B,但仅存在第一颜色抗干扰像素,则可以仅将初始图像中的每个第一颜色普通像素R的像素值R乘以第一像素调整系数KR得到每个第一颜色普通像素R的像素新值R新值,即,R新值=R*KR,而第二颜色普通像素G和第三颜色普通像素B的像素值可不做调整。若初始图像中存在第一颜色抗干扰像素和第二颜色抗干扰像素,则可以仅将初始图像中的每个第一颜色普通像素R的像素值R乘以第一像素调整系数KR得到每个第一颜色普通像素R的像素新值R新值,即,R新值=R*KR;及将初始图像中的每个第二颜色普通像素G的像素值G乘以第二像素调整系数KG得到每个第二颜色普通像素G的像素新值G新值,即,G新值=G*KG。而第三颜色普通像素B的像素值可不做调整。换句话说,本申请的图像处理方法包含:若存在哪种抗干扰像素,则可采用上述方式对与该种抗干扰像素对应的普通像素做像素值更新的操作。
请参阅图36,在某些实施方式中,图像处理方法还可包括以下步骤:
04:根据初始图像中的普通像素的亮度值和目标图像的普通像素的亮度值,计算亮度调整系数;和
05:根据亮度调整系数,调整目标图像中的所有像素的亮度。
由于抗干扰像素是由穿过对应的抗干扰滤光器的光线生成的,而抗干扰滤光器由于相较于普通滤光器多滤除了干扰信息,则抗干扰像素的亮度将会低于普通像素的亮度,然而目标图像是由初始图像中的普通像素和像素调整系数得到的,则目标图像将会比初始图像暗,需要调整目标图像的亮度以使目标图像的图像质量更好。
具体地,由于初始图像和目标图像中的抗干扰像素的像素值相同,初始图像中普通像素的亮度值和目标图像的普通像素的亮度值存在差异,可以根据初始图像中普通像素的亮度值和目标图像的普通像素的亮度值,以确定目标图像和初始图像之间的亮度差异,进而可以对目标图像进行亮度补偿等处理,使得目标图像的亮度值增高。其中,图20中的R’、G’、B’分别表示目标图像中的普通像素。
其中,初始图像的普通像素的亮度值Ybefore=0.299*R值ave+0.587*G值ave+0.114*B值ave,其中,R值ave表示初始图像中所有的第一颜色普通像素R的像素值的均值,G值ave表示初始图像中所有的第二颜色普通像素G的像素值的均值,B值ave表示初始图像中所有的第三颜色普通像素B的像素值的均值。目标图像的普通像素的亮度值Yafter=0.299*R新值ave+0.587*G新值ave+0.114*B新值ave,其中,R新值ave表示目标图像中所有的第一颜色普通像素R’的像素值的均值,G新值ave表示目标图像中所有的第二颜色普通像素G’的像素值的均值,B新值ave表示目标图像中所有的第三颜色普通像素B’的像素值的均值。
进一步地,可根据Ybefore和Yafter计算亮度调整系数,亮度调整系数Gain=Ybefore/Yafter。进而可以将目标图像中的所有像素(包括普通像素和抗干扰像素)均乘以亮度调整系数Gain,使得目标图像中的所有像素的亮度均得到了提升,进而目标图像的亮度将会更高,目标图像的图像质量更好。
请一并参阅图2及图37,在某些实施方式中,图像处理方法还包括以下步骤:
001:通过图像传感器10获取原始图像,图像传感器10包括滤光器阵列11,滤光器阵列11包括多个滤光器1111,滤光器阵列11包括多个区域阵列110,每个区域阵列110包括多个子单元111,每个子单元111包括多个滤光器1111,每个区域阵列110均包括多个普通滤光器及至少一个抗干扰滤光器;在同一个区域阵列110中,多个普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器;及
002:划分原始图像中的目标区域及非目标区域,将目标区域作为初始图像。
请结合图1,具体地,本实施例中的图像传感器10和滤光器阵列11和上述任一实施方式中的图像传感器10和滤光器阵列11相同,则在本实施例中图像传感器10和滤光器阵列11的具体结构及内容在此不做赘述。通过图像传感器10可以获取到原始图像,原始图像可以是用户通过终端拍摄到的原始图像。然而,部分用户可能只想对原始图像中的感兴趣区域执行上述实施方式的步骤01、步骤02和步骤03,对原始图像中的不感兴趣区域不执行步骤01、步骤02和步骤03。
因此,在某些实施方式中,可以识别原始图像中的目标区域和非目标区域,然后划分原始图像中的目标区域和非目标区域,例如可以通过图像分割算法将原始图像中的目标区域和非目标区域分割开,然后将目标区域作为初始图像,然后执行步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤。对于原始图像中的非目标区域可不做处理,或只做简单的处理,例如将非目标区域中的抗干扰像素以周围相对于的普通像素的像素值替代等。其中,目标区域可以为用户的感兴趣区域或者容易被干扰信息干扰的区域,例如,目标区域可以是天空、云朵、湖水、人物等区域。
进一步地,请参阅图38,在某些实施方式中,所述图像处理方法还包括以下步骤:
003:将原始图像中的非目标区域作为待处理图像;和
004:融合目标图像与待处理图像以获取融合图像。
具体地,在步骤002后对初始图像执行上述实施方式中的步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤后可以得到目标图像,然而如果只将目标图像呈现给用户,那么图像将不完整。因此,需要将目标图像和原始图像中的非目标区域(即待处理图像)的进行融合,例如,使得目标图像和待处理图像可以拼接在一起,进而呈现给用户的融合图像更加完整。当然,也可以对原始图像中的非目标区域进行简单的图像处理后作为待处理图像,例如将非目标区域中的抗干扰像素以周围相对于的普通像素的像素值或者像素均值替代等,以避免抗干扰像素对非目标区域的影响(例如亮度下降)。
更具体地,可识别目标图像和待处理图像的边界点的坐标,然后根据目标图像的边界点坐标和待处理图像的边界点坐标将目标图像和待处理图像进行融合得到融合图像。或者,也可以在划分原始图像中的目标区域和非目标区域时,识别目标区域和非目标区域的分割点,然后根据分割点将目标图像和待处理图像进行融合得到融合图像。如此,最终呈现给用户的融合图像中既包括了用户想进行抗干扰处理并进行了抗扰干处理的目标区域和用户不想进行抗干扰处理并没有进行了抗扰干处理的非目标区域。
请参阅图39,在某些实施方式中,图像处理方法还包括以下步骤:
001:通过图像传感器10获取原始图像,图像传感器10包括滤光器阵列11,滤光器阵列11包括多个滤光器1111,滤光器阵列11包括多个区域阵列110,每个区域阵列110包括多个子单元111,每个子单元111包括多个滤光器1111,每个区域阵列110均包括多个普通滤光器及至少一个抗干扰滤光器;在同一个区域阵列110中,多个普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器;及
005:将原始图像作为初始图像。
具体地,在某些实施方式中,用户想对整张原始图像进行抗干扰处理(即,执行上述实施方式中的步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤),则只需将原始图像作为初始图像即可,而无需对原始图像进行划分目标区域和非目标区域。如此,整张原始图像均进行了抗干扰处理,图像更加清晰。
进一步地,可以识别原始图像中的场景信息,然后根据识别到的场景信息选择执行步骤005还是执行步骤002、步骤003和步骤004。例如,在识别到原始图像中的所有区域均为感兴趣区域(例如天空)时,则执行步骤005。再例如,识别到原始图像中的所有区域部分为感兴趣区域(例如天空)时,部分为不感兴趣区域(例如大地),则执行步骤002、步骤003和步骤004。又例如,识别到原始图像中的感兴趣区域(例如天空)的比例大于或等于预设比例(例如80%、90%)时,则执行步骤005;识别到原始图像中的感兴趣区域(例如天空)的比例小于预设比例时,则执行步骤002、步骤003和步骤004。
请参阅图40,在某些实施方式中,图像处理方法还包括以下步骤:
006:在接收到图像抗干扰指令时,执行按照预定规则从初始图像中的多个第一色块C中选取一个作为标准色块,根据标准色块中的抗干扰像素的像素值和普通像素的像素值,计算调整系数,及根据调整系数对初始图像进行处理,以获得目标图像;
007:在未接收到图像抗干扰指令时,对初始图像中的抗干扰像素进行插值处理,以获取目标图像。
具体地,在确定是否执行上述实施方式中的图像处理方法时,需要判断是否接收到图像抗干扰指令。在有些时候用户不想对拍摄到的图像进行抗干扰处理,即,在未接收到图像抗干扰指令时,则无需对初始图像执行上述实施方式中的步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤,然而,由于图像传感器10中包括抗干扰滤光器,则生成的图像包括抗干扰像素,为了避免抗干扰像素对图像造成的影响,需要初始图像中的抗干扰像素进行插值处理,然后可生成目标图像。其中,对初始图像中的抗干扰像素进行插值处理可包括:使用抗干扰像素周围一定范围内的相对应的普通像素的像素值的均值替代抗干扰像素的像素值,例如,用第一颜色抗干扰像素RL周围预设范围第一颜色普通像素R的均值替代第一颜色抗干扰像素RL的像素值。或者,对初始图像中的抗干扰像素进行插值处理可包括:用最接近抗干扰像素的普通像素的像素值替代抗干扰像素的像素值。当然,还可通过线性插值等方式计算抗干扰像素的像素值。在此不一一列举。
在有些时候用户想对拍摄到的图像进行抗干扰处理,即,在接收到图像抗干扰指令时,则对初始图像执行上述实施方式中的步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤,然后得到目标图像。
进一步地,在一些实施方式中,在图像传感器10获取原始图像的时间处于日落时间段内,可视为接收到抗干扰指令。其中,图像传感器10获取原始图像的时间可为用户拍摄的时间,日落时间可为终端内的应用程序发送的日落时间,例如,天气程序内所记载的日落时间。或者,日落时间也可为固定值,例如19:00、18:30等。或者,日落时间也可根据当前所处的季节调节,例如冬季日落时间较早、春季和秋季日落时间稍晚、夏季日落时间更晚。并且,当处于日落时间段内时,拍摄时已经处于晚上,拍摄的场景为夜景,然而夜景中城市光源较多,容易导致拍摄到的图像发黄、不通透,因此,在获取原始图像的时间处于日落时间段内,需对原始图像进行抗干扰处理,提升图像质量。
在另一些实施方式中,在图像传感器10获取原始图像时的环境亮度小于预设亮度,也视为接收到图像抗干扰指令。图像传感器10获取原始图像时的环境亮度可以是由光线传感器检测到的环境亮度、也可以是图像传感器10根据接收到的光线检测到的环境亮度。在环境亮度小于预设亮度时,则可以认为处于晚上,此时城市光源较多,容易导致拍摄到的图像发黄、不通透,因此,在图像传感器10获取原始图像时的环境亮度小于预设亮度时,需对原始图像进行抗干扰处理,提升图像质量。其中,预设亮度可为固定值,预设亮度也可为预定时刻(例如19:00)时的环境亮度。
在又一些实施方式中,在抗干扰按键开启时,也可视为接收到图像抗干扰指令。抗干扰按键可为实体按键、也可为虚拟按键,例如终端的拍摄界面或者预览界面可悬浮一个抗干扰按键,用户可触控该抗干扰按键实现开关抗干扰按键。或者,终端的设置界面可包括抗干扰按键,用户可根据需求选择性地开启或关闭抗干扰按键。在抗干扰按键开启时,则表明需对图像进行抗干扰处理,则认为接收到图像抗干扰指令。
需要说明的是,上述任一实施方式中所述的抗干扰处理包括对初始图像执行上述实施方式中的步骤01、步骤02和步骤03,以及步骤01、步骤02和步骤03分别所包括的子步骤。进一步地,抗干扰处理还可包括步骤04和步骤05。
请参阅图41,在某些实施方式中,本申请的图像传感器10还可包括处理电路14,处理电路14可以用于实现上述任一实施方式的图像处理方法。例如,处理电路14可以用于实现步骤01、步骤011、步骤0111、步骤0112、步骤012、步骤0121、步骤1211、步骤1212、步骤1213、步骤0122、步骤1221、步骤0123、步骤013、步骤014、步骤02、步骤021、步骤022、步骤03、步骤031、步骤032、步骤04、步骤05、步骤001、步骤002、步骤003、步骤004、步骤005、步骤006、步骤007中的一个步骤或者多个步骤。
请参阅图42,本申请还提供了一种成像装置100,成像装置100可包括上述任一实施方式所述的图像传感器10及处理器20,处理器20可以与图像传感器10连接,以对图像传感器10输出的图像进行进一步地处理。
请参阅图42,在某些实施方式中,成像装置100的处理器20可以用于实现上述任一实施方式的图像处理方法。例如,处理器20可以用于实现步骤01、步骤011、步骤0111、步骤0112、步骤012、步骤0121、步骤1211、步骤1212、步骤1213、步骤0122、步骤1221、步骤0123、步骤013、步骤014、步骤02、步骤021、步骤022、步骤03、步骤031、步骤032、步骤04、步骤05、步骤001、步骤002、步骤003、步骤004、步骤005、步骤006、步骤007中的一个步骤或者多个步骤。
请参阅图43,在某些实施方式中,本申请还提供了一种电子设备1000,电子设备可包括上述任一实施方式的图像传感器10。图像传感器10可安装于电子设备1000的壳体内,并可与电子设备1000的主板连接。
请参阅图43,在某些实施方式中,本申请还提供了一种电子设备1000,电子设备1000可包括上述任一实施方式的成像装置100。成像装置100可安装于电子设备1000的壳体内,并可与电子设备1000的主板连接,成像装置1000可以用于成像。
请参阅图43,在某些实施方式中,本申请还提供了一种电子设备1000,电子设备可包括处理器200。处理器200可以用于实现上述任一实施方式的图像处理方法。例如,处理器200可以用于实现步骤01、步骤011、步骤0111、步骤0112、步骤012、步骤0121、步骤1211、步骤1212、步骤1213、步骤0122、步骤1221、步骤0123、步骤013、步骤014、步骤02、步骤021、步骤022、步骤03、步骤031、步骤032、步骤04、步骤05、步骤001、步骤002、步骤003、步骤004、步骤005、步骤006、步骤007中的一个步骤或者多个步骤。
需要说明的是,上述实施方式中所述的电子设备1000具体可以为可以是手机、平板电脑、笔记本电脑、智能手表、智能手环、智能头盔、智能眼镜、无人设备(例如无人机、无人车、无人船)等,在此不一一列举。
在本说明书的描述中,参考术语“某些实施方式”、“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个所述特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个,除非另有明确具体的限定。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型,本申请的范围由权利要求及其等同物限定。

Claims (26)

1.一种滤光器阵列,其特征在于,包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个普通滤光器及至少一个抗干扰滤光器,每个所述普通滤光器仅允许一种颜色的光线通过,每个所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器。
2.根据权利要求1所述的滤光器阵列,其特征在于,所述抗干扰滤光器包括第一颜色抗干扰滤光器、第二颜色抗干扰滤光器、及第三颜色抗干扰滤光器中的至少一个;所述第一颜色抗干扰滤光器仅允许第一颜色的光线通过,并能滤除第一颜色光线中的干扰信息;所述第二颜色抗干扰滤光器仅允许第二颜色的光线通过,并能滤除第二颜色光线中的干扰信息;所述第三颜色抗干扰滤光器仅允许第三颜色的光线通过,并能滤除第三颜色光线中的干扰信息。
3.根据权利要求2所述的滤光器阵列,其特征在于,所述抗干扰滤光器包括所述第一颜色抗干扰滤光器、所述第二颜色抗干扰滤光器、及第三颜色抗干扰滤光器中的至少两种;在同一个所述区域阵列中,多个所述抗干扰滤光器分布于不同的所述子单元中。
4.根据权利要求2所述的滤光器阵列,其特征在于,所述抗干扰滤光器包括所述第一颜色抗干扰滤光器、所述第二颜色抗干扰滤光器、及第三颜色抗干扰滤光器中的至少两种;在同一个所述区域阵列中,至少两个所述抗干扰滤光器分布于同一个所述子单元中。
5.根据权利要求2所述的滤光器阵列,其特征在于,所述抗干扰滤光器包括所述第一颜色抗干扰滤光器、所述第二颜色抗干扰滤光器、及第三颜色抗干扰滤光器中的至少两种;在同一个所述区域阵列中,
多种所述抗干扰滤光器两两相邻;或
至少两种所述抗干扰滤光器是相互间隔的。
6.根据权利要求1所述的滤光器阵列,其特征在于,在所述滤光器阵列中,多个所述区域阵列中的所述抗干扰滤光器的分布完全相同;或,至少两个不同的所述区域阵列中的所述抗干扰滤光器的分布不同。
7.根据权利要求1-6任意一项所述的滤光器阵列,其特征在于,每个所述区域阵列包括2n*2n个所述子单元,n≥1,所述子单元包括2*2个所述滤光器。
8.根据权利要求1-3及5-6任意一项所述的滤光器阵列,其特征在于,每个所述子单元包括M*M个所述滤光器,其中,M≥2,同一个所述子单元中的所述滤光器允许通过的光线的颜色相同。
9.根据权利要求1-6任意一项所述的滤光器阵列,其特征在于,每个所述子单元包括多个孙单元,每个所述孙单元包括K*K个所述滤光器,其中,K≥2,同一个所述孙单元中的所述滤光器允许通过的光线的颜色相同。
10.根据权利要求1-6任意一项所述的滤光器阵列,其特征在于,所述第一颜色为红色、所述第二颜色为绿色、所述第三颜色为蓝色;或,所述第一颜色为红色、所述第二颜色为黄色、所述第三颜色为蓝色。
11.一种图像处理方法,其特征在于,所述图像处理方法包括:
按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,所述第一色块由抗干扰像素和普通像素形成,所述抗干扰像素与抗干扰滤光器对应,所述普通像素与普通滤光器对应,所述普通滤光器仅允许一种颜色的光线通过,所述抗干扰滤光器仅允许一种颜色的光线通过,并能滤除该颜色光线中的干扰信息,每个所述抗干扰滤光器允许通过的光线颜色与至少一个所述普通滤光器允许通过的光线颜色一致;
根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数;及
根据所述像素调整系数对所述初始图像进行处理,以获得目标图像。
12.根据权利要求1所述的图像处理方法,其特征在于,所述按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,包括:
从多个所述第一色块中获取待选色块;
从所述待选色块中选取一个颜色变化幅值最小的待选色块,以作为所述标准色块;或
从所述待选色块中筛选出颜色变化幅值小于预定阈值的待选色块;
从颜色变化幅值小于预定阈值的待选色块中任选一个作为所述标准色块。
13.根据权利要求12所述的图像处理方法,其特征在于,多个所述普通像素包括多种不同颜色的普通像素,所述从所待选色块中选取一个颜色变化幅值最小的第一色块,以作为所述标准色块,包括:
计算每个所述待选色块中每种所述普通像素的像素值的第一均值;
根据每种所述普通像素的像素值和该种所述普通像素的所述第一均值,计算每个所述待选色块的颜色变化幅值;及
选择最小的所述颜色变化幅值所对应的所述待选色块作为所述标准色块。
14.根据权利要求13所述的图像处理方法,其特征在于,所述计算每个所述待选色块中每种所述普通像素的像素值的第一均值,包括:
在每个所述待选色块中,去除每种所述普通像素中像素值大于预定数值的普通像素;及
根据余下的所述普通像素计算每种所述普通像素的像素值的所述第一均值。
15.根据权利要求12所述的图像处理方法,其特征在于,所述从多个所述第一色块中获取待选色块,包括:
在所述第一色块中的像素值大于第一预定数值的所述普通像素的数目大于第一预定数量时,查看该所述第一色块中所述抗干扰像素周围预设范围内的所述普通像素的像素值;及
若所述预设范围内的所述普通像素的像素值大于所述第一预定数值的所述普通像素的数量大于第二预定数量,且所述预设范围内的所述普通像素的像素值的均值大于第二预定数值时,剔除所述第一色块,并将剔除后的所述第一色块作为所述待选色块。
16.根据权利要求11所述的图像处理方法,其特征在于,多个所述抗干扰像素包括多种不同颜色的抗干扰像素,每个所述抗干扰像素接收的光线颜色与至少一个所述普通像素接收的光线颜色一致,所述根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算像素调整系数,包括:
计算所述标准色块中每种所述普通像素的像素值的第二均值;及
根据每种所述抗干扰像素的像素值和对应的所述普通像素的像素值的所述第二均值,计算每种所述普通像素的像素调整系数。
17.根据权利要求11所述的图像处理方法,其特征在于,所述根据所述调整系数对所述初始图像进行处理,以获得目标图像,包括:
依据所述初始图像中的每个所述普通像素的像素值与对应的所述像素调整系数,计算每个所述普通像素的像素新值;及
以计算后的所述像素新值更新所述初始图像,以得到所述目标图像。
18.根据权利要求11所述的图像处理方法,其特征在于,所述图像处理方法还包括:
根据所述初始图像中的所述普通像素的亮度值和所述目标图像的所述普通像素的亮度值,计算亮度调整系数;及
根据所述亮度调整系数,调整所述目标图像中的所有像素的亮度。
19.根据权利要求1所述的图像处理方法,其特征在于,所述图像处理方法还包括:
通过图像传感器获取原始图像,所述图像传感器包括滤光器阵列,所述滤光器阵列包括多个滤光器,所述滤光器阵列包括多个区域阵列,每个所述区域阵列包括多个子单元,每个所述子单元包括多个所述滤光器,每个所述区域阵列均包括多个所述普通滤光器及至少一个所述抗干扰滤光器;在同一个所述区域阵列中,多个所述普通滤光器至少包括仅允许第一颜色的光线通过的第一颜色普通滤光器、仅允许第二颜色的光线通过的第二颜色普通滤光器、及仅允许第三颜色的光线通过的第三颜色普通滤光器;及
划分所述原始图像中的目标区域及非目标区域,将所述目标区域作为所述初始图像;或
将所述原始图像作为所述初始图像。
20.根据权利要求19所述的图像处理方法,其特征在于,所述图像处理方法还包括:
将所述原始图像中的非目标区域作为待处理图像;和
融合所述目标图像与所述待处理图像以获取融合图像。
21.根据权利要求11所述的图像处理方法,其特征在于,所述图像处理方法还包括:
在接收到图像抗干扰指令时,执行按照预定规则从初始图像中的多个第一色块中选取一个作为标准色块,根据所述标准色块中的所述抗干扰像素的像素值和所述普通像素的像素值,计算调整系数,及根据所述调整系数对所述初始图像进行处理,以获得目标图像;
在未接收到图像抗干扰指令时,对所述初始图像中的所述抗干扰像素进行插值处理,以获取所述目标图像。
22.根据权利要求11所述的图像处理方法,其特征在于,
在图像传感器获取原始图像的时间处于日落时间段内,视为接收到图像抗干扰指令;和\或
在图像传感器获取原始图像时的环境亮度小于预设亮度,视为接收到图像抗干扰指令;和\或
在抗干扰按键开启时,视为接收到图像抗干扰指令。
23.一种图像传感器,其特征在于,所述图像传感器包括:
权利要求1-10任意一项所述的滤光器阵列;及
像素阵列,所述像素阵列包括多个像素点,每个所述像素点对应一个所述滤光器,所述像素点用于接收穿过对应的所述滤光器的光线以生成电信号。
24.根据权利要求23所述的图像传感器,其特征在于,所述图像传感器还包括处理电路,所述处理电路用于实现权利要求11-22任意一项所述的图像处理方法。
25.一种成像装置,其特征在于,包括:
权利要求23所述的图像传感器;及
处理器,所述处理器用于实现权利要求11-22任意一项所述的图像处理方法。
26.一种电子设备,其特征在于,
所述电子设备包括权利要求23或24所述的图像传感器;或
所述电子设备包括权利要求25所述的成像装置;或
所述电子设备包括处理器,所述处理器用于实现权利要求11-22任意一项所述的图像处理方法。
CN202110652154.9A 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端 Active CN113225470B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110652154.9A CN113225470B (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端
CN202310621701.6A CN116723377A (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110652154.9A CN113225470B (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202310621701.6A Division CN116723377A (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端

Publications (2)

Publication Number Publication Date
CN113225470A true CN113225470A (zh) 2021-08-06
CN113225470B CN113225470B (zh) 2023-06-30

Family

ID=77080586

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202310621701.6A Pending CN116723377A (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端
CN202110652154.9A Active CN113225470B (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202310621701.6A Pending CN116723377A (zh) 2021-06-10 2021-06-10 滤光器阵列、图像处理方法、图像传感器、成像装置及终端

Country Status (1)

Country Link
CN (2) CN116723377A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023028768A1 (zh) * 2021-08-30 2023-03-09 Oppo广东移动通信有限公司 滤光器阵列、方法、图像传感器、装置及电子设备
WO2023028767A1 (zh) * 2021-08-30 2023-03-09 Oppo广东移动通信有限公司 滤光器阵列、方法、图像传感器、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105451006A (zh) * 2014-09-19 2016-03-30 全视科技有限公司 彩色滤光器阵列、图像传感器以及用于减少光谱串扰的方法
CN105704463A (zh) * 2014-12-09 2016-06-22 意法半导体(R&D)有限公司 使用具有组合的rgb和ir感测的像素的图像传感器
CN111614917A (zh) * 2019-02-22 2020-09-01 半导体元件工业有限责任公司 具有风化检测像素的成像系统
US20210120196A1 (en) * 2019-10-17 2021-04-22 SK Hynix Inc. Image sensor

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105451006A (zh) * 2014-09-19 2016-03-30 全视科技有限公司 彩色滤光器阵列、图像传感器以及用于减少光谱串扰的方法
CN105704463A (zh) * 2014-12-09 2016-06-22 意法半导体(R&D)有限公司 使用具有组合的rgb和ir感测的像素的图像传感器
CN111614917A (zh) * 2019-02-22 2020-09-01 半导体元件工业有限责任公司 具有风化检测像素的成像系统
US20210120196A1 (en) * 2019-10-17 2021-04-22 SK Hynix Inc. Image sensor

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023028768A1 (zh) * 2021-08-30 2023-03-09 Oppo广东移动通信有限公司 滤光器阵列、方法、图像传感器、装置及电子设备
WO2023028767A1 (zh) * 2021-08-30 2023-03-09 Oppo广东移动通信有限公司 滤光器阵列、方法、图像传感器、装置及电子设备

Also Published As

Publication number Publication date
CN113225470B (zh) 2023-06-30
CN116723377A (zh) 2023-09-08

Similar Documents

Publication Publication Date Title
CN108965654B (zh) 基于单传感器的双光谱摄像机系统和图像处理方法
KR101002195B1 (ko) 노출 제어를 위한 시스템, 방법, 및 장치
US8803994B2 (en) Adaptive spatial sampling using an imaging assembly having a tunable spectral response
US10136107B2 (en) Imaging systems with visible light sensitive pixels and infrared light sensitive pixels
EP2642757B1 (en) Imaging systems with clear filter pixels
US9979941B2 (en) Imaging system using a lens unit with longitudinal chromatic aberrations and method of operating
US8818085B2 (en) Pattern conversion for interpolation
US7889207B2 (en) Image apparatus with image noise compensation
US10645268B2 (en) Image processing method and apparatus of terminal, and terminal
US8629919B2 (en) Image capture with identification of illuminant
CN111784605B (zh) 一种基于区域指导的图像降噪方法、计算机装置及计算机可读存储介质
CN113225470A (zh) 滤光器阵列、图像处理方法、图像传感器、成像装置及终端
US9066072B2 (en) Systems and methods for calibrating image sensors
WO2021016900A1 (zh) 一种图像传感器和图像感光的方法
CN104363434A (zh) 图像处理设备
CN115462066A (zh) 图像传感器和图像感光方法
US20120127301A1 (en) Adaptive spectral imaging by using an imaging assembly with tunable spectral sensitivities
US8482629B2 (en) Processing method for a relative illumination phenomenon on a digital image and associated processing system
CN107682611B (zh) 对焦的方法、装置、计算机可读存储介质和电子设备
CN107786857B (zh) 一种图像还原方法及装置
WO2007082289A2 (en) Color filter array with neutral elements and color image formation
KR100350789B1 (ko) 이미지 검색시스템의 분위기 칼라 자동추출 및 원래 칼라 조정방법
CN109300186B (zh) 图像处理方法和装置、存储介质、电子设备
US10937230B2 (en) Image processing
WO2005057278A1 (en) Method and device for capturing multiple images

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant