CN105306914B - 彩色影像传感器及其操作方法 - Google Patents

彩色影像传感器及其操作方法 Download PDF

Info

Publication number
CN105306914B
CN105306914B CN201510101425.6A CN201510101425A CN105306914B CN 105306914 B CN105306914 B CN 105306914B CN 201510101425 A CN201510101425 A CN 201510101425A CN 105306914 B CN105306914 B CN 105306914B
Authority
CN
China
Prior art keywords
pixel
detection signal
red
pixel region
green
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510101425.6A
Other languages
English (en)
Other versions
CN105306914A (zh
Inventor
林凯文文里
宋威昱
黎景贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pixart Imaging Inc
Original Assignee
Pixart Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pixart Imaging Inc filed Critical Pixart Imaging Inc
Priority to CN201810879121.6A priority Critical patent/CN109151412B/zh
Publication of CN105306914A publication Critical patent/CN105306914A/zh
Application granted granted Critical
Publication of CN105306914B publication Critical patent/CN105306914B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

一种彩色影像传感器，包含感测阵列及处理单元。所述感测阵列包含红色像素、绿色像素、蓝色像素、红绿色像素以及红蓝色像素，分别用于输出侦测信号。所述处理单元用于计算所述红色像素相对应的与所述红绿色像素相对应的所述侦测信号的信号差以作为红色侦测信号，计算所述绿色像素相对应的与所述红绿色像素相对应的所述侦测信号的信号差以作为绿色侦测信号，计算所述蓝色像素相对应的与所述红蓝色像素相对应的所述侦测信号的信号差以作为蓝色侦测信号。

Description

彩色影像传感器及其操作方法
技术领域
本发明涉及一种影像传感器，具体地，涉及一种可通过后处理以消除红外光成分影响的彩色影像传感器及其彩色滤光层配置与操作方法。
背景技术
公知的彩色影像传感器(color image sensor)中，影像感测阵列的各像素上分别覆盖有红色、绿色及蓝色彩色滤光层(color filter)，以使彩色滤光层下方的像素仅能感测特定光谱范围的能量。
例如，图1分别显示红色、绿色及蓝色彩色滤光层的归一化波长响应(normalizedwavelength response)。从图1中可清楚看出大约800纳米(nm)以上的红外光(IR light)仍能够穿过红色、绿色及蓝色彩色滤光层。由于像素是用于感测照射至其感测面的光能量，当其上方的彩色滤光层无法有效阻挡红外光时，各像素所输出的侦测信号则同时包含有红外光成分的光能量。例如，被红色彩色滤光层覆盖的像素的侦测信号同时包含了红光及红外光的光成分，被绿色彩色滤光层覆盖的像素的侦测信号同时包含了绿光及红外光的光成分，被蓝色彩色滤光层覆盖的像素的侦测信号同时包含了蓝光及红外光的光成分。尤其，当环境中另外存在红外光光源时，侦测信号中的红外光成分的能量有可能超过红、绿、蓝光成分的能量，则可能导致无法正确侦测各色光的情形。
上述红外光成分会在某些应用中产生明显的影响。例如，若想要根据红色光、绿色光及蓝色光的侦测信号重建环境光光谱(ambient light spectrum)时，可能会因红外光成分的存在而无法重建正确的波长响应。
发明内容
有鉴于此，本发明提出一种可克服上述公知的彩色影像传感器缺点的彩色影像传感器及其彩色滤光层配置与操作方法。
本发明的目的在于提供一种彩色影像传感器及其操作方法，其可通过后处理(post-processing)消除红外光成分以提高色彩感测的精确度及重建宽广的可见光响应(broad visible light response)。
本发明另一目的在于提供一种彩色影像传感器的彩色滤光层配置，其可同时实现手势辨识以及环境光侦测的功效。
本发明提供一种彩色影像传感器，其包含感测阵列及处理单元。所述感测阵列包含红色像素、绿色像素、蓝色像素、红绿色像素以及红蓝色像素，分别用于输出侦测信号。所述处理单元用于计算所述红色像素相对应的侦测信号与所述红绿色像素相对应的侦测信号的信号差以作为红色侦测信号，计算所述绿色像素相对应的侦测信号与所述红绿色像素相对应的侦测信号的信号差以作为绿色侦测信号，并计算所述蓝色像素相对应的侦测信号与所述红蓝色像素相对应的侦测信号的信号差以作为蓝色侦测信号。藉此，可建立红、绿、蓝色光的正确波长响应。
本发明还提供一种彩色影像传感器，其包含感测阵列以及多个红色滤光层、多个绿色滤光层、多个蓝色滤光层、多个红绿色滤光层以及多个红蓝色滤光层。所述感测阵列包含多个感测像素，分别输出侦测信号，其中所述多个感测像素被划分为至少两个像素区域且所述多个像素区域中每一者的所有感测像素的侦测信号用于形成侦测信号之和或平均侦测信号。所述多个红色滤光层、所述多个绿色滤光层、所述多个蓝色滤光层、所述多个红绿色滤光层以及所述多个红蓝色滤光层分别形成于所述多个感测像素上以形成多个红色像素、多个绿色像素、多个蓝色像素、多个红绿色像素以及多个红蓝色像素；其中，所述多个像素区域包含相同数目的所述红色像素、相同数目的所述绿色像素、相同数目的所述蓝色像素、相同数目的所述红绿色像素以及相同数目的所述红蓝色像素。藉此，使用此种彩色滤光层配置的彩色影像传感器可适用于手势辨识的应用。
本发明还提供一种彩色影像传感器的操作方法。所述彩色影像传感器的感测阵列包含至少一个红色像素、至少一个绿色像素、至少一个蓝色像素、至少一个红绿色像素以及至少一个红蓝色像素。所述操作方法包含下列步骤：利用所述感测阵列感光以使各感测像素分别输出侦测信号；利用处理单元计算所述红色像素相对应的侦测信号与所述红绿色像素相对应的侦测信号的信号差以作为红色侦测信号；利用所述处理单元计算所述绿色像素相对应的侦测信号与所述红绿色像素相对应的侦测信号的信号差以作为绿色侦测信号；以及利用所述处理单元计算所述蓝色像素相对应的侦测信号与所述红蓝色像素相对应的侦测信号的信号差以作为蓝色侦测信号。藉此，可建立红、绿、蓝色光的正确波长响应。
本发明还提供一种彩色影像传感器，其包含感测阵列以及多个第一颜色滤光层、多个第二颜色滤光层、多个第三颜色滤光层、多个第一滤光堆叠层以及多个第二滤光堆叠层。所述感测阵列包含多个感测像素，所述多个感测像素被划分为至少两个像素区域。所述多个第一颜色滤光层、所述多个第二颜色滤光层、所述多个第三颜色滤光层、所述多个第一滤光堆叠层以及所述多个第二滤光堆叠层分别形成于所述多个感测像素上以形成多个第一颜色像素、多个第二颜色像素、多个第三颜色像素、多个第一混色像素以及多个第二混色像素，其中，所述多个像素区域包含相同数目的所述第一颜色像素、相同数目的所述第二颜色像素、相同数目的所述第三颜色像素、相同数目的所述第一混色像素以及相同数目的所述第二混色像素。
在一实施例中，所述红色像素可为在感测像素上形成红色滤光层而成；所述绿色像素可为在感测像素上形成绿色滤光层而成；所述蓝色像素可为在感测像素上形成蓝色滤光层而成；所述红绿色像素可为在感测像素上依序堆叠红色滤光层及绿色滤光层而成；所述红蓝色像素可为在感测像素上依序堆叠红色滤光层及蓝色滤光层而成；其中，所述滤光层可利用涂层(coating)或设置滤光层板(overlaid)的方式形成。
在一实施例中，所述感测阵列还可包含至少一个全色像素用于输出环境光侦测信号。例如，每一像素区域包含相同数目的全色像素；其中，所述全色像素是指未覆盖任何颜色滤光层的感测像素，其可侦测环境光中所有发光二极管所能侦测的光谱能量。
在一实施例中，所述处理单元还可根据所述红色侦测信号、所述绿色侦测信号及所述蓝色侦测信号之比例建立混光响应；其中，所述比例可根据实际应用而决定。
在一实施例中，所述处理单元还可计算所述感测阵列的多个像素区域的每一像素区域的所有感测像素输出的所述侦测信号的侦测信号之和(sum of detection signal)或平均侦测信号(average of detection signal)，并据以进行手势判断。
在一实施例中，所述处理单元可利用软件、硬件或固件的方式实现所述红色侦测信号、所述绿色侦测信号及所述蓝色侦测信号的后处理。
本发明实施例的彩色影像传感器及其彩色滤光层配置与操作方法中，通过预设的彩色滤光层配置以及利用后处理运算侦测信号，可同时实现手势判断、环境光侦测以及增进颜色侦测精确度的功效。此外，还可通过所得到的各色光侦测信号来建立想要的混色光响应，藉以增进彩色影像传感器的实用性。
为了让本发明的上述和其它目的、特征和优点能更明显，下文将配合所附图示，详细说明如下。此外，在本发明的说明中，相同的构件是以相同的符号表示，于此先述明。
附图说明
图1示出彩色滤光层的归一化波长响应的示意图。
图2为本发明实施例的彩色影像传感器的示意图。
图3示出本发明实施例的彩色影像传感器的归一化波长响应的示意图。
图4示出本发明实施例的彩色影像传感器的各色光侦测信号及混光响应的示意图。
图5示出本发明实施例的彩色影像传感器的彩色滤光层配置的示意图。
图6示出本发明实施例的彩色影像传感器的操作方法的流程图。
符号标记
1 彩色影像传感器 11 感测阵列
13 模拟数字转换器 15 处理单元
A1～A4 画素区域 F1～F5 滤光层
P1～P6 感测画素 S1～S6 电信号
g1～g6 增益 Sc 控制信号
Sd′、Sd、Sr、Sg、Sb、Smix 侦测信号
具体实施方式
参考图2，其示出本发明实施例的彩色影像传感器1的示意图。所述彩色影像传感器1包含感测阵列11、模拟数字转换器(ADC)13以及处理单元15。必须说明的是，虽然图2示出所述模拟数字转换器13独立于所述感测阵列11及所述处理单元15外，本发明并不以此为限。
在一实施例中，所述模拟数字转换器13可与所述感测阵列11共同形成光电装置，用于侦测光能量并输出数字电信号，所述处理单元15所处理的侦测信号Sd则为数字信号。
另一实施例中，所述模拟数字转换器13可包含于所述处理单元15中，所述处理单元15接收模拟侦测信号Sd′(电信号)并进行处理。例如，所述处理单元15可先进行模拟侦测信号Sd′的差分运算(详述于后)后再将运算结果转换为数字信号或者可先将模拟侦测信号Sd′转换为数字信号后再进行差分运算。必须说明的是，由于所述处理单元15可处理模拟或数字侦测信号，其取决于所述模拟数字转换器13的设置位置，下列说明中侦测信号以Sd进行说明，但其并非用于限定本发明。
所述感测阵列11包含多个感测像素，例如本实施例中以P1～P6等6个感测像素表示，分别用于输出侦测信号Sd。例如，每一感测像素包含至少一个发光二极管(photodiode)，用于感测光能量并输出电信号S1～S6并包含放大单元以预设增益(gain)，例如g1～g6放大所述多个电信号S1～S6以输出所述侦测信号Sd；其中，所述多个电信号S1～S6，其可为电流信号或电压信号，与入射至所述多个感测像素P1～P6的光强度相关。必须说明的是，所述感测阵列1所包含的感测像素的数目及配置并不限于图2所示，可根据不同应用而定且并无特定限制。
在一实施例中，所述感测阵列11例如可包含红色像素、绿色像素、蓝色像素、红绿色像素、红蓝色像素以及全色像素，分别用于输出侦测信号Sd。所述红色像素可通过在感测像素P1上形成红色滤光层F1而形成；所述绿色像素可在感测像素P2上形成绿色滤光层F2而成；所述蓝色像素可在感测像素P3上形成蓝色滤光层F3而成；所述红绿色像素可在感测像素P4上依序堆叠(stack)红色滤光层及绿色滤光层F4而成；所述红蓝色像素可在感测像素P5上依序堆叠红色滤光层及蓝色滤光层F5而成；所述全色像素是指其上未覆盖滤光层的感测像素P6，因此所述全色像素可感测发光二极管所能感测的所有光谱；其中，上述滤光层例如可通过设置滤光片(color filter plate)或直接在像素上涂层(coating)滤光材料而成。
例如图3中分别示出本实施例中上述6种感测像素的归一化波长响应(normalizedwavelength response)。必须说明的是，图3中各颜色像素的波长响应与所使用的滤光层相关，并不限定为图3所示。
为了正确侦测不同色光，本实施例中所述处理单元15利用后处理的方式将相对所述多个感测像素的侦测信号Sd进行处理以消除红外光成分。例如，所述处理单元15可用于计算所述红色像素相对应的侦测信号digit(S1×g1)与所述红绿色像素相对应的侦测信号digit(S4×g4)的信号差以作为红色侦测信号Sr＝digit(S1×g1)-digit(S4×g4)；计算所述绿色像素相对应的侦测信号digit(S2×g2)与所述红绿色像素相对应的侦测信号digit(S4×g4)的信号差以作为绿色侦测信号Sg＝digit(S2×g2)-digit(S4×g4)；并计算所述蓝色像素相对应的侦测信号digit(S3×g3)与所述红蓝色像素相对应的侦测信号digit(S5×g5)的信号差以作为蓝色侦测信号Sb＝digit(S3×g3)-digit(S5×g5)。此外，此处全色像素是用于直接侦测环境光成分而设置，因此当所述彩色影像传感器1仅用以侦测红、绿、蓝各色光的光成分时，所述全色像素可不予实施。
换句话说，本实施例中，所述红色像素的侦测信号digit(S1×g1)因包含了红外光成分而并不直接用作为红色侦测信号Sr；所述绿色像素的侦测信号digit(S2×g2)因包含了红外光成分而并不直接用作为绿色侦测信号Sg；所述蓝色像素的侦测信号digit(S3×g3)因包含了红外光成分而并不直接用作为蓝色侦测信号Sb。藉此，通过上述差分运算可正确求得红、绿、蓝色光的波长响应。必须说明的是，所述后处理(或差分运算)可利用软件、硬件或固件的方式在所述处理单元15中实现。此外，虽然图2示出所述处理单元15是处理数字信号的，如前所述所述处理单元15亦可能直接处理各感测像素输出的模拟信号，例如S1×g1、S2×g2、S3×g3、S4×g4、S5×g5、S6×g6。
此外，根据不同应用，所述处理单元15还可选择根据所述红色侦测信号Sr、所述绿色侦测信号Sg及所述蓝色侦测信号Sb的比例建立混光响应(mixing light response)，如下式(1)所示
Smix＝Kr×Sr+Kg×Sg+Kb×Sb(1)
其中，Kr、Kg、Kb分别为相对红、绿、蓝光的比例常数(ratio constant)并可根据不同应用中所需要的各色光成分而决定，亦即可根据比例常数的设定调整所需的不同色光的比重。例如，图4中示出各色光侦测信号Sr、Sg、Sb以及Kr＝0.2、Kg＝1.0、Kb＝0.5条件下所求得的混光响应Smix。可以了解的是，图4示出的波长响应仅为示例性，并非用于限定本发明。
本发明的彩色影像传感器1除了上述用于侦测不同色光(红、绿、蓝光)成分并根据不同色光成分计算混光响应外，还可用于根据多个像素区域的和(sum)或平均(average)进行手势判断。因此，优选地，将所述感测阵列11中的各颜色感测像素的配置进行设计。
本实施例中，所述感测阵列11的多个感测像素可被划分为至少两个像素区域且该至少两个像素区域中每一者的所有感测像素的所述侦测信号Sd用于形成侦测信号之和或平均侦测信号，例如由所述处理单元15计算。如前所述，多个第一颜色滤光层(例如红色滤光层)F1、多个第二颜色滤光层(例如绿色滤光层)F2、多个第三颜色滤光层(例如蓝色滤光层)F3、多个第一滤光堆叠层(例如红绿色滤光层)F4以及多个第二滤光堆叠层(例如红蓝色滤光层)F5可分别形成于所述多个感测像素上以形成多个第一颜色像素(例如红色像素R)、多个第二颜色像素(例如绿色像素G)、多个第三颜色像素(例如蓝色像素B)、多个第一混色像素(例如红绿色像素R+G)以及多个第二混色像素(例如红蓝色像素R+B)。必须说明的是，所述多个第一颜色滤光层、所述多个第二颜色滤光层、所述多个第三颜色滤光层、所述多个第一滤光堆叠层以及所述多个第二滤光堆叠层的颜色并不限于本发明说明中所公开的。
本实施例中，像素区域的配置位置可根据所欲进行的手势辨识的方向而定。例如，若仅欲辨识水平或垂直方向的手势方向，所述感测阵列11可仅包含分布于横向或纵向方向的2个像素区域；而若欲同时辨识水平及垂直方向的手势方向，所述感测阵列11可包含4个像素区域A1～A4且该4个像素区域A1～A4中每一者分别相邻所述感测阵列11的边缘而设置。例如图5示出像素区域A1相邻于所述感测阵列11的上边缘；像素区域A2相邻于所述感测阵列11的右边缘；像素区域A3相邻于所述感测阵列11的下边缘；像素区域A4相邻于所述感测阵列11的左边缘。所述像素区域A1、A3可用于侦测垂直方向手势而所述像素区域A2、A4可用于侦测水平方向手势。
本实施例中，为使所述多个像素区域的每一者输出有效的结果，所述多个像素区域的每一者包含相同数目的所述红色像素R、相同数目的所述绿色像素G、相同数目的所述蓝色像素B、相同数目的所述红绿色像素R+G以及相同数目的所述红蓝色像素R+B。例如，图5中示出所有像素区域A1～A4均包含1个红色像素R、2个绿色像素G、2个蓝色像素B、2个红绿色像素R+G、1个红蓝色像素R+B。
此外，图5中示出每一所述多个像素区域还包含相同数目(例如此处为1个)的全色像素C，用于输出环境光侦测信号。可以理解的是，图5中各颜色感测像素的数目及配置仅为示例性的。
本发明的彩色影像传感器1可在出厂前针对每一感测像素的放大单元的预设增益g1～g6进行校正(calibration)。例如，可利用窄频谱红外光源(例如，但不限于，900nm)，例如红外光激光发射器、红外光发光二极管、红外光有机发光二极管、卤素灯通过窄频红外光带通滤光器发光等，均匀照射所述感测阵列11的所有感测像素并调整所述多个预设增益g1～g6使每一感测像素R、G、B、R+G、R+B、C输出相同的预设侦测信号值；其中，所述预设侦测信号例如可为电压信号、电流信号或数字化电压信号等。本实施例中，g1指所述红色像素R的预设增益；g2指所述绿色像素G的预设增益；g3指所述蓝色像素B的预设增益；g4指所述红绿色像素R+G的预设增益；g5指所述红蓝色像素R+B的预设增益；g6指所述全色像素C的预设增益。
在一实施例中，所述处理单元15可利用所述侦测信号之和或所述平均侦测信号进行手势辨识。例如，所述处理单元15可根据所述多个像素区域A1、A3间的所述侦测信号之和或所述平均侦测信号的数值变化判断垂直方向手势和/或根据所述多个像素区域A2、A4间的所述侦测信号之和或所述平均侦测信号的数值变化判断水平方向手势。例如一种实施例中，当所述像素区域A1的侦测信号之和或平均侦测信号逐渐变大而所述像素区域A3的侦测信号之和或平均侦测信号逐渐变小，可辨识为对象朝上方或下方移动；当所述像素区域A2的侦测信号之和或平均侦测信号逐渐变大而所述像素区域A4的侦测信号之和或平均侦测信号逐渐变小，可辨识为对象朝右方或左方移动。然而，本发明的手势辨识方式并不以此为限。
参考图6，其示出本发明实施例的彩色影像传感器的操作方法的流程图，包含下列步骤：利用感测阵列感光以使各感测像素分别输出侦测信号Sd(步骤S21)；计算红色像素的侦测信号与红绿色像素的侦测信号的信号差以作为红色侦测信号Sr(步骤S22)；计算绿色像素的侦测信号与所述红绿色像素的侦测信号的信号差以作为绿色侦测信号Sg(步骤S23)；计算蓝色像素的侦测信号与红蓝色像素的侦测信号的信号差以作为蓝色侦测信号Sb(步骤S24)；根据所述红色侦测信号Sr、所述绿色侦测信号Sg及所述蓝色侦测信号Sb建立混光响应Smix(步骤S25)；以及根据多个像素区域的各侦测信号之和或平均侦测信号进行手势判断(步骤S26)；其中，步骤S25、S26可根据不同应用而选择不予实施。
例如，若所述彩色影像传感器1仅用于侦测各色光成分，所述处理单元15可计算出所述红色侦测信号Sr、所述绿色侦测信号Sg及所述蓝色侦测信号Sb即可，即执行步骤S21～S24。
例如，若所述彩色影像传感器1还可根据各色光成分计算环境光(或可见光)的波长响应，则所述处理单元15还根据(1)式计算混光波长响应，即执行步骤S21～S25，而上述比例常数Kr、Kg、Kb可为预设、根据操作参数自动调整或由使用者手动选择。
例如，若所述彩色影像传感器1同时具有手势辨识功能，所述处理单元15还计算所述感测阵列11的多个像素区域(例如图5的A1～A4)的每一像素区域的所有感测像素输出的侦测信号Sd的侦测信号之和或平均侦测信号，并根据所述多个像素区域的每一者的所述侦测信号之和或所述平均侦测信号进行手势判断，即执行步骤S21～S24及S26；其中，步骤S26的一种实施方式已在前举例说明，故于此不再赘述。所述处理单元15根据判断结果输出控制信号Sc以控制相对应的显示器或主机执行相对应动作，例如移动光标，但并不以此为限。
综上所述，公知彩色影像传感器的感测结果会明显受到红外光的影响，而在某些应用时可能产生错误。因此，本发明提出一种彩色影像传感器及其操作方法(图2及图5)，其通过后处理侦测信息以消除红外光成分藉以建立精确的红、绿、蓝光波长响应，并可将建立的红、绿、蓝光波长响应应用于例如建立环境光响应，而提高侦测精确度及实用性。此外，通过适当进行彩色滤光层(或彩色像素)配置，本发明的彩色影像传感器亦可适用于手势辨识的应用中。
虽然本发明已通过上述实例公开，但是其并非用于限定本发明，任何本发明所属技术领域的技术人员，在不脱离本发明的精神和范围内，应当可以作各种的更动与修改。因此本发明的保护范围当以所附权利要求书所限定的范围为准。

Claims (13)

1.一种彩色影像传感器，包含：
感测阵列，包含红色像素、绿色像素、蓝色像素、红绿色像素以及红蓝色像素，分别用于输出侦测信号，其中，所述感测阵列被划分为非矩形的第一像素区域及非矩形的第二像素区域，且所述第一像素区域及所述第二像素区域包含相同数目的所述红色像素、相同数目的所述绿色像素、相同数目的所述蓝色像素、相同数目的所述红绿色像素以及相同数目的所述红蓝色像素；以及
处理单元，用于计算所述红色像素相对应的所述侦测信号与所述红绿色像素相对应的所述侦测信号的信号差以作为红色侦测信号，计算所述绿色像素相对应的所述侦测信号与所述红绿色像素相对应的所述侦测信号的信号差以作为绿色侦测信号，计算所述蓝色像素相对应的所述侦测信号与所述红蓝色像素相对应的所述侦测信号的信号差以作为蓝色侦测信号，其中
所述处理单元还用于计算所述第一像素区域的所有感测像素的所述侦测信号之和并计算所述第二像素区域的所有感测像素的所述侦测信号之和，及根据所述第一像素区域的所述侦测信号之和与所述第二像素区域的所述侦测信号之和间的数值变化判断所述第一像素区域与所述第二像素区域的方向间的移动手势，当所述第一像素区域的所述侦测信号之和逐渐变大同时所述第二像素区域的所述侦测信号之和逐渐变小，所述处理单元辨识所述移动手势从所述第一像素区域朝向所述第二像素区域移动或从所述第二像素区域朝向所述第一像素区域移动。
2.根据权利要求1所述的彩色影像传感器，其中所述侦测信号为数字信号或模拟信号。
3.根据权利要求1所述的彩色影像传感器，其中
所述红色像素是通过在感测像素上形成红色滤光层而形成的；
所述绿色像素是通过在感测像素上形成绿色滤光层而形成的；
所述蓝色像素是通过在感测像素上形成蓝色滤光层而形成的；
所述红绿色像素是通过在感测像素上堆叠红色滤光层及绿色滤光层而形成的；以及
所述红蓝色像素是通过在感测像素上堆叠红色滤光层及蓝色滤光层而形成的。
4.根据权利要求1所述的彩色影像传感器，其中所述感测阵列还包含全色像素。
5.根据权利要求1所述的彩色影像传感器，其中所述处理单元还根据所述红色侦测信号、所述绿色侦测信号及所述蓝色侦测信号的比例建立混光响应。
6.一种彩色影像传感器的操作方法，所述彩色影像传感器的感测阵列被划分为非矩形的第一像素区域及非矩形的第二像素区域，且所述第一像素区域及所述第二像素区域分别包含至少一个红色像素、至少一个绿色像素、至少一个蓝色像素、至少一个红绿色像素以及至少一个红蓝色像素，所述操作方法包含：
利用所述感测阵列感光以使各感测像素分别输出侦测信号；
计算所述红色像素相对应的所述侦测信号与所述红绿色像素相对应的所述侦测信号的信号差以作为红色侦测信号；
计算所述绿色像素相对应的所述侦测信号与所述红绿色像素相对应的所述侦测信号的信号差以作为绿色侦测信号；
计算所述蓝色像素相对应的所述侦测信号与所述红蓝色像素相对应的所述侦测信号的信号差以作为蓝色侦测信号；
计算所述第一像素区域的所有感测像素的所述侦测信号之和或平均侦测信号并计算所述第二像素区域的所有感测像素的所述侦测信号之和或平均侦测信号；以及
根据所述第一像素区域的所述侦测信号之和或平均侦测信号与所述第二像素区域的所述侦测信号之和或平均侦测信号间的数值变化判断所述第一像素区域与所述第二像素区域的方向间的移动手势，其中当所述第一像素区域的所述侦测信号之和逐渐变大同时所述第二像素区域的所述侦测信号之和逐渐变小，辨识所述移动手势从所述第一像素区域朝向所述第二像素区域移动或从所述第二像素区域朝向所述第一像素区域移动。
7.根据权利要求6所述的操作方法，该方法还包含：
根据所述红色侦测信号、所述绿色侦测信号及所述蓝色侦测信号的比例建立混光响应。
8.根据权利要求6所述的操作方法，其中所述感测阵列还包含第三像素区域及第四像素区域且所述第一像素区域至所述第四像素区域的每一者分别相邻所述感测阵列的边缘而设置。
9.根据权利要求6所述的操作方法，其中所述第一像素区域及所述第二像素区域包含相同数目的所述红色像素、相同数目的所述绿色像素、相同数目的所述蓝色像素、相同数目的所述红绿色像素以及相同数目的相所述红蓝色像素。
10.根据权利要求6所述的操作方法，其中所述第一像素区域及所述第二像素区域的每一者还包含相同数目的全色像素，以用于输出环境光侦测信号。
11.根据权利要求6所述的操作方法，其中所述侦测信号为数字信号或模拟信号。
12.根据权利要求6所述的操作方法，其中所述感测阵列的每一个所述感测像素以预设增益输出所述侦测信号。
13.根据权利要求12所述的操作方法，其中所述预设增益是利用红外光源照射所述感测阵列并使每一个所述感测像素输出相同的预设侦测信号而设定。
CN201510101425.6A 2014-06-26 2015-03-09 彩色影像传感器及其操作方法 Active CN105306914B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810879121.6A CN109151412B (zh) 2014-06-26 2015-03-09 可消除红外光成分的彩色影像传感器

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/315,470 2014-06-26
US14/315,470 US9300937B2 (en) 2014-06-26 2014-06-26 Color image sensor and operating method thereof

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201810879121.6A Division CN109151412B (zh) 2014-06-26 2015-03-09 可消除红外光成分的彩色影像传感器

Publications (2)

Publication Number Publication Date
CN105306914A CN105306914A (zh) 2016-02-03
CN105306914B true CN105306914B (zh) 2018-08-31

Family

ID=54931987

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510101425.6A Active CN105306914B (zh) 2014-06-26 2015-03-09 彩色影像传感器及其操作方法
CN201810879121.6A Active CN109151412B (zh) 2014-06-26 2015-03-09 可消除红外光成分的彩色影像传感器

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810879121.6A Active CN109151412B (zh) 2014-06-26 2015-03-09 可消除红外光成分的彩色影像传感器

Country Status (3)

Country Link
US (1) US9300937B2 (zh)
CN (2) CN105306914B (zh)
TW (1) TWI561085B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014185209A1 (ja) * 2013-05-13 2014-11-20 富士フイルム株式会社 混色率算出装置及び方法並びに撮像装置
TWI536831B (zh) * 2014-09-03 2016-06-01 聯詠科技股份有限公司 彩色濾波陣列及其影像接收方法
CN107037892B (zh) * 2016-02-04 2020-05-12 原相科技股份有限公司 自供电式光学鼠标装置及其运作方法
CN110784634B (zh) * 2019-11-15 2021-10-29 Oppo广东移动通信有限公司 图像传感器、控制方法、摄像头组件及移动终端
CN114697585B (zh) * 2020-12-31 2023-12-29 杭州海康威视数字技术股份有限公司 一种图像传感器、图像处理系统及图像处理方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1638137A (zh) * 2003-12-22 2005-07-13 三洋电机株式会社 彩色摄像元件和彩色信号处理电路
CN201190911Y (zh) * 2008-03-24 2009-02-04 欧普康光电(厦门)有限公司 合成白光或其它色光的发光二极管调控装置
CN102799875A (zh) * 2012-07-25 2012-11-28 华南理工大学 任意手形人手跟踪方法
CN103576848A (zh) * 2012-08-09 2014-02-12 腾讯科技（深圳）有限公司 手势操作方法和手势操作装置
CN103679154A (zh) * 2013-12-26 2014-03-26 中国科学院自动化研究所 基于深度图像的三维手势动作的识别方法
CN103793056A (zh) * 2014-01-26 2014-05-14 华南理工大学 基于距离向量的空中手势漫游控制方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003009166A (ja) * 2001-06-21 2003-01-10 Fuji Film Microdevices Co Ltd 撮像装置およびその駆動方法
US20050057670A1 (en) * 2003-04-14 2005-03-17 Tull Damon L. Method and device for extracting and utilizing additional scene and image formation data for digital image and video processing
CN1823336A (zh) * 2003-05-07 2006-08-23 Dvip多媒体股份有限公司 消除传感器电平图像失真的方法和装置
US7471322B2 (en) * 2004-01-21 2008-12-30 Panasonic Corporation Solid state imaging device and driving method thereof
EP1594321A3 (en) * 2004-05-07 2006-01-25 Dialog Semiconductor GmbH Extended dynamic range in color imagers
JP4486874B2 (ja) * 2004-12-08 2010-06-23 シャープ株式会社 多分割読出ｃｃｄの補正近似直線群情報生成方法及び多分割読出ｃｃｄの補正処理装置製造方法
KR20070115243A (ko) * 2006-06-01 2007-12-05 삼성전자주식회사 이미지 촬상 장치, 및 그 동작 방법
KR100818987B1 (ko) * 2006-09-19 2008-04-04 삼성전자주식회사 이미지 촬상 장치 및 상기 이미지 촬상 장치의 동작 방법
US8094301B2 (en) * 2007-12-12 2012-01-10 Gas Technology Institute Video and thermal imaging system for monitoring interiors of high temperature reaction vessels
US8248496B2 (en) * 2009-03-10 2012-08-21 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and image sensor
JP2011041210A (ja) * 2009-08-18 2011-02-24 Sony Corp 信号処理装置、撮像装置及び信号処理方法
US20110317048A1 (en) * 2010-06-29 2011-12-29 Aptina Imaging Corporation Image sensor with dual layer photodiode structure
US8582006B2 (en) * 2011-01-21 2013-11-12 Aptina Imaging Corporation Pixel arrangement for extended dynamic range imaging
CN102957917B (zh) * 2011-08-30 2016-03-30 比亚迪股份有限公司 一种像素阵列、摄像头及基于该阵列的色彩处理方法
US9007488B2 (en) * 2012-03-08 2015-04-14 Semiconductor Components Industries, Llc Systems and methods for generating interpolated high-dynamic-range images
CN103713735B (zh) * 2012-09-29 2018-03-16 华为技术有限公司 一种使用非接触式手势控制终端设备的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1638137A (zh) * 2003-12-22 2005-07-13 三洋电机株式会社 彩色摄像元件和彩色信号处理电路
CN201190911Y (zh) * 2008-03-24 2009-02-04 欧普康光电(厦门)有限公司 合成白光或其它色光的发光二极管调控装置
CN102799875A (zh) * 2012-07-25 2012-11-28 华南理工大学 任意手形人手跟踪方法
CN103576848A (zh) * 2012-08-09 2014-02-12 腾讯科技（深圳）有限公司 手势操作方法和手势操作装置
CN103679154A (zh) * 2013-12-26 2014-03-26 中国科学院自动化研究所 基于深度图像的三维手势动作的识别方法
CN103793056A (zh) * 2014-01-26 2014-05-14 华南理工大学 基于距离向量的空中手势漫游控制方法

Also Published As

Publication number Publication date
TW201601539A (zh) 2016-01-01
TWI561085B (en) 2016-12-01
US9300937B2 (en) 2016-03-29
US20150381957A1 (en) 2015-12-31
CN105306914A (zh) 2016-02-03
CN109151412B (zh) 2021-07-09
CN109151412A (zh) 2019-01-04

Similar Documents

Publication Publication Date Title
CN105306914B (zh) 彩色影像传感器及其操作方法
US9671329B2 (en) Method and device for measuring the colour of an object
EP1653391B1 (en) Method and system for cancellation of ambient light using light frequency
CN105609515B (zh) 用于环境光感测和接近感测的光电二极管
CN104104891B (zh) 投影装置及其投影自动校正方法
US9070192B1 (en) Implementing rich color transition curve tracking for applications
TWI234135B (en) Transmission type display device and a method for controlling its display colors
WO2009055464A2 (en) Detecting ambient light levels in a vision system
CN102636442B (zh) 用于使用浸胶带探测各种气体的波长谱分析的系统和方法
CN110192241A (zh) 控制发射型显示器的亮度
CN203629685U (zh) 一种基于led的颜色识别装置
JP6981775B2 (ja) 画像検査装置および画像検査方法
EP4000002A1 (en) Biometric optical antispoofing
CN101076719A (zh) 用于校准电磁测量装置的方法和设备
US11199450B2 (en) Optical sensor and method for detecting electromagnetic radiation
CN108896184B (zh) 颜色识别方法
US20170272713A1 (en) Projector and method for projecting an image pixel by pixel
US11592334B2 (en) Photosensors for color measurement
EP3043159B1 (en) Method for processing light sensor signals and light sensor system
Doulos et al. Reviewing drawbacks of conventional photosensors: are CCD/CMOS sensors the next generation
TWI524240B (zh) 光感測控制系統
KR100695129B1 (ko) 칼라영상의 조명색 추정장치 및 방법
KR101383338B1 (ko) 엘이디와 포토트랜지스터를 이용한 반사형 색 정보 측정 장치 및 이를 이용한 측정방법
JP6565174B2 (ja) 刺激値直読型の測色計
US20230324217A1 (en) A sensing system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180810

Address after: Taiwan, Hsinchu, China Science and Technology Industrial Park, Hsinchu County Road, building 5, No. 5

Applicant after: Yuanxiang Science & Technology Co., Ltd.

Address before: Malaysia Penang Bali six worship third free Industrial Zone

Applicant before: PIXART IMAGING (PENANG) SDN. BHD