CN111345032A - 图像传感器、光强感知系统及方法 - Google Patents
图像传感器、光强感知系统及方法 Download PDFInfo
- Publication number
- CN111345032A CN111345032A CN201980005548.6A CN201980005548A CN111345032A CN 111345032 A CN111345032 A CN 111345032A CN 201980005548 A CN201980005548 A CN 201980005548A CN 111345032 A CN111345032 A CN 111345032A
- Authority
- CN
- China
- Prior art keywords
- sensing
- target
- pixel block
- image sensor
- sensing pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000003287 optical effect Effects 0.000 claims abstract description 51
- 239000010409 thin film Substances 0.000 claims abstract description 41
- 239000012788 optical film Substances 0.000 claims abstract description 34
- 238000003491 array Methods 0.000 claims abstract description 13
- 230000008447 perception Effects 0.000 claims description 51
- 238000003384 imaging method Methods 0.000 claims description 43
- 238000009826 distribution Methods 0.000 claims description 21
- 238000012937 correction Methods 0.000 claims description 8
- 230000008021 deposition Effects 0.000 claims description 3
- 238000000151 deposition Methods 0.000 claims description 3
- 238000005530 etching Methods 0.000 claims description 3
- 238000000059 patterning Methods 0.000 claims description 3
- 238000011084 recovery Methods 0.000 claims description 3
- 238000002834 transmittance Methods 0.000 description 11
- 230000008859 change Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000002238 attenuated effect Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000005375 photometry Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000011514 reflex Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241001270131 Agaricus moelleri Species 0.000 description 1
- 238000012935 Averaging Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000007687 exposure technique Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本发明实施例公开了一种图像传感器，包括一感光面，所述感光面上设置有一个或一个以上的感知像素区域，所述感知像素区域包括至少两组感知像素块；设置在所述感知像素块表面的光学薄膜阵列，同一组所述感知像素块表面的光学薄膜阵列厚度相同，不同组所述感知像素块表面的光学薄膜阵列厚度不同；所述光学薄膜阵列在一感知像素块表面的厚度对应所述感知像素块的曝光延时。此外，本发明实施例公开了一种基于上述图像传感器的光强感知方法及系统，可更快速的感知环境光强，从而可降低自动曝光的响应时间。
Description
技术领域
本发明涉及图像处理领域，特别涉及一种图像传感器、光强感知系统及方法。
背景技术
传统技术中的图像传感器通常只能有效探测到低动态范围(LDR：Low DynamicRange)的图像，为了使图像传感器尽可能捕捉有用的信息，必须将有限的动态范围利用在合适的亮度范围内，因此需要对被拍摄的景物进行测光，从而确定合理的曝光时间以进行自动曝光。
目前，商用摄像设备大多数通过TTL(Through The Lens)的方式，将负责测光的传感器集成在成像镜头后，以减少成像传感器和测光传感器间的误差，其中有分离式和合并式两种。
分离式包括两个传感器，一个传感器负责成像，另一个负责检测光强，虽能提供较好的测光效果，但是会增加额外电子元件、光路，导致造价和体积的增加，主要应用于如单反相机等中高端摄像设备中。
合并式指成像传感器同时负责成像和测光的功能，主要用于手机镜头等对集成度要求较高的设备中。但是，使用传统的用于成像的图像传感器进行测光，只能根据当前的图像过曝和欠曝的比例对曝光条件进行逐步逼近，耗时较长，具有一定的滞后性。在连续拍摄中，当场景的明暗出现较大变化时，在光照条件频繁切换的场合下并不适用。
发明内容
基于此，为解决现有技术中使用传统成像的图像传感器测光调整曝光时间的调整速度较慢的问题，特提出了一种图像传感器，该图像传感器可用于感知环境光强以调整曝光时间，具体的：
一种图像传感器，包括一感光面，所述感光面上设置有一个或一个以上的感知像素区域，所述感知像素区域包括至少两组感知像素块；
设置在所述感知像素块表面的光学薄膜阵列，同一组所述感知像素块表面的光学薄膜阵列厚度相同，不同组所述感知像素块表面的光学薄膜阵列厚度不同；
所述光学薄膜阵列在一感知像素块表面的厚度对应所述感知像素块的曝光延时。
在其中一个实施例中，所述光学薄膜阵列在各组感知像素块上的厚度分布满足以所述光学薄膜阵列的基础衰减率为底的对数分布。
在其中一个实施例中，同一所述感知像素区域内的各组感知像素块均匀稀疏设置在所述感知像素区域内；所述感知像素区域内的感知像素块的厚度分布为非单调排列或错位排列。
在其中一个实施例中，所述感知像素区域设置于所述感光面的边缘和/或中心位置。
在其中一个实施例中，所述感知像素区域均匀稀疏设置在整个所述感光面。
在其中一个实施例中，所述光学薄膜阵列设置在所述感知像素区域表面的方式包括沉积、图形化或刻蚀工艺中的至少一种。
此外，为解决现有技术中使用传统成像的图像传感器测光调整曝光时间的调整速度较慢的问题，还提出了一种基于前述的图像传感器的光强感知方法的。
一种光强感知方法，基于前述的图像传感器，包括：
获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度；
确定目标亮度，获取目标亮度对应的目标感知像素块；
获取所述目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应；
根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
在其中一个实施例中，所述目标感知像素块为两个或两个以上；
所述获取所述目标感知像素块对应的目标曝光延时包括：
结合所述目标感知像素块在感光面上的相对位置，计算两个或两个以上的所述目标感知像素块的曝光延时的加权值作为目标曝光延时。
在其中一个实施例中，所述方法还包括：
接收拍照指令，获取所述图像传感器的感光面上各像素块的值，所述像素块包括感知像素块；
对于感知像素块的值，获取与所述感知像素块表面的光学薄膜阵列的厚度值对应的亮度修正值，根据所述亮度修正值修正所述感知像素块的值；
对于超出亮度范围的感知像素块的值，根据相邻像素块的值对所述感知像素块进行插值恢复。
此外，为解决现有技术中使用传统成像的图像传感器测光调整曝光时间的调整速度较慢的问题，还提出了一种基于前述的图像传感器的光强感知系统。
一种光强感知系统，包括前述的图像传感器，以及与所述图像传感器连接的处理器，所述处理器用于获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度；确定目标亮度，获取目标亮度对应的目标感知像素块；获取所述目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应；根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
实施本发明实施例，将具有如下有益效果：
采用了上述图像传感器，以及基于上述图像传感器的光强感知系统和方法之后，可通过感知像素区域表面设置的光学薄膜阵列的厚度变化产生多个级别的透光能量衰减，从而产生于表面不同厚度光学薄膜阵列的感知像素块对应的多个级别的曝光延时，使得只需要进行较少次数的曝光，即可得到多个曝光时长对应的成像亮度级别，通过选择合适的成像亮度则可快速确定最佳曝光时长，相较于传统技术，检测光强的耗时更少，更能适应环境光快速变化的场景。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为LDR图像成像的亮度范围与曝光时间的关系示意图；
图2为不同曝光时长下LDR图像的效果图；
图3为传统技术中步进式检测最佳曝光时长的原理图；
图4为一个实施例中一种光强感知系统示意图；
图5为一个实施例中一种图像传感器的示意图；
图6为一个实施例中表面设置了光学薄膜阵列感知像素块的示意图；
图7为一个实施例中4X4感知像素区域中感知像素块表面的光学薄膜阵列的厚度值的分布图；
图8为一个实施例中4X2感知像素区域中感知像素块表面的光学薄膜阵列的厚度值的分布图；
图9为一个实施例中一种光强感知方法的流程图；
图10为一个实施例中一种光强感知方法检测最佳曝光时长的原理图；
图11为一个实施例中一种成像方法的示意图；
图12为一个实施例中运行前述光强感知方法的计算机系统的组成示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
普通相机拍摄的图片由于动态范围有限，通常只有256个亮度范围，因此拍照得到的图片通常为LDR(英文：Low Dynamic Range，中文：低动态范围)图像，当拍照时，外部光照环境的不同则会使得生成的LDR图像会产生不同的曝光效果，同一外部光照环境，不同的曝光时长也会产生不同的图像效果。
参考图1所示，图1展示了LDR图像的亮度范围以及随着曝光时间的增加所产生的LDR图像的亮度范围的变化。由图1可看出，LDR图像的亮度范围是一个范围窗口，曝光时间的变化不会使LDR亮度范围产生变化，只会影响亮度范围的下限值。例如，对比曝光时间为较短的T0和较长的T1时，传统图像传感器采集的LDR图像，可看出T0对应的LDR图像的亮度范围的下限值相较于T1对应的LDR图像的亮度范围的下限值较低，但亮度范围相同。
再参考图2所示，普通相机在同一光暗环境下对相同的场景拍摄分别选择采用较短、合理、较长的曝光时间得到LDR图像1、LDR图像2和LDR图像3，可看出，对于普通相机而言，曝光时间较短则图像偏暗，曝光时间较长则图像过曝，只有采用合理的曝光时间才能拍摄相对较好的图像。因此，传统技术中的自动曝光技术需要通过感知光强获得与场景对应的合理的曝光时间，然后再进行成像。
传统技术中进行光强感知的方法可参考图3所示，其原理为步进式的检测方法。图像传感器先在曝光时间T0下采集图像，然后分析该T0对应的图像的曝光是否合理，如果不合理，则增加/减少一个步进时长ΔT的曝光时间，也就是图像传感器再次在曝光时间T1下采集图像，且T1＝T0+ΔT，然后再分析该T1对应的图像的曝光是否合理，如果不合理，则继续增加一个步进时长ΔT的曝光时间采集图像，若合理的曝光时间为Tbest，那么，通过图3可看出，要找到Tbest需要耗费的时间为：
Tcost＝T0+T1+….+Tbest
即，采集了多少次图像进行分析，就至少需要耗费多少个采集需要的曝光时间之和，这就导致了传统技术中使用用来成像的图像传感器进行光强感知的方案耗时较长，不能适应光强快速变化的场景。
为此，为解决上述传统技术中使用用来成像的图像传感器进行光强感知的方案耗时较长，不能适应光强快速变化的场景的技术问题，在本发明实施例中，特提出了一种光强感知系统，如图4所示，包括：
图像传感器10，以及与图像传感器连接的处理器20，其中：
如图4和图5所示，图像传感器10可以是平板型结构，包括一感光面，在感光面上有序排列有多个像素点，即采集光信号转化为电信号，并将电信号编码成为图像的像素的采样点。物理上，感光面为CCD(英文：Charge-coupled Device，中文：电荷耦合器件，一种用电荷量表示信号大小，用耦合方式传输信号的探测元件)和CMOS(英文：Complementary MetalOxide Semiconductor，中文：互补金属氧化物半导体，一种感光元件)。
在本实施例中，感光面上设置有一个或一个以上的感知像素区域12，感知像素区域12包括至少两组感知像素块(如图1中感知像素区域12中用不同灰度值表示的像素块)。在本实施例中，如图4所示，感知像素区域可设置于所述感光面的边缘和/或中心位置。在另一个实施例中，感知像素区域均匀稀疏设置在整个所述感光面。
再参考图5和图6所示，图像传感器10还包括设置在感知像素块表面的光学薄膜阵列14，同一组感知像素块表面的光学薄膜阵列14厚度相同，不同组感知像素块表面的光学薄膜阵列厚度不同。光学薄膜阵列在一感知像素块表面的厚度对应感知像素块的曝光延时。
也就是说，图4展示了图像传感器10的感光面，其中的一个方格对应一个像素块，一个像素块可包含至少一个像素点，例如，可一个像素点作为一个像素块，或者以2×2，或3×3的像素点作为一个像素块。而图4中感知像素区域12内的具有灰度的像素块即为表面设置了光学薄膜阵列的感知像素块，且灰度的深浅代表了感知像素块表面的光学薄膜阵列的厚度的大小。
在本实施例中，光学薄膜阵列设置在所述感知像素区域表面的方式包括沉积、图形化或刻蚀工艺中的至少一种。
不同感知像素块表面的光学薄膜阵列可相同也可不同，表面光学薄膜阵列厚度相同的感知像素块为同一组(如图4中感知像素区域12内灰度相同的像素块即为同一组)，而表面光学薄膜阵列厚度不同的感知像素块为不同组(如图4中感知像素区域12内灰度不同的像素块分别属于不同组)
图5和图6则展示了不同组的感知像素块表面设置的光学薄膜阵列的形态及其厚度分布情况，其中包括4个属于不同组的感知像素块，厚度分布为d1、d2、d3和d4，且d1<d2<d3<d4，以下以厚度值代称这4个感知像素块以示区分。
感知像素块在表面设置了光学薄膜阵列之后，在进行成像过程中，光透射光学薄膜阵列进入感知像素块时，会由于光学薄膜阵列的透光性而产生能量损耗，且光学薄膜阵列越厚，其透光性越低，产生的能量损耗越多；而曝光时间的大小对应了进入感知像素块的光信号的能量大小，曝光时长越长，则进入感知像素块的光信号的能量越大，对应亮度越高，画面越亮；曝光时长越小，则进入感知像素块的光信号的能量越小，对应亮度越低，画面越暗。因此，光学薄膜阵列的透光性导致的能量损耗可等效为曝光时间的减少所导致的能量获取量减少，因此，光学薄膜阵列在一感知像素块表面的厚度可对应该感知像素块的曝光延时。
例如，对于厚度分布为d1、d2、d3和d4的4个感知像素块，由于d1<d2<d3<d4，那么，对于同一环境光，进入感知像素块d1的光信号能量最多，通过感知像素块d1检测到的亮度最高，而进入感知像素块d4的光信号能量最少，通过感知像素块d4检测到的亮度最低。反言之，对于达到同一检测亮度，需要进入感知像素块d1、d2、d3和d4的光信号能量各不相同，且需要进入感知像素块d1的光信号能量要求最低，则只需要较短的曝光时间即可；需要进入感知像素块d4的光信号能量要求最高，需要较长的曝光时间以保证足够的光信号能量进入感知像素块d4，因此，感知像素块表面的光学薄膜阵列的厚度值由d1至d4的变化等效于产生了曝光延时。
表面未设置光学薄膜阵列的像素块相当于厚度值为0的感知像素块，亦即对应的曝光延时为0(真实曝光时长)。可预先记录感知像素块的厚度值与曝光延时的对应关系，例如，可记录感知像素块表面的光学薄膜阵列的厚度值di对应曝光延时Ti，再记录各个感知像素块在感光面上的相对位置，即建立了各个感光像素块与其对应的曝光延时Ti的映射关系。
在一个实施例中，光学薄膜阵列在各组感知像素块上的厚度分布满足以所述光学薄膜阵列的基础衰减率为底的对数分布，即：
di＝logni×d1
这是由于光学薄膜阵列的透射率满足ti＝n-i×t1，其中，i为厚度取值空间分布，t1为最高透光率，ti为第i个厚度值的透光率，n为基础衰减率。当光学薄膜阵列在各组感知像素块上的厚度分布满足以所述光学薄膜阵列的基础衰减率为底的对数分布时，可看出，各组感知像素块对应的透光率ti呈线性变化，从而更加方便映射曝光延时。
进一步的，同一所述感知像素区域内的各组感知像素块均匀稀疏设置在所述感知像素区域内；所述感知像素区域内的感知像素块的厚度分布为非单调排列或错位排列。
参考图7和图8所示，图7为一个4×4的感知像素区域内感知像素块表面的光学薄膜阵列的厚度分布情况，其中颜色灰度的深浅代表着厚度值的大小，颜色灰度的的像素块属于同一组，表面具有相同厚度的光学薄膜阵列。由图7可看出，各组感知像素块均匀稀疏地分布在整个4×4的感知像素区域内的。图8则展示了一个4×2的感知像素区域内感知像素块表面的光学薄膜阵列的厚度分布情况，可看出，感知像素区域内的感知像素块的厚度分布为非单调排列或错位排列，即没有体现出一个d1和d4向d2和d3方向的递增或递减。
按照上述方式设置同一所述感知像素区域的各组感知像素块的厚度分布，可避免连续较大亮度范围的图像采样将被噪声干扰，从而抗噪性能更强。
在本实施例中，处理器20则基于上述设置有感知像素区域的图像传感器10进行光强感知，可用于获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度；确定目标亮度，获取目标亮度对应的目标感知像素块；获取所述目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应；根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
具体的，在一个实施例中，处理器20可以是计算机设备，可依赖于计算机程序执行一光强感知方法，该计算机程序可运行于任意基于冯诺依曼体系的计算机系统之上，该计算机设备可以是智能手机、个人电脑，或具有图像处理芯片的其他数码产品，例如数码相机、单反相机等。
具体的，该光强感知方法如图9所示，包括：
步骤S102：获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度。
预设曝光时长为T0，则将图像传感器10曝光T0时间，则图像传感器10上的各个像素块则可接收到相应的光信号，且接收到的光信号能量的大小体现为该像素块的亮度大小。参考图10所示，对于表面未设置光学薄膜阵列的普通像素块，则其接收到的能量没有衰减，接收了整个曝光时间T0的能量。
而对于感光像素块d1，其接收到的能量受到了厚度为d1的光学薄膜阵列的衰减，衰减的能量大小等效于缺少了曝光延时T1的能量，即等效于于感光像素块d1只接收了曝光时间T0-T1的能量。则感光像素块d1的成像亮度低于表面未设置光学薄膜阵列的普通像素块的亮度。
同理，对于感光像素块d2和感光像素块d3，其接收到的能量受到了厚度为d2和d3的光学薄膜阵列的衰减，衰减的能量大小等效于缺少了曝光延时T2和T3的能量，即等效于于感光像素块d2和d3只接收了曝光时间T0-T2的能量和T0-T3的能量。由于d1<d2<d3，则感光像素块d1的成像亮度>感光像素块d2的成像亮度>感光像素块d3的成像亮度。
由此，产生了与d1、d2和d3对应的成像亮度级别。
步骤S104：确定目标亮度，获取目标亮度对应的目标感知像素块。
例如，再参考图10所示，若通过检测发现d2的成像亮度合适，则将表面设置的光学薄膜阵列的厚度为d2的感知像素块作为目标感知像素块。
步骤S106：获取目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应。
如前所述，预先记录有图像传感器10中，表面设置的光学薄膜阵列的厚度为d2的感知像素块对应的曝光延时的值，即图10中所示的曝光延时T2，则可将T2作为目标曝光延时。
步骤S108：根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
即将曝光时间调整为Tbest＝T0-T2，即可使得普通像素块在曝光时间T0-T2范围接收光信号的能量，普通像素块的成像亮度即相当于检测时，曝光时间为T0时，感知像素块d2的成像亮度，从而使得曝光程度达到了一致。
且细致地对上述过程分析可发现，在上述调整曝光时长的过程中，调整的耗时仅仅为一次预设的曝光时长T0，即经过对图像传感器10的一次长达Tcost＝T0的曝光，可依赖于感知像素块表面的光学薄膜阵列的透光性等效地得到T0-T1，T0-T2，……以致T0-Ti的多个曝光市场下的成像亮度的效果，然后通过一次选择合适的成像亮度，即可快速确定该成像亮度对应的曝光时长，相较于传统技术中，需要Tcost＝T0+T1+….+Tbest而言，需要的曝光次数较少，耗费的时间较少，因此效率更高。
在本实施例中，进一步的，所述目标感知像素块为两个或两个以上。例如，可在图像传感器的中心区域和边缘区域均设置感知像素区域，且不同的感知像素区域中可设置具有相同厚度的感知像素块，则在这种情况下，与目标成像亮度对应的目标感知像素块为两个或两个以上。
在此情况下，获取所述目标感知像素块对应的目标曝光延时则可包括：
结合所述目标感知像素块在感光面上的相对位置，计算两个或两个以上的所述目标感知像素块的曝光延时的加权值作为目标曝光延时。
例如，感光面中心区域的像素块通常对应于拍摄物，因此，位置处于感光面中心区域的感知像素块应享有较高的加权值，而位置处于感光面边缘的感知像素块则应享有较低的加权值，通过加权平均，即可得到目标曝光延时。
在一个实施例中，由于感知像素块也位于感光面上，因此在成像中页应该考虑感知像素块的成像信息，如图11所示，该成像方法还包括：
步骤S202：获取所述图像传感器的感光面上各像素块的值，所述像素块包括感知像素块。
步骤S204：对于感知像素块的值，获取与感知像素块表面的光学薄膜阵列的厚度值对应的亮度修正值，根据所述亮度修正值修正所述感知像素块的值。
也就是说，对于表面未设置光学薄膜阵列的普通像素块，其像素值即为实际的成像信息；而对于表面设置了光学薄膜阵列的感知像素块，则反向地对其进行亮度修正。例如，若感知像素块d1的透光衰减为减半，则在成像过程中，对于感知像素块d1，需要对其采集的成像信息进行亮度修正，调整至相当于透光未衰减时采集的成像信息的亮度值。
步骤S206：对于超出亮度范围的感知像素块的值，根据相邻像素块的值对所述感知像素块进行插值恢复。
也就是说，对于即使修正后也过亮或过暗的感知像素块的成像信息，可以根据其相邻像素块的成像信息进行插值恢复。例如，对于一过曝或过暗的感知像素块，可选择其相邻的3×3范围的像素块的值，计算其平均值后作为该感知像素块的值。从而不会导致部分感知像素块的信息丢失。
实施本发明实施例，将具有如下有益效果：
采用了上述图像传感器，以及基于上述图像传感器的光强感知系统和方法之后，可通过感知像素区域表面设置的光学薄膜阵列的厚度变化产生多个级别的透光能量衰减，从而产生于表面不同厚度光学薄膜阵列的感知像素块对应的多个级别的曝光延时，使得只需要进行较少次数的曝光，即可得到多个曝光时长对应的成像亮度级别，通过选择合适的成像亮度则可快速确定最佳曝光时长，相较于传统技术，检测光强的耗时更少，更能适应环境光快速变化的场景。
需要说明的是，前文所述的“一致”即为在一定误差范围内相同或相同的含义，由于半导体工艺制作过程中，不可避免地会造成部分光学薄膜介质的实际厚度与理论设计的厚度值有偏差，但只要在一定误差范围内，只会影响光学薄膜介质的透光率的范围，当该两个感光点对应的透光率的范围重合部分大于一定预设比例时，即可认为二者的透光率一致，或者说感光点对应的光学薄膜介质厚度取值空间分布或厚度分布一致。
在一个实施例中，如图12所示，图12展示了一种运行上述光强感知方法的基于冯诺依曼体系的计算机系统。具体的，可包括通过系统总线连接的外部输入接口1001、处理器1002、存储器1003和输出接口1004。其中，外部输入接口1001可选的可至少包括网络接口10012和USB接口10014。存储器1003可包括外存储器10032(例如硬盘、光盘或软盘等)和内存储器10034。输出接口1004可至少包括显示屏10042等设备。
在本实施例中，本方法的运行基于计算机程序，该计算机程序的程序文件存储于前述基于冯诺依曼体系的计算机系统10的外存储器10032中，在运行时被加载到内存储器10034中，然后被编译为机器码之后传递至处理器1002中执行，从而使得基于冯诺依曼体系的计算机系统10中形成逻辑上的各虚拟模块。且在上述光强感知方法执行过程中，输入的参数均通过外部输入接口1001接收，并传递至存储器1003中缓存，然后输入到处理器1002中进行处理，处理的结果数据或缓存于存储器1003中进行后续地处理，或被传递至输出接口1004进行输出。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不会使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种图像传感器，包括一感光面，其特征在于，所述感光面上设置有一个或一个以上的感知像素区域，所述感知像素区域包括至少两组感知像素块；
设置在所述感知像素块表面的光学薄膜阵列，同一组所述感知像素块表面的光学薄膜阵列厚度相同，不同组所述感知像素块表面的光学薄膜阵列厚度不同；
所述光学薄膜阵列在一感知像素块表面的厚度对应所述感知像素块的曝光延时。
2.根据权利要求1所述的图像传感器，其特征在于，所述光学薄膜阵列在各组感知像素块上的厚度分布满足以所述光学薄膜阵列的基础衰减率为底的对数分布。
3.根据权利要求1所述的图像传感器，其特征在于，同一所述感知像素区域内的各组感知像素块均匀稀疏设置在所述感知像素区域内；所述感知像素区域内的感知像素块的厚度分布为非单调排列或错位排列。
4.根据权利要求1所述的图像传感器，其特征在于，所述感知像素区域设置于所述感光面的边缘和/或中心位置。
5.根据权利要求1所述的图像传感器，其特征在于，所述感知像素区域均匀稀疏设置在整个所述感光面。
6.根据权利要求1至5任一项所述的图像传感器，其特征在于，所述光学薄膜阵列设置在所述感知像素区域表面的方式包括沉积、图形化或刻蚀工艺中的至少一种。
7.一种光强感知方法，基于权利要求1至6任一项所述的图像传感器，其特征在于，包括：
获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度；
确定目标亮度，获取目标亮度对应的目标感知像素块；
获取所述目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应；
根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
8.根据权利要求7所述的光强感知方法，其特征在于，所述目标感知像素块为两个或两个以上；
所述获取所述目标感知像素块对应的目标曝光延时包括：
结合所述目标感知像素块在感光面上的相对位置，计算两个或两个以上的所述目标感知像素块的曝光延时的加权值作为目标曝光延时。
9.根据权利要求7所述的光强感知方法，其特征在于，所述方法还包括：
接收拍照指令，获取所述图像传感器的感光面上各像素块的值，所述像素块包括感知像素块；
对于感知像素块的值，获取与所述感知像素块表面的光学薄膜阵列的厚度值对应的亮度修正值，根据所述亮度修正值修正所述感知像素块的值；
对于超出亮度范围的感知像素块的值，根据相邻像素块的值对所述感知像素块进行插值恢复。
10.一种光强感知系统，包括权利要求1至6任一项所述的图像传感器，以及与所述图像传感器连接的处理器，其特征在于，所述处理器用于获取预设曝光时长下所述图像传感器在感知像素区域的成像亮度；确定目标亮度，获取目标亮度对应的目标感知像素块；获取所述目标感知像素块对应的目标曝光延时，所述目标曝光延时与所述目标感知像素块表面的光学薄膜阵列的厚度值对应；根据所述预设曝光时长和所述目标曝光延时调整曝光时间。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2019/087074 WO2020227980A1 (zh) | 2019-05-15 | 2019-05-15 | 图像传感器、光强感知系统及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111345032A true CN111345032A (zh) | 2020-06-26 |
| CN111345032B CN111345032B (zh) | 2021-12-31 |
Family
ID=71187722
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201980005548.6A Active CN111345032B (zh) | 2019-05-15 | 2019-05-15 | 图像传感器、光强感知系统及方法 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111345032B (zh) |
| WO (1) | WO2020227980A1 (zh) |
Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1318939A (zh) * | 2000-04-14 | 2001-10-24 | 宜霖科技股份有限公司 | 电子相机及其曝光方法 |
| CN101087360A (zh) * | 2006-06-08 | 2007-12-12 | 松下电器产业株式会社 | 固态成像装置及照相机 |
| CN101365930A (zh) * | 2005-09-21 | 2009-02-11 | Rjs科技公司 | 一种带有光度测定和实时报告能力的图像传感元件或阵列的系统与方法 |
| CN102170525A (zh) * | 2010-02-24 | 2011-08-31 | 株式会社尼康 | 相机及图像合成方法 |
| US20120314124A1 (en) * | 2011-06-13 | 2012-12-13 | Sony Corporation | Image pickup apparatus, image pickup apparatus control method, and program |
| US20120327248A1 (en) * | 2009-11-30 | 2012-12-27 | Imec | Integrated circuit for spectral imaging system |
| CN104639921A (zh) * | 2013-11-11 | 2015-05-20 | 全视技术有限公司 | 双像素大小彩色影像传感器及其制造方法 |
| CN104796613A (zh) * | 2011-09-28 | 2015-07-22 | 原相科技股份有限公司 | 影像系统 |
| CN104838644A (zh) * | 2012-09-21 | 2015-08-12 | 罗伯特·博世有限公司 | 用于求取检测区域的图像信息的尤其用于车辆的摄像机系统和方法 |
| CN104869320A (zh) * | 2014-02-21 | 2015-08-26 | 三星电子株式会社 | 电子设备和控制电子设备操作方法 |
| CN105284103A (zh) * | 2013-05-21 | 2016-01-27 | 三星电子株式会社 | 电子传感器和用于控制电子传感器的方法 |
| CN107018339A (zh) * | 2017-03-09 | 2017-08-04 | 广东欧珀移动通信有限公司 | 图像传感器、图像处理方法、图像处理装置及电子装置 |
| CN107026994A (zh) * | 2015-12-17 | 2017-08-08 | 罗伯特·博世有限公司 | 光学探测器 |
| CN107039472A (zh) * | 2015-11-18 | 2017-08-11 | 三星电子株式会社 | 图像传感器以及包括该图像传感器的电子装置 |
| KR20180002368A (ko) * | 2016-06-29 | 2018-01-08 | 한국과학기술원 | 픽셀별 적용 필터의 차이에 기반하는 이미지 생성 방법 및 이를 수행하는 장치들 |
| US20180091723A1 (en) * | 2016-09-23 | 2018-03-29 | JVC Kenwood Corporation | Solid-state imaging device |
| CN107888904A (zh) * | 2016-09-30 | 2018-04-06 | 三星电子株式会社 | 用于处理图像的方法和支持该方法的电子装置 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007019143A (ja) * | 2005-07-06 | 2007-01-25 | Matsushita Electric Ind Co Ltd | 固体撮像装置の製造方法、固体撮像装置及びカメラ |
| JP2013118295A (ja) * | 2011-12-02 | 2013-06-13 | Sharp Corp | 固体撮像素子の製造方法、固体撮像素子、および電子情報機器 |
| CN106210532B (zh) * | 2016-07-29 | 2019-10-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种拍照处理方法及终端设备 |
| US9954020B1 (en) * | 2016-12-30 | 2018-04-24 | Omnivision Technologies, Inc. | High-dynamic-range color image sensors and associated methods |
| CN109510949B (zh) * | 2018-10-24 | 2020-05-08 | 浙江大学 | 基于图像特征点有效亮度的相机自动曝光方法 |
-
2019
- 2019-05-15 WO PCT/CN2019/087074 patent/WO2020227980A1/zh active Application Filing
- 2019-05-15 CN CN201980005548.6A patent/CN111345032B/zh active Active
Patent Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1318939A (zh) * | 2000-04-14 | 2001-10-24 | 宜霖科技股份有限公司 | 电子相机及其曝光方法 |
| CN101365930A (zh) * | 2005-09-21 | 2009-02-11 | Rjs科技公司 | 一种带有光度测定和实时报告能力的图像传感元件或阵列的系统与方法 |
| CN101087360A (zh) * | 2006-06-08 | 2007-12-12 | 松下电器产业株式会社 | 固态成像装置及照相机 |
| US20120327248A1 (en) * | 2009-11-30 | 2012-12-27 | Imec | Integrated circuit for spectral imaging system |
| CN102170525A (zh) * | 2010-02-24 | 2011-08-31 | 株式会社尼康 | 相机及图像合成方法 |
| US20120314124A1 (en) * | 2011-06-13 | 2012-12-13 | Sony Corporation | Image pickup apparatus, image pickup apparatus control method, and program |
| CN104796613A (zh) * | 2011-09-28 | 2015-07-22 | 原相科技股份有限公司 | 影像系统 |
| CN104838644A (zh) * | 2012-09-21 | 2015-08-12 | 罗伯特·博世有限公司 | 用于求取检测区域的图像信息的尤其用于车辆的摄像机系统和方法 |
| CN105284103A (zh) * | 2013-05-21 | 2016-01-27 | 三星电子株式会社 | 电子传感器和用于控制电子传感器的方法 |
| CN104639921A (zh) * | 2013-11-11 | 2015-05-20 | 全视技术有限公司 | 双像素大小彩色影像传感器及其制造方法 |
| CN104869320A (zh) * | 2014-02-21 | 2015-08-26 | 三星电子株式会社 | 电子设备和控制电子设备操作方法 |
| CN107039472A (zh) * | 2015-11-18 | 2017-08-11 | 三星电子株式会社 | 图像传感器以及包括该图像传感器的电子装置 |
| CN107026994A (zh) * | 2015-12-17 | 2017-08-08 | 罗伯特·博世有限公司 | 光学探测器 |
| KR20180002368A (ko) * | 2016-06-29 | 2018-01-08 | 한국과학기술원 | 픽셀별 적용 필터의 차이에 기반하는 이미지 생성 방법 및 이를 수행하는 장치들 |
| US20180091723A1 (en) * | 2016-09-23 | 2018-03-29 | JVC Kenwood Corporation | Solid-state imaging device |
| CN107888904A (zh) * | 2016-09-30 | 2018-04-06 | 三星电子株式会社 | 用于处理图像的方法和支持该方法的电子装置 |
| CN107018339A (zh) * | 2017-03-09 | 2017-08-04 | 广东欧珀移动通信有限公司 | 图像传感器、图像处理方法、图像处理装置及电子装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111345032B (zh) | 2021-12-31 |
| WO2020227980A1 (zh) | 2020-11-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2420051B1 (en) | Producing full-color image with reduced motion blur | |
| CN1829291B (zh) | 感测设备、感测能量场的方法以及照相机 | |
| US9224782B2 (en) | Imaging systems with reference pixels for image flare mitigation | |
| US7800669B2 (en) | System and method for image sensor element or array with photometric and realtime reporting capabilities | |
| US7911505B2 (en) | Detecting illuminant flicker | |
| CN105611185B (zh) | 图像生成方法、装置及终端设备 | |
| CN112118388B (zh) | 图像处理方法、装置、计算机设备和存储介质 | |
| US8737755B2 (en) | Method for creating high dynamic range image | |
| KR101536060B1 (ko) | 고체 촬상 장치 및 카메라 모듈 | |
| TWI507999B (zh) | 用於提供一影像之估計之信號雜訊比平均值之方法及攝影機 | |
| WO2010104551A1 (en) | Cfa image with synthetic panchromatic image | |
| CN105578067B (zh) | 图像生成方法、装置及终端设备 | |
| CN111586312B (zh) | 自动曝光的控制方法及装置、终端、存储介质 | |
| CN102883107A (zh) | 摄像设备及其控制方法 | |
| CN110830789A (zh) | 一种过曝检测方法、装置及一种过曝抑制方法、装置 | |
| CN103888667A (zh) | 摄像设备及其控制方法 | |
| US20200007732A1 (en) | Image processing method and electronic device | |
| CN111345032B (zh) | 图像传感器、光强感知系统及方法 | |
| KR101710630B1 (ko) | 촬상 장치, 촬상 방법 및 기록매체 | |
| US6295138B1 (en) | Electronic image sensing apparatus | |
| US11153467B2 (en) | Image processing | |
| US20080165262A1 (en) | Method for capturing image data | |
| CN101365930A (zh) | 一种带有光度测定和实时报告能力的图像传感元件或阵列的系统与方法 | |
| CN111316634A (zh) | Hdr图像成像方法、装置及系统 | |
| KR20200042725A (ko) | 렌즈 프리 cmos 광자 어레이 센서의 노이즈 특성 평가 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |