CN102801918B - 摄像设备和用于控制该摄像设备的方法 - Google Patents
摄像设备和用于控制该摄像设备的方法 Download PDFInfo
- Publication number
- CN102801918B CN102801918B CN201210165399.XA CN201210165399A CN102801918B CN 102801918 B CN102801918 B CN 102801918B CN 201210165399 A CN201210165399 A CN 201210165399A CN 102801918 B CN102801918 B CN 102801918B
- Authority
- CN
- China
- Prior art keywords
- exposure
- value
- brightness
- zonule
- exposure control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000012937 correction Methods 0.000 claims abstract description 49
- 238000001228 spectrum Methods 0.000 claims abstract description 36
- 238000001514 detection method Methods 0.000 claims description 15
- 230000008034 disappearance Effects 0.000 abstract description 42
- 230000008569 process Effects 0.000 description 31
- 238000012360 testing method Methods 0.000 description 18
- 238000003786 synthesis reaction Methods 0.000 description 16
- 239000006185 dispersion Substances 0.000 description 12
- 238000007667 floating Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 239000012141 concentrate Substances 0.000 description 6
- 230000015572 biosynthetic process Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/72—Combination of two or more compensation controls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
本发明提供一种摄像设备和用于控制该摄像设备的方法。该摄像设备不仅能够检测高光溢出或暗部缺失,而且还能够有效实现曝光控制。在所述摄像设备中,基于所拍摄图像信号检测整个画面亮度频率分布。所述摄像设备根据所述整个画面亮度频率分布计算第一曝光控制值。将所述图像信号分成多个小区域,并且检测各小区域的亮度。所述摄像设备根据所述亮度计算第二曝光控制值。所述摄像设备基于所述第一曝光控制值和所述第二曝光控制值计算曝光校正值。使用所述曝光校正值和所述图像信号的曝光值计算曝光值。所述摄像设备基于所计算出的曝光值,对摄像部进行曝光控制。
Description
技术领域
本发明涉及一种在根据被摄体的亮度而控制曝光时进行摄像操作的摄像设备、用于控制该摄像设备的方法和存储介质。
背景技术
通常,使用诸如CCD或CMOS等固态摄像装置的摄像设备通过操作光圈或调整快门速度来控制摄像装置的曝光量,从而控制摄像装置的曝光量。例如,在利用该摄像设备拍摄亮场景的情况下,可以增大快门速度从而将拍摄图像中要记录的被摄体的亮度调整成适当亮度。另一方面,在利用该摄像设备拍摄暗场景的情况下,可以减小快门速度从而将拍摄图像中要记录的被摄体亮度调整成适当亮度。简而言之,该摄像设备能够通过控制摄像装置的曝光量来抑制高光溢出(whiteout)或暗部缺失(blackout)。
过去提出了一种采用下面的方法的摄像设备,在该方法中,基于根据拍摄图像信号所确定的整个画面上的亮度的亮度频率分布,检测高光溢出或暗部缺失,并且根据所检测到的亮度频率分布控制曝光量,从而抑制高光溢出或暗部缺失(例如,参见日本专利4306750)。
然而,即使上述摄像设备能够检测高光溢出和暗部缺失,摄像设备也难以判断高光溢出区域或暗部缺失区域是分散的还是集中的。
参考图12A~12D说明该原因。图12A是示出空白部分以集中方式发生高光溢出的拍摄图像。图12B是示出以分散方式存在的多个点光源以分散方式导致高光溢出区域的拍摄图像。图12C是示出图12A的拍摄图像的亮度频率分布(直方图)的图,并且图12D是示出图12B的拍摄图像的亮度频率分布的图。
在图12A中,高光溢出区域集中,而在图12B中,高光溢出区域分散。然而,如图12C和12D所示,由于图12A和12B的拍摄图像具有相同的总高光溢出区域,所以亮度频率分布具有相同形状。
在图12A所示的情况下,由于高光溢出区域集中,所以高光溢出在视觉上明显。在高光溢出区域中存在实际上丢失灰度的可能性,因此存在可以通过进行用以减小曝光量的曝光控制来再现空白灰度的可能性。
另一方面,在图12B所示的情况下,由于高光溢出区域分散,所以高光溢出在视觉上不明显。为此,减小曝光量使得拍摄图像中噪声明显。因此,不应进行用以减小曝光量的曝光控制。换句话说,希望在仅以视觉上明显的高光溢出区域为目标的情况下来进行曝光控制。
然而,传统摄像设备不能够区分图12A和12B的这两个场景并且根据区分结果来进行不同的曝光控制。
发明内容
本发明提供一种不仅能够检测高光溢出或暗部缺失、而且还能够根据高光溢出区域或暗部缺失区域的分布来有效实现曝光控制的摄像设备、用于控制该摄像设备的方法和存储介质。
本发明的第一方面,提供一种摄像设备,其包括用于获得被摄体光并且输出图像信号的摄像部,所述摄像设备还包括:第一亮度检测单元,用于基于所述图像信号来检测整个画面亮度频率分布;第一曝光控制值计算单元,用于根据所述整个画面亮度频率分布来计算第一曝光控制值;第二亮度检测单元,用于将所述图像信号分成多个小区域,并且检测各小区域的亮度;第二曝光控制值计算单元,用于根据所述第二亮度检测单元所检测到的各小区域的亮度,计算第二曝光控制值;曝光校正值计算单元,用于基于所述第一曝光控制值和所述第二曝光控制值,计算曝光校正值;曝光值计算单元,用于使用所述曝光校正值和在输出所述图像信号时所使用的曝光值,计算曝光值;以及曝光控制单元,用于基于所述曝光值计算单元所计算出的曝光值,对所述摄像部进行曝光控制。
本发明的第二方面,提供一种用于控制摄像设备的方法,所述摄像设备包括用于获得被摄体光并且输出图像信号的摄像部,所述方法包括以下步骤:基于所述图像信号来检测整个画面亮度频率分布;根据所述整个画面亮度频率分布来计算第一曝光控制值;将所述图像信号分成多个小区域,并且检测各小区域的亮度;根据所检测到的各小区域的亮度,计算第二曝光控制值;基于所述第一曝光控制值和所述第二曝光控制值,计算曝光校正值;使用所述曝光校正值和在输出所述图像信号时所使用的曝光值,计算曝光值;以及基于所计算出的曝光值,对所述摄像部进行曝光控制。
本发明的第三方面,提供一种非瞬态计算机可读存储介质,其存储用于执行用于控制摄像设备的方法的计算机可执行程序,其中,所述摄像设备包括用于获得被摄体光并且输出图像信号的摄像部,所述方法包括以下步骤:基于所述图像信号来检测整个画面亮度频率分布;根据所述整个画面亮度频率分布来计算第一曝光控制值;将所述图像信号分成多个小区域,并且检测各小区域的亮度;根据所检测到的各小区域的亮度,计算第二曝光控制值;基于所述第一曝光控制值和所述第二曝光控制值,计算曝光校正值;使用所述曝光校正值和在输出所述图像信号时所使用的曝光值,计算曝光值;以及基于所计算出的曝光值,对所述摄像部进行曝光控制。
根据本发明,可以检测高光溢出或暗部缺失,并且根据高光溢出区域或暗部缺失区域的分布,有效实现曝光控制。
通过以下参考附图对典型实施例的说明,本发明的其它特征将显而易见。
附图说明
图1是根据本发明第一实施例的摄像设备的主要部分的示意框图。
图2是根据第一实施例的摄像设备的摄像部的示意框图。
图3A、3B、3C和3D是用于说明根据第一实施例的摄像设备的小区域亮度检测部的功能的图。
图4A是由根据第一实施例的摄像设备的整个画面频率分布曝光控制值计算部所执行的用于减少暗部缺失的计算处理的流程图。
图4B是由整个画面频率分布曝光控制值计算部所执行的用于减少高光溢出的计算处理的流程图。
图5A和5B是用于说明根据第一实施例的摄像设备的小区域亮度检测部和小区域亮度曝光控制值计算部的操作的图。
图6是由根据第一实施例的摄像设备所执行的曝光控制值确定处理的流程图。
图7是根据本发明第二实施例的摄像设备的示意框图。
图8是根据第二实施例的摄像设备的信号合成部的示意框图。
图9A和9B是由根据第二实施例的摄像设备所执行的曝光控制值确定处理的流程图。
图10是用于说明通过根据第二实施例的摄像设备确定控制校正量的方法的图。
图11是用于说明通过根据第二实施例的摄像设备基于连续块数来确定控制校正量的方法的图。
图12A~12D是用于说明现有技术的问题的图。
具体实施方式
下面将参考示出本发明的实施例的附图来详细说明本发明。首先,参考图1~6说明根据本发明第一实施例的摄像设备。将第一实施例的摄像设备配置成能够根据拍摄图像信号的整个画面频率分布和通过分割拍摄图像信号的画面所获得的各小区域的小区域亮度,进行曝光控制以防止高光溢出或暗部缺失。
图1是根据第一实施例的摄像设备的主要部分的示意框图。参考图1,附图标记101表示摄像部,用于基于从曝光控制部109所传送的曝光控制值而拍摄被摄体光并输出拍摄图像信号。附图标记102表示视频信号处理器,用于将从摄像部101输出的拍摄图像信号转换成输出视频信号。附图标记103表示整个画面频率分布检测部,用于从拍摄图像信号检测整个画面上的亮度的频率分布。附图标记104表示整个画面频率分布曝光控制值计算部,用于基于整个画面频率分布检测部103从拍摄图像信号所检测到的整个画面频率分布来计算整个画面频率分布曝光控制值。附图标记105表示小区域亮度检测部,用于将基于拍摄图像信号的整个画面分成多个小区域并检测小区域的代表性亮度。
附图标记106表示小区域亮度曝光控制值计算部,用于基于通过小区域亮度检测部105所检测到的拍摄图像信号的小区域亮度来计算小区域亮度曝光控制值。附图标记107表示曝光校正值计算部,用于根据整个画面频率分布曝光控制值和小区域亮度曝光控制值来计算曝光校正值。附图标记108表示曝光值计算部,用于基于通过曝光校正值计算部107所计算出的曝光校正值和拍摄图像信号的当前帧的曝光值来计算用于下一帧的拍摄的曝光值。曝光控制部109将通过将由曝光值计算部108所计算出的用于下一帧的拍摄的曝光值转换成光圈控制值和快门速度控制值所获得的、用于控制摄像部101的控制值输出给摄像部101。
接着说明摄像部101、整个画面频率分布检测部103、整个画面频率分布曝光控制值计算部104、小区域亮度检测部105和小区域亮度曝光控制值计算部106。
参考图2,摄像部101包括摄像光学部201、光圈202、摄像装置203、模拟-数字(A/D)转换器204、光学系统驱动部205和定时控制器206。包括这些装置的摄像部101获得被摄体光,并且输出拍摄图像信号。
在摄像部101中,通过光学系统驱动部205驱动以进行拍摄的摄像光学部201控制光圈202的光圈面积,并且将被摄体光引导至摄像装置203。摄像装置203使用例如CCD或CMOS拍摄被摄体的图像,将所获得的被摄体图像转换成电信号,然后将电信号输出给模拟-数字转换器204。在拍摄期间,定时控制器206向摄像装置203输出快门速度控制值,从而控制被摄体光的曝光时间。接收到来自摄像装置203的电信号的模拟-数字转换器204将模拟信号转换成数字信号。
接着说明本实施例的摄像设备的整个画面频率分布检测部103。在整个画面频率分布检测部103中,使用拍摄图像信号的亮度值作为拍摄图像信号的亮度信息。整个画面频率分布检测部103检测通过对具有在上限亮度值或下限亮度值到指定亮度值的范围中的相关亮度值的拍摄图像信号的像素进行计数所获得的累积值,作为拍摄图像信号的整个画面频率分布,并且将所检测到的整个画面频率分布输出给整个画面频率分布曝光控制值计算部104。
在整个画面频率分布检测部103中,将指定亮度值A1设置为与可以利用拍摄图像信号来处理亮度的亮度范围的上限亮度值的例如1%相对应的亮度值,如图3A所示,并且将图3B中的指定亮度值A2设置为与该亮度范围的上限亮度值的例如10%相对应的亮度值。此外,在整个画面频率分布检测部103中,将图3C中的指定亮度值A3设置为与该亮度范围的上限亮度值的例如99%相对应的亮度值,并且将图3D中的指定亮度值A4设置为与该亮度范围的上限亮度值的例如90%相对应的亮度值。
整个画面频率分布检测部103通过检测拍摄图像信号的整个画面像素亮度集中程度,检测拍摄图像信号的整个画面频率分布。整个画面频率分布检测部103检测两个不同的计数值,即在从所指定的下限亮度值到图3A中的指定亮度值A1的范围中所计算出的计数值X1和在从所指定的下限亮度值到图3B中的指定亮度值A2的范围中所计算出的计数值X2。此外,整个画面频率分布检测部103检测另外两个不同的计数值,即在从所指定的上限亮度值到图3C中的指定亮度值A3的范围中所计算出的计数值X3和在从所指定的上限亮度值到图3D中的指定亮度值A4的范围中所计算出的计数值X4。
在本实施例中,根据用户是想要减少高光溢出的图像还是减少暗部缺失的图像,预先使用户在用于减少高光溢出的曝光控制和用于减少暗部缺失的曝光控制之间进行选择。整个画面频率分布检测部103根据用户选择(经由未示出的接口给出的用户指示),在发生暗部缺失时所执行的用于计算整个画面频率分布曝光控制值的下述计算处理和发生高光溢出时所执行的用于计算整个画面频率分布曝光控制值的下述计算处理之间进行切换。可选地,在检测到计数值X1~X4之后,可以基于计数值X1和X3之间或者计数值X2和X4之间的大小关系,自动进行用于计算用于减少暗部缺失的整个画面频率分布曝光控制值的计算处理和用于计算用于减少高光溢出的整个画面频率分布曝光控制值的计算处理之间的切换。例如,如果X1>X3,则执行用于计算用于减少暗部缺失的整个画面频率分布曝光控制值的计算处理。
注意,可以通过转换成颜色信号前的拍摄图像信号的像素值、或者已被转换成颜色信号的拍摄图像信号的R、G和B成分之一的像素值来表示拍摄图像信号的像素亮度。此外,并非必须要求进行一个像素一个像素的计数来获得计数值。例如,可以将表示拍摄图像信号的所有像素的总计数值的1%的像素数设置为计数值1。在这种情况下,像素计数值将像素的数量表示为占拍摄图像信号的所有像素的百分比。
将说明用于减少暗部缺失的整个画面频率分布曝光控制值的计算。整个画面频率分布曝光控制值计算部(以下称为“控制值计算部”)104在图3A的计数值X1和图3C的计数值X3之间进行比较。当图3A的计数值X1较大时,控制值计算部104检测到暗部缺失区域占拍摄图像信号的大的比例。简而言之,控制值计算部104计算用于减少暗部缺失的整个画面频率分布曝光控制值。
将参考图4A说明用于计算用于减少暗部缺失的整个画面频率分布曝光控制值的计算处理。当要通过摄像设备进行拍摄时,控制值计算部104开始用于计算用于减少暗部缺失的整个画面频率分布曝光控制值的计算处理,并且进行判断以检测暗部缺失。例如,如果像素计数值X1等于或大于图3A所示的拍摄图像信号的所有像素的总计数值的1%(步骤S401a为“是”),则判断为检测到了暗部缺失。如果控制值计算部104判断为检测到了暗部缺失,则控制值计算部104进入步骤S402a。另一方面,如果像素计数值X1小于拍摄图像信号的所有像素的总计数值的1%(步骤S401a为“否”),则控制值计算部104判断为没有检测到暗部缺失,并且控制值计算部104进入步骤S403a。
在步骤S402a,控制值计算部104将整个画面频率分布曝光控制值Eh设置为值Ca,随后终止该处理。整个画面频率分布曝光控制值Eh的值Ca是使得图3A所示的计数值X1小于拍摄图像信号的所有像素的总计数值的1%的这样的值。
在判断为没有发生暗部缺失而进入步骤S403a之后,控制值计算部104判断曝光值是否适于防止黑浮(black floating)。此时,控制值计算部104使用图3A的计数值X1和图3B的计数值X2,判断(X2-X1)的值是否等于或大于总计数值的10%,从而判断曝光值是否适于防止黑浮。
“黑浮”的图像是指在通过对图像进行分析所获得的亮度值频率分布的暗的部分中没有发现或者几乎没有发现像素的图像。在“黑浮”的图像中,有时出现暗的部分看起来在浮动,这使得图像对比度减小。因此,需要判断是否设置了不会导致黑浮的这类曝光值。
如果控制值计算部104判断为(X2-X1)的值不小于总计数值的10%,即曝光值适于防止黑浮,则控制值计算部104进入步骤S404a。另一方面,如果控制值计算部104判断为(X2-X1)的值小于总计数值的10%,即曝光值可引起黑浮,则控制值计算部104进入步骤S405a。
当控制值计算部104进入步骤S404a时,即当没有检测到暗部缺失,并且曝光值适于防止黑浮时,控制值计算部104将整个画面频率分布曝光控制值Eh设置为0,随后终止该处理。
在步骤S405a,控制值计算部104将整个画面频率分布曝光控制值Eh设置成值Da,以减少黑浮,随后终止该处理。注意,控制值计算部104预先将整个画面频率分布曝光控制值Ca和Da作为适当设置的固定值存储在未示出的存储部中。例如,控制值计算部104可以在步骤S402a设置正值,并且在步骤S405a设置负值。只要Ca的符号是正的(Ca>0)并且Da的符号为负的(Da<0)成立,整个画面频率分布曝光控制值Ca和Da各自的绝对值可以相互相等或不同。
接着参考图4B说明用于计算用于减少高光溢出的整个画面频率分布曝光控制值的计算处理。控制值计算部104在图3A的计数值X1和图3C的计数值X3之间进行比较。当图3C的计数值X3较大时,控制值计算部104检测到高光溢出区域占拍摄图像信号的大的比例。简而言之,控制值计算部104计算用于减少高光溢出的整个画面频率分布曝光控制值。
在摄像设备要进行拍摄时,控制值计算部104开始用于计算用于减少高光溢出的整个画面频率分布曝光控制值的计算处理,并且进行判断以检测高光溢出。
如果像素计数值X3等于或大于图3C所示的拍摄图像信号的所有像素的总计数值的1%(步骤S401b为“是”),则控制值计算部104判断为检测到了高光溢出。当控制值计算部104判断为检测到了高光溢出时,控制值计算部104进入步骤S402b。另一方面,如果像素计数值X3小于拍摄图像信号的所有像素的总计数值的1%(步骤S401b为“否”),则控制值计算部104判断为没有检测到高光溢出,并且控制值计算部104进入步骤S403b。
当处理进入步骤S402b时,即当检测到了高光溢出时,控制值计算部104将整个画面频率分布曝光控制值Eh设置为值Cb,随后终止该处理。整个画面频率分布曝光控制值Eh的值Cb是使得计数值X3小于拍摄图像信号的所有像素的总计数值的1%的这样的值。
当处理进入步骤S403b时,即当没有检测到高光溢出时,控制值计算部104判断曝光值是否适于防止白沉(whitesinking)。此时,控制值计算部104使用图3C的计数值X3和图3D的计数值X4,判断(X4-X3)的值是否等于或大于总计数值的10%,从而判断曝光值是否适于防止白沉。
“白沉”的图像是指在通过对图像进行分析所获得的亮度值频率分布的亮的部分中发现很少的像素的图像。在“白沉”图像中,有时出现图像整体上是暗的,因此需要判断是否设置了不会导致白沉的这类曝光值。
如果控制值计算部104判断为(X4-X3)的值不小于总计数值的10%,即曝光值适于防止白沉,则控制值计算部104进入步骤S404b。另一方面,如果控制值计算部104判断为(X4-X3)的值小于总计数值的10%,即曝光值可导致白沉,则控制值计算部104进入步骤S405b。
当控制值计算部104进入步骤S404b时,即当没有检测到高光溢出,并且曝光值适于防止白沉时,控制值计算部104将整个画面频率分布曝光控制值Eh设置成0,并且在这种情况下,在不执行曝光控制的情况下立即终止本处理。
当控制值计算部104进入步骤S405b时,控制值计算部104将整个画面频率分布曝光控制值Eh设置成值Db,以消除白沉。注意,控制值计算部104预先将整个画面频率分布曝光控制值Cb和Db作为适当设置的固定值存储在未示出的存储部中。例如,控制值计算部104可以在步骤S402b设置正值,并且可以在步骤S405b设置负值。只要Cb的符号是负的(Cb<0)并且Db的符号是正的(Db>0)成立,整个画面频率分布曝光控制值Cb和Db各自的绝对值可以相互相等或不同。
接着参考图5A说明根据本实施例的摄像设备的小区域亮度检测部。当X1≥1%或者X3≥1%成立时,在图4A的步骤S401a或者图4B的S401b中,进行小区域亮度检测部105和小区域亮度曝光控制值计算部106的曝光控制值的计算。在整个画面中发生了暗部缺失或高光溢出的状态下,进行小区域亮度检测,以检测暗部缺失区域或高光溢出区域的分散程度。
小区域亮度检测部105将拍摄图像信号的整个画面分成小区域块,并且检测各小区域块的亮度。每一小区域块都具有表示其位置的地址信息。例如,在图5A中,将拍摄图像信号的整个画面在垂直方向和水平方向上均等地分成7×7个小区域块。小区域亮度检测部105将小区域块的平均亮度值作为小区域亮度输出给小区域亮度曝光控制值计算部106。
小区域块不局限于上述布局,而且各块的垂直尺寸和水平尺寸可以相互不同。可选地,小区域块在大小上可以不全是均等的,并且可以在大小上相互不同。小区域亮度检测部105可以对各小区域块中的各个像素的亮度值进行中值滤波,并且将中值滤波的结果设置为相关联的小区域块的小区域亮度。此外,小区域亮度检测部105可以计算基于小区域块中的拍摄图像信号的亮度值频率分布的信号强度积分值。可选地,小区域亮度检测部105可以将亮度不小于预定值(所设置的阈值)的像素的计数设置为相关联的小区域块的小区域亮度。此外,可选地,小区域亮度检测部105可以将亮度不高于预定值(所设置的阈值)的像素的计数设置为相关联的小区域块的小区域亮度。
接着参考图5B说明摄像设备的小区域亮度曝光控制值计算部106。
小区域亮度曝光控制值计算部106检测具有不高于或不低于作为所设置的阈值的预定值的小区域亮度的小区域块,并且计算小区域亮度曝光控制值。例如,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值表示为表示是否进行小区域亮度曝光控制的二进位值0或1。更具体地,小区域亮度曝光控制值是在计算下述曝光校正值Er时所使用的相乘值Ea,并且通过将相乘值Ea设置成0或1,设置是否执行小区域亮度曝光控制。
在用于计算用于减少高光溢出的小区域亮度曝光控制值的情况下,小区域亮度曝光控制值计算部106检测例如亮度值高于亮度值200的小区域块。当检测到亮度值高于亮度值200的小区域块时,小区域亮度曝光控制值计算部106判断为高光溢出区域集中在拍摄图像信号的小区域块中。在这种情况下,需要小区域亮度曝光控制值计算部106将对拍摄图像信号进行拍摄所使用的曝光值控制得低。更具体地,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值设置成1。
另一方面,当没有检测到亮度值高于亮度值200的小区域块时,即使拍摄图像信号的一些小区域块包含高光溢出区域,小区域亮度曝光控制值计算部106也判断为高光溢出区域是分散的。在这种情况下,小区域亮度曝光控制值计算部106判断为无需进行小区域亮度曝光控制。然后,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值设置为0。
在用于计算用于减少暗部缺失的小区域亮度曝光控制值的情况下,小区域亮度曝光控制值计算部106检测亮度值不高于例如亮度值50的小区域块。当检测到亮度值不高于亮度值50的小区域块时,小区域亮度曝光控制值计算部106判断为暗部缺失区域集中在拍摄图像信号的小区域块中。在这种情况下,小区域亮度曝光控制值计算部106判断为需要将对拍摄图像信号进行拍摄所使用的曝光值控制得低,并且将小区域亮度曝光控制设置成1。
另一方面,当没有检测到亮度值不高于亮度值50的小区域块时,小区域亮度曝光控制值计算部106判断为暗部缺失区域是分散的。在这种情况下,由于不存在发生暗部缺失的小区域块或者暗部缺失区域是分散的,所以小区域亮度曝光控制值计算部106判断为无需进行小区域亮度曝光控制,并且将小区域亮度曝光控制值设置为0。
可选地,小区域亮度曝光控制值计算部106可以检测以下所检测到的小区域块之间的连续性(即连续小区域块的范围),并且根据所检测到的连续性来计算小区域亮度曝光控制值,其中,检测到上述所检测到的小区域块的亮度值不低于预定值或者不高于预定值。在这种情况下,小区域亮度曝光控制值计算部106形成用于检测所检测到的小区域块的范围的预定区域范围检测单元。例如,当没有检测到不小于连续块数3(连续性阈值)的小区域块之间的连续性时,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值设置为0。另一方面,当检测到不小于连续块数3(连续性阈值)的小区域块之间的连续性时,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值设置成1。
小区域亮度曝光控制值计算部106可以根据小区域块的大小,选择性地判断是在检测所检测到的小区域块之间的连续性之后还是在不检测所检测到的小区域块之间的连续性的情况下来计算小区域亮度曝光控制值。例如,当小区域块的大小小于指定大小时,小区域亮度曝光控制值计算部106检测所检测到的小区域块之间的连续性。另一方面,当小区域块的大小大于指定大小时,小区域亮度曝光控制值计算部106在不检测所检测到的小区域块之间的连续性的情况下,计算小区域亮度曝光控制值。
小区域亮度曝光控制值计算部106可以使用除将小区域亮度曝光控制值设置成二进位值0或1的方法以外的方法。例如,小区域亮度曝光控制值计算部106可以根据被检测到具有不低于预定值或不高于预定值的亮度值的相互连续的小区域块的数量(以下称为“连续块数”),计算小区域亮度曝光控制值。在这种情况下,例如,当连续块数不小于5时,小区域亮度曝光控制值计算部106将小区域亮度曝光控制值设置成预定值,并且当连续块数不小于1并且小于5时,将小区域亮度曝光控制值设置成该预定值的50%。
注意,将用于减少暗部缺失的小区域亮度曝光控制值设置成正值,并且将用于减少高光溢出的小区域亮度曝光控制值设置成负值。此外,当相互连接的小区域块的数量等于0时,将小区域亮度曝光控制值设置成0。
接着参考图6说明通过上述第一实施例的摄像设备所执行的整个画面曝光值确定处理。
当用户进行用于确定拍摄的曝光的操作时,摄像设备开始整个画面曝光值确定处理。然后,控制值计算部104根据从摄像部101所输出的拍摄图像信号,计算整个画面频率分布曝光控制值Eh,如参考图4A和4B所述(步骤S601)。然后,根据对图4A的步骤S401a或图4B的步骤S401b的问题的回答是肯定的(“是”)还是否定的(“否”),切换下面的步骤(步骤S602)。更具体地,如果对图4A的步骤S401a或图4B的步骤S401b的问题的回答是肯定的(“是”),则处理进入步骤S603。另一方面,如果对图4A的步骤S401a或图4B的步骤S401b的问题的回答是否定的(“否”),则在不计算小区域亮度曝光控制值Ea的情况下处理进入步骤S605。在步骤S603,小区域亮度曝光控制值计算部106如参考图5A和5B所述,计算小区域亮度曝光控制值Ea。
然后,曝光校正值计算部107基于通过小区域亮度曝光控制值计算部106所计算出的小区域亮度曝光控制值Ea,校正整个画面频率分布曝光控制值Eh,从而计算曝光校正值Er(步骤S604)。
当小区域亮度曝光控制值Ea等于0时,曝光校正值计算部107判断为集中发生的亮的部分很少,因此将曝光校正值Er设置成0。另一方面,当小区域亮度曝光控制值Ea等于1时,曝光校正值计算部107将整个画面频率分布曝光控制值Eh设置成曝光校正值Er(即Er=Eh*Ea)。
当小区域亮度曝光控制值Ea等于0时,曝光校正值计算部107可以将曝光校正值Er设置成整个画面频率分布曝光控制值Eh的一部分。更具体地,假定Er=α*Eh+(1-α)Ea*Eh(0<α<1),当Ea等于0时,Er等于α*Eh,并且当Ea等于1时,Er等于Eh。因此,即使暗部缺失区域或者高光溢出区域占整个画面的大的比例,当集中发生的亮的部分或者暗的部分很少时,也可能减弱校正。
在步骤S605,由于图像在整个画面上具有很少的暗部缺失或高光溢出,所以曝光校正值计算部107在不计算Ea的情况下,将整个画面频率分布曝光控制值Eh设置成曝光校正值Er。
然后,曝光值计算部108将在步骤S604或S605计算出的曝光校正值Er与拍摄图像信号的曝光值Et相加(步骤S606)。然后,曝光控制部109将通过曝光值计算部108所计算出的曝光值Et设置给摄像部101,并且摄像部101拍摄图像(步骤S607)。
曝光控制部109判断是否通过预定操作最终确定了曝光值(步骤S608)。如果曝光控制部109判断为通过预定操作最终确定了曝光值(步骤S608为“是”),则终止本处理。在本实施例中,当曝光校正值Er通过整个循环而保持为0时,曝光控制部109判断为曝光校正值收敛,并且判断为最终确定了曝光值。如果曝光控制部109判断为没有最终确定曝光值(步骤S608为“否”),则处理返回到步骤S601,并且重复进行步骤S601~S607。具体地,在静止图像拍摄中,可以在锁定焦点时最终确定曝光值。此外,在静止图像拍摄中,当该循环处理进行了指定次数时可以终止该处理。
另一方面,在运动图像拍摄中,始终进行图6的步骤S601~S607的处理,因此,当按下拍摄按钮时终止该处理。
如上所述,根据本实施例,基于根据整个画面频率分布所获得的曝光控制值和根据通过分割画面所获得的各个小区域中的亮度值所获得的小区域亮度曝光控制值,来进行曝光控制。因此,不仅可以检测高光溢出或暗部缺失,而且还可以根据拍摄图像中的高光溢出区域或暗部缺失区域的分布而有效实现曝光控制。
曝光校正值计算部107可以使用整个画面频率分布曝光控制值Eh来校正小区域亮度曝光控制值计算部106所计算出的小区域亮度曝光控制值Ea。在这种情况下,如上所述,通过控制值计算部104计算整个画面频率分布曝光控制值Eh,并且,例如,小区域亮度曝光控制值计算部106计算作为多个值的而不是作为二进位值0或1的小区域亮度曝光控制值Ea。
更具体地,在该变形例中,控制值计算部104在步骤S402a获得值1作为整个画面频率分布曝光控制值Eh。此外,控制值计算部104在步骤S404a获得值0作为Eh,并且在步骤S405a获得值-1作为Eh以消除黑浮。
另一方面,在步骤S402b,控制值计算部104获得-1作为整个画面频率分布曝光控制值Eh。此外,控制值计算部104在步骤S404b获得0作为Eh,并且在步骤S405b获得1作为Eh,以消除白沉。
当Eh=1时,曝光校正值计算部107将曝光校正值Er设置成小区域亮度曝光控制值Ea。此外,当Eh=0时,曝光校正值计算部107将Er设置成0,并且当Eh=-1时,曝光校正值计算部107将Er设置为-Ea。
下面将参考图7~9说明根据本发明第二实施例的摄像设备。将第二实施例的摄像设备能够控制通过对使用各自不同的曝光值、即第一曝光值和相对高于第一曝光值的第二曝光值所拍摄的拍摄图像信号进行合成而形成的宽动态范围拍摄图像信号的曝光。第二实施例的摄像设备能够对宽动态范围拍摄图像信号执行曝光控制以减少高光溢出和暗部缺失两者。
这里将参考图7说明第二实施例的摄像设备。注意,以相同附图标记表示与第一实施例的相同的组件,并且省略对其的详细说明。
图7是根据第二实施例的摄像设备的示意框图。附图标记701表示信号合成部,用于对使用第一曝光值所拍摄的拍摄图像信号和使用第二曝光值所拍摄的拍摄图像信号进行合成,并且输出合成图像信号。信号合成部701能够进行用于对使用两个不同的曝光值所分别拍摄的拍摄图像信号进行合成的合成处理。在这种情况下,例如,信号合成部701首先设置预定亮度值。然后,信号合成部701获取作为低曝光图像信号的、使用第一曝光值所拍摄的拍摄图像信号的像素信号,作为合成之后的图像信号,其中,该合成之后的图像信号与使用第一曝光值的拍摄图像信号中亮度值高于预定亮度值的区域相关联。此外,信号合成部701获取作为高曝光图像信号的、使用第二曝光值所拍摄的拍摄图像信号的像素信号,作为合成之后的图像信号,其中,该合成之后的图像信号与使用第一曝光值的拍摄图像信号中亮度值低于预定亮度值的区域相关联。然后,信号合成部701通过将与第一曝光值相关联的拍摄图像信号和与第二曝光值相关联的拍摄图像信号这两个拍摄图像信号中的一个的信号强度调整成另一个的信号强度以使得这两个拍摄图像信号具有相同水平的信号强度,从而基于这两个拍摄图像信号之间的曝光比来进行增益校正。可以结合一般的伽马校正来执行该增益校正。
具体地,假定与第一曝光值相关联的拍摄图像信号和与第二曝光值相关联的拍摄图像信号之间的曝光比是1:10,与第一曝光值相关联的拍摄图像信号的光量是与第二曝光值相关联的拍摄图像信号的光量的十分之一,因此,通过将与第一曝光值相关联的拍摄图像信号的信号强度乘以增益10,信号合成部701可以使得与第一曝光值相关联的拍摄图像信号的信号强度在水平上等于与第二曝光值相关联的拍摄图像信号的信号强度。此外,还可以根据通过将与第二曝光值相关联的拍摄图像信号的信号强度除以10所获得的信号强度来合成图像。注意,除上述几点以外,根据第二实施例的摄像设备具有与图1所示的摄像设备相同的结构。
摄像设备的信号合成部701设置有如图8所示的图像存储部801和合成部802,以使得能够对宽动态范围拍摄图像信号执行曝光控制。
在本摄像设备中,摄像部101连续交替使用两个不同的曝光值拍摄图像,作为与第一曝光值相关联的拍摄图像信号和与第二曝光值相关联的拍摄图像信号。将这样所拍摄的拍摄图像信号临时存储在信号合成部701的图像存储部801中。
此后,当摄像部101拍摄要合成的最后的拍摄图像信号时,合成部802使用存储在图像存储部801中的拍摄图像信号和最后的拍摄图像信号,来对至少两个拍摄图像信号进行合成。例如,在对使用第一曝光值和第二曝光值各自所拍摄的拍摄图像信号进行合成的情况下,合成部802进行拍摄图像信号之间的信号强度水平的匹配,然后输出合成图像信号。
接着说明通过第二实施例的摄像设备所执行的、宽动态范围拍摄图像信号生成中的拍摄图像信号的曝光控制。
在宽动态范围拍摄图像信号生成中的拍摄图像信号的曝光控制中,使用两个不同的曝光值,即第一曝光值Et1和曝光量高于第一曝光值Et1的第二曝光值Et2来进行控制。为此,不同于第一实施例,摄像部101进行用于交替获取与第一曝光值相关联的拍摄图像信号和与第二曝光值相关联的拍摄图像信号的操作。
接着参考图9A和9B说明在使用两个曝光值的情况下,通过第二实施例的摄像设备所执行的曝光值确定处理。当用户进行用于确定摄像的曝光的操作时,摄像设备开始在摄像设备使用两个曝光值时所执行的曝光控制值确定处理。在使用两个曝光值所执行的曝光控制值确定处理中,首先执行与第一曝光值相关联的曝光控制。为此,摄像部101进行用于获取与第一曝光值相关联的拍摄图像信号的预处理。
控制值计算部104根据从摄像部101输出的、与第一曝光值Et1相关联的拍摄图像信号,计算整个画面频率分布曝光控制值Eh(步骤S901)。第一曝光值Et1用于获得没有高光溢出的图像,因此,在步骤S901,执行第一实施例中参考图4B所述的、用于计算用于减少高光溢出的整个画面频率分布曝光控制值的计算处理。然后,在步骤S902,根据步骤S901的计算处理的结果,即对图4B的步骤S401b的问题的回答是肯定的(“是”)还是否定的(“否”),切换下面的步骤。更具体地,如果对图4B的步骤S401b的问题的回答是肯定的(“是”),则处理进入步骤S903。另一方面,如果对图4B的步骤S401b的问题的回答是否定的(“否”),则在不计算小区域亮度曝光控制值Ea的情况下,处理进入步骤S905。在步骤S903,小区域亮度曝光控制值计算部106计算小区域亮度曝光控制值Ea。
然后,如第一实施例一样,曝光校正值计算部107基于通过小区域亮度曝光控制值计算部106所计算出的小区域亮度曝光控制值Ea,校正整个画面频率分布曝光控制值Eh,从而计算曝光校正值Er(步骤S904)。
另一方面,在步骤S905,由于判断为图像在整个画面上具有很少的高光溢出,所以在不计算小区域亮度曝光控制值Ea的情况下,将整个画面频率分布曝光控制值Eh校正成曝光校正值Er。然后,曝光值计算部108将在步骤S904或S905所计算出的曝光校正值Er与拍摄图像信号的曝光值Et相加,从而计算第一曝光值Et1(步骤S906)。将这样所获得的第一曝光值Et1存储在摄像部101中(步骤S907)。
然后,曝光控制部109从摄像部101读出第二曝光值Et2以设置第二曝光值。然后,曝光控制部109利用第二曝光值Et2控制摄像部101,以获得使用第二曝光值Et2所拍摄的拍摄图像信号(步骤S908)。
然后,控制值计算部104根据从摄像部101所输出的、使用第二曝光值Et2所拍摄的拍摄图像信号,计算整个画面频率分布曝光控制值Eh(步骤S909)。第二曝光值Et2是用于获得没有暗部缺失的图像,因此,在步骤S909,执行第一实施例中参考图4A所述的、用于计算用于减少暗部缺失的整个画面频率分布曝光控制值的计算处理。然后,在步骤S910,根据步骤S909的计算处理的结果,即对图4A的步骤S401a的问题的回答是肯定的(“是”)还是否定的(“否”),切换下面的步骤。如果对步骤S401a的问题的回答是肯定的(“是”),则处理进入步骤S911。另一方面,如果对步骤S401a的问题的回答是否定的(“否”),则在不计算小区域亮度曝光控制值Ea的情况下,处理进入步骤S913。在步骤S911,小区域亮度曝光控制值计算部106计算小区域亮度曝光控制值Ea。
然后,类似于第一实施例,曝光校正值计算部107基于通过小区域亮度曝光控制值计算部106所计算出的小区域亮度曝光控制值Ea,校正整个画面频率分布曝光控制值Eh,从而计算曝光校正值Er(步骤S912)。
另一方面,在步骤S913,由于判断为图像在整个画面上具有很少的暗部缺失,所以在不计算小区域亮度曝光控制值Ea的情况下,将整个画面频率分布曝光控制值Eh校正成曝光校正值Er。然后,曝光值计算部108将在步骤S912或S913所计算出的曝光校正值Er与拍摄图像信号的曝光值Et相加,从而计算第二曝光值Et2(步骤S914)。
然后,曝光控制部109通过预定操作判断是否最终确定了曝光值(步骤S915)。如果曝光控制部109通过预定操作判断为最终确定了曝光值(步骤S915为“是”),则终止该处理。在本实施例中,当曝光校正值Er通过整个循环而保持为0时,曝光控制部109判断为曝光校正值收敛,并且判断为最终确定了曝光值。如果曝光控制部109判断为没有最终确定曝光值(步骤S915为“否”),则处理进入步骤S916,在步骤S916,存储第二曝光值Et2。
然后,曝光控制部109从摄像部101读出第一曝光值Et1,并且利用第一曝光值Et1控制摄像部101。摄像部101针对摄像设置第一曝光值Et1,并且获得拍摄图像信号(步骤S917)。
此后,处理返回到步骤S901,并且曝光控制部109重复进行步骤S901~S914,直到在步骤S915判断为最终确定了曝光值为止。尽管在上述使用两个曝光值所执行的曝光控制值确定处理中,首先执行与第一曝光值相关联的曝光控制,但是可以首先执行与第二曝光值相关联的曝光控制。
在本摄像设备中,信号合成部701根据使用通过使用两个曝光值所执行的图9中的上述曝光控制值确定处理所确定的第一曝光值和第二曝光值各自所拍摄的拍摄图像信号,生成合成图像信号。
尽管在使用两个曝光值所执行的图9中的曝光控制值确定处理中,基于使用各自不同的曝光值所拍摄的拍摄图像信号来确定适当的第一曝光值和第二曝光值,但是可以基于作为来自合成部802的输出的合成图像来确定适当的第一曝光值和第二曝光值。在这种情况下,根据图6的处理对合成图像进行曝光控制操作,从而可以确定适当的第一曝光值和第二曝光值。
简而言之,在根据本实施例的摄像设备中,检测拍摄图像信号的整个画面频率(第一亮度)分布,并且进行曝光控制以防止高光溢出或暗部缺失。在该曝光控制中,摄像设备检测高光溢出区域或暗部缺失区域在拍摄图像上是分散的还是集中的,并且根据分散或集中的程度来调整控制校正值,以获得降噪良好的图像。此外,摄像设备检测亮度值高于或低于各自的预定值的、作为用于检测高光溢出或暗部缺失的区域的块之间的连续性,并且根据连续性、即被判断为具有比各自的预定值更高或更低的亮度值的连续块的数量(连续块数)来调整控制校正量,从而获得适当图像。
综上所述,摄像设备设置有用于检测拍摄图像信号的整个画面频率分布并进行曝光控制以防止高光溢出和暗部缺失的整个画面频率分布检测部103和控制值计算部104。
摄像设备设置有小区域亮度检测部105(第二亮度检测单元)和小区域亮度曝光控制值计算部106(第二曝光控制值计算单元),以根据拍摄图像上的高光溢出区域或暗部缺失区域的分散或集中的程度来调整控制校正量。
在本摄像设备中,将来自控制值计算部104(第一曝光控制值计算单元)的输出值和来自小区域亮度曝光控制值计算部106的输出值输入给曝光校正值计算部107。曝光校正值计算部107根据整个画面频率分布曝光控制值(第一曝光控制值)和小区域亮度曝光控制值(第二曝光控制值)来计算适当的曝光校正值,并且输出所获得的曝光校正值。摄像设备使用从曝光校正值计算部107输出的曝光校正值控制诸如快门速度(被摄体曝光时间)和光圈功能等的功能,从而进行用于适当摄像的曝光控制。
接着详细说明本摄像设备的小区域亮度检测部105如何设置用于检测高光溢出区域或暗部缺失区域在拍摄图像上是分散还是集中的区域。
通过检查本实施例的摄像设备,示出当高光溢出区域或暗部缺失区域在与图像的整个面积的1%相对应的区域中成簇集中时,高光溢出或暗部缺失变得明显。因此,在本实施例的摄像设备中,在理论上希望将作为用于检测高光溢出或暗部缺失的检测区域(小区域块:IPXX)的一个块的大小设置成图像的整个面积的1%。
然而,在本摄像设备中,随着将作为检测区域的一个块的大小设置得更小,处理时间变得更长,并且小区域亮度检测部105的结构变得更复杂。这导致小区域亮度检测部105的大小增大。考虑到这些不便,根据本实施例,在理论上希望将作为用于检测高光溢出或暗部缺失的检测区域的一个块的大小设置为图像的整个面积的5%,以适当设计该摄像设备。
作为用于检测高光溢出或暗部缺失的检测区域所设置的一个块的大小基于摄像设备所拍摄的图像的大小。因此,通过观察摄像设备的画面,参考将会使得高光溢出或暗部缺失明显的大小来考虑一个块的大小。此外,通过考虑用于适当设计摄像设备的条件,适当确定一个块的大小。
此外,在本摄像设备中,基于在一个块中包含多少个具有不小于作为阈值所设置的预定值的像素值的像素来判断高光溢出区域是否集中。
在这种情况下,当判断为一个块中的像素都与高光溢出相关联时(近似100%),可以将该控制配置成不进行用于减少控制量的校正。另一方面,当判断为一个块不包含与高光溢出相关联的任何像素时(或者接近0%),可以将该控制配置成可以进行用于使控制量最小化的校正。
具体地,在本摄像设备中,如图10所示设置下限百分比(本例子中为10%)和上限百分比(本例子中为80%)。此外,如图10所示设置在0和1之间的范围内取值的系数α。然后,通过将最大校正量乘以与一个块中的所有像素中被判断为与高光溢出(或暗部缺失)相关联的像素的百分比相对应的系数α,获得控制校正量。
接着说明下面的情况:摄像设备检测被判断为具有比各自的预定值更高或更低的亮度值的、作为用于检测高光溢出或暗部缺失的区域的块之间的连续性(连续块数),并且检测更大区域中的高光溢出区域或暗部缺失区域的分散程度。更具体地,摄像设备检测表示同时发生高光溢出或暗部缺失的一组连续小区域块中所存在的小区域块的数量的连续块数。使用连续块数来判断高光溢出区域或暗部缺失区域是分散的还是集中成组的。
具体地,在本摄像设备中,如图11所示设置下限连续块数和上限连续块数。此外,如图11所示设置在0和1之间的范围内取值的系数β。然后,通过将最大校正量乘以与连续块数相对应的系数β,获得控制校正量。需要根据块大小来设置下限连续块数和上限连续块数。因此,在设置下限连续块数和上限连续块数的情况下,首先,确定作为用于上述检测高光溢出或暗部缺失的检测区域所设置的一个块的大小。接着,例如,通过主观评价来确定开始使得高光溢出明显的各自具有所确定大小的连续块的连续块数(上限百分比)和开始使得高光溢出不明显的各自具有所确定大小的连续块的连续块数(下限百分比)。
在本摄像设备中,如上所述,使用基于拍摄图像上的高光溢出区域或暗部缺失区域的分散或集中的程度所获得的控制校正量和基于连续块数所获得的控制校正量。与检测拍摄图像信号的整个画面频率分布然后进行曝光控制以防止高光溢出或暗部缺失的情况下相比,这使得可以进一步减少噪声对图像画面的不利影响。此外,在本摄像设备中,高光溢出或暗部缺失的主观明显程度在下面的情况之间不同:特定量的高光溢出或暗部缺失不是全部集中在某一区域中,而是高光溢出区域或暗部缺失区域在其中一部分区域形成簇的状态下而周围分散的情况;以及高光溢出区域或暗部缺失区域到处分散的情况。例如,当高光溢出区域在其中一部分区域形成簇的状态下而周围分散时,高光溢出明显,因此,本摄像设备进行控制以使得缩短用于要拍摄的图像的曝光时间。另一方面,例如,当高光溢出区域到处分散时,高光溢出的主观明显程度低,因此本摄像设备进行控制以使得增大用于要拍摄的图像的曝光时间,以生成降噪图像。
本摄像设备生成具有宽动态范围的合成图像信号。摄像设备可以接收的用于正常拍摄的光量受限,因此当进行频率分布校正以防止暗部缺失时,亮的部分易于发生高光溢出。另一方面,当进行频率分布校正以防止高光溢出时,暗的部分易于发生暗部缺失。为解决该问题,本摄像设备拍摄宽动态范围合成图像,从而生成没有高光溢出的低曝光图像和没有暗部缺失的高曝光图像。因此,可以生成没有高光溢出和暗部缺失的图像。
还可以利用读出并执行记录在存储器装置上的程序以进行上述实施例的功能的系统或设备的计算机(或者CPU或MPU等装置)和通过下面的方法实现本发明的方面,其中,利用系统或设备的计算机通过例如读出并执行记录在存储器装置上的程序以进行上述实施例的功能来进行上述方法的步骤。为此,例如,通过网络或者通过用作存储器装置的各种类型的记录介质(例如,计算机可读介质)将该程序提供给计算机。
尽管参考典型实施例说明了本发明,但是应该理解,本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有修改、等同结构和功能。
本申请要求2011年5月24日提交的日本申请2011-115787和2012年5月15日提交的日本申请2012-111263的优先权,其全部内容通过引用包含于此。
Claims (12)
1.一种摄像设备,其包括用于获得被摄体光并且输出图像信号的摄像部,所述摄像设备还包括:
第一亮度检测单元,用于基于所述图像信号来检测整个画面亮度频率分布;
第一曝光控制值计算单元,用于根据所述整个画面亮度频率分布来计算第一曝光控制值;
第二亮度检测单元,用于将所述图像信号分成多个小区域,并且检测各小区域的亮度;
预定区域范围检测单元,用于检测所述第二亮度检测单元所检测到的小区域的亮度不低于第一预定阈值或者不高于第二预定阈值的小区域的范围;
第二曝光控制值计算单元,用于根据所述预定区域范围检测单元所检测到的小区域的范围,计算第二曝光控制值;
曝光校正值计算单元,用于基于所述第一曝光控制值校正所述第二曝光控制值或者基于所述第二曝光控制值校正所述第一曝光控制值,从而计算曝光校正值;
曝光值计算单元,用于使用所述曝光校正值和在输出所述图像信号时所使用的曝光值,计算曝光值;以及
曝光控制单元,用于基于所述曝光值计算单元所计算出的曝光值,对所述摄像部进行曝光控制。
2.根据权利要求1所述的摄像设备,其特征在于,所述曝光值计算单元计算至少两个不同的曝光值,其中,所述两个不同的曝光值包括与相对小的曝光量相关联的、用于低曝光图像信号的第一曝光值以及与相对大的曝光量相关联的、用于高曝光图像信号的第二曝光值。
3.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第一曝光值的情况下,当所述第二亮度检测单元所检测到的小区域的亮度不低于所述第一预定阈值时,所述第二曝光控制值计算单元计算所述第二曝光控制值以使得曝光量减小。
4.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第一曝光值的情况下,当所述第二亮度检测单元所检测到的小区域的亮度不高于所述第二预定阈值时,所述第二曝光控制值计算单元计算所述第二曝光控制值以使得曝光量增大。
5.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第二曝光值的情况下,当所述第二亮度检测单元所检测到的小区域的亮度不高于所述第二预定阈值时,所述第二曝光控制值计算单元计算所述第二曝光控制值以使得曝光量增大。
6.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第二曝光值的情况下,当所述第二亮度检测单元所检测到的小区域的亮度不低于所述第一预定阈值时,所述第二曝光控制值计算单元计算所述第二曝光控制值以使得曝光量减小。
7.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第一曝光值的情况下,当所述预定区域范围检测单元所检测到的小区域的连续范围不小于预定范围阈值时,计算所述第二曝光控制值以使得曝光量减小。
8.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第一曝光值的情况下,当所述预定区域范围检测单元所检测到的小区域的连续范围不大于预定范围阈值时,计算所述第二曝光控制值以使得曝光量增大。
9.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第二曝光值的情况下,当所述预定区域范围检测单元所检测到的小区域的连续范围不大于预定范围阈值时,计算所述第二曝光控制值以使得曝光量增大。
10.根据权利要求2所述的摄像设备,其特征在于,在所述曝光值计算单元计算所述第二曝光值的情况下,当所述预定区域范围检测单元所检测到的小区域的连续范围不小于预定范围阈值时,计算所述第二曝光控制值以使得曝光量减小。
11.根据权利要求1所述的摄像设备,其特征在于,所述第二亮度检测单元检测小区域中的像素的信号强度积分值作为小区域的亮度。
12.一种用于控制摄像设备的方法,所述摄像设备包括用于获得被摄体光并且输出图像信号的摄像部,所述方法包括以下步骤:
基于所述图像信号来检测整个画面亮度频率分布;
根据所述整个画面亮度频率分布来计算第一曝光控制值;
将所述图像信号分成多个小区域,并且检测各小区域的亮度;
检测所检测到的小区域的亮度不低于第一预定阈值或者不高于第二预定阈值的小区域的范围;
根据所检测到的小区域的范围,计算第二曝光控制值;
基于所述第一曝光控制值校正所述第二曝光控制值或者基于所述第二曝光控制值校正所述第一曝光控制值,从而计算曝光校正值;
使用所述曝光校正值和在输出所述图像信号时所使用的曝光值,计算曝光值;以及
基于所计算出的曝光值,对所述摄像部进行曝光控制。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011-115787 | 2011-05-24 | ||
JP2011115787 | 2011-05-24 | ||
JP2012111263A JP5968068B2 (ja) | 2011-05-24 | 2012-05-15 | 露出制御を行う撮像装置、撮像装置の制御方法、プログラム及び記録媒体 |
JP2012-111263 | 2012-05-15 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102801918A CN102801918A (zh) | 2012-11-28 |
CN102801918B true CN102801918B (zh) | 2015-08-05 |
Family
ID=47200874
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210165399.XA Expired - Fee Related CN102801918B (zh) | 2011-05-24 | 2012-05-24 | 摄像设备和用于控制该摄像设备的方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US8576331B2 (zh) |
JP (1) | JP5968068B2 (zh) |
CN (1) | CN102801918B (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013005017A (ja) * | 2011-06-13 | 2013-01-07 | Sony Corp | 撮像装置、および撮像装置制御方法、並びにプログラム |
JP5399578B2 (ja) * | 2012-05-16 | 2014-01-29 | シャープ株式会社 | 画像処理装置、動画像処理装置、映像処理装置、画像処理方法、映像処理方法、テレビジョン受像機、プログラム、及び記録媒体 |
WO2014186213A2 (en) * | 2013-05-14 | 2014-11-20 | Google Inc. | Providing visual effects for images |
US20150022687A1 (en) * | 2013-07-19 | 2015-01-22 | Qualcomm Technologies, Inc. | System and method for automatic exposure and dynamic range compression |
US20150262902A1 (en) | 2014-03-12 | 2015-09-17 | Invensas Corporation | Integrated circuits protected by substrates with cavities, and methods of manufacture |
KR101631439B1 (ko) * | 2014-05-29 | 2016-06-17 | 엘지전자 주식회사 | 카메라, 및 이를 구비한 차량 |
JP6671868B2 (ja) * | 2015-06-08 | 2020-03-25 | キヤノン株式会社 | 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体 |
CN105006019B (zh) * | 2015-07-13 | 2017-11-28 | 山东易创电子有限公司 | 一种序列图曝光度调整方法及装置 |
CN105575326B (zh) * | 2016-02-16 | 2018-11-23 | 深圳市华星光电技术有限公司 | 校准oled显示面板亮度不均的方法 |
WO2018235384A1 (ja) * | 2017-06-21 | 2018-12-27 | 富士フイルム株式会社 | 撮像装置、撮像装置の制御方法、及び撮像装置の制御プログラム |
CN109413335B (zh) * | 2017-08-16 | 2020-12-18 | 瑞芯微电子股份有限公司 | 一种双重曝光合成hdr图像的方法和装置 |
CN107509044B (zh) * | 2017-08-31 | 2020-08-18 | Oppo广东移动通信有限公司 | 图像合成方法、装置、计算机可读存储介质和计算机设备 |
CN107566752B (zh) * | 2017-10-31 | 2020-08-11 | 努比亚技术有限公司 | 一种拍摄方法、终端及计算机存储介质 |
CN109922274B (zh) * | 2017-12-13 | 2021-05-14 | 深圳英飞拓科技股份有限公司 | 基于直方图的摄像机强光抑制方法及装置 |
JP2020088802A (ja) * | 2018-11-30 | 2020-06-04 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
JP6693627B1 (ja) * | 2019-05-16 | 2020-05-13 | 東芝エレベータ株式会社 | 画像処理装置 |
JP7095714B2 (ja) * | 2019-09-24 | 2022-07-05 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN114051098B (zh) * | 2021-11-23 | 2023-05-30 | 河南牧业经济学院 | 一种视觉图像智能采集方法及平台 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101049012A (zh) * | 2004-08-31 | 2007-10-03 | 卡西欧计算机株式会社 | 图像拾取设备、曝光控制方法以及安装在图像拾取设备中的计算机程序 |
CN101267504A (zh) * | 2007-03-14 | 2008-09-17 | 索尼株式会社 | 图像拾取装置、图像拾取方法、曝光控制方法和程序 |
CN101800859A (zh) * | 2009-02-11 | 2010-08-11 | 三星数码影像株式会社 | 用于使用多种测光模式进行多次拍摄的拍摄方法和设备 |
Family Cites Families (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0736170B2 (ja) | 1991-04-03 | 1995-04-19 | 工業技術院長 | マルチプロセッサシステム |
US6583820B1 (en) * | 1997-03-17 | 2003-06-24 | Konica Corporation | Controlling method and apparatus for an electronic camera |
JPH1169372A (ja) * | 1997-08-14 | 1999-03-09 | Fuji Photo Film Co Ltd | 画像の明度調整方法およびその方法に使用するデジタルカメラ並びに画像処理装置 |
US6825884B1 (en) * | 1998-12-03 | 2004-11-30 | Olympus Corporation | Imaging processing apparatus for generating a wide dynamic range image |
US6738510B2 (en) * | 2000-02-22 | 2004-05-18 | Olympus Optical Co., Ltd. | Image processing apparatus |
JP4576658B2 (ja) * | 2000-02-29 | 2010-11-10 | ソニー株式会社 | 撮像装置、撮像方法及び撮像プログラム |
JP3938833B2 (ja) * | 2000-04-27 | 2007-06-27 | 株式会社リコー | 露出制御装置 |
JP4787403B2 (ja) * | 2000-12-06 | 2011-10-05 | カシオ計算機株式会社 | 自動露出装置及び方法 |
JP2003173438A (ja) * | 2001-12-06 | 2003-06-20 | Minolta Co Ltd | 画像処理装置 |
US7714928B2 (en) * | 2004-05-28 | 2010-05-11 | Konica Minolta Holdings, Inc. | Image sensing apparatus and an image sensing method comprising a logarithmic characteristic area and a linear characteristic area |
JP4466261B2 (ja) * | 2004-07-30 | 2010-05-26 | カシオ計算機株式会社 | 撮像装置、明るさ補正方法及びプログラム |
JP4240023B2 (ja) * | 2005-08-31 | 2009-03-18 | ソニー株式会社 | 撮像装置、撮像方法および撮像プログラム、ならびに、画像処理装置、画像処理方法および画像処理プログラム |
TWI285047B (en) * | 2005-11-24 | 2007-08-01 | Sunplus Technology Co Ltd | Method of automatic exposure control and automatic exposure compensated apparatus |
JP4867365B2 (ja) * | 2006-01-30 | 2012-02-01 | ソニー株式会社 | 撮像制御装置、撮像装置および撮像制御方法 |
JP4665780B2 (ja) * | 2006-01-30 | 2011-04-06 | ソニー株式会社 | 顔重要度判定装置、方法、および撮像装置 |
JP2007259411A (ja) * | 2006-02-21 | 2007-10-04 | Seiko Epson Corp | 露出判別装置およびその方法 |
JP4264553B2 (ja) * | 2006-06-12 | 2009-05-20 | ソニー株式会社 | 画像処理装置、撮像装置、画像出力装置、これらの装置における方法およびプログラム |
JP4791331B2 (ja) * | 2006-11-15 | 2011-10-12 | 富士フイルム株式会社 | 撮像装置及び露出制御方法 |
JP4254873B2 (ja) * | 2007-02-16 | 2009-04-15 | ソニー株式会社 | 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム |
JP4894595B2 (ja) * | 2007-04-13 | 2012-03-14 | ソニー株式会社 | 画像処理装置および方法、並びに、プログラム |
JP5127317B2 (ja) * | 2007-06-25 | 2013-01-23 | 三洋電機株式会社 | カメラ |
JP4402710B2 (ja) * | 2007-09-18 | 2010-01-20 | オリンパス株式会社 | 撮像装置 |
JP5149055B2 (ja) * | 2007-12-27 | 2013-02-20 | イーストマン コダック カンパニー | 撮像装置 |
JP4893642B2 (ja) * | 2008-01-23 | 2012-03-07 | 株式会社Jvcケンウッド | 自動露出制御装置 |
JP5458865B2 (ja) * | 2009-09-18 | 2014-04-02 | ソニー株式会社 | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP5371717B2 (ja) * | 2009-12-01 | 2013-12-18 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
EP2589216A4 (en) * | 2010-06-30 | 2015-08-05 | Lg Innotek Co Ltd | CAMERA MODULE AND DRIVE PROCESS THEREFOR |
JP2012156838A (ja) * | 2011-01-27 | 2012-08-16 | Sony Corp | 撮像装置、撮像制御方法、およびプログラム |
JP2012235332A (ja) * | 2011-05-02 | 2012-11-29 | Sony Corp | 撮像装置、および撮像装置制御方法、並びにプログラム |
JP2013055567A (ja) * | 2011-09-06 | 2013-03-21 | Olympus Imaging Corp | 撮像装置 |
-
2012
- 2012-05-15 JP JP2012111263A patent/JP5968068B2/ja not_active Expired - Fee Related
- 2012-05-17 US US13/474,136 patent/US8576331B2/en active Active
- 2012-05-24 CN CN201210165399.XA patent/CN102801918B/zh not_active Expired - Fee Related
-
2013
- 2013-10-11 US US14/051,574 patent/US8780262B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101049012A (zh) * | 2004-08-31 | 2007-10-03 | 卡西欧计算机株式会社 | 图像拾取设备、曝光控制方法以及安装在图像拾取设备中的计算机程序 |
CN101267504A (zh) * | 2007-03-14 | 2008-09-17 | 索尼株式会社 | 图像拾取装置、图像拾取方法、曝光控制方法和程序 |
CN101800859A (zh) * | 2009-02-11 | 2010-08-11 | 三星数码影像株式会社 | 用于使用多种测光模式进行多次拍摄的拍摄方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
US8780262B2 (en) | 2014-07-15 |
US8576331B2 (en) | 2013-11-05 |
JP2013009316A (ja) | 2013-01-10 |
US20140036141A1 (en) | 2014-02-06 |
US20120300094A1 (en) | 2012-11-29 |
JP5968068B2 (ja) | 2016-08-10 |
CN102801918A (zh) | 2012-11-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102801918B (zh) | 摄像设备和用于控制该摄像设备的方法 | |
CN108322669B (zh) | 图像获取方法及装置、成像装置和可读存储介质 | |
TWI524709B (zh) | 影像擷取設備、影像擷取設備之控制方法及電子裝置 | |
CN104349018B (zh) | 图像处理设备、图像处理方法和电子设备 | |
US9646397B2 (en) | Image processing apparatus and image processing method | |
JP5520038B2 (ja) | 映像処理装置及び映像処理方法 | |
JP4293174B2 (ja) | 撮像装置および画像処理装置 | |
US8384805B2 (en) | Image processing device, method, and computer-readable medium for executing pixel value correction in a synthesized image | |
US8229217B2 (en) | Image processing method and apparatus, image processing program and medium storing this program | |
US7990433B2 (en) | Imaging apparatus and imaging method | |
US20110080494A1 (en) | Imaging apparatus detecting foreign object adhering to lens | |
CN108683863B (zh) | 成像控制方法、装置、电子设备以及可读存储介质 | |
CN104010128A (zh) | 摄像设备及其控制方法 | |
JP7285791B2 (ja) | 画像処理装置、および出力情報制御方法、並びにプログラム | |
US20120188403A1 (en) | Flash band processing circuit, method of processing flash band, imaging apparatus, and imaging processing method | |
CN104038702A (zh) | 摄像设备及其控制方法 | |
CN103020927A (zh) | 图像处理设备和图像处理方法 | |
US11941791B2 (en) | High-dynamic-range image generation with pre-combination denoising | |
CN106358030A (zh) | 图像处理装置和图像处理方法 | |
JP2009017229A (ja) | 撮像装置及び撮像制御方法 | |
CN109005363B (zh) | 成像控制方法、装置、电子设备以及存储介质 | |
US7580076B2 (en) | Devices and methods for calculating pixel values representative of a scene | |
US11159740B2 (en) | Image capturing device and control method thereof and medium | |
US10977777B2 (en) | Image processing apparatus, method for controlling the same, and recording medium | |
CN106134181B (zh) | 摄影装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150805 Termination date: 20210524 |