CN102143326B - 一种自动曝光装置及其方法 - Google Patents

一种自动曝光装置及其方法 Download PDF

Info

Publication number
CN102143326B
CN102143326B CN 201010103778 CN201010103778A CN102143326B CN 102143326 B CN102143326 B CN 102143326B CN 201010103778 CN201010103778 CN 201010103778 CN 201010103778 A CN201010103778 A CN 201010103778A CN 102143326 B CN102143326 B CN 102143326B
Authority
CN
China
Prior art keywords
target
aver
brightness
average brightness
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN 201010103778
Other languages
English (en)
Other versions
CN102143326A (zh
Inventor
刘志强
胡文阁
傅璟军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BYD Semiconductor Co Ltd
Original Assignee
BYD Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BYD Co Ltd filed Critical BYD Co Ltd
Priority to CN 201010103778 priority Critical patent/CN102143326B/zh
Publication of CN102143326A publication Critical patent/CN102143326A/zh
Application granted granted Critical
Publication of CN102143326B publication Critical patent/CN102143326B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

一种自动曝光装置,包括:传感器控制模块,控制感光像素阵列根据第一积分时间及第二积分时间进行长短时间曝光,获取目标长短时间曝光图像数据;第一亮度平均值计算模块,计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值,计算当前短时间曝光图像数据的第四亮度平均值、及去除过暗点后的第二亮度平均值;目标亮度阈值计算模块,根据第四亮度平均值的大小得到第一目标亮度阈值;积分时间计算模块,根据所述第一亮度平均值、第一目标亮度阈值和第二亮度平均计算第一积分时间、第二积分时间;图像合成模块,将目标长短时间曝光图像数据进行合成。本发明还提供了一种自动曝光方法,克服了图像曝光处理后亮处和暗处清晰度较差的技术问题。

Description

一种自动曝光装置及其方法
技术领域
本发明属于摄像装置的图像处理技术领域,尤其涉及一种自动曝光装置及其方法。
背景技术
现有CMOS图像传感器的自动曝光控制模块通过如下方法实现自动曝光控制:计算当前图像的亮度平均值,并将当前图像亮度平均值与设定的亮度目标值比较,如果当前图像的亮度平均值高于设定的亮度目标值,自动曝光控制模块缩短积分时间或者减小数字增益值,反之则延长积分时间或者增大数字增益值,这样直到当前的亮度平均值与设定的亮度目标值的差异小于设定的阈值或者积分时间和数字增益值已经达到传感器的极限值。该自动曝光控制模块通过改变积分时间和数字增益值来自动控制场景的曝光,使图像亮度保持在一个相对合理的亮度值上。
CMOS图像传感器在拍摄图片过程中,图像传感器通过当前图像的亮度平均值来判断是否调整积分时间和数字增益值,积分时间和数字增益值是对所有的像素值进行调整的。对于亮度值分布均匀的图像,设定合适的亮度目标值,可以得到理想的曝光图像;对于画面亮度差异大的图像,这样的调整就会使图像中亮的部分更亮,暗的部分更暗。无论怎么调节就很难得到理想的图像。
现有的自动曝光控制模块只能使亮度分布均匀的图像曝光正常,而亮度差异较大的图像,通过现有的自动曝光控制方法,会导致图像中亮的部分更亮,暗的部分更暗。
发明内容
本发明为解决图像自动曝光后亮处和暗处清晰度较差的技术问题,提供一种能使图像自动曝光后亮处和暗处细节清晰的自动曝光装置;
另外,本发明另一目的还在于提供一种自动曝光方法。
一种自动曝光装置:包括:
传感器控制模块,用以控制感光像素阵列根据第一积分时间进行长时间曝光及根据第二积分时间进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
第一亮度平均值计算模块,用以计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值,计算当前短时间曝光图像数据去除过暗点后的第二亮度平均值,及计算当前短时间曝光图像数据的第四亮度平均值;
目标亮度阈值计算模块,判断第四亮度平均值的大小,得到与图像亮度相对应的第一目标亮度阈值;
积分时间计算模块,用以根据所述第一亮度平均值和第一目标亮度阈值计算第一积分时间,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二积分时间;
图像合成模块,用以将所述目标长时间曝光图像数据和目标短时间曝光图像数据进行合成。
一种自动曝光方法:包括如下步骤:
控制感光像素阵列根据第一积分时间进行长时间曝光及根据第二积分时间进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值,计算当前短时间曝光图像数据去除过暗点后的第二亮度平均值,及计算当前短时间曝光图像数据的第四亮度平均值;
判断第四亮度平均值的大小,得到与图像亮度相对应的第一目标亮度阈值;
根据所述第一亮度平均值和第一目标亮度阈值计算第一积分时间,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二积分时间;
将所述目标长时间曝光图像数据和目标短时间曝光图像数据进行合成。
本发明对图像进行两次自动曝光,得到目标长时间曝光图像数据和目标短时间曝光图像数据,并将目标长时间曝光图像数据和目标短时间曝光图像数据进行合成,得到细节清晰的合成图像,目标长时间曝光图像数据保留暗处图像细节,目标短时间曝光图像数据保留亮处图像细节,克服了传统自动曝光算法处理后的图像亮处和暗处清晰度较差的技术问题。
附图说明
图1是本发明实施例1提供的自动曝光装置原理图;
图2是本发明实施例2提供的自动曝光装置原理图;
图3是本发明实施例3提供的自动曝光装置原理图;
图4是本发明第一目标亮度阈值计算示意图;
图5是本发明场景识别状态转换图;
图6是本发明实施例4提供的自动曝光方法流程图;
图7是本发明实施例5提供的自动曝光方法流程图;
图8是本发明实施例6提供的自动曝光方法流程图。
具体实施方式
为了使本发明所解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,为本发明自动曝光装置实施例1原理图,该装置包括:传感器控制模块11、第一亮度平均值计算模块12、目标亮度阈值计算模块13、积分时间计算模块14、图像合成模块15。
传感器控制模块11控制感光像素阵列根据第一积分时间进行长时间曝光及根据第二积分时间进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据,并将目标长时间曝光图像数据和目标短时间曝光图像数据输出给图像合成模块15。
大家所熟知的一种特殊情况,当前图像为第一帧时,传感器控制模块11控制感光像素阵列根据预设的第一积分时间进行长时间曝光及根据预设的第二积分时间进行短时间曝光,获取第一帧图像的目标长时间曝光图像数据和目标短时间曝光图像数据。
第一亮度平均值计算模块12用以计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值Y_AVER_LONG_SUITABLE及当前短时间曝光图像数据去除过暗点后的第二亮度平均值Y_AVER_SHORT_SUITABLE,及计算当前短时间曝光图像数据的第四亮度平均值Y_AVER_SHORT,并将第四亮度平均值Y_AVER_SHORT输出给目标亮度阈值计算模块13,将第一亮度平均值Y_AVER_LONG_SUITABLE与第二亮度平均值Y_AVER_SHORT_SUITABLE输出给积分时间计算模块14。
目标亮度阈值计算模块13判断第四亮度平均值Y_AVER_SHORT的大小,得到与图像亮度相对应的第一目标亮度阈值Y_LONG_TARGET_AUTO。
积分时间计算模块14根据所述第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG,及根据所述第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二积分时间INT_TIME_SHORT,并将第一积分时间INT_TIME_LONG、第二积分时间INT_TIME_SHORT反馈到传感器控制模块11。
图像合成模块15,用以将目标长时间曝光图像数据和目标短时间曝光图像数据相加后平均,得到合成后图像数据。
图像合成模块15将目标长时间曝光图像数据和目标短时间曝光图像数进行合成,由于目标长时间曝光图像数据保留了暗处图像细节,目标短时间曝光图像数据保留了亮处图像细节,合成后的图像保留了整幅图像的细节,得到比较通透的图像,克服了传统自动曝光装置处理后的图像亮处和暗处清晰度较差的技术问题。
第一亮度平均值Y_AVER_LONG_SUITABLE采用如下方式计算,首先设置一个第二亮度阈值Y_HIGH,将当前长时间曝光图像每个像素点的亮度值Y与第二亮度阈值Y_HIGH进行比较,如果该像素点亮度值Y小于第二亮度阈值Y_HIGH,则选中该像素点,然后对所有选中像素点的亮度值Y进行求和得到Y_SUM1,及对选中的像素点计数得到PIXEL_SUM1,将亮度和Y_SUM1除以像素点总和PIXEL_SUM1,得到第一亮度平均值Y_AVER_LONG_SUITABLE。
由于当前长时间曝光图像亮处部分容易过曝,过曝的像素点会影响图像的实际整体亮度情况,故计算第一亮度平均值Y_AVER_LONG_SUITABLE时设置第二亮度阈值Y_HIGH去除过曝点。
第二亮度平均值Y_AVER_SHORT_SUITABLE采用如下方式计算,首先设置一个第三亮度阈值Y_LOW,将当前短时间曝光图像每个像素点的亮度值Y与第三亮度阈值Y_LOW进行比较,如果该像素点亮度值Y大于第三亮度阈值Y_LOW,则选中该像素点,然后对所有选中像素点的亮度值Y求和得到Y_SUM2,及对选中的像素点计数得到PIXEL_SUM2,将亮度和Y_SUM2除以像素点总和PIXEL_SUM2,得到第二亮度平均值Y_AVER_SHORT_SUITABLE。
由于当前短时间曝光图像暗处部分亮度太小,过暗的像素点会影响图像的实际整体亮度情况,故计算第二亮度平均值Y_AVER_SHORT_SUITABLE时设置第三亮度阈值Y_LOW去除过暗点。
上述第二亮度阈值Y_HIGH的设置为了去除过曝的像素点,第三亮度阈值Y_LOW的设置为了去除过暗的像素点,第二亮度阈值Y_HIGH大于第三亮度阈值Y_LOW。
第四亮度平均值Y_AVER_SHORT采用如下方式计算,将所有当前短时间曝光图像像素点亮度值Y相加得到亮度总和Y_SUM4,及将所有当前短时间曝光图像像素点个数相加得到像素点总和PIXEL_SUM4,将亮度总和Y_SUM4除以像素点总和PIXEL_SUM4,得到第四亮度平均值Y_AVER_SHORT。
在图像场景变化的过程中,通过第四亮度平均值Y_AVER_SHORT来自动的选择新的第一目标亮度阈值Y_LONG_TARGET_AUTO使调整的过程平滑过度。
第四亮度平均值Y_AVER_SHORT的计算采用的是短时间曝光图像数据,所有的像素点数据是图像真实数据的体现,不会出现过曝的像素点影响对图像实际亮度的评估,故第一目标亮度阈值Y_LONG_TARGET_AUTO的计算采用第四亮度平均值Y_AVER_SHORT。
作为最优实施例,第一目标亮度阈值Y_LONG_TARGET_AUTO采用如下方式计算:首先设置最小比较阈值AVER_LOCK_L为55、最大比较阈值AVER_LOCK_H为128、最小目标值TARGET_L为133、最大目标值TARGET_H为160,最小比较阈值AVER_LOCK_L、最大比较阈值AVER_LOCK_H、最小目标值TARGET_L、最大目标值TARGET_H的值都由寄存器控制,可以根据环境给出合适的经验值。
N的值优选8,原因是不需要太多计算,还能使计算出的数据达到一定的精度。使AVER_LOCK(1)=AVER_LOCK_L;
AVER_LOCK(8)=AVER_LOCK_H;
第一差值DIFF1=(AVER_LOCK(8)-AVER_LOCK(1))/7;
比较阈值AVER_LOCK(i)=AVER_LOCK(1)+(i-1)*DIFF1,1<=i<=N。
N的值优选8,原因是不需要太多计算,还能使计算出的数据达到一定的精度。使TRAGRT(1)=TARGET_L;
TRAGRT(9)=TARGET_H;
第二差值DIFF2=(TRAGRT(9)-TRAGRT(1))/8;
目标值TARGET(i)=TRAGRT(1)+(i-1)*DIFF2,1<=i<=(N+1);如图4所示,第一目标亮度阈值Y_LONG_TARGET_AUTO的计算过程如下:
当i=1时:
如果第四亮度平均值Y_AVER_SHORT<AVER_LOCK(1),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(1);
当2<=i<=N时:
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(1)且Y_AVER_SHORT<AVER_LOCK(2),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(2);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(2),且Y_AVER_SHORT<AVER_LOCK(3),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(3);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(3),且Y_AVER_SHORT<AVER_LOCK(4),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(4);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(4),且Y_AVER_SHORT<AVER_LOCK(5),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(5);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(5),且Y_AVER_SHORT<AVER_LOCK(6),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(6);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(6),且Y_AVER_SHORT<AVER_LOCK(7),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(7);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(7),且Y_AVER_SHORT<AVER_LOCK(8),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(8);
当i=N时:
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(8),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(9)。
根据当前短时间曝光图像的第四亮度平均值Y_AVER_SHORT的大小来计算第一目标亮度阈值Y_LONG_TARGET_AUTO,第一目标亮度阈值Y_LONG_TARGET_AUTO随着第四亮度平均值Y_AVER_SHORT增大而增大,即随着图像亮度的增大第一目标亮度阈值Y_LONG_TARGET_AUTO也增大,这样利用第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG,然后用第一积分时间INT_TIME_LONG对不同亮度情况的图像进行长时间曝光,能得到暗处细节清晰的目标长时间曝光图像数据。
第一积分时间INT_TIME_LONG采用常规模式计算,计算过程如下:首先设置第一余量MARGIN1,将第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO进行比较,如果第一亮度平均值Y_AVER_LONG_SUITABLE与第一目标亮度阈值Y_LONG_TARGET_AUTO的差值大于第一余量MARGIN1,则积分时间计算模块14减小第一积分时间INT_TIME_LONG,如果第一目标亮度阈值Y_LONG_TARGET_AUTO与第一亮度平均值Y_AVER_LONG_SUITABLE的差值大于第一余量MARGIN1,则增大第一积分时间INT_TIME_LONG,直到第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO的差异小于设定的第一余量MARGIN1或者第一积分时间INT_TIME_LONG已经达到极限值。
第二积分时间INT_TIME_SHORT的计算过程同第一积分时间INT_TIME_LONG的计算过程相同,首先设置第二余量MARGIN2,然后将第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET的差值及预设的第二目标亮度阈值Y_SHORT_TARGET与第二亮度平均值Y_AVER_SHORT_SUITABLE的差值与第二余量MARGIN2进行比较,来确定第二积分时间INT_TIME_SHORT的增大或减小,略其具体计算过程。
由于自动曝光后的图像整体亮度较暗,对所有像素点数据乘以相同的值,就能提高图像整体亮度,得到亮度合适的图像。
作为最优实施方案,本发明包括自动曝光装置实施例2,如图2所示,包括传感器控制模块21、第一亮度平均值计算模块22、目标亮度阈值计算模块23、积分时间计算模块24、图像合成模块25、增益值计算模块26、乘法计算模块27。
同装置实施例1相比,本实施例增加了增益值计算模块26、乘法计算模块27。
增益值计算模块26根据第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一数字增益值GLB_GAIN_LONG,及根据所述第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二数字增益值GLB_GAIN_SHORT。
第一数字增益值GLB_GAIN_LONG采用常规模式计算,计算过程如下:首先设置第一余量MARGIN1,将第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO进行比较,如果第一亮度平均值Y_AVER_LONG_SUITABLE与第一目标亮度阈值Y_LONG_TARGET_AUTO的差值大于第一余量MARGIN1,则增益值计算模块26减小第一数字增益值GLB_GAIN_LONG,如果第一目标亮度阈值Y_LONG_TARGET_AUTO与第一亮度平均值Y_AVER_LONG_SUITABLE的差值大于第一余量MARGIN1,则增大第一数字增益值GLB_GAIN_LONG,直到第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO的差异小于设定的第一余量MARGIN1或者第一数字增益值GLB_GAIN_LONG已经达到极限值。
第二数字增益值GLB_GAIN_SHORT的计算过程同第一数字增益值GLB_GAIN_LONG的计算过程相同,首先设置第二余量MARGIN2,然后将第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET的差值及预设的第二目标亮度阈值Y_SHORT_TARGET与第二亮度平均值Y_AVER_SHORT_SUITABLE的差值与第二余量MARGIN2进行比较,来确定第二数字增益值GLB_GAIN_SHORT的增大或减小,略其具体调整过程。
乘法计算模块27将目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据,将目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据。
大家所熟知的一种特殊情况,当前图像为第一帧时,乘法计算模块27将目标长时间曝光图像数据与预设的第一数字增益值GLB_GAIN_LONG相乘得到第一帧图像的目标高亮度图像数据,将目标短时间曝光图像数据与预设的第二数字增益值GLB_GAIN_SHORT相乘得到第一帧图像的目标低亮度图像数据。
所述第一亮度平均值计算模块22计算第一亮度平均值Y_AVER_LONG_SUITABLE时采用当前高亮度图像数据,计算第二亮度平均值Y_AVER_SHORT_SUITABLE、第三亮度平均值Y_AVER_SHORT时采用当前低亮度图像数据。
所述图像合成模块25将所述目标高亮度图像数据和目标低亮度图像数据进行合成。
装置实施例2的自动曝光装置计算出第一数字增益值GLB_GAIN_LONG和第二数字增益值GLB_GAIN_SHORT,并将目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据,将目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据,提高了图像的整体亮度。
装置实施例2的自动曝光装置得到的图像数据是目标高亮度图像数据和目标低亮度图像数据进行合成后的图像数据,在合成时,采用相同的比例,即直接将目标高亮度图像数据与目标低亮度图像数据相加除以二得到。这种合成方式得到的图像数据能显示图像亮处及暗处的细节,但是精确度不高。
作为最优实施方案,本发明包括自动曝光装置实施例3,如图3所示,包括:传感器控制模块31、第一平均亮度值计算模块32、目标亮度阈值计算模块33、积分时间计算模块34、图像合成模块35、增益值计算模块36、乘法计算模块37、第二亮度平均值计算模块38、权重系数计算模块39。
同装置实施例2相比,本实施例增加了第二亮度平均值计算模块38、权重系数计算模块39。
第二亮度平均值计算模块38接收从乘法计算模块37输出的当前高亮度图像数据,并计算当前高亮度图像数据整幅图像的第三亮度平均值Y_AVER_LONG。
权重系数计算模块39根据第三亮度平均值Y_AVER_LONG、第四亮度平均值Y_AVER_SHORT的大小计算第一权重系数COEF1、第二权重系数COEF2。
所述图像合成模块35将所述第一权重系数COEF1与目标高亮度图像数据相乘得到第一图像数据,将所述第二权重系数COEF2与目标低亮度图像数据相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成,合成后的图像能体现各个灰阶的图像细节,得到比较通透的图像。
第二亮度平均值计算模块38中第三亮度平均值Y_AVER_LONG采用如下方式计算,将所有当前高亮度图像像素点亮度值Y相加得到亮度总和Y_SUM3,及将所有当前高亮度图像像素点个数相加得到像素点总和PIXEL_SUM3,将亮度总和Y_SUM3除以像素点总和PIXEL_SUM3,得到第三亮度平均值Y_AVER_LONG。
权重系数计算模块39中第一权重系数COEF1与第二权重系数COEF2满足公式(1)、(2):
COEF1+COEF2=1;                           (1)
COEF1/COEF2=Y_AVER_LONG/Y_AVER_SHORT;    (2)
利用公式(1)、(2)求得第一权重系数COEF1、第二权重系数COEF2的值。第三亮度平均值Y_AVER_LONG越大,第一权重系数COEF1越大,第四亮度平均值Y_AVER_SHORT越大,第二权重系数COEF2相应的也越大。
合成图像采用如下公式求得:
DATA_OUT=DATA_IN_LONG*COEF1+DATA_IN_SHORT*COEF2;
                                           (3)
公式(3)中DATA_OUT表示合成后图像数据,DATA_IN_LONG表示目标高亮度图像数据,COEF1表示第一权重系数,DATA_IN_SHORT表示目标低亮度图像数据,COEF2表示第二权重系数。
装置实施例3中采用第一权重系数COEF1、第二权重系数COEF2来确定目标高亮度图像数据和目标低亮度图像数据占合成图像的比例,使合成后的图像清晰显现亮处和暗处的图像细节。
亮度差异较大的图像需要用图像合成的方法得到理想曝光图像,但是这种合成算法并不是在所有场景都适合,普通场景的图像采用图像合成的算法会使合成后图像偏离理想亮度很多,基于这种情况,则需要对图像场景进行判断,使图像在不同场景下都能合理曝光,得到理想的曝光图像。
作为最优实施例,装置实施例3中自动曝光装置还包括场景识别模块。
场景识别模块根据第四亮度平均值Y_AVER_SHORT的大小判断是高动态场景还是普通场景,产生一个体现场景类型的选择信号HDR_SEL,图像合成模块35根据选择信号HDR_SEL选择合成模式。
选择信号HDR_SEL利用如下方式求得:默认情况下为高动态场景,即选择信号HDR_SEL的值为0,预设第四阈值AVER_LOCK为比较值,及第三余量MARGIN3。该第三余量MARGIN3为了预防图像在高动态场景与普通场景之间震荡。
使LOCK_H=AVER_LOCK+MARGIN3;               (4)
LOCK_L=AVER_LOCK-MARGIN3。                 (5)
如图5所示,从高动态场景转换到普通场景必须满足如下条件:当前状态为高动态场景,即选择信号HDR_SEL的值为0,同时第四亮度平均值Y_AVER_SHORT<LOCK_L。则图像从高动态场景转换到普通场景,选择信号HDR_SEL的值由0变为1。
从普通场景转换到高动态场景必须满足如下条件:当前状态为普通场景,即选择信号HDR_SEL的值为1,同时第四亮度平均值Y_AVER_SHORT>LOCK_H。则图像从普通场景转换到高动态场景,选择信号HDR_SEL的值由1变为0。
当LOCK_L<=Y_AVER_SHORT<=LOCK_H时,选择信号HDR_SEL保持原值不变。
当选择信号HDR_SEL为1时,图像合成模块35不对图像进行合成,使第一权重系数COEF1为1,第二权重系数COEF2为0。直接输出目标高亮度图像数据DATA_IN_LONG。当选择信号HDR_SEL为0时,图像为高动态场景,图像合成模块35将第一权重系数COEF1与目标高亮度图像数据DATA_IN_LONG相乘得到第一图像数据,第二权重系数COEF2与目标低亮度图像数据DATA_IN_SHORT相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成,合成后的图像能体现各个灰阶的图像细节,得到比较通透的图像。
该自动曝光装置实现自动曝光的方式是使图像传感器分别用较大的积分时间和较小的积分时间对同一场景分别进行曝光,得到明暗两幅图像,长积分时间下拍摄的图像保存了暗处场景的细节,短积分时间下拍摄的图像保存了亮处场景的细节,这样把两幅图像按照一定的比例合成到一起就可以得到理想的图像,尽显明暗两处的细节。自动曝光装置提供合理的长积分时间、短积分时间、第一数字增益值及第二数字增益值,并且自动的识别需要做高动态的场景和普通场景。
如图6所示,为本发明实施例4的自动曝光方法流程图,该方法包括如下步骤:
步骤S61:控制感光像素阵列根据第一积分时间INT_TIME_LONG进行长时间曝光和根据第二积分时间INT_TIME_SHORT进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
步骤S62:计算当前长时间曝光图像数据去除过亮点后图像的第一亮度平均值Y_AVER_LONG_SUITABLE,计算当前短时间曝光图像数据去除过暗点后图像的第二亮度平均值Y_AVER_SHORT_SUITABLE,及计算当前短时间曝光图像数据的第四亮度平均值Y_AVER_SHORT;
步骤S63:判断第四亮度平均值Y_AVER_SHORT的大小,得到与图像亮度相对应的第一目标亮度阈值Y_LONG_TARGET_AUTO;
步骤S64:根据第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG,及根据第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二积分时间INT_TIME_SHORT;
步骤S65:将所述目标长时间曝光图像数据和目标短时间曝光图像数据进行合成。
大家所熟知的一种特殊情况,当前图像为第一帧时,步骤S61控制感光像素阵列根据预设的第一积分时间进行长时间曝光及根据预设的第二积分时间进行短时间曝光,获取第一帧图像的目标长时间曝光图像数据和目标短时间曝光图像数据。
目标长时间曝光图像数据保留暗处图像细节,目标短时间曝光图像数据保留亮处图像细节,合成后的图像保留了整幅图像的细节,得到比较通透的图像,克服了传统自动曝光方法处理后的图像亮处和暗处清晰度较差的技术问题。
步骤S62中第一亮度平均值Y_AVER_LONG_SUITABLE采用如下方法计算,首先设置一个第二亮度阈值Y_HIGH,将当前长时间曝光图像数据每个像素点的亮度值Y与第二亮度阈值Y_HIGH比较,如果该像素点亮度值Y小于第二亮度阈值Y_HIGH,则选中该像素,然后对所有选中像素点的亮度值Y进行求和得到Y_SUM1,及对选中的像素点计数得到PIXEL_SUM1,将亮度总和Y_SUM1除以像素点总和PIXEL_SUM1,得到第一亮度平均值Y_AVER_LONG_SUITABLE。
由于当前长时间曝光图像亮处部分容易过曝,过曝的像素点会影响图像的实际整体亮度情况,故计算第一亮度平均值Y_AVER_LONG_SUITABLE时设置第二亮度阈值Y_HIGH去除过曝点。
步骤S62中第二亮度平均值Y_AVER_SHORT_SUITABLE采用如下方法计算,首先设置一个第三亮度阈值Y_LOW,将当前短时间曝光图像每个像素点的亮度值Y与第三亮度阈值Y_LOW比较,如果该像素点亮度值Y大于第三亮度阈值Y_LOW,则选中该像素点,然后对所有选中像素点的亮度值Y求和得到Y_SUM2,及对选中的像素点计数得到PIXEL_SUM2,将亮度和Y_SUM2除以像素点总和PIXEL_SUM2,得到第二亮度平均值Y_AVER_SHORT_SUITABLE。
由于当前短时间曝光图像暗处部分亮度太小,过暗的像素点会影响图像的实际整体亮度情况,故计算第二亮度平均值Y_AVER_SHORT_SUITABLE时设置第三亮度阈值Y_LOW去除过暗点。
上述第二亮度阈值Y_HIGH的设置为了去除过曝的像素点,第三亮度阈值Y_LOW的设置为了去除过暗的像素点,第二亮度阈值Y_HIGH大于第三亮度阈值Y_LOW。
步骤S62中第四亮度平均值Y_AVER_SHORT采用如下方式计算,将所有当前短时间曝光图像像素点亮度值Y相加得到亮度总和Y_SUM4,及将所有当前短时间曝光图像像素点个数相加得到像素点总和PIXEL_SUM4,将亮度总和Y_SUM4除以像素点总和PIXEL_SUM4,得到第四亮度平均值Y_AVER_SHORT。
在图像场景变化的过程中,通过第四亮度平均值Y_AVER_SHORT来自动的选择新的第一目标亮度阈值Y_LONG_TARGET_AUTO使调整的过程平滑过度。
第四亮度平均值Y_AVER_SHORT的计算采用的是短时间曝光图像数据,所有的像素点数据是图像真实数据的体现,不会出现过曝的像素点影响对图像实际亮度的评估,故第一目标亮度阈值Y_LONG_TARGET_AUTO的计算采用第四亮度平均值Y_AVER_SHORT。
作为最优实施例,步骤S63中第一目标亮度阈值Y_LONG_TARGET_AUTO采用如下方式计算:首先设置最小比较阈值AVER_LOCK_L为55、最大比较阈值AVER_LOCK_H为128、最小目标值TARGET_L为133、最大目标值TARGET_H为160,最小比较阈值AVER_LOCK_L、最大比较阈值AVER_LOCK_H、最小目标值TARGET_L、最大目标值TARGET_H的值都由寄存器控制,可以根据环境给出合适的经验值。
N的值优选8,原因是不需要太多计算,还能使计算出的数据达到一定的精度。使AVER_LOCK(1)=AVER_LOCK_L;
AVER_LOCK(8)=AVER_LOCK_H;
第一差值DIFF1=(AVER_LOCK(8)-AVER_LOCK(1))/7;
比较阈值AVER_LOCK(i)=AVER_LOCK(1)+(i-1)*DIFF1,1<=i<=N。
N的值优选8,原因是不需要太多计算,还能使计算出的数据达到一定的精度。使TRAGRT(1)=TARGET_L;
TRAGRT(9)=TARGET_H;
第二差值DIFF2=(TRAGRT(9)-TRAGRT(1))/8;
目标值TARGET(i)=TRAGRT(1)+(i-1)*DIFF2,1<=i<=(N+1);
如图4所示,第一目标亮度阈值Y_LONG_TARGET_AUTO的计算过程如下:
当i=1时:
如果第四亮度平均值Y_AVER_SHORT<AVER_LOCK(1),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(1);
当2<=i<=N时:
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(1)且Y_AVER_SHORT<AVER_LOCK(2),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(2);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(2),且Y_AVER_SHORT<AVER_LOCK(3),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(3);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(3),且Y_AVER_SHORT<AVER_LOCK(4),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(4);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(4),且Y_AVER_SHORT<AVER_LOCK(5),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(5);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(5),且Y_AVER_SHORT<AVER_LOCK(6),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(6);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(6),且Y_AVER_SHORT<AVER_LOCK(7),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(7);
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(7),且Y_AVER_SHORT<AVER_LOCK(8),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(8);
当i=N时:
如果第四亮度平均值Y_AVER_SHORT>=AVER_LOCK(8),则第一目标亮度阈值Y_LONG_TARGET_AUTO=TARGET(9)。
根据当前短时间曝光图像的第四亮度平均值Y_AVER_SHORT的大小来计算第一目标亮度阈值Y_LONG_TARGET_AUTO,第一目标亮度阈值Y_LONG_TARGET_AUTO随着第四亮度平均值Y_AVER_SHORT增大而增大,即随着图像亮度的增大第一目标亮度阈值Y_LONG_TARGET_AUTO也增大,这样利用第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG,然后用第一积分时间INT_TIME_LONG对不同亮度情况的图像进行长时间曝光,能得到暗处细节清晰的目标长时间曝光图像数据。
步骤S64中第一积分时间INT_TIME_LONG采用常规方法计算,计算方法如下:首先设置第一余量MARGIN1,将第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO进行比较,如果第一亮度平均值Y_AVER_LONG_SUITABLE与第一目标亮度阈值Y_LONG_TARGET_AUTO的差值大于第一余量MARGIN1,则减小第一积分时间INT_TIME_LONG,如果第一目标亮度阈值Y_LONG_TARGET_AUTO与第一亮度平均值Y_AVER_LONG_SUITABLE的差值大于第一余量MARGIN1,则增大第一积分时间INT_TIME_LONG,直到第一亮度平均值Y_AVER_LONG_SUITABE和第一目标亮度阈值Y_LONG_TARGET_AUTO的差异小于设定的第一余量MARGIN1或者第一积分时间INT_TIME_LONG已经达到极限值。
步骤S64中第二积分时间INT_TIME_SHORT同第一积分时间INT_TIME_LONG的计算方法相同,首先设置第二余量MARGIN2,然后将第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET的差值及预设的第二目标亮度阈值Y_SHORT_TARGET与第二亮度平均值Y_AVER_SHORT_SUITABLE的差值与第二余量MARGIN2进行比较,来确定第二积分时间INT_TIME_SHORT的增大或减小,略其具体调整过程。
由于自动曝光后的图像整体亮度较暗,对所有像素点数据乘以相同的值,就能提高图像整体亮度,得到亮度合适的图像。
作为最优实施方案,本发明包括自动曝光方法实施例5,如图7所示,包括:
步骤S71:控制感光像素阵列根据第一积分时间INT_TIME_LONG进行长时间曝光和根据第二积分时间INT_TIME_SHORT进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
步骤S72:计算当前高亮度图像数据去除过亮点后图像的第一亮度平均值Y_AVER_LONG_SUITABLE,计算当前低亮度图像数据去除过暗点后图像的第二亮度平均值Y_AVER_SHORT_SUITABLE,及计算当前低亮度图像数据的第四亮度平均值Y_AVER_SHORT;
步骤S73:判断第四亮度平均值Y_AVER_SHORT的大小,得到与图像亮度相对应的第一目标亮度阈值Y_LONG_TARGET_AUTO;
步骤S74:根据第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG;及根据第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二积分时间INT_TIME_SHORT;
步骤S76:根据所述第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一数字增益值GLB_GAIN_LONG,及根据所述第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二数字增益值GLB_GAIN_SHORT;
步骤S77:将所述目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据,将所述目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据;
步骤S75:将目标高亮度图像数据与目标低亮度图像数据进行合成。
大家所熟知的一种特殊情况,当前图像为第一帧时,步骤S77将目标长时间曝光图像数据与预设的第一数字增益值GLB_GAIN_LONG相乘得到第一帧图像的目标高亮度图像数据,将目标短时间曝光图像数据与预设的第二数字增益值GLB_GAIN_SHORT相乘得到第一帧图像的目标低亮度图像数据。
同方法实施例4相比,本实施例增加了步骤S76、步骤S77,相应的步骤S72及步骤S75也略微有所变化,下面进行详细描述。
步骤S76中第一数字增益值GLB_GAIN_LONG采用常规方法计算,计算方法如下:首先设置第一余量MARGIN1,将第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO进行比较,如果第一亮度平均值Y_AVER_LONG_SUITABLE与第一目标亮度阈值Y_LONG_TARGET_AUTO的差值大于第一余量MARGIN1,则减小第一数字增益值GLB_GAIN_LONG,如果第一目标亮度阈值Y_LONG_TARGET_AUTO与第一亮度平均值Y_AVER_LONG_SUITABLE的差值大于第一余量MARGIN1,则增大第一数字增益值GLB_GAIN_LONG,直到第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO的差异小于设定的第一余量MARGIN1或者第一数字增益值GLB_GAIN_LONG已经达到极限值。
步骤S76中第二数字增益值GLB_GAIN_SHORT的计算方法同第一数字增益值GLB_GAIN_LONG的计算方法相同,首先设置第二余量MARGIN2,然后将第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET的差值及预设的第二目标亮度阈值Y_SHORT_TARGET与第二亮度平均值Y_AVER_SHORT_SUITABLE的差值与第二余量MARGIN2进行比较,来确定第二数字增益值GLB_GAIN_SHORT的增大或减小,略其具体调整过程。
步骤S77还将目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据、将目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据。
所述步骤S72计算第一亮度平均值Y_AVER_LONG_SUITABLE时采用当前高亮度图像数据,计算第二亮度平均值Y_AVER_SHORT_SUITABLE、第三亮度平均值Y_AVER_SHORT时采用当前低亮度图像数据。
所述步骤S75将所述目标高亮度图像数据和目标低亮度图像数据进行合成。
方法实施例5的自动曝光方法计算出第一数字增益值GLB_GAIN_LONG和第二数字增益值GLB_GAIN_SHORT,并将目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据,将目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据,提高了图像的整体亮度。
方法实施例5的自动曝光方法得到的图像数据是目标高亮度图像数据和目标低亮度图像数据进行合成后的图像数据,在合成时,采用相同的比例,即直接将目标高亮度图像数据与目标低亮度图像数据相加除以二得到。这种合成方式得到的图像数据能显示图像亮处及暗处的细节,但是精确度不高。
作为最优实施方案,本发明包括自动曝光方法实施例6,如图8所示,包括:
步骤S81:控制感光像素阵列根据第一积分时间INT_TIME_LONG进行长时间曝光和根据第二积分时间INT_TIME_SHORT进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
步骤S82:计算当前高亮度图像数据去除过亮点后图像的第一亮度平均值Y_AVER_LONG_SUITABLE;计算当前低亮度图像数据去除过暗点后图像的第二亮度平均值Y_AVER_SHORT_SUITABLE,计算当前低亮度图像数据的第四亮度平均值Y_AVER_SHORT;
步骤S83:判断第四亮度平均值Y_AVER_SHORT的大小,得到与图像亮度相对应的第一目标亮度阈值Y_LONG_TARGET_AUTO;
步骤S84:根据第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一积分时间INT_TIME_LONG;及根据第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二积分时间INT_TIME_SHORT;
步骤S86:根据所述第一亮度平均值Y_AVER_LONG_SUITABLE和第一目标亮度阈值Y_LONG_TARGET_AUTO计算第一数字增益值GLB_GAIN_LONG,及根据所述第二亮度平均值Y_AVER_SHORT_SUITABLE和预设的第二目标亮度阈值Y_SHORT_TARGET计算第二数字增益值GLB_GAIN_SHORT;
步骤S87:将所述目标长时间曝光图像数据与第一数字增益值GLB_GAIN_LONG相乘得到目标高亮度图像数据,将所述目标短时间曝光图像数据与第二数字增益值GLB_GAIN_SHORT相乘得到目标低亮度图像数据;
步骤S88:计算当前高亮度图像数据的第三亮度平均值Y_AVER_LONG;
步骤S89:根据第三亮度平均值Y_AVER_LONG、第四亮度平均值Y_AVER_SHORT计算第一权重系数COEF1、第二权重系数COEF2;
步骤S85:将目标高亮度图像数据与第一权重系数COEF1相乘得到第一图像数据,目标低亮度图像数据与第二权重系数COEF2相乘得到第二图像数据,将第一图像数据与第二图像数据进行合成。
同方法实施例5相比,本实施例增加了步骤S88、步骤S89。图像合成步骤S85增加了一个权重系数相乘的过程,下面详细描述。
步骤S88计算当前高亮度图像数据整幅图像的第三亮度平均值Y_AVER_LONG。
步骤S89根据第三亮度平均值Y_AVER_LONG、第四亮度平均值Y_AVER_SHORT的大小计算第一权重系数COEF1、第二权重系数COEF2。
图像合成步骤S85将第一权重系数COEF1与目标高亮度图像数据相乘得到第一图像数据,第二权重系数COEF2与目标低亮度图像数据相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成,合成后的图像能体现各个灰阶的图像细节,得到比较通透的图像。
步骤S88中第三亮度平均值Y_AVER_LONG采用如下方法计算,将所有当前高亮度图像像素点亮度值Y相加得到亮度总和Y_SUM3,及将所有当前高亮度图像像素点个数相加得到像素点总和PIXEL_SUM3,将亮度总和Y_SUM3除以像素点总和PIXEL_SUM3,得到第三亮度平均值Y_AVER_LONG。
权重系数计算步骤S89中第一权重系数COEF1与第二权重系数COEF2满足公式(1)、(2):
COEF1+COEF2=1;                           (1)
COEF1/COEF2=Y_AVER_LONG/Y_AVER_SHORT;    (2)
利用公式(1)、(2)求得第一权重系数COEF1、第二权重系数COEF2的值。第三亮度平均值Y_AVER_LONG越大,第一权重系数COEF1越大,第四亮度平均值Y_AVER_SHORT越大,第二权重系数COEF2相应的也越大。
合成图像步骤S85采用如下公式求得合成图像:
DATA_OUT=DATA_IN_LONG*COEF1+DATA_IN_SHORT*COEF2;
                                           (3)
公式(3)中DATA_OUT表示合成后图像数据,DATA_IN_LONG表示目标高亮度图像数据,COEF1表示第一权重系数,DATA_IN_SHORT表示目标低亮度图像数据,COEF2表示第二权重系数。
方法实施例6中采用第一权重系数COEF1、第二权重系数COEF2来确定目标高亮度图像数据和目标低亮度图像数据占合成图像的比例,使合成后的图像清晰显现亮处和暗处的图像细节。
亮度差异较大的图像需要用图像合成的方法得到理想曝光图像,但是这种合成算法并不是在所有场景都适合,普通场景的图像采用图像合成的算法会使合成后图像偏离理想亮度很多,基于这种情况,则需要对图像场景进行判断,使图像在不同场景下都能合理曝光,得到理想的曝光图像。
作为最优实施例,方法施例6中自动曝光方法还包括场景识别步骤。
场景识别步骤根据第四亮度平均值Y_AVER_SHORT的大小判断是高动态场景还是普通场景,产生一个体现场景类型的选择信号HDR_SEL,图像合成步骤S85根据选择信号HDR_SEL选择合成模式。
选择信号HDR_SEL利用如下方法求得:默认情况下为高动态场景,即选择信号HDR_SEL的值为0,预设第四阈值AVER_LOCK为比较值,及第三余量MARGIN3。该第三余量MARGIN3为了预防图像在高动态场景与普通场景之间震荡。
使LOCK_H=AVER_LOCK+MARGIN3;         (4)
LOCK_L=AVER_LOCK-MARGIN3。           (5)
如图5所示,从高动态场景转换到普通场景必须满足如下条件:当前状态为高动态场景,即选择信号HDR_SEL的值为0,同时第四亮度平均值Y_AVER_SHORT<LOCK_L。则图像从高动态场景转换到普通场景,选择信号HDR_SEL的值由0变为1。
从普通场景转换到高动态场景必须满足如下条件:当前状态为普通场景,即选择信号HDR_SEL的值为1,同时第四亮度平均值Y_AVER_SHORT>LOCK_H。则图像从普通场景转换到高动态场景,选择信号HDR_SEL的值由1变为0。
当LOCK_L<=Y_AVER_SHORT<=LOCK_H时,选择信号HDR_SEL保持原值不变。
当选择信号HDR_SEL为1时,图像合成步骤S85不对图像进行合成,使第一权重系数COEF1为1,第二权重系数COEF2为0。直接输出目标高亮度图像数据DATA_IN_LONG。当选择信号HDR_SEL为0时,图像为高动态场景,图像合成步骤S85将第一权重系数COEF1与目标高亮度图像数据DATA_IN_LONG相乘得到第一图像数据,第二权重系数COEF2与目标低亮度图像数据DATA_IN_SHORT相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成,合成后的图像能体现各个灰阶的图像细节,得到比较通透的图像。
该自动曝光方法实现自动曝光的方式是使图像传感器分别用较大的积分时间和较小的积分时间对同一场景分别进行曝光,得到明暗两幅图像,长积分时间下拍摄的图像保存了暗处场景的细节,短积分时间下拍摄的图像保存了亮处场景的细节,这样把两幅图像按照一定的比例合成到一起就可以得到理想的图像,尽显明暗两处的细节。该自动曝光方法提供合理的长积分时间、短积分时间、第一数字增益值及第二数字增益值,并且自动的识别需要做高动态的场景和普通场景。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (16)

1.一种自动曝光装置,其特征在于:包括:
传感器控制模块,用以控制感光像素阵列根据第一积分时间进行长时间曝光及根据第二积分时间进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
第一亮度平均值计算模块,用以计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值,计算当前短时间曝光图像数据去除过暗点后的第二亮度平均值,及计算当前短时间曝光图像数据的第四亮度平均值;
目标亮度阈值计算模块,判断第四亮度平均值的大小,得到与图像亮度相对应的第一目标亮度阈值;
积分时间计算模块,用以根据所述第一亮度平均值和第一目标亮度阈值计算第一积分时间,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二积分时间;
图像合成模块,用以将所述目标长时间曝光图像数据和目标短时间曝光图像数据进行合成。
2.如权利要求1所述的自动曝光装置,其特征在于:所述第一目标亮度阈值采用如下方式计算:
比较阈值AVER_LOCK(i)的确定:
使AVER_LOCK(1)=AVER_LOCK_L;
AVER_LOCK(N)=AVER_LOCK_H;
第一差值DIFF1=(AVER_LOCK(N)-AVER_LOCK(1))/(N-1);
比较阈值AVER_LOCK(i)=AVER_LOCK(1)+(i-1)*DIFF1;1<=i<=N,N为大于等于2的整数值;
目标值TRAGRT(i)的确定:
TRAGRT(1)=TARGET_L;
TRAGRT(N+1)=TARGET_H;
第二差值DIFF2=(TRAGRT(N+1)-TRAGRT(1))/N;
目标值TARGET(i)=TRAGRT(1)+(i-1)*DIFF2,1<=i<=(N+1);N为大于等于2的整数值;
第一目标亮度阈值Y_LONG_TARGET_AUTO的计算:
当i=1,Y_AVER_SHORT<AVER_LOCK(i)时,Y_LONG_TARGET_AUTO=TARGET(i);
当2<=i<=N,AVER_LOCK(i-1)<=Y_AVER_SHORT<AVER_LOCK(i)时;Y_LONG_TARGET_AUTO=TARGET(i);
当i=N,Y_AVER_SHORT>=AVER_LOCK(i)时;Y_LONG_TARGET_AUTO=TARGET(i+1);
Y_AVER_SHORT为第四亮度平均值,AVER_LOCK_L为最小比较阈值、AVER_LOCK_H为最大比较阈值、TARGET_L为最小目标值、TARGET_H为最大目标值。
3.如权利要求2所述的自动曝光装置,其特征在于:N的值取8。
4.如权利要求1所述的自动曝光装置,其特征在于:所述第一亮度平均值采用如下方式计算:
将当前长时间曝光图像数据每个像素点的亮度值与预设的第二亮度阈值进行比较,选中亮度值小于第二亮度阈值的像素点,然后对所有选中像素点的亮度值进行求和,及对选中的像素点求和,将亮度总和除以像素点总和,得到第一亮度平均值。
5.如权利要求1所述的自动曝光装置,其特征在于:所述第二亮度平均值采用如下方式计算:
将当前短时间曝光图像数据每个像素点的亮度值与预设的第三亮度阈值进行比较,选中亮度值大于第三亮度阈值的像素点,然后对所有选中像素点的亮度值进行求和,及对选中的像素点求和,将亮度总和除以像素点总和,得到第二亮度平均值。
6.如权利要求4或5任一项所述的自动曝光装置,其特征在于:所述第二亮度阈值大于第三亮度阈值。
7.如权利要求1所述的自动曝光装置,其特征在于:该自动曝光装置还包括:
增益值计算模块,用以根据所述第一亮度平均值和第一目标亮度阈值计算第一数字增益值,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二数字增益值;
乘法计算模块,用以将目标长时间曝光图像数据与第一数字增益值相乘得到目标高亮度图像数据,及将目标短时间曝光图像数据与第二数字增益值相乘得到目标低亮度图像数据;
所述第一亮度平均值计算模块、图像合成模块与乘法计算模块连接。
8.如权利要求7所述的自动曝光装置,其特征在于:该自动曝光装置还包括:
第二亮度平均值计算模块,计算当前高亮度图像数据的第三亮度平均值;
权重系数计算模块,根据第三亮度平均值、第四亮度平均值的大小计算第一权重系数、第二权重系数;
所述图像合成模块将所述第一权重系数与目标高亮度图像数据相乘得到第一图像数据,将所述第二权重系数与目标低亮度图像数据相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成。
9.一种自动曝光方法,其特征在于:包括如下步骤:
控制感光像素阵列根据第一积分时间进行长时间曝光及根据第二积分时间进行短时间曝光,获取目标长时间曝光图像数据和目标短时间曝光图像数据;
计算当前长时间曝光图像数据去除过亮点后的第一亮度平均值,计算当前短时间曝光图像数据去除过暗点后的第二亮度平均值,及计算当前短时间曝光图像数据的第四亮度平均值;
判断第四亮度平均值的大小,得到与图像亮度相对应的第一目标亮度阈值;
根据所述第一亮度平均值和第一目标亮度阈值计算第一积分时间,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二积分时间;
将所述目标长时间曝光图像数据和目标短时间曝光图像数据进行合成。
10.如权利要求9所述的自动曝光方法,其特征在于:所述第一目标亮度阈值采用如下方法计算:
比较阈值AVER_LOCK(i)的确定:
使AVER_LOCK(1)=AVER_LOCK_L;
AVER_LOCK(N)=AVER_LOCK_H;
第一差值DIFF1=(AVER_LOCK(N)-AVER_LOCK(1))/(N-1);
比较阈值AVER_LOCK(i)=AVER_LOCK(1)+(i-1)*DIFF1;1<=i<=N,N为大于等于2的整数值;
目标值TRAGRT(i)的确定:
TRAGRT(1)=TARGET_L;
TRAGRT(N+1)=TARGET_H;
DIFF2=(TRAGRT(N+1)-TRAGRT(1))/N;
目标值TARGET(i)=TRAGRT(1)+(i-1)*DIFF2,1<=i<=(N+1);N为大于等于2的整数值;
第一目标亮度阈值Y_LONG_TARGET_AUTO的计算:
当i=1,Y_AVER_SHORT<AVER_LOCK(i)时,Y_LONG_TARGET_AUTO=TARGET(i);
当2<=i<=N,AVER_LOCK(i-1)<=Y_AVER_SHORT<AVER_LOCK(i)时;Y_LONG_TARGET_AUTO=TARGET(i);
当i=N,Y_AVER_SHORT>=AVER_LOCK(i)时;Y_LONG_TARGET_AUTO=TARGET(i+1);
Y_AVER_SHORT为第四亮度平均值,AVER_LOCK_L为最小比较阈值、AVER_LOCK_H为最大比较阈值、TARGET_L为最小目标值、TARGET_H为最大目标值。
11.如权利要求10所述的自动曝光方法,其特征在于:N的值取8。
12.如权利要求9所述的自动曝光方法,其特征在于:所述第一亮度平均值采用如下方法计算:
将当前长时间曝光图像数据每个像素点的亮度值与预设的第二亮度阈值进行比较,选中亮度值小于第二亮度阈值的像素点,然后对所有选中像素点的亮度值进行求和,及对选中的像素点求和,将亮度总和除以像素点总和,得到第一亮度平均值。
13.如权利要求9所述的自动曝光方法,其特征在于:所述第二亮度平均值采用如下方法计算:
将当前短时间曝光图像数据每个像素点的亮度值与预设的第三亮度阈值进行比较,选中亮度值大于第三亮度阈值的像素点,然后对所有选中像素点的亮度值进行求和,及对选中的像素点求和,将亮度总和除以像素点总和,得到第二亮度平均值。
14.如权利要求12或13任一项所述的自动曝光方法,其特征在于:所述第二亮度阈值大于第三亮度阈值。
15.如权利要求9所述的自动曝光方法,其特征在于:该自动曝光方法还包括:
用以根据所述第一亮度平均值和第一目标亮度阈值计算第一数字增益值,及根据所述第二亮度平均值和预设的第二目标亮度阈值计算第二数字增益值;
将目标长时间曝光图像数据与第一数字增益值相乘得到目标高亮度图像数据,及将目标短时间曝光图像数据与第二数字增益值相乘得到目标低亮度图像数据;
所述第一亮度平均值、第二亮度平均值、第四亮度平均值的计算采用当前高亮度图像数据及当前低亮度图像数据;
所述图像合成采用目标高亮度图像数据和目标低亮度图像数据。
16.如权利要求15所述的自动曝光方法,其特征在于:该自动曝光方法还包括:
计算当前高亮度图像数据的第三亮度平均值;
根据第三亮度平均值、第四亮度平均值的大小计算第一权重系数、第二权重系数;
将所述第一权重系数与目标高亮度图像数据相乘得到第一图像数据,将所述第二权重系数与目标低亮度图像数据相乘得到第二图像数据,并将第一图像数据与第二图像数据进行合成。
CN 201010103778 2010-01-28 2010-01-28 一种自动曝光装置及其方法 Active CN102143326B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010103778 CN102143326B (zh) 2010-01-28 2010-01-28 一种自动曝光装置及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010103778 CN102143326B (zh) 2010-01-28 2010-01-28 一种自动曝光装置及其方法

Publications (2)

Publication Number Publication Date
CN102143326A CN102143326A (zh) 2011-08-03
CN102143326B true CN102143326B (zh) 2013-07-24

Family

ID=44410522

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010103778 Active CN102143326B (zh) 2010-01-28 2010-01-28 一种自动曝光装置及其方法

Country Status (1)

Country Link
CN (1) CN102143326B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301622B (zh) * 2014-09-30 2017-07-25 上海微小卫星工程中心 一种天基空间目标成像曝光时间自适应控制方法及装置
CN109218637A (zh) * 2018-03-19 2019-01-15 崔连臣 一种定位沙尘暴入侵的云计算系统
WO2020252739A1 (zh) * 2019-06-20 2020-12-24 深圳市大疆创新科技有限公司 增益系数的获取方法和装置
CN112446848A (zh) * 2020-12-18 2021-03-05 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN115134508A (zh) * 2021-03-27 2022-09-30 影石创新科技股份有限公司 图像处理方法、拍摄装置、图像处理装置及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW468350B (en) * 1998-10-28 2001-12-11 Hyundai Electronics Ind Apparatus and method for automatically controlling exposure time using a mean value of green pixels
CN1922867A (zh) * 2004-03-17 2007-02-28 富士通株式会社 自动增益控制电路
CN101193210A (zh) * 2006-11-23 2008-06-04 中兴通讯股份有限公司 一种消除摄像头条纹的方法
CN101365071A (zh) * 2007-09-27 2009-02-11 豪威科技有限公司 双模式相机方案、设备、系统及方法
CN101394473A (zh) * 2007-09-19 2009-03-25 华硕电脑股份有限公司 网络摄影机中的动态调整画面的方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003174582A (ja) * 2001-12-06 2003-06-20 Sony Corp カメラシステム及び自動露光制御方法
JP4852321B2 (ja) * 2006-02-28 2012-01-11 パナソニック株式会社 撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW468350B (en) * 1998-10-28 2001-12-11 Hyundai Electronics Ind Apparatus and method for automatically controlling exposure time using a mean value of green pixels
CN1922867A (zh) * 2004-03-17 2007-02-28 富士通株式会社 自动增益控制电路
CN101193210A (zh) * 2006-11-23 2008-06-04 中兴通讯股份有限公司 一种消除摄像头条纹的方法
CN101394473A (zh) * 2007-09-19 2009-03-25 华硕电脑股份有限公司 网络摄影机中的动态调整画面的方法
CN101365071A (zh) * 2007-09-27 2009-02-11 豪威科技有限公司 双模式相机方案、设备、系统及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2003-174582A 2003.06.20

Also Published As

Publication number Publication date
CN102143326A (zh) 2011-08-03

Similar Documents

Publication Publication Date Title
CN102143325B (zh) 一种自动曝光装置及其方法
TWI524709B (zh) 影像擷取設備、影像擷取設備之控制方法及電子裝置
US9363446B2 (en) Automatic exposure control for sequential images
CN110445988A (zh) 图像处理方法、装置、存储介质及电子设备
CN110381263B (zh) 图像处理方法、装置、存储介质及电子设备
CN102821249B (zh) 摄像设备和曝光控制方法
CN102118563A (zh) 一种自动曝光装置及其方法
CN102801918B (zh) 摄像设备和用于控制该摄像设备的方法
CN111028190A (zh) 图像处理方法、装置、存储介质及电子设备
CN100553301C (zh) 亮度的修正方法
JP2006025411A (ja) 自動露出補正方法及び補正装置
JP2007067907A (ja) 撮像装置、撮像方法および撮像プログラム、ならびに、画像処理装置、画像処理方法および画像処理プログラム
US20080043112A1 (en) Exposure of Digital Imaging
JP2010068386A (ja) 撮像装置、撮像方法及びプログラム
US9288428B2 (en) Shooting apparatus and method for controlling shooting apparatus
CN102143326B (zh) 一种自动曝光装置及其方法
CN106358030A (zh) 图像处理装置和图像处理方法
CN110430370B (zh) 图像处理方法、装置、存储介质及电子设备
US7880804B2 (en) High frequency information detecting device and imaging device
CN110047060B (zh) 图像处理方法、装置、存储介质及电子设备
JP4717720B2 (ja) 画像処理装置および方法並びにプログラム
JP2010147786A (ja) 撮像装置及び画像処理方法
CN102111560B (zh) 一种自动曝光装置及其方法
JP2018107705A (ja) 撮像装置、その制御方法とプログラムと記録媒体
JP5048599B2 (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20191129

Address after: 518119 1 Yanan Road, Kwai Chung street, Dapeng New District, Shenzhen, Guangdong

Patentee after: SHENZHEN BYD MICROELECTRONICS Co.,Ltd.

Address before: 518118 Pingshan Road, Pingshan Town, Shenzhen, Guangdong, No. 3001, No.

Patentee before: BYD Co.,Ltd.

TR01 Transfer of patent right
CP01 Change in the name or title of a patent holder

Address after: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee after: BYD Semiconductor Co.,Ltd.

Address before: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee before: BYD Semiconductor Co.,Ltd.

CP01 Change in the name or title of a patent holder
CP03 Change of name, title or address

Address after: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee after: BYD Semiconductor Co.,Ltd.

Address before: 518119 No.1 Yan'an Road, Kwai Chung street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee before: SHENZHEN BYD MICROELECTRONICS Co.,Ltd.

CP03 Change of name, title or address