发明内容
传统模拟域黑电平校准方法通常需要长置位时间以得到一个精确黑电平,模拟校准方法也将导致不需要的影像伪迹,此外,高分辨率DAC将引入额外的噪声。传统数字域黑电平校准方法很难利用OB调节特点,此外,箝位现象在影像数据中产生死区,因而降低影像的质量。本发明提供一种数字黑电平校准装置与方法以解决上述问题。
本发明提供一种数字黑电平校准装置,包括:组合电路,用以组合数字影像信号和反馈信号,并输出已修正数字信号;数字可编程增益放大器,用以根据数字可编程增益放大器增益值放大已修正数字信号,并输出数字可编程增益放大器输出信号;以及反馈电路,用以接收并比较数字可编程增益放大器输出信号和目标黑电平,并相应地输出反馈信号,以根据目标黑电平校准数字影像信号的黑电平。
本发明另提供一种数字黑电平校准方法,包括:接收数字影像信号,其中数字影像信号代表来自影像传感器的一序列的数字化的光学黑体像素;组合数字影像信号和反馈信号,并输出已修正数字信号;通过可编程增益放大器增益值放大已修正数字信号,并输出数字可编程增益放大器输出信号;以及接收并比较数字可编程增益放大器输出信号和目标黑电平,并相应地输出反馈信号,以根据目标黑电平校准数字影像信号的黑电平。
本发明再提供一种数字黑电平校准装置,包括:模数转换器,用以将模拟信号转换为数字模数转换器输出信号,其中,模拟信号代表一序列的光学黑体像素的黑电平;以及根据目标黑电平而对黑电平进行校准的装置,其中组合数字模数转换器输出信号和反馈信号,并经由所述装置包括的数字可编程增益放大器输出已放大的信号,其中在校准所述黑电平的过程中,利用已放大的信号和目标黑电平进行比较用以产生所述反馈信号。
本发明所提供的数字黑电平校准装置及方法,在校准过程中不再需要OB 像素的一个精确的平均黑电平,因此无需长置位时间;并且无需考虑PGA的增益设置而能自动地更新目标黑电平,由于目标黑电平可设置为任意正数或负数,因此消除了箝位现象,从而获得质量更好的影像。
具体实施方式
在说明书及权利要求当中使用了某些词汇来指称特定组件。所属技术领域的技术人员应可理解,制造商可能会用不同的名词来称呼同一个组件。本说明书及权利要求并不以名称的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的准则。在通篇说明书及权利要求当中所提及的“包括”和“包含”为一开放式的用语,故应解释成“包含但不限定于”。以外,“耦接”一词在此包含任何直接及间接的电气连接手段。间接的电气连接手 段包括通过其它装置进行连接。以下根据多个图式对本发明的多个实施例进行详细描述,所属技术领域的技术人员阅读后应可明确了解本发明的目的。
图3是数码相机51的简化的方块示意图。影像经由镜头52接收,并通过影像传感器53捕捉,其中影像传感器53可为电荷耦合器件(Charge CoupledDevice,CCD)传感器、CMOS传感器或者其他类型的传感器。在本实施例中,影像传感器53是一个CCD传感器。模拟前端和定时产生器(AFE/TG)集成电路54提供水平脉冲(Horizontal Pulse,HPULSE)信号至影像传感器53,并经由垂直驱动器55提供垂直脉冲(Vertical Pulse,VPULSE)信号至影像传感器53,从而从影像传感器53中读取模拟影像信号,并传送至AFE/TG集成电路54。AFE/TG集成电路54对接收自影像传感器53的模拟影像信号进行数字化,并将数字化的影像信号传送至数字影像处理(Digital ImageProcessing,DIP)集成电路56。数字化的影像信号表示为DOUT。如以下详细的描述,AFE/TG集成电路54也包括新颖的数字黑电平校准电路,以决定模拟影像信号的黑电平,从而修正DOUT以获得所需的黑电平。DIP集成电路56对数字化的影像信号执行影像处理,然后将数字形式的影像存储在大容量存储器57中。DIP集成电路56也促使影像显示于显示器58上。微控制器59提供数码相机51全部的键控扫描(key scanning)、控制和配置功能。微控制器59通过串行接口耦接至AFE/TG集成电路54和DIP集成电路56。微控制器59通过马达驱动器电路60控制镜头52。
图4是图3的影像传感器53简化的自上而下设计过程(top-down view)的示意图。影像传感器53包括传感器元件的一个两维矩阵。每个传感器元件输出一个模拟数据值,模拟数据值表示由所述传感器元件所检测的每个像素的光强度。如图4所示,影像传感器53包括有效区61和屏蔽区62,其中有效区61表示有效像素,屏蔽区62表示非受照的OB像素。TOP OB像素63是位于有效像素顶部的OB像素,SIDE OB像素64是位于有效像素侧边的OB像素。在捕捉模式中,由影像传感器53捕捉的一个全帧可分割为多个区 域。在图4中,影像传感器53为一个四区域的CCD。区域1包括行1、行5、行9等等,区域2包括行2、行6、行10等等,区域3包括行3、行7、行11等等,区域4包括行4、行8、行12等等。在读取模式下,自影像传感器53中逐像素(pixel-by-pixel)、逐行(row-by-row)以及逐区域(field-by-field)地读取模拟数据值。这些交错的区域随后重构为一个全帧。
由影像传感器53所输出的模拟数据值通过随后的处理电路AFE/TG集成电路54转换为相应的数字数据值。理论上,如果传感器元件是非受照的,由影像传感器53所输出的对应所述传感器元件的模拟数据值在AFE/TG集成电路54中被转换为相应的数字0。然而由于影像传感器中的漏电流(leakagecurrent),一个实际影像传感器的OB像素的数据值是一些正值。此外,由于供应电压、温度以及类似条件的改变,这些数字数据值通常会改变。因此,为了改善影像质量和实现所需的影像亮度,影像传感器输出数据的“光学黑体电平”(又称“OB电平”)需根据目标黑电平而校准。例如,如果需要亮些的影像,目标黑电平则相对地小。相反,如果需要暗些的影像,目标黑电平则相对地大。获得OB电平的过程被称为“黑电平校准”。在黑电平校准期间,AFE/TG集成电路54从屏蔽传感器元件中读取数据值,以获得传感器元件为非受照时所输出的OB电平。当传感器元件的每一行被读取时,可累加来自TOP OB像素63和SIDE OB像素64的OB像素值,以获得可进一步根据目标黑电平而调节的OB电平。为了获得有效像素,影像传感器输出数据值与OB电平相减,因此在暗环境下,已修正的数据值具有所需的黑电平。
图5是具有数字黑电平校准电路73的AFE/TG集成电路54的方块示意图。AFE/TG集成电路54包括CDS电路71、19位的ADC 72、数字黑电平校准电路73和串行接口74。数字黑电平校准电路73包括低通滤波器81、黑区(black area)产生器82、组合电路83、数字PGA 84、黑电平反馈电路85、一组色彩增益寄存器75-78和一组目标黑电平(target black level)寄存器86-89,数字黑电平校准电路73根据目标黑电平而对光学黑体像素的黑电平进 行校准。黑电平反馈电路85包括比较器91、积分器92、反馈增益控制器93和一组OB寄存器94-97。如图5所示,为了不同的影像色彩,可经由串行接口74将数字PGA 84和反馈增益控制器93的增益值分别写入至四个色彩增益寄存器75-78的一个中,从而使用色彩增益寄存器75-78对数字PGA 84和反馈增益控制器93的增益值进行可编程处理。相似地,为了不同的影像色彩,使用四个目标黑电平寄存器86-89和四个OB寄存器94-97。此外,数字PGA84和黑电平反馈电路85使用带符号的数据总线处理所有的数字信号。
AFE/TG集成电路54自影像传感器53接收模拟影像信号111。AFE/TG集成电路54使用两个不同的操作模式处理模拟影像信号111:用于有效像素的普通操作模式和用于OB像素的黑电平校准模式。在图5的实施例中,黑区产生器82输出黑区指示信号119。当对于有效像素不确定黑区指示信号119时,AFE/TG集成电路54操作在普通操作模式下,当对于OB像素确定黑区指示信号119时,AFE/TG集成电路54操作在黑电平校准模式下。作为另一选择,黑区指示信号119可由AFE/TG集成电路54通过外部终端接收,而不需使用黑区产生器82。
图6是AFE/TG集成电路54的操作流程图。首先模拟影像信号111由CDS电路71进行采样,然后通过ADC 72转换为数字影像信号112(步骤201)。在用于有效像素的普通操作模式下,低通滤波器81是无效(deactivated)的,数字影像信号112仅简单地通过低通滤波器81,此外,黑电平反馈电路85也是无效的。然而,继续向组合电路83提供一个用于特定色彩的存储在相应OB寄存器94-97其中之一的已调节的光学黑体电平(Adjusted Optical BlackLevel,AOBL)113。然后,数字影像信号112与AOBL113进行组合(步骤203),产生已修正数字信号114。在图5中,数字影像信号112与AOBL113相减,因此在暗环境下,已修正数字信号114将具有所需的数字值。然后,已修正数字信号114通过数字PGA 84放大,输出已放大的数字PGA输出信号115(步骤204)。其中数字PGA输出信号115(等于数字输出信号)被传送至DIP集成电路56(图5未示),以供进一步的数字影像处理。
在用于OB像素的黑电平校准模式下,黑区指示信号119是确定的(asserted)。因而数字影像信号112通过低通滤波器81进行滤波,以消除(smooth out)OB像素的黑电平变化(步骤202)。已滤波的数字影像信号112首先与AOBL 113进行组合(步骤203),然后通过数字PGA 84放大(步骤204)。因为对于OB像素,黑区指示信号119是确定的,黑电平反馈电路85也是有效(activated)的。黑电平反馈电路85接收数字PGA输出信号115,并相应地产生一个反馈信号118(步骤205)。然后将反馈信号118的光学黑体反馈值存储在一组OB寄存器94-97的一个中,从而为特定色彩更新AOBL113的值(步骤206)。当AFE/TG集成电路54切换回普通操作模式时(例如,在一个新的有效行的起始端),黑电平反馈电路85是无效的,且AOBL113等于存储在OB寄存器94-97的一个中的最终值。所述最终值代表对于所述特定色彩的最终已调节的光学黑体电平。然后使用AOBL 113的最终值去修正数字影像信号112,并且AOBL 113的最终值在普通操作模式下保持不变。
黑电平反馈电路85的目的是产生基于OB像素的AOBL 113,从而利用AOBL 113修正数字影像信号112。因此修正后的数字影像信号112在暗环境下具有目标黑电平。一个影像的每个不同的区域的每个不同的色彩可具有自身的目标黑电平,以实现所需的亮度和影像的其他视觉效果。因此,目标黑电平可经由串行接口74将所需值写入目标黑电平寄存器86-89中的一个而进行可编程处理。黑电平反馈电路85的详细操作包括以下步骤:第一步,比较器91比较数字PGA输出信号115和目标黑电平,并输出一个误差信号116。第二步,积分器92接收误差信号116,并输出积分信号117。在一实施例中,积分器92是一个累加器,可产生误差信号116与先前累加的积分信号117的和。然后,反馈增益控制器93接收积分信号117,并通过合适的反馈增益值对积分信号117进行放大,以产生反馈信号118。第三步,将反馈信号118存储在一组OB寄存器94-97的一个中,从而为每个OB像素更新AOBL 113的 值。在一定数量的OB像素已处理后,AOBL113的值最终收敛于平均OB电平和目标黑电平之间的差值。作为结果,OB像素根据目标黑电平被校准。
具有黑电平反馈电路85的数字黑电平校准电路73拥有很多优点。在第一创新方面,使用一个耦接于数字PGA的高分辨率ADC在纯数字域执行黑电平校准。此外,在校准过程中,不再需要OB像素的一个精确的平均黑电平。作为替换,通过使用逐行的数字校准,自动地更新AOBL 113,可应用于有效像素的每一行的起始端。
在第二创新方面,目标黑电平无需考虑数字PGA 84的增益设置而更容易地调节。如图5所示,组合电路83、数字PGA 84和黑电平反馈电路85一起构成校准反馈回路90。每当目标黑电平改变为一个新值,将通过校准反馈回路90根据新的目标黑电平值自动地校准OB像素。图7为阐释图2的AFE集成电路31与图5的AFE/TG集成电路54之间差异的表格。在图7的例子中,数字影像信号具有一个数字值0x1000,所需黑电平为0x0100。对于图2的AFE集成电路31,如果PGA具有增益值1,则OB调节信号应设置为0x0100。然而,如果PGA具有增益值4,则OB调节信号应设置为0x0040(0x0100被增益值4除)。另一方面,对于图5的AFE/TG集成电路54,无论PGA增益值为多少,目标黑电平总是设置为所需值0x0100。可自动地获得图5的AOBL113,因此对于OB像素的数字PGA输出信号115等于0x0100。因此,使用图5的新颖的数字黑电平校准电路73,用户可容易地将所需的目标黑电平写入目标黑电平寄存器86-89,相应地可自动地校准OB像素。
在第三创新方面,在黑电平校准过程中通过使用带符号的数据总线,目标黑电平可具有正值或负值。图8是图2和图5的OB像素值的噪声分布曲线的示意图。对于图2和图5,数字影像信号的范围从0到0x7FFFF(19位ADC),OB像素的每个数字影像信号具有平均值为0x1000的噪声分布曲线。对于图2的AFE集成电路31,如果OB调节信号设置为0x0100,则PGA输出信号的已修正的像素数据值不可能在0和0x0100之间,因为最小的修正黑电平后的 数据信号值被箝位至0。这种箝位现象增加了死区并降低影像质量。因此,图2的OB调节信号被限制为一个小的正数,以避免降低影像质量。另一方面,对于图5的AFE/TG集成电路54,因为所有的信号由带符号的数据总线传输,所以目标黑电平可设置为任意正数或负数,并具有从负到正的目标黑电平值范围。
在第四创新方面,通过改变校准反馈回路90的回路增益,可实现快速或慢速校准。图9是回路增益值为0.2时的信号波形图。图10是回路增益值为0.05时的信号波形图。在图9和图10中,目标黑电平设置为10,数字影像信号112的平均值为500,其中噪声含量为20%。在图9中,PGA 84的PGA增益值设置为4,反馈控制器93的反馈增益值设置为0.05,积分器92的积分增益设置为1。于是校准反馈回路90的总回路增益等于0.2。如图9所示,由于总回路增益为0.2,数字PGA输出信号115具有一个振荡响应(oscillatoryresponse),且慢速地收敛于目标黑电平。
另一方面,在图10中,PGA 84的PGA增益值设置为1,反馈控制器93的反馈增益值设置为0.05,积分器92的积分增益设置为1。于是校准反馈回路90的总回路增益等于0.05。如图10所示,由于总回路增益为0.05,数字PGA输出信号115具有一个渐进响应(asymptotic response),且平滑而无振荡地收敛于目标黑电平。因此,如果校准反馈回路90的总回路增益维持于接近0.05,则可实现所需的校准响应。在影像处理过程中,当PGA 84的PGA增益值改变时,反馈控制器93的反馈增益值可通过色彩增益寄存器75-78相应地改变,以保持所需的校准响应。此外,通过轻微地调节校准反馈回路90的总回路增益,可实行更快速或更慢速的校准。
上述实施例仅用来列举本发明的实施,以及阐释本发明的技术特征,并非用来限制本发明的范畴。任何本领域的技术人员可依据本发明的精神轻易完成的改变或均等性的安排均属于本发明所主张的范围,本发明的权利范围应以权利要求为准。