CN100435556C - 照相机系统 - Google Patents

照相机系统 Download PDF

Info

Publication number
CN100435556C
CN100435556C CNB2005101185627A CN200510118562A CN100435556C CN 100435556 C CN100435556 C CN 100435556C CN B2005101185627 A CNB2005101185627 A CN B2005101185627A CN 200510118562 A CN200510118562 A CN 200510118562A CN 100435556 C CN100435556 C CN 100435556C
Authority
CN
China
Prior art keywords
camera
scene
unit
parameter
order
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2005101185627A
Other languages
English (en)
Other versions
CN1960440A (zh
Inventor
尾崎望
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Taiwan Ltd
Original Assignee
Sony Taiwan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Taiwan Ltd filed Critical Sony Taiwan Ltd
Priority to CNB2005101185627A priority Critical patent/CN100435556C/zh
Publication of CN1960440A publication Critical patent/CN1960440A/zh
Application granted granted Critical
Publication of CN100435556C publication Critical patent/CN100435556C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

本发明提供一种照相机系统,其包含:图像传感器单元(101);模拟前端(AFE)单元(103),用以将自该图像传感器单元(101)输出的模拟输出信号(102)数字化成一数字视频信号104;前端相机数字信号处理器(DSP)单元(105),其包括一相机信号路径(110),用以接受该数字视频信号(104)、一测量单元(111),可操作地连接到该相机信号数据路径(110)用以测量图像特性或获取图像参数、一数字信号处理器(DSP)(112),用以处理由该测量单元(111)所测量的图像特性作为供初始的照相机控制的参数之用、一参数寄存器(113),该参数被设定其内以控制该相机信号数据路径(110);以及后端处理器(107),被输入一来自该相机信号路径(110)的视频信号106,该后端处理器(107)包括一用以处理该视频信号(106)的通用应用处理单元(119)、以及一可操作地连接到该通用应用处理单元(119)以供精确相机处理之用的场景分析器(114)。

Description

照相机系统
技术领域
本发明涉及一种照相机系统.本发明尤其涉及一种具有场景分析及分类的高级、智能型的照相机系统,其能实现使系统需求与未来扩充性保持弹性的系统配置.
背景技术
现今照相机单元是由诸如CCD(电荷耦合装置)/CMOS(金属氧化物半导体装置)成像器的图像传感器、AFE(模拟前端)、以及相机DSP(数字信号处理器)单元所构成.与照相机相关的基本功能在照相机DSP中被处理,例如,为了提供较好画面质量,根据色彩环境改变颜色的自动白平衡(AWB)、适合光曝光条件的自动曝光(AE)、以及针对一特定目标调整焦点到对焦位置的自动对焦(AF).此外,多种其它功能也需要在照相机DSP中加以处理.照相机DSP分成二大主要部分,一是用于数据路径部分的专用硬件单元,其中有滤波器及其它硬件处理器单元.而且该专用硬件单元还具有某种获取为了照相机处理控制与图像特性有关的某些参数的测量单元.照相机DSP的另一部分为处理器部分,其是以DSP或芯片上CPU实现的.DSP/CPU上的程式是控制其程序、且通常此单元是用于序列控制、适应控制以及一些用于照相机处理控制的判断.DSP/CPU会从测量单元取得参数,且经过某些计算之后,DSP/CPU计算并选择会被设定到硬件单元中的参数寄存器的参数以控制程序以及针对较佳画面质量调整程序.
5图是显示一传统式的照相机系统的方块图.附图标记1为图像传感器单元,通常使用CCD或CMOS图像传感器.在此图中,该图像传感器单元也包括具有聚焦控制功能的镜头模组与曝光控制功能的光圈.信号8是用于聚焦马达及光圈致动器等等的控制信号.由图像传感器单元1输出的模拟视频信号2被输入到AFE 3以将模拟视频信号2转换成数字视频信号4.数字视频信号4输入到前端照相机DSP单元5中的照相机信号数据路径10.测量单元11自照相机信号数据路径10获取某些特性值.这些特性值被送到DSP 12且作为估算要被设定到参数寄存器13内的参数之用.在参数寄存器13内的值被用来控制照相机信号数据路径10的操作.数字视频信号4在照相机信号数据路径10中处理,其结果以视频信号6输出且被送到下个阶段.某些诸如是在便携式电话的应用中,后端功能其中一种常见应用为图像压缩.在此情况中,视频信号6被输入到传统处理器7且被编码成一已压缩数据9.
传统式照相机系统的典型特征在于:照相机DSP是为独立式的.这表示传统式照相机的照相机DSP针对照相机处理没有与后端处理器强力合作.前端照相机DSP进行所有的照相机处理且输出已处理的视频信号.后端处理器则不会与前端照相机DSP合作,且其中是使用来自前端照相机DSP的输出而已.仅仅是寄存器的初始设定是由外部主机处理器或后端处理器来完成.然而,没有自后端处理器的反馈来控制前端照相机DSP单元.由于照相机DSP是独立操作的,所以这对于照相机处理器单元的使用而言比较简单,但由于DSP的有限性能以及照相机DSP的有限存储器大小受到限制,所以要把有用的功能集成到照相机DSP单元5而言是困难的.
某些在照相机系统上的处理步骤是强烈依赖场景的.拿AWB来说,AWB单元的最佳条件就室内与室外而言完全不同.照相机系统获取某些参数以判断场景取得是在室内还是在室外.然而,有时候会因为事先开发AWB演算法的相位时,未能预期到的意外场景而判断出错.这类对情况的误解降低图像品质成为怪异或不恰当的颜色.
为防止这类情况,照相机DSP已藉由增加特殊条件到判断演算法中而被实施成能够涵盖多种情况.但在实际操作中,仍有太多情况,故不可能仅藉由增加特殊条件到判断演算法中而欲涵盖所有的情况.此外,由于对于芯片上存储器的限制、DSP的性能限制等等,所以在实际上难以采用小的照相机DSP单元来实现这类复杂的演算法.
这类情况对于其它的照相机处理也相同.在AF的情况中,如果没有任何有关要被聚焦的目标以及其在图像中的位置的信息,那么欲对此目标聚焦是非常困难的.如果该目标被设定在照相机场景的中央,那么对其聚焦当然就容易了.但如果目标的位置并不在图像的中央,那么AF系统就无法检测待被聚焦的目标,因而就不可能对其聚焦.
在AE的情形中,情况几乎相同.例如,当场景是在背光情况,便难以调整好的曝光来实现不错的画面质量.
对于这类照相机处理而言,在照相机DSP单元中的DSP或CPU基本上需要有非常高的性能,以判断场景的情况.而因为部分来自照相机DSP单元成本降低与功率降低的要求所对DSP/CPU的能力限制,传统式照相机系统无法适当地实现场景相依处理.
发明内容
本发明的目的在于提出一种照相机系统,其能利用复杂的演算法以便实现智能型照相机系统.藉由本发明,该照相机系统能使用后端处理器的有力处理器能力,且能实现与前端照相机处理器合作的场景相关处理.
本发明可用于任何种类的具有成像器作为视频或图像的输入、照相机处理器单元(照相机DSP)、以及后端处理器作为系统的应用功能的配置的照相机系统.因此,本发明的应用涵盖从诸如照相机便携式电话、照相机PDA(个人数字助理)、DV摄录放像机、数字静止照相机、MPEG-4数字摄像机等小的便携式产品、以及专业电视摄像机系统.本发明的概念基本上应用于所有这类产品.
如上所述,针对新一代照相机系统,最重要的现点在于:在照相机系统依据照相机图像的场景适当处理的能力.如果照相机系统可以了解所获取的场景,那么照相机处理会有重大的改变且画面质量会变好.能调整适合被取得场景的参数的照相机系统,将会确实改善画面质量.
本发明提供一种能够使用与传统式照相机系统相同的非高性能照相机DSP处理诸如场景分析及场景理解的复杂处理步骤的照相机系统,其藉借使用后端的强力处理器实现场景分析及反馈场景分析的结果到前端照相机单元以实现合适的图像.
具体而言,本发明提供了:
(一).一种照相机系统,包含:图像传感器单元;模拟前端单元,用以将自该图像传感器单元输出的模拟输出信号数字化成一数字视频信号;前端照相机数字信号处理器单元,其包括一照相机信号路径,用以接受该数字视频信号、一测量单元,可操作地连接到该照相机信号数据路径用以测量图像特性或获取图像参数、一数字信号处理器,用以处理由该测量单元所测量的图像特性作为供初始的照相机控制的参数之用、一参数寄存器,该参数被设定其内以控制该照相机信号数据路径;以及后端处理器,被输入一来自该照相机信号路径的视频信号,该后端处理器包括一用以处理该视频信号的通用应用处理单元、以及一可操作地连接到该通用应用处理单元以供精确照相机处理之用的场景分析器.
(二).一种照相机系统,包含:图像传感器单元;模拟前端单元,用以将自该图像传感器单元输出的模拟数字信号数字化成一数字视频信号;前端照相机数字信号处理器单元,其包括一照相机信号路径,用以接受该数字视频信号、一预处理单元,可操作地连接到该照相机信号数据路径用以处理RAW视频输入信号、一参数寄存器,可操作地连接到该照相机信号数据路径与图像传感器单元;以及后端处理器,被输入一来自该照相机信号路径的视频信号,该后端处理器包括一用以处理该视频信号的通用应用处理单元、以及一可操作地连接到该预处理单元与参数寄存器的.
(三).一种照相机系统,包含:图像传感器装置,包括一图像传感器单元、一可操作地连接到该图像传感器单元的模拟前端单元,一照相机信号路径,用以接受该数字视频信号、一可操作地连接到该照相机信号路径的参数寄存器;以及后端处理器,被输入一来自该照相机信号路径的视频信号,该后端处理器包括一用以处理该视频信号的通用应用处理单元、以及一可操作地连接到该通用应用处理单元与该参数寄存器以供精确照相机处理之用的场景分析器.
附图说明
图1是一显示根据本发明第一实施例的照相机系统的方框图;
图2是一显示根据本发明第一实施例的照相机系统的流程图;
图3是一显示根据本发明第二实施例的照相机系统的方框图;
图4是一显示根据本发明第三实施例的照相机系统的方框图;以及
图5是一显示一传统式照相机系统的方框图.
具体实施方式
现在,将参照附图针对本发明优选实施例给予更详细说明.
第一实施例
图1是一显示根据本发明第一实施例的照相机系统的方框图.该照相机系统是以一诸如CCD图像传感器或CMOS图像传感器的图像传感器单元101、一业已变更成实施本发明功能的前端照相机数字信号处理器(DSP)单元105、以及一后端处理器107所构成.此外,有时候,在该图像传感器单元101与该前端照相机DSP单元105之间会设有诸如是模拟前端(AFE)单元103或TG(时序产生器)的小组件.
模拟前端(AFE)单元103将来自该图像传感器单元101输出的模拟输出信号102数字化成一8比特或10比特或更多比特的数字视频信号104.前端照相机数字信号处理器(DSP)单元105包括一照相机信号路径110、一测量单元111、一数字信号处理器(DSP)112、及一参数寄存器113.照相机信号路径110用以接受该数字视频信号104,该照相机信号路径110的功能在于处理来自图像传感器的像素数据,其包括诸如数据转换、滤色以及自动聚焦(AF)、自动释放(AE)、自动白平衡(AWB)等基本照相机处理步骤的一般照相机处理.在传统式的照相机DSP单元中,针对这类功能的数据路径已用硬件逻辑构建,因而不具有支援多方面的场景情况的弹性,且缺乏加入最新技术的机会.在本发明的照相机系统中,该数据路径已作成一通用的数据路径来支援包括传统式照相机处理的多样性处理.
测量单元111可操作地连接到该照相机信号数据路径110用以测量图像特性或获取图像参数.为了高速度操作,该测量单元111通常是以硬件逻辑制成.数字信号处理器(DSP)112用以处理由该测量单元111所测量的图像特性作为供初始的照相机控制的参数之用.这些参数被设定到参数寄存器113内以控制该照相机信号数据路径110.一来自照相机信号路径110的视频信号106被输入后端处理器107.
该后端处理器107包括一用以处理该视频信号106的通用应用处理单元119、以及一可操作地连接到该通用应用处理单元119以供精确照相机处理之用的场景分析器114.后端处理器107中有二种处理,第一种为在通用应用处理单元119进行的通用应用处理,其与传统式系统中的情况相同,其中一典型的应用为对来自照相机的视频信号进行图像压缩以供视频的记录或转换.另一种处理是由后端处理器单元中的场景分析器114进行的照相机处理.该场景分析器114包括一场景分析单元115、一分类单元116、及一参数计算单元117来分别处理场景分析、分类、参数计算等处理程序,以便依据目前的场景得到要被设定到该前端照相机DSP单元的参数.场景分析单元115用以获取信息与特性.分类单元116可操作地连接到场景分析单元115用以基于由该场景分析器114所获取的信息与特性而确定目前场景状况.参数计算单元117可操作地连接到分类单元116用以计算来自该分类单元116的输入并送出信号118作为要被设定到该前端照相机DSP单元105中的参数.场景分析器114可以以硬件或软件实现.针对更大的弹性,若具有强力的DSP或CPU,以软件实现会更好.
该场景分析单元115的功能在于从场景获取多维特性并输出一组要用于对照相机处理有用的场景理解的特性.例如,这类特性可以是某种关于整体图像中颜色的值、或是某种关于图像中局部区域的值.在传统式照相机DSP单元中,来自图像的已测量的特性的数目因照相机DSP及CPU的有限性能而受到限制.传统式系统无法使用其它的信息来控制照相机系统.然而,通过本发明,照相机系统能使用比传统系统更多的DSP/CPU能力,因而本发明的照相机系统能获取更多供控制照相机系统之用的特性.其它测量特性诸如是自动白平衡的参数.在传统式系统中,图像的颜色是由整体图像的平均,而整个图像中的各个色彩成份得到一个值.且这一类的色彩的信息,其数据通常被降为二维空间以减少要被处理的特性数目.此外,在此二维空间中,用以判断的曲线为以直线取代原来曲线的近似曲线.因为这种简化,AWB处理已在照相机DSP单元中以小且非强力的DSP/CPU来实施.
场景分析单元115输出的是一组特性,且这类特性是作为场景理解之用.场景理解表示目前场景是室内情况还是室外情况.如果是室外的情形,是否在图像上方有天空.如果是室内的情形,在图像中是否有人的脸.有许多有关场景理解的事物,诸如是背光条件、强光点存在、色光、高释放区域、及黑暗区域等等,对照相机处理有是有用的.
分类单元116可以使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元115的信息,该分类输出是对场景的描述且将会被输入到参数计算单元117.此统计分类也属于复杂的功能,无法在传统式照相机DSP上实现.针对统计分类,系统需要存储大量的预载数据,且也需要更多的CPU资源来对距离进行计算以便对场景分类.
参数计算单元117计算来自分类单元116的输入并输出信号118作为要被设定到该前端照相机DSP单元105内的实际参数.例如,DSP112可以接受信号118作为来自参数计算单元117的参数输出,并设定该参数到该参数寄存器113内.
有几种可以用于场景分析器114的方法.例如,就场景分析而言,诸如是以黑白为基础的方法的机械视觉应用、以及其它诸如是色彩空间分析、边缘检测、聚类、诸如傅立叶变换与小波变换的数学变换等技术.此外,区域从属方法学也适用.本发明不限制使用任何种类的方法.
图2是一显示根据本发明第一实施例的照相机系统的流程图.步骤20为本流程的起始点,例如打开电源后,控制状态即进入到此阶段.步骤21为在前端照相机DSP单元105进行初始照相机处理,如图1所示.步骤23到25为场景分析、分类、参数计算与设定的精确照相机处理步骤,如图1所说明的.在步骤25之后,控制序列会在步骤26检查场景是否改变.若无场景改变,则参数保持相同值,且控制序列持续周期性地检查场景是否改变.如果有场景改变,则在步骤27,控制序列会检查场景改变的程度.若场景改变太大,则控制序列会回到场景分析114以基于场景分析(步骤23)及分类(步骤24)来调整参数.如果场景改变的程度大,则控制序列传递到前端照相机DSP单元105(步骤21)进行另一次照相机参数的粗略调整.在此实施例中,场景的检测在后端处理器单元107中进行.后端处理器107设有可操作地连接到该参数计算单元116用以在该参数被设定后检测一场景改变的装置、以及用以如果有场景改变检测该场景改变的程度的装置.然而,为能有快速的响应,场景检测装置可设于前端照相机DSP单元105内.也可设有一可操作地连接到该程度检测装置用以产生并送出中断到该场景分析器114的中断产生器.在后端处理器107的控制序列得到中断之后,将会移至中断例程以进行判断.
第二实施例
图3是一显示根据本发明第二实施例的照相机系统的方框图.第二实施例的基本配置与图1所示的第一实施例相同.此种照相机系统包含一图像传感器单元201;一模拟前端(AFE)单元203,用以将来自该图像传感器单元201输出的模拟数字信号202数字化成一数字视频信号204;一前端照相机数字信号处理器(DSP)单元205;以及一后端处理器207,被输入一来自该照相机信号路径210的视频信号206.该后端处理器207包括一用以处理该视频信号206的通用应用处理单元219、以及一可操作地连接到该预处理单元30与参数寄存器213.但第二实施例中的前端照相机DSP单元205已去掉第一实施例的前端照相机DSP单元105中的测量单元111与DSP单元112.取而代之的是,预处理单元30设于此前端照相机DSP单元205中.预处理单元30可操作地连接到该照相机信号数据路径210用以处理RAW视频输入信号.纯粹的RAW数据可以直接被送到后端处理器207.但在此实施例中,某种诸如是缺陷补偿或是从RAW图像到点阵图形的转换的处理则是预期要减少在后端处理器单元207的负担.
该场景分析器214包括一可操作地连接到该预处理单元30的用以获取信息与特性的场景分析单元215;一分类单元216,其可操作地连接到该场景分析单元215用以基于由该场景分析单元214所获取的信息与特性而确定目前场景状况;一参数计算单元217,其可操作地连接到该分类单元216用以计算来自该分类单元216的输入并送出信号218作为要被设定到该前端照相机DSP单元205中的参数.该场景分析单元215获取场景的多维特性并输出一组要用于对照相机处理有用的场景理解的特性.该分类单元216是用以通过使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元215的信息,及输出将会被输入到该参数计算单元217的场景的描述.该参数计算单元217计算来自该分类单元216的输入并输出信号218作为要被设定到该前端照相机DSP单元105内的实际参数.该参数寄存器213接受该信号218作为来自参数计算单元217的参数输出.该预处理单元30是可操作地连接到该AFE单元203与该场景分析单元215用以处理RAW视频输入信号并产生一已预处理的视频信号31到该场景分析单元215.
在本发明第一实施例中,使用了来自照相机处理单元的视频输出,形成了某种回路.在第二实施例中,场景分析器214使用未经处理的数据供场景分析、分类及设定参数到前端照相机DSP单元205中.此处,除了在照相机单元中镜头的光圈与聚焦以外,并不会形成控制序列及数据路径的回路.
第三实施例
图4是一显示根据本发明第三实施例的照相机系统的方框图.本实施例中的一种照相机系统包含一图像传感器装置32及一后端处理器307.图像传感器装置32包括一图像传感器单元33;可操作地连接到该图像传感器单元33的一模拟前端(AFE)单元303,用以接受该数字视频信号304的一照相机信号路径310;一可操作地连接到该照相机信号路径310的参数寄存器313.一来自该照相机信号路径310的视频信号306被输入到后端处理器307.该后端处理器307包括一用以处理该视频信号306的通用应用处理单元319、以及可操作地连接到该通用应用处理单元319与该参数寄存器313以供精确照相机处理之用的一场景分析器314.该场景分析器314包括一用以获取信息与特性的场景分析单元315;一分类单元316,其可操作地连接到该场景分析单元315用以基于由该场景分析单元314所获取的信息与特性而确定目前场景状况;一参数计算单元317,其可操作地连接到该分类单元316用以计算来自该分类单元316的输入并送出信号318作为在被设定到该参数寄存器313中的参数.该场景分析单元315获取场景的多维特性并输出一组要用于对照相机处理有用的场景理解的特性.该分类单元316是用以通过使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元315的信息、及输出将会被输入到该参数计算单元317的场景的描述.该参数计算单元317计算来自该分类单元316的输入并输出信号318作为要被设定到该参数寄存器313内的实际参数.
在本实施例中,前端照相机DSP部分地被集成到图像传感器装置32,例如图像传感器LSI芯片.若是使用CMOS传感器的情形,是难以集成诸如ADC及逻辑电路的MOS模拟单元.本实施例属于较简单的例子,仅有照相机信号路径310与参数寄存器313从先前的实施例集成进来.预处理单元30则被省略.在此例中,没有照相机处理中的预处理步骤,取而代之的是场景分析器314也作为初始调整之用.
照相机处理的要件端视其应用而改变,且有时候会需要将照相机处理的新技术集成到已有的照相机系统中.照相机信号数据路径单元可以设计成具有通用的功能且能支援视频信号的多样化处理.当使用强力的后端处理器时,此系统能实现智能系统.若真的有降低成本的需要时,更便宜的后端处理器也可以适于取而代之.以此种只有一种型式的CMOS成像器,多种型式的系统可视系统需求予以构建.
凭借将照相机信号数据路径的弹性设计,此系统能支持任何形式的照相机处理,不仅是已有的功能,也可以是高级的特性.该照相机信号数据路径能以弹性的硬件实现.凭借增加的处理器能力,也可以采用软件来实现这类照相机处理功能.但在此处,有意采用硬件实施的例子加以解释,并显示将软件的权重转移到诸如场景分析、分类等等更高级的智能型处理步骤.除了为减少功率以外,以硬件实现数据路径部分也属恰当的.
场景分析是采用软件在前端处理器完成的.这样就使得系统的设计能保持弹性.如果要有高级的处理以达到较高的品质,系统可选择较高性能的处理器.如果系统设计者有降低成本的需求,则设计者可使用较便宜的后端处理器.
在本发明第三实施例中,集成到CMOS传感器的集成逻辑仅有弹性、通用的数据路径.凭借此数据路径,能够仅以一种类型的图像传感器来实现范围广的系统.
在本发明的第一实施例中,针对场景分析,该场景分析器能使用视频编码器的数据给场景.例如运动向量是检测场景改变不错的例子.通过使用后端处理器作为场景分析单元,压缩处理的信息能够用于照相机处理之用.
虽然本发明业已以优选实施例的方式加以描述,应了解到本发明可以多种其它特定格式实施,而不背离本发明的精神与范畴.本发明示范例也可被视为说明而非限制,且本发明并不受限于在本文所给的细节,但可在所附的申请专利范围以及等同物的全部范围的范畴内加以修改.

Claims (18)

1.一种照相机系统,包含:
-图像传感器单元(101);
-模拟前端(AFE)单元(103),用以将自该图像传感器单元(101)输出的模拟输出信号(102)数字化成一数字视频信号(104);
-前端照相机数字信号处理器(DSP)单元(105),其包括一照相机信号路径(110),用以接受该数字视频信号(104)、一测量单元(111),可操作地连接到该照相机信号数据路径(110)用以测量图像特性或获取图像参数、一数字信号处理器(DSP)(112),用以处理由该测量单元(111)所测量的图像特性作为供初始的照相机控制的参数之用、一参数寄存器(113),该参数被设定其内以控制该照相机信号数据路径(110);以及
-后端处理器(107),被输入一来自该照相机信号路径(110)的视频信号(106),该后端处理器(107)包括一用以处理该视频信号(106)的通用应用处理单元(119)、以及一可操作地连接到该通用应用处理单元(119)以供精确照相机处理之用的场景分析器(114),
其中该场景分析器(114)包括一用以获取信息与特性的场景分析单元(115)、一分类单元(116),其可操作地连接到该场景分析单元(115)用以基于由该场景分析器(114)所获取的信息与特性而确定目前场景状况、一参数计算单元(117),其可操作地连接到该分类单元(116)用以计算来自该分类单元(116)的输入并送出信号(118)作为要被设定到该前端照相机DSP单元(105)中的参数、用以在该参数被设定后检测一场景改变的装置、以及用以如果有场景改变检测该场景改变的程度的装置。
2.如权利要求1所述的照相机系统,其中该场景分析单元(115)获取场景的多维特性并输出一组要用于对照相机处理有用的场景理解的特性。
3.如权利要求1所述的照相机系统,其中该分类单元116是用以通过使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元(115)的信息,及输出将会被输入到该参数计算单元(117)的场景的描述。
4.如权利要求1所述的照相机系统,其中该参数计算单元(117)计算来自该分类单元(116)的输入并输出信号(118)作为要被设定到该前端照相机DSP单元(105)内的实际参数。
5.如权利要求1所述的照相机系统,其中该DSP(112)接受该信号(118)作为来自参数计算单元(117)的参数输出并设定该参数到该参数寄存器(113)内。
6.如权利要求1所述的照相机系统,其中该场景检测装置可操作地连接到该参数计算单元(116)与该程度检测装置。
7.如权利要求1所述的照相机系统,其中该程度检测装置可操作地连接到该场景检测装置与该场景分析单元(114),用以控制照相机的处理流程、如果发生一大的场景改变则其被传递到该前端照相机DSP单元(105),如果发生小的场景改变则其被传递到该场景分析器(114)以调整照相机处理的参数。
8.如权利要求1所述的照相机系统,其中该前端照相机DSP单元(105)进一步包括用以在该参数被设定后检测一场景改变的装置、用以如果有场景改变检测该场景改变的程度的装置、以及一可操作地连接到该程度检测装置用以产生并送出中断到该场景分析器(114)的中断产生器。
9.一种照相机系统,包含:
-图像传感器单元(201);
-模拟前端(AFE)单元(203),用以将自该图像传感器单元(201)输出的模拟数字信号(202)数字化成一数字视频信号(204);
-前端照相机数字信号处理器(DSP)单元(205),其包括一照相机信号路径(210),用以接受该数字视频信号(204)、一预处理单元(30),可操作地连接到该照相机信号数据路径(210)用以处理原始的视频输入信号、一参数寄存器(113),可操作地连接到该照相机信号数据路径(210)与图像传感器单元(201);以及
-后端处理器(207),被输入一来自该照相机信号路径210的视频信号(206),该后端处理器(207)包括一用以处理该视频信号(206)的通用应用处理单元(219)、以及一可操作地连接到该预处理单元(30)与参数寄存器(213)的场景分析器(214),
其中该场景分析器(214)包括一可操作地连接到该预处理单元(30)的用以获取信息与特性的场景分析单元(215)、一分类单元(216),其可操作地连接到该场景分析单元(215)用以基于由该场景分析器(214)所获取的信息与特性而确定目前场景状况、一参数计算单元(217),其可操作地连接到该分类单元(216)用以计算来自该分类单元(216)的输入并送出信号(218)作为要被设定到该前端照相机DSP单元(205)中的参数。
10.如权利要求9所述的照相机系统,其中该场景分析单元(215)获取场景的多维特性并输出一组要用于对照相机处理有用的场景理解的特性。
11.如权利要求9所述的照相机系统,其中该分类单元(216)是用以通过使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元(215)的信息,及输入将会被输入到该参数计算单元(217)的场景的描述。
12.如权利要求9所述的照相机系统,其中该参数计算单元(217)计算来自该分类单元(216)的输入并输出信号(218)作为要被设定到该前端照相机DSP单元(105)内的实际参数。
13.如权利要求9所述的照相机系统,其中该参数寄存器(213)接受该信号(218)作为来自参数计算单元(217)的参数输出。
14.如权利要求9所述的照相机系统,其中该预处理单元(30)可操作地连接到该AFE单元(203)与该场景分析单元(215)用以处理原始的视频输入信号并产生一已预处理的视频信号(31)到该场景分析单元(215)。
15.一种照相机系统,包含:
-图像传感器装置(32),包括一图像传感器单元(33)、一可操作地连接到该图像传感器单元(33)的模拟前端(AFE)单元(303),一照相机信号路径(310),用以接受该数字视频信号(304)、一可操作地连接到该照相机信号路径(310)的参数寄存器(313);以及
-后端处理器(307),被输入一来自该照相机信号路径(310)的视频信号(306),该后端处理器(307)包括一用以处理该视频信号(306)的通用应用处理单元(319)、以及一可操作地连接到该通用应用处理单元(319)与该参数寄存器(313)以供精确照相机处理之用的场景分析器(314),
其中该场景分析器(314)包括一用以获取信息与特性的场景分析单元(315)、一分类单元(316),其可操作地连接到该场景分析单元315用以基于由该场景分析器(314)所获取的信息与特性而确定目前场景状况、一参数计算单元(317),其可操作地连接到该分类单元(316)用以计算来自该分类单元(316)的输入并送出信号(318)作为要被设定到该参数寄存器(313)中的参数。
16.如权利要求15所述的照相机系统,其中该场景分析单元(315)获取场景的多维特性并输出一组要用于对照相机处理有用的场景理解的特性。
17.如权利要求15所述的照相机系统,其中该分类单元(316)是用以通过使用统计图案分类或神经网络式决策来分类场景本身与来自该场景分析单元(315)的信息,及输出将会被输入到该参数计算单元(317)的场景的描述。
18.如权利要求15所述的照相机系统,其中该参数计算单元(317)计算来自该分类单元(316)的输入并输出信号(318)作为要被设定到该参数寄存器(313)内的实际参数。
CNB2005101185627A 2005-10-31 2005-10-31 照相机系统 Expired - Fee Related CN100435556C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2005101185627A CN100435556C (zh) 2005-10-31 2005-10-31 照相机系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2005101185627A CN100435556C (zh) 2005-10-31 2005-10-31 照相机系统

Publications (2)

Publication Number Publication Date
CN1960440A CN1960440A (zh) 2007-05-09
CN100435556C true CN100435556C (zh) 2008-11-19

Family

ID=38071912

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005101185627A Expired - Fee Related CN100435556C (zh) 2005-10-31 2005-10-31 照相机系统

Country Status (1)

Country Link
CN (1) CN100435556C (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8466974B2 (en) * 2008-11-12 2013-06-18 O2Micro, Inc. Apparatus and methods for controlling image sensors
JP2011114662A (ja) * 2009-11-27 2011-06-09 Sony Corp 画像処理装置、画像処理方法、プログラム、及び、記録媒体
US9826149B2 (en) * 2015-03-27 2017-11-21 Intel Corporation Machine learning of real-time image capture parameters

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1471306A (zh) * 2002-07-09 2004-01-28 ���ǵ�����ʽ���� 场景改变检测器及其方法
CN1499823A (zh) * 2002-11-05 2004-05-26 奥林巴斯株式会社 照相机
JP2004343809A (ja) * 2004-08-25 2004-12-02 Fuji Xerox Co Ltd 画像処理方法および画像処理装置
JP2005033447A (ja) * 2003-07-11 2005-02-03 Casio Comput Co Ltd デジタルカメラシステムおよびデジタルカメラ並びにプログラム
US20050078192A1 (en) * 2003-10-14 2005-04-14 Casio Computer Co., Ltd. Imaging apparatus and image processing method therefor

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1471306A (zh) * 2002-07-09 2004-01-28 ���ǵ�����ʽ���� 场景改变检测器及其方法
CN1499823A (zh) * 2002-11-05 2004-05-26 奥林巴斯株式会社 照相机
JP2005033447A (ja) * 2003-07-11 2005-02-03 Casio Comput Co Ltd デジタルカメラシステムおよびデジタルカメラ並びにプログラム
US20050078192A1 (en) * 2003-10-14 2005-04-14 Casio Computer Co., Ltd. Imaging apparatus and image processing method therefor
JP2004343809A (ja) * 2004-08-25 2004-12-02 Fuji Xerox Co Ltd 画像処理方法および画像処理装置

Also Published As

Publication number Publication date
CN1960440A (zh) 2007-05-09

Similar Documents

Publication Publication Date Title
CN101605208B (zh) 图像处理设备、成像设备及图像处理方法
CN111698434B (zh) 图像处理设备及其控制方法和计算机可读存储介质
US6563540B2 (en) Light sensor with increased dynamic range
KR102480600B1 (ko) 이미지 처리 장치의 저조도 화질 개선 방법 및 상기 방법을 수행하는 이미지 처리 시스템의 동작 방법
CN105827897B (zh) 调整卡制作方法、系统、调试色彩校正矩阵方法及设备
CN103220534A (zh) 图像撷取装置与方法
CN102801912A (zh) 一种红外图像处理芯片及处理方法
US8013902B2 (en) Camera system apparatus with image sensor
CN103096096B (zh) 数字拍摄设备
CN104010128A (zh) 摄像设备及其控制方法
CN109788170A (zh) 一种基于红外与可见光的视频图像处理系统及方法
US7561090B1 (en) Focal plane array with serial, variable bit width analog to digital converter
CN110505411A (zh) 图像拍摄方法、装置、存储介质及电子设备
CN110213502A (zh) 图像处理方法、装置、存储介质及电子设备
CN104270560A (zh) 一种多点对焦方法和装置
US20190043220A1 (en) Multi-camera processor with feature matching
CN109743500A (zh) 一种红外摄像机日夜模式的校准、切换方法及装置
CN113518210A (zh) 图像自动白平衡的方法及装置
US9723221B2 (en) Imaging device shooting a common subject in synchronization with other imaging devices
CN103096094A (zh) 视觉识别装置和方法
JP2020080458A (ja) 撮像装置及び制御方法
CN108200362A (zh) 基于空间对比度的仿生视网膜摄像电路及子电路
CN100435556C (zh) 照相机系统
CN101753833A (zh) 一种摄像头模组调焦检测方法、装置、系统及检测设备
CN108462840A (zh) 图像传感器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20081119

Termination date: 20141031

EXPY Termination of patent right or utility model