CN1856118A - 图像传感装置和图像传感控制方法 - Google Patents

图像传感装置和图像传感控制方法 Download PDF

Info

Publication number
CN1856118A
CN1856118A CNA2006100762918A CN200610076291A CN1856118A CN 1856118 A CN1856118 A CN 1856118A CN A2006100762918 A CNA2006100762918 A CN A2006100762918A CN 200610076291 A CN200610076291 A CN 200610076291A CN 1856118 A CN1856118 A CN 1856118A
Authority
CN
China
Prior art keywords
image sensing
picture signal
still image
display unit
white balance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006100762918A
Other languages
English (en)
Other versions
CN100589585C (zh
Inventor
小川茂夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1856118A publication Critical patent/CN1856118A/zh
Application granted granted Critical
Publication of CN100589585C publication Critical patent/CN100589585C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21—Intermediate information storage
    • H04N1/2104—Intermediate information storage for one or a few pictures
    • H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/212—Motion video recording combined with still video recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

一种根据驱动模式使用具有不同光谱灵敏度的图像传感器的图像传感装置和图像传感控制方法，在不同于静态图像传感的驱动模式下驱动图像传感器的预定操作期间，该图像传感装置根据来自用户的预定操作指令执行静态图像传感。在该静态图像传感中，基于在静态图像传感的驱动模式下通过驱动图像传感器获得的图像信号，获得静态图像传感白平衡控制值，并在静态图像传感中控制白平衡。当从静态图像传感返回到预定的操作状态时，将在静态图像传感中获得的白平衡控制值转换成与在预定的操作状态下的图像传感器的驱动模式相对应的白平衡控制值，以应用所获得的白平衡控制值。

Description

图像传感装置和图像传感控制方法
技术领域
本发明涉及一种处理由图像传感装置传感到的图像信号的图像传感装置和图像传感控制方法。
背景技术
在普通数字照相机的白平衡控制(以下简称为WB)中，分析来自对象的反射光，基于所获得的光谱分布确定光源的类型，并且改变白平衡控制值以获得不依赖于光源颜色的颜色外观(color appearance)。通常，当在静态图像传感中光源发生改变时，白平衡控制值立即随着光源的改变而改变。然而，在动态图像传感期间，白平衡控制值以一时间常数随着光源的改变而改变。
在日本特开2003-61113号公报中，在静态图像传感中，存储在静态图像传感待机状态(动态图像传感的状态)下的最后的白平衡控制值。在完成静态图像传感后返回到静态图像传感待机状态(动态图像传感的状态)时，再次设置所存储的白平衡控制值。
在上面的专利参考文献中，当在完成静态图像传感后返回到静态图像传感待机状态时，数字照相机紧接在静态图像传感之前设置白平衡控制值。因此，如上所述，基于静态图像传感与动态图像传感对于光源的跟随(follow-up)特性之间的差异，在返回到静态图像传感待机状态之后，不能立即完全校正光源颜色，从而出现问题。
也就是说，在这样的白平衡控制中，通过静态图像传感所拍摄的图像与静态图像传感后通过动态图像传感所传感到的图像的色泽(tincture)不同。结果，不能维持颜色连续性。
发明内容
考虑到上述问题做出了本发明，本发明的目的在于维持通过静态图像传感操作和动态图像传感操作等不同操作获得的图像的颜色外观的连续性。
根据本发明的第一方面，提供一种图像传感装置，其包括：静态图像传感单元，其在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；显示单元，其显示图像信号；第一控制单元，其进行控制，以基于通过静态图像传感获得的第一图像信号来获得白平衡控制值，基于该白平衡控制值校正该第一图像信号，并将校正后的第一图像信号显示在所述显示单元上；以及第二控制单元，其进行控制，以基于根据该第一图像信号获得的该白平衡控制值，校正在静态图像传感后的该第一操作中获得的第二图像信号，并在将该第一图像信号显示在所述显示单元上之后，将校正后的第二图像信号显示在所述显示单元上。
根据本发明的第二方面，提供一种图像传感装置，其包括：静态图像传感单元，其在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；显示单元，其显示图像信号；以及控制单元，其进行控制，以对在紧接在该第二操作之前的该第一操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在所述显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在所述显示单元上，对在静态图像传感之后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在所述显示单元上，其中，所述控制单元控制待显示在所述显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在所述显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在所述显示单元上的校正后的第二图像信号的颜色外观。
根据本发明的第三方面，提供一种图像传感装置，包括：调整单元，其在进行动态图像传感的第一操作中，进行为静态图像传感执行聚焦调整操作和曝光调整操作中的至少一个的第二操作；静态图像传感单元，其在该第二操作中进行执行静态图像传感的第三操作；显示单元，其显示图像信号；以及控制单元，其进行控制，以对在该第二操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在所述显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在所述显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在所述显示单元上，其中，所述控制单元控制待显示在所述显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在所述显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在所述显示单元上的校正后的第二图像信号的颜色外观。
根据本发明的第四方面，提供一种图像传感控制方法，其包括：静态图像传感步骤，用于在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；显示步骤，用于显示图像信号；第一控制步骤，用于进行控制，以基于通过静态图像传感获得的第一图像信号获得白平衡控制值，基于该白平衡控制值校正该第一图像信号，并将校正后的第一图像信号显示在显示单元上；以及第二控制步骤，用于进行控制，以基于根据该第一图像信号获得的该白平衡控制值，校正在静态图像传感后的该第一操作中获得的第二图像信号，并在将该第一图像信号显示在该显示单元上之后，将校正后的第二图像信号显示在该显示单元上。
根据本发明的第五方面，提供一种图像传感控制方法，其包括：静态图像传感步骤，用于在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；显示步骤，用于显示图像信号；以及控制步骤，用于进行控制，以对在紧接在该第二操作之前的该第一操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在该显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在该显示单元上，其中，在该控制步骤中，控制待显示在该显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在该显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在该显示单元上的校正后的第二图像信号的颜色外观。
根据本发明的第六方面，提供一种图像传感控制方法，其包括：调整步骤，用于在进行动态图像传感的第一操作中，进行为静态图像传感执行聚焦调整操作和曝光调整操作中的至少一个的第二操作；静态图像传感步骤，用于进行在该第二操作中执行静态图像传感的第三操作；显示步骤，用于显示图像信号；以及控制步骤，用于进行控制，以对在该第二操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在该显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在该显示单元上，其中，在该控制步骤中，控制待显示在该显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在该显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在该显示单元上的校正后的第二图像信号的颜色外观。
通过以下结合附图的说明，本发明的其它特征和优点将显而易见，其中，相同的附图标记在全部附图中表示相同或相似的部分。
附图说明
包括在说明书中并构成说明书的一部分的附图，示出了本发明的实施例，并与说明书一起用来解释本发明的原理。
图1是根据第一实施例的图像传感装置的框图；
图2是示出在根据第一实施例的图像传感装置中的主程序的操作处理的流程图；
图3是示出在根据第一实施例的图像传感装置中开始动态图像记录操作的操作处理的流程图；
图4是示出在根据第一实施例的图像传感装置中的动态图像传感的操作处理的流程图；
图5是示出在根据第一实施例的图像传感装置中在动态图像传感期间的静态图像传感的操作处理的流程图；
图6是示出在根据第一实施例的图像传感装置中当返回到动态图像传感状态时的白平衡处理的流程图；
图7是在根据第一实施例的图像传感装置中在动态图像传感期间的静态图像传感的时序图；
图8是示出在根据第一实施例的图像传感装置中，在动态图像传感期间根据静态图像传感的白平衡处理中的光谱灵敏度的校正转换的例子的图；
图9是示出在根据第一实施例的图像传感装置中在动态图像传感期间的静态图像传感的白平衡处理在时间方向上的变化的图；
图10是示出在根据第二实施例的图像传感装置中的静态图像传感的操作处理的流程图；
图11是示出在根据第二实施例的图像传感装置中当返回到EVF时的白平衡操作处理的流程图；
图12是示出在根据第二实施例的图像传感装置中的静态图像传感的操作处理的流程图；以及
图13是示出在根据第二实施例的图像传感装置中在静态图像传感之前和之后的白平衡处理在时间方向上的变化的图。
具体实施方式
现在，根据附图对本发明的优选实施例进行说明。
第一实施例
图1是示出根据第一实施例的用作图像处理装置的图像传感装置100的配置的框图。图像传感装置100包括：作为光学系统的镜头10；具有光圈(stop)功能的快门12；以及将光学图像转换成电信号的图像传感元件14。A/D转换器16将来自图像传感元件14的模拟信号转换成数字信号。
定时发生电路18向图像传感元件14、A/D转换器16、以及D/A转换器26提供时钟信号或控制信号。通过存储器控制电路22和系统控制电路50来控制定时发生电路18。
图像处理电路20对来自A/D转换器16的数据或者来自存储器控制电路22的数据执行预定的像素插值处理或颜色转换处理。图像处理电路20还通过使用传感到的图像数据执行预定的运算处理，并将所获得的运算结果提供给系统控制电路50。基于该运算结果，系统控制电路50控制曝光控制单元40和测距控制单元42，以执行TTL(Through The Lens，通过镜头)方式的AF(AutoFocus，自动聚焦)处理、AE(Auto Exposure，自动曝光)处理以及EF(Electronic Flash pre-emission，电子闪光灯预发光)处理。图像处理电路20还通过使用传感到的图像数据执行预定的运算处理，并基于所获得的运算结果执行TTL方式的AWB(AutoWhite Balance，自动白平衡)处理。
存储器控制电路22控制A/D转换器16、定时发生电路18、图像处理电路20、图像显示存储器24、D/A转换器26、存储器30、以及压缩/展开电路32。将从A/D转换器16输出的数据通过图像处理电路20和存储器控制电路22，或直接通过存储器控制电路22，写入图像显示存储器24或存储器30中。
通过D/A转换器26将写入图像显示存储器24中的显示图像数据转换成模拟信号，并将其显示在图像显示单元28上。当使用图像显示单元28顺序显示传感到的图像数据时，可以实现电子取景器(EVF)功能。图像显示单元28可以在系统控制电路50的控制下，任意地打开/关闭显示。当图像显示单元28关闭显示时，可以大幅降低图像传感装置100的功耗。
存储器30存储传感到的静态图像或传感到的动态图像。存储器30具有足够大的存储容量以存储预定数量的静态图像或预定时间的动态图像。因此，即使在全景传感或连续取得多个静态图像的连续拍摄中，也可以快速地将大量的图像写入存储器30中。还可以将存储器30用作系统控制电路50的工作区。
压缩/展开电路32通过例如自适应离散余弦变换(AdaptiveDiscrete Cosine Transform，ADCT)执行图像数据的压缩/展开处理。压缩/展开电路32加载存储在存储器30中的图像，执行压缩/展开处理，并将处理后的数据写入存储器30中。
曝光控制单元40控制快门12的光圈功能。曝光控制单元40还具有与电子闪光灯48协作的闪光灯亮度控制功能。测距控制单元42控制镜头10的聚焦。变焦控制单元44控制镜头10的变焦。挡板控制单元46控制用作挡板(barrier)的保护单元102的操作。电子闪光灯48除了具有用于闪光传感操作的发光功能外，还具有AF辅助光投射(projection)功能和闪光控制功能。通过TTL方式控制曝光控制单元40和测距控制单元42。基于从图像处理电路20通过处理传感到的图像数据而获得的运算结果，系统控制电路5 0控制曝光控制单元40和测距控制单元42。
系统控制电路50控制整个图像传感装置100。存储器52存储用于系统控制电路50的操作的常量、变量和程序。存储器52还存储在AE中使用的程序图(program diagram)。程序图是定义曝光值的光圈直径与快门速度控制值之间的关系的表。
在系统控制电路50的控制下，呈现单元54通过使用字符、图像或声音(语音)向用户通知工作状态或消息。呈现单元54包括例如LCD、LED、扬声器等的输出设备的组合。在图像传感装置100的操作单元附近的可见位置处配置一个或多个呈现单元54。在光学取景器104中配置部分呈现单元54。在呈现单元54的呈现内容中，在LCD等上指示的例子有：单次拍摄/连续拍摄、自拍(selftimer)、压缩比、记录像素数、记录的图像数、可记录的图像数、快门速度、光圈值(F-number)、曝光校正、电子闪光、红眼效果降低、微距传感(macro sensing)、蜂鸣器设置、定时器电池电量、电池电量、出错、多个数字的信息、记录介质200和210的安装状态、通信I/F的操作、以及日期/时间。光学取景器104显示呈现单元54的一些功能，包括例如：焦点对准(in-focus)指示、照相机抖动警告指示、电子闪光灯充电指示、快门速度指示、光圈值指示、以及曝光校正指示。
非易失性存储器56是电可檫除/可记录的存储器。例如，可以使用EEPROM等作为非易失性存储器56。
附图标记60、61、62、64和70表示用于为系统控制电路50输入各种操作指令的操作单元。它们包括开关、拨盘、触摸式面板、或者通过检测视线指示、以及声音识别设备等。在此将详细说明这些操作单元。
模式拨盘开关60切换关闭电源、自动图像传感模式、图像传感模式、全景图像传感模式、重放模式、多窗口重放/擦除模式、以及PC连接模式等功能模式。动态图像按钮61用以输入指令以开始/结束动态图像传感。通过按下动态图像按钮61开始动态图像传感，并通过在动态图像传感期间再次按下动态图像按钮61结束该动态图像传感。
快门开关(SW1)62在快门按钮(未示出)被按下一半的状态下被打开。打开(ON)快门开关(SW1)62指示AF(自动聚焦)处理、AE(自动曝光)处理、AWB(自动白平衡)处理、或EF(电子闪光灯预闪)处理等的操作的开始。在完全按下快门按钮(未示出)时打开快门开关(SW2)64。打开快门开关(SW2)64指示开始一系列处理操作，包括：曝光处理(通过A/D转换器16和存储器控制电路22，将从图像传感元件14读取的信号作为原始图像数据写入存储器30中的处理)、显影处理(在由图像处理电路20或存储器控制电路22进行的运算处理中将该原始图像数据转换成图像的处理)、以及记录处理(从存储器30读出图像数据，使得压缩/展开单元32压缩该图像数据，并将其写入记录介质200或210中的处理)。
操作单元70包括各种按钮和触摸式面板。操作单元70的开关和按钮包括：菜单按钮、设置按钮、微距按钮、多窗口重放分页按钮、电子闪光灯设置按钮、单次拍摄/连续拍摄/自拍切换按钮、菜单移动+(加)按钮、菜单移动-(减)按钮、重放图像移动+(加)按钮、重放图像移动-(减)按钮、传感到的图像质量选择按钮、曝光校正按钮、以及日期/时间设置按钮。
电源控制单元80包括：  电池检测电路、DC/DC转换器、以及选择要通电的模块的开关电路。电源控制单元80检测有/无电池、电池类型、以及电池电量，基于该检测结果和来自系统控制电路50的指令控制DC/DC转换器，并在必要期间向包括记录介质的单元提供必要的电压。电源单元86通过连接器82和84与电源控制单元80连接。电源单元86包括：碱性电池或锂电池等一次电池；BNiCd电池、NiMH电池、或锂电池等二次电池；或交流(AC)适配器。
接口90和94将系统总线与存储卡和硬盘等记录介质连接。接口90和94通过连接器92和96与可拆卸的存储卡和硬盘等记录介质连接。记录介质安装检测单元98检测记录介质200或210是否被安装到连接器92或96。
假定该装置具有两个记录介质所安装到的接口和连接器的系统来说明本实施例。当然，该装置可以具有一个或多个记录介质所安装到的接口和连接器的系统。另外，可以组合不同标准的接口或连接器。可以使用基于PCMCIA卡或CF(CompactFlash)卡等的标准的接口和连接器。
当使用基于PCMCIA卡或CF(CompactFlash)卡等的标准的接口90和94以及连接器92和96，并连接LAN卡、调制解调器卡、USB卡、IEEE1394卡、P1284卡、SCSI卡或PHS的通信卡等各种通信卡时，可以将图像数据或与该图像数据有关的管理信息传送到另一计算机或打印机等外围设备，或者可以从另一计算机或打印机等外围设备传送该图像数据或与该图像数据有关的管理信息。
保护单元102用作挡板，该挡板覆盖包括图像传感装置100的镜头10的图像传感单元，以防止任何弄脏或损坏图像传感单元。可以通过仅使用光学取景器104，而不使用图像显示单元28的电子取景器功能，来执行传感。如上所述，光学取景器104包含呈现单元54的一些功能，包括例如：焦点对准指示、照相机抖动警告指示、电子闪光灯充电指示、快门速度指示、光圈值指示、以及曝光校正指示。
通信单元110具有RS232C、USB、IEEE1394、P1284、SCSI、调制解调器、LAN、以及无线通信等各种通信功能。附图标记112表示使用通信单元110进行有线通信的连接器，同时其表示使用通信单元110进行无线通信的天线。
记录介质200包括存储卡或硬盘。记录介质200包括：包括半导体存储器或磁盘的记录单元202；到图像传感装置100的接口204；以及与图像传感装置100连接的连接器206。与记录介质200类似，记录介质210包括记录单元212、接口214、以及连接器216。
图2、3和4是用于说明根据第一实施例的图像传感装置100的主要操作的流程图。当系统控制电路50执行存储在存储器52中的控制程序时，实现下面的处理。
当通过例如装载新的电池向图像传感装置100供电时，开始该处理。在步骤S201，系统控制电路50初始化各种标志和控制变量。在步骤S202，系统控制电路50将图像显示单元28的显示状态初始化为关闭(OFF)状态。
在步骤S203，系统控制电路50判断根据模式拨盘60的位置设置的操作模式。如果将模式拨盘60设置为电源关闭，则流程进入步骤S205以执行结束处理。该结束处理包括以下处理。即，将呈现单元54和显示单元28的显示状态改变为结束状态。关闭保护单元102以保护图像传感单元。将包括标志和控制变量的必要的参数、设置值、以及设置模式存储在非易失性存储器56中。电源控制单元80切断包括图像显示单元28的图像传感装置100的单元的不必要的电源。在执行该结束处理之后，流程返回到步骤S203。
如果将模式拨盘60设置为图像传感模式，则流程从步骤S203进入步骤S206以执行图像传感模式。另一方面，如果将模式拨盘60设置为任何其它的模式，则流程从步骤S203进入步骤S204。在步骤S204，系统控制电路50执行与所选择的模式相对应的处理。在该处理结束后，流程返回到步骤S203。
如果将模式拨盘60设置为图像传感模式，则在步骤S206，系统控制电路50在电源控制单元80的控制下，判断包括电池等的电源86的电量或工作状态在图像传感装置100的工作中是否存在问题。如果发现任何问题，则流程进入步骤S208。在步骤S208，通过图像或声音将预定的警告显示在呈现单元54上，并且流程返回到步骤S203。如果没有发现问题，则流程进入步骤S207。在步骤S207，系统控制电路50判断记录介质200或210的工作状态对于图像传感装置100的工作，尤其是对记录介质的图像数据的记录/重放操作，是否存在问题。如果在步骤S207中为否，则流程进入步骤S208。在步骤S208，通过图像或声音将预定的警告显示在呈现单元54上，并且流程返回到步骤S203。如果在步骤S207中为是，则流程进入步骤S209。
在步骤S209，进行传感准备(初始化)以将直通图像(throughimage)(通过图像传感元件14传感到的动态图像)显示在图像显示单元28上。在这种情况下，对来自图像传感元件的每一组线将信号相加并读出(相加/读取)。在完成传感准备后，在步骤S210，开始将直通图像显示在图像显示单元28上。即，显示由图像传感元件14传感到的动态图像以实现电子取景器功能。在直通显示状态下，将通过图像传感元件14、A/D转换器16、图像处理电路20、以及存储器控制电路22顺序写入图像显示存储器24中的数据，通过存储器控制电路22和D/A转换器26顺序显示在图像显示单元28上。注意，在用于直通图像显示的图像传感元件14的驱动模式下，可以如在动态图像传感(后面进行说明)中一样来进行“相加/读取”。
图3和4是用于说明当在图像传感模式下指示动态图像传感时的处理的流程图。注意，图4的流程图还包括当在动态图像传感期间指示静态图像传感时的处理。
系统控制电路50检查模式拨盘60的状态。如果模式拨盘60的状态已经从图像传感模式发生改变，则流程返回到步骤S203。另一方面，如果模式拨盘60的状态没有改变，则流程进入步骤S302。在步骤302，检查动态图像按钮61的状态。如果未按下动态图像按钮61，则流程进入步骤S303以继续直通图像显示。如在步骤S304那样，为了继续直通图像显示，进行AE处理。在AE处理中，图像处理电路20对从图像传感元件14获得的信号执行预定的测光运算(photometry)，并将所获得的运算结果存储在存储器30中。基于该运算结果，系统控制电路50使用曝光控制单元40对直通图像执行AE处理。之后，流程返回到步骤S301。
如果在步骤S302判断出已经按下了动态图像按钮61，则流程进入步骤S305。在步骤S305，对动态图像传感进行AF处理。在该AF处理中，图像处理电路20对从图像传感元件14获得的信号执行预定的测距运算，并将所获得的运算结果存储在存储器30中。基于该运算结果，系统控制电路50使用变焦控制单元44执行AF处理，并对镜头10进行聚焦。之后，流程进入步骤S306以执行与步骤S304中的过程相同的过程的AE处理。
在步骤S307，执行顺序图像传感操作的动态图像传感处理。存储器30通过A/D转换器16从图像传感元件14接收图像数据。然后对所读出的图像数据进行预定的显影和压缩处理例如JPEG，并将处理后的图像数据存储在存储器30中。将存储在存储器30中的压缩后的图像数据作为动态图像文件写入记录介质200中，并且流程进入步骤S308。在步骤S308，将在步骤S307中传感到的图像显示在图像显示单元28上作为直通图像，以完成动态图像传感开始处理。之后，执行动态图像传感和记录(步骤S403～S407)，直到模式拨盘60的设置发生改变，或者再次按下动态图像按钮61为止。
在如上所述开始动态图像传感后，如图4所示，在动态图像传感期间执行处理。
在步骤S401，判断是否改变了模式拨盘60的模式。如果改变了模式拨盘60的模式，则动态图像传感处理结束，流程返回到步骤S203。如果没有改变模式拨盘60的模式，则流程进入步骤S402。在步骤S402，判断是否已经按下了动态图像按钮61。如果在动态图像传感期间检测到按下了动态图像按钮61，则动态图像传感处理结束。然后流程返回到步骤S203。在步骤S402，当没有按下动态图像按钮时，流程进入步骤S403，继续动态图像传感处理。
在步骤S403，进行动态图像读出处理。在该动态图像读出处理中，通过进行相加/读取从图像传感元件14读出图像传感信号。将从图像传感元件14读出的图像传感信号通过A/D转换器16转换成数字信号，并将其保存在存储器30中(曝光处理)。即，存储器30保存未经过信号处理的未处理的图像数据。在步骤S404，如在步骤S304或S306中一样，进行AE处理。即，图像处理电路20对从图像传感元件14获得的信号进行预定的测光运算，并将该运算结果存储在存储器30中。基于该运算结果，系统控制电路50使用曝光控制单元40进行AE处理。注意，可以如在步骤S305中一样，进行AF处理。
在步骤S405，根据来自系统控制电路50的指令，图像处理电路20读出在步骤S403存储在存储器30中的图像数据，并获得颜色校正的控制值，即基于该图像数据的白平衡控制值(WB控制值)。将所获得的WB控制值作为动态图像WB控制值存储在存储器30中。在步骤S406，在步骤S403存储在存储器30中的图像数据进行基于在步骤S405获得的并被存储在存储器30中的WB控制值的颜色校正(白平衡处理)等所谓的显影处理。在步骤S407，通过使用在步骤S406中显影的图像，在图像显示单元28上进行直通图像显示。在步骤S408，即使在动态图像传感后，为了重放通过动态图像传感获得的图像，对保存在存储器30中的图像数据进行JPEG等预定的压缩处理。将处理后的图像数据保存在存储器30中(记录处理)。然后将保存在存储器30中的压缩后的图像数据作为动态图像文件写入记录介质200中。然后流程进入步骤S409。
在检测到记录静态图像的快门按钮被按下一半的状态(快门开关(SW1)62的信号的打开状态)之前，重复步骤S401～S408中的动态图像传感处理。在步骤S409，一旦检测到快门开关(SW1)62的信号的打开状态，则流程进入步骤S410以在动态图像传感期间开始静态图像传感。
在步骤S410，在动态图像传感期间进行静态图像传感。以下将参考图5的流程图对在步骤S410的动态图像传感期间的静态图像传感处理进行详细说明。在步骤S411，显示步骤S410中的静态图像传感的查看(review)图像。即，在图像显示单元28上显示通过静态图像传感记录的图像(图像的缩略图图像)。在步骤S411将查看图像显示预定的时间段之后，流程进入步骤S412。在步骤S412，执行白平衡处理(动态图像返回WB处理)以返回到动态图像传感状态。将参考图6来详细说明该动态图像返回WB处理。
图5是示出在步骤S410的动态图像传感期间的静态图像传感处理的流程图。当快门按钮按下一半的状态被释放时，处理结束以返回到正常的动态图像传感状态。因此，在步骤S501，判断快门开关(SW1)62是否为打开。如果快门开关(SW1)62为关闭，则该处理结束以继续动态图像传感，且流程返回到步骤S401。另一方面，如果快门开关(SW1)62为打开，则流程进入步骤S502。
在步骤S502和S503，如在图3的步骤S305和S306中一样，进行AF和AE处理并锁定。然后，在步骤S504进行WB处理，在步骤S505进行直通图像显示(EVF显示)，在步骤S506进行动态图像记录处理。这些处理与图4的步骤S405～S408中的处理相同。即，直到打开快门开关(SW1)62和快门开关(SW2)64为止，对静态图像传感进行准备(锁定AF和AE)，并继续动态图像传感。另一方面，当按下快门开关(SW2)64时，流程从步骤S507进入步骤S508，以执行静态图像传感处理。
在步骤S508，进行一系列的静态图像传感操作。即，在静态图像传感的驱动模式(通过进行非相加(非相加/读取)从图像传感元件读取信号)下驱动图像传感元件14。将通过A/D转换器16从图像传感元件14读取的并且未经过信号处理的未处理图像数据(静态图像原始数据)保存在存储器30中。在步骤S509，图像处理电路20从存储器30中读出在步骤S508存储的静态图像原始数据。基于该数据计算WB控制值。该WB控制值被存储在存储器30中。
在步骤S510，对在步骤S508存储在存储器30中的静态图像原始数据进行缩略图形成处理，以获得用作在静态图像传感中省略的动态图像帧的代替帧的缩略图图像(代替帧的原始数据)。在步骤S511，通过使用在步骤S509中确定的静态图像WB控制值，对在步骤S508存储在存储器30中的静态图像原始数据进行包括颜色校正(白平衡)的显影处理。之后，对在该显影处理中获得的图像数据进行JPEG等预定的压缩处理。将所获得的压缩后的图像数据作为静态图像文件保存在存储器30中。在步骤S512，使用在步骤S509中确定的白平衡控制值，对在步骤S510中获得的缩略图图像进行包括颜色校正(白平衡)的显影处理。通过JPEG等压缩在该显影处理中获得的图像数据，并将其作为省略帧的代替帧添加到在步骤S407中生成的动态图像文件中。然后，动态图像传感期间的静态图像传感结束。
在上述处理中，通过使用静态图像原始数据生成缩略图图像。然而，可以通过使用显影后的静态图像数据生成缩略图图像。
图6是示出在图4的步骤S412中的返回到动态图像传感状态的白平衡处理的流程图。
在步骤S601，从存储器30中读出在步骤S506从静态图像原始数据中获得的白平衡控制值，并将所读出的值作为静态图像白平衡控制值存储在存储器30中。在步骤S602，将在步骤S601存储在存储器30中的静态图像白平衡控制值转换成动态图像白平衡控制值。将所获得的动态图像白平衡控制值存储在存储器30中。将参考图8对该转换方法进行说明。在步骤S603，将在步骤S602计算出的动态图像白平衡控制值预先设置给图像处理电路20，并结束返回到动态图像传感状态的白平衡处理。
图7是示出在动态图像传感期间的静态图像传感中的时间方向上的序列的时序图。当在继续动态图像传感的同时打开快门开关(SW2)64时，传感静态图像，并使用该静态图像的缩略图图像(步骤S512)作为动态图像的代替帧。根据静态图像传感期，使用多个代替帧。在完成动态图像传感期间的静态图像传感后，重新开始动态图像传感。注意，可以省略与在输入SW2信号之后立即插入的一帧相对应的黑色图像。
图8是示出动态图像白平衡控制值与静态图像白平衡控制值之间的相互转换的例子的图。事先测量图像传感元件中的每一驱动模式(静态图像传感或动态图像传感的驱动模式)的光谱灵敏度(对R、G和B中的每一个)，以获得在X-Y色度图(chromaticitydiagram)中的Cx-Cy坐标系上的这些操作的光谱灵敏度之间的差异。在图8中，每个DIFF_CX和DIFF_CY都表示这些驱动模式的光谱灵敏度之间的差异。当通过坐标(MovCx，MovCy)来表示动态图像白平衡控制值时，在根据图像传感元件的驱动模式通过DIFF_CX和DIFF_CY进行校正时，可以获得通过坐标(StillCx，StillCy)表示的静态图像白平衡控制值。
在这种情况下，在X-Y色度图中校正光谱灵敏度。然而，可以使用其它校正方法。例如，可以通过将每一R、G和B的颜色增益(color gain)乘以预定的系数，来校正光谱灵敏度。在这种情况下，说明了动态图像白平衡控制值和静态图像白平衡控制值的转换方法。然而，甚至当在没有动态图像传感和静态图像传感的情况下转换为用于电子取景器显示的WB控制值(EVF WB控制值)时，也可以通过相同的方法来转换白平衡控制值。在第二实施例中将对这点进行说明。
图9是示出在动态图像传感期间WB随着对象光源的改变而改变的情况的图。点线所示的图是在动态图像传感期间随着光源的改变而改变的WB的轨迹。在图9中当光源1的最佳色温(colortemperature)为C1时，点线所示的图表示在时间T1将光源从光源1改变为光源2时在时间方向上的色温的变化。
当在时间T1检测到从光源1到光源2的改变时，完全跟随到光源2的改变花费时间Tmove。当WB控制值立即改变以跟随从光源1到光源2的改变时，图像颜色也立即发生改变，并变得不自然。另外，随着光源1与光源2之间的频繁改变产生图像闪烁，从而出现问题。为了克服该问题，WB控制值随着时间Tmove逐渐改变。当完全跟随到光源2的改变时，色温变成C3。如上所述，从检测到光源的改变时开始完全跟随光源的改变花费时间Tmove。
由于在动态图像传感中进行这样的控制，因此在对于光源改变的随后操作期间，在图9中的时间T2处可以传感到静态图像。在这种情况下，在对于光源改变的随后操作期间，色温为C2。注意，由于在快门按钮被按下一半的状态下，即在快门开关(SW1)62为打开而快门开关(SW2)64为关闭的状态下，继续动态图像传感，因此连续跟随光源的改变。
图9中实线所示的图表示WB通过在图4的步骤S412和图6中所述的方法随着光源的改变而改变的状态。同样地，在时间T1检测到该改变之后，WB开始随着对象光源的改变而改变。然而，在这种情况下，当在时间T2进行静态图像传感时，与在图5的步骤S509中一样，WB可以通过使用静态图像原始数据的WB处理随着对象光源的改变而改变。随后，通过执行图6中的处理(动态图像返回WB处理)，甚至在时间T3返回到动态图像传感状态后，也可以维持与对象光源的改变相对应的色温C3。即，随后，使用与基于静态图像原始数据的WB控制值相对应的动态图像WB控制值，重新开始动态图像传感，并且使用该WB控制值，直到检测到光源的改变为止。
与此相比，在一般的图像传感装置中，不是基于静态图像数据生成动态图像传感WB控制值。因此，使用紧接在静态图像传感之前的WB控制值(图9中的时间T2处的WB控制值)作为与返回到动态图像传感状态时的动态图像传感的驱动模式相对应的WB控制值。结果，来自静态图像的动态图像代替帧的颜色外观与当返回到动态图像传感状态时获得的颜色外观不同，且动态图像变得不自然。在第一实施例中，可以获得与静态图像传感WB控制值相对应的动态图像传感WB控制值，因而防止了这种不自然的效果。
根据第一实施例，在基于通过静态图像传感所传感到的静态图像的查看显示之后，状态返回到动态图像传感状态。因此，在动态图像传感期间的静态图像传感之后的动态图像传感中的颜色外观比在静态图像传感的快门按钮被按下一半的操作开始时(当快门开关(SW1)62为打开时)所获得的的颜色外观，更相似于查看显示图像的颜色外观。
上述在步骤S412中的动态图像返回WB处理是在步骤S410的静态图像传感处理中没有电子闪光传感的处理。为了在步骤S410中进行电子闪光传感，按如下来执行步骤S412中的动态图像返回WB处理。
获得紧接在静态图像传感之前的WB控制值(在图9中的时间T2处的WB控制值)(S601)作为与当返回到动态图像传感状态时的动态图像传感的驱动模式相对应的WB控制值。将所获得的WB控制值设置给图像处理电路(S603)，而无需步骤S602的处理。即，在动态图像传感期间的静态图像传感之后的动态图像传感的颜色外观比查看显示图像的颜色外观，更相似于在静态图像传感的快门按钮被按下一半的操作开始时(当快门开关(SW1)62为打开时)所获得的颜色外观。
在电子闪光传感中的色温与其它状态下的色温大大不同。因此，当忽略电子闪光传感而将所获得的WB控制值应用于静态图像传感之后的动态图像传感时，颜色外观变得不自然。
第二实施例
在第一实施例中，在动态图像传感期间的静态图像传感中，动态图像传感WB控制值来自在静态图像传感中计算出的WB控制值，并且在随后的动态图像传感中使用该取得的WB控制值。在第二实施例中，将参考图10～12对以下情况进行说明：为了在静态图像传感之前在电子取景器上显示动态图像以确认将被传感的对象，将本发明应用于在静态图像传感中的电子取景器(EVF)上的图像显示的WB控制值设置处理。
图10是用于说明在图像传感模式下不进行动态图像传感时的静态图像传感的处理的流程图。
在步骤S1001，检查模式拨盘60的状态。如果模式拨盘60的状态已经从图像传感模式发生了改变，则流程返回到图2中的步骤S201。如果维持图像传感模式，则流程从步骤S1001进入步骤S1002以判断快门按钮是否处于被按下一半的状态，即快门开关(SW1)62是否为打开。如果快门开关(SW1)62为关闭，则流程进入步骤S1003以进行WB处理，然后进入步骤S1004以进行直通图像显示。即，计算EVF WB控制值，并使用所计算出的WB控制值在图像显示单元28上进行直通图像显示(EVF显示)。在步骤S1005，图像处理电路20对从图像传感元件14获得的信号执行预定的测光运算，并将运算结果存储在存储器30中。基于该运算结果，系统控制电路50通过使用曝光控制单元40，对直通图像传感执行AE处理。之后，流程返回到步骤S1001。
当快门开关(SW1)62被打开时，流程从步骤S1002进入步骤S1006以进行静态图像传感处理。图12是示出在步骤S1006中的静态图像传感处理的流程图。当快门开关(SW1)62被关闭时，该处理结束以返回到静态图像传感待机状态。因此，在步骤S1201，判断快门开关(SW1)62是否为打开。如果快门开关(SW1)62为关闭，则流程返回到步骤S1001以返回到静态图像传感待机状态。另一方面，如果快门开关(SW1)62为打开(当维持快门按钮的被按下一半的状态时)，则流程进入步骤S1202。
在步骤S1202进行静态图像传感AF处理，在步骤S1203进行静态图像传感AE处理。然后锁定这些处理。即，图像处理电路20对从图像传感元件14获得的信号执行预定的测距运算，并将运算结果存储在存储器30中。基于测距运算结果，系统控制电路50通过使用变焦控制单元44进行AF处理，将镜头10聚焦在对象上，并维持AF状态。在AE处理中，图像处理电路20对从图像传感元件14获得的信号执行测光运算，并将测光运算的运算结果存储在存储器30中。基于该测光运算的运算结果，系统控制电路50通过使用曝光控制单元40调整并固定曝光(快门12的光圈)。
在步骤S1204，基于为EVF显示通过驱动图像传感元件14所获得的图像数据，计算EVF显示WB控制值。当快门开关(SW1)62被打开时，仅计算一次该WB控制值，并且还锁定该WB控制值。因此，在快门按钮被按下一半的状态下，使用当快门开关(SW1)62被打开时获得的WB控制值进行WB处理。在步骤S1205，执行直通图像显示(EVF显示)。
当完全按下快门按钮时，快门开关(SW2)64被打开。当快门开关(SW2)64被打开时，流程从步骤S1206进入步骤S1207以执行静态图像传感处理。在步骤S1207，对静态图像传感执行曝光处理。在该曝光处理中，将通过A/D转换器16从图像传感元件14读出的并且未经过信号处理的未处理的图像数据(静态图像原始数据)存储在存储器30中。在步骤1208，图像处理电路20读出在步骤S1207中存储的静态图像原始数据，并基于所读出的数据计算WB控制值。然后将该WB控制值存储在存储器30中。
在步骤S1209，对在步骤S1207存储在存储器30中的静态图像原始数据，进行使用在步骤S1208中计算出的静态图像WB控制值的包括颜色校正(白平衡)的显影处理。之后，对在该显影处理中获得的图像数据进行JPEG等预定的压缩处理，并将所获得的压缩后的图像数据作为静态图像文件保存在存储器30中。
如上所述，在完成静态图像传感处理(步骤S1006)后，流程进入步骤S1007。在预定的时间期间进行在步骤S1006所传感到的静态图像的查看显示，并且流程进入步骤S1008。在步骤S1008，执行白平衡处理以恢复EVF状态。将在图11的流程图中对EVF返回WB处理(S1008)进行详细说明。
在步骤S1101，从存储器30中读出步骤S1208中的基于静态图像原始数据的白平衡控制值，并将所读出的值作为静态图像白平衡控制值存储在存储器30中。随后，在步骤S1102，将在步骤S1101存储在存储器30中的静态图像白平衡控制值转换成EVF白平衡控制值。然后将转换后的值作为EVF白平衡控制值存储在存储器30中。在图8中已对转换方法进行了说明。在步骤S1103，将在步骤S1102中计算出的EVF白平衡控制值设置给图像处理电路20，并结束EVF返回白平衡处理。
图13是示出在静态图像传感之前和之后WB随着对象光源改变而改变的情况的图。与在图9中相同，当将静态图像传感白平衡控制值转换成EVF WB控制值时，甚至在从查看图像显示返回到EVF状态后，仍可以维持色温C3。还控制EVF WB控制值以在检测到光源的改变后花费时间Tmove，随着光源的改变而完全改变WB。图13中所示的处理与图9中所示的处理的不同之处在于：当在时间T2处快门开关(SW1)62被打开时，将白平衡控制值固定为时间T2处的值(S1204)，并且在时间T3处的静态图像传感完全跟随对象光源的改变。
与此相比，一般的图像传感装置不是基于静态图像数据生成EVF显示WB控制值。因此，使用紧接在静态图像传感之前的WB控制值(在图13中的时间T2处的WB控制值)作为当从查看显示状态返回到EVF显示状态时的EVF显示WB控制值。因此，静态图像传感后的查看显示的颜色外观与当返回到EVF显示状态时所获得的颜色外观不同，并且显示变得不自然。在第二实施例中，可以获得与静态图像传感WB控制值相对应的EVF WB控制值，因而防止了这种不自然的效果。
在第二实施例中，在基于通过静态图像传感拍摄的静态图像的查看显示之后，状态返回到待机状态(EVF显示状态)。因此，静态图像传感后的EVF显示中的颜色外观比在静态图像传感的快门按钮被按下一半的操作开始时(当快门开关(SW1)62为打开时)所获得的颜色外观，更相似于查看显示图像的颜色外观。
上述步骤S1008中的动态图像返回WB处理是在步骤S1006的静态图像传感处理中没有电子闪光传感的处理。为了在步骤S1006中进行电子闪光传感，在步骤S1008的动态图像返回WB处理中进行以下处理。
获得紧接在静态图像传感之前的WB控制值(在图9中的时间T2处的WB控制值)作为与当返回到动态图像传感状态时的动态图像传感的驱动模式相对应的WB控制值(S1101)。之后，不进行步骤S1102的处理，而将所获得的WB控制值设置给图像处理电路(S1103)。即，在动态图像传感期间的静态图像传感后的动态图像传感中的颜色外观比查看显示图像的颜色外观，更相似于在静态图像传感的快门按钮被按下一半的操作开始时(当快门开关(SW1)62为打开时)所获得的颜色外观。
电子闪光传感中的色温与其它状态下的色温大大不同。因此，当忽略电子闪光传感而将所获得的WB控制值应用于静态图像传感后的动态图像传感时，颜色外观变得不自然。
根据这些实施例，在系统控制电路50的控制下，根据来自定时发生电路的信号，通过切换图像传感元件14的基板电压，来切换在静态图像传感中从图像传感元件14的读出处理和在动态图像传感中的EVF显示的读出处理的驱动模式。
如上所述，根据这些实施例，当在静态图像传感后返回到静态图像传感待机状态(在动态图像传感或静态图像传感前的EVF显示)时，使用在静态图像传感中通过信号处理所获得的WB控制值。即，将静态图像传感WB控制值转换成与静态图像传感待机状态下的图像传感元件的驱动模式相对应的WB控制值，并设置该转换后的WB控制值。因此，可以维持静态图像传感查看图像与静态图像传感待机状态下的图像之间的颜色连续性，并且可以从当WB随着对象光源的改变而改变时，开始静态图像传感待机状态。例如，在第一实施例中，在动态图像传感模式下的静态图像传感中，当使用静态图像的缩略图图像作为通过静态图像传感所省略的动态图像的代替帧时，不会丧失代替帧图像与在完成静态图像传感后重新开始动态图像传感中所传感到的图像之间的颜色连续性。另外，在校正对象光源颜色的同时，可以重新开始动态图像传感。在第二实施例中，在静态图像传感模式下，不会丧失静态图像传感查看图像与当返回到电子取景器状态时所获得的图像之间的颜色连续性。另外，在校正对象光源颜色的同时，可以将状态返回到EVF状态。
根据这些实施例，根据静态图像传感和动态图像传感(第一实施例中的动态图像传感，或第二实施例中的静态图像传感之前的EVF显示)来切换基板电压。然而，本发明不局限于此。在静态图像传感和动态图像传感中可以使用相同的基板电压。在这种情况下，没有将基于在静态图像传感中所获得的图像的白平衡控制值转换成与图像传感元件的光谱灵敏度特性相对应的白平衡控制值。可以使用未转换的白平衡控制值，来校正通过静态图像传感后的动态图像传感所获得的图像。
根据这些实施例，在静态图像传感后的动态图像传感中，通过使用基于在静态图像传感中所获得的图像的白平衡控制值，来获得图像。然而，本发明不局限于此。即，通过静态图像传感后的动态图像传感所获得的图像(例如，图7中的第四动态图像帧)的颜色外观可以被控制成比在SW1与SW2之间所获得的图像(例如，图7中的第三动态图像帧)的颜色外观更相似于通过静态图像传感所获得的图像(例如，图7中的静态图像或缩略图静态图像)的颜色外观。
更具体地，基于在SW1与SW2之间获得的图像(例如，图7中的第三动态图像帧)来计算以与静态图像传感中相同的方法随着光源的改变而立即改变的白平衡控制值(注意，与在第一实施例中一样，第三动态图像帧已经过了白平衡控制)。根据所计算出的白平衡控制值，可以校正通过静态图像传感后的动态图像传感所获得的图像(例如，图7中的第四动态图像帧)。根据这些实施例，在动态图像传感和静态图像传感中进行这些操作。然而，本发明不局限于此。
例如，无论动态图像传感和静态图像传感，施加到动态图像传感元件上的基板电压可以用作第一基板电压以驱动动态图像传感元件(该图像传感元件具有第一光谱灵敏度特性)，或者用作第二基板电压以驱动图像传感元件(该图像传感元件具有第二光谱灵敏度特性)。
本发明的其它实施例
注意，本发明可适用于由多个设备构成的系统，或由单个设备组成的装置。
为了操作各种设备来实现上述实施例的功能，不用说，本发明可适用于这样的情况：甚至通过将用于实现上述发明的功能的软件程序代码，从存储介质或通过因特网等发送介质，提供给与该各种设备连接的该系统或装置的计算机，并使得该各种设备根据存储在该系统或装置的计算机(CPU或MPU)中的程序来操作，这种情况也可以包含在本发明中。
在这种情况下，软件的程序代码本身实现了上述实施例的功能，并且将程序代码本身和其程序代码提供给计算机的单元，例如存储该程序代码的存储介质，构成了本发明。作为用于存储该程序代码的存储介质，可以使用例如：软盘、硬盘、光盘、磁光盘、CD-ROM、磁带、非易失性存储卡、ROM等。
当然，不仅可以通过计算机执行该程序代码，而且还可以通过与运行在计算机上的OS(操作系统)或其它应用程序合作，来实现上述实施例的功能。
而且，上述实施例的功能可以这样来实现：在将所提供的程序代码存储在计算机的功能扩展板或单元、或与计算机连接的功能扩展单元的存储器中之后，基于该程序代码的指令，通过配置在该功能扩展板或功能扩展单元中的CPU等来执行某些或全部实际处理操作。
由于在不脱离本发明的精神和范围的情况下，可以做出很多明显不同的本发明的实施例，因此应该理解，除由所附权利要求书限定外，本发明不局限于特定的实施例。

Claims (14)

1.一种图像传感装置，其包括：
静态图像传感单元，其在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；
显示单元，其显示图像信号；
第一控制单元，其进行控制，以基于通过静态图像传感获得的第一图像信号来获得白平衡控制值，基于该白平衡控制值校正该第一图像信号，并将校正后的第一图像信号显示在所述显示单元上；以及
第二控制单元，其进行控制，以基于根据该第一图像信号获得的该白平衡控制值，校正在静态图像传感后的该第一操作中获得的第二图像信号，并在将该第一图像信号显示在所述显示单元上之后，将校正后的第二图像信号显示在所述显示单元上。
2.根据权利要求1所述的图像传感装置，其特征在于，该第一操作包括设置动态图像的操作，以允许在动态图像传感之后进行重放。
3.根据权利要求1所述的图像传感装置，其特征在于，还包括第三控制单元，该第三控制单元进行控制，以使用通过静态图像传感获得的该第一图像信号作为动态图像的一部分，
其中，根据基于通过静态图像传感获得的该第一图像信号的该白平衡控制值，校正被用作动态图像的一部分的该第一图像信号。
4.根据权利要求1所述的图像传感装置，其特征在于，该第一操作包括为了在静态图像传感之前确认对其进行静态图像传感的对象，在所述显示单元上显示动态图像的操作。
5.根据权利要求1所述的图像传感装置，其特征在于，还包括切换单元，该切换单元在该第一操作和该第二操作之间，切换用以获得该第一图像信号和该第二图像信号的图像传感元件的光谱灵敏度特性，
其中，所述第二控制单元进行控制，以将基于该第一图像信号获得的该白平衡控制值转换成与该第一操作中的图像传感元件的光谱灵敏度特性相对应的白平衡控制值，并使用转换后的白平衡控制值校正该第二图像信号。
6.一种图像传感装置，其包括：
静态图像传感单元，其在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；
显示单元，其显示图像信号；以及
控制单元，其进行控制，以对在紧接在该第二操作之前的该第一操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在所述显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在所述显示单元上，对在静态图像传感之后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在所述显示单元上，
其中，所述控制单元控制待显示在所述显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在所述显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在所述显示单元上的校正后的第二图像信号的颜色外观。
7.一种图像传感装置，包括：
调整单元，其在进行动态图像传感的第一操作中，进行为静态图像传感执行聚焦调整操作和曝光调整操作中的至少一个的第二操作；
静态图像传感单元，其在该第二操作中进行执行静态图像传感的第三操作；
显示单元，其显示图像信号；以及
控制单元，其进行控制，以对在该第二操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在所述显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在所述显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在所述显示单元上，
其中，所述控制单元控制待显示在所述显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在所述显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在所述显示单元上的校正后的第二图像信号的颜色外观。
8.根据权利要求6所述的图像传感装置，其特征在于，所述控制单元控制待显示在所述显示单元上的校正后的第三图像信号的颜色外观，使之与待显示在所述显示单元上的校正后的第二图像信号的颜色外观相同。
9.根据权利要求7所述的图像传感装置，其特征在于，该第一操作包括设置动态图像的操作，以允许在动态图像传感之后进行重放。
10.根据权利要求7所述的图像传感装置，其特征在于，还包括第二控制单元，该第二控制单元进行控制，以使用通过静态图像传感获得的该第二图像信号作为动态图像的一部分。
11.根据权利要求7所述的图像传感装置，其特征在于，该第一操作包括为了在静态图像传感之前确认对其进行静态图像传感的对象，在所述显示单元上显示动态图像的操作。
12.一种图像传感控制方法，其包括：
静态图像传感步骤，用于在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；
显示步骤，用于显示图像信号；
第一控制步骤，用于进行控制，以基于通过静态图像传感获得的第一图像信号获得白平衡控制值，基于该白平衡控制值校正该第一图像信号，并将校正后的第一图像信号显示在显示单元上；以及
第二控制步骤，用于进行控制，以基于根据该第一图像信号获得的该白平衡控制值，校正在静态图像传感后的该第一操作中获得的第二图像信号，并在将该第一图像信号显示在该显示单元上之后，将校正后的第二图像信号显示在该显示单元上。
13.一种图像传感控制方法，其包括：
静态图像传感步骤，用于在进行动态图像传感的第一操作中，进行执行静态图像传感的第二操作；
显示步骤，用于显示图像信号；以及
控制步骤，用于进行控制，以对在紧接在该第二操作之前的该第一操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在该显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在该显示单元上，
其中，在该控制步骤中，控制待显示在该显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在该显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在该显示单元上的校正后的第二图像信号的颜色外观。
14.一种图像传感控制方法，其包括：
调整步骤，用于在进行动态图像传感的第一操作中，进行为静态图像传感执行聚焦调整操作和曝光调整操作中的至少一个的第二操作；
静态图像传感步骤，用于进行在该第二操作中执行静态图像传感的第三操作；
显示步骤，用于显示图像信号；以及
控制步骤，用于进行控制，以对在该第二操作中获得的第一图像信号进行白平衡校正，将校正后的第一图像信号显示在显示单元上，对通过静态图像传感获得的第二图像信号进行白平衡校正，将校正后的第二图像信号显示在该显示单元上，对在静态图像传感后的该第一操作中获得的第三图像信号进行白平衡校正，并将校正后的第三图像信号显示在该显示单元上，
其中，在该控制步骤中，控制待显示在该显示单元上的校正后的第三图像信号的颜色外观，使其比待显示在该显示单元上的校正后的第一图像信号的颜色外观，更相似于待显示在该显示单元上的校正后的第二图像信号的颜色外观。
CN200610076291A 2005-04-21 2006-04-21 图像传感装置和图像传感控制方法 Expired - Fee Related CN100589585C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005123989A JP4137085B2 (ja) 2005-04-21 2005-04-21 撮像装置
JP2005123989 2005-04-21

Publications (2)

Publication Number Publication Date
CN1856118A true CN1856118A (zh) 2006-11-01
CN100589585C CN100589585C (zh) 2010-02-10

Family

ID=36643363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200610076291A Expired - Fee Related CN100589585C (zh) 2005-04-21 2006-04-21 图像传感装置和图像传感控制方法

Country Status (5)

Country Link
US (1) US7633530B2 (zh)
EP (1) EP1715671A1 (zh)
JP (1) JP4137085B2 (zh)
KR (1) KR100812312B1 (zh)
CN (1) CN100589585C (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102238394A (zh) * 2010-04-28 2011-11-09 佳能株式会社 图像处理设备及其控制方法和摄像设备
CN102456313A (zh) * 2010-10-19 2012-05-16 奇美电子股份有限公司 过驱动装置与过驱动值产生方法
CN101911710B (zh) * 2007-11-29 2013-09-04 数据色彩控股股份公司 用于校准与显示器耦合的颜色测量装置的方法和设备
CN110460767A (zh) * 2018-05-07 2019-11-15 夏普株式会社 电子设备、记录介质、控制装置、以及控制方法

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4035543B2 (ja) * 2005-04-04 2008-01-23 キヤノン株式会社 撮像装置
JP2008047957A (ja) * 2006-08-10 2008-02-28 Pentax Corp カメラ
JP4483841B2 (ja) * 2006-09-06 2010-06-16 カシオ計算機株式会社 撮像装置
WO2008132540A1 (en) * 2007-04-26 2008-11-06 Nokia Corporation Method and mobile terminal with user input based on movement of the terminal detected by a sensor
JP4924228B2 (ja) 2007-06-19 2012-04-25 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
US20090066808A1 (en) * 2007-09-11 2009-03-12 Sanyo Electric Co., Ltd. Image-data processing apparatus and data-processing circuit
JP4656168B2 (ja) * 2008-03-05 2011-03-23 カシオ計算機株式会社 画像合成装置
JP5366584B2 (ja) * 2009-02-16 2013-12-11 キヤノン株式会社 撮像装置、画像処理方法およびプログラム
JP5371489B2 (ja) * 2009-03-05 2013-12-18 キヤノン株式会社 画像管理装置およびその制御方法、ならびに、プログラムおよび記憶媒体
US20100231735A1 (en) * 2009-03-13 2010-09-16 Nokia Corporation Methods, Apparatuses, and Computer Program Products for Facilitating Concurrent Video Recording and Still Image Capture
US8547450B2 (en) * 2010-02-22 2013-10-01 Texas Instruments Incorporated Methods and systems for automatic white balance
US9369685B2 (en) * 2010-02-26 2016-06-14 Blackberry Limited Mobile electronic device having camera with improved auto white balance
JP5693022B2 (ja) * 2010-03-04 2015-04-01 キヤノン株式会社 表示制御装置および表示制御システム、並びにそれらの制御方法、プログラム、記憶媒体
JP5848507B2 (ja) * 2011-03-08 2016-01-27 キヤノン株式会社 追尾機能付き撮影装置及び方法
US10230888B2 (en) 2015-07-31 2019-03-12 Qualcomm Incorporated Sensor-based camera initialization
JP6672006B2 (ja) * 2016-02-18 2020-03-25 オリンパス株式会社 撮像装置
WO2017183488A1 (ja) * 2016-04-19 2017-10-26 オリンパス株式会社 画像処理装置
JP6776039B2 (ja) * 2016-07-22 2020-10-28 キヤノン株式会社 光学機器
US11851217B1 (en) 2019-01-23 2023-12-26 Ball Aerospace & Technologies Corp. Star tracker using vector-based deep learning for enhanced performance
US11828598B1 (en) * 2019-08-28 2023-11-28 Ball Aerospace & Technologies Corp. Systems and methods for the efficient detection and tracking of objects from a moving platform

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5170069A (en) * 1986-05-21 1992-12-08 Canon Kabushiki Kaisha Image pickup apparatus
US4899212A (en) * 1987-08-28 1990-02-06 Fuji Photo Film Co., Ltd. White balance adjusting device for a camera
JPH0617942B2 (ja) * 1989-02-15 1994-03-09 株式会社東芝 電子内視鏡装置
US5260774A (en) * 1989-04-20 1993-11-09 Canon Kabushiki Kaisha White balance control for still image sensing apparatus
US5703638A (en) * 1991-09-25 1997-12-30 Canon Kabushiki Kaisha Image pickup apparatus for moving image photographing or for still image photographing
JP3294298B2 (ja) 1991-11-08 2002-06-24 キヤノン株式会社 撮影装置
JP3271196B2 (ja) 1992-06-12 2002-04-02 ソニー株式会社 ビデオカメラ
US6727949B1 (en) * 1993-09-29 2004-04-27 Canon Kabushiki Kaisha Image pickup apparatus with moving image and still image focus control based on changing threshold value
JPH11113008A (ja) * 1997-10-08 1999-04-23 Olympus Optical Co Ltd 電子的撮像装置
JP4532613B2 (ja) * 1998-11-25 2010-08-25 キヤノン株式会社 撮像方法及び装置並びに記憶媒体
JP2001036787A (ja) 1999-07-22 2001-02-09 Olympus Optical Co Ltd 電子カメラ
JP2001223921A (ja) * 1999-11-30 2001-08-17 Canon Inc 画像処理装置及び方法、並びに記憶媒体
JP2001197516A (ja) 2000-01-14 2001-07-19 Hitachi Ltd 撮像装置
JP3750462B2 (ja) * 2000-02-22 2006-03-01 コニカミノルタフォトイメージング株式会社 デジタルカメラおよび記録媒体
JP2003008948A (ja) * 2001-06-22 2003-01-10 Fuji Photo Film Co Ltd 電子カメラ及びその画像表示方法並びに画像記録方法
JP4636743B2 (ja) 2001-08-09 2011-02-23 キヤノン株式会社 撮像装置およびホワイトバランス調整方法
JP2003061113A (ja) 2001-08-22 2003-02-28 Sony Corp 撮像装置及び撮像結果の処理方法
JP3973408B2 (ja) 2001-11-22 2007-09-12 富士フイルム株式会社 ディジタル・ムービ・カメラおよびその動作制御方法
US6961083B2 (en) * 2001-12-21 2005-11-01 Hewlett-Packard Development Company, L.P. Concurrent dual pipeline for acquisition, processing and transmission of digital video and high resolution digital still photographs
JP2003219341A (ja) 2002-01-25 2003-07-31 Fuji Photo Film Co Ltd ムービ・スチル・カメラおよびその動作制御方法
US7301572B2 (en) * 2002-03-08 2007-11-27 Canon Kabushiki Kaisha Pixel correction processing apparatus, image processing apparatus, pixel correction processing method, program, and storage medium
US20030191776A1 (en) * 2002-04-05 2003-10-09 Pere Obrador Media object management
JP2003348601A (ja) * 2002-05-27 2003-12-05 Fuji Photo Film Co Ltd オートホワイトバランス制御方法及び電子カメラ
JP2004040417A (ja) 2002-07-02 2004-02-05 Sony Corp 撮像装置およびホワイトバランス補正方法
JP2004158967A (ja) 2002-11-05 2004-06-03 Konica Minolta Holdings Inc 撮像装置付き携帯電話機
JP4187512B2 (ja) 2002-11-20 2008-11-26 富士フイルム株式会社 撮像装置
JP4110007B2 (ja) 2003-02-13 2008-07-02 富士フイルム株式会社 ディジタル・ムービ・ビデオ・カメラおよび動画再生装置
JP3999693B2 (ja) * 2003-03-28 2007-10-31 富士フイルム株式会社 固体撮像装置
JP4264808B2 (ja) 2003-03-28 2009-05-20 富士フイルム株式会社 動画像処理装置および方法
JP2004304642A (ja) * 2003-03-31 2004-10-28 Casio Comput Co Ltd 電子カメラ、及び画像再生装置
JP2004304425A (ja) * 2003-03-31 2004-10-28 Casio Comput Co Ltd 電子カメラ
JP4158029B2 (ja) 2003-04-25 2008-10-01 富士フイルム株式会社 ホワイトバランス調整方法および電子カメラ
US7304681B2 (en) * 2004-01-21 2007-12-04 Hewlett-Packard Development Company, L.P. Method and apparatus for continuous focus and exposure in a digital imaging device
JP2005244311A (ja) * 2004-02-24 2005-09-08 Canon Inc 撮像装置、撮像装置の制御方法、及び制御プログラム
JP4027364B2 (ja) 2004-12-02 2007-12-26 キヤノン株式会社 撮像方法及び装置並びに記憶媒体
JP4035543B2 (ja) * 2005-04-04 2008-01-23 キヤノン株式会社 撮像装置
JP4858747B2 (ja) * 2005-07-20 2012-01-18 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP5230483B2 (ja) * 2008-03-18 2013-07-10 キヤノン株式会社 撮像装置及びその制御方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101911710B (zh) * 2007-11-29 2013-09-04 数据色彩控股股份公司 用于校准与显示器耦合的颜色测量装置的方法和设备
CN102238394A (zh) * 2010-04-28 2011-11-09 佳能株式会社 图像处理设备及其控制方法和摄像设备
US8743239B2 (en) 2010-04-28 2014-06-03 Canon Kabushiki Kaisha Image processing apparatus, control method thereof, and image-capturing apparatus
CN102456313A (zh) * 2010-10-19 2012-05-16 奇美电子股份有限公司 过驱动装置与过驱动值产生方法
CN102456313B (zh) * 2010-10-19 2014-05-21 群创光电股份有限公司 过驱动装置与过驱动值产生方法
CN110460767A (zh) * 2018-05-07 2019-11-15 夏普株式会社 电子设备、记录介质、控制装置、以及控制方法

Also Published As

Publication number Publication date
JP2006304001A (ja) 2006-11-02
CN100589585C (zh) 2010-02-10
JP4137085B2 (ja) 2008-08-20
EP1715671A1 (en) 2006-10-25
US7633530B2 (en) 2009-12-15
US20060238623A1 (en) 2006-10-26
KR100812312B1 (ko) 2008-03-10
KR20060110836A (ko) 2006-10-25

Similar Documents

Publication Publication Date Title
CN1856118A (zh) 图像传感装置和图像传感控制方法
CN1848915B (zh) 摄像装置及其控制方法
CN1812496B (zh) 摄像装置及其控制方法
CN1755595A (zh) 操作具有触摸屏的数字拍摄装置的方法和数字拍摄装置
CN1738363A (zh) 图像处理装置和图像处理方法
CN1856023A (zh) 成像设备及其控制方法
JP4350616B2 (ja) 撮像装置及びその制御方法
US20100123815A1 (en) Scene information displaying method and apparatus and digital photographing apparatus using the scene information displaying method and apparatus
CN1303813C (zh) 数据记录装置及数据记录方法
JP2005244311A (ja) 撮像装置、撮像装置の制御方法、及び制御プログラム
CN102244792A (zh) 图像处理设备和图像处理方法
US20040075762A1 (en) Color balance adjustment of image sensed upon emitting flash light
US8045015B2 (en) Image pickup apparatus, white balance control method thereof, and storage medium
JP2007028070A (ja) 画像保存装置、画像保存方法及び制御プログラム
CN102238394A (zh) 图像处理设备及其控制方法和摄像设备
JP5911241B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2006295316A (ja) 撮像装置及び撮像方法及びプログラム及び記憶媒体
US7778429B2 (en) Audio processor, audio processing method, computer program, and computer readable storage medium
CN102215403A (zh) 图像处理设备及其控制方法和摄像设备
JP5828663B2 (ja) 画像処理装置及び画像処理装置の制御方法
JP2005333620A (ja) 画像処理装置及び画像処理方法
JP2006090735A (ja) 電子機器の制御方法
JP4667251B2 (ja) 撮像装置及びホワイトバランス制御方法
JP5111215B2 (ja) 撮像装置及びその制御方法、並びにプログラム及び記憶媒体
JP2010093392A (ja) 撮像装置、その制御方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100210

Termination date: 20180421