CN110431837A - 成像装置、图像处理方法和程序 - Google Patents

Abstract

提供了用于执行显示控制以避免在捕获要被记录的图像时显示单元的黑视的一种装置和方法。该装置包括成像元件、帧存储器、显示单元和控制单元。在检测到关于成像装置上的图像捕获操作的输入时，控制单元开始要被记录的图像的曝光准备处理，并在完成曝光准备处理之后，执行成像元件中的要被记录的图像的曝光处理和帧存储器中的要被记录的图像的存储处理。此外，控制单元在曝光准备处理开始时停止成像元件中要被显示的图像的曝光，并且在显示单元中显示要被显示的图像，直到能够显示要被记录的图像，以避免黑视。

Description

成像装置、图像处理方法和程序

技术领域

本公开涉及成像装置、图像处理方法和程序。更特别地，本公开涉及执行成像装置的显示单元的显示图像控制的成像装置、图像处理方法和程序。

背景技术

在通过使用相机(成像装置)执行图像捕获的情况下，许多用户(图像捕获人员)确认在相机的诸如LCD显示单元或电子取景器(EVF)之类的显示单元上显示的图像。

例如，用户(图像捕获人员)可以通过观察显示在显示单元上的图像来确定图像捕获定时，并按压释放按钮(快门按钮)。

此外，用户(图像捕获人员)可以在显示单元上显示捕获图像并确认捕获图像。

在未执行图像捕获的情况下，入射到成像装置的成像元件上的当前图像，换句话说，实时取景图像(LV图像)被显示在成像装置的显示单元上。实时取景图像(LV图像)也被称为直通图像，并且用户(图像捕获人员)可以通过确认在显示单元上显示的实时取景图像(LV图像)来确定图像捕获定时。

在用户(图像捕获人员)执行图像捕获处理的情况下，释放按钮(快门按钮)被按压。与该释放按钮操作处理一起，开始曝光准备处理，例如，成像元件的模式切换等。

但是，在许多成像装置中，由于曝光准备处理的开始，成像元件的实时取景图像(LV图像)的成像停止，因此，发生其中在显示单元上没有显示任何内容的时段。发生所谓的显示单元黑视(blackout)。注意的是，例如，在专利文献1(日本专利申请特许公开No.2015-186234)中描述了显示单元的黑视。

当发生黑视时，用户(图像捕获人员)无法确认显示图像。

此外，存在诸如用户的不适或者由于按压释放按钮产生的显示单元的黑视的影响而导致误认为已执行操作错误之类的问题的可能性。

引用列表

专利文件

专利文献1：日本专利申请特性公开No.2008-186234

发明内容

本发明要解决的问题

例如，鉴于上述问题产生本公开，并且本公开的目的是提供使得能够防止出现诸如用户的不适或由于按压释放按钮产生的显示单元的黑视而导致误认为已执行操作错误之类的问题的成像装置、图像处理方法和程序。

问题的解决方案

本公开的第一方面在于：

一种成像装置，包括：

成像元件；

帧存储器，存储由成像元件获取的用于显示的图像；

显示单元，显示由帧存储器存储的用于显示的图像；以及

控制单元，响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

此外，本公开的第二方面在于：

一种要在成像装置中执行的图像处理方法，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

图像处理方法包括：

由控制单元响应于图像捕获操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储单元中的用于显示的图像直到能够显示用于记录的图像。

此外，本公开的第三方面在于：

一种使成像装置执行图像处理的程序，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

程序使控制单元：

响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

注意的是，本公开的程序是例如可以由通信介质或以计算机可读形式提供的存储介质提供给可以执行各种程序代码的计算机系统或信息处理设备的程序。通过以计算机可读形式提供这样的程序，根据信息处理设备或计算机系统上的程序实现处理。

从基于本公开的实施例和稍后将描述的附图的详细描述，本公开的其它目的、特征和优点将变得显而易见。注意的是，在本说明书中，术语“系统”是指多个设备的逻辑组配置，并且不限于其中各个配置的设备在同一外壳中的系统。

发明效果

根据本公开的实施例的配置，实现了执行显示控制以避免在捕获用于记录的图像时显示单元的黑视的装置和方法。

具体而言，例如，该装置包括成像元件、帧存储器、显示单元和控制单元，并且控制单元响应于对成像装置上的图像捕获操作的输入检测，开始用于记录的图像的曝光准备处理，并且在完成曝光准备处理之后，执行成像元件中的用于记录的图像的曝光处理和帧存储器中的用于记录的图像的存储处理。此外，控制单元在曝光准备处理开始时停止曝光成像元件的用于显示的图像，并且在显示单元上显示用于显示的图像，直到能够显示用于记录的图像，以避免黑视。

利用这些处理，实现了执行显示控制以避免在捕获用于记录的图像时显示单元的黑视的装置和方法。

注意的是，本说明书中描述的有利效果仅仅是示例，并且本技术的有利效果不限于此并且可以包括附加效果。

附图说明

图1是图示成像装置中图像的捕获和显示处理中的数据处理序列的图。

图2是图示时序图的图，该时序图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)的情况下的处理序列。

图3是图示时序图的图，该时序图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)并且在显示期间执行图像捕获处理以及执行用于记录的图像(CAP图像)的记录处理的情况下的处理序列。

图4是图示成像装置的配置示例的图。

图5是图示根据第一实施例的处理序列的图。

图6是图示释放时间滞后取决于图像捕获操作的定时而变化的问题的图。

图7是图示根据第二实施例的处理序列的图。

图8是图示根据第三实施例的处理序列的图。

图9是图示根据第四实施例的处理序列的图。

图10是图示根据第五实施例的处理序列的图。

图11是图示由成像装置执行的处理序列的流程图。

图12是图示成像装置的配置示例的图。

具体实施方式

在下文中，参考附图，将描述本公开的成像装置、图像处理方法和程序的细节。注意的是，将根据以下项目进行描述。

1.成像装置中图像的捕获和显示处理的概述

2.本公开的成像装置的配置示例

3.其中防止显示单元的黑视的成像装置的实施例

3-1.(第一实施例)其中通过在完成用于显示的图像的曝光之后开始曝光准备处理来防止显示单元的黑视的实施例

3-2.(第二实施例)其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例

3-3.(第三实施例)其中通过取消未曝光图像的显示预约并执行显示单元的显示图像的连续显示来防止显示单元的黑视的实施例

3-4.(第四实施例)其中通过执行已经存储在帧存储器中的最新图像的帧间存储器复制，即使在存储器切换之后，也在显示单元上连续显示相同图像来防止显示单元的黑视的实施例

4.(第五实施例)其中确定用于记录的图像(CAP图像)的曝光时段是否大于或等于指定时间，并且取决于确定结果来执行显示控制的实施例。

5.由成像装置执行的处理序列

6.其它实施例

7.本公开的配置的总结

[1.成像装置中图像的捕获和显示处理概述]

首先，参考图1和随后的附图，将描述成像装置(相机)中图像的捕获和显示处理的概述。

图1图示了成像装置中的以下处理示例。

(1)未执行图像捕获处理时(在执行实时取景图像(LV)显示处理时)的数据处理示例

(2)在执行图像捕获处理时(在执行捕获图像(CAP)记录处理时)的数据处理示例

注意的是，实时取景图像(LV)是显示在成像装置的显示单元(例如，LCD、EVF等)上的图像，其可以由用户(图像捕获人员)确认。它也被称为直通(through)图像，并且是无论执行或未执行图像捕获处理都连续显示在显示单元上的图像。

另一方面，捕获图像(CAP)是由操作成像装置的释放按钮(快门按钮)的用户(图像捕获人员)捕获的图像。捕获图像(CAP)被记录在成像测量的记录单元(介质)中。

注意的是，一般而言，捕获图像(CAP)被获取并记录为具有反映成像元件的像素数量的高像素数的高分辨率图像，但是实时取景图像(LV)被获取并显示为根据可以在显示单元上显示的像素的数量具有低像素数的图像。

换句话说，实时取景图像(LV)是具有比捕获图像(CAP)的像素数少的像素的图像。

将描述图1中所示的(1)未执行图像捕获处理时(执行实时取景图像(LV)显示处理时)的数据处理示例。

通过光学透镜11入射的光入射在成像单元上，例如，入射在包括CMOS图像传感器等的成像元件12上，并且通过光电转换获得的图像数据被输出。注意的是，在这种情况下的输出图像是要在显示单元21上显示的用于显示的图像(LV图像)。

在下文中，要在显示单元上显示的图像被称为用于显示的图像或LV图像，而用于图像捕获记录的图像被称为用于记录的图像、捕获图像或CAP图像。

当输出要在显示单元上显示的用于显示的图像(LV图像)时，成像元件12输出具有部分变稀疏的低像素数的图像，而不输出成像元件的所有像素数据。

在执行图像捕获处理的情况下，需要生成具有高像素数的用于记录的图像，从而输出成像元件的几乎所有像素数据。

在图1所示的(1)未执行图像捕获处理时(在执行实时取景图像(LV)显示处理时)，成像元件12将具有低数量像素的输出图像(LV图像)输入到AD转换单元13。

AD转换单元13执行输入信号的A/D转换，换句话说，将模拟信号转换成数字信号的处理，并且将转换之后的数字值存储在帧存储器14中。

在图中所示的示例中，帧存储器14具有使得能够存储两个图像帧的配置。成像元件12的捕获图像交替地存储在第一帧存储器(FM1)和第二帧存储器(FM2)中。

换句话说，帧存储器14同时存储两个连续捕获图像帧。

存储在帧存储器14中的图像从前一存储帧顺序地输出到信号处理单元(信号处理LSI)15。

换句话说，图像根据图像捕获顺序从第一帧存储器(FM1)和第二帧存储器(FM2)交替地顺序输出到信号处理单元(信号处理LSI)15。

信号处理单元15执行一般相机中的信号处理，例如，白平衡(WB)调整、伽马校正等，以生成输出图像，换句话说，要在显示单元21上显示的图像(LV图像)，并将图像存储在存储器16中。

显示单元21显示存储在存储器16中的LV图像。

显示单元21包括例如LCD、EVF等，并且可以由图像捕获人员确认。

接下来，将描述图1所示的(2)执行图像捕获处理时(执行捕获图像(CAP)记录处理时)时的数据处理示例。

当图像捕获人员操作(按压)释放按钮(快门按钮)时，执行(2)的处理。

当图像捕获人员操作(按压)释放按钮(快门按钮)时，通过光学透镜11入射的光入射在成像单元上，例如，入射在包括CMOS图像传感器等的成像元件12上，并且曝光处理开始。

但是，在按压释放按钮(快门按钮)之后直到成像元件12中的曝光处理开始存在一定的时间间隔，换句话说，释放滞后(释放时间滞后)。

虽然取决于相机存在轻微差异，但是在许多相机中释放滞后约为15毫秒至30毫秒。

当成像元件12中的曝光处理结束时，成像元件12将通过光电转换获得的图像数据输出到AD转换单元13。注意的是，在这种情况下的输出图像是要被记录并保存在记录单元22中的用于记录的图像(CAP图像)。

用于记录的图像(CAP图像)是具有反映成像元件12的像素数量的高像素数的图像。CAP图像是具有比参考(1)描述的用于显示的图像(LV图像)的像素数量更多的像素的高像素数的图像。

在图1中，(1)中所示的LV图像的箭头被指示为细，(2)中所示的CAP图像的箭头被指示为粗，并且像素数量的高/低由箭头的粗细指示。

AD转换单元13执行输入信号的A/D转换，换句话说，将模拟信号转换成数字信号的处理，并将转换之后的数字值存储在帧存储器14中。

成像元件12的捕获图像交替地存储在第一帧存储器(FM1)和第二帧存储器(FM2)中。

存储在帧存储器14中的图像从前一存储帧顺序地输出到信号处理单元(信号处理LSI)15。

换句话说，图像根据图像捕获顺序从第一帧存储器(FM1)和第二帧存储器(FM2)交替地顺序输出到信号处理单元(信号处理LSI)15。

信号处理单元15执行一般相机中的信号处理，例如，白平衡(WB)调整、伽马校正等，以生成输出图像。

在这种情况下，信号处理单元15生成要存储在记录单元22中具有高像素数的用于记录的图像(CAP图像)，此外，还生成要显示在显示单元21上的用于显示的图像(LV图像)，并将LV图像存储在存储器16中。用于显示的图像(LV图像)是例如通过对作为高像素数的图像的用于记录的图像(CAP图像)的稀疏化处理生成的低像素数的图像。

记录单元22存储要存储在存储器16中的具有高像素数的用于记录的图像(CAP图像)。

另一方面，显示单元21显示存储在存储器16中的具有低像素数的用于显示的图像(LV图像)。

以上是在成像装置中执行和未执行图像捕获时的处理的概述。

接下来，将参考图2和随后的附图中所示的时序图描述这些处理的时间流程。

图2是图示在未执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的时段中的处理的时序图，换句话说，在用于显示的图像(LV图像)显示在成像装置的显示单元上的情况下的处理序列。

时间是从左到右。

图2分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

(a)成像元件输入同步信号是通过成像装置的控制单元的控制输入到成像元件12的同步信号。在这个示例中，每个16.7毫秒的同步信号被设置为输入到成像元件12。

成像元件12响应于同步信号的输入，更新要执行的处理，诸如开始各种类型的处理和处理切换。

(b)成像元件的曝光处理和到帧存储器的输出图示了成像元件12中的曝光处理和帧存储器14中的针对曝光结果的AD转换之后的图像的存储处理。

图中所示的LV1、LV2、LV3...各自指示要在显示单元21上显示的用于显示的图像(LV图像)的曝光处理。

这些图像中的每个图像的曝光处理针对每个16.7毫秒的每个同步信号执行。

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

这些图示了作为帧存储器14的两个存储器单元的第一帧存储器(FM1)和第二帧存储器(FM2)的存储图像的序列。

如上所述，成像元件12的捕获图像交替地存储在第一帧存储器(FM1)和第二帧存储器(FM2)中。

在图中所示的示例中，首先，用于显示的第一图像(LV1)存储在第一帧存储器(FM1)中，并且用于显示的下一个图像(LV2)存储在第二帧存储器(FM2)中。

此后，用于显示的图像(LV3、LV4、LV5...)交替地存储在第一帧存储器(FM1)和第二帧存储器(FM2)中。

(d)图像捕获操作(释放(快门)操作)图示了用户(图像捕获人员)的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

图2是在没有执行用户(图像捕获人员)的图像捕获操作的情况下的处理序列，因此未示出图像捕获操作定时。

注意的是，稍后将参考图3描述在执行图像捕获处理的情况下的处理。

(e)控制单元的处理图示了在成像装置的控制单元中执行的控制处理序列。注意的是，虽然在上述图1中未示出控制单元，但是成像装置包括控制单元，该控制单元根据存储在例如存储单元中的程序执行由成像装置执行的处理的控制。控制单元执行由图1中所示的每个部件执行的处理的控制。

图2的(e)控制单元的处理图示了由控制单元执行的各种类型的处理的一部分。图2主要图示了与要在显示单元上显示的图像的控制相关的处理序列。

该图图示了FM1、FM2、FM1、FM2...的矩形方框作为(e)控制单元的处理的序列。

FM1表示存储在第一帧存储器(FM1)中的最新图像的显示预约处理和在显示单元21上显示存储在第一帧存储器(FM1)中的最新图像的显示处理的控制。

FM2表示存储在第二帧存储器(FM2)中的最新图像的显示预约处理和在显示单元21上显示存储在第二帧存储器(FM2)中的最新图像的显示处理的控制。

控制单元交替地执行分别与帧存储器对应的对FM1、FM2、FM1、FM2...的多个处理，如(e)控制单元的处理的序列中所示。

换句话说，

交替地执行多个处理：

(1)第一帧存储器(FM1)的显示预约和第一帧存储器(FM1)的存储图像的显示处理，以及

(2)第二帧存储器(FM2)的显示预约和第二帧存储器(FM2)的存储图像的显示处理。

利用这种控制处理，帧存储器14的第一帧存储器(FM1)和第二帧存储器(FM2)的存储图像交替地显示在显示单元21上。

(f)显示单元输入同步信号是通过成像装置的控制单元的控制输入到显示单元21的同步信号。显示单元21响应于同步信号的输入而执行诸如显示图像的切换之类的处理。

(g)显示单元显示图像图示在显示单元21上显示的图像。

LV1、LV2...对应于显示图像的图像帧1和2，并且意味着以显示单元输入同步信号的信号间隔切换显示帧。换句话说，显示单元21通过实时取景图像(直通图像)显示移动图像。

接下来，参考图3，将描述在执行用户(图像捕获人员)的图像捕获处理的情况下的处理，换句话说，执行释放按钮(快门按钮)的按压处理，换句话说，在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理，并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

与图2类似，图3分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

如图3的(d)图像捕获操作(释放(快门)操作)的线上的中心附近所示，假定在步骤S01中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

当执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元开始曝光准备处理。

曝光准备处理是处理，例如，从控制单元到成像元件和信号处理单元的控制信号的输出处理、基于成像元件和信号处理单元中的控制信号的设置处理等。

曝光准备处理包括例如成像元件(图像传感器)12的模式切换处理。

当输出要在显示单元21上显示的用于显示的图像(LV图像)时，成像元件12输出具有部分变稀疏的低像素数的图像，而不输出成像元件的所有像素数据。

但是，在执行图像捕获处理的情况下，需要生成具有高像素数的用于记录的图像，从而输出成像元件的几乎所有像素数据。

曝光准备处理包括用于改变成像元件12的输出数据的模式切换处理等。

当开始用于改变输出数据的模式切换处理时，成像元件12必须停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

注意的是，虽然取决于相机存在轻微差异，但是在许多相机中曝光准备处理花费约15毫秒至30毫秒的时间。

如图3的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，当在步骤S01中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元在步骤S02中开始曝光准备处理。

此外，随着在步骤S02中开始曝光准备处理，控制单元请求成像元件12停止用于显示的图像(LV图像)的曝光处理，并且在步骤S03中开始模式切换。

在图中所示的示例中，在用于显示的图像(LV5)的曝光的中间停止曝光处理。

此外，随着在步骤S02中开始曝光准备处理，控制单元请求显示单元21停止显示图像，换句话说，在步骤S04中执行黑视处理。

这是因为由于成像元件12停止用于显示的图像(LV图像)的曝光处理，不能从帧存储器14获取接下来要显示的用于显示的图像(LV图像)。

在图中所示的示例中，在显示用于显示的图像(LV4)期间，停止显示图像的请求，换句话说，黑视处理的请求被输出到显示单元，并且显示单元21的屏幕被切换到黑视(黑色图像输出)。

此后，当曝光准备处理完成时，控制单元在步骤S05中通知成像元件12曝光准备处理完成，并使成像元件12开始用于记录的图像(CAP图像)的曝光处理。

在步骤S06中，成像元件12开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如由用户设置的时段，换句话说，快门速度。

控制单元还在步骤S07中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S08中执行用于记录的图像(CAP图像)的显示处理。

换句话说，在步骤S06中通过成像元件12的用于记录的图像(CAP图像)的曝光处理而获得的用于记录的图像(CAP图像)存储在第二帧存储器(FM2)中。

这对应于由控制单元执行的显示预约序列被交替地执行到FM1、FM2、FM1、FM2...，并且在开始用于记录的图像(CAP图像)的图像捕获之前的最新显示预约被发出到第一帧存储器(FM1)，并且下一个显示预约被发出到第二帧存储器(FM2)。

控制单元在步骤S07中执行用于记录的图像(CAP图像)到第二帧存储器(FM2)的显示预约，并且在步骤S08中执行从第二帧存储器(FM2)读取用于记录的图像(CAP图像)并在显示单元21上显示用于记录的图像(CAP图像)的处理。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元21的显示像素的数量的稀疏化处理并且显示稀疏化图像。

如从图3所示的序列图中可以理解的，当执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压时，控制单元请求显示单元21停止显示图像，换句话说，执行黑视处理，并且显示单元21使屏幕处于黑视(黑色图像输出)。

此后，在显示单元21中继续黑视(黑色图像输出)状态，直到结束用于记录的图像(CAP图像)的曝光处理和帧存储器14中的存储处理，并且可以显示用于记录的图像(CAP图像)。

注意的是，在参考图1至图3描述的配置中，已经描述了包括两个帧存储器的成像装置的使用示例；但是，即使在捕获图像被顺序地存储在一个帧存储器中的配置中也会发生类似的黑视。

在下文中，将描述本公开的具有防止发生显示单元的这种黑视的配置的实施例。

[2.本公开的成像装置的配置示例]

首先，参考图4，将描述本公开的成像装置100的配置示例。

图4所示的成像装置100包括光学透镜101、成像元件102、AD转换单元103、帧存储器104、信号处理单元(信号处理LSI)105、存储器106、显示单元(LCD/EVF)107、记录单元108、操作单元109和控制单元110。

帧存储器104包括第一帧存储器(FM1)121和第二帧存储器(FM2)122，并且能够存储两个图像帧。

操作单元109是用于执行用户输入的操作单元，例如，释放按钮(快门按钮)、图像捕获方面和图像捕获模式的设置、显示单元107的显示图像的设置，等等。

注意的是，显示单元107也可以被制成触摸板类型并用作用户操作单元。

控制单元110将控制信号和同步信号输入到部件(成像元件102、...、记录单元108)，并执行各种类型的处理控制，诸如控制每个部件的处理的执行定时。

例如，控制单元110执行定义成像元件102的处理定时的同步信号的输出控制、定义显示单元107的显示图像的切换定时的同步信号的输出控制等。

具体而言，控制单元110包括CPU等，其根据存储在存储单元(未示出)中的程序执行处理。

程序包括例如用于图像捕获、图像记录和图像显示处理的控制程序、同步信号输出控制程序等。

通过光学透镜101入射的光入射在成像单元(例如，包括CMOS图像传感器等的成像元件102)上，并且通过光电转换获得的图像数据被输出。注意的是，在未执行图像捕获处理的情况下，成像元件102的输出图像是要在显示单元107上显示的具有低像素数的用于显示的图像(LV图像)，并且在执行图像捕获处理的情况下，是要存储在记录单元108中的具有高像素数的用于记录的图像(CAP图像)。

来自成像元件102的输出图像被输入到AD转换单元103。

AD转换单元103执行输入信号的A/D转换，换句话说，将模拟信号转换成数字信号的处理，并且将转换之后的数字值存储在帧存储器104中。

在图中所示的示例中，帧存储器104具有能够存储两个图像帧的配置。成像元件102的捕获图像交替地存储在第一帧存储器(FM1)和第二帧存储器(FM2)中。

换句话说，帧存储器14同时存储两个连续捕获图像帧。

存储在帧存储器104中的图像从前一个存储帧顺序地输出到信号处理单元(信号处理LSI)105。

换句话说，根据图像捕获顺序从第一帧存储器(FM1)和第二帧存储器(FM2)交替地将图像输出到信号处理单元(信号处理LSI)105。

注意的是，虽然图4所示的示例包括两个帧存储器，但是捕获图像可以顺序地存储在一个帧存储器中。

信号处理单元105执行一般相机中的信号处理，例如，白平衡(WB)调整、伽马校正等，以生成输出图像，换句话说，要显示在显示单元107上的用于显示的图像(LV图像)或要存储在记录单元108中的用于记录的图像(CAP图像)中的至少一个，并将图像存储在存储器106中。

显示单元107显示存储在存储器106中的用于显示的图像(LV图像)。

显示单元107包括例如LCD、EVF等，并且可以由图像捕获人员确认。

此外，记录单元108存储要存储在存储器106中的用于记录的图像(CAP图像)。

[3.其中防止显示单元的黑视的成像装置的实施例]

接下来，将描述防止显示单元的黑视的成像装置的实施例。

将顺序地描述以下实施例。

(第一实施例)其中通过在完成用于显示的图像的曝光之后开始曝光准备处理来防止显示单元的黑视的实施例。

(第二实施例)其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例。

(第三实施例)其中通过取消未曝光图像的显示预约并执行显示单元的显示图像的连续显示来防止显示单元的黑视的实施例。

(第四实施例)其中通过执行已经存储在帧存储器中的最新图像的帧间存储器复制，即使在存储器切换之后，也在显示单元上连续显示相同图像来防止显示单元的黑视的实施例。

[3-1.(第一实施例)其中通过在完成用于显示的图像的曝光之后开始曝光准备处理来防止显示单元的黑视的实施例]

首先，作为第一实施例，将描述其中通过在完成用于显示的图像的曝光之后开始曝光准备处理来防止显示单元的黑视的实施例。

图5是图示第一实施例的处理序列的时序图。

与上述图3类似，图5图示了在成像装置的显示单元上显示用于显示的图像(LV图像)并且在显示期间执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的情况下的处理序列。

具体而言，它是在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理，并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

类似于上述图2和图3，图5分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

在下文中，将顺序地描述图5中所示的处理步骤S11至S18的处理。

(步骤S11)

首先，在步骤S11中，如图5的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

(步骤S12)

当在步骤S11中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元110在步骤S12中等待直到完成成像元件102的执行期间用于显示的图像(LV图像)的曝光处理以及曝光数据到帧存储器104的输出处理。

在图5所示的示例中，在S11中执行图像捕获操作时在成像元件102中的曝光执行中的用于显示的图像是LV5图像。在步骤S12中，执行等待直到完成LV5图像的曝光处理和曝光数据到帧存储器104的输出处理。

注意的是，等待时间还包括曝光数据到帧存储器104的存储时间，换句话说，从成像元件102的曝光数据读取时间。

(步骤S13)

在步骤S12中的等待处理完成之后，控制单元110在步骤S13中开始曝光准备处理。

曝光准备处理是例如从控制单元110向成像元件102和信号处理单元105输出控制信号的处理、基于成像元件和信号处理单元中的控制信号的设置处理等所需的时间。

曝光准备处理包括例如成像元件102的模式切换处理。

如上所述，当输出要在显示单元107上显示的用于显示的图像(LV图像)时，成像元件102输出具有部分变稀疏的低像素数的图像，而不输出成像元件102的所有像素数据。

但是，在执行图像捕获处理的情况下，需要生成具有高像素数的用于记录的图像，从而输出成像元件102的几乎所有像素数据。

曝光准备处理包括用于改变成像元件102的输出数据的模式切换处理等。

(步骤S14)

当在步骤S13中开始曝光准备处理时，控制单元110还在步骤S14中向成像元件102做出对曝光停止处理和用于记录的图像(CAP图像)曝光处理的准备请求。

成像元件102开始准备用于记录的图像(CAP图像)曝光处理，例如，用于改变为具有高像素数的输出数据的模式切换处理。当这个处理开始时，成像元件102停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

但是，在本实施例中，在图像捕获操作执行时成像元件102的曝光执行中的用于显示的图像(LV5图像)已经通过步骤S12中的等待处理存储在第一帧存储器(FM1)中。

(步骤S15)

在步骤S15中，根据在步骤S14中的曝光准备处理开始之前已经执行的针对第一帧存储器(FM1)的显示预约，控制单元110读取存储在第一帧存储器(FM1)中的最新图像，换句话说，用于显示的图像(LV5)，并且在显示单元107上显示图像。

显示图像是在上述步骤S12中的等待处理期间存储在第一帧存储器(FM1)中的用于显示的图像(LV5)。

(步骤S16)

此后，当曝光准备处理完成时，控制单元110在步骤S16中通知成像元件102曝光准备处理完成，并使成像元件102开始用于记录的图像(CAP图像)的曝光处理。

(步骤S17)

在步骤S17中，成像元件102开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如用户设置的时段，换句话说，快门速度。

(步骤S18至S19)

控制单元110还在步骤S18中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S19中执行用于记录的图像(CAP图像)的显示处理。

注意的是，在步骤S17中通过成像元件102对用于记录的图像(CAP图像)的曝光处理获得的用于记录的图像(CAP图像)存储在第二帧存储器(FM2)中。

这对应于由控制单元执行的显示预约序列被交替地执行到FM1、FM2、FM1、FM2...，并且在开始捕获用于记录的图像(CAP图像)之前的最新显示预约被发出到第一帧存储器(FM1)，并且下一个显示预约被发出到第二帧存储器(FM2)。

控制单元在步骤S18中执行用于记录的图像(CAP图像)到第二帧存储器(FM2)的显示预约，并且在步骤S19中执行从第二帧存储器(FM2)读取用于记录的图像(CAP图像)的处理，并在显示单元107上显示用于记录的图像(CAP图像)。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元107的显示像素的数量的稀疏化处理并且显示稀疏化图像。

如从图5中所示的序列图中可以理解的，当执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压时，控制单元110在步骤S12中等待直到完成成像元件102的执行期间用于显示的图像(LV图像)的曝光处理以及曝光数据到帧存储器104的输出处理。

在图5所示的示例中，在S11中执行图像捕获操作时在成像元件102中的曝光执行中的用于显示的图像是LV5图像。在步骤S12中，执行等待直到完成LV5图像的曝光处理和曝光数据到帧存储器104的输出处理。

通过这种等待处理，可以在释放按钮(快门按钮)的按压定时将曝光的用于显示的图像(LV5)存储在帧存储器中，并且可以在显示单元107上显示用于显示的图像(LV5)。

继续显示单元107上的用于显示的图像(LV5)的显示处理，直到用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示。

当用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示时，在步骤S18到S19中从帧存储器104读取用于记录的图像(CAP图像)并将其显示在显示单元107上。

作为这些处理的结果，在图像捕获操作执行时曝光的用于显示的图像(LV5)在图像捕获操作执行的时间之前在显示单元107上连续地显示给用于显示的图像(LV4)的显示处理。此外，用于记录的图像(CAP图像)连续显示给用于显示的图像的显示处理(LV5)。

换句话说，显示单元107上的图像显示被连续执行而不引起黑视。

注意的是，关于本实施例，已经描述了其中包括两个帧存储器的处理示例；但是，在本实施例中，可以在捕获图像被顺序地存储在一个帧存储器中的配置中获得类似的效果。

[3-2.(第二实施例)其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例]

接下来，作为第二实施例，将描述其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例。

第二实施例是上述第一实施例的改进版本。

如以上参考图5所描述的，在第一实施例中，执行等待直到在图像捕获操作执行时的执行期间用于显示的图像(LV图像)的曝光完成，并且在经过等待时间之后，开始用于记录的图像(CAP图像)的曝光准备处理，从而防止显示单元的黑视。

但是，如果采用这种配置，则存在释放时间滞后改变为不同时间的问题，释放时间滞后是从由用户(图像捕获人员)执行的图像捕获操作，换句话说，释放按钮的按压操作到作为与图像捕获操作对应的捕获图像的用于记录的图像(CAP图像)的曝光开始的时间。

将简要描述释放时间滞后。

在按压释放按钮(快门按钮)并且实际开始相机的成像元件的曝光处理之前存在一定的时间滞后(时间延迟)。

这种时间滞后被称为释放时间滞后或释放滞后。

虽然取决于相机释放时间滞后存在轻微差异，但是在许多相机中释放滞后在约15毫秒至30毫秒的时间范围内。

在一个相机中，释放时间滞后是恒定时间，例如，20毫秒。

在图像捕获不移动的静止被摄体的情况下，在按压释放按钮(快门按钮)时刻的被摄体与经过释放时间滞后之后的被摄体之间没有发生显著变化，使得图像捕获人员所预期的被摄体图像可以被记录为相机的存储器中的记录图像。

但是，例如，在捕获以高速移动的被摄体的情况下，在按压释放按钮(快门按钮)时刻的被摄体可能与经过释放时间滞后之后的被摄体大不相同。在这种情况下，与图像捕获人员所预期的被摄体图像不同的图像被记录在相机的存储器中。

一般用户在不注意释放时间滞后的情况下执行图像捕获，但是例如，专业图像捕获人员等经常考虑所使用的相机的释放时间滞后来执行图像捕获处理。换句话说，确认诸如相机的LCD显示单元或电子取景器(EVF)之类的显示单元的显示图像，此外，考虑释放滞后，并且然后在按压时刻按压释放按钮(快门按钮)。

具体而言，执行图像捕获处理，其中确认相机的显示单元的显示图像，此外，估计经过释放时间滞后之后的图像，并且然后在紧挨着图像被估计为使得可以捕获估计的图像之前的时刻按压释放按钮(快门按钮)。

但是，通过以这种方式控制释放按钮(快门按钮)的按压时刻来捕获由图像捕获人员假定的图像是在释放时间滞后的时间始终恒定的条件下。

如果释放时间滞后的时间取决于释放按钮按压定时而不同，则不能执行考虑释放时间滞后的高级图像捕获，并且图像捕获由图像捕获人员所期望的图像变得困难。

如上所述，为了捕获由图像捕获人员所期望的图像，需要使释放时间滞后恒定。

如上所述，在上面参考图5描述的第一实施例中，执行等待直到在图像捕获操作执行时的执行期间用于显示的图像(LV图像)的曝光完成，并且在经过等待时间之后，开始用于记录的图像(CAP图像)的曝光准备处理，从而防止显示单元的黑视。但是，在这种配置中，释放时间滞后变化，释放时间滞后是从用户(图像捕获人员)按压释放按钮的操作到与图像捕获操作对应的用于记录的图像(CAP图像)的曝光开始的时间。

将参考图6描述这个问题。

图6图示了其中应用了上面参考图5描述的第一实施例的以下两个处理示例。

(1)紧接在用于显示的图像(LV5)的曝光结束之前执行图像捕获操作的情况

(2)在用于显示的图像(LV5)的曝光开始时执行图像捕获操作的情况

在上面参考图5描述的第一实施例应用于图6(1)的情况的情况下，等待时间是从图像捕获操作的时间到用于显示的图像(LV5)的曝光结束的时间，并且是图中所示的从t11到t12的时间。

在这种情况下的释放时间滞后是通过将曝光准备处理时段(t12到t13)与等待时间(t11到t12)相加而获得的时间(t11到t13)。

注意的是，如上所述，虽然曝光准备处理时段取决于成像装置而变化，但是在一个相机中该时段是恒定时间，例如，20毫秒。

在图6(1)的情况下，曝光准备处理时段(t12到t13)是这20毫秒，并且释放时间滞后(t11到ta3)是通过将等待时间(t11到t12)与这20毫秒相加而获得的时间。

另一方面，在上面参考图5描述的第一实施例应用于图6(2)的情况的情况下，等待时间是从图像捕获操作的时间到用于显示的图像(LV5)的曝光结束的时间，并且是图中所示的从t21到t22的时间。

在这种情况下的释放时间滞后是通过将曝光准备处理时段(t22到t23)与等待时间(t21到t22)相加而获得的时间(t21到t23)。

在图6(1)和(2)的情况下，情况(1)的曝光准备处理时段(t12到t13)和情况(2)的曝光准备处理时段(t22到t23)两者彼此相同，并且是例如20毫秒。

但是，情况(1)的等待时间(t11到t12)是从紧接在用于显示的图像(LV5)的曝光结束之前的图像捕获操作的开始的时间(t11)到用于显示的图像(LV5)的曝光结束并且图像被存储在存储器中的时间(t12)，并且被设置得比图6(2)的情况的时间短，如从图中可以理解的。

图6(2)的情况的等待时间(t21到t22)是从用于显示的图像(LV5)的曝光开始时的图像捕获操作的开始的时间(t21)到用于显示的图像(LV5)的曝光结束并且图像被存储在存储器中的时间(t22)，并且被设置得比图6(1)的情况的时间长，如从图中可以理解的。

因此，当图6(1)和(2)两者相互比较时，图6(2)的情况的释放时间滞后(t21到t23)比图6(1)的情况的释放时间滞后(t11到t13)长。

如上所述，在应用参考图5描述的第一实施例的情况下，出现释放时间滞后取决于用户(图像捕获人员)的图像捕获操作的定时而不同的问题。

下面描述的第二实施例是其中无论用户(图像捕获人员)的图像捕获操作的定时如何，这一点都得到改善并且使释放时间滞后恒定的实施例。

具体而言，等待时间被设置为假定它是假定的最长时间，换句话说，类似于图6(2)所示的情况，在用于显示的图像(LV图像)的曝光开始时执行图像捕获操作。通过执行等待时间的这种设置，可以使释放时间滞后恒定。

参考图7，将描述第二实施例，换句话说，其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例。

图7是图示第二实施例的处理序列的时序图。

与上述图5类似，图7图示了在成像装置的显示单元上显示用于显示的图像(LV图像)并且在显示期间执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的情况下的处理序列。

具体而言，该图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理。并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

与上述图5类似，图7分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

在下文中，将顺序地描述图7中所示的处理步骤S21至S28的处理。

(步骤S21)

首先，在步骤S21中，如图7的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

(步骤S22)

当在步骤S21中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元110在步骤S22中等待直到经过预定义的等待时间。

预定义的等待时间是根据上面参考图6(2)描述的情况的等待时间。换句话说，假定在成像元件102中的用于显示的图像(LV图像)的曝光处理开始时执行图像捕获操作，则用于显示的一个图像(LV图像)的曝光处理和到帧存储器104的输出处理所需的时间被用作等待时间。

等待时间还包括曝光数据到帧存储器104的存储时间，换句话说，从成像元件102的曝光数据读取时间，此外，在第二实施例中，与上述第一实施例不同，它被设置为使得，即使在曝光中间的曝光完成的情况下，用于记录的图像的曝光准备处理也在等待一个帧的曝光的曝光时间之后开始。

换句话说，无论图像捕获操作的定时如何，都使第二实施例的等待时间恒定。

通过这个处理，释放时间滞后，换句话说，从图像捕获操作到与图像捕获操作对应的用于记录的图像(CAP图像)的曝光开始的时间是(恒定等待时间)+(恒定曝光准备处理时间)，并且始终是恒定的。

(步骤S23)

在步骤S22中的等待处理完成之后，控制单元110在步骤S23中开始曝光准备处理。

曝光准备处理是例如从控制单元110向成像元件102和信号处理单元105输出控制信号的处理、基于成像元件和信号处理单元中的控制信号的设置处理等所需的时间。

曝光准备处理包括例如成像元件102的模式切换处理。

如上所述，当输出要在显示单元107上显示的用于显示的图像(LV图像)时，成像元件102输出具有部分变稀疏的低像素数的图像，而不输出成像元件102的所有像素数据。

但是，在执行图像捕获处理的情况下，需要生成具有高像素数的用于记录的图像，从而输出成像元件102的几乎所有像素数据。

曝光准备处理包括用于改变成像元件102的输出数据的模式切换处理等。

(步骤S24)

当在步骤S23中开始曝光准备处理时，控制单元110还在步骤S24中向成像元件102做出对曝光停止处理和用于记录的图像(CAP图像)曝光处理的准备请求。

成像元件102开始准备用于记录的图像(CAP图像)曝光处理，例如，用于改变为具有高像素数的输出数据的模式切换处理。当这个处理开始时，成像元件102停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

但是，同样在第二实施例中，类似于上面参考图5描述的第一实施例，在图像捕获操作执行时成像元件102的曝光执行中的用于显示的图像(LV5图像)已经通过步骤S22中的等待处理存储在第一帧存储器(FM1)中。

(步骤S25)

根据在步骤S24中的曝光准备处理开始之前已经执行的针对第一帧存储器(FM1)的显示预约，控制单元110在步骤S25中读取存储在第一帧存储器(FM1)中的最新图像，换句话说，用于显示的图像(LV5)，并且在显示单元107上显示图像。

显示图像是在上述步骤S22中的等待处理期间存储在第一帧存储器(FM1)中的用于显示的图像(LV5)。

(步骤S26)

此后，当曝光准备处理完成时，控制单元110在步骤S26中通知成像元件102曝光准备处理完成，并使成像元件102开始用于记录的图像(CAP图像)的曝光处理。

(步骤S27)

在步骤S27中，成像元件102开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如用户设置的时段，换句话说，快门速度。

(步骤S28至S29)

控制单元110还在步骤S28中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S29中执行用于记录的图像(CAP图像)的显示处理。

如从图7中所示的序列图中可以理解的，当执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压时，控制单元110执行在步骤S22中的预定义的等待时间的等待处理。

换句话说，执行恒定等待时间的等待，该恒定等待时间对应于用于显示的一个图像(LV图像)的曝光处理和到帧存储器104的输出处理(存储处理)所需的时间。

通过这个处理，释放时间滞后，换句话说，从图像捕获操作到与图像捕获操作对应的用于记录的图像(CAP图像)的曝光开始的时间是(恒定等待时间)+(恒定曝光准备处理时间)，并且始终是恒定的。

此外，同样在图7所示的第二实施例中，类似于上面参考图5描述的第一实施例，在S21中执行图像捕获操作时在成像元件102中的曝光执行中的用于显示的图像是LV5图像，并且在释放按钮(快门按钮)的按压定时曝光的用于显示的图像(LV5)在步骤S22中的等待时间内被存储在帧存储器中，并且用于显示的图像(LV5)可以在显示单元107上显示。

继续显示单元107上的用于显示的图像(LV5)的显示处理，直到用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示。

当用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示时，在步骤S28到S29中从帧存储器104读取用于记录的图像(CAP图像)并将其显示在显示单元107上。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元107的显示像素的数量的稀疏化处理并且显示稀疏化图像。

作为这些处理的结果，在图像捕获操作执行时曝光的用于显示的图像(LV5)在图像捕获操作执行的时间之前在显示单元107上连续显示给用于显示的图像(LV4)的显示处理。此外，用于记录的图像(CAP图像)连续显示给用于显示的图像的显示处理(LV5)。

换句话说，图像显示在显示单元107上被连续执行而不引起黑视。

注意的是，关于本实施例，已经描述了其中包括两个帧存储器的处理示例；但是，在本实施例中，可以在捕获图像被顺序地存储在一个帧存储器中的配置中获得类似的效果。

[3-3.(第三实施例)其中通过取消未曝光图像的显示预约并执行显示单元的显示图像的连续显示来防止显示单元的黑视的实施例]

接下来，作为第三实施例，将描述通过取消未曝光图像的显示预约并执行显示单元的显示图像的连续显示来防止显示单元的黑视的实施例。

图8是图示第三实施例的处理序列的时序图。

与上述图5类似，图8图示了在成像装置的显示单元上显示用于显示的图像(LV图像)，并且在显示期间，执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的情况下的处理。

换句话说，该图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理，并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

与上述图5类似，图8分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

在下文中，将顺序地描述图8中所示的处理步骤S31至S38的处理。

(步骤S31)

首先，在步骤S31中，如图8的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

(步骤S32)

当在步骤S31中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元110在步骤S32中开始曝光准备处理。

曝光准备处理是与上述第一实施例和第二实施例类似的处理。例如，它是例如从控制单元110向成像元件102和信号处理单元105输出控制信号的处理、基于成像元件和信号处理单元中的控制信号的设置处理等所需的时间。

曝光准备处理包括例如成像元件102的模式切换处理。

(步骤S33)

当在步骤S32中开始曝光准备处理时，控制单元110还在步骤S33中向成像元件102做出对曝光停止处理和用于记录的图像(CAP图像)曝光处理的准备请求。

成像元件102开始准备用于记录的图像(CAP图像)曝光处理，例如，用于改变为具有高像素数的输出数据的模式切换处理。当这个处理开始时，成像元件102停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

在第三实施例中，如图8所示，在图像捕获操作执行时成像元件102的曝光执行中的图像是用于显示的图像(LV5图像)，并且在这个曝光时段的中间，成像元件102停止用于显示的图像(LV5)的曝光处理和存储器输出处理。

(步骤S34)

在第三实施例中，在步骤S34中，控制单元110执行中途停止曝光处理的处理，并且取消未存储在帧存储器中的用于显示的图像(LV5)的显示预约。

要取消的显示预约是紧接在步骤S31中的图像捕获操作之前执行的显示预约。这是在图8所示的成像元件同步信号(ta5)的时间执行的显示预约。

这个显示预约是要存储在第一帧存储器中的用于显示的图像(LV5)的显示预约。

通过显示预约取消处理，要根据在图8所示的成像元件同步信号(ta5)时执行的显示预约执行的显示处理，换句话说，从第一帧存储器(FM1)获取要存储在第一帧存储器(FM1)中的用于显示的图像(LV5)的图像数据并且到显示单元107的输出处理不被执行。

作为该处理取消的结果，显示单元107继续显示在用于显示的图像(LV5)的显示定时之前显示的图像，换句话说，从第二帧存储器(FM2)获取的用于显示的图像(LV4)。

(步骤S35)

此后，当曝光准备处理完成时，控制单元110在步骤S35中通知成像元件102曝光准备处理完成，并使成像元件102开始用于记录的图像(CAP图像)的曝光处理。

(步骤S36)

在步骤S36中，成像元件102开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如用户设置的时段，换句话说，快门速度。

(步骤S37至S38)

控制单元110还在步骤S37中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S38中执行用于记录的图像(CAP图像)的显示处理。

如从图8所示的序列图可以理解的，在(g)显示单元显示图像中，从第二帧存储器(FM2)获取的用于显示的图像(LV4)的显示时段被设置得长，并且在显示用于显示的这个图像(LV4)之后，用于记录的图像(CAP图像)被连续显示。

换句话说，在本实施例中，继续在显示单元107上显示用于显示的图像(LV4)的显示处理，直到用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示。

当用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示时，在步骤S37至S38中从帧存储器104读取用于记录的图像(CAP图像)并将其显示在显示单元107上。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元107的显示像素的数量的稀疏化处理并且显示稀疏化图像。

作为这些处理的结果，用于记录的图像(CAP图像)在图像捕获操作执行的时间之前在显示单元107上连续地显示给用于显示的图像(LV4)的显示处理。

换句话说，图像显示在显示单元107上被连续执行而不引起黑视。

注意的是，关于本实施例，已经描述了其中包括两个帧存储器的处理示例；但是，在本实施例中，可以在捕获图像被顺序地存储在一个帧存储器中的配置中获得类似的效果。

[3-4.(第四实施例)其中通过执行已经存储在帧存储器中的最新图像的帧间存储器复制，即使在存储器切换之后，也在显示单元上连续显示相同图像来防止显示单元的黑视的实施例。

接下来，作为第四实施例，将描述通过执行已经存储在帧存储器中的最新图像的帧间存储器复制，即使在存储器切换之后，也在显示单元上连续显示相同图像来防止显示单元的黑视的实施例。

图9是图示第四实施例的处理序列的时序图。

与上述图5类似，图9是在成像装置的显示单元上显示用于显示的图像(LV图像)，并且在显示期间，执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的情况下的处理序列。

换句话说，该图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理，并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

与上述图5类似，图9分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

在下文中，将顺序地描述图9中所示的处理步骤S41至S49的处理。

(步骤S41)

首先，在步骤S41中，如图9的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

(步骤S42)

当在步骤S41中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元110在步骤S42中开始曝光准备处理。

曝光准备处理是与上述实施例中的处理类似的处理。例如，它是例如从控制单元110向成像元件102和信号处理单元105输出控制信号的处理、基于成像元件和信号处理单元中的控制信号的设置处理等所需的时间。

曝光准备处理包括例如成像元件102的模式切换处理。

(步骤S43)

当在步骤S42中开始曝光准备处理时，控制单元110还在步骤S43中向成像元件102做出对曝光停止处理和用于记录的图像(CAP图像)曝光处理的准备请求。

成像元件102开始准备用于记录的图像(CAP图像)曝光处理，例如，用于改变为具有高像素数的输出数据的模式切换处理。当这个处理开始时，成像元件102停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

在第四实施例中，如图9所示，在图像捕获操作执行时成像元件102的曝光执行中的图像是用于显示的图像(LV5图像)，并且在这个曝光时段的中间，成像元件102停止用于显示的图像(LV5)的曝光处理和存储器输出处理。

(步骤S44至S45)

在第四实施例中，在步骤S44中，控制单元110执行将存储在第二帧存储器(FM2)中的用于显示的最新图像(LV4)复制到第一帧存储器(FM1)的处理。

要复制的用于显示(LV)的图像是在步骤S43中的曝光停止时已经存储在帧存储器104中的用于显示的最新图像。

在图9所示的示例中，它是存储在第二帧存储器(FM2)中的用于显示的图像(LV4)。

执行将用于显示的最新图像(LV4)复制到作为另一个帧存储器的第一帧存储器(FM1)的处理。

作为该复制处理的结果，在根据紧接在步骤S41中的图像捕获处理之前执行的显示预约，换句话说，要存储在第一帧存储器中的用于显示的图像(LV5)的显示预约的显示处理(步骤S45)中，在显示单元107上执行用于显示的图像(LV4)的显示处理。

换句话说，在步骤S45中，从第一帧存储器(FM1)读取复制并存储在第一帧存储器(FM1)中的用于显示的图像(LV4)、将其输出到显示单元107并且显示。

因此，在图9所示的成像元件同步信号(ta4)的时间，首先，从第一帧存储器(FM1)读取用于显示的图像(LV4)并将其显示在显示单元107上。接下来，在图9所示的成像元件同步信号(ta5)的时间，从第二帧存储器(FM2)读取用于显示的图像(LV4)的复制数据并将其显示在显示单元107上。

如上所述，从两个帧存储器(FM1，FM2)顺序读取用于显示的图像(LV4)并将其连续显示在显示单元上。

(步骤S46)

此后，当曝光准备处理完成时，控制单元110在步骤S46中通知成像元件102曝光准备处理完成，并使成像元件102开始用于记录的图像(CAP图像)的曝光处理。

(步骤S47)

在步骤S47中，成像元件102开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如由用户设置的时段，换句话说，快门速度。

(步骤S48至S49)

控制单元110还在步骤S48中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S49中执行用于记录的图像(CAP图像)的显示处理。

如从图9所示的序列图中可以理解的，在(g)显示单元显示图像中，从第二帧存储器(FM2)获取的用于显示的图像(LV4)和作为从第一帧存储器(FM1)获取的复制图像的用于显示的图像(LV4)被连续显示比原始图像帧显示时段长，并且在显示用于显示的图像(LV4)之后，用于记录的图像(CAP图像)被连续显示。

换句话说，在本实施例中，继续显示单元107上的用于显示的图像(LV4)的显示处理，直到用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示。

当用于记录的图像(CAP图像)存储在帧存储器104中并且可以被显示时，在步骤S48到S49中从帧存储器104读取用于记录的图像(CAP图像)并将其显示在显示单元107上。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元107的显示像素的数量的稀疏化处理并且显示稀疏化图像。

作为这些处理的结果，用于记录的图像(CAP图像)在图像捕获操作执行的时间之前在显示单元107上连续地显示给用于显示的图像(LV4)的显示处理。

换句话说，图像显示在显示单元107上被连续执行而不引起黑视。

[4.(第五实施例)其中确定用于记录的图像(CAP图像)的曝光时段是否大于或等于指定时间，并且取决于确定结果来执行显示控制的实施例]。

接下来，作为第五实施例，将描述确定用于记录的图像(CAP图像)的曝光时段是否大于或等于指定时间，并且取决于确定结果来执行显示控制的示例。

第五实施例是其中例如控制单元输入由用户(图像捕获人员)设置的用于记录的图像的曝光时段，换句话说，用户定义曝光时段的快门速度信息，并且在控制单元中，确定用于记录的图像(CAP图像)的曝光时段是否大于或等于指定时间，并且取决于确定结果执行显示控制的实施例。

具体而言，在用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下，在显示单元107上引起黑视，并且在用于记录的图像(CAP图像)的曝光完成并且图像被存储在帧存储器中之后，从黑视状态到用于记录的图像(CAP图像)的显示进行转换。

另一方面，在用于记录的图像(CAP图像)的曝光时段不大于或等于指定时间的情况下，执行上述第一至第四实施例中的任何一个实施例的处理以执行显示处理而没有黑视。

在上述第一至第四实施例中的所有实施例中，用于显示的图像(LV4)或用于显示的图像(LV5)被设置为在显示单元107上显示的时间长于用于显示的图像的原始切换定时的时间，并且，当相同图像的这种连续显示变长时，用户可能误以为移动图像显示被切换到静止图像显示。

通过图像捕获操作在显示单元107上显示的图像被显示为静止图像，并且用户(图像捕获人员)通过显示在显示单元上的静止图像来确认捕获图像。

但是，如果最初应该被显示为移动图像的用于显示的图像(LV4)或用于显示的图像(LV5)在此之前长时间连续显示，那么该静止图像可能被错误地识别为捕获图像。

为了防止发生这种错误识别处理，在第五实施例中，在用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下，在显示单元107上引起黑视，并且在用于记录的图像(CAP图像)的曝光完成并且图像被存储在帧存储器中之后，从黑视状态到用于记录的图像(CAP图像)的显示进行转换。

图10是图示第四实施例的处理序列的时序图。

与上述图5类似，图10图示了在成像装置的显示单元上显示用于显示的图像(LV图像)，并且在显示期间，执行用户(图像捕获人员)的图像捕获处理，换句话说，释放按钮(快门按钮)的按压处理的情况下的处理序列。

换句话说，该图图示了在成像装置的显示单元上显示用于显示的图像(LV图像)的时段期间执行用户(图像捕获人员)的图像捕获处理，并且在显示单元上显示捕获的用于记录的图像(CAP图像)的情况下的处理序列。

时间是从左到右。

与上述图5类似，图10分别图示了以下(a)至(g)的处理定时。

(a)成像元件输入同步信号

(b)成像元件的曝光处理和输出到帧存储器

(c1)第一帧存储器(FM1)的存储图像

(c2)第二帧存储器(FM2)的存储图像

(d)图像捕获操作(释放(快门)操作)

(e)控制单元的处理

(f)显示单元输入同步信号

(g)显示单元显示图像

在下文中，将顺序地描述图10中所示的处理步骤S51至S58的处理。

(步骤S51)

首先，在步骤S51中，如图10的(d)图像捕获操作(释放(快门)操作)的线的中心附近所示，执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理。

(步骤S52)

当在步骤S51中执行用户的图像捕获操作，换句话说，释放按钮(快门按钮)的按压处理时，控制单元110在步骤S52中开始曝光准备处理。

曝光准备处理是与上述实施例中的处理类似的处理。例如，它是例如从控制单元110向成像元件102和信号处理单元105输出控制信号的处理、基于成像元件和信号处理单元中的控制信号的设置处理等所需的时间。

曝光准备处理包括例如成像元件102的模式切换处理。

(步骤S53)

当在步骤S52中开始曝光准备处理时，控制单元110还在步骤S53中向成像元件102做出对曝光停止处理和用于记录的图像(CAP图像)曝光处理的准备请求。

成像元件102开始准备用于记录的图像(CAP图像)曝光处理，例如，用于改变为具有高像素数的输出数据的模式切换处理。当这个处理开始时，成像元件102停止用于显示的图像(LV图像)的曝光处理和存储器输出处理。

在第五实施例中，如图10所示，在图像捕获操作执行时成像元件102的曝光执行中的图像是用于显示的图像(LV5图像)，并且在这个曝光时段的中间，成像元件102停止用于显示的图像(LV5)的曝光处理和存储器输出处理。

(步骤S54)

在第五实施例中，在步骤S54中，控制单元110确定用于记录的图像(CAP图像)的曝光时段是否大于或等于指定时间，并且在确定曝光时间大于或等于指定时间的情况下，向显示单元107做出黑视处理请求。

注意的是，通过输入用户(图像捕获人员)的图像捕获设置信息(具体而言，快门速度)来确定用于记录的图像(CAP图像)的曝光时段。指定时间是预设时间并且存储在存储器中。

注意的是，在确定用于记录的图像(CAP图像)的曝光时段不大于或等于指定时间的情况下，不做出对显示单元107的黑视处理请求，并且执行上述第一至第四实施例中的任何一个实施例的处理。

(步骤S55)

此后，当曝光准备处理完成时，控制单元110在步骤S55中通知成像元件102曝光准备处理完成，并使成像元件102开始用于记录的图像(CAP图像)的曝光处理。

(步骤S56)

在步骤S56中，成像元件102开始用于记录的图像(CAP图像)的曝光处理。

曝光时段被设置为对应于例如由用户设置的时段，换句话说，快门速度。

(步骤S57至S58)

控制单元110还在步骤S57中执行用于记录的图像(CAP图像)的显示预约，并且在步骤S58中执行用于记录的图像(CAP图像)的显示处理。

如从图10所示的序列图中可以理解的，在从第二帧存储器(FM2)获取的用于显示的图像(LV4)的显示时段之后，引起(g)显示单元显示图像黑视，此后，当用于记录的图像(CAP图像)被存储在帧存储器104中并且可以被显示时，在步骤S57至S58中，从帧存储器104中读取用于记录的图像(CAP图像)并将其显示在显示单元107上。

注意的是，在显示处理中，执行如下处理：对存储在第二帧存储器(FM2)中的用于记录的图像(CAP图像)执行取决于显示单元107的显示像素的数量的稀疏化处理并且显示稀疏化图像。

注意的是，仅在步骤S54中确定用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下执行黑视处理。

在确定用于记录的图像(CAP图像)的曝光时段不大于或等于指定时间的情况下，不做出对显示单元107的黑视处理请求，并且执行如上所述的第一至第四实施例中的任何一个实施例的处理。

作为这些处理的结果，仅在用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下才能产生显示单元107的黑视。

通过这个处理，在用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下，用于显示的图像(LV图像)被长时间显示为静止图像，并且可以避免错误识别处理，诸如用户(图像捕获人员)误认为显示图像是捕获图像。

注意的是，关于本实施例，已经描述了其中包括两个帧存储器的处理示例；但是，在本实施例中，可以在捕获图像被顺序地存储在一个帧存储器中的配置中获得类似的效果。

[5.由成像装置执行的处理序列]

接下来，将参考图11所示的流程图描述由成像装置的控制单元执行的图像显示控制序列。

图11中所示的流程是图示与上面参考图10描述的根据第五实施例的处理对应的图像显示控制序列的流程。

换句话说，它是描述在一种设置的情况下的图像显示控制序列的流程，在这种设置中，在确定用于记录的图像(CAP图像)的曝光时段大于或等于指定时间的情况下，执行黑视处理，并且在用于记录的图像(CAP图像)的曝光时段不大于或等于指定时间的情况下，不执行黑视处理并且执行上述第一至第四实施例中的任何一个实施例的处理。

在包括具有程序执行功能的处理器的控制单元110的控制下，根据预先存储在例如成像装置100的存储单元中的程序来执行图11所示的流程。

在下文中，将顺序地描述每个步骤的处理。

(步骤S101)

首先，在步骤S101中，成像装置100的控制单元110确定是否执行了图像捕获处理，换句话说，用户(图像捕获人员)是否按压了释放按钮。这作为来自控制单元110中的操作单元109的输入检测处理来执行。

在确定执行图像捕获处理(释放按钮按压)的情况下，处理进行到步骤S102，并且在确定不执行图像捕获处理(释放按钮按压)的情况下，处理进行到步骤S111。

(步骤S111)

首先，将描述在步骤S101中确定不执行图像捕获处理(释放按钮按压)的情况下的处理。

在步骤S101中确定不执行图像捕获处理(释放按钮按压)的情况下，处理进行到步骤S111，并且控制单元110以预定义的间隔执行显示图像帧的切换以执行用于显示的图像(LV图像)的显示处理。

(步骤S102)

在步骤S101中确定执行图像捕获处理(释放按钮按压)的情况下，处理进行到步骤S102，并且控制单元110在步骤S102中确定与在步骤S101中检测到的图像捕获操作对应的用于记录的图像(CAP图像)的曝光时段是否大于或等于阈值(指定时间)。

注意的是，如上所述，通过输入用户(图像捕获人员)的图像捕获设置信息(具体而言，快门速度)来确定用于记录的图像(CAP图像)的曝光时段。阈值(指定时间)是预设时间并且存储在存储器中。

在步骤S102中确定曝光时段不大于或等于阈值(指定时间)的情况下，处理进行到步骤S103，并且在确定曝光时段等于或大于阈值(指定时间)的情况下，处理进行到步骤S105。

(步骤S103)

在步骤S102中确定曝光时段不大于或等于阈值(指定时间)的情况下，处理进行到步骤S103。

在这种情况下，控制单元110执行避免显示单元107的黑视的处理，具体而言，上述第一至第四实施例中的任何一个实施例的处理，并且执行曝光准备处理，并且在完成曝光准备处理之后，开始捕获图像(用于记录的图像(CAP图像))的曝光。

这里，执行上述第一至第四实施例中的任何一个实施例的处理，换句话说，根据防止显示单元的黑视的以下实施例中的任何一个实施例来执行显示控制。

将顺序地描述以下实施例。

(第一实施例)其中通过在完成用于显示的图像的曝光之后开始曝光准备处理来防止显示单元的黑视的实施例

(第二实施例)其中通过在完成用于显示的图像的曝光之后经过使释放时间滞后恒定的等待时间之后开始曝光准备处理来防止显示单元的黑视的实施例

(第三实施例)其中通过取消未曝光图像的显示预约并执行显示单元的显示图像的连续显示来防止显示单元的黑视的实施例

(第四实施例)其中通过执行已经存储在帧存储器中的最新图像的帧间存储器复制，即使在存储器切换之后，也在显示单元上连续显示相同图像来防止显示单元的黑视的实施例

通过执行这些处理中的任何一个处理，在显示单元107上连续地执行图像显示，并且执行不引起黑视的图像显示。

(步骤S104)

在步骤S103中，当曝光准备处理完成并且开始捕获图像(用于记录的图像(CAP图像))的曝光时，接下来，在步骤S104中确定帧存储器104中的捕获图像(用于记录的图像(CAP图像))的曝光处理和存储处理是否完成。

在确定处理完成的情况下，处理进行到步骤S107。

(步骤S107)

在步骤S107中，读取存储在帧存储器104中的捕获图像(用于记录的图像(CAP图像))并将其显示在显示单元107上。

在执行步骤S103至S104至S107中的处理的情况下，显示单元107显示用于显示的图像(LV图像)，并且然后显示捕获图像(用于记录的图像(CAP图像))而不产生黑视。

(步骤S105)

接下来，将描述步骤S105和在步骤S102中确定曝光时段大于或等于阈值(指定时间)的情况下的后续步骤中的处理。

在这种情况下，在步骤S105中，控制单元110执行显示单元107的黑视处理并开始曝光准备处理，并且在完成曝光准备处理之后，开始捕获图像(用于记录的图像(CAP图像))的曝光。

这是上面参考图10描述的第五实施例的黑视的处理。仅在捕获图像(用于记录的图像(CAP图像))的曝光时段大于或等于指定时间的情况下执行该处理。

如果在捕获图像(用于记录的图像(CAP图像))的曝光时段长的情况下执行第一至第四实施例的处理，那么用于显示的图像(LV图像)长时间被显示为静止图像，并且可能发生错误识别处理，诸如用户(图像捕获人员)误认为显示图像是捕获图像，并且执行黑视的原因之一是避免这种情况。

(步骤S106)

在步骤S105中，当曝光准备处理完成并且开始捕获图像(用于记录的图像(CAP图像))的曝光时，接下来，在步骤S106中确定帧存储器104中的捕获图像(用于记录的图像(CAP图像))的曝光处理和存储处理是否完成。

在确定处理完成的情况下，处理进行到步骤S107。

(步骤S107)

在步骤S107中，读取存储在帧存储器104中的捕获图像(用于记录的图像(CAP图像))并将其显示在显示单元107上。

在执行步骤S105至S106至S107中的处理的情况下，显示单元107停止显示用于显示的图像(LV图像)并产生黑视，然后显示捕获图像(用于记录的图像(CAP图像))。

[6.其它实施例]

接下来，将描述其它实施例。

上面已经参考图4描述了执行本公开的处理的成像装置的示例。

本公开的处理还适用于具有与图4中所示的成像装置100的配置不同配置的成像装置。

图12图示了成像装置200的配置示例，成像装置200具有与图4所示的配置不同的配置，使得能够执行本公开的处理。

图12所示的成像装置200包括光学透镜101、成像元件设备210、信号处理单元(信号处理LSI)105、存储器106、显示单元(LCD/EVF)107、记录单元108、操作单元109和控制单元110。

除了成像元件设备210之外的配置类似于上面参考图4描述的配置。

图12所示的成像装置200的成像元件设备210包括成像元件211、AD转换单元212和帧存储器213。

通过光学透镜101入射的光入射在成像元件设备210的成像元件211(例如，包括CMOS图像传感器等的成像元件211)上，并且成像元件211向包括在成像器件210中的AD转换单元212输出通过光电转换获得的图像数据。

成像器件210中的AD转换单元212执行输入信号的A/D转换，换句话说，将模拟信号转换成数字信号的处理，并且将转换之后的数字值存储在包括在同一成像器件210中的帧存储器213中。

帧存储器213能够存储两个图像帧，并且包括第一帧存储器(FM1)251和第二帧存储器(FM2)252。图像交替地存储在这两个帧存储器中。

图像数据以图像捕获顺序从两个帧存储器输出到信号处理单元(信号处理LSI)105。

信号处理单元(信号处理LSI)105输入来自帧存储器213的图像数据并执行信号处理。

后续处理是类似于上面参考图4描述的成像装置100的处理的处理。

图12所示的成像装置200的特征在于包括成像器件210包括成像元件211、AD转换单元212并且包括帧存储器213。

控制信号和同步信号从控制单元110输入到成像器件210，并且基于同步信号执行更新处理，诸如开始、改变和结束处理。

同样在图12所示的配置中，可以根据上述图5至图11的时序图和流程图来执行处理。

[7.本公开的配置的总结]

在上文中，已经参考具体实施例详细描述了本公开的实施例。但是，不言而喻，本领域技术人员可以在不脱离本公开的主旨的情况下对实施例进行修改和替换。换句话说，已经以示例的形式公开了本发明，并且不应该限制性地解释本发明。为了确定本公开的主旨，应该考虑权利要求的范围。

注意的是，本说明书中公开的技术可以具有以下配置。

(1)一种成像装置，包括：

成像元件；

帧存储器，存储由成像元件获取的用于显示的图像；

显示单元，显示由帧存储器存储的用于显示的图像；以及

控制单元，响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器单元中的用于显示的图像，直到能够显示用于记录的图像。

(2)根据(1)所述的成像装置，其中，控制单元在完成用于记录的图像的曝光准备处理之后，执行成像元件中的用于记录的图像的曝光处理和帧存储器中的通过曝光处理获取的用于记录的图像的存储处理。

(3)根据(2)所述的成像装置，其中，

控制单元

在用于记录的图像的曝光处理和帧存储器中的用于记录的图像的存储处理结束之后，切换显示单元的显示图像以从用于显示的图像到用于记录的图像的显示。

(4)根据(1)至(3)中任一项所述的成像装置，其中，

控制单元

在图像捕获操作的输入检测时开始用于记录的图像的曝光准备处理，并且停止用于显示的图像在成像元件中的曝光处理。

(5)根据(1)至(4)中任一项所述的成像装置，其中，

控制单元

在图像捕获操作的输入检测时，执行等待成像元件中曝光的用于显示的图像完成曝光所需的时间的等待处理，并且在完成等待之后开始用于记录的图像的曝光准备处理，以及

执行显示控制以在显示单元上显示在等待处理期间已经曝光并且已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

(6)根据(1)至(5)中任一项所述的成像装置，其中，

控制单元

执行从图像捕获操作的输入检测时间开始等待完成用于显示的一个图像帧的曝光处理所需的时间的等待处理，并且在等待处理之后开始用于记录的图像的曝光准备处理，以及

执行显示控制以使显示单元显示在等待处理期间已经曝光并且已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

(7)根据(1)至(6)中任一项所述的成像装置，其中，

控制单元

响应于图像捕获操作的输入检测，执行取消在输入图像捕获操作之前已经被执行的最新显示预约处理的处理，以及

执行显示控制，以通过继续对于显示单元的对应于在要取消的显示预约处理之前的显示预约处理执行的用于显示的图像的显示处理，直到能够显示用于记录的图像来避免显示单元的黑视。

(8)根据(1)至(7)中任一项所述的成像装置，其中，

帧存储器包括能够存储两个图像帧的两个帧存储器，以及

控制单元

响应于图像捕获操作的输入检测，执行将两个帧存储器之一中存储的用于显示的最新图像复制并存储在另一个帧存储器中的处理，以及

执行显示控制，以通过交替地从两个帧存储器读取用于显示的相同图像并在显示单元上显示该用于显示的图像，直到能够显示用于记录的图像来避免显示单元的黑视。

(9)根据(1)至(8)中任一项所述的成像装置，其中，

控制单元

确定响应于图像捕获操作在成像元件中执行的曝光时段是否大于或等于预先设置的阈值，以及

执行显示控制，以在确定曝光时段不大于或等于阈值的情况下，避免显示单元的黑视。

(10)根据(1)至(9)中任一项所述的成像装置，其中，

控制单元

确定响应于图像捕获操作在成像元件中执行的曝光时段是否大于或等于预先设置的阈值，以及

执行显示控制，以在确定曝光时段大于或等于阈值的情况下，在显示单元上产生黑视而不避免黑视。

(11)根据(10)所述的成像装置，其中

控制单元

在用于记录的图像的曝光处理和帧存储器存储处理结束之后，切换显示单元以从黑视状态到用于记录的图像的显示。

(12)根据(1)至(11)中任一项所述的成像装置，其中，

成像元件被包括在成像器件中，所述成像器件包括以下作为构成元件：

AD转换单元，对成像元件的输出信号执行AD转换处理，以及

帧存储器，存储由AD转换单元生成的数字信号。

(13)一种在成像装置中执行的图像处理方法，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

图像处理方法包括：

由控制单元响应于图像捕获操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器单元中的用于显示的图像直到能够显示用于记录的图像。

(14)一种使成像装置执行图像处理的程序，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

程序使控制单元：

响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

此外，说明书中描述的一系列处理步骤可以由硬件、软件或两者的组合来执行。在由软件执行处理的情况下，可以在包含在专用硬件中的计算机中的存储器中安装和执行记录处理序列的程序，或者在能够执行各种类型的处理的通用计算机中安装和执行程序。例如，程序可以被预先记录在记录介质中。除了从记录介质安装到计算机之外，程序还可以经由诸如局域网(LAN)或互联网之类的网络接收，以及被安装在诸如内置硬盘之类的记录介质中。

注意的是，说明书中描述的各种类型的处理不仅根据描述按时间顺序执行，而且可以取决于执行处理的设备的处理能力或取决于需要并行或单独执行。此外，在本说明书中，术语“系统”是多个设备的逻辑组配置，以及不限于每个配置的设备在同一外壳中的配置。

工业适用性

如上所述，根据本公开的实施例的配置，实现了执行显示控制以避免在捕获用于记录的图像时显示单元的黑视的装置和方法。

具体而言，例如，该装置包括成像元件、帧存储器、显示单元和控制单元，并且控制单元响应于成像装置上的图像捕获操作的输入检测，开始用于记录的图像的曝光准备处理，并且在完成曝光准备处理之后，执行成像元件中的用于记录的图像的曝光处理和帧存储器中的用于记录的图像的存储处理。此外，控制单元在曝光准备处理开始时停止成像元件的用于显示的图像的曝光，并且在显示单元上显示用于显示的图像，直到能够显示用于记录的图像，以避免黑视。

利用这些处理，实现了执行显示控制以避免在捕获用于记录的图像时显示单元的黑视的装置和方法。

参考符号列表

11 光学透镜

12 成像元件

13 AD转换单元

14 帧存储器

15 信号处理单元

16 存储器

21 显示单元

22 记录单元

101 光学透镜

102 成像元件

103 AD转换单元

104 帧存储器

105 信号处理单元

106 存储器

107 显示单元

108 记录单元

109 操作单元

110 控制单元

121 第一帧存储器(FM1)

122 第二帧存储器(FM2)

200 成像装置

210 成像器件

211 成像元件

212 AD转换单元

213 帧存储器

251 第一帧存储器(FM1)

252 第二帧存储器(FM2)

Claims (14)

1.一种成像装置，包括：

成像元件；

帧存储器，存储由成像元件获取的用于显示的图像；

显示单元，显示由帧存储器存储的用于显示的图像；以及

控制单元，响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

2.根据权利要求1所述的成像装置，其中，控制单元在完成用于记录的图像的曝光准备处理之后，执行成像元件中的用于记录的图像的曝光处理和帧存储器中的通过曝光处理获取的用于记录的图像的存储处理。

3.根据权利要求2所述的成像装置，其中，

控制单元在用于记录的图像的曝光处理和帧存储器中的用于记录的图像的存储处理结束之后，切换显示单元的显示图像以从用于显示的图像到用于记录的图像的显示。

4.根据权利要求1所述的成像装置，其中，

控制单元在图像捕获操作的输入检测时开始用于记录的图像的曝光准备处理，并且停止用于显示的图像在成像元件中的曝光处理。

5.根据权利要求1所述的成像装置，其中，

控制单元在图像捕获操作的输入检测时，执行等待成像元件中曝光的用于显示的图像完成曝光所需的时间的等待处理，并且在完成等待之后开始用于记录的图像的曝光准备处理，以及

执行显示控制以在显示单元上显示在等待处理期间已经曝光并且已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

6.根据权利要求1所述的成像装置，其中，

控制单元执行从图像捕获操作的输入检测时间开始等待完成用于显示的一个图像帧的曝光处理所需的时间的等待处理，并且在等待处理之后开始用于记录的图像的曝光准备处理，以及

执行显示控制以使显示单元显示在等待处理期间已经曝光并且已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。

7.根据权利要求1所述的成像装置，其中，

控制单元响应于图像捕获操作的输入检测，执行取消在输入图像捕获操作之前已经被执行的最新显示预约处理的处理，以及

执行显示控制，以通过继续对于显示单元的对应于在要取消的显示预约处理之前的显示预约处理执行的用于显示的图像的显示处理，直到能够显示用于记录的图像来避免显示单元的黑视。

8.根据权利要求1所述的成像装置，其中，

帧存储器包括能够存储两个图像帧的两个帧存储器，以及

控制单元

响应于图像捕获操作的输入检测，执行将两个帧存储器之一中存储的用于显示的最新图像复制并存储在另一个帧存储器中的处理，以及

执行显示控制，以通过交替地从两个帧存储器读取用于显示的相同图像并在显示单元上显示该用于显示的图像，直到能够显示用于记录的图像来避免显示单元的黑视。

9.根据权利要求1所述的成像装置，其中，

控制单元

确定响应于图像捕获操作在成像元件中执行的曝光时段是否大于或等于预先设置的阈值，并且

执行显示控制，以在确定曝光时段不大于或等于阈值的情况下，避免显示单元的黑视。

10.根据权利要求9所述的成像装置，其中，

控制单元

确定响应于图像捕获操作在成像元件中执行的曝光时段是否大于或等于预先设置的阈值，以及

执行显示控制，以在确定曝光时段大于或等于阈值的情况下，在显示单元上产生黑视。

11.根据权利要求10所述的成像装置，其中，

控制单元在用于记录的图像的曝光处理和帧存储器存储处理结束之后，切换显示单元以从黑视状态到用于记录的图像的显示。

12.根据权利要求1所述的成像装置，其中，

成像元件被包括在成像器件中，所述成像器件包括以下内容作为构成元件：

AD转换单元，对成像元件的输出信号执行AD转换处理，以及

帧存储器，存储由AD转换单元生成的数字信号。

13.一种要在成像装置中执行的图像处理方法，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

图像处理方法包括：

由控制单元响应于图像捕获操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像直到能够显示用于记录的图像。

14.一种使成像装置执行图像处理的程序，

成像装置包括：

成像元件，

帧存储器，存储由成像元件获取的图像，

显示单元，显示帧存储器存储的图像，以及

控制单元，执行要在成像装置中执行的处理的控制，

程序使控制单元：

响应于成像操作的输入检测，开始用于记录的图像的曝光准备处理，并且执行显示控制以使显示单元显示已经存储在帧存储器中的用于显示的图像，直到能够显示用于记录的图像。