CN101563914A

CN101563914A - 具有变焦功能的运动画面拍摄装置、图像处理和显示方法及程序

Info

Publication number: CN101563914A
Application number: CNA2007800443953A
Authority: CN
Inventors: 挂樋佐纪子
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2006-11-28
Filing date: 2007-10-30
Publication date: 2009-10-21
Also published as: US20100026848A1; EP2099213A1; EP2099213A4; JP5212110B2; WO2008065843A1; JPWO2008065843A1

Abstract

本发明提供了用于以低成本实现使用户不会感觉到异常图像的图像显示的具有变焦功能的运动画面拍摄装置、运动画面图像处理和显示方法及程序。在异常图像排出时段期间，相机输出数据被设置为全“0”，由此将作为黑图像数据的数据经由相机数据缓冲器(13)输出到运动画面处理单元(15)和显示数据缓冲器(16)。对输入到运动画面处理单元(15)中的黑画面编码。在异常帧传输时段期间，输入到显示数据缓冲器(16)的图像数据不输出到显示单元(14)；在正常图像被恢复之后，保持在显示数据缓冲器中的数据被连续地高速传送显示单元(14)以对最近的数据进行改写，由此绘制用户不会感觉到异常图像的图像。

Description

具有变焦功能的运动画面拍摄装置、图像处理和显示方法及程序

技术领域

本发明涉及具有变焦功能的运动画面拍摄装置、运动画面图像处理和显示方法以及程序，具体涉及在安装有变焦功能的拍摄装置中处理变焦改变处理时发生的异常图像的处理技术。

背景技术

近年来，包括诸如CCD相机之类的相机功能的便携式通信终端已广泛应用。它们中的一些不仅包括光学变焦功能而且包括数码变焦功能(例如，专利文献1)。

关于这一点，当在运动画面拍摄操作期间改变数码变焦时，在变焦改变期间的某个时段中发生了异常图像。对于运动画面拍摄操作期间的这种变焦改变处理，布置了一种大容量缓冲器来保存若干秒的多个帧以执行处理，其中，当发生异常图像时，跳过异常图像以减少每秒钟显示的图像数目，由此不显示异常图像。

专利文献1：日本专利特开第2006-157191号公报。

发明内容

发明解决的问题

然而，在上述传统技术中，由于需要能够存储图像数据的多个帧的大容量缓冲器，因此，难以以低成本对其进行实现。

在这种情形中，本发明是考虑到上述问题而设计的，并且提供用于以低成本实现使用户不会感觉到异常图像的图像显示的具有变焦功能的运动画面拍摄装置、运动画面图像处理和显示方法及程序。

解决问题的手段

本发明的一个示例性方面是具有变焦功能的第一运动画面拍摄装置，其包括显示控制装置，该显示控制装置用于在由于变焦改变处理而发生图像异常时显示紧挨在异常发生之前的帧的图像数据直到图像异常被恢复为止。

本发明的一个示例性方面是根据本发明的具有变焦功能的第一运动画面拍摄装置的具有变焦功能的第二运动画面拍摄装置，其中，显示控制装置在从变焦改变处理开始到变焦改变处理终止的时间中显示在变焦改变处理开始之前从相机输出的帧的图像数据。

本发明的一个示例性方面是根据本发明的第二运动画面拍摄装置的具有变焦功能的第三运动画面拍摄装置，其包括替代图像创建装置，该替代图像创建装置用于在从变焦改变处理开始到变焦改变处理终止的时间中创建用于替代从相机输出的图像数据的替代图像数据。

本发明的一个示例性方面是根据本发明的具有变焦功能的第三运动画面拍摄装置的具有变焦功能的第四运动画面拍摄装置，其包括图像处理装置，该图像处理装置用于对替代图像数据或从相机输出的图像数据进行图像处理。

本发明的一个示例性方面是根据本发明的具有变焦功能的第四运动画面拍摄装置的具有变焦功能的第五运动画面拍摄装置，其中，替代图像数据或者在图像异常发生时或者在从变焦改变处理开始到变焦改变处理终止的时间中从相机输出的图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

本发明的一个示例性方面是在变焦改变处理中的第一运动画面图像处理和显示方法，包括：在由于变焦改变处理而发生图像异常时，显示紧挨在异常发生之前的帧的图像数据直到图像被恢复为止。

本发明的一个示例性方面是根据本发明的第一运动画面图像处理和显示方法的第二运动画面图像处理和显示方法，包括：在从变焦改变处理开始到变焦改变处理终止的时间中，显示在变焦改变处理开始之前从相机输出的帧的图像数据，并且对从相机输出的图像数据执行图像处理。

本发明的一个示例性方面是根据本发明的第一运动画面图像处理和显示方法的第三运动画面图像处理和显示方法，包括：在从变焦改变处理开始到变焦改变处理终止的时间中，创建用于替代从相机输出的图像数据的替代图像数据；在从变焦改变处理开始到变焦改变处理终止的时间中，显示在变焦改变处理开始之前从相机输出的帧的图像数据；以及在从变焦改变处理开始到变焦改变处理终止的时间中对替代图像数据执行图像处理。

本发明的一个示例性方面是根据本发明的第二运动画面图像处理和显示方法的第四运动画面图像处理和显示方法，其中，在图像异常发生时或者在从变焦改变处理开始到变焦改变处理终止的时间中从相机输出的图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

本发明的一个示例性方面是根据本发明的第三运动画面图像处理和显示方法的第五运动画面图像处理和显示方法，其中，在图像异常发生时或者在从变焦改变处理开始到变焦改变处理终止的时间中从相机输出的替代图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

本发明的一个示例性方面是本发明的第一程序，本发明的第一程序是在变焦改变处理中用于运动画面图像处理和显示处理的程序，所述程序使得信息处理装置执行用于在由于变焦改变处理而发生图像异常时，显示紧挨在异常发生之前的帧的图像直到图像被恢复为止的处理。

本发明的一个示例性方面是根据本发明的第一程序的第二程序，该第二程序使得信息处理装置执行：用于在从变焦改变处理开始到变焦改变处理终止的时间中，显示在变焦改变处理开始之前从相机输出的帧的图像数据的处理；以及用于对从相机输出的图像数据执行图像处理的处理。

本发明的一个示例性方面是根据本发明的第一程序的第三程序，该第三程序使得信息处理装置执行：用于在从变焦改变处理开始到变焦改变处理终止的时间中，创建用于替代从相机输出的图像数据的替代图像数据的处理；用于在从变焦改变处理开始到变焦改变处理终止的时间中，显示在变焦改变处理开始之前从相机输出的帧的图像数据的处理；以及用于在从变焦改变处理开始到变焦改变处理终止的时间中对替代图像数据执行图像处理的处理。

本发明的一个示例性方面是根据本发明的第二程序的第四程序，其中，在图像异常发生时或者在从变焦改变处理开始到变焦改变处理终止的时间中从相机输出的图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

本发明的一个示例性方面是根据本发明的第三程序的第五程序，其中，在图像异常发生时或者在从变焦改变处理开始到变焦改变处理终止的时间中从相机输出的替代图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

即，本发明的特征在于，在由拍摄装置拍摄运动画面的操作中，例如，在利用例如数码变焦的变焦改变操作中，当在变焦改变期间从相机排出(eject)异常图像的若干帧时，对显示数据和视频编码数据执行相应处理。

当排出异常图像时，在显示单元中不进行数据更新并且显示被停止在异常图像之前的正常图像处，由此不将异常图像显示在显示单元上。在异常图像排出时段期间，如果相机输出数据被设置为全“0”，则该数据作为黑图像数据经由相机数据缓冲器被传送到运动画面处理单元和显示数据缓冲器。输入到运动画面处理单元的黑画面的图像数据被编码。输入到显示数据缓冲器的黑画面的图像数据在异常帧传输时段期间不馈送到显示单元；在正常图像被恢复之后，存储在显示数据缓冲器中的数据连续地被高速传送到显示单元以对最近的数据进行改写(overwrite)，由此绘制用户不会感觉到异常图像的图像。

如上，根据本发明，提供了在拍摄操作期间防止用户感觉到在变焦改变时排出的异常图像的技术。

本发明的优点

如上所述，在本发明中，获得了如下所述的优点。

根据第一优点，在运动画面拍摄期间的变焦改变时不能防止异常画面发生的相机中，异常图像数据被黑画面数据取代以创建不包括任何异常画面的视频数据，并且显示单元在变焦改变处理时段期间同时暂停图像更新以只显示正常图像数据；无需提供任何硬件，可以在变焦改变时处理视频记录数据和显示数据而不在其中反映异常数据；结果，用户不会感觉到异常图像。

根据第二优点，由于不需要内插异常图像的处理电路并且不需要布置大容量缓冲器，因此，可以以低成本构建系统。

附图说明

图1是示出根据本发明示例性实施例的作为便携式终端的蜂窝电话的结构的主要部分的示图，该便携式终端包括具有变焦功能的运动画面拍摄装置。

图2是根据第一示例性实施例的在蜂窝电话中的视频记录期间在变焦改变处理中的显示图像的处理的操作流程图。

图3是根据第一示例性实施例的在蜂窝电话中的视频记录期间在变焦改变处理中的运动画面处理的操作流程图。

图4是说明在变焦改变处理期间在异常图像前后的并且包括异常图像在内的七个图像帧时段期间的处理的示图。

图5是根据第二示例性实施例的在蜂窝电话中的视频记录期间在变焦改变时的显示图像处理和运动画面处理的操作流程图。

具体实施方式

将给出对本发明的示例性实施例的描述。

图1示出了根据本发明示例性实施例的作为便携式终端的蜂窝电话的结构的主要部分，该便携式终端包括具有变焦功能的运动画面拍摄装置。

在图1中，蜂窝电话包括含有摄像元件的相机单元10、在运动画面拍摄时供用户输入变焦改变处理的键操作单元11、控制各个单元的CPU12、存储图像数据的相机数据缓冲器13、显示拍摄图像的显示单元14、对从相机数据缓冲器13发送来的图像数据执行编码处理以产生视频数据的运动画面处理单元15，以及存储将在显示单元14上显示的图像数据的显示数据缓冲器16。

将给出对上面的配置中的数据、控制和流程的描述。

由相机单元10拍摄的图像数据被馈送到相机数据缓冲器13(D1)以临时保存在其中。并且从相机数据缓冲器13递送来的图像数据作为显示数据被输入到显示数据缓冲器16以临时保持在其中(D2)。而且，从相机数据缓冲器13馈送来的图像数据被输入到运动画面处理单元15(D3)并且在运动画面处理单元15中经过编码处理。关于这一点，相机单元10在发生异常图像时输出所有数据值都为零的黑图像的图像数据。

另一方面，当从键操作单元11输入变焦改变处理时(I1)，CPU 12向数据缓冲器16输出暂停从显示数据缓冲器16到显示单元14的数据输出的指令(I2)。此外，停止了显示单元14中的数据更新(I3)。

接下来，将给出对如上所述那样配置的本发明的操作的描述。

首先，将给出对视频记录期间的变焦改变时的显示图像的处理操作的描述。

图2是根据第一示例性实施例的在蜂窝电话中的视频记录期间在变焦改变处理中对显示图像的处理操作的流程图。顺便提及，在下面的描述中，假设在运动画面拍摄时按下变焦改变键之后的变焦改变处理中的异常图像排出时段被预先测量并因此是已知的，并且时间被预先存储在在CPU下操作的计时器中。

当在运动画面拍摄期间按下变焦改变键时(步骤100)，CPU 12命令显示单元14停止更新显示图像(步骤101)。在更新停止之后，对输出异常图像的时段进行测量的计时器开始测量(步骤102)。

相机单元10响应于来自CPU 12的指令执行变焦改变处理(步骤103)。相机在处理期间输出数据值为“0”的黑图像的图像数据(步骤104)，并且数据被输入到相机数据缓冲器13(步骤S105)。

输入到相机数据缓冲器13的黑图像的图像数据被输出到显示数据缓冲器16以保存在其中(步骤106)；显示图像数据保持在显示数据缓冲器16中直到异常图像排出时段终止为止；在显示单元14中，不更新图像数据并且显示先前的图像数据的图像(步骤107)。

当由计时器测得的时间表示异常图像排出时间时(步骤108)，在显示单元14中重新开始数据更新(步骤109)，并且保持在显示数据缓冲器16中的最近的图像数据连续地被传送以改写最近的数据(步骤110)。并且显示单元14显示从显示数据缓冲器16传送来的图像数据(步骤111)。

随后，将给出对在视频记录期间在变焦改变处理中的运动画面处理(视频编码)的操作的描述。

图3是根据第一示例性实施例的在蜂窝电话中的视频记录期间在变焦改变处理中的运动画面处理的操作流程图。顺便提及，在下面的描述中，与视频记录期间的变焦改变处理中的显示图像的处理相同的处理将被指定相同的步骤编号，并且略过对其的详细描述。

首先，以下操作是类似的：从在运动画面拍摄期间按下变焦改变键(步骤100)到将图像数据的值为“0”的黑图像的图像数据输入到相机数据缓冲器13(步骤105)。

输入到相机数据缓冲器13的黑图像的图像数据被输入到运动画面处理单元15(步骤200)。并且在运动画面处理单元15中，使黑图像的图像数据经过视频编码处理(步骤201)。

直到由计时器测得的时间表示异常图像排出时间为止(步骤108)，运动画面处理单元15对黑图像的图像数据执行视频编码处理，并且在异常图像排出时段终止之后对正常图像数据执行视频编码处理(步骤202)。

通过执行上面的处理，不包含异常图像的视频数据被创建，并且同时，显示单元在变焦改变处理时段期间停止图像更新以只显示正常图像数据，由此防止用户感觉到异常图像。

顺便提及，在上述示例性实施例中，通过对变焦改变键的按压来触发对变焦改变处理的开始的检测，然而，这不是限制性的；这样也是可能的：异常图像的排出或黑图像的图像数据的排出被检测，并且该检测被用作对处理开始的触发。

另外，在上述示例性实施例中，通过对帧数进行计数来检测变焦改变处理的结束，然而，这不是限制性的；这样也是可能的：异常图像的排出或黑图像的图像数据的排出的结束被检测，并且该检测被用作对处理结束的触发。

另外，在上述示例性实施例中，使用黑图像的图像数据来代替异常图像，然而，这不是限制性的；也可以使用数据值为“1”的白图像的图像数据。

接下来，将通过参考具体示例描述根据本发明从变焦改变处理的开始到其结束的操作。

图4是说明在变焦改变处理期间在异常图像前后的并且包括异常图像在内的七个图像帧时段期间的处理的示图。在下面的描述中，用于变焦改变处理的时段为按下变焦改变键时开始的两个帧。在图4中，“NG”表示异常帧，“B”为黑图像帧，“n(n是整数)”表示正常帧。

首先，在第一、第二和第三帧时段期间，相机单元10输出正常图像。正常图像被编码，并且正常图像还显示在显示单元14上。

这里，在相机单元10输出正常图像之后，当在第四帧时段中从键操作单元11输入变焦改变处理时，计时器开始测量。另一方面，由于相机单元10需要两帧的时段用于变焦改变处理，因此，在第四和第五帧时段期间其中的数据是异常图像，并且相机单元10输出数据值为“0”的黑图像的图像数据。

在运动画面处理单元15中，从相机单元10输出的黑图像的图像数据在第四和第五帧时段期间被编码。另一方面，在显示单元14中，在第四和第五帧时段期间，响应于来自CPU 12的指令，使显示数据停在先前的第三帧的正常图像处，并且来自相机数据缓冲器13的输出数据被保持在显示数据缓冲器16中。

当通过计时器测量计数了两帧时，变焦改变处理终止；在第六和第七帧时段期间，相机单元10输出正常图像的图像数据。

在输出正常图像数据的第六帧时段期间，显示单元14重新开始数据更新并且对保持在显示数据缓冲器16中的第六帧的最近图像数据进行改写操作以显示第六帧的图像数据的图像。另一方面，运动画面处理单元15对第六和第七帧的正常图像数据进行编码。

将描述第二示例性实施例。

第二示例性实施例在其基本配置方面与上述第一示例性实施例类似；然而，在相机单元10中，设置了应对异常图像不能被黑图像的图像数据取代的情况的装置。

在相机单元10中，当异常图像不能被黑图像的图像数据取代时，在变焦改变处理时段期间，对从相机数据缓冲器13输出并输入到运动画面处理单元15的图像数据执行处理，以将图像数据的值转换为“0”从而产生黑图像的图像数据，并且使黑图像的图像数据经过运动画面处理。对于黑图像的图像数据的转换，可以由运动画面处理单元15来进行，或者进行到黑图像的转换的转换单元可以被布置作为运动画面处理单元15前面的一级。此外，转换处理可以由软件或硬件来执行。

接下来，将给出对第二示例性实施例中的操作的描述。

图5是根据第二示例性实施例的在蜂窝电话中的视频记录期间在变焦改变时的显示图像处理和运动画面处理的操作流程图。在下面的描述中，与第一示例性实施例相同的处理将被指定相同的步骤编号，并且略过对其的详细描述。

在变焦改变处理中，如果从相机数据缓冲器13输出的图像数据是将由运动画面处理单元15处理的编码数据(步骤300和200)，则运动画面处理单元15将从相机数据缓冲器13输出的图像数据的数据值转换为零(步骤301)，并且随后进行视频编码(步骤201)。

另一方面，在变焦改变处理中，如果从相机数据缓冲器13输出的图像数据被输入到显示数据缓冲器16(步骤300和106)，则输入到相机数据缓冲器13的图像数据被输出到显示数据缓冲器16以保持在其中；显示图像数据被保持在显示数据缓冲器16中，直到异常图像排出时段终止为止；在显示单元14中，不更新图像数据并且显示先前的图像数据(步骤107)。

当由计时器测得的时间表示异常图像排出时间时(步骤108)，在显示单元14中重新开始数据更新(步骤109)并且保持在显示数据缓冲器16中的最近的图像数据被连续地传送到显示单元14以对最近的数据进行改写(步骤110)。并且显示单元14显示从显示数据缓冲器16传送来的图像数据(步骤111)。

如上，根据第二示例性实施例，即使在相机单元中异常画面不能被黑图像的图像数据取代，也可以获得与第一示例性实施例类似的优点。

如上，虽然给出了对本发明的示例性实施例的描述，然而，本发明不受示例性实施例的限制，并且可以在本发明的主旨的范围内以各种方式修改示例性实施例。

例如，上述示例性实施例中的控制操作可由硬件、软件或者它们两者的复合配置来执行。如果处理由软件执行，则如下情况是可能的：存储有处理序列的程序被安装在包括在专用硬件中的计算机的存储器中并且被执行，或者，程序被安装在能够执行各种处理的通用计算机中并且被执行。

这种程序可被预先记录在作为记录介质的硬盘或只读存储器(ROM)中。或者，程序可以临时地或永久地存储(记录)在可移除记录介质中，例如，软(Floppy，注册商标)盘、致密盘只读存储器(CD-ROM)、磁光(MO)盘、数字通用盘(DVD)、磁盘或者半导体存储器。这种可移除记录介质可以被提供作为所谓的软件包。在这点上，可以将程序从上述可移除介质安装到计算机中；而且，程序可以经由局域网(LAN)或因特网之类的网络通过无线电从下载站点传送到计算机或者通过线路传送到计算机中，并且传送来的程序可以由计算机接收以便安装在诸如包括在计算机中的硬盘之类的记录介质中。

此外，还可以采用如下配置：根据结合上述示例性实施例描述的处理操作以时序方式来执行处理的配置；以及根据执行处理的装置的处理能力或根据需要以并行或单独的方式来执行处理的配置。

另外，针对上述示例性实施例描述的并且包括发送侧媒体通信装置和接收侧媒体通信装置的媒体通信系统可以以如下结构来构建：包括多个装置的逻辑聚合结构或者包括各个装置的功能的混合结构。

本申请基于2006年11月28日提交的日本专利申请No.2006-319506并要求其优先权，该申请的公开内容通过引用被整体结合于此。

标号说明

10相机单元

11键操作单元

12CPU

13相机数据缓冲器

14显示单元

15运动画面处理单元

16显示数据缓冲器

Claims

1.一种具有变焦功能的运动画面拍摄装置，包括：

显示控制装置，用于在由于变焦改变处理而发生图像异常时显示紧挨在异常发生之前的帧的图像数据直到图像异常被恢复为止。

2.根据权利要求1所述的具有变焦功能的运动画面拍摄装置，其中，所述显示控制装置在从所述变焦改变处理开始到所述变焦改变处理终止的时间中显示在所述变焦改变处理开始之前从相机输出的帧的图像数据。

3.根据权利要求2所述的具有变焦功能的运动画面拍摄装置，包括替代图像创建装置，该替代图像创建装置用于在从所述变焦改变处理开始到所述变焦改变处理终止的时间中创建用于替代从所述相机输出的图像数据的替代图像数据。

4.根据权利要求3所述的具有变焦功能的运动画面拍摄装置，包括图像处理装置，该图像处理装置用于对所述替代图像数据或者从所述相机输出的图像数据进行图像处理。

5.根据权利要求4所述的具有变焦功能的运动画面拍摄装置，其中，在所述图像异常发生时或者在从所述变焦改变处理开始到所述变焦改变处理终止的时间中从所述相机输出的图像数据或者所述替代图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

6.一种在变焦改变处理中的运动画面图像处理和显示方法，包括

在由于变焦改变处理而发生图像异常时，显示紧挨在异常发生之前的帧的图像数据直到图像被恢复为止。

7.根据权利要求6所述的运动画面图像处理和显示方法，包括：

在从所述变焦改变处理开始到所述变焦改变处理终止的时间中，显示在所述变焦改变处理开始之前从相机输出的帧的图像数据；以及

对从所述相机输出的图像数据执行图像处理。

8.根据权利要求6所述的运动画面图像处理和显示方法，包括：

在从所述变焦改变处理开始到所述变焦改变处理终止的时间中，创建用于替代从所述相机输出的图像数据的替代图像数据；

从所述变焦改变处理开始到所述变焦改变处理终止的时间中，对所述替代图像数据执行图像处理。

9.根据权利要求7所述的运动画面图像处理和显示方法，其中，在所述图像异常发生时或者在从所述变焦改变处理开始到所述变焦改变处理终止的时间中从所述相机输出的图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

10.根据权利要求8所述的运动画面图像处理和显示方法，其中，在所述图像异常发生时或者在从所述变焦改变处理开始到所述变焦改变处理终止的时间中从所述相机输出的所述替代图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

11.一种在变焦改变处理中用于运动画面图像处理和显示处理的程序，所述程序使得信息处理装置执行用于在由于变焦改变处理而发生图像异常时，显示紧挨在异常发生之前的帧的图像直到图像被恢复为止的处理。

12.根据权利要求11所述的用于运动画面图像处理和显示处理的程序，所述程序使得信息处理装置执行：

用于在从所述变焦改变处理开始到所述变焦改变处理终止的时间中，显示在所述变焦改变处理开始之前从相机输出的帧的图像数据的处理；以及

用于对从所述相机输出的图像数据执行图像处理的处理。

13.根据权利要求11所述的用于运动画面图像处理和显示处理的程序，所述程序使得信息处理装置执行：

用于在从所述变焦改变处理开始到所述变焦改变处理终止的时间中，创建用于替代从所述相机输出的图像数据的替代图像数据的处理；

用于在从所述变焦改变处理开始到所述变焦改变处理终止的时间中对所述替代图像数据执行图像处理的处理。

14.根据权利要求12所述的用于运动画面图像处理和显示处理的程序，其中，在所述图像异常发生时或者在从所述变焦改变处理开始到所述变焦改变处理终止的时间中从所述相机输出的图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。

15.根据权利要求13所述的用于运动画面图像处理和显示处理的程序，其中，在所述图像异常发生时或者在从所述变焦改变处理开始到所述变焦改变处理终止的时间中从所述相机输出的所述替代图像数据是数据值为零的黑图像的数据或者是数据值为一的白图像的数据。