CN100591113C - 图像处理装置 - Google Patents

Abstract

提供了一种能够调整到最佳比特率的图像处理装置。在平均比特率小于目标比特率的情况下，移动通信终端(1)在编码参数管理器(10)的内部寄存器中设定一个高图像质量的编码参数，从而增加比特率。在平均比特率大于目标比特率的情况下，移动通信终端(1)在编码参数管理器(10)的内部寄存器中设定一个低图像质量的编码参数，从而降低比特率。因此，移动通信终端(1)能够以最佳比特率，对YUV数据进行编码。

Description

图像处理装置

技术领域

本发明涉及一种图像处理装置，尤其涉及一种用于调整比特率的图像处理装置。

背景技术

便携式电话等移动通信终端，具有作为电话进行通信的功能以及收发电子邮件的功能。此外，近年成为主流的移动通信终端，还具有拍摄静态图像和运动图像的照相机功能。通过照相机功能摄影的运动图像的图像数据是以固定比特率进行编码的，并且存储在存储卡等存储介质中，例如，日本特开2003-32629号公报披露了这一点。

因此，如果拍摄对象的运动量很大，就会出现一个问题：由于比特数量少于所需，所以，无法获得画质好的运动图像。但是，如果为了防止该问题而把比特率设得太高，这又会由于CPU(中央处理单元)的处理负载增加而导致帧丢弃的问题。此外，如果把比特率设得太高，还会出现存储介质只能存储少量数据的问题。

发明内容

本发明是鉴于上述情况而做出的，并且，本发明的目的是提供一种能够调整到最佳比特率的图像处理装置。

为了实现以上目的，根据本发明的图像处理装置的特征为，包括：

编码数据生成单元，其通过根据预定参数对图像数据进行编码，生成编码数据；以及

参数调整单元，其基于由所述编码数据生成单元生成的编码数据的比特率，调整所述预定参数；以及

所述参数调整单元包括：

比特率计算单元，其根据由所述编码数据生成单元在预定期间生成的编码数据的量，计算所述预定期间的平均比特率；

比特率判断单元，其判断由所述比特率计算单元计算出来的平均比特率是否大于预定门限；以及

比特率改变单元，其基于所述比特率判断单元的判断结果，通过调整所述预定参数，使所述平均比特率接近所述预定门限，

所述参数调整单元响应于被指示了运动图像的摄影，而开始调整所述预定参数，以及，响应于开始了运动图像的摄影，而结束调整所述预定参数。

并且，在以上描述的图像处理装置中也可以，

在所述比特率判断单元判断为平均比特率大于预定门限的情况下，所述比特率改变单元将所述预定参数重新设定为与当前设定参数相比比特率低的参数，使比特率降低，以及，在所述平均比特率小于预定门限的情况下，所述比特率改变单元将所述预定参数重新设定为与当前设定参数相比比特率高的参数，使比特率提高。

并且，在以上描述的图像处理装置中也可以，

所述比特率判断单元可以包括：

第一比特率判断单元，其判断由所述比特率计算单元计算出来的所述平均比特率是否大于预定第一门限；以及

第二比特率判断单元，其判断由所述比特率计算单元计算出来的所述平均比特率是否小于预定第二门限，所述预定第二门限小于所述预定第一门限，

在所述第一比特率判断单元判断为平均比特率大于所述预定第一门限的情况下，所述比特率改变单元将所述预定参数重新设定为与当前设定参数相比比特率低的参数，使比特率降低，

在所述第二比特率判断单元判断为平均比特率小于所述预定第二门限的情况下，所述比特率改变单元将所述预定参数重新设定为与当前设定参数相比比特率高的参数，使比特率提高。

并且，在以上描述的图像处理装置中也可以，

所述编码数据生成单元可以包括使用参数存储单元，其设定了用于生成编码数据所要采用的预定参数；

所述参数调整单元可以包括分级参数存储单元，其存储了多个预定参数，当对图像数据进行编码时，所述多个预定参数将会实现彼此不同的比特率；以及

在所述第一比特率判断单元判断为平均比特率大于所述预定第一门限的情况下，所述比特率改变单元可以从所述分级参数存储单元中读取与所述使用参数存储单元中设定的预定参数相比比特率低一级的预定参数，并重新设定到所述使用参数存储单元，

在所述第二比特率判断单元判断为平均比特率小于所述预定第二门限的情况下，所述比特率改变单元可以从所述分级参数存储单元中读取与所述使用参数存储单元中设定的预定参数相比比特率高一级的预定参数，并重新设定到所述使用参数存储单元。

并且，在以上描述的图像处理装置中也可以，

所述参数调整单元响应于被指示了运动图像的摄影，而开始调整所述预定参数，判断是否被指示该动态图像的摄影的开始，重复调整该预定参数，直到判断为被指示该动态图像的摄影的开始，以及，响应于被指示运动图像的摄影的开始这一情况，而结束调整所述预定参数。

并且，在以上描述的图像处理装置中也可以，

在开始运动图像的摄影之后，所述编码数据生成单元可以根据开始定时的所述预定参数，对通过运动图像的摄影而获得的图像数据进行编码。

根据本发明，可以调整到最佳比特率。

附图说明

通过下面的详细描述和附图，本发明的这些和其他目的和优点将变得更加显而易见，在这些附图中：

图1是示出了根据本发明第一实施例的移动通信终端的结构示例的方框图；

图2是表示本发明第一实施例的编码参数表的结构例的图；

图3是示出了根据本发明第一实施例的移动通信终端的编码参数设定处理的流程图；

图4是用于具体说明编码参数设定处理的内容的时序图；

图5是表示本发明第二实施例的编码参数表的结构例的图；

图6和图7是示出了根据本发明第二实施例的移动通信终端的编码参数设定处理的流程图；

图8是表示本发明第三实施例的编码参数表的结构例的图；

图9和图10是示出了根据本发明第三实施例的移动通信终端的编码参数设定处理的流程图。

具体实施方式

以下，详细地说明本发明的最佳实施方式。

首先，说明本发明第一实施例的移动通信终端的具体结构。

根据本实施例的移动通信终端是便携式电话和PHS(PersonalHandyphone System)等所谓用于进行移动通信的终端装置(电话机)。并且，根据本实施例的移动通信终端具有可以通过基站(未显示)进行无线通话和收发电子邮件的功能，以及，具有使用如CCD(ChargeCoupled Device)等摄像元件对静态图像和运动图像进行摄影的照相机功能。此外，本实施例的移动通信终端能够发送和接收附带有摄影的静态图像和运动图像的电子邮件。

图1是示出了根据本发明第一实施例的移动通信终端的结构示例的方框图。

如图1所示，该移动通信终端1包括透镜光学系统2、摄像元件3、A/D(Analog/Digital)转换器4、图像信号处理器5、显示器6、图像缓冲器7、编码/解码处理器8、存储卡连接器9、编码参数管理器10、天线11、无线电单元12、接收单元13、发送单元14、操作单元15、扬声器16L和16R、音频处理器17、扩音器18、音频编码处理器19、中央控制器20、参数存储器101以及编码尺寸计算器102。

透镜光学系统2包括摄像透镜、进行对焦的聚焦透镜、调整入射到摄影元件3的拍摄对象图像光量的光圈机构等。拍摄对象的光学图像(拍摄对象图像)通过透镜光学系统2会聚，成像在摄像元件3上。

摄像元件3是诸如CCD(Charge Coupled Device)之类的元件。摄像元件3将通过透镜光学系统2并成像的拍摄对象图像转换成与该图像亮度相对应的水平的电荷(光电转换)，并进行存储。并且，摄像元件3由定时产生器(未显示)和V(Vertical)驱动器(未显示)进行扫描驱动，将存储的电荷作为摄像信号(模拟信号)输出。

摄像元件3输出的摄像信号，由双重相关采样(CDS：CorrelationDoubleness Sampling)电路(未显示)消除噪音，然后由AGC(Automatic Gain Control)放大器(未显示)将其放大，以及由A/D转换器4将其转换为数字摄像信号。

图像信号处理器5包括色彩处理电路、DMA(Direct MemoryAccess)控制器等。图像信号处理器5在色彩处理电路中将色彩处理实施于从A/D转换器4提供的数字摄像信号，从而产生YUV数据。图像信号处理器5使用DMA控制器，通过DMA方式，将在色彩处理电路中产生的YUV数据传送到图像缓冲器7中的DRAM。

显示器6由例如液晶显示装置(LCD：Liquid Crystal Display)等组成。显示器6基于视频信号，显示直通(through)图像、再生图像等。

例如，图像缓冲器7包括DRAM(Dynamic Random AccessMemory)和VRAM(Video Random Access Memory)。DRAM保存从图像信号处理器5以DMA方式传送的YUV数据，或在编码/解码处理器8中进行YUV数据的编码/解码处理时，作为工作存储器。

并且，当在显示器6上显示图像时，VRAM用作工作存储器。更具体地说，将从图像信号处理器5以DMA方式传送到DRAM的YUV数据、或将由编码/解码处理器8解码的YUV数据等，写入VRAM中。写入VRAM中的YUV数据由中央控制器20定期读取，并且将其转换为视频信号。并且，通过将该视频信号提供给显示器6，由此在显示器6上显示直通图像、再生图像等。

编码/解码处理器8根据在编码参数管理器10中设定的编码参数，将诸如MPEG(Motion Picture Experts Group)-4标准之类的编码(encode)处理，实施于以DMA方式传送到图像缓冲器7中的DRAM的YUV数据。因此，编码/解码处理器8产生静态图像和运动图像的编码数据。

例如，存储卡MC是SD(Secure Digital)存储卡等。多个触脚形成在存储卡MC的前或后表面上。存储卡MC存储由编码/解码处理器8产生的静态图像或运动图像的编码数据。

存储卡连接器9在连接器外壳上具有多个连接端子。通过这些连接端子和在存储卡MC的前或后表面上形成的多个触脚接触，可以在移动通信终端1和存储卡MC之间实现电连接。

编码参数管理器10具有一个内部寄存器(未显示)，其用于设定目标比特率或编码参数，该目标比特率表示移动通信终端1的动画摄影的最佳比特率，该编码参数用于在编码/解码处理器8中进行编码处理。编码参数管理器10与参数存储器101和编码尺寸计算器102相连接。

参数存储器101存储编码参数表，其用于确定动画摄影时的编码参数。

图2是表示编码参数表的结构示例的图。

如图2所示，该编码参数表相关联地记录了图像尺寸、目标比特率以及编码参数。

例如，在该编码参数表中记录了384kbps的比特率，作为与QVGA(Quarter Video Graphics Array)尺寸(320×240像素)相对应的目标比特率，以及，记录了64kbps的比特率，作为与QCIF(Quarter Common Intermediate Format)尺寸(176×144像素)和Sub-QCIF尺寸(128×96像素)相对应的目标比特率。

此外，在该编码参数表中，为每一图像尺寸记录了三种类型的解码参数，即：默认编码参数、高比特率即高图像质量的编码参数以及低比特率即低图像质量的编码参数。

编码参数包括多个参数，如量化级参数、空间滤波参数等。例如，量化级参数表示量化的级尺寸，空间滤波参数表示空间滤波的程度。每一图像质量的编码参数都是基于多个参数的组合而确定的。每一图像质量的编码参数可以是这多个参数中的一个参数。根据移动通信终端1的摄影特征，可以正确地确定每一图像质量的编码参数，并将其记录于编码参数表中。

根据本实施例，为了压缩数据量，以像素数目低的QCIF尺寸或Sub-QCIF尺寸，摄影通过电影电子邮件发送或接收的运动图像。为了提高分辨率，以像素数目高的QVGA尺寸，摄影通过电影电子邮件发送或接收的视频的运动图像。

编码尺寸计算器102统计编码/解码处理器8在预定期间(例如1秒)获得的编码数据的量(比特数目)。由编码尺寸计算器102统计的值用于例如计算比特率。

天线11将外部输入到移动通信终端1的无线电波转换成模拟信号。此外，天线11将发送信号转换成电磁波，并将其辐射到空中。

无线单元12将天线11提供的模拟信号进行下变频，将正交解调处理和A/D(Analog-Digital)转换处理实施于经过下变频的模拟信号，从而产生码率(chip rate)的数字信号，以及将所产生的数字信号提供给接收单元13。此外，无线单元12将A/D(Analog-Digital)转换处理和调制处理实施于由发送单元14提供的传输信号，对实施了这些处理的发送信号进行上变频，并通过天线11将该信号发送给基站。

接收单元13将反向扩频处理和相位校正处理实施于由无线单元12提供的码率的数字信号，从而获得符号速率的音频信号，以及将所获得的音频信号提供给音频处理器17。

发送单元14将误差校正处理、映射到物理信道的处理以及扩频处理实施于由声频编码处理器19提供的传输信号，以及将实施了这些处理的传输信号提供给无线电单元12。

操作单元15包括，例如，十字光标键、用于输入数字和文字的英文数字键、用于指定功能的按钮等。操作单元15由用户进行操作。

扬声器16L和16R输出声音通信中的通话语音或铃声。

声频处理器17将解码处理实施于由接收单元13提供的音频信号，将解码后的音频信号转换成模拟信号，以及将其提供给扬声器16L和16R。因此，例如，通话对象的语音从扬声器16L输出，铃声从扬声器16R输出。

扩音器18输入在电话通话时用户发出的语音。

音频编码处理器19将A/D转换处理和编码处理依次实施于从扩音器18输入的声频输出，从而产生符号速率的传输信号，以及将所产生的传输信号提供给发送单元14。

中央控制器20包括，例如，CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Read Access Memory)等。并且，通过CPU正确地执行ROM等中存储的各种程序，由此中央控制器20控制移动通信终端1的每一个部分的动作。当CPU执行这些程序时，ROM被用作工作存储器。

接下来，说明具有上述结构的移动通信终端1的具体动作。

图3是示出了根据本发明第一实施例的移动通信终端1的编码参数设定处理的流程图。图4是用于具体说明该编码参数设定处理的内容的时序图。

首先，通过参考来自操作单元15的检测信号的输入电平或根据动作中的功能来设定或清除的功能模式标志位，中央控制器20判断功能模式是否通过用户操作被设定为照相机模式(步骤S101)。当功能模式通过用户操作被设定为照相机模式时(步骤S101：是)，中央控制器20在显示器6上显示一个选择画面，以使用户选择“静态图像摄影”或“动画摄影”。

然后，中央控制器20判断是否通过与选择画面的显示相对应的用户操作选择了“动画摄影”(步骤S102)。如果用户操作操作单元15而在选择画面上选择“动画摄影”，然后按下“决定”键等，由此当选择了“动画摄影”(指示了“动画摄影”)时(步骤S102：是)，中央控制器20通过参考根据录像类型而设定或清除的录像模式标志位，确定录像模式是视频模式还是电影电子邮件模式。然后，中央控制器20从存储在参数存储器101中的编码参数表中，获得与确定的录像模式的图像尺寸相对应的目标比特率和编码参数的默认值。

然后，中央控制器20在编码参数管理器10的内部寄存器(未显示)中设定所获得的编码参数默认值(步骤S103)。

更具体地说，当录像模式是视频模式时，设定与QVGA尺寸相对应的编码参数的默认值。当录像模式是电影电子邮件模式时，设定与QCIF尺寸或Sub-QCIF尺寸相对应的编码参数的默认值。

此外，这时，在编码参数管理器10的内部寄存器中也将所获得的目标比特率设定为目标比特率T。

然后，通过参考来自操作单元15的检测信号的输入电平，中央控制器20判断用户是否通过按下录像按钮指示了开始“动画摄影”(步骤S104)。在用户尚未指示开始“动画摄影”(步骤S104：否，图4中M0)的情况下，作为处于监视期间的值，将设在RAM等中的计时器计数值A和编码尺寸计算器102的编码尺寸S设定为初始值“0”(图3中步骤S105)。然后，中央控制器20启动计时器，以累加计数值A(步骤S106)。

然后，中央控制器20取入图像(步骤S107)。具体而言，中央控制器20从摄像元件3中获得1帧量的摄像信号，从而让图像信号处理器5中的色彩处理电路产生1帧量的YUV数据。图像信号处理器5的DMA控制器以DMA方式将YUV数据传送给图像缓冲器7的DRAM。以帧单位重复该处理。

此外，中央控制器20将以DMA方式传送到DRAM中的YUV数据写入VRAM中。中央控制器20定期从VRAM中读取YUW数据，从而产生视频信号，并将所产生的视频信号提供给显示器6。因此，摄像的图像作为直通图像显示在显示器6上(步骤S108)。

此外，中央控制器20从图像缓冲器7中读取YUV数据，以及根据在步骤S103中设定的默认编码参数，在编码解码处理器8中将图像编码处理实施于YUV数据，从而产生编码数据(步骤S109)。然后，中央控制器20将编码尺寸计算器102的存储值加上所产生的编码数据的比特数(编码尺寸)，从而更新编码尺寸S(步骤S110)。

然后，中央控制器20参考计时器的计数值A，并判断该计数值A是否等于或大于预定值(步骤S111)。具体地说，假定该预定值为1秒，则中央控制器20判断在步骤S106中启动计时器之后是否已经超过1秒。在计数值A小于预定值的情况下，例如，在从起始的经过时间没有达到1秒的情况下(步骤S111：否)，返回步骤S106。

此后，当计数值A等于或大于预定值时，例如，当在起始后经过1秒时(步骤S111：是)，中央控制器20将储存在编码尺寸计数器102中的总比特数(编码尺寸S)除以用计数值A表示的经过时间，从而将得到的相除结果作为平均比特率B(步骤S112)。

然后，中央控制器20将所得到的平均比特率B与在编码参数管理器10的内部寄存器中设定的目标比特率T进行比较，来判断平均比特率B是否大于目标比特率T(步骤S113)。

在步骤S113中在判断为平均比特率B不大于目标比特率T的情况下(步骤S113：否，图4中的M1)，作为每单位时间还存在剩余的可编码数据的情况，中央控制器20提高比特率，以改善图像质量。为了该目的，中央控制器20从存储在参数存储器101的编码参数表中读取高图像质量的编码参数，并在编码参数管理器10的内部寄存器中重新设定所读取的编码参数(图3的步骤S114)。因此，编码参数得到了调整，从而使得录像的图像将具有更高的图像质量。

例如，在目标比特率T是384kpbs的情况下，在拍摄对象运动少、平均比特率B是200kpbs时，调整编码参数以便增大比特率。因此，能够使录像的图像具有更高的图像质量。

另一方面，在步骤S113中在判断平均比特率B大于目标比特率T的情况下(步骤S113：是，图4中的M2)，中央控制器20减小比特率，以降低图像质量。因此，中央控制器20从存储在参数存储器101的编码参数表中读取低图像质量的编码参数，并在编码参数管理器10的内部寄存器中设定所读取的编码参数(图3的步骤S115)。因此，可以防止由于中央控制器20的处理负载增加等而造成的帧丢弃现象。

在步骤S114或步骤S115的处理完成之后，返回到步骤S104。并且，重复步骤S105至S115的处理，直到在步骤S104中判断指示了“动画摄影”开始为止。

在步骤S104中在判断为指示了“动画摄影”开始(“动画摄影”被开始)(步骤S104：是，图4的M3)的情况下，中央控制器20确定其处于录像期间，并通过执行与上述步骤S107相同的处理，来取入图像(图3的步骤S116)。这之后，中央控制器20通过执行与上述步骤S108相同的处理，使所摄像的图像作为直通图像显示在显示器6上(步骤S117)。

然后，通过根据由步骤S105至S115的处理调整的编码参数执行与上述步骤S109相同的处理，中央控制器20将图像编码处理实施于YUV数据，从而产生编码数据(步骤S118)。

然后，中央控制器20将所产生的编码数据存储在存储卡MC中(步骤S119)。这之后，中央控制器20参考来自操作单元15的检测信号的输入电平，从而判断是否通过用户的操作等指示了“动画摄影”结束(录像结束)(步骤S120)。在没有指示“动画摄影”结束(步骤S120：否)的情况下，判断为录像仍在继续，于是返回步骤S116。

在步骤S120中判断为指示了“动画摄影”结束(步骤S120：是)的情况下，中央控制器20结束动画摄影动作，并结束编码参数设定处理。

以上为止的处理是本实施例的移动通信终端1执行的编码参数设定处理的内容。

如上所述，在开始摄影图像的录像之前的平均比特率小于目标比特率的情况下，本实施例的移动通信终端1用高图像质量的编码参数重新设定编码参数管理器10的内部寄存器。另一方面，在开始摄影图像的录像之前的平均比特率大于目标比特率的情况下，本实施例的移动通信终端1用低图像质量的编码参数重新设定编码参数管理器10的内部寄存器。

如此，在平均比特率小于目标比特率的情况下，由于在录像开始之前提高比特率地调整编码参数，因此可以使录像的图像具有更高图像质量。在平均比特率大于目标比特率的情况下，由于在录像开始前降低比特率地调整编码参数，因此可以防止由于中央控制器20的处理负载增加等而造成的帧丢弃。由此，移动通信终端1可以在最佳比特率下，执行YUV数据的编码处理。

并且，该编码参数调整是从用户选中“动画摄影”到用户指示了开始“动画摄影”的期间进行。并且，在开始动画摄影之后，根据开始定时的编码参数，对动画的YUV数据执行编码处理。

因此，移动通信终端1由于在动画摄影中不需要调整编码参数，因此可以减小中央控制器20的处理负载。此外，移动通信终端1可以防止由于频繁调整编码参数而导致的图像模糊现象。

接下来，将说明本发明的第二实施例。

在以上描述的第一实施例中，根据步骤S113的平均比特率和目标比特率之间的比较结果，设定高图像质量或低图像质量的编码参数。但是，可以准备三个或更多个图像质量的编码参数，从而，可以从这些参数中对摄影设定最佳图像质量的编码参数。

因此，在第二实施例中，说明除高图像质量和低图像质量之外还准备中等图像质量的编码参数的情况。

图5是示出了根据本发明第二实施例的编码参数表的结构示例的图。

如图5所示，在本实施例的编码参数表中将中等图像质量值、高图像质量值以及低图像质量值记录为编码参数。中等图像质量值也用作默认值。

此外，对于每一图像尺寸，该编码参数表记录了两个目标比特率，表示设为目标的比特率的范围。具体而言，该编码参数表把上限比特率记录作为目标比特率范围的上限值，把下限比特率记录作为目标比特率范围的下限值。例如，将对于使用移动通信终端1的动画摄影优选的最佳比特率的范围记录为目标比特率范围。

图6和图7是示出了根据本发明第二实施例的通过移动通信终端1的编码参数设定处理的流程图。

另外，在该流程图中，对于与图3所示的流程图相同的处理的部分，省略说明。

首先，中央控制器20通过执行与图3的步骤S101和步骤S102相同的处理，来判断是否在照相机模式下选择了“动画摄影”(图6的步骤S201和步骤S202)。当选择了“动画摄影”时(步骤S202：是)，中央控制器20确定录像模式是视频模式还是电影电子邮件模式。在下列处理中，将使用编码参数表中记录的与这里确定的记录模式的图像尺寸相关联的信息。然后，中央控制器20从参数存储器101中存储的如图5所示的编码参数表中，获得编码参数的中等图像质量值、上限比特率以及下限比特率。

然后，中央控制器20在编码参数管理器10的内部寄存器中将所获得的编码参数的中等图像质量值设定为默认值(步骤S203)。

这时，也在编码参数管理器10的内部寄存器中将所获得的上限比特率和下限比特率分别设定为上限比特率T1和下限比特率T2。

然后，中央控制器20判断是否指示了“动画摄影”开始(步骤S204)。在未指示“动画摄影”开始(步骤S204：否)的情况下，作为处于监视期间的情况，中央控制器20根据编码参数管理器10的内部寄存器中设定的编码参数，通过执行与图3的步骤S105至步骤S112相同的处理，获得平均比特率B(图7的步骤S205至S212)。

中央控制器20将所获得的平均比特率B与编码参数管理器10的内部寄存器中设定的上限比特率T1进行比较，来判断平均比特率B是否大于上限比特率T1(步骤S213)。

在步骤S213中在判断为平均比特率B大于上限比特率T1(步骤S213：是)的情况下，中央控制器20判断编码参数管理器10的内部寄存器中设定的编码参数是否为高图像质量值(步骤S214)。然后，在编码参数是高图像质量值(步骤S214：是)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定中等图像质量的编码参数(步骤S215)。另一方面，在编码参数不是高图像质量值的情况下，即，在它是中等图像质量或低图像质量值的情况下(步骤S214：否)，中央控制器20在编码参数管理器10的内部寄存器中，设定低图像质量的编码参数(步骤S216)。

通过步骤S214至S216的处理，在平均比特率大于目标比特率范围的情况下，将编码参数的设定转变为低一级的图像质量值。从而，可降低比特率，并可以使平均比特率接近目标比特率的范围。在已经设定了最小比特率的低图像质量的编码参数的情况下，保持该设定。

在步骤S213中在判断为平均比特率B等于或小于上限比特率T1(步骤S213：否)的情况下，中央控制器20将平均比特率B与编码参数管理器10的内部寄存器中设定的下限比特率T2进行比较，来判断平均比特率B是否小于下限比特率T2(步骤S217)。

在步骤S217中在判断为平均比特率B小于下限比特率T2(步骤S217：是)的情况下，中央控制器20判断编码参数管理器10的内部寄存器中设定的编码参数是否为低图像质量值(步骤S218)。在编码参数是低图像质量值(步骤S218：是)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定中等图像质量的编码参数(步骤S215)。另一方面，在编码参数不是低图像质量值的情况下，即，在它是中等图像质量或高图像质量值(步骤S218：否)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定高图像质量的编码参数(步骤S219)。

通过步骤S218、S215和S219中的处理，如果平均比特率小于目标比特率的范围，则将编码参数的设定改变为高一级的图像质量值。从而，可增大比特率并可以使平均比特率接近目标比特率的范围。在已经设定了最高比特率的高图像质量的编码参数时，保持该设定。

在步骤S217中判断为平均比特率B等于或大于下限比特率T2(步骤S217：否)的情况下，编码参数管理器10的内部寄存器中设定的编码参数值不会改变，并返回图6的步骤S204。因此，在平均比特率处于目标比特率范围内的情况下，可以保持编码参数的设定，以及将保持在优选的最佳比特率。

当通过图7的步骤S213至S219中的处理设定编码参数时，返回到图6的步骤S204。然后，重复图7的步骤S205至S219，直到在步骤S204中判断为指示了“动画摄影”开始为止。

当在步骤S204中判断为指示了“动画摄影”开始时(步骤S204：是)，作为处于记录期间的情况，中央控制器20根据通过图7的步骤S213至S219中的处理设定的编码参数，通过执行与图3的步骤S116至S120相同的处理，执行动画摄影动作(图6的步骤S220至S224)，并结束该编码参数设定处理。

如上所述，根据本实施例，基于动画摄影(录像)之前的图像的平均比特率，调整动画摄影时的编码参数值，以使得平均比特率接近目标比特率。具体地说，在平均比特率大于预定范围的情况下，为了降低比特率重新设定比当前设定要低的图像质量的编码参数。此外，在平均比特率小于预定范围的情况下，为了提高比特率重新设定比当前设定高的图像质量的编码参数。并且，在平均比特率在预定范围内的情况下，为了维持比特率，不改变编码参数的设定。

由此，例如，在摄影的拍摄对象的动作量多、平均比特率大于预定范围的情况下，能够以降低比特率的图像质量进行摄影，并防止帧丢弃和动画摄影时间的缩短。并且，在平均比特率小于预定范围的情况下，能够以增大比特率的图像质量执行摄影，并利用比特率的余量，可以为用户提供具有更高图像质量的动画。在平均比特率处于预定范围内的情况下，例如能够以对使用移动通信终端1的动画摄影优选的最佳比特率执行摄影。

根据本实施例，能够根据摄影之前的拍摄对象的动作量等，从中等图像质量、高图像质量以及低图像质量中选择由对于摄影最佳的比特率构成的图像质量，并将动画摄影时的比特率调整到最佳比特率。

接下来，说明本发明的第三实施例。

根据本发明的第三实施例，对准备了用于N种图像质量(其中N是任意自然数)的编码参数的情况进行说明。

图8是示出了根据本发明第三实施例的编码参数表的结构示例的图。

在本实施例的编码参数表中记录了N种图像质量的编码参数，如图8所示。并且，对于该编码参数表中的各个编码参数，按照参数的图像质量从低到高的次序，预先赋予1至N的标识编号。此外，对于每一图像尺寸，该编码参数表中记录作为目标比特率范围上限值的上限比特率，以及作为目标比特率范围下限值的下限比特率。

图9和图10是示出了根据本发明第三实施例的通过移动通信终端1的编码参数设定处理的流程图。

在该流程图中，对与图3所示的流程图相同的过程的部分，省略说明。

首先，通过执行与图3的步骤S101和S 102相同的处理(图9的步骤S301和S302)，中央控制器20判断是否在照相机模式下选择了“动画摄影”。当选择了“动画摄影”(步骤S302：是)时，中央控制器20将存储在编码参数管理器10中的变量P设定为“1”，作为默认值(步骤S303)。这里设定的变量P的值可以是1至N之间的另外的值。其次，中央控制器20指明录像模式是视频模式还是电影电子邮件模式。在以下处理中，将要使用编码参数表中记录的与这里确定的录像模式的图像尺寸相关联的信息。然后，中央控制器20从参数存储器101中存储的如图8所示的编码参数表中，获得具有与变量P值相同的标识编号P的编码参数、上限比特率以及下限比特率。

然后，中央控制器20在编码参数管理器10的内部寄存器中设定所获得的具有标志数P的编码参数(步骤S304)。

这时，也在编码参数管理器10的内部寄存器中将所获得的上限比特率和下限比特率分别设定为上限比特率T1和下限比特率T2。

然后，中央控制器20判断是否指示了“动画摄影”开始(步骤S305)。在未指示“动画摄影”开始(步骤S305：否)的情况下，作为处于监视期间的情况，中央控制器20根据编码参数管理器10的内部寄存器中设定的编码参数，通过执行与图3的步骤S105至步骤S112相同的处理，获得平均比特率B(图10的步骤S306至S313)。

然后，中央控制器20将所获得的平均比特率B与编码参数管理器10的内部寄存器中设定的上限比特率T1进行比较，来判断平均比特率B是否大于上限比特率T1(步骤S314)。

在步骤S314中判断为平均比特率B大于上限比特率T1(步骤S314：是)的情况下，中央控制器20判断P是否等于1(步骤S315)。在P不等于1(步骤S315：否)的情况下，中央控制器20将P值减去1(步骤S316)。另一方面，在P等于1(步骤S315：是)的情况下，中央控制器20跳过步骤S316，从而不再减小P值。

在步骤S314中在判断为平均比特率B等于或小于上限比特率T1(步骤S314：否)的情况下，中央控制器20将平均比特率B与编码参数管理器10的内部寄存器中设定的下限比特率T2进行比较，来判断平均比特率B是否小于下限比特率T2(步骤S317)。

在步骤S317中判断为平均比特率B小于下限比特率T2(步骤S317：是)的情况下，中央控制器20判断P是否等于N(步骤S318)。在P不等于N(步骤S318：否)的情况下，中央控制器20将P值增加1(步骤S319)。另一方面，在P等于N(步骤S318：是)的情况下，中央控制器20跳过步骤S319，从而不再增加P值。

在步骤S317中判断为平均比特率B等于或大于下限比特率T2(步骤S317：否)的情况下，P值将不会被改变，并且返回到图9的步骤304。

当通过图10的步骤S314至S319中的处理设定P值时，返回到图9的步骤304。然后，中央控制器20从图8所示的编码参数表中，取得与通过图10的步骤S314至S319中的处理设定的变量P值相同的标识编号P的编码参数，并重新设定到编码参数管理器10的内部寄存器(图9的步骤304)。

然后，中央控制器20判断是否指示了“动画摄影”开始(步骤S305)。在指示“动画摄影”开始之前，重复图10的步骤S314至S319中的处理和图9的步骤304中的处理。

通过这种重复的处理，在平均比特率大于目标比特率范围的情况下，将P值减小1，并将编码参数的设定改变为低一级的图像质量值。由此，可降低比特率，以及可以使平均比特率接近目标比特率的范围。并且，在平均比特率小于目标比特率范围的情况下，将P值增加1，并将编码参数的设定改变为高一级的图像质量值。因此，可增加比特率，以及可以使平均比特率接近目标比特率的范围。此外，在平均比特率处于目标比特率的范围内时，P值不改变，以及保持编码参数的设定。因此，可以保持在优选的最佳比特率。

当在步骤S305中判断为指示了“动画摄影”开始时(步骤S305：是)，作为处于记录期间的情况，中央控制器20，根据通过图9的步骤S304中的处理设定的编码参数，通过执行与图3的步骤S116至S120相同的处理，执行动画摄影动作(步骤S320至S324)，并结束该编码参数设定处理。

如上所述，根据本实施例，存储了任意多种图像质量的编码参数。并且，在动画摄影(录像)之前的图像的平均比特率不处于表示最佳比特率的目标比特率范围的情况下，依次改变图像质量，以使得平均比特率接近目标比特率，并将改变的图像质量的编码参数设定为录像时的编码参数。

因此，根据本实施例，可以从任意多种图像质量的编码参数中，设定图像质量编码参数，其能够实现动画摄影的最佳比特率，并可以将动画摄影时的比特率调整到最佳比特率。

根据本实施例，中央控制器20可以不将变量P值每次增加或减去1，而是只将该值增加或减去与平均比特率和目标比特率之间差值相对应的值。根据该方式，可以使平均比特率在更短时间内接近目标比特率。

本发明不限于以上描述的第一至第三实施例，而是可以对其做出各种变形、应用。以下，说明可适用于本发明的上述实施例的变形方式。

上面描述的实施例，说明了将本发明的图像处理装置应用于移动通信终端，然而，也可以将本发明的图像处理装置应用于数码相机。

上述实施例的编码参数管理器10的结构当然可以通过硬件来实现，也可以通过中央控制器20的软件处理来实现。在这种情况下，使中央控制器20执行一种程序即可，该程序用于使中央控制器20作为编码参数管理器10起作用、并实现上述处理，将该程序存储在移动通信终端1中(例如，ROM中)。

根据上面描述的实施例，将由中央控制器20的CPU执行的程序预先存储在ROM等中。然而，本发明不限于此，可以将用于执行上述处理的程序应用于现有的移动通信终端，由此使其作为上述实施例的移动通信终端1起作用。

提供这种程序的方法是任意的，例如，可以通过诸如Internet等通信介质提供，或可以将该程序存储在诸如CD-ROM、存储卡等存储介质中地发布。

在不脱离本发明的宽泛精神和范围的前提下，本发明可以具有多种实施方式和改变。并且，上述实施例用于描述本发明，不限制本发明的范围。也就是说，本发明的范围由权利要求而非实施例示出。并且，在权利要求范围内和与其等同的发明意义范围内，所实施的各种修改应视为在本发明的保护范围。

Claims (5)

1、一种图像处理装置，其特征在于，具备：

编码数据生成单元，通过根据预定参数对图像数据进行编码，来生成编码数据；以及

参数调整单元，根据由所述编码数据生成单元生成的编码数据的比特率，来调整所述预定参数，

所述参数调整单元包括：

比特率计算单元，根据由所述编码数据生成单元在预定期间内生成的编码数据的量，来计算该所述预定期间内的平均比特率；

比特率判断单元，对由所述比特率计算单元计算的平均比特率是否大于预定门限进行判断；以及

比特率改变单元，根据所述比特率判断单元的判断结果来调整所述预定参数，使所述平均比特率接近所述预定门限，

所述参数调整单元响应被指示了动态图像的摄影这一情况，开始调整所述预定参数，判断是否被指示为该动态图像的摄影的开始，反复调整该预定参数直到判断为被指示为该动态图像的摄影的开始，并响应被指示为该动态图像的摄影的开始这一情况，结束调整所述预定参数。

2、根据权利要求1所述的图像处理装置，其特征在于，

在通过所述比特率判断单元判断为平均比特率大于预定门限的情况下，所述比特率改变单元，将所述预定参数重新设定为与当前设定参数相比比特率低的参数，使比特率降低，在该平均比特率小于预定门限的情况下，所述比特率改变单元，将所述预定参数重新设定为与当前设定参数相比比特率高的参数，使比特率提高。

3、根据权利要求1所述的图像处理装置，其特征在于，

所述比特率判断单元包括：

第一比特率判断单元，对由所述比特率计算单元计算的平均比特率是否大于预定第一门限进行判断；以及

第二比特率判断单元，对由所述比特率计算单元计算的平均比特率是否小于预定第二门限进行判断，所述预定第二门限小于所述预定第一门限，

在通过所述第一比特率判断单元判断为平均比特率大于所述预定第一门限的情况下，所述比特率改变单元，将所述预定参数重新设定为与当前设定参数相比比特率低的参数，使比特率降低，

在通过所述第二比特率判断单元判断为平均比特率小于所述预定第二门限的情况下，所述比特率改变单元，将所述预定参数重新设定为与当前设定参数相比比特率高的参数，使比特率提高。

4、根据权利要求3所述的图像处理装置，其特征在于，

所述编码数据生成单元包括使用参数存储单元，该使用参数存储单元被设定了为了生成编码数据所使用的预定参数，

所述参数调整单元包括分级参数存储单元，该分级参数存储单元存储了多个预定参数，当对图像数据进行编码时，所述多个预定参数将会实现相互不同的比特率，

在通过所述第一比特率判断单元判断为平均比特率大于所述预定第一门限的情况下，所述比特率改变单元从所述分级参数存储单元中，读取与在所述使用参数存储单元中设定的预定参数相比比特率低一级的预定参数，并重新设定到所述使用参数存储单元，

在通过所述第二比特率判断单元判断为平均比特率小于所述预定第二门限的情况下，所述比特率改变单元从所述分级参数存储单元中，读取与在所述使用参数存储单元中设定的预定参数相比比特率高一级的预定参数，并重新设定到所述使用参数存储单元。

5、根据权利要求1所述的图像处理装置，其特征在于，

在开始所述动态图像的摄影之后，所述编码数据生成单元根据在开始摄影时的所述预定参数，对通过该动态图像的摄影所获得的图像数据进行编码。

Images