CN1842154A - 图像处理装置 - Google Patents

Abstract

提供了一种能够调整到最佳比特率的图像处理装置。在平均比特率小于目标比特率的情况下，移动通信终端(1)在编码参数管理器(10)的内部寄存器中设定一个高图像质量的编码参数，从而增加比特率。在平均比特率大于目标比特率的情况下，移动通信终端(1)在编码参数管理器(10)的内部寄存器中设定一个低图像质量的编码参数，从而降低比特率。因此，移动通信终端(1)能够以最佳比特率，对YUV数据进行编码。

Description

图像处理装置

发明领域

本发明涉及一种图像处理装置，尤其涉及一种用于调整比特率的图像处理装置。

技术背景

移动通信终端，如蜂窝电话等，具有作为电话进行通信的功能以及收发电子邮件的功能。此外，现在流行的移动通信装置还具有拍摄静态图像和运动图像的照相机功能。通过照相机功能捕获的运动图像的图像数据是以固定比特率进行编码的，并且存储在存储卡等存储介质中，例如，未审查的日本专利申请KOKAI公开No.2003-32629披露了这一点。

因此，如果拍摄对象的运动量很大，就会出现一个问题：由于比特数量少于所需，所以，无法获得质量令人满意的运动图像。但是，如果为了防止该问题而把比特率设得太高，这又会由于CPU(中央处理单元)的处理负载增加而导致帧丢弃的问题。此外，如果把比特率设得太高，还会出现存储介质只能存储少量数据的问题。

发明内容

本发明是鉴于上述情况而做出的，并且，本发明的目的是提供一种能够调整到最佳比特率的图像处理装置。

为了实现以上目的，根据本发明一个方面，该图像处理装置包括：

编码数据生成单元，其通过根据预定参数对图像数据进行编码，生成编码数据；以及

参数调整单元，其基于由所述编码数据生成单元生成的所述编码数据的比特率，调整所述预定参数；以及

所述参数调整单元包括：

比特率计算单元，其根据由所述编码数据生成单元在预定期间生成的编码数据的量，计算所述预定期间的平均比特率；

比特率确定单元，其判断由所述比特率计算单元计算出来的所述平均比特率是否大于预定门限；以及

比特率改变单元，其基于所述比特率确定单元的判断结果，通过调整所述预定参数，使所述平均比特率接近所述预定门限。

在以上描述的图像处理装置中，在所述比特率确定单元判定所述平均比特率大于所述预定门限的情况下，所述比特率改变单元可以通过把所述预定参数重新设定为一个将会比当前设定参数实现较低比特率的参数，来降低所述比特率，以及，在所述平均比特率小于所述预定门限的情况下，所述比特率改变单元可以通过把所述预定参数重新设定为一个将会比当前设定参数实现较高比特率的参数，来增加所述比特率。

在以上描述的图像处理装置中，所述比特率确定单元可以包括：

第一比特率确定单元，其判断由所述比特率计算单元计算出来的所述平均比特率是否大于预定第一门限；以及

第二比特率确定单元，其判断由所述比特率计算单元计算出来的所述平均比特率是否小于预定第二门限，所述预定第二门限小于所述预定第一门限；以及

在所述第一比特率确定单元判定所述平均比特率大于所述预定第一门限的情况下，所述比特率改变单元可以通过把所述预定参数重新设定为一个将会比当前设定参数实现较低比特率的参数，来降低所述比特率，以及，在所述第二比特率确定单元判定所述比特率小于所述预定第二门限的情况下，所述比特率改变单元可以通过把所述预定参数重新设定为一个将会比当前设定参数实现较高比特率的参数，来增加所述比特率。

在以上描述的图像处理装置中，所述编码数据生成单元可以包括一个被采用参数存储单元，其中设定了用于生成编码数据所要采用的预定参数；

所述参数调整单元可以包括一个分级参数存储单元，其存储了多个预定参数，当对图像数据进行编码时，所述多个预定参数将会实现彼此不同的比特率；以及

在所述第一比特率确定单元判定所述平均比特率大于所述预定第一门限的情况下，所述比特率改变单元可以从所述分级参数存储单元中读取一个将会比所述被采用参数存储单元中设定的所述预定参数实现低一级的比特率的预定参数，并用所读取的参数重新设定所述被采用参数存储单元，以及，在所述第二比特率确定单元判定所述平均比特率小于所述预定第二门限的情况下，所述比特率改变单元可以从所述分级参数存储单元中读取一个将会比所述被采用参数存储单元中设定的所述预定参数实现高一级的比特率的预定参数，并用所读取的参数重新设定所述被采用参数存储单元。

在以上描述的图像处理装置中，所述参数调整单元响应于指示捕获运动图像，而可以开始调整所述预定参数，以及，响应于开始捕获运动图像，而结束调整所述预定参数。

在以上描述的图像处理装置中，在开始捕获运动图像之后，所述编码数据生成单元可以根据开始捕获时的预定参数，对通过捕获运动图像而获得的图像数据进行编码。

根据本发明，可以调整到最佳比特率。

附图简述

通过阅读下面的详细描述和附图，本发明的这些和其他目的和优点将变得更加显而易见，在这些附图中：

图1的框图示出了根据本发明第一实施例的移动通信终端的结构示例；

图2是根据本发明第一实施例的编码参数表的结构示例的示意图；

图3的流程图示出了根据本发明第一实施例的移动通信终端的编码参数设定过程；

图4是具体说明编码参数设定过程的内容的时序图；

图5是根据本发明第二实施例的编码参数表的结构示例的示意图；

图6和图7的流程图示出了根据本发明第二实施例的移动通信终端的编码参数设定过程；

图8是根据本发明第三实施例的编码参数表的结构示例的示意图；以及

图9和图10的流程图示出了根据本发明第三实施例的移动通信终端的编码参数设定过程。

具体实施方式

现在将详细地说明本发明的最佳实施方式。

首先，将解释根据本发明第一实施例的移动通信终端的具体结构。

根据本实施例的移动通信终端是用于进行移动通信的终端装置(电话机)，如蜂窝电话、PHS(个人手提移动电话系统)等。根据本实施例的移动通信终端具有实现无线电话呼叫和通过基站(未显示)收发电子邮件的功能，以及，具有使用如CCD(电荷藕合器件)等成像元件捕获静态图像和运动图像的照相机功能。此外，本实施例的移动通信终端能够发送和接收附带有捕获的静态图像和运动图像的电子邮件。

图1的框图示出了根据本发明第一实施例的移动通信终端的结构示例。

如图1所示，该移动通信终端1包括透镜光学系统2、成像元件3、A/D(模数)转换器4、图像信号处理器5、显示器6、图像缓冲器7、编码解码处理器8、存储卡连接器9、编码参数管理器10、天线11、无线电单元12、接收单元13、发送单元14、操作单元15、扬声器16L和16R、音频处理器17、扩音器18、音频编码处理器19、中央控制器20、参数存储器101以及编码尺寸计算器102。

透镜光学系统2包括一个成像透镜、一个用于调整焦距的聚焦透镜、一个用于调整来自拍摄对象到达所述成影元件3的光量的光圈，等等。拍摄对象的光学图像(拍摄对象图像)通过透镜光学系统2会聚，聚焦在成像元件3上。

成像元件3是诸如CCD(电荷藕合器件)之类的元件。成影元件3通过将穿过透镜光学系统2聚焦的拍摄对象图像转换成(光电子地)具有与该图像亮度相对应的水平的电荷而进行存储。当由时机产生器(未显示)和V(垂直)驱动器(未显示)进行扫描时，成像元件3将存储的电荷作为成像信号(模拟信号)而输出。

来自成像元件3的成像信号输出由CDS(相关双重采样)电路(未显示)消除噪音，然后由AGC(自动增益控制)(未显示)将其放大，以及由A/D转换器4将其转换为数字成像信号。

图像信号处理器5包括色彩处理电路、DMA(直接存储器存取)控制器等。图像信号处理器5在色彩处理电路中将色彩处理应用于从A/D转换器4提供的数字成像信号，从而产生YUV数据。图像信号处理器5使用DMA控制器，通过DMA方式，将在色彩处理电路中产生的YUV数据传递给图像缓冲器7中的DRAM。

显示器6由例如LCD(液晶显示器)等组成。显示器6基于视频信号，显示直通(through)图像、重显图像等。

例如，图像缓冲器7包括DRAM(动态随机存取存储器)和VRAM(视频随机存取存储器)。DRAM保存从图像信号处理器5以DMA方式传递的YUV数据，或用作工作存储器，以在编码解码处理器8中进行YUV数据的编码/解码处理。

当在显示器6上显示图像时，VRAM用作工作存储器。更具体地说，将从图像信号处理器5以DMA方式传递到DRAM的YUV数据，或将由编码解码处理器8解码的YUV数据，写入VRAM中。写入VRAM中的YUV数据由中央控制器20以规则的时间间隔进行读取，并且将其转换为视频信号。当把该视频信号提供给显示器6时，在显示器6上显示直通图像、重显图像等。

编码解码处理器8根据在编码参数管理器10中设定的编码参数，将诸如MPEG-4(运动图像专家组)标准之类的编码处理应用于以DMA方式传递到图像缓冲器7中的DRAM的YUV数据。因此，编码解码处理器8产生静态图像和运动图像的编码数据。

例如，存储卡MC是SD(安全数字)存储卡等。多个接触垫形成在存储卡MC的前或后表面上。存储卡MC存储由编码解码处理器8产生的静态图像或运动图像的编码数据。

存储卡连接器9在连接器外壳上具有多个接触端点。通过这些接触端点和在存储卡MC的前或后表面上形成的多个接触垫之间的接触，可以在移动通信终端1和存储卡MC之间实现电连接。

编码参数管理器10具有一个内部寄存器(未显示)，其用于设定目标比特率或编码参数，该目标比特率表示通过移动通信终端1捕获运动图像所鼓励的最佳比特率，该编码参数用于在编码解码处理器8中进行编码处理。编码参数管理器10与参数存储器101和编码尺寸计算器102相连接。

参数存储器101存储编码参数表，其用于确定捕获运动图像时的编码参数。

图2是编码参数表的结构示例的示意图。

如图2所示，该编码参数表相关联地记录了图像尺寸、目标比特率以及编码参数。

例如，在该编码参数表中记录了384kbps的比特率，作为与QVGA(四分之一视频图像阵列)尺寸(320×240像素)相对应的目标比特率，以及，记录了64kbps的比特率，作为与QCIF(四分之一通用中间格式)尺寸(176×144像素)和Sub-QCIF(128×96像素)相对应的目标比特率。

此外，在该编码参数表中，为每一图像尺寸记录了三种类型的编码参数，即：默认编码参数、高比特率即高图像质量的编码参数以及低比特率即低图像质量的编码参数。

一个编码参数包括多个参数，如量化级参数、空间滤波参数等。例如，量化级参数表示量化的级尺寸，空间滤波参数表示空间滤波的程度。每一图像质量的编码参数都是基于多个参数的组合而确定的。每一图像质量的编码参数可以是这多个参数中的一个参数。根据移动通信终端1的图像捕获特征，可以正确地确定每一图像质量的编码参数，并将其记录于编码参数表中。

根据本实施例，为了压缩数据量，以像素数目低的QCIF尺寸或Sub-QCIF尺寸，捕获通过电影电子邮件发送或接收的运动图像。为了提高分辨率，以像素数目高的QVGA尺寸，捕获通过电影电子邮件发送或接收的视频的运动图像。

编码尺寸计算器102统计编码解码处理器8在预定期间(例如1秒)获得的编码数据的量(比特数目)。由编码尺寸计算器102统计的值用于例如计算比特率。

天线11将外部输入到移动通信终端1的无线电波转换成模拟信号。此外，天线11将传输信号转换成无线电波，并将其辐射到空中。

无线单元12将天线11提供的模拟信号进行下变频，将正交解调处理和A/D(模数)转换处理应用于经过下变频的模拟信号，从而产生某一码率(chip rate)的数字信号，以及将所产生的数字信号提供给接收单元13。此外，无线单元12将A/D(模数)转换处理和调制处理应用于由发送单元14提供的传输信号，将这些处理所得的传输信号进行上变频，以及通过天线11将该信号发送给基站。

接收单元13将反向扩频处理和相位校正处理应用于由无线单元12提供的某一码率的数字信号，从而获得某一符号速率的音频信号，以及将所获得的音频信号提供给音频处理器17。

发送单元14将误差校正处理、映射到物理信道的处理以及扩频处理应用于由声频编码处理器19提供的传输信号，以及将由这些处理所产生的传输信号提供给无线电单元12。

操作单元15包括，例如，十字光标键、用于打出数字和字符的文字数字字符键、用于指定功能的按钮等。操作单元15由用户进行操作。

扬声器16L和16R输出电话通信中的呼入语音或铃声。

声频处理器17将解码处理应用于由接收单元13提供的音频信号，将解码后的音频信号转换成模拟信号，以及将其提供给扬声器16L和16R。因此，例如，通信伙伴的语音从扬声器16L输出，铃声从扬声器16R输出。

扩音器18捕获在电话通信中由用户发出的语音。

音频编码处理器19随后将A/D转换处理和编码处理应用于来自扩音器18的声频输出，从而产生某一符号速率的传输信号，以及将所产生的传输信号提供给发送单元14。

中央控制器20包括，例如，CPU(中央处理单元)、ROM(只读存储器)、RAM(随机存取存储器)等。当CPU正确地执行ROM等中存储的程序时，中央控制器20控制移动通信终端1的每一个部件的操作。当CPU执行这些程序时，ROM被用作工作存储器。

接下来，将解释具有上述结构的移动通信终端1的具体操作。

图3的流程图示出了根据本发明第一实施例的移动通信终端1的编码参数设定过程。图4是具体说明编码参数设定过程的内容的时序图。

首先，通过参考来自操作单元15的检测信号的输入电平或根据被执行功能而设定或清除的功能模式标志位，中央控制器20判断功能模式是否通过用户操作被设定为照相机模式(步骤S101)。当功能模式通过用户操作被设定为照相机模式时(步骤S101：是)，中央控制器20在显示器6上显示一个选择屏，以使用户选择“静态图像捕获”或“运动图像捕获”。

中央控制器20判断是否通过与选择屏显示相对应的用户操作选择了“运动图像捕获”(步骤S102)。如果用户执行操作单元15而在选择屏上选择“运动图像捕获”，然后按下“前进”键等，由此选择了“运动图像捕获”(指示了“运动图像捕获”)(步骤S102：是)，那么，中央控制器20通过参考根据要记录的图像的类型而设定或清除的记录模式标志位，指明记录模式是视频模式还是电影电子邮件模式。然后，中央控制器20从存储在参数存储器101中的编码参数表中，获得与所指明的记录模式的图像尺寸相对应的目标比特率和编码参数的默认值。

然后，中央控制器20在编码参数管理器10的内部寄存器(未显示)中设定所获得的编码参数默认值(步骤S103)。

更具体地说，当记录模式是视频模式时，设定与QVGA尺寸相对应的编码参数的默认值。当记录模式是电影电子邮件模式时，设定与QCIF尺寸或Sub-QCIF尺寸相对应的编码参数的默认值。

此外，这时，在编码参数管理器10的内部寄存器中也将所获得的目标比特率设定为目标比特率T。

然后，通过参考来自操作单元15的检测信号的输入电平，中央控制器20判断用户是否通过例如按下记录按钮而指示了开始“运动图像捕获”(步骤S104)。在用户尚未指示开始“运动图像捕获”(步骤S 104：否，图4中M0)的情况下，中央控制器20判定其处于监视期间，并将RAM等中的计时器计数值A和编码尺寸计算器102的编码尺寸S设定为初始值“0”(图3中步骤S105)。然后，中央控制器20启动计时器，以累加计数值A(步骤S106)。

然后，中央控制器20拍摄图像(步骤S107)。具体而言，中央控制器20从成像元件3中获得与1帧相对应的成像信号，从而让图像信号处理器5中的色彩处理电路产生1帧的YUV数据。图像信号处理器5的DMA控制器以DMA方式将YUV数据传递给图像缓冲器7的DRAM。逐帧地重复该过程。

此外，中央控制器20将以DMA方式传递到DRAM中的YUV数据写入VRAM中。中央控制器20在每一规则的时间间隔内从VRAM中读取YUV数据，从而产生视频信号，并将所产生的视频信号提供给显示器6。因此，拍摄图像作为直通图像显示在显示器6上(步骤S108)。

此外，中央控制器20从图像缓冲器7中读取YUV数据，以及根据在步骤S103中设定的默认编码参数，在编码解码处理器8中将图像编码处理应用于YUV数据，从而产生编码数据(步骤S109)。然后，中央控制器20将编码尺寸计算器102的存储值加上所产生的编码数据的比特数(编码尺寸)，从而更新编码尺寸S(步骤S110)。

然后，中央控制器20参考计时器的计数值A，并判断该计数值A是否等于或大于预定值(步骤S111)。具体地说，假定该预定值为1秒，则中央控制器20判断在步骤S106中启动计时器之后是否已经超过1秒。在计数值A小于预定值的情况下，例如，在从起始流逝的时间没有达到1秒的情况下(步骤S111：否)，流程返回步骤S106。

此后，当计数值A等于或大于预定值时，例如，当在起始后经过1秒时(步骤S111：是)，中央控制器20将储存在编码尺寸计数器102中的总比特数(编码尺寸S)除以用计数值A表示的经过时间，从而将得到的相除结果作为平均比特率B(步骤S112)。

中央控制器20将所得到的平均比特率B与在编码参数管理器10的内部寄存器中设定的目标比特率T进行比较，来判断平均比特率B是否大于目标比特率T(步骤S113)。

在步骤S113中判定平均比特率B不大于目标比特率T的情况下(步骤S113：否，图4中的M1)，中央控制器20判定每个单位时间可以进行编码的数据量仍有增长的空间，因此提高比特率，以改善图像质量。为了该目的，中央控制器20从存储在参数存储器101的编码参数表中读取高图像质量的编码参数，并在编码参数管理器10的内部寄存器中设定所读取的编码参数(图3的步骤S114)。因此，编码参数得到了调整，从而使得要记录的图像将具有较高的图像质量。

例如，在拍摄对象做了些许运动而导致当目标比特率T是384kpbs时平均比特率B是200kpbs的情况下，调整编码参数，从而增大比特率。因此，要记录的图像会具有较高的图像质量。

另一方面，在步骤S113中判定平均比特率B大于目标比特率T的情况下(步骤S113：是，图4中的M2)，中央控制器20减小比特率，以降低图像质量。因此，中央控制器20从存储在参数存储器101的编码参数表中读取低图像质量的编码参数，并在编码参数管理器10的内部寄存器中设定所读取的编码参数(图3的步骤S115)。因此，可以防止由于中央控制器20的处理负载增加而可能造成的帧丢弃现象。

在步骤S114或步骤S115的过程完成之后，流程返回到步骤S104中。步骤S105至S115的过程将会重复，直到在步骤S104中判定指示了“运动图像捕获”开始为止。

在步骤S104中判定指示了“运动图像捕获”开始(开始“运动图像捕获”)(步骤S104：是，图4的M3)的情况下，中央控制器20确定其处于记录期间，并通过执行与上述步骤S107相同的过程而拍摄图像(图3的步骤S116)。这之后，中央控制器20通过执行与上述步骤S108相同的过程，将拍摄的图像作为直通图像显示在显示器6上(步骤S117)。

然后，通过根据从步骤S105至S115中调整的编码参数执行与上述步骤S109相同的过程，中央控制器20将图像编码处理应用于YUV数据，从而产生编码数据(步骤8118)。

然后，中央控制器20将所产生的编码数据存储在存储卡MC中(步骤S119)。这之后，中央控制器20参考来自操作单元15的检测信号的输入电平，从而判断用户是否指示了“运动图像捕获”结束(记录结束)(步骤S120)。在用户没有指示“运动图像捕获”结束(步骤S120：否)的情况下，中央控制器20判定记录仍在继续，于是返回步骤S116。

在步骤S120中判定指示了“运动图像捕获”结束(步骤S120：是)的情况下，中央控制器20结束运动图像捕获操作，从而结束编码参数设定过程。

以上描述的过程是通过本实施例的移动通信终端1执行的编码参数设定过程的内容。

如上所述，在开始捕获图像记录之前的平均比特率小于目标比特率的情况下，本实施例的移动通信终端1用高图像质量的编码参数重新设定编码参数管理器10的内部寄存器。同时，在开始捕获图像记录之前的平均比特率大于目标比特率的情况下，本实施例的移动通信终端1用低图像质量的编码参数重新设定编码参数管理器10的内部寄存器。

因为，在平均比特率小于目标比特率的情况下，调整编码参数，从而增大开始记录之前的比特率，所以，可以给要记录的图像提供较高图像质量。在平均比特率大于目标比特率的情况下，调整编码参数，从而降低开始记录之前的比特率。因此，可以防止由于中央控制器20的处理负载增加而造成的帧丢弃现象等。从而，移动通信终端1可以在最佳比特率下，执行YUV数据的编码过程。

该编码参数调整是从用户选中“运动图像捕获”到用户指示了开始“运动图像捕获”的期间完成的。所以，在开始运动图像捕获之后，根据起始时的编码参数，对运动图像的YUV数据执行编码处理。

因此，移动通信终端1在运动图像捕获期间不需要调整编码参数，因此可以减小中央控制器20的处理负载。此外，移动通信终端1可以防止如果多次调整编码参数而可能导致的图像模糊现象。

接下来，将解释本发明的第二实施例。

按照以上描述的第一实施例，根据步骤S113的平均比特率和目标比特率之间的比较结果，设定高图像质量或低图像质量的编码参数。与此相比，可以准备三个或更多个图像质量的编码参数，从而，可以从这些参数中设定一个用于图像捕获的最佳图像质量的编码参数。

因此，在第二实施例中，将要解释一种除高图像质量和低图像质量之外还准备了中等图像质量的编码参数的情况。

图5示出了根据本发明第二实施例的编码参数表的结构示例的示意图。

如图5所示，根据本实施例的编码参数表将中等图像质量值、高图像质量值以及低图像质量值记录为编码参数。中等图像质量值也用作默认值。

此外，对于每一图像尺寸，该编码参数表记录了两个目标比特率，以表示所要达到的比特率的范围。具体而言，该编码参数表把上限比特率记录作为目标比特率范围的上限，把下限比特率记录作为目标比特率范围的下限。例如，将通过所述移动通信终端1捕获运动图像所鼓励的最佳比特率的范围记录为目标比特率范围。

图6和图7的流程图示出了根据本发明第二实施例的通过移动通信终端1执行的编码参数设定过程。

在该流程图中，与图3所示的流程图相同的过程将不再赘述。

首先，中央控制器20执行与图3的步骤S101和步骤S102的相同的过程，来判断是否在照相机模式下选择了“运动图像捕获”(图6的步骤S201和步骤S202)。当选择了“运动图像捕获”时(步骤S202：是)，中央控制器20指明记录模式是视频模式还是电影电子邮件模式。在下列过程中，将使用编码参数表中记录的与这里指明的记录模式的图像尺寸相关联的信息。然后，中央控制器20从参数存储器101中存储的如图5所示的编码参数表中，获得中等图像质量的编码参数值、上限比特率以及下限比特率。

然后，中央控制器20在编码参数管理器10的内部寄存器中将所获得的编码参数值设定为默认值(步骤S203)。

这时，也在编码参数管理器10的内部寄存器中将所获得的上限比特率和下限比特率分别设定为上限比特率T1和下限比特率T2。

然后，中央控制器20判断是否指示了“运动图像捕获”开始(步骤S204)。在未指示“运动图像捕获”开始(步骤S204：否)的情况下，中央控制器20判定其处于监视期间，于是，根据编码参数管理器10的内部寄存器中设定的编码参数，通过执行如图3的与步骤S105至步骤S112相同的过程，获得平均比特率B(图7的步骤S205至S212)。

中央控制器20将所获得的平均比特率B与编码参数管理器10的内部寄存器中设定的上限比特率T1进行比较，来判断平均比特率B是否大于上限比特率T1(步骤S213)。

在步骤S213中判定平均比特率B大于上限比特率T1(步骤S213：是)的情况下，中央控制器20判断编码参数管理器10的内部寄存器中设定的编码参数是否为高图像质量值(步骤S214)。在编码参数是高图像质量值(步骤S214：是)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定中等图像质量的编码参数(步骤S215)。相反，在编码参数不是高图像质量值的情况下，即，在它是中等图像质量或低图像质量值的情况下(步骤S214：否)，中央控制器20在编码参数管理器10的内部寄存器中，设定低图像质量的编码参数(步骤S216)。

通过步骤S214至S216的过程，在平均比特率大于目标比特率范围的情况下，将编码参数转变为低一级的图像质量值。从而，降低了比特率，并可以使平均比特率接近目标比特率的范围。在已经设定了需要最小比特率的低图像质量的编码参数的情况下，将会保持该设定。

在步骤S213中判定平均比特率B等于或小于上限比特率T1(步骤S213：否)的情况下，中央控制器20将平均比特率B与编码参数管理器10的内部寄存器中设定的下限比特率T2进行比较，来判断平均比特率B是否小于下限比特率T2(步骤S217)。

在步骤S217中判定平均比特率B小于下限比特率T2(步骤S217：是)的情况下，中央控制器20判断编码参数管理器10的内部寄存器中设定的编码参数是否为低图像质量值(步骤S218)。在编码参数是低图像质量值(步骤S218：是)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定中等图像质量的编码参数(步骤S215)。相反，在编码参数不是低图像质量值的情况下，即，在它是中等图像质量或高图像质量值(步骤S218：否)的情况下，中央控制器20在编码参数管理器10的内部寄存器中，设定高图像质量的编码参数(步骤S219)。

通过步骤S218、S215和S219中的过程，如果平均比特率小于目标比特率的范围，则将编码参数的设定改变为高一级的图像质量值。从而，增大了比特率，并可以使平均比特率接近目标比特率的范围。如果已经设定了具有最高比特率的高图像质量的编码参数，那么，将会保持该设定。

在步骤S217中判定平均比特率B等于或大于下限比特率T2(步骤S217：否)的情况下，编码参数管理器10的内部寄存器中设定的编码参数值不会改变，然后，流程返回图6的步骤S204。因此，在平均比特率处于目标比特率范围内的情况下，将会保持编码参数的设定，以及将保持所鼓励的最佳比特率。

当通过图7的步骤S213至S219中的过程设定编码参数时，流程返回到图6的步骤S204。图7的步骤S205至S219将会重复，直到在图6的步骤S204中判定指示了“运动图像捕获”开始为止。

当在步骤S204中判定指示了“运动图像捕获”开始(步骤S204：是)时，中央控制器20判定其处于记录期间，于是，根据图7的步骤S213至S219中的过程设定的编码参数，通过执行与图3的步骤S116至S120相同的过程，执行运动图像捕获操作(图6的步骤S220至S224)，然后结束编码参数设定过程。

如上所述，根据本实施例，基于运动图像捕获(记录)之前的图像的平均比特率，调整运动图像捕获的编码参数值，以使得平均比特率接近目标比特率。具体地说，在平均比特率大于预定范围的情况下，设定一个比当前设定要低的图像质量的编码参数，来降低比特率。此外，在平均比特率处于预定范围内的情况下，不改变编码参数的设定，从而将保持该比特率。

因此，例如，在要捕获的拍摄对象的运动量很大且因此平均比特率大于预定范围的情况下，将以降低比特率的图像质量的方式执行捕获，这样可以防止帧丢弃和运动图像捕获持续时间的缩短。在平均比特率小于预定范围的情况下，将以增大比特率的图像质量的方式执行图像捕获，这样，通过利用比特率空间，可以为用户提供具有较高图像质量的运动图像。在平均比特率处于预定范围内的情况下，可以在通过移动通信终端1捕获运动图像所鼓励的最佳比特率下执行图像捕获。

根据本实施例，根据图像捕获之前的拍摄对象的运动量等，从中等图像质量、高图像质量以及低图像质量中选择将会实现最佳比特率的图像质量，使运动图像捕获的比特率能够调整到最佳比特率。

接下来，将解释本发明的第三实施例。

根据本发明的第三实施例，将要解释一种其中准备了用于N种图像质量(其中N是任意自然数)的编码参数的情况。

图8示出了根据本发明第三实施例的编码参数表的结构示例的示意图。

根据本实施例的编码参数表记录了N种图像质量的编码参数，如图8所示。对于该编码参数表中的编码参数，按照参数的图像质量从低到高的次序，预先分给1至N的标识编号。此外，对于每一图像尺寸，该编码参数表将上限比特率记录为目标比特率范围的上限，以及将下限比特率记录为目标比特率范围的下限。

图9和图10的流程图示出了根据本发明第三实施例的通过移动通信终端1执行的编码参数设定过程。

在该流程图中，对与图3所示的流程图相同的过程不再赘述。

首先，通过执行与图3的步骤S101和S102相同的过程(图9的步骤S301和S302)，中央控制器20判断是否在照相机模式下选择了“运动图像捕获”。当选择了“运动图像捕获”(步骤S302：是)时，中央控制器20将存储在编码参数管理器10中的变量P设定为“1”，作为默认值(步骤S303)。这里设定的变量P的值可以是1至N之间的另一个值。其次，中央控制器20指明记录模式是视频模式还是电影电子邮件模式。在以下过程中，将要使用编码参数表中记录的与这里指明的记录模式的图像尺寸相关联的信息。然后，中央控制器20从参数存储器101中存储的如图8所示的编码参数表中，获得具有与变量P值相同的标识编号P的编码参数、上限比特率以及下限比特率。

然后，中央控制器20在编码参数管理器10的内部寄存器中设定所获得的具有标志数P的编码参数(步骤S304)。

这时，也在编码参数管理器10的内部寄存器中将所获得的上限比特率和下限比特率分别设定为上限比特率T1和下限比特率T2。

然后，中央控制器20判断是否指示了“运动图像捕获”开始(步骤S305)。在未指示“运动图像捕获”开始(步骤S305：否)的情况下，中央控制器20判定其处于监视期间，于是，根据编码参数管理器10的内部寄存器中设定的编码参数，通过执行与图3的步骤S105至步骤S112相同的过程，获得平均比特率B(图10的步骤S306至S313)。

然后，中央控制器20将所获得的平均比特率B与编码参数管理器10的内部寄存器中设定的上限比特率T1进行比较，来判断平均比特率B是否大于上限比特率T1(步骤S314)。

在步骤S314中判定平均比特率B大于上限比特率T1(步骤S314：是)的情况下，中央控制器20判断P是否等于1(步骤S315)。在P不等于1(步骤S315：否)的情况下，中央控制器20将P值减去1(步骤S316)。相反，在P等于1(步骤S315：是)的情况下，中央控制器20跳过步骤S316，从而不再减小P值。

在步骤S314中判定平均比特率B等于或小于上限比特率T1(步骤S314：否)的情况下，中央控制器20将平均比特率B与编码参数管理器10的内部寄存器中设定的下限比特率T2进行比较，来判断平均比特率B是否小于下限比特率T2(步骤S317)。

在步骤S317中判定平均比特率B小于下限比特率T2(步骤S317：是)的情况下，中央控制器20判断P是否等于N(步骤S318)。在P不等于N(步骤S318：否)的情况下，中央控制器20将P值增加1(步骤S319)。相反，在P等于N(步骤S318：是)的情况下，中央控制器20跳过步骤S319，从而不再增加P值。

在步骤S317中判定平均比特率B等于或大于下限比特率T2(步骤S317：否)的情况下，P值将不会被改变，并且，流程返回到图9的步骤304。

当通过图10的步骤S314至S319中的过程设定P值时，流程返回到图9的步骤304。然后，中央控制器20从图8所示的编码参数表中，通过图10的步骤S314至S319中的过程，获得具有与变量P值相同的标识编号P的编码参数，以及，用所获得的编码参数重新设定编码参数管理器19的内部寄存器(图9的步骤304)。

然后，中央控制器20判断是否指示了“运动图像捕获”开始(步骤S305)。在指示“运动图像捕获”开始之前，将会重复图10的步骤S314至S319中的过程和图9的步骤304中的过程。

通过这种重复的处理，在平均比特率大于目标比特率范围的情况下，将P值增加1，所以将编码参数改变为低一级的图像质量值。因此，降低了比特率，以及可以使平均比特率接近目标比特率的范围。在平均比特率小于目标比特率范围的情况下，将P值减去1，所以将编码参数改变为高一级的图像质量值。因此，增加了比特率，以及可以使平均比特率接近目标比特率的范围。此外，在平均比特率处于目标比特率的范围内时，P值不改变，以及保持编码参数的设定。因此，可以保持所鼓励的最佳比特率。

当在步骤S305中判定指示了“运动图像捕获”开始时(步骤S305：是)，中央控制器20判定其处于记录期间，于是，根据图9的步骤S304中的过程设定的编码参数，通过执行与图3的步骤S116至S120相同的过程，执行运动图像捕获操作，然后结束该编码参数设定过程。

如上所述，根据本实施例，存储了任意多种图像质量的编码参数。在运动图像捕获(记录)之前的图像的平均比特率不处于表示最佳比特率的目标比特率范围的情况下，连续改变图像质量，以使得平均比特率接近目标比特率，并将改变后的图像质量的编码参数设定为用于记录的编码参数。

因此，根据本实施例，从任意多种图像质量的编码参数中，设定一个图像质量编码参数，其能够实现运动图像捕获的最佳比特率。因此，可以将运动图像捕获的比特率调整到最佳比特率。

根据本实施例，中央控制器20可以不将变量P值增加或减去1，而是将该值增加或减去一个与平均比特率和目标比特率之间差值相对应的值。根据该方式，可以使平均比特率在较短时间内接近目标比特率。

本发明不限于以上描述的第一至第三实施例，而是可以对其做出各种修改和应用。现在将解释适用于本发明上述实施例的各种修改。

根据上面描述的实施例，给出了将本发明的图像处理装置应用于移动通信终端的解释。然而，也可以将本发明的图像处理装置应用于数码相机。

根据上述实施例的编码参数管理器10的结构可以通过硬件来实现，也可以通过中央控制器20的软件处理来实现。在这种情况下，可以将一个程序存储在移动通信终端1中(例如，ROM中)，该程序用于控制用作编码参数管理器10的中央控制器20，以实现上述处理，因此，中央控制器20将执行该程序。

根据上面描述的实施例，将由中央控制器20的CPU执行的程序预先存储在ROM等中。然而，本发明不限于此，可以将实现上述处理的程序应用于现有的移动通信终端，以使现有终端可用作根据上述实施例的移动通信终端1。

提供这种程序的方法是任意的。例如，可以通过诸如Internet之类的通信介质提供该程序，或可以将该程序存储和分布在诸如CD-ROM、存储卡等存储介质中。

在不脱离本发明的宽泛精神和范围的前提下，可以做出各种修改和改变。上述实施例用于描述本发明，而不是限制本发明的范围。本发明的范围由附加的权利要求而非本实施例来说明。在本发明的权利要求等价物的意义内和权利要求内做出的各种修改应视为落入本发明的保护范围。

Claims (6)

1、一种图像处理装置，包括：

编码数据生成单元(8)，其通过根据预定参数对图像数据进行编码，生成编码数据；以及

参数调整单元(20)，其基于由所述编码数据生成单元(8)生成的所述编码数据的比特率，调整所述预定参数；

其中，所述参数调整单元(20)包括：

比特率计算单元(20)，其根据由所述编码数据生成单元(8)在预定期间生成的编码数据的量，计算所述预定期间的平均比特率；

比特率确定单元(20)，其判断由所述比特率计算单元(20)计算出来的所述平均比特率是否大于预定门限；以及

比特率改变单元(20)，其基于所述比特率确定单元(20)的判断结果，通过调整所述预定参数，使所述平均比特率接近所述预定门限。

2、根据权利要求1所述的图像处理装置，

其中，在所述比特率确定单元(20)判定所述平均比特率大于所述预定门限的情况下，所述比特率改变单元(20)通过把所述预定参数重新设定为一个将会比当前设定参数实现较低比特率的参数，来降低所述比特率，以及，在所述平均比特率小于所述预定门限的情况下，所述比特率改变单元(20)通过把所述预定参数重新设定为一个将会比当前设定参数实现较高比特率的参数，来增加所述比特率。

3、根据权利要求1所述的图像处理装置，

其中，

所述比特率确定单元(20)包括：

第一比特率确定单元(20)，其判断由所述比特率计算单元(20)计算出来的所述平均比特率是否大于预定第一门限；以及

第二比特率确定单元(20)，其判断由所述比特率计算单元(20)计算出来的所述平均比特率是否小于预定第二门限，所述预定第二门限小于所述预定第一门限；以及

在所述第一比特率确定单元(20)判定所述平均比特率大于所述预定第一门限的情况下，所述比特率改变单元(20)通过把所述预定参数重新设定为一个将会比当前设定参数实现较低比特率的参数，来降低所述比特率，以及，在所述第二比特率确定单元(20)判定所述平均比特率小于所述预定第二门限的情况下，所述比特率改变单元(20)通过把所述预定参数重新设定为一个将会比当前设定参数实现较高比特率的参数，来增加所述比特率。

4、根据权利要求3所述的图像处理装置，

其中，

所述编码数据生成单元(8)包括被采用参数存储单元(10)，其中设定了用于生成编码数据所要采用的预定参数；

所述参数调整单元(20)包括分级参数存储单元(101)，其存储了多个预定参数，当对图像数据进行编码时，所述多个预定参数将会实现彼此不同的比特率；以及

在所述第一比特率确定单元(20)判定所述平均比特率大于所述预定第一门限的情况下，所述比特率改变单元(20)从所述分级参数存储单元(101)中读取一个将会比所述被采用参数存储单元(10)中设定的所述预定参数实现低一级的比特率的预定参数，并用所读取的参数重新设定所述被采用参数存储单元(10)，以及，在所述第二比特率确定单元(20)判定所述平均比特率小于所述预定第二门限的情况下，所述比特率改变单元(20)从所述分级参数存储单元(101)中读取一个将会比所述被采用参数存储单元(10)中设定的所述预定参数实现高一级的比特率的预定参数，并用所读取的参数重新设定所述被采用参数存储单元(10)。

5、根据权利要求1所述的图像处理装置，

其中，所述参数调整单元(20)响应于指示捕获运动图像，而开始调整所述预定参数，以及，响应于开始捕获运动图像，而结束调整所述预定参数。

6、根据权利要求5所述的图像处理装置，

其中，在开始捕获运动图像之后，所述编码数据生成单元(8)根据开始捕获时的预定参数，对通过捕获运动图像而获得的图像数据进行编码。

Images