CN100428331C

CN100428331C - 移动终端中图像自适应缩放的装置及其方法

Info

Publication number: CN100428331C
Application number: CNB200510036631XA
Authority: CN
Inventors: 杨鹏亮; 潘胜昔
Original assignee: Shenzhen Huawei Communication Technologies Co Ltd
Current assignee: Huawei Device Co Ltd
Priority date: 2005-08-12
Filing date: 2005-08-12
Publication date: 2008-10-22
Anticipated expiration: 2025-08-12
Also published as: CN1858843A

Abstract

本发明涉及图像处理和显示的技术，公开了一种移动终端中图像自适应缩放的装置及其方法，使得移动终端可以自适应地调整播放的流媒体图像的大小和分辨率，在保证图像不失真的情况下，使得图像的分辨率能和显示屏的分辨率相匹配。本发明中，方案根据输入图像的分辨率计算缩放倍数，自适应缩放图像使之尽量满屏显示，此外，缩放倍数实际取值为离散的若干个有限取值，在理论缩放倍数介于两个相邻离散取值之间时取较小的离散值作为实际取值。

Description

移动终端中图像自适应缩放的装置及其方法

技术领域

本发明涉及图像处理和显示的技术，特别涉及移动终端中图像处理和显示的技术。

背景技术

多媒体技术是把文字、声音和图像等多种媒体集合成一体的技术。移动通信的发展使得多媒体技术与移动通信的结合也越来越密切，随着第三代移动通信(The Third Generation，简称“3G”)在世界范围内的商用，以及第2.5代移动通信(2.5G)在中国的预演，人们日益认识到，以音视频为特色的多媒体业务将成为未来移动通信的核心应用。和移动通信相结合的多媒体即移动多媒体带来了一种全新的交流模式，移动终端也从单纯的通信工具，转变为一种可以随时随地提供内容和服务的全新媒体。

移动多媒体业务可以分为流媒体(streaming)、多媒体消息、视频通信等三类。其中，移动流媒体业务是最具潜力的新业务，它不需要下载整个文件，可以一边下载一边播放，可以为用户提供实时接收影视、音乐、体育、娱乐、监控等业务，业界普遍认为流媒体将是3G的关键应用，是未来3G网络中的典型业务。移动多媒体对于3G的带动作用十分显著，目前移动多媒体业务正逐步推动3G来到我们身边。

由于移动终端的种类多种多样，而且随着移动多媒体等业务的应用，移动终端进入彩屏时代，在市场上高、中、低端移动终端同时存在，其显示屏幕的分辨率区别很大。例如，满足四分之一通用媒体格式(Quarter CommonIntermediate Format，简称“QCIF”)格式的显示屏分辨率为176×144像素；而满足四分之一影像阵列(Quarter Video Graphics Array，简称“QVGA”)格式的显示屏的分辨率为320×240像素；此外，移动终端显示屏的分辨率还可以大于320×240像素，或小于176×144像素，或为176×220像素这样介于QCIF和QVGA格式之间的中间值。

一般来说，移动终端中显示的图像的分辨率和移动终端显示屏的分辨率并不相同，如果需要使图像适应各种不同分辨率的显示屏，则需要对图像进行压缩或放大的处理。

图象压缩通常采用降采样的方法，可以通过降采样滤波器实现。降采样滤波器根据输入的数字串或矩阵，生成规模更小的数字串或矩阵。对于图象处理而言，简单的降采样滤波器可以有均值、中值、小波算法等，图像处理过程中要考虑图像本身的因素包括图形等。例如，如果把640×480像素的图像压缩成320×240像素的图像，需要把平均两行或列变为一个行或列，具体可以是相邻两点的均值和中值，或其他的算法算出来的一个值。

图象放大通常采用插值的方法，可以通过插值滤波器实现。插值滤波器根据输入的数字串或矩阵，生成规模更大的数字串或矩阵。对于图象处理而言，简单的插值滤波器可以有均值、中值、小波算法等，图象处理过程中要考虑图像本身的因素包括图形等。例如，如果把320×240像素的图像放大成640×480像素的图像，需要每隔一行或列插入一个行或列，具体插入的值可以是相邻两点的均值和中值，或其他的算法算出来的一个值。

需要说明的是，图像压缩和放大不限于整数倍数的缩放，只是对于非均匀比例的缩放，算法会更加复杂。关于图像缩放的相关算法为已有技术，在此不详细说明。

对于移动流媒体来说，图像的大小一般采用标准化的大小，例如可以为176×144像素的QCIF格式或320×240像素的QVGA格式。对于不同分辨率的移动终端显示屏，就可能存在流媒体图像固有的分辨率和移动终端显示屏分辨率不匹配的情况。例如，对于一个分辨率为320×240像素的显示屏，在播放QCIF(176×144像素)格式的流媒体时，如果不进行图像大小匹配的处理，图像只能显示在显示屏中心的某个位置；而对于一个分辨率为176×144像素的显示屏，在播放QCIF(320×240像素)格式的流媒体时，如果不进行图像大小匹配的处理，则在显示屏上可能只能显示部分图像。

然而，现有技术中没有根据移动终端显示屏分辨率大小进行图像自适应缩放的方案，这有可能导致移动终端播放流媒体时图像不匹配。例如，在高分辨率的大显示屏播放低分辨率的流媒体图像时，只在显示屏的部分区域显示图像，显然会造成显示屏能力的浪费和不好的用户体验；在低分辨率的显示屏播放高分辨率的流媒体图像时，又可能出现图像显示不完全的情况，造成用户无法正常观看流媒体图像。

发明内容

有鉴于此，本发明的主要目的在于提供一种移动终端中图像自适应缩放的装置及其方法，使得移动终端可以自适应地调整播放的流媒体图像的大小和分辨率，在保证图像不失真的情况下，使得图像的分辨率能和显示屏的分辨率相匹配。

为实现上述目的，本发明提供了一种移动终端中图像自适应缩放的装置，包含：

参数获取模块，缩放倍数计算模块，图像适配模块和显示模块；

所述参数获取模块用于获取所述图像的分辨率参数；

所述缩放倍数计算模块用于根据所述图像的分辨率参数和所述移动终端显示屏的分辨率参数计算使图像满屏显示所需的缩放倍数；

所述图像适配模块用于根据所述缩放倍数计算模块计算出的缩放倍数值对所述图像进行缩放处理；

所述显示模块用于将所述图像适配模块的输出显示在所述显示屏上。

其中，所述缩放倍数计算模块最终得到的所述缩放倍数为包含有限个元素的缩放倍数取值表中的值。

所述缩放倍数计算模块根据以下方式计算所述缩放倍数：

若所述图像原始分辨率和所述显示屏分辨率分别为S＝X×Y和S₁＝X₁×Y₁，所述缩放倍数计算模块计算理论缩放倍数，使得非负的ΔS＝S₁-S*K²最小，并在所述缩放倍数取值表中选取小于或等于所述理论缩放倍数的最大表项值作为最终的缩放倍数；其中X、Y、X1、Y2为正整数，K为实数。

此外在所述装置中，所述图像为流媒体的图像，所述图像缩放倍数取值表中的取值按照满足所述图像适配模块处理的实时性要求预先设置。

此外在所述装置中，所述显示模块将缩放后的图像显示在所述显示屏的居中位置。

此外在所述装置中，所述图像长和宽的缩放倍数相同。

本发明还提供了一种移动终端中图像自适应缩放的方法，包含以下步骤：

A获取所述图像和所述移动终端的显示屏的分辨率参数；

B根据所述分辨率参数计算使图像满屏显示所需的理论缩放倍数；

C查找预先设置的图像缩放倍数取值表得到小于或等于所述理论缩放倍数的最大值作为实际缩放倍数；

D根据所述实际缩放倍数对所述图像进行缩放处理并显示在所述显示屏上。

其中，所述步骤D中，在所述显示屏上居中显示缩放处理后的所述图像。

此外在所述方法中，所述图像为流媒体的图像，所述图像缩放倍数取值表中的取值按照满足所述图像适配模块处理的实时性要求预先设置。

此外在所述方法中，所述图像长和宽的缩放倍数相同。

通过比较可以发现，本发明的技术方案与现有技术的主要区别在于，本发明方案根据输入图像的分辨率计算缩放倍数，自适应缩放图像使之尽量满屏显示，此外，缩放倍数实际取值为离散的若干个有限取值，在理论缩放倍数介于两个相邻离散取值之间时取较小的离散值作为实际取值。

这种技术方案上的区别，带来了较为明显的有益效果，即本发明方案可以自适应的使图像和移动终端显示屏的分辨率相匹配，第一，在高分辨率大显示屏播放低分辨率的小图像时，本发明方案可以避免仅在很小区域内显示图像造成的显示屏能力浪费的问题；第二，在低分辨率小显示屏播放高分辨率的大图像时，本发明方案可以避免图像显示不完全影响用户正常观看的问题；第三，本发明方案图像大小的自适应调整可以使得用户获得更好的使用体验，并且本发明方案对于不同的终端均可以使用，有助于流媒体业务的开展和运营商收入的提高。

附图说明

图1是根据本发明第一较佳实施例的移动终端中图像自适应缩放的装置组成示意图；

图2是本发明第一较佳实施例使用的缩放倍数取值的区间划分示意图；

图3是在本发明第一较佳实施例中图像显示居中原则的示意图；

图4是根据本发明第一较佳实施例的移动终端中图像自适应缩放的方法的流程。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述。

本发明方案首先获取显示屏和图像的分辨率参数，然后在保证图像不失真的前提下，计算图像缩放倍数使得缩放后的图像可以尽量满屏显示，最后根据计算出的图像缩放倍数调用插值或降采样的图像处理函数进行图像插值或降采样处理后显示在显示屏中央。出于简化处理的目的，图像缩放倍数为一个固定集合内的有限取值，其中，合理的有限取值可以通过输入图像分辨率的限制获得。

此外，出于流媒体播放连续性的考虑，本发明方案在处理能力可能不足时，实时性的优先级大于图像缩放的处理，即在保证不丢帧的情况下尽量满足流媒体图像自适应缩放的要求。

根据本发明第一较佳实施例的移动终端中图像自适应缩放的装置组成如图1所示。

移动终端中图像自适应缩放的装置包含以下几个模块：参数获取模块，缩放倍数计算模块，图像适配模块和显示模块。

参数获取模块用于获取显示屏和图像的分辨率以及流量等参数，并将这些参数传递给缩放倍数计算模块。其中，显示屏的分辨率参数存放在固定地址内，可以直接从中读取；图像分辨率和流量参数可以在流媒体链接建立时获取。在本发明第一较佳实施例中，显示屏为液晶显示屏(Liquid CrystalDisplay，简称“LCD”)，分辨率使用S₁＝X₁×Y₁表示；原始图像的分辨率使用S＝X×Y表示。本领域的普通技术人员理解，显示屏种类可以不限于LCD，同样可以使用本发明方案。

缩放倍数用于计算模块用于在保证图像不失真的前提下，根据显示屏和图像分辨率以及流量等参数结合移动终端的处理能力计算缩放倍数值使得缩放后的图像可以尽量满屏显示，并将缩放倍数值传递给图像适配模块。其中，缩放倍数表示为K，为了保证缩放后的图像不失真，要求图像被均匀放大，即图像长和宽缩放倍数相同，即缩放后图像的分辨率可以表示为S_t＝(X*K)*(Y*K)＝X*Y*K²＝S*K²；为了缩放后的图像可以尽量满屏显示，要求非负的ΔS＝S₁-S_t在满足移动终端的处理能力前提下最小。其中，结合移动终端的处理能力是为了避免流媒体播放时丢帧，可以根据缩放倍数和图像分辨率获得图像缩放时对移动终端处理能力要求的消耗，结合移动终端当前剩余的处理能力获知是否能满足当前计算出的缩放倍数值对处理能力的要求，若不能达到则需要改变计算出的缩放倍数值。

理论上计算，

K \approx \sqrt{\frac{S_{1}}{S}} = \sqrt{\frac{X_{1} * Y_{1}}{X * Y}}

可以任意取值，在本发明第一较佳实施例中，出于简化处理的目的，图像缩放倍数值为一个固定集合内的有限取值，如果计算出的K介于固定集合内两个相邻取值中间，则取其下限即较小值作为最终K值，记为

。其中，合理的有限取值可以通过输入图像分辨率的限制以及显示屏的分辨率获得，例如，如果输入流媒体格式限制为QCIF或QVGA，则根据移动终端显示屏的分辨率即可以获得合理的有限个缩放倍数值。本发明第一较佳实施例使用的缩放倍数取值的区间划分如图2所示。

图像适配模块用于根据缩放倍数值调用插值或降采样函数逐帧对输入媒体流的图像进行缩放处理，并将处理后的输出媒体流发送给显示模块。其中，插值或降采样函数为现有技术，有多种方案可以实现，在此不详细说明。

显示模块用于将图像适配模块输出的媒体流显示在显示屏上。在本发明第一较佳实施例中，显示模块显示的原则为居中原则，即满足图像的中心和显示屏的中心重合，如图3所示。

根据本发明第一较佳实施例的移动终端中图像自适应缩放的方法的流程如图4所示。

首先进入步骤400，获取图像和显示屏参数。其中，图像和显示屏参数为其分辨率参数。在本发明第一较佳实施例中，原始图像的分辨率使用S＝X×Y表示；显示屏的分辨率使用S₁＝X₁×Y₁表示。

接着进入步骤410，在图像不失真的前提下计算缩放倍数使得图像尽量满屏显示。其中，缩放倍数表示为K，为了保证缩放后的图像不失真，要求图像被均匀放大，即图像长和宽缩放倍数相同，缩放后图像的分辨率可以表示为S_t＝(X*K)*(Y*K)＝X*Y*K²＝S*K²；为了缩放后的图像可以尽量满屏显示，要求ΔS＝S₁-S_t在满足移动终端的处理能力前提下最小。

接着进入步骤420，查表得到小于等于步骤410计算出的缩放倍数的最大表项值作为实际缩放倍数。理论上计算，

K \approx \sqrt{\frac{S_{1}}{S}} = \sqrt{\frac{X_{1} * Y_{1}}{X * Y}}

可以任意取值，在本发明第一较佳实施例中，出于简化处理的目的，图像缩放倍数值为一个固定集合内的有限取值，如果计算出的K介于固定集合内两个相邻取值中间，则取其下限即较小值作为最终K值，记为。其中，合理的有限取值可以通过输入图像分辨率的限制以及显示屏的分辨率获得，例如，如果输入流媒体格式限制为QCIF或QVGA，则根据移动终端显示屏的分辨率即可以获得合理的有限个缩放倍数值。本发明第一较佳实施例使用的缩放倍数取值的区间划分如图2所示。

在本发明第一较佳实施例中，为了保证流媒体播放的流畅，在步骤410中，计算出的缩放倍数值还需要满足图像缩放处理实时性的要求，即对于流媒体一帧图像进行缩放处理的时间要小于流媒体的帧周期，要求在满足移动终端处理能力的前提下进行步骤410和步骤420的计算。

接着进入步骤430，根据实际缩放倍数对图像进行缩放处理并显示。在本发明第一较佳实施例中，通过调用插值或降采样函数逐帧对输入媒体流的图像进行缩放处理；图像显示的原则为居中原则，即满足图像的中心和显示屏的中心重合，如图3所示。

虽然通过参照本发明的某些优选实施例，已经对本发明进行了图示和描述，但本领域的普通技术人员应该明白，可以在形式上和细节上对其作各种改变，而不偏离本发明的精神和范围。

Claims

1.一种移动终端中图像自适应缩放的装置，其特征在于，包含：

所述参数获取模块用于获取所述图像的分辨率参数；

2.根据权利要求1所述的移动终端中图像自适应缩放的装置，其特征在于，所述缩放倍数计算模块最终得到的所述缩放倍数为包含有限个元素的缩放倍数取值表中的值。

3.根据权利要求2所述的移动终端中图像自适应缩放的装置，其特征在于，所述缩放倍数计算模块根据以下方式计算所述缩放倍数：

4.根据权利要求2所述的移动终端中图像自适应缩放的装置，其特征在于，所述图像为流媒体的图像，所述图像缩放倍数取值表中的取值按照满足所述图像适配模块处理的实时性要求预先设置。

5.根据权利要求1所述的移动终端中图像自适应缩放的装置，其特征在于，所述显示模块将缩放后的图像显示在所述显示屏的居中位置。

6.根据权利要求1至5中任一项所述的移动终端中图像自适应缩放的装置，其特征在于，所述图像长和宽的缩放倍数相同。

7.一种移动终端中图像自适应缩放的方法，其特征在于，包含以下步骤：

A获取所述图像和所述移动终端的显示屏的分辨率参数；

8.根据权利要求7所述的移动终端中图像自适应缩放的方法，其特征在于，所述步骤D中，在所述显示屏上居中显示缩放处理后的所述图像。

9.根据权利要求7所述的移动终端中图像自适应缩放的方法，其特征在于，所述图像为流媒体的图像，所述图像缩放倍数取值表中的取值按照满足所述图像适配模块处理的实时性要求预先设置。

10.根据权利要求7至9中任一项所述的移动终端中图像自适应缩放的方法，其特征在于，所述图像长和宽的缩放倍数相同。