CN1835593A - 信息处理设备和解码方法 - Google Patents

信息处理设备和解码方法 Download PDF

Info

Publication number
CN1835593A
CN1835593A CNA2006100679658A CN200610067965A CN1835593A CN 1835593 A CN1835593 A CN 1835593A CN A2006100679658 A CNA2006100679658 A CN A2006100679658A CN 200610067965 A CN200610067965 A CN 200610067965A CN 1835593 A CN1835593 A CN 1835593A
Authority
CN
China
Prior art keywords
picture
piecemeal
filtration treatment
carried out
mixed processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006100679658A
Other languages
English (en)
Inventor
北田典昭
内田耕辅
保科聪
菊池义浩
川岛裕司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN1835593A publication Critical patent/CN1835593A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

根据一个实施例，本发明提供了一种信息处理设备，包括解码被压缩和编码的移动图像流的解码单元(212)，对包括在移动图像流中的画面进行分块过滤处理以减少块失真的分块过滤单元(305)，进行以指定的透过率将第二画面重叠在第一画面上的混合处理的混合单元(213)，和确定是否对包括在移动图像流中的画面进行混合处理，并且当混合处理被进行时根据所述透过率改变对于第一和第二画面中的至少一个画面的分块过滤处理的处理量的控制单元(211)。

Description

信息处理设备和解码方法
                              技术领域
本发明的一个实施例涉及诸如个人电脑的能够对移动图像流进行解码的信息处理设备。
                              背景技术
近年来已经开发了具有和诸如数字多用光盘播放器和电视机等的音频视频(AV)设备相同功能的个人电脑。这些个人电脑采用用于解码由软件压缩和编码的移动图像流的软件解码器。这种软件解码器使被压缩和编码的移动图像流能用处理器(CPU)解码，而无需提供任何专门的硬件。
已经知道有一种带有软件解码器的系统，其中由诸如MPEG2和MPEG4的移动补偿帧间预测编码方法编码的移动图像流被解码，然后由解码产生的输出图像信号被后过滤以提高图像信号的质量(例如，参考No.2001-254294的日本专利申请公开公报)。为了防止帧丢失，这样的系统使用通过改变将在后过滤处理中进行的过滤处理而缩短后过滤处理的时间的技术。
后过滤处理在软件解码器之外进行。因此，如果在软件解码器本身的解码处理中造成了延迟，即使通过缩短后过滤的时间也不能防止帧丢失。
最近，人们已经注意到作为下一代移动图像压缩和编码技术的H.264/AVC(AVC：高级视频编码)标准。根据H.264/AVC标准的压缩和编码技术比诸如MPEG2和MPEG4的先有技术的压缩和编码技术更有效。因此，和H.264/AVC标准对应的每一个编码和解码处理比先有技术的压缩和编码技术需要更大的处理量。
在设计成用软件对在H.264/AVC标准下压缩和编码的移动图像流进行解码的个人电脑中，随着系统负荷的增加，解码处理本身将被延迟而不可能平稳地再现移动图像。
                                 发明内容
本发明的目的在于提供一种能够平稳地解码移动图像流的信息处理设备和解码方法。
根据本发明的实施例提供了一种能够解码被压缩和编码的移动图像流的信息处理设备。该设备包括对包括在移动图像流中的画面进行分块过滤处理以减小块失真的分块过滤单元，进行以指定的透过率在第一画面上重叠第二画面的混合处理的混合单元，以及确定是否对包括在移动图像流中的画面进行混合处理，且当混合处理被进行时根据透过率改变对于第一和第二画面中的至少一个画面的分块过滤处理的处理量的控制单元。
                                 附图说明
下面将结合附图对实施本发明的各个特征的总体结构进行描述。附图和相关说明被用于说明本发明的实施例，不用于限制本发明的范围。
图1是显示根据本发明的实施例的计算机的外形的示例性立体图；
图2是图1所示的计算机的系统构成的示例性框图；
图3是图1所示的计算机中所用的视频再现应用程序的功能的示例性框图；
图4是由图3所示的视频再现应用程序所实施的软件解码器的构型的示例性框图；
图5是混合处理(α混合)的实例的示例性说明图；
图6是包括在移动图像流中的参考画面和非参考画面的示例性说明图；
图7是说明减小由图3所示的视频再现应用程序执行的分块过滤处理的处理量的控制的实例的示例性表格；
图8是图3所示的视频再现应用程序所进行的解码处理的示例性流程框图；
图9是由图3所示的视频再现应用程序解码的移动图像流的结构的示意图；
图10是图9所示的移动图像流的存取单元的结构示意图。
                               具体实施方式
下面将参考附图对本发明的各个实施例进行描述。大体上，根据本发明的一个实施例提供了一种信息处理设备，该信息处理设备包括解码被压缩和编码的移动图像流的解码单元，对包括在移动图像流中的画面进行分块过滤以减少块失真的分块过滤单元，进行以指定的透过率将第二画面重叠在第一画面上的混合处理的混合单元，和确定是否对包括在移动图像流中的画面进行混合处理，且当混合处理被进行时根据透过率改变对于第一和第二画面中的至少一个画面的分块过滤处理的处理量的控制单元。
首先，参照图1和图2对根据第一实施例的信息处理设备的构型进行描述。信息处理设备以个人笔记本电脑10的形式实现。
图1是显示单元打开的个人笔记本电脑10的正视图。电脑10包括主机11和显示单元12。显示单元12包括具有液晶显示器(LCD)17的显示装置。LCD 17的显示画面位于显示单元12的几乎中心的部分。
显示单元12被附接到主机11上使得它可以在其打开和关闭的位置之间转动。主机11是薄盒状的外壳，其顶上具有键盘13、用于接通/切断电脑10的电源的电源按钮14、输入操作面板15和触摸片16。
输入操作面板15是用于输入和被按压按钮相对应的事件的输入装置，并具有多个用于起动其各自功能的按钮。这些按钮包括TV起动按钮15A和数字多用光盘(DVD)起动按钮15B。TV起动按钮15A起动记录和再现诸如数字TV节目等的广播节目数据的TV功能。当使用者按下按钮15A时，应用程序自动起动以实现TV功能。DVD起动按钮15B是用于再现记录在DVD上的视频内容的按钮。当使用者按下按钮15B时，应用程序自动起动以再现视频内容。
下面参考图2描述个人笔记本电脑10的系统构成。
参考图2，电脑10包括CPU 111、北桥112、主存储器113、图形控制器114、南桥119、BIOS-ROM 120、硬盘驱动器(HDD)121、光盘驱动器(ODD)122、数字TV广播调谐器123，嵌入式控制器/键盘控制器IC(EC/KBC)124和网络控制器125。
CPU 111是控制电脑10的操作的处理器。CPU 111进行诸如操作系统(OS)和视频再现应用程序201等的各种从HDD 121上装入主存储器113中的应用程序。
视频再现应用程序201是用于解码和再现被压缩和编码的移动图像数据的软件。程序201是根据H.264/AVC标准的软件解码器。程序201具有解码由H.264/AVC标准所定义的编码方法压缩和编码的移动图像流(例如，由数字TV广播调谐器123接收的数字TV节目和从ODD 122中读出的高分辨率(HD)标准视频内容)的功能。
如图3所示，视频再现应用程序201包括解码控制模块211，解码执行模块212和混合部213。
解码执行模块212是用于执行由H.264/AVC标准定义的解码处理的解码器。混合部213进行重叠两个由解码执行模块212解码的图像的混合处理。该两个图像以像素为单位以α数据为基础重叠，该α数据伴随两个图像中的一个图像，该图像是将被重叠在另一个(下面的)图像上的上面的图像(alpha blending，α混合)。α数据是表示上面的图像的每个像素的透过率的系数。在本实施例中，上面的和下面的图像都由解码执行模块212解码；但是，两个图像中的一个图像可以被用作为用户界面准备的菜单面板的图形。
根据由解码执行模块212解码的图像是否用于混合部213的混合处理，解码控制模块211控制将由解码执行模块212执行的解码处理的内容。
更具体地说，当由解码执行模块212解码的图像没有用于混合部213的混合处理时，解码控制模块211以CPU 111执行由H.264/AVC标准定义的解码处理这样的方式控制将由解码执行模块212执行的解码处理的内容。另一方面，当该图像被用于混合部213的混合处理时，解码控制模块211以由H.264/AVC标准定义的解码处理被部分简化或省略这样的方式控制将由解码执行模块212执行的解码处理的内容。例如，如下所述，模块211根据用于混合部213的混合处理的透过率改变分块过滤处理的处理量。
由视频再现应用程序201解码的移动图像数据通过显示驱动器202被写入图形控制器114的视频存储器114A。从而，被解码的移动图像数据被显示在LCD 17上。显示驱动器202是用于控制图形控制器114的软件。
CPU 111也执行存储在BIOS-ROM 120中的基本输入输出系统(BIOS)。BIOS是控制硬件的程序。
北桥112是连接CPU 111的本地总线和南桥119的桥装置。北桥112包括用于存取主存储器113的存储控制器。北桥112具有通过图形加速端口(AGP)总线或类似元件和图形控制器114进行通信的功能。
图形控制器114是控制作为电脑10的显示监视器的LCD 17的显示控制器。控制器114从写入到视频存储器(VRAM)114A的图像数据产生将提供到LCD 17的显示信号。
南桥119控制低引脚数(LPC)总线上的装置和外部设备互连(peripheral componentinterconnect，PCI)总线上的装置。南桥119包括用于控制HDD 121和ODD 122的集成驱动电路(IDE)控制器。而且，南桥119具有控制数字TV广播调谐器123的功能和访问BIOS-ROM 120的功能。
HDD 121是存储各种类型的软件和各项数据的存储装置。ODD 122是驱动诸如存储视频内容的DVD等的存储媒体的驱动单元。数字TV广播调谐器123是用于从外界接收诸如数字TV节目等的广播节目数据的接收装置。
嵌入式控制器/键盘控制器IC 124是单片微计算机，在其上集成用于管理电源的嵌入式控制器和用于控制键盘13和触摸片16的键盘控制器。IC 124具有根据用户对电源按钮14的操作打开/关闭电脑10的功能。而且，IC 124可以根据用户对TV起动按钮15A和DVD起动按钮15B的操作关闭电脑10。网络控制器125是和诸如互联网等的外部网络通信的通信装置。
下面将参考图4描述由视频再现应用程序201实现的软件解码器的构成。
视频再现应用程序201的解码执行模块212基于H.264/AVC标准。如图4所示，模块213包括信息熵解码部301、逆量子化部302、逆离散余弦变换(DCT)部303，加法部304、分块过滤部305、帧存储器306、移动向量预测部307、内插预测部308、加权预测部309、内预测部310和模式选择切换部311。H.264正交变换以整数精度进行，和先有技术的DCT不同；但是，这里假定把H.264正交变换称为DCT。
每个画面以16×16像素的宏块为单位进行编码。为每个宏块选择帧内编码模式(内编码模式)和移动补偿帧间预测编码模式(互编码模式)中的一种模式。
在移动补偿帧间预测编码模式中，和将被编码的画面对应的移动补偿帧间预测信号通过预测来自被编码画面的移动以固定单位的形式产生。通过将从将被编码的画面中减去移动补偿帧间预测信号而产生的预测误差信号通过DCT、量子化和信息熵编码而被编码。在内编码模式中，预测信号从将被编码的画面产生，然后通过DCT、量子化和信息熵编码而被编码。
为了进一步增加压缩比，根据H.264/AVC标准的CODEC采用了下面的技术：
(1)以比先有技术的MPEG的像素精度更高的像素精度(1/4像素精度)进行移动补偿；
(2)用于进行有效的帧内编码的帧内预测；
(3)用于减少块变形的分块过滤；
(4)以4×4像素为单位的整数DCT；
(5)多个给定位置的画面可以用作参考画面的多参考帧；和
(6)加权预测。
下面将描述图4所示的软件解码器的操作。
根据H.264/AVC标准被压缩和编码的移动图像流首先被输入到信息熵解码部301。该移动图像流不仅包括编码的图像信息而且包括移动补偿帧间预测编码(互预测编码)中使用的移动向量信息，在帧内预测编码(内预测编码)中使用的帧内预测信息和指示预测模式(互预测编码/内预测编码)的模式信息。
解码处理以16×16像素的宏块为单位进行。信息熵解码部301使移动图像流受到诸如可变长度解码处理等的信息熵解码处理，以从移动图像流分离量子DCT系数、移动向量信息(移动向量差分信息)，帧内预测信息和模式信息。在这种情况下，例如，在画面中的每个将被解码的宏块以4×4像素(或8×8像素)的块为单位受到信息熵解码处理，每个块被转换为4×4像素(或8×8像素)的量子化DCT系数。在下面的描述中假设每个块由4×4像素形成。
移动向量信息被提供到移动向量预测部307。帧内预测信息被发送到内预测部310。模式信息被提供到模式选择切换部311。
将被解码的块的4×4像素量子化DCT系数通过逆量子化部302的逆量子化处理而被转换成4×4像素量子化系数(正交变换系数)。4×4像素量子化DCT系数通过逆DCT部303的逆整数DCT(逆正交转换)处理而从频率信息转换为4×4像素值。4×4像素值是和将被解码的块对应的预测误差信号。预测误差信号被发送到加法部304。在加法部304中，和将被解码的块对应的预测信号(移动补偿帧间预测信号或帧内预测信号)被加到预测误差信号，从而和将被解码的块对应的4×4像素值被解码。
在内预测模式中，内预测部310由模式选择切换部311选择，帧内预测信号被加到来自内预测部310的预测误差信号。在互预测模式中，加权预测部309由模式选择切换部311选择，从而从移动向量预测部307、内插预测部308和加权预测部309产生的移动补偿帧间预测信号被加到预测误差信号。
如上所述，通过将预测信号(移动补偿帧间信号或帧内预测信号)加到和将被解码的画面对应的预测误差信号解码将被解码的画面的处理以给定的块单位进行。
被解码的画面受到分块过滤部305进行的分块过滤处理，然后存储在帧存储器306中。分块过滤处理以4×4像素的块为单位进行，以减少来自被解码画面的块失真。分块过滤处理防止块失真被包括在参考图像中，并防止块失真被传送到被解码图像中。分块过滤处理的处理量很大，有时要占软件解码器的总处理量的50％。分块过滤处理被适当地进行，使块失真容易发生的区域受到高过滤，使块失真不容易发生的区域受到低过滤。每个已经受到分块过滤处理的画面被作为输出图像帧(或输出图像域)从帧存储器306读出。每个用作移动补偿帧间预测的参考图像的画面(参考画面)被保持在帧存储器306中一段给定的时间周期。在根据H.264/AVC标准的移动补偿帧间预测编码中，多个画面可以用作参考画面。由于该原因，帧存储器306包括存储多个画面的图像的多个帧存储器部。
移动向量预测部307根据和将被解码的块对应的移动向量差分信息产生移动向量信息。内插预测部308根据和将被解码的块对应的移动向量信息在参考画面中以整数精度从像素组和以1/4像素精度从预测内插像素组产生移动补偿帧间预测信号。为了达到1/4像素精度的预测内插像素，首先使用六分头过滤器(六个输入一个输出)以产生1/2像素，然后使用二分头过滤器。可以进行考虑更高频率分量的高精度预测内插处理；因此，对于移动补偿需要更大的处理量。
加权预测部309进行以移动补偿块为单位对移动补偿帧间预测信号乘以加权系数以产生加权的移动补偿帧间预测信号的处理。这个加权预测处理是预测将被解码的画面的亮度的处理。这个处理可以提高诸如淡入淡出的亮度随时间改变的图像的质量。但是，软件解码所需要的处理量增加。
内预测部310从将被解码的画面产生包括在画面中的将被解码的块的帧内预测信号。更具体地说，内预测部310根据上述的帧内预测信息进行帧内预测处理，并从落入和将被解码的块同样的画面内，靠近将被解码的块并且已经被解码的块中的像素值产生帧内预测信号。该帧内预测(内预测)是使用在块之间像素中的关联增加压缩比的技术。在这个技术中，在16×16像素的情况下，根据帧内预测信息以帧内预测块为单位选择包括竖直预测(预测模式0)，水平预测(预测模式1)，平均预测(预测模式2)和平面预测(预测3)四个预测模式中的一个模式。选择平面预测所用的频率比选择其他帧内预测模式所用的频率低，但是平面预测所需要的处理量比其他帧内预测模式所需要的处理量大。
在本实施例中，当混合部313进行混合处理时，如参考图4所述的解码处理(下面称为正常解码处理)和特殊解码处理被选择性地执行以解码用于混合处理的图像。特殊解码处理是对应于简化的分块过滤处理或分块过滤处理被从中省略的处理，可以减小分块过滤处理(当混合处理被进行时，如果指定的透过率比参考值高，对于下面将描述的非参考画面的分块过滤处理的强度被减少)的处理量(或操作数)。下面将描述特定控制方法。
在本实施例中，主要对于减少分块过滤处理的处理量的移动图像。移动图像可以只是由用于混合处理的α数据伴随的上述上面的图像，只是下面的图像或者可以是上面的和下面的图像两者。为了避免复杂的描述，下文假定由α数据伴随的上面的图像(移动图像)是减少分块过滤处理的处理量的目标图像。
下面将简要描述将由混合部213执行的混合处理(α混合)。
当第二图像(上面的图像)以像素为单位被重叠在第一图像(下面的图像)上时，混合部213通过下面的等式(1)计算重叠的图像的每个像素的值：
V＝α×B+(1-α)A          (1)
其中，V是通过α混合所得到的重叠的图像的每个像素的值，α表示和第二图像的每个像素对应的0到1的α数据，A是第一图像的每个像素的值，B是第二图像的每个像素的值。
这里假定720×480像素的第二画面(a2)通过如图5所示的混合处理(α混合)被重叠在1920×1080像素的第一画面(a1)上产生重叠画面(a3)。
第一画面(a1)中第二画面(a2)没有重叠的区域的每个像素的α数据是0。这个区域因此变得透明，从而第一画面(a1)的图像数据以100％的不透明度显示在重叠的画面(a3)中的该区域上。第二画面(a2)的图像数据的像素以与第二画面(a2)对应的α数据所指定的透过率显示在重叠画面(a3)上第一画面(a1)的图像数据上。例如，α数据“1”的第二画面(a2)的图像数据的像素以100％的不透明度显示，和第二画面(a2)的图像数据的像素对应的第一画面(a1)的图像数据的像素没有显示。
下面将参考图6描述包括在移动图像流中的参考和非参考画面。
包括在还没有被解码的移动图像流中的各种画面以预定的顺序被输入到软件解码器(图4)，并受到诸如移动补偿帧间预测和帧内预测的处理。这里考虑画面(I画面)401，画面(B画面)402，画面(B画面)403，画面(B画面)404和画面(P画面)405被以指定的顺序输入到软件解码器并受到处理。
P画面是用于通过参考一个画面进行移动补偿帧间预测处理的画面。B画面是用于通过参考两个画面进行移动补偿帧间预测处理的画面。I画面是用于只在画面内而不参考其他画面进行帧内预测处理的画面。
图6所示的画面401不参考其他画面但是被画面402，403和405参考。画面403参考画面401和405，并被画面402和404参考。画面405参考画面401并被画面403和404参考。在帧间预测中被其他画面参考的画面401，403和405对应于参考画面。
如图6所示的画面402参考画面401和403，且不被其他画面参考。画面404参考画面403和405，且不被其他画面参考。在帧间预测中被其他画面参考的画面402和404对应于非参考画面。
在上述的特殊解码处理中下面三个控制方法可以被采用以减少分块过滤处理的处理量。
控制方法1：当遇到某种情况时，非参考画面的分块过滤处理无效力。目标图像是参考画面还是非参考画面可以通过参考一个包括在网络提取层(NAL)单元(后面将描述)中的值nal_ref_idc来确定。如果这个值是0，目标图像对应于非参考画面。
控制方法2：当遇到某种情况时，对应于非参考画面或所有画面的分块过滤处理的过滤强度被减小。过滤强度取决于从将被过滤的像素的属性得到的边界强度(bS)。边界强度(bS)代表0，1，2，3，和4中的一个数。如果bS是0，没有过滤处理进行。如果bS是4，进行最强的过滤处理，并且相应增加操作数。在控制方法2中，当bS是1，2，3中的一个数时，进行边界强度(bS)等于0的过滤处理(换句话说，过滤强度被减小)。当bS是4时，进行边界强度(bS)等于4的过滤处理(换句话说，过滤强度被保持原来的强度)。
控制方法3：当遇到某种情况时，和所有画面都对应的分块过滤处理无效力。
将上述三个控制方法1到3适当地组合可以进行下面的控制。当图像受到混合处理时指定的像素的透过率低时，可以防止被解码图像的质量下降。透过率低的像素的分块过滤处理的操作数被减少。
图7是显示由上述三个控制方法的组合进行的控制的实例的表格。
在这个实例中，当对包括在移动图像流中的画面进行混合处理时，用于分块过滤处理的处理量(操作数)根据指定的透过率逐步改变。
当在图像受到混合处理时指定的图像的透过率超过60％时，应用用于减少对于非参考画面的分块过滤处理的强度的控制模式C1。当指定的透过率超过70％时，应用用于删除对于非参考画面的分块过滤处理的控制模式C2。当指定的透过率超过80％时，应用用于减少对于所有画面的分块过滤处理的强度的控制模式C3。当指定的透过率超过90％时，应用用于删除对于所有画面的分块过滤处理的控制模式C4。
下面将参考图8所示的流程图描述由视频再现应用程序201进行的解码处理的过程。
当视频再现应用程序201执行解码处理时，它监视混合部213是否进行α混合处理(方块S101)。如果没有进行α混合处理(方块S101中的“否”)，视频再现应用程序201将上述正常解码处理选择为将由CPU 111执行的解码处理，从而在CPU 111上进行参考图4描述的解码处理(方块S102)。
如果进行α混合处理(方块S101中的“是”)，视频再现应用程序201将上述特殊解码处理选择为将由CPU 111执行的解码处理，并选择对应于指定透过率的控制模式(图7)(方块S103)。
当指定的透过率超过60％时，应用用于减少对于非参考画面的分块过滤处理的强度的控制模式C1。当指定的透过率超过70％时，应用用于删除对于非参考画面的分块过滤处理的控制模式C2。当指定的透过率超过80％时，应用用于减少对于所有画面的分块过滤处理的强度的控制模式C3。当指定的透过率超过90％时，应用用于删除对于所有画面的分块过滤处理的控制模式C4。
在选择上述控制模式中，视频再现应用程序201在有必要时分析包括在移动图像流中的语法信息，并确定将被编码的画面是否是非参考画面。语法信息是表明移动图像流的序列结构的信息。上述移动向量信息，帧内预测信息和模式信息也包括在语法信息中。程序201可以根据已经受到信息熵解码处理的语法信息从包括在移动图像流中的编码的画面中探测非参考画面组。
更具体地说，如图9所示，H.264序列结构包括多个存取单元(AU)。每个存取单元对应一个画面并包括多个NAL单元。如图10所示，NAL单元被分成头部和数据部。NAL单元的数量是32个，它们可以通过解析NAL头部而被辨别。NAL头部包括上述值“nal_ref_idc”。参考上述值，可以确定目标图像是参考画面还是非参考画面。如果上述值“nal_ref_idc”为0，图像被确定为非参考画面。
然后，视频再现应用程序201在CPU 11上进行解码处理，以根据所选择的控制模式减少分块过滤处理的处理量(方块S104)。
前述的方块S101到S104被重复，直到所有的移动图像流被完全解码(方块S105)。
如上所述，当视频再现应用程序201对图像进行混合处理时，它选择和指定的透过率对应的控制模式，并进行特殊解码处理，通过特殊解码处理，分块过滤处理被减少适当的处理量。
在本实施例中，上面的图像(画面)被用作分块过滤处理被减少适当的处理量的目标图像。但是，下面的图像(画面)可以被用作目标图像，上面的图像和下面的图像(画面)都可以作为目标图像。在这种情况下，控制的方法和操作与参考图7和8所描述的方法和操作相同。
如上所述，当将被解码的画面受到α混合处理时，解码处理可以根据所指定的透过率逐步减少。从而，可以防止观众具有解码图像的质量急剧下降的印象，由于解码中的延迟造成的帧丢失可以被尽量避免。因此，移动图像可以被平稳地再现。
上述解码处理全部由计算机程序实现。因此，如果该计算机程序通过计算机可读存储介质被简单地引入到普通的计算机中，可以很容易地得到与本实施例同样的优点。
本实施例的软件解码器并不限于个人电脑，也可以应用到个人数字助理(PDA)，移动电话等等。
如上所述，移动图像流可以被平稳地解码。
虽然上文描述了本发明的某些实施方式，但这些实施方式只是以实例的方式提出，其意图并不是限制本发明的范围。实际上，本文所描述的新颖的方法和系统可以以其他各种形式体现，而且，可以在本文叙述的方法和系统的形式中进行各种删节、修改和替换而不背离本发明的精神。附后的权利要求及其等效内容的意图是覆盖落入本发明的范围和精神中的这样的形式或修改。

Claims (9)

1.一种信息处理设备，其特征在于，包括：
解码被压缩和编码的移动图像流的解码单元；
对包括在移动图像流中的画面进行分块过滤处理以减少块失真的分块过滤单元；
进行以指定的透过率将第二画面重叠在第一画面上的混合处理的混合单元；
判定是否对包括在移动图像流中的画面进行混合处理，并且当混合处理被进行时根据所述透过率改变对于第一和第二画面中的至少一个画面的分块过滤处理的处理量的控制单元。
2.如权利要求1所述的信息处理设备，其特征在于，当所述混合处理被进行时，所述控制单元改变对于第一和第二画面中的一个画面的对应于移动图像的分块过滤处理的处理量。
3.如权利要求1所述的信息处理设备，其特征在于，当所述混合处理被进行时，所述控制单元根据所述透过率改变分块过滤处理的强度。
4.如权利要求3所述的信息处理设备，其特征在于，当所述混合处理被进行时，如果所述透过率高于参考值，所述控制单元减小分块过滤处理的强度。
5.如权利要求1所述的信息处理设备，其特征在于，当所述混合处理被进行时，所述控制单元根据所述透过率改变分块过滤处理的处理量将被减少的画面。
6.如权利要求5所述的信息处理设备，其特征在于，当所述混合处理被进行时，如果所述透过率高于参考值，所述控制单元减小对于非参考画面的分块过滤处理的强度，该非参考画面是包括在移动图像流中的画面中的一个画面且在帧间预测中不被其他画面参考。
7.一种解码方法，其特征在于，包括：
解码被压缩和编码的移动图像流；
对包括在移动图像流中的画面进行分块过滤处理以减少块失真；
判定是否对包括在移动图像流中的画面进行以指定的透过率将第二画面重叠在第一画面上的混合处理；
当混合处理被进行时，根据所述透过率改变对于第一和第二画面中的至少一个画面的分块过滤处理的处理量。
8.如权利要求7所述的方法，其特征在于，当混合处理被进行时，所述改变包括如果所述透过率高于参考值，减小分块过滤处理的强度。
9.如权利要求7所述的方法，其特征在于，当混合处理被进行时，所述改变包括如果所述透过率高于参考值，减小对于非参考画面的分块过滤处理的强度，该非参考画面是包括在移动图像流中的画面中的一个画面且在帧间预测中不被其他画面参考。
CNA2006100679658A 2005-03-14 2006-03-14 信息处理设备和解码方法 Pending CN1835593A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005071108A JP2006254320A (ja) 2005-03-14 2005-03-14 情報処理装置および同装置で用いられるプログラム
JP2005071108 2005-03-14

Publications (1)

Publication Number Publication Date
CN1835593A true CN1835593A (zh) 2006-09-20

Family

ID=36581801

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006100679658A Pending CN1835593A (zh) 2005-03-14 2006-03-14 信息处理设备和解码方法

Country Status (4)

Country Link
US (1) US20060203910A1 (zh)
EP (1) EP1703738A2 (zh)
JP (1) JP2006254320A (zh)
CN (1) CN1835593A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847808A (zh) * 2010-10-06 2016-08-10 Sk电信有限公司 使用高精度滤波器编码/解码视频的方法和设备
CN112702598A (zh) * 2020-12-03 2021-04-23 浙江智慧视频安防创新中心有限公司 基于位移操作进行编解码的方法、装置、电子设备及介质
CN112702598B (zh) * 2020-12-03 2024-06-04 浙江智慧视频安防创新中心有限公司 基于位移操作进行编解码的方法、装置、电子设备及介质

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5030495B2 (ja) * 2006-07-14 2012-09-19 ソニー株式会社 再生装置、再生方法、プログラム、および記録媒体
US9014280B2 (en) * 2006-10-13 2015-04-21 Qualcomm Incorporated Video coding with adaptive filtering for motion compensated prediction
KR100846512B1 (ko) * 2006-12-28 2008-07-17 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
JP4875007B2 (ja) * 2007-02-09 2012-02-15 パナソニック株式会社 動画像符号化装置、動画像符号化方法、及び、動画像復号化装置
US8878996B2 (en) * 2009-12-11 2014-11-04 Motorola Mobility Llc Selective decoding of an input stream
EP2670140A1 (en) * 2012-06-01 2013-12-04 Alcatel Lucent Method and apparatus for encoding a video stream

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6466226B1 (en) * 2000-01-10 2002-10-15 Intel Corporation Method and apparatus for pixel filtering using shared filter resource between overlay and texture mapping engines
JP4230636B2 (ja) * 2000-02-29 2009-02-25 株式会社東芝 動画像再生方法および動画像再生装置
JP3882651B2 (ja) * 2002-03-20 2007-02-21 富士ゼロックス株式会社 画像処理装置およびプログラム
JP2006254232A (ja) * 2005-03-11 2006-09-21 Toshiba Corp 情報処理装置およびプログラム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847808A (zh) * 2010-10-06 2016-08-10 Sk电信有限公司 使用高精度滤波器编码/解码视频的方法和设备
CN105847808B (zh) * 2010-10-06 2019-06-11 Sk电信有限公司 使用高精度滤波器编码/解码视频的方法和设备
CN112702598A (zh) * 2020-12-03 2021-04-23 浙江智慧视频安防创新中心有限公司 基于位移操作进行编解码的方法、装置、电子设备及介质
CN112702598B (zh) * 2020-12-03 2024-06-04 浙江智慧视频安防创新中心有限公司 基于位移操作进行编解码的方法、装置、电子设备及介质

Also Published As

Publication number Publication date
EP1703738A2 (en) 2006-09-20
JP2006254320A (ja) 2006-09-21
US20060203910A1 (en) 2006-09-14

Similar Documents

Publication Publication Date Title
CN1832577A (zh) 具有解码器的信息处理设备
CN1208971C (zh) 运动图像的预测编码方法和译码方法
CN1835593A (zh) 信息处理设备和解码方法
CN1290342C (zh) 可执行区块比对移动补偿与全域移动补偿的装置与方法
CN1148969C (zh) 图像编码装置和图像解码装置
CN1203676C (zh) 能够进行简易的多窗口显示的活动图象解码装置以及活动图象解码方法
CN1832578A (zh) 信息处理装置和信息处理程序
CN1278550C (zh) 用于再现图像的方法和装置以及图像记录装置
CN1239025C (zh) 使用画面类型转换的图象处理
CN1817049A (zh) 动态图像编码方法及动态图像解码方法
CN1784011A (zh) 图像编码装置及图像编码方法
CN101043600A (zh) 重放设备和使用该重放设备的重放方法
CN1574943A (zh) 用于控制数字视频比特流逆向播放的装置和方法
CN1960495A (zh) 图像编码装置、方法及程序
CN101052128A (zh) 运动检测装置和方法、运动检测集成电路和图像编码装置
CN101068364A (zh) 视频编码器与图形处理单元
CN1543220A (zh) 视频解码装置和方法
JP2008072647A (ja) 情報処理装置、デコーダおよび再生装置の動作制御方法
CN1256849C (zh) 1/4像素精度插值的方法和装置
JP2009038501A (ja) 復号化装置および復号方法
CN1529509A (zh) 视频图像亚像素插值的方法和装置
CN1159636C (zh) 半导体装置以及采用该装置的电子设备
CN1614990A (zh) 信号处理方法及信号处理装置
JP4314315B1 (ja) 情報処理装置および復号制御方法
JP2006101321A (ja) 情報処理装置および同装置で用いられるプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication