CN1463552A - 视频图像的分辨率的按比例缩减 - Google Patents

视频图像的分辨率的按比例缩减 Download PDF

Info

Publication number
CN1463552A
CN1463552A CN02801764A CN02801764A CN1463552A CN 1463552 A CN1463552 A CN 1463552A CN 02801764 A CN02801764 A CN 02801764A CN 02801764 A CN02801764 A CN 02801764A CN 1463552 A CN1463552 A CN 1463552A
Authority
CN
China
Prior art keywords
proportion
vision signal
filtering
antialiasing
reduced
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN02801764A
Other languages
English (en)
Other versions
CN1224265C (zh
Inventor
K·加加林
C·C·A·M·范宗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Funai Electric Co Ltd
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1463552A publication Critical patent/CN1463552A/zh
Application granted granted Critical
Publication of CN1224265C publication Critical patent/CN1224265C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4084—Scaling of whole images or parts thereof, e.g. expanding or contracting in the transform domain, e.g. fast Fourier transform [FFT] domain scaling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

提供一种用于将视频图像按比例缩减到更低分辨率(例如从HDTV到SDTV)的方法和装置。此方法包括以下步骤：在与第一视频信号中的行方向对应的第一方向上对第一视频信号进行频域抗混淆滤波和按比例缩减以得到按比例缩减的视频信号；以及在垂直于第一方向的第二方向上对按比例缩减的视频信号进行空间域按比例缩减以得到第二视频信号。本发明的方法和装置适合于有效地和高质量地对逐行和任何类型编码的隔行信号进行解码。

Description

视频图像的分辨率的按比例缩减
对相关申请的优先权/交叉引用的申明
本申请要求享有于2001年5月22日提交的序列号为60/292715的美国临时专利申请的优先权。将上述申请的内容通过引用结合于本文中。
发明领域
本发明涉及在视频信号、如高清晰度电视(HDTV)信号中按比例缩减空间分辨率。更具体地说，本发明涉及按比例缩减HDTV信号的分辨率，从而使其与标准清晰度电视(SDTV)的分辨率相匹配。
发明背景
电视自从引入商业市场以来就成为一种普遍存在的产品，遍及日常生活的每一角落。与任何其它新闻形式或媒体相比，无论是广播电视还是有线电视都为观众提供关于世界变化的更多信息。因此，在使用的电视机数量达数亿台之多。
称为标准清晰度电视(SDTV)的现有电视技术是基于在二十世纪中叶开发并标准化的模拟技术。这些早已建立的用于频率分配、格式化等的电视广播标准对可供传输、继而被用户观看的信息的量加以限制。设计成克服SDTV的限制的称为高清晰度电视(HDTV)的新型数字电视技术能够提高所传输的数据量，这是通过在传输前对电视信号进行数字化和压缩来实现的。HDTV明显优于SDTV之处在于，增大的数据传输改善了所观看图像的清晰度。通过传输具有比SDTV传输更大的分辨率的图像来提高清晰度。
由于HDTV传输的数量开始随着现有SDTV传输一起增长，因此数亿台SDTV电视机必须适合于接收这种新的HDTV信号。通过增设转换器盒、如机顶盒以使所接收的HDTV信号空间上按比例缩减到在SDTV电视机上观看可接受的格式，就能容易地实现SDTV电视机与HDTV格式的适配。从HDTV到SDTV的空间上按比例缩减的技术在本领域中是众所周知的。
WO97/14252-A1公开了一种采用离散余弦变换(DCT)来调整图像大小的方法和装置。为了缩小图像，此方法和装置利用DCT的卷积-乘法特性来实现DCT域中的抗混淆滤波器，然后对此滤波器系数进行运算，从而产生缩减大小的图像的DCT系数。
EP0781052-A2公开了一种解码器，用于对以任何彩色空间编码格式编码的MPEG视频比特流进行解码，并将解码后的视频比特流输出给不同大小的窗口。在同一解码器内在比特流上进行MPEG解压缩和彩色空间解码和转换。可对此公开的解码器进行编程，以便输出包括YUV 4∶2∶0、YUV 4∶2∶2和YUV 4∶4∶4的三原色空间格式中任一格式的解码视频比特流。解码器还可采用基于图像大小调整的DCT将解码的比特流输出给不同大小的窗口。
发明概要
本发明的一个目的是提供一种尤其是用于同时包括场型编码像素组和帧型编码像素组的编码视频信号的更有利的分辨率按比例缩减。为此，本发明提供一种如独立权利要求所述的方法和装置。在从属权利要求中定义了有利实施例。
根据本发明的第一方面，在与第一视频信号中行方向对应的第一方向(如水平方向)上进行频域抗混淆滤波和按比例缩减，在垂直于第一方向的第二方向(如垂直方向)上进行空间域按比例缩减。第一方向上的按比例缩减可先于逆频率变换操作或在其过程中执行。本发明基于这样的认识：在第二方向上对场型编码像素组和帧型编码像素组运用的频域抗混淆滤波器的给定类型对应于空间域中的不同滤波器类型。这是下述事实的结果，即场型像素组通常包括两个独立的变换编码场(例如顶场和底场)，而帧型像素组通常包含与混合在一帧中的两场相对应的信息，此帧整体地被转换编码。在视频信号中同时存在场型和帧型编码像素组的情况下，在空间域中对场型和帧型编码像素组进行不同滤波可能在逆运动补偿期间导致出现显著的差错。通过在行方向上进行频域抗混淆滤波和按比例缩减并且在垂直方向上进行空间域按比例缩减，可以减小这些差错。因此，本发明的方法和装置适用于处理包括混合的帧/场型像素组的隔行视频信号、未带有混合的帧/场型编码像素组(例如只有场型编码像素组)的隔行信号、以及带有帧型编码像素组的逐行视频信号，而不用对此方法或装置进行大的修改。
在一个实际实施例中，第二方向上的空间域抗混淆滤波在第二方向上的空间域按比例缩减之前执行。
在一个实施例中，第一视频信号在逆变换运算、如离散余弦反变换(IDCT)之前或在其过程中进行按比例缩减，该变换运算之后接着是逆运动补偿，这在第二方向上的空间域按比例缩减之前进行。这具有的优点是：第二方向上可能由运动矢量的按比例缩减引入的差错对逆运动补偿没有影响。在第二方向上的空间域按比例缩减之前最好是同一方向上的抗混淆滤波。空间域按比例缩减最好运用在帧级。这就使得可以在第二方向上采用具有长脉冲响应的滤波器来得到更陡峭的频率截止。此实施例的优点在于，由基于块的滤波所引起的发生于块边缘处的失真只出现在第一方向上。由于逆运动补偿在单向按比例缩减的图像上进行，因此与传统的全空间域方案相比，参考场/帧存储所需的存储容量得以降低。存储容量的降低取决于水平缩放因子。
最好是，空间域按比例缩减在逆运动补偿之前进行。由于垂直空间域按比例缩减在逆运动补偿之前，因此在按比例缩减将场/帧的大小减小50％的情况下，存储用于逆运动补偿的参考场/帧所需的存储容量降低到例如一半的大小。此存储容量对应于相当的双向频域按比例缩减所需的存储容量。
在另一实施例中，在频域中的两个方向上，而不是在频域中的一个方向上和空间域中的另一方向上，对场型编码像素组进行抗混淆滤波。对于各个帧型编码像素组来说，进行水平的频域抗混淆滤波和垂直的空间域抗混淆滤波。在此实施例中，可在水平方向上对场型编码像素组和帧型编码像素组运用同一频域滤波器。对帧型编码像素组在垂直方向上使用的空间域滤波器必须与对场型编码宏块在垂直方向上使用的频域滤波器相对应。由于空间域中的垂直按比例缩减在逆运动补偿之前，因此存储用于逆运动补偿的参考场/帧所需的存储容量对应于相当的双向频域按比例缩减所需的存储容量。由于通常为缓慢过程的垂直空间域滤波只在帧型像素组而不在场型像素组上进行，因此这个实施例的性能更高。各个帧型像素组在频域中只在第一方向上被滤波，然后在可缩放IDCT过程中在第一方向上按比例缩减。在以此方式对所有像素组进行解码后，可以分开混合场信息，各像素组在运动补偿之前在空间域中在第二方向上进行滤波和按比例缩减。在逆运动补偿之前，场型像素组在两个方向上进行频域滤波，但是在频域中的一个方向上和空间域中的另一方向上进行按比例缩减。
像素组可以是像素块或宏块。在MPEG-2的情况下，各16×16宏块构成四个8×8的像素块。在例如MPEG-2中可通过两种不同模式对隔行信号进行编码：第一种是采用场型图像，第二种是采用帧型图像。在第一种情况下，各图像场单独地进行编码，并且不使用混合的场/帧宏块模式。在第二种(普遍使用的)情况中，各图像以逐行方式编码，即两场混合并且一起编码。对于这种情况，采用混合宏块模式。因此，如果对第二种方式编码的隔行信号使用直接的双向频域下变换方案，那么在运动补偿期间会导致差错传播，并且损失显著的显示质量。
附图简介
图中：
图1说明代表性HDTV的发射和接收系统。
图2说明代表性HDTV和SDTV显示格式；
图3说明代表性HDTV接收系统和SDTV显示系统；
图4a说明代表性MPEG解码系统的功能框图；
图4b说明代表性MPEG解码系统的说明性框图；
图5说明根据本发明原理的解码系统的代表性实施例；
图6a说明根据本发明原理的解码系统的代表性框图；
图6b说明图6a所示代表性解码系统的一部分的功能框图；以及
图6c说明用于图6a所示代表性解码系统中的代表性运动矢量按比例缩减的功能框图。
应当理解，这些附图只是用于说明本发明的概念，并不是为了定义本发明的限制。应当理解，在整个附图中使用的相同标号以及在适当处补充的符号表示相应的部分。发明的详细描述
为了理解和评价本实施例的新颖特征，包括缩放用于在标准电视屏幕上显示的HDTV解码信号，首先需要讨论传统HDTV处理及其相关问题。图1说明一种典型的HDTV系统。如图所示，由信号发生器101产生的通常包括64个像素的8×8矩阵的数字电视信号由MPEG编码器103进行压缩。MPEG编码基于离散余弦变换(DCT)，这是一种与傅立叶变换类似的数学运算，并且在本领域内已众所周知。MPEG编码器103执行的操作之一是将信号102所表示的代表性8×8像素矩阵转换成信号104所表示的8×8系数矩阵。如所知的，所得的DCT变换矩阵将高频信息存储在矩阵的左上角，将低频信息存储在矩阵的右下角。然后对DCT变换矩阵进行量化，以便采用8位、即一个字节来描述各矩阵元素的值。在此说明性示例中，量化矩阵由电视发射机105通过发射天线106来发送。数字视频压缩技术，比如作为运动图像专家组(MPEG)指定的标准的MPEG-2、MPEG-4、MPEG-7在本领域内已众所周知，在此无须详细讨论。
回到图1，所发送的数字信号108由接收天线110接收，并由包括调谐器125的电视接收机120进行处理。采用调谐器125将特定的HDTV信号与所接收的多个HDTV和SDTV信号隔离。然后由解码器140、如MPEG解码器来处理隔离的信号，解码器140将数字的发送信号130解码成可显示信号145。采用例如MPEG解码，解码器140对所接收的信号进行解码，并使发送的系数恢复成按行和列排列的像素数据流。显示驱动器150根据所接收的数据产生适当的红(R)、绿(G)和蓝(B)色信号，以便在高分辨率屏幕160上显示。
为了实现更高的分辨率，要以高分辨率形成HDTV图像。在一种情况下，以各水平行中1920个像素的条件发送图像并且有1080行，即分辨率为1920×1080。在第二种情况下，以每行1280个像素和720行来发送图像，即1280×720。另一方面，SDTV电视的分辨率明显小于HDTV的分辨率。例如，在美国和日本的电视传输系统中，SDTV的NTSC制式包括约720×480的分辨率，即480行中各行为720个像素。欧洲采用PAL制式，使用另一不同的分辨率，即720×576。
图2说明叠加在HDTV图像上的典型NTSC制式的SDTV图像的图像观看区域。在此说明性示例中，所发送的HDTV图像的观看区域由区域205表示，而SDTV图像由区域210表示。如图所示，由于HDTV图像中只有与SDTV图像重叠的那部分可在SDTV屏幕上观看，因此大部分HDTV图像损失了。
为了使HDTV信号可在SDTV屏幕上显示，应“按比例缩减”HDTV信号以压缩HDTV信号。图3说明在图1所示系统中引入定标器170，以便将数字信号145缩放成可在SDTV屏幕190上观看的缩放信号155。在这种情况下，定标器170实际上对信号145进行两维缩放，从而缩小图2中的图像205以使适应图像210的边界。也就是说，在此说明性示例中，定标器170按照比率1920/720＝2.66来水平地划分图像205，按照比率1080/486＝2.22来垂直地划分图像205。
还可对定标器170进行编程以适当地按比例缩减到其它的HDTV分辨率。采用CPU180来对定标器170进行编程，使其达到适当的按比例缩减比率。
但是，以所公开的方式对HDTV信号进行解码和按比例缩减需要对HDTV信号和有效源进行完全解码。图4a说明一种代表性解码器140、如MPEG解码器，这在本领域内已众所周知，在此只简略地介绍。如图所示，数字信号130由霍夫曼解码器425进行处理。然后由逆量化器405对霍夫曼解码信号进行处理。然后通过离散余弦反变换(IDCT)410对信号407进行处理，将此典型地传输的64系数的8×8矩阵转换成64个像素的8×8矩阵。然后把转换的信号408与一个信号相结合，通过恢复静止图像数据来对传输图像解压，并且最初运用的运动补偿进行逆运算(436)。此时所得的组合信号为未压缩和经运动补偿的数字图像。霍夫曼解码器425和逆运动补偿块436之间的链接表明，霍夫曼解码器425在运动矢量数据用于逆运动补偿之前对其进行解码。接着将数字图像加到抗混淆滤波器435中，从图像中滤去高频分量。这种抗混淆滤波在本领域内已众所周知，可以例如用低通有限脉冲响应滤波器来实现。抗混淆滤波器435对数字图像内的数据项的边缘进行软化。输出信号145包括代表用于显示图像的视频行的像素信息。
图4b说明在解码器140中进行逆运动补偿所需的视频存储器420。在此说明性示例中，各图像存储在视频存储器的“页面”上。因此，存储页面420a包括与第一图像相关的像素信息，存储页面420b包括与第二图像相关的像素信息，存储页面420n包括与“第n”图像相关的像素信息。应当理解，各视频图像的存储需要大量的视频存储容量。例如，存储一幅分辨率为1920×1080的图像需要超过2兆字节的存储容量。
图5说明根据本发明一个实施例，由全格式解码器(AFD)505来代替解码器140。在此说明性示例中，AFD 505接收数字信号130并将其转换成缩放信号520。在这种情况下，AFD 505水平地缩放数字信号130以达到与SDTV图像标准相当的分辨率。例如，AFD 505将数字信号130水平地按比例缩小一倍(例如分辨率从1920变为960)。然后用定标器170对经过水平缩放的信号520进行垂直缩放，以便达到与SDTV图像标准相当的分辨率。例如，定标器170将水平缩放的信号520垂直地按比例缩小一倍，即分辨率从1080变到540。因此，按比例缩减的图像的分辨率为980×540。
采用AFD 505来水平地按比例缩减数字信号130是有利的，因为数字信号130不在全分辨率下解码，因此只需更少的处理能力，而且存储未压缩的运动补偿视频数据所需的视频存储器要小得多。由于处理的是选择性挑出的缩减数据集、如32个元素的4×8矩阵而不是传统的64个元素的8×8矩阵，因此对AFD 505的处理能力的要求显著地降低。另外，由于不存储整个解码图像而是只存储选择性挑出的缩减数据集，因此存储缩放图像所需的视频存储器要小得多。减小的存储器由图5中的存储器510a到510n来表示。在这种情况下，为了存储用于逆运动补偿的水平缩放图像的视频存储器要求约为一兆字节。在逆运动补偿器之前对宏块进行空间按比例缩减的情况下，甚至处理进一步缩减的数据集，例如16个元素的4×4矩阵。在这种情况下，AFD 505的输出是已经在两个方向上进行了缩减的帧，从而使定标器170变成多余的。在这种情况下，对存储用于进行逆运动补偿的水平和垂直缩放图像的视频存储器要求约为一兆字节的二分之一。
图6a说明AFD 505的一个代表性功能框图。在此说明性框图中，数字信号130首先由霍夫曼解码器425进行处理，然后由逆量化器和频域滤波器610进行处理。量化器/滤波器610的输出是信号612。如图所示，信号612具有与抗混淆滤波器435所达到的滤波特性相似的滤波特性。信号612再由可缩放IDCT 615进行处理，将信号612的代表性64个滤波系数元素转换为水平缩放的信号，该信号由例如选择性挑出的32个像素元素构成。然后在空间域垂直缩减器511中在垂直方向上对可缩放IDCT 615的输出进行缩放，并将其与来自可缩放运动补偿器650的信号合并，从而恢复图像内的静止信息和使运动补偿的效果相反。在运动补偿器650中使用的运动矢量是从霍夫曼解码器425中经运动矢量定标器513而得到的。输出信号520是分辨率在空间上按比例缩减到与SDTV电视机基本相当的信号。
图6b说明图6a的代表性解码器的一部分的功能框图。在解码器的这个功能性实施例中，量化器/滤波器610产生的滤波信号612由IDCT和水平定标器615来处理，水平定标器615将系数集转化为缩减的像素集。在隔行素材包括宏块的混合场/帧模式的情况中，可以对解码器编程，以便在宏块级或帧级上对图像垂直地进行空间域按比例缩减。如果选择宏块级，那么在IDCT 630之后，如果各个经过滤波和水平缩减的宏块是帧型编码的，则空间滤波器和定标器在垂直方向上对其处理。如果宏块是场型编码的，则由定标器对其处理而不进行滤波，因为它可能在频域中在两个方向上已经进行了滤波。应当指出，用于场型编码宏块的垂直频域滤波器必须与用于帧型编码宏块的空间域滤波器相对应，以便在逆运动补偿期间减少预测失真。如果选择帧级的垂直空间域缩减，那么在IDCT 630中对任何类型编码的宏块进行水平缩减，之后由运动补偿器650进行处理。在进行运动补偿后，需要用空间域滤波器和定标器170来使图像垂直地在空间上缩小。
图6c说明运动矢量缩减器513的功能框图。运动矢量122首先由霍夫曼解码器425进行处理，然后由水平运动矢量定标器514进行水平缩减，由垂直运动矢量定标器515进行垂直缩减，并且由运动补偿器650进行处理。在帧级垂直空间缩减的情况中，运动矢量必须由垂直运动矢量定标器515只在垂直方向上进行按比例缩减。
频域和相应的空间域滤波器的选择现在可表明与离散余弦变换的卷积-乘法特性相关。如本领域所知，DCT具有与离散傅立叶变换(DFT)类似的卷积-乘法特性。那么对于一维实序列a(n)，n＝0…N-1和一维实偶序列h(n)，n＝-N...N-1来说已知：如果
Fc(n)＝Ac(n)Hf(n)，对于n＝0...N-1而言          [1]
其中Fc(n)为f(n)的N点DCT；
Ac(n)为a(n)实序列的N点DCT；
以及
Hf(n)为h(n)的2N点DFT；
那么
f(k)＝a(k)*h(k)，对于k＝0...N-1而言；           [2]
其中*代表对称卷积运算符，它可视为序列h(k)的2N长的循环卷积的对称折叠结果，序列h(k)是可通过零扩展到偶长度的奇对称序列，偶对称序列 a(k)可描述为
Figure A0280176400131
频域中的乘法和时域中的卷积之间的关系特性可扩展到两维情况，例如：如果
Fc(n，m)＝Ac(n，m)Hf(n，m)；对于n，m＝0...N-1； [3]那么
f(k，l)＝a(k，l)*h(k，l)；对于k，l＝0...N-1；   [4]
其中*代表两维的对称卷积运算符；Fc(n，m)是f(n，m)的两维N×N DCT，其中n，m＝0...N-1；Ac(n，m)是a(n，m)的两维N×N DCT，n，m＝0，N-1；Hf(n，m)是h(n，m)的两维2N×2N DFT，n，m＝-N...N-1。
不难理解，a(k，l)的实序列的两维DCT形成了一个矩阵，其中较低频元素包含在矩阵的左上角，较高频元素包含在矩阵的右下角。此时，根据公式3和4，可通过把接收的DCT系数乘上一个特殊的滤波器矩阵来实现在DCT域内的两个方向上的滤波。作为示例，以下列方式可以得到在两个方向上脉冲响应h(n)＝{0.25，0.5，0.25}的三抽头低通滤波器的滤波器矩阵。根据公式1，所指示的滤波器HN(n)的频率响应可通过计算h2N(n)的DFT来获得，h2N(n)是可由零扩展到2N长度的奇对称序列。二维频率响应可视为： H H N = H N ⊗ H N T , 其中表示克罗内克尔乘法运算符。因此对于滤波器h(n)，乘法矩阵为： HH N = 1 0.962 0.854 0.691 0.5 0.309 0.146 0.038 0.962 0.925 0 . 821 0.665 0.481 0.297 0.141 0.037 0.854 0.821 0 . 729 0.59 0.427 0.263 0.125 0.032 0 . 691 0 . 665 0 . 59 0.478 0.346 0.213 0.101 0.026 0 . 5 0 . 481 0 . 427 0.346 0.25 0.154 0.073 0.019 0.309 0.297 0.263 0.213 0.154 0.095 0.045 0.012 0.146 0.141 0.125 0.101 0.073 0.045 0.021 5.574 · 10 - 3 0.038 0.037 0.032 0.026 0.019 0.012 5.574 · 10 - 3 1.449 · 10 - 3
因此，可通过先将量化矩阵和滤波器矩阵H(n，m)合并来使频域量化器/滤波器与逆量化功能相结合。更具体地说，如果滤波器矩阵定义为如下HHN：
Figure A0280176400143
对于n，m＝0...N-1
而且量化矩阵可描述为：
Figure A0280176400144
对于k，l＝0...N-1
那么组合的量化-滤波矩阵可描述为：
Figure A0280176400145
对于n，m＝0...N-1
从上表明，对于带有混合的场/帧型编码宏块的序列来说，帧型编码宏块必须在频域内只在水平方向以及在空间域内只在垂直方向上进行滤波。同样，对于帧级空间垂直缩减来说，所有宏块必须在频域内只在水平方向上进行滤波。在该情况下，h(n)＝{0.25，0.5，0.25}的滤波器矩阵是： H f ( n , m ) = 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038 1.0 0.962 0.854 0.691 0.5 0.309 0.146 0.038
虽然上文中已经说明、描述和指出了如优选实施例所应用的本发明的基本的新颖特征，但是应当理解，在不脱离本发明范围的前提下，本领域的技术人员可在所述方法中进行各种简化、替代和修改。此外，虽然这里讨论是的与HDTV传输相关的MPEG解码，但是本领域的技术人员可以理解，这里所公开的发明概念并不仅限于MPEG编码/解码，而是还可适用于其它数字TV编码/解码技术。
特别指出，以基本上相同的方式执行基本上相同的功能来达到相同结果的这些要素和/或方法步骤的所有组合均在本发明的范围内。还可完全地构想出用一个所述实施例中的要素来代替另一实施例中的要素。
应当指出，上述实施例是说明而不是限定本发明，在不脱离所附权利要求的范围的前提下，本领域的技术人员可设计出许多替代性实施例。在权利要求书中，任何置于括号之间的标号不应视为限定权利要求。词语“包括”并不排除在权利要求中列出的内容之外的其它要素或步骤的存在。本发明可通过包括若干不同元件的硬件并通过适当编程的计算机来实现。在列出若干装置的装置权利要求中，这些装置中的若干项可以同一项硬件来实现。在多个不同从属权利要求中引用的一定措施并不表示这些措施的组合不能带来优点。

Claims (8)

1.一种用于把第一视频信号的空间分辨率按比例缩减、以便得到空间分辨率比所述第一视频信号的空间分辨率更低的第二视频信号的方法，所述方法包括以下步骤：
在与所述第一视频信号中的行方向对应的第一方向上对所述第一视频信号进行频域抗混淆滤波和按比例缩减，从而得到按比例缩减的视频信号，以及
在垂直于所述第一方向的第二方向上对所述按比例缩减的视频信号进行空间域按比例缩减，从而得到所述第二视频信号。
2.如权利要求1所述的方法，其特征在于，所述按比例缩减在逆变换运算、如离散余弦反变换之前或在其过程中执行。
3.如权利要求2所述的方法，其特征在于，所述逆变换运算之后接着是在所述空间域按比例缩减之前进行的逆运动补偿。
4.如权利要求2所述的方法，其特征在于，所述逆变换运算之后接着是在逆运动补偿之前进行的所述空间域按比例缩减。
5.如上述权利要求中任一项所述的方法，其特征在于，所述第一视频信号包括像素组并且所述方法是按像素组来进行的。
6.如权利要求5所述的方法，其特征在于，所述像素组包含在混合的场/帧型编码像素组的序列中，以及所述场型编码像素组在所述第一方向和第二方向上都进行频域抗混淆滤波，而所述帧型编码像素组在所述第一方向上经过频域抗混淆滤波，在所述第二方向上经过空间域抗混淆滤波。
7.如上述权利要求中任一项所述的方法，其特征在于，所述第一视频信号包括量化的频率变换系数，所述方法还包括对所述量化的频率变换系数进行逆量化以得到频率变换系数，所述抗混淆滤波在所述频率变换系数上执行，以及
所述逆量化步骤和所述滤波步骤是通过采用组合矩阵来进行的，所述组合矩阵是量化矩阵和滤波器矩阵的组合。
8.一种用于把第一视频信号的空间分辨率按比例缩减、以便得到空间分辨率比所述第一视频信号的空间分辨率更低的第二视频信号的装置，所述装置包括：
用于在与所述第一视频信号中的行方向对应的第一方向上对所述第一视频信号进行频域抗混淆滤波和按比例缩减而得到按比例缩减的视频信号的装置，以及
用于在垂直于所述第一方向的第二方向上对所述按比例缩减的视频信号进行空间域按比例缩减而得到所述第二视频信号的装置。
CNB028017641A 2001-05-22 2002-05-17 视频图像的分辨率的按比例缩减 Expired - Fee Related CN1224265C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US29271501P 2001-05-22 2001-05-22
US60/292,715 2001-05-22
US10/132,041 US7215708B2 (en) 2001-05-22 2002-04-25 Resolution downscaling of video images
US10/132,041 2002-04-25

Publications (2)

Publication Number Publication Date
CN1463552A true CN1463552A (zh) 2003-12-24
CN1224265C CN1224265C (zh) 2005-10-19

Family

ID=26830041

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB028017641A Expired - Fee Related CN1224265C (zh) 2001-05-22 2002-05-17 视频图像的分辨率的按比例缩减

Country Status (6)

Country Link
US (1) US7215708B2 (zh)
EP (1) EP1397920A1 (zh)
JP (1) JP2004531969A (zh)
KR (1) KR100893276B1 (zh)
CN (1) CN1224265C (zh)
WO (1) WO2002096113A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100459675C (zh) * 2005-09-15 2009-02-04 三星电子株式会社 视频处理设备和视频处理方法
CN101189880B (zh) * 2005-06-03 2010-06-16 Nxp股份有限公司 带有混合参考纹理的视频解码器
CN101459790B (zh) * 2007-12-12 2011-06-22 联发科技股份有限公司 视频信号处理装置
CN116916033A (zh) * 2022-06-24 2023-10-20 澳门大学 一种基于随机自适应傅里叶分解的联合时空视频压缩方法

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100474916B1 (ko) * 2002-08-24 2005-03-10 엘지전자 주식회사 썸네일 영상 생성 장치 및 그 방법
US20050094034A1 (en) * 2003-10-31 2005-05-05 Sandeep Bhatia System and method for simultaneously scanning video for different size pictures
JP2008543207A (ja) 2005-06-01 2008-11-27 エヌエックスピー ビー ヴィ マルチパスビデオ復号方法および装置
US8391630B2 (en) * 2005-12-22 2013-03-05 Qualcomm Mems Technologies, Inc. System and method for power reduction when decompressing video streams for interferometric modulator displays
KR100809686B1 (ko) * 2006-02-23 2008-03-06 삼성전자주식회사 이산 여현 변환을 이용한 영상 리사이징 방법 및 장치
US20070258012A1 (en) * 2006-05-04 2007-11-08 Syntax Brillian Corp. Method for scaling and cropping images for television display
US7920086B2 (en) * 2006-07-07 2011-04-05 Honeywell International Inc. Display for displaying compressed video
US8355440B2 (en) * 2006-08-07 2013-01-15 Vixs Systems, Inc. Motion search module with horizontal compression preprocessing and methods for use therewith
KR20080057940A (ko) * 2006-12-21 2008-06-25 삼성전자주식회사 축소 화면을 표시하는 영상 디스플레이 장치 및 그 방법
US20100020236A1 (en) * 2008-07-28 2010-01-28 Mediatek Inc. Image display apparatus and method
WO2010091750A1 (en) 2009-02-12 2010-08-19 Zoran (France) Scaling method and device for image signals
US20110032269A1 (en) * 2009-08-05 2011-02-10 Rastislav Lukac Automatically Resizing Demosaicked Full-Color Images Using Edge-Orientation Maps Formed In The Demosaicking Process
SG10201406241PA (en) * 2009-10-30 2014-11-27 Panasonic Ip Corp America Image decoding method, image coding method, image decoding apparatus, image coding apparatus, program, and integrated circuit
CN102739994A (zh) * 2011-05-10 2012-10-17 新奥特（北京）视频技术有限公司 一种字幕工程在不同制式下切换的方法
KR20140016760A (ko) * 2012-07-31 2014-02-10 삼성전자주식회사 영상 처리 장치 및 영상 처리 방법
US9432614B2 (en) * 2013-03-13 2016-08-30 Qualcomm Incorporated Integrated downscale in video core
KR102248789B1 (ko) 2014-10-07 2021-05-06 삼성전자 주식회사 이미지 해상도에 따라 리소스를 공유할 수 있는 애플리케이션 프로세서와 이를 포함하는 장치들
US10129026B2 (en) * 2016-05-03 2018-11-13 Certicom Corp. Method and system for cheon resistant static diffie-hellman security
US11102487B2 (en) * 2019-08-30 2021-08-24 Adobe Inc. Image resampling for DCT based image encoding formats using memory efficient techniques
KR20220028487A (ko) * 2020-08-28 2022-03-08 삼성전자주식회사 디스플레이 장치 및 그 동작방법

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US55339A (en) * 1866-06-05 Improved peat-machine
US5270813A (en) 1992-07-02 1993-12-14 At&T Bell Laboratories Spatially scalable video coding facilitating the derivation of variable-resolution images
JPH06141185A (ja) 1992-10-26 1994-05-20 Nec Corp 画像間引き装置
US5614952A (en) * 1994-10-11 1997-03-25 Hitachi America, Ltd. Digital video decoder for decoding digital high definition and/or digital standard definition television signals
US5845015A (en) 1995-10-12 1998-12-01 Sarnoff Corporation Method and apparatus for resizing images using the discrete cosine transform
US5832120A (en) 1995-12-22 1998-11-03 Cirrus Logic, Inc. Universal MPEG decoder with scalable picture size
US5737019A (en) * 1996-01-29 1998-04-07 Matsushita Electric Corporation Of America Method and apparatus for changing resolution by direct DCT mapping
US6023262A (en) * 1996-06-28 2000-02-08 Cirrus Logic, Inc. Method and apparatus in a computer system to generate a downscaled video image for display on a television system
US6788347B1 (en) * 1997-03-12 2004-09-07 Matsushita Electric Industrial Co., Ltd. HDTV downconversion system
SE9703849L (sv) 1997-03-14 1998-09-15 Ericsson Telefon Ab L M Nedskalning av bilder
KR100249229B1 (ko) * 1997-08-13 2000-03-15 구자홍 에이치디티브이의 다운 컨버젼 디코딩 장치
US5990812A (en) * 1997-10-27 1999-11-23 Philips Electronics North America Corporation Universally programmable variable length decoder
US6519288B1 (en) * 1998-03-06 2003-02-11 Mitsubishi Electric Research Laboratories, Inc. Three-layer scaleable decoder and method of decoding
US6310919B1 (en) * 1998-05-07 2001-10-30 Sarnoff Corporation Method and apparatus for adaptively scaling motion vector information in an information stream decoder
SE9802286L (sv) 1998-06-26 1999-12-27 Ericsson Telefon Ab L M Effektiv nedskalning av DCT-komprimerade bilder
US6665344B1 (en) * 1998-06-29 2003-12-16 Zenith Electronics Corporation Downconverting decoder for interlaced pictures
US6275531B1 (en) 1998-07-23 2001-08-14 Optivision, Inc. Scalable video coding method and apparatus
JP2002526997A (ja) * 1998-09-29 2002-08-20 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 符号化ビデオデータの変換
US6798420B1 (en) * 1998-11-09 2004-09-28 Broadcom Corporation Video and graphics system with a single-port RAM
US20030043918A1 (en) * 1999-12-20 2003-03-06 Jiang Hong H. Method and apparatus for performing video image decoding
US6724948B1 (en) * 1999-12-27 2004-04-20 Intel Corporation Scaling images for display
US6647061B1 (en) * 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101189880B (zh) * 2005-06-03 2010-06-16 Nxp股份有限公司 带有混合参考纹理的视频解码器
CN100459675C (zh) * 2005-09-15 2009-02-04 三星电子株式会社 视频处理设备和视频处理方法
CN101459790B (zh) * 2007-12-12 2011-06-22 联发科技股份有限公司 视频信号处理装置
CN116916033A (zh) * 2022-06-24 2023-10-20 澳门大学 一种基于随机自适应傅里叶分解的联合时空视频压缩方法
CN116916033B (zh) * 2022-06-24 2024-05-10 澳门大学 一种基于随机自适应傅里叶分解的联合时空视频压缩方法

Also Published As

Publication number Publication date
WO2002096113A1 (en) 2002-11-28
EP1397920A1 (en) 2004-03-17
KR20030024804A (ko) 2003-03-26
US7215708B2 (en) 2007-05-08
CN1224265C (zh) 2005-10-19
US20020181592A1 (en) 2002-12-05
JP2004531969A (ja) 2004-10-14
KR100893276B1 (ko) 2009-04-17

Similar Documents

Publication Publication Date Title
CN1224265C (zh) 视频图像的分辨率的按比例缩减
CN100559883C (zh) 用于视频压缩的方法和设备
CN101394569B (zh) 一种avs视频解码器的容错方法、装置及芯片
US7876976B2 (en) Method and apparatus for resizing images using discrete cosine transform
US6289132B1 (en) Apparatus and method for optimized compression of interlaced motion images
US6665343B1 (en) Methods and arrangements for a converting a high definition image to a lower definition image using wavelet transforms
CN1173577C (zh) 补偿idct失配的dct域下转换系统
EP1397774A1 (en) Method and system for achieving coding gains in wavelet-based image codecs
CN1214626C (zh) 用于高分辨率视频信号的抽取的装置和方法
CN1633812A (zh) 视频图片的全局运动补偿
JPH07504074A (ja) 低解像度ｈｄｔｖ受信機
US20060002480A1 (en) Apparatus and method for improved interlace processing
WO2013001279A2 (en) Video encoding and decoding using transforms
US6590938B1 (en) DCT domain conversion of a higher definition signal to lower definition signal
US20080147765A1 (en) Encoding and decoding data arrays using separate pre-multiplication stages
CN1575606A (zh) 空间可缩放的压缩
CN1875635A (zh) 用于视频转码的变换域子采样
WO2012022719A1 (en) Video signal processing
CN110708547A (zh) 针对变换模式的有效熵编码组分组方法
CN102972021A (zh) 适合手持式和移动应用的具有减少的存储器和处理要求的广播视频解码器
JP2001078187A (ja) 画像復号化装置
US6816553B1 (en) Coding method for an image signal
Uchita et al. A parameter decimation technique for variable-coefficient invertible deinterlacing
CN1688166A (zh) Hdtv到sdtv转换编码器
CN1463551A (zh) 频率域隔行视频的垂直缩放

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: IPG ELECTRONICS 503 CO., LTD.

Free format text: FORMER OWNER: ROYAL PHILIPS ELECTRONICS CO., LTD.

Effective date: 20090821

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20090821

Address after: British Channel Islands

Patentee after: Koninkl Philips Electronics NV

Address before: Holland Ian Deho Finn

Patentee before: Koninklike Philips Electronics N. V.

ASS Succession or assignment of patent right

Owner name: FUNAI ELECTRIC CO., LTD.

Free format text: FORMER OWNER: IPG ELECTRONICS 503 LIMITED

Effective date: 20120524

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20120524

Address after: Osaka Japan

Patentee after: Funai Electric Co., Ltd.

Address before: British Channel Islands

Patentee before: Koninkl Philips Electronics NV

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20051019

Termination date: 20170517

CF01 Termination of patent right due to non-payment of annual fee