JP2000350207A - Generalized orthogonal transform method and device for low resolution video decoding - Google Patents
Generalized orthogonal transform method and device for low resolution video decodingInfo
- Publication number
- JP2000350207A JP2000350207A JP16087699A JP16087699A JP2000350207A JP 2000350207 A JP2000350207 A JP 2000350207A JP 16087699 A JP16087699 A JP 16087699A JP 16087699 A JP16087699 A JP 16087699A JP 2000350207 A JP2000350207 A JP 2000350207A
- Authority
- JP
- Japan
- Prior art keywords
- resolution
- low
- inverse
- generalized
- transform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、低解像度ビデオ復
号化のための一般化直交変換方法に関する。本発明は、
高品質ダウン変換ビデオが必要とされるデジタルビデオ
復号化とフォーマットダウン変換の分野に適用できる。
本発明の代表的な用途は、ＨＤＴＶビットストリームを
復号化し、また標準テレビジョン受信機上に表示される
ＨＤＴＶビデオシーケンスのフォーマットを変換するこ
とである。また本発明は、画像の中の画像ビデオ復号
化、ビデオ会議およびビデオ・オン・ディマンドのよう
な他の用途に適切である。[0001] The present invention relates to a generalized orthogonal transform method for decoding low-resolution video. The present invention
Applicable in the field of digital video decoding and format down conversion where high quality down conversion video is required.
A typical application of the present invention is to decode HDTV bitstreams and convert the format of HDTV video sequences displayed on a standard television receiver. The invention is also suitable for other applications such as video-in-picture decoding, video conferencing and video-on-demand.
【０００２】[0002]
【従来の技術】低解像度デジタルビデオ復号器は、多く
のマルチメディアおよび高品位テレビから標準解像度テ
レビへのダウン変換と画像の中の画像システムのような
通信システムに必要である。デジタルビデオ復号化シス
テムでは、フォーマットダウン変換は復号化されたフル
解像度ビデオシーケンスをデシメーションすることによ
って達成することができる。この方法を用いることによ
って、優れた品質を有する再構築したビデオを得ること
ができる。しかし、復号化ビデオシーケンスのデシメー
ションはフル解像度ビデオ復号化に複雑さを加える。計
算量と、メモリサイズと、この方法によって蒙るメモリ
帯域幅とクロックレートのような他の制約とを減らすた
めに、例えば復号化ループ内で、画像デシメーションを
復号器の早期の段階に実現しなければならない。2. Description of the Related Art Low-resolution digital video decoders are required for many multimedia and high-definition television down-conversion to standard-definition televisions and communication systems such as image-in-picture systems. In a digital video decoding system, format down-conversion can be achieved by decimating the decoded full-resolution video sequence. By using this method, a reconstructed video having excellent quality can be obtained. However, decimation of the decoded video sequence adds complexity to full resolution video decoding. Image decimation must be implemented early in the decoder, for example in a decoding loop, to reduce the computational complexity, memory size, and other constraints such as memory bandwidth and clock rate experienced by this method. Must.
【０００３】計算必要量とメモリ必要量を軽減するため
に、ビデオフォーマットダウン変換を復号化ループ内で
実行するいくつかの方法が提案されてきた。これらの方
法の中では、ＤＣＴベースの低解像度復号器が、理論的
に最小の可能エラードリフトを有することが証明された
（「動き補償ＤＣＴ符号化のための周波数スケーラビリ
ティの最小エラードリフト」、ビデオ技術用の回路とシ
ステムに関するＩＥＥＥ報告書、第４巻、Ｎｏ．４、３
９２−４０６ページ、１９９４年８月参照）。図１は、
低解像度ビデオ復号器に応用される最小ドリフト方法を
示している。このアーキテクチャでは、フレームバッフ
ァに記憶された低解像度画素がアップサンプリングさ
れ、またフル解像度動き補償の前にＤＣＴ／ＩＤＣＴの
基本機能を用いてダウンサンプリングされる。さらに、
ＤＣＴエラーブロックに動き補償画像ブロックを加える
前と後に、フル解像度ＤＣＴと低解像度ＤＣＴが必要で
ある。To reduce the computational and memory requirements, several methods have been proposed for performing video format down-conversion in a decoding loop. Among these methods, DCT-based low-resolution decoders have proven to have the theoretically smallest possible error drift ("Minimum error drift of frequency scalability for motion compensated DCT coding", video IEEE Report on Technical Circuits and Systems, Volume 4, Nos. 4, 3
92-406, August 1994). FIG.
Fig. 3 illustrates a minimum drift method applied to a low resolution video decoder. In this architecture, the low resolution pixels stored in the frame buffer are upsampled and downsampled using the basic functions of DCT / IDCT before full resolution motion compensation. further,
Before and after adding the motion compensated image block to the DCT error block, a full resolution DCT and a low resolution DCT are required.
【０００４】[0004]
【発明が解決しようとする課題】上述の方法はエラード
リフトの最小化に有効であるが、この方法は多くのＤＣ
Ｔのような動作を必要とし、かくしてビデオフォーマッ
トダウン変換はコンピュータ使用上大きな問題となる。Although the above-described method is effective in minimizing error drift, this method has many DC
It requires a T-like operation, thus video format down-conversion is a major problem for computer use.
【０００５】従来技術に記述されているＤＣＴベースの
ビデオフォーマットダウン変換方法は、高品質ダウン変
換ビデオを提供する。復号化ビデオシーケンスに現われ
たエラードリフトを最小限にするために、ＤＣＴベース
のアップサンプリングとダウンサンプリングフィルタ処
理手順が必要である。これらの手順には大きな計算必要
量が必要となり、この結果低解像度ビデオ復号化装置に
高コストをもたらすことになる。本発明によって解決す
べき問題は、従来技術に記述された最小ドリフト方法よ
りも複雑性がはるかに低い低解像度ビデオ復号器用に次
善の解決方法を確立することである。[0005] The DCT-based video format down-conversion method described in the prior art provides high quality down-converted video. DCT based upsampling and downsampling filtering procedures are needed to minimize the error drift that appears in the decoded video sequence. These procedures require large computational requirements, which results in high costs for low-resolution video decoding devices. The problem to be solved by the present invention is to establish a sub-optimal solution for low resolution video decoders with much lower complexity than the minimum drift method described in the prior art.
【０００６】[0006]
【課題を解決するための手段】上述の問題を解決するた
めに、一般化直交変換を用いた低解像度ビデオ復号器の
方法を提案する。高解像度と低解像度空間の間の信号ダ
ウン変換と画素マッピングのために、１組の新しい直交
変換カーネル（kernels）を提案する。これらの新しい
直交変換はフォワード離散コサイン変換でも逆離散コサ
イン変換でもない。これらの新しい直交変換は、この明
細書では一般化直交変換と呼んでいる。一般化直交変換
を用いる主たる目的は低解像度ビデオ復号化システムの
コストを実質的に減らすことであるので、一般化直交変
換のカーネルは、システム全体が従来技術に記述した最
小ドリフトシステムよりも計算上はるかに集中度が低く
なるような方法で構成される。In order to solve the above-mentioned problem, a method of a low-resolution video decoder using a generalized orthogonal transform is proposed. A set of new orthogonal transform kernels is proposed for signal down-conversion and pixel mapping between high and low resolution space. These new orthogonal transforms are neither forward nor inverse discrete cosine transforms. These new orthogonal transforms are referred to herein as generalized orthogonal transforms. Because the primary purpose of using a generalized orthogonal transform is to substantially reduce the cost of a low-resolution video decoding system, the kernel of the generalized orthogonal transform makes the whole system more computationally expensive than the minimum drift system described in the prior art. It is constructed in such a way that it is much less concentrated.
【０００７】前記逆量子化係数は、低解像度一般化逆直
交変換手段を用いて変換画素に変換される。前記フレー
ムバッファから検索された前記低解像度基準画素は、い
くつかの一般化された直交変換基底関数を備える前記ア
ップサンプリング手段によって、前記低解像度空間から
前記高解像度空間にマッピングされる。前記高解像度動
き補償画素は、前記ダウンサンプリング手段を用いて前
記高解像度空間から前記低解像度空間にマッピングされ
る。[0007] The inverse quantized coefficients are converted to converted pixels using low-resolution generalized inverse orthogonal transform means. The low resolution reference pixels retrieved from the frame buffer are mapped from the low resolution space to the high resolution space by the upsampling means comprising some generalized orthogonal transform basis functions. The high resolution motion compensation pixel is mapped from the high resolution space to the low resolution space using the downsampling means.
【０００８】前記アップサンプリング手段は低解像度一
般化直交変換手段と係数操作手段とを備える。前記ダウ
ンサンプリング手段は、高解像度一般化マッピング手段
と、正規化された低解像度一般化逆直交変換手段とを備
える。The up-sampling means comprises low-resolution generalized orthogonal transform means and coefficient operating means. The downsampling unit includes a high-resolution generalized mapping unit and a normalized low-resolution generalized inverse orthogonal transform unit.
【０００９】前記シンタクスパーザと可変長復号化手段
はビデオビットストリームを復号化し、また復号化係数
と復号化パラメータとを供給する。前記逆量子化器は前
記復号化係数を逆量子化し、また逆量子化係数を発生す
る。前記フレームバッファはダウン変換された再構築映
像を記憶する。前記アップサンプラは前記フレームバッ
ファから検索されたデータを補間し、また逆動き補償手
段のためにアップサンプリングされた画素を供給する。
前記逆動き補償手段は、前記復号化パラメータに基づい
て、前記アップサンプリングされた画素に半画素精度の
動き補償を実行して高解像度動き補償画素を得る。前記
ダウンサンプリング手段は前記高解像度動き補償画素を
デシメーションし、またダウンサンプリングされた画素
を発生する。前記低解像度一般化逆直交変換手段は前記
逆量子化係数を変換画素に変換する。前記加算器は、前
記ダウンサンプリングされた画素に前記変換画素を加え
て再構築画素を得る。[0009] The syntax parser and the variable length decoding means decode the video bit stream and also provide decoding coefficients and decoding parameters. The inverse quantizer inversely quantizes the decoded coefficients and generates inverse quantized coefficients. The frame buffer stores the down-converted reconstructed video. The upsampler interpolates the data retrieved from the frame buffer and provides upsampled pixels for inverse motion compensation means.
The inverse motion compensator performs half-pixel motion compensation on the up-sampled pixel based on the decoding parameter to obtain a high-resolution motion-compensated pixel. The downsampling means decimates the high resolution motion compensated pixels and generates downsampled pixels. The low-resolution generalized inverse orthogonal transform unit converts the inverse quantized coefficient into a transformed pixel. The adder adds the converted pixel to the downsampled pixel to obtain a reconstructed pixel.
【００１０】前記アップサンプリング手段とダウンサン
プリング手段の動作について以下に説明する。前記低解
像度一般化直交変換手段は前記フレームバッファから前
記低解像度基準画素を受信し、またこれらの基準画素を
変換された基準係数に変換する。前記低解像度変換係数
操作手段が前記変換基準係数を受信し、またこれらの係
数を前記高解像度基準画素に変換する。前記高解像度一
般化変換手段は前記高解像度動き補償画素を受信し、ま
たこれらの画素を周波数ドメインに変換して前記高解像
度変換係数を発生する。前記正規化された低解像度一般
化逆直交変換手段は、前記高解像度変換係数を空間ドメ
インに変換して前記ダウンサンプリングされた画素を発
生する。前記高解像度一般化直交変換のオーダは、ビデ
オビットストリームを符号化するために使用される離散
コサイン変換のオーダと同じである。一方前記低解像度
逆一般化直交変換手段のオーダは、前記高解像度一般化
直交変換のオーダと、ビデオダウン変換の比率とに基づ
いて選択される。前記正規化された低解像度一般化逆直
交変換のオーダは、前記低解像度一般化逆直交変換のオ
ーダと同じである。The operation of the up-sampling means and the down-sampling means will be described below. The low-resolution generalized orthogonal transformation means receives the low-resolution reference pixels from the frame buffer and converts these reference pixels into transformed reference coefficients. The low resolution transform coefficient operating means receives the transform reference coefficients and converts these coefficients to the high resolution reference pixels. The high resolution generalization conversion means receives the high resolution motion compensated pixels and converts these pixels to the frequency domain to generate the high resolution conversion coefficients. The normalized low resolution generalized inverse orthogonal transform means transforms the high resolution transform coefficients into a spatial domain to generate the downsampled pixels. The order of the high resolution generalized orthogonal transform is the same as the order of the discrete cosine transform used to encode a video bitstream. On the other hand, the order of the low-resolution inverse generalized orthogonal transform means is selected based on the order of the high-resolution generalized orthogonal transform and the ratio of video down conversion. The order of the normalized low-resolution generalized inverse orthogonal transform is the same as the order of the low-resolution generalized inverse orthogonal transform.
【００１１】本発明の第１の観点は、フル解像度ビデオ
ビットストリームを復号化し、また低解像度モニタ上に
低解像度復号化ビデオシーケンスを表示するための装置
であって：ビデオビットストリームを復号化し、また復
号化係数と復号化パラメータとを供給するためのシンタ
クスパーザおよび可変長復号化手段と；前記復号化係数
を逆量子化し、また逆量子化係数を発生するための逆量
子化器と；再構築された低解像度映像を記憶するための
フレームバッファと；前記フレームバッファから検索さ
れた低解像度基準画素を高解像度空間にマッピングし、
また逆動き補償手段のためにアップサンプリングされた
画素を供給するためのアップサンプリング手段であっ
て、前記逆動き補償手段が、前記復号化パラメータに基
づいて前記アップサンプリングされた画素の半画素動き
補償を実行して高解像度動き補償画素を得るためにあ
る、アップサンプリング手段と；前記高解像度動き補償
画素を低解像度空間にマッピングし、ダウンサンプリン
グされた画素を供給するためのダウンサンプリング手段
と；前記逆量子化係数を受信し、また該逆量子化係数を
変換画素に変換するための低解像度一般化逆直交変換手
段と；前記フレームバッファに記憶するために低解像度
基準画素を得るべく、前記変換画素を前記ダウンサンプ
リングされた画素に加えるための加算器と；を備える装
置である。A first aspect of the present invention is an apparatus for decoding a full resolution video bit stream and for displaying a low resolution decoded video sequence on a low resolution monitor, comprising: decoding a video bit stream; A syntax parser and a variable length decoding means for supplying a decoding coefficient and a decoding parameter; an inverse quantizer for inversely quantizing the decoding coefficient and generating an inverse quantization coefficient; A frame buffer for storing the constructed low-resolution image; mapping the low-resolution reference pixels retrieved from the frame buffer to a high-resolution space;
Up-sampling means for supplying up-sampled pixels for the inverse motion compensating means, wherein the inverse motion compensating means comprises a half-pixel motion compensator for the up-sampled pixels based on the decoding parameter. To obtain high-resolution motion-compensated pixels by performing up-sampling; mapping the high-resolution motion-compensated pixels to a low-resolution space and providing down-sampled pixels; Low-resolution generalized inverse orthogonal transform means for receiving the inverse quantized coefficients and converting the inverse quantized coefficients into transformed pixels; and the transform for obtaining a low-resolution reference pixel for storage in the frame buffer. An adder for adding a pixel to the downsampled pixel.
【００１２】第２の観点は、第１の観点の装置におい
て、前記低解像度逆一般化直交変換が逆離散コサイン変
換と異なる、装置である。A second aspect is the apparatus according to the first aspect, wherein the low-resolution inverse generalized orthogonal transform is different from an inverse discrete cosine transform.
【００１３】第３の観点は、第１の観点の装置におい
て、前記アップサンプリング手段がさらに：前記フレー
ムバッファから前記低解像度基準画素を受信し、該基準
画素を周波数ドメインにマッピングし、また変換基準係
数を供給するための低解像度一般化直交変換手段と；前
記変換基準係数を受信し、また高解像度空間に属する高
解像度基準画素を発生するための低解像度変換係数操作
手段と；を備える装置である。A third aspect is the apparatus of the first aspect, wherein the upsampling means further comprises: receiving the low resolution reference pixel from the frame buffer, mapping the reference pixel in the frequency domain, and A low-resolution generalized orthogonal transform means for providing coefficients; and low-resolution transform coefficient operating means for receiving said transform reference coefficients and generating high-resolution reference pixels belonging to a high-resolution space. is there.
【００１４】第４の観点は、第１の観点の装置におい
て、前記ダウンサンプリング手段がさらに：前記高解像
度動き補償画素を受信し、該動き補償画素を周波数ドメ
インにマッピングし、また高解像度変換係数を供給する
ための高解像度一般化マッピング手段と；前記高解像度
変換係数を低解像度空間に変換し、また前記ダウンサン
プリングされた画素を供給するための正規化された低解
像度一般化逆直交変換手段と；を備える装置である。According to a fourth aspect, in the apparatus of the first aspect, the downsampling means further comprises: receiving the high-resolution motion-compensated pixel, mapping the motion-compensated pixel in the frequency domain; High-resolution generalized mapping means for providing the following; and normalized low-resolution generalized inverse orthogonal transform means for converting the high-resolution transform coefficients into a low-resolution space and for providing the down-sampled pixels. And an apparatus comprising:
【００１５】第５の観点は、第３の観点の装置におい
て、前記アップサンプリング手段の前記高解像度基準画
素が、前記変換基準係数のブロックと、１組の一般化直
角関数から得られるマトリックスとを乗算することによ
って得られる、装置である。According to a fifth aspect, in the apparatus according to the third aspect, the high-resolution reference pixel of the up-sampling means includes a block of the conversion reference coefficient and a matrix obtained from a set of generalized orthogonal functions. A device obtained by multiplication.
【００１６】第６の観点は、第４の観点の装置におい
て、前記ダウンサンプリング手段の前記高解像度変換係
数が、前記高解像度動き補償画素のブロックと、１組の
一般化直角関数から得られるマトリックスとを乗算する
ことによって得られる、装置である。According to a sixth aspect, in the apparatus according to the fourth aspect, the high-resolution transform coefficient of the down-sampling means is obtained from the block of the high-resolution motion compensation pixel and a set of generalized orthogonal functions. And a device obtained by multiplying
【００１７】第７の観点は、第４の観点の装置におい
て、前記ダウンサンプリング手段の前記高解像度一般化
直交変換が、ビデオビットストリームを符号化するため
に使用される離散コサイン変換のオーダと同じオーダを
有する、装置である。According to a seventh aspect, in the apparatus according to the fourth aspect, the high-resolution generalized orthogonal transform of the down-sampling unit is the same as the order of a discrete cosine transform used to encode a video bit stream. A device having an order.
【００１８】第８の観点は、第１の観点の装置におい
て、前記低解像度一般化逆直交変換手段が、前記フレー
ムバッファのサイズに基づいて選択されるオーダを有す
る、装置である。An eighth aspect is the apparatus according to the first aspect, wherein the low-resolution generalized inverse orthogonal transform means has an order selected based on the size of the frame buffer.
【００１９】第９の観点は、第４の観点の装置におい
て、前記ダウンサンプリング手段の前記正規化された低
解像度一般化逆直交変換のオーダが、前記低解像度逆一
般化直交変換手段のオーダと同じである、装置である。According to a ninth aspect, in the apparatus according to the fourth aspect, the order of the normalized low-resolution generalized inverse orthogonal transform of the downsampling unit is the same as the order of the low-resolution inverse generalized orthogonal transform unit. The same is the device.
【００２０】第１０の観点は、第５の観点の装置におい
て、前記マトリックスが寸法ＭｘＮを有し、この場合Ｍ
は前記低解像度逆一般化直交変換のオーダであり、また
Ｎは前記高解像度一般化直交変換のオーダである、装置
である。A tenth aspect is the device according to the fifth aspect, wherein the matrix has a dimension MxN, wherein M
Is the order of the low-resolution inverse generalized orthogonal transform, and N is the order of the high-resolution generalized orthogonal transform.
【００２１】第１１の観点は、第６の観点の装置におい
て、前記マトリックスが寸法ＮｘＭを有し、この場合Ｍ
は前記低解像度逆一般化直交変換のオーダであり、また
Ｎは前記高解像度一般化直交変換のオーダである、装置
である。An eleventh aspect is the device according to the sixth aspect, wherein the matrix has a dimension NxM, wherein M
Is the order of the low-resolution inverse generalized orthogonal transform, and N is the order of the high-resolution generalized orthogonal transform.
【００２２】第１２の観点は、フル解像度ビデオビット
ストリームを復号化し、また低解像度モニタ上に低解像
度復号化ビデオシーケンスを表示するための方法であっ
て、該方法が：ビデオビットストリームを復号化し、ま
た復号化係数と復号化パラメータとを供給するステップ
と；前記復号化係数を逆量子化し、また逆量子化係数を
発生するステップと；ダウン変換された再構築映像をフ
レームバッファに記憶するステップと；前記フレームバ
ッファから検索された低解像度基準画素を高解像度空間
にマッピングし、またアップサンプリングされた画素を
供給するステップと；前記復号化パラメータに基づい
て、前記アップサンプリングされた画素の半画素動き補
償を実行して高解像度動き補償画素を得るステップと；
前記高解像度動き補償画素を低解像度空間マッピング
し、またダウンサンプリングされた画素を供給するステ
ップと；前記逆量子化係数を受信し、また低解像度一般
化逆直交変換を用いて前記逆量子化係数を変換画素に変
換するステップと；前記フレームバッファに記憶するた
めに再構築画素を得るべく、前記変換画素を前記ダウン
サンプリングされた画素に加えるステップと；を備える
方法である。A twelfth aspect is a method for decoding a full resolution video bitstream and displaying a low resolution decoded video sequence on a low resolution monitor, the method comprising: decoding a video bitstream. Supplying decoding coefficients and decoding parameters; dequantizing the decoding coefficients and generating dequantized coefficients; storing the down-converted reconstructed video in a frame buffer. Mapping the low resolution reference pixel retrieved from the frame buffer to a high resolution space and providing an upsampled pixel; and half a pixel of the upsampled pixel based on the decoding parameter. Performing motion compensation to obtain high resolution motion compensated pixels;
Low resolution spatial mapping the high resolution motion compensated pixels and providing downsampled pixels; receiving the dequantized coefficients and using a low resolution generalized inverse orthogonal transform to perform the dequantized coefficients. To a converted pixel; and adding the converted pixel to the downsampled pixel to obtain a reconstructed pixel for storage in the frame buffer.
【００２３】第１３の観点は、第１２の観点の方法にお
いて、前記低解像度基準画素を高解像度空間にマッピン
グする前記ステップが：前記フレームバッファから前記
低解像度基準画素を受信し、該基準画素を周波数ドメイ
ンにマッピングし、また変換基準係数を供給するステッ
プと；前記変換基準係数を受信し、また高解像度空間に
属する高解像度基準画素を発生するステップと；を備え
る方法である。According to a thirteenth aspect, in the method of the twelfth aspect, the step of mapping the low resolution reference pixel to a high resolution space includes: receiving the low resolution reference pixel from the frame buffer, and Mapping in the frequency domain and providing transform reference coefficients; receiving the transform reference coefficients and generating a high resolution reference pixel belonging to a high resolution space.
【００２４】第１４の観点は、第１２の観点の方法にお
いて、前記動き補償画素を低解像度空間にマッピングす
るステップが：高解像度動き補償画素を受信し、該動き
補償画素を周波数ドメインにマッピングし、また高解像
度変換係数を供給するステップと；前記高解像度変換係
数を低解像度空間に変換し、また前記ダウンサンプリン
グされた画素を供給するステップと；を備える方法であ
る。According to a fourteenth aspect, in the method of the twelfth aspect, the step of mapping the motion compensation pixel to a low resolution space includes: receiving a high resolution motion compensation pixel and mapping the motion compensation pixel in the frequency domain. Supplying a high-resolution transform coefficient; and converting the high-resolution transform coefficient into a low-resolution space and providing the down-sampled pixels.
【００２５】第１５の観点は、第１から第１１の観点の
装置において、前記低解像度逆一般化直交変換と、正規
化された低解像度逆一般化変換と、低解像度一般化直交
変換と、高解像度一般化直交変換と、低解像度変換係数
操作手段とが、迅速かつ効率的なシステムリソースの利
用のために簡略化した方法を使用して実装される装置で
ある。A fifteenth aspect is the device according to the first to eleventh aspects, wherein the low-resolution inverse generalized orthogonal transform, the normalized low-resolution inverse generalized transform, the low-resolution generalized orthogonal transform, A device in which the high-resolution generalized orthogonal transform and the low-resolution transform coefficient manipulation means are implemented using a simplified method for fast and efficient use of system resources.
【００２６】第１６の観点は、第１から第１１の観点の
装置において、低解像度ビデオ復号化が水平および垂直
の両方向に適用可能である、装置である。A sixteenth aspect is an apparatus according to the first to eleventh aspects, wherein the low-resolution video decoding is applicable in both horizontal and vertical directions.
【００２７】第１７の観点は、第１から第１１の観点の
装置において、低解像度ビデオ復号化がプログレッシブ
およびインターレースの両方のビデオビットストリーム
に適用可能である、装置である。A seventeenth aspect is the apparatus of the first to eleventh aspects, wherein the low resolution video decoding is applicable to both progressive and interlaced video bitstreams.
【００２８】第１８の観点は、第１２から第１４の観点
の方法において、前記低解像度逆一般化直交変換と、正
規化された低解像度逆一般化変換と、低解像度一般化直
交変換と、高解像度一般化直交変換と、低解像度変換係
数操作ステップとが、迅速かつ効率的なシステムリソー
スの利用のために簡略化した方法を使用して実装される
方法である。An eighteenth aspect is the method according to the twelfth to fourteenth aspects, wherein the low-resolution inverse generalized orthogonal transform, the normalized low-resolution inverse generalized transform, the low-resolution generalized orthogonal transform, A method in which a high-resolution generalized orthogonal transform and a low-resolution transform coefficient manipulation step are implemented using a simplified method for quick and efficient use of system resources.
【００２９】第１９の観点は、第１２から第１４の観点
の方法において、低解像度ビデオ復号化が水平および垂
直の両方向に適用できる、方法である。A nineteenth aspect is the method of the twelfth to fourteenth aspects, wherein the low-resolution video decoding can be applied in both horizontal and vertical directions.
【００３０】第２０の観点は、第１２から第１４の方法
において、低解像度ビデオ復号化がプログレッシブおよ
びインターレースの両方のビデオビットストリームに適
用可能である、方法である。A twentieth aspect is the method according to the twelfth to fourteenth methods, wherein low-resolution video decoding is applicable to both progressive and interlaced video bitstreams.
【００３１】[0031]
【発明の実施の形態】本発明の実施形態を図２に示す。
ダウン変換処理は復号化ループに含まれる。低解像度一
般化逆直交変換手段２３０は、ビデオ符号器の動き予測
によって発生される低解像度予測誤差情報を得るために
使用される。アップサンプリング手段２５０とダウンサ
ンプリング手段２６０は逆動き補償手段２４０の前後に
使用される。FIG. 2 shows an embodiment of the present invention.
The down conversion process is included in the decoding loop. The low-resolution generalized inverse orthogonal transform unit 230 is used to obtain low-resolution prediction error information generated by motion prediction of a video encoder. Up-sampling means 250 and down-sampling means 260 are used before and after reverse motion compensating means 240.
【００３２】ビデオビットストリーム２０１は、最初に
シンタクスパーザと可変長復号化手段２１０とによって
復号化される。逆量子化器２２０はシンタクスパーザと
可変長復号化手段２１０とに結合され、可変長復号化係
数２１１を逆量子化する。フレームバッファ２７０は低
解像度ビデオ画像を記憶する。低解像度基準画素２７１
はアップサンプリング手段２５０によって検索され、ま
た逆動き補償手段２４０用のアップサンプリングされた
画素２５１を発生するために補間される。逆動き補償手
段２４０はアップサンプリングされた画素２５１に基づ
いて半画素（half-pel）逆動き補償を実行し、動き補償
画素２４１を得る。逆量子化係数２２１は低解像度一般
化逆直交変換手段２３０によって変換され、変換画素２
３１を得る。ここで、変換画素は、ビデオ符号器の動き
予測動作によって得られる予測誤差画素である。変換画
素２３１と動き補償画素２６１は再構築画素２３２を得
るために合計される。ＰフレームまたはＩフレームの再
構築画素２３２は、次のフレームの動き補償用の基準画
素としてフレームバッファ２７０の中に記憶される。低
解像度一般化逆直交変換手段２３０のオーダは、ビット
ストリーム符号化のために使用される離散コサイン変換
のオーダよりも小さく、またビデオダウン変換比に基づ
いて決定される。The video bit stream 201 is first decoded by the syntax parser and the variable length decoding means 210. The inverse quantizer 220 is coupled to the syntax parser and the variable length decoding means 210, and inversely quantizes the variable length decoded coefficients 211. Frame buffer 270 stores low resolution video images. Low resolution reference pixel 271
Are searched by upsampling means 250 and interpolated to generate upsampled pixels 251 for inverse motion compensation means 240. The reverse motion compensation unit 240 performs half-pel reverse motion compensation based on the up-sampled pixel 251 to obtain a motion compensation pixel 241. The inverse quantization coefficient 221 is transformed by the low-resolution generalized inverse orthogonal transform means 230, and the transformed pixel 2
31 is obtained. Here, the conversion pixel is a prediction error pixel obtained by the motion prediction operation of the video encoder. Transformed pixel 231 and motion compensation pixel 261 are summed to obtain reconstructed pixel 232. The reconstructed pixel 232 of the P frame or I frame is stored in the frame buffer 270 as a reference pixel for motion compensation of the next frame. The order of the low-resolution generalized inverse orthogonal transform means 230 is smaller than the order of the discrete cosine transform used for bitstream encoding, and is determined based on the video down-conversion ratio.
【００３３】本実施形態の効果は、フル解像度ビデオビ
ットストリームが低コストビデオ復号器を用いて復号化
することができ、また復号化ビデオシーケンスが低解像
度モニタ上の表示に適していることである。アップサン
プリングとダウンサンプリング用の直交変換に基づく方
法は、ＤＣＴベースの最小ドリフトビデオフォーマット
ダウン変換に必要な膨大な計算必要量の問題を解決す
る。また、復号化ループの外側にデシメータが配置され
たビデオフォーマットダウン変換器と比較して、計算必
要量とメモリ必要量は相当に低減される。An advantage of this embodiment is that a full resolution video bitstream can be decoded using a low cost video decoder, and the decoded video sequence is suitable for display on a low resolution monitor. . Orthogonal transform-based methods for upsampling and downsampling solve the enormous computational requirements needed for DCT-based minimum drift video format downconversion. Also, compared to a video format downconverter where the decimator is located outside the decoding loop, the computational and memory requirements are significantly reduced.
【００３４】図３に示した他の実施形態は、図２に例示
したアップサンプリング手段で使用される方法について
説明している。アップサンプリング手段は２つの要素、
すなわち、低解像度一般化直交変換手段３２０と、低解
像度変換係数操作手段３３０とを備える。The other embodiment shown in FIG. 3 describes the method used in the upsampling means illustrated in FIG. Upsampling means are two elements:
That is, it includes a low-resolution generalized orthogonal transform unit 320 and a low-resolution transform coefficient operation unit 330.
【００３５】本実施形態の動作について以下に説明す
る。低解像度空間３１０に属する低解像度基準画素３１
１は低解像度一般化直交変換手段３２０を用いて変換さ
れ、低解像度変換係数３２１を発生する。異なった低解
像度変換係数３２１は低解像度基準画素３１１の異なっ
た周波数成分を表している。低解像度変換係数操作手段
３３０は低解像度一般化直交変換手段３２０に結合され
ている。低解像度変換係数３２１は低解像度変換係数操
作手段３３０によって再び変換され、高解像度空間３４
０に属する高解像度基準画素３３１を発生する。低解像
度変換係数操作手段３３０の動作は、低解像度変換係数
３２１を備えるベクトルと、一般化直交関数の内の１つ
の値を備えるベクトルとの内積を計算するためにある。The operation of this embodiment will be described below. Low resolution reference pixel 31 belonging to low resolution space 310
1 is converted using the low-resolution generalized orthogonal transform means 320 to generate a low-resolution conversion coefficient 321. The different low-resolution transform coefficients 321 represent different frequency components of the low-resolution reference pixel 311. The low-resolution transform coefficient operating means 330 is coupled to the low-resolution generalized orthogonal transform means 320. The low-resolution conversion coefficient 321 is converted again by the low-resolution conversion coefficient operation means 330, and the high-resolution space 34
Generate a high resolution reference pixel 331 belonging to 0. The operation of the low-resolution transform coefficient operation means 330 is to calculate an inner product of a vector having the low-resolution transform coefficient 321 and a vector having one value of the generalized orthogonal function.
【００３６】図４に示した他の実施形態は、図２に例示
したダウンサンプリング手段で用いられる方法について
説明している。ダウンサンプリング手段は２つの要素、
すなわち、高解像度一般化直角マッピング手段４２０
と、正規化された低解像度一般化逆直交変換手段４３０
とを備える。The other embodiment shown in FIG. 4 describes a method used in the downsampling means illustrated in FIG. Downsampling means is two elements:
That is, the high resolution generalized right angle mapping means 420
And the normalized low-resolution generalized inverse orthogonal transform means 430
And
【００３７】本実施形態の動作について以下に説明す
る。高解像度空間４１０に属する高解像度動き補償画素
４１１は、高解像度画像画素４１１を備えるベクトル
と、一般化直角関数の内の１つの値を備えるベクトルと
の内積を計算することによって変換される。異なった高
解像度変換係数４２１は高解像度画素の異なった周波数
成分を表している。正規化された低解像度一般化逆直交
変換手段４３０は高解像度一般化直交変換手段４２０に
結合されている。高解像度変換係数４２１は、正規化さ
れた低解像度一般化逆直交変換手段４３０によって再び
変換され、低解像度空間４４０に属するダウンサンプリ
ングされた画素４３１を発生する。The operation of this embodiment will be described below. The high-resolution motion compensation pixel 411 belonging to the high-resolution space 410 is transformed by calculating an inner product of a vector having the high-resolution image pixel 411 and a vector having one value of the generalized orthogonal function. The different high resolution transform coefficients 421 represent different frequency components of the high resolution pixel. The normalized low-resolution generalized inverse orthogonal transform means 430 is coupled to the high-resolution generalized orthogonal transform means 420. The high resolution transform coefficients 421 are again transformed by the normalized low resolution generalized inverse orthogonal transform means 430 to generate downsampled pixels 431 belonging to the low resolution space 440.
【００３８】図３と図４に示した実施形態の効果は、画
像アップサンプリングとダウンサンプリング方法が一般
化直交変換を用いて実現できることである。従来技術に
記述されているＤＣＴベースのアップサンプリングとダ
ウンサンプリング方法を使用する代わりに、アップサン
プリングとダウンサンプリング用の一般化直交変換に基
づく方法の使用は、より多くの変換カーネルの選択を提
供し、また低解像度ビデオ復号化にとってより効率的で
ある。An advantage of the embodiment shown in FIGS. 3 and 4 is that the image up-sampling and down-sampling methods can be realized using a generalized orthogonal transform. Instead of using the DCT-based upsampling and downsampling methods described in the prior art, the use of a generalized orthogonal transform-based method for upsampling and downsampling provides more transform kernel choices. , And is more efficient for low resolution video decoding.
【００３９】図５に示した他の実施形態は一般化直交変
換カーネルの実例を示しており、特に８：３のダウン変
換比を有する低解像度ビデオ復号化システムで使用され
る変換用カーネルの式である（この場合α＝５、β＝５
／３、γ＝５／２）。Another embodiment shown in FIG. 5 shows an example of a generalized orthogonal transform kernel, in particular, the expression of the transform kernel used in a low-resolution video decoding system having a down-conversion ratio of 8: 3. (In this case, α = 5, β = 5
/ 3, γ = 5/2).
【００４０】これらのカーネルは、水平方向に８：３の
ダウン変換比で低解像度ビデオ復号化のために用いられ
る。カーネル Ｋ1、Ｋ2、Ｋ3、Ｋ4は、低解像度一般化
直交変換手段３２０、低解像度変換係数操作手段３３
０、高解像度一般化直角マッピング手段、正規化された
低解像度一般化逆直交変換手段４３０の操作のためにそ
れぞれ用いられる。Ｋ5は Ｋ1の置換マトリックスであ
る。Ｋ5は低解像度逆一般化直交変換手段２３０の動作
のために用いられる。These kernels are used for low resolution video decoding with a down conversion ratio of 8: 3 in the horizontal direction. The kernels K 1 , K 2 , K 3 and K 4 are the low-resolution generalized orthogonal transform means 320 and the low-resolution transform coefficient operating means 33
0, used for the operation of the high-resolution generalized orthogonal mapping means and the normalized low-resolution generalized inverse orthogonal transform means 430, respectively. K 5 is a permutation matrix of K 1. K 5 is used for operation of the low-resolution inverse generalized orthogonal transformation unit 230.
【００４１】図５に示した実施形態の効果は、従来技術
に記述されたＤＣＴベースの低解像度ビデオ復号化方法
と比較して計算必要量がはるかに小さいことである。マ
トリクスＫ1、Ｋ2、Ｋ3、Ｋ4の積が３×３恒等行列であ
ることを証明することは容易である。かくして、アップ
サンプリングとダウンサンプリング手順の全体の変換は
正規直交である。γ＝α／２＝２．５なので、係数また
は画素と、γまたはα／２の乗法は図６に示したシフト
と加算動作を用いて実現することができる。図6は、シ
フトと加算動作を用いて係数に２．５を掛けた乗法図で
ある。An advantage of the embodiment shown in FIG. 5 is that the computational requirements are much smaller compared to the DCT based low resolution video decoding method described in the prior art. It is easy to prove that the product of the matrices K 1 , K 2 , K 3 , K 4 is a 3 × 3 identity matrix. Thus, the overall transformation of the upsampling and downsampling procedures is orthonormal. Since γ = α / 2 = 2.5, the multiplication of the coefficient or pixel and γ or α / 2 can be realized using the shift and addition operations shown in FIG. FIG. 6 is a multiplicative diagram in which a coefficient is multiplied by 2.5 using shift and add operations.
【００４２】かくして、Ｋ1からＫ5の変換を実施して１
ラインの再構築画像ブロックを得るために、２つの乗算
動作のみで済むことが明らかである。ＤＣＴベースの最
小ドリフト低解像度ビデオ復号化方法が使用されるなら
ば、必要とされる乗算動作の数ははるかに多くなる。か
くして乗算動作数の節減は、低解像度ビデオ復号化用の
従来のある方法に必要とされる乗算動作数と比較して８
０％以上であることが可能である。Thus, the conversion from K 1 to K 5 is performed to obtain 1
Obviously, only two multiplication operations are required to obtain a reconstructed image block of the line. If a DCT based minimum drift low resolution video decoding method is used, the number of multiplication operations required will be much higher. Thus, the savings in the number of multiply operations is eight times less than the number of multiply operations required in some prior art methods for low resolution video decoding.
It can be 0% or more.
【００４３】本発明の効果の１つは、高品質低分解能ビ
デオを高解像度ビデオビットストリームから得ることが
できることである。エラードリフト問題は、本明細書に
説明した低解像度復号化のための一般化直交変換に基づ
く方法を使用することによって有効に克服することがで
きる。本発明の計算必要量は、従来の低解像度ビデオ復
号化方法、あるいは代わりにビデオフォーマットダウン
変換方法と呼ばれる方法に必要とされる計算必要量より
もはるかに集中度が低い。実験結果では、新しい低解像
度ビデオ復号化システムは、ＤＣＴベースのビデオフォ
ーマットダウン変換方法と比べると感知可能な追加ノイ
ズをもたらさないことが示されている。One of the advantages of the present invention is that high quality low resolution video can be obtained from a high resolution video bitstream. The error drift problem can be effectively overcome by using the generalized orthogonal transform based method for low resolution decoding described herein. The computational requirements of the present invention are much less intensive than the computational requirements required for conventional low-resolution video decoding methods, or alternatively, methods called video format down-conversion methods. Experimental results indicate that the new low-resolution video decoding system does not introduce any appreciable additional noise when compared to DCT-based video format down-conversion methods.
【図面の簡単な説明】[Brief description of the drawings]
【図１】 従来技術による低解像度ビデオ復号器のブロ
ック図である。FIG. 1 is a block diagram of a low-resolution video decoder according to the prior art.
【図２】 本発明による低解像度ビデオ復号化システム
のブロック図である。FIG. 2 is a block diagram of a low-resolution video decoding system according to the present invention.
【図３】 本発明による画素アップサンプリング用のブ
ロック図である。FIG. 3 is a block diagram for pixel upsampling according to the present invention.
【図４】 本発明による画素ダウンサンプリング用のブ
ロック図である。FIG. 4 is a block diagram for pixel downsampling according to the present invention.
【図５】 ８：３のダウン変換比を有する低解像度ビデ
オ復号化システムで使用される変換用カーネルの式であ
る（この場合α＝５、β＝５／３、γ＝５／２）。FIG. 5 is an expression for a transform kernel used in a low-resolution video decoding system with a down-conversion ratio of 8: 3 (in this case α = 5, β = 5/3, γ = 5/2).
【図６】 シフトと加算動作を用いて係数に２．５を掛
けた乗法図である。FIG. 6 is a multiplicative diagram in which a coefficient is multiplied by 2.5 using a shift and addition operation.
201…ビデオビットストリーム 210…シンタクスパーザおよび可変長復号化手段 220…逆量子化器 230…低解像度一般化逆直交変換手段 250…アップサンプリング手段 240…逆動き補償手段 260…ダウンサンプリング手段 270…フレームバッファ 272…ディスプレイへ 320…低解像度一般化直交変換手段 330…低解像度変換係数操作手段 310…低解像度空間 340…高解像度空間 420…高解像度一般化直交変換手段 430…正規化された低解像度逆一般化直交変換手段 410…高解像度空間 440…低解像度空間 201 ... video bit stream 210 ... syntax parser and variable length decoding means 220 ... inverse quantizer 230 ... low resolution generalized inverse orthogonal transform means 250 ... upsampling means 240 ... inverse motion compensation means 260 ... downsampling means 270 ... frame Buffer 272 to display 320 low-resolution generalized orthogonal transform means 330 low-resolution transform coefficient operating means 310 low-resolution space 340 high-resolution space 420 high-resolution generalized orthogonal transform means 430 normalized low-resolution inverse Generalized orthogonal transformation means 410 ... High resolution space 440 ... Low resolution space
───────────────────────────────────────────────────── フロントページの続き (72)発明者 ピータ・キュ・ウォン・ミン シンガポール534415シンガポール、タイ・ セン・アベニュー、ブロック1022、04− 3530番、タイ・セン・インダストリアル・ エステイト、パナソニック・シンガポール 研究所株式会社内 Ｆターム(参考） 5C059 KK15 MA23 ME01 SS03 SS07 SS09 UA05 5C063 AA06 CA01 CA07 CA11 CA38 5J064 AA01 BA09 BA16 BB03 BC02 BC08 BC09 BC17 BD01 ──────────────────────────────────────────────────の Continued on the front page (72) Inventor Peter Kew Wong Min Singapore 534415 Singapore, Thailand Sen Avenue, Block 1022, 04-3530, Thailand Sen Industrial Estate, Panasonic Singapore Research Institute F term in reference (reference) 5C059 KK15 MA23 ME01 SS03 SS07 SS09 UA05 5C063 AA06 CA01 CA07 CA11 CA38 5J064 AA01 BA09 BA16 BB03 BC02 BC08 BC09 BC17 BD01
Claims (20)
号化し、また低解像度モニタ上に低解像度復号化ビデオ
シーケンスを表示するための装置であって：ビデオビッ
トストリームを復号化し、また復号化係数と復号化パラ
メータとを供給するためのシンタクスパーザおよび可変
長復号化手段と；前記復号化係数を逆量子化し、また逆
量子化係数を発生するための逆量子化器と；再構築され
た低解像度映像を記憶するためのフレームバッファと；
前記フレームバッファから検索された低解像度基準画素
を高解像度空間にマッピングし、また逆動き補償手段の
ためにアップサンプリングされた画素を供給するための
アップサンプリング手段であって、前記逆動き補償手段
が、前記復号化パラメータに基づいて前記アップサンプ
リングされた画素の半画素動き補償を実行して高解像度
動き補償画素を得るためにある、アップサンプリング手
段と；前記高解像度動き補償画素を低解像度空間にマッ
ピングし、ダウンサンプリングされた画素を供給するた
めのダウンサンプリング手段と；前記逆量子化係数を受
信し、また該逆量子化係数を変換画素に変換するための
低解像度一般化逆直交変換手段と；前記フレームバッフ
ァに記憶するために低解像度基準画素を得るべく、前記
変換画素を前記ダウンサンプリングされた画素に加える
ための加算器と；を備える装置。An apparatus for decoding a full-resolution video bitstream and displaying a low-resolution decoded video sequence on a low-resolution monitor, comprising: decoding a video bitstream; and decoding coefficients and decoding. A syntax parser and variable length decoding means for providing parameters; an inverse quantizer for inversely quantizing the decoded coefficients and generating inverse quantized coefficients; A frame buffer for storing;
Up-sampling means for mapping low-resolution reference pixels retrieved from the frame buffer to a high-resolution space, and for supplying up-sampled pixels for inverse motion compensation means, wherein the inverse motion compensation means is Up-sampling means for performing half-pixel motion compensation of the up-sampled pixels based on the decoding parameters to obtain high-resolution motion-compensated pixels; and placing the high-resolution motion-compensated pixels in a low-resolution space. Downsampling means for mapping and providing downsampled pixels; low resolution generalized inverse orthogonal transform means for receiving the inverse quantized coefficients and converting the inverse quantized coefficients to transformed pixels. Converting the converted pixels to obtain lower resolution reference pixels for storage in the frame buffer. Adder for adding the down sampled pixels and; device comprising a.
解像度逆一般化直交変換が逆離散コサイン変換と異な
る、装置。2. The apparatus of claim 1, wherein the low-resolution inverse generalized orthogonal transform is different from an inverse discrete cosine transform.
ップサンプリング手段がさらに：前記フレームバッファ
から前記低解像度基準画素を受信し、該基準画素を周波
数ドメインにマッピングし、また変換基準係数を供給す
るための低解像度一般化直交変換手段と；前記変換基準
係数を受信し、また高解像度空間に属する高解像度基準
画素を発生するための低解像度変換係数操作手段と；を
備える装置。3. The apparatus of claim 1, wherein the upsampling means further comprises: receiving the low resolution reference pixel from the frame buffer, mapping the reference pixel in the frequency domain, and providing a transform reference coefficient. A low-resolution generalized orthogonal transform means for receiving the transform reference coefficients, and low-resolution transform coefficient operation means for generating a high-resolution reference pixel belonging to a high-resolution space.
ウンサンプリング手段がさらに：前記高解像度動き補償
画素を受信し、該動き補償画素を周波数ドメインにマッ
ピングし、また高解像度変換係数を供給するための高解
像度一般化マッピング手段と；前記高解像度変換係数を
低解像度空間に変換し、また前記ダウンサンプリングさ
れた画素を供給するための正規化された低解像度一般化
逆直交変換手段と；を備える装置。4. The apparatus of claim 1, wherein the downsampling means further comprises: receiving the high resolution motion compensated pixels, mapping the motion compensated pixels in the frequency domain, and providing high resolution transform coefficients. High-resolution generalized mapping means for transforming the high-resolution transform coefficients into low-resolution space and providing the down-sampled pixels. Equipment to be equipped.
ップサンプリング手段の前記高解像度基準画素が、前記
変換基準係数のブロックと、１組の一般化直角関数から
得られるマトリックスとを乗算することによって得られ
る、装置。5. The apparatus of claim 3, wherein said high resolution reference pixel of said upsampling means multiplies said block of transform reference coefficients by a matrix derived from a set of generalized orthogonal functions. The device obtained by:
ウンサンプリング手段の前記高解像度変換係数が、前記
高解像度動き補償画素のブロックと、１組の一般化直角
関数から得られるマトリックスとを乗算することによっ
て得られる、装置。6. The apparatus of claim 4, wherein the high resolution transform coefficients of the downsampling means multiply the block of high resolution motion compensated pixels by a matrix derived from a set of generalized orthogonal functions. The device obtained by doing.
ウンサンプリング手段の前記高解像度一般化直交変換
が、ビデオビットストリームを符号化するために使用さ
れる離散コサイン変換のオーダと同じオーダを有する、
装置。7. The apparatus of claim 4, wherein the high resolution generalized orthogonal transform of the downsampling means has the same order as a discrete cosine transform used to encode a video bitstream. ,
apparatus.
解像度一般化逆直交変換手段が、前記フレームバッファ
のサイズに基づいて選択されるオーダを有する、装置。8. The apparatus of claim 1, wherein said low-resolution generalized inverse orthogonal transform means has an order selected based on a size of said frame buffer.
ウンサンプリング手段の前記正規化された低解像度一般
化逆直交変換のオーダが、前記低解像度逆一般化直交変
換手段のオーダと同じである、装置。9. The apparatus according to claim 4, wherein the order of the normalized low-resolution generalized inverse orthogonal transform of the downsampling unit is the same as the order of the low-resolution inverse generalized orthogonal transform unit. ,apparatus.
マトリックスが寸法ＭｘＮを有し、この場合Ｍは前記低
解像度逆一般化直交変換のオーダであり、またＮは前記
高解像度一般化直交変換のオーダである、装置。10. The apparatus of claim 5, wherein the matrix has a dimension M × N, where M is the order of the low-resolution inverse generalized orthogonal transform, and N is the high-resolution generalized orthogonal transform. Equipment that is in the order of
マトリックスが寸法ＮｘＭを有し、この場合Ｍは前記低
解像度逆一般化直交変換のオーダであり、またＮは前記
高解像度一般化直交変換のオーダである、装置。11. The apparatus of claim 6, wherein the matrix has a dimension N × M, where M is the order of the low-resolution inverse generalized orthogonal transform, and N is the high-resolution generalized orthogonal transform. Equipment that is in the order of
復号化し、また低解像度モニタ上に低解像度復号化ビデ
オシーケンスを表示するための方法であって、該方法
が：ビデオビットストリームを復号化し、また復号化係
数と復号化パラメータとを供給するステップと；前記復
号化係数を逆量子化し、また逆量子化係数を発生するス
テップと；ダウン変換された再構築映像をフレームバッ
ファに記憶するステップと；前記フレームバッファから
検索された低解像度基準画素を高解像度空間にマッピン
グし、またアップサンプリングされた画素を供給するス
テップと；前記復号化パラメータに基づいて、前記アッ
プサンプリングされた画素の半画素動き補償を実行して
高解像度動き補償画素を得るステップと；前記高解像度
動き補償画素を低解像度空間マッピングし、またダウン
サンプリングされた画素を供給するステップと；前記逆
量子化係数を受信し、また低解像度一般化逆直交変換を
用いて前記逆量子化係数を変換画素に変換するステップ
と；前記フレームバッファに記憶するために再構築画素
を得るべく、前記変換画素を前記ダウンサンプリングさ
れた画素に加えるステップと；を備える方法。12. A method for decoding a full resolution video bitstream and displaying a low resolution decoded video sequence on a low resolution monitor, the method comprising: decoding and decoding the video bitstream. Providing coefficients and decoding parameters; dequantizing the decoded coefficients and generating inverse quantized coefficients; storing the down-converted reconstructed video in a frame buffer; Mapping the low resolution reference pixel retrieved from the buffer into a high resolution space and providing an upsampled pixel; performing half-pixel motion compensation of the upsampled pixel based on the decoding parameters. Obtaining high-resolution motion-compensated pixels by performing high-resolution motion-compensated pixels; Providing spatially mapped and downsampled pixels; receiving the inverse quantized coefficients and transforming the inverse quantized coefficients into transformed pixels using a low resolution generalized inverse orthogonal transform. Adding the transformed pixels to the downsampled pixels to obtain reconstructed pixels for storage in the frame buffer.
記低解像度基準画素を高解像度空間にマッピングする前
記ステップが：前記フレームバッファから前記低解像度
基準画素を受信し、該基準画素を周波数ドメインにマッ
ピングし、また変換基準係数を供給するステップと；前
記変換基準係数を受信し、また高解像度空間に属する高
解像度基準画素を発生するステップと；を備える方法。13. The method of claim 12, wherein the step of mapping the low resolution reference pixel to a high resolution space comprises: receiving the low resolution reference pixel from the frame buffer and converting the reference pixel to the frequency domain. Mapping and providing transform reference coefficients; receiving the transform reference coefficients and generating a high resolution reference pixel belonging to a high resolution space.
記動き補償画素を低解像度空間にマッピングするステッ
プが：高解像度動き補償画素を受信し、該動き補償画素
を周波数ドメインにマッピングし、また高解像度変換係
数を供給するステップと；前記高解像度変換係数を低解
像度空間に変換し、また前記ダウンサンプリングされた
画素を供給するステップと；を備える方法。14. The method of claim 12, wherein mapping the motion compensated pixels to a low resolution space comprises: receiving high resolution motion compensated pixels, mapping the motion compensated pixels in the frequency domain, and Providing a resolution conversion factor; converting the high resolution conversion factor to a low resolution space and providing the downsampled pixels.
て、前記低解像度逆一般化直交変換と、正規化された低
解像度逆一般化変換と、低解像度一般化直交変換と、高
解像度一般化直交変換と、低解像度変換係数操作手段と
が、迅速かつ効率的なシステムリソースの利用のために
簡略化した方法を使用して実装される装置。15. The apparatus according to claim 1, wherein the low-resolution inverse generalized orthogonal transform, a normalized low-resolution inverse generalized transform, a low-resolution generalized orthogonal transform, and a high-resolution generalized transform. Apparatus in which the orthogonal transform and the low-resolution transform coefficient manipulation means are implemented using a simplified method for quick and efficient use of system resources.
て、低解像度ビデオ復号化が水平および垂直の両方向に
適用可能である、装置。16. The apparatus according to claim 1, wherein the low-resolution video decoding is applicable in both horizontal and vertical directions.
て、低解像度ビデオ復号化がプログレッシブおよびイン
ターレースの両方のビデオビットストリームに適用可能
である、装置。17. The apparatus according to claim 1, wherein the low-resolution video decoding is applicable to both progressive and interlaced video bitstreams.
いて、前記低解像度逆一般化直交変換と、正規化された
低解像度逆一般化変換と、低解像度一般化直交変換と、
高解像度一般化直交変換と、低解像度変換係数操作手段
とが、迅速かつ効率的なシステムリソースの利用のため
に簡略化した方法を使用して実装される方法。18. The method according to claim 12, wherein the low-resolution inverse generalized orthogonal transform, the normalized low-resolution inverse generalized transform, the low-resolution generalized orthogonal transform,
A method in which the high-resolution generalized orthogonal transform and the low-resolution transform coefficient manipulation means are implemented using a simplified method for quick and efficient use of system resources.
いて、低解像度ビデオ復号化が水平および垂直の両方向
に適用できる、方法。19. The method according to claim 12, wherein the low-resolution video decoding is applicable in both horizontal and vertical directions.
いて、低解像度ビデオ復号化がプログレッシブおよびイ
ンターレースの両方のビデオビットストリームに適用可
能である、方法。20. The method according to claim 12, wherein low resolution video decoding is applicable to both progressive and interlaced video bitstreams.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP16087699A JP2000350207A (en) | 1999-06-08 | 1999-06-08 | Generalized orthogonal transform method and device for low resolution video decoding |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP16087699A JP2000350207A (en) | 1999-06-08 | 1999-06-08 | Generalized orthogonal transform method and device for low resolution video decoding |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000350207A true JP2000350207A (en) | 2000-12-15 |
Family
ID=15724290
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP16087699A Withdrawn JP2000350207A (en) | 1999-06-08 | 1999-06-08 | Generalized orthogonal transform method and device for low resolution video decoding |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000350207A (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6724822B1 (en) | 1999-10-01 | 2004-04-20 | Matsushita Electric Industrial Co., Ltd. | Efficient motion compensation apparatus for digital video format down-conversion using generalized orthogonal transformation |
| US7180948B2 (en) | 2001-04-05 | 2007-02-20 | Nec Corporation | Image decoder and image decoding method having a frame mode basis and a field mode basis |
| CN106131574A (en) * | 2010-04-13 | 2016-11-16 | Ge视频压缩有限责任公司 | Across planar prediction |
| US20170134761A1 (en) | 2010-04-13 | 2017-05-11 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US20180324466A1 (en) | 2010-04-13 | 2018-11-08 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US20190089962A1 (en) | 2010-04-13 | 2019-03-21 | Ge Video Compression, Llc | Inter-plane prediction |
| US10248966B2 (en) | 2010-04-13 | 2019-04-02 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
-
1999
- 1999-06-08 JP JP16087699A patent/JP2000350207A/en not_active Withdrawn
Cited By (65)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6724822B1 (en) | 1999-10-01 | 2004-04-20 | Matsushita Electric Industrial Co., Ltd. | Efficient motion compensation apparatus for digital video format down-conversion using generalized orthogonal transformation |
| US7180948B2 (en) | 2001-04-05 | 2007-02-20 | Nec Corporation | Image decoder and image decoding method having a frame mode basis and a field mode basis |
| CN106131574A (en) * | 2010-04-13 | 2016-11-16 | Ge视频压缩有限责任公司 | Across planar prediction |
| US20170134761A1 (en) | 2010-04-13 | 2017-05-11 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US20180324466A1 (en) | 2010-04-13 | 2018-11-08 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US20190089962A1 (en) | 2010-04-13 | 2019-03-21 | Ge Video Compression, Llc | Inter-plane prediction |
| US10248966B2 (en) | 2010-04-13 | 2019-04-02 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10250913B2 (en) | 2010-04-13 | 2019-04-02 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US20190164188A1 (en) | 2010-04-13 | 2019-05-30 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US20190174148A1 (en) | 2010-04-13 | 2019-06-06 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US20190197579A1 (en) | 2010-04-13 | 2019-06-27 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10432978B2 (en) | 2010-04-13 | 2019-10-01 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10432979B2 (en) | 2010-04-13 | 2019-10-01 | Ge Video Compression Llc | Inheritance in sample array multitree subdivision |
| US10432980B2 (en) | 2010-04-13 | 2019-10-01 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10440400B2 (en) | 2010-04-13 | 2019-10-08 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10448060B2 (en) | 2010-04-13 | 2019-10-15 | Ge Video Compression, Llc | Multitree subdivision and inheritance of coding parameters in a coding block |
| US10460344B2 (en) | 2010-04-13 | 2019-10-29 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10621614B2 (en) | 2010-04-13 | 2020-04-14 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10672028B2 (en) | 2010-04-13 | 2020-06-02 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10681390B2 (en) | 2010-04-13 | 2020-06-09 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10687086B2 (en) | 2010-04-13 | 2020-06-16 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10687085B2 (en) | 2010-04-13 | 2020-06-16 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10694218B2 (en) | 2010-04-13 | 2020-06-23 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10708629B2 (en) | 2010-04-13 | 2020-07-07 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10708628B2 (en) | 2010-04-13 | 2020-07-07 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10721495B2 (en) | 2010-04-13 | 2020-07-21 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10719850B2 (en) | 2010-04-13 | 2020-07-21 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10721496B2 (en) | 2010-04-13 | 2020-07-21 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10748183B2 (en) | 2010-04-13 | 2020-08-18 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10764608B2 (en) | 2010-04-13 | 2020-09-01 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10771822B2 (en) | 2010-04-13 | 2020-09-08 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10803483B2 (en) | 2010-04-13 | 2020-10-13 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10805645B2 (en) | 2010-04-13 | 2020-10-13 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10803485B2 (en) | 2010-04-13 | 2020-10-13 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US10848767B2 (en) | 2010-04-13 | 2020-11-24 | Ge Video Compression, Llc | Inter-plane prediction |
| US10855991B2 (en) | 2010-04-13 | 2020-12-01 | Ge Video Compression, Llc | Inter-plane prediction |
| US10855995B2 (en) | 2010-04-13 | 2020-12-01 | Ge Video Compression, Llc | Inter-plane prediction |
| US10856013B2 (en) | 2010-04-13 | 2020-12-01 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US10855990B2 (en) | 2010-04-13 | 2020-12-01 | Ge Video Compression, Llc | Inter-plane prediction |
| US10863208B2 (en) | 2010-04-13 | 2020-12-08 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10873749B2 (en) | 2010-04-13 | 2020-12-22 | Ge Video Compression, Llc | Inter-plane reuse of coding parameters |
| US10880581B2 (en) | 2010-04-13 | 2020-12-29 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10880580B2 (en) | 2010-04-13 | 2020-12-29 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US10893301B2 (en) | 2010-04-13 | 2021-01-12 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11037194B2 (en) | 2010-04-13 | 2021-06-15 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US11051047B2 (en) | 2010-04-13 | 2021-06-29 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US20210211743A1 (en) | 2010-04-13 | 2021-07-08 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11087355B2 (en) | 2010-04-13 | 2021-08-10 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US11102518B2 (en) | 2010-04-13 | 2021-08-24 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11546642B2 (en) | 2010-04-13 | 2023-01-03 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11546641B2 (en) | 2010-04-13 | 2023-01-03 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US11553212B2 (en) | 2010-04-13 | 2023-01-10 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US11611761B2 (en) | 2010-04-13 | 2023-03-21 | Ge Video Compression, Llc | Inter-plane reuse of coding parameters |
| US11736738B2 (en) | 2010-04-13 | 2023-08-22 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using subdivision |
| US11734714B2 (en) | 2010-04-13 | 2023-08-22 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US11765363B2 (en) | 2010-04-13 | 2023-09-19 | Ge Video Compression, Llc | Inter-plane reuse of coding parameters |
| US11765362B2 (en) | 2010-04-13 | 2023-09-19 | Ge Video Compression, Llc | Inter-plane prediction |
| US11778241B2 (en) | 2010-04-13 | 2023-10-03 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11785264B2 (en) | 2010-04-13 | 2023-10-10 | Ge Video Compression, Llc | Multitree subdivision and inheritance of coding parameters in a coding block |
| US11810019B2 (en) | 2010-04-13 | 2023-11-07 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US11856240B1 (en) | 2010-04-13 | 2023-12-26 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division |
| US11900415B2 (en) | 2010-04-13 | 2024-02-13 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
| US11910030B2 (en) | 2010-04-13 | 2024-02-20 | Ge Video Compression, Llc | Inheritance in sample array multitree subdivision |
| US11910029B2 (en) | 2010-04-13 | 2024-02-20 | Ge Video Compression, Llc | Coding of a spatial sampling of a two-dimensional information signal using sub-division preliminary class |
| US11983737B2 (en) | 2010-04-13 | 2024-05-14 | Ge Video Compression, Llc | Region merging and coding parameter reuse via merging |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100370076B1 (en) | video decoder with down conversion function and method of decoding a video signal | |
| US6873655B2 (en) | Codec system and method for spatially scalable video data | |
| JP3631642B2 (en) | Effective down-conversion in 2: 1 decimation | |
| US6850571B2 (en) | Systems and methods for MPEG subsample decoding | |
| KR100667606B1 (en) | Up-sampling filter for a down conversion system | |
| US6519288B1 (en) | Three-layer scaleable decoder and method of decoding | |
| EP0993196A2 (en) | Down conversion system using a pre-decimation filter | |
| KR100893276B1 (en) | Resolution downscaling of video images | |
| US6665343B1 (en) | Methods and arrangements for a converting a high definition image to a lower definition image using wavelet transforms | |
| US8374248B2 (en) | Video encoding/decoding apparatus and method | |
| KR100711597B1 (en) | Decoding apparatus and method for deriving an reduced-resolution video signal | |
| US20010016010A1 (en) | Apparatus for receiving digital moving picture | |
| US20080170628A1 (en) | Video decoding method and apparatus having image scale-down function | |
| KR100323676B1 (en) | Apparatus for receiving digital moving picture | |
| JP2000350207A (en) | Generalized orthogonal transform method and device for low resolution video decoding | |
| KR100323688B1 (en) | Apparatus for receiving digital moving picture | |
| KR100734348B1 (en) | apparatus for down conversion processing in DTV | |
| JP2004516761A (en) | Video decoding method with low complexity depending on frame type | |
| JP2000236546A (en) | Method and device for synthesizing adaptive frequency for video format down transform | |
| KR100359824B1 (en) | Apparatus for decoding video and method for the same | |
| KR100255777B1 (en) | Digital tv receiver decoder device | |
| KR100296817B1 (en) | Decoder of digital tv receiver | |
| JPH07107488A (en) | Moving picture encoding device | |
| JP2000244907A (en) | Low cost video decoder for recoding digital video data and converting format | |
| KR100308007B1 (en) | Digital tv decoder |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060606 |
|
| A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20070706 |