JP3928815B2 - Mpeg−2復号方法及びmpeg−2ビデオ復号器 - Google Patents
Mpeg−2復号方法及びmpeg−2ビデオ復号器 Download PDFInfo
- Publication number
- JP3928815B2 JP3928815B2 JP32418196A JP32418196A JP3928815B2 JP 3928815 B2 JP3928815 B2 JP 3928815B2 JP 32418196 A JP32418196 A JP 32418196A JP 32418196 A JP32418196 A JP 32418196A JP 3928815 B2 JP3928815 B2 JP 3928815B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- mpeg
- memory
- circuit
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 45
- 239000000872 buffer Substances 0.000 claims description 51
- 238000007906 compression Methods 0.000 claims description 32
- 230000006835 compression Effects 0.000 claims description 30
- 230000006837 decompression Effects 0.000 claims description 23
- 238000013139 quantization Methods 0.000 claims description 21
- 230000003044 adaptive effect Effects 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000002457 bidirectional effect Effects 0.000 claims description 2
- 238000001514 detection method Methods 0.000 claims description 2
- 230000001360 synchronised effect Effects 0.000 claims description 2
- 238000011144 upstream manufacturing Methods 0.000 claims description 2
- FSVCELGFZIQNCK-UHFFFAOYSA-N N,N-bis(2-hydroxyethyl)glycine Chemical compound OCCN(CCO)CC(O)=O FSVCELGFZIQNCK-UHFFFAOYSA-N 0.000 claims 1
- 239000007998 bicine buffer Substances 0.000 claims 1
- 230000005494 condensation Effects 0.000 claims 1
- 238000009833 condensation Methods 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000005457 optimization Methods 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 238000010276 construction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000004377 microelectronic Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000012536 storage buffer Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
- H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
- H04N19/428—Recompression, e.g. by spatial or temporal decimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Description
【発明の属する技術分野】
本発明は、MPEG圧縮アルゴリズムの使用に基づく集積ビデオ復号器に関し、特に、必要量が低減されたビデオメモリを具備するMPEG−2と呼ばれるMPEG−1標準の第2およびそれより進歩したバージョンによる集積ビデオ復号器に関する。
【0002】
【従来の技術】
MPEG−1標準は、デジタル型の記憶支援体、例えばCD−ROM、の上にビデオ情報を格納および検索する効果的な方法を実行する産業の必要性に応じて開発された。もちろん、MPEG−1標準は、DAT、ウインチェスタディスク、光ディスク、およびISDNとLANネットワークのような類似の支援体の上にデータを効果的に格納するための強力なツールである。この標準のより効果的なバージョンで、いわゆるMPEG−2は、デジタルビデオ伝送応用の分野におけるビットレートの必要性に支援されて開発された。その標準は、一般に、約15Mbpsまでに、完全にインターレースされ、TV解像度の画像を圧縮するデジタルTVシステムに対して受け入れられた。
【0003】
MPEG−2標準の特別なバージョンは、未来世代のHDVTシステムにおいて使用されることが期待されている。
このMPEG標準は、以前の国際標準、例えばCCITT動作ベクトル決定アルゴリズム(motion vectors determination algorithm)H.261および静止画像の符号化に対するISOJPEG委員会のISO10918標準によって規定された重要なアルゴリズムと基準とを組み込みおよび利用している。実行技術の異なる徹底した説明、および、MPEG標準による圧縮されたビデオ画像に関するデータの関係する符号化と復号化システムと同様に、MPEG標準(1および2)は、この主題に関する多くの論文および報告に記載されており、そのうちには次のようなものがある。
【0004】
−国際ISO/IECDIS13818−2“情報技術−動画および関連した音声情報の一般的な符号化”
−Leonardo Chiariglioneによる“MPEG符号化および移送システム”、デジタルテレビジョンの放送−処理
−Didier J. Le Gall による“MPEGビデオ圧縮アルゴリズム”、信号処理画像通信、Elsevier Science Publishers B.V., Vol. 4, No. 2,April 1992
−要約雑誌No.1995/012、電子工学部門、Institute of Electrica l Engineers −ロンドン、“MPEG−2−何がそうで何がそうでないのか”についての討論会
−“MPEG圧縮アルゴリズムの外観”SGS-THOMSON MICROELECTRONICS (An 5 29/0294)によって公表された技術ノート
−データシート“STi3500A”SGS-THOMSON MICROELECTRONICSのデータシート
−“STi3520A−MPEG音響/MPEG−2ビデオ集積復号器のための先行情報”(1995年6月)
【0005】
ここでは図1として再現されている SGS-THOMSON MICROELECTRONICS によって市場で売られているMPEG音響/MPEG−2ビデオ集積復号器に関連する刊行物No.STi3520Aについての図3において示されているもののようなMPEG−2復号器の典型的なアーキテクチャによると、十分に規定されたビデオメモリの必要性、すなわち、PALおよびNTSC応用に対して、16MビットPALビデオ信号を支持できる外部DRAMメモリの容量である必要性が存在し、次のように推定される。
【0006】
MPEG−2ビデオ復号器およびMPEG音響復号器の両方が共通のインタフェースを介して、16Mビットの唯一の外部DRAMメモリにアクセスするということを考慮に入れると、音響復号器は、MPEG−2ビデオ復号器の必要性を満足させるために利用できる残りの16,646,144ビットをそのままにして、131,072ビットのみに対するアクセスを要求してもよい。ビデオメモリは次のように構成できる。
【0007】
−“ビットバッファ”:すなわち、伸張の理想的でない工程が実際には行われることを考慮して、MPEG−2標準が1.75Mビットプラス余分量、例えば983,040ビットに固定するという圧縮されたデータのためのバッファである。
−4:2:0のフォーマットにおける伸張された内部−画像(decompressed I ntra-picture)あるいは短くI−画像のための第1の“I−フレームバッファ”
−4:2:0のフォーマットにおける伸張された予測−画像あるいは短くP−画像のための第2の“P−フレームバッファ”
−4:2:0フォーマットにおける伸張された双方向予測画像あるいは短くB−画像のための第3の“B−フレームバッファ”であって、低減された、すなわちPALあるいはNTSCシステムの場合においてそれぞれフレームの0.7407あるいは0.6111であるメモリ量を必要とする結局は理想化された第3のB−フレームバッファ
【0008】
このMPEG−2標準技術により、I,PあるいはB−画像を扱うこととは無関係に、ビデオ標準の型に依存して、4:2:0における各“フレームバッファ”は、次のテーブルによって与えられるメモリ量を占有してもよい。
【0009】
【表1】
【0010】
したがって、最も重い負荷の場合を表すPALシステムの場合、参照例となる必要な実際の全メモリ量は、下記のように与えられる。
1,835,008 + 835,584 + 4,976,640 + 4,976,640+ (4,976,640 * 0.7407)
= 16,310,070 ビット
この計算は、B−画像フレームバッファの0.7407最適化を考慮に入れている。
【0011】
さらなる最適化は、外部RAMへの格納ステップに頼ることなく、ディスプレイユニットの機能的に上流に配置された専用回路ブロックにより集積復号器装置の中で等価の機能を内部的に実行することによって、B−画像の伸張を実行することにあってもよい。
【0012】
このさらなる最適化を考慮して、ビデオRAMの必要性は以下のように低減する。
1,835,008 + 835,584 + 4,976,640 + 4,976,640 = 12,623,872ビット
この場合、B−バッファは、MPEG−2圧縮データストリーム、画像それ自身のビデオ表示工程によって要求される画像(フィールドあるいはフレーム)の各行のそれにおいて定義された各8*8ブロックの走査を変換するために必要とされる復号器の“コア(core)”を含む同じチップ内で実現される。そのような変換マクロセル(macrocell)は、“ラスタ走査へのマクロブロック変換器(MACROBLOCK TO RASTER SCAN CONVERTER)”と一般に呼ばれる。
【0013】
【発明が解決しようとする課題】
上述のようにMPEG−2復号器のスタティックメモリの最適化を制限する現在の事情に鑑み、本発明はメモリの著しい低減を可能にさせる実施の方法および関連するシステムを提供することを目的とする。
【0014】
【課題を解決するための手段】
本発明の概念は、上述の計算からもたらされ復号工程によって要求されるメモリ量は、MPEG伸張に引き続き、それらが外部ビデオメモリに格納される前、および、それらが外部メモリによって読み取られる時のそれらの伸張の前において、予想に対する参照(標準MPEG−1およびMPEG−2の場合に対するI−画像およびP−画像)として用いられる画像の再圧縮を可能にさせるとき、著しく低減され得るという認識に基づいている。
【0015】
基本的に本発明の方法は、MPEG−2伸張の後で、かつ、ディスプレイユニットに画像を送る前に、B−画像の伸張が、B−画像の“マクロブロック走査からラスタ走査への”変換バッファを採用することにより、格納段階に頼らすして実行されると仮定する一方、少なくともI−画像およびP−画像を再圧縮することにある。そのようなIおよびP画像再圧縮段階は、適応差分パルス符号変調(an adaptive differential pulse code modulation:ADPCM)技術に従って実行される。
【0016】
本発明の一つの見方によれば、IおよびP画像のADPCM再圧縮は、次の必要条件に応答している。
【0017】
効果: それらの伸張を実行するために用いられそれに追加された圧縮画像によって占有されているメモリ量は、前記ADPCM再圧縮を必要としない復号器に対して用いられる合計メモリよりも低い。
【0018】
効率: (1)画像の再圧縮は、メモリの一部分を使用しないことから得られる節約に比較されるならば、装置の全コストがひどく増加しないような簡単な方法で実行される。
【0019】
(2)再構築された画像の品質は、無視できる品質低下を受け、あるいは、コスト/品質の観点から如何なる場合にも受け入れ可能である。
【0020】
(3)適宜にかつ好ましくも、外部メモリの機能を制御し、動き補償工程のための予測器をこの外部メモリから引き出すように要求される主クロックサイクルは、好適に低減される。これを得るためおよび好ましい実施例に従って、圧縮された情報の一部は、下で詳しく説明されるように、専用バッファの中の復号器の“コア”の素子の中に格納される。
【0021】
実際、ADPCM技術による再圧縮は、例えば、ルミナンスブロックの(例えば、それぞれ8*8画素の)4ビット圧縮およびクロミナンスブロックの(例えば、それぞれ8*8画素の)3ビット圧縮に従って、データを符号化することにより、MPEG−2伸張ブロック(I−画像に対し、動きの後では、P−画像に対して)の離散余弦逆変換処理回路によって出力されるように、クロミナンスおよびルミナンスブロックに関するデータに対して実行される。
【0022】
場合によっては、ルミナンスおよび/またはクロミナンスUとVのn*m画素の各ブロックは、さらに(n/2)*m画素の2つのサブブロックに予防的に細分割され、このようなデータサブブロックに対して、ADPCM圧縮の行程/符号化/メモリへの書き込み/メモリからの読み出し/復号化/ADPCM伸張が実行されてもよい。
【0023】
本発明のADPCM圧縮方法は、下に説明されるように、上述の必要性、すなわち、異なるレベルの圧縮に対して符号化および複合化の回路が最適化されるべき場合には、符号化および複合化の回路の修正を極度に単純な方法で可能にさせるように、それにある程度の圧縮における柔軟性が加えられべきである必要性を満たす。
【0024】
本文脈において、短縮語“pel”は、以降“pixel:画素”の代わりに用いられる。
【0025】
本発明の一つの観点によると、関連する記憶バッファに書き込まれ、そこから読み出されるビデオ画像に関する制御バスとビデオデータ処理バスとをインタフェースするビデオ復号器MPEG−2であって、
外部DRAMメモリのビデオビットのためのそれぞれの第1のバッファの中における圧縮データの獲得および書き込みのための“先入れ先出し”型の第1のバッファと、制御回路によって同期させられる画像初期コードの検出回路と、オンスクリーンディスプレイ(OSD)データを格納するための双方向バッファと、圧縮入力データストリームの可変長復号ブロックと、前記可変長復号ブロックによって復号化されたデータの伸張ブロックであり、“ランレングス”型の復号段、逆量子化機能をはたす回路、逆離散余弦変換(I_DCT)の処理回路、および、予測器の値発生ネットワークを有する伸張ブロックとを一般的に有していてもよいビデオ復号器MPEG−2において、
−適応差分パルス符号変調(ADPCM)技術により、伸張されたIおよびP画像を符号化および再圧縮し、動き補償の後に、外部メモリによってそれぞれのバッファの中に書き込まれるI_DCTブロック出力データを符号化するための回路と、
−外部メモリのそれぞれのバッファから読み出され再圧縮されたIおよびP画像に関連してI_DCTブロックからの出力(ADPCM)データを伸張および復号化するための回路であり、伸張されたB−画像に関連するI_DCTブロックの出力データと一緒に、外部ビデオディスプレイユニットに送られるべきIおよびP画像に関連してビデオデータストリームを発生することができる回路とをさらに有することを特徴とするビデオ復号器MPEG−2。
【0026】
本発明の一実施例によれば、符号化および再圧縮を行う回路は、
−MPEG伸張ブロックによって生成された伸張I_DCTデータの獲得バッファと、
−前記バッファのエネルギ内容を評価でき、外部メモリのそれぞれのバッファの中に格納されるべきI_DCTブロックによって出力された異なるデータブロックの画素値のデジタル変動値を発生できる回路と、
−前記回路によって発生させられた実際あるいは現在のデジタル変動値によって首尾一貫して条件付けられた多重レベルの量子化器と、
−MPEG伸張ブロックによって生成されたI_DCTデータストリームを第1の入力を介して受け取ることができ、予測器の値を第2の入力を介して受け取ることができ、前記量子化器の入力に送られるべき出力データストリームを生成することができる微分器と、
−量子化器の出力ストリームを入力として受け取ることができる、それぞれのバッファの中の外部メモリの再圧縮されたデータの符号化および書き込み回路と、
−I_DCT入力データストリームを第1の入力を介して受け取ることができ、ネットワークによって発生させられた予測器の値を第2の入力を介して受け取ることができるマルチプレクサを有する前記予測器の値の発生のためのネットワークと、
−量子化器の出力ストリームを第1の入力を介して受け取ることができ、前記マルチプレクサによって出力されたデータを第2の入力を介して受け取ることができ、合計されたデータの出力ストリームを生成することができる加算器と、
−前記加算器によって生成された前記合計されたデータストリームを入力として受け取ることができるとともに、前記微分器と前記マルチプレクサの第2の入力に供給される前記予測器の値を発生する回路が直列に後続する制限回路とを有していてもよい。
【0027】
前記伸張および復号化回路は、それぞれの外部メモリバッファからくる圧縮され符号化されたデータストリームを第1の入力を介して受け取ることができ、同じ外部メモリバッファの中に予め格納された関連する変動値を第2の入力を介して受け取ることができる復号化回路と、前記復号化回路によって出力された復号化されたデータストリームを第1の入力を介して受け取ることができ、前記かさんきの出力に既に発生されている、伸張された画素値に関連する予測器の値を第2の入力を介して受け取ることができる加算器の合計段からなり、画素値の制限器が後続する伸張ネットワークとによって構成され得る。
【0028】
もちろん、ルミナンスおよびクロミナンスのデータブロックの画素の大きさ、MPEG−2圧縮技術によるI_DCTデータのフォーマット、ADPCM技術に従って既に伸張されたIおよびP画像の再圧縮データのフォーマット、同様に、推定されたデジタル変動値のフォーマットと関連する量子化器のレベル数は、現記載における例によって指示されたものと異なってもよいし、ビデオの復号器あるいは受信器の設計選択に基づいて通常規定されるであろう。
【0029】
【発明の実施の形態】
本発明の種々の観点と関連する有利な点とが重要な実施例についての後続の説明を通し、また、付属の図面を参照することによって、より以上に明かとなるであろう。
図で示されたサンプルの例は、PALおよびNTSCの応用において使用可能であり、16MビットのPALを支持することができ、そのような要求から開始して必要なビデオRAMの大きさを著しく低減できるMPEG−2ビデオ復号器に関する。
【0030】
図1において示されるアーキテクチャにより、MPEG−2ビデオ復号器(集積されたシステムの“ビデオコア”)は、同じ外部DRAMに組み込まれていてもよい関係する音響バッファにアクセスするMPEG音響復号器コア(不図示)によっても共同使用され得る、インターフェース用のメモリデータバスを通して外部DRAMメモリにアクセスする。メモリデータバスとインターフェースする以外に、ビデオ復号器コアは、それを介してシステムの制御マイクロプロセッサがインタフェースブロック、マイクロコントローラインターフェース(MICROCONTROLLER INTERFACE)に介入するところの制御バスともインタフェースする。
【0031】
ビデオ復号器は、同期管理、DSYNC および VSYNCのためのコントローラ(COTROLLER)を含んでいてもよい。
従来のMPEG−2のアーキテクチャによると、復号器は、例えば、外部DRAMの第1のバッファ、ビットバッファの中の圧縮データの獲得および書き込みのために1Kビットを持った“先入れ先出し”バッファで圧縮データFIFOと、開始コード検出器と、オンスクリーンディスプレイ(OSD)のためのメモリ双方向バッファでメモリI/Oユニットと、圧縮入力データストリーム(ビットストリーム)のための第1の可変長復号器(VLD)ブロックとを有している。
【0032】
MPEG−2DCTデータ伸張は、関連する伸張ブロック(パイプライン−RDL、I_QUANT、I_DCT、予測器構築)によって実行される。パイプラインは、“ランレングス”復号化段(a “run-length” decoding stage:RDL)と、逆量子化回路(an inverse quantization circuit:I_QUANT)と、逆離散余弦変換プロセッサ(an inverse discrete cosine transform processor: I_DCT)と、予測器の値の発生あるいは構築(予測器構築: PREDICTOR CONSTRUCTION)のためのネットワークとを典型的に含んでいる。
【0033】
公知のアーキテクチャにおいて、I,PおよびB画像に関連して、逆離散余弦変換と動き補償とを計算するI_DCT処理回路によって出力されたI_DCTデータのブロックは、復号化されディスプレイユニットに送られる前に、コード化された形、すなわち、ある数のビットのワードの形で、外部メモリのそれぞれのバッファに書き込まれた。対照的に、本発明によると、IおよびP画像に関連する伸張されたI_DCTデータは、コード化され外部メモリの関連するバッファに書き込まれる前に、ADPCM技術に従って再圧縮される。このことは、専用ブロック、ADPCM符号器によって影響される。その後、再圧縮されたデータは、ディスプレイユニットに対して、伸張されたB−画像と一緒に、送られるために、ADPCM復号器ブロックによって復号化され、伸張される。
【0034】
任意ではあるが、内部補助メモリ(ADPCMメモリ)は、下に記述されるように、外部メモリの管理を最適化するために実現されてもよい。
そこで、B−画像の“直接”の再構築の好ましい場合において、このことは次のように実現される。
【0035】
−ADPCM圧縮IおよびP予測器は、現在“パイプライン”によってMPEG−2伸張されているB−画像の動き補償を実行するために、外部メモリと
伸張されたADPCMとによって読み取られる。
【0036】
そのように再構築されたI_DCTデータのマクロブロック(macroblock)は、図1において示されているダイアグラムの中の表示ユニットに先行する“ラスタ走査へのマクロブロック(MACROBLOCK TO RASTER SCAN)”変換回路に送られ、次にそれらは表示される。
この手順は、B−画像を格納するように予定された外部メモリの中の如何なるバッファをも必要としない、なぜならば、そのようなバッファは、マクロセル(macrocell)“ラスタ走査へのマクロブロック変換器B−画像(MACROBLOCK TO RASTER SCAN CONVERTER B-picture)”の中に存在するからである。
【0037】
図2は、伸張されたIおよびP画像に関連しI_DCTブロック(簡略さのためにI_DCTデータとしてしばしば示される)によって出力されたデータから図1のダイヤグラムの再圧縮ブロックの詳細を示している。
図2を参照すると、ADPCM符号化ブロックは、I_DCT入力データ獲得のための64*8ビットバッファ(ブロックバッファ:BLOCK BUFFER)を有する。専用回路(変動推定器: VARIANCE ESTIMATOR)は、I_DCT入力データの各サブブロックの平均画素値と、I_DCTデータサブブロックの各画素間の差分の絶対値の合計の平均とを計算する。そのようなパラメータで入力データ(画素)ブロックの変動を評価することは可能である。
【0038】
図3および4は、好ましい実施例による変動予測ブロックの詳細な機能案を示している。変動予測ブロックの図3および4の詳細な案は、当業者によって直ちに理解されるように標準の術語を使用している。変動推定の回路ブロックを構成する各段のさらなる定義および記述は、本発明のアーキテクチャの全体の理解に対して必要とは考えられない。
【0039】
ROMブロックは、図示の例において指示されているように、それぞれ8カラム(8ビット)からなる56行によって構成されていてもよい。この読み出し専用プログラマブルメモリ(不揮発性)には、ルミナンスおよびクロミナンスの量子化の係数が格納されている。実際に、例えば、ルミナンスは、各ワードが変動推定器によって選択されるラインの16個の可能性のある係数の中から一つを選択することを意味して、4ビットでコード化される。これらの係数は、ゼロに関して対称であり、したがって、行は絶対値係数(16というより8)を含む。
【0040】
プログラマブルROMの使用に対する代わりとして、それは、利用されるシリコンの面積という意味で高価でない、すなわち、入力としてある変動値を受け取り、要求された係数の値を出力するプログラマブルロジックアレイ(PLA)の使用。そのPLAは、複数の係数の中の変動のブール変換を実行するようなアンド、オア、ノットゲートに配列されてもよい。
【0041】
微分器の関連入力に印加されるべき予測器の値を発生するDPCM圧縮回路網は、2入力マルチプレクサから作られている。そのマルチプレクサの第1の入力には、I_DCT入力データの各サブブロックの第1の画素(A1)の値が印加され、この場合、前記回路網で発生された予測器の値は、他の入力に印加される。加算器(+)は、マルチプレクサ(MUX)の出力値に加えられるべき量子化回路(quantizer circuit:量子化器,QUANTIZER)の出力を第1の入力を通して受け取る。この合計の結果は、その出力ストリームが予測器の値(COEFF)発生回路の入力に供給されるところの制限回路(a limiter circuit: LIM.0-255)の入力に印加される。
【0042】
制限段(LIM. 0-255)は、適切な結合性の論理回路によって構成されてもよい。そのような段の使用は、画素値の8ビット符号化の場合において、255に固定されてもよい与えられた制限を越える偶発的な最大画素値を圧縮するのに必要である。実際に、圧縮および伸張の局面の期間において、画素値は、255の制限を時折越えることがあり、そのような場合においては、制限回路は、画素の最大値を設定された制限内に戻す。I_DCTクロミナンスデータのための3ビット書き込み符号化(CODER:符号器)回路と、ルミナンスI_DCTデータのための4ビット符号化回路とは、量子化回路の出力ストリームを受け取り、そのように再圧縮されたデータを外部メモリのそれぞれのバッファに書き込む。
【0043】
符号化とADPCM再圧縮ブロックの機能をよりよく図示する目的で、種々なブロック機能の説明に詳細な記載が続く。
【0044】
ADPCM再圧縮
IをM行とN列の画素マトリクスによって表されるデジタル画像とし、I(x,y)をy行とx列によって定義され、数Bのビット(2進数)によって整数として定義された画素としよう。
画像Iは、R×C(R行およびC欄)寸法を持つ長方形ブロックに再分割されるとしよう。圧縮に対する最大効率は、もしも、RとCとがそれぞれMとNとの整数割り算器の間で選択されるならば、獲得される。
【0045】
前記アルゴリズムは、ブロック自身の表現に必要なビット数の低減である各ブロックの圧縮を実行し、ブロック自身から抽出されたデータを適宜に利用するとともに、この目的は、圧縮されたデータのストリームの中のブロックおよびブロック自身の伸張に対するアクセスを簡単にすることである。
ADPCM圧縮機構は、画像の隣接する画素の間に存在する相関関係を利用し、画像自身の2進記述のための必要ビット数を低減する。実際、画素の“予測”と一般に呼ばれるものを生成するために、それに隣接する画素の値のみを適切に結合すること(したがって、画素自身の値を使用することなしに)によって画素の値を概算することは可能である。
【0046】
したがって、予測機構を規定し、各画素というよりは予測誤差のみを適切にコード化することによって、画像のデジタル表現のための2進数の大きさを低減することは可能である。画素の値の予測が正確になればなるほど、予測誤差のエントロピーは、より低くなり、すなわち、後者をコード化するのに必要なビット数はより少なくなる。
【0047】
例えば、図8において示された走査技術に従う各ブロックの画素の走査のための装置を考慮すると、各画素に対して最初のものを除いて、画素自身の予測器として用いられてもよいそれに先行する他のものがある。P(i,j),i=1,・・・,Cは、いずれかのブロックの行iと列jとによって定義される画素であるとし、P’(i,j)は、P(i,j)の予測器として用いられた画素であるととし、図8の技術を参照することによって、装置は次のように定義される。
【0048】
*P(1,1)=走査の第1の画素
*P’(i,1)=P(i−1,1);i=2,…,R
*P’(i,j)=P(i,j−1);i=1,…,R j=2,…,C
【0049】
E(i,j)=P(i,j)−P’(i,j)は、予測誤差であるとしよう。全部の予測誤差は、一連の独立の偶発的な変数に対して充分に概算され、同じように分布され得るとともに、ラプラシアン確立濃度(Laplacian probability density)をもっている統計表現を有しているということは公知の[bib:J&N]である。予測誤差よりも前にこの知識を利用することによって、過度の歪みを導入することなしに、小グループの値Q(k),k=1,・・;LおよびL<2∧Bの上にそれをマッピングすることによって予測誤差を圧縮することが可能である。このマッピング動作は、一般に“量子化(quantization)”と名付けられている。各L値Q(k)は、Bより小さいCビットの数(例えば、L=<2∧Bのときには、常に真である)でコード化され得ると仮定して、予測工程を受けさせられた各画素の2進コード化は、係数C/Bによって圧縮される。
【0050】
ADPCM圧縮方法は、次に述べる操作を介して画像がその中に伸張される各ブロックに適用される。
【0051】
−デジタルストリームの中において適切な量子化器を選択しコード化すること
−そのブロックの第1の画素のコード化
−そのブロックの全ての残りの画素の相関関係を解き(decorrelating)、量子化し、コード化すること。
【0052】
これらの操作を実行する種々のステップおよび回路アーキテクチャが以下に個々に記載される。
【0053】
1)量子化器の選択とコード化
もしも、量子化値の設定が量子化されるべき信号のエネルギを考慮に入れることによって計算されるならば、量子化の工程によって導入された歪みは低減され得るということは充分に文書で証明されている。デジタル画像の異なる部分は、非常に異なるエネルギ値を示してもよいということは、さらに公知である。本方法は、次のようにブロック自身のエネルギの関数として、各ブロックに関連する全ての値Q(k)を規定する。
【0054】
*単位エネルギの場合に利用される全ての値Q1(k)k=1,…,Lは、符号器に対しても復号器に対しても知られている。
*そのブロックのUエネルギは、デジタルストリームの中で推定されコード化される。
*そのブロックによって効果的に使用される値Q(k)は、次のように計算される。
【0055】
Q(k)=Q1(k)*U; k=1,…,L
【0056】
ブロックエネルギの推定は、予測誤差のラプラシアン統計を仮定することによって、比較的に簡単な方法で行われてもよい。実際に、この場合において、エネルギは、ブロック予測誤差の絶対値の2つの平均の平方根によって乗算することにより計算できる。そのエネルギの符号化は、一定の量子化を基本的に実現するために、最大値に応じて大きさを決め、結果をビットのK数で表すことにより簡単に実行される。予測誤差の量子化器の選択において、量子化誤差のピーク値を考慮に入れることはさらに必要である。なぜならば、大きな予測誤差の場合において、以下に示される技術によると、量子化器のピーク回復値(peak restitution value)が小さすぎるということが発生するかもしれないからである。このように、変動の計算と同時に、その中で、飛び越し走査における1フィールドのラインの間のより大きな距離の故に、大きな予測誤差が起きそうである間に、第1の列の誤差に対する予測のピーク値も計算されるとともに、G連続水平ライン(すなわち、G=2)の各グループに対しても行われる。予測誤差の過度のピークの発生と、その結果としての、一対の行の場合の2*Uエネルギおよび第1の列の場合の4*Uに対応する量子化器の選択とを信号で伝えるために、画素のこれらのグループのそれぞれのコード化に1ビットが加えられる。
【0057】
図3および4において詳細に図示されたような回路アーキテクチャは、この変動推定を計算するために用いられてもよい。
【0058】
2)ブロックの第1の画素のコード化
図2の技術を参照すると、前にP(1,1)として指示されたブロックの第1の画素は、如何なる種類の予測をも受けずに、元々の解像度に従ってBビットによってコード化される。
【0059】
3)そのブロックの全ての他の画素の相関関係の解放、量子化、コード化
図2の技術を参照すると、ブロックの各画素に対して、画素P’は、前に規定されたように、予測器として適用されるであろう。前に詳細が記載された図8の走査順序に従って、この予測器は、既に量子化および再構築されており、したがって、元の画像からは取り込まれないということに留意すべきである。このことは、公知のADPCM技術とつじつまが合って、画像の品質のよりよい制御を可能にする。
【0060】
図2は、符号器の全体の形を与える以外に、個々の画素の予測および量子化ループの詳細を与える回路を示している。予測誤差の計算は、モジュラスと記号とによって実行される。このことは、量子化が作動するレベル数を半分にすることによって、量子化を簡単にすることを可能にしている。実際に、予測誤差の統計がゼロの周りで対称的であるということが知られている。
【0061】
図5および図6は、量子化器の回路実施例を図示している。図5の技術は、回復値T0,・・・,T7の算術的な平均を表す7つの閾値S0,S1,S2,S3,S4,S5,S6を発生するために用いられるアーキテクチャを示している。特に、その平均は、隣接した回復値(すなわち、S2=T2+T3)の間で計算され、この結果は、全精度を維持するために2によって割られない。もちろん、これは、8ビットというよりは、事実的に9ビット(すなわち、1記号ビットが加えられている)で表されている図6の技術の“err”値に2による乗算を行うことによって補償される。
【0062】
図6は、実際の量子化回路を示している。
図5において計算された閾値は、絶対値の一連の8つの間隔を定義し、したがって、もしも、“err”がS1とS2とによって規定される合間に発生するならば、“err”は、PLAによってあるいはROMを読み取ることにより、前に生成された値T2によって置き換えられる。
【0063】
したがって、S1およびS2を供給された2つの比較器は、結合ロジックの助けを借りて、マルチプレクサMUXを駆動し、“delta”と名前が付けられた出力にT2を移送する。その代わり、“err”の記号ビットは、変更を受けずに出力に移送され、どんな場合にも、“delta”の記号となる。
図2のビデオRAMにおける再圧縮と書き込みとのADPCM符号器の完全な技術を再び参照すると、16ビットワードの中に組織されるように再圧縮されたデータは、外部DRAMの中に格納される。このように、例えば、8*8ブロックのルミナンスのコード化を表すNビットは、例えば、外部のDRAMメモリに向けて、図1のメモリコントローラの使用によって16ビットワードの中にそろえられ送り出される。明らかに、Nは、16ビットの倍数ではなく、したがって、16ビットワードは、有用な情報を含んでおらず、したがって、素子の上に実現可能である小さな寸法(外部のDRAMのそれと比較して)のメモリの中にそのようなワードを格納することは好都合である。特に有利な実現の形は、復号器の素子の上に集積可能な選択的な補助メモリのようなものを表すいわゆるADPCMメモリブロックの存在により、図1の技術の中に指示されている。
【0064】
図1の技術のADPCM復号器ブロックのアーキテクチャは、図7において詳細に示されている。
メモリから読み出されたものを上で参照されたNビットと仮定しよう。それらから計算されたような変動は、ROM(あるいはPLA)の中に格納された値を選択する、すなわち、格納された値の一つに狙いをつける。したがって、マルチプレクサMUXに供給される値T0,T1,T2,T3,T4,T5,T6,T7が生成される。4ビットのサブワード(ルミナンス伸張の場合において)は、Nビットから引き出され、それらは、T値の選択においてMUXを駆動する。
【0065】
最後に、現在のT値は、伸張された画素になる以外に、MUXによって選択される次の値に加えられるべき値にもなる。
この工程は、圧縮によって影響を受けない8*8ブロックの第1の画素によって開始される。
【0066】
画素当たりNビットでの圧縮の例
図2乃至図7の例を参照して、偶然な動き補償の後の画素のR*Cブロックを考えてみよう。
【0067】
そのブロックの圧縮のために利用されるビットの総数は、
K+8+(R*C−1)*N+1+R/G
この場合、
− K=エネルギをコード化するために採用されたビット
− 8=走査された第1の画素のために用いられたビット
− N=量子化のために用いられたビット
− (R*C−1)*N=残りの画素のDPCMコード化のために採用されたビット
− 1=第1の列において変更された量子化器を示すビット
− R/G=行のR/Gグループにおける変更された量子化器を示すためのビット
元の表現によって要求される8*8*8=512に比較して、
K=6,R=8,C=8,N=4,G=2の場合に対して、我々は、下記の合計を獲得する:
6+8+(8*8−1)*4+1+8/2=271ビット/ブロック
K=6,R=8,C=8,N=3,G=2の場合において、我々は、下記の合計を獲得する:
6+8+(8*8−1)*3+1+8/2=208ビット/ブロック
【0068】
MPEGマクロブロックの圧縮の例
各マクロブロックは、ルミナンスの4つの8*8ブロックと、クロミナンスの2つの8*8ブロックからできあがっており、各マクロブロックは、下記に等しいビット数でコード化されている。
【0069】
各画像においては、1620マクロブロックがある:
3,072*1,620=4976640ビット
【0070】
クロミナンス信号は、最も低い空間周波数に制限された帯域を示すより低い内容をもっているということは公知である。このことは、クロミナンスそれ自身のより大きな予測可能性、すなわち、ADPCM圧縮のより大きな効率を意味する。ルミナンスに対して4ビット/画素の圧縮と、クロミナンスに対して3ビット/画素とを考慮することにより、メモリ必要量は以下のようになる。
【0071】
したがって、各フレームが占有するのは以下のようである:
1,500*1,620=2,430,000
そのように獲得されたマクロブロック圧縮係数は、2.408に等しく、したがって、各マクロブロックの50%圧縮を達成するのを可能にしている。
【0072】
MPEG復号器に対する適用の例
上述の関係を考慮に入れると、MPEG伸張されたIおよびP画像の50%の再圧縮を想定することによって、ビデオメモリレジスタの8Mビットまでの低減に対する目標を達成することは可能である。
この結果は、MPEG伸張の後で外部メモリに格納される前に、IおよびP画像を再圧縮することによって達成される。したがって、それらは、図1に示されているように、それらを外部メモリから読み出すときに伸張されるであろう。
【0073】
圧縮は、適応型のDPCM技術に従って、I_DCTと動き補償パイプラインとから出力された8*8ブロックに適用可能である。特に、考慮された例において、クロミナンスの8*8ブロックに対しては3ビット圧縮が選択されるが、ルミナンスの8*8ブロックに対しては4ビット圧縮が選択される。
このように、メモリ必要量は次のようになる。
【0074】
残りの672,256ビット(8/MビットDRAM容量に対して)は、音響バッファを収容するため、および、表示ユニットシステム(OSD)の必要性のために利用可能である。
【0075】
本発明の好ましい実施例による外部メモリの読み取られた帯域の低減
上の例において説明されたように、ルミナンスの圧縮された8*8ブロックのコード化のために必要なビット数は、271ビットである。本発明の好ましい実施例に従って、図1の技術に示されているメモリコントローラの現存しているアーキテクチャをできるかぎり少なく修正することと、これらのシステムの機能が256ビットブロックの読み取りおよび書き込みに対して現在最適化されているということを考慮に入れることとの目的で、復号器素子の上に集積された専用ローカルメモリの中の各ブロックに対して、271−256=15ビットを格納することは、確かに有利である。
【0076】
これは、ADPCMメモリと呼ばれ、図1の技術の中に示されている。そのような補助的なADPCMメモリは、厳格には必要でないが、それによってもたらされる、したがって、図1の全体の技術の中に含まれた追加の有利な点の故に、非常に好ましい選択であることを示しているということは強調されるべき事実である。
【0077】
単一のフレームに対するこの補助的なADPCMメモリの大きさは、したがって、次のようになる。
【0078】
1,620*4*15=フレーム当たり97,200ビット
この量は、PAL画像においては、1,620マクロブロックが存在し、それらのそれぞれは、4つの8*8ブロックを含み、それらのそれぞれは、上で定義されたように15ビットによって特徴づけられているということを考慮に入れている。この計算結果は、ADPCM技術に従ってIおよびP画像が再圧縮されるので、2倍にされる。この結果、ADPCMメモリの容量は、存在するところにおいて、194,400ビットであるべきである。
【0079】
公知のシステムの場合に比較して予測器の読み取りに対するサイクル数を低減することが、特定の重要な場合に対して、如何に可能であるかを示している例が下に記載される。
【0080】
ビデオメモリからの予測器の読み取り
MPEG標準に従って動き補償工程を実行するために、最大で16*16画素によって構成される予測器を外部メモリから読み取ることが必要である。外部ビデオメモリのコントローラによって追従される通常の実行に従って、その工程は、外部メモリがその中で典型的に配置されている特定のページフォーマットに従って、画素の読み取りと、幾つかの周りのものの読み取りとに基づいている。これは、実際に要求されているものを超過してデータを読み取ることを意味する厳しい条件である。
【0081】
例えば、予測器を読み取るために、408の8ビットコードの画素(圧縮された)が、63*3基本クロックサイクルを利用するルミナンス成分のために読み取られる。この状況は、画素が灰色の陰で強調されている図9において示されている。
素子の中のADPCM補助メモリの存在をさらに考慮し、そのなかでそのメモリからADPCM圧縮データが読み取られるこの発明の好ましい実施例の場合においては、予測領域を含んでいて8*8ブロックに属する576の画素は、外部DRAMメモリから読み取られる(図10において示されるように)。この場合、48*3の基本クロックサイクルが必要である。これらのブロックのそれぞれを完成するために、残りの15ビットは、図1の内部ADPCMメモリから読み取られる。
【0082】
この好ましい実施例の他に、本発明によって読み取られる画素は、圧縮がない場合の408に比べて576であるという事実にも拘わらず、圧縮自身のおかげで、メモリから読み取られる合計のビットは低減し、その読み取りに必要なクロックサイクルの数も低減するということは、どんな場合にも強調される。
【0083】
選択的な内部ADPCMメモリの容量の定義
ルミナンス
ADPCM技術により圧縮されたルミナンスの8*8ブロックをコード化するのに必要なビットの総数をTとしよう。結果は次のようになるであろう。
【0084】
2n≦T≦2n+1
この場合、nは1と等しいかそれよりも大きい。
【0085】
過剰のビット数は、各ブロックに対して(T−2n)に等しく、結果として、ADPCMメモリは次のものに等しい容量を有する。
【0086】
【0087】
クロミナンス
圧縮されたADPCMクロミナンスデータの8*8ブロックをコード化するのに必要なビットの総数をSとしよう。結果は次のようになるであろう。
【0088】
2m≦S≦2m+1
この場合、mは1と等しいかそれよりも大きく、nと等しいか異なる。
【0089】
過剰のビット数は、各ブロックに対して(S−2m)に等しく、結果として、ADPCMメモリは次のものに等しい容量を有する。
【0090】
結論として、内部メモリは、L+Cに等しいかそれよりも大きい2者の電力に近似された、L+Cによって与えられる容量を有していてもよい。
【図面の簡単な説明】
【図1】本発明の好ましい実施例によるビデオ復号器の“コア”のブロックダイアグラムである。
【図2】ADPCM再圧縮および符号化回路技術を示している。
【図3】図2の技術の変動予測ブロックの詳細な機能技術を示している。
【図4】図2の技術の変動予測ブロックの詳細な機能技術を示している。
【図5】図2において示された技術の量子化ブロック閾値を発生させる回路の機能技術である。
【図6】多重レベル量子化回路の機能技術である。
【図7】ADPCM復号化および伸張回路技術を示している。
【図8】I_DCTデータの8*8ブロックの走査を示している。
【図9】画像再構築の異なる場合を示している。
【図10】画像再構築の異なる場合を示している。
Claims (8)
- MPEG圧縮アルゴリズムのそれぞれI,Pおよび選択的なB−画像の伸張段を有するMPEG−2復号器の必要なビデオメモリを低減するとともに、これらの画像に関連するデータが、前記ビデオメモリの中に組織されたそれぞれのバッファの中に格納されるMPEG−2復号方法において、
前記MPEG−2伸張の後で、前記ビデオメモリバッファの中に関連するデータを格納する前に、前記伸張された画像データを逆離散余弦変換して得られたn*m画素の各ブロックの変動を推定し、多重レベルの適応量子化器を形成するための一組の係数に各ブロックの変動の値を乗算し、適応パルス符号変調技術(ADPCM)に従って、各ブロックの第1の画素をpビット数でコード化し、前記変動の推定値をn−hビット数、すなわちこの場合、hは、ゼロより大きい整数であるn−hビット数でコード化し、さらに、前記第1の画素に続く他の各画素と前記ブロックの全ての画素の平均値との間の差分をp−kビット数、すなわちこの場合、kはゼロより大きい整数であるp−kビット数でコード化することによって、少なくとも前記IおよびP画像を再圧縮し、
そのようにコード化された再圧縮IおよびP画像に関連するデータをビデオメモリの前記それぞれのバッファの中に格納し、
前記再圧縮IおよびPイメージの画素に関連する前記格納されたデータを復号し、適応パルス符号変調技術(ADPCM)に従って前記イメージを伸張し、それらをディスプレイユニットに向けることを有することを特徴とするMPEG−2復号方法。 - n*m画素の各ブロックを(n/2)*m画素の2つのサブブロックに細分割し、前記サブブロックに対して、前記ADPCM再圧縮および伸張を実行することを有することを特徴とする請求項1に記載のMPEG−2復号方法。
- 制御バスとデータバスとを介してビデオデータがビデオ復号器の“コア”の外にあるそれぞれのRAMバッファの中で書き込まれ読み出される制御バスとデータバスとをインタフェースするMPEG−2ビデオ復号器であって、
前記“コア”は、データ獲得と外部DRAMメモリの第1のバッファへの書き込みのための“第1の先入れ先出し”(FIFO)バッファと、制御器によって同期させられた開始コード検出回路(START CODE DETECTOR )と、オンスクリーンディスプレイデータ(OSD )のための双方向バッファ(I/O UNIT)と、圧縮されたデータ入力ストリーム(BIT STREAM)の可変長復号器(VLD )と、“ランレングス”復号器、逆量子化回路、逆離散余弦変換プロセッサ、“予測値”発生回路、ディスプレイユニットの上流の現在のB−画像のための“ラスタ走査へのマクロブロック走査”変換回路を有し、可変長復号器によって復号化されたデータのMPEG伸張ブロック(パイプライン−RLD、I_QUANT、I_DCT、予測器構造)とを有する復号器において、
伸張されたIおよびP画像を再圧縮でき、前記外部メモリのそれぞれのバッファの中に格納されるべき関連するデータをコード化することができる差分型の適応差分パルス符号変調による符号化および再圧縮回路(ADPCMエンコーダ)と、
IおよびP画像に関連する復号化され伸張されたデータのストリームを発生する前記外部メモリのそれぞれのバッファから読み出された前記再圧縮IおよびP画像に関連する格納データを復号化及び伸張する復号化および伸張回路(ADPCMデコーダ)と、
B−画像の動き補償および“ラスタ走査へのマクロブロック”変換の手段とを有することを特徴とするMPEG−2ビデオ復号器。 - 前記再圧縮および符号化回路(ADPCMエンコーダ)は、前記MPEG伸張ブロックによって生成された伸張I_DCTデータのブロックの獲得のためのバッファ(BLOCK BUFFER)と、
前記バッファ(BLOCK BUFFER)に記憶されている信号のエネルギを推定することができ、前記メモリのそれぞれのバッファの中に格納されるべきI_DCTデータのブロックの画素値の前記変動のデジタル値を発生することができる回路(VARIANCE ESTIMATOR:変動推定器)と、
前記メモリから読み取られた変動の前記デジタル値によって選択された複数の予め確立されたデジタル値(ROM, PLA)を格納するためのプログラマブル手段と、
変動の現在値によって選択されたデジタル値によって条件付けられた多重レベル量子化回路(QUANTIZER )と、
前記I_DCT伸張データブロックのストリームを第1の入力を介して受けることができ、予測値を第2の入力を介して受けることができ、前記多重レベル量子化回路(QUANTIZER )に入力されるデータのストリームを出力することができる差分回路(−)と、
前記量子化回路の出力ストリームを入力として受け取ることができるところの、それぞれのメモリバッファの中のADPCM再圧縮データを書き込む書き込みコード化回路(CODER )と、
伸張されたI_DCTデータストリームを第1の入力を介して受け取り、発生された予測値を第2の入力を介して受け取るマルチプレクサ(MUX )、前記量子化回路の出力を第1の入力を介して受け取り、前記マルチプレクサ(MUX )の出力を第2の入力を介して受け取り、合計されたデータのストリームを出力する加算器(+)、その出力が前記差分回路(−)および前記マルチプレクサ(MUX )の第2の入力に供給され、前記予測値を発生する回路( COEFF )が直列に後続するとともに、前記加算器(+)によって生成された合計されたデータの前記ストリームを入力を介して受け取る制限回路(LIM 0−255)を有する前記予測値の発生回路とを有することを特徴とする請求項3によるMPEG−2ビデオ復号器。 - 前記プログラマブル手段(ROM, PLA)は、読み取り専用メモリ(ROM )によって構成されていることを特徴とする請求項4に記載のMPEG−2ビデオ復号器。
- 前記プログラマブル記憶手段は、プログラマブルロジックアレイ(PLA )によって構成されていることを特徴とする請求項4に記載のMPEG−2ビデオ復号器。
- ADPCM再圧縮データの一部分を復号器の中に記憶するための手段を有することを特徴とする請求項4に記載のMPEG−2ビデオ復号器。
- 前記記憶手段は、194,400ビット容量のRAMメモリによって構成されていることを特徴とする請求項7に記載のMPEG−2ビデオ復号器。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP95830504 | 1995-12-04 | ||
IT96830106-9 | 1996-03-11 | ||
EP96830106A EP0778709B1 (en) | 1995-12-04 | 1996-03-11 | MPEG-2 decoding with a reduced RAM requisite by ADPCM recompression before storing MPEG decompressed data |
IT95830504-7 | 1996-03-11 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH104550A JPH104550A (ja) | 1998-01-06 |
JP3928815B2 true JP3928815B2 (ja) | 2007-06-13 |
Family
ID=26140771
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP32418196A Expired - Fee Related JP3928815B2 (ja) | 1995-12-04 | 1996-12-04 | Mpeg−2復号方法及びmpeg−2ビデオ復号器 |
Country Status (3)
Country | Link |
---|---|
US (1) | US5838597A (ja) |
EP (1) | EP0778709B1 (ja) |
JP (1) | JP3928815B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9258560B2 (en) | 2010-07-08 | 2016-02-09 | Nec Corporation | Video decoding apparatus, video coding apparatus, video decoding method, video coding method, and program |
Families Citing this family (47)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0793389B1 (en) * | 1996-02-27 | 2001-08-16 | STMicroelectronics S.r.l. | Memory reduction in the MPEG-2 main profile main level decoder |
US6256348B1 (en) * | 1996-08-30 | 2001-07-03 | Texas Instruments Incorporated | Reduced memory MPEG video decoder circuits and methods |
US5844608A (en) * | 1996-12-12 | 1998-12-01 | Thomson Consumer Electronics, Inc. | Picture element processor for a memory management system |
US6256347B1 (en) | 1996-12-17 | 2001-07-03 | Thomson Licensing S.A. | Pixel block compression apparatus in an image processing system |
US6594315B1 (en) * | 1996-12-18 | 2003-07-15 | Thomson Licensing S.A. | Formatting of recompressed data in an MPEG decoder |
GB9704027D0 (en) * | 1997-02-26 | 1997-04-16 | Discovision Ass | Memory manager for mpeg decoder |
KR100273110B1 (ko) * | 1997-02-26 | 2000-12-01 | 윤종용 | 엠펙 시스템 디코더 및 이 디코더의 데이터 처리 방법 |
GB2329802B (en) * | 1997-06-28 | 1999-08-18 | United Microelectronics Corp | Adaptive-selection method for memory access priority control in MPEG processor |
US6078620A (en) * | 1997-07-31 | 2000-06-20 | Lucent Technologies, Inc. | Method and apparatus for performing adaptive differential pulse code modulation |
EP0917362A1 (en) | 1997-11-12 | 1999-05-19 | STMicroelectronics S.r.l. | Macroblock variance estimator for MPEG-2 video encoder |
US6272180B1 (en) | 1997-11-21 | 2001-08-07 | Sharp Laboratories Of America, Inc. | Compression and decompression of reference frames in a video decoder |
US6130911A (en) * | 1997-11-21 | 2000-10-10 | Sharp Laboratories Of America, Inc. | Method and apparatus for compressing reference frames in an interframe video codec |
US6198773B1 (en) | 1997-12-18 | 2001-03-06 | Zoran Corporation | Video memory management for MPEG video decode and display system |
KR100301826B1 (ko) * | 1997-12-29 | 2001-10-27 | 구자홍 | 비디오디코더 |
US6823016B1 (en) * | 1998-02-20 | 2004-11-23 | Intel Corporation | Method and system for data management in a video decoder |
GB2339989B (en) * | 1998-05-19 | 2002-11-27 | Lsi Logic Corp | Method and apparatus for decoding video data |
JP3271585B2 (ja) * | 1998-06-19 | 2002-04-02 | 日本電気株式会社 | 動画像復号装置 |
WO2000040033A1 (en) * | 1998-12-23 | 2000-07-06 | Zoran Corporation | Video memory management for mpeg video decode and display system |
EP1758403A3 (en) * | 1998-12-23 | 2007-09-26 | Zoran Corporation | Video memory management for MPEG video decode and display system |
US6516376B1 (en) * | 1999-01-06 | 2003-02-04 | Sarnofff Corporation | Command and control architecture for a video decoder and a host |
DE19907729C2 (de) * | 1999-02-23 | 2001-02-22 | Fraunhofer Ges Forschung | Verfahren und Vorrichtung zum Erzeugen eines Datenstroms aus Codeworten variabler Länge und Verfahren und Vorrichtung zum Lesen eines Datenstroms aus Codeworten variabler Länge |
US6850647B1 (en) | 1999-07-30 | 2005-02-01 | Michael L. Gough | System, method and article of manufacture for decompressing digital camera sensor data |
EP1083752A1 (en) * | 1999-09-08 | 2001-03-14 | STMicroelectronics S.r.l. | Video decoder with reduced memory |
FR2800550B1 (fr) * | 1999-11-03 | 2002-05-31 | St Microelectronics Sa | Circuit de decodage mpeg et d'affichage d'images et d'images incrustees |
KR100359821B1 (ko) * | 2000-01-20 | 2002-11-07 | 엘지전자 주식회사 | 움직임 보상 적응형 영상 압축과 복원방법 및 그 장치와디코더 |
US6593973B1 (en) * | 2000-03-21 | 2003-07-15 | Gateway, Inc. | Method and apparatus for providing information in video transitions |
US20030069985A1 (en) * | 2000-10-02 | 2003-04-10 | Eduardo Perez | Computer readable media for storing video data |
KR100399932B1 (ko) | 2001-05-07 | 2003-09-29 | 주식회사 하이닉스반도체 | 메모리의 양을 감소시키기 위한 비디오 프레임의압축/역압축 하드웨어 시스템 |
CN1315059C (zh) * | 2002-08-20 | 2007-05-09 | 联发科技股份有限公司 | 利用虚拟图像画面重新排序的解码图像序列的方法与装置 |
US20040237110A1 (en) * | 2003-05-21 | 2004-11-25 | Jones Morris E. | Display monitor |
US20070195882A1 (en) * | 2004-03-08 | 2007-08-23 | Koninklijke Philips Electronics N.V. A Corporation | Video decoder with scalable compression and buffer for storing and retrieving reference frame data |
US8316068B2 (en) * | 2004-06-04 | 2012-11-20 | Telefonaktiebolaget Lm Ericsson (Publ) | Memory compression |
US7830800B1 (en) | 2006-01-12 | 2010-11-09 | Zenverge, Inc. | Architecture for combining media processing with networking |
US8102916B1 (en) | 2006-01-12 | 2012-01-24 | Zenverge, Inc. | Dynamically changing media compression format in compressed domain |
US20090052536A1 (en) * | 2006-02-09 | 2009-02-26 | Nec Corporation | Video Decoding Device, Decoded Image Recording Device, Their Method and Program |
US8311114B1 (en) * | 2006-12-06 | 2012-11-13 | Zenverge, Inc. | Streamlined transcoder architecture |
WO2009097284A1 (en) * | 2008-02-01 | 2009-08-06 | Zenverge, Inc. | Intermediate compression of reference frames for transcoding |
US8265168B1 (en) | 2008-02-01 | 2012-09-11 | Zenverge, Inc. | Providing trick mode for video stream transmitted over network |
TWI477142B (zh) * | 2008-06-20 | 2015-03-11 | Mstar Semiconductor Inc | 影像處理電路及相關方法 |
JP2009177833A (ja) * | 2009-03-26 | 2009-08-06 | Zoran Corp | Mpegビデオ復号・表示システムのためのビデオメモリ管理 |
US9531990B1 (en) | 2012-01-21 | 2016-12-27 | Google Inc. | Compound prediction using multiple sources or prediction modes |
US8737824B1 (en) | 2012-03-09 | 2014-05-27 | Google Inc. | Adaptively encoding a media stream with compound prediction |
US9185414B1 (en) | 2012-06-29 | 2015-11-10 | Google Inc. | Video encoding using variance |
US9628790B1 (en) | 2013-01-03 | 2017-04-18 | Google Inc. | Adaptive composite intra prediction for image and video compression |
US9451257B2 (en) | 2013-03-22 | 2016-09-20 | Stmicroelectronics S.R.L. | Method and apparatus for image encoding and/or decoding and related computer program products |
US9374578B1 (en) | 2013-05-23 | 2016-06-21 | Google Inc. | Video coding using combined inter and intra predictors |
US9609343B1 (en) | 2013-12-20 | 2017-03-28 | Google Inc. | Video coding using compound prediction |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5611038A (en) * | 1991-04-17 | 1997-03-11 | Shaw; Venson M. | Audio/video transceiver provided with a device for reconfiguration of incompatibly received or transmitted video and audio information |
US5717394A (en) * | 1993-02-10 | 1998-02-10 | Ricoh Company Ltd. | Method and apparatus for encoding and decoding data |
KR960010196B1 (ko) * | 1993-06-04 | 1996-07-26 | 배순훈 | 인간의 시각특성을 이용한 디씨(dc) 변환계수 양자화기 |
US5508949A (en) * | 1993-12-29 | 1996-04-16 | Hewlett-Packard Company | Fast subband filtering in digital signal coding |
EP0684607B1 (en) * | 1994-05-25 | 2001-03-14 | Victor Company Of Japan, Limited | Variable transfer rate data reproduction apparatus |
TW377935U (en) * | 1994-08-10 | 1999-12-21 | Gen Instrument Corp | Dram mapping for a digital video decompression processor |
JPH08254985A (ja) * | 1995-03-17 | 1996-10-01 | Pioneer Electron Corp | 音楽再生制御装置及び音楽再生装置 |
US5668599A (en) * | 1996-03-19 | 1997-09-16 | International Business Machines Corporation | Memory management for an MPEG2 compliant decoder |
-
1996
- 1996-03-11 EP EP96830106A patent/EP0778709B1/en not_active Expired - Lifetime
- 1996-12-03 US US08/758,805 patent/US5838597A/en not_active Expired - Lifetime
- 1996-12-04 JP JP32418196A patent/JP3928815B2/ja not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9258560B2 (en) | 2010-07-08 | 2016-02-09 | Nec Corporation | Video decoding apparatus, video coding apparatus, video decoding method, video coding method, and program |
Also Published As
Publication number | Publication date |
---|---|
US5838597A (en) | 1998-11-17 |
EP0778709A1 (en) | 1997-06-11 |
JPH104550A (ja) | 1998-01-06 |
EP0778709B1 (en) | 2001-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3928815B2 (ja) | Mpeg−2復号方法及びmpeg−2ビデオ復号器 | |
JP4216341B2 (ja) | イメージ処理システムにおけるピクセルブロック圧縮装置 | |
JP3074211B2 (ja) | 映像信号符号化装置 | |
EP0817498B1 (en) | MPEG-2 decoding with a reduced RAM requisite by ADPCM recompression before storing MPEG-2 decompressed data optionally after a subsampling algorithm | |
JP3888597B2 (ja) | 動き補償符号化装置、及び動き補償符号化復号化方法 | |
JP3149418B2 (ja) | 画像予測復号化方法及び装置 | |
JP2891772B2 (ja) | イメージフレームのランダムスキャンニングを用いるディジタルイメージコーディング法 | |
US6023295A (en) | ADPCM recompression and decompression of a data stream of a video image and differential variance estimator | |
JPH0686262A (ja) | 画像符号化装置 | |
JPH10257502A (ja) | 階層画像符号化方法、階層画像多重化方法、階層画像復号方法及び装置 | |
JPH0851626A (ja) | 動画像信号の変換係数量子化方法及び装置、並びに動画像信号圧縮装置 | |
JP2002199402A (ja) | 離散コサイン変換コード化された信号を符号変換するシステムおよびそれに関連する方法 | |
KR20040106364A (ko) | 복잡성이 감소된 복호화에 적합한 단층 비디오 부호화된비트열들을 제공하는 시스템 및 방법 | |
US6480542B1 (en) | Method for decoding compressed video data with a reduced memory requirement | |
US6795498B1 (en) | Decoding apparatus, decoding method, encoding apparatus, encoding method, image processing system, and image processing method | |
JPH1098723A (ja) | メモリの低減を実現するmpegビデオデコーダ回路および方法 | |
JP3724205B2 (ja) | 復号装置および方法、並びに記録媒体 | |
JP3696490B2 (ja) | デコーダのビデオメモリ条件を減少させる方法及びビデオデコーダ | |
JP2898413B2 (ja) | 所要メモリ容量の低減化を伴う圧縮ビデオデータ流の復号化及び符号化のための方法 | |
JP3173257B2 (ja) | 符号化方法と符号化装置 | |
JP2824222B2 (ja) | 映像データ補償方法及び補償装置 | |
JP3990011B2 (ja) | 復号画像変換回路および復号画像変換装置 | |
KR100277953B1 (ko) | 디지털 티브이 수신 장치 | |
JP3141149B2 (ja) | 画像符号化装置 | |
JP3343554B1 (ja) | 画像予測復号化方法及び画像予測符号化装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051207 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20060302 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20060307 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060406 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060425 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070131 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070301 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110316 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110316 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120316 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130316 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140316 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |