JP2002010262A - 復号装置、テレビジョン装置、データ処理システム、復号方法、及び記憶媒体 - Google Patents

Abstract

(57)【要約】 【課題】 復号処理以外の他のデータ処理を含めた、よ
り忠実なマイクロプロセッサの処理負荷を取得し、その
負荷に応じた復号処理を行うことが可能な構成とするこ
とで、常に良好な映像を提供できるテレビジョン装置を
提供する 【解決手段】 第１の検出手段１２３は、記憶手段１１
２の符号化データの記憶状態を検出する。選択手段１１
３は、第１の検出手段１２３の検出結果に応じて、記憶
手段１１２内の符号化データを復号する復号手段１４
１，１４２における、復号処理の負荷が異なる複数の復
号モードの中から該当する復号モードを選択する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えば、符号化デ
ータの復号処理を含む複数のデータ処理を同時に行うこ
とが可能な装置やシステムに用いられる、復号装置、テ
レビジョン装置、データ処理システム、復号方法、及び
それを実施するための処理ステップをコンピュータが読
出可能に格納した記憶媒体に関するものである。

【０００２】

【従来の技術】従来より例えば、ディジタルテレビジョ
ン装置は、圧縮データ（映像や音声等の符号化ストリー
ムを多重化して得られたプログラムのデータ列、以下、
「圧縮ストリーム」とも言う）の復号処理を含む複数の
データ処理を同時に行うことが可能なマイクロプロセッ
サを備えており、受信した番組（プログラム）の圧縮デ
ータや、予め当該装置内に蓄積された圧縮データ、或い
は当該装置の接続機器から送られてきた圧縮データの復
号処理、接続機器とのデータの送受信処理、ダウンロー
ド処理等、様々なデータ処理を同時に実行する状況があ
る。

【０００３】しかしながら、上述のようなディジタルテ
レビジョン装置は、様々なデータ処理を同時に実行する
際、マイクロプロセッサの性能限界による、圧縮データ
の復号処理で使用するメモリバッファのオーバーフロー
やアンダーフローによって、当該復号処理にて得られる
復号後の映像が不規則的に駒落ちし、非常に見づらくな
る、という問題があった。

【０００４】そこで、上記の問題を解決するために、例
えば、特開平１１−１４６３９８号等に記載された復号
装置が提案された。この復号装置は、復号対象の圧縮ス
トリームの数を復号処理の負荷の値とする負荷算出手段
を備え、当該手段により得られた復号処理の負荷に応じ
て、複数の復号処理方法を切り替えるようになされてい
る。このような構成により、駒落ちが少ない或いは駒落
ちが規則的な、滑らかな映像を提供することができる。

【０００５】具体的には、図９に示すように、上記復号
装置９００は、デマルチプレクス部９１１、ＥＳ格納バ
ッファ９１２、切り換え部９１３、２つの復号処理部９
４１，９４２、遅延バッファ９２２、負荷算出部９２
３、他処理部９２４、システム制御部９２５、ストリー
ム制御部９２６、ストリーム受信部９２７、表示制御部
９２８、表示デバイス９２９、及び他Ｉ／Ｏ部９３０を
備えている。復号処理部（Ａ）９４１は、可変長復号部
９１４、逆量子化部９１５、８×８逆ＤＣＴ部９１６、
及び動き補償部９２１を含み、復号処理部（Ｂ）９４２
は、簡易可変長復号部９１７、簡易逆量子化部９１８、
周波数領域０挿入部９１９、簡易８×８逆ＤＣＴ部９２
０、及び動き補償部９２１を含んでいる。

【０００６】上述のような復号装置９００の一連の動作
について説明すると、先ず、ストリーム受信部９２７で
は、圧縮ストリームが受信される。この圧縮ストリーム
は、ストリーム制御部９２６を介して、デマルチプレク
ス９１１へ供給され、ここで個々のエレメンタリストリ
ーム（ＥＳ）に変換され、ＥＳ格納バッファ９１２へ蓄
積される。

【０００７】そこで、負荷算出部９２３は、図１０に示
すように、ストリーム制御部９２６から送られきたスト
リーム数（同時に処理するストリームの数）と、所定の
しきい値とを比較する（ステップＳ１００１）。切り換
え部９１３は、負荷算出部９２３での比較結果に基づい
て、ＥＳ格納バッファ９１２へ格納されたエレメンタリ
ストリームの供給先を、処理負荷の異なる復号処理部
（Ａ）９４１と復号処理部（Ｂ）９４２で切り替える。
これにより、ストリーム数がしきい値よりも小さい場合
には、復号処理部（Ａ）９４１での復号処理が実行され
（ステップＳ１００２〜Ｓ１００４、ステップＳ１００
５）、そうでない場合には、復号処理部（Ｂ）９４２で
の復号処理が実行される（ステップＳ１００６〜Ｓ１０
０９、ステップＳ１００５）。

【０００８】上述の復号処理により得られた映像データ
は、一旦遅延バッファ９２２へ蓄積され、システム制御
部９２５及び表示制御部９２８によって、同期調整され
たタイミングで表示デバイス９２９に送られ、ここで当
該映像データの表示が行われる。

【０００９】復号処理部（Ａ）９４１での復号処理につ
いて具体的に説明すると、まず、当該復号処理は、上記
図１０のステップＳ１００２〜Ｓ１００４及びＳ１００
５に示されるような、最も一般的な復号処理過程を含ん
でいる。

【００１０】すなわち、復号処理部（Ａ）９４１での復
号処理では、切り換え部９１３によって供給されたスト
リームに対して、先ず、可変長復号部９１４により可変
長復号化処理を行い（ステップＳ１００２）、次に、逆
量子化部９１５により逆量子化処理を行い（ステップＳ
１００３）、次に、８×８逆ＤＣＴ部９１６により８×
８画素ブロック単位での離散コサイン逆変換処理を行い
（ステップＳ１００４）、そして、動き補償部９２１に
よりＰピクチャ及びＢピクチャの動き補償処理を行う
（ステップＳ１００５）。

【００１１】一方、復号処理部（Ｂ）９４２での復号処
理は、上記図１０のステップＳ１００６〜Ｓ１００９及
びＳ１００５に示されるような、復号処理部（Ａ）９４
１での復号処理に比ベてマイクロプロセッサの負荷の軽
い復号処理過程を含んでいる。

【００１２】すなわち、復号処理部（Ｂ）９４２での復
号処理では、切り換え部９１３によって供給されたスト
リームに対して、先ず、簡易可変長復号部９１７により
簡易可変長復号化処理を行い（ステップＳ１００６）、
次に、簡易逆量子化部９１８により簡易逆量子化処理を
行う（ステップＳ１００７）。これにより、図１１
（ａ）に示すように、４×４画素ブロックのＤＣＴ係数
部分のみが可変長復号化される。次に、上記４×４画素
ブロックのＤＣＴ係数部分以外の係数に対して、上記図
１１（ｂ）に示すように、周波数領域０挿入部９１９に
より“０”を挿入し（ステップＳ１００８）、次に、上
記図１１（ｃ）に示すように、簡易８×８逆ＤＣＴ部９
２０により８×８画素のブロック単位での離散コサイン
逆変換処理を行って（ステップＳ１００９）、８×８画
素ブロックの画素データを取得する。そして、当該画素
データに対して、動き補償部９２１によりＰピクチャ及
びＢピクチャの動き補償処理を行う（ステップＳ１００
５）。

【００１３】

【発明が解決しようとする課題】しかしながら、上記図
９に示したような従来の復号装置９００の構成を、ディ
ジタルテレビジョン装置に適用した場合、復号処理以外
の、接続機器とのデータの送受信処理やダウンロード処
理等の他のデータ処理の負荷（他処理部９２４での処理
負荷）が考慮されないため、復号処理と同時に実行する
データ処理の負荷重い状況では、当該データ処理でも使
用されるメモリバッファのアンダーフローにより映像の
不規則な駒落ちが発生し、非常に見づらい映像になって
しまう、という問題があった。

【００１４】そこで、本発明は、上記の欠点を除去する
ために成されたもので、復号処理以外の他のデータ処理
を含めた、より忠実なマイクロプロセッサの処理負荷を
取得して、その負荷に応じた復号処理を行うことが可能
な構成とすることで、常に良好な映像を提供できる、復
号装置、テレビジョン装置、データ処理システム、復号
方法、及びそれを実施するための処理ステップをコンピ
ュータが読出可能に格納した記憶媒体を提供することを
目的とする。

【００１５】

【課題を解決するための手段】斯かる目的下において、
第１の発明は、符号化データを入力する入力手段と、前
記符号化データを記憶する第１の記憶手段と、復号処理
の負荷が異なる複数の復号モードを有し、前記記憶手段
に記憶された符号化データを復号する復号手段と、前記
第１の記憶手段に対する前記符号化データ記憶状態を検
出する第１の検出手段と、前記第１の検出手段の出力に
応じて前記復号モードを選択する選択手段とを備える復
号装置であることを特徴とする。

【００１６】第２の発明は、前記第１の発明において、
前記復号手段によって復号されたデータを記憶する第２
の記憶手段と、前記第２の記憶手段のデータ記憶状態を
検出する第２の検出手段とを更に備え、前記選択手段
は、前記第１及び第２の検出手段の出力に応じて前記復
号モードを選択することを特徴とする。

【００１７】第３の発明は、前記第１又は２の発明にお
いて、前記第１の検出手段は、所定単位時間当たりの前
記第１の記憶手段におけるオーバーフロー及びアンダー
フローの回数を検出することを特徴とする。

【００１８】第４の発明は、前記第２の発明において、
前記第２の検出手段は、所定単位時間当たりの前記第２
の記憶手段におけるオーバーフロー及びアンダーフロー
の回数を検出することを特徴とする。

【００１９】第５の発明は、前記第１又は２の発明にお
いて、前記第１の検出手段は、所定単位時間当たりの前
記第１の記憶手段における符号化データ書込位置及び読
出位置の差分を検出することを特徴とする。

【００２０】第６の発明は、前記第２の発明において、
前記第２の検出手段は、所定単位時間当たりの前記第２
の記憶手段におけるデータ書込位置及び読出位置の差分
を検出することを特徴とする。

【００２１】第７の発明は、前記第３〜６のいずれかの
発明において、前記符号化データは、復号処理の時刻管
理のためのタグとして機能するタイムスタンプを含み、
前記タイムスタンプを用いて所定単位時間を判断するこ
とを特徴とする。

【００２２】第８の発明は、前記第１〜７のいずれかの
発明において、前記符号化データは、少なくとも画像デ
ータに対して直交変換処理、量子化処理、及び可変長符
号化処理を施して得られたデータを含み、前記複数の復
号モードの少なくとも１つは、直交変換係数の一部の高
周波成分に対して“Ｏ”を挿入して復号することを特徴
とする。

【００２３】第９の発明は、前記第１〜７のいずれかの
発明において、前記符号化データは、少なくとも画像デ
ータに対して直交変換処理、量子化処理、及び可変長符
号化処理を施して得られたデータを含み、前記複数の復
号モードの少なくとも１つは、直交変換係数の一部を抽
出して逆直交変換処理し、その処理したデータに対して
拡大処理することを特徴とする。

【００２４】第１０の発明は、前記第１〜７のいずれか
の発明において、前記符号化データは、少なくとも複数
のピクチャから構成される画像データを符号化して得ら
れたデータを含み、前記複数の復号モードの少なくとも
１つは、一部のピクチャに限り復号することを特徴とす
る。

【００２５】第１１の発明は、前記第１〜１０のいずれ
かの発明において、前記符号化データは、画像データを
符号化したデータであり、前記復号手段によって復号さ
れた画像データを表示する表示手段を有することを特徴
とする。

【００２６】第１２の発明は、符号化データを入力する
入力手段と、復号処理の負荷が異なる複数の復号モード
を有し、前記符号化データを復号する復号手段と、前記
復号手段によって復号されたデータを記憶する記憶手段
と、前記記憶手段に対するデータ記憶状態を検出する検
出手段と、前記検出手段の出力に応じて前記復号化モー
ドを選択する選択手段とを備える復号装置であることを
特徴とする。

【００２７】第１３の発明は、前記第１２の発明におい
て、前記検出手段は、所定単位時間当たりの前記記憶手
段におけるオーバーフロー及びアンダーフローの回数を
検出することを特徴とする。

【００２８】第１４の発明は、前記第１２の発明におい
て、前記検出手段は、所定単位時間当たりの前記記憶手
段におけるデータ書込位置及び読出位置の差分を検出す
ることを特徴とする。

【００２９】第１５の発明は、前記第１２〜１４のいず
れか発明において、前記符号化データは、少なくとも画
像データに対して直交変換処理、量子化処理、及び可変
長符号化処理を施して得られたデータを含み、前記複数
の復号モードの少なくとも１つは、直交変換係数の一部
の高周波成分に対して“Ｏ”を挿入して復号することを
特徴とする。

【００３０】第１６の発明は、前記第１２〜１４のいず
れかの発明において、前記符号化データは、少なくとも
画像データに対して直交変換処理、量子化処理、及び可
変長符号化処理を施して得られたデータを含み、前記複
数の復号モードの少なくとも１つは、直交変換係数の一
部を抽出して逆直交変換処理し、その処理したデータに
対して拡大処理することを特徴とする。

【００３１】第１７の発明は、前記第１２〜１４のいず
れかの発明において、前記符号化データは、少なくとも
複数のピクチャから構成される画像データを符号化して
得られたデータを含み、前記複数の復号モードの少なく
とも１つは、一部のピクチャに限り復号することを特徴
とする。

【００３２】第１８の発明は、前記第１２〜１７のいず
れかの発明において、前記符号化データは、画像データ
を符号化したデータであり、前記復号手段によって復号
された画像データを表示する表示手段を備えることを特
徴とする。

【００３３】第１９の発明は、受信した符号化データの
復号処理を含む複数のデータ処理を行なうテレビジョン
装置であって、請求項１〜１８のいずれか１項に記載の
復号装置の機能を有することを特徴とする。

【００３４】第２０の発明は、複数の機器が互いに通信
可能に接続されてなるデータ処理システムであって、上
記複数の機器のうち少なくとも１つの機器は、請求項１
〜１８の何れかに記載の復号装置の機能、又は請求項１
９記載のテレビジョン装置の機能を有することを特徴と
する。

【００３５】第２１の発明は、符号化データを入力する
入力ステップと、前記符号化データを記憶手段に記憶す
る記憶ステップと、復号処理の負荷が異なる複数の復号
モードと有し、前記記億手段に記憶された符号化データ
を復号する復号ステップと、前記記憶手段に対する前記
符号化データ記憶状態を検出する検出ステップと、前記
検出ステップの検出結果に応じて前記復号モードを選択
する選択ステップとを含む復号方法であることを特徴と
する。

【００３６】第２２の発明は、符号化データを入力する
入力ステップと、復号処理の負荷が異なる複数の復号モ
ードを有し、前記符号化データを復号する復号ステップ
と、前記復号ステップによって復号されたデータを記憶
手段に記憶する記憶ステップと、前記記憶手段に対する
データ記憶状態を検出する検出ステップと、前記検出ス
テップの検出結果に応じて前記復号化モードを選択する
選択ステップとを含む復号方法であることを特徴とす
る。

【００３７】第２３の発明は、復号処理プログラムが記
憶されたコンピュータ読出可能な記憶媒体であって、符
号化データを入力する入力工程のコードと、前記符号化
データを記憶手段に記憶する記憶工程のコードと、復号
処理の負荷が異なる複数の復号モードを有し、前記記億
手段に記憶された符号化データを復号する復号工程のコ
ードと、前記記憶手段に対する前記符号化データ記憶状
態を検出する検出工程のコードと、前記検出ステップの
検出結果に応じて前記復号モードを選択する選択工程の
コードとを記憶したことを特徴とする。

【００３８】第２４の発明は、復号処理プログラムが記
憶されたコンピュータ読出可能な記憶媒体であって、符
号化データを入力する入力工程のコードと、復号処理の
負荷が異なる複数の復号モードを有し、前記符号化デー
タを復号する復号工程のコードと、前記復号工程によっ
て復号されたデータを記憶手段に記憶する記憶工程のコ
ードと、前記記憶手段に対するデータ記憶状態を検出す
る検出工程のコードと、前記検出工程の検出結果に応じ
て前記復号化モードを選択する選択工程のコードとを記
憶したことを特徴とする。

【００３９】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を用いて説明する。

【００４０】本発明は、例えば、図１に示すようなディ
ジタルテレビジョン装置１００に適用される。このディ
ジタルテレビジョン装置１００は、圧縮ストリーム（映
像や音声等の符号化ストリームを多重化して得られたプ
ログラムのデータ列）の復号処理を含む複数のデータ処
理を同時に行うことが可能なマイクロプロセッサ（復号
処理部１４１，１４２及び他処理部１２６等から構成さ
れるマイクロプロセッサ）を有する装置であり、特に、
復号処理や他のデータ処理で使用するメモリバッファ
（ＥＳ格納バッファ１１２及び遅延バッファ１２２）に
おける復号処理でのデータ書込位置及び読出位置の情報
を取得し、当該情報及び圧縮ストリーム内の情報に基づ
いて、複数の復号処理（復号処理部１４１での復号処理
及び復号処理部１４２での復号処理）の中から適切な復
号処理を選択し実行するようになされている。以下、本
実施の形態におけるディジタルテレビジョン装置１００
について具体的に説明する。

【００４１】＜ディジタルテレビジョン装置１００の構
成＞ディジタルテレビジョン装置１００は、上記図１に
示すように、圧縮ストリームを受信するストリーム受信
部１２９と、ストリーム受信部１２９にて受信された圧
縮ストリームに係る制御を行うストリーム制御部１２８
と、ストリーム制御部１２８により供給された圧縮スト
リームを個々のエレメンタリストリームへ変換するデマ
ルチプレクス部１１１と、デマルチプレクス部１１１に
て得られたエレメンタリストリームを一旦格納するため
のＥＳストリーム格納バッファ１１２と、ＥＳストリー
ム格納バッファ１１２へ格納されたエレメンタリストリ
ーム内の情報等に基づき当該ストリームの復号処理の負
荷を示す負荷情報を求める負荷算出部１２４と、負荷算
出部１２４により得られた負荷情報に基づきＥＳストリ
ーム格納バッファ１１２へ格納されたエレメンタリスト
リームの供給先を切り換える切り換え部１１３と、切り
換え部１１３により供給されたエレメンタリストリーム
の復号処理を行う２つの復号処理部１４１，１４２と、
復号処理部１４１，１４２での復号処理により得られた
映像データに対して遅延を与えて出力するための遅延バ
ッファ１２２と、遅延バッファ１２２から出力される映
像データの表示のための制御を行う表示制御部１３０
と、表示制御部１３０からの制御に従って映像データの
表示を行う表示デバイス１３１と、本装置１００の接続
機器とのインターフェース（他装置とのインターフェー
ス）である他Ｉ／Ｏ部１３２と、圧縮ストリームの復号
処理以外のデータ処理（接続機器とのデータの送受信処
理やダウンロード処理等）を行う他処理部１２６と、本
装置１００全体の動作制御を司るシステム制御部１２７
とを備えている。

【００４２】復号処理部（Ａ）１４１は、可変長復号部
１１４、逆量子化部１１５、８×８逆ＤＣＴ部１１６、
及び動き補償部１２１を含み、復号処理部（Ｂ）１４２
は、簡易可変長復号部１１７、簡易逆量子化部１１８、
周波数領域０挿入部１１９、簡易８×８逆ＤＣＴ部１２
０、及び動き補償部１２１を含んでいる。これらの復号
処理部（Ａ）１４１及び復号処理部（Ｂ）１４２は、そ
れぞれ処理負荷が異なっており、例えば、復号処理部
（Ｂ）１４２は、復号処理部（Ａ）１４１での復号処理
に比ベて、処理負荷の軽い復号処理過程を実行するよう
になされている。

【００４３】ここで、本実施の形態でのディジタルテレ
ビジョン装置１００は、上記の構成に加えて、ＥＳ格納
バッファ１１２におけるデータ書込位置及び読出位置を
求める処理位置算出部（Ａ）１２３と、遅延バッファ１
１２におけるデータ書込位置及び読出位置を求める処理
位置算出部（Ｂ）１２５とを備えている。そして、負荷
算出部１２４は、ＥＳストリーム格納バッファ１１２へ
格納されたエレメンタリストリーム内の情報と、処理位
置算出部（Ａ）１２３及び処理位置算出部（Ｂ）１２５
からのデータ書込位置及び読出位置の情報とに基づい
て、切り換え部１１３へ与える負荷情報（負荷の値）を
求めるようになされている。

【００４４】＜ディジタルテレビジョン装置１００の動
作＞図２は、負荷算出部１２４にて得られた負荷情報に
基づいて、圧縮ストリームの復号処理を、復号処理部
（Ａ）１４１での復号処理と、復号処理部（Ｂ）１４２
での復号処理とで切り換えて、表示デバイス１３１で表
示する映像のデータを取得するための、ディジタルテレ
ビジョン装置１００の動作を示したものである。以下、
上記図２を用いて、ディジタルテレビジョン装置１００
の動作について説明する。

【００４５】ステップＳ２００：ストリーム受信部１２
９は、圧縮ストリームを受信する。この受信された圧縮
ストリームは、ストリーム制御部１２８を介してデマル
チプレクス部１１１へ供給される。デマルチプレクス部
１１１は、ストリーム制御部１２８を介して供給された
圧縮ストリームを、個々のエレメンタリストリーム（Ｅ
Ｓ）へ変換する。デマルチプレクス部１１１にて得られ
た個々のエレメンタリストリームは、ＥＳ格納バッファ
１１２へ蓄積される。

【００４６】ステップＳ２０１：処理位置算出部（Ａ）
１２３は、ＥＳ格納バッファ１１２におけるエレメンタ
リストリームの書込位置（書込ポインタアドレス）及び
読出位置（読出ポインタアドレス）を求める。一方、処
理位置算出部（Ｂ）１２５は、後述する復号処理部
（Ａ）１４１又は復号処理部（Ｂ）１４２にて得られた
映像データが書き込まれ、当該映像データが表示制御部
１３０を介して表示デバイス１３１に対して読み出され
る遅延バッファ１２２における当該映像データの書込位
置（書込ポインタアドレス）及び読出位置（読出ポイン
タアドレス）を求める。

【００４７】負荷算出部１２４は、処理位置算出部
（Ａ）１２３にて得られたＥＳ格納バッファ１１２の書
込位置及び読出位置と、処理位置算出部（Ｂ）１２５に
て得られた遅延バッファ１２２の書込位置及び読出位置
と、ＥＳ格納バッファ１１２へ蓄積されたエレメンタリ
ストリーム内のタイムスタンプ情報とから、当該エレメ
ンタリストリームに対する復号処理の負荷を示す負荷情
報（負荷の値）を求める。

【００４８】具体的には、負荷算出部１２４は、ＥＳ格
納バッファ１１２の書込位置及び読出位置と、遅延バッ
ファ１２２の書込位置及び読出位置と、エレメンタリス
トリーム内のタイムスタンプ情報とから、ＥＳ格納バッ
ファ１１２での所定単位時間当たりのオーバーフロー回
数及びオーバーフロー回数と、遅延バッファ１２２での
所定単位時間当たりのオーバーフロー回数及びオーバー
フロー回数とを求め、上記負荷の値を、所定単位時間毎
に、 （負荷の値）＝（ＥＳ格納バッファ１１２のオーバーフ
ロー回数）−（ＥＳ格納バッファ１１２のアンダーフロ
ー回数）＋（遅延バッファ１２２のアンダーフロー回
数）−（遅延バッファ１２２のオーバーフロー回数） なる演算式によって求める。単位時間は、エレメンタリ
ストリーム内の情報であるタイムスタンプ（復号再生処
理の時刻管理のタグ）を用いて計測する。

【００４９】ステップＳ２０２：切り換え部１１３は、
負荷算出部１２４にて得られた負荷の値と、所定のしき
い値とを比較し、「負荷の値＜しきい値」である場合に
は、ＥＳ格納バッファ１１２へ蓄積されたエレメンタリ
ストリームを復号処理部（Ａ）１４１へ供給し、「負荷
の値＜しきい値」でない場合には、ＥＳ格納バッファ１
１２へ蓄積されたエレメンタリストリームを復号処理部
（Ｂ）１４２へ供給する。これにより、「負荷の値＜し
きい値」である場合には、復号処理部（Ａ）１４１にて
ステップＳ２０２〜Ｓ２０５及びＳ２０６の処理が実行
され、「負荷の値＜しきい値」でない場合には、復号処
理部（Ｂ）１４２にてステップＳ２０７〜Ｓ２１０及び
Ｓ２０６の処理が実行される。

【００５０】ステップＳ２０３〜Ｓ２０５、ステップＳ
２０６：ステップＳ２０２での比較結果が「負荷の値＜
しきい値」である場合、復号処理部（Ａ）１４１におい
て、可変長復号部１１４は、切り換え部１１３によって
供給されたストリームを可変長復号化する（ステップＳ
２０３）。逆量子化部１１５は、可変長復号部１１４で
の可変長復号化後のストリームを逆量子化する（ステッ
プＳ２０４）。８×８逆ＤＣＴ部１１６は、逆量子化部
１１５での逆量子化後のストリームに対して、８×８画
素ブロック単位での離散コサイン逆変換処理を行って、
８×８画素ブロックの画像データを取得する（ステップ
Ｓ２０５）。そして、動き補償部１２１は、８×８逆Ｄ
ＣＴ部１１６にて得られた画像データに対して、Ｐピク
チャ及びＢピクチャの動き補償処理を行って、表示デバ
イス１３１の表示データとしての映像データを取得する
（ステップＳ２０６）。

【００５１】ステップＳ２０７〜Ｓ２１０、ステップＳ
２０６：ステップＳ２０２での比較結果が「負荷の値＜
しきい値」でない場合、復号処理部（Ｂ）１４２におい
て、簡易可変長復号部１１７は、切り換え部１１３によ
って供給されたストリームを簡易可変長復号化する（ス
テップＳ２０７）。簡易逆量子化部１１８は、簡易可変
長復号部１１７での簡易可変長復号化後のストリームを
簡易逆量子化する（ステップＳ２０８）。これにより、
処理対象のストリームにおいて、４×４画素ブロックの
ＤＣＴ係数部分のみが可変長復号化される（上記図１１
（ａ）参照）。周波数領域０挿入部１１９は、簡易逆量
子化部１１８での簡易逆量子化後のストリームにおい
て、上記４×４画素ブロックのＤＣＴ係数部分以外の係
数に “０”を挿入する（ステップＳ２０９、上記図１
１（ｂ）参照）。簡易８×８逆ＤＣＴ部１２０は、周波
数領域０挿入部１１９での０挿入処理後のストリームに
対して、８×８画素ブロック単位での離散コサイン逆変
換処理を行って、８×８画素ブロックの画像データを取
得する（ステップＳ２１０、上記図１１（ｃ）参照）。
そして、動き補償部１２１は、簡易８×８逆ＤＣＴ部１
２０にて得られた画像データに対して、Ｐピクチャ及び
Ｂピクチャの動き補償処理を行って、表示デバイス１３
１の表示データとしての映像データを取得する（ステッ
プＳ２０６）。

【００５２】ステップＳ２１１：復号処理部（Ａ）１４
１での復号処理、又は復号処理部（Ｂ）１４２での復号
処理の後、当該復号処理にて得られた映像データは、一
旦遅延バッファ１２２へ蓄積され、システム制御部１２
７によって、遅延バッファ１２２から同期調整されたタ
イミングで読み出される。このときの遅延バッファ１２
２におけるデータの読出位置が、上述した処理位置算出
部（Ｂ）１２５により取得され、負荷算出部１２４へと
供給されることになる。表示制御部１３０は、遅延バッ
ファ１２２から読み出された映像データを表示デバイス
１３１へ表示させる。

【００５３】上述のように、本実施の形態では、圧縮ス
トリームの復号処理を行う際に、復号処理や他のデータ
処理で使用するＥＳ格納バッファ１１２及び遅延バッフ
ァ１２２における復号処理対象のデータ（現在復号処理
しているデータ）の書込位置及び読出位置に基づいて、
復号処理の負荷を示す情報（負荷の値）を取得し、その
負荷情報に基づいて、処理負荷の異なる複数の復号処理
を切り換えて実行するように構成したので、復号処理と
共に他のデータ処理を同時に実行する場合であっても、
また、当該他のデータ処理の負荷が重い状況であって
も、当該他のデータ処理の負荷をも考慮して、本装置１
００での処理負荷（マイクロプロセッサの処理負荷）を
より忠実に求めることができ、当該処理負荷に対して最
適な復号処理を選択し実行することができる。これによ
り、駒落ち少ない或いは駒落ちが規則的な、滑らかな映
像を確実に提供することができる。

【００５４】尚、本実施の形態では、説明の簡単のた
め、処理負荷の異なる複数の復号処理を、２つの復号処
理部（Ａ）１４１及び復号処理部（Ｂ）１４２によって
実施したが、これに限られることはなく、さらに多くの
処理負荷の異なる復号処理部を設けるようにしてもよ
い。この場合、例えば、負荷の値の比較対象となるしき
い値を複数用意し、多段に渡って復号処理を切り換える
ようにする。

【００５５】また、本実施の形態では、負荷算出部１２
４において、単位時間毎に、 （負荷の値）＝（ＥＳ格納バッファ１１２のオーバーフ
ロー回数）−（ＥＳ格納バッファ１１２のアンダーフロ
ー回数）＋（遅延バッファ１２２のアンダーフロー回
数）−（遅延バッファ１２２のオーバーフロー回数） なる演算式によって、負荷情報（負荷の値）を取得する
ようにしたが、これに限られることはなく、例えば、 （負荷の値）＝｛（ＥＳ格納バッファ１１２の読出ポイ
ンタアドレス）−（ＥＳ格納バッファ１１２の書込ポイ
ンタアドレス）｝−｛（遅延バッファ１２２の読出ポイ
ンタアドレス）−（遅延バッファ１２２の書込ポインタ
アドレス）｝ なる演算式によって、負荷情報（負荷の値）を取得する
ようにしてもよい。

【００５６】（第２の実施の形態）本発明は、例えば、
図３に示すようなディジタルテレビジョン装置３００に
適用される。このディジタルテレビジョン装置３００
は、上記図１に示したディジタルテレビジョン装置１０
０が備える復号処理部（Ｂ）１４２の代わりに、復号処
理部（Ｂ）１４２´を備えた構成としている。尚、上記
図３のディジタルテレビジョン装置３００において、上
記図１のディジタルテレビジョン装置１００と同様に動
作する個所には同じ符号を付し、その詳細な説明は省略
する。

【００５７】本実施の形態における復号処理部（Ｂ）１
４２´は、特に、４×４画素ブロックの逆ＤＣＴ変換処
理によって取得した４×４画素のデータを拡大処理（空
間領域データの拡大処理）するようになされている。こ
のため、復号処理部（Ｂ）１４２´は、簡易可変長復号
部１１７、簡易逆量子化部１１８、４×４逆ＤＣＴ部３
１９、零時ホールド拡大部３２０、及び動き補償部１２
１を含んでいる。このような復号処理部（Ｂ）１４２´
も、復号処理部（Ｂ）１４２と同様に、復号処理部
（Ａ）１４１での復号処理に比ベて、処理負荷の軽い復
号処理過程を実行するようになされている。

【００５８】図４は、本実施の形態におけるディジタル
テレビジョン装置３００の動作を示したものである。
尚、上記図４のフローチャートにおいて、上記図２に示
したフローチャートと同様の処理を実行するステップに
は同じ符号を付し、その詳細な説明は省略する。

【００５９】ステップＳ２００〜Ｓ２０２：第１の実施
の形態と同様に、ストリーム受信部１２９にて受信され
た圧縮ストリームは、デマルチプレクス１１１により個
々のエレメンタリストリームに変換され、ＥＳ格納バッ
ファ１１２へ蓄積される（ステップＳ２００）。このと
き、処理位置算出部（Ａ）１２３によりＥＳ格納バッフ
ァ１１２でのデータ書込位置及び読出位置が取得され、
処理位置算出部（Ｂ）１２５により遅延バッファ１２２
でのデータ書込位置及び読出位置が取得される。そし
て、負荷算出部１２４により、処理位置算出部（Ａ）１
２３及び処理位置算出部（Ｂ）１２５での取得情報、及
びＥＳ格納バッファ１１２へ蓄積されたエレメンタリス
トリーム内の情報（タイムスタンプ）に基づいて、復号
処理の負荷の値が求められ（ステップＳ２０１）、切り
換え部１１３により、当該負荷の値と所定のしきい値の
比較結果に基づいて（ステップＳ２０２）、ＥＳ格納バ
ッファ１１２へ蓄積されたエレメンタリストリームの供
給先が、復号処理部（Ａ）１４１と復号処理部（Ｂ）１
４２´で切り換えられる。本実施の形態での負荷の値
は、タイムスタンプを利用して所定単位時間当たりのデ
ータ書込位置と読出位置の差分をとることで求める。

【００６０】ステップＳ２０３〜Ｓ２０５、ステップＳ
２０６：第１の実施の形態と同様に、ステップＳ２０２
での比較結果が「負荷の値＜しきい値」である場合、復
号処理部（Ａ）１４１では、可変長復号部１１４による
可変長復号化（ステップＳ２０３）、逆量子化部１１５
による逆量子化（ステップＳ２０４）、８×８逆ＤＣＴ
部１１６による離散コサイン逆変換、及び動き補償部１
２１による動き補償（ステップＳ２０６）、という復号
処理過程が実行され、表示デバイス１３１の表示データ
としての映像データが取得される。

【００６１】ステップＳ２０７、Ｓ２０５、Ｓ４０９、
及びＳ４１０、ステップＳ２０６：一方、ステップＳ２
０２での比較結果が「負荷の値＜しきい値」でない場
合、本実施の形態での復号処理部（Ｂ）１４２´による
復号処理が実行される。

【００６２】具体的には、先ず、簡易可変長復号部１１
７は、切り換え部１１３によって供給されたストリーム
を簡易可変長復号化する（ステップＳ２０７）。次に、
簡易逆量子化部１１８は、簡易可変長復号部１１７での
簡易可変長復号化後のストリームを簡易逆量子化する
（ステップＳ２０８）。これにより、図５（ａ）に示す
ように、処理対象のストリームにおいて、４×４画素ブ
ロックのＤＣＴ係数部分のみが可変長復号化される。

【００６３】次に、４×４逆ＤＣＴ部３１９は、上記図
５（ｂ）に示すように、簡易逆量子化部１１８での簡易
逆量子化後のストリームに対して、４×４画素ブロック
単位での離散コサイン逆変換処理を行って、４×４画素
ブロックの画素データを取得する（ステップＳ４０
９）。

【００６４】次に、零時ホールド拡大部３２０は、上記
図５（ｃ）に示すように、４×４逆ＤＣＴ部３１９にて
得られた４×４画素ブロックの画素データに対して、拡
大処理を施す（ステップＳ４１０）。

【００６５】そして、動き補償部１２１は、零時ホール
ド拡大部３２０にて得られた拡大像データに対して、Ｐ
ピクチャ及びＢピクチャの動き補償処理を行って、表示
デバイス１３１の表示データとしての映像データを取得
する（ステップＳ２０６）。

【００６６】ステップＳ２１１：第１の実施の形態と同
様に、復号処理部（Ａ）１４１での復号処理、又は復号
処理部（Ｂ）１４２´での復号処理の後、当該復号処理
にて得られた映像データは、一旦遅延バッファ１２２へ
蓄積され、システム制御部１２７及び表示制御部１３０
により、遅延バッファ１２２から同期調整されたタイミ
ングで読み出され、表示デバイス１３１で表示される。

【００６７】上述のような本実施の形態によっても、第
１の実施の形態と同様に、駒落ち少ない或いは駒落ちが
規則的な、滑らかな映像を確実に提供することができ
る。

【００６８】（第３の実施の形態）本発明は、例えば、
図６に示すようなディジタルテレビジョン装置６００に
適用される。このディジタルテレビジョン装置６００
は、上記図１に示したディジタルテレビジョン装置１０
０が備える復号処理部（Ｂ）１４２の代わりに、復号処
理部（Ｂ）１４２´´を備えた構成としている。尚、上
記図６のディジタルテレビジョン装置６００において、
上記図１のディジタルテレビジョン装置１００と同様に
動作する個所には同じ符号を付し、その詳細な説明は省
略する。

【００６９】本実施の形態における復号処理部（Ｂ）１
４２´´は、特に、切り換え部１１３によって供給され
たエレメンタリストリームにおいて、一部のピクチャデ
ータに限り、復号処理を行うようになされている。この
ため、復号処理部（Ｂ）１４２´´は、空間領域０挿入
部６０１、及び動き補償部１２１を含んでいる。このよ
うな復号処理部（Ｂ）１４２´´も、復号処理部（Ｂ）
１４２と同様に、復号処理部（Ａ）１４１での復号処理
に比ベて、処理負荷の軽い復号処理過程を実行するよう
になされている。

【００７０】図７は、本実施の形態におけるディジタル
テレビジョン装置６００の動作を示したものである。
尚、上記図７のフローチャートにおいて、上記図２に示
したフローチャートと同様の処理を実行するステップに
は同じ符号を付し、その詳細な説明は省略する。

【００７１】ステップＳ２００〜Ｓ２０２：第１の実施
の形態と同様に、ストリーム受信部１２９にて受信され
た圧縮ストリームは、デマルチプレクス１１１により個
々のエレメンタリストリームに変換され、ＥＳ格納バッ
ファ１１２へ蓄積される（ステップＳ２００）。このと
き、処理位置算出部（Ａ）１２３によりＥＳ格納バッフ
ァ１１２でのデータ書込位置及び読出位置が取得され、
処理位置算出部（Ｂ）１２５により遅延バッファ１２２
でのデータ書込位置及び読出位置が取得される。そし
て、負荷算出部１２４により、処理位置算出部（Ａ）１
２３及び処理位置算出部（Ｂ）１２５での取得情報、及
びＥＳ格納バッファ１１２へ蓄積されたエレメンタリス
トリーム内の情報（タイムスタンプ）に基づいて、単位
時間当たりの復号処理の負荷の値が求められ（ステップ
Ｓ２０１）、切り換え部１１３により、当該負荷の値と
所定のしきい値の比較結果に基づいて（ステップＳ２０
２）、ＥＳ格納バッファ１１２へ蓄積されたエレメンタ
リストリームの供給先が、復号処理部（Ａ）１４１と復
号処理部（Ｂ）１４２´´で切り換えられる。

【００７２】ステップＳ２０３〜Ｓ２０５、ステップＳ
２０６：第１の実施の形態と同様に、ステップＳ２０２
での比較結果が「負荷の値＜しきい値」である場合、復
号処理部（Ａ）１４１では、可変長復号部１１４による
可変長復号化（ステップＳ２０３）、逆量子化部１１５
による逆量子化（ステップＳ２０４）、８×８逆ＤＣＴ
部１１６による離散コサイン逆変換、及び動き補償部１
２１による動き補償（ステップＳ２０６）、という復号
処理過程が実行され、表示デバイス１３１の表示データ
としての映像データが取得される。

【００７３】ステップＳ７０１、Ｓ７０２、ステップＳ
２０６：一方、ステップＳ２０２での比較結果が「負荷
の値＜しきい値」でない場合、本実施の形態での復号処
理部（Ｂ）１４２´´による復号処理が実行されること
になるが、その前処理として更に、切り換え部１１３
は、復号処理部（Ｂ）１４２´´へ供給するストリーム
（処理対象のストリーム）が、Ｐピクチャ或いはＢピク
チャであるか否かを判別する（ステップＳ７０１）。

【００７４】ステップＳ７０１の判別の結果、処理対象
のストリームがＰピクチャでなくＢピクチャでもない場
合、すなわちＩピクチャである場合、切り換え部１１３
は、当該Ｉピクチャのストリームを復号処理部（Ａ）１
４１へ供給する。また、ステップＳ７０１の判別の結
果、処理対象のストリームがＰピクチャ或いはＢピクチ
ャである場合、切り換え部１１３は、当該Ｐピクチャ或
いはＢピクチャのストリームを復号処理部（Ｂ）１４２
´´へ供給する。

【００７５】したがって、Ｐピクチャ及びＢピクチャに
ついては、復号処理部（Ｂ）１４２´´の空間領域０挿
入部６０１により、“０”が挿入されることで“０”の
ピクチャデータへ変換され（ステップＳ７０２）、Ｉピ
クチャについては、復号処理部（Ａ）１４１により復号
処理される。

【００７６】動き補償部１２１は、空間領域０挿入部６
０１により、Ｐピクチャ及びＢピクチャに限り、全て
“０”が代入された画像データに対して、Ｐピクチャ及
びＢピクチャの動き補償処理を行って、表示デバイス１
３１の表示データとしての映像データを取得する（ステ
ップＳ２０６）。

【００７７】ステップＳ２１１：第１の実施の形態と同
様に、復号処理部（Ａ）１４１での復号処理、又は復号
処理部（Ｂ）１４２´´での復号処理の後、当該復号処
理にて得られた映像データは、一旦遅延バッファ１２２
へ蓄積され、システム制御部１２７及び表示制御部１３
０により、遅延バッファ１２２から同期調整されたタイ
ミングで読み出され、表示デバイス１３１で表示され
る。

【００７８】図８は、「負荷の値＜しきい値」である場
合に実行される復号処理（ステップＳ２０３〜Ｓ２０
５、ステップＳ２０６による復号処理１）と、「負荷の
値＜しきい値」でない場合に実行される復号処理（ステ
ップＳ７０１、Ｓ７０２、ステップＳ２０６による復号
処理２）とを示したものである。

【００７９】上記図８の“８０１”及び“８０３”に示
すように、復号処理１では、Ｐピクチャ、Ｂピクチャ、
及びＩピクチャに対して、可変長復号化、逆量子化、及
び８×８逆ＤＣＴを行い、その結果を、動き補償処理内
で前後のＰ又はＩピクチャから作成した画像との差分と
して用いる。これに対して、復号処理２では、上記図８
の“８０２”及び“８０３”に示すように、空間領域０
挿入部６０１により、Ｐピクチャ及びＢピクチャに限
り、全て“０”が代入された画像データに置き換えら
れ、動き補償部１２１によってＰピクチャ及びＢピクチ
ャが動き補償される。このとき、Ｐピクチャ及びＢピク
チャに関しては、動き補償処理内で前後のＩピクチャか
ら画像データを作成するのみのでよいため、その分、処
理負担が軽くなる。

【００８０】上述のような本実施の形態によっても、第
１の実施の形態と同様に、駒落ち少ない或いは駒落ちが
規則的な、滑らかな映像を確実に提供することができ
る。

【００８１】尚、本発明の目的は、第１〜第３の実施の
形態のホスト及び端末の機能を実現するソフトウェアの
プログラムコードを記憶した記憶媒体を、システム或い
は装置に供給し、そのシステム或いは装置のコンピュー
タ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプロ
グラムコードを読みだして実行することによっても、達
成されることは言うまでもない。この場合、記憶媒体か
ら読み出されたプログラムコード自体が第１〜第３の実
施の形態の機能を実現することとなり、そのプログラム
コードを記憶した記憶媒体は本発明を構成することとな
る。プログラムコードを供給するための記憶媒体として
は、ＲＯＭ、フロッピー（登録商標）ディスク、ハード
ディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯ
Ｍ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード等
を用いることができる。また、コンピュータが読みだし
たプログラムコードを実行することにより、第１〜第３
の実施の形態の機能が実現されるだけでなく、そのプロ
グラムコードの指示に基づき、コンピュータ上で稼動し
ているＯＳ等が実際の処理の一部又は全部を行い、その
処理によって第１〜第３の実施の形態の機能が実現され
る場合も含まれることは言うまでもない。さらに、記憶
媒体から読み出されたプログラムコードが、コンピュー
タに挿入された拡張機能ボードやコンピュータに接続さ
れた機能拡張ユニットに備わるメモリに書き込まれた
後、そのプログラムコードの指示に基づき、その機能拡
張ボードや機能拡張ユニットに備わるＣＰＵなどが実際
の処理の一部又は全部を行い、その処理によって第１〜
第３の実施の形態の機能が実現される場合も含まれるこ
とは言うまでもない。

【００８２】

【発明の効果】以上説明したように本発明では、符号化
データ（映像の圧縮データ等）の復号処理を行う際に、
少なくとも復号処理で使用する記憶手段におけるデータ
（現在復号処理しているデータ）の記憶状態から処理負
荷を判断し、その判断結果に基づき、符号化データの復
号処理を実行する復号手段を、処理負荷の異なる複数の
復号モードで切り換えるように構成したので、符号化デ
ータの復号処理と共に他のデータ処理を同時に実行する
場合であっても、また、当該他のデータ処理の負荷が重
い状況であっても、当該他のデータ処理の負荷をも考慮
した、最適な復号手段を選択し実行することができる。
本発明を、例えば、符号化ストリームの復号処理を含む
複数のデータ処理を行うマイクロプロセッサを備えるデ
ィジタルテレビジョン装置等へ適用した場合、他のデー
タ処理の負荷を考慮した、より忠実なプロセッサ負荷を
算出することができ、それに応じた復号処理を行うこと
ができるため、常に良好な映像を提供することができ
る。

【図面の簡単な説明】

【図１】第１の実施の形態において、本発明を適用した
ディジタルテレビジョン装置の構成を示すブロック図で
ある。

【図２】上記ディジタルテレビジョン装置の動作を説明
するためのフローチャートである。

【図３】第２の実施の形態において、本発明を適用した
ディジタルテレビジョン装置の構成を示すブロック図で
ある。

【図４】上記ディジタルテレビジョン装置の動作を説明
するためのフローチャートである。

【図５】上記ディジタルテレビジョン装置での復号処理
を説明するための図である。

【図６】第３の実施の形態において、本発明を適用した
ディジタルテレビジョン装置の構成を示すブロック図で
ある。

【図７】上記ディジタルテレビジョン装置の動作を説明
するためのフローチャートである。

【図８】上記ディジタルテレビジョン装置での復号処理
を説明するための図である。

【図９】従来のディジタルテレビジョン装置の構成を示
すブロック図である。

【図１０】上記ディジタルテレビジョン装置の動作を説
明するためのフローチャートである。

【図１１】上記ディジタルテレビジョン装置での復号処
理を説明するための図である。

【符号の説明】

１００ ディジタルテレビジョン装置 １１１ デマルチプレクス部 １１２ ＥＳ格納バッファ １１３ 切り換え部 １１４ 可変長復号部 １１５ 逆量子化部 １１６ ８×８逆ＤＣＴ部 １１７ 簡易可変長復号部 １１８ 簡易逆量子化部 １１９ 周波数領域０挿入部 １２０ 簡易８×８逆ＤＣＴ部 １２１ 動き補償部 １２２ 遅延バッフア １２３ 処理位置算出部（Ａ） １２４ 負荷算出部 １２５ 処理位置算出部（Ｂ） １２６ 他処理部 １２７ システム制御部 １２８ ストリーム制御部 １２９ ストリーム受信部 １３０ 表示制御部 １３１ 表示デバイス １３２ 他Ｉ／Ｏ部 １４１ 復号処理部（Ａ） １４２ 復号処理部（Ｂ）

フロントページの続き Ｆターム(参考） 5C059 KK25 KK33 MA05 MA14 MA23 MC11 MC38 ME01 NN00 PP06 PP07 RC04 SS02 SS06 TA17 TA49 TA57 TA80 TB04 TC15 TC20 TD06 TD12 UA05 UA38 5J064 AA01 BA01 BA09 BA16 BC01 BC16 BC25 BD02

Claims (24)

【特許請求の範囲】
1. 【請求項１】 符号化データを入力する入力手段と、 前記符号化データを記憶する第１の記憶手段と、 復号処理の負荷が異なる複数の復号モードを有し、前記
   記憶手段に記憶された符号化データを復号する復号手段
   と、 前記第１の記憶手段に対する前記符号化データ記憶状態
   を検出する第１の検出手段と、 前記第１の検出手段の出力に応じて前記復号モードを選
   択する選択手段とを備えることを特徴とする復号装置。
2. 【請求項２】 前記復号手段によって復号されたデータ
   を記憶する第２の記憶手段と、 前記第２の記憶手段のデータ記憶状態を検出する第２の
   検出手段とを更に備え、 前記選択手段は、前記第１及び第２の検出手段の出力に
   応じて前記復号モードを選択することを特徴とする請求
   項１に記載の復号装置。
3. 【請求項３】 前記第１の検出手段は、所定単位時間当
   たりの前記第１の記憶手段におけるオーバーフロー及び
   アンダーフローの回数を検出することを特徴とする請求
   項１又は２に記載の復号装置。
4. 【請求項４】 前記第２の検出手段は、所定単位時間当
   たりの前記第２の記憶手段におけるオーバーフロー及び
   アンダーフローの回数を検出することを特徴とする請求
   項２に記載の復号装置。
5. 【請求項５】 前記第１の検出手段は、所定単位時間当
   たりの前記第１の記憶手段における符号化データ書込位
   置及び読出位置の差分を検出することを特徴とする請求
   項１又は２に記載の復号装置。
6. 【請求項６】 前記第２の検出手段は、所定単位時間当
   たりの前記第２の記憶手段におけるデータ書込位置及び
   読出位置の差分を検出することを特徴とする請求項２に
   記載の復号装置。
7. 【請求項７】 前記符号化データは、復号処理の時刻管
   理のためのタグとして機能するタイムスタンプを含み、
   前記タイムスタンプを用いて所定単位時間を判断するこ
   とを特徴とする請求項３〜６のいずれか１項に記載の復
   号装置。
8. 【請求項８】 前記符号化データは、少なくとも画像デ
   ータに対して直交変換処理、量子化処理、及び可変長符
   号化処理を施して得られたデータを含み、 前記複数の復号モードの少なくとも１つは、直交変換係
   数の一部の高周波成分に対して“Ｏ”を挿入して復号す
   ることを特徴とする請求項１〜７にいずれか１項に記載
   の復号装置。
9. 【請求項９】 前記符号化データは、少なくとも画像デ
   ータに対して直交変換処理、量子化処理、及び可変長符
   号化処理を施して得られたデータを含み、 前記複数の復号モードの少なくとも１つは、直交変換係
   数の一部を抽出して逆直交変換処理し、その処理したデ
   ータに対して拡大処理することを特徴とする請求項１〜
   ７のいずれか１項に記載の復号装置。
10. 【請求項１０】 前記符号化データは、少なくとも複数
    のピクチャから構成される画像データを符号化して得ら
    れたデータを含み、 前記複数の復号モードの少なくとも１つは、一部のピク
    チャに限り復号することを特徴とする請求項１〜７のい
    ずれか１項に記載の復号装置。
11. 【請求項１１】 前記符号化データは、画像データを符
    号化したデータであり、前記復号手段によって復号され
    た画像データを表示する表示手段を有することを特徴と
    する請求項１〜１０のいずれか１項に記載の復号装置。
12. 【請求項１２】 符号化データを入力する入力手段と、 復号処理の負荷が異なる複数の復号モードを有し、前記
    符号化データを復号する復号手段と、 前記復号手段によって復号されたデータを記憶する記憶
    手段と、 前記記憶手段に対するデータ記憶状態を検出する検出手
    段と、 前記検出手段の出力に応じて前記復号化モードを選択す
    る選択手段とを備えることを特徴とする復号装置。
13. 【請求項１３】 前記検出手段は、所定単位時間当たり
    の前記記憶手段におけるオーバーフロー及びアンダーフ
    ローの回数を検出することを特徴とする請求項１２に記
    載の復号装置。
14. 【請求項１４】 前記検出手段は、所定単位時間当たり
    の前記記憶手段におけるデータ書込位置及び読出位置の
    差分を検出することを特徴とする請求項１２に記戟の復
    号装置。
15. 【請求項１５】 前記符号化データは、少なくとも画像
    データに対して直交変換処理、量子化処理、及び可変長
    符号化処理を施して得られたデータを含み、前記複数の
    復号モードの少なくとも１つは、直交変換係数の一部の
    高周波成分に対して“Ｏ”を挿入して復号することを特
    徴とする請求項１２〜１４にいずれか１項に記載の復号
    装置。
16. 【請求項１６】 前記符号化データは、少なくとも画像
    データに対して直交変換処理、量子化処理、及び可変長
    符号化処理を施して得られたデータを含み、前記複数の
    復号モードの少なくとも１つは、直交変換係数の一部を
    抽出して逆直交変換処理し、その処理したデータに対し
    て拡大処理することを特徴とする請求項１２〜１４のい
    ずれか１項に記載の復号装置。
17. 【請求項１７】 前記符号化データは、少なくとも複数
    のピクチャから構成される画像データを符号化して得ら
    れたデータを含み、 前記複数の復号モードの少なくとも１つは、一部のピク
    チャに限り復号することを特徴とする請求項１２〜１４
    のいずれか１項に記載の復号装置。
18. 【請求項１８】 前記符号化データは、画像データを符
    号化したデータであり、 前記復号手段によって復号された画像データを表示する
    表示手段を備えることを特徴とする請求項１２〜１７の
    いずれか１項に記載の復号装置。
19. 【請求項１９】 受信した符号化データの復号処理を含
    む複数のデータ処理を行なうテレビジョン装置であっ
    て、 請求項１〜１８のいずれか１項に記載の復号装置の機能
    を有することを特徴とするテレビジョン装置。
20. 【請求項２０】 複数の機器が互いに通信可能に接続さ
    れてなるデータ処理システムであって、 上記複数の機器のうち少なくとも１つの機器は、請求項
    １〜１８の何れかに記載の復号装置の機能、又は請求項
    １９記載のテレビジョン装置の機能を有することを特徴
    とするデータ処理システム。
21. 【請求項２１】 符号化データを入力する入力ステップ
    と、 前記符号化データを記憶手段に記憶する記憶ステップ
    と、 復号処理の負荷が異なる複数の復号モードと有し、前記
    記億手段に記憶された符号化データを復号する復号ステ
    ップと、 前記記憶手段に対する前記符号化データ記憶状態を検出
    する検出ステップと、 前記検出ステップの検出結果に応じて前記復号モードを
    選択する選択ステップとを含むことを特徴とする復号方
    法。
22. 【請求項２２】 符号化データを入力する入力ステップ
    と、 復号処理の負荷が異なる複数の復号モードを有し、前記
    符号化データを復号する復号ステップと、 前記復号ステップによって復号されたデータを記憶手段
    に記憶する記憶ステップと、 前記記憶手段に対するデータ記憶状態を検出する検出ス
    テップと、 前記検出ステップの検出結果に応じて前記復号化モード
    を選択する選択ステップとを含むことを特徴とする復号
    方法。
23. 【請求項２３】 復号処理プログラムが記憶されたコン
    ピュータ読出可能な記憶媒体であって、 符号化データを入力する入力工程のコードと、 前記符号化データを記憶手段に記憶する記憶工程のコー
    ドと、 復号処理の負荷が異なる複数の復号モードを有し、前記
    記億手段に記憶された符号化データを復号する復号工程
    のコードと、 前記記憶手段に対する前記符号化データ記憶状態を検出
    する検出工程のコードと、 前記検出ステップの検出結果に応じて前記復号モードを
    選択する選択工程のコードとを記憶したことを特徴とす
    る記憶媒体。
24. 【請求項２４】 復号処理プログラムが記憶されたコン
    ピュータ読出可能な記憶媒体であって、 符号化データを入力する入力工程のコードと、 復号処理の負荷が異なる複数の復号モードを有し、前記
    符号化データを復号する復号工程のコードと、 前記復号工程によって復号されたデータを記憶手段に記
    憶する記憶工程のコードと、 前記記憶手段に対するデータ記憶状態を検出する検出工
    程のコードと、 前記検出工程の検出結果に応じて前記復号化モードを選
    択する選択工程のコードとを記憶したことを特徴とする
    記憶媒体。