JP2002199405A

JP2002199405A - 動画像再生装置、及び動画像再生方法

Info

Publication number: JP2002199405A
Application number: JP2000392933A
Authority: JP
Inventors: Shoji Hoshina; 彰治保科
Original assignee: Seiko Epson Corp
Current assignee: Seiko Epson Corp
Priority date: 2000-12-25
Filing date: 2000-12-25
Publication date: 2002-07-12

Abstract

(57)【要約】【課題】ＣＰＵの処理負担が重い場合でも適切に動画
を表示でき、また、トリックモードにも適切に対応す
る。【解決手段】画素重み付けブレンド動作を含む複数種
類のブレンド動作を、フレームデータを記憶するフレー
ムバッファ量、処理を行う処理部の負荷、再生速度、に
応じて選択的に行う。ＣＰＵの処理負担が重い場合でも
適切に動画を表示でき、また、トリックモードにも適切
に対応できる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は動画像再生装置及び
動画像再生方法に関し、特にフレーム間相関を用いた圧
縮を行う動画データ等を再生する装置及び再生する方法
に関する。

【０００２】

【従来の技術】図９には、一般的な動画再生装置の構成
が示されている。同図において、動画再生装置は、ＣＰ
Ｕ２１と、ＲＯＭ２２と、ＲＡＭ２３と、モニタ（Ｍｏ
ｎｉｔｅｒ）２４と、スピーカ（Ｓｐｅａｋｅｒ）２５
と、その他のインタフェース２６（ＯｔｈｅｒＩ／
Ｆ）と、これらを相互に接続するバス（Ｂｕｓ）２７と
を含んで構成されている。ＲＡＭ２３には、プログラム
（ｐｒｏｇｒａｍ）２３ａが格納されている他、ストリ
ームバッファ２３ｂ、デコードされたオーディオデータ
用のバッファ（ＤｅｃｏｄｅｄＡｕｄｉｏＢｕｆｆ
ｅｒ）２３ｃと、デコードされたビデオデータ用のバッ
ファ（ＤｅｃｏｄｅｄＶｉｄｅｏＢｕｆｆｅｒ）２
３ｄとが実現されている。ＣＰＵ２１が行うデコード機
能を、専用のハードウェアとして分離して設けることも
ある。

【０００３】かかる構成からなる動画再生装置におい
て、データストリームが入力されると、ストリームバッ
ファ２３ｂに格納され、その格納されたデータについて
ＣＰＵ２１がデコード処理等を行って動画を再生する。
図１０は図９中のＣＰＵ２１が行うデコード機能を、専
用のハードウェアとして構成した場合を示すブロック図
である。同図に示されている動画像再生装置は、入力さ
れる圧縮済みのデータストリーム１１を保持するストリ
ームバッファ（ＳｔｒｅａｍＢｕｆｆｅｒ）１と、こ
のストリームバッファ１に保持されたデータストリーム
についてオーディオとビデオとに分離するスプリッタ
（ｓｐｌｉｔｔｅｒ）２と、スプリッタ２によって分離
された、圧縮されているオーディオデータ２ａをデコー
ドするオーディオデコーダ３と、このオーディオデコー
ダ３のデコード結果であるオーディオデータを音声とし
て出力するためのスピーカ（Ｓｐｅａｋｅｒ）４とを含
んで構成されている。

【０００４】また、同図の動画像再生装置は、スプリッ
タ２によって分離された、圧縮されているビデオデータ
２ｂをデコードするビデオデコーダ（ＶｉｄｅｏＤｅ
ｃｏｒｄｅｒ）５と、このビデオデコーダ５のデコード
結果であるビデオデータについてＭＰＥＧ再生処理を行
うカラースペースコンバータ（ＣｏｌｏｒＳｐａｃｅ
Ｃｏｎｖｅｒｔｅｒ）６と、このＭＰＥＧ再生処理後
のデータについて表示を行うモニタ（Ｍｏｎｉｔｅｒ）
７と、スプリッタ２によって分離された、制御データ２
ｃによって各部を制御するコントローラ（Ｃｏｎｔｒｏ
ｌｌｅｒ）８とを含んで構成されている。

【０００５】かかる構成において、データストリーム１
１が入力されると、スプリッタ２によってオーディオデ
ータ、ビデオデータ、制御データに分離される。分離さ
れたオーディオデータは、オーディオデコーダ３によっ
てデコードされた後、スピーカ４から音声として出力さ
れる。また、分離されたビデオデータからはＭＰＥＧ処
理によってＩフレーム、Ｐフレーム、Ｂ１フレーム、Ｂ
２フレーム、Ｂ３フレームそれぞれが生成される。この
生成された各フレームがカラースペースコンバータ６を
介してモニタ７に表示される。

【０００６】ここで、上述した図９及び図１０の動画像
再生装置における、インターフレーム予測符号化につい
て図１１を参照して説明する。同図にはインターフレー
ム予測符号化のうち、双方向予測符号化の場合のフレー
ム構造例が示されている。同図においては、Ｂフレー
ム、Ｂフレーム、Ｉフレーム、Ｂフレーム、Ｂフレー
ム、Ｂフレーム、Ｐフレーム、Ｂフレーム、Ｂフレーム
が順に並んでいる。

【０００７】Ｉフレームは、周知のＪＰＥＧ１枚分と同
等のデータからなるフレームである。このＩフレーム
は、それ自身が独立して１フレームのデータを有してい
るＩデータがデコードされることによって作製される。
Ｐフレームは、連続する２つの画像データの差分データ
から作製されるフレームである。このＰフレームは、そ
れよりも時間的に前にあるＩフレームのデータ又はＰフ
レームのデータに基づいてデコードされて作製される。
Ｐフレームが連続する場合には、一方のＰフレームから
他方のＰフレームが作製される。

【０００８】Ｂフレームは連続する２つのフレームの間
を補完するフレームである。このＢフレームは、それよ
りも時間的に前にあるＩフレームのデータ及びＰフレー
ムのデータに基づいてデコードされて作製される。な
お、双方向予測符号化に限らず、他の予測符号化につい
ても以上と同様にデコードして作製される。

【０００９】

【発明が解決しようとする課題】一般に、動画再生装置
においては、ＭＰＥＧ処理によって動画を再生する場
合、デコード、フレーム処理、フレーム描画処理の負
荷調整、早送り、スロー再生等のトリックモードへの
対応について、種々の問題がある。デコード、フレーム処理、フレーム描画処理の負荷調
整この負荷調整は、主に、ＣＰＵの処理負担が重い場合に
適用される。負荷の調整は、フレームドロップ（フレー
ム間引き）によって行う。このフレームドロップについ
ては、特開平１０−１９１２５１号公報等に記載されて
いる。しかしながら、フレームドロップを単に行うと、
動画表示における時間解像度が低下するという問題があ
る。早送り、スロー再生等のトリックモードへの対応早送りの場合には、時間解像度、空間解像度ともに、低
くてもかまわないが、通常に再生すると、処理負担が大
きくなる。逆にスロー再生の場合には、処理負担が小さ
くなる代わりに、時間解像度、空間解像度の高い画像が
要求される。この処理負担と解像度とのバランスをとる
必要がある。

【００１０】本発明は上述した従来技術の欠点を解決す
るためになされたものであり、その目的はＣＰＵの処理
負担が重い場合でも適切に動画を表示でき、また、トリ
ックモードにも適切に対応することのできる動画像再生
装置及び動画像再生方法を提供することである。

【００１１】

【課題を解決するための手段】本発明による動画像再生
装置は、デコード及びフレーム処理並びに描画を互いに
連携させつつ並列に行って動画を再生する動画像再生装
置であって、前記各処理において画素のデータを作製す
る際、複数種類のブレンド動作を選択的に行うことを特
徴とする。また、前記複数種類のブレンド動作には、同
一フレーム中の近接位置の画素のデータと、他のフレー
ムの同一又は近接位置の画素のデータとについて、時間
軸上の距離に応じて重み付けを行いつつブレンドする画
素重み付けブレンド動作を含むことを特徴とする。

【００１２】さらに本装置は、キャッシュメモリを有
し、前記画素重み付けブレンド動作においては、同一フ
レーム中の近接位置の画素のデータと、他のフレームの
同一又は近接位置の画素のデータとを前記キャッシュメ
モリに同時に移動させた後、時間軸上の距離に応じて重
み付けを行うことを特徴とする。キャッシュメモリにデ
ータを移動させて画素重み付けブレンド処理を行うこと
により、処理をより高速に行うことができる。

【００１３】また、前記画素重み付けブレンド動作は、
同一フレーム中の近接位置の画素のデータと、他のフレ
ームの同一位置の画素のデータとをキャッシュメモリに
移動させた後、時間軸上の距離に応じて重み付けを行
う。前記複数の動作には、デコード処理及びフレーム重
み付けブレンド動作をも含む。必要なデータをキャッシ
ュメモリに移動させて画素重み付けブレンド処理を行う
ことにより、処理をより高速に行うことができる。

【００１４】なお、前記複数種類のブレンド動作は、フ
レームデータを記憶するフレームバッファ量、処理を行
う処理部の負荷、スロー再生及び通常再生並びに早送り
再生等の画像再生速度のいずれかに応じて選択する。デ
コード、フレーム処理、フレーム描画処理の負荷調整の
ため、処理を行うＣＰＵの処理負担が重い場合等、単に
フレームドロップを行うと、動画表示における時間解像
度が低下するため、本発明ではフレーム処理をスケーラ
ブルに施している。

【００１５】本発明による動画像再生方法は、動画を再
生する動画像再生方法であって、ある画素のデータを作
製する場合、その画素と同一フレーム中の近接位置の画
素のデータと、他のフレームの同一位置の画素のデータ
とについて、時間軸上の距離に応じて重み付けを行いつ
つブレンドすることを特徴とする。この場合、同一フレ
ーム中の近接位置の画素のデータと、他のフレームの同
一又は近接位置の画素のデータとをキャッシュメモリに
同時に移動させた後、時間軸上の距離に応じて重み付け
を行うことを特徴とする。キャッシュメモリにデータを
移動させて画素重み付けブレンド処理を行うことによ
り、処理をより高速に行うことができる。

【００１６】

【発明の実施の形態】次に、図面を参照して本発明の実
施の形態について説明する。なお、以下の説明において
参照する各図では、他の図と同等部分は同一符号によっ
て示されている。図１は本発明による動画像再生装置に
おける処理の概要を示す図である。同図に示されている
ように、本実施形態の動画像再生装置におけるＭＰＥＧ
処理においては、まず、ハフマンデコーダ（Ｈｕｆｆｍ
ａｎＤｅｃｏｄｅｒ）３１によってハフマンデコード
処理を行う。次に、逆離散コサイン変換（ｉｎｖｅｒｓ
ｅｄｉｓｃｒｅｔｔｅｃｏｓｉｎｅｔｒａｎｓｆｏ
ｒｍ）部（ＩＤＣＴ）３２によって逆離散コサイン変換
を行う。この変換結果をフレームバッファ部（Ｆｒａｍ
ｅＢｕｆｆｅｒ）３４に格納する。このフレームバッ
ファ３４は、複数のフレームバッファ３４ａ、３４ｂ、
３４ｃ、３４ｄ…によって構成されており、それら複数
のフレームバッファがセレクタ３５ａ及び３５ｂによっ
て選択的に使用される。フレームバッファ部３４に格納
されているフレームデータについては、画素（ピクセ
ル）ごとの加乗重み付け処理（画素重み付けブレンド）
を行うピクセルセレクトモジュール（ＰｉｘｅｌＳｅ
ｌｅｃｔ）３６と、フレーム全体同士を足し合わせる処
理を行うブレンドモジュール（Ｂｒｅｎｄ）３７と、動
き補償を行う動き補償モジュール（ＭｏｔｉｏｎＣｏ
ｍｐｅｎｓａｔｉｏｎ）３８とによって、所定の処理が
行われる。これらの各モジュールによる処理結果は加算
器３３に入力され、逆コサイン離散変換結果と加算され
て、さらにフレームに格納される。

【００１７】ここで、図２は、ラスタスキャン時の１フ
レーム内の画素間距離を示す図である。同図において、
フレームＳにおいて、今着目している画素Ｓ１から距離
が「１」である画素はＳ２１，Ｓ２２，Ｓ２３，Ｓ２４
の各画素である。また、画素Ｓ１から距離が「２」であ
る画素はＳ３１，Ｓ３２の各画素である。さらにまた、
画素Ｓ１から距離が「３」である画素はＳ４１，Ｓ４
２，Ｓ４３の各画素である。本例では、これらの各画素
のうち、今着目している画素Ｓ１からみて、画素間距離
が「１」のもの、すなわち画素Ｓ２１，Ｓ２２，Ｓ２
３，Ｓ２４を重み付けに用いることにする。

【００１８】図３には、現在処理している処理フレーム
Ｓの他に、過去フレームＫ、未来作製済フレームＭ１、
未来未作製フレームＭ２が示されている。同図におい
て、各フレームは、例えば、過去フレームＫ、未来作製
済フレームＭ１、処理フレームＳ、未来未作製フレーム
Ｍ２、の順に作製される。そして、画素重み付けブレン
ドを行う場合、現在処理している処理フレームＳにおい
て、ある画素のデータを作製する場合、同一フレーム内
の周辺の画素の他に、既に作製されている他のフレーム
内の同一位置の画素をも参照する。すなわち、処理フレ
ームＳにおいて、処理対象である画素Ｓ１については、
その画素Ｓ１が属するフレーム（処理フレームＳ）にお
いて時間軸上の距離が「１」である画素Ｓ２１〜Ｓ２
４、その画素Ｓ１が属するフレームＳ以前のフレーム
（過去フレームＫ）の同一位置の画素Ｋ１、及びその画
素Ｓ１が属するフレームＳ以後のフレームで作製済みの
もの（未来作製済フレームＭ１）の同一位置の画素Ｍ１
１、の各データを参照してデータを作製する。なお、以
上のように画素のデータを作製する場合、後述するよう
に他の画素を参照し、イントラフレームの画素重み付け
平均と、インターフレームの画素重み付け平均とを用い
る。つまり、同一フレーム内の画素のみならず、他のフ
レームの同一位置の画素をも参照し、さらに時間軸上の
距離に応じて重み付けを行って、その画素のデータを作
製する。

【００１９】図４を参照して重み付け平均処理について
説明する。同図には、前フレーム、現フレーム及び次フ
レームが示されている。ここでは、前フレームの１６個
の画素に符号０^-〜１５^-、現フレームの１６個の画素に
符号０⁰〜１５⁰、次フレームの１６個の画素に符号０⁺
〜１５⁺がそれぞれ付されている。符号に付されている
「０」は現フレーム（今、処理対象としているフレー
ム）、「−」は前フレーム（過去のフレーム）、「＋」
は次フレーム（未来のフレーム）、をそれぞれ示してい
る。

【００２０】現フレームの画素のデータを作製する場
合、画素間距離が「１」の画素のみのデータを加算す
る。例えば、現フレームの画素０⁰については、以下の
ように重み付けを行う。０⁰＝（２×０^-＋０⁺）／３ …（１）式（１）において、画素０⁰のデータを作製する場合、
分母の値「３」に対して、分子の第１項では前フレーム
の同一位置の画素０^-に値「２」を乗じている。一方、
分子の第２項では次フレームの同一位置の画素０⁺をそ
のまま用いているので、値「１」を乗じているのと同等
になる。したがって、式（１）においては、前フレーム
の画素に２／３、次フレームの画素に１／３、の比率で
重み付けを行っている。つまり、次フレームの画素より
も前フレームの画素に、強く重み付けを行っている。

【００２１】また、現フレームの画素１⁰については、
以下のように重み付けを行う。１⁰＝（０⁰／２）＋｛（２×１^-）＋１⁺｝／６ …（２）式（２）において、画素１⁰のデータを作製する場合、
第１項では分母が値「２」であるので、現フレームの画
素０⁰に強く重み付けを行っている。第２項では分母の
値「６」に対して、分子の第１項では前フレームの同一
位置の画素１^-に値「２」を乗じている。一方、分子の
第２項では次フレームの同一位置の画素１⁺をそのまま
用いているので、値「１」を乗じているのと同等にな
る。したがって、式（２）においては、現フレームの画
素に１／２、前フレームの画素に２／６、次フレームの
画素に１／６、の比率で重み付けを行っている。

【００２２】さらに、現フレームの画素５⁰について
は、以下のように重み付けを行う。５⁰＝（０⁰＋１⁰＋２⁰＋４⁰）／８＋｛（２×５^-）＋５⁺｝／６ …（３）式（３）において、画素５⁰のデータを作製する場合、
第１項において分母が値「８」であり、分子が現フレー
ムの４つの画素０⁰、１⁰、２⁰、４⁰である。第２項にお
いて分母の値「６」に対して、分子の第１項では前フレ
ームの同一位置の画素５^-に値「２」を乗じている。一
方、分子の第２項では次フレームの同一位置の画素５⁺
をそのまま用いているので、値「１」を乗じているのと
同等になる。したがって、式（３）においては、現フレ
ームの４つの画素に４／８、前フレームの画素に２／
６、次フレームの画素に１／６、の比率で重み付けを行
っている。

【００２３】以上のように、画素を作製する場合、異な
る画素フレームの画素よりも同じフレームの画素を強く
重み付けする。すなわち、その画素と同じフレーム内の
画素については重み付けを強くし、異なるフレーム内の
画素については重み付けを弱くする。また、異なる画素
フレームを参照する場合、次フレームの画素よりも前フ
レームの画素に、強く重み付けを行っている。

【００２４】ところで、重み付けブレンドを行うには、
演算処理が必要であるので、動画をスムーズに再生する
には、この処理時間をできるだけ短くする必要がある。
そこで、本例では、メモリマッピングを工夫することに
よって、処理時間の短縮化を図っている。図５には、フ
レームバッファについてのメモリマップ例が示されてい
る。同図を参照すると、現フレームの画素０についての
データとして、輝度データＹ１〜Ｙ４と、色差データＣ
１及びＣ２とが配置されている。そして、その隣に前フ
レームの同じ位置の画素０^-についてのデータとして、
同じく、輝度データＹ１〜Ｙ４と、色差データＣ１及び
Ｃ２とが配置されている。さらに、その隣に次フレーム
の同じ位置の画素０⁺についてのデータとして、同じ
く、輝度データＹ１〜Ｙ４と、色差データＣ１及びＣ２
とが配置されている。このように、異なるフレームに属
する同じ位置の画素についてのデータを接近させるよう
にマッピングしているので、重み付けブレンド処理を短
時間で行うことができる。

【００２５】つまり、一般的には同じフレーム内の画素
のデータが隣り合ってマッピングされるが、本例におい
ては重み付けブレンド処理を行い易いようにパック（Ｐ
ａｃｋｅｄ）方式を採用し、異なるフレームの同一位置
の画素のデータ同士のメモリ上での距離を小さくしてい
る。このため、重み付けブレンド処理時間を短縮するこ
とができる。

【００２６】さらに、図６に示されているように、ＣＰ
Ｕ２１とバス２７との間にキャッシュメモリ２８を設
け、重み付けブレンド処理に関連あるデータ、すなわち
輝度データＹ１〜Ｙ４並びに色差データＣ１及びＣ２を
まとめてキャッシュメモリ２８に移動すれば、処理をよ
り高速に行うことができる。さらにＣＰＵ２１内にもキ
ャッシュメモリを設け、ＣＰＵ２１内に１次キャッシュ
メモリ、ＣＰＵ２１とバス２７との間に２次キャッシュ
メモリを設けた構成にしてもよい。このように構成すれ
ば、さらに処理を高速に行うことができる。

【００２７】なお、図５において輝度データと２つの色
差データとが４：１：１の比率になるようにデータが構
成されているのは、画像を見る人間の目は、色の違いよ
りも明るさの違いを認識しやすいからであり、画質要求
によっては、４：２：２や４：４：４の比率でも良い。
図７は、デコード等の処理を示すフローチャートであ
る。同図において、まず所定時間分のデコードを行う
（ステップＳ１０１）。ある程度デコードバッファにデ
ータがたまったら、例えば１フレーム以上たまったら、
再生を開始する（ステップＳ１０２）。該当フレームの
再生が許可されれば、そのフレームの再生が行われる
（ステップＳ１０３→Ｓ１０４）。ストリームにあって
再生対象のフレームが終了したならば、その処理プロセ
スを消滅させる（ステップＳ１０５→Ｓ１０６）。再生
対象のフレームが終了していないならば、ステップＳ１
０３に戻りフレームの再生が継続される（ステップＳ１
０５→Ｓ１０３）。

【００２８】該当フレームのデコードが許可されれば、
そのフレームのデコードが行われる（ステップＳ１０３
→Ｓ１０７→Ｓ１０８）。このデコードによって、Ｉフ
レーム又はＰフレームが作製される。ストリームにあっ
てデコード対象のフレームが終了したならば、その処理
プロセスを消滅させる（ステップＳ１０９→Ｓ１１
０）。

【００２９】また、フレーム処理の選択が行われ（ステ
ップＳ１０３→Ｓ１０７→Ｓ１１１）、選択されたフレ
ーム処理が行われる（ステップＳ１１１→Ｓ１１２）。
このフレーム処理は、例えば上述した重み付けブレンド
処理である。ストリームにあってフレーム処理が終了し
たならば、その処理プロセスを消滅させる（ステップＳ
１１３→Ｓ１１４）。

【００３０】なお、各フレームについて、フレーム再生
処理、フレームデコード処理及びフレーム処理を、同時
に実行するので、図７中のステップＳ１０４，ステップ
Ｓ１０８，ステップＳ１１２は、それぞれの処理ループ
が同時に回ることになる。これにより、各処理を互いに
連携させつつ並列に行って、動画を再生することができ
る。

【００３１】図８は、複数の処理のうち、実行すべき処
理を選択するための条件を示すフローチャートである。
同図において、まずデータストリームが入力されると、
まずそのデータがＩフレームか、Ｐフレームか、Ｂフレ
ームか、が判断される（ステップＳ２０１、Ｓ２０２、
Ｓ２０３）。Ｉフレームであると判断されれば、そのま
まデコード処理が行われる（ステップＳ２０１→Ｓ２０
７）。

【００３２】Ｐフレームであると判断されれば、次にＰ
フレームデコードが省略できるか判断され、省略できな
ければ、そのままデコード処理が行われる（ステップＳ
２０４→Ｓ２０７）。省略できれば、フレームバッファ
量に応じて、以下の処理のいずれかが選択されて実行さ
れる（ステップＳ２０４→Ｓ２０５）。すなわち、デコ
ード処理（ステップＳ２０７）、重み付けブレンド処理
（ステップＳ２０８）、ブレンド処理（ステップＳ２０
９）、フレーム非生成処理（ステップＳ２１０）、デコ
ード及び補間フレーム作製処理（ステップＳ２１１）、
のいずれかが行われる。

【００３３】Ｂフレームであると判断された場合も同様
に、フレームバッファ量に応じて、以下の処理のいずれ
かが選択されて実行される（ステップＳ２０３→Ｓ２０
６）。すなわち、デコード処理（ステップＳ２０７）、
重み付けブレンド処理（ステップＳ２００８）、ブレン
ド処理（ステップＳ２０９）、フレーム非生成処理（ス
テップＳ２１０）、デコード及び補間フレーム作製処理
（ステップＳ２１１）、のいずれかが行われる。

【００３４】なお、処理を選択的に行う場合、１段階又
は多段階の閾値を設けて、以上の処理を選択的に行う。
例えば、フレームバッファ量、すなわち表示までに至っ
ていないフレームの枚数について、予め設定された閾値
に応じて、実行すべき処理を選択する。この場合、スロ
ー再生処理については高画質が要求されるので必要なフ
レームの枚数が多く、ＣＰＵの負荷が大である。一方、
通常の再生処理や早送り再生処理については高画質が要
求されないので必要なフレームの枚数は少なく、ＣＰＵ
の負荷は小である。このように、フレームバッファ量、
ＣＰＵの負荷、画像再生速度に応じて選択的に処理を行
う。

【００３５】以上のように、本装置は、デコード処理及
びフレーム処理並びに描画処理を互いに連携させつつ並
列に行って動画を再生する装置であり、各処理におい
て、デコード処理、画素重み付けブレンド処理及びフレ
ーム重み付けブレンド処理の各処理を選択的に行ってい
るのである。デコード、フレーム処理、フレーム描画処
理の負荷調整のため、ＣＰＵの処理負担が重い場合等、
単にフレームドロップを行うと、動画表示における時間
解像度が低下するため、本発明ではフレーム処理をスケ
ーラブルに施している。

【００３６】また、動画像の再生において、早送りの場
合には、時間解像度、空間解像度ともに、低くてもかま
わないが、通常に再生すると、処理負担が大きくなる。
逆にスロー再生の場合には、処理負担が小さくなる代わ
りに、時間解像度、空間解像度の高い画像が要求され
る。本装置においては、この処理負担と解像度とのバラ
ンスをとっている。

【００３７】さらに、本装置では、時間解像度及び空間
解像度の擬似的向上を利用し、エンコード済みデータ以
上の品質の映像を再生することによって、高精細再生を
実現している。ところで、本装置においては、以下のよ
うな動画像再生方法が実現されている。すなわち、ある
画素のデータを作製する場合、その画素と同一フレーム
中の近接位置の画素のデータと、他のフレームの同一位
置の画素のデータとについて、時間軸上の距離に応じて
重み付けを行いつつブレンドする動画像再生方法が本装
置において実現されている。そして、同一フレーム中の
近接位置の画素のデータと、他のフレームの同一位置の
画素のデータとをキャッシュメモリに同時に移動させた
後、時間軸上の距離に応じて重み付けを行うのである。
このように、キャッシュメモリにデータを移動させて画
素重み付けブレンド処理を行うことにより、処理をより
高速に行うことができる。

【００３８】

【発明の効果】以上説明したように本発明は、同一フレ
ーム中の近接位置の画素のデータと、他のフレームの同
一位置の画素のデータとについて、時間軸上の距離に応
じて重み付けを行いつつブレンドする画素重み付けブレ
ンド動作を含む複数種類のブレンド動作を、フレームデ
ータを記憶するフレームバッファ量、処理を行う処理部
の負荷、再生速度、に応じて選択的に行うことにより、
ＣＰＵの処理負担が重い場合でも適切に動画を表示で
き、また、トリックモードにも適切に対応することでき
るという効果がある。

【図面の簡単な説明】

【図１】本発明による動画像再生装置における処理の概
要を示すブロック図である。

【図２】ラスタスキャン時の１フレーム内の画素間距離
を示す図である。

【図３】現在処理している処理フレーム、過去フレー
ム、未来作製済フレーム及び未来未作製フレームを示す
図である。

【図４】重み付け平均処理を説明するための図である。

【図５】フレームバッファについてのメモリマップ例を
示す図である。

【図６】キャッシュメモリを設けた動画再生装置の構成
を示すブロック図である。

【図７】デコード等の処理を示すフローチャートであ
る。

【図８】実行すべき処理の判断条件を示すフローチャー
トである。

【図９】一般的な動画再生装置の構成を示すブロック図
である。

【図１０】図９中のＣＰＵの機能を専用のハードウェア
で実現した動画像再生装置の構成を示すブロック図であ
る。

【図１１】双方向予測符号化の場合のフレーム構造例を
示す図である。

【符号の説明】

１ストリームバッファ２スプリッタ３オーディオデコーダ５ビデオデコーダ３４フレームバッファ部３６ピクセルセレクトモジュール３７ブレンドモジュール３８動き補償モジュール

Claims

【特許請求の範囲】

【請求項１】デコード及びフレーム処理並びに描画を
互いに連携させつつ並列に行って動画を再生する動画像
再生装置であって、前記各処理において画素のデータを
作製する際、複数種類のブレンド動作を選択的に行うこ
とを特徴とする動画像再生装置。
【請求項２】前記複数種類のブレンド動作には、同一
フレーム中の近接位置の画素のデータと、他のフレーム
の同一又は近接位置の画素のデータとについて、時間軸
上の距離に応じて重み付けを行いつつブレンドする画素
重み付けブレンド動作を含むことを特徴とする請求項１
記載の動画像再生装置。
【請求項３】キャッシュメモリを有し、前記画素重み
付けブレンド動作においては、同一フレーム中の近接位
置の画素のデータと、他のフレームの同一又は近接位置
の画素のデータとを前記キャッシュメモリに同時に移動
させた後、時間軸上の距離に応じて重み付けを行うこと
を特徴とする請求項２記載の動画像再生装置。
【請求項４】前記複数種類のブレンド動作には、デコ
ード処理及びフレーム重み付けブレンド動作をも含むこ
とを特徴とする請求項２又は３記載の動画像再生装置。
【請求項５】前記複数種類のブレンド動作は、フレー
ムデータを記憶するフレームバッファ量に応じて選択さ
れることを特徴とする請求項１〜４のいずれかに記載の
動画像再生装置。
【請求項６】前記複数種類のブレンド動作は、処理を
行う処理部の負荷に応じて選択されることを特徴とする
請求項１〜４のいずれかに記載の動画像再生装置。
【請求項７】前記複数種類のブレンド動作は、画像再
生速度に応じて選択されることを特徴とする請求項１〜
４のいずれかに記載の動画像再生装置。
【請求項８】動画を再生する動画像再生方法であっ
て、ある画素のデータを作製する場合、その画素と同一
フレーム中の近接位置の画素のデータと、他のフレーム
の同一位置の画素のデータとについて、時間軸上の距離
に応じて重み付けを行いつつブレンドすることを特徴と
する動画像再生方法。
【請求項９】同一フレーム中の近接位置の画素のデー
タと、他のフレームの同一又は近接位置の画素のデータ
とをキャッシュメモリに同時に移動させた後、時間軸上
の距離に応じて重み付けを行うことを特徴とする請求項
８記載の動画像再生方法。