JP2003219420A

JP2003219420A - 画像再生装置

Info

Publication number: JP2003219420A
Application number: JP2002013987A
Authority: JP
Inventors: Atsushi Shimizu; 敦志清水
Original assignee: Sanyo Electric Co Ltd
Current assignee: Sanyo Electric Co Ltd
Priority date: 2002-01-23
Filing date: 2002-01-23
Publication date: 2003-07-31

Abstract

(57)【要約】【課題】フレームバッファを増やすことなく、かつ、
十分なスピードで複数のサムネイルの再生を可能とす
る。【解決手段】サムネイル構成部６３は、ＭＰＥＧ映像
中のＩピクチャ、Ｐピクチャ、Ｂピクチャを複合するに
際し、ＤＣＴ逆変換を行うに代えて各矩形領域の座標
（０，０）のＤＣＴ係数（当該ブロックの平均値）を代
用する。すなわち、Ｉピクチャに対しては、当該ＤＣＴ
係数をそのまま採用し、ＰピクチャおよびＢピクチャに
対しては当該ＤＣＴ係数に動き補償値を加算することに
よって、サムネイルデータを構築する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＭＰＥＧ映像デー
タを復号する画像再生装置に関し、特に、ＭＰＥＧ映像
データから縮小画像（以下、静止画・動画に関わらず、
この縮小画像をサムネイルと称す）を再生する再生装置
に関するものである。

【０００２】

【従来の技術】複数ストリームの映像情報から複数のサ
ムネイルを同時再生する方法として、例えば特開２００
０−２０９５２１号公報に記載の再生方法を採用するこ
とができる。かかる再生方法は、ＭＰＥＧ圧縮された映
像情報の内、Ｉピクチャ情報のみを抜き出して復号し、
それ以外のＰピクチャ情報やＢピクチャ情報はスキップ
するというものである。

【０００３】

【発明が解決しようとする課題】上記従来の再生方法に
よれば、Ｉピクチャ情報のみを復号するものであるか
ら、再生されるサムネイルはコマ送りの動画となってし
まう。

【０００４】また、当該復号部は通常再生を目的として
設計されているため、複数ストリームの情報を同時に処
理しようとすると、復号部の前段にあるバッファがオー
バーフローを起こしてしまい、正常な復号が不可能とな
ってしまう。

【０００５】そこで、本発明は、かかる問題を解消し、
フレームバッファを増やすことなく、かつ、十分なスピ
ードで複数のサムネイルの再生を可能とするものであ
る。

【０００６】

【課題を解決するための手段】請求項１に記載の発明
は、ＤＣＴ（ＤｉｓｃｒｅｔｅＣｏｓｉｎｅＴｒａ
ｎｓｆｏｒｍ）変換を用いて圧縮されたＭＰＥＧ映像を
復号する再生装置であって、逆ＤＣＴ変換を行わずにＭ
ＰＥＧ映像を復号する復号手段を有することを特徴とす
る画像再生装置である。

【０００７】請求項２に記載の発明は、請求項１に記載
の画像再生装置において、前記復号手段は、ＤＣＴ変換
の対象となる矩形領域中の一つの座標位置におけるＤＣ
Ｔ係数を抽出するＤＣＴ係数抽出手段と、当該矩形領域
の動き補償値を算出する動き補償値算出手段とを備え、
Ｉピクチャに対しては前記ＤＣＴ係数抽出手段によって
抽出されたＤＣＴ係数を当該矩形領域の復号データとし
て出力し、ＰピクチャおよびＢピクチャに対しては前記
ＤＣＴ係数抽出手段によって抽出されたＤＣＴ係数に前
記動き補償値算出手段によって算出された動き補償値を
加算して当該矩形領域の復号データとして出力する、こ
とを特徴とする。

【０００８】請求項３に記載の発明は、請求項２に記載
の画像再生装置において、前記ＤＣＴ係数抽出手段は、
座標（０，０）におけるＤＣＴ係数を抽出することを特
徴とする。

【０００９】請求項４に記載の発明は、請求項２または
３に記載の画像再生装置において、前記復号手段は、前
記復号データを格納するデコードバッファ手段を備え、
前記動き補償値算出手段は、当該デコードバッファに格
納された復号データに基づいて当該矩形領域の動き補償
値を算出する、ことを特徴とする。

【００１０】請求項５に記載の発明は、請求項４に記載
の画像再生装置において、多重化されたストリームデー
タをストリーム毎に分別するデマルチプレクス手段と、
当該分別されたストリームデータをそれぞれ格納するス
トリームバッファ手段と、当該ストリームバッファ手段
から前記ストリームデータを順次読み取って前記復号手
段に供給するバッファ読み取り制御手段とをさらに備
え、前記デコードバッファ手段は、ストリーム毎に区分
して前記復号データを格納し、前記動き補償値算出手段
は、順次供給されるストリームデータの内、当該ストリ
ームに対応する復号データを前記デコードバッファ手段
から読み出して前記動き補償値を算出する、ことを特徴
とする。

【００１１】請求項６に記載の発明は、請求項５に記載
の画像再生装置において、前記復号手段から出力される
復号データに基づいてストリーム毎に縮小画面を生成す
るとともに、生成した縮小画面を配列合成して１つの出
力画面を生成する合成手段をさらに備えることを特徴と
する。

【００１２】請求項７に記載の発明は、ＤＣＴ変換を用
いて圧縮されたＭＰＥＧ映像を復号する再生装置であっ
て、多重化されたストリームデータを分別するデマルチ
プレクス手段と、デマルチプレクスされたデータをそれ
ぞれ格納するストリームバッファと、ストリームバッフ
ァからデータを読み取るバッファ読み取り制御部と、縮
小画像を復号する縮小画像構成手段と、復号された複数
の画像を合成する手段とを備え、前記バッファ読み取り
制御部は、ストリーム毎にフレーム単位でデータを読み
出し、前記縮小画像構成手段は、前記ＭＰＥＧ映像中の
Ｉピクチャに対しては、各矩形領域中の座標（０，０）
のＤＣＴ係数を当該矩形領域の復号データとして採用
し、ＢピクチャおよびＰピクチャに対しては、各矩形領
域中の座標（０，０）のＤＣＴ係数に動き補償の値を加
算したものを当該矩形領域の復号データとして採用する
ことにより、前記フレーム単位のデータを縮小画像デー
タに復号することを特徴とする。

【００１３】本発明の特徴は、以下に示す実施の形態の
説明により更に明らかとなろう。

【００１４】なお、請求項における「復号手段」は実施
の形態におけるサムネイル用復号部６が対応する。請求
項における「ＤＣＴ係数抽出手段」は実施の形態におけ
るサムネイル用復号部６が対応する。請求項における
「動き補償値算出手段」実施の形態におけるサムネイル
用復号部６が対応する。請求項における「縮小画像構成
手段」は実施の形態におけるサムネイル構成部６が対応
する。請求項における「デコードバッファ手段」は実施
の形態におけるデコードバッファ６５ａ、６５ｂが対応
する。請求項における「デマルチプレクス手段」は実施
の形態におけるデマルチプレクサ２が対応する。

【００１５】また、請求項における「矩形領域」とは、
フレームデータをＤＣＴ変換する際の矩形領域を意味
し、実施の形態においてはブロックおよびマクロブロッ
クが対応する。

【００１６】ただし、以下の実施の形態は、あくまで
も、本発明の一つの実施形態であって、本発明ないし各
構成要件の用語の意義は、以下の実施の形態に記載され
たものに制限されるものではない。

【００１７】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して説明する。

【００１８】図１に、本発明の一実施形態における動画
サムネイルを再生するデジタルＴＶ放送受像器の構成を
示す。

【００１９】デジタルＴＶ放送受像器は、データ受信／
復調部１、２つのデマルチプレクサ２、ストリームデー
タ記憶部３、５つのストリームバッファ４ａ、４ｂ、４
ｃ、４ｄ、４ｅ、バッファ読み取り制御部５、サムネイ
ル用復号部６、主映像用復号部７、合成／ＤＡ変換部
８、モニタ９から構成されている。

【００２０】ここで、データ受信／復調部１は、放送波
を受信し、復調するものである。デマルチプレクサ２
は、多重化されたストリームをストリーム毎に分離する
ものである。ストリームデータ記憶部４は、ストリーム
を記憶保持するものである。ストリームバッファ４ａ、
４ｂ、４ｃ、４ｄ、４ｅは、デコードに際し、ストリー
ム毎にデータをバッファリングするものである。バッフ
ァ読み取り制御部５は、前記ストリームバッファ４ａ、
４ｂ、４ｃ、４ｄを切り替えてデータを読み出し、サム
ネイル用復号部６に入力するものである。サムネイル用
復号部６は、サムネイルを復号するＭＰＥＧ復号部であ
る。主映像用復号部７は、主映像を復号するＭＰＥＧ復
号部である。合成／ＤＡ変換部８は、主映像とサムネイ
ルを合成し、ＤＡ変換を行うものである。モニタ９は、
合成／ＤＡ変換部８によって合成された画像を表示する
ものである。

【００２１】図２は、デジタルＴＶ放送受像器のモニタ
９に表示される画面の一例であり、主映像と４ストリー
ム分のサムネイルが同時に表示される。

【００２２】以下、主映像と４ストリームのサムネイル
再生を行う場合について説明する。

【００２３】図１のデジタルＴＶ放送受像器において、
複数ストリームのデータがマルチプレクスされたデータ
は、データ受信／復調部１によって受信され復調され
る。復調された信号はデマルチプレクサ２で各ストリー
ムのデータに分けられる。この内、主映像用データは、
ストリームバッファ４ｅに格納された後、主映像用のＭ
ＰＥＧ復号部７によって再生される。

【００２４】主映像と同時に４ストリームのサムネイル
再生を行う場合、マルチプレクスされたＭＰＥＧストリ
ームはサムネイル用デマルチプレクサ２によってストリ
ームごとに振り分けられ、それぞれストリームバッファ
４ａ、４ｂ、４ｃ、４ｄに格納される。

【００２５】尚、ストリームデータ記憶部３は、録画番
組の記憶部であり、番組をリアルタイムで視聴しなが
ら、録画番組を視聴するといった機能を実現する場合に
使用する。詳しくは後述する。

【００２６】ストリームバッファ４ａ、４ｂ、４ｃ、４
ｄに格納された各ストリームの情報は、バッファ読み取
り制御部５により順次読み出され、サムネイル用復号部
６に供給される。すなわち、バッファ読み取り制御部５
は、ストリームバッファ４ａから最初のフレームを読み
だし、サムネイル用復号部６に入力する。次に、ストリ
ームバッファ４ｂから最初のフレームを読みだし、再び
サムネイル用復号部６に入力する。以下同様に、ストリ
ームバッファ４ｃ、４ｄからフレームを読み出し、しか
る後、ストリームバッファ４ａに戻り、上記動作を繰り
返す。

【００２７】かかるストリームバッファ４ａ、４ｂ、４
ｃ、４ｄからのフレームデータの読み出しと、サムネイ
ル用復号部６への供給は、再生が終了するまで継続され
る。

【００２８】なお、上記バッファ読み取り制御部５にお
ける処理においては、異なるストリームがフレーム単位
で切替えられてサムネイル用復号部６に入力されるの
で、各フレームがどのストリームに対応するものかを識
別するための手段が必要となる。バッファ読み取り制御
部５では、各ＭＰＥＧストリームの全般的な情報として
ＭＰＥＧストリームの先頭にあるシーケンスヘッダを保
持し、それぞれのフレームの先頭に付加する。

【００２９】以上のようにして入力された各ストリーム
のフレームデータは、サムネイル用復号部６にて処理さ
れ（詳細は後述する）、ストリーム毎のサムネイル情報
に復号されて順次出力される。かかるサムネイル情報
は、それぞれ合成／ＤＡ変換部８に送られ、主映像用復
号部７からの主映像用画像情報と合成される。しかし
て、図２に示すような１枚のフレーム画像としてモニタ
９に表示される。

【００３０】次に図３を参照しながら、サムネイル用復
号部６の構成および動作について説明する。

【００３１】図３はサムネイル用復号部６の詳細な構成
を示した図である。

【００３２】サムネイル用復号部６は、通常のＭＰＥＧ
−１やＭＰＥＧ−２復号部と同様に、可変長復号化を行
うＶＬＤ部６１、逆量子化を行うＩＱ部６２、サムネイ
ル構成部６３、２つのデコードバッファ選択部６４ａ、
６４ｂ、２つのデコードバッファ６５ａ、６５ｂから構
成されている。

【００３３】ここで、デコードバッファ６５ａ、６５ｂ
はストリーム毎にエリア分割されており、各ストリーム
のフレームデータをサムネイル構成部６３で処理して生
成したＩピクチャおよびＰピクチャのサムネイルデータ
は、それぞれ対応するエリアに格納される。また、所定
のストリームについて、例えばデコードバッファ６５ａ
にＩピクチャのサムネイルデータを格納したとすると、
次に生成されるＰピクチャのサムネイルデータはデコー
ドバッファ６５ｂに格納される。なお、デコードバッフ
ァ６５ａおよび６５ｂに対するサムネイルデータの蓄積
処理については、後に図６および図７を参照しながら詳
細に説明する。

【００３４】なお、図示の如く、当該サムネイル用復号
部６においては、通常ＭＰＥＧ−１やＭＰＥＧ−２復号
部で必須である、逆ＤＣＴ変換を行うＩＤＣＴ部が配備
されていない。したがって、復号処理時間の大部分を占
める逆ＤＣＴ変換処理時間を省略でき、もって、迅速な
サムネイル画像の復号を実現できる。

【００３５】次に、図４および図５を参照しながら、サ
ムネイル構成部６３における逆ＤＣＴ変換を行わないサ
ムネイルの生成処理について説明する。

【００３６】テレビ等では輝度情報Ｙに対して、色差情
報Ｃｂ、Ｃrを横方向（テレビ画面の走査方向）に１／
２、縦方向に１／２のサイズにサンプリングする。即
ち、各画素に対して輝度情報は１対１に対応するが、色
差情報は、隣接する４つの画素について同じ色差が使用
される。これは４：２：０と呼ばれるフォーマットで、
以降このフォーマットで実施例を説明する。

【００３７】まず、ＭＰＥＧにおけるデータ圧縮につい
て説明する。

【００３８】ＭＰＥＧではフレームデータを圧縮する
際、フレームを矩形領域（以下、ブロックまたはマクロ
ブロック）に分割し、その領域単位でＤＣＴ変換を行
う。輝度については、８×８サイズのブロックに対して
ＤＣＴ変換を行い、これにより８×８サイズのＤＣＴ係
数が得られ、それを圧縮データとして使用する。色差に
ついては、１６×１６サイズのマクロブロック単位で処
理するが、放送波として入力されるストリームにおい
て、縦横両方向に１／２にサブサンプリングしてＤＣＴ
変換がなされているため、ＤＣＴ係数のサイズは８×８
である。

【００３９】Ｉピクチャでは、上記矩形領域についてピ
クセルデータが直接ＤＣＴ変換される。また、Ｐピクチ
ャやＢピクチャは過去や未来のフレームとの差分値がＤ
ＣＴ変換される。

【００４０】なお、差分値の算出方法、ＤＣＴ変換処理
およびその他の圧縮処理等の詳細については、ＭＰＥＧ
圧縮技術において周知であるので、ここではその説明を
省略する。

【００４１】次に、以上のようにＤＣＴ変換された圧縮
データからサムネイル画像データを生成するための処理
について以下に説明する。

【００４２】１．輝度データの生成まず、サムネイル画像の輝度データの生成について説明
する。

【００４３】Ｉピクチャに対するサムネイル画像デー
タの生成Ｉピクチャの場合、上記のようにしてＤＣＴ変換が行わ
れているので、各ブロックの座標（０，０）における輝
度のＤＣＴ係数は、当該ブロック内のピクセルデータの
平均値を示すようになる。したがって、各ブロックの座
標（０，０）のＤＣＴ係数を集めると、縦横が８分の１
に圧縮されたサムネイル画像の輝度を生成することがで
きる。

【００４４】たとえば、図４において、各ブロック１０
２、１０３、１０４、・・・の座標（０，０）のＤＣＴ
係数は、各ブロック中のピクセルデータの平均値を表
す。したがって、各ブロック１０２、１０３、１０４、
・・・の座標（０，０）の値を集めて順番に配列する
と、サムネイル１０１の輝度データを生成することがで
きる。ここで、サムネイルの輝度データは８×８のブロ
ックから一つの輝度データが生成される。したがって、
サムネイル画像のサイズは通常サイズの画像に比べ、縦
横が８分の１に圧縮された画像とすることができる。

【００４５】Ｐピクチャに対するサムネイル画像デー
タの生成典型的なＭＰＥＧストリームでは、Ｉピクチャ、Ｐピク
チャ、Ｂピクチャ、・・・といった順にデータが構成さ
れる。上記のようにしてＩピクチャのサムネイル情報が
生成されると、かかるサムネイル情報は、デコードバッ
ファ６５ａ、６５ｂのうちの一方、例えばデコードバッ
ファ６５ａに格納される。Ｐピクチャのサムネイル情報
は、かかるデコードバッファ６５ａに格納されたＩピク
チャのサムネイルデータを利用して生成される。

【００４６】通常、Ｐピクチャの復号は、Ｐピクチャの
各ブロックを逆ＤＣＴ変換した値と、既に復号済みのＩ
ピクチャの各ブロックに対する当該Ｐピクチャの各ブロ
ックの動き補償を行った値とを加算することにより行わ
れる。したがって、Ｐピクチャのサムネイル（輝度デー
タ）を生成する場合も、同様に動き補償を考慮すること
になるが、逆ＤＣＴ変換を省略するために、上記Ｉピク
チャと同様、Ｐピクチャの各ブロックに逆ＤＣＴ変換を
行わず、当該ブロックの座標（０，０）のＤＣＴ係数
（当該ブロックの平均値）を利用する。

【００４７】図５に示すように、処理中のブロックに動
き補償を行ったブロックをブロック１１１とする。デコ
ードバッファ６５ａに格納されている上記Ｉピクチャの
ブロック１１２、１１３、１１４、１１５の値をそれぞ
れｂ１、ｂ２、ｂ３、ｂ４をとし、これらを用いてＰピ
クチャの値を求める。

【００４８】ブロック１１１のｘ方向の長さ１１６、１
１７、ｙ方向の長さ１１８、１１９をそれぞれｘ１、ｘ
２、ｙ１、ｙ２とすると、４：２：０フォーマットの場
合、輝度については、ｘ２＝８−ｘ１，ｙ２＝８−ｙ１・・・（１）となる。かかる動き補償に必要な値ｘ１、ｘ２、ｙ１、
ｙ２は、当該ＰピクチャのＭＰＥＧデータに含まれてい
る。したがって、Ｉピクチャに対する動き補償を行った
値は、ｂｃ＝（ｘ１＊ｙ１＊ｂ１＋ｘ２＊ｙ１＊ｂ２＋ｘ１＊ｙ２＊ｂ３＋ｘ２＊ｙ２＊ｂ４）／６４・・・（２）となる。

【００４９】上記の通り、Ｐピクチャにおける当該ブロ
ックの輝度データは、当該ブロック自身の輝度データに
対し上記動き補償の値を加算して求めることができる。
したがって、当該ブロック自身の輝度データｂｐとして
当該ブロックの座標（０，０）のＤＣＴ係数を用いる
と、当該ブロックの輝度データは、次式で求めることが
できる。

【００５０】ｂ＝ｂｃ＋ｂｐ・・・（３）このように算出した各ブロックの輝度データを集めて順
番に配列することにより、上記Ｉピクチャの場合と同
様、縦横が８分の１に圧縮されたサムネイル画像の輝度
データを生成することができる。

【００５１】Ｂピクチャに対するサムネイル画像デー
タの生成Ｂピクチャについては、動き予測に関し、どのフレーム
を参照するかによって次の４種類がある。

【００５２】フレーム内予測、順方向フレーム間予測
（過去のフレームを参照）、逆方向フレーム間予測（未
来のフレームを参照）、内挿的フレーム間予測（過去と
未来のフレームを参照）の４種類である。これらの動き
予測において、参照されるIピクチャまたはPピクチャの
フレームはいずれも、デコードバッファ６５ａ、６５ｂ
に格納されている。

【００５３】ここで、順方向フレーム間予測（過去のフ
レームを参照）、逆方向フレーム間予測（未来のフレー
ムを参照）については、Ｐピクチャに対するサムネイル
画像データの生成の場合と同様に考えることができる。
内挿的フレーム間予測の場合、順方向予測（過去のフレ
ーム）と逆方向予測（未来のフレーム）の二つの予測を
行い、対応画素間で平均をとる。

【００５４】すなわち、例えば、過去のＩピクチャフレ
ームがデコードバッファ６５ａに格納されており、未来
のＰピクチャフレームがデコードバッファ６５ｂに格納
されているとすると、それぞれのフレームに対する動き
補償を行った値ｂｃ１、未来のＰピクチャに対する動き
補償を行った値ｂｃ２は、前述の（１）および（２）式
で求めることができる。

【００５５】内挿的フレーム間予測における動き補償の
値ｂｃは、ｂｃ１とｂｃ２の平均であり、次式によって
求めることができる。

【００５６】ｂｃ＝（ｂｃ１＋ｂｃ２）／２・・・（４）したがって、Ｂピクチャにおける当該ブロックの輝度デ
ータは、前述の（３）式を用いて、当該ブロック自身の
輝度データに対し上記動き補償の値ｂｃを加算して求め
ることができる。

【００５７】このように算出した各ブロックの輝度デー
タを集めて順番に配列することにより、上記Ｉピクチャ
およびＰピクチャの場合と同様、縦横が８分の１に圧縮
されたサムネイル画像の輝度データを生成することがで
きる。

【００５８】２．色差データの生成色差についても上記輝度データと同様にして生成するこ
とができる。すなわち、Ｉピクチャーについては座標
（０，０）のＤＣＴ係数がそのまま利用される。また、
ＰピクチャおよびＢピクチャについては、上記（１）〜
（３）式と同様の処理によって算出できる。ただし、上
記の通り、色差データは１６×１６サイズのマクロブロ
ック単位で処理するため、上記（１）式および（２）式
は以下のように修正される。

【００５９】ｘ２＝１６−ｘ１，ｙ２＝１６−ｙ１・・・（１）ｂｃ＝（ｘ１＊ｙ１＊ｂ１＋ｘ２＊ｙ１＊ｂ２＋ｘ１＊ｙ２＊ｂ３＋ｘ２＊ｙ２＊ｂ４）／２５６・・・（２）以上の通り、本実施の形態に係るサムネイル復号部６に
おいては、逆ＤＣＴを行わずにＩピクチャ、Ｐピクチャ
およびＢピクチャのサムネイルデータを生成することが
できる。通常、ＭＰＥＧの復号では、逆ＤＣＴ変換が処
理の大部分を占め、時間を要する。したがって、本実施
の形態によれば、逆ＤＣＴ変換を行う必要がないことか
ら、高速にサムネイルを生成することができる。

【００６０】図６は、本実施例におけるサムネイルの生
成のタイミングを示す図である。同図に示すように、本
来のフレームを出力する時刻Ｔ１からＴ２の間に４つの
ストリームのサムネイルを生成することができる。

【００６１】１２１〜１２８は、分割された各ストリー
ムＡ、Ｂ、Ｃ、Ｄに対し１枚のフレームデータを生成す
るに必要な時間である。時分割で処理する場合、各スト
リームの全般的な情報であるシーケンスヘッダをフレー
ムそれぞれの先頭に付加する。サムネイル構成部６３
は、4つのストリーム毎に生成されるサムネイルの値
を、デコードバッファ６５ａ、６５ｂ内の指定された領
域にそれぞれ格納する。以下、デコードバッファの割り
振りについて説明する。

【００６２】まず、サムネイル構成部６３において、ス
トリームＡのＩピクチャから順に、ブロック単位（また
はマクロブロック単位）で輝度および色差の値（座標
（０，０）のＤＣＴ係数）を取り出し、デコードバッフ
ァ６５ａの領域ａの対応する点に格納する。

【００６３】領域ａのサイズは、通常のサイズ、即ち、
デコードバッファ６５ａ、６５ｂの大きさの１／８であ
る。このとき、サムネイル構成部６３は、ストリーム識
別用入力信号により、現在の入力がストリームＡである
ことが判るため、この結果に応じてストリーム識別信号
を出力し、デコードバッファ選択部６４ａに対し、デコ
ードに用いるバッファ領域を領域ａへと切り換える制御
を行う。

【００６４】また、デコードバッファ６５ａに格納する
のと同時に、このサムネイルの輝度および色差の値をフ
レームデータとして出力する。この時、後にストリーム
を判別する際に用いられるストリーム識別用出力信号も
出力する。

【００６５】領域ａにストリームＡのＩピクチャのサム
ネイルが格納された後に、ストリームＢのＩピクチャの
サムネイルを生成する。生成されたサムネイルデータ
（輝度および色差の値）は、上記と同様の手順で、デコ
ードバッファ６５ａの領域ｂに格納する。続いて、スト
リームＣおよびストリームＤのＩピクチャについても、
デコードバッファ６５ａの領域ｃおよびｄにそれぞれ格
納する。

【００６６】次に、ストリームＡのＰピクチャのサムネ
イルを生成する。

【００６７】サムネイル構成部６３では、デコードバッ
ファ６５ａの領域aに格納されているＩピクチャを使っ
て、Ｐピクチャのサムネイルを生成し、このときの輝度
および色差値は順次、フレームバッファ選択部６４ｂの
制御のもとで、デコードバッファ６５ｂの領域ａに格納
される。Ｐピクチャのサムネイルは前述の近似計算によ
り求められる。

【００６８】同様にして、ストリームＢ〜Ｄについて
も、対応するストリームのＩピクチャを使って、Ｐピク
チャを生成し、フレームバッファ選択部６４ｂの制御の
もとで、デコードバッファ６５ｂの対応する領域に格納
される。次に、ストリームＡのＢピクチャのサムネイル
を、デコードバッファ６５ａの領域ａに格納されている
Ｉピクチャと、デコードバッファ６５ｂの領域ａに格納
されているＰピクチャを使って生成する。生成されたＢ
ピクチャのサムネイルは、上記と同様、フレームデータ
として出力される。同様にして、ストリームＢ〜Ｄにつ
いても、Ｂピクチャを生成する。

【００６９】新たにＩピクチャまたはＰピクチャが出現
した時は、２つのデコードバッファのうち、古い方のデ
ータが格納されているデコードバッファに新しいピクチ
ャデータを格納する。上記生成されたフレームは、ピク
チャヘッダ内のＴｅｍｐｏｒａｌＲｅｆｅｒｅｎｃｅ
に記述された順に出力される。

【００７０】１つのフレームに対して格納すべきサムネ
イルのデータ量（サイズ）は、ｘ、ｙ軸共に通常のフレ
ームの１／８となるため、通常のＭＰＥＧデコードの際
に用いられるデコードバッファをそのまま共用すると、
最大６４ストリームまでサムネイルデータを格納するこ
とができる。このように本実施の形態によれば、通常の
ＭＰＥＧ復号部に用いられるデコードバッファ容量で、
複数ストリームの動画サムネイルを再生することができ
るようになる。

【００７１】本実施の形態では、デジタルＴＶ放送を想
定したデジタルＴＶ放送受像器について説明したが、こ
れに代えて、ハードディスクから複数のＭＰＥＧストリ
ームを読みだし、動画サムネイル再生をすることも可能
である。この場合、ハードディスクから読みだされたデ
ータは既に各ストリームに分離された状態となり、デマ
ルチプレクサ２は不要となるが、その他の構成は図１に
示す構成と同様にすることができる。

【００７２】また、本実施例のデジタルＴＶ放送受像器
は、録画中のＴＶ番組の視聴しながら、録画済みの部分
を後追い再生することも可能である。視聴中の番組はあ
らかじめ予約録画されているものとし、ＴＶ番組の開始
からストリームデータ記憶部３に記録されている。

【００７３】現在放送中の番組の視聴は、デマルチプレ
クサ２、ストリームバッファ４ｅ、主映像用のＭＰＥＧ
復号部７を用いて再生することにより可能となる。

【００７４】同時に表示する動画サムネイルは、録画済
み部分をシーンごとに読みだし、表示するようにするこ
ともでき、サムネイルの再生については、前述と同様と
することができる。

【００７５】モニタ９の主映像表示部９ａには、現在放
送中の番組が再生され、サムネイル表示部９ｂ、９ｃ、
９ｄ、９e、既に録画済みのシーンごとのサムネイルが
動画表示される。また、本実施例では、主映像とサムネ
イルを同時に表示可能とする構成としたが、主映像とサ
ムネイルのどちらか一方を切り換えて表示するように構
成することもできる。この場合、ＭＰＥＧ復号部とし
て、図７に示す従来のＭＰＥＧ復号部のみを用いて、画
像が主映像かサムネイルかを判別した結果、主映像の場
合、ＩＤＣＴ１３３を行うように、またサムネイルの場
合、ＩＤＣＴ１３２をスキップするように制御すること
で実現可能となる。

【００７６】このように、本実施形態における動画サム
ネイル再生装置によれば、ＭＰＥＧ映像中のＩピクチャ
に対しては、各ブロックに対して１つの座標値を用いて
近似し、その値をデコードバッファに格納し、Ｂピクチ
ャおよびＰピクチャに対しては、デコードバッファに格
納されたブロック値を用いて近似するため、従来のＭＰ
ＥＧ復号処理と比べて、復号処理を簡素化できる。ま
た、これによって、従来のＭＰＥＧ復号部で必要とする
ＩＤＣＴが不要となるため、サムネイル再生の処理速度
も高速化できる。

【００７７】図７は、通常のＭＰＥＧ−１やＭＰＥＧ−
２復号部の構成を示した図である。ここで、本発明にお
けるサムネイル用復号部６の構成と通常のＭＰＥＧ−１
やＭＰＥＧ−２復号部の構成を比較すると、ＶＬＤ部１
３１とＩＱ部１３２はサムネイル用復号部６におけるＶ
ＬＤ部６１とＩＱ部６２と同じである。また、デコード
バッファ１３４ａ、１３４ｂはサムネイル用復号部６に
おけるフレームバッファ６５ａ、６５ｂとメモリーサイ
ズも同じである。

【００７８】逆ＤＣＴ変換を行うＩＤＣＴ部１３３は、
サムネイル用復号部６では前述のとおり不要となる。

【００７９】このため、本実施の形態のようにサムネイ
ル用復号部６を採用する場合、ＩＤＣＴ部を除く構成と
することができる。よって、復号化処理に要する時間
も、復号化の大部分を占めていたＩＤＣＴ処理時間分、
短縮することができるため、多くのサムネイル画像をデ
コードすることができる。

【００８０】また本実施の形態では、デコードバッファ
に、同時に表示される複数のフレーム単位の縮小画像を
ストリーム毎に格納するため、従来のＭＰＥＧ復号にお
ける表示が１ストリームの画像であるのに対して、動画
サムネイルの場合、最大６４ストリーム分の画像を表示
することができる。

【００８１】

【発明の効果】本発明の動画サムネイル再生装置によれ
ば、フレームバッファおよびデコードバッファを増やす
ことなく、かつ、十分なスピードで、多数の動画サムネ
イルの再生を行うことができる。

【図面の簡単な説明】

【図１】本発明の一実施形態である動画サムネイル再生
装置（デジタルＴＶ）の構成を示すブロック図

【図２】上記実施形態における表示画面の例である。

【図３】上記実施形態におけるサムネイル用復号部の構
成図

【図４】上記実施形態におけるＩピクチャのサムネイル
構成要素値を求めるための模式図

【図５】上記実施形態におけるＰピクチャとＢピクチャ
のサムネイル構成要素値を求めるための模式図

【図６】上記実施形態における再生時のタイミングを示
す図

【図７】通常のＭＰＥＧ復号部の内部構成を示すブロッ
ク図

【符号の説明】

２デマルチプレクサ４ａ〜４ｅストリームバッファ５バッファ読み取り制御部６サムネイル用復号部６３サムネイル構成部６４ａ、６４ｂデコードバッファ選択部６５ａ、６５ｂデコードバッファ

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5C025 BA25 BA27 BA28 BA30 CA06 DA01 5C059 KK37 KK38 MA00 MA05 MA13 MA23 MC11 NN21 PP05 PP06 PP07 SS02 TA06 TA49 TB08 TC04 TC27 UA05 UA32 5J064 AA02 AA04 BA16 BB01 BB03 BC01 BC02

Claims

【特許請求の範囲】

【請求項１】ＤＣＴ変換を用いて圧縮されたＭＰＥＧ
映像を復号する画像再生装置であって、逆ＤＣＴ変換を
行わずにＭＰＥＧ映像を復号する復号手段を有すること
を特徴とする画像再生装置。
【請求項２】請求項１において、前記復号手段は、Ｄ
ＣＴ変換の対象となる矩形領域中の一つの座標位置にお
けるＤＣＴ係数を抽出するＤＣＴ係数抽出手段と、当該
矩形領域の動き補償値を算出する動き補償値算出手段と
を備え、Ｉピクチャに対しては前記ＤＣＴ係数抽出手段によって
抽出されたＤＣＴ係数を当該矩形領域の復号データとし
て出力し、ＰピクチャおよびＢピクチャに対しては前記
ＤＣＴ係数抽出手段によって抽出されたＤＣＴ係数に前
記動き補償値算出手段によって算出された動き補償値を
加算して当該矩形領域の復号データとして出力すること
を特徴とする画像再生装置。
【請求項３】請求項２において、前記ＤＣＴ係数抽出
手段は、座標（０，０）におけるＤＣＴ係数を抽出する
ことを特徴とする画像再生装置。
【請求項４】請求項２または３において、前記復号手
段は、前記復号データを格納するデコードバッファ手段
を備え、前記動き補償値算出手段は、当該デコードバッファに格
納された復号データに基づいて当該矩形領域の動き補償
値を算出することを特徴とする画像再生装置。
【請求項５】請求項４において、多重化されたストリ
ームデータをストリーム毎に分別するデマルチプレクス
手段と、当該分別されたストリームデータをそれぞれ格
納するストリームバッファ手段と、当該ストリームバッ
ファ手段から前記ストリームデータを順次読み取って前
記復号手段に供給するバッファ読み取り制御手段とをさ
らに備え、前記デコードバッファ手段は、ストリーム毎に区分して
前記復号データを格納し、前記動き補償値算出手段は、順次供給されるストリーム
データの内、当該ストリームに対応する復号データを前
記デコードバッファ手段から読み出して前記動き補償値
を算出することを特徴とする画像再生装置。
【請求項６】請求項５において、前記復号手段から出
力される復号データに基づいてストリーム毎に縮小画面
を生成するとともに、生成した縮小画面を配列合成して
１つの出力画面を生成する合成手段をさらに備えること
を特徴とする画像再生装置。
【請求項７】ＤＣＴ変換を用いて圧縮されたＭＰＥＧ
映像を復号する再生装置であって、多重化されたストリームデータを分別するデマルチプレ
クス手段と、デマルチプレクスされたデータをそれぞれ
格納するストリームバッファと、ストリームバッファか
らデータを読み取るバッファ読み取り制御部と、縮小画
像を復号する縮小画像構成手段と、復号された複数の画
像を合成する手段とを備え、前記バッファ読み取り制御部は、ストリーム毎にフレー
ム単位でデータを読み出し、前記縮小画像構成手段は、前記ＭＰＥＧ映像中のＩピク
チャに対しては、各矩形領域中の座標（０，０）のＤＣ
Ｔ係数を当該矩形領域の復号データとして採用し、Ｂピ
クチャおよびＰピクチャに対しては、各矩形領域中の座
標（０，０）のＤＣＴ係数に動き補償の値を加算したも
のを当該矩形領域の復号データとして採用することによ
り、前記フレーム単位のデータを縮小画像データに復号
することを特徴とする画像再生装置。