JP2001346165A - 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機 - Google Patents

画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機

Info

Publication number
JP2001346165A
JP2001346165A JP2000370562A JP2000370562A JP2001346165A JP 2001346165 A JP2001346165 A JP 2001346165A JP 2000370562 A JP2000370562 A JP 2000370562A JP 2000370562 A JP2000370562 A JP 2000370562A JP 2001346165 A JP2001346165 A JP 2001346165A
Authority
JP
Japan
Prior art keywords
data
image
decoder
picture
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000370562A
Other languages
English (en)
Other versions
JP3403168B2 (ja
Inventor
Shigeyuki Okada
茂之 岡田
Hideki Yamauchi
英樹 山内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2000370562A priority Critical patent/JP3403168B2/ja
Publication of JP2001346165A publication Critical patent/JP2001346165A/ja
Application granted granted Critical
Publication of JP3403168B2 publication Critical patent/JP3403168B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

(57)【要約】 【課題】 滑らかな逆転再生を行うことのできる画像処
理装置および画像処理法法を提供すること。 【解決手段】 逆転再生時、MPEGビデオデコーダ5
で1画面毎の再生画像データが時系列に順次生成され、
データ量低減回路100によって画素数が低減された
後、MPEGビデオエンコーダ6に入力される。MPE
Gビデオエンコーダ6はそのデータを全てIピクチャに
再符号化する。再符号化データはハードディスク4の記
憶領域4aに上書きされる。MPEGビデオデコーダ7
は、この再符号化データを、反時系列的に読み出して順
次復号し、データ量復元回路200によって画素数を復
元した後、表示回路9に出力する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画像処理方法およ
びこれを利用可能な画像処理装置およびテレビジョン受
像機に関する。本発明は、例えばMPEG(Moving Pic
ture Expert Group)規格に従って符号化されたデータ
を処理する技術に関する。
【0002】
【従来の技術】マルチメディアで扱われる情報は、膨大
な量で且つ多種多様であり、これらの情報を高速に処理
することがマルチメディアの実用化を図る上で必要とな
る。情報を高速に処理するためには、データの圧縮・伸
長技術が不可欠となる。そのようなデータの圧縮・伸長
技術として「MPEG」方式が挙げられる。このMPE
G方式は、ISO(International Organization for S
tandardization)/IEC(International Electro-te
chnical Commission)傘下のMPEG委員会(ISO/IEC
JTC1/SC29/WG11)によって標準化されつつある。MPE
G方式を利用した画像処理装置は、ムービーカメラ、ス
チルカメラ、テレビジョン、ビデオCD再生装置、DV
D再生装置など、様々な画像関連機器に組み込まれてい
る。
【0003】MPEGで取り扱われるビデオデータは動
画に関するものであり、その動画は1秒間に複数枚、例
えば30枚のフレーム、すなわち静止画またはコマによ
って構成されている。図1に示すように、ビデオデータ
は、シーケンス(Sequence)、GOP(Group Of Pictu
res)、ピクチャ(Picture)、スライス(Slice)、マ
クロブロック(Macroblock)、ブロック(Block)の順
に6層の階層構造から成る。1枚のピクチャを構成する
スライスの個数は一定ではなく、1個のスライスを構成
するマクロブロックの個数も一定ではない。なお、図1
では、マクロブロック層およびブロック層については省
略してある。
【0004】また、MPEGには主に符号化レートの違
いにより、主に、MPEG−1,MPEG−2の2つの
方式がある。MPEG−1においてフレームはピクチャ
に対応している。MPEG−2においては、フレームま
たはフィールドをピクチャに対応させることもできる。
フィールドは、2枚で1枚のフレームを構成している。
ピクチャにフレームが対応している構造はフレーム構造
と呼ばれ、ピクチャにフィールドが対応している構造は
フィールド構造と呼ばれる。
【0005】MPEGでは、フレーム間予測と呼ばれる
圧縮技術を用いる。フレーム間予測は、フレーム間のデ
ータを時間的な相関に基づいて圧縮する。フレーム間予
測では双方向予測が行われる。双方向予測とは、過去の
再生画像またはピクチャから現在の再生画像を予測する
順方向予測と、未来の再生画像から現在の再生画像を予
測する逆方向予測とを併用することである。
【0006】この双方向予測は、Iピクチャ(Intra-Pi
cture),Pピクチャ(Predictive-Picture),Bピク
チャ(Bidirectionally predictive-Picture)と呼ばれ
る3つのタイプのピクチャを規定している。Iピクチャ
は、フレーム内符号化処理によって過去や未来の再生画
像とは無関係に独立して生成される画像である。ランダ
ムアクセスを行うために、GOP内には最低1枚のIピ
クチャが必要である。Iピクチャ内の全てのマクロブロ
ック・タイプは、フレーム内予測画面(IntraFrame)で
ある。Pピクチャは、フレーム間符号化処理によって、
順方向予測、すなわち過去のIピクチャまたはPピクチ
ャからの予測により生成される。Pピクチャ内のマクロ
ブロック・タイプは、フレーム内予測画面と順方向予測
画面(Forward Inter Frame)の両方を含む。
【0007】Bピクチャは、フレーム間符号化処理によ
って、双方向予測により生成される。双方向予測におい
てBピクチャは、以下に示す3つの予測のうちいずれか
1つにより生成される。 順方向予測;過去のIピクチャまたはPピクチャから
の予測 逆方向予測;未来のIピクチャまたはPピクチャから
の予測 双方向予測;過去および未来のIピクチャまたはPピ
クチャからの予測 Bピクチャ内のマクロブロック・タイプは、フレーム内
予測画面、順方向予測画面、逆方向予測画面(Backward
Inter Frame)、内挿的予測画面(Interpolative Inte
r Frame)の4つのタイプを含む。
【0008】これらI,P,Bピクチャがそれぞれ符号
化される。つまり、Iピクチャは過去や未来のピクチャ
がなくても生成される。これに対し、Pピクチャは過去
のピクチャがないと生成されず、Bピクチャは過去また
は未来のピクチャがないと生成されない。ただし、Pピ
クチャやBピクチャでも、マクロブロック・タイプが内
挿的予測画面の場合、そのマクロブロックは過去や未来
のピクチャがなくても生成される。
【0009】フレーム間予測では、まず、Iピクチャが
周期的に生成される。次に、Iピクチャよりも数フレー
ム先のフレームがPピクチャとして生成される。このP
ピクチャは、過去から現在への一方向(順方向)の予測
により生成される。つづいて、Iピクチャの前、Pピク
チャの後に位置するフレームがBピクチャとして生成さ
れる。このBピクチャを生成するとき、順方向予測,逆
方向予測,双方向予測の3つの中から最適な予測方法が
選択される。連続した動画では一般的に、現在の画像と
その前後の画像とはよく似ており、異なっているのは、
そのごく一部分に過ぎない。そこで、前のフレームと次
のフレームとは同じであると仮定し、両フレーム間に変
化があればその差分のみを抽出して圧縮する。例えば、
前のフレームをIピクチャ、次のフレームをPピクチャ
とし、差分がBピクチャのデータとして抽出される。こ
れにより、フレーム間のデータを時間的な相関に基づい
て圧縮することができる。MPEGビデオパートに準拠
して符号化されたビデオデータのデータ列またはビット
ストリームは、MPEGビデオストリームと呼ばれる。
【0010】MPEG−1は主に、ビデオCD(Compac
t Disc)やCD−ROM(CD-ReadOnly Memory )など
の蓄積メディアに対応している。MPEG−2は、ビデ
オCD,CD−ROM,DVD(Digital Video Dis
k),VTR(Video Tape Recorder)などの蓄積メディ
アだけでなく、LAN(Local Area Network)などの通
信メディア、地上波放送や衛星放送およびCATV(Co
mmunity Antenna Television)などの放送メディアをも
含む伝達メディア全般に対応している。
【0011】MPEGビデオパートで用いられる技術の
核となるのが、動き補償付予測(MC;Motion Compens
ated prediction)と離散コサイン変換(DCT;Discr
eteCosine Transform)である。MCとDCTを併用し
た符号化技術は、ハイブリッド符号化技術と呼ばれる。
MPEGビデオパートでは、符号化時にDCT(別名F
DCT;Forward DCT)を用い、画像のビデオ信号を
周波数成分に分解して処理する。そして、復号時にDC
Tの逆変換(離散コサイン逆変換;IDCT;Inverse
DCT)を用い、周波数成分を再び画像のビデオ信号に
戻す。
【0012】MPEGでは膨大な量の情報を高速に処理
することができるが、上述したとおり、フレーム間予測
と呼ばれる圧縮技術を用いるため、MPEGビデオパー
トに準拠して時系列的に符号化されて記録されたデータ
列をピクチャサーチのために逆順再生、すなわち逆方向
に再生する場合、通常のビデオテープレコーダのよう
に、記録されたデータ列を単に時間軸を遡って再生する
ことは非常に困難である。そこで従来では、各GOP内
に割り当てられたIピクチャのみを時間軸に遡って再生
することが行われている。Iピクチャは、上述したとお
り、フレーム内符号化処理された画像であるため、前後
のピクチャを参照することなく独立して表示させること
ができる。
【0013】
【発明が解決しようとする課題】従来例にあっては、各
GOP内に割り当てられるIピクチャの数はきわめて少
なく、例えば、MPEGでは、GOP内に割り当てられ
るIピクチャは、15〜30枚のピクチャのうちせいぜ
い1枚であり、15〜30コマ毎のピクチャを逆順再生
したところで、通常のビデオテープレコーダのような滑
らかな逆順再生画面を得ることができず、見たいシーン
でタイミングよくストップさせることが困難であった。
本発明はこの点に鑑みてなされたものであって、その目
的のひとつは、滑らかな逆順再生画面を得ることができ
る画像処理の技術を提供することにある。
【0014】本発明はこの目的、および本明細書から明
らかになるその他の目的に対して、主に画像の符号化と
復号処理に関連する技術において解決を図るものであ
る。
【0015】
【課題を解決するための手段】本発明のある態様は画像
処理装置に関する。この装置は、画像データのデータ量
を低減させる低減処理部と、この低減処理部からの画像
データをフレーム内符号化画像として符号化する符号化
器と、この符号化器により生成された符号化データ列を
反時系列的に復号する後置復号器と、一連の処理を統括
的に制御する制御部とを備える。「後置復号器」は符号
化器の後段に置かれ、本明細書中「第2の復号器」とも
よばれる。
【0016】本発明の別の態様も画像処理装置に関す
る。この装置は、第1の符号化データ列を復号する前置
復号器と、この前置復号器により生成された画像データ
のデータ量を低減させる低減処理部と、この低減処理部
からの画像データをフレーム内符号化画像として符号化
する符号化器と、この符号化器により生成された符号化
データ列を反時系列的に復号する後置復号器と、一連の
処理を統括的に制御する制御部とを備える。後置復号器
によって復号された画像データのデータ量を実質的に復
元させる復元処理部をさらに備えてもよい。「前置復号
器」は符号化器の前段に置かれ、本明細書中「第1の復
号器」ともよばれる。
【0017】低減処理部は、画像データをフレーム単位
で間引いてもよく、画素数を減らしてもよい。復元処理
部は、後置復号器によって復号された画像データを反復
出力してもよく、その場合、フレーム単位の間引きの影
響を相殺できる。第1の符号化データ列は、所定のグル
ープ単位で、フレーム内符号化処理またはフレーム間符
号化処理の少なくとも一方が画像信号に対して施される
ことによって符号化されたデータ列であってもよく、そ
の場合、前記制御部に制御に基づく一連の処理が前記所
定のグループ単位で行われてもよい。
【0018】前置復号器は、入力された前記第1の符号
化データ列をフレーム単位で間引くスキップ処理部を備
えてもよい。その場合、スキップ処理部によって間引か
れた後のデータが復号され、時系列的に連続する画像デ
ータが生成されてもよい。
【0019】本発明の別の態様は、画像処理方法に関す
る。この方法は、入力された画像データのデータ量を低
減させる処理と、データ量が低減された画像データをフ
レーム内符号化画像として符号化する処理と、その符号
化データ列を時間軸に遡って復号する処理と、復号した
画像データのデータ量を実質的に復元する処理とを含
む。
【0020】本発明のさらに別の態様も画像処理方法に
関する。この方法は、入力された第1の符号化データ列
を復号する処理と、その復号されたデータのデータ量を
低減させる処理と、データ量が低減された画像データを
フレーム内符号化画像として符号化する処理と、その符
号化データ列を時間軸に遡って復号する処理と、復号し
た画像データのデータ量を実質的に復元する処理とを含
む。
【0021】本発明のさらに別の態様は画像処理装置に
関する。この装置は、画像データのデータ量を低減させ
る低減処理部と、この低減処理部からの画像データを、
少なくとも同一の予測方向については1枚を限度として
他のピクチャを参照するタイプのピクチャの列に符号化
する符号化器と、この符号化器により生成された符号化
データ列を反時系列的に復号する復号器と、一連の処理
を統括的に制御する制御部とを備える。
【0022】本発明のさらに別の態様は、画像処理方法
に関する。この方法は、入力された画像データのデータ
量を低減させる処理と、データ量が低減された画像デー
タを、少なくとも同一の予測方向については1枚を限度
として他のピクチャを参照するタイプのピクチャの列に
符号化する処理と、その符号化データ列を時間軸に遡っ
て復号する処理と、復号した画像データのデータ量を実
質的に復元する処理とを含む。なお、以上のいずれかに
記載の画像処理装置を搭載し、これによって画像の反時
系列的な再生を動作仕様の一部に有するテレビジョン受
像機を提供してもよい。
【0023】以上、いずれの場合も、符号化または復
号、および場合によりそれらに付随する処理は、所定の
グループ単位で実行されてもよい。さらに、以上の任意
の構成要素、処理過程等の異なる組合せ、本発明の表現
を方法、装置、システム、コンピュータプログラム、記
録媒体などの間で変換したものもまた、本発明の態様と
して有効である。
【0024】
【発明の実施の形態】本発明を具体化した実施形態を説
明する。実施形態のいくつかに共通する処理は、画像の
正順および逆順再生である。以下の説明において、「正
順」「逆順」およびそれらの同義語は、説明の便宜上、
画像を構成するピクチャを最終的に表示する形にしたと
きの順序についていうものとする。このため、以下とく
に断らない限り、ピクチャの順序は表示の状態を考え
る。
【0025】後述のごとく、逆順再生においても、MP
EGデータストリームの各GOP内のピクチャは、まず
順方向、すなわち時系列的に復号される。これが再符号
化され、その後の再復号の段階で、初めて逆順の並びが
実現される。したがって、逆順再生における「逆順」と
は、主に2回目の復号に関連する。
【0026】MPEGビットストリームは、I、P、B
ピクチャの順序についていろいろな組合せが考えられる
が、以下説明のために、ビットストリームを「I
…」と決め、一方、ピク
チャの表示順を「B
…」と決めておく。
【0027】以下の実施形態では、さまざまな構成部材
が現れる。これらは、ハードウエア的には、CPU、メ
モリ、その他のLSIや組合せ回路などによって実現で
き、ソフトウエア的にはメモリのロードされた画像処理
機能のあるプログラムなどによって実現されるが、以
下、それらの連携によって実現される機能を中心に描
く。したがって、これらの機能がハードウエアのみ、ソ
フトウエアのみ、またはそれらの組合せによっていろい
ろな形で実現できることは、当業者には理解されるとこ
ろである。
【0028】(第1実施形態)図2は、第1実施形態に
係る画像再生装置1のブロック回路を示す。この画像再
生装置1は、伝達メディア2からのMPEGビデオスト
リームをディスプレイ3に出力するムービーカメラ、ス
チルカメラ、テレビジョン、ビデオCD再生装置、DV
D再生装置などに組み込まれる。なお、伝達メディア2
には、蓄積メディア(ビデオCD,CD−ROM,DV
D,VTRなど)、通信メディア(LANなど)、放送
メディア(地上波放送,衛星放送,CATVなど)など
が含まれる。また、蓄積メディアや放送メディアからの
データがMPEGビデオパートに準拠して符号化されて
いないデータである場合は、伝達メディアは、このデジ
タルデータを符号化するためのMPEGビデオエンコー
ダをも含む。画像再生装置1をムービーカメラまたはス
チルカメラに組み込む場合は、伝達メディア2がCCD
などの撮像デバイスおよびその信号処理回路に置き換え
られる。
【0029】図2において、画像再生装置1は、ハード
ディスク(HD)4、MPEGビデオデコーダ5(以下
単に「デコーダ5」とも表記する)、MPEGビデオエ
ンコーダ6(以下単に「エンコーダ6」とも表記す
る)、第2のMPEGビデオデコーダ7(以下単に「第
2デコーダ7」とも表記する)、切替回路8、表示回路
9、制御コア回路10から構成される。画像再生装置1
全体またはその主要部は1チップのLSIに搭載されて
いてもよく、それは他の実施形態でも同様である。制御
コア回路10は、デコーダ5、第2デコーダ7およびエ
ンコーダ6を始め画像再生装置1の各構成要素の動作を
制御する。ハードディスク4は、磁気ディスクから構成
され、伝達メディア2から転送されてくるビデオストリ
ームを順次蓄積する。ハードディスク4内には特別な記
憶領域4aが設けられている。
【0030】切替回路8は、制御コア回路10の制御に
従って第1ノード8a、第2ノード8b側への接続が切
り換えられる。切替回路8が第1ノード8a側に接続さ
れると、デコーダ5が生成した再生画像データ列はその
まま表示回路9に入力され、正順再生が行われる。第2
ノード8b側に接続されると、表示回路9には、後述す
るとおり逆順再生を行うために、第2デコーダ7からの
データが入力される。
【0031】表示回路9は、デコーダ5または第2デコ
ーダ7から転送されたピクチャのデータから映像ビデオ
信号を生成し、これを画像再生装置1に接続されたディ
スプレイ3へ出力する。
【0032】図3は、デコーダ5の構成を示すブロック
図である。同図において、デコーダ5は、ピクチャヘッ
ダ検出回路11、ピクチャスキップ回路12、デコード
コア回路13から構成され、デコードコア回路13は、
ハフマン復号回路14、逆量子化回路15、IDCT
(Inverse Discrete Cosine Transform)回路16、M
C(Motion Compensated prediction)回路17、RO
M(Read Only Memory)18,19から構成されてい
る。なお、デコーダ5は本発明の「第1の復号器」の一
例である。
【0033】ピクチャヘッダ検出回路11は、ハードデ
ィスク4に蓄積されたビデオストリームの各ピクチャの
先頭に付くピクチャヘッダを検出し、その部分に規定さ
れているピクチャのタイプ(I,P,B)を検出する。
【0034】ピクチャスキップ回路12は、制御コア回
路10の制御に従って第1ノード12a、第2ノード1
2b側への接続が切り換えられる。そして、ピクチャス
キップ回路12が第1ノード12a側に接続されると、
ハードディスク4から読み出されたピクチャはそのまま
デコードコア回路13へ転送される。また、第2ノード
12b側に接続されると、ハードディスク4から読み出
されたピクチャはデコードコア回路13へ転送されずに
スキップされる。その結果、デコードコア回路13へ転
送されるピクチャはピクチャ単位で間引かれる。
【0035】ただし、本実施形態においては、ピクチャ
スキップ回路12は第1ノード12aに接続された状態
で固定されている。したがって、本実施形態の画像再生
装置1を実現する上で、ピクチャヘッダ検出回路11お
よびピクチャスキップ回路12は適宜省略することがで
きる。
【0036】ハフマン復号回路14は、ハードディスク
4から読み出されたピクチャに対して、ROM18に記
憶されたハフマンテーブルに格納されているハフマンコ
ードに基づいた可変長復号を行う。逆量子化回路15
は、ハフマン復号回路14の復号結果に対して、ROM
19に記憶された量子化テーブルに格納されている量子
化閾値に基づいた逆量子化を行いDCT(Discrete Cos
ine Transform)係数を求める。IDCT回路16は、
逆量子化回路15が求めたDCT係数に対してIDCT
を行う。MC回路17は、IDCT回路16の処理結果
に対してMC(Motion Compensated prediction)を行
う。
【0037】こうして、デコーダ5は、入力されたMP
EGビデオストリームを復号して、時系列的に連続する
再生画像データ列を生成する。なお、MPEGビデオス
トリームが本発明の「第1の符号化データ列」の一例で
ある。
【0038】図4は、エンコーダ6の構成を示すブロッ
ク図である。エンコーダ6では、デコーダ5により生成
された再生画像データ列を画面単位で全てIピクチャ、
すなわちフレーム内符号化画像として符号化する。図4
において、エンコーダ6は、MC回路20、DCT回路
21、量子化回路22、ハフマン符号化回路23、RO
M24,25から構成されている。なお、エンコーダ6
が本発明の「符号化器」の一例である。
【0039】MC回路20は、本来はデコーダ5により
復号された再生画像データに対してMCを行うものであ
るが、本実施形態におけるエンコーダ6は、入力された
再生画像データを全てフレーム内符号化処理によってI
ピクチャとして生成するので、MC回路20は処理を行
わない。したがって、MC回路20は適宜省略すること
ができる。
【0040】DCT回路21は、デコーダ5から入力さ
れた再生画像データをブロック単位で取り込み、2次元
の離散コサイン変換を行ってDCT係数を生成する。量
子化回路22は、DCT係数を、ROM24に記憶され
た量子化テーブルに格納されている量子化しきい値を参
照して量子化する。なお、ROM24は、ROM19と
兼用してもよい。
【0041】ハフマン符号化回路23は、量子化された
DCT係数を、ROM25に記憶されたハフマンテーブ
ルに格納されているハフマン符号を参照して可変長符号
化することにより、圧縮された画像データを画面単位で
生成する。なお、ROM25は、ROM18と兼用して
もよい。
【0042】デコーダ5により生成された再生画像デー
タ列は、エンコーダ6によって、画面単位で全てIピク
チャに符号化された後、ハードディスク4内に割り当て
られた記憶領域4aに格納される。この記憶領域4aの
容量は、入力されるMPEGビデオストリームの1GO
Pぶんで十分である。なお、記憶領域4aが本発明の
「記憶部」の一例である。
【0043】図5は、第2デコーダ7の構成を示すブロ
ック図である。同図において、第2デコーダ7は、ハフ
マン復号回路26、逆量子化回路27、IDCT回路2
8、MC回路29、ROM30,31から構成されてい
る。なお、第2デコーダ7が本発明の「復号器」「第2
の復号器」の一例である。
【0044】この第2デコーダ7の構成は、デコーダ5
におけるデコードコア回路13と同様である。したがっ
て、ハフマン復号回路26はハフマン復号回路14と、
逆量子化回路27は逆量子化回路15と、IDCT回路
28はIDCT回路16と、MC回路29はMC回路1
7と、それぞれ同様の回路構成を有する。ただし、後述
するとおり、第2デコーダ7に入力される画像データ列
は全てIピクチャに符号化されたデータであるので、M
C回路29は処理を行わない。したがって、MC回路2
9は適宜省略することができる。なお、ROM30は、
その他のROM18やROM25と、ROM31は、R
OM19やROM24と、それぞれ兼用してもよい。第
2デコーダ7によって復号された再生画像データ列は、
切替回路8の第2ノード8bから表示回路9に入力され
る。
【0045】以上の構成に基づいて、本実施形態の画像
再生装置1における逆順再生の動作を、図6に示すフロ
ーチャートに従って説明する。画像再生装置1の動作
は、制御コア回路10の制御の下に実行される。ここで
は、MPEGビデオストリームがi個のGOP(GOP
〜GOPi−1)からなるとする。
【0046】逆順再生では、各GOPが時間軸に遡って
GOPi−1から順次処理される。ただし、各GOP内
のピクチャは、デコーダ5において順方向、すなわち時
系列的に復号される。逆順再生が指示されると、切替回
路8が第2ノード8bに接続され(S1)、ハードディ
スク4からGOPi−1に相当するMPEGビデオスト
リームがピクチャ単位で読み出されてデコーダ5に入力
され、1画面毎の再生画像データが時系列に順次生成さ
れてエンコーダ6に入力される(S2)。エンコーダ6
では、デコーダ5から入力された1GOPぶんの再生画
像データ列を、全てIピクチャに再符号化する(S
3)。エンコーダ6からの1GOPぶんの再符号化デー
タ列は、ハードディスク4の記憶領域4aに上書きされ
る(S4)。
【0047】記憶領域4aへの書き込みが終了すると、
第2デコーダ7は、この記憶領域4aに格納されている
再符号化データ列を反時系列的に、すなわち時間軸に遡
って読み出して順次復号し、表示回路9に出力する。記
憶領域4aへの書込終了に伴って書込終了信号が送出さ
れ、次のGOPi−2に相当するMPEGビデオストリ
ームがエンコーダ5に入力され、S2からの処理が行わ
れる(S5)。すなわち、S5において、第2デコーダ
7で1GOPぶんのデータ列の復号が行われていとき
に、デコーダ5では次の1GOPぶんのデータ列の復号
が行われている。表示回路9には、第2デコーダ7から
再生画像データが反時系列的に入力され、ディスプレイ
3上に逆順再生画面が表示される。
【0048】次に、正順再生のための動作を、図7に示
すフローチャートに従って説明する。正順再生では時間
軸に従ってGOPから順次処理される。各GOP内の
ピクチャは、当然ながらデコーダ5において順方向に復
号される。正順再生が指示されると、切替回路8が第1
ノード8aに接続され(S11)、ハードディスク4か
らGOPに相当するMPEGビデオストリームがピク
チャ単位で読み出されてデコーダ5に入力され、再生画
像データが画面単位で時系列に順次生成され、エンコー
ダ6と表示回路9に並列に入力される(S12)。表示
回路9は、入力された画面単位の再生画像データに基づ
きビデオ信号を生成してディスプレイ3に出力し(S1
3)、これによりディスプレイ3上に正順再生画面が表
示される(S14)。
【0049】一方、エンコーダ6は、表示回路9の処理
と並行して、デコーダ5から入力された1GOPぶんの
再生画像データ列を全てIピクチャに再符号化する(S
15)。再符号化データ列は、ハードディスク4の記憶
領域4aに上書きされる(S16)。GOPの処理が
終了すると再びS12に戻って次のGOPの処理を行
う。すなわち、正順再生の間、エンコーダ6は並行して
同じ画像データ列をGOP単位で順次Iピクチャに再符
号化する。
【0050】画像再生装置1にあっては、以下のとおり
の作用効果を奏する。 (1)デコーダ5によって生成された再生画像データ列
をエンコーダ6によって全てIピクチャに変換し、第2
デコーダ7によって逆順に再生するので、滑らかな逆順
再生画面を得ることができ、その結果、画像再生装置1
を搭載した機器の画面サーチ機能を向上させることがで
きる。 (2)伝達メディア2からのMPEGビデオストリーム
を記憶するハードディスク4内に記憶領域4aを割り当
て、エンコーダ6からの再符号化データ列を記憶させる
よう構成したので、別途記憶素子を設けることに比べて
低コスト化を実現することができる。 (3)記憶領域4aにおいて、1GOPぶんの再符号化
データ列を順次上書きするので、その容量の増加を抑制
でき、ハードディスク4全体の容量の増加も抑制され
る。 (4)第2デコーダ7での1GOPぶんのデータ列の復
号が行われていときに、デコーダ5では次の1GOPぶ
んのデータ列の復号が行われているので、1GOPぶん
のピクチャの逆順再生が終了するとすぐに次のGOPぶ
んのピクチャの逆順再生に移行することができ、滑らか
な逆順再生画面を得ることができる。 (5)正順再生を行っている間、エンコーダ6で並行し
て、同じ画像データ列をGOP単位で順次Iピクチャに
再符号化している。したがって、正順再生の途中で逆順
再生が指示された場合であっても、その画面切り替えが
滑らかに行われる。
【0051】(第2実施形態)第2の実施形態が第1実
施形態の画像再生装置1と異なるのは、デコーダ5にお
いて、ピクチャスキップ回路12を有効化し、高速な正
順再生および逆順再生を実現する点にある。
【0052】ハードディスク4から読み出されるMPE
Gビデオストリームのフレームレートは再生速度に従っ
て大きくなるため、高速再生ですべてのピクチャを復号
する場合、デコーダ5の処理速度を上げる必要がある。
しかしながら、そのためには動作周波数を上げたり、演
算回路を並列化したり、メモリの性能、すなわち容量や
動作速度を向上させたりする必要があり、その結果、回
路規模が増大し、消費電力が増大すると共にコストが高
くなる問題が生じうる。
【0053】本実施形態では、このような問題に鑑み、
例えば、2倍速の高速正順再生または高速逆順再生が指
示されると、制御コア回路10は、ピクチャヘッダ検出
回路11で検出したピクチャのタイプがIピクチャまた
はPピクチャであれば、そのままデコードコア回路13
へ転送し、Bピクチャであれば、ピクチャスキップ回路
12を第2ノード12b側に接続し、スキップさせる。
その結果、デコードコア回路13へ転送されるピクチャ
は、スキップされた分だけピクチャ単位で間引かれる。
Bピクチャは他のピクチャの復号に利用されないため、
その重要度はIピクチャやPピクチャに比べて低い。従
って、Bピクチャを優先してスキップすることにより、
ディスプレイ9で再生される動画に生じるコマ落ちの影
響は、IピクチャやPピクチャをスキップさせることに
比べてきわめて小さい。このため、デコーダ5の処理速
度を高めることなく、滑らかな高速正順再生および高速
逆順再生画面を得ることができる。なお、本実施形態に
おいて、基本的な逆順再生動作は図6に示すフローに従
い、正順再生動作は図7に示すフローに従う。
【0054】(第3実施形態)図8に、第3実施形態の
画像再生装置51のブロック回路を示す。第1実施形態
と同様の構成部材には同じ符号を用い、その詳細な説明
を省略する。本実施形態のひとつの特徴は、複数のピク
チャからなる第1のピクチャデータの復号器と、複数の
ピクチャからなり、第1のピクチャデータとは異なる処
理ステージにて現れる第2のピクチャデータの復号器と
を共通化した点にある。第1実施形態において、第2デ
コーダ7の構成は、デコーダ5におけるデコードコア回
路13と同様と述べたが、本実施形態はこの点に着目
し、デコーダ5と第2デコーダ7とを共通化している。
図8において、画像再生装置51は、ハードディスク
4、切替回路52、共用デコーダ53、エンコーダ6、
第2切替回路54、表示回路9、制御コア回路10から
構成される。共用デコーダ53の構成は、デコーダ5と
同一である。
【0055】ハードディスク4からのMPEGビデオス
トリームまたは記憶領域4aからの再符号化データ列
は、切替回路52を介して共用デコーダ53に入力さ
れ、その出力が第2切替回路54を介して表示回路9ま
たはエンコーダ6に入力される。
【0056】切替回路52は、制御コア回路10の制御
に従って第1ノード52a、第2ノード52b側への接
続が切り換えられる。切替回路52が第1ノード52a
側に接続されると、ハードディスク4からのMPEGビ
デオストリームが共用デコーダ53に入力され、第2ノ
ード52b側に接続されると、記憶領域4aからの再符
号化データ列が共用デコーダ53に入力される。
【0057】第2切替回路54は、制御コア回路10の
制御に従って第1ノード54a、第2ノード54b側へ
の接続が切り換えられる。第2切替回路54が第1ノー
ド54a側に接続されると、共用デコーダ53からの再
生画像データ列が表示回路8に入力され、第2ノード5
4b側に接続されると、共用デコーダ53からの再生画
像データ列がMPEGエンコーダ6に入力される。
【0058】以上の構成により、正順再生時に切替回路
52は第1ノード52aに接続され、第2切替回路54
は第1ノード54aに接続されている。したがって、ハ
ードディスク4からのMPEGビデオストリームは共用
デコーダ53によって復号されて、そのまま表示回路9
に入力される。
【0059】一方、逆順再生時に、制御コア回路10は
まず、切替回路52を第1ノード52aに接続し、第2
切替回路54を第2ノード54bに接続した状態でハー
ドディスク4から1ピクチャぶんの画像データを読み出
す。その画像データは、第1ノード52aを通って共用
デコーダ53に入力され、復号される。そして、共用デ
コーダ53からの1ピクチャぶんの再生画像データが第
2ノード54bを通ってMPEGエンコーダ6に入力さ
れてIピクチャとして再符号化される。
【0060】制御コア回路10は、共用デコーダ53か
らMPEGエンコーダ6へ1ピクチャぶんの再生画像デ
ータが送出されるとすぐに、切替回路52の接続を第2
ノード52bに切り替え、第2切替回路54の接続を第
1ノード54aに切り替え、記憶領域4aから逆順再生
のための1ピクチャぶんの再符号化データを読み出す。
再符号化データは、第2ノード52bを通って共用デコ
ーダ53に入力、復号され、1ピクチャぶんの再生画像
データが第1ノード54aを通って表示回路8に入力さ
れてディスプレイ3上に表示される。制御コア回路10
は、共用デコーダ53から表示回路8へ1ピクチャぶん
の再生画像データが送出されるとすぐに、切替回路52
の接続を第1ノード52aに切り替え、第2切替回路5
4の接続を第2ノード54bに切り替え、ハードディス
ク4から1ピクチャぶんの画像データを読み出す。
【0061】以下、同様に制御コア回路10は、共用デ
コーダ53から再生画像データが出力される毎に、切替
回路52,54のノードの接続状態を切り替える。共用
デコーダ53は、第1実施形態におけるデコーダ5の処
理と第2デコーダ7の処理とを時分割で行う。本実施形
態でも基本的な逆順再生動作は図6に示すフローに従
い、正順再生動作は図7に示すフローに従う。ただし、
図6において、デコーダ5、第2デコーダ7の動作が共
用デコーダ53の動作に置き換わる。
【0062】なお、第1実施形態で述べたとおり、デコ
ーダ5において、ピクチャスキップ回路12は第1ノー
ド12aに接続された状態で固定されているので、第2
デコーダ7にピクチャヘッダ検出回路11およびピクチ
ャスキップ回路12を付加する形でデコーダ5と第2デ
コーダ7とを共通化しても、すなわち共用デコーダ53
を構成しても、何ら問題は生じない。本実施形態では、
第1実施形態の作用効果に加え、回路面積削減効果およ
びそれによる低コスト化が実現し、さらに商品価値を高
めることが容易となる。
【0063】(第4実施形態)第4の実施形態が第3実
施形態の画像再生装置51と異なるのは、共用デコーダ
53において、ピクチャスキップ回路12を有効化し、
高速の正順再生および逆順再生を実現する点にある。ピ
クチャスキップ回路12におけるスキップ動作は、第2
実施形態と同様である。この場合、MPEGエンコーダ
6によって生成されたデータ列は、全てIピクチャであ
るので、このデータ列が再度共用デコーダ53に入力さ
れてもスキップされない。本実施形態でも、基本的な逆
順再生動作は図6に示すフローに従い、正順再生動作は
図7に示すフローに従う。
【0064】(第5実施形態)第5実施形態は、第1実
施形態の画像再生装置1において、低速の正順再生およ
び逆順再生を実現する。図9において、制御コア回路1
0は、ハードディスク4からMPEGビットストリーム
をデコーダ5に読み込み、再生画像データの同じピクチ
ャを繰り返し出力させる。例えば、MPEGビットスト
リームが、I…という順で並んでい
た場合、デコーダ5から出力される再生画像データ列
は、I…とな
る。この再生画像データ列を表示回路9に入力すること
により、ディスプレイ3上の画面の速度が1/2にな
る。
【0065】デコーダ5には図示しないバッファメモリ
が内蔵されており、復号したピクチャデータをこのバッ
ファメモリに一旦蓄積し、データを所定回数繰り返し出
力する(以下「反復出力」という)。なお、このバッフ
ァメモリをハードディスク4やその他のメモリで兼用し
てもよい。所定回数はユーザの指示をもとに決められて
もよいし、装置内で所定のデフォルト値に設定されてい
てもよいし、その他、任意の設計指針にしたがって定め
ることができる。この方針は以降も有効である。
【0066】逆順再生が指示されると、切替回路8が第
2ノード8bに接続され、エンコーダ6は、デコーダ5
から入力された再生画像データ列をIピクチャに再符号
化するが、本実施形態では、デコーダ5からの再生画像
データは上述したとおり同じデータが2回続けて入力さ
れるので、最初の再生画像データのみをIピクチャに再
符号化する。すなわち、m個のピクチャから構成される
1GOPが、デコーダ5によって2m個のピクチャに復
号され、それがエンコーダ6によってm個のIピクチャ
(I〜I)に符号化される。第2デコーダ7は、記
憶領域4aに格納されたm個のIピクチャ(I
)を、Iから順に時間軸に遡って読み出して順次
復号するが、この時も制御コア回路10は、復号された
データを1回繰り返して出力させる。すると、第2デコ
ーダ7で復号されたデータ列は、Im−1
m−1m−2m−2…Iとなり、この再生画
像データ列を表示回路9に入力することにより、ディス
プレイ3上で1/2の速度で逆順再生画面を表示するこ
とができる。
【0067】第2デコーダ7にも図示しないバッファメ
モリが内蔵されており、復号したピクチャデータを一旦
蓄積し、反復出力する。このバッファメモリもハードデ
ィスク4やその他のメモリで兼用してもよい。本実施形
態でも、基本的な逆順再生動作は図6に示すフローに従
い、正順再生動作は図7に示すフローに従う。
【0068】なお、第5実施形態の変形として、図8に
示した第3実施形態の画像再生装置51において、共用
デコーダ53が同一ピクチャを反復出力するよう構成し
てもよい。こうすることで、第3実施形態と同様の作用
効果を享受することができる。本実施形態は、上述の実
施形態に加え、以下の作用効果を奏する。 (6)低速な逆順再生を行うことができ、サーチ機能が
更に向上する。 (7)デコーダ5によって2m個のピクチャに復号され
たデータ列を、エンコーダ6はm個のIピクチャに符号
化するので、記憶領域4aの容量は第1実施形態に比べ
て増加しない。コスト増加を招くことなく、低速で滑ら
かな逆順再生機能を付加することができる。
【0069】(第6実施形態)図10は第6実施形態の
画像再生装置1のブロック回路を示す。第1実施形態で
は、逆順再生のために、エンコーダ6はすべてIピクチ
ャを生成したが、本実施形態はその処理の効率化を図
る。図10において図2と同じ構成には同じ符号を与
え、適宜その説明を省略する。図10における新たな構
成は、ふたつの切替回路100,200であり、図2に
現れた切替回路8と区別するために、それぞれ第2切替
回路100、第3切替回路200とよぶ。
【0070】第2切替回路100は、制御コア回路10
の制御に従って第1ノード100a、第2ノード100
b側への接続が切り換えられる。第2切替回路100が
第1ノード100a側に接続されると、デコーダ5が生
成した再生画像データはそのまま切替回路8に入力さ
れ、第2ノード100b側に接続されると、デコーダ5
が生成した再生画像データはエンコーダ6に入力され
る。
【0071】第3切替回路200は、制御コア回路10
の制御に従って第1ノード200a、第2ノード200
b側への接続が切り換えられる。第3切替回路200が
第1ノード200a側に接続されると、MPEGビデオ
ストリーム中の所定のデータがハードディスク4に割り
当てられた記憶領域4aに格納され、第2ノード200
b側に接続されると、エンコーダ6が生成したデータが
記憶領域4aに格納される。
【0072】図11は、デコーダ5の構成を示すブロッ
ク図である。図3と違い、ピクチャスキップ回路12が
ピクチャ切替回路112に置き換えられている。ピクチ
ャ切替回路112は、制御コア回路10の制御に従って
第1ノード112a、第2ノード112b、第3ノード
112c側への接続が切り換えられる。そして、ピクチ
ャヘッダ検出回路11で検出したピクチャのタイプがI
ピクチャであった場合、両方向へ導通する第2ノード1
12b側に接続されてデコードコア回路13および第3
切替回路200へ転送され、ピクチャのタイプがPピク
チャであった場合、第1ノード112a側に接続されて
デコードコア回路13に転送され、ピクチャのタイプが
Bピクチャであった場合、第3ノード112c側に接続
されて第3切替回路200に転送される。なお、ピクチ
ャ切替回路112、第3切替回路200が本発明の「割
当処理部」の一例である。
【0073】本実施形態におけるエンコーダ6およびデ
コーダ5の内部構成は、それぞれ図4、図5と同一でよ
い。したがって、MPEGビデオストリームはまず、デ
コーダ5およびエンコーダ6によって、所定の符号化デ
ータ列に変換された後、第3切替回路200を介して、
ハードディスク4内に割り当てられた記憶領域4aに格
納される。
【0074】以上の構成による逆順再生動作は図12の
フローチャートに示される。逆順再生が指示されると、
切替回路8が第2ノード8bに接続される(S1)。ハ
ードディスク4から、GOPi−1に相当するMPEG
ビデオストリームがピクチャ単位で読み出されてデコー
ダ5に入力され、ピクチャヘッダ検出回路11により各
ピクチャのタイプがI,P,Bのいずれのピクチャであ
るかが判別されるとともに、ピクチャ切替回路112に
よって、IピクチャとPピクチャのデータがデコードコ
ア回路13によって復号され、IピクチャとBピクチャ
のデータは第3切替回路200に転送される(S2)。
【0075】デコードコア回路13によって復号された
データのうち、Pピクチャデータを復号したデータは、
第2切替回路100の第2ノード100bを介してエン
コーダ6に入力される(S3)。Iピクチャデータを復
号したデータは、第2切替回路100の第1ノード10
0aを介して切替回路8に入力されるが、このとき切替
回路8は第2ノード8bに接続されているので、そのデ
ータはそのまま捨てられる。すなわち、このデータはP
ピクチャデータの復号のために利用される。エンコーダ
6は、制御コア回路10の指示に従い、デコーダ5から
入力されたデータを、それがPピクチャの場合も含め、
全てIピクチャに再符号化する(S4)。
【0076】第3切替回路200は、制御コア回路10
の制御に従い、ピクチャ切替回路112から転送されて
きたIピクチャおよびBピクチャデータと、エンコーダ
6からの再符号化データ、ここではIピクチャデータと
をハードディスク4の記憶領域4aに時系列的に入力す
る。記憶領域4aに入力された1GOP分のデータは、
古いデータに対し上書きされる(S5)。このように、
第3切替回路200から記憶領域4aに入力される符号
化データ列は、IピクチャとBピクチャのみからなり、
この符号化データ列が本発明の「第2の符号化データ
列」の一例である。
【0077】記憶領域4aへの書き込みが終了すると、
第2デコーダ7は、この記憶領域4aに格納されている
再符号化データを反時系列的に読み出して順次復号し、
表示回路9に出力する(S6)。エンコーダ6からの1
GOPぶんの再符号化データ列には、上述のごとくIピ
クチャとBピクチャとが含まれている。したがって、記
憶領域4aに格納されている再符号化データ列を時間軸
に遡って読み出して順次復号するためには、Bピクチャ
を復号するときに、ストリームの入力順に対してその前
方参照領域と後方参照領域とを入れ替える処理を行い、
しかる後に復号する。
【0078】なお、S5において、記憶領域4aへの書
き込みが終了すると、書き込み終了信号が送出されて、
次のGOPi−2に相当するMPEGビデオストリーム
がエンコーダ5に入力され、上記したS2からの処理が
行われる。すなわち、S6において、第2デコーダ7で
1GOPぶんのデータの復号が行われているときに、デ
コーダ5では次の1GOPぶんのデータの復号が行われ
ている。
【0079】以上、本実施形態の画像再生装置1は、上
述の実施形態に加え、以下の効果を奏する。 (8)MPEGビデオストリームのうち、Iピクチャと
Bピクチャに相当するデータはエンコーダ6に転送しな
いので、デコーダ5からエンコーダ6へのデータの転送
量が減る上にエンコーダ6の処理の負荷が軽減される。
その結果、エンコーダ6として消費電力が低く回路面積
の小さなものを用いることができる。 (9)MPEGビデオストリームのうち、Bピクチャは
そのままBピクチャデータとして記憶領域4aに記憶さ
せるので、第1実施形態よりさらに記憶領域4aの容量
を低減することができ、画像再生装置1の小型化および
低コスト化に寄与することができる。
【0080】(第7実施形態)第7実施形態は第6実施
形態をさらにコンパクトに設計したもので、それらの関
係は第2実施形態と第1実施形態の関係と同じである。
以下、第6実施形態と同様の構成部材には同じ符号を用
い、その詳細な説明を省略する。
【0081】図13に、本実施形態の画像再生装置51
のブロック回路を示す。同図のごとく、デコーダ5のデ
コードコア回路13と第2デコーダ7とを共通化してい
る。画像再生装置51は、ハードディスク4、切替回路
52、共用デコーダ53、エンコーダ6、第2切替回路
100、第3切替回路200、表示回路9、制御コア回
路10から構成される。共用デコーダ53の構成は、デ
コーダ5と同一である。
【0082】画像再生装置51においては、ハードディ
スク4からのMPEGビデオストリームまたは記憶領域
4aからの再符号化データが、切替回路52を介して共
用デコーダ53に入力され、その出力が第2切替回路5
4を介して表示回路9またはエンコーダ6に入力され
る。
【0083】切替回路52が第1ノード52a側に接続
されると、ハードディスク4からのMPEGビデオスト
リームが共用デコーダ53に入力され、第2ノード52
b側に接続されると、記憶領域4aからの再符号化デー
タが共用デコーダ53に入力される。切替回路52が第
2ノード52b側に接続された場合には、ピクチャ切替
回路112は、ピクチャのタイプに関係なく第1ノード
112aに接続される。
【0084】以上の構成に基づき、正順再生時、切替回
路52は第1ノード52aに接続され、第2切替回路1
00は第1ノード100aに接続される。したがって、
ハードディスク4からのMPEGビデオストリームは共
用デコーダ53によって復号されて、そのまま表示回路
9に入力される。
【0085】一方、逆順再生時には、制御コア回路10
は、まず切替回路52を第1ノード52aに接続し、第
2切替回路100を第2ノード100bに接続した状態
で、ハードディスク4から1ピクチャぶんの画像データ
を読み出す。その画像データは、第1ノード52aを通
って共用デコーダ53の切替回路12に入力され、ピク
チャのタイプに応じてデコードコア回路13または第3
切替回路200に入力される。
【0086】制御コア回路10は、共用デコーダ53か
ら第3切替回路200またはMPEGエンコーダ6へ1
ピクチャぶんの再生画像データが送出されるとすぐに、
切替回路52の接続を第2ノード52bに切り替え、第
2切替回路100の接続を第1ノード100aに切り替
え、記憶領域4aから逆順再生のための1ピクチャぶん
の再符号化データを読み出す。その再符号化データは、
第2ノード52bを通って共用デコーダ53に入力さ
れ、復号される。復号されたデータは第1ノード100
aを通って表示回路9に入力され、ディスプレイ3上に
表示される。
【0087】制御コア回路10は、共用デコーダ53か
ら表示回路9へ1ピクチャぶんの再生画像データが送出
されるとすぐに、切替回路52の接続を第1ノード52
aに切り替え、第2切替回路100の接続を第2ノード
100bに切り替え、ハードディスク4から1ピクチャ
ぶんの画像データを読み出す。
【0088】以下、同様に、制御コア回路10は、共用
デコーダ53から再生画像データが出力される毎に、切
替回路52,100のノードの接続状態を切り替える。
こうすることにより、共用デコーダ53では、第6実施
形態におけるデコーダ5の処理と第2デコーダ7の処理
とを時分割で行う。
【0089】本実施形態にける基本的な逆順再生動作は
図12に示すフローに従う。ただし、図12において、
デコーダ5、第2デコーダ7の動作が共用デコーダ53
の動作に置き換わる。本実施形態にあっては、第6実施
形態の作用効果に加え、デコーダ5と第2デコーダ7と
の共通化による回路面積の削減が実現する。
【0090】(第8実施形態)図14は、第8の実施形
態に係る画像再生装置1のブロック回路を示す。同図に
おいて図2と同じ構成部材には同じ符号を与え、適宜そ
の説明を省略する。図14における新たな構成は、デー
タ量低減回路300およびデータ量復元回路400であ
る。前者はデコーダ5からエンコーダ6の経路に設けら
れ、後者は第2デコーダ7から切替回路8への経路に設
けられている。
【0091】図15は、データ量低減回路300の構成
を示すブロック図である。データ量低減回路300は、
デジタルフィルタ部300a、ROM300bおよびタ
イミング制御部300cから構成される。デジタルフィ
ルタ部300cは、FIRフィルタから構成され、図1
6に示すとおり、切替回路8の第2ノード8bを介して
入力されたnビットの入力信号をサンプリング周期毎に
遅延させるためのn個の遅延器300d…と、n+1個
の乗算器300e…と、この乗算器300e…からの信
号を畳み込むための加算器300fとから構成される。
乗算器300e…の各係数α,αn−1… …α
αは、フィルタの特性を決定する係数であり、予めR
OM300b内に書き込まれている。ROM300bに
記憶されている係数は、予め製造段階においてシミュレ
ーションにより適切な値に設定される。
【0092】本実施形態にあってはデコーダ5が生成し
た各画面、例えば縦1080×横1920の原画像デー
タの画素数を低減させるために、線形補間等の考え方を
用い、サンプリング周期毎に各係数の値を変化させ、良
好な低解像度画像を得る。
【0093】一例として、横方向の画素数を2/3にす
る場合を考える。いま、仮に原画像において3個の画素
〜pが横向きに列んでいるとする。データ量低減
処理により、これらの画素を2個の画素q、qに変
換する。このために、qとqをそれぞれp
、pの一次線形和で表現する。すなわち、画素数
をどの程度減らすか、その比率を定めたうえで、線形和
の各係数を実験等で定めればデータ量低減が実現する。
MPEGにおけるひとつの適用として、各画面の画素数
を例えば縦480×横720に低減してもよい。
【0094】図17は、データ量復元回路400の構成
を示すブロック図である。データ量復元回路400は、
デジタルフィルタ部400a、ROM400bおよびタ
イミング制御部400cから構成される。デジタルフィ
ルタ部400cは、デジタルフィルタ部300cと同様
に、FIRフィルタから構成され、図18に示すとお
り、第2デコーダ7によって生成されたnビットの入力
信号をサンプリング周期毎に遅延させるためのn個の遅
延器400d…と、n+1個の乗算器400e…と、こ
の乗算器400e…からの信号を畳み込むための加算器
400fとから構成される。乗算器400e…の各係数
β,βn−1,…β,βは、フィルタの特性を決
定する係数であり、予めROM400b内に書き込まれ
ている。ROM400bに記憶されている係数は、予め
製造段階においてシミュレーションにより適切な値に設
定される。
【0095】データ量復元回路400は、第2デコーダ
7が生成した各画面、例えば縦480×横720の画像
データの画素数を、デコーダ5が生成した各画面、例え
ば縦1080×横1920の原画像データの画素数に復
元するために、サンプリング周期毎に各係数の値を変化
させ、前述のデータ量低減処理の逆変換に当たる処理を
行う。
【0096】以上の構成に基づく逆順再生動作は、図1
9のフローチャートに従う。逆順再生が指示されると、
切替回路8が第2ノード8bに接続される(S1)。ハ
ードディスク4から、GOPi−1に相当するMPEG
ビデオストリームがピクチャ単位で読み出されてデコー
ダ5に入力され、各画面の再生画像データが時系列に順
次生成され、データ量低減回路300に入力される(S
2)。データ量低減回路300は、各画面の原画像デー
タの画素数を縦480×横720に低減した後、エンコ
ーダ6に入力する(S3)。エンコーダ6は、デコーダ
5から入力された1GOP分の再生画像データを全てI
ピクチャに再符号化する(S4)。エンコーダ6からの
1GOPぶんの再符号化データは、ハードディスク4の
記憶領域4aに上書きされる(S5)。
【0097】記憶領域4aへの書き込みが終了すると、
第2デコーダ7は、この記憶領域4aに格納されている
再符号化データを反時系列的に読み出して順次復号し、
データ量復元回路400に出力する。記憶領域4aへの
書き込みが終了すると、書込終了信号が送出されて、次
のGOPi−2に相当するMPEGビデオストリームが
エンコーダ5に入力され、上記したS2からの処理が行
われる(S6)。すなわち、S6において、第2デコー
ダ7で1GOPぶんのデータの復号が行われていとき
に、デコーダ5では次の1GOPぶんのデータの復号が
行われている。
【0098】データ量復元回路400は、第2デコーダ
7が生成した各画面の画像データの画素数を元の縦10
80×横1920に復元した後、切替回路8がこれを第
2ノード8bを介して表示回路9に入力する(S7)。
こうしてディスプレイ3上に逆順再生画面が表示され
る。
【0099】本実施形態の画像再生装置1は、上述の実
施形態に加え、以下の作用効果を奏する。 (10)データ量低減回路300の作用により、MPE
Gビデオストリームを全てエンコーダ6によってIピク
チャ化して記憶させる場合より、記憶領域4aの容量を
低減することができ、画像再生装置1の小型化および低
コスト化に寄与する。 (11)一旦低減させた画素数をデータ量復元回路40
0によって、復元してから表示回路9に転送するので、
表示画質をほぼ維持することができる。なお、第1実施
形態に対して第2実施形態でピクチャのスキップ動作を
加えたごとく、当然ながら、本実施形態にスキップ動作
を加えてもよい。また、この実施の形態では、ピクチャ
またはフレームを単位としてデータ量を間引いたが、こ
れはフィールド単位であってもよい。インタレース駆動
の場合、偶または奇フィールド単位の間引きも有効であ
る。
【0100】(第9実施形態)図20に、第9実施形態
の画像再生装置51のブロック回路を示す。ただし、第
8実施形態と同様の構成部材には同じ符号を用い、その
詳細な説明を省略する。図20において図14との相違
点は、データ量低減回路300とデータ量復元回路40
0の追加にある。共用デコーダ53の構成はデコーダ5
と同一である。
【0101】第2切替回路54は、制御コア回路10の
制御に従って第1ノード54a、第2ノード54b側へ
の接続が切り換えられる。そして、第2切替回路54が
第1ノード54a側に接続されると、共用デコーダ53
からの再生画像データがデータ量復元回路400に入力
され、第2ノード54b側に接続されると、共用デコー
ダ53からの再生画像データがデータ量低減回路300
に入力される。
【0102】以上の構成に基づき、正順再生時、切替回
路52は第1ノード52aに接続され、第2切替回路5
4は第1ノード54aに接続される。したがって、ハー
ドディスク4からのMPEGビデオストリームは共用デ
コーダ53によって復号されて、そのまま表示回路9に
入力される。正順再生においては、データ量復元回路4
00は動作せず、共用デコーダ53からの画像データを
そのまま表示回路9に伝える。
【0103】一方、逆順再生時には、制御コア回路10
はまず、切替回路52を第1ノード52aに接続し、第
2切替回路54を第2ノード54bに接続した状態で、
ハードディスク4から1ピクチャぶんの画像データを読
み出す。その画像データは、第1ノード52aを通って
共用デコーダ53に入力され、復号される。復号された
データは第2ノード54bを通ってデータ量低減回路3
00で処理された後、MPEGエンコーダ6に入力され
てIピクチャとして再符号化される。
【0104】制御コア回路10は、共用デコーダ53か
らMPEGエンコーダ6へ1ピクチャぶんの再生画像デ
ータが送出されるとすぐに、切替回路52の接続を第2
ノード52bに切り替え、第2切替回路54の接続を第
1ノード54aに切り替え、記憶領域4aから逆順再生
のための1ピクチャぶんの再符号化データを読み出す。
その再符号化データは、第2ノード52bを通って共用
デコーダ53に入力され、復号される。復号されたデー
タが第1ノード54aを通ってデータ量復元回路400
で復元された後、表示回路9に入力されてディスプレイ
3上に表示される。制御コア回路10は、共用デコーダ
53から表示回路8へ1ピクチャぶんの再生画像データ
が送出されるとすぐに、切替回路52の接続を第1ノー
ド52aに切り替え、第2切替回路54の接続を第2ノ
ード54bに切り替え、ハードディスク4から1ピクチ
ャぶんの画像データを読み出す。
【0105】以下、その処理、作用、効果は第3実施形
態のとおりであり、本実施形態ではさらに、データ量低
減処理による効果が加わる。なお、本実施形態において
も、当然ながら、第4実施形態のごとく、ピクチャのス
キップ動作を加えることができる。
【0106】(第10実施形態)第10実施形態は、第
8実施形態の画像再生装置1において、低速の正順再生
および逆順再生を実現する。すなわち、図14の構成に
おいて、第5実施形態において説明したごとく、デコー
ダ5から再生画像データを出力する際、同じピクチャを
1回繰り返して出力させる。したがって、本実施形態
は、第8実施形態の効果とデータ量低減による効果を併
せ持つことができる。
【0107】本実施形態の変形例として、第9実施形態
の画像再生装置51において、共用デコーダ53が同一
ピクチャを反復出力するよう構成してもよい。これによ
り、さらに第9実施形態同様の効果を得ることができ
る。
【0108】(第11実施形態)第11実施形態は、以
上のいずれかの実施形態に係る画像再生装置または画像
処理装置をテレビジョン受像機に組み込んだ例に関す
る。図23はその構成図である。テレビジョン受像機5
00において、放送波570はアンテナ512を介して
チューナ514へ与えられる。チューナ514はユーザ
が選んだチャネルを含むトランスポンダを選択し、QP
SK復調を施す。復調で得られた複数のトランスポート
ポケットを含むストリームはパケット分離部516へ送
られる。パケット分離部516はデマルチプレクサであ
り、所望のチャネルに対応するパケットを分離して画像
・音声デコーダ518へ出力する。
【0109】画像・音声デコーダ518はMPEGデコ
ーダであり、その画像処理のために、いずれかの実施形
態で挙げた画像再生装置または画像処理装置を組み込
む。画像・音声デコーダ518は、入力されたパケット
を復号し、音声データを音声信号出力部522へ、画像
データを表示装置526へそれぞれ出力する。音声信号
出力部522は入力された音声データに所定の処理を施
し、最終的に音声がスピーカ524へ出力される。
【0110】主制御部536は制御コア回路10その他
CPU等で構成され、ユーザの指示に従い、各部を統括
的に制御する。ユーザの指示は、例えば図示しないリモ
コンからの信号を受けたリモコン受光部548を介して
入力される。メディアI/F回路550は、図示しない
ICカード、MO、CD−ROM、DVD−ROMその
他の記録媒体からマルチメディアデータやプログラムを
主制御部536へ読み込む。以上の構成により、ユーザ
の指示にしたがって正順再生、逆順再生を含む画像再生
処理が実現する。その際、既述の作用効果を享受するこ
とができる。
【0111】(実施形態に関する全般的考察)当業者に
は当然理解されるごとく、いままでに述べなかった実施
形態の任意の組合せも可能である。例えば、いずれの場
合においても、入力された第1の符号化データ列をピク
チャ単位で間引くスキップ処理部、例えばピクチャスキ
ップ回路12を備えてもよい。この場合、第1の復号器
が間引き後のデータ列を復号して時系列的に連続する画
像データ列を生成する。入力された第1の符号化データ
列に含まれるピクチャのタイプを判別する判別部、例え
ばピクチャヘッダ検出部11をさらに備えてもよい。こ
の場合、スキップ処理部によりBピクチャを優先して間
引いてもよい。さらに、以下のような配慮または変形例
が可能である。
【0112】(a)いくつかの実施形態において、エン
コーダ6は、MC回路20を必要としない。その場合、
静止画圧縮のアルゴリズムを適用できるので、エンコー
ダ6に代えて、JPEG(Joint Photographic Coding
Expert Group)エンコーダを用いる。このJPEGエン
コーダによって符号化された画像データも、フレーム内
符号化画像である。また、JPEG以外にも、静止画像
データの圧縮に、差分処理をベースとする差分YUVや
ブロックベースのアダマール(Hadamard)変換、スラン
ト変換(Slant)変換、ハール(Haar)変換方式を利用
した圧縮技術を用いてもよい。なお、エンコーダ6に上
述した静止画圧縮技術を用いた場合、第2デコーダ7に
も同様の静止画伸張技術を用いる必要がある。
【0113】(b)同様に、いくつかの実施形態におい
て、第2デコーダ7は、MC回路29を必要としない。
したがって、(a)同様、JPEGデコーダを用いる。
フレーム内符号化画像の復号のために、上述の差分YU
Vやアダマール変換等の方法を用いてもよい。
【0114】(c)ハードディスク4として、磁気ディ
スクに代えて、光磁気ディスク、光ディスクなどを用い
る。 (d)ハードディスク4として、書き換え可能な半導体
メモリ、例えばSDRAM(Synchronous Dynamic RA
M)、DRAM、ラムバスDRAM等を用いる。 (e)ハードディスク4と記憶領域4aとを独立して設
ける。この場合、記憶領域4aには書き換え可能な半導
体メモリが望ましい。 (f)回路面積削減に対する要請を重視する場合、デコ
ーダ5のピクチャスキップ回路12を省略する。この場
合さらに、ピクチャヘッダ検出回路11を省略してもよ
い。
【0115】(g)MPEGビデオストリームから1G
OPではなく以下の単位でデータ列を取り出す。GOP
を含め以下の単位もグループ単位の概念に含まれる。 ・Iピクチャから始まる単位をGOPとせずに、例え
ば、Pピクチャから始まる単位をGOPとする。 ・GOPという概念にとらわれずに、数枚のピクチャを
グループ単位とする。 ・グループ単位でピクチャの枚数を任意に変化させる。
【0116】(h)ROM18,19,24,25,3
0,31に代えて、RAM(RandomAccess Memory)を
用いる。 (i)第5実施形態の変形例として、逆順再生時のデコ
ーダ5およびエンコーダ6の処理は第1実施形態と同様
のままにしておき、第2デコーダ7においてのみ同一ピ
クチャを反復出力させる。こうすることで、デコーダ5
における消費電力を低減することができる。 (j)第5実施形態および上記(i)において、デコー
ダ5や第2デコーダ7での同一ピクチャの反復出力回数
を2回以上に設定する。こうすることでより低速な逆順
再生画面を得ることができる。
【0117】(k)第5実施形態では、デコーダ5や第
2デコーダ7において、復号したデータを反復出力する
よう構成したが、回路制御またはタイミング制御上、メ
リットがある場合等には、同一のピクチャを繰り返し復
号してそれを出力するようにしてもよい。 (l)各実施形態において、逆順再生時、ハードディス
ク4内に蓄積されているMPEGビデオストリーム中の
Iピクチャデータを、デコーダ5およびエンコーダ6で
の処理を行わずにそのまま記憶領域4aに転送する。こ
うすることで、デコーダ5およびエンコーダ6における
消費電力を低減することができる。
【0118】(m)上記(l)に加え、逆順再生時、B
ピクチャデータをデコーダ5およびエンコーダ6での処
理を行わずにそのまま記憶領域4aに転送する。こうす
ることで、デコーダ5およびエンコーダ6における消費
電力を低減することができる。また、全てのデータをI
ピクチャに再符号化しないので、記憶領域4aの容量を
低減することができる。ただし、この場合、第2デコー
ダ7では、記憶領域4aから読み出したBピクチャの前
方参照領域と後方参照領域とをストリームの順番に対し
入れ替えて復号する。 (n)第5実施形態で説明した低速逆順再生機能、第
1,3実施形態で説明した通常逆順再生機能および第
2,4実施形態で説明した高速逆順再生機能を一つの画
像再生装置に搭載し、これらの機能を選択するための操
作キーを設ける。 (o)キー操作に応じて1コマずつ逆順再生させる。
【0119】(p)上記した実施形態以外に、一つの装
置内に2つの符号化または復号機能を備えるアプリケー
ションとして以下の形態がある。従って、上記第3実施
形態では、デコーダ5と第2デコーダ7を共用デコーダ
53として共通化する例を説明したが、2つのエンコー
ダを備えるものにあっては、これらのエンコーダを共通
化してもよい。 (i)ムービーカメラにおいて、被写体を異なる視点か
ら同時に撮影し、そのデータをMPEG方式で圧縮・伸
長処理する場合。 (ii)テレビジョンにおいて、複数番組を同時に復号し
て2画面表示する場合。 (iii)テレビジョンにおいて、複数番組を同時に復号
してチャンネル切換えをシームレスに行わせる場合。MP
EGを使った放送では、チャンネル切換えなどで一旦復号
を中断すると、新しいシーケンスヘッダを検出するまで
の0.5秒〜2秒の間、次に再開するのに若干時間がかか
り、通常はその間、絵がフリーズするかブラックアウト
するが、(iii)は、この問題を解消するために有効で
ある。 (iv)DVDやデジタルスチルカメラ等と接続したテレ
ビジョンにおいて、放送とDVDやデジタルスチルカメ
ラとを同時再生する。 (v)番組の再生中、その番組または裏番組を動画や静
止画状態で録画するとともに、録画した動画または静止
画と放送中の番組を重ねて同時に再生する場合。 (vi)一定時間毎に再生画像をJPEG方式で符号化し
てリングバッファに取り込み、これを逆転サーチにおい
て近いシーンにジャンプできるようにするためのインデ
ックスに使う場合。
【0120】(q)データ量低減回路300として、画
素数を低減するのではなく、フレームを間引くよう構成
してもよい。この場合、データ量低減回路300は、図
21(a)に示す通り、デコーダ5または共用デコーダ
53が生成する各画面の原画像データを、データ量低減
回路300のノードを切り替えることによって、フレー
ム単位でスキップする。例えば、このノードを1フレー
ム毎に交互に切り替えることにより、フレーム数を1/
2にすることができ、3フレームのうち2フレームをス
キップすることで、フレーム数を1/3にすることがで
きる。データ量低減回路300を図21(a)に示す通
り構成した場合、データ量復元回路400は、図21
(b)に示す通り、第2デコーダ7または共用デコーダ
53が生成する各画面の画像データを蓄積するバッファ
メモリ201とこれを制御する制御コア回路10とから
構成され、データ量低減回路300でスキップしたぶん
だけ、バッファメモリ201から同一の画像データを反
復出力させる。なお、この場合、データ量復元回路40
0によって生成された画像データのデータ量は、データ
量低減回路300で低減させる前の画像データのデータ
量と同一ではないが、このように、第2デコーダ7また
は共用デコーダ53が生成する各画面の画像データのデ
ータ量を、低減前の画像データのデータ量に近づけるか
またはそれ以上にすることも、「実質的に復元する」と
いうことができる。
【0121】(r)逆順再生のために、1GOP分の画
像データをそっくり記憶領域4aに保持する必要があっ
た。GOP内部ではデータは正順方向にしか読み出され
ないため、1GOP分のデータをすべて残しておかなけ
れば逆順再生の際にピクチャを生成できないためであ
る。この理由から、1GOP分の画像データを記録する
だけの容量を記憶領域4aに求めた。これから逆に、そ
うした構成を有効活用し、実施形態1等では、正順再生
の間もエンコーダ6をフリーランで走らせ、つねに1G
OP分の逆順再生用データを生成して保持することにし
た。これにより、正順から逆順への切替を滑らかにする
趣旨であった。
【0122】しかしながらその方法では、確かにフリー
ランをさせないときに比べて円滑な再生方向転換が実現
するものの、必ずしも切替時にタイムラグが生じないわ
けではない。なぜなら、逆順再生がGOPに対して行
われているとき、その前のGOPn−1については、デ
コーダ5が1GOP分の符号化データを読み出して復号
する必要があり、一連の処理がGOPの逆順再生の完
了までに終わらない可能性があるためである。仮に終わ
らない場合、そこで逆順再生が一瞬停止してしまう。
【0123】この対策のために、実施形態1等で述べた
1GOP分の画像データの保存を拡張し、最大2GOP
分程度の画像データを保存すれば、正順再生から逆順再
生への切替の際、タイムラグを完全になくすことができ
る。したがって、そうした仕様を求める場合はこの対策
をとればよい。
【0124】なおこのとき、当然メモリ容量を増やす必
要がある。エンコーダ6によってすべてIピクチャが再
符号化される場合、これらのIピクチャを蓄積するため
のメモリ容量を抑制するために、Iピクチャを2、3ピ
クチャおきなど飛び飛びに生成したり、画素数を低減さ
せたり、種々のフレーム内圧縮処理を加えることができ
る。
【0125】まず、Iピクチャを飛び飛びに生成および
蓄積する場合、スキップされたピクチャについては、そ
の前に再生されるIピクチャを再度表示すればよい。た
とえば、一枚おきにスキップされる場合、いずれのIピ
クチャも二度ずつ表示することにより、逆順再生のスピ
ードを正順再生のスピードと同一に保つことができる。
このことから逆に、一枚おきに蓄積されたIピクチャを
そのまま再生すれば自動的に2倍速逆順再生ができ、当
然それを製品の仕様の一部と考えてもよい。
【0126】画素数を低減させる場合、デコーダ7にお
けるIDCT処理にて、予めダウンコンバージョン形式
による復号を行ってもよい。すなわち、通常であれば例
えば8×8画素の正方ブロックに対してIDCTを施す
べきところを、8×4画素の1/2サイズのブロックに
対して施してもよい。その場合、画像再生の際にフレー
ムメモリに記憶すべき画像データの容量が1/2になる
ため、その結果空いた領域に前述の2GOPぶんのIピ
クチャを蓄積することができる。なお、このダウンコン
バーションを行うと、高精細モード時の1960×10
80画素の画像が980×1080画素になる。したが
って、その再生時に横方向について各画素を二度表示す
るなど、解像度再現処理を施すものとする。
【0127】(s)前述の切替時のタイムラグは、逆順
再生から正順再生への移行時にも考慮すべきである。こ
のときも上述と同様の措置、すなわち読み込まれたピク
チャのデータを1〜2GOP程度蓄積しておくことで対
応できる。いま逆順再生のために第n番のGOPが読
込処理されているとすれば、このGOPのピクチャの
データを、逆順再生のための読出がその2つ前のGOP
n−2に達するまで保持しておく。すなわち、あるGO
Pのデータをそのふたつ前のGOPのデータの読出まで
保持することにより、正順再生への切替が行われたとき
でも、切れ目のない再生が実現する。
【0128】逆順再生から正順再生への切替は、デコー
ダ5のみの処理で対応できるため、(r)の場合に比
べ、タイムラグはもともと小さい。したがって、ここで
は2GOPぶんとしたが、実際にはせいぜい1GOP強
で十分と思われる。ただし、この値は装置の実装にもよ
るため、機種ごとに実験等により決めることが望まし
い。
【0129】(t)図22はIピクチャをキャッシュメ
モリへおくことによる逆順再生の高速化を説明する。I
ピクチャは「再利用型ピクチャ」である点に着目してい
る。同図では、説明の簡単のために1GOPのピクチャ
を6枚とし、GOP〜GOPの3つのGOPにおけ
るピクチャの並びを、GOPはI〜B、GOP
はI〜B12、GOPはI13〜B18で表してい
る。
【0130】いまGOPから逆順再生が要求されたと
すれば、前述のごとく、GOPの読出、GOP
読出、GOPの読出がこの順に行われる。ここで
GOPの処理に注目すれば、その最後のピクチャB
12を再生するために、GOP の最初のピクチャI
13が読み出されている。ところが、このピクチャI
13は、GOPの逆順再生の際に、すでにいちど読み
出され、復号されていることがわかる。このことから、
各GOPの最初のIピクチャの復号データをMPEGデ
ータストリーム上ひとつ手前のGOPの処理が終わるま
で記憶領域4aまたはそれ以外のメモリにキャッシング
しておけば、そのピクチャを再度読み出して復号する手
間が省ける。このキャッシングによれば、逆順再生時の
処理効率を改善することができる。
【0131】(u)いくつかの実施形態では、エンコー
ダ6による再符号化によってIピクチャを生成し、場合
により、これとBピクチャを合わせて逆順再生のための
符号化データとした。しかし、これに限る必要はなく、
エンコーダ6は結果として当初のMPEGビデオストリ
ームに含まれるIピクチャよりも多くのIピクチャを生
成するなど、当業者が実装段階にて選択する他の形態を
実現してもよい。視点を変えれば、エンコーダ6は、画
像データを、少なくとも同一の予測方向については1枚
を限度として他のピクチャを参照するタイプのピクチャ
の列に符号化してもよい。「予測方向」は順方向または
逆方向で、それぞれ過去からの予測および未来からの予
測である。したがって、ここでは、順方向についても逆
方向についても、0枚か1枚のピクチャのみを参照する
ピクチャを認める。
【0132】現在のMPEGでは、IピクチャおよびB
ピクチャがこの条件に合致するが、再符号化でどのよう
なピクチャを生成すべきかという問題の本質は、もとも
と正順再生に必要な構成、とくにメモリ容量を守って逆
順再生を実現できればよいことにある。MPEGでは、
Pピクチャは順方向について相当離れた複数のピクチャ
を参照している場合があるにも拘わらず、正順再生の場
合は復号されたピクチャを順次出力または表示していく
ため、多数のピクチャを保持しつづける必要はない。逆
にいえば、正順再生だからこそ、Pピクチャも比較的小
さなフレームバッファで支障なく再生できるのであり、
逆順再生の場合はPピクチャの再生のために多数のピク
チャを相当期間保存しなければならない。したがって、
現実的には、同一の予測方向については、2枚以上ピク
チャを参照するようなピクチャは逆順だけのために比較
的大きなメモリ容量を要求し、コスト、実装面積等にお
いて不利になる。このため、I、Bピクチャをはじめと
して、同一予測方向については1枚を限度とするピクチ
ャを認めれば、問題の解決に必要十分と考えられる。
【0133】
【発明の効果】本発明により、滑らかな逆順再生を行う
ことのできる画像処理技術を提供することができる。
【図面の簡単な説明】
【図1】MPEGビデオストリームの階層構造を示す説
明図である。
【図2】第1実施形態における画像再生装置のブロック
回路図である。
【図3】第1実施形態におけるデコーダの概略を示すブ
ロック図である。
【図4】第1実施形態におけるエンコーダの概略を示す
ブロック図である。
【図5】第1実施形態におけるデコーダの概略を示すブ
ロック図である。
【図6】第1実施形態における画像再生装置の逆順再生
動作を示すフローチャートである。
【図7】第1実施形態における画像再生装置の正順再生
動作を示すフローチャートである。
【図8】第3実施形態における画像再生装置のブロック
回路図である。
【図9】第5実施形態における画像再生装置の逆順再生
動作を説明するための説明図である。
【図10】第6実施形態における画像再生装置のブロッ
ク回路図である。
【図11】第6実施形態におけるデコーダの概略を示す
ブロック図である。
【図12】第6実施形態における画像再生装置の逆順再
生動作を示すフローチャートである。
【図13】第7実施形態における画像再生装置のブロッ
ク回路図である。
【図14】第8実施形態における画像再生装置のブロッ
ク回路図である。
【図15】第8実施形態におけるデータ量低減回路の概
略を示すブロック図である。
【図16】図15に示すデジタルフィルタ部の概略を示
す回路図である。
【図17】第8実施形態におけるデータ量復元回路の概
略を示すブロック図である。
【図18】図17に示すデジタルフィルタ部の概略を示
す回路図である。
【図19】第8実施形態における画像再生装置の逆順再
生動作を示すフローチャートである。
【図20】第9実施形態における画像再生装置のブロッ
ク回路図である。
【図21】図21(a)(b)は、それぞれデータ量低
減回路、データ量復元回路の他の回路構成例を示す図で
ある。
【図22】Iピクチャのキャッシングによる逆順再生の
高速化を説明する図である。
【図23】実施形態に係るいずれか画像再生装置または
画像処理装置を組み込んだ、第11実施形態におけるテ
レビジョン受像機の構成図である。
【符号の説明】
1,51 画像再生装置 2 伝達メディア 3 ディスプレイ 4 ハードディスク 4a 記憶領域 5,7,53 MPEGビデオデコーダ 6 MPEGビデオエンコーダ 8,52,54 切替回路 9 表示回路 10 制御コア回路 11 ピクチャヘッダ検出回路 12 ピクチャスキップ回路 13 デコードコア回路 14,26 ハフマン復号回路 15,27 逆量子化回路 16,28 IDCT回路 17,20,29 MC回路 18,19,24,25,30,31 ROM 100 第2切替回路 112 ピクチャ切替回路 200 第3切替回路 300 データ量低減回路 400 データ量復元回路 500 テレビジョン受像機
【手続補正書】
【提出日】平成13年6月4日(2001.6.4)
【手続補正1】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正内容】
【特許請求の範囲】
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C053 FA23 FA24 GA11 GB22 GB26 GB27 GB30 GB32 GB36 GB37 HA23 HA24 HA25 KA03 KA05 5C059 LB05 LB07 MA00 MA04 MA05 MA22 MA23 MC11 MC38 ME02 PP05 PP06 PP07 SS01 SS13 SS15 SS17 SS18 UA02 UA05 UA33

Claims (18)

    【特許請求の範囲】
  1. 【請求項1】 画像データのデータ量を低減させる低減
    処理部と、この低減処理部からの画像データをフレーム
    内符号化画像として符号化する符号化器と、この符号化
    器により生成された符号化データ列を反時系列的に復号
    する後置復号器と、一連の処理を統括的に制御する制御
    部と、を備えたことを特徴とする画像処理装置。
  2. 【請求項2】 第1の符号化データ列を復号する前置復
    号器と、この前置復号器により生成された画像データの
    データ量を低減させる低減処理部と、この低減処理部か
    らの画像データをフレーム内符号化画像として符号化す
    る符号化器と、この符号化器により生成された符号化デ
    ータ列を反時系列的に復号する後置復号器と、一連の処
    理を統括的に制御する制御部と、を備えたことを特徴と
    する画像処理装置。
  3. 【請求項3】 前記後置復号器によって復号された画像
    データのデータ量を実質的に復元させる復元処理部を備
    えたことを特徴とする請求項1または2に記載の画像処
    理装置。
  4. 【請求項4】 前記符号化器により生成された符号化デ
    ータを一時的に記憶する記憶部を備えたことを特徴とす
    る請求項1乃至3のいずれかに記載の画像処理装置。
  5. 【請求項5】 前記低減処理部は、前記画像データの画
    素数を低減することを特徴とした請求項1乃至4のいず
    れかに記載の画像処理装置。
  6. 【請求項6】 前記低減処理部は、前記画像データをフ
    レーム単位で間引くことを特徴とした請求項1乃至4の
    いずれかに記載の画像処理装置。
  7. 【請求項7】 前記低減処理部は、前記画像データをフ
    レーム単位で間引き、前記復元処理部は、前記後置復号
    器によって復号された画像データを反復出力することを
    特徴とした請求項3に記載の画像処理装置。
  8. 【請求項8】 前記第1の符号化データ列は、所定のグ
    ループ単位で、フレーム内符号化処理またはフレーム間
    符号化処理の少なくとも一方が画像信号に対して施され
    ることによって符号化されたデータ列であり、前記制御
    部に制御に基づく一連の処理が前記所定のグループ単位
    で行われることを特徴とした請求項1乃至4のいずれか
    に記載の画像処理装置。
  9. 【請求項9】 前記後置復号器の処理中に、次のグルー
    プの符号化データ列を前記前置復号器で処理することを
    特徴とした請求項8に記載の画像処理装置。
  10. 【請求項10】 前記前置復号器が、入力された前記第
    1の符号化データ列をフレーム単位で間引くスキップ処
    理部を備え、前記スキップ処理部によって間引かれた後
    のデータを復号して時系列的に連続する画像データを生
    成することを特徴とした請求項2に記載の画像処理装
    置。
  11. 【請求項11】 入力された画像データのデータ量を低
    減させる処理と、データ量が低減された画像データをフ
    レーム内符号化画像として符号化する処理と、その符号
    化データ列を時間軸に遡って復号する処理と、復号した
    画像データのデータ量を実質的に復元する処理と、を含
    むことを特徴とした画像処理方法。
  12. 【請求項12】 入力された第1の符号化データ列を復
    号する処理と、その復号されたデータのデータ量を低減
    させる処理と、データ量が低減された画像データをフレ
    ーム内符号化画像として符号化する処理と、その符号化
    データ列を時間軸に遡って復号する処理と、復号した画
    像データのデータ量を実質的に復元する処理と、を含む
    ことを特徴とした画像処理方法。
  13. 【請求項13】 前記符号化データ列を一時的に記憶す
    る処理をさらに備えることを特徴とした請求項11また
    は12に記載の画像処理方法。
  14. 【請求項14】 画像データのデータ量を低減させる低
    減処理部と、この低減処理部からの画像データを、少な
    くとも同一の予測方向については1枚を限度として他の
    ピクチャを参照するタイプのピクチャの列に符号化する
    符号化器と、この符号化器により生成された符号化デー
    タ列を反時系列的に復号する復号器と、一連の処理を統
    括的に制御する制御部と、を備えたことを特徴とする画
    像処理装置。
  15. 【請求項15】 入力された画像データのデータ量を低
    減させる処理と、データ量が低減された画像データを、
    少なくとも同一の予測方向については1枚を限度として
    他のピクチャを参照するタイプのピクチャの列に符号化
    する処理と、その符号化データ列を時間軸に遡って復号
    する処理と、復号した画像データのデータ量を実質的に
    復元する処理と、を含むことを特徴とした画像処理方
    法。
  16. 【請求項16】 請求項1、2、14のいずれかに記載
    の画像処理装置を搭載し、これによって画像の反時系列
    的な再生を動作仕様の一部に有することを特徴とするテ
    レビジョン受像機。
  17. 【請求項17】 前記低減処理部は、前記画像データを
    フィールド単位で間引くことを特徴とした請求項1乃至
    4のいずれかに記載の画像処理装置。
  18. 【請求項18】 前記低減処理部は、前記画像データを
    フィールド単位で間引き、前記復元処理部は、前記後置
    復号器によって復号された画像データを反復出力するこ
    とを特徴とした請求項3に記載の画像処理装置。
JP2000370562A 1999-12-15 2000-12-05 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機 Expired - Lifetime JP3403168B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000370562A JP3403168B2 (ja) 1999-12-15 2000-12-05 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP35584099 1999-12-15
JP11-355840 2000-03-22
JP2000095698 2000-03-30
JP2000-95698 2000-03-30
JP2000370562A JP3403168B2 (ja) 1999-12-15 2000-12-05 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機

Publications (2)

Publication Number Publication Date
JP2001346165A true JP2001346165A (ja) 2001-12-14
JP3403168B2 JP3403168B2 (ja) 2003-05-06

Family

ID=27341525

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000370562A Expired - Lifetime JP3403168B2 (ja) 1999-12-15 2000-12-05 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機

Country Status (1)

Country Link
JP (1) JP3403168B2 (ja)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007306152A (ja) * 2006-05-09 2007-11-22 Toshiba Corp 画像復号化装置及び画像復号化方法
JP2011509602A (ja) 2008-01-02 2011-03-24 ディヴィクス インコーポレイテッド アプリケーション・エンハンスメント・トラック
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9621522B2 (en) 2011-09-01 2017-04-11 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
US9883204B2 (en) 2011-01-05 2018-01-30 Sonic Ip, Inc. Systems and methods for encoding source media in matroska container files for adaptive bitrate streaming using hypertext transfer protocol
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
JP2018137721A (ja) * 2017-02-23 2018-08-30 パナソニックIpマネジメント株式会社 静止画生成装置及び静止画生成装置に用いられるプログラム
US10212486B2 (en) 2009-12-04 2019-02-19 Divx, Llc Elementary bitstream cryptographic material transport systems and methods
US10225299B2 (en) 2012-12-31 2019-03-05 Divx, Llc Systems, methods, and media for controlling delivery of content
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US10437896B2 (en) 2009-01-07 2019-10-08 Divx, Llc Singular, collective, and automated creation of a media guide for online content
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
US10687095B2 (en) 2011-09-01 2020-06-16 Divx, Llc Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US10878065B2 (en) 2006-03-14 2020-12-29 Divx, Llc Federated digital rights management scheme including trusted systems
USRE48761E1 (en) 2012-12-31 2021-09-28 Divx, Llc Use of objective quality measures of streamed content to reduce streaming bandwidth
US11457054B2 (en) 2011-08-30 2022-09-27 Divx, Llc Selection of resolutions for seamless resolution switching of multimedia content

Cited By (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11886545B2 (en) 2006-03-14 2024-01-30 Divx, Llc Federated digital rights management scheme including trusted systems
US10878065B2 (en) 2006-03-14 2020-12-29 Divx, Llc Federated digital rights management scheme including trusted systems
JP2007306152A (ja) * 2006-05-09 2007-11-22 Toshiba Corp 画像復号化装置及び画像復号化方法
JP4734168B2 (ja) * 2006-05-09 2011-07-27 株式会社東芝 画像復号化装置及び画像復号化方法
JP2011509602A (ja) 2008-01-02 2011-03-24 ディヴィクス インコーポレイテッド アプリケーション・エンハンスメント・トラック
US8997161B2 (en) 2008-01-02 2015-03-31 Sonic Ip, Inc. Application enhancement tracks
US10437896B2 (en) 2009-01-07 2019-10-08 Divx, Llc Singular, collective, and automated creation of a media guide for online content
US11102553B2 (en) 2009-12-04 2021-08-24 Divx, Llc Systems and methods for secure playback of encrypted elementary bitstreams
US10484749B2 (en) 2009-12-04 2019-11-19 Divx, Llc Systems and methods for secure playback of encrypted elementary bitstreams
US10212486B2 (en) 2009-12-04 2019-02-19 Divx, Llc Elementary bitstream cryptographic material transport systems and methods
US9883204B2 (en) 2011-01-05 2018-01-30 Sonic Ip, Inc. Systems and methods for encoding source media in matroska container files for adaptive bitrate streaming using hypertext transfer protocol
US10368096B2 (en) 2011-01-05 2019-07-30 Divx, Llc Adaptive streaming systems and methods for performing trick play
US11638033B2 (en) 2011-01-05 2023-04-25 Divx, Llc Systems and methods for performing adaptive bitrate streaming
US10382785B2 (en) 2011-01-05 2019-08-13 Divx, Llc Systems and methods of encoding trick play streams for use in adaptive streaming
US11457054B2 (en) 2011-08-30 2022-09-27 Divx, Llc Selection of resolutions for seamless resolution switching of multimedia content
US11178435B2 (en) 2011-09-01 2021-11-16 Divx, Llc Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US11683542B2 (en) 2011-09-01 2023-06-20 Divx, Llc Systems and methods for distributing content using a common set of encryption keys
US9621522B2 (en) 2011-09-01 2017-04-11 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US10341698B2 (en) 2011-09-01 2019-07-02 Divx, Llc Systems and methods for distributing content using a common set of encryption keys
US10244272B2 (en) 2011-09-01 2019-03-26 Divx, Llc Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US10225588B2 (en) 2011-09-01 2019-03-05 Divx, Llc Playback devices and methods for playing back alternative streams of content protected using a common set of cryptographic keys
US10856020B2 (en) 2011-09-01 2020-12-01 Divx, Llc Systems and methods for distributing content using a common set of encryption keys
US10687095B2 (en) 2011-09-01 2020-06-16 Divx, Llc Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US11785066B2 (en) 2012-12-31 2023-10-10 Divx, Llc Systems, methods, and media for controlling delivery of content
US11438394B2 (en) 2012-12-31 2022-09-06 Divx, Llc Systems, methods, and media for controlling delivery of content
US10225299B2 (en) 2012-12-31 2019-03-05 Divx, Llc Systems, methods, and media for controlling delivery of content
US10805368B2 (en) 2012-12-31 2020-10-13 Divx, Llc Systems, methods, and media for controlling delivery of content
USRE49990E1 (en) 2012-12-31 2024-05-28 Divx, Llc Use of objective quality measures of streamed content to reduce streaming bandwidth
USRE48761E1 (en) 2012-12-31 2021-09-28 Divx, Llc Use of objective quality measures of streamed content to reduce streaming bandwidth
US11849112B2 (en) 2013-03-15 2023-12-19 Divx, Llc Systems, methods, and media for distributed transcoding video data
US10715806B2 (en) 2013-03-15 2020-07-14 Divx, Llc Systems, methods, and media for transcoding video data
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US10264255B2 (en) 2013-03-15 2019-04-16 Divx, Llc Systems, methods, and media for transcoding video data
US9712890B2 (en) 2013-05-30 2017-07-18 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US10462537B2 (en) 2013-05-30 2019-10-29 Divx, Llc Network video streaming with trick play based on separate trick play files
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
US11711552B2 (en) 2014-04-05 2023-07-25 Divx, Llc Systems and methods for encoding and playing back video at different frame rates using enhancement layers
US10321168B2 (en) 2014-04-05 2019-06-11 Divx, Llc Systems and methods for encoding and playing back video at different frame rates using enhancement layers
US11343300B2 (en) 2017-02-17 2022-05-24 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
JP7065292B2 (ja) 2017-02-23 2022-05-12 パナソニックIpマネジメント株式会社 静止画生成装置及び静止画生成装置に用いられるプログラム
JP2018137721A (ja) * 2017-02-23 2018-08-30 パナソニックIpマネジメント株式会社 静止画生成装置及び静止画生成装置に用いられるプログラム

Also Published As

Publication number Publication date
JP3403168B2 (ja) 2003-05-06

Similar Documents

Publication Publication Date Title
JP3548136B2 (ja) 画像処理装置
US7706445B2 (en) Image processing employing picture type conversion
EP0545323B1 (en) Motion picture decoding system
JP3403168B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JP3813444B2 (ja) ビデオデコーダ
US7245821B2 (en) Image processing using shared frame memory
KR20050058965A (ko) 복호화 장치, 전자 기기, 컴퓨터, 복호화 방법, 프로그램및 기록 매체
Wee et al. Compressed-domain reverse play of MPEG video streams
US20030099293A1 (en) Image reproducing method, and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods
US20070058725A1 (en) Coding/decoding apparatus, coding/decoding method, coding/decoding integrated circuit and coding/decoding program
JPH09200695A (ja) 高速再生のためのビデオデータの復号化方法及びその装置
KR100860661B1 (ko) 화상 재생 방법과 화상 처리 방법, 및 이들 방법을 이용가능한 화상 재생 장치, 화상 처리 장치, 텔레비전 수상기
JP3515565B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
US6128340A (en) Decoder system with 2.53 frame display buffer
JP3403169B2 (ja) 画像再生方法とこの方法を利用可能な画像再生装置およびテレビジョン受像機
JP3403167B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JP3374128B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JP3403166B2 (ja) 画像再生方法とこの方法を利用可能な画像再生装置およびテレビジョン受像機
JPH08307896A (ja) 画像信号記録方法および装置、画像信号再生方法および装置、ならびに画像信号記録媒体
JP3433179B2 (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JP3548167B2 (ja) 画像処理装置
JP2001169285A (ja) Mpegビデオデコーダ
JP3663559B2 (ja) リアルタイム逆方向再生用動画像符号化方式
JP3964563B2 (ja) ビデオサーバ装置
JP3594017B2 (ja) ビットストリームの伝送方法及び伝送システム

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
R151 Written notification of patent or utility model registration

Ref document number: 3403168

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090228

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090228

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100228

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110228

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110228

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120229

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120229

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130228

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130228

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140228

Year of fee payment: 11

EXPY Cancellation because of completion of term