JP2002057986A - 復号装置および方法、並びに記録媒体 - Google Patents

復号装置および方法、並びに記録媒体

Info

Publication number
JP2002057986A
JP2002057986A JP2001147594A JP2001147594A JP2002057986A JP 2002057986 A JP2002057986 A JP 2002057986A JP 2001147594 A JP2001147594 A JP 2001147594A JP 2001147594 A JP2001147594 A JP 2001147594A JP 2002057986 A JP2002057986 A JP 2002057986A
Authority
JP
Japan
Prior art keywords
decoding
stream
slice
unit
decoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001147594A
Other languages
English (en)
Other versions
JP4906197B2 (ja
Inventor
Mamoru Ueda
衛 上田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2001147594A priority Critical patent/JP4906197B2/ja
Publication of JP2002057986A publication Critical patent/JP2002057986A/ja
Application granted granted Critical
Publication of JP4906197B2 publication Critical patent/JP4906197B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

(57)【要約】 【課題】 MP@MLのMPEG2ビデオビットストリームを任
意の速度で再生する。 【解決手段】 パラメータの入力を受けたスライスデコ
ーダ制御回路は、第1のスライスデコーダにピクチャ層
のパラメータとスライス1の書き込みポインタを、第2
のスライスデコーダにピクチャ層のパラメータとスライ
ス2の書き込みポインタを、第3のスライスデコーダに
ピクチャ層のパラメータとスライス3の書き込みポイン
タを、それぞれ順番に供給してデコードさせる。スライ
スデコーダ制御回路は、第1乃至第3のスライスデコー
ダから入力されるデコード処理の完了を示す信号の入力
に基づいて、第1乃至第3のスライスデコーダにデコー
ド処理を振り分ける。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、復号装置および方
法、並びに記録媒体に関し、例えば、MPEG2ビデオビッ
トストリームをデコードする場合に用いて好適な復号装
置および方法、並びに記録媒体に関する。
【0002】
【従来の技術】MPEG(Moving Picture Experts Group)2
ビデオは、ISO/IEC(International Standards Organiza
tion/International Electrotechnical Commission)138
18-2、およびITU-T(International Telecommunication
Union-Telecommunication sector)勧告H.262に規定され
ているビデオ信号の高能率圧縮符号化方式である。
【0003】MPEG2ビデオでは、ビデオ画像の各画像は
符号化の効率が異なる3つのピクチャタイプ(フレーム
内符号化画像(I(Intra)ピクチャ)、フレーム間順方
向予測符号化画像(P(Predictive)ピクチャ)、および
双方向予測符号化画像(B(Bidirectionally predictiv
e)ピクチャ))のうちのいずれかに分類される。Iピク
チャに分類された画像は、当該画像のフレーム内の空間
的相関関係に基づいて符号化される。Pピクチャに分類
された画像は、当該画像の前に存在するIピクチャまた
はPピクチャからの動き補償予測によって符号化され
る。Bピクチャに分類された画像は、当該画像の前後に
存在するIピクチャまたはPピクチャからの動き補償予
測によって符号化される。したがって、符号化の効率
は、Iピクチャ、Pピクチャ、Bピクチャの順に高くな
る。
【0004】図1を参照して具体的に説明する。ビデオ
信号の画像がI1,B2,B3,P4、・・・、P13に分類
された場合(下付の数字は表示順序を示す)、例えば、
画像I1はフレーム内の空間的相関関係に基づいて符号
化され、画像P4は、画像I1からの動き補償予測によっ
て符号化され、画像P7は、画像P4からの動き補償予測
によって符号化される。例えばまた、画像B2は、画像
1および画像P4からの動き補償予測によって符号化さ
れ、画像B5は、画像P4および画像P7からの動き補償
予測によって符号化される。
【0005】MPEG2符号化ストリームは、符号化の手法
によって決まるプロファイルと、取り扱う画素数によっ
て決まるレベルによってクラス分けされ、広範囲なアプ
リケーションに対応できるようになされている。例え
ば、MPEG2符号化ストリームのクラスのうちの1つであ
るMP@ML(メイン・プロファイル・メイン・レベル)
は、DVB(Digital Video Broadcast)や、DVD(Digital Ve
rsatile Disk)に広く実用化されている。プロファイル
およびレベルは、図6を用いて後述するsequence_exten
sionに記述される。
【0006】また、放送局における用途に適用させたMP
EG2符号化ストリームのプロファイルとして、ビデオの
色差信号を従来のベースバンドと同様に4:2:2方式で取
り扱うことができるようにビットレートの上限を高く設
定した4:2:2P(4:2:2プロファイル)が規定されてい
る。さらに、MPEG2符号化ストリームのレベルとして、
次世代の高解像度ビデオ信号に対応するHL(ハイ・レ
ベル)が規定されている。
【0007】図2は、MPEG2で規定されている代表的な
クラスである、4:2:2P@HL(4:2:2プロファイル・ハイ・
レベル)、4:2:2P@ML(4:2:2プロファイル・メイン・レ
ベル)、MP@HL(メイン・プロファイル・ハイ・レベ
ル)、MP@HL-1440(メイン・プロファイル・ハイ・レベ
ル−1440)、MP@ML(メイン・プロファイル・メイ
ン・レベル)、MP@LL(メイン・プロファイル・ロー・
レベル)、および、SP@ML(シンプル・プロファイル・
メイン・レベル)に関し、各クラスのパラメータ(ビッ
トレート、1ラインあたりのサンプル数、1フレームあ
たりのライン数、フレームの処理時間、およびサンプル
の処理時間)の上限値を示している。
【0008】図2に示すように、4:2:2P@HLのビットレ
ートの上限値は、300(メガビット/秒)であり、処
理する画素数の上限値は、62,668,800(画素/秒)であ
る。一方、MP@MLのビットレートの上限値は、15(メ
ガビット/秒)であり、処理する画素数の上限値は、1
0,368,000(画素/秒)である。すなわち、4:2:2P@HLを
デコードするビデオデコーダは、MP@MLをデコードする
ビデオデコーダに比較して、ビットレートは20倍、処
理する画素数は約6倍の処理能力が必要であることがわ
かる。
【0009】ここで、MPEG2ビデオビットストリームの
レベル構造について、図3を参照して説明する。最上位
層であるピクチャ層の最初には、sequence_headerが記
述されている。sequence_headerは、MPEGビットストリ
ームのシーケンスのヘッダデータを定義するものであ
る。シーケンス最初のsequence_headerに、sequence_ex
tensionが続かない場合、当該ビットストリームには、I
SO/IEC11172-2の規定が適応される。シーケンスの最初
のsequence_headerに、sequence_extensionが続く場
合、その後に発生する全てのsequence_headerの直後に
は、sequence_extensionが続く。すなわち、図3に示す
場合においては、全てのsequence_headerの直後に、seq
uence_extensionが続く。
【0010】sequence_extensionは、MPEGビットストリ
ームのシーケンス層の拡張データを定義するものであ
る。sequence_extensionは、sequence_headerの直後に
のみ発生し、かつ、復号後、およびフレームリオーダリ
ング後にフレームの損失がないようにするために、ビッ
トストリームの最後に位置するsequence_end_codeの直
前にきてはならない。また、ビットストリーム中に、se
quence_extensionが発生した場合、それぞれのpicture_
headerの直後にpicture_cording_extentionが続く。
【0011】GOP(Group Of Picture)内には、複数の画
像(picture)が含まれる。GOP_headerは、MPEGビットス
トリームのGOP層のヘッダデータを定義するものであ
り、さらに、このビットストリーム中には、picture_he
aderとpicture_coding_extensionによって定義されたデ
ータエレメントが記述されている。1枚の画像は、pict
ure_headerおよびpicture_coding_extensionに続くpict
ure_dataとして符号化される。また、GOP_headerに続く
最初の符号化フレームは、符号化されたIフレームであ
る(すなわち、GOP_headerの最初の画像はIピクチャで
ある)。ITU‐T勧告H.262には、sequence_extensionお
よびpicture_cording_extentionの他、各種の拡張が定
義されているが、ここでは図示、および説明は省略す
る。
【0012】picture_headerは、MPEGビットストリーム
のピクチャ層のヘッダデータを定義するものであり、pi
cture_coding_extensionは、MPEGビットストリームのピ
クチャ層の拡張データを定義するものである。
【0013】picture_dataは、MPEGビットストリームの
スライス層およびマクロブロック層に関するデータエレ
メントを記述するものである。picture_dataは、図3に
示されるように、複数のslice(スライス)に分割さ
れ、スライスは、複数のmacro_block(マクロブロッ
ク)に分割される。
【0014】マクロブロックは、16×16の画素デー
タで構成されている。スライスの最初のマクロブロック
および最後のマクロブロックは、スキップマクロブロッ
ク(情報を含まないマクロブロック)ではない。なお、
フレームDCT(Discrete Cosine Transform:離散コサイ
ン変換)符号化およびフィールドDCT符号化の使用が可
能なフレーム画像においては、フレーム符号化が使用さ
れたマクロブロックの内部構成とフィールド符号化が使
用されたマクロブロックの内部構成が相違する。
【0015】マクロブロックは、輝度成分および色差成
分の1区画を含む。マクロブロックという用語は、情報
源および復号データまたは対応する符号化データ成分の
いずれかを示す。マクロブロックには、4:2:0、4:2:2お
よび4:4:4の3つの色差フォーマットがある。マクロブ
ロックにおけるブロックの順序は、それぞれの色差フォ
ーマットによって異なる。
【0016】図4(A)に、色差フォーマットが4:2:0
方式である場合におけるマクロブロックを示す。4:2:0
方式の場合、マクロブロックは、4個の輝度(Y)ブロ
ックと、それぞれ1個の色差(Cb,Cr)ブロックで
構成される。図4(B)に、色差フォーマットが4:2:2
方式である場合におけるマクロブロックを示す。4:2:2
方式の場合、マクロブロックは、4個の輝度(Y)ブロ
ックと、それぞれ2個の色差(Cb,Cr)ブロックで
構成される。
【0017】各マクロブロックは、いくつかの方法によ
り、予測符号化処理が可能である。予測モードは、フィ
ールド予測とフレーム予測の2種類に大別される。フィ
ールド予測においては、先に復号された、1つ、もしく
は複数のフィールドのデータを使用し、各フィールドに
ついて、独自に予測を行う。フレーム予測は、先に復号
された、1つ、もしくは複数のフレームを使用してフレ
ームの予測を行う。フィールド画像内では、予測は全て
フィールド予測である。一方、フレーム画像において
は、フィールド予測、またはフレーム予測のいずれかに
より予測が可能であり、その予測方法は、マクロブロッ
クごとに選択される。また、マクロブロックの予測符号
化処理においては、フィールド予測およびフレーム予測
以外に、16×8動き補償およびデュアルプライムの2
種類の特別予測モードを使用することができる。
【0018】動きベクトル情報、および他の周辺情報
は、各マクロブロックの予測誤差信号とともに符号化さ
れる。動きベクトルの符号化については、可変長符号を
使用して符号化された最後の動きベクトルを予測ベクト
ルとして、予測ベクトルとの差分ベクトルを符号化す
る。表示可能なベクトルの最大長は、画像毎にプログラ
ムすることができる。また、適切な動きベクトルの計算
は符号器により実行される。
【0019】picture_dataの後には、次のsequence_hea
derとsequence_extensionが配置されている。このseque
nce_headerとsequence_extensionによって記述されたデ
ータエレメントは、ビデオストリームのシーケンスの先
頭に記述されたsequence_headerとsequence_extension
によって記述されたデータエレメントと全く同じであ
る。このように、同じデータをストリーム中に記述する
ことにより、ビットストリーム受信装置側において、デ
ータストリームの途中(例えばピクチャ層に対応するビ
ットストリーム部分)から受信が開始された場合、シー
ケンス層のデータを受信できなくなってストリームをデ
コードできなくなることが抑止される。
【0020】最後のsequence_headerとsequence_extens
ionとによって定義されたデータエレメントの次、つま
り、データストリームの最後には、シーケンスの終わり
を示す32ビットのsequence_end_codeが記述されてい
る。
【0021】次に、図5乃至12を用いて、それぞれの
データエレメントの詳細について説明する。
【0022】図5に、sequence_headerのデータ構成を
示す。sequence_headerに含められるデータエレメント
は、sequence_header_code,horizontal_size_value,v
ertical_size_value、aspect_ratio_information,fram
e_rate_code,bit_rate_value、marker_bit,vbv_buffe
r_size_value,constrained_parameter_flag,load_int
ra_quantiser_matrix,intra_quantiser_matrix,load_
non_intra_quantiser_matrix、およびnon_intra_quanti
ser_matrix等から構成される。
【0023】sequence_header_codeは、シーケンス層の
スタート同期コードを表すデータである。horizontal_s
ize_valueは、画像の水平方向の画素数の下位12ビッ
トからなるデータである。vertical_size_valueは、画
像の縦のライン数の下位12ビットからなるデータであ
る。aspect_ratio_informationは、画素のアスペクト比
(縦横比)または表示画面アスペクト比を表すデータで
ある。frame_rate_codeは、画像の表示周期を表すデー
タである。bit_rate_valueは、発生ビット量に対する制
限のためのビットレートの下位18ビットのデータであ
る。
【0024】marker_bitは、スタートコードエミュレー
ションを防止するために挿入されるビットデータであ
る。vbv_buffer_size_valueは、発生符号量制御用の仮
想バッファVBV(Video Buffering Verifier)の大きさを
決める値の下位10ビットデータである。constrained_
parameter_flagは、各パラメータが制限以内であること
を示すデータである。load_non_intra_quantiser_matri
xは、非イントラマクロブロック用量子化マトリックス
・データの存在を示すデータである。load_intra_quant
iser_matrixは、イントラマクロブロック用量子化マト
リックス・データの存在を示すデータである。intra_qu
antiser_matrixは、イントラマクロブロック用量子化マ
トリックスの値を示すデータである。non_intra_quanti
ser_matrixは、非イントラマクロブロック用量子化マト
リックスの値を表すデータである。
【0025】図6に、sequence_extensionのデータ構成
を示す。sequence_extensionは、extension_start_cod
e,extension_start_code_identifier,profile_and_le
vel_indication,progressive_sequence,chroma_forma
t,horizontal_size_extension,vertical_size_extens
ion,bit_rate_extension,marker_bit,vbv_buffer_si
ze_extension,low_delay,frame_rate_extension_n、
およびframe_rate_extension_d等のデータエレメントか
ら構成されている。
【0026】extension_start_codeは、エクステンショ
ンデータ(拡張データ)のスタート同期コードを表すデ
ータである。extension_start_code_identifierは、拡
張データの種類を示すデータである。profile_and_leve
l_indicationは、ビデオデータのプロファイルとレベル
を指定するためのデータである。progressive_sequence
は、ビデオデータが順次走査(プログレッシブ画像)で
あることを示すデータである。chroma_formatは、ビデ
オデータの色差フォーマットを指定するためのデータで
ある。horizontal_size_extensionは、シーケンスヘッ
ダのhorizntal_size_valueに加える上位2ビットのデー
タである。vertical_size_extensionは、シーケンスヘ
ッダのvertical_size_valueに加える上位2ビットのデ
ータである。
【0027】bit_rate_extensionは、シーケンスヘッダ
のbit_rate_valueに加える上位12ビットのデータであ
る。marker_bitは、スタートコードエミュレーションを
防止するために挿入されるビットデータである。vbv_bu
ffer_size_extensionは、シーケンスヘッダのvbv_buffe
r_size_valueに加える上位8ビットのデータである。lo
w_delayは、Bピクチャを含まないことを示すデータで
ある。frame_rate_extension_nは、シーケンスヘッダの
frame_rate_codeと組み合わせてフレームレートを得る
ためのデータである。frame_rate_extension_dは、シー
ケンスヘッダのframe_rate_codeと組み合わせてフレー
ムレートを得るためのデータである。
【0028】図7に、GOP_headerのデータ構成を示す。
GOP_headerを表わすデータエレメントは、group_start_
code,time_code,closed_gop、およびbroken_linkから
構成される。
【0029】group_start_codeは、GOP層の開始同期コ
ードを示すデータである。time_codeは、GOPの先頭ピク
チャの時間を示すタイムコードである。closed_gopは、
GOP内の画像が他のGOPから独立再生可能なことを示すフ
ラグデータである。broken_linkは、編集などのためにG
OP内の先頭のBピクチャが正確に再生できないことを示
すフラグデータである。
【0030】図8に、picture_headerのデータ構成を示
す。picture_headerに関するデータエレメントは、pict
ure_start_code,temporal_reference,picture_coding
_type、vbv_delay,full_pel_forward_vector,forward
_f_code,full_pel_backward_vector、および backward
_f_code等から構成される。
【0031】picture_start_codeは、ピクチャ層の開始
同期コードを表すデータである。temporal_reference
は、ピクチャの表示順を示す番号でGOPの先頭でリセッ
トされるデータである。picture_coding_typeは、ピク
チャタイプを示すデータである。vbv_delayは、ランダ
ムアクセス時の仮想バッファの初期状態を示すデータで
ある。full_pel_forward_vector,forward_f_code,ful
l_pel_backward_vector、およびbackward_f_codeは、MP
EG2では使用されない固定データである。
【0032】図9に、picture_coding_extensionのデー
タ構成を示す。picture_coding_extensionは、extensio
n_start_code,extension_start_code_identifier,f_c
ode[0][0],f_code[0][1],f_code[1][0],f_code[1]
[1],intra_dc_precision,picture_structure,top_fi
eld_first,frame_pred_frame_dct,concealment_motio
n_vectors,q_scale_type,intra_vlc_format,alterna
te_scan,repeat_firt_field,chroma_420_type,progr
essive_frame,composite_display_flag,v_axis,fiel
d_sequence,sub_carrier,burst_amplitude、およびsu
b_carrier_phase等から構成される。
【0033】extension_start_codeは、ピクチャ層のエ
クステンションデータ(拡張データ)のスタートを示す
同期コードを表すデータである。extension_start_code
_identifierは、拡張データの種類を示すデータであ
る。f_code[0][0]は、フォワード方向の水平動きベクト
ル探索範囲を表すデータである。f_code[0][1]は、フォ
ワード方向の垂直動きベクトル探索範囲を表すデータで
ある。f_code[1][0]は、バックワード方向の水平動きベ
クトル探索範囲を表すデータである。f_code[1][1]は、
バックワード方向の垂直動きベクトル探索範囲を表すデ
ータである。
【0034】intra_dc_precisionは、DC係数の精度を
表すデータである。ブロック内の各画素の輝度および色
差信号を表した行列fにDCTを施すと、8×8のDCT係数
行列Fが得られる。DCT係数行列Fの左上隅の係数をD
C係数と呼ぶ。DC係数はブロック内の平均輝度、平均
色差を表わす信号である。picture_structureは、フレ
ームストラクチャであるか、フィールドストラクチャで
あるかを示すデータであり、フィールドストラクチャで
あることを示している場合はさらに、上位フィールドで
あるか、下位フィールドであるかを示すデータを含んで
いる。top_field_firstは、フレームストラクチャであ
る場合において、最初のフィールドが上位であるか、下
位であるかを示すデータである。frame_predictive_fra
me_dctは、フレームストラクチャである場合において、
フレーム・モードDCTの予測がフレーム・モードだけで
あることを示すデータである。concealment_motion_vec
torsは、イントラマクロブロックに伝送エラーを隠蔽す
るための動きベクトルがついていることを示すデータで
ある。
【0035】q_scale_typeは、線形量子化スケールを利
用するか、非線形量子化スケールを利用するかを示すデ
ータである。intra_vlc_formatは、イントラマクロブロ
ックに、別の2次元VLC(Variable Length Cording)を使
うか否かを示すデータである。alternate_scanは、ジグ
ザグスキャンを使うか、オルタネート・スキャンを使う
かの選択を表すデータである。repeat_firt_fieldは、
2:3プルダウンの際に使われるデータである。chroma
_420_typeには、色差フォーマットが4:2:0方式である場
合、次のprogressive_frameと同じ値が記述され、色差
フォーマットが4:2:0方式ではない場合には0が記述さ
れる。progressive_frameは、このピクチャが順次走査
であるか否かを示すデータである。composite_display_
flagは、ソース信号がコンポジット信号であったか否か
を示すデータである。v_axis,field_sequence,sub_ca
rrier,burst_amplitude、およびsub_carrier_phase
は、ソース信号がコンポジット信号であった場合に使わ
れるデータである。
【0036】図10に、picture_dataのデータ構成を示
す。picture_data()関数によって定義されるデータエレ
メントは、slice()関数によって定義されるデータエレ
メントである。このslice()関数によって定義されるデ
ータエレメントは、ビットストリーム中に少なくとも1
個記述されている。
【0037】slice()関数は、図11に示されるよう
に、slice_start_code,quantiser_scale_code,intra_
slice_flag,intra_slice,reserved_bits,extra_bit_
slice,およびextra_information_slice等のデータエレ
メントと、macroblock()関数によって定義される。
【0038】slice_start_codeは、slice()関数によっ
て定義されるデータエレメントのスタートを示すスター
トコードである。quantiser_scale_codeは、このスライ
ス層に存在するマクロブロックに対して設定された量子
化ステップサイズを示すデータであるが、マクロブロッ
ク毎に、quantiser_scale_codeが設定されている場合に
は、各マクロブロックに対して設定されたmacroblock_q
uantiser_scale_codeのデータが優先して使用される。
【0039】intra_slice_flagは、ビットストリーム中
にintra_sliceおよびreserved_bitsが存在するか否かを
示すフラグである。intra_sliceは、スライス層中にノ
ンイントラマクロブロックが存在するか否かを示すデー
タである。スライス層におけるマクロブロックのいずれ
かがノンイントラマクロブロックである場合には、intr
a_sliceは「0」となり、スライス層におけるマクロブ
ロックの全てがイントラマクロブロックである場合に
は、intra_sliceは「1」となる。reserved_bitsは、7
ビットの予備のデータ領域である。extra_bit_slice
は、追加の情報が存在するか否かを示すフラグであっ
て、次にextra_information_sliceが存在する場合には
「1」に設定され、追加の情報が存在しない場合には
「0」に設定される。
【0040】これらのデータエレメントの次には、macr
oblock()関数によって定義されたデータエレメントが記
述されている。macroblock()関数は、図12に示すよう
に、macroblock_escape,macroblock_address_incremen
t,quantiser_scale_code、およびmarker_bit等のデー
タエレメントと、macroblock_modes()関数、motion_vec
tors()関数、およびcoded_block_pattern()関数によっ
て定義されたデータエレメントを記述するための関数で
ある。
【0041】macroblock_escapeは、参照マクロブロッ
クと前のマクロブロックとの水平方向の差が34以上で
あるか否かを示す固定ビット列である。参照マクロブロ
ックと前のマクロブロックとの水平方向の差が34以上
である場合、macroblock_address_incrementの値に33
が加えられる。macroblock_address_incrementは、参照
マクロブロックと前のマクロブロックとの水平方向の差
を示すデータである。もし、macroblock_address_incre
mentの前にmacroblock_escapeが1つ存在するのであれ
ば、このmacroblock_address_incrementの値に33を加
えた値が、実際の参照マクロブロックと前のマクロブロ
ックとの水平方向の差分を示すデータとなる。
【0042】quantiser_scale_codeは、各マクロブロッ
クに設定された量子化ステップサイズを示すデータであ
り、macroblock_quantが「1」のときだけ存在する。各
スライス層には、スライス層の量子化ステップサイズを
示すslice_quantiser_scale_codeが設定されているが、
参照マクロブロックに対してscale_codeが設定されてい
る場合には、この量子化ステップサイズを選択する。
【0043】macroblock_address_incrementの次には、
macroblock_modes()関数によって定義されるデータエレ
メントが記述されている。macroblock_modes()関数は、
図13に示すように、macroblock_type,frame_motion_
type,field_motion_type,dct_type等のデータエレメ
ントを記述するための関数である。macroblock_type
は、マクログブロックの符号化タイプを示すデータであ
る。
【0044】macroblock_motion_forwardまたはmacrobl
ock_motion_backwardが「1」であり、ピクチャ構造が
フレームであり、さらにframe_pred_frame_dctが「0」
である場合、macroblock_typeを表わすデータエレメン
トの次にframe_motion_typeを表わすデータエレメント
が記述される。なお、このframe_pred_frame_dctは、fr
ame_motion_typeがビットストリーム中に存在するか否
かを示すフラグである。
【0045】frame_motion_typeは、フレームのマクロ
ブロックの予測タイプを示す2ビットのコードである。
予測ベクトルが2個であって、フィールドベースの予測
タイプである場合、frame_motion_typeには「00」が
記述される。予測ベクトルが1個であって、フィールド
ベースの予測タイプでる場合、frame_motion_typeには
「01」が記述される。予測ベクトルが1個であって、
フレームベースの予測タイプである場合、frame_motion
_typeには「10」が記述される。予測ベクトルが1個
であって、デュアルプライムの予測タイプである場合、
frame_motion_typeには「11」が記述される。
【0046】field_motion_typeは、フィールドのマク
ロブロックの動き予測を示す2ビットのコードである。
予測ベクトルが1個であって、フィールドベースの予測
タイプである場合、field_motion_typeには「01」が
記述される。予測ベクトルが2個であって、18×8マ
クロブロックベースの予測タイプである場合、field_mo
tion_typeには「10」が記述される。予測ベクトルが
1個であって、デュアルプライムの予測タイプである場
合、field_motion_typeには「11」が記述される。
【0047】ピクチャ構造がフレームであり、frame_pr
ed_frame_dctが、そのビットストリーム中にframe_moti
on_typeが存在することを示し、frame_pred_frame_dct
が、そのビットストリーム中にdct_typeが存在すること
を示している場合、macroblock_typeを表わすデータエ
レメントの次にはdct_typeを表わすデータエレメントが
記述される。なお、dct_typeは、DCTがフレームDCTモー
ドであるか、フィールドDCTモードであるかを示すデー
タである。
【0048】MPEG2ビデオビットストリーム中の各デー
タエレメントは、start codeと称される、特殊なビット
パターンで開始される。これらのスタートコードは、別
の状況では、ビデオストリーム中に現れない特定のビッ
トパターンである。各スタートコードは、スタートコー
ドプレフィクスと、それに続くスタートコード値から構
成される。スタートコードプレフィクスは、ビット列
“0000 0000 0000 00000000 0001”である。スタートコ
ード値は、スタートコードのタイプを識別する8ビット
のデータである。
【0049】図14に、MPEG2のスタートコード値(Sta
rt code value)を示す。多くのスタートコードには、1
個のスタートコード値が設定されている。しかしなが
ら、slice_start_codeには、複数のスタートコード値
(01乃至AF)が設定されており、このスタートコー
ド値は、スライスに対する垂直位置を表わす。これらの
スタートコードは、全てバイト単位であるため、スター
トコードプレフィクスの最初のビットがバイトの最初の
ビットになるように、スタートコードプレフィクスの前
に、複数のビット“0”が挿入され、スタートコードが
バイト単位になるように調整される。
【0050】次に、MP@MLのMPEG2ビデオビットストリ
ームに対応した従来のMPEGビデオデコーダについて、図
15を参照して説明する。図15は、当該MPEGビデオデ
コーダの構成の一例を示している。
【0051】当該MPEGビデオデコーダは、ストリーム入
力回路11、バッファ制御回路12、クロック発生回路
13、スタートコード検出回路14、デコーダ15、動
き補償回路16、および表示出力回路17から構成され
るIC(Integrated Circuit)1と、ストリームバッファ
21およびビデオバッファ22で構成され、例えば、DR
AM(Dynamic Random Access Memory)からなるバッファ2
により構成される。
【0052】IC1のストリーム入力回路11は、高能
率符号化された符号化ストリーム(MP@MLのMPEG2ビデ
オビットストリーム)の入力を受け付けて、バッファ制
御回路12に供給する。バッファ制御回路12は、クロ
ック発生回路13から供給される基本クロックに従っ
て、入力された符号化ストリームをバッファ2のストリ
ームバッファ21に入力する。ストリームバッファ21
は、少なくとも、MP@MLのデコードに要求されるVBVバッ
ファサイズである1,835,008ビットの容量を有する。ス
トリームバッファ21に保存されている符号化ストリー
ムは、バッファ制御回路12の制御に従って、先に書き
込まれたデータから順に読み出され、スタートコード検
出回路14に供給される。スタートコード検出回路14
は、入力されたストリームから、図14を用いて説明し
たスタートコードを検出し、検出したスタートコードお
よび入力されたストリームをデコーダ15に出力する。
【0053】デコーダ15は、入力されたストリームを
MPEGシンタックスに基づいて、デコードする。デコーダ
15は、入力されたスタートコードに従って、まず、ピ
クチャ層のヘッダパラメータをデコードし、それを基
に、スライス層をマクロブロックに分離してマクロブロ
ックをデコードし、その結果得られる予測ベクトルおよ
び画素を、動き補償回路16に出力する。
【0054】圧縮符号化方式としてのMPEGでは、隣接し
た画像間の時間的冗長性を利用して、近接した画像間で
動き補償した差分を得ることにより、符号化効率を改善
している。当該MPEGビデオデコーダでは、動き補償を用
いた画素に対しては、現在デコードしている画素にその
動きベクトルが示す参照画像の画素データを加算するこ
とにより動き補償を行い、符号化前の画像データに復号
する。
【0055】デコーダ15から出力されるマクロブロッ
クが動き補償を使用していない場合、動き補償回路16
は、その画素データを、バッファ制御回路12を介して
バッファ2のビデオバッファ22に書き込み、表示出力
に備えるとともに、この画素データが、他の画像の参照
データとされる場合に備える。
【0056】デコーダ15から出力されるマクロブロッ
クが動き補償を使用している場合、動き補償回路16
は、デコーダ15から出力される予測ベクトルに従っ
て、バッファ制御回路12を介して、バッファ2のビデ
オバッファ22から参照画素データを読み出す。そし
て、読み出した参照画素データを、デコーダ15から供
給された画素データに加算し、動き補償を行う。動き補
償回路16は、動き補償を行った画素データを、バッフ
ァ制御回路12を介してバッファ2のビデオバッファ2
2に書き込み、表示出力に備えるとともに、この画素デ
ータが、他の画素の参照データとされる場合に備える。
【0057】表示出力回路17は、デコードした画像デ
ータを出力するための同期タイミング信号を発生し、こ
のタイミングを基に、バッファ制御回路12を介して、
ビデオバッファ22から画素データを読み出し、復号ビ
デオ信号として出力する。
【0058】
【発明が解決しようとする課題】以上説明したように、
MPEG2ストリームは階層構造を有している。図3を用い
て説明したピクチャ層のsequence_header乃至picture_c
oding_extensionのデータは、図2を用いて説明したプ
ロファイルおよびレベルから成るクラスが異なる場合に
おいても、そのデータ量は、あまり変更されない。一
方、スライス層以下のデータ量は、符号化する画素数に
依存する。
【0059】図2に示したように、HLにおいて1枚の
ピクチャで処理しなければならないマクロブロックの数
は、MLのそれに対して約6倍になる。さらに、図4に
示したように、4:2:2Pにおいて1個のマクロブロックで
処理するブロックの数は、MPのそれに対して4/3倍
になる。
【0060】したがって、図15に示したMP@MLに対応
する従来のMPEGビデオデコーダを用いて4:2:2P@HLの符
号化ストリームを復号しようとした場合、VBVバッファ
サイズおよび画素数の増加に伴って、ストリームバッフ
ァ21のバッファサイズが不足する。また、ビットレー
トの増加に伴い、入力ストリームのストリームバッファ
21へのアクセスが増加し、画素数の増加に伴って、動
き補償回路16のビデオバッファ22へのアクセスが増
加するため、バッファ制御回路12の制御が間に合わな
くなる。さらに、ビットレートの増加、マクロブロック
およびブロック数の増加に伴って、デコーダ15の処理
が間に合わなくなる。
【0061】一般に、信号処理を高速で実行させようと
した場合、回路規模が大幅に増加し、部品点数の増加お
よび消費電力の増加を招いてしまう。したがって、MP@M
Lを復号する従来技術を用いて、4:2:2P@HLを復号する装
置を実現しようとした場合、今日の半導体技術の進展に
よって信号処理回路、メモリ(バッファ)回路ともに、
その動作速度は著しく向上し、その回路規模は縮小化さ
れてはいるものの、実現可能な回路規模で実時間動作が
可能な4:2:2P@HLに対応したビデオデコーダを実現する
ことは困難である課題があった。
【0062】ところで、MP@MLの符号化ストリームを、
図15に示したMP@MLに対応する従来のMPEGビデオデコ
ーダを用い、1倍速以上で高速再生させることを考えた
場合、入力するMP@MLの符号化ストリームから画像を間
引いて当該MPEGビデオデコーダに入力する方法が考えら
れる。
【0063】しかしながら、MPEG方式においては、図1
を用いて説明したように、近傍の画像を参照する予測符
号化方式を採用しているので、任意の画像を間引いた場
合、復号することができない画像が生じてしまう。例え
ば、図16に示すように、画像P10を間引いた場合、画
像P10を参照して復号する画像B8,B9,B11,B12
およびP13を復号することができなくなってしまう。
【0064】そこで、図17に示すように、他の画像に
参照されるIピクチャおよびPピクチャは間引かず、他
の画像に参照されることがないBピクチャだけを間引い
たMP@MLの符号化ストリームを入力する方法が考えられ
る。しかしながら、Bピクチャだけを間引く方法は、B
ピクチャだけを検出して間引く機能が必要になる上、B
ピクチャだけしか間引かれないので、符号化ストリーム
の再生速度がIピクチャ、Pピクチャ、およびBピクチ
ャの配置に依存して特定の速度となってしまう課題があ
った。
【0065】また、復号したIピクチャ、およびPピク
チャを適宜繰り返して表示することにより、見かけ上の
再生速度は任意の速度に設定できるものの、そのような
表示出力は画像の動きがギクシャクしたものとなってし
まう課題があった。
【0066】さらに、従来のMPEGビデオデコーダでは、
複数の符号化ストリームを同時に入力したり、または、
DVBで供給される多チャンネル分の複数の符号化ストリ
ーム(エレメンタリストリーム)が多重化されているチ
ャンネル多重ストリーム(トランスポートストリーム)
を入力したりして、それらを同時にデコードし、得られ
る多チャンネル分の複数の復号ビデオ信号を同時に、あ
るいは、複数の復号ビデオ信号のうちの1つを選択して
出力するようなことができない課題があった。
【0067】本発明はこのような状況に鑑みてなされた
ものであり、実現可能な回路規模であって、4:2:2P@HL
の符号化ストリームを実時間再生でき、且つ、MP@MLの
符号化ストリームを高速再生できるビデオデコーダを実
現することを目的とする。
【0068】また、多チャンネル分の複数の符号化スト
リームを平行してデコードすることができるビデオデコ
ーダを実現することを目的とする。
【0069】
【課題を解決するための手段】本発明の第1の復号装置
は、高速化された符号化ストリームを入力する入力手段
と、高速化された符号化ストリームを復号する複数の復
号手段と、複数の復号手段を並行して動作させるように
制御する復号制御手段と、複数の復号手段が復号した高
速化された符号化ストリームに対応する画像を任意の再
生速度で出力させる出力制御手段とを含むことを特徴と
する。
【0070】前記高速化された符号化ストリームは、ビ
ットレートが所定数倍に高速化されたMPEG2ビデオビッ
トストリームであるようにすることができる。
【0071】前記出力制御手段は、ビットレートが所定
数倍に高速化されたMPEG2ビデオビットストリームに対
応する画像を、0倍乃至所定数倍の再生速度で出力する
ようにすることができる。
【0072】前記復号手段は、復号処理の終了を示す信
号を復号制御手段に出力するようにすることができ、前
記復号制御手段は、復号処理の終了を示す信号を出力し
た復号手段に、新たな符号化ストリームを復号させるよ
うに制御するようにすることができる。
【0073】本発明の第1の復号装置は、符号化ストリ
ームをバッファリングする第1のバッファ手段と、符号
化ストリームから、符号化ストリームに含まれる所定の
情報の単位の始まりを表わすスタートコードを読み出す
とともに、第1のバッファ手段に、スタートコードが保
持されている位置に関する位置情報を読み出す読み出し
手段と、読み出し手段により読み出された、スタートコ
ードおよび位置情報をバッファリングする第2のバッフ
ァ手段と、第1のバッファ手段による符号化ストリーム
のバッファリング、および第2のバッファ手段によるス
タートコードおよび位置情報のバッファリングを制御す
るバッファリング制御手段とをさらに含むことができ
る。
【0074】本発明の第1の復号装置は、複数の復号手
段により復号され、出力された複数の画像データのうち
の所定のものを選択する選択手段と、選択手段により選
択された画像データの入力を受け、必要に応じて動き補
償を施す動き補償手段とをさらに含むことができる。
【0075】前記復号手段は、復号処理が終了したこと
を示す終了信号を選択手段に出力するようにすることが
でき、前記選択手段は、複数の復号手段のそれぞれの処
理状態に対応する値を記憶する記憶手段を含むことがで
きる。さらに、前記選択手段は、記憶手段が記憶した値
が全て第1の値になった場合、復号処理が終了したこと
を示す終了信号を出力している復号手段に対応する記憶
手段に記憶されている値を、第1の値から第2の値に変
更させ、対応する記憶手段に記憶されている値が第2の
値である第1の復号手段により復号された画像データの
うち、いずれかの画像データを選択させ、選択された画
像データを復号した復号手段に対応する記憶手段に記憶
されている値を第1の値に変更するようにすることがで
きる。
【0076】本発明の第1の復号装置は、選択手段によ
り選択された画像データ、または動き補償手段により動
き補償が施された画像データを保持する保持手段と、選
択手段により選択された画像データ、または動き補償手
段により動き補償が施された画像データの保持手段によ
る保持を制御する保持制御手段とをさらに含むことがで
きる。
【0077】前記保持手段は、画像データの輝度成分と
色差成分をそれぞれ分けて保持するようにすることがで
きる。
【0078】本発明の第1の復号方法は、高速化された
符号化ストリームを入力する入力ステップと、高速化さ
れた符号化ストリームを復号する複数の復号ステップ
と、複数の復号ステップの処理を並行して動作させるよ
うに制御する復号制御ステップと、複数の復号ステップ
の処理で復号された高速化された符号化ストリームに対
応する画像を任意の再生速度で出力させる出力制御ステ
ップとを含むことができる。
【0079】本発明の第1の記録媒体のプログラムは、
高速化された符号化ストリームを入力する入力ステップ
と、高速化された符号化ストリームを復号する複数の復
号ステップと、複数の復号ステップの処理を並行して動
作させるように制御する復号制御ステップと、複数の復
号ステップの処理で復号された高速化された符号化スト
リームに対応する画像を任意の再生速度で出力させる出
力制御ステップとを含むことができる。
【0080】本発明の第2の復号装置は、高速化された
符号化ストリームを入力する入力手段と、複数のスライ
スデコーダを並行して動作させるように制御するスライ
スデコーダ制御手段と、複数のスライスデコーダが復号
した高速化された符号化ストリームに対応する画像を任
意の再生速度で出力させる出力制御手段とを含むことを
特徴とする。
【0081】本発明の第2の復号方法は、高速化された
前記符号化ストリームを入力する入力ステップと、複数
のスライスデコーダを並行して動作させるように制御す
るスライスデコーダ制御ステップと、複数のスライスデ
コーダが復号した高速化された符号化ストリームに対応
する画像を任意の再生速度で出力させる出力制御ステッ
プとを含むことを特徴とする。
【0082】本発明の第2の記録媒体のプログラムは、
高速化された前記符号化ストリームを入力する入力ステ
ップと、複数のスライスデコーダを並行して動作させる
ように制御するスライスデコーダ制御ステップと、複数
のスライスデコーダが復号した高速化された符号化スト
リームに対応する画像を任意の再生速度で出力させる出
力制御ステップとを含むことを特徴とする。
【0083】本発明の第3の復号装置は、複数の符号化
ストリームを入力する入力手段と、複数の符号化ストリ
ームを復号する複数の復号手段と、複数の復号手段を並
行して動作させるように制御する復号制御手段と、複数
の復号手段が復号した複数の符号化ストリームに対応す
る複数の画像を出力させる出力制御手段とを含むことを
特徴とする。
【0084】前記符号化ストリームは、MPEG2ビデオビ
ットストリームであるようにすることができる。
【0085】前記復号手段は、復号処理の終了を示す信
号を復号制御手段に出力するようにすることができ、前
記復号制御手段は、復号処理の終了を示す信号を出力し
た復号手段に、他の符号化ストリームを復号させるよう
に制御するようにすることができる。
【0086】本発明の第3の復号装置は、符号化ストリ
ームをバッファリングする第1のバッファ手段と、符号
化ストリームから、符号化ストリームに含まれる所定の
情報の単位の始まりを表わすスタートコードを読み出す
とともに、第1のバッファ手段に、スタートコードが保
持されている位置に関する位置情報を読み出す読み出し
手段と、読み出し手段により読み出された、スタートコ
ードおよび位置情報をバッファリングする第2のバッフ
ァ手段と、第1のバッファ手段による符号化ストリーム
のバッファリング、および第2のバッファ手段によるス
タートコードおよび位置情報のバッファリングを制御す
るバッファリング制御手段とをさらに含むことができ
る。
【0087】本発明の第3の復号装置は、複数の復号手
段により復号され、出力された複数の画像データのうち
の所定のものを選択する選択手段と、選択手段により選
択された画像データの入力を受け、必要に応じて動き補
償を施す動き補償手段とをさらに含むことができる。
【0088】前記復号手段は、復号処理が終了したこと
を示す終了信号を選択手段に出力するようにすることが
でき、前記選択手段は、複数の復号手段のそれぞれの処
理状態に対応する値を記憶する記憶手段を含むことがで
き、記憶手段が記憶した値が全て第1の値になった場
合、復号処理が終了したことを示す終了信号を出力して
いる復号手段に対応する記憶手段に記憶されている値
を、第1の値から第2の値に変更するようにし、対応す
る記憶手段に記憶されている値が第2の値である第1の
復号手段により復号された画像データのうち、いずれか
の画像データを選択するようにし、選択された画像デー
タを復号した復号手段に対応する記憶手段に記憶されて
いる値を第1の値に変更するようにすることができる。
【0089】本発明の第3の復号装置は、選択手段によ
り選択された画像データ、または動き補償手段により動
き補償が施された画像データを保持する保持手段と、選
択手段により選択された画像データ、または動き補償手
段により動き補償が施された画像データの保持手段によ
る保持を制御する保持制御手段とをさらに含むことがで
きる。
【0090】前記保持手段は、画像データの輝度成分と
色差成分をそれぞれ分けて保持するようにすることがで
きる。
【0091】本発明の第3の復号装置は、複数の符号化
ストリームが多重化されている多重ストリームの入力を
受け付ける受付手段と、多重ストリームを複数の符号化
ストリームに分離して入力手段に供給する供給手段とを
さらに含むことができる。
【0092】本発明の第3の復号方法は、複数の符号化
ストリームを入力する入力ステップと、複数の符号化ス
トリームを復号する複数の復号ステップと、複数の復号
ステップの処理を並行して動作させるように制御する復
号制御ステップと、複数の復号ステップの処理で復号さ
れた複数の符号化ストリームに対応する複数の画像を出
力させる出力制御ステップとを含むことを特徴とする。
【0093】本発明の第3の記録媒体のプログラムは、
複数の符号化ストリームを入力する入力ステップと、複
数の符号化ストリームを復号する複数の復号ステップ
と、複数の復号ステップの処理を並行して動作させるよ
うに制御する復号制御ステップと、複数の復号ステップ
の処理で復号された複数の符号化ストリームに対応する
複数の画像を出力させる出力制御ステップとを含むこと
を特徴とする。
【0094】本発明の第4の復号装置は、複数の符号化
ストリームを入力する入力手段と、複数のスライスデコ
ーダを並行して動作させるように制御するスライスデコ
ーダ制御手段と、複数のスライスデコーダが復号した複
数の符号化ストリームに対応する複数の画像を出力させ
る出力制御手段とを含むことを特徴とする。
【0095】本発明の第4の復号方法は、複数の符号化
ストリームを入力する入力ステップと、複数のスライス
デコーダを並行して動作させるように制御するスライス
デコーダ制御ステップと、複数のスライスデコーダが復
号した複数の符号化ストリームに対応する複数の画像を
出力させる出力制御ステップとを含むことを特徴とす
る。
【0096】本発明の第4の記録媒体のプログラムは、
複数の符号化ストリームを入力する入力ステップと、複
数のスライスデコーダを並行して動作させるように制御
するスライスデコーダ制御ステップと、複数のスライス
デコーダが復号した複数の符号化ストリームに対応する
複数の画像を出力させる出力制御ステップとを含むこと
を特徴とする。
【0097】本発明の第1の復号装置および方法、並び
に記録媒体のプログラムにおいては、高速化された符号
化ストリームが入力され、高速化された符号化ストリー
ムが復号される処理が並行して動作されるように制御さ
れる。さらに、復号された高速化された符号化ストリー
ムに対応する画像が任意の再生速度で出力されるように
制御される。
【0098】本発明の第2の復号装置および方法、並び
に記録媒体のプログラムにおいては、高速化された符号
化ストリームが入力され、複数のスライスデコーダが並
行して動作するように制御される。さらに、複数のスラ
イスデコーダが復号した高速化された符号化ストリーム
に対応する画像が任意の再生速度で出力されるように制
御される。
【0099】本発明の第3の復号装置および方法、並び
に記録媒体のプログラムにおいては、複数の符号化スト
リームが入力され、複数の符号化ストリームが復号され
る処理が並行して動作されるように制御される。さら
に、復号された複数の符号化ストリームに対応する複数
の画像の出力が制御される。
【0100】本発明の第4の復号装置および方法、並び
に記録媒体のプログラムにおいては、複数の符号化スト
リームが入力され、複数のスライスデコーダが並行して
動作するように制御される。さらに、複数のスライスデ
コーダが復号した複数の符号化ストリームに対応する複
数の画像の出力が制御される。
【0101】
【発明の実施の形態】本発明を適用したMPEGビデオデコ
ーダの第1の構成例について、図18を参照して説明す
る。
【0102】このMPEGビデオデコーダ40は、ストリー
ム入力回路41、スタートコード検出回路42、ストリ
ームバッファ制御回路43、クロック発生回路44、ピ
クチャデコーダ45、スライスデコーダ制御回路46、
スライスデコーダ47乃至49、動き補償回路50、輝
度バッファ制御回路51、色差バッファ制御回路52、
および表示出力回路53から構成されるIC31、スト
リームバッファ61およびスタートコードバッファ62
で構成され、例えば、DRAMからなるバッファ32、例え
ば、DRAMからなる輝度バッファ71、例えば、DRAMから
なる色差バッファ72、CPU(Central Processing Unit)
などよりなるコントローラ34、並びに、ドライブ35
で構成される。
【0103】ストリーム入力回路41は、高能率符号化
された符号化ストリーム(MPEG2ビデオビットストリー
ム)の入力を受け、スタートコード検出回路42に供給
する。スタートコード検出回路42は、入力された符号
化ストリームをストリームバッファ制御回路43に供給
するとともに、図14を用いて説明したスタートコード
を検出して、それを基に、そのスタートコードの種類
と、ストリームバッファ61にそのスタートコードが書
き込まれる位置を示す書き込みポインタとを含む、スタ
ートコード情報を生成し、ストリームバッファ制御回路
43に供給する。
【0104】クロック発生回路44は、図15を用いて
説明したクロック発生回路13の2倍の周期の基本クロ
ックを発生し、ストリームバッファ制御回路43に供給
する。ストリームバッファ制御回路43は、クロック発
生回路44から供給される基本クロックに従って、入力
された符号化ストリームを、バッファ32のストリーム
バッファ61に書き込み、入力されたスタートコード情
報を、バッファ32のスタートコードバッファ62に書
き込む。ストリームバッファ61は、少なくとも4:2:2P
@HLのデコードに要求されるVBVバッファサイズである4
7,185,920ビットの容量を有している。
【0105】ピクチャデコーダ45は、ストリームバッ
ファ制御回路43を介して、スタートコードバッファ6
2からスタートコード情報を読み出す。例えば、デコー
ド開始時は、図3を用いて説明したsequence_headerか
らデコードが開始されるので、ピクチャデコーダ45
は、図14を用いて説明したスタートコードであるsequ
ence_header_codeに対応する書き込みポインタをスター
トコードバッファ62から読み出し、その書き込みポイ
ンタを基に、ストリームバッファ61からsequence_hea
derを読み出してデコードする。続いて、ピクチャデコ
ーダ45は、sequence_headerの読み出しと同様に、seq
uence_extension,GOP_header,picture_coding_extens
ion等をストリームバッファ61から読み出してデコー
ドする。
【0106】ピクチャデコーダ45が、スタートコード
バッファ62から、最初のslice_start_codeを読み出し
た時点で、そのピクチャのデコードに必要な全てのパラ
メータが揃ったことになる。ピクチャデコーダ45は、
デコードしたピクチャ層のパラメータを、スライスデコ
ーダ制御回路46に出力する。
【0107】スライスデコーダ制御回路46は、ピクチ
ャ層のパラメータの入力を受け、符号化ストリームのク
ラス(4:2:2@ML、MP@ML等)を判別する。スライスデコ
ーダ制御回路46はまた、ピクチャ層のパラメータの入
力を受け、ストリームバッファ制御回路43を介して、
スタートコードバッファ62から、対応するスライスの
スタートコード情報を読み出す。さらに、スライスデコ
ーダ制御回路46は、スライスデコーダ47乃至49の
いずれかにデコードさせるスライスが、符号化ストリー
ムに含まれる何番目のスライスであるかを示すレジスタ
を有し、そのレジスタを参照しながら、ピクチャ層のパ
ラメータと、スタートコード情報に含まれるスライスの
書き込みポインタをスライスデコーダ47乃至49のい
ずれかに供給する。スライスデコーダ制御回路46が、
スライスデコーダ47乃至49のうち、デコードを実行
させるスライスデコーダを選択する処理については、図
19および図20を用いて後述する。
【0108】スライスデコーダ47は、マクロブロック
検出回路81、ベクトル復号回路82、逆量子化回路8
3、および逆DCT回路84で構成され、スライスデコー
ダ制御回路46から入力されたスライスの書き込みポイ
ンタを基に、対応するスライスを、ストリームバッファ
制御回路43を介してストリームバッファ61から読み
出す。そして、スライスデコーダ制御回路46から入力
されたピクチャ層のパラメータに従って、読み出したス
ライスをデコードして、動き補償回路50に出力する。
【0109】マクロブロック検出回路81は、スライス
層のマクロブロックを分離し、各マクロブロックのパラ
メータをデコードし、可変長符号化された各マクロブロ
ックの予測モードおよび予測ベクトルをベクトル復号回
路82に供給し、可変長符号化された係数データを逆量
子化回路83に供給する。ベクトル復号回路82は、可
変長符号化された、各マクロブロックの予測モードおよ
び予測ベクトルをデコードして、予測ベクトルを復元す
る。逆量子化回路83は、可変長符号化された係数デー
タをデコードして逆DCT回路84に供給する。逆DCT回路
84は、デコードされた係数データに逆DCTを施し、符
号化前の画素データに復元する。
【0110】スライスデコーダ47は、動き補償回路5
0に、デコードしたマクロブロックに対する動き補償の
実行を要求し(すなわち、図中、REQで示される信号を
1にする)、動き補償回路50から動き補償の実行要求
に対する受付を示す信号(図中ACKで示される信号)を
受けて、デコードされた予測ベクトルおよびデコードさ
れた画素を動き補償回路50に供給する。スライスデコ
ーダ47は、ACK信号の入力を受けて、デコードされた
予測ベクトルおよびデコードされた画素を動き補償回路
50に供給した後に、REQ信号を1から0に変更する。
そして、次に入力されたマクロブロックのデコードが終
了した時点で、REQ信号を、再び0から1に変更する。
【0111】また、スライスデコーダ48のマクロブロ
ック検出回路85乃至逆DCT回路88およびスライスデ
コーダ49のマクロブロック検出回路89乃至逆DCT回
路92においても、スライスデコーダ47のマクロブロ
ック検出回路81乃至逆DCT回路84と同様の処理が行
われるので、その説明は省略する。
【0112】動き補償回路50は、スライスデコーダ4
7乃至49から入力されたデータの動き補償が終了した
か否かを示すReg_REQ_A,Reg_REQ_BおよびReg_REQ_Cの
3つのレジスタを有し、これらのレジスタの値を参照し
ながら、適宜、スライスデコーダ47乃至49のうちの
1つを選択して、動き補償実行要求を受け付け(すなわ
ち、REQ信号に対して、ACK信号を出力して、予測ベクト
ルと画素の入力を受ける)、動き補償処理を実行する。
このとき、動き補償回路50は、スライスデコーダ47
乃至49のうち、所定のタイミングにおいてREQ信号が
1であるスライスデコーダ47乃至49に対する動き補
償が、それぞれ1回ずつ終了した後に、次の動き補償要
求を受け付ける。例えば、スライスデコーダ47が連続
して動き補償要求を出しても、スライスデコーダ48お
よびスライスデコーダ49の動き補償が終了するまで、
スライスデコーダ47の2つ目の動き補償要求は受け付
けられない。動き補償回路50が、スライスデコーダ4
7乃至49のいずれのデコーダの出力に対して動き補償
を実行するかを選択する処理については、図21および
図22を用いて後述する。
【0113】スライスデコーダ47乃至49のいずれか
から入力されるマクロブロックが動き補償を使用してい
ない場合、動き補償回路50は、その画素データが輝度
データであれば、輝度バッファ制御回路51を介して輝
度バッファ71に書き込み、その画素データが色差デー
タであれば、色差バッファ制御回路52を介して色差バ
ッファ72に書き込み、表示出力に備えるとともに、こ
の画素データが、他の画像の参照データとされる場合に
備える。
【0114】また、スライスデコーダ47乃至49のい
ずれかから出力されるマクロブロックが動き補償を使用
している場合、動き補償回路50は、スライスデコーダ
47乃至49のうち対応するデコーダから入力される予
測ベクトルに従って、その画素データが輝度データであ
れば、輝度バッファ制御回路51を介して、輝度バッフ
ァ71から参照画素を読み込み、その画素データが色差
データであれば、色差バッファ制御回路52を介して、
色差バッファ72から参照画素データを読み込む。そし
て、動き補償回路50は、読み込んだ参照画素データ
を、スライスデコーダ47乃至49のいずれかから供給
された画素データに加算し、動き補償を行う。
【0115】動き補償回路50は、動き補償を行った画
素データを、その画素データが輝度データであれば、輝
度バッファ制御回路51を介して、輝度バッファ71に
書き込み、その画素データが色差データであれば、色差
バッファ制御回路52を介して、色差バッファ72に書
き込み、表示出力に備えるとともに、この画素データ
が、他の画素の参照データとされる場合に備える。
【0116】表示出力回路53は、デコードされた画像
データを出力するための同期タイミング信号を発生し、
このタイミングに従って、輝度バッファ制御回路51を
介して、輝度バッファ71から輝度データを読み出し、
色差バッファ制御回路52を介して、色差バッファ72
から色差データを読み出して、復号ビデオ信号として出
力する。
【0117】ドライブ35は、コントローラ34に接続
されており、必要に応じて装着される磁気ディスク10
1、光ディスク102、光磁気ディスク103、および
半導体メモリ104などとデータの授受を行う。また、
コントローラ34は、以上説明したIC31、およびド
ライブ35の動作を制御するものである。コントローラ
34は、例えば、ドライブ35に装着されている磁気デ
ィスク101、光ディスク102、光磁気ディスク10
3、および半導体メモリ104などに記録されているプ
ログラムに従って、IC31に処理を実行させることが
できる。
【0118】次に、図19のフローチャートを参照し
て、スライスデコーダ制御回路46の処理について説明
する。
【0119】ステップS1において、スライスデコーダ
制御回路46は、画像の垂直方向のマクロブロック数を
設定した後、処理するスライスが画像内の何番目のスラ
イスであるかを表わすレジスタの値Nを1に初期化す
る。ステップS2において、スライスデコーダ制御回路
46は、スライスデコーダ47が処理中であるか否かを
判断する。
【0120】ステップS2において、スライスデコーダ
47が処理中ではないと判断された場合、ステップS3
に進む。ステップS3において、スライスデコーダ制御
回路46は、ピクチャ層のパラメータと、スタートコー
ド情報に含まれるスライスNの書き込みポインタをスラ
イスデコーダ47に供給し、スライスデコーダ47にス
ライスNをデコードさせ、処理はステップS8に進む。
【0121】ステップS2において、スライスデコーダ
47が処理中であると判断された場合、ステップS4に
進む。ステップS4において、スライスデコーダ制御回
路46は、スライスデコーダ48が処理中であるか否か
を判断する。ステップS4において、スライスデコーダ
48が処理中ではないと判断された場合、ステップS5
に進む。ステップS5において、スライスデコーダ制御
回路46は、ピクチャ層のパラメータと、スタートコー
ド情報に含まれるスライスNの書き込みポインタをスラ
イスデコーダ48に供給し、スライスデコーダ48にス
ライスNをデコードさせ、処理はステップS8に進む。
【0122】ステップS4において、スライスデコーダ
48が処理中であると判断された場合、ステップS6に
進む。ステップS6において、スライスデコーダ制御回
路46は、スライスデコーダ49が処理中であるか否か
を判断する。ステップS6において、スライスデコーダ
49が処理中であると判断された場合、ステップS2に
戻り、それ以降の処理が繰り返される。
【0123】ステップS6において、スライスデコーダ
49が処理中ではないと判断された場合、ステップS7
に進む。ステップS7において、スライスデコーダ制御
回路46は、ピクチャ層のパラメータと、スタートコー
ド情報に含まれるスライスNの書き込みポインタをスラ
イスデコーダ49に供給し、スライスデコーダ49にス
ライスNをデコードさせ、処理はステップS8に進む。
【0124】ステップS8において、スライスデコーダ
制御回路46は、処理するスライスが符号化ストリーム
の何番目のスライスであるかを示すレジスタの値Nを1
だけインクリメントする。ステップS9において、スラ
イスデコーダ制御回路46は、全スライスのデコードが
終了したか否かを判断する。ステップS9において、全
スライスのデコードが終了されていないと判断された場
合、ステップS2に戻り、それ以降の処理が繰り返され
る。ステップS9において、全スライスのデコードが終
了されたと判断された場合、スライスデコーダ制御回路
46の当該処理は終了される。
【0125】図19を用いて説明したスライスデコーダ
制御回路46の処理の具体例について、図20を参照し
て説明する。上述したように、ピクチャデコーダ45で
ピクチャ層のデータがデコードされ、そのパラメータが
スライスデコーダ制御回路46に供給される。ここで、
図19を用いて説明したステップS1において、スライ
スデコーダ制御回路46は、画像の垂直方向のマクロブ
ロック数(レジスタの値Nが取り得る最大値)を設定し
た後、レジスタの値Nを1に初期化する。ステップS2
において、スライスデコーダ47は処理中ではないと判
断されるので、ステップS3において、スライスデコー
ダ制御回路46は、ピクチャ層のパラメータと、スター
トコード情報に含まれるスライス1の書き込みポインタ
をスライスデコーダ47に供給し、スライスデコーダ4
7にスライスN(N=1)をデコードさせ、ステップS
8において、レジスタの値Nを1だけインクリメントす
る。そして、ステップS9において、全スライスのデコ
ードが終了していないと判断されるため、処理はステッ
プS2に戻る。
【0126】ステップS2において、スライスデコーダ
47は処理中であると判断される。そして、ステップS
4において、スライスデコーダ48は処理中でないと判
断されるので、ステップS5において、スライスデコー
ダ制御回路46は、ピクチャ層のパラメータと、スライ
ス2の書き込みポインタを、スライスデコーダ48に供
給し、スライスデコーダ48にスライスN(N=2)を
デコードさせ、ステップS8において、Nを1だけイン
クリメントする。そして、ステップS9において、全ス
ライスのデコードが終了していないと判断されるため、
処理はステップS2に戻る。
【0127】ステップS2において、スライスデコーダ
47は処理中であると判断され、ステップS4におい
て、スライスデコーダ48は処理中であると判断され
る。そして、ステップS6において、スライスデコーダ
49は処理中ではないと判断されるので、ステップS7
において、スライスデコーダ制御回路46は、ピクチャ
層のパラメータと、スライス3の書き込みポインタを、
スライスデコーダ49に供給し、スライスデコーダ49
にスライスN(N=3)をデコードさせ、ステップS8
において、Nを1だけインクリメントする。そして、ス
テップS9において、全スライスのデコードが終了して
いないと判断されるため、処理はステップS2に戻る。
【0128】スライスデコーダ47乃至49は、入力さ
れたスライスのデコード処理を実施した後、デコード処
理の完了を示す信号をスライスデコーダ制御回路46に
出力する。すなわち、スライスデコーダ47乃至49の
いずれかからスライスのデコードの完了を示す信号が入
力されるまで、スライスデコーダ47乃至49は全て処
理中であるので、ステップS2、ステップS4、および
ステップS6の処理が繰り返される。そして、図20の
図中Aで示されるタイミングで、スライスデコーダ48
がデコード処理の完了を示す信号を、スライスデコーダ
制御回路46に出力した場合、ステップS4において、
スライスデコーダ48が処理中ではないと判断されるの
で、ステップS5において、スライスデコーダ制御回路
46は、スライス4の書き込みポインタを、スライスデ
コーダ48に供給し、スライスデコーダ48に、スライ
スN(N=4)をデコードさせ、ステップS8におい
て、Nを1だけインクリメントする。そして、ステップ
S9において、全スライスのデコードが終了していない
と判断されるため、処理はステップS2に戻る。
【0129】そして、次にスライスデコーダ47乃至4
9のいずれかからデコード処理の完了を示す信号の入力
を受けるまで、スライスデコーダ制御回路46は、ステ
ップS2、ステップS4、およびステップS6の処理を
繰り返す。図20においては、スライスデコーダ制御回
路46は、図中Bで示されるタイミングで、スライスデ
コーダ49からスライス3のデコードの終了を示す信号
の入力を受けるので、ステップS6において、スライス
デコーダ49は処理中ではないと判断される。ステップ
S7において、スライスデコーダ制御回路46は、スラ
イス5の書き込みポインタをスライスデコーダ49に供
給し、スライスデコーダ49に、スライスN(N=5)
をデコードさせ、ステップS8において、Nを1だけイ
ンクリメントする。そして、ステップS9において、全
スライスのデコードが終了していないと判断されるた
め、処理はステップS2に戻る。以下、最後のスライス
のデコードが終了されるまで、同様の処理が繰り返され
る。
【0130】このように、スライスデコーダ制御回路4
6は、スライスデコーダ47乃至49の処理状況に対応
してスライスのデコード処理を割り当てるので、スライ
スデコーダ47乃至49に効率よくデコード処理を実行
させることが可能となる。
【0131】次に、動き補償回路50のスライスデコー
ダ調停処理について、図21のフローチャートを参照し
て説明する。
【0132】ステップS21において、動き補償回路5
0は、内部のレジスタReg_REQ_A,Reg_REQ_B、およびRe
g_REQ_Cを初期化する。すなわち、Reg_REQ_A=0,Reg_
REQ_B=0、およびReg_REQ_C=0とする。
【0133】ステップS22において、動き補償回路5
0は、レジスタの値が全て0であるか否かを判断する。
ステップS22において、レジスタの値が全て0ではな
い(すなわち、1つでも1がある)と判断された場合、
ステップS24に進む。
【0134】ステップS22において、レジスタの値が
全て0であると判断された場合、ステップS23に進
む。ステップS23において、動き補償回路50は、ス
ライスデコーダ47乃至49から入力されるREQ信号を
基に、レジスタの値を更新する。すなわち、スライスデ
コーダ47からREQ信号が出力されている場合、Reg_REQ
_A=1とし、スライスデコーダ48からREQ信号が出力
されている場合、Reg_REQ_B=1とし、スライスデコー
ダ49からREQ信号が出力されている場合、Reg_REQ_C=
1とする。そして、処理はステップS24に進む。
【0135】ステップS24において、動き補償回路5
0は、Reg_REQ_A=1であるか否かを判断する。ステッ
プS24において、Reg_REQ_A=1であると判断された
場合、ステップS25に進む。ステップS25におい
て、動き補償回路50は、スライスデコーダ47にACK
信号を送信し、Reg_REQ_A=0とする。スライスデコー
ダ47は、動き補償回路50に、ベクトル復号回路82
で復号された予測ベクトルと、逆DCT回路84で逆DCTさ
れた画素を出力する。そして、処理はステップS30に
進む。
【0136】ステップS24において、Reg_REQ_A=1
ではないと判断された場合、ステップS26に進む。ス
テップS26において、動き補償回路50は、Reg_REQ_
B=1であるか否かを判断する。ステップS26におい
て、Reg_REQ_B=1であると判断された場合、ステップ
S27に進む。ステップS27において、動き補償回路
50は、スライスデコーダ48にACK信号を送信し、Reg
_REQ_B=0とする。スライスデコーダ48は、動き補償
回路50に、ベクトル復号回路86で復号された予測ベ
クトルと、逆DCT回路88で逆DCTされた画素を出力す
る。そして、処理はステップS30に進む。
【0137】ステップS26において、Reg_REQ_B=1
ではないと判断された場合、ステップS28に進む。ス
テップS28において、動き補償回路50は、Reg_REQ_
C=1であるか否かを判断する。ステップS28におい
て、Reg_REQ_C=1ではないと判断された場合、ステッ
プS22に戻り、それ以降の処理が繰り返される。
【0138】ステップS28において、Reg_REQ_C=1
であると判断された場合、ステップS29に進む。ステ
ップS29において、動き補償回路50は、スライスデ
コーダ49にACK信号を送信し、Reg_REQ_C=0とする。
スライスデコーダ49は、動き補償回路50に、ベクト
ル復号回路90で復号された予測ベクトルと、逆DCT回
路92で逆DCTされた画素を出力する。そして、処理は
ステップS30に進む。
【0139】ステップS30において、動き補償回路5
0は、スライスデコーダ47乃至49のいずれかから入
力されたマクロブロックは、動き補償を使用しているか
否かを判断する。
【0140】ステップS30において、マクロブロック
が動き補償を使用していると判断された場合、ステップ
S31に進む。ステップS31において、動き補償回路
50は、入力されたマクロブロックに動き補償処理を行
う。すなわち、動き補償回路50は、スライスデコーダ
47乃至49のうち対応するデコーダから出力される予
測ベクトルに従って、その画素データが輝度データであ
れば、輝度バッファ制御回路51を介して、輝度バッフ
ァ71から参照画素を読み出し、その画素データが色差
データであれば、色差バッファ制御回路52を介して、
色差バッファ72から参照画素データを読み出す。そし
て、動き補償回路50は、読み出した参照画素データ
を、スライスデコーダ47乃至49のいずれかから供給
された画素データに加算し、動き補償を行う。
【0141】動き補償回路50は、動き補償を行った画
素データを、その画素データが輝度データであれば、輝
度バッファ制御回路51を介して、輝度バッファ71に
書き込み、その画素データが色差データであれば、色差
バッファ制御回路52を介して、色差バッファ72に書
き込み、表示出力に備えるとともに、この画素データ
が、他の画素の参照データとされる場合に備える。そし
て、ステップS22に戻り、それ以降の処理が繰り返さ
れる。
【0142】ステップS30において、マクロブロック
が動き補償を使用していないと判断された場合、ステッ
プS32に進む。ステップS32において、動き補償回
路50は、その画素データが輝度データであれば、輝度
バッファ制御回路51を介して輝度バッファ71に書き
込み、その画素データが色差データであれば、色差バッ
ファ制御回路52を介して色差バッファ72に書き込
み、表示出力に備えるとともに、この画素データが、他
の画像の参照データとされる場合に備える。そして、ス
テップS22に戻り、それ以降の処理が繰り返される。
【0143】図21を用いて説明した動き補償回路50
によるデコーダの調停処理の具体例について、図22を
参照して説明する。
【0144】図22に示すタイミングCにおいて、図2
1のステップS22の処理により、動き補償回路50の
レジスタが全て0であると判断された場合、スライスデ
コーダ47乃至49は、全て、REQ信号を出力している
ため、ステップS23の処理により、それぞれのレジス
タの値は、Reg_REQ_A=1,Reg_REQ_B=1、またはReg_
REQ_C=1に更新される。そして、ステップS24の処
理により、Reg_REQ_A=1であると判断されるため、ス
テップS25において、動き補償回路50は、スライス
デコーダ47にACK信号を出力して、Reg_REQ_A=0と
し、スライスデコーダ47から予測ベクトルと画素の入
力を受け、動き補償1を行う。
【0145】動き補償1が終了した後、すなわち、図2
2のDで示されるタイミングにおいて、処理は、再びス
テップS22に戻る。図中Dで示されるタイミングにお
いては、スライスデコーダ47から、REQ信号が出力さ
れている。しかし、レジスタの値は、Reg_REQ_A=0,R
eg_REQ_B=1,Reg_REQ_C=1であり、ステップS22
において、レジスタの値は、全て0ではないと判断され
るため、処理は、ステップS24に進み、レジスタの値
は更新されない。
【0146】ステップS24において、Reg_REQ_A=0
であると判断され、ステップS26において、Reg_REQ_
B=1であると判断されるので、動き補償回路50は、
ステップS27において、スライスデコーダ48にACK
信号を出力して、Reg_REQ_B=0とし、スライスデコー
ダ48から予測ベクトルと画素の入力を受け、動き補償
2を行う。
【0147】動き補償2が終了した後、すなわち、図2
2のEで示されるタイミングにおいて、処理は再びステ
ップS22に戻る。図中Eで示されるタイミングにおい
ても、スライスデコーダ47から、REQ信号が出力され
ている。しかし、レジスタの値は、Reg_REQ_A=0,Reg
_REQ_B=0,Reg_REQ_C=1であるので、ステップS2
2において、レジスタの値は全て0ではないと判断され
るので、図中Dで示されるタイミングのときと同様、レ
ジスタの値は更新されない。
【0148】そして、ステップS24において、Reg_RE
Q_A=0であると判断され、ステップS26において、R
eg_REQ_B=0であると判断され、ステップS28におい
て、Reg_REQ_C=1であると判断されるので、動き補償
回路50は、ステップS29において、スライスデコー
ダ49にACK信号を出力して、Reg_REQ_C=0とし、スラ
イスデコーダ49から予測ベクトルと画素の入力を受
け、動き補償3を行う。
【0149】動き補償3が終了した後、すなわち、図2
2のFで示されるタイミングにおいて、処理は再びステ
ップS22に戻る。Fで示されるタイミングにおいて
は、レジスタの値は、Reg_REQ_A=0,Reg_REQ_B=0,
Reg_REQ_C=0であるので、ステップS23において、
レジスタの値が更新され、Reg_REQ_A=1,Reg_REQ_B=
1,Reg_REQ_C=0となる。
【0150】そして、ステップS24において、Reg_RE
Q_A=1であると判断され、同様の処理により、動き補
償4が実行される。
【0151】このような処理を繰り返すことにより、動
き補償回路50は、スライスデコーダ47乃至49を調
停しながら、動き補償を行う。
【0152】以上説明したように、本発明を適用したMP
EGビデオデコーダ40においては、スタートコードバッ
ファ62を設けたことにより、ピクチャデコーダ45乃
至スライスデコーダ49を、お互いの動作の終了を待つ
ことなしに、ストリームバッファ61にアクセスさせる
ことができる。また、スライスデコーダ47乃至49
は、スライスデコーダ制御回路46の処理により、同時
に動作させることができる。さらに、動き補償回路50
は、適宜、スライスデコーダ47乃至49のうちの1つ
を選択し、それぞれ分離された輝度バッファ71および
色差バッファ72にアクセスし、動き補償を行うことが
できる。このように、MPEGビデオデコーダ40は、デコ
ード処理性能およびバッファへのアクセス性能が向上さ
れているので、4:2:2P@HLのMPEG2ビデオビットストリ
ームを実時間でデコードすることが可能となる。
【0153】ところで、MP@MLのMPEG2ビデオビットス
トリームを実時間でデコードするために要する処理能力
は、4:2:2P@HLのMPEG2ビデオビットストリームを実時
間でデコードするために要する処理能力の1/6であ
る。よって換言すれば、本発明を適用したMPEGビデオデ
コーダ40は、MP@MLのMPEG2ビデオビットストリーム
を最大6倍速で再生することが可能である。
【0154】具体的には、例えば、図23に示すシステ
ムにMPEGビデオデコーダ40を用いることにより、MP@M
LのMPEG2ビデオビットストリームの高速再生が実現さ
れる。
【0155】当該システムのハードディスクドライブ(H
DD)111には、MP@MLのMPEG2ビデオビットストリーム
が記録されている。再生装置112は、MPEGビデオデコ
ーダ40のコントローラ34からの制御に基づき、ハー
ドディスクドライブ111に記録されているMP@MLのMPE
G2ビデオビットストリームを、通常(1倍速)よりも
高速(例えば6倍速)で読み出し、得られた高速再生ス
トリームをMPEGビデオデコーダ40に供給する。
【0156】例えば、図24(A)に示すようなMP@ML
のMPEG2ビデオビットストリームは、MPEGビデオデコー
ダ40により、一切の処理が省略されることなく完全に
デコードされ、図24(B)に示すように輝度バッファ
71および色差バッファ72に書き込まれる。輝度バッ
ファ71および色差バッファ72に書き込まれた画像デ
ータを、表示出力回路53が画像のタイプに拘わりなく
6枚当たり1枚の割合で読み出し、復号ビデオ出力とし
て後段に出力することにより、6倍速の高速再生が実現
される。
【0157】なお、表示出力回路53が、輝度バッファ
71および色差バッファ72に書き込まれた画像データ
を、例えば、画像のタイプに拘わりなく3枚当たり1枚
の割合で読み出し、復号ビデオ出力として後段に出力す
れば、3倍速の高速再生が実現される。
【0158】すなわち、表示出力回路53が、輝度バッ
ファ71および色差バッファ72に書き込まれた画像デ
ータを画像のタイプに拘わりなく、X(=0乃至6)枚
当たり1枚の割合で読み出し、復号ビデオ出力として後
段に出力すれば、X倍速の高速再生が実現される。ここ
で、X=0の場合、スチル再生となる。
【0159】以上説明したように、MPEGビデオデコーダ
40においては、表示出力回路53が、画像のタイプに
拘わりなく一定の割合でデータを読み出すことによっ
て、見た目にもギクシャクしていない自然な動きの画像
を出力することが可能となる。
【0160】このようにMP@MLのMPEG2ビデオビットス
トリームを高速再生できるMPEGビデオデコーダ40を映
像編集等に用いれば、例えば、ビデオ信号の映像素材の
内容を容易に理解することができ、さらに、編集点等を
快適に検索することができるので、作業効率を向上させ
ることが可能となる。
【0161】ところでまた、図18に示したMPEGビデオ
デコーダ40に、さらに表示出力回路53と同様の回路
を2個追加して表示出力を3系統とすれば、入力された
6倍速のMP@MLのMPEG2ビデオビットストリームを3倍
速で再生して、得られる復号ビデオ出力を当該3系統で
順次出力するようにすることが可能である。
【0162】また、本発明は、2:1インタレースであ
って30フレーム/秒のMP@MLのMPEG2ビデオビットス
トリームを2倍速で記録媒体から読み出し、ノンインタ
レースであって60フレーム/秒の画像として出力する
ような場合にも適用することが可能である。
【0163】なお、図23に示したシステムにおいて
は、ハードディスクドライブ111にMP@MLのMPEG2ビ
デオビットストリームを記録するようにしたが、記録さ
れているMP@MLのMPEG2ビデオビットストリームを6倍
速で読み出せるものであれば、ハードディスクドライブ
111の代わりに他の記録再生デバイスを用いてもよ
い。
【0164】次に、本発明を適用したMPEGビデオデコー
ダの第2の構成例について、図25を参照して説明す
る。このMPEGビデオデコーダ130は、入力される多チ
ャンネル分の符号化ストリーム(いまの場合、チャンネ
ルCH1の符号化ストリーム入力、およびチャンネルC
H2の符号化ストリーム入力)を平行してデコードし、
得られるチャンネルCH1ビデオ出力、およびチャンネ
ルCH2ビデオ出力を後段に供給するものである。ま
た、MPEGビデオデコーダ130は、図18のMPEGビデオ
デコーダ40と同様に、図15に示した従来のMPEGビデ
オデコーダの6倍のデコード処理能力を有する。
【0165】MPEGビデオデコーダ130とMPEGビデオデ
コーダ40との構成上の違いについて説明する。MPEGビ
デオデコーダ130においては、MPEGビデオデコーダ4
0のストリーム入力回路41、スタートコード検出回路
42、および表示出力回路53が、それぞれ、チャンネ
ルCH1用のストリーム入力回路41−1、スタートコ
ード検出回路42−1、および表示出力回路53−1、
並びにチャンネルCH2用のストリーム入力回路41−
2、スタートコード検出回路42−2、および表示出力
回路53−2に置換されている。さらに、MPEGビデオデ
コーダ130においては、バッファ32のストリームバ
ッファ61およびスタートコードバッファ62、輝度バ
ッファ71、および色差バッファ72に、それぞれチャ
ンネルCH1用の領域とチャンネルCH2用の領域が設
けられている。
【0166】ストリーム入力回路41−1は、高能率符
号化されたチャンネルCH1の符号化ストリーム(MPEG
2ビデオビットストリーム)の入力を受け、スタートコ
ード検出回路42−1に供給する。スタートコード検出
回路42−1は、入力されたチャンネルCH1の符号化
ストリームをストリームバッファ制御回路43に供給す
るとともに、図14を用いて説明したスタートコードを
検出して、それを基に、そのスタートコードの種類と、
ストリームバッファ61のチャンネルCH1用の領域に
そのスタートコードが書き込まれる位置を示す書き込み
ポインタとを含む、スタートコード情報を生成し、スト
リームバッファ制御回路43に供給する。
【0167】同様に、ストリーム入力回路41−2は、
高能率符号化されたチャンネルCH2の符号化ストリー
ム(MPEG2ビデオビットストリーム)の入力を受け、ス
タートコード検出回路42−2に供給する。スタートコ
ード検出回路42−2は、入力されたチャンネルCH2
の符号化ストリームをストリームバッファ制御回路43
に供給するとともに、図14を用いて説明したスタート
コードを検出して、それを基に、そのスタートコードの
種類と、ストリームバッファ61のチャンネルCH2用
の領域にそのスタートコードが書き込まれる位置を示す
書き込みポインタとを含む、スタートコード情報を生成
し、ストリームバッファ制御回路43に供給する。
【0168】表示出力回路53−1は、デコードされた
チャンネルCH1の画像データを出力するための同期タ
イミング信号を発生し、このタイミングに従って、輝度
バッファ制御回路51を介して、輝度バッファ71から
輝度データを読み出し、色差バッファ制御回路52を介
して、色差バッファ72から色差データを読み出して、
チャンネルCH1のビデオ出力として後段に供給する。
【0169】同様に、表示出力回路53−2は、デコー
ドされたチャンネルCH2の画像データを出力するため
の同期タイミング信号を発生し、このタイミングに従っ
て、輝度バッファ制御回路51を介して、輝度バッファ
71から輝度データを読み出し、色差バッファ制御回路
52を介して、色差バッファ72から色差データを読み
出して、チャンネルCH2のビデオ出力として供給す
る。
【0170】なお、MPEGビデオデコーダ130を構成す
る他の回路については、同一の番号が付与されたMPEGビ
デオデコーダ40を構成する回路と同様であるので、そ
れらの説明については省略する。
【0171】次に、MPEGビデオデコーダ130がLチャ
ンネル分(いまの場合、L=2)の符号化ストリームを
平行してデコードするときのコントローラ34によるパ
ラレルでコード制御処理について、図26のフローチャ
ートを参照して説明する。
【0172】ステップS51において、コントローラ3
4は、デコードするチャンネルを示す自己のレジスタC
Hを1に初期化する。ステップS52において、コント
ローラ34は、ピクチャデコーダ45に対して、レジス
タCHの値に対応するチャンネルのピクチャ層のデコー
ドを指示する。ステップS53において、コントローラ
34は、ピクチャデコーダ45がレジスタCHの値に対
応するチャンネル(いまの場合、チャンネルCH1)の
ピクチャ層のデコードを完了したか否かを判定し、デコ
ードを完了したと判定するまで待機する。
【0173】この待機の間、コントローラ34からの指
示に対応して、ピクチャデコーダ45は、ストリームバ
ッファ制御回路43を介してバッファ32のスタートコ
ードバッファ62のチャンネルCH1の領域からスター
トコード情報を読み出し、デコードの開始点を示すsequ
ence_headerの書き込みポインタを検出する。また、ピ
クチャデコーダ45は、検出したチャンネルCH1のse
quence_headerの書き込みポインタに基づき、ストリー
ムバッファ制御回路43を介してバッファ32のストリ
ームバッファ61のチャンネルCH1の領域からsequen
ce_headerを読み出してデコードする。以降、同様にし
て、ストリームバッファ61のチャンネルCH1の領域
からsequence_extension,GOP_header,picture_heade
r、およびpicture_coding_extensionを読み出してデコ
ードする。さらに、ピクチャデコーダ45は、スタート
コードバッファ62のチャンネルCH1の領域からスタ
ートコード情報を読み出し、最初のスライスの書き込み
ポインタを検出する。
【0174】この段階、すなわち、チャンネルCH1の
ピクチャのデコードに必要な全てのピクチャ層パラメー
タがそろった段階において、ピクチャデコーダ45は、
ピクチャ層のデコードが完了したことをコントローラ3
4に通知する。
【0175】この通知に基づき、ステップS53におい
て、コントローラ34は、ピクチャ層のデコードが完了
したと判定する。処理は、ステップS54に進む。ステ
ップS54において、コントローラ34は、ピクチャデ
コーダ45からデコードされたチャンネルCH1のピク
チャ層パラメータを取得して保持する。ステップS55
において、コントローラ34は、スライスデコーダ46
が準備完了であるか否か(以前に指示した処理を完了し
ているか否かなど)を判定し、スライスデコーダ46が
準備完了であると判定するまで待機する。スライスデコ
ーダ46が準備完了であると判定された場合、処理はス
テップS56に進む。
【0176】ステップS56において、コントローラ3
4は、ピクチャデコーダ45から取得して保持している
チャンネルCH1のピクチャ層パラメータをスライスデ
コーダ制御回路46に供給する。ステップS57におい
て、コントローラ34は、スライスデコーダ制御回路4
6および動き補償回路50に対して、チャンネルCH1
のスライス層のデコードを指示する。
【0177】この指示に対応して、スライスデコーダ制
御回路46は、チャンネルCH1の各スライスのデコー
ドを、スライスデコーダ47乃至49に振り分ける。な
お、その詳細は、図19および図20を参照して上述し
た処理と同様であるので説明を省略する。また、この指
示に対応して、動き補償回路50は、スライスデコーダ
47乃至49からの要求を調停する。なお、その詳細
は、図21および図22を参照して上述した処理と同様
であるので説明を省略する。
【0178】以上のような制御によって、チャンネルC
H1の1ピクチャ分のデコードが終了したとき、スライ
スデコーダ制御回路46は、1ピクチャ分のデコードが
終了したことをコントローラ34に通知する。
【0179】この通知に対応して、コントローラ34
は、ステップS58において、レジスタCHの値を1だ
けインクリメントする。いまの場合、レジスタCHの値
が1から2にインクリメントされる。ステップS59に
おいて、コントローラ34は、レジスタCHの値がLよ
りも大きいか否かを判定する。レジスタCHの値がLよ
りも大きいと判定されない場合、処理はステップS52
に戻り、以降の処理が繰り返される。いまの場合、L=
2であってレジスタCHの値は2であるから、処理はス
テップS52に戻り、チャンネルCH2が処理対象とな
って、ステップS52乃至ステップS57の処理が実行
される。
【0180】そして、再びステップS58において、レ
ジスタCHの値が2から3にインクリメントされた場
合、ステップS59において、レジスタCHの値がLよ
りも大きいと判定されて、処理はステップS60に進
む。ステップS60において、コントローラ34は、レ
ジスタCHを1に初期化する。処理は、52に戻り、以
降の処理が繰り返される。
【0181】以上説明したようにして、Lチャンネル分
(いまの場合、2チャンネル分)の符号化ストリームが
平行してデコードされる。
【0182】なお、ステップS54乃至ステップS56
において、コントローラ34がピクチャデコーダ45か
らピクチャ層パラメータを取得して保持し、保持したピ
クチャ層パラメータをスライスデコーダ制御回路46に
供給する処理に関し、当該処理をコントローラ34の代
わりに実行する回路をMPEGビデオデコーダ130に設け
るようにしてもよい。
【0183】MPEGビデオデコーダ130が1ピクチャ分
のデコードに要する時間は、図15に示した従来のMPEG
ビデオデコーダが実時間で1ピクチャ分のデコードに要
する時間(すなわち、1倍速による処理時間)の1/6
で済むことになるので、最大で6チャンネル分の符号化
データを平行してデコードすることができる。
【0184】図27は、MPEGビデオデコーダ130を適
用したMPEGビデオサーバ編集システムの構成例を示して
いる。このMPEGビデオサーバ編集システムのハードディ
スクドライブ111には、多チャンネル分の複数のMPEG
2ビデオビットストリームが記録されている。ただし、
ハードディスクドライブ111の代わりに、光ディスク
ドライブ、光磁気ディスクドライブ、磁気テープドライ
ブ、半導体メモリドライブなどの他の記録再生デバイス
を用いてもよい。
【0185】再生装置112は、コントローラ34から
の制御に基づき、ハードディスクドライブ111に記録
されている複数のMPEG2ビデオビットストリームのう
ち、例えば、2チャンネル分のMPEG2ビデオビットスト
リーム(図27におけるチャンネルCH1の符号化スト
リーム、およびチャンネルCH2の符号化ストリーム)
を読み出してMPEGビデオデコーダ130に供給する。MP
EGビデオデコーダ130は、入力されたチャンネルCH
1およびCH2の符号化ストリームを、上述したように
平行してデコードし、得られたチャンネルCH1および
CH2のビデオ出力を後段に供給する。なお、デコード
して得られたチャンネルCH1およびCH2のビデオ出
力を適宜切り替えて後段に供給するようにしてもよい。
【0186】次に、図28は、本発明を適用したMPEGビ
デオデコーダの第3の構成例を示している。このMPEGビ
デオデコーダ150は、多重ストリームを入力として、
多重ストリームに含まれる多チャンネル分の符号化スト
リーム(いまの場合、チャンネルCH1およびCH2の
符号化ストリーム((MPEG2ビデオビットストリー
ム)))を平行してデコードし、得られるチャンネルC
H1ビデオ出力、およびチャンネルCH2ビデオ出力を
後段に供給するものである。
【0187】MPEGビデオデコーダ150は、図23に示
したMPEGビデオデコーダ130のストリーム入力回路4
1−1,41−2を、チャンネル分離回路151で置換
したものである。チャンネル分離回路151は、入力さ
れる多重ストリーム(すなわち、MPEGビデオストリーム
が多重化されているトランストートストリーム)をチャ
ンネルCH1の符号化ストリームとチャンネルCH2の
符号化ストリームに分離して、チャンネルCH1の符号
化ストリームをスタートコード検出回路42−1に供給
し、チャンネルCH2の符号化ストリームをスタートコ
ード検出回路42−2に供給する。
【0188】なお、MPEGビデオデコーダ150を構成す
る他の回路については、同一の番号が付与されたMPEGビ
デオデコーダ130を構成する回路と同様であるので、
それらの説明については省略する。また、MPEGビデオデ
コーダ150のスタートコード検出回路42−1,42
−2以降の動作についても、MPEGビデオデコーダ130
の動作と同様であるので、その説明は省略する。
【0189】MPEGビデオデコーダ150の適用例につい
て、図29を参照して説明する。MPEGビデオデコーダ1
50は、図25のMPEGビデオデコーダ130と同様に、
図15に示した従来のMPEGビデオデコーダの6倍のデコ
ード処理能力を有する。したがって、MPEGビデオデコー
ダ150は、入力される多重ストリームに多重化されて
いる多チャンネル分の符号化ストリームのうち、最大で
6チャンネル分の符号化ストリームを平行してデコード
することができる。
【0190】よって、例えば図29に示すように、多重
ストリームに含まれるチャンネルCH1およびCH2の
符号化ストリームを選択して分離し、平行してデコード
し、得られたチャンネルCH1およびチャンネルCH2
ビデオ出力をビデオスイッチャ161に供給するように
すれば、チャンネルCH1ビデオ出力の映像が徐々にチ
ャンネルCH2ビデオ出力に切り替えられるような、い
わゆるワイプと呼ばれる映像合成に適用することが可能
となる。
【0191】上述した一連の処理は、ソフトウェアによ
り実行することもできる。そのソフトウェアは、そのソ
フトウェアを構成するプログラムが、専用のハードウェ
アに組み込まれているコンピュータ、または、各種のプ
ログラムをインストールすることで、各種の機能を実行
することが可能な、例えば汎用のパーソナルコンピュー
タなどに、記録媒体からインストールされる。
【0192】この記録媒体は、図18に示すように、コ
ンピュータとは別に、ユーザにプログラムを提供するた
めに配布される、プログラムが記録されている磁気ディ
スク101(フレキシブルディスクを含む)、光ディス
ク102(CD-ROM(CompactDisk Read Only Memory)、
DVD(Digital Versatile Disk)を含む)、光磁気ディス
ク103(MD(Mini Disk)を含む)、もしくは半導体
メモリ104などよりなるパッケージメディアなどによ
り構成される。
【0193】また、本明細書において、記録媒体に記録
されるプログラムを記述するステップは、記載された順
序に沿って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
【0194】また、本明細書において、システムとは、
複数の装置により構成される装置全体を表すものであ
る。
【0195】
【発明の効果】以上のように、本発明の第1の復号装置
および方法、並びに記録媒体のプログラムによれば、高
速化された符号化ストリームを復号する処理を並行して
実行するように制御し、復号された高速化された符号化
ストリームに対応する画像を任意の再生速度で出力する
ように制御するようにしたので、実現可能な回路規模で
あって、MP@MLのMPEG2ビデオビットストリームを任意
の再生速度で再生できるビデオデコーダを実現すること
が可能となる。
【0196】また、本発明の第2の復号装置および方
法、並びに記録媒体のプログラムによれば、高速化され
た符号化ストリームを復号する複数のスライスデコーダ
を並行して動作するように制御し、復号された高速化さ
れた符号化ストリームに対応する画像を任意の再生速度
で出力するように制御するようにしたので、実現可能な
回路規模であって、MP@MLのMPEG2ビデオビットストリ
ームを任意の再生速度で再生できるビデオデコーダを実
現することが可能となる。
【0197】また、本発明の第3の復号装置および方
法、並びに記録媒体のプログラムによれば、複数の符号
化ストリームを復号する処理を並行して実行するように
制御し、復号された複数の符号化ストリームに対応する
複数の画像の出力を制御するようにしたので、多チャン
ネル分の複数の符号化ストリームを平行してデコードす
ることができるビデオデコーダを実現することが可能と
なる。
【0198】さらに、本発明の第4の復号装置および方
法、並びに記録媒体のプログラムによれば、複数の符号
化ストリームを復号する複数のスライスデコーダを並行
して動作するように制御し、復号された複数の符号化ス
トリームに対応する複数の画像の出力を制御するように
したので、多チャンネル分の複数の符号化ストリームを
平行してデコードすることができるビデオデコーダを実
現することが可能となる。
【図面の簡単な説明】
【図1】MPEG方式におけるピクチャタイプを説明するた
めの図である。
【図2】MPEG2で規定されたプロファイルおよびレベル
における、各パラメータの上限値を示す図である。
【図3】MPEG2ビットストリームの階層構造を説明する
ための図である。
【図4】マクロブロック層を説明するための図である。
【図5】sequence_headerのデータ構造を説明するため
の図である。
【図6】sequence_extensionのデータ構造を説明するた
めの図である。
【図7】GOP_headerのデータ構造を説明するための図で
ある。
【図8】picture_headerのデータ構造を説明するための
図である。
【図9】picture_coding_extensionのデータ構造を説明
するための図である。
【図10】picture_dataのデータ構造を説明するための
図である。
【図11】sliceのデータ構造を説明するための図であ
る。
【図12】macroblockのデータ構造を説明するための図
である。
【図13】macroblock_modesのデータ構造を説明するた
めの図である。
【図14】スタートコードを説明するための図である。
【図15】MP@MLの符号化ストリームをデコードする従
来のMPEGビデオデコーダの構成例を示すブロック図であ
る。
【図16】符号化ストリームからPピクチャを間引いた
場合の問題点について説明するための図である。
【図17】符号化ストリームからBピクチャだけを間引
いた場合の問題点について説明するための図である。
【図18】本発明を適応したMPEGビデオデコーダ40の
構成例を示すブロック図である。
【図19】スライスデコーダ制御回路46の処理を説明
するフローチャートである。
【図20】スライスデコーダ制御回路46の処理の具体
例を説明するための図である。
【図21】動き補償回路50によるスライスデコーダの
調停処理を説明するフローチャートである。
【図22】動き補償回路50によるスライスデコーダの
調停処理の具体例を説明するための図である。
【図23】MPEGビデオデコーダ40を用いてMP@MLの符
号化ストリームを高速再生するシステムの構成例を示す
ブロック図である。
【図24】MPEGビデオデコーダ40がMP@MLの符号化ス
トリームを高速再生する処理を説明するための図であ
る。
【図25】本発明を適応したMPEGビデオデコーダ130
の構成例を示すブロック図である。
【図26】MPEGビデオデコーダ130のコントローラ3
4によるLチャンネル分のパラレルデコード制御処理を
説明するフローチャートである。
【図27】MPEGビデオデコーダ130を用いたMPEGビデ
オサーバ編集システムの構成例を示すブロック図であ
る。
【図28】本発明を適応したMPEGビデオデコーダ150
の構成例を示すブロック図である。
【図29】MPEGビデオデコーダ150の適用例を説明す
るための図である。
【符号の説明】
31 IC, 32 バッファ, 34 コントロー
ラ, 42 スタートコード検出回路, 43 ストリ
ームバッファ制御回路, 45 ピクチャデコーダ,
46 スライスデコーダ制御回路, 47乃至49 ス
ライスデコーダ,50 動き補償回路, 51 輝度バ
ッファ制御回路, 52 色差バッファ制御回路, 6
1 ストリームバッファ, 62 スタートコードバッ
ファ,71 輝度バッファ, 72 色差バッファ,
101 磁気ディスク, 102 光ディスク, 10
3 光磁気ディスク, 104 半導体メモリ, 11
1 ハードディスク, 112 再生装置, 130
MPEGビデオデコーダ,150 MPEGビデオデコーダ,
151 チャンネル分離回路
フロントページの続き Fターム(参考) 5C052 AA01 AA16 AC02 AC05 CC11 DD10 5C053 FA14 FA24 GA11 GB06 GB07 GB08 GB17 GB38 HA22 HA24 KA03 5C059 KK31 KK36 MA23 MC11 NN21 PP06 PP07 PP16 RB09 RC16 SS01 SS13 SS17 SS20 UA05 UA08

Claims (28)

    【特許請求の範囲】
  1. 【請求項1】 符号化ストリームを復号する復号装置に
    おいて、 高速化された前記符号化ストリームを入力する入力手段
    と、 前記高速化された前記符号化ストリームを復号する複数
    の復号手段と、 複数の前記復号手段を並行して動作させるように制御す
    る復号制御手段と、 前記複数の復号手段が復号した前記高速化された前記符
    号化ストリームに対応する画像を任意の再生速度で出力
    させる出力制御手段とを含むことを特徴とする復号装
    置。
  2. 【請求項2】 前記高速化された前記符号化ストリーム
    は、ビットレートが所定数倍に高速化されたMPEG2ビデ
    オビットストリームであることを特徴とする請求項1に
    記載の復号装置。
  3. 【請求項3】 前記出力制御手段は、ビットレートが前
    記所定数倍に高速化された前記MPEG2ビデオビットスト
    リームに対応する画像を、0倍乃至前記所定数倍の再生
    速度で出力させることを特徴とする請求項2に記載の復
    号装置。
  4. 【請求項4】 前記復号手段は、復号処理の終了を示す
    信号を前記復号制御手段に出力し、 前記復号制御手段は、復号処理の終了を示す前記信号を
    出力した前記復号手段に、新たな前記符号化ストリーム
    を復号させるように制御することを特徴とする請求項1
    に記載の復号装置。
  5. 【請求項5】 前記符号化ストリームをバッファリング
    する第1のバッファ手段と、 前記符号化ストリームから、前記符号化ストリームに含
    まれる所定の情報の単位の始まりを表わすスタートコー
    ドを読み出すとともに、前記第1のバッファ手段に、前
    記スタートコードが保持されている位置に関する位置情
    報を読み出す読み出し手段と、 前記読み出し手段により読み出された、前記スタートコ
    ードおよび前記位置情報をバッファリングする第2のバ
    ッファ手段と、 前記第1のバッファ手段による前記符号化ストリームの
    バッファリング、および前記第2のバッファ手段による
    前記スタートコードおよび前記位置情報のバッファリン
    グを制御するバッファリング制御手段とをさらに含むこ
    とを特徴とする請求項1に記載の復号装置。
  6. 【請求項6】 複数の前記復号手段により復号され、出
    力された複数の画像データのうちの所定のものを選択す
    る選択手段と、 前記選択手段により選択された前記画像データの入力を
    受け、必要に応じて動き補償を施す動き補償手段とをさ
    らに含むことを特徴とする請求項1に記載の復号装置。
  7. 【請求項7】 前記復号手段は、復号処理が終了したこ
    とを示す終了信号を前記選択手段に出力し、 前記選択手段は、 複数の前記復号手段のそれぞれの処理状態に対応する値
    を記憶する記憶手段を含み、 前記記憶手段が記憶した値が全て第1の値になった場
    合、復号処理が終了したことを示す前記終了信号を出力
    している前記復号手段に対応する前記記憶手段に記憶さ
    れている値を、前記第1の値から第2の値に変更し、 対応する前記記憶手段に記憶されている値が前記第2の
    値である前記第1の復号手段により復号された前記画像
    データのうち、いずれかの前記画像データを選択し、 選択された前記画像データを復号した前記復号手段に対
    応する前記記憶手段に記憶されている値を前記第1の値
    に変更することを特徴とする請求項6に記載の復号装
    置。
  8. 【請求項8】 前記選択手段により選択された前記画像
    データ、または前記動き補償手段により動き補償が施さ
    れた前記画像データを保持する保持手段と、 前記選択手段により選択された前記画像データ、または
    前記動き補償手段により動き補償が施された前記画像デ
    ータの前記保持手段による保持を制御する保持制御手段
    とをさらに含むことを特徴とする請求項6に記載の復号
    装置。
  9. 【請求項9】 前記保持手段は、前記画像データの輝度
    成分と色差成分をそれぞれ分けて保持することを特徴と
    する請求項8に記載の復号装置。
  10. 【請求項10】 符号化ストリームを復号する復号装置
    の復号方法において、 高速化された前記符号化ストリームを入力する入力ステ
    ップと、 前記高速化された前記符号化ストリームを復号する複数
    の復号ステップと、 複数の前記復号ステップの処理を並行して動作させるよ
    うに制御する復号制御ステップと、 前記複数の復号ステップの処理で復号された前記高速化
    された前記符号化ストリームに対応する画像を任意の再
    生速度で出力させる出力制御ステップとを含むことを特
    徴とする復号方法。
  11. 【請求項11】 符号化ストリームを復号する復号用の
    プログラムであって、 高速化された前記符号化ストリームを入力する入力ステ
    ップと、 前記高速化された前記符号化ストリームを復号する複数
    の復号ステップと、 複数の前記復号ステップの処理を並行して動作させるよ
    うに制御する復号制御ステップと、 前記複数の復号ステップの処理で復号された前記高速化
    された前記符号化ストリームに対応する画像を任意の再
    生速度で出力させる出力制御ステップとを含むことを特
    徴とするコンピュータが読み取り可能なプログラムが記
    録されている記録媒体。
  12. 【請求項12】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置において、 高速化された前記符号化ストリームを入力する入力手段
    と、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御手段と、 前記複数のスライスデコーダが復号した前記高速化され
    た前記符号化ストリームに対応する画像を任意の再生速
    度で出力させる出力制御手段とを含むことを特徴とする
    復号装置。
  13. 【請求項13】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置の復号方法において、 高速化された前記符号化ストリームを入力する入力ステ
    ップと、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御ステップと、 前記複数のスライスデコーダが復号した前記高速化され
    た前記符号化ストリームに対応する画像を任意の再生速
    度で出力させる出力制御ステップとを含むことを特徴と
    する復号方法。
  14. 【請求項14】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置の復号用のプログラム
    であって、 高速化された前記符号化ストリームを入力する入力ステ
    ップと、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御ステップと、 前記複数のスライスデコーダが復号した前記高速化され
    た前記符号化ストリームに対応する画像を任意の再生速
    度で出力させる出力制御ステップとを含むことを特徴と
    するコンピュータが読み取り可能なプログラムが記録さ
    れている記録媒体。
  15. 【請求項15】 符号化ストリームを復号する復号装置
    において、 複数の前記符号化ストリームを入力する入力手段と、 前記複数の符号化ストリームを復号する複数の復号手段
    と、 複数の前記復号手段を並行して動作させるように制御す
    る復号制御手段と、 前記複数の復号手段が復号した複数の前記符号化ストリ
    ームに対応する複数の画像を出力させる出力制御手段と
    を含むことを特徴とする復号装置。
  16. 【請求項16】 前記符号化ストリームは、MPEG2ビデ
    オビットストリームであることを特徴とする請求項15
    に記載の復号装置。
  17. 【請求項17】 前記復号手段は、復号処理の終了を示
    す信号を前記復号制御手段に出力し、 前記復号制御手段は、復号処理の終了を示す前記信号を
    出力した前記復号手段に、他の前記符号化ストリームを
    復号させるように制御することを特徴とする請求項15
    に記載の復号装置。
  18. 【請求項18】 前記符号化ストリームをバッファリン
    グする第1のバッファ手段と、 前記符号化ストリームから、前記符号化ストリームに含
    まれる所定の情報の単位の始まりを表わすスタートコー
    ドを読み出すとともに、前記第1のバッファ手段に、前
    記スタートコードが保持されている位置に関する位置情
    報を読み出す読み出し手段と、 前記読み出し手段により読み出された、前記スタートコ
    ードおよび前記位置情報をバッファリングする第2のバ
    ッファ手段と、 前記第1のバッファ手段による前記符号化ストリームの
    バッファリング、および前記第2のバッファ手段による
    前記スタートコードおよび前記位置情報のバッファリン
    グを制御するバッファリング制御手段とをさらに含むこ
    とを特徴とする請求項15に記載の復号装置。
  19. 【請求項19】 複数の前記復号手段により復号され、
    出力された複数の画像データのうちの所定のものを選択
    する選択手段と、 前記選択手段により選択された前記画像データの入力を
    受け、必要に応じて動き補償を施す動き補償手段とをさ
    らに含むことを特徴とする請求項15に記載の復号装
    置。
  20. 【請求項20】 前記復号手段は、復号処理が終了した
    ことを示す終了信号を前記選択手段に出力し、 前記選択手段は、 複数の前記復号手段のそれぞれの処理状態に対応する値
    を記憶する記憶手段を含み、 前記記憶手段が記憶した値が全て第1の値になった場
    合、復号処理が終了したことを示す前記終了信号を出力
    している前記復号手段に対応する前記記憶手段に記憶さ
    れている値を、前記第1の値から第2の値に変更し、 対応する前記記憶手段に記憶されている値が前記第2の
    値である前記第1の復号手段により復号された前記画像
    データのうち、いずれかの前記画像データを選択し、 選択された前記画像データを復号した前記復号手段に対
    応する前記記憶手段に記憶されている値を前記第1の値
    に変更することを特徴とする請求項19に記載の復号装
    置。
  21. 【請求項21】 前記選択手段により選択された前記画
    像データ、または前記動き補償手段により動き補償が施
    された前記画像データを保持する保持手段と、 前記選択手段により選択された前記画像データ、または
    前記動き補償手段により動き補償が施された前記画像デ
    ータの前記保持手段による保持を制御する保持制御手段
    とをさらに含むことを特徴とする請求項19に記載の復
    号装置。
  22. 【請求項22】 前記保持手段は、前記画像データの輝
    度成分と色差成分をそれぞれ分けて保持することを特徴
    とする請求項21に記載の復号装置。
  23. 【請求項23】 複数の前記符号化ストリームが多重化
    されている多重ストリームの入力を受け付ける受付手段
    と、 前記多重ストリームを複数の前記符号化ストリームに分
    離して、前記入力手段に供給する供給手段とをさらに含
    むことを特徴とする請求項15に記載の復号装置。
  24. 【請求項24】 符号化ストリームを復号する復号装置
    の復号方法において、 複数の前記符号化ストリームを入力する入力ステップ
    と、 前記複数の符号化ストリームを復号する複数の復号ステ
    ップと、 複数の前記復号ステップの処理を並行して動作させるよ
    うに制御する復号制御ステップと、 前記複数の復号ステップの処理で復号された複数の前記
    符号化ストリームに対応する複数の画像を出力させる出
    力制御ステップとを含むことを特徴とする復号方法。
  25. 【請求項25】 符号化ストリームを復号する復号用の
    プログラムであって、 複数の前記符号化ストリームを入力する入力ステップ
    と、 前記複数の符号化ストリームを復号する複数の復号ステ
    ップと、 複数の前記復号ステップの処理を並行して動作させるよ
    うに制御する復号制御ステップと、 前記複数の復号ステップの処理で復号された複数の前記
    符号化ストリームに対応する複数の画像を出力させる出
    力制御ステップとを含むことを特徴とするコンピュータ
    が読み取り可能なプログラムが記録されている記録媒
    体。
  26. 【請求項26】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置において、 複数の前記符号化ストリームを入力する入力手段と、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御手段と、 前記複数のスライスデコーダが復号した複数の前記符号
    化ストリームに対応する複数の画像を出力させる出力制
    御手段とを含むことを特徴とする復号装置。
  27. 【請求項27】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置の復号方法において、 複数の前記符号化ストリームを入力する入力ステップ
    と、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御ステップと、 前記複数のスライスデコーダが復号した複数の前記符号
    化ストリームに対応する複数の画像を出力させる出力制
    御ステップとを含むことを特徴とする復号方法。
  28. 【請求項28】 符号化ストリームを復号する複数のス
    ライスデコーダを備える復号装置の復号用のプログラム
    であって、 複数の前記符号化ストリームを入力する入力ステップ
    と、 複数の前記スライスデコーダを並行して動作させるよう
    に制御するスライスデコーダ制御ステップと、 前記複数のスライスデコーダが復号した複数の前記符号
    化ストリームに対応する複数の画像を出力させる出力制
    御ステップとを含むことを特徴とするコンピュータが読
    み取り可能なプログラムが記録されている記録媒体。
JP2001147594A 2000-05-29 2001-05-17 復号装置および方法、並びに記録媒体 Expired - Fee Related JP4906197B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001147594A JP4906197B2 (ja) 2000-05-29 2001-05-17 復号装置および方法、並びに記録媒体

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2000158546 2000-05-29
JP2000158546 2000-05-29
JP2000-158546 2000-05-29
JP2001147594A JP4906197B2 (ja) 2000-05-29 2001-05-17 復号装置および方法、並びに記録媒体

Publications (2)

Publication Number Publication Date
JP2002057986A true JP2002057986A (ja) 2002-02-22
JP4906197B2 JP4906197B2 (ja) 2012-03-28

Family

ID=26592819

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001147594A Expired - Fee Related JP4906197B2 (ja) 2000-05-29 2001-05-17 復号装置および方法、並びに記録媒体

Country Status (1)

Country Link
JP (1) JP4906197B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009048469A (ja) * 2007-08-21 2009-03-05 Fujitsu Ltd 情報処理装置及び情報処理方法
US7725008B2 (en) 2008-03-31 2010-05-25 Kabushiki Kaisha Toshiba Information processing apparatus and decoding control method
JP2011155671A (ja) * 2004-05-04 2011-08-11 Qualcomm Inc 時間的なスケーラビリティのために2方向予測されたフレームを組み立てるための方法及び装置
US8041194B2 (en) 2004-08-18 2011-10-18 Sony Corporation Decode control apparatus, decode control method, computer program, and recording medium
US8670653B2 (en) 2005-04-15 2014-03-11 Sony Corporation Encoding apparatus and method, and decoding apparatus and method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0723397A (ja) * 1993-03-05 1995-01-24 Sony Corp 画像信号復号化装置及び画像信号復号化方法
JPH10164584A (ja) * 1996-11-26 1998-06-19 Sharp Corp 画像処理装置
JPH11187393A (ja) * 1997-12-22 1999-07-09 Toshiba Corp 画像データ復号化装置及び画像データ復号化方法
JPH11341489A (ja) * 1998-05-25 1999-12-10 Sony Corp 画像復号化装置とその方法
JP2000050255A (ja) * 1998-07-28 2000-02-18 Toshiba Corp 画像復号化装置及び方法
JP2000092493A (ja) * 1998-09-11 2000-03-31 Matsushita Electric Ind Co Ltd 映像復号装置及び映像復号方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0723397A (ja) * 1993-03-05 1995-01-24 Sony Corp 画像信号復号化装置及び画像信号復号化方法
JPH10164584A (ja) * 1996-11-26 1998-06-19 Sharp Corp 画像処理装置
JPH11187393A (ja) * 1997-12-22 1999-07-09 Toshiba Corp 画像データ復号化装置及び画像データ復号化方法
JPH11341489A (ja) * 1998-05-25 1999-12-10 Sony Corp 画像復号化装置とその方法
JP2000050255A (ja) * 1998-07-28 2000-02-18 Toshiba Corp 画像復号化装置及び方法
JP2000092493A (ja) * 1998-09-11 2000-03-31 Matsushita Electric Ind Co Ltd 映像復号装置及び映像復号方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011155671A (ja) * 2004-05-04 2011-08-11 Qualcomm Inc 時間的なスケーラビリティのために2方向予測されたフレームを組み立てるための方法及び装置
US8041194B2 (en) 2004-08-18 2011-10-18 Sony Corporation Decode control apparatus, decode control method, computer program, and recording medium
US8670653B2 (en) 2005-04-15 2014-03-11 Sony Corporation Encoding apparatus and method, and decoding apparatus and method
JP2009048469A (ja) * 2007-08-21 2009-03-05 Fujitsu Ltd 情報処理装置及び情報処理方法
US7725008B2 (en) 2008-03-31 2010-05-25 Kabushiki Kaisha Toshiba Information processing apparatus and decoding control method

Also Published As

Publication number Publication date
JP4906197B2 (ja) 2012-03-28

Similar Documents

Publication Publication Date Title
JP5041626B2 (ja) 復号装置、復号方法、およびプログラム
US6917652B2 (en) Device and method for decoding video signal
EP1161097B1 (en) MPEG decoder
KR101187550B1 (ko) 입체적 3d-비디오 이미지 디지털 코딩 시스템 및 방법
US5739862A (en) Reverse playback of MPEG video
JP2006510303A (ja) モザイク番組案内方法
JP2002359848A (ja) 画像処理装置
JPH11196411A (ja) 画像符号化装置、画像符号化方法、画像復号化装置、及び画像復号化方法
JP2001028748A (ja) データ再生伝送装置及びデータ再生伝送方法
US20030016745A1 (en) Multi-channel image encoding apparatus and encoding method thereof
JP2001346165A (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機
JPH09200695A (ja) 高速再生のためのビデオデータの復号化方法及びその装置
JP3852366B2 (ja) 符号化装置および方法、復号装置および方法、並びにプログラム
KR19980016035A (ko) 영상프레임 데이터를 일 메모리에 저장하는 방법
US7446819B2 (en) Apparatus and method for processing video signals
US20050141620A1 (en) Decoding apparatus and decoding method
JP4906197B2 (ja) 復号装置および方法、並びに記録媒体
KR20040065170A (ko) 화상 정보 복호 장치 및 방법
JPH1084547A (ja) 動画像圧縮/伸長装置
KR100264639B1 (ko) 디지탈 영상의 온-스크린 표시를 위한 색 제어
JP2003179826A (ja) 画像再生表示装置
JPH1168881A (ja) データストリーム処理装置及び方法
JP2001238167A (ja) 画像再生方法とこの方法を利用可能な画像再生装置およびテレビジョン受像機
JP2001238166A (ja) 画像再生方法とこの方法を利用可能な画像再生装置およびテレビジョン受像機
JP2001333384A (ja) 画像処理方法とこの方法を利用可能な画像処理装置およびテレビジョン受像機

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080109

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091001

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091006

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100309

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100510

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100608

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100823

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20100916

A912 Removal of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20101015

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120110

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150120

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees