JPH11313315A

JPH11313315A - 復号方法

Info

Publication number: JPH11313315A
Application number: JP11676298A
Authority: JP
Inventors: Tadashi Ono; 正小野; Tatsuro Shigesato; 達郎重里
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 1998-04-27
Filing date: 1998-04-27
Publication date: 1999-11-09
Anticipated expiration: 2018-04-27
Also published as: JP3405190B2

Abstract

(57)【要約】【課題】符号化された映像、音声データを可能な限り
少ないバッファ数を用いて、音声復号をフレーム落ちな
く行い、かつ映像復号の再生レートを向上させる。【解決手段】あるフレームの入力が終了した時、映像
処理候補番号に入力処理番号を設定し、入力処理番号に
前記音声処理番号以外で、かつ前記映像処理番号以外で
ある番号を設定し、映像復号が終了したとき、映像処理
番号に映像処理候補番号を入力する。バッファが３フレ
ームあれば、処理中のデータが上書きされることなく、
かつ効率よく映像、音声の復号を行うことができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、符号化された映像
（以後符号化映像と呼ぶ）および音声（以後符号化音声
と呼ぶ）を復号する方法に関するものである。

【０００２】

【従来の技術】近年計算機の性能向上により、パーソナ
ルコンピュータ（ＰＣ）においても、専用の機器を用い
ることなく、ソフトウェアで映像・音声信号を処理する
ことが実用的になってきた。

【０００３】図１３は、一般的なパーソナルコンピュー
タ（以後ＰＣと呼ぶ）の構成について説明した図であ
る。ＰＣの一般的な構成は、演算装置であるCPU１３０
１、不揮発性記録媒体であるハードディスク１３０２、
揮発性記録媒体である外部メモリ（バッファ）１３０３
が、バス１３０５によって接続されているものである。

【０００４】また、ディジタルの映像や音声データをリ
アルタイムで伝送できるIEEE１３９４インターフェース
が規格化され、この規格に基づいたＰＣインターフェー
ス（IEEE１３９４端子１３０４）も近い将来商品化され
る。

【０００５】図１４はＰＣにおいて符号化された映像を
ソフトウェアで復号して再生する方法の一例を説明した
ブロック図である。図１４において、１４０１は映像入
力部、１４０２はバッファ、１４０３は映像復号部、１
４０４は映像出力部である。なおこの例では、符号化映
像が１フレーム単位でバッファに入力されるものとす
る。

【０００６】映像入力部１４０１から入力された符号化
映像は、１フレーム単位でバッファ１４０２に保持され
る。映像復号部１４０３は、バッファ１４０２から符号
化映像を取得して復号し、映像出力部１４０４に出力し
て再生する。

【０００７】ここで、あるフレームの符号化映像を取得
して復号中に、次のフレームが同一バッファに入力され
ると、復号を正しく行うことができない。そのため、図
１４のようにバッファ０、バッファ１と２個用意し、バ
ッファ０のデータを復号中のときは、次のフレームの符
号化映像はバッファ１に入力することで、正しく再生を
行うことができる。

【０００８】

【発明が解決しようとする課題】しかしながら、上記の
従来技術による方法を用いて、図１３のＰＣ上で映像ま
たは音声を再生させるとき、符号化映像の復号は膨大な
処理量を持つ演算を行う必要があり、通常、符号化映像
の復号に要する時間は、バッファへの入力に要する時間
よりも時間を要するため以下のような問題が生じる。

【０００９】一例として、図１３のハードディスク１３
０２に記録されている符号化映像を取得して再生すると
き、バス１３０５の混み具合等の状態によっては、符号
化映像の入力が遅延することもある。このとき、たとえ
ばバッファ０のフレームの映像復号が１／３０秒（ＮＴ
ＳＣ信号の１フレーム期間）以内に完了しても、バッフ
ァ１への次のフレームの符号化映像入力が完了していな
いと、バッファ１の復号化の処理を開始させることがで
きず、リアルタイムでの再生が困難となる。

【００１０】また、映像復号にあわせて音声復号も行う
とき、音声復号が早く終了しても、映像復号が終了する
まで、次に入力されるフレームのデータ入力を行うこと
ができない。これは、次フレームの音声復号をも遅延す
ることを意味する。音声の再生は、復号が遅延すると、
間延びしたように聞こえる。また逆に、フレーム落ちが
発生すると音飛びを生じ、いずれの場合も再生される音
声は非常に不快なものとなる。

【００１１】一方映像信号は、フレーム落ちが２〜３フ
レームに１フレーム程度の割合で発生しても視覚的に大
きな妨害とはならない。

【００１２】これら不都合が生じないようにするため
に、バッファ数を増やす方法が考えられるが、バッファ
を増やすことで処理を行うＰＣの価格も上昇するという
問題がある。また、単にバッファ数を増加させるだけ
で、処理のスケジューリングを行わないと、CPUが遊休
状態になる可能性がある。

【００１３】本発明では、従来までの技術における課題
を解決し、必要となるバッファの数を可能な限り削減
し、かつフレーム単位でのデータ入力、復号のスケジューリ
ングを行うことで、音声信号をリアルタイムで途切れる
ことなく再生させ、かつ映像出力レートが高くなるよう
な効率よい復号方法および復号プログラムを提供する。

【００１４】

【課題を解決するための手段】本願第1の発明は、符号
化映像データを復号単位で復号して再生する方法であっ
て、この復号単位の前記符号化映像データを入力し、こ
の符号化映像データを復号単位でｎ個のバッファ（ｎは
自然数）に保持するとき、入力処理番号、映像処理番
号、および映像処理候補番号を設定し、入力処理番号に
対応しているバッファに、復号単位の前記符号化映像デ
ータが入力されるよう制御し、復号単位の入力が終了し
たとき、この入力が終了したばかりのバッファの入力処
理番号を映像処理候補番号に入力し、新しい入力処理番
号として直前に入力処理番号を入力したばかりの映像処
理候補番号以外で、かつこの復号単位の入力が終了した
時点での前記映像処理番号以外である番号を入力し、前
記映像処理番号のバッファから前記符号化映像データを
取得し、取得された符号化映像データを復号し、前記復
号単位の前記映像復号ステップが終了したとき、前記映
像処理番号に前記映像処理候補番号を入力することを特
徴とする。

【００１５】本願第２の発明は、符号化音声データおよ
び符号化映像データを復号単位で復号して再生する方法
であって、復号単位の符号化映像データおよび復号単位
の符号化音声データを多重化した多重化データを入力
し、この多重化データを復号単位でｎ個のバッファ（ｎ
は自然数）に保持するとき、入力処理番号、映像処理番
号、および映像処理候補番号を設定し、この入力処理番
号に対応しているバッファに、復号単位の多重化データ
が入力されるよう制御し、入力処理番号のバッファから
符号化音声データを抽出し、抽出された符号化音声デー
タを復号し、復号単位の音声復号ステップが終了したと
き、映像処理候補番号に抽出したばかりのバッファの入
力処理番号を入力し、新しい入力処理番号としてこの入
力したばかりの映像処理候補番号以外で、かつこの音声
復号ステップが終了した時点での映像処理番号以外であ
る番号を入力し、映像処理番号のバッファから符号化映
像データを抽出し、この抽出された符号化映像データを
復号し、復号単位の前記映像復号ステップが終了したと
き、映像処理番号に映像処理候補番号を入力することを
特徴とする。

【００１６】本願第3の発明は、符号化音声データおよ
び符号化映像データを復号単位で復号して再生する方法
であって、復号単位の符号化映像データおよび復号単位
の符号化音声データを多重化した多重化データを入力
し、この多重化データを復号単位でｎ個のバッファ（ｎ
は自然数）に保持するとき、入力処理番号、映像処理番
号、および映像処理候補番号を設定し、この入力処理番
号に対応しているバッファに、復号単位の多重化データ
が入力されるよう制御し、復号単位の入力が終了したと
き、音声処理番号および映像処理候補番号に入力が終了
したばかりのバッファの入力処理番号を設定し、新しい
入力処理番号として設定したばかりの音声処理番号以外
で、かつこの復号単位の入力が終了した時点での映像処
理番号以外である番号、もしくは映像処理候補番号以外
で、かつこの復号単位の入力が終了した時点での映像処
理番号以外である番号を入力し、前記音声処理番号のバ
ッファから前記符号化音声データを抽出し、前記抽出さ
れた符号化音声データを復号し、前記映像処理番号のバ
ッファから前記符号化映像データを抽出し、前記抽出さ
れた符号化映像データを復号し、前記復号単位の前記映
像復号ステップが終了したとき、前記映像処理番号に前
記映像処理候補番号を入力することを特徴とする。

【００１７】本願第４の発明は、符号化音声データおよ
び符号化映像データを復号単位で復号して再生する方法
であって、前記復号単位の前記符号化映像データおよび
前記復号単位の前記符号化音声データを多重化した多重
化データが入力され、前記多重化データを前記復号単位
でｎ個のバッファ（ｎは自然数）に保持するとき、入力
処理番号、映像処理番号、音声処理番号、および映像処
理候補番号を設定し、前記多重化データの復号単位に対
応する時間間隔で基準信号を生成し、この基準信号が生
成されたとき、入力処理番号に対応しているバッファ
に、復号単位の多重化データの入力を開始し、復号単位
の入力が終了したとき、音声処理番号および映像処理候
補番号に入力が終了したばかりのバッファの入力処理番
号を設定し、新しい入力処理番号に設定したばかりの音
声処理番号以外で、かつこの復号単位の入力が終了した
時点での映像処理番号以外である番号、もしくは設定し
たばかりの映像処理候補番号以外で、かつこの復号単位
の入力が終了した時点での映像処理番号以外である番号
を入力し、音声処理番号のバッファから符号化音声デー
タを抽出し、この抽出された符号化音声データを復号
し、映像処理番号のバッファから符号化映像データを抽
出し、この抽出された符号化映像データを復号し、復号
単位の映像復号ステップが終了したとき、映像処理番号
に映像処理候補番号を入力することを特徴とする。

【００１８】本願第5の発明は、符号化音声データを音
声復号単位で復号して再生する方法であって、音声復号
単位の符号化音声データをｍ個の音声バッファ（ｍは自
然数）に保持するとき、音声入力番号、音声処理番号を
設定し、音声復号単位に対応する時間間隔で音声基準信
号を生成し、この音声基準信号が生成されたとき、音声
入力番号に対応している音声バッファに、符号化音声デ
ータの入力を開始し、音声復号単位の符号化音声入力が
終了したとき、音声処理番号に音声入力番号を設定し、
新しい音声入力番号として音声処理番号以外である番号
を入力し、音声処理番号の音声バッファから前記符号化
音声データを取得し、前記抽出された符号化音声データ
を復号することを特徴とする。

【００１９】本願第6の発明は、符号化データを復号単
位で入力、復号して再生する方法であって、復号単位の
前記符号化データを入力し、符号化データに復号単位で
復号単位番号をつけ、符号化データを前記復号単位でバ
ッファに保持するときに、入力抑止信号の初期状態とし
てOFFを設定し、入力処理候補番号の初期値を設定し、
復号処理候補リストの初期状態として、空集合を設定
し、前記入力抑止信号がOFFの時に限り、入力処理候補
番号を復号単位番号とする前記符号化データのバッファ
への入力を開始し、入力処理候補番号に次の復号単位の
前記復号単位番号を設定し、復号単位の符号化データの
入力が終了したとき、復号処理候補リストの末尾に復号
単位の復号単位番号を追加し、復号処理が行われていな
いとき、もしくは復号単位の復号処理が終了したとき、
復号処理候補リストの先頭の要素の復号単位番号を持つ
符号化データを前記バッファから取得して復号処理を行
い、復号処理を行う復号単位番号を復号処理候補リスト
から除去し、復号処理候補リストの要素数がａ以上であ
れば、入力抑止信号をONにし、復号処理候補リストの要
素数がａ−１以下であれば、入力抑止信号をOFFにする
ことを特徴とする。

【００２０】また、復号単位は映像の１フレームであ
り、映像復号処理のバッファの数は３以上、音声復号処
理のバッファの数は２以上であることを特徴とする。

【００２１】

【発明の実施の形態】以下に、本発明をその実施の形態
を示す図面に基づいて説明する。なお、以下の実施形態
において、以前に説明した符号の説明は省略する。

【００２２】（第１の実施形態）図１は、本発明の第1
の実施形態について説明したブロック図である。図１に
おいて、１０１はデータ入力部、１０２は入力制御部、
１０３はバッファ番号設定部、１０４はバッファ、１０
５は映像バッファ選択部、１０６は映像復号部、１０７
は映像出力部、１５１は入力処理番号、１５２は映像処
理番号、１５３は映像復号終了信号である。

【００２３】なお以下の実施形態においては、１復号単
位を１フレームとし、バッファ１０３はバッファ番号が
０、１、２の３個の小バッファを持つものとする。ここ
に、小バッファ１つが１フレーム分のデータを記憶す
る。またデータ入力と映像復号とは別スレッドで動作す
るものとする。

【００２４】次に本実施形態の動作について説明する。
データ入力部１０１から入力された符号化映像データ
は、入力制御部１０２で、バッファ番号設定部１０３か
ら供給される入力処理番号１５１に対応する小バッファ
を指定され、バッファ１０４に保持される。

【００２５】１フレームのデータが入力された後、映像
バッファ選択部１０５は、バッファ番号設定部１０３か
ら供給される映像処理番号１５２に対応する小バッファ
から、符号化映像データを抽出し、映像復号部１０６に
供給する。

【００２６】映像復号部１０６で、符号化映像が復号さ
れ、映像出力部１０７より出力される。１フレームの映
像復号が終了したとき、映像復号終了信号１５３がバッ
ファ番号設定部１０３に供給される。

【００２７】図２は、本実施形態のバッファ番号設定部
１０３における、入力処理番号および映像処理番号の選
定について説明したタイムチャートである。図２におい
て、映像処理候補番号とは、現在の映像復号か完了した
時、次に復号すべきフレームが保持されている小バッフ
ァの番号であり、また、映像処理番号とは、現時点で映
像処理を行っている小バッファの番号のことである。

【００２８】また、入力処理番号とは、図１の入力制御
部１０２にとっては現時点で書き込みを行うべき小バッ
ファの番号である。

【００２９】バッファ番号設定部では小バッファ０、
１、２に対応した入力処理番号、映像処理番号のほか
に、映像処理候補番号が設定され、これらの初期値はす
べて「０」とする。

【００３０】時刻T0に第０フレームのデータの入力が開
始され、入力処理番号０に対応している小バッファ０に
入力される。時刻T1で第０フレームの入力が完了する
と、映像処理候補番号が入力完了したばかりのバッファ
番号である「０」に更新され、新たな入力処理番号とし
て映像処理候補番号以外（すなわち「０」以外）、かつ
映像処理番号以外（すなわち「０」以外）の番号
（「１」または「２」のいずれでも良いが、この場合は
仮に説明の便宜上「１」とおく）の小バッファ１に設定
される。

【００３１】同時に映像処理番号として映像処理候補番
号である「０」が設定される。映像バッファ選択部は、
映像処理番号０に対応する小バッファ０から符号化映像
が取得され、映像復号処理が始まる。

【００３２】時刻T2に、第３フレームの符号化映像が、
入力処理番号０に対応する小バッファ０に入力される。

【００３３】時刻T3で第3フレームの符号化映像の入力
が終了したとき、映像処理候補番号として入力処理番号
である「０」が設定され、新たな入力処理番号として、
時刻T3における映像処理番号以外（ずなわち「２」以
外）でかつ更新後の映像処理候補番号以外（すなわち
「０」以外）の番号である１が設定される。

【００３４】また時刻T4で、第４フレームの符号化映像
がバッファ１に入力が完了したとき、映像処理候補番号
として入力処理番号である「１」が設定され、新たな入
力処理番号として、時刻T4＋ΔTにおける映像処理候補
番号１と映像処理番号２以外の番号である「０」が指定
される（だたしΔTは微少時間）。

【００３５】時刻T5で、バッファ２に格納されていた第
２フレームの映像復号が終了したとき、映像処理番号に
時刻T5における映像処理候補番号１が設定され、この時
点でバッファ１に保持されている第4フレームの復号が
開始される。

【００３６】図２の場合、第３フレームの復号が行われ
ないことになるが、映像復号においては、数フレームに
１回程度フレーム落ちが生じても視覚的に大きな問題は
ない。

【００３７】以上説明したように、本実施形態によれ
ば、最低３フレーム分のバッファを用意すれば、映像復
号処理中のバッファに新たな符号化データが上書きされ
ることがないので、映像再生が、CPU能力に応じて可能
な限り高いレートで再生を行うことができる。

【００３８】なお、本実施形態では、３フレーム分の小
バッファを用意した場合について説明したが、４フレー
ム分以上の小バッファを用意した場合も、効果は３フレ
ーム分用意した場合と同様である。

【００３９】（第２の実施形態）図３は、本発明の第２
の実施形態について説明したブロック図である。図３に
おいて、３０３はバッファ番号設定部、３０５は音声バ
ッファ選択部、３０６は音声復号部、３０７は音声出力
部、３５１は音声復号終了信号である。

【００４０】なお本実施形態においても、第1の実施形
態と同様に、バッファ１０４はバッファ番号が０、１、
２の３個の小バッファを持つものとする。また、本実施
形態においては、入力処理および音声処理を同一のスレ
ッドでの処理とし、１フレーム分の映像と音声が多重化
されたデータが小バッファに入力終了直後に音声処理が
開始されるものとする。したがって、同一のバッファ番
号の小バッファに同一フレームの映像データと音声デー
タとが含まれている。また映像処理は、前記入力処理お
よび音声処理のスレッドとは別のスレッドで処理を行う
ものとする。

【００４１】次に本実施形態の動作について説明する。
データ入力部１０１から入力された、符号化映像と符号
化音声とが多重化されたデータは、入力制御部１０２
で、バッファ番号設定部３０３より供給される入力処理
番号１５１に対応する小バッファに保持される。

【００４２】１フレームのデータが入力された後、音声
バッファ選択部３０５は、バッファ番号設定部３０３か
ら供給される入力処理番号１５１に対応する小バッファ
すなわちデータ入力が完了したばかりの小バッファか
ら、符号化音声データを抽出し、音声復号部３０６に供
給する。

【００４３】音声復号部３０６で、符号化音声が復号さ
れ、音声出力部３０７より出力される。音声復号が完了
したとき、音声復号終了信号３５１がバッファ番号設定
部３０３に供給される。

【００４４】また映像バッファ選択部１０５は、バッフ
ァ番号設定部３０３から供給される映像処理番号１５２
に対応するバッファ１０４内の小バッファから、符号化
映像データを抽出し、映像復号部１０６に供給する。映
像復号部１０６で、符号化映像が復号され、映像出力部
１０７より出力される。１フレームの映像復号が終了し
たとき、映像復号終了信号１５３がバッファ番号設定部
３０３に供給される。

【００４５】図４は、本実施形態のバッファ番号設定部
３０３における、入力処理番号および映像処理番号の設
定について説明したタイムチャートである。図４におい
て、映像処理候補番号とは、現在の映像復号か完了した
時、次に復号すべきフレームが保持されている小バッフ
ァの番号であり、また、映像処理番号とは、現時点で映
像処理を行っている小バッファの番号のことである。

【００４６】また、入力処理番号とは、図３の入力制御
部１０２にとってはフレームのデータを書き込む小バッ
ファの番号であり、音声バッファ選択部にとってフレー
ムのデータ中に多重化されている音声データを読み出す
小バッファの番号はある。

【００４７】バッファ番号設定部では、入力処理番号、
映像処理番号のほかに、映像処理候補番号が設定され、
これらの初期値はすべて「０」とする。

【００４８】従来の技術で述べたように、通常音声復号
処理は、映像復号処理よりも必要な演算が少なく、１フ
レームあたりの復号処理時間は、映像より音声のほうが
短い。また、音声再生の間延びや音飛びを防ぐため、音
声復号処理スレッドの優先度は映像復号処理スレッドの
優先度よりも高くすることがある。

【００４９】時刻T0で、第０フレームのデータが入力処
理番号０に対応しているバッファ０に入力される。入力
が完了すると、直ちに入力が完了したばかりのバッファ
０から符号化音声が抽出され音声復号処理が始まる。

【００５０】バッファ番号設定部３０３は、音声復号部
から音声復号終了信号を受信したのを受けすぐさま、映
像処理候補番号に入力処理番号を入力するとともに、新
たな入力処理番号として、映像処理番号と更新後の映像
処理候補番号以外の番号が設定する。

【００５１】ここに、新たな入力処理番号として映像処
理番号以外を選択するのは、その時点で映像処理を行っ
ている最中の小バッファへの上書きを防止するためであ
り、また、新たな入力処理番号として更新後の映像処理
候補番号以外を選択するのは、次に映像処理を行う予定
のデータが保存されている小バッファへの上書きを防止
するためである。

【００５２】また、映像復号部から映像復号終了信号を
受信したとき、新たな映像処理番号として、次に映像処
理を行う予定のデータが保存されているバッファ番号で
あるところの映像処理候補番号を設定する。

【００５３】図4の時刻T1で、小バッファ１より抽出さ
れた第１フレームの音声復号が終了したとき、映像処理
候補番号としては、直前の入力処理番号であった「１」
が設定される。

【００５４】また、時刻T1における更新後の映像処理候
補番号は「１」で映像処理番号は「０」であるので、新
たな入力処理番号としては「２」が設定される。

【００５５】次に時刻T2では、バッファ０より抽出され
た第０フレームの映像復号が終了したことが通知される
ので、新たな映像処理番号として時刻T2における映像処
理候補番号である「１」が設定される。

【００５６】同様に時刻T3では、バッファ０から抽出さ
れた第３フレームの音声復号の終了が通知され、映像処
理候補番号として直前の入力処理番号であった「０」が
設定される。また時刻T3における更新後の映像処理候補
番号が「０」で、映像処理番号が「２」であるので、新
たな入力処理番号は「０」および「２」以外の値である
「１」となる。

【００５７】本実施形態では、図４の第２フレームのよ
うに、音声復号終了信号が、ある映像復号期間中に複数
回発信された場合（時刻T3およびT4）、再生される映像
のフレーム落ちが発生する。

【００５８】しかしながら映像信号は、数フレームに１
回程度フレーム落ちが発生しても視覚的には問題がな
い。

【００５９】以上、本実施形態によれば、最低３フレー
ム分のバッファを用意し、本実施形態で示したバッファ
管理を行うことで、音声復号は１フレームも欠くことな
く入力され、かつ映像復号処理中のバッファに新たな多
重化データが上書きされることがないので、音声再生時
に音飛びが生じず、かつ映像再生も、CPU能力に応じて
可能な限り高いレートで再生を行うことができる。

【００６０】もし仮に、単に３フレーム分のバッファを
保持するのみで本実施形態のバッファ操作を行わないの
であれば、本来次に再生すべきデータが保持されている
バッファに上書きされる可能性があり、画像再生レート
の低下のみならず、音声再生が欠落する。

【００６１】なお、復号された１フレームの音声信号は
非同期であるので、音声出力部にバッファと音声出力基
準信号を持ち、音声出力基準信号に従って１フレームず
つ再生すれば、音声が間延びしたりせず、正しく再生さ
れる。またこの音声出力基準信号を映像出力部にも供給
することで、映像と音声と同期を取りながら出力するこ
とが可能である。

【００６２】また本実施形態においては、入力処理が終
了したとき直ちに音声復号処理の開始を行っているが、
入力処理と合わせ音声復号処理が１フレーム期間内に終
了すれば、その限りではない。

【００６３】なお、本実施形態では、３フレーム分の小
バッファを用意した場合について説明したが、４フレー
ム分以上の小バッファを用意した場合も、効果は３フレ
ーム分用意した場合と同様である。

【００６４】（第３の実施形態）図５は、本発明の第３
の実施形態について説明した図である。図５において、
５０３はバッファ番号設定部、５５１は入力終了信号、
５５２は音声バッファ番号である。

【００６５】なお本実施形態においても、第1の実施形
態と同様に、バッファ１０４はバッファ番号が０、１、
２の３個の小バッファを持つものとする。また本実施形
態においては、入力処理、音声処理および映像処理をそ
れぞれ別のスレッドで処理を行うものとする。

【００６６】次に本実施形態の動作について説明する。
データ入力部１０１から入力された、符号化映像、符号
化音声が多重化されたデータは、入力制御部１０２で、
入力処理番号１５１に対応する小バッファに保持され
る。

【００６７】１フレームのデータの入力が完了したと
き、バッファ１０４は入力終了信号５５１をバッファ番
号設定部５０３に送信する。

【００６８】バッファ番号設定部５０３は、入力終了信
号５５１を受信すると、音声処理番号５５２および映像
処理候補番号に入力処理番号が設定され、音声処理番号
５５２は直ちに音声バッファ選択部３０５に送信され
る。

【００６９】また新たな入力処理番号として、映像処理
番号以外かつ音声処理番号以外の番号が設定される。音
声バッファ選択部３０５は音声処理信号５５２に対応す
る小バッファから符号化音声データを抽出し、音声復号
部３０６に供給する。

【００７０】映像復号の動作は、第２の実施形態と同様
である。図６は、本実施形態のバッファ番号設定部５０
３における、入力処理番号、音声処理番号および映像処
理番号の選定について説明したタイムチャートである。

【００７１】時刻T0において、第０フレーム目の多重化
データが入力処理番号０に対応している小バッファ０へ
の入力が開始される。時刻T1で入力が完了したとき、バ
ッファから入力終了信号５５１がバッファ番号設定部に
送信され、音声処理番号および映像処理候補番号に
「０」が設定され、新たな入力処理番号として映像処理
番号「０」および音声処理番号「０」以外の番号（この
場合は「１」）が設定される。同時に、バッファ０から
符号化音声が抽出され音声復号処理が始まる。

【００７２】また、映像処理候補番号０が直ちに映像処
理番号に設定され、バッファ０から符号化映像が抽出さ
れ映像復号処理が始まる。

【００７３】時刻T2で、第２フレームの多重化データの
バッファ２への入力が開始される。時刻T3で、第２フレ
ームの多重化データがバッファ２に入力が完了したと
き、音声処理番号及び映像処理候補番号に、入力が完了
したバッファ番号である「２」が設定され、第２フレー
ムの音声の復号が直ちに開始される。また新たな入力処
理番号として、時刻T3における映像処理番号「１」以外
で、かつ時刻T3における更新後の音声処理番号「２」以
外の番号である「０」が設定される。

【００７４】一方時刻T4で、バッファ１から抽出された
第１フレームの映像復号が終了する。このとき、映像処
理番号として時刻T4の映像処理候補番号０が設定され、
次の映像復号処理はバッファ０に保持されている第3フ
レームの復号が始まる。

【００７５】以上、本実施形態においては、最低３フレ
ーム分のバッファをを用意し、本実施形態で示したバッ
ファ管理を行うことで、音声復号は１フレームも欠くこ
となく可能で、音飛びなく再生でき、かつ映像復号処理
中のバッファに新たな符号化データが上書きされること
がないので、映像再生も、CPU能力に応じて可能な限り
高いレートで再生を行うことができる。

【００７６】もし仮に、単に３フレーム分のバッファを
保持するのみで本実施形態のバッファ操作を行わないの
であれば、本来次に再生すべきデータが保持されている
バッファに上書きされる可能性があり、画像再生レート
の低下のみならず、音声再生が欠落する。

【００７７】なお、第3の実施形態において、音声処理
信号５５２をバッファ番号設定部５０３から送信する構
成となっているが、バッファ１０４から直接送信する構
成も可能である。

【００７８】また本実施形態においては、１フレームの
入力が終了後直ちに音声復号を開始しているが、音声復
号処理がリアルタイム性を保持すれば、この限りではな
い。

【００７９】なお、本実施形態では、３フレーム分の小
バッファを用意した場合について説明したが、４フレー
ム分以上の小バッファを用意した場合も、効果は３フレ
ーム分用意した場合と同様である。

【００８０】（第４の実施形態）図７は、本発明の第４
の実施形態について説明した図である。図７において、
７０１は基準信号生成部、７５１は基準信号である。

【００８１】次に本実施形態の動作について、主として
第3の実施形態と異なる部分について説明する。

【００８２】本実施形態においては、第３の実施形態同
様、入力処理、音声処理、映像処理をそれぞれ別のスレ
ッドで実行させるものとする。

【００８３】基準信号生成部７０１は、１フレーム期間
（NTSC信号の場合約１／３０秒）に１回基準信号７５１
を入力制御部１０２に供給する。入力制御部１０２は、
基準信号７５１が入力されたとき、データ入力部１０１
から多重化データを取得し始め、バッファ番号設定部１
０３から供給される入力処理番号１５１に対応する小バ
ッファに多重化データを供給する。１フレームのデータ
の入力が完了したとき、バッファ１０４は入力終了信号
５５１をバッファ番号設定部５０３に送信する。

【００８４】バッファ番号設定部５０３は、入力終了信
号５５１を受信すると、音声処理番号５５２および映像
処理候補番号に入力処理番号が設定され、音声処理番号
５５２は直ちに音声バッファ選択部３０５に送信され
る。また新たな入力処理番号として、映像処理番号と音
声処理番号以外の番号が設定される。音声バッファ選択
部３０５は音声処理信号５５２に対応する小バッファか
ら符号化音声データを抽出し、音声復号部３０６に供給
する。

【００８５】映像復号の動作は、第３の実施形態と同様
である。図８は、本実施形態のバッファ番号設定部５０
３における、入力処理番号、音声処理番号および映像処
理番号の選定について説明したタイムチャートである。

【００８６】時刻T0で基準信号が入力されると、第０フ
レームの多重化データは、入力処理番号０に従い小バッ
ファ０に入力され始める。時刻T1で入力が完了したと
き、バッファから入力終了信号がバッファ番号設定部に
送信され、音声処理番号および映像処理候補番号に０が
設定され、新たな入力処理番号として映像処理番号０以
外かつ音声処理番号０以外の番号（この場合は１）が設
定される。同時に、バッファ０から符号化音声が抽出さ
れ音声復号処理が始まる。

【００８７】また、映像処理候補番号０が直ちに映像処
理番号に設定され、バッファ０から符号化映像が抽出さ
れ映像復号処理が始まる。

【００８８】時刻T2で、次の基準信号が入力されると、
第１フレームの多重化データが、入力処理番号１に対応
する小バッファ１に入力される。

【００８９】その他の動作は、第３の実施形態と同様で
ある。以上、本実施形態においても、最低３フレーム分
のバッファを用意し、本実施形態で示したバッファ管理
を行うことで、映像、音声信号を効率よく復号、再生を
行うことができる。特に本実施形態のように、基準信号
を用いることにより、多重化データの入力が１フレーム
単位で遅延なく行われ、音声復号処理の遅延による異常
再生を防止することができる。

【００９０】なお、第２、第３、第4の実施形態におい
て、映像のみの再生、もしくは音声のみの再生を行うこ
とも可能である。

【００９１】（第５の実施形態）図９は、本発明の第５
の実施形態について説明した図である。図９において９
０１は基準信号生成部、９０２は音声データ入力部、９
０３は音声入力制御部、９０４はバッファ番号設定部、
９０５は音声バッファ、９０６は音声バッファ選択部、
９０７は音声復号部、９０８は音声出力部、９５１は基
準信号、である。

【００９２】なお本実施形態では、音声バッファとして
0、1の2個の小バッファを持つものとする。また、音声
入力処理および音声復号処理ば別のスレッドで実行させ
るものとする。

【００９３】次に本実施形態の動作について説明する。
基準信号生成部９０１は、１フレーム期間（NTSC信号の
場合約１／３０秒）に１回基準信号９５１を音声入力制
御部９０２に供給する。

【００９４】音声入力制御部９０３は、基準信号９５１
が入力されたとき、音声データ入力部９０２から符号化
音声データを取得し始め、バッファ番号設定部９０４よ
り供給される音声入力番号９５２に対応する音声バッフ
ァ９０５中の小バッファに保持される。１フレームの符
号化音声データの入力が完了したとき、音声バッファ９
０５は音声入力終了信号９５３をバッファ番号設定部９
０４に送信する。

【００９５】バッファ番号設定部９０４は、音声入力終
了信号９５３を受信すると、音声処理番号９５４は直ち
に音声バッファ選択部９０６に送信され、音声バッファ
選択部９０６は音声処理信号９５４に対応する音声バッ
ファ中９０５の小バッファから符号化音声データを抽出
し、音声復号部９０７に供給する。音声復号部９０７
は、符号化音声データを復号し、音声出力部９０８に供
給して音声再生を行う。

【００９６】図１０は、本実施形態のバッファ番号設定
部１０３における、音声入力番号および音声処理番号の
選定について説明したタイムチャートである。

【００９７】時刻T0で基準信号が発生した時、音声入力
番号として０が設定され、第０フレームの符号化音声デ
ータの入力が開始される。入力先は音声バッファの小バ
ッファ0である。

【００９８】時刻T1で第０フレームの音声入力が終了し
た時、音声処理番号に、音声入力番号である０が設定さ
れ、音声入力番号として０以外の数、すなわち１が設定
される。同時に音声処理番号０に対応する小バッファ0
から、第０フレームの符号化音声データを取得し、音声
復号が開始される。

【００９９】時刻T2で基準信号が発生した時、音声入力
番号１に対応する音声バッファの小バッファ1に第1フレ
ームの符号化音声データが入力される。

【０１００】１フレームの音声復号処理は、現在主流の
CPUの性能であれば、通常１フレーム期間に比べ十分短
い時間で終了することができる、従って、時刻T3で第３
フレームの符号化音声の入力が終了した時、第２フレー
ムの復号が進行中であっても、時刻T4に次の符号化音声
の入力が開始されるまでに終了し、問題なく音声再生を
行うことができる。

【０１０１】以上、本実施形態においては、最低２フレ
ーム分のバッファを用意すれば、ほとんどの場合音声復
号は１フレームも欠くことなく可能で、音飛びなく再生
できる。

【０１０２】（第６の実施形態）図１１は、本発明の第
６の実施形態について説明したブロック図である。図１
１において１１０１はデータ入力部、１１０２は入力制
御部、１１０３は入力抑止信号設定部、１１０４はバッ
ファ、１１０５は映像処理候補リスト保持部、１１０６
は映像復号部、１１０７は映像出力部、１１５１は入力
候補フレーム番号、１１５２は入力抑止信号、１１５３
は入力終了信号、１１５４は映像処理フレーム番号、１
１５５は復号終了信号である。なお、本実施形態におい
て復号単位はフレーム、復号単位番号はフレーム番号で
ある。

【０１０３】次に本実施形態の動作について説明する。
データ入力部１１０１に入力された符号化映像データ
は、フレーム番号を入力候補フレーム番号１１５１とし
て入力制御部１１０２に供給される。入力制御部は、入
力抑止信号設定部１１０３より供給される入力抑止信号
１１５２がOFFならば、バッファ１１０３に入力候補フ
レームの符号化映像データを入力する。

【０１０４】符号化映像データの入力が完了した時、入
力終了信号１１５３を映像処理候補リスト保持部１１０
４に供給する。映像処理候補リスト保持部１１０４は、
保持されている映像処理候補リストに応じて入力抑止信
号設定部１１０３を制御する。

【０１０５】映像復号部１１０６は映像処理候補リスト
保持部１１０５から映像処理フレーム１１５４を供給さ
れ、対応するフレームの復号を行い、映像出力部１１０
７に供給する。映像復号が終了した時、復号終了信号１
１５５を映像処理候補リスト保持部１１０５に供給す
る。

【０１０６】図１２は、本実施形態における入力候補フ
レーム番号、映像処理候補リスト、入力抑止信号、映像
処理フレームの動作について説明したタイムチャートで
ある。

【０１０７】処理開始前、映像処理候補リストは空集合
（φ）、入力抑止信号はOFFとする。

【０１０８】時刻T0で入力部に第0フレームの符号化映
像データが入力された時、入力候補フレーム番号０を取
得する。入力抑止信号はOFFであるので、入力制御部は
時刻T1にバッファへの書き込みを開始し、次のフレーム
のフレーム番号を入力候補フレーム番号とする。

【０１０９】時刻T2で入力が完了した時、映像候補処理
リストに、入力が完了した入力処理フレーム番号０が追
加されるが、直ちに映像処理候補リストの先頭要素、す
なわち０が映像処理フレームとなり、映像処理候補リス
トから除去され、映像復号処理が開始される。

【０１１０】時刻T3で、第1フレームのバッファへの入
力が完了した時、映像処理候補リストに１が追加される
が、映像復号は処理中であるので、映像処理候補リスト
は｛１｝となる。

【０１１１】時刻T4で、第０フレームの映像復号が終了
したので、映像処理候補リストから１が除去されφとな
る。

【０１１２】時刻T5で、第3フレームの入力が完了した
時、直前の映像処理候補リストは｛２｝であったので、
後ろに３が追加され｛２，３｝となる。この時、映像処
理候補リストの要素数が２となったので、入力抑止信号
をONにする。

【０１１３】時刻T6で入力候補フレーム番号が４である
が、このとき入力抑止信号がONであるので、第4フレー
ムの入力は行わない。

【０１１４】時刻T7で第1フレームの復号が終了した
時、映像処理候補リストの先頭の要素である２に対応す
る第2フレームの復号処理が開始され、映像処理候補リ
ストから２が除去される。同時に２が除去された後の映
像処理候補リストは｛３｝で、要素数が１であるので、
入力抑止信号をOFFとする。

【０１１５】以上、本実施形態においては、映像復号処
理時間が、入力時間よりも比較的長い場合、入力処理と
復号処理の時間差により、バッファへの入力を抑止する
ことで、CPU資源を映像復号により多く割り当てること
ができ、結果として映像再生レートを向上させることが
できる。

【０１１６】なお本発明の復号方法は、復号装置として
実現できるほか、ＰＣ上で動作するプログラムとしても
実現できる。このプログラムは、磁気ディスクなどの記
録媒体に記録でき、他のＰＣへ容易に移植することがで
きる。また、上記プログラムは、ネットワークを介して
他のコンピュータに移動させることも可能である。

【０１１７】

【発明の効果】以上述べたように、本発明によれば、符
号化映像または符号化音声をＰＣを用いて復号すると
き、最低３フレーム分のバッファを保持し本発明のバッ
ファ操作を行うことにより、データ入力、音声復号、映
像復号をより効率よく復号を行うことができる。

【０１１８】もし仮に、単に３フレーム分のバッファを
保持するのみで本発明のバッファ操作を行わないのであ
れば、本来次に再生すべきデータが保持されているバッ
ファに上書きされる可能性があり、画像再生レートの低
下のみならず、音声再生が欠落する。

【０１１９】また、最低２フレーム分のバッファを保持
すれば、データ落ちを起こすことなく音声復号を行うこ
とができる。

【０１２０】また映像入力候補リストの要素数が２以上
の時は、次のフレームの符号化映像データの入力をスキ
ップすることで、映像復号化にＣＰＵ資源をより多く割
り当て、バスをより多く占有させることができる。

【０１２１】さらに本発明では、実行するＰＣのアーキ
テクチャ（CPUの性能、バス速度、バス形態など）が、
現在主流である性能以上のものであれば有効であり、そ
の実施効果は大きい。

【図面の簡単な説明】

【図１】本発明の第1の実施形態について説明したブロ
ック図

【図２】本発明の第1の実施形態における復号方法につ
いて説明したタイミングチャート

【図３】本発明の第２の実施形態について説明したブロ
ック図

【図４】本発明の第２の実施形態における復号方法につ
いて説明したタイミングチャート

【図５】本発明の第３の実施形態について説明したブロ
ック図

【図６】本発明の第３の実施形態における復号方法につ
いて説明したタイミングチャート

【図７】本発明の第４の実施形態について説明したブロ
ック図

【図８】本発明の第４の実施形態における復号方法につ
いて説明したタイミングチャート

【図９】本発明の第５の実施形態について説明したブロ
ック図

【図１０】本発明の第５の実施形態における復号方法に
ついて説明したタイミングチャート

【図１１】本発明の第６の実施形態について説明したブ
ロック図

【図１２】本発明の第６の実施形態における復号方法に
ついて説明したタイミングチャート

【図１３】一般的なＰＣの構成について説明した模式図

【図１４】従来までの映像復号方法について説明したブ
ロック図

【符号の説明】

１０１，１１０１データ入力部１０２，１１０２入力制御部１０３，３０３，５０３，９０４バッファ番号設定部１０４，１１０４バッファ１０５映像バッファ選択部１０６，１１０６映像復号部１０７，１１０７映像出力部１５１入力処理番号１５２映像処理番号１５３映像復号終了信号３０５，９０６音声バッファ選択部３０６，９０７音声復号部３０７，９０８音声出力部３５１音声復号終了信号５５１，１１５３入力終了信号５５２音声バッファ番号７０１，９０１基準信号生成部７５１，９５１基準信号９０２音声データ入力部９０３音声入力制御部９０５音声バッファ１１０３入力抑止信号設定部１１０５映像処理候補リスト保持部１１５１入力候補フレーム番号１１５２入力抑止信号１１５３入力終了信号１１５４映像処理フレーム番号１１５５復号終了信号

Claims

【特許請求の範囲】

【請求項１】符号化映像データを復号単位で復号して
再生する方法であって、前記復号単位の前記符号化映像
データを入力し、前記符号化映像データを前記復号単位
でｎ個のバッファ（ｎは自然数）に保持するとき、入力処理番号、映像処理番号、および映像処理候補番号
を設定する処理番号設定ステップと、前記入力処理番号に対応しているバッファに、前記復号
単位の前記符号化映像データが入力されるよう制御する
入力制御ステップと、前記復号単位の前記符号化映像データ入力が終了したと
き、前記映像処理候補番号に前記入力が終了したばかり
のバッファに対応する入力処理番号を入力し、新たな前
記入力処理番号として前記入力処理番号を入力したばか
りの映像処理候補番号以外で、かつ前記符号化映像デー
タ入力が終了した時点での前記映像処理番号以外である
番号を入力する処理番号更新ステップと、前記映像処理番号のバッファから前記符号化映像データ
を抽出する符号化映像データ抽出ステップと、前記抽出された符号化映像データを復号する映像復号ス
テップと、前記復号単位の前記映像復号ステップが終了したとき、
前記映像処理番号に前記映像処理候補番号を入力する映
像処理番号更新ステップとを有することを特徴とする復
号方法。
【請求項２】符号化音声データおよび符号化映像デー
タを復号単位で復号して再生する方法であって、前記復
号単位の前記符号化映像データおよび前記復号単位の前
記符号化音声データを多重化した多重化データを入力
し、前記多重化データを前記復号単位でｎ個のバッファ
（ｎは自然数）に保持するとき、入力処理番号、映像処理番号、および映像処理候補番号
を設定する処理番号設定ステップと、前記入力処理番号に対応しているバッファに、前記復号
単位の前記多重化データが入力されるよう制御する入力
制御ステップと、前記入力処理番号のバッファから前記符号化音声データ
を抽出する符号化音声データ抽出ステップと、前記抽出された符号化音声データを復号する音声復号ス
テップと、前記復号単位の前記音声復号ステップが終了したとき、
前記映像処理候補番号に前記入力が終了したばかりのバ
ッファに対応する入力処理番号を入力し、新たな前記入
力処理番号として前記映像処理候補番号以外で、かつ前
記音声復号ステップが終了した時点での前記映像処理番
号以外である番号を入力する処理番号更新ステップと、前記映像処理番号のバッファから前記符号化映像データ
を抽出する符号化映像データ抽出ステップと、前記抽出された符号化映像データを復号する映像復号ス
テップと、前記復号単位の前記映像復号ステップが終了したとき、
前記映像処理番号に前記映像処理候補番号を入力する映
像処理番号更新ステップとを有することを特徴とする復
号方法。
【請求項３】符号化音声データおよび符号化映像デー
タを復号単位で復号して再生する方法であって、前記復
号単位の前記符号化映像データおよび前記復号単位の前
記符号化音声データを多重化した多重化データを入力
し、前記多重化データを前記復号単位でｎ個のバッファ
（ｎは自然数）に保持するとき、入力処理番号、映像処理番号、および映像処理候補番号
を設定する処理番号設定ステップと、前記入力処理番号に対応しているバッファに、前記復号
単位の前記多重化データが入力されるよう制御する入力
制御ステップと、前記復号単位の前記多重化データ入力が終了したとき、
前記音声処理番号および前記映像処理候補番号に前記入
力が終了したばかりのバッファに対応する入力処理番号
を設定し、新たな前記入力処理番号として前記入力処理
番号を設定したばかりの音声処理番号以外で、かつ前記
多重化データ入力が終了した時点での前記映像処理番号
以外である番号、もしくは前記入力処理番号を設定した
ばかりの映像処理候補番号以外で、かつ前記多重化デー
タ入力が終了した時点での前記映像処理番号以外である
番号を入力する処理番号更新ステップと、前記音声処理番号のバッファから前記符号化音声データ
を抽出する符号化音声データ抽出ステップと、前記抽出された符号化音声データを復号する音声復号ス
テップと、前記映像処理番号のバッファから前記符号化映像データ
を抽出する符号化映像データ抽出ステップと、前記抽出された符号化映像データを復号する映像復号ス
テップと、前記復号単位の前記映像復号ステップが終了したとき、
前記映像処理番号に前記映像処理候補番号を入力する映
像処理番号更新ステップとを有することを特徴とする復
号方法。
【請求項４】符号化音声データおよび符号化映像デー
タを復号単位で復号して再生する方法であって、前記復
号単位の前記符号化映像データおよび前記復号単位の前
記符号化音声データを多重化した多重化データが入力さ
れ、前記多重化データを前記復号単位でｎ個のバッファ
（ｎは自然数）に保持するとき、入力処理番号、映像処理番号、音声処理番号、および映
像処理候補番号を設定する処理番号設定ステップと、前記多重化データの前記復号単位に対応する時間間隔で
基準信号を生成する基準信号生成ステップと、前記基準信号が生成されたとき、前記入力処理番号に対
応しているバッファに、前記復号単位の前記多重化デー
タの入力を開始する入力制御ステップと、前記復号単位の前記多重化データ入力が終了したとき、
前記音声処理番号および前記映像処理候補番号に前記入
力が終了したばかりのバッファに対応する入力処理番号
を設定し、新たな前記入力処理番号として前記入力処理
番号を設定したばかりの音声処理番号以外で、かつ前記
多重化データ入力が終了した時点での前記映像処理番号
以外である番号、もしくは前記入力処理番号を設定した
ばかりの前記映像処理候補番号以外で、かつ当該時点で
の前記映像処理番号以外である番号を入力する処理番号
更新ステップと、前記音声処理番号のバッファから前記符号化音声データ
を抽出する符号化音声データ抽出ステップと、前記抽出された符号化音声データを復号する音声復号ス
テップと、前記映像処理番号のバッファから前記符号化映像データ
を抽出する符号化映像データ抽出ステップと、前記抽出された符号化映像データを復号する映像復号ス
テップと、前記復号単位の前記映像復号ステップが終了したとき、
前記映像処理番号に前記映像処理候補番号を入力する映
像処理番号更新ステップとを有することを特徴とする復
号方法。
【請求項５】符号化音声データを音声復号単位で復号
して再生する方法であって、前記音声復号単位の前記符
号化音声データをｍ個の音声バッファ（ｍは自然数）に
保持するとき、音声入力番号、音声処理番号を設定する処理番号設定ス
テップと、前記音声復号単位に対応する時間間隔で音声基準信号を
生成する音声基準信号生成ステップと、前記音声基準信号が生成されたとき、前記音声入力番号
に対応している音声バッファに、前記符号化音声データ
の入力を開始する音声入力制御ステップと、前記音声復号単位の符号化音声入力が終了したとき、前
記音声処理番号に前記符号化音声入力が終了したばかり
のバッファに対応する音声入力番号を設定し、新たな前
記音声入力番号として前記音声入力番号を設定したばか
りの音声処理番号以外である番号を入力する処理番号更
新ステップと、前記音声処理番号の音声バッファから前記符号化音声デ
ータを取得する符号化音声データ取得ステップと、前記抽出された符号化音声データを復号する音声復号ス
テップとを有することを特徴とする復号方法。
【請求項６】符号化データを復号単位で入力、復号し
て再生する方法であって、前記復号単位の前記符号化データを入力し、前記符号化
データに前記復号単位で復号単位番号をつけ、前記符号
化データを前記復号単位でバッファに保持するときに、入力抑止信号の初期状態としてOFFを設定する初期入力
抑止信号設定ステップと、入力処理候補番号の初期値を設定する初期入力候補番号
設定ステップと、復号処理候補リストの初期状態として、空集合を設定す
る初期復号処理候補リスト設定ステップと、前記入力抑止信号がOFFの時に限り、入力処理候補番号
を復号単位番号とする前記符号化データのバッファへの
入力を開始する入力制御ステップと、前記入力処理候補番号に次の復号単位の前記復号単位番
号を設定する入力処理候補番号更新ステップと、前記復号単位の前記符号化データの入力が終了したと
き、前記復号処理候補リストの末尾に前記復号単位の復
号単位番号を追加する復号処理候補リスト追加ステップ
と、復号処理が行われていないとき、もしくは前記復号単位
の復号処理が終了したとき、前記復号処理候補リストの
先頭の要素の復号単位番号を持つ前記符号化データを前
記バッファから取得して復号処理を行う復号ステップ
と、前記復号処理を行う復号単位番号を前記復号処理候補リ
ストから除去する復号処理候補リスト除去ステップと、前記復号処理候補リストの要素数がａ以上であれば、前
記入力抑止信号をONにし、前記復号処理候補リストの要
素数がa−１以下であれば、前記入力抑止信号をOFFにす
る入力抑止信号設定ステップとを有することを特徴とす
る復号方法。
【請求項７】復号単位が映像の１フレームであること
を特徴とする請求項１、２、３または４に記載の復号方
法。
【請求項８】ｎは３以上の自然数であることを特徴と
する請求項１、２、３または４に記載の復号方法。
【請求項９】ｍは２以上の自然数であることを特徴と
する請求項５に記載の復号方法。
【請求項１０】符号化データが符号化映像データであ
り、復号単位が映像の１フレームであることを特徴とす
る請求項６に記載の復号方法。
【請求項１１】ａは２以上の自然数であることを特徴
とする請求項６に記載の復号方法。