JP2010130402A - 映像符号化装置及び映像復号化装置 - Google Patents

Abstract

【課題】
残像感の少ない高画質の高速表示を実現する。
【解決手段】
シーンチェンジ検出装置（１２）は、シーンチェンジを検出し、広域動き検出装置（１４）は、マクロブロックよりも大きい領域単位でフレーム間動き量を検出する。予測処理装置（２０）、直交変換量子化装置（２４）及びエントロピー符号化装置（２６）は、入力端子（１０）からの映像信号を、そのフレームの一部を間引いて圧縮符号化する。表示制御情報生成装置（３０）は、装置（１２、１４）の出力から、間引かれるフレームに対する表示制御情報を生成する。表示制御情報は、復号化側での補間フレームの生成に使われる。多重化処理装置（２８）は、エントロピー符号化装置（２６）からの映像符号化データに表示制御情報を多重して出力する。
【選択図】 図１

Description

本発明は、映像符号化装置及び映像復号化装置に関する。

近年、フラットパネルディスプレイが普及している。中でも、液晶ディスプレイは、ＣＲＴディスプレイのインパルス型の表示に対して、所定表示期間に同画像を表示し続けるホールド型表示となる。ホールド型表示では、動画像の表示に残像感が発生するといった課題が知られている。

ホールド型表示をよりインパルス型表示に近づけるために、１フレームの表示時間を短くするといった方法が試みられている。特許文献１には、動画像に周期的に黒画像を挿入して表示する擬似インパルス表示方式が記載されている。特許文献２には、隣接フレームから生成された擬似フレームを挿入する高速表示方式が記載されている。
特開２００２−３１７９０号公報 特開２００５−２４１７８７号公報

擬似インパルス表示方式は、残像感を低減できる反面、黒画面を挿入することにより表示映像の輝度が低下する。また、動画像自体の輝度が高い場合にはフリッカが発生する可能性があるといった問題を抱えている。

一方、高速表示方式は、前方フレーム、後方フレーム又はその両方のフレームから擬似フレームを生成する。従って、理想的な補間処理を行えば、より高い効果が得られると期待されている。その反面、本来のフレーム周波数よりも高いフレーム周波数で存在しないフレームを予測して擬似フレームを生成することになり、処理速度や演算コストの面からも難易度が高い。予測が外れた場合、相関のないフレームを参照して擬似フレームを生成してしまうことになり、視覚上の弊害を引き起こす可能性がある。

予め高速表示用のフレームを符号化する方法も考えられるが、符号量が大幅に増加するので、現実的ではない。

本発明は、このような不都合を解消しつつ、表示画像の画質を改善できる映像符号化装置及び映像復号化装置を提示することを目的とする。

本発明に係る映像符号化装置は、入力映像信号をその一部のフレームを間引いて符号化する符号化手段と、前記入力映像信号のシーンチェンジを検出するシーンチェンジ検出手段と、前記シーンチェンジ検出手段の出力に従い、前記符号化手段で間引かれるフレームに対する補間制御情報を生成する補間制御情報生成手段と、前記符号化手段の符号化により得られる映像符号化データと、前記補間制御情報とを多重する多重化処理手段とを有することを特徴とする。

本発明に係る映像復号化装置は、入力符号化データから映像符号化データと、符号化されていないフレームに対する補間制御情報とを分離する分離処理手段と、前記映像符号化データを復号化する復号化手段と、前記補間制御情報に従い補間フレームを生成するフレーム生成手段と、前記復号化手段により復号化されたフレーム及び前記フレーム生成手段で生成された前記補間フレームから映像信号を生成する映像表示処理手段とを有することを特徴とする。

本発明によれば、符号化装置側で間引かれるフレームに対する補間制御情報を伝送するので、復号化側は、補間制御情報を使って、精度の高い補間フレームを生成できる。これにより、残像感の少ない高画質の高速表示を実現できる。

以下、図面を参照して、本発明の実施例を詳細に説明する。

図１は、本発明をＭＰＥＧ−４ ＡＶＣ方式の映像符号化装置に適用した一実施例の概略構成ブロック図を示す。この実施例では、映像信号は１９２０×１０８８画素で符号化されるものとし、符号化対象画面は１６×１６画素ブロックに分割したマクロブロック単位で符号化処理される。

入力端子１０に符号化対象のデジタル映像信号が入力する。シーンチェンジ検出装置１２は、入力端子１０からのデジタル映像信号からその映像シーンの切り替わり目を検出する。シーンチェンジ検出の一方法として、シーンチェンジ検出装置１２は、各フレームの画素値のヒストグラムを生成し、そのヒストグラムを比較してシーンチェンジを検出する。シーンチェンジ検出装置１２は、検出したシーンチェンジに対してシーンチェンジ情報ＳＣＩ（Scene Changing Information）を生成する。ＳＣＩは、対象フレームでシーンチェンジがあったかどうかを示す１ビットの情報であり、値０のとき「シーンチェンジなし」を示し、値１のとき「シーンチェンジあり」を示す。

シーンチェンジ検出装置１２は、同時に、各フレームの輝度レベルの平均値を算出し、フレームの代表輝度情報ＰＬＩ（Poster Luminance Information）として出力する。ＰＬＩは、値０〜２５５で輝度レベル値を示す。

広域動き検出装置１４は、入力端子１０からのデジタル映像信号の各フレームで広域的な動きを検出する。具体的には、各フレームをマクロブロックよりも大きい所定サイズの領域に分割し、各分割領域におけるフレーム間動き量を検出し、動き情報を生成する。１フレームを２×２の領域に分割した場合には、広域動き検出の分割領域は９６０×５４０画素からなる。各分割領域に対して生成される動き情報を広域動き情報ＧＭＩ（Global Motion Information）と呼ぶ。

本実施例では、ＧＭＩは、４つのパラメータＧＭＩ＿ＰＸ，ＧＭＩ＿ＰＹ，ＧＭＩ＿ＮＸ，ＧＭＩ＿ＮＹからなる。ＧＭＩ＿ＰＸは、前方向フレーム各領域に対する水平方向の動き量を−１２８〜１２７の値で示す。ＧＭＩ＿ＰＹは前方向フレーム各領域に対する垂直方向の動き量を−１２８〜１２７の値で示す。ＧＭＩ＿ＮＸは後方向フレーム各領域に対する水平方向の動き量を−１２８〜１２７の値で示す。ＧＭＩ＿ＮＹは後方向フレーム各領域に対する垂直方向の動き量を−１２８〜１２７の値で示す。

予測方法決定装置１６は、符号化対象フレーム内の各マクロブロックに対して、簡易的な画面内予測又は広域動き情報ＧＭＩを利用した画面間予測を試行して、符号化効率が最適となる予測方式を決定する。メモリ１８には、符号化画像データをローカルで復号化した画像データが格納されており、予測方法決定装置１６は、画面間予測に対してメモリ１８の画像データを参照する。予測方法決定装置１６は、符号化対象マクロブロックがＩスライスの場合は、画面内予測画素ブロックサイズ及び予測モードを決定する。予測方法決定装置１６は、Ｐスライス又はＢスライスの場合には、画面内予測又は画面間予測の内、符号化効率の高い方を選択する。予測方法決定装置１６は、画面間予測の場合には、画面内予測画素ブロックサイズ及び画面内予測モード等の画面内予測符号化用パラメータを決定する。予測方法決定装置１６は、画面間予測の場合には、参照画像フレーム、マクロブロック分割パターン及び動きベクトル等の画面間予測符号化用パラメータを決定する。予測方法決定装置１６は、こうして決定された予測符号化用パラメータを予測処理装置２０に供給する。

予測処理装置２０は、予測方法決定装置１６からの予測符号化用パラメータに従い、メモリ１８の局所復号化画像から予測画像を生成し、局所復号化装置２２に出力する。予測処理装置２０はまた、入力端子１０からのデジタル映像信号の各フレーム画像に対し、予測画像との差分（予測残差信号又は予測残差値）を算出し、直交変換量子化装置２４に供給する。

直交変換量子化装置２４はまず、予測処理装置２０からの予測残差信号を指定の画素ブロック単位（８×８画素又は４×４画素ブロック単位）の整数精度離散コサイン変換で直交変換する。ただし、１６×１６画素ブロック単位で画面内予測処理された輝度信号又は色差信号に対しては、整数精度離散コサイン変換のＤＣ（直流）成分を、更に離散アダマール変換する。

直交変換量子化装置２４は、直交変換で生成された変換係数を、指定の量子化パラメータに応じた量子化ステップで量子化する。直交変換量子化装置２４は、このように量子化された変換係数データをエントロピー符号化装置２６と局所復号化装置２２に供給する。

エントロピー符号化装置２６は、直交変換量子化装置２４からの量子化変換係数データをエントロピー符号化し、得られた符号化データを多重化処理装置２８に供給する。エントロピー符号化の方式としては、ＣＡＢＡＣ（Context-based Adaptive Variable Length Coding）がある。又は、ＣＡＶＬＣ（Context-based Adaptive Binary Arithmetic Coding）でも良い。

本実施例では、予測処理装置２０、直交変換量子化装置２４及びエントロピー符号化装置２６からなる符号化手段は、入力映像信号を、その一部のフレーム、例えば、１フレーム置きのフレームを間引いて符号化する。間引かれたフレームは、後述するように、補間制御情報を使って補間される。これは、伝送レートまたは記録容量を制限したい場合に有効である。もちろん、符号化側でフレームの間引きを行わずに、復号化側で、倍速表示のためにフレームを補間する場合にも、本実施例は適用可能である。その場合、予測処理装置２０、直交変換量子化装置２４及びエントロピー符号化装置２６からなる符号化手段は、入力映像信号の全フレームを符号化する。

局所復号化装置２２は、直交変換量子化装置２４からの量子化変換係数データを逆量子化及び逆直交変換処理により画像残差データに戻し、予測処理装置２０からの予測画像の画素値を加算して、画像データを局所復号化する。こうして復号化された画像データは、上述した予測方法決定装置１６及び予測処理装置２０での予測符号化のためにメモリ１８に格納される。メモリ１８は、デブロッキングフィルタを内蔵しており、局所復号化装置２２により局所復号化された画像データをデブロッキングフィルタ処理した画像データも一定フレーム数を記憶する。デブロッキングフィルタ処理前の画像データは画面内予測処理に使用され、デブロッキングフィルタ処理された画像データは画面間予測処理に利用される。

表示制御情報生成装置３０は、シーンチェンジ検出装置１２からのＳＣＩ，ＰＬＩ、及び広域動き検出装置１４からのＧＭＩから、表示制御情報ＤＣＩ（Display Control Information）を生成する。但し、表示制御情報ＤＣＩは、予測処理装置２０、直交変換量子化装置２４及びエントロピー符号化装置２６による符号化が、入力端子１０からの映像信号のフレームレートよりも低いフレームレートで実行される場合に、生成され、利用される。すなわち、本実施例では、予測処理装置２０、直交変換量子化装置２４及びエントロピー符号化装置２６が入力映像信号をそのフレームを間引いて符号化する場合を前提としている。表示制御情報ＤＣＩは、間引かれたフレームを復号化装置側で復元するのに使用される。換言すれば、表示制御情報は、復号化装置に対する補間制御情報であり、表示制御情報生成装置３０は、補間制御情報生成装置である。表示制御情報ＤＣＩの詳細な内容は、後述する。

多重化処理装置２８は、エントロピー符号化装置２６からの符号化映像データ、表示制御情報生成装置３０からの表示制御情報ＤＣＩ、及び図示しないシステム制御装置からのシステムデータを多重化する。多重化処理装置２８により多重化されたデータは、符号化データとして図示しない伝送路又は記録媒体に供給される。

表示制御情報ＤＣＩの決定方法を説明する。本実施例では、符号化しないフレームに対して、当該フレーム及びその前後のフレームのＳＣＩ情報に従い、予測補間の可能性に関して４つの状態のいずれか一つを設定する。そして、「ＧＭＩによるフレーム予測補間不可（ＰＬＩによる単色表示）」に対して、ＤＣＩに値０をセットする。「ＧＭＩによる前方フレーム予測補間可能」に対してＤＣＩに値１をセットする。「ＧＭＩによる後方フレーム予測補間可能」に対してＤＣＩに値２をセットする。を示す。「ＧＭＩによる前後フレーム予測補間可能」に対してＤＣＩに値３をセットする。図２は、ＳＣＩに対するＤＣＩの真理値表を示す。

即ち、符号化しないフレームＮでシーンチェンジが起きている場合、又は、前後のフレームＮ−１，Ｎ＋１の両方でシーンチェンジが起きている場合には、フレーム予測補間を不可に設定する。前方フレームＮ−１でシーンチェンジが起きていない場合には、前方フレームＮ−１を使った予測変換を可能にする。後方フレームＮ＋１でシーンチェンジが起きていない場合には、後方フレームＮ＋１を使った予測変換を可能にする。前後のどちらのフレームＮ−１，Ｎ＋１でもシーンチェンジが起きていない場合には、前後のフレームＮ−１又はＮ＋１、その両方を使った予測変換を可能にする。

このように生成されるＤＣＩ情報を伝送することで、復号化側では、シーンチェンジを挟んだフレーム間の予測補間フレームの生成、即ち、相関のないフレームを用いた予測補間フレームの生成を抑制できる。そして、復号化時に予測補間が可能な場合には、ＧＭＩを用いて精度良く予測補間画像を生成することが可能となる。また、予測補間が不可と判定された場合でも、ＰＬＩによる単色フレームを生成することで、前後フレームとの輝度に違和感を与えない擬似フレームが生成可能となる。

多重化処理装置２８におけるＤＣＩ情報と符号化データの多重化処理を説明する。ＭＰＥＧ−４ ＡＶＣでは、様々なネットワークでの利用が考慮して、次のように規定されている。映像符号化処理を扱うビデオ符号化層（ＶＣＬ：Video Coding Layer）と実際の伝送・蓄積のシステムとの間に、ネットワーク抽象化層（ＮＡＬ：Network Abstraction Layer）が規定されている。ＮＡＬは、ＮＡＬヘッダとＲＢＳＰ（Row Byte Sequence Payload）から構成されるＮＡＬユニットと呼ばれる単位でパケット化される。ＮＡＬヘッダによりＮＡＬユニットの種類と、参照画像かどうかが識別され、続くＲＢＳＰに実際の符号化データが格納される。図３は、ＮＡＬユニットの構造を示す。

図４は、ＮＡＬユニットの種類又はタイプの定義を示す。ＮＡＬユニットは、主に映像符号化データ（スライス）を搬送するが、これ以外の代表的なものとして、以下の情報がある。即ち、ＳＰＳ（Sequence Parameter Set）は、映像符号化データのシーケンスに関する情報である。ＰＰＳ（Picture Parameter Set）は、映像符号化データのピクチャに関する情報である。ＳＥＩ（Supplemental Enhancement Information）は、映像符号化データの復号化には必須ではない付加情報である。

これらのＮＡＬユニットをピクチャ単位にまとめた単位をＡｃｃｅｓｓユニットと呼ぶ。図５は、Ａｃｃｅｓｓユニットの構造例を示す。図５に示すように、Ａｃｃｅｓｓユニットの先頭には、Ａｃｃｅｓｓユニット内のピクチャタイプを識別可能な情報を含むアクセスユニット識別子（Access unit delimiter）と呼ばれるＮＡＬユニットが位置する。そして、アクセスユニット識別子に続いて、ＳＰＳ、ＰＰＳ及びスライスデータなどの、ピクチャに必要なＮＡＬユニット群が配置される。

ＳＥＩには、ユーザー定義のシンタクスを使用可能なユーザデータＳＥＩ（user data SEI）が用意されている。ユーザデータＳＥＩには、未登録ユーザデータＳＥＩと、ＩＴＵ−Ｔ勧告Ｔ．３５に従って登録された登録ユーザデータＳＥＩがある。ここでは、ここでは未登録ユーザデータＳＥＩを利用してＤＣＩを多重化する。図６は、未登録ユーザデータＳＥＩのメッセージのシンタクスを示す。図６におけるシンタクス要素の内、ユーザデータペイロードバイト領域（user_data_payload_byte領域）にＤＣＩ（ＰＬＩ及びＧＭＩを含む）を格納可能である。未登録ユーザデータＳＥＩにＤＣＩが格納されていることを、ｕｕｉｄ＿ｉｓｏ＿ｉｅｃ＿１１５７８領域によりＵＵＩＤで識別できるようにしておく。

ユーザデータペイロードバイト領域にＤＣＩを格納するためのデータ形式を「ＤＣＩ＿ＰＡＣＫ」と呼ぶ。ＤＣＩ＿ＰＡＣＫのシンタクスの定義を図７に示す。ｎｕｍ＿ｆｒａｍｅは、格納されているＤＣＩ数を示す。この数値が実際に符号化されているフレーム間に何枚分のＤＣＩが格納されているかを示す。即ち、復号化側でＤＣＩを用いた高速表示が何倍まで利用可能かを示し、１であれば２倍、２であれば３倍となる。ＤＣＩ［ｉ］は表示制御情報を格納する。ＰＬＩ［ｉ］は代表輝度情報を格納する。ｎｕｍ＿ａｒｅａ＿ｈ［ｉ］，ｎｕｍ＿ａｒｅａ＿ｖ［ｉ］は、ＧＭＩが画面をどのように分割して生成されたかを示し、それぞれ水平方向及び垂直方向に何分割されたかを示す。ＧＭＩ＿ＰＸ，ＧＭＩ＿ＰＹには、各分割領域の前方向フレームに対する動き情報が格納される。ＧＭＩ＿ＮＸ，ＧＭＩ＿ＮＹには、後方向フレームに対する動き情報が格納される。

以上のように、未登録ユーザデータＳＥＩにＤＣＩ情報が格納され、Ａｃｃｅｓｓユニット内に多重化され、復号化装置に伝送される。

こうして、多重化処理装置２８によりＤＣＩが多重化された符号化データを受信する復号化装置側は、符号化の際に間引かれたフレームを、「ＤＣＩ＿ＰＡＣＫ」を使って補間、すなわち、復元できる。本実施例では、「ＤＣＩ＿ＰＡＣＫ」を利用することで、復号化側では、受信した符号化データのフレームレートよりも高いフレームレートでの再生が可能になる。

復号化側の構成と動作を説明する。図８は、図１に示す映像符号化装置に対応する映像復号化装置の概略構成ブロック図を示す。

入力端子４０には、伝送路又は記録媒体から、多重化処理装置２８の出力データに相当するデータが入力する。分離処理装置４２は一般的な復号化処理として、入力端子４０からの入力符号化データからＳＰＳ、ＰＰＳ及びスライスデータ等の復号化処理に必要なデータを分離して復号化処理装置４４に供給する。

復号化処理装置４４は、分離処理装置４２からのデータのうち、ＳＰＳ及びＰＰＳからシーケンス及びピクチャ・パラメータを抽出し、スライスデータをエントロピー復号化する。マクロブロックの生成に必要な変換係数を含むシンタクス要素を抽出し、変換係数に逆量子化・逆直交変換処理を行い、予測残差信号を復元する。復元された画像データは、再生表示用にメモリ４６に格納される。復号化処理装置４４はこれと同時に、予測画像を生成し、予測画像と予測残差信号を加算して復号化したマクロブロックデータをメモリ４６に書き込む。

映像表示処理装置４８は、メモリ４６から復号化された画像データを表示フレーム順に読み出し、映像信号として表示装置５０に供給する。表示装置５０は、映像表示処理装置４８からの映像信号を画像表示する。表示装置５０は、例えば、液晶ディスプレイである。

符号化データのフレームレートは６０ｆｐｓであり、倍の１２０ｆｐｓに対応するＤＣＩ情報が、ＤＣＩ＿ＰＡＣＫとしてＳＥＩに多重化されているとする。図８に示す映像復号化装置は、再生映像信号を１２０ｆｐｓで再生表示することになる。

分離処理装置４２は、入力端子４０からのデータからＳＥＩ情報を抽出し、表示制御情報抽出装置５２に供給する。表示制御情報抽出装置５２は、分離処理装置４２からのＳＥＩ情報の内、未登録ユーザデータＳＥＩからｕｕｉｄ＿ｉｓｏ＿ｉｅｃ＿１１５７８領域のＵＵＩＤがＤＣＩを示すものを検出する。続いて、ユーザデータペイロードバイト領域からＤＣＩ＿ＰＡＣＫのシンタクスに基づきＤＣＩ関連情報を抽出し、フレーム生成装置５４に出力する。

フレーム生成装置５４は、動き情報に基づく動き補償予測フレームを生成する機能を有し、符号化データよりも高いフレームレートで再生する場合にＤＣＩ関連情報に基づく補間フレームを生成する。フレーム生成装置５４は、生成した補間フレームの画像データをメモリ４６に格納する。

映像表示処理装置４８は、復号化処理装置４４により復号化されたフレーム画像とフレーム生成装置５４で生成された補間フレーム画像を、その表示順にメモリ４６から読み出し、所定形式の映像信号として表示装置５０に出力する。表示装置５０は、映像表示処理装置４８からの映像信号の各フレームを順次、画像表示する。これにより、符号化データよりも高いフレームレートで映像を再生表示できる。

図９は、表示制御情報抽出装置５２から出力されるＤＣＩ関連情報に基づく補間フレーム生成動作のフローチャートを示す。図１０は、フレーム補間タイミングとＤＣＩ値との関係例を図１０に示す。図９及び図１０を参照して、フレーム生成装置５４による補間フレーム生成動作を説明する。

再生命令が有効で（Ｓ１）、フレーム補間タイミングである場合に（Ｓ２）、対象となるＤＣＩ値を参照し、補間方法を判定する（Ｓ３）。図１０で、６０ｆｐｓである符号化データが図１０（ａ）に示すような復号化順である場合、その表示順は、図１０（ｂ）に示すようになる。尚、フレーム番号とＤＣＩ番号は、図１０（ａ）の復号化順を元に示している。これに対し、１２０ｆｐｓでの表示を考えると、図１０（ｃ）に示すように各フレーム間に補間フレームを挿入する必要がある。この補間フレームを生成するタイミングがフレーム補間タイミングである。対象となる補間フレームに関連するＤＣＩ値は、表示順における直前のフレームに対して多重化されている。従って、例えば図１０（ｃ）に示されるフレーム番号２の補間フレームの場合には、表示順における直前のフレーム（フレーム番号２）に多重化されているＤＣＩ値を参照すれば良い。

参照したＤＣＩ値が「０」の場合、前後フレームに相関がないことを示している。この場合、ＤＣＩ＿ＰＡＣＫ内のＰＬＩ情報による単色画面フレームを挿入することで、前後フレームとの輝度レベル差のない補間フレームが生成可能となる（Ｓ４）。

ＤＣＩ値が「１」の場合、前方フレームとの相関があることを示している。この場合、ＤＣＩ＿ＰＡＣＫ内のＧＭＩ（ｇｍｉ＿ｐｘ，ｇｍｉ＿ｐｙ）情報に基づき前方フレームに対する動き補償予測を行うことにより予測補間フレームを生成する（Ｓ５）。

ＤＣＩ値が「２」の場合、後方フレームとの相関があることを示している。この場合、ＤＣＩ＿ＰＡＣＫ内のＧＭＩ（ｇｍｉ＿ｎｘ、ｇｍｉ＿ｎｙ）を用いて後方フレームに対する動き補償予測を行うことにより予測補間フレームを生成する（Ｓ６）。

ＤＣＩ値が「３」の場合、前方及び後方フレームのそれぞれに相関があることを示している。この場合、ＤＣＩ＿ＰＡＣＫ内のＧＭＩ（ｇｍｉ＿ｐｘ，ｇｍｉ＿ｐｙ及びｇｍｉ＿ｎｘ、ｇｍｉ＿ｎｙ）を用いて前方及び後方の両フレームに対する動き補償予測を行うことにより予測補間フレームを生成する（Ｓ７）。

以上の処理を、再生終了が指示されるまで繰り返す（Ｓ１）。

このように、符号化データに存在しないフレームに対するＤＣＩ情報、即ち表示制御情報を元に補間フレームを生成することで、相関のないフレームからの補間フレームの生成を防止できる。この結果、容易な処理で精度の高い高速表示再生が可能となる。

ここでは、ＧＭＩを用いた動き補償予測を行う方法を説明した。しかし、ＧＭＩ、即ち広域動き情報をベースとしたより細かいマクロブロック単位の動き探索を行うことで、より精度の高い予測フレームを生成できる。

図１０に示す例では、１２０ｆｐｓで画像を表示するので、ＧＭＩを用いた動き補償予測フレームを生成する場合でもそれなりの処理能力が必要となる。ＤＣＩ値による判定を行わずに、単純にＰＬＩによる単色画面フレームを挿入する処理のみでも、液晶ディスプレイにおける擬似インパルス表示処理を輝度レベル検出なしに実行できる。

本発明に係る映像符号化装置の一実施例の概略構成ブロック図である。 ＤＣＩの生成方法を示す図である。 ＮＡＬユニット構造を示す図である。 ＮＡＬユニットタイプを示す図である。 Ａｃｃｅｓｓユニット構造を示す図である。 未登録ユーザデータＳＥＩのシンタクスの説明図である。 ＤＣＩ＿ＰＡＣＫシンタクスを示す図である。 本発明に係る映像復号化装置の概略構成ブロック図である。 ＤＣＩに基づく補間フレーム生成のフローチャートである。 ６０ｆｐｓの符号化データを１２０ｆｐｓで再生する場合のフレームとＤＣＩの関係を示す図である。

符号の説明

１０ 入力端子
１２ シーンチェンジ検出装置
１４ 広域動き検出装置
１６ 予測方法決定装置
１８ メモリ
２０ 予測処理装置
２２ 局所復号化装置
２４ 直交変換量子化装置
２６ エントロピー符号化装置
２８ 多重化処理装置
３０ 表示制御情報生成装置
４０ 入力端子
４２ 分離処理装置
４４ 復号化処理装置
４６ メモリ
４８ 映像表示処理装置
５０ 表示装置
５２ 表示制御情報抽出装置
５４ フレーム生成装置

Claims (2)

1. 入力映像信号をその一部のフレームを間引いて符号化する符号化手段と、
   前記入力映像信号のシーンチェンジを検出するシーンチェンジ検出手段と、
   前記シーンチェンジ検出手段の出力に従い、前記符号化手段で間引かれるフレームに対する補間制御情報を生成する補間制御情報生成手段と、
   前記符号化手段の符号化により得られる映像符号化データと、前記補間制御情報とを多重する多重化処理手段
   とを有することを特徴とする映像符号化装置。
2. 入力符号化データから映像符号化データと、符号化されていないフレームに対する補間制御情報とを分離する分離処理手段と、
   前記映像符号化データを復号化する復号化手段と、
   前記補間制御情報に従い補間フレームを生成するフレーム生成手段と、
   前記復号化手段により復号化されたフレーム及び前記フレーム生成手段で生成された前記補間フレームから映像信号を生成する映像表示処理手段
   とを有することを特徴とする映像復号化装置。

Images