JP5199196B2 - 動画像復号方法，動画像復号装置および動画像復号プログラム - Google Patents

Description

本発明は，動画像を復号し再生する技術に関するもので，特に動画像を構成するフレームを少ない計算量で補間してフレーム数を増加させることで低フレームレート画像を高速に高フレーム化するものに関する。

動画像データは一定間隔の時刻に対応する静止画像（フレーム）の系列として表現される。この時刻の間隔（フレーム間隔）が小さくなる，つまり単位時間あたりの静止画像の数（フレームレート）が増加するに従って動画像は動きが滑らかになって品質が向上する。

表示装置は性能向上に伴って表示可能なフレームレートが向上して毎秒２００フレーム以上の表示が可能になっているが，すでに毎秒３０フレームや６０フレームといったより低いフレームレートで符号化された動画像の表示には，そのままでは表示装置の持つ高いフレームレートでの表示性能を十分に利用することができない。このような動画像を高いフレームレートで表示するには足りないフレームを補間してフレームレートを向上させる必要がある。

一方，家庭用ビデオ再生装置などの動画再生機器に複雑な画像処理機能を持たせることはコストおよび処理性能の点から適当でないため，簡略な方法でフレームの補間を行う必要がある。

以上の技術背景について，さらに詳しく説明すると以下のとおりである。フレームを補間してフレームレートを向上させる方法としては，例えば非特許文献１に記載されているように，オプティカルフローを用いたもの，また，非特許文献２に記載されているように，モーフィングを用いて補間画像を生成するもの，非特許文献３に記載されているように，自己相関を用いたものなど多くの方法が提案されている。これらは高品質な補間画像を生成可能である一方，補間画像生成のための計算量が大きく，家庭向け映像機器などの処理能力に限りのある機器での処理には向かない。

処理能力の限られた機器でフレーム補間を行う方法として符号化の情報を用いる方法が提案されている（非特許文献４〜６参照）。これらはＨ．２６４などの符号化で採用されている動きベクトルなどの情報を用いて基準となるフレームから補間するフレームへの画像の動きを求め，求めたベクトルから補間する画素値を推定して画像を生成するというものである。この方式は処理量の大きなオプティカルフロー推定等によって改めて画像の動きを推定する必要がなく，画素の生成の計算量も前述した非特許文献１〜３の方法に比べて少ない。

また，非特許文献７，非特許文献８で示されるとおり，動画像の品質を一定とした場合，単位時間当たりのフレーム数（フレームレート）とフレーム一枚あたりの符号量つまりビット数はトレードオフの関係にあり，一方を増加させると他方が減少する。すなわち，画像上の異なる二つの領域をフレーム単位で同等の品質で符号化するのに必要な符号量が同一の場合，その二つの領域の見かけの動きの速度が異なれば見かけの動きが小さい方が動画像としての品質は高いことになり，見かけの動きの早さによって品質が異なる。このことから，二つの領域の動画像の品質を等しくなるように近づけるためには動画像の動きの速さに応じてフレームレートを変更すればよい。

KRISHNAMURTHY R, WOODS J W, MOULIN P："Frame Interpolation and Bidirectional Prediction of Video Using Compactly Encoded Optical-Flow Fields and Label Fields", IEEE Transactions on Circuits and Systems for Video Technology Vol.9, No.5, Page.713-726 (1999.08)． 山本貴史, 長谷山美紀："モーフィングに基づくフレーム補間に関する一検討 適応的な対応点推定における領域分割の高精度化"，電子情報通信学会技術研究報告 Vol.107, No.487(ITS2007-65), Page.19-24 (2008.02.12)． 武山泰豊, 三島直, 伊藤剛："１２０Ｈｚ駆動ＬＣＤ向け高精度フレーム補間技術−自己相関ブロックマッチング"，２００７年映像情報メディア学会年次大会講演予稿集(CD-ROM)，Vol.2007, Page.ROMBUNNO.3-7 (2007.08.01)． 押切亮, 藤澤達朗, 菊池義浩："符号化情報を用いたワンセグフレーム補間"，２００８年映像メディア処理シンポジウム資料，Vol.13th, Page.161-162 (2008.10.29) ． 田中淑貴, 水戸研司："Ｈ．２６４シンタックス要素を応用したワンセグフレーム補間技術"，電子情報通信学会技術研究報告Vol.107, No.224(MoMuC2007 47), Page.23-28 (2007.09.13)． 出原優一, 関口俊一, 杉本和夫, 浅井光太郎："符号化情報を利用した低レートビデオの時間解像度改善に関する一検討"，電子情報通信学会大会講演論文集，Vol.2005, 情報・ システム 2, D-11-4, Page.4 (2005.03.07) ． 山形純一，田中伸一，吉田俊之："バッファ制御による符号化動画像の画質平坦化について"，２００７年画像符号化シンポジウム（PCSJ2007），P-2.11，Page.29-30(2007.10.31-11.2) ． 田中伸一，宮川大五郎，吉田俊之，筑波健史，野村敏男："ＭＯＳに基づく動画像の画質制御とビットレート削減効果について"，２００８年画像符号化シンポジウム（PCSJ2008) ，P-2.11, Page.29-30(2008.10.29-31) ．

動画像のフレームレートを向上させるには元の動画像のフレームの間に必要な数のフレームを補間すればよいが，補間するフレームの数に応じて計算量が増大する。３０ｆｐｓ（フレーム／秒）程度の画像のフレームレートから２００ｆｐｓを超えるフレームレートに向上させるには，二つの隣接するフレームの間に複数のフレームを補間して挿入する必要があるため，この計算量を減らす必要がある。

同一のフレームレートで表示する場合，動きの遅い部分は動きの速い部分に比べて動きが滑らかになるため，動画像の全体を一定の品質を保つためには動きの遅い部分のフレームレートを動きの速い部分のフレームレートより低くすることが可能である。フレームレートを画像の領域毎に動きの速さに応じて変えることができれば，動画像の滑らかさを保持したままフレーム補間のための計算量をより多く減少させることができる。

本発明はこの点に着目して，動画像の滑らかさを保持したままフレーム補間のための計算量をより多く減少させることができる技術を提供することを目的とする。

本発明は，上記の課題を解決するために，動きベクトルの大きさに応じて動画像上の領域ごとに補間するフレームの数を決定し，かつ，補間画像を生成する際の動きベクトルを元の符号化データの動きベクトルから求め，その大きさをフレーム間隔の大きさに応じた値への縮小によって算出することで少ない計算量で動画像のフレームレートを向上させ，滑らかな動きの動画像を生成することを可能にする。

すなわち，本発明は，動き補償によるフレーム間予測を行う符号化方式により符号化された動画像を復号する方法であって，復号されたフレームの符号化データの情報から，フレームのブロックごとの動きベクトルを算出する過程と，動きベクトルの大きさに応じて，動きベクトルの大きいブロックには高いフレームレート，動きベクトルの小さいブロックには低いフレームレートとなるフレームレートをブロックごとに算出する過程と，ブロックごとのフレームレートの値に基づいて，ブロックの動きベクトルを変換する過程と，変換で得られた動きベクトルに基づいてフレームの画像データを生成し，復号された元のフレーム間に挿入する補間フレームを生成する過程とを有し，前記ブロックごとに算出されるフレームレートは，元のフレームレートの整数倍となる最大フレームレート以下で，かつ前記最大フレームレートの約数となるフレームレートであり，元のフレームレートをｒ0 ，前記算出されたフレームレートをｒ1 ，前記最大フレームレートをｒmax ，元のフレームレートにおける１フレーム間隔あたりの動きベクトルｖをｖ＝（ｖx ，ｖy ），元のフレームレートｒ0 を前記算出されたフレームレートｒ1 にするために補間する補間フレームの番号をｎとするとき，前記ブロックの動きベクトルの変換は，ｎ×ｒ1 ／ｒmax が整数の場合に，変換後の動きベクトルｖ′をｖ′＝（ｖx ×ｒ0 ／ｒ1 ，ｖy ×ｒ0 ／ｒ1 ）とし，それ以外の場合に，変換後の動きベクトルｖ′を零ベクトルとする変換であることを特徴とする。

本発明の作用は，以下のとおりである。フレームを補間するには元の動画像データの画素から補間する画素を予測するため，補間するフレーム数が多いほど計算量は増加することになる。したがって，補間フレーム数が少ないほど演算量が少なくなり処理が簡単になる。

デコーダから得られた動きベクトルの大きさによって１フレームの時間間隔での画像の動きの大きさがブロックごとに推測できる。１フレームあたりの画像の動きの大きさを最小値と最大値の間の一定範囲内に納めるように補間を行うフレーム数を決めれば，動きの滑らかさを保持したまま，補間するフレーム数を抑えることができる。こうして決定したフレームのみ実質的なフレーム補間を行うことで，低フレームレートの動画像から動きの滑らかな高フレームレート動画像を少ない処理量で生成することができる。

本発明により，低フレームレートの動画像から動きの滑らかな高フレームレート動画像を少ない処理量で生成する動画像復号装置を提供することができる。

本発明の装置構成例を表すブロック図である。 本発明の実施形態の処理全体を示したフローチャートである。 動きベクトル分割処理部の処理内容を表すフローチャートである。

図１に，本発明の装置構成例を示す。図１に示す動画像復号装置１０は，ＭＰＥＧ−２（ISO/IEC 13818-2 ），ＭＰＥＧ−４（ISO/IEC 14496 ），Ｈ．２６４（参考文献１参照）などの動き補償に基づくフレーム間圧縮を利用する動画像符号化方式で符号化されたデータを入力とする。

［参考文献１］：ITU-T H.264 SERIES H: AUDIOVISUAL AND MULTIMEDIA SYSTEMS, Infrastructure of audiovisual services. Coding of moving video. Advanced video coding for generic audiovisual Services．
これらの符号化方式は，動画像データのフレームをブロックに分割し，他のフレームからの動きを予測する動き補償を用いてデータ量を削減している。動き予測は動きベクトルで表現され，この予測値と実際のブロックの画素との差を誤差としてさらに符号化する。なお，実際には動きベクトルは絶対値で表されるのではなく，そのブロックの周囲のブロックの動きベクトルの値から予測し，その誤差を符号化することで表現するなどしてデータ量を削減している（参考文献２参照）。

［参考文献２］：大久保榮監修，角野眞也・菊池義浩・鈴木輝彦共編，「改訂版Ｈ．２６４／ＡＶＣ教科書」，インプレスＲ＆Ｄ発行, 2006．
このように，符号データにはそれ自体に動きベクトルの情報が含まれるから，これを利用することでブロック毎の動きベクトルを高速に求めることが可能である。また，動きベクトルの基準となる参照フレームとのフレーム番号の差から，非特許文献４に示されるような方法でブロックの１フレーム間隔あたりの動きベクトルを求めることができる。

動画像復号装置１０のデコーダ１１は，入力した符号化データを復号して，フレームの画像データを生成すると同時に，画像データ生成時に用いたそのフレームのブロックごとの動きベクトルとその参照フレーム番号の情報を出力する。ここで，デコーダから出力される，それぞれのブロックに対する動きベクトルｖ_d を，
ｖ_d ＝（ｖ_dx，ｖ_dy）
とする。

なお，これらの符号化では，ブロックの予測は，時間的に前のフレームと後のフレームの両方向から可能であるため，あらかじめ，デコーダ出力は一方向（前の時間のフレームからの予測に対応する方向）に揃えて出力する。

動きベクトル計算部１２は，デコーダ出力のブロック毎の動きベクトルと，その参照フレームの番号から，そのブロックの元の画像の１フレームあたりの動きベクトルｖを，次のように算出する。ｎは，参照フレームの番号と現在のフレームの番号の差である。

ｖ＝ｖ_d ／ｎ＝（ｖ_dx／ｎ，ｖ_dy／ｎ）
Ｈ．２６４などの符号化では，２枚のフレームからの動き予測を行い，二つの予測値の平均を画素の予測とする双方向予測や双予測も可能である。双予測などで一つのブロックに複数の動きベクトルが設定されているとき，二つのベクトルから一つの動きベクトルを生成する。最も簡単な方法は，一方の動きベクトルを選択することである。もう一つの方法は，二つの動きベクトルの１フレームあたりの値の平均値をとることである。

また，これらの符号化では，フレーム間予測を行わないフレーム（Ｉフレーム）が挿入される。フレーム間予測を行わないフレームに対しては，動きベクトルの情報が得られないため，直前のフレームの動きベクトルの情報をそのまま用いる。

フレームレート決定部１３は，動きベクトルのデータをもとに各ブロックのフレームレートを以下のように決定し，動きベクトル分割処理部１４に送信する。

フレームレート決定部１３は，まずそのブロックの画像に基づいたフレーム補間を行わないブロックを決定する。ブロックに対してフレーム補間によるノイズの発生しやすさの判定を行い，動きベクトルが画像の動きを表していない可能性があるとき，つまり動きベクトルの信頼性が一定量より低いとき，そのブロックは隣接する元画像フレームとの間のフレーム補間を行わないものとする。また，フレーム間予測を行わず，ブロックに動きベクトルが設定されていないときは，そのブロックの画像に基づいたフレーム補間を行わない。動きベクトルの信頼性は，例えば，非特許文献５に示される方法によって求めることができる。

フレーム補間を行うブロックが決定したならば，ブロックごとのフレームレートを決定する。フレームを補間した際のフレームレートの元の動画像のフレームレートに対する比を，ｒとする。つまり，元の画像のフレームレートｒ₀ ，フレーム補間後のフレームレートをｒ₁ とすると，ｒを次のように定める。

ｒ＝ｒ₁ ／ｒ₀
ここで，元のフレームレートにおける１フレーム間隔あたりの動きベクトルが，ｖ＝（ｖ_x ，ｖ_y ）であるとすると，ｒ倍に増加させたフレームレートにおける１フレーム間隔あたりの動きベクトルｖ′は，
ｖ′＝（ｖ_x ／ｒ，ｖ_y ／ｒ）
｜ｖ′｜＝｜ｖ｜／ｒ
ｒ＝｜ｖ｜／｜ｖ′｜
である。

ここで，フレームレート決定部１３は，目標となる動きベクトルの長さ｜ｖ_t ｜と，ｒ₁ の最大値ｍａｘ（ｒ₁ ）＝ｍ×ｒ₀ （ｍは整数) を保持している。

ｒとして，｜ｖ｜／｜ｖ_t ｜を整数に丸めた値（例えば，｜ｖ｜ /｜ｖ_t ｜以上の整数または以下の整数），かつ，ｒ₁ （ｒ₁ ＝ｒ×ｒ₀ ）がｍａｘ（ｒ₁ ）以下かつｍａｘ（ｒ₁ ）の約数，つまりｒがｍの約数になるように設定する。このようにして，ブロックの補間後のフレームレートｒ₁ を得る。補間を行わないブロックでは，ｒ₁ ＝ｒ₀ である。

動きベクトル分割処理部１４は，動きベクトル計算部１２から受信したブロックごとの動きベクトルのデータを，フレームレート決定部１３から受信したブロックごとのフレームレートに基づいて分割し，補間フレームを含め，各フレームのブロックの新たな動きベクトルを設定する。

動きベクトル分割処理部１４でのベクトルの分割は，以下のように行われる。動きベクトルが（ｖ_x ，ｖ_y ），フレームレートがｒ₁ （ｒ＝ｒ₁ ／ｒ₀ ）のとき，そのブロックの動きベクトルｖ′は，
ｖ′＝（ｖ_x ／ｒ，ｖ_y ／ｒ）
である。

フレームレートをｒ₀ からｍａｘ（ｒ₁ ）に増加させるとき，元のフレームの直前に
ｍａｘ（ｒ₁ ）／ｒ₀ −１
フレーム挿入される。ここで，挿入されるフレームの番号を，時間が早い順に，
１，２，…，ｍａｘ（ｒ₁ ）／ｒ₀ −１
と付ける。

補間フレームの番号１から順番に，各ブロックの動きベクトルを次のように設定する（図３のフローチャート参照）。

補間フレームの番号をｎとする。
（１） ｒ₁ ＝ｒ₀ のとき， 動きベクトルは零ベクトルとする。
（２） ｒ₁ ＝ｒ₀ でないとき（ｍａｘ（ｒ₁ ）／ｒ₁ は整数である) ，
ｎ／（ｍａｘ（ｒ₁ ）／ｒ₁ ）が整数のとき，動きベクトルを上記で求めたｖ′とする。それ以外のとき，動きベクトルを零ベクトルとする。

補間フレーム生成部１５は，フレームのブロックごとの動きベクトルと参照フレームバッファ１６中の参照フレームのデータに基づいて，次のように補間フレームの画像を生成し，フレームバッファ１７に送る。

補間フレーム生成部１５は，補間フレームのブロックを，動きベクトル分割処理部１４から受信した動きベクトルｖ′に基づき，参照フレームバッファ１６にある画像データの同じブロックの位置からｖ′画素ずれた位置のブロックの情報を，補間フレーム画像の画像として補間画像を生成する。さらに，生成した補間画像を次の補間フレームの生成のために，参照フレームバッファ１６に格納する。

参照フレームバッファ１６には，補間フレーム生成のためにデコーダ１１と補間フレーム生成部１５とからフレーム画像データが入力されて，格納される。

フレームバッファ１７は，元の符号化データから生成したフレームの間に補間フレーム生成部１５で生成したフレームを挿入して出力する。

図２は，本発明の処理全体を示したフローチャートである。デコーダ１１は，フレーム画像のデコードを行い，動きベクトル情報を動きベクトル計算部１２へ送る（ステップＳ１０）。動きベクトル計算部１２は，各ブロックの１フレームあたりの動きベクトルを算出する（ステップＳ１１）。フレームレート決定部１３は，動きベクトルの大きさに基づいて，各ブロックのフレームレートを決定する（ステップＳ１２）。動きベクトル分割処理部１４は，ブロックごとの動きベクトルのデータを，ブロックごとのフレームレートに基づいて分割し，補間フレームの各ブロックの動きベクトルを決定する（ステップＳ１３）。

補間フレーム生成部１５は，補間フレームごとに以下の処理を行う。まず，参照画像と動きベクトルとに基づいて補間フレームの各ブロック画像を生成する（ステップＳ１４）。その生成した補間フレームを元のフレームのあとに挿入する（ステップＳ１５）。生成したフレームを参照画像とし，すべての補間フレームが終わるまで，次の補間フレームについて，同様にステップＳ１４以降の処理を繰り返す（ステップＳ１６〜１８）。

一つの補間フレームの処理が終了したならば，同様に元画像を参照画像として，全フレームの処理が終了するまで，次の補間フレームについてステップＳ１０以降の処理を繰り返し，復号対象となるフレームが終了したならば，処理を終了する（ステップＳ１９〜Ｓ２１）。

図３は，動きベクトル分割処理部１４の処理内容を表すフローチャートである。まず，補間フレーム番号ｎを１に初期化する（ステップＳ３０）。次に，最初のブロック（座標は（ｘ，ｙ））を処理対象とする（ステップＳ３１）。補間フレーム番号ｎ，座標（ｘ，ｙ）のブロックに対して，以下の処理を行う（ステップＳ３２）。補間後のフレームレートをｒ₁ ，元のフレームレートをｒ₀ とする（ステップＳ３３）。

ｒ₁ ＝ｒ₀ の場合およびｎ／（ｍａｘ（ｒ₁ ）／ｒ₁ ）が整数でない場合，ブロックの動きベクトルを零ベクトルとする（ステップＳ３４，Ｓ３５，Ｓ３６）。それ以外の場合には，ブロックの動きベクトルを前述したｖ′とする（ステップＳ３４，Ｓ３５，Ｓ３７）。

フレームの最後のブロックの処理が終了していない場合，次のブロックを選び，その座標を（ｘ，ｙ）として同様にステップＳ３２以降の処理を繰り返す（ステップＳ３８，Ｓ３９）。フレームの最後のブロックの処理が終了したならば，最後の補間フレームの処理が終了したかどうかを判定し，終了していない場合には，ｎに１を加算し，次の補間フレームについて同様にステップＳ３１以降の処理を繰り返す（ステップＳ４０，Ｓ４１）。最後の補間フレームの処理が終了した場合，すなわち，ｎ＝ｍａｘ（ｒ₁ ）／ｒ₀ −１になった場合，処理を終了する。

以上の実施例では，デコーダ１１は，符号化データを復号して得られたフレームのブロックごとの動きベクトルとその参照フレーム番号の情報を，動きベクトル計算部１２に出力していた。

他の実施例として，デコーダ１１から動きベクトルと参照フレーム番号の情報を動きベクトル計算部１２に書き出すのではなく，符号化データに含まれる符号化情報を，動きベクトル計算部１２に書き出すような実施も可能である。ここで，符号化情報とは，符号化方式においてフレーム間予測におけるブロックの動き補償のために動きベクトルを算出する際に使用される情報である。具体的には，画面内予測符号化に用いる情報とＤＣＴ係数以外の情報を指す。

符号化情報を利用することで，オプティカルフロー推定などの画素に対する演算を経ることなく，符号化で用いられる動きベクトルよりも，さらに正確に画像の動きを表すブロック毎の動きベクトルを高速に求めることが可能である。

動きベクトル計算部１２は，符号化情報を入力すると，非特許文献４，非特許文献５，非特許文献６に示されているような方法で，フレームごとに，そのフレーム上の８×８画素ブロックの１フレーム間隔あたりの動きベクトルを求め，動きベクトル情報としてフレームレート決定部１３と動きベクトル分割処理部１４に送信する。

このように符号化情報から各ブロックの動きを調べる方法では，前述した実施例における動きベクトルの情報だけでなく，ブロックのタイプの情報などの付加情報を用いて，より正確に画像の動きベクトルを算出することができる。

以上の動画像復号の処理は，コンピュータとソフトウェアプログラムとによっても実現することができ，そのプログラムをコンピュータ読み取り可能な記録媒体に記録することも，ネットワークを通して提供することも可能である。

１０ 動画像復号装置
１１ デコーダ
１２ 動きベクトル計算部
１３ フレームレート決定部
１４ 動きベクトル分割処理部
１５ 補間フレーム生成部
１６ 参照フレームバッファ
１７ フレームバッファ

Claims (3)

1. 動き補償によるフレーム間予測を行う符号化方式により符号化された動画像を復号する方法であって，
   復号されたフレームの符号化データの情報から，フレームのブロックごとの動きベクトルを算出する過程と，
   動きベクトルの大きさに応じて，動きベクトルの大きいブロックには高いフレームレート，動きベクトルの小さいブロックには低いフレームレートとなるフレームレートをブロックごとに算出する過程と，
   ブロックごとのフレームレートの値に基づいて，ブロックの動きベクトルを変換する過程と，
   変換で得られた動きベクトルに基づいてフレームの画像データを生成し，復号された元のフレーム間に挿入する補間フレームを生成する過程とを有し，
   前記ブロックごとに算出されるフレームレートは，元のフレームレートの整数倍となる最大フレームレート以下で，かつ前記最大フレームレートの約数となるフレームレートであり，
   元のフレームレートをｒ0 ，前記算出されたフレームレートをｒ1 ，前記最大フレームレートをｒmax ，元のフレームレートにおける１フレーム間隔あたりの動きベクトルｖをｖ＝（ｖx ，ｖy ），元のフレームレートｒ0 を前記算出されたフレームレートｒ1 にするために補間する補間フレームの番号をｎとするとき，前記ブロックの動きベクトルの変換は，ｎ×ｒ1 ／ｒmax が整数の場合に，変換後の動きベクトルｖ′をｖ′＝（ｖx ×ｒ0 ／ｒ1 ，ｖy ×ｒ0 ／ｒ1 ）とし，それ以外の場合に，変換後の動きベクトルｖ′を零ベクトルとする変換である
   ことを特徴とする動画像復号方法。
2. 動き補償によるフレーム間予測を行う符号化方式により符号化された動画像を復号する装置であって，
   復号されたフレームの符号化データの情報から，フレームのブロックごとの動きベクトルを算出する手段と，
   動きベクトルの大きさに応じて，動きベクトルの大きいブロックには高いフレームレート，動きベクトルの小さいブロックには低いフレームレートとなるフレームレートをブロックごとに算出する手段と，
   ブロックごとのフレームレートの値に基づいて，ブロックの動きベクトルを変換する手段と，
   変換で得られた動きベクトルに基づいてフレームの画像データを生成し，復号された元のフレーム間に挿入する補間フレームを生成する手段とを備え，
   前記フレームレートをブロックごとに算出する手段により算出されるフレームレートは，元のフレームレートの整数倍となる最大フレームレート以下で，かつ前記最大フレームレートの約数となるフレームレートであり，
   前記ブロックの動きベクトルを変換する手段による動きベクトルの変換は，元のフレームレートをｒ0 ，前記算出されたフレームレートをｒ1 ，前記最大フレームレートをｒmax ，元のフレームレートにおける１フレーム間隔あたりの動きベクトルｖをｖ＝（ｖx ，ｖy ），元のフレームレートｒ0 を前記算出されたフレームレートｒ1 にするために補間する補間フレームの番号をｎとするとき，ｎ×ｒ1 ／ｒmax が整数の場合に，変換後の動きベクトルｖ′をｖ′＝（ｖx ×ｒ0 ／ｒ1 ，ｖy ×ｒ0 ／ｒ1 ）とし，それ以外の場合に，変換後の動きベクトルｖ′を零ベクトルとする変換である
   ことを特徴とする動画像復号装置。
3. 請求項１に記載の動画像復号方法を，コンピュータに実行させるための動画像復号プログラム。

Images