JP2002252854A - 動きベクトル変換方法及び変換装置 - Google Patents
動きベクトル変換方法及び変換装置Info
- Publication number
- JP2002252854A JP2002252854A JP2001046919A JP2001046919A JP2002252854A JP 2002252854 A JP2002252854 A JP 2002252854A JP 2001046919 A JP2001046919 A JP 2001046919A JP 2001046919 A JP2001046919 A JP 2001046919A JP 2002252854 A JP2002252854 A JP 2002252854A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- information
- vector information
- mpeg4
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【課題】 入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換方法において、予測効率が低下し
ないものを得る。 【解決手段】 Ｉピクチャ若しくはＰピクチャを一枚お
きに破棄することにより行われる動きベクトル情報の合
成を、伸張若しくは足し合わせにより行い、その伸長と
その足し合わせのうち予測効率の高い方を選択してＭＰ
ＥＧ４の符号化に用い、伸張及び足し合わせの２通りの
方法により、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトル情報の両方を合成
する。
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換方法において、予測効率が低下し
ないものを得る。 【解決手段】 Ｉピクチャ若しくはＰピクチャを一枚お
きに破棄することにより行われる動きベクトル情報の合
成を、伸張若しくは足し合わせにより行い、その伸長と
その足し合わせのうち予測効率の高い方を選択してＭＰ
ＥＧ４の符号化に用い、伸張及び足し合わせの２通りの
方法により、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトル情報の両方を合成
する。
Description
【０００１】
【発明の属する技術分野】本発明は、ＭＰＥＧなどの様
に、離散コサイン変換等の直交変換と動き補償によって
圧縮された画像情報を示すビットストリームを、衛星放
送、ケーブルＴＶ、インターネットなどのネットワーク
メディアを介して受信する際に、若しくは光、磁気ディ
スク、フラッシュメモリのような記憶メディア上で処理
する際に用いられる画像情報変換方法（画像情報変換変
換装置）における動きベクトル変換方法（動きベクトル
変換装置）に関するものである。
に、離散コサイン変換等の直交変換と動き補償によって
圧縮された画像情報を示すビットストリームを、衛星放
送、ケーブルＴＶ、インターネットなどのネットワーク
メディアを介して受信する際に、若しくは光、磁気ディ
スク、フラッシュメモリのような記憶メディア上で処理
する際に用いられる画像情報変換方法（画像情報変換変
換装置）における動きベクトル変換方法（動きベクトル
変換装置）に関するものである。
【０００２】
【従来の技術】近年、画像情報をデジタル信号として取
り扱い、その際、効率の高い情報の伝送、蓄積を目的と
し、画像情報特有の冗長性を利用して、離散コサイン変
換等の直交変換と動き補償により圧縮するＭＰＥＧなど
の方式に準拠した装置が、放送局などの情報配信、及び
一般家庭における情報受信の双方において普及しつつあ
る。
り扱い、その際、効率の高い情報の伝送、蓄積を目的と
し、画像情報特有の冗長性を利用して、離散コサイン変
換等の直交変換と動き補償により圧縮するＭＰＥＧなど
の方式に準拠した装置が、放送局などの情報配信、及び
一般家庭における情報受信の双方において普及しつつあ
る。
【０００３】特に、ＭＰＥＧ２（ＩＳＯ／ＩＥＣ １３
８１８−２）は、汎用画像符号化方式として定義されて
おり、飛び越し走査画像及び順次走査画像の双方、並び
に標準解像度画像及び高精細画像を網羅する標準方式
で、プロフェッショナル用途及びコンシューマー用途の
広範なアプリケーションに今後とも用いられるものと予
想される。ＭＰＥＧ２圧縮方式を用いることにより、例
えば７２０×４８０画素を持つ標準解像度の飛び越し走
査画像であれば４〜８Ｍｂｐｓ、１９２０×１０８８画
素を持つ高解像度の飛び越し走査画像であれば１８〜２
２Ｍｂｐｓの符号量（ビットレート）を割り当てること
で、高い圧縮率と良好な画質の実現が可能である。
８１８−２）は、汎用画像符号化方式として定義されて
おり、飛び越し走査画像及び順次走査画像の双方、並び
に標準解像度画像及び高精細画像を網羅する標準方式
で、プロフェッショナル用途及びコンシューマー用途の
広範なアプリケーションに今後とも用いられるものと予
想される。ＭＰＥＧ２圧縮方式を用いることにより、例
えば７２０×４８０画素を持つ標準解像度の飛び越し走
査画像であれば４〜８Ｍｂｐｓ、１９２０×１０８８画
素を持つ高解像度の飛び越し走査画像であれば１８〜２
２Ｍｂｐｓの符号量（ビットレート）を割り当てること
で、高い圧縮率と良好な画質の実現が可能である。
【０００４】ＭＰＥＧ２は主として放送用に適合する高
画質符号化に適用されていたが、ＭＰＥＧ１より低い符
号量（ビットレート）、つまりより高い圧縮率の符号化
方式には対応していなかった。携帯端末の普及により、
今後そのような符号化方式のニーズは高まると思われ、
これに対応してＭＰＥＧ４の符号化方式の標準化が行わ
れた。画像符号化方式に関しては、１９９８年１２月に
ＩＳＯ／ＩＥＣ １４４９６−２として、その規格が国
際標準に承認された。
画質符号化に適用されていたが、ＭＰＥＧ１より低い符
号量（ビットレート）、つまりより高い圧縮率の符号化
方式には対応していなかった。携帯端末の普及により、
今後そのような符号化方式のニーズは高まると思われ、
これに対応してＭＰＥＧ４の符号化方式の標準化が行わ
れた。画像符号化方式に関しては、１９９８年１２月に
ＩＳＯ／ＩＥＣ １４４９６−２として、その規格が国
際標準に承認された。
【０００５】ところで、ディジタル放送用に一度符号化
されたＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを、携帯端末上等で処理するのにより適した、より低
い符号量（ビットレート）のＭＰＥＧ４の画像圧縮情報
を示すビットストリームに変換したいというニーズがあ
る。
されたＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを、携帯端末上等で処理するのにより適した、より低
い符号量（ビットレート）のＭＰＥＧ４の画像圧縮情報
を示すビットストリームに変換したいというニーズがあ
る。
【０００６】かかる目的を達成するための従来の画像情
報変換装置を図１に示し、以下、これについて説明す
る。図１は、入力されたＭＰＥＧ２の画像圧縮情報を示
すビットストリームを、ＭＰＥＧ４の画像圧縮情報を示
すビットストリームへ変換する画像情報変換装置であ
る。すなわち、図１において、１はＭＰＥＧ２の画像情
報復号化装置、２は解像度・フレームレート変換装置、
３はＭＰＥＧ４の画像情報符号化装置である。入力され
たＭＰＥＧ２の画像圧縮情報を示すビットストリーム
は、ＭＰＥＧ２の画像情報復号化装置１により復号化さ
れる。復号化された画像情報は解像度・フレームレート
変換装置２へ伝送され、任意の異なる解像度、フレーム
レートをもつ画像情報へ変換される。変換された画像情
報は、ＭＰＥＧ４の画像情報符号化装置３に入力され
て、ＭＰＥＧ４の画像符号化方式によりＭＰＥＧ４の画
像圧縮情報を示すビットストリームに符号化され出力さ
れる。
報変換装置を図１に示し、以下、これについて説明す
る。図１は、入力されたＭＰＥＧ２の画像圧縮情報を示
すビットストリームを、ＭＰＥＧ４の画像圧縮情報を示
すビットストリームへ変換する画像情報変換装置であ
る。すなわち、図１において、１はＭＰＥＧ２の画像情
報復号化装置、２は解像度・フレームレート変換装置、
３はＭＰＥＧ４の画像情報符号化装置である。入力され
たＭＰＥＧ２の画像圧縮情報を示すビットストリーム
は、ＭＰＥＧ２の画像情報復号化装置１により復号化さ
れる。復号化された画像情報は解像度・フレームレート
変換装置２へ伝送され、任意の異なる解像度、フレーム
レートをもつ画像情報へ変換される。変換された画像情
報は、ＭＰＥＧ４の画像情報符号化装置３に入力され
て、ＭＰＥＧ４の画像符号化方式によりＭＰＥＧ４の画
像圧縮情報を示すビットストリームに符号化され出力さ
れる。
【０００７】ＭＰＥＧ２の画像情報復号化装置１におい
ては、水平及び垂直方向成分共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームの８次のＤＣ
Ｔ係数全てを用いた復号処理を行うことが考えられる
が、垂直方向には８次の係数全てを用いるものの、水平
方向には８次の係数のうち低域４成分のみを用いた復号
処理（以下これを４×８ダウンデコードと呼ぶ）、若し
くは、水平、垂直方向共に水平方向には８次の係数のう
ち低域４成分のみを用いた復号処理（以下これを４×４
ダウンデコードと呼ぶ）を行うことで、画質劣化を最小
限に抑えながら、演算量とビデオメモリ容量を削減し、
更に後段のダウンサンプリング処理を簡略化する構成も
考えられる。
ては、水平及び垂直方向成分共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームの８次のＤＣ
Ｔ係数全てを用いた復号処理を行うことが考えられる
が、垂直方向には８次の係数全てを用いるものの、水平
方向には８次の係数のうち低域４成分のみを用いた復号
処理（以下これを４×８ダウンデコードと呼ぶ）、若し
くは、水平、垂直方向共に水平方向には８次の係数のう
ち低域４成分のみを用いた復号処理（以下これを４×４
ダウンデコードと呼ぶ）を行うことで、画質劣化を最小
限に抑えながら、演算量とビデオメモリ容量を削減し、
更に後段のダウンサンプリング処理を簡略化する構成も
考えられる。
【０００８】このような従来方法では、ＭＰＥＧ４の画
像符号化装置において、入力された画像信号を符号化す
る際、動きベクトル情報を検出する演算処理量は、全演
算処理量の約６０〜７０パーセントを占める。そのた
め、画像のリアルタイムでの処理が困難となり、時間遅
延が発生し、装置が大規模になってしまう等の問題点が
生じる。
像符号化装置において、入力された画像信号を符号化す
る際、動きベクトル情報を検出する演算処理量は、全演
算処理量の約６０〜７０パーセントを占める。そのた
め、画像のリアルタイムでの処理が困難となり、時間遅
延が発生し、装置が大規模になってしまう等の問題点が
生じる。
【０００９】かかる問題を解決する手段として、発明者
らは先に図２に示す画像情報変換装置の発明を行った。
以下、これについて説明する。４はＭＰＥＧ２の画像情
報復号化装置、５は解像度・フレームレート変換装置、
６は動きベクトル変換装置、７はＭＰＥＧ４の画像情報
符号化装置である。図２の画像情報変換装置において、
動きベクトル変換装置６を除く部分の動作原理について
は、図１に示した画像情報変換装置と同様であるため、
動きベクトル変換装置６の動作原理について詳述する。
らは先に図２に示す画像情報変換装置の発明を行った。
以下、これについて説明する。４はＭＰＥＧ２の画像情
報復号化装置、５は解像度・フレームレート変換装置、
６は動きベクトル変換装置、７はＭＰＥＧ４の画像情報
符号化装置である。図２の画像情報変換装置において、
動きベクトル変換装置６を除く部分の動作原理について
は、図１に示した画像情報変換装置と同様であるため、
動きベクトル変換装置６の動作原理について詳述する。
【００１０】図３は、ＭＰＥＧ２の画像圧縮情報を示す
ビットストリーム中の動きベクトル情報と、ＭＰＥＧ４
の画像圧縮情報を示すビットストリーム中の動きベクト
ル情報の相関を示す図で、以下、これについて説明す
る。画像の解像度が変換される際、変換後の前フレーム
での位置から現フレームでの位置への動きベクトル情報
の水平成分は、解像度変換前の動きベクトル情報の水平
成分と画像の横方向の解像度変換比によって求めること
が可能であり、解像度変換後の垂直成分は、解像度変換
前の動きベクトル情報の垂直成分と画像の垂直方向の解
像度変換レートによって求めることが可能である。解像
度変換前の動きベクトル情報と変換後の動きベクトル情
報は大きな相関を持ち、その相関を利用して解像度変換
前の動きベクトル情報から変換後の動きベクトル情報を
求めることが可能である。
ビットストリーム中の動きベクトル情報と、ＭＰＥＧ４
の画像圧縮情報を示すビットストリーム中の動きベクト
ル情報の相関を示す図で、以下、これについて説明す
る。画像の解像度が変換される際、変換後の前フレーム
での位置から現フレームでの位置への動きベクトル情報
の水平成分は、解像度変換前の動きベクトル情報の水平
成分と画像の横方向の解像度変換比によって求めること
が可能であり、解像度変換後の垂直成分は、解像度変換
前の動きベクトル情報の垂直成分と画像の垂直方向の解
像度変換レートによって求めることが可能である。解像
度変換前の動きベクトル情報と変換後の動きベクトル情
報は大きな相関を持ち、その相関を利用して解像度変換
前の動きベクトル情報から変換後の動きベクトル情報を
求めることが可能である。
【００１１】すなわち、入力されたＭＰＥＧ２の画像圧
縮情報を示すビットストリームより、ＭＰＥＧ２のマク
ロブロック動きベクトルやマクロブロックタイプ等の情
報を利用し、ＭＰＥＧ４の動きベクトル情報へ変換す
る。ＭＰＥＧ４の符号化装置７内では、動きベクトル情
報の検出を行わず、変換された動きベクトル情報を用い
た画像符号化を行う。これにより、処理量の大幅な削減
を可能とする。
縮情報を示すビットストリームより、ＭＰＥＧ２のマク
ロブロック動きベクトルやマクロブロックタイプ等の情
報を利用し、ＭＰＥＧ４の動きベクトル情報へ変換す
る。ＭＰＥＧ４の符号化装置７内では、動きベクトル情
報の検出を行わず、変換された動きベクトル情報を用い
た画像符号化を行う。これにより、処理量の大幅な削減
を可能とする。
【００１２】ここで、解像度フレームレート変換装置５
の動作原理について述べる。まず、ＭＰＥＧ２の画像情
報復号化装置４より入力された画像の解像度変換を行
う。ここでは、水平方向・垂直方向共に解像度を１／２
にする場合を例にして挙げる。図４に示すように、垂直
方向のダウンサンプリングは、入力された飛び越し走査
画像の第一フィールド、若しくはを第二フィールドを抽
出して、順次走査画像に変換する。水平方向に関して
は、ダウンサンプリングフィルタを用いて、１／２の解
像度に変換する。また、低ビットレートを実現するため
に、解像度の変換による圧縮だけではなく、Ｂピクチャ
を破棄することでフレームレートの低減を実現する。例
えば、図４に示したＭＰＥＧ２のＩＢＢＰの画像は解像
度・フレーム変換後、ＩＰの第一フィールドの構成にな
る。解像度・フレーム変換を行った画像は、ＭＰＥＧ４
の画像情報符号化装置７においてマクロブロック単位の
処理を可能とするため、輝度信号の水平方向・垂直方向
の画素数が共に１６の倍数となるようにする。そのた
め、外部から入力される画像サイズ調整フラグにより、
画素の補填あるいは画素の除去を行う。
の動作原理について述べる。まず、ＭＰＥＧ２の画像情
報復号化装置４より入力された画像の解像度変換を行
う。ここでは、水平方向・垂直方向共に解像度を１／２
にする場合を例にして挙げる。図４に示すように、垂直
方向のダウンサンプリングは、入力された飛び越し走査
画像の第一フィールド、若しくはを第二フィールドを抽
出して、順次走査画像に変換する。水平方向に関して
は、ダウンサンプリングフィルタを用いて、１／２の解
像度に変換する。また、低ビットレートを実現するため
に、解像度の変換による圧縮だけではなく、Ｂピクチャ
を破棄することでフレームレートの低減を実現する。例
えば、図４に示したＭＰＥＧ２のＩＢＢＰの画像は解像
度・フレーム変換後、ＩＰの第一フィールドの構成にな
る。解像度・フレーム変換を行った画像は、ＭＰＥＧ４
の画像情報符号化装置７においてマクロブロック単位の
処理を可能とするため、輝度信号の水平方向・垂直方向
の画素数が共に１６の倍数となるようにする。そのた
め、外部から入力される画像サイズ調整フラグにより、
画素の補填あるいは画素の除去を行う。
【００１３】画像サイズ調整フラグは、解像度・フレー
ムレート変換器の外部から入力され、画像の水平方向・
垂直方向の画素数が１６の倍数でない場合に対し、画像
への画素補填若しくは、除去を判定するためのフラグで
ある。
ムレート変換器の外部から入力され、画像の水平方向・
垂直方向の画素数が１６の倍数でない場合に対し、画像
への画素補填若しくは、除去を判定するためのフラグで
ある。
【００１４】次に、図５を用いて、画像サイズ調整フラ
グによる画像への処理を説明する。ＭＰＥＧ２の画像復
号化装置４より出力された画像の解像度がｍ画素×ｎ画
素であるとすると、ｍ、ｎは共に１６の倍数であるが、
水平方向・垂直方向がそれぞれ１／２にダウンサンプリ
ングされたｍ／２，ｎ／２は、１６の整数倍、若しく
は、１６で割って８画素の余りがある。前者の場合、、
画素数の調整を行う必要はない。後者の場合、マクロブ
ロック単位の処理を可能とするためには、画像サイズ調
整フラグによる画像への処理が必要となる。画像サイズ
調整フラグには、画素の補填と除去の二つの選択肢をも
つ。ｍ／２若しくはｎ／２を１６で割って、８画素が余
った場合においては、画像の除去を選択すれば、余った
８画素は除去される。すなわち、出力画像は（ｍ／２−
８）若しくは（ｎ／２―８）となる。一方画素の補填を
選択すれば、新たに作成した８画素若しくは元の画像か
ら複製した８画素若しくは画像に適した８画素を行、あ
るいは列の先頭若しくは、後部から付け加える。すなわ
ち、出力画像は（ｍ／２＋８）若しくは（ｎ／２＋８）
となる。結果として、変換後の画像解像度の横と縦は１
６の倍数となり、マクロブロック単位の処理に適したサ
イズを持つ画像が出力される。
グによる画像への処理を説明する。ＭＰＥＧ２の画像復
号化装置４より出力された画像の解像度がｍ画素×ｎ画
素であるとすると、ｍ、ｎは共に１６の倍数であるが、
水平方向・垂直方向がそれぞれ１／２にダウンサンプリ
ングされたｍ／２，ｎ／２は、１６の整数倍、若しく
は、１６で割って８画素の余りがある。前者の場合、、
画素数の調整を行う必要はない。後者の場合、マクロブ
ロック単位の処理を可能とするためには、画像サイズ調
整フラグによる画像への処理が必要となる。画像サイズ
調整フラグには、画素の補填と除去の二つの選択肢をも
つ。ｍ／２若しくはｎ／２を１６で割って、８画素が余
った場合においては、画像の除去を選択すれば、余った
８画素は除去される。すなわち、出力画像は（ｍ／２−
８）若しくは（ｎ／２―８）となる。一方画素の補填を
選択すれば、新たに作成した８画素若しくは元の画像か
ら複製した８画素若しくは画像に適した８画素を行、あ
るいは列の先頭若しくは、後部から付け加える。すなわ
ち、出力画像は（ｍ／２＋８）若しくは（ｎ／２＋８）
となる。結果として、変換後の画像解像度の横と縦は１
６の倍数となり、マクロブロック単位の処理に適したサ
イズを持つ画像が出力される。
【００１５】例として、今、入力となるＭＰＥＧ２の画
像圧縮情報を示すビットストリームの解像度が７２０×
４８０画素である場合を考える。この時、ｍ／２＝３６
０，ｎ／２＝２４０となるが、水平方向に関しては、１
６の倍数でない。このため画素の除去を行い、ｍ／２−
８＝３５２画素とするか、若しくは画素の補填を行って
ｍ／２＋８＝３６８画素とする。
像圧縮情報を示すビットストリームの解像度が７２０×
４８０画素である場合を考える。この時、ｍ／２＝３６
０，ｎ／２＝２４０となるが、水平方向に関しては、１
６の倍数でない。このため画素の除去を行い、ｍ／２−
８＝３５２画素とするか、若しくは画素の補填を行って
ｍ／２＋８＝３６８画素とする。
【００１６】入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームと、出力となるＭＰＥＧ４の画像圧
縮情報を示すビットストリームにおけるマクロブロック
の対応関係を、図６を用いて説明する。
すビットストリームと、出力となるＭＰＥＧ４の画像圧
縮情報を示すビットストリームにおけるマクロブロック
の対応関係を、図６を用いて説明する。
【００１７】図６Ａおよび図６Ｂの実線で区切られてい
る各正方格子の一つ一つがマクロブロックを示してい
る。図６ＡはＭＰＥＧ２の復号化装置４より出力された
画像、なわち、解像度変換前の画像である。図６Ｂは図
６Ａの画像を解像度・フレームレート変換装置５によ
り、水平方向・垂直方向の解像度とも１／２に変換され
た画像である。たとえば、変換前の図６Ａの左上の網掛
けされた１６×１６マクロブロックは、変換後の図６Ｂ
における左上の８×８ブロックになる。すなわち、図６
Ａに示した４つの網掛けした１６×１６マクロブロック
が、解像度変換された後、それぞれ図６Ｂに示した４つ
の網掛けした８×８ブロックになり、それらによって１
つの１６×１６マクロブロックが構成される。解像度変
換前と後の動きベクトル情報の相関が大きいため、変換
後の８×８ブロックの動きベクトル情報は、変換前の１
６×１６マクロブロックの動きベクトル情報より求める
ことができる。さらに、４つの８×８の動きベクトル情
報から１つの１６×１６の動きベクトル情報を求め、Ｍ
ＰＥＧ４の画像情報符号化装置７における処理に用いる
動きベクトル情報の４つの８×８の動きベクトルと１つ
１６×１６の動きベクトル情報が生成される。
る各正方格子の一つ一つがマクロブロックを示してい
る。図６ＡはＭＰＥＧ２の復号化装置４より出力された
画像、なわち、解像度変換前の画像である。図６Ｂは図
６Ａの画像を解像度・フレームレート変換装置５によ
り、水平方向・垂直方向の解像度とも１／２に変換され
た画像である。たとえば、変換前の図６Ａの左上の網掛
けされた１６×１６マクロブロックは、変換後の図６Ｂ
における左上の８×８ブロックになる。すなわち、図６
Ａに示した４つの網掛けした１６×１６マクロブロック
が、解像度変換された後、それぞれ図６Ｂに示した４つ
の網掛けした８×８ブロックになり、それらによって１
つの１６×１６マクロブロックが構成される。解像度変
換前と後の動きベクトル情報の相関が大きいため、変換
後の８×８ブロックの動きベクトル情報は、変換前の１
６×１６マクロブロックの動きベクトル情報より求める
ことができる。さらに、４つの８×８の動きベクトル情
報から１つの１６×１６の動きベクトル情報を求め、Ｍ
ＰＥＧ４の画像情報符号化装置７における処理に用いる
動きベクトル情報の４つの８×８の動きベクトルと１つ
１６×１６の動きベクトル情報が生成される。
【００１８】図７に、図２における動きベクトル変換装
置６の詳細な回路構成を示し、以下、これについて説明
する。すなわち、８はＭＰＥＧ２の１６×１６の動きベ
クトル→ＭＰＥＧ４の８×８の動きベクトル変換装置、
９は画像サイズ調整フラグによる動きベクトルへの調整
器、１０はＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置、１１はＭＰ
ＥＧ２のイントラマクロブロックに対する動きベクトル
補正器である。
置６の詳細な回路構成を示し、以下、これについて説明
する。すなわち、８はＭＰＥＧ２の１６×１６の動きベ
クトル→ＭＰＥＧ４の８×８の動きベクトル変換装置、
９は画像サイズ調整フラグによる動きベクトルへの調整
器、１０はＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置、１１はＭＰ
ＥＧ２のイントラマクロブロックに対する動きベクトル
補正器である。
【００１９】入力されたＭＰＥＧ２の画像圧縮情報を示
すビットストリーム中の動きベクトル、画像サイズなど
のパラメータは、ＭＰＥＧ２の１６×１６の動きベクト
ル→ＭＰＥＧ４の８×８の動きベクトル変換器８によ
り、補正前の８×８の動きベクトルが作成される。
すビットストリーム中の動きベクトル、画像サイズなど
のパラメータは、ＭＰＥＧ２の１６×１６の動きベクト
ル→ＭＰＥＧ４の８×８の動きベクトル変換器８によ
り、補正前の８×８の動きベクトルが作成される。
【００２０】図８に、図７におけるＭＰＥＧ２の１６×
１６の動きベクトル→ＭＰＥＧ４の８×８の動きベクト
ル変換装置８の動作原理のフローチャートを示す。飛び
越し走査のＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいては、一般的にフレーム構造が用いられる
ため、以下ではフレーム構造の場合への処理のみの変換
方法を説明する。
１６の動きベクトル→ＭＰＥＧ４の８×８の動きベクト
ル変換装置８の動作原理のフローチャートを示す。飛び
越し走査のＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいては、一般的にフレーム構造が用いられる
ため、以下ではフレーム構造の場合への処理のみの変換
方法を説明する。
【００２１】ステップＳＴ−１では、マクロブロック
が、イントラマクロブロック、スキップマクロブロック
及びインターマクロブロックのいずれであらかの判定を
行う。そのマクロブロックがイントラマクロブロックで
ある場合には、ステップＳＴ−２で、解像度変換後の８
×８ブロックが動きベクトル情報を持つことを想定す
る。その処理としては、まず８×８の動きベクトル情報
を０に設定し、さらに、図７の補正器１１による処理を
行うため、イントラモードフラグを設ける。すなわち、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてイントラマクロブロックである場合、イ
ントラモードフラグが立つ。
が、イントラマクロブロック、スキップマクロブロック
及びインターマクロブロックのいずれであらかの判定を
行う。そのマクロブロックがイントラマクロブロックで
ある場合には、ステップＳＴ−２で、解像度変換後の８
×８ブロックが動きベクトル情報を持つことを想定す
る。その処理としては、まず８×８の動きベクトル情報
を０に設定し、さらに、図７の補正器１１による処理を
行うため、イントラモードフラグを設ける。すなわち、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてイントラマクロブロックである場合、イ
ントラモードフラグが立つ。
【００２２】そのマクロブロックがスキップマクロブロ
ックである場合には、ステップＳＴ−３で、各ブロック
の動きベクトル情報を０に設定する。
ックである場合には、ステップＳＴ−３で、各ブロック
の動きベクトル情報を０に設定する。
【００２３】そのマクロブロックがインターマクロブロ
ックである場合には、ステップＳＴ−４で、フレーム予
測かフィールド予測かの判定を行う。画像がフレーム構
造、フレーム予測である場合は、ステップＳＴ−５で、
フレーム予測に適した動きベクトルへの変換を行う。そ
の場合の動きベクトル変換の概念図を図９に示す。図３
で説明したように、変換後の動きベクトル情報の水平成
分は変換前の動きベクトル情報の水平成分と画像の水平
方向の解像度変換比から求められる。垂直成分は変換前
の動きベクトル情報の垂直成分と画像の垂直方向の解像
度変換比から求められる。すなわち、横方向の解像度を
１／２に変換した際、変換後の動きベクトル情報の水平
成分も変換前の１／２になる。縦方向の解像度を１／２
に変換した際、変換後の動きベクトル情報の垂直成分も
変換前の１／２になる。例えば、図９に示した動きベク
トル情報は、図９Ａの変換前の（８，１２）から図９Ｂ
の変換後の（４，６）になる。尚、この場合は、整数画
素の中間値（半画素）の間隔を１としている。図９Ａの
解像度変換前では、黒丸は整数画素の位置を示し、四角
は半画素の位置を示している。解像度変換後の半画素は
白丸で示す。図からわかるように、変換前の整数画素の
位置に示している動きベクトル情報は、変換後の整数画
素若しくは半画素の位置に示す。変換前の半画素の位置
に示している動きベクトル情報は解像度変換後は参照す
る画素がなくなる。そこで、変換後の動きベクトル情報
も予測画像の半画素の位置を示すようにする。それは本
来、復号された画像信号には、量子化による歪みが含ま
れているため、そのまま予測画像として使用すると予測
効率が低下し、画質劣化を引き起こす場合がある。これ
を低減するために、低域通過フィルタに相当する参照画
面での各画素間を１：１で直線補間した半画素精度が選
択されることもあり、これにより、画質劣化を避けるこ
とができる。したがって、ＭＰＥＧ４の画像情報符号化
装置７における処理においても、予測効率を向上し、画
質劣化を防ぐために、ＭＰＥＧ４で動きベクトル情報が
半画素の位置に示している場合、ＭＰＥＧ４の画像圧縮
情報を示すビットストリームへ変換した際も半画素の位
置に示すように変換する。変換前と変換後の動きベクト
ル情報の対応関係を、図１０の表図に示す。
ックである場合には、ステップＳＴ−４で、フレーム予
測かフィールド予測かの判定を行う。画像がフレーム構
造、フレーム予測である場合は、ステップＳＴ−５で、
フレーム予測に適した動きベクトルへの変換を行う。そ
の場合の動きベクトル変換の概念図を図９に示す。図３
で説明したように、変換後の動きベクトル情報の水平成
分は変換前の動きベクトル情報の水平成分と画像の水平
方向の解像度変換比から求められる。垂直成分は変換前
の動きベクトル情報の垂直成分と画像の垂直方向の解像
度変換比から求められる。すなわち、横方向の解像度を
１／２に変換した際、変換後の動きベクトル情報の水平
成分も変換前の１／２になる。縦方向の解像度を１／２
に変換した際、変換後の動きベクトル情報の垂直成分も
変換前の１／２になる。例えば、図９に示した動きベク
トル情報は、図９Ａの変換前の（８，１２）から図９Ｂ
の変換後の（４，６）になる。尚、この場合は、整数画
素の中間値（半画素）の間隔を１としている。図９Ａの
解像度変換前では、黒丸は整数画素の位置を示し、四角
は半画素の位置を示している。解像度変換後の半画素は
白丸で示す。図からわかるように、変換前の整数画素の
位置に示している動きベクトル情報は、変換後の整数画
素若しくは半画素の位置に示す。変換前の半画素の位置
に示している動きベクトル情報は解像度変換後は参照す
る画素がなくなる。そこで、変換後の動きベクトル情報
も予測画像の半画素の位置を示すようにする。それは本
来、復号された画像信号には、量子化による歪みが含ま
れているため、そのまま予測画像として使用すると予測
効率が低下し、画質劣化を引き起こす場合がある。これ
を低減するために、低域通過フィルタに相当する参照画
面での各画素間を１：１で直線補間した半画素精度が選
択されることもあり、これにより、画質劣化を避けるこ
とができる。したがって、ＭＰＥＧ４の画像情報符号化
装置７における処理においても、予測効率を向上し、画
質劣化を防ぐために、ＭＰＥＧ４で動きベクトル情報が
半画素の位置に示している場合、ＭＰＥＧ４の画像圧縮
情報を示すビットストリームへ変換した際も半画素の位
置に示すように変換する。変換前と変換後の動きベクト
ル情報の対応関係を、図１０の表図に示す。
【００２４】次に、ステップＳＴ−４の判定で、画像が
フレーム構造でフィールド予測である場合は、ステップ
ＳＴ−６に移行して、第一フィールド予測であるか、第
二フィールド予測であるかの判定を行う。まず、第一フ
ィールド予測であるときは、ステップＳＴ−７に移行し
て、フィールドの第一フィールド予測に適した動きベク
トルへの変換を行う。図１１にその動きベクトル変換の
概念図を示す。動きベクトル情報の水平成分は、図１０
と同様な処理が行われる。垂直方向は、第一フィールド
を抽出することにより、解像度を１／２に変換すること
を可能とする。また、予測も第一フィールド予測を行っ
ているため、変換前の動きベクトル情報は、そのまま変
換後の動きベクトル情報になる。
フレーム構造でフィールド予測である場合は、ステップ
ＳＴ−６に移行して、第一フィールド予測であるか、第
二フィールド予測であるかの判定を行う。まず、第一フ
ィールド予測であるときは、ステップＳＴ−７に移行し
て、フィールドの第一フィールド予測に適した動きベク
トルへの変換を行う。図１１にその動きベクトル変換の
概念図を示す。動きベクトル情報の水平成分は、図１０
と同様な処理が行われる。垂直方向は、第一フィールド
を抽出することにより、解像度を１／２に変換すること
を可能とする。また、予測も第一フィールド予測を行っ
ているため、変換前の動きベクトル情報は、そのまま変
換後の動きベクトル情報になる。
【００２５】ステップＳＴ−６の判定で、第二フィール
ド予測の場合は、ステップＳＴ−８に移行して、フィー
ルド予測の第二フィールド予測に適した動きベクトルへ
の変換を行う。その第二フィールド予測である場合の動
きベクトル変換の概念図を図１２及び図１３に示す。解
像度変換した際、第一フィールドのみが抽出されるた
め、変換後は第一フィールドの画素値を参照画像として
用いる。そのため、ＭＰＥＧ２で予測画像として用いた
第二フィールドの画素値を解像度変換後の第一フィール
ド予測に変換するように、動きベクトル情報の時空間補
正を行う。図１２は、第二フィールド予測から近似的に
第一フィールド予測に変換するための空間的な補正を行
う手法を示した図である。すなわち、動きベクトル情報
の垂直成分に１を加える。図からわかるように、第二フ
ィールド予測で求めた動きベクトル情報の垂直成分に１
を加えると、１行が繰り上げられることによって、第二
フィールドが第一フィールドと同様の位相に補正され、
空間上で、第一フィールド予測で求めた動きベクトル情
報のようになる。次に示す数１の式は空間補正により、
第一フィールドと同様な空間位置にある第二フィール
ド、すなわち近似第一フィールドを予測とした時、動き
ベクトルＭＶtop の垂直成分を表している。
ド予測の場合は、ステップＳＴ−８に移行して、フィー
ルド予測の第二フィールド予測に適した動きベクトルへ
の変換を行う。その第二フィールド予測である場合の動
きベクトル変換の概念図を図１２及び図１３に示す。解
像度変換した際、第一フィールドのみが抽出されるた
め、変換後は第一フィールドの画素値を参照画像として
用いる。そのため、ＭＰＥＧ２で予測画像として用いた
第二フィールドの画素値を解像度変換後の第一フィール
ド予測に変換するように、動きベクトル情報の時空間補
正を行う。図１２は、第二フィールド予測から近似的に
第一フィールド予測に変換するための空間的な補正を行
う手法を示した図である。すなわち、動きベクトル情報
の垂直成分に１を加える。図からわかるように、第二フ
ィールド予測で求めた動きベクトル情報の垂直成分に１
を加えると、１行が繰り上げられることによって、第二
フィールドが第一フィールドと同様の位相に補正され、
空間上で、第一フィールド予測で求めた動きベクトル情
報のようになる。次に示す数１の式は空間補正により、
第一フィールドと同様な空間位置にある第二フィール
ド、すなわち近似第一フィールドを予測とした時、動き
ベクトルＭＶtop の垂直成分を表している。
【００２６】
【数１】垂直成分：近似ＭＶtop ＝ＭＶbottom＋１
【００２７】また、飛び越し走査のＭＰＥＧ２の画像圧
縮情報には第一フィールドと第二フィールドとで時間ず
れがある。そのため、第二フィールドから近似された第
一フィールドと実際の第一フィールドとの時間ずれの補
正を行う。図１３は各フィールドの時間的位置関係を示
している。ここで、第一フィールドと第二フィールドの
間隔を１とし、ａをＩピクチャの第二フィールドとＰピ
クチャの第一フィールドの間隔とすると、ａは１，３，
５，７，……のような奇数になる。尚、ａが１の場合
は、画像の構成がＩＰＰＰ…の場合である。時間補正し
た動きベクトルＭＶ′を、数２の式に示す。
縮情報には第一フィールドと第二フィールドとで時間ず
れがある。そのため、第二フィールドから近似された第
一フィールドと実際の第一フィールドとの時間ずれの補
正を行う。図１３は各フィールドの時間的位置関係を示
している。ここで、第一フィールドと第二フィールドの
間隔を１とし、ａをＩピクチャの第二フィールドとＰピ
クチャの第一フィールドの間隔とすると、ａは１，３，
５，７，……のような奇数になる。尚、ａが１の場合
は、画像の構成がＩＰＰＰ…の場合である。時間補正し
た動きベクトルＭＶ′を、数２の式に示す。
【００２８】
【数２】 垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・近似ＭＶtop
【００２９】数１の式を数２の式に代入すると、変換後
の動きベクトル情報の垂直成分が数３の式のようにな
る。
の動きベクトル情報の垂直成分が数３の式のようにな
る。
【００３０】
【数３】垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・（Ｍ
Ｖbottom＋１）
Ｖbottom＋１）
【００３１】尚、変換後の動きベクトル情報の水平成分
は、変換前の動きベクトル情報に、（ａ＋１）／ａを乗
じ、時間的な補正を行った後、図１０に示した動作原理
に基づいて求められる。
は、変換前の動きベクトル情報に、（ａ＋１）／ａを乗
じ、時間的な補正を行った後、図１０に示した動作原理
に基づいて求められる。
【００３２】動きベクトル情報の垂直成分に対して、必
要に応じて、時間的補正を行った後、空間的な補正を行
ってもよい。その場合、動きベクトルＭＶ′の垂直成分
を４の式に示す。尚、水平成分は空間・時間補正（空間
補正を行ってから時間補正を行う）と時間・空間補正
（時間補正が行ってから空間補正を行う）は同様な値と
なる。
要に応じて、時間的補正を行った後、空間的な補正を行
ってもよい。その場合、動きベクトルＭＶ′の垂直成分
を４の式に示す。尚、水平成分は空間・時間補正（空間
補正を行ってから時間補正を行う）と時間・空間補正
（時間補正が行ってから空間補正を行う）は同様な値と
なる。
【００３３】
【数４】垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・ＭＶ
bottom＋１
bottom＋１
【００３４】数３の式と数４の式との差、すなわち、空
間・時間補正を行った場合と、時間・空間補正を行った
場合の動きベクトル情報の垂直成分の差は１／ａにな
る。従って、ａの値によって、その差による影響が異な
るので、ａが１の場合と、１より大きい、すなわち３，
５，７，……の２つの場合における補正方法を説明す
る。
間・時間補正を行った場合と、時間・空間補正を行った
場合の動きベクトル情報の垂直成分の差は１／ａにな
る。従って、ａの値によって、その差による影響が異な
るので、ａが１の場合と、１より大きい、すなわち３，
５，７，……の２つの場合における補正方法を説明す
る。
【００３５】まず、ａ＝１の場合について、数３の式の
ａに１を代入すると、動きベクトル情報の垂直成分は数
５の式になる。
ａに１を代入すると、動きベクトル情報の垂直成分は数
５の式になる。
【００３６】
【数５】垂直成分：ＭＶ′＝２×（ＭＶbottom＋１）
【００３７】数４の式のａに１を代入すると、動きベク
トル情報の垂直成分は数６の式になる。
トル情報の垂直成分は数６の式になる。
【００３８】
【数６】 垂直成分：ＭＶ′＝２×（ＭＶbottom＋１）−１
【００３９】その結果、変換前の動きベクトルＭＶ
bottomに０，１，２，……を代入すると、数５の式によ
る値は２，４，６，……のような偶数になる。すなわ
ち、空間・時間補正を行うと、変換前の動きベクトル情
報は、整数画素の位相を示す場合も、半画素の位相を示
す場合も、変換後は全て整数画素の位相を示すことにな
る。また、数６の式による値は、１，３，５，……のよ
うな奇数になる。すなわち、時間・空間補正を行うと、
変換前の動きベクトル情報は、整数画素の位相を示す場
合も、半画素の位相に存在する場合も、変換後は全て半
画素の位相を示すことになる。したがって、変換前整数
画素の位相を示す動きベクトル情報は、変換後も整数画
素の位相を示すように空間・時間補正を行う。また、変
換前半画素の位置に示している動きベクトル情報は、変
換後も半画素の位置に示すように時間・空間補正を行
う。
bottomに０，１，２，……を代入すると、数５の式によ
る値は２，４，６，……のような偶数になる。すなわ
ち、空間・時間補正を行うと、変換前の動きベクトル情
報は、整数画素の位相を示す場合も、半画素の位相を示
す場合も、変換後は全て整数画素の位相を示すことにな
る。また、数６の式による値は、１，３，５，……のよ
うな奇数になる。すなわち、時間・空間補正を行うと、
変換前の動きベクトル情報は、整数画素の位相を示す場
合も、半画素の位相に存在する場合も、変換後は全て半
画素の位相を示すことになる。したがって、変換前整数
画素の位相を示す動きベクトル情報は、変換後も整数画
素の位相を示すように空間・時間補正を行う。また、変
換前半画素の位置に示している動きベクトル情報は、変
換後も半画素の位置に示すように時間・空間補正を行
う。
【００４０】以上の動きベクトル変換処理が終了した
後、補正前のＭＰＥＧ４の８×８の動きベクトル情報が
出力される。出力された８×８の動きベクトル情報は、
画像サイズ調整フラグによる動きベクトルへの調整器９
（図７）に伝送され、外部より入力された画像サイズ調
整フラグにより、画像サイズに適した動きベクトル情報
を出力する。
後、補正前のＭＰＥＧ４の８×８の動きベクトル情報が
出力される。出力された８×８の動きベクトル情報は、
画像サイズ調整フラグによる動きベクトルへの調整器９
（図７）に伝送され、外部より入力された画像サイズ調
整フラグにより、画像サイズに適した動きベクトル情報
を出力する。
【００４１】画像サイズ調整フラグによる動きベクトル
調整器９におけるフローチャートを図１４に示し、以下
これについて説明する。ステップＳＴ−１１で、入力画
像サイズｍ画素× n画素に対して、ｍ／２，ｎ／２が共
に１６の倍数であるか否かの判定を行い、ＹＥＳあれ
ば、図２の動きベクトル変換装置６から出力されたＭＰ
ＥＧ４の８×８の動きベクトル情報を、処理することな
くそのまま出力する。ステップＳＴ−１１の判定でＮ
Ｏ、すなわち、ｍ／２，ｎ／２のいずれかが１６の倍数
でない場合は、ステップＳＴ−１２に移行して、外部か
ら入力された画像サイズ調整フラグが作動し、画素除去
か否かの判定を行い、ＹＥＳ、すなわち、画素除去の場
合は、除去された８画素の８×８の動きベクトル情報を
出力しないで、他の８×８の動きベクトル情報を出力す
る。ステップＳＴ−１２の判定で、ＮＯのときは、ステ
ップＳＴ−１３に移行して、画素補填か否かの判定を行
い、ＹＥＳ、すなわち、画素補填の場合は、補填された
８画素の８×８の動きベクトル情報を０に設定し、他の
入力された８×８の動きベクトル情報と合わせて出力さ
れる。
調整器９におけるフローチャートを図１４に示し、以下
これについて説明する。ステップＳＴ−１１で、入力画
像サイズｍ画素× n画素に対して、ｍ／２，ｎ／２が共
に１６の倍数であるか否かの判定を行い、ＹＥＳあれ
ば、図２の動きベクトル変換装置６から出力されたＭＰ
ＥＧ４の８×８の動きベクトル情報を、処理することな
くそのまま出力する。ステップＳＴ−１１の判定でＮ
Ｏ、すなわち、ｍ／２，ｎ／２のいずれかが１６の倍数
でない場合は、ステップＳＴ−１２に移行して、外部か
ら入力された画像サイズ調整フラグが作動し、画素除去
か否かの判定を行い、ＹＥＳ、すなわち、画素除去の場
合は、除去された８画素の８×８の動きベクトル情報を
出力しないで、他の８×８の動きベクトル情報を出力す
る。ステップＳＴ−１２の判定で、ＮＯのときは、ステ
ップＳＴ−１３に移行して、画素補填か否かの判定を行
い、ＹＥＳ、すなわち、画素補填の場合は、補填された
８画素の８×８の動きベクトル情報を０に設定し、他の
入力された８×８の動きベクトル情報と合わせて出力さ
れる。
【００４２】再び図７に戻って説明するに、画像サイズ
調整フラグによる動きベクトルへの調整器９より出力さ
れた画像サイズに適した８×８の動きベクトル情報は、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０によって変換され
る。以下に、８×８の動きベクトル情報が、ＭＰＥＧ４
の８×８の動きベクトル→ＭＰＥＧ４の１６×１６の動
きベクトル変換装置１０によって変換される動作につい
て述べる。
調整フラグによる動きベクトルへの調整器９より出力さ
れた画像サイズに適した８×８の動きベクトル情報は、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０によって変換され
る。以下に、８×８の動きベクトル情報が、ＭＰＥＧ４
の８×８の動きベクトル→ＭＰＥＧ４の１６×１６の動
きベクトル変換装置１０によって変換される動作につい
て述べる。
【００４３】第一の方法として、マクロブロックを構成
する４つのブロックの中、イントラでないマクロブロッ
クから変換されたブロックの動きベクトルの和をインタ
ーマクロブロックから変換されたブロックの数で割った
平均を１６×１６の動きベクトル情報として出力する。
する４つのブロックの中、イントラでないマクロブロッ
クから変換されたブロックの動きベクトルの和をインタ
ーマクロブロックから変換されたブロックの数で割った
平均を１６×１６の動きベクトル情報として出力する。
【００４４】第二の方法として、ＭＰＥＧ４の８×８の
動きベクトル→ＭＰＥＧ４の１６×１６の動きベクトル
変換装置１０においては、ＭＰＥＧ２の１６×１６の動
きベクトル→ＭＰＥＧ４の８×８の動きベクトル変換装
置８において生成された、そのマクロブロックに対する
ＭＰＥＧ４の８×８の動きベクトル情報のうち、最も符
号化効率が高いと考えられるマクロブロックより生成さ
れたものを選択し、ＭＰＥＧ４の１６×１６の動きベク
トル情報として出力する。
動きベクトル→ＭＰＥＧ４の１６×１６の動きベクトル
変換装置１０においては、ＭＰＥＧ２の１６×１６の動
きベクトル→ＭＰＥＧ４の８×８の動きベクトル変換装
置８において生成された、そのマクロブロックに対する
ＭＰＥＧ４の８×８の動きベクトル情報のうち、最も符
号化効率が高いと考えられるマクロブロックより生成さ
れたものを選択し、ＭＰＥＧ４の１６×１６の動きベク
トル情報として出力する。
【００４５】符号化効率の判定は、画像情報変換装置の
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるマクロブロック毎の情報を基に行う。第
一の方法は、４つのマクロブロックのうち、最も非零の
ＤＣＴ係数の少ないマクロブロックを符号化効率が高い
とする方法である。第二の方法は、４つのマクロブロッ
クのうち、輝度成分のＤＣＴ係数に割り当てられたビッ
ト数の最も少ないマクロブロックを符号化効率が高いと
する方法である。第三の方法は、４つのマクロブロック
のうち、ＤＣＴ係数に割り当てられたビット数の最も少
ないマクロブロックを符号化効率が高いとする方法であ
る。第四の方法は、４つのマクロブロックのうち、動き
ベクトル情報を含めた、マクロブロックに割り当てられ
た全ビット数の最も少ないマクロブロックを符号化効率
が高いとする方法である。第五の方法は、４つのマクロ
ブロックのうち、割り当てられた量子化スケールが最も
小さいマクロブロックを符号化効率が高いとする方法で
ある。第六の方法は、４つのマクロブロックのうち、コ
ンプレクシティの最も低いマクロブロックを符号化効率
が高いとする方法である。各マクロブロックに割り当て
られたコンプレクシティＸは、そのマクロブロックに割
り当てられた量子化スケールＱ、及びビット数Ｂを用い
て以下のように計算される。
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるマクロブロック毎の情報を基に行う。第
一の方法は、４つのマクロブロックのうち、最も非零の
ＤＣＴ係数の少ないマクロブロックを符号化効率が高い
とする方法である。第二の方法は、４つのマクロブロッ
クのうち、輝度成分のＤＣＴ係数に割り当てられたビッ
ト数の最も少ないマクロブロックを符号化効率が高いと
する方法である。第三の方法は、４つのマクロブロック
のうち、ＤＣＴ係数に割り当てられたビット数の最も少
ないマクロブロックを符号化効率が高いとする方法であ
る。第四の方法は、４つのマクロブロックのうち、動き
ベクトル情報を含めた、マクロブロックに割り当てられ
た全ビット数の最も少ないマクロブロックを符号化効率
が高いとする方法である。第五の方法は、４つのマクロ
ブロックのうち、割り当てられた量子化スケールが最も
小さいマクロブロックを符号化効率が高いとする方法で
ある。第六の方法は、４つのマクロブロックのうち、コ
ンプレクシティの最も低いマクロブロックを符号化効率
が高いとする方法である。各マクロブロックに割り当て
られたコンプレクシティＸは、そのマクロブロックに割
り当てられた量子化スケールＱ、及びビット数Ｂを用い
て以下のように計算される。
【００４６】
【数７】Ｘ＝Ｑ・Ｂ
【００４７】ここで、Ｂは、マクロブロック全体に割り
当てられたビット数でも良いし、ＤＣＴ係数に割り当て
られたビット数でも良いし、輝度成分に割り当てられた
ＤＣＴ係数に割り当てられたビット数でも良い。
当てられたビット数でも良いし、ＤＣＴ係数に割り当て
られたビット数でも良いし、輝度成分に割り当てられた
ＤＣＴ係数に割り当てられたビット数でも良い。
【００４８】図７で、ＭＰＥＧ４の８×８の動きベクト
ル→ＭＰＥＧ４の１６×１６の動きベクトル変換装置１
０における第三の方法として、ＭＰＥＧ２の１６×１６
の動きベクトル→ＭＰＥＧ４の８×８の動きベクトル変
換装置８において生成された、そのマクロブロックに対
するＭＰＥＧ４の８×８の動きベクトル情報のうち最も
重み付けが高いと考えられるマクロブロックより生成さ
れたものを２回重複して数え、合計５つの８×８の動き
ベクトル情報のうち、中間値の長さを持つ動きベクトル
情報の最も符号化効率が高いものを選択し、ＭＰＥＧ４
の１６×１６の動きベクトル情報として出力する。ここ
で動きベクトルの長さの比較は水平方向、垂直方向に対
して、それぞれの長さの、二乗根の和を用い、平方根を
もとめる処理は省略する。
ル→ＭＰＥＧ４の１６×１６の動きベクトル変換装置１
０における第三の方法として、ＭＰＥＧ２の１６×１６
の動きベクトル→ＭＰＥＧ４の８×８の動きベクトル変
換装置８において生成された、そのマクロブロックに対
するＭＰＥＧ４の８×８の動きベクトル情報のうち最も
重み付けが高いと考えられるマクロブロックより生成さ
れたものを２回重複して数え、合計５つの８×８の動き
ベクトル情報のうち、中間値の長さを持つ動きベクトル
情報の最も符号化効率が高いものを選択し、ＭＰＥＧ４
の１６×１６の動きベクトル情報として出力する。ここ
で動きベクトルの長さの比較は水平方向、垂直方向に対
して、それぞれの長さの、二乗根の和を用い、平方根を
もとめる処理は省略する。
【００４９】重み付けの判定は、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームにおけるマクロ
ブロック毎の情報を基に行う。すなわち、第一の方法
は、４つのマクロブロックのうち、最も非零ＤＣＴの係
数の少ないマクロブロックを重み付けが高いとする方法
である。第二の方法は、４つのマクロブロックのうち、
輝度成分のＤＣＴ係数に割り当てられたビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第三の方法は、４つのマクロブロックのうち、ＤＣ
Ｔ係数に割り当てられたビット数の最も少ないマクロブ
ロックを重み付けが高いとする方法である。第四の方法
は、４つのマクロブロックのうち、動きベクトルを含め
た、マクロブロックに割り当てられた全ビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第五の方法は、４つのマクロブロックのうち、割り
当てられた量子化スケールが最も小さいマクロブロック
を重み付けが高いとする方法である。第六の方法は、４
つのマクロブロックのうち、コンプレクシティの最も低
いマクロブロックを重み付けが高いとする方法である。
各マクロブロックに割り当てられたコンプレクシティＸ
は、そのマクロブロックに割り当てられた量子化スケー
ルＱ、及びビット数Ｂを用い、数７の式に基づいて算出
する。Ｂは、マクロブロック全体に割り当てられたビッ
ト数でも良いし、ＤＣＴ係数に割り当てられたビット数
でも良いし、輝度成分に割り当てられたＤＣＴ係数に割
り当てられたビット数でも良い。
の画像圧縮情報を示すビットストリームにおけるマクロ
ブロック毎の情報を基に行う。すなわち、第一の方法
は、４つのマクロブロックのうち、最も非零ＤＣＴの係
数の少ないマクロブロックを重み付けが高いとする方法
である。第二の方法は、４つのマクロブロックのうち、
輝度成分のＤＣＴ係数に割り当てられたビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第三の方法は、４つのマクロブロックのうち、ＤＣ
Ｔ係数に割り当てられたビット数の最も少ないマクロブ
ロックを重み付けが高いとする方法である。第四の方法
は、４つのマクロブロックのうち、動きベクトルを含め
た、マクロブロックに割り当てられた全ビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第五の方法は、４つのマクロブロックのうち、割り
当てられた量子化スケールが最も小さいマクロブロック
を重み付けが高いとする方法である。第六の方法は、４
つのマクロブロックのうち、コンプレクシティの最も低
いマクロブロックを重み付けが高いとする方法である。
各マクロブロックに割り当てられたコンプレクシティＸ
は、そのマクロブロックに割り当てられた量子化スケー
ルＱ、及びビット数Ｂを用い、数７の式に基づいて算出
する。Ｂは、マクロブロック全体に割り当てられたビッ
ト数でも良いし、ＤＣＴ係数に割り当てられたビット数
でも良いし、輝度成分に割り当てられたＤＣＴ係数に割
り当てられたビット数でも良い。
【００５０】一方、画像サイズ調整フラグによる動きベ
クトルへの調整器９より出力された、画像サイズに適し
た８×８の動きベクトル情報は、ＭＰＥＧ２のイントラ
マクロブロックに対する動きベクトル補正器１１に入力
される。そこでＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてはイントラであったマクロブロック
から変換されたブロックの８×８の動きベクトル情報
は、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の
１６×１６の動きベクトル変換装置１０によって求めら
れた１６×１６の動きベクトル情報に置き換えられ、補
正される。補正後の８×８の動きベクトル情報と、ＭＰ
ＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６×１
６の動きベクトル変換装置１０で求めた１６×１６の動
きベクトル情報を合わせて、ＭＰＥＧ４の動きベクトル
情報として出力する。
クトルへの調整器９より出力された、画像サイズに適し
た８×８の動きベクトル情報は、ＭＰＥＧ２のイントラ
マクロブロックに対する動きベクトル補正器１１に入力
される。そこでＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてはイントラであったマクロブロック
から変換されたブロックの８×８の動きベクトル情報
は、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の
１６×１６の動きベクトル変換装置１０によって求めら
れた１６×１６の動きベクトル情報に置き換えられ、補
正される。補正後の８×８の動きベクトル情報と、ＭＰ
ＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６×１
６の動きベクトル変換装置１０で求めた１６×１６の動
きベクトル情報を合わせて、ＭＰＥＧ４の動きベクトル
情報として出力する。
【００５１】図１５は、図７における、ＭＰＥＧ２のイ
ントラマクロブロックに対する動きベクトル補正器１１
の動作説明ための図である。画像サイズに適した８×８
の動きベクトル情報がＭＰＥＧ２のイントラマクロブロ
ックに対する補正器１１に入力し、イントラモードフラ
グが立っている場合、すなわち、ＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてはイントラマクロ
ブロックである場合、スイッチＳＷの可動接点ｍが固定
接点ａ側に切換えられて、そのイントラマクロブロック
から変換された８×８ブロックの動きベクトル情報を、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０より求められた１６
×１６の動きベクトル情報に置き換えられる。若しく
は、そのイントラマクロブロックの周辺に存在するイン
ターマクロブロックの動きベクトル情報から変換された
動きベクトル情報に置き換えてもよい。更にまた、イン
トラマクロブロックに一番近いインターマクロブロック
の動きベクトル情報から変換された動きベクトル情報に
してもよい。尚、４つのブロックともイントラマクロブ
ロックから変換された場合は、４つとも動きベクトルが
０となり、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置１０によって
求められる１６×１６の動きベクトルも０となるため、
ＭＰＥＧ４の画像符号化に用いる動きベクトルは０とな
り、マクロブロックタイプがイントラモードとなる。ま
た、イントラモードフラグが立たない場合、すなわち、
ＭＰＥＧ２ではイントラマクロブロックがない場合、ス
イッチＳＷの可動接点ｍが固定接点ｂ側に切換えられ
て、入力された８×８の動きベクトル情報がそのまま出
力される。
ントラマクロブロックに対する動きベクトル補正器１１
の動作説明ための図である。画像サイズに適した８×８
の動きベクトル情報がＭＰＥＧ２のイントラマクロブロ
ックに対する補正器１１に入力し、イントラモードフラ
グが立っている場合、すなわち、ＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてはイントラマクロ
ブロックである場合、スイッチＳＷの可動接点ｍが固定
接点ａ側に切換えられて、そのイントラマクロブロック
から変換された８×８ブロックの動きベクトル情報を、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０より求められた１６
×１６の動きベクトル情報に置き換えられる。若しく
は、そのイントラマクロブロックの周辺に存在するイン
ターマクロブロックの動きベクトル情報から変換された
動きベクトル情報に置き換えてもよい。更にまた、イン
トラマクロブロックに一番近いインターマクロブロック
の動きベクトル情報から変換された動きベクトル情報に
してもよい。尚、４つのブロックともイントラマクロブ
ロックから変換された場合は、４つとも動きベクトルが
０となり、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置１０によって
求められる１６×１６の動きベクトルも０となるため、
ＭＰＥＧ４の画像符号化に用いる動きベクトルは０とな
り、マクロブロックタイプがイントラモードとなる。ま
た、イントラモードフラグが立たない場合、すなわち、
ＭＰＥＧ２ではイントラマクロブロックがない場合、ス
イッチＳＷの可動接点ｍが固定接点ｂ側に切換えられ
て、入力された８×８の動きベクトル情報がそのまま出
力される。
【００５２】次に生成された動きベクトル情報の再検索
を行う場合について説明する。インターマクロブロック
に対し、画像がフレーム構造、フレーム予測である場合
の動きベクトル変換の概念図は図９に示したとおりであ
る。図からわかるように、変換前整数画素の位相を示し
ている動きベクトル情報は、変換後整数画素若しくは半
画素の位相を示すが、変換前半画素の位相を示している
動きベクトル情報は解像度変換後参照する画素がなくな
る。このような場合、変換後の動きベクトル情報も予測
画像の最も近い整数画素位置を示すようにする。これ
は、後に動きベクトル補整において動きベクトル周辺画
素を再検索する際に、サーチウィンドウの中心画素値を
整数画素にする為である。まず、サーチウィンドウ内で
最も予測誤差が少ない整数画素の動きベクトル情報を求
め、次にその整数画素周辺の９半画素値を検索すること
により処理のステップを削減している。変換前と変換後
の動きベクトル情報の対応関係は図１０に示した通りで
ある。従来例の図９に示された半画素動きベクトル情報
を先に生成し、これを中心としてサーチを行うことも考
えられるが、処理量の増大を招く。
を行う場合について説明する。インターマクロブロック
に対し、画像がフレーム構造、フレーム予測である場合
の動きベクトル変換の概念図は図９に示したとおりであ
る。図からわかるように、変換前整数画素の位相を示し
ている動きベクトル情報は、変換後整数画素若しくは半
画素の位相を示すが、変換前半画素の位相を示している
動きベクトル情報は解像度変換後参照する画素がなくな
る。このような場合、変換後の動きベクトル情報も予測
画像の最も近い整数画素位置を示すようにする。これ
は、後に動きベクトル補整において動きベクトル周辺画
素を再検索する際に、サーチウィンドウの中心画素値を
整数画素にする為である。まず、サーチウィンドウ内で
最も予測誤差が少ない整数画素の動きベクトル情報を求
め、次にその整数画素周辺の９半画素値を検索すること
により処理のステップを削減している。変換前と変換後
の動きベクトル情報の対応関係は図１０に示した通りで
ある。従来例の図９に示された半画素動きベクトル情報
を先に生成し、これを中心としてサーチを行うことも考
えられるが、処理量の増大を招く。
【００５３】画像がフレーム構造でフィールド予測であ
る場合であるが、まず、第一フィールド予測である時に
ついて、動きベクトル変換の概念図は図１１に示した通
りである。すなわち、動きベクトル情報の水平成分は、
フレーム構造、フレーム予測である場合と同様な処理が
行われる。垂直方向は、第一フィールドを抽出すること
により、解像度を１／２に変換することを可能とする。
また、予測も第一フィールド予測を行っているため、変
換前の動きベクトル情報は、そのまま変換後の動きベク
トル情報になる。
る場合であるが、まず、第一フィールド予測である時に
ついて、動きベクトル変換の概念図は図１１に示した通
りである。すなわち、動きベクトル情報の水平成分は、
フレーム構造、フレーム予測である場合と同様な処理が
行われる。垂直方向は、第一フィールドを抽出すること
により、解像度を１／２に変換することを可能とする。
また、予測も第一フィールド予測を行っているため、変
換前の動きベクトル情報は、そのまま変換後の動きベク
トル情報になる。
【００５４】第二フィールド予測である場合の動きベク
トル変換の概念図は図１２に示した通りである。すなわ
ち、解像度変換した際、第一フィールドのみが抽出され
るため、変換後は第一フィールドの画素値を参照画像と
して用いる。フィールドのライン補整及び時間方向の動
きベクトル補正は従来例の図１２に示したのと同様な方
法により補整を行い、その後、水平方向の画素値は変換
後に整数画素を示すように、フレーム構造、フレーム予
測である場合と同様な処理が行われる。
トル変換の概念図は図１２に示した通りである。すなわ
ち、解像度変換した際、第一フィールドのみが抽出され
るため、変換後は第一フィールドの画素値を参照画像と
して用いる。フィールドのライン補整及び時間方向の動
きベクトル補正は従来例の図１２に示したのと同様な方
法により補整を行い、その後、水平方向の画素値は変換
後に整数画素を示すように、フレーム構造、フレーム予
測である場合と同様な処理が行われる。
【００５５】図１６に動きベクトル変換装置の構成を示
す。すなわち、１２はＭＰＥＧ２→ＭＰＥＧ４の８×８
ＭＶ変換装置、１３は動きベクトル整数画素検索装置、
１４は８×８ＭＶ→１６×１６ＭＶ合成装置、１５は動
きベクトル整数画素検索装置、１６は動きベクトル半画
素検索装置である。
す。すなわち、１２はＭＰＥＧ２→ＭＰＥＧ４の８×８
ＭＶ変換装置、１３は動きベクトル整数画素検索装置、
１４は８×８ＭＶ→１６×１６ＭＶ合成装置、１５は動
きベクトル整数画素検索装置、１６は動きベクトル半画
素検索装置である。
【００５６】まず、ＭＰＥＧ２→ＭＰＥＧ４の８×８Ｍ
Ｖ変換装置１２においては、動きベクトル情報の空間・
時間補整を行い８×８の動きベクトル情報を生成する。
次に、動きベクトル整数画素検索装置１３において、８
×８の動きベクトル情報の再検索処理を行う。例えば、
生成された８×８の動きベクトル情報の参照先を中心
に、検索サーチウィンドウを整数画素で縦横２画素ずつ
で検索を行う。これにより８×８の動きベクトル情報の
予測精度を向上させることが可能である。次に一つのマ
クロブロックを構成する４つの８×８の動きベクトル情
報それぞれに対して、再検索された予測誤差及び、再検
索処理を施した８×８の動きベクトル情報を８×８ＭＶ
→１６×１６ＭＶ合成装置１４へ入力する。
Ｖ変換装置１２においては、動きベクトル情報の空間・
時間補整を行い８×８の動きベクトル情報を生成する。
次に、動きベクトル整数画素検索装置１３において、８
×８の動きベクトル情報の再検索処理を行う。例えば、
生成された８×８の動きベクトル情報の参照先を中心
に、検索サーチウィンドウを整数画素で縦横２画素ずつ
で検索を行う。これにより８×８の動きベクトル情報の
予測精度を向上させることが可能である。次に一つのマ
クロブロックを構成する４つの８×８の動きベクトル情
報それぞれに対して、再検索された予測誤差及び、再検
索処理を施した８×８の動きベクトル情報を８×８ＭＶ
→１６×１６ＭＶ合成装置１４へ入力する。
【００５７】８×８の動きベクトル情報を８×８ＭＶ→
１６×１６ＭＶ合成装置１４では、４つの８×８の動き
ベクトル情報に対して、再検索時にもとめられた予測残
差が最も小さい動きベクトル情報を抽出し、１６×１６
の動きベクトル情報に割り当てる。次に生成された１６
×１６の動きベクトル情報に対して、動きベクトル整数
画素検索装置１５において再検索処理を行い、１６×１
６の動きベクトル情報の予測精度を向上させる。これに
よりＭＰＥＧ４の８×８の動きベクトル情報及び、１６
×１６の動きベクトル情報を生成し、出力する。出力さ
れた８×８の動きベクトル情報及び１６×１６の動きベ
クトル情報は、それぞれ半画素検索装置１６に入力さ
れ、半画素精度で８×８の動きベクトル情報及び１６×
１６の動きベクトル情報が出力される。
１６×１６ＭＶ合成装置１４では、４つの８×８の動き
ベクトル情報に対して、再検索時にもとめられた予測残
差が最も小さい動きベクトル情報を抽出し、１６×１６
の動きベクトル情報に割り当てる。次に生成された１６
×１６の動きベクトル情報に対して、動きベクトル整数
画素検索装置１５において再検索処理を行い、１６×１
６の動きベクトル情報の予測精度を向上させる。これに
よりＭＰＥＧ４の８×８の動きベクトル情報及び、１６
×１６の動きベクトル情報を生成し、出力する。出力さ
れた８×８の動きベクトル情報及び１６×１６の動きベ
クトル情報は、それぞれ半画素検索装置１６に入力さ
れ、半画素精度で８×８の動きベクトル情報及び１６×
１６の動きベクトル情報が出力される。
【００５８】動きベクトル整数画素検索装置１３及び１
５では指定されたサーチウィンドウ内で最も予測画素値
が少ない整数画素動きベクトルを選択し、次に半画素検
索装置１６において、整数画素値で選択された最小予測
誤差の動きベクトルの周辺９半画素値を検索し、最も予
測誤差が少ない最適な動きベクトル値を出力する。
５では指定されたサーチウィンドウ内で最も予測画素値
が少ない整数画素動きベクトルを選択し、次に半画素検
索装置１６において、整数画素値で選択された最小予測
誤差の動きベクトルの周辺９半画素値を検索し、最も予
測誤差が少ない最適な動きベクトル値を出力する。
【００５９】ところで、図２に示した画像情報変換装置
においては、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームのＢピクチャのみを破棄するため、
例えば入力となるＭＰＥＧ２の画像圧縮情報が３０Ｈｚ
である場合、出力となるＭＰＥＧ４の画像圧縮情報を示
すビットストリームは１０Ｈｚとなる。しかしながら、
絵柄、及び出力となるＭＰＥＧ４の画像圧縮情報を示す
ビットストリームの符号量（ビットレート）によっては
図２に示した画像情報変換装置を用いても良好な画質が
得られない場合がある。このような場合、Ｂピクチャの
みならず、Ｉ若しくはＰピクチャも一枚おきに破棄する
ことで、５ＨｚのＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームへ変換することが考えられる。
においては、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームのＢピクチャのみを破棄するため、
例えば入力となるＭＰＥＧ２の画像圧縮情報が３０Ｈｚ
である場合、出力となるＭＰＥＧ４の画像圧縮情報を示
すビットストリームは１０Ｈｚとなる。しかしながら、
絵柄、及び出力となるＭＰＥＧ４の画像圧縮情報を示す
ビットストリームの符号量（ビットレート）によっては
図２に示した画像情報変換装置を用いても良好な画質が
得られない場合がある。このような場合、Ｂピクチャの
みならず、Ｉ若しくはＰピクチャも一枚おきに破棄する
ことで、５ＨｚのＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームへ変換することが考えられる。
【００６０】図１７に、かかる変換を行う際の、入力と
なるＭＰＥＧ２の画像圧縮情報を示すビットストリーム
におけるピクチャ・コーディング・タイプ（ｐｉｃｔｕ
ｒｅ−ｃｏｄｉｎｇ−ｔｙｐｅ）と、出力となるＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームにおけるブ
イオーピー・コーディング・タイプ｛ｖｏｐ（VideoObj
ect Plane) −ｃｏｄｉｎｇ−ｔｙｐｅ｝の対応の一例
を示す。ＧＯＰ（画像グルーブ）構造がｎ＝１５；ｍ＝
３である３０ＨｚのＭＰＥＧ２の画像圧縮情報を示すビ
ットストリームを、ＧＯＶ（Group of VOP,VOP:Video O
bject Plane)構造がｎ＝５；ｍ＝１である５ＨｚのＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームに変換す
る場合、入力となるＭＰＥＧ２の画像圧縮情報を示すビ
ットストリーム中の、Ｉピクチャ及びＰピクチャを一枚
おきに抽出し、ＭＰＥＧ４の画像圧縮情報を示すビット
ストリームに変換する。図１７の例では、入力となるＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームの２Ｇ
ＯＰが、ＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームの１ＧＯＶと対応するため、Ｐピクチャを破棄する
場合とＩピクチャを破棄する場合が考えられる。ＭＰＥ
Ｇ２の動きベクトル情報からＭＰＥＧ４の動きベクトル
情報を求める方法として、動きベクトル情報を伸張する
方法及び動きベクトル情報を足し合わせる方法の２通り
が考えられるが、これらのうち、符号化効率の高い動き
ベクトル情報を適応的に選択し、ＭＰＥＧ４の動きベク
トル情報として出力し、ＭＰＥＧ４の画像符号化処理を
行う。
なるＭＰＥＧ２の画像圧縮情報を示すビットストリーム
におけるピクチャ・コーディング・タイプ（ｐｉｃｔｕ
ｒｅ−ｃｏｄｉｎｇ−ｔｙｐｅ）と、出力となるＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームにおけるブ
イオーピー・コーディング・タイプ｛ｖｏｐ（VideoObj
ect Plane) −ｃｏｄｉｎｇ−ｔｙｐｅ｝の対応の一例
を示す。ＧＯＰ（画像グルーブ）構造がｎ＝１５；ｍ＝
３である３０ＨｚのＭＰＥＧ２の画像圧縮情報を示すビ
ットストリームを、ＧＯＶ（Group of VOP,VOP:Video O
bject Plane)構造がｎ＝５；ｍ＝１である５ＨｚのＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームに変換す
る場合、入力となるＭＰＥＧ２の画像圧縮情報を示すビ
ットストリーム中の、Ｉピクチャ及びＰピクチャを一枚
おきに抽出し、ＭＰＥＧ４の画像圧縮情報を示すビット
ストリームに変換する。図１７の例では、入力となるＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームの２Ｇ
ＯＰが、ＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームの１ＧＯＶと対応するため、Ｐピクチャを破棄する
場合とＩピクチャを破棄する場合が考えられる。ＭＰＥ
Ｇ２の動きベクトル情報からＭＰＥＧ４の動きベクトル
情報を求める方法として、動きベクトル情報を伸張する
方法及び動きベクトル情報を足し合わせる方法の２通り
が考えられるが、これらのうち、符号化効率の高い動き
ベクトル情報を適応的に選択し、ＭＰＥＧ４の動きベク
トル情報として出力し、ＭＰＥＧ４の画像符号化処理を
行う。
【００６１】このような適応的な選択を行う動きベクト
ル変換装置を図１８に示し、以下これについて説明す
る。すなわち、１７はＭＶ及びＭＢ情報バッファ、１８
は足し合わせベクトル判定装置、１９は参照ＭＢアドレ
ス算出装置、２０は動きベクトル空間・時間補正装置、
２１はＭＶ再検索装置、２２は動きベクトル伸張 空間
・時間補正装置、２３はＭＶ再検索装置、２４は８×８
ＭＶ選択装置、２５は８×８ＭＶ→１６×１６ＭＶ合成
装置、２６は１６×１６ＭＶ再検索装置である。
ル変換装置を図１８に示し、以下これについて説明す
る。すなわち、１７はＭＶ及びＭＢ情報バッファ、１８
は足し合わせベクトル判定装置、１９は参照ＭＢアドレ
ス算出装置、２０は動きベクトル空間・時間補正装置、
２１はＭＶ再検索装置、２２は動きベクトル伸張 空間
・時間補正装置、２３はＭＶ再検索装置、２４は８×８
ＭＶ選択装置、２５は８×８ＭＶ→１６×１６ＭＶ合成
装置、２６は１６×１６ＭＶ再検索装置である。
【００６２】以下に、まず、動きベクトル情報を伸張に
より合成する方法及び足し合わせにより合成する方法に
ついて述べる。図１９に、動きベクトル情報を伸張によ
り合成する方法を示す。入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームで、Ｉピクチャにおいて
は動きベクトル情報が存在しない為、Ｐピクチャ内での
そのマクロブロックの動きベクトル情報に、破棄された
Ｉピクチャの動きベクトル情報を足し合わせて動きベク
トル情報を合成することは不可能である。したがって、
上述の方式に基づき、そのマクロブロックの動きベクト
ル情報をスケーリングにより空間・時間補整を施し、次
に破棄されたＩピクチャの直前のＩまたはＰピクチャよ
り変換された動きベクトル情報の大きさを２倍に伸張す
る。これにより、そのＰ−ＶＯＰの動きベクトル情報が
破棄されたフレームの直前のＩまたはＰピクチャより変
換されたＶＯＰを参照する。このようにして、空間・時
間補整によるスケーリングを行って後に時間方向に２倍
に伸張された動きベクトル情報を生成し、８×８の動き
ベクトル情報として出力する。同様の方法を、Ｐピクチ
ャを破棄する際に適用することも可能である。
より合成する方法及び足し合わせにより合成する方法に
ついて述べる。図１９に、動きベクトル情報を伸張によ
り合成する方法を示す。入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームで、Ｉピクチャにおいて
は動きベクトル情報が存在しない為、Ｐピクチャ内での
そのマクロブロックの動きベクトル情報に、破棄された
Ｉピクチャの動きベクトル情報を足し合わせて動きベク
トル情報を合成することは不可能である。したがって、
上述の方式に基づき、そのマクロブロックの動きベクト
ル情報をスケーリングにより空間・時間補整を施し、次
に破棄されたＩピクチャの直前のＩまたはＰピクチャよ
り変換された動きベクトル情報の大きさを２倍に伸張す
る。これにより、そのＰ−ＶＯＰの動きベクトル情報が
破棄されたフレームの直前のＩまたはＰピクチャより変
換されたＶＯＰを参照する。このようにして、空間・時
間補整によるスケーリングを行って後に時間方向に２倍
に伸張された動きベクトル情報を生成し、８×８の動き
ベクトル情報として出力する。同様の方法を、Ｐピクチ
ャを破棄する際に適用することも可能である。
【００６３】動きベクトル情報を足し合わせる手法につ
いて図２０、図２１、図２２及び図２３を用いて説明す
る。まず、図２０に足し合わせにより動きベクトル情報
を合成する方法の概念図を示す。破棄されるＰピクチャ
に含まれるマクロブロックは動きベクトル情報を有して
いる為、そのマクロブロックの動きベクトル情報に破棄
されるＰピクチャの動きベクトル情報を足し合わせ、破
棄されるＰピクチャの前のフレームを参照する動きベク
トル情報を生成する。図２０に示すように、そのマクロ
ブロックの動きベクトル情報は破棄されるフレームを参
照するが、このとき参照する画素は複数のマクロブロッ
クに跨る。図２１に参照画素がどのように複数のマクロ
ブロックに重なるかを示す。図からわかるように、参照
画素は１つ、または２つ、または４つのマクロブロック
に重なる場合がある。破棄されるＰピクチャの動きベク
トル情報及び、マクロブロックモード並びに予測モード
またはビット数、または量子化スケールは後に動きベク
トル情報の足し合わせの合成を行う為、ＭＢ及びＭＶ情
報バッファ１７にフレーム単位で格納する。ＭＰＥＧ２
からＭＰＥＧ４への動きベクトル変換を行うそのマクロ
ブックにおいて、まず捨てられたＰフレーム上でその動
きベクトルが参照する座標を計算する。複数のマクロブ
ロックに重なる場合には予め定めたパラメータＸに基づ
いて、マクロブロックの優先順位を判定する。すなわ
ち、第一の方法はＸをマクロブロックに重なっている画
素数とし、第２の方法はＸをマクロブロックの重なって
いる画素数／マクロブロックビット数とし、第３の方法
はＸをマクロブロックの重なっている画素数／量子化ス
ケールとし、第４の方法はＸをマクロブロックの重なっ
ている画素数／（マクロブロックビット数×量子化スケ
ール）とし、第５の方法はＸを１／マクロブロックビッ
ト数とし、第６の方法はＸを１／量子化スケールとし、
第７の方法はＸを１／（マクロブロックビット数×量子
化スケール）とする。パラメータＸの最も大きいものを
最大値とし、パラメータＸの最も小さいものを最小値と
する。
いて図２０、図２１、図２２及び図２３を用いて説明す
る。まず、図２０に足し合わせにより動きベクトル情報
を合成する方法の概念図を示す。破棄されるＰピクチャ
に含まれるマクロブロックは動きベクトル情報を有して
いる為、そのマクロブロックの動きベクトル情報に破棄
されるＰピクチャの動きベクトル情報を足し合わせ、破
棄されるＰピクチャの前のフレームを参照する動きベク
トル情報を生成する。図２０に示すように、そのマクロ
ブロックの動きベクトル情報は破棄されるフレームを参
照するが、このとき参照する画素は複数のマクロブロッ
クに跨る。図２１に参照画素がどのように複数のマクロ
ブロックに重なるかを示す。図からわかるように、参照
画素は１つ、または２つ、または４つのマクロブロック
に重なる場合がある。破棄されるＰピクチャの動きベク
トル情報及び、マクロブロックモード並びに予測モード
またはビット数、または量子化スケールは後に動きベク
トル情報の足し合わせの合成を行う為、ＭＢ及びＭＶ情
報バッファ１７にフレーム単位で格納する。ＭＰＥＧ２
からＭＰＥＧ４への動きベクトル変換を行うそのマクロ
ブックにおいて、まず捨てられたＰフレーム上でその動
きベクトルが参照する座標を計算する。複数のマクロブ
ロックに重なる場合には予め定めたパラメータＸに基づ
いて、マクロブロックの優先順位を判定する。すなわ
ち、第一の方法はＸをマクロブロックに重なっている画
素数とし、第２の方法はＸをマクロブロックの重なって
いる画素数／マクロブロックビット数とし、第３の方法
はＸをマクロブロックの重なっている画素数／量子化ス
ケールとし、第４の方法はＸをマクロブロックの重なっ
ている画素数／（マクロブロックビット数×量子化スケ
ール）とし、第５の方法はＸを１／マクロブロックビッ
ト数とし、第６の方法はＸを１／量子化スケールとし、
第７の方法はＸを１／（マクロブロックビット数×量子
化スケール）とする。パラメータＸの最も大きいものを
最大値とし、パラメータＸの最も小さいものを最小値と
する。
【００６４】図２２に破棄するフレームがＰピクチャ
で、足し合わせにより動きベクトル情報を合成する際の
フローチャートを示す。まず、ステップＳＴ−２１で、
そのマクロブロックのＭＰＥＧ２の動きベクトル情報が
参照する画素に重複する、マクロブロックを構成する１
つまたは２つまたは４つのマクロブロックのうち、マク
ロブロックモードがＮｏｔＣｏｄｅｄであり、尚、且つ
重複する画素値が閾値Ｔ以上であるマクロブロックを検
索する。閾値Ｔは例えば１００画素とする。ステップＳ
Ｔ−２１の判定でＹＥＳ、すなわち、重複するマクロブ
ロックのうち一つでもＮｏｔＣｏｄｅｄのマクロブロッ
クが含まれていれば、ステップＳＴ−２２に移行して、
そのマクロブロックアドレスが最も若いＮｏｔＣｏｄｅ
ｄのマクロブロックの動きベクトル情報を選択する。こ
こで、「ＮｏｔＣｏｄｅｄ」は、ＭＰＥＧ２において、
ＤＣＴ係数ビットが発生しないことを意味するマクロブ
ロックモードを言う。
で、足し合わせにより動きベクトル情報を合成する際の
フローチャートを示す。まず、ステップＳＴ−２１で、
そのマクロブロックのＭＰＥＧ２の動きベクトル情報が
参照する画素に重複する、マクロブロックを構成する１
つまたは２つまたは４つのマクロブロックのうち、マク
ロブロックモードがＮｏｔＣｏｄｅｄであり、尚、且つ
重複する画素値が閾値Ｔ以上であるマクロブロックを検
索する。閾値Ｔは例えば１００画素とする。ステップＳ
Ｔ−２１の判定でＹＥＳ、すなわち、重複するマクロブ
ロックのうち一つでもＮｏｔＣｏｄｅｄのマクロブロッ
クが含まれていれば、ステップＳＴ−２２に移行して、
そのマクロブロックアドレスが最も若いＮｏｔＣｏｄｅ
ｄのマクロブロックの動きベクトル情報を選択する。こ
こで、「ＮｏｔＣｏｄｅｄ」は、ＭＰＥＧ２において、
ＤＣＴ係数ビットが発生しないことを意味するマクロブ
ロックモードを言う。
【００６５】ステップＳＴ−２１の判定でＮＯのとき
は、ステップＳＴ−２３に移行して、そのマクロブロッ
クのＭＰＥＧ２の動きベクトル情報が参照する画素に重
複する、マクロブロックを構成する１つまたは２つまた
は４つのマクロブロックのうち、マクロブロックモード
がＮｏＭＣであり、尚、且つ重複する画素値が閾値Ｔ以
上であるマクロブロックを検索する。ステップＳＴ−２
３の判定で、ＹＥＳ、すなわち、重複するマクロブロッ
クのうち一つでもＮｏＭＣのマクロブロックが含まれて
いれば、ステップＳＴ−２４に移行して、そのマクロブ
ロックアドレスが最も若いＮｏＭＣのマクロブロックの
動きベクトル情報を選択する。そのマクロブロックのＭ
ＰＥＧ２の動きベクトル情報が参照する画素に重複す
る、マクロブロックを構成する１つまたは２つまたは４
つのマクロブロックのうち重複するマクロブロックにＮ
ｏｔＣｏｄｅｄ及びＮｏＭＣが存在しない場合には、ス
テップＳＴ−２５に移行して、マクロブロックモードが
イントラマクロブロックか否かを判定し、ＮＯであれ
ば、ステップＳＴ−２８に移行し、ＹＥＳであれば、ス
テップＳＴ−２６に移行して、全てのマクロブロックモ
ードがイントラマクロブロックか否かを判定し、ステッ
プＳＴ−２６の判定で、ＮＯのときは、ステップＳＴ−
２５に戻り、ＹＥＳであれば、０の動きベクトル情報を
選択する。すなわち、上述のパラメータＸが最も大きい
マクロブロックより順番にマクロブロックモードがイン
トラマクロブロックであるか否かを判定する（ステップ
ＳＴ−２６）。もし、参照マクロブロックがイントラマ
クロブロックであれば、次にパラメータＸが大きいマク
ロブロックがイントラマクロブロックであるかを判定す
る（ステップＳＴ−２６）。そのマクロブロックが参照
する画素に重複するマクロブロック全てがイントラマク
ロブロックであれば（ステップＳＴ−２５）、０の動き
ベクトル情報を選択する（ステップＳＴ−２７）。イン
ターマクロブロックを検索した場合には、次の判定ルー
チンに移る。ここで、「ＮｏＭＣ」は、ＭＰＥＧ２にお
いて、動きベクトルが（０，０）であることを意味する
マクロブロックモードを言う。
は、ステップＳＴ−２３に移行して、そのマクロブロッ
クのＭＰＥＧ２の動きベクトル情報が参照する画素に重
複する、マクロブロックを構成する１つまたは２つまた
は４つのマクロブロックのうち、マクロブロックモード
がＮｏＭＣであり、尚、且つ重複する画素値が閾値Ｔ以
上であるマクロブロックを検索する。ステップＳＴ−２
３の判定で、ＹＥＳ、すなわち、重複するマクロブロッ
クのうち一つでもＮｏＭＣのマクロブロックが含まれて
いれば、ステップＳＴ−２４に移行して、そのマクロブ
ロックアドレスが最も若いＮｏＭＣのマクロブロックの
動きベクトル情報を選択する。そのマクロブロックのＭ
ＰＥＧ２の動きベクトル情報が参照する画素に重複す
る、マクロブロックを構成する１つまたは２つまたは４
つのマクロブロックのうち重複するマクロブロックにＮ
ｏｔＣｏｄｅｄ及びＮｏＭＣが存在しない場合には、ス
テップＳＴ−２５に移行して、マクロブロックモードが
イントラマクロブロックか否かを判定し、ＮＯであれ
ば、ステップＳＴ−２８に移行し、ＹＥＳであれば、ス
テップＳＴ−２６に移行して、全てのマクロブロックモ
ードがイントラマクロブロックか否かを判定し、ステッ
プＳＴ−２６の判定で、ＮＯのときは、ステップＳＴ−
２５に戻り、ＹＥＳであれば、０の動きベクトル情報を
選択する。すなわち、上述のパラメータＸが最も大きい
マクロブロックより順番にマクロブロックモードがイン
トラマクロブロックであるか否かを判定する（ステップ
ＳＴ−２６）。もし、参照マクロブロックがイントラマ
クロブロックであれば、次にパラメータＸが大きいマク
ロブロックがイントラマクロブロックであるかを判定す
る（ステップＳＴ−２６）。そのマクロブロックが参照
する画素に重複するマクロブロック全てがイントラマク
ロブロックであれば（ステップＳＴ−２５）、０の動き
ベクトル情報を選択する（ステップＳＴ−２７）。イン
ターマクロブロックを検索した場合には、次の判定ルー
チンに移る。ここで、「ＮｏＭＣ」は、ＭＰＥＧ２にお
いて、動きベクトルが（０，０）であることを意味する
マクロブロックモードを言う。
【００６６】ステップＳＴ−２５の判定で、ＮＯのと
き、マクロブロックモードがイントラマクロブロックで
はなく、インターマクロブロックであるときは、ステッ
プＳＴ−２８に移行して、予測モードが、第２フィール
ドを参照するフィールド予測であるか否かを判定する。
ステップＳＴ−２８の判定でＹＥＳ、すなわち、第２フ
ィールドを参照するフィールド予測であるときは、ステ
ップＳＴ−２８に移行して、パラメータＸが次に大きい
参照マクロブロックにおいて同様の判定を行う。ステッ
プＳＴ−２９で、Ｎ（イントラマクロブロックの個数）
個の参照マクロブロックが第２フィールドを参照するフ
ィールド予測であるか否かの判定を行い、ＹＥＳのとき
は、ステップＳＴ−３０に移行して、最も大きなパラメ
ータＸをもった参照マクロブロックの動きベクトル情報
を選択する。Ｎは予め定めた数であり、１〜４の値を持
つ。
き、マクロブロックモードがイントラマクロブロックで
はなく、インターマクロブロックであるときは、ステッ
プＳＴ−２８に移行して、予測モードが、第２フィール
ドを参照するフィールド予測であるか否かを判定する。
ステップＳＴ−２８の判定でＹＥＳ、すなわち、第２フ
ィールドを参照するフィールド予測であるときは、ステ
ップＳＴ−２８に移行して、パラメータＸが次に大きい
参照マクロブロックにおいて同様の判定を行う。ステッ
プＳＴ−２９で、Ｎ（イントラマクロブロックの個数）
個の参照マクロブロックが第２フィールドを参照するフ
ィールド予測であるか否かの判定を行い、ＹＥＳのとき
は、ステップＳＴ−３０に移行して、最も大きなパラメ
ータＸをもった参照マクロブロックの動きベクトル情報
を選択する。Ｎは予め定めた数であり、１〜４の値を持
つ。
【００６７】ステップＳＴ−２８の判定でＮＯのとき、
すなわち、第２フィールドを参照するフィールド予測で
ないマクロブロックを検索した場合には、ステップＳＴ
−３１に移行して、そのマクロブロックの動きベクトル
情報を選択する。
すなわち、第２フィールドを参照するフィールド予測で
ないマクロブロックを検索した場合には、ステップＳＴ
−３１に移行して、そのマクロブロックの動きベクトル
情報を選択する。
【００６８】このようにしてそのマクロブロックの動き
ベクトル情報に足し合わせる動きベクトル情報を選択す
る。
ベクトル情報に足し合わせる動きベクトル情報を選択す
る。
【００６９】図２３を参照して、第２フィールドを参照
する動きベクトル情報の時間補正を説明する。足し合わ
せた動きベクトル情報のスケーリング方法は従来の技術
で述べた動きベクトル情報の空間・時間補正を施すスケ
ーリング方法と同様の方法で行う。よって、足し合わせ
た動きベクトル情報が参照フレームの第２フィールドを
参照する場合は、動きベクトル情報の垂直成分に対し、
フィールド補正を行い、更に時間方向のベクトル補整と
して１フィールド間隔分動きベクトルを伸張する。図に
示すようにそのフィールドと参照する第２フィールドの
フィールド間隔がａであり、よって１フィールド分の時
間補整を施すのに動きベクトルに（ａ＋１）／ａをかけ
る。このようにして８×８の動きベクトル情報を求め
て、出力する。
する動きベクトル情報の時間補正を説明する。足し合わ
せた動きベクトル情報のスケーリング方法は従来の技術
で述べた動きベクトル情報の空間・時間補正を施すスケ
ーリング方法と同様の方法で行う。よって、足し合わせ
た動きベクトル情報が参照フレームの第２フィールドを
参照する場合は、動きベクトル情報の垂直成分に対し、
フィールド補正を行い、更に時間方向のベクトル補整と
して１フィールド間隔分動きベクトルを伸張する。図に
示すようにそのフィールドと参照する第２フィールドの
フィールド間隔がａであり、よって１フィールド分の時
間補整を施すのに動きベクトルに（ａ＋１）／ａをかけ
る。このようにして８×８の動きベクトル情報を求め
て、出力する。
【００７０】再び図１８を参照するに、破棄されるフレ
ームが１ピクチャの場合には、入力となるＭＰＥＧ２の
動きベクトル情報は動きベクトル伸張 空間・時間補正
装置２２に伝送され、Ｐピクチャの場合には、ＭＶ及び
ＭＢ情報バッファ１７及び動きベクトル伸張 空間・時
間補正装置２２の双方に伝送される。
ームが１ピクチャの場合には、入力となるＭＰＥＧ２の
動きベクトル情報は動きベクトル伸張 空間・時間補正
装置２２に伝送され、Ｐピクチャの場合には、ＭＶ及び
ＭＢ情報バッファ１７及び動きベクトル伸張 空間・時
間補正装置２２の双方に伝送される。
【００７１】ＭＶ及びＭＢ情報バッファ１７において
は、破棄するＰピクチャの動きベクトル情報及びマクロ
ブロック予測モード、マクロブロック毎のビット量及び
量子化スケールをフレーム単位で格納する。参照ＭＢア
ドレス算出装置１９においては、破棄するＰピクチャ
の、次のＰピクチャの動きベクトル情報を入力とし、そ
のそのマクロブロックの参照位置を計算する。動きベク
トルの参照位置は足し合わせ動きベクトル判定装置１８
に入力され、参照位置を元に、参照画素に重なる、破棄
するＰピクチャに含まれるマクロブロックのアドレスを
算出する。足し合わせ動きベクトル判定装置１８におい
ては、この情報を利用し、上段に述べた足し合わせる動
きベクトル情報を選択する手法に基づき処理を行い、動
きベクトル情報を出力する。出力された動きベクトル情
報はそのマクロブロックの動きベクトル情報と足し合わ
せ（合成）が行われ、合成された動きベクトル情報が生
成される。次に合成された動きベクトル情報は動きベク
トル空間・時間補正装置２０に入力され、上述の空間・
時間の補整スケーリングにより変換を行い、動きベクト
ル情報を生成する。動きベクトル伸張 空間時間補正装
置２２においては、上述の方法により、ＭＰＥＧ４の８
×８の動きベクトル情報が伸張方式により求められ、こ
のＭＰＥＧ４の８×８の動きベクトル情報は、ＭＶ再検
索装置２３によって高精度化される。ＭＶ再検索装置２
１及び２３より出力された動きベクトル情報は８×８Ｍ
Ｖ選択装置２４に入力され、より予測残差の少ない動き
ベクトル情報を８×８の動きベクトル情報として出力す
る。８×８ＭＶ→１６×１６ＭＶ合成装置２５において
は、上述の方法により、８×８ＭＶ選択装置２４の出力
となる８×８の動きベクトル情報を基に、１６×１６の
動きベクトル情報の合成を行い、１６×１６ＭＶ再検索
装置２５においては、８×８ＭＶ→１６×１６ＭＶ合成
装置２５において生成された１６×１６の動きベクトル
情報を、周辺数画素サーチすることで高精度化する。こ
れによりＭＰＥＧ４の８×８の動きベクトル情報及び１
６×１６の動きベクトル情報を生成し、出力する。
は、破棄するＰピクチャの動きベクトル情報及びマクロ
ブロック予測モード、マクロブロック毎のビット量及び
量子化スケールをフレーム単位で格納する。参照ＭＢア
ドレス算出装置１９においては、破棄するＰピクチャ
の、次のＰピクチャの動きベクトル情報を入力とし、そ
のそのマクロブロックの参照位置を計算する。動きベク
トルの参照位置は足し合わせ動きベクトル判定装置１８
に入力され、参照位置を元に、参照画素に重なる、破棄
するＰピクチャに含まれるマクロブロックのアドレスを
算出する。足し合わせ動きベクトル判定装置１８におい
ては、この情報を利用し、上段に述べた足し合わせる動
きベクトル情報を選択する手法に基づき処理を行い、動
きベクトル情報を出力する。出力された動きベクトル情
報はそのマクロブロックの動きベクトル情報と足し合わ
せ（合成）が行われ、合成された動きベクトル情報が生
成される。次に合成された動きベクトル情報は動きベク
トル空間・時間補正装置２０に入力され、上述の空間・
時間の補整スケーリングにより変換を行い、動きベクト
ル情報を生成する。動きベクトル伸張 空間時間補正装
置２２においては、上述の方法により、ＭＰＥＧ４の８
×８の動きベクトル情報が伸張方式により求められ、こ
のＭＰＥＧ４の８×８の動きベクトル情報は、ＭＶ再検
索装置２３によって高精度化される。ＭＶ再検索装置２
１及び２３より出力された動きベクトル情報は８×８Ｍ
Ｖ選択装置２４に入力され、より予測残差の少ない動き
ベクトル情報を８×８の動きベクトル情報として出力す
る。８×８ＭＶ→１６×１６ＭＶ合成装置２５において
は、上述の方法により、８×８ＭＶ選択装置２４の出力
となる８×８の動きベクトル情報を基に、１６×１６の
動きベクトル情報の合成を行い、１６×１６ＭＶ再検索
装置２５においては、８×８ＭＶ→１６×１６ＭＶ合成
装置２５において生成された１６×１６の動きベクトル
情報を、周辺数画素サーチすることで高精度化する。こ
れによりＭＰＥＧ４の８×８の動きベクトル情報及び１
６×１６の動きベクトル情報を生成し、出力する。
【００７２】
【発明が解決しようとする課題】ところで、図１８に示
した動きベクトル変換装置においては、まず、ＭＰＥＧ
４の８×８の動きベクトル情報を伸張と足し合わせの２
通りの方法で合成し、これらの予測効率の高い方を選択
し、これを用いてＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成している。しかしながら、ＭＰＥＧ４の８
×８の動きベクトル情報は伸張を用いて合成した方が、
予測効率が高いが、ＭＰＥＧ４の１６×１６の動きベク
トル情報は足し合わせを用いて合成した方が、予測効率
が高いということが有り得るが、このような場合、図１
８に示した動きベクトル変換装置においては予測効率の
低下を招く。
した動きベクトル変換装置においては、まず、ＭＰＥＧ
４の８×８の動きベクトル情報を伸張と足し合わせの２
通りの方法で合成し、これらの予測効率の高い方を選択
し、これを用いてＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成している。しかしながら、ＭＰＥＧ４の８
×８の動きベクトル情報は伸張を用いて合成した方が、
予測効率が高いが、ＭＰＥＧ４の１６×１６の動きベク
トル情報は足し合わせを用いて合成した方が、予測効率
が高いということが有り得るが、このような場合、図１
８に示した動きベクトル変換装置においては予測効率の
低下を招く。
【００７３】かかる点に鑑み、本発明は、飛び越し走査
のＭＰＥＧ２の画像圧縮情報を示すビットストリームを
入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を示す
ビットストリームを出力とすると共に、入力となるＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームのＢピク
チャを破棄し、更にＩピクチャ若しくはＰピクチャも一
枚おきに破棄することでフレームレートの変換を実現す
る画像情報変換方法における、入力となるＭＰＥＧ２の
画像圧縮情報を示すビットストリームにおけるＭＰＥＧ
２の１６×１６の動きベクトルを入力とし、ＭＰＥＧ４
の８×８の動きベクトル及びＭＰＥＧ４の１６×１６の
動きベクトルを生成する動きベクトル変換方法におい
て、予測効率が低下しないものを提案しようとするもの
である。
のＭＰＥＧ２の画像圧縮情報を示すビットストリームを
入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を示す
ビットストリームを出力とすると共に、入力となるＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームのＢピク
チャを破棄し、更にＩピクチャ若しくはＰピクチャも一
枚おきに破棄することでフレームレートの変換を実現す
る画像情報変換方法における、入力となるＭＰＥＧ２の
画像圧縮情報を示すビットストリームにおけるＭＰＥＧ
２の１６×１６の動きベクトルを入力とし、ＭＰＥＧ４
の８×８の動きベクトル及びＭＰＥＧ４の１６×１６の
動きベクトルを生成する動きベクトル変換方法におい
て、予測効率が低下しないものを提案しようとするもの
である。
【００７４】又、本発明は、飛び越し走査のＭＰＥＧ２
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とすると共に、入力となるＭＰＥＧ２の画像
圧縮情報を示すビットストリームのＢピクチャを破棄
し、更にＩピクチャ若しくはＰピクチャも一枚おきに破
棄することでフレームレートの変換を実現する画像情報
変換装置における、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおけるＭＰＥＧ２の１６×
１６の動きベクトルを入力とし、ＭＰＥＧ４の８×８の
動きベクトル及びＭＰＥＧ４の１６×１６の動きベクト
ルを生成する動きベクトル変換装置において、予測効率
が低下しないものを提案しようとするものである。
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とすると共に、入力となるＭＰＥＧ２の画像
圧縮情報を示すビットストリームのＢピクチャを破棄
し、更にＩピクチャ若しくはＰピクチャも一枚おきに破
棄することでフレームレートの変換を実現する画像情報
変換装置における、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおけるＭＰＥＧ２の１６×
１６の動きベクトルを入力とし、ＭＰＥＧ４の８×８の
動きベクトル及びＭＰＥＧ４の１６×１６の動きベクト
ルを生成する動きベクトル変換装置において、予測効率
が低下しないものを提案しようとするものである。
【００７５】
【課題を解決するための手段】第１の発明は、飛び越し
走査のＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を
示すビットストリームを出力とすると共に、入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームのＢ
ピクチャを破棄し、更にＩピクチャ若しくはＰピクチャ
も一枚おきに破棄することでフレームレートの変換を実
現する画像情報変換方法における動きベクトル変換方法
において、入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換方法であって、Ｉピクチャ若しく
はＰピクチャを一枚おきに破棄することにより行われる
動きベクトル情報の合成を、伸張若しくは足し合わせに
より行い、その伸長とその足し合わせのうち予測効率の
高い方を選択してＭＰＥＧ４の符号化に用い、伸張及び
足し合わせの２通りの方法により、ＭＰＥＧ４の８×８
の動きベクトル及びＭＰＥＧ４の１６×１６の動きベク
トル情報の両方を合成する動きベクトル変換方法であ
る。
走査のＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を
示すビットストリームを出力とすると共に、入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームのＢ
ピクチャを破棄し、更にＩピクチャ若しくはＰピクチャ
も一枚おきに破棄することでフレームレートの変換を実
現する画像情報変換方法における動きベクトル変換方法
において、入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換方法であって、Ｉピクチャ若しく
はＰピクチャを一枚おきに破棄することにより行われる
動きベクトル情報の合成を、伸張若しくは足し合わせに
より行い、その伸長とその足し合わせのうち予測効率の
高い方を選択してＭＰＥＧ４の符号化に用い、伸張及び
足し合わせの２通りの方法により、ＭＰＥＧ４の８×８
の動きベクトル及びＭＰＥＧ４の１６×１６の動きベク
トル情報の両方を合成する動きベクトル変換方法であ
る。
【００７６】第１の発明によれば、Ｉピクチャ若しくは
Ｐピクチャを一枚おきに破棄することにより行われる動
きベクトル情報の合成を、伸張若しくは足し合わせによ
り行い、その伸長とその足し合わせのうち予測効率の高
い方を選択してＭＰＥＧ４の符号化に用い、伸張及び足
し合わせの２通りの方法により、ＭＰＥＧ４の８×８の
動きベクトル及びＭＰＥＧ４の１６×１６の動きベクト
ル情報の両方を合成する。
Ｐピクチャを一枚おきに破棄することにより行われる動
きベクトル情報の合成を、伸張若しくは足し合わせによ
り行い、その伸長とその足し合わせのうち予測効率の高
い方を選択してＭＰＥＧ４の符号化に用い、伸張及び足
し合わせの２通りの方法により、ＭＰＥＧ４の８×８の
動きベクトル及びＭＰＥＧ４の１６×１６の動きベクト
ル情報の両方を合成する。
【００７７】第２の発明は、飛び越し走査のＭＰＥＧ２
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とすると共に、入力となるＭＰＥＧ２の画像
圧縮情報を示すビットストリームのＢピクチャを破棄
し、更にＩピクチャ若しくはＰピクチャも一枚おきに破
棄することでフレームレートの変換を実現する画像情報
変換装置における動きベクトル変換装置において、入力
となるＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるＭＰＥＧ２の１６×１６の動きベクトルを入
力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥ
Ｇ４の１６×１６の動きベクトルを生成する動きベクト
ル変換装置であって、Ｉピクチャ若しくはＰピクチャを
一枚おきに破棄することにより行われる動きベクトル情
報の合成を、伸張若しくは足し合わせにより行う第１の
合成手段と、その伸長とその足し合わせのうち予測効率
の高い方を選択してＭＰＥＧ４の符号化に用いる選択手
段と、伸張及び足し合わせの２通りの方法により、ＭＰ
ＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１６×
１６の動きベクトル情報の両方をそれぞれ合成する第２
及び第３の合成手段とを有する動きベクトル変換装置で
ある。
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とすると共に、入力となるＭＰＥＧ２の画像
圧縮情報を示すビットストリームのＢピクチャを破棄
し、更にＩピクチャ若しくはＰピクチャも一枚おきに破
棄することでフレームレートの変換を実現する画像情報
変換装置における動きベクトル変換装置において、入力
となるＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるＭＰＥＧ２の１６×１６の動きベクトルを入
力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥ
Ｇ４の１６×１６の動きベクトルを生成する動きベクト
ル変換装置であって、Ｉピクチャ若しくはＰピクチャを
一枚おきに破棄することにより行われる動きベクトル情
報の合成を、伸張若しくは足し合わせにより行う第１の
合成手段と、その伸長とその足し合わせのうち予測効率
の高い方を選択してＭＰＥＧ４の符号化に用いる選択手
段と、伸張及び足し合わせの２通りの方法により、ＭＰ
ＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１６×
１６の動きベクトル情報の両方をそれぞれ合成する第２
及び第３の合成手段とを有する動きベクトル変換装置で
ある。
【００７８】第３の発明は、第１の発明の動きベクトル
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の８×８の動きベクトル情
報は、８×８の動きベクトル情報の選択が行われて、予
測効率の高い方が選択されたものである動きベクトル変
換方法である。
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の８×８の動きベクトル情
報は、８×８の動きベクトル情報の選択が行われて、予
測効率の高い方が選択されたものである動きベクトル変
換方法である。
【００７９】第４の発明は、第１の発明の動きベクトル
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の１６×１６の動きベクト
ル情報は、１６×１６の動きベクトル情報の選択が行わ
れて、予測効率の高い方が選択されたものである動きベ
クトル変換方法である。
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の１６×１６の動きベクト
ル情報は、１６×１６の動きベクトル情報の選択が行わ
れて、予測効率の高い方が選択されたものである動きベ
クトル変換方法である。
【００８０】第５の発明は、第１の発明の動きベクトル
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の８×８の動きベクトル情
報は、８×８の動きベクトル情報の選択が行われて、予
測効率の高い方が選択され、伸張及び足し合わせの２通
りの方法により合成されたＭＰＥＧ４の１６×１６の動
きベクトル情報は、１６×１６の動きベクトル情報の選
択が行われて、予測効率の高い方が選択され、それぞれ
選択されたＭＰＥＧ４の８×８の動きベクトル情報、及
びＭＰＥＧ４の１６×１６の動きベクトル情報を併せ
て、ＭＰＥＧ４の動きベクトル情報として出力する動き
ベクトル変換方法である。
変換方法において、伸張及び足し合わせの２通りの方法
により合成されたＭＰＥＧ４の８×８の動きベクトル情
報は、８×８の動きベクトル情報の選択が行われて、予
測効率の高い方が選択され、伸張及び足し合わせの２通
りの方法により合成されたＭＰＥＧ４の１６×１６の動
きベクトル情報は、１６×１６の動きベクトル情報の選
択が行われて、予測効率の高い方が選択され、それぞれ
選択されたＭＰＥＧ４の８×８の動きベクトル情報、及
びＭＰＥＧ４の１６×１６の動きベクトル情報を併せ
て、ＭＰＥＧ４の動きベクトル情報として出力する動き
ベクトル変換方法である。
【００８１】第６の発明は、第１の発明の動きベクトル
変換方法において、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおいてピクチャ・コーディ
ング・タイプがＩピクチャであるフレームが破棄される
場合には、伸張のみによりＭＰＥＧ４の８×８の動きベ
クトル情報及びＭＰＥＧ４の１６×１６の動きベクトル
情報を合成して出力し、入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームにおいてピクチャ・コー
ディング・タイプがＰピクチャであるフレームが破棄さ
れる場合には、伸張及び足し合わせの２通りの方法で動
きベクトル情報を合成し、予測効率の高い方を選択し出
力する動きベクトル変換方法である。
変換方法において、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおいてピクチャ・コーディ
ング・タイプがＩピクチャであるフレームが破棄される
場合には、伸張のみによりＭＰＥＧ４の８×８の動きベ
クトル情報及びＭＰＥＧ４の１６×１６の動きベクトル
情報を合成して出力し、入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームにおいてピクチャ・コー
ディング・タイプがＰピクチャであるフレームが破棄さ
れる場合には、伸張及び足し合わせの２通りの方法で動
きベクトル情報を合成し、予測効率の高い方を選択し出
力する動きベクトル変換方法である。
【００８２】第７の発明は、第１の発明の動きベクトル
変換方法において、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおいてピクチャ・コーディ
ング・タイプがＩピクチャであるフレームが破棄される
場合には、伸張のみによりＭＰＥＧ４の８×８の動きベ
クトル情報及びＭＰＥＧ４の１６×１６の動きベクトル
情報を合成して出力し、入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームにおいてピクチャ・コー
ディング・タイプがＰピクチャであるフレームが破棄さ
れる場合には、ＧＯＶ内での最初のＰ−ＶＯＰ、若しく
はシーンチェンジの直後のＧＯＶに関しては、伸張及び
足し合わせの２通りの方法で動きベクトル情報を合成
し、予測効率の高い方を選択し出力すると同時に、伸張
と足し合わせのどちらの方法が選択されたかに関する情
報を、ＭＰＥＧ４の８×８の動きベクトル情報及びＭＰ
ＥＧ４の１６×１６の動きベクトル情報のそれぞれにつ
いて記憶手段に格納し、それ以降のＰ−ＶＯＰについて
は、８×８の動きベクトル情報及びＭＰＥＧ４の１６×
１６の動きベクトル情報のそれぞれを、記憶手段に格納
された情報に基づいて合成し、予測効率に基づく判定を
省略することで、演算量の削減を実現するようにした動
きベクトル変換方法である。
変換方法において、入力となるＭＰＥＧ２の画像圧縮情
報を示すビットストリームにおいてピクチャ・コーディ
ング・タイプがＩピクチャであるフレームが破棄される
場合には、伸張のみによりＭＰＥＧ４の８×８の動きベ
クトル情報及びＭＰＥＧ４の１６×１６の動きベクトル
情報を合成して出力し、入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームにおいてピクチャ・コー
ディング・タイプがＰピクチャであるフレームが破棄さ
れる場合には、ＧＯＶ内での最初のＰ−ＶＯＰ、若しく
はシーンチェンジの直後のＧＯＶに関しては、伸張及び
足し合わせの２通りの方法で動きベクトル情報を合成
し、予測効率の高い方を選択し出力すると同時に、伸張
と足し合わせのどちらの方法が選択されたかに関する情
報を、ＭＰＥＧ４の８×８の動きベクトル情報及びＭＰ
ＥＧ４の１６×１６の動きベクトル情報のそれぞれにつ
いて記憶手段に格納し、それ以降のＰ−ＶＯＰについて
は、８×８の動きベクトル情報及びＭＰＥＧ４の１６×
１６の動きベクトル情報のそれぞれを、記憶手段に格納
された情報に基づいて合成し、予測効率に基づく判定を
省略することで、演算量の削減を実現するようにした動
きベクトル変換方法である。
【００８３】第８の発明は、第２の発明の動きベクトル
変換装置において、伸張及び足し合わせの２通りの方法
により、ＭＰＥＧ４の８×８の動きベクトル情報を合成
する第２の合成手段は、８×８の動きベクトル情報の選
択を行って、予測効率の高い方を選択するものである動
きベクトル変換装置である。
変換装置において、伸張及び足し合わせの２通りの方法
により、ＭＰＥＧ４の８×８の動きベクトル情報を合成
する第２の合成手段は、８×８の動きベクトル情報の選
択を行って、予測効率の高い方を選択するものである動
きベクトル変換装置である。
【００８４】第９の発明は、第２の発明の動きベクトル
変換装置において、伸張及び足し合わせの２通りの方法
により、ＭＰＥＧ４の１６×１６の動きベクトル情報を
合成する第３の合成手段は、１６×１６の動きベクトル
情報の選択を行って、予測効率の高い方を選択するもの
である動きベクトル変換装置である。
変換装置において、伸張及び足し合わせの２通りの方法
により、ＭＰＥＧ４の１６×１６の動きベクトル情報を
合成する第３の合成手段は、１６×１６の動きベクトル
情報の選択を行って、予測効率の高い方を選択するもの
である動きベクトル変換装置である。
【００８５】第１０の発明は、第２の発明の動きベクト
ル変換装置において、伸張及び足し合わせの２通りの方
法により、ＭＰＥＧ４の８×８の動きベクトル情報を合
成する第２の合成手段は、８×８の動きベクトル情報の
選択を行って、予測効率の高い方を選択するものである
と共に、伸張及び足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の１６×１６の動きベクトル情報を合成する第
３の合成手段は、１６×１６の動きベクトル情報の選択
を行って、予測効率の高い方を選択するものであり、第
２及び第３の合成手段によって、それぞれ選択されたＭ
ＰＥＧ４の８×８の動きベクトル情報、及びＭＰＥＧ４
の１６×１６の動きベクトル情報を併せて、ＭＰＥＧ４
の動きベクトル情報として出力する動きベクトル変換装
置である。
ル変換装置において、伸張及び足し合わせの２通りの方
法により、ＭＰＥＧ４の８×８の動きベクトル情報を合
成する第２の合成手段は、８×８の動きベクトル情報の
選択を行って、予測効率の高い方を選択するものである
と共に、伸張及び足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の１６×１６の動きベクトル情報を合成する第
３の合成手段は、１６×１６の動きベクトル情報の選択
を行って、予測効率の高い方を選択するものであり、第
２及び第３の合成手段によって、それぞれ選択されたＭ
ＰＥＧ４の８×８の動きベクトル情報、及びＭＰＥＧ４
の１６×１６の動きベクトル情報を併せて、ＭＰＥＧ４
の動きベクトル情報として出力する動きベクトル変換装
置である。
【００８６】第１１の発明は、第２の発明の動きベクト
ル変換装置において、入力となるＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてピクチャ・コーデ
ィング・タイプがＩピクチャであるフレームが破棄され
る場合には、伸張のみによりＭＰＥＧ４の８×８の動き
ベクトル情報及びＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成して出力する第４の合成手段と、入力とな
るＭＰＥＧ２の画像圧縮情報を示すビットストリームに
おいてピクチャ・コーディング・タイプがＰピクチャで
あるフレームが破棄される場合には、伸張及び足し合わ
せの２通りの方法で動きベクトル情報を合成し、予測効
率の高い方を選択し出力する第１の合成選択手段とを有
する動きベクトル変換装置である。
ル変換装置において、入力となるＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてピクチャ・コーデ
ィング・タイプがＩピクチャであるフレームが破棄され
る場合には、伸張のみによりＭＰＥＧ４の８×８の動き
ベクトル情報及びＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成して出力する第４の合成手段と、入力とな
るＭＰＥＧ２の画像圧縮情報を示すビットストリームに
おいてピクチャ・コーディング・タイプがＰピクチャで
あるフレームが破棄される場合には、伸張及び足し合わ
せの２通りの方法で動きベクトル情報を合成し、予測効
率の高い方を選択し出力する第１の合成選択手段とを有
する動きベクトル変換装置である。
【００８７】第１２の発明は、第２の発明の動きベクト
ル変換装置において、入力となるＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてピクチャ・コーデ
ィング・タイプがＩピクチャであるフレームが破棄され
る場合には、伸張のみによりＭＰＥＧ４の８×８の動き
ベクトル情報及びＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成して出力する第５の合成手段と、入力とな
るＭＰＥＧ２の画像圧縮情報を示すビットストリームに
おいてピクチャ・コーディング・タイプがＰピクチャで
あるフレームが破棄される場合には、ＧＯＶ内での最初
のＰ−ＶＯＰ、若しくはシーンチェンジの直後のＧＯＶ
に関しては、伸張及び足し合わせの２通りの方法で動き
ベクトル情報を合成し、予測効率の高い方を選択し出力
する第２の合成選択手段と、その第２の合成選択手段に
おいて、伸張と足し合わせのどちらの方法が選択された
かに関する情報を、ＭＰＥＧ４の８×８の動きベクトル
情報及びＭＰＥＧ４の１６×１６の動きベクトル情報の
それぞれについて格納される記憶手段とを有し、それ以
降のＰ−ＶＯＰについては、８×８の動きベクトル情報
及びＭＰＥＧ４の１６×１６の動きベクトル情報のそれ
ぞれを、記憶手段に格納された情報に基づいて合成し、
予測効率に基づく判定を省略することで、演算量の削減
を実現するようにした動きベクトル変換装置である。
ル変換装置において、入力となるＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてピクチャ・コーデ
ィング・タイプがＩピクチャであるフレームが破棄され
る場合には、伸張のみによりＭＰＥＧ４の８×８の動き
ベクトル情報及びＭＰＥＧ４の１６×１６の動きベクト
ル情報を合成して出力する第５の合成手段と、入力とな
るＭＰＥＧ２の画像圧縮情報を示すビットストリームに
おいてピクチャ・コーディング・タイプがＰピクチャで
あるフレームが破棄される場合には、ＧＯＶ内での最初
のＰ−ＶＯＰ、若しくはシーンチェンジの直後のＧＯＶ
に関しては、伸張及び足し合わせの２通りの方法で動き
ベクトル情報を合成し、予測効率の高い方を選択し出力
する第２の合成選択手段と、その第２の合成選択手段に
おいて、伸張と足し合わせのどちらの方法が選択された
かに関する情報を、ＭＰＥＧ４の８×８の動きベクトル
情報及びＭＰＥＧ４の１６×１６の動きベクトル情報の
それぞれについて格納される記憶手段とを有し、それ以
降のＰ−ＶＯＰについては、８×８の動きベクトル情報
及びＭＰＥＧ４の１６×１６の動きベクトル情報のそれ
ぞれを、記憶手段に格納された情報に基づいて合成し、
予測効率に基づく判定を省略することで、演算量の削減
を実現するようにした動きベクトル変換装置である。
【００８８】
【発明の実施の形態】以下、図２４を参照し、本発明の
実施の形態の動きベクトル変換方法及び変換装置の例を
説明する。
実施の形態の動きベクトル変換方法及び変換装置の例を
説明する。
【００８９】図２４に、その動きベクトル変換装置の例
を示し、以下、これについて説明する。図２４におい
て、２７はＭＶ及びＭＢ情報バッファ、２８は足し合わ
せ動きベクトル判定装置、２９は参照ＭＢアドレス算出
装置、３０は動きベクトル空間・時間補正装置、３１は
８×８ＭＶ再検索装置（足し合わせ）、３２は８×８Ｍ
Ｖ→１６×１６ＭＶ再検索装置（足し合わせ）、３３は
１６×１６ＭＶ再検索装置（足し合わせ）、３４は１６
×１６ＭＶ選択装置、３５は動きベクトル伸張空間・時
間補正装置、３６は８×８ＭＶ再検索装置、３７は８×
８ＭＶ→１６×１６ＭＶ合成装置（伸張）、３８は１６
×１６ＭＶ再検索装置（伸張）、３９は８×８ＭＶ選択
装置である。
を示し、以下、これについて説明する。図２４におい
て、２７はＭＶ及びＭＢ情報バッファ、２８は足し合わ
せ動きベクトル判定装置、２９は参照ＭＢアドレス算出
装置、３０は動きベクトル空間・時間補正装置、３１は
８×８ＭＶ再検索装置（足し合わせ）、３２は８×８Ｍ
Ｖ→１６×１６ＭＶ再検索装置（足し合わせ）、３３は
１６×１６ＭＶ再検索装置（足し合わせ）、３４は１６
×１６ＭＶ選択装置、３５は動きベクトル伸張空間・時
間補正装置、３６は８×８ＭＶ再検索装置、３７は８×
８ＭＶ→１６×１６ＭＶ合成装置（伸張）、３８は１６
×１６ＭＶ再検索装置（伸張）、３９は８×８ＭＶ選択
装置である。
【００９０】図２４において、ＭＰＥＧ２の動きベクト
ル情報を入力とし、足し合わせ及び伸張の２通りの方法
でＭＰＥＧ４の８×８の動きベクトル情報を生成する方
法に関しては、図１８に示した動きベクトル変換装置に
おけるそれと同様である。足し合わせにより生成された
ＭＰＥＧ４の８×８の動きベクトル情報は、８×８ＭＶ
再検索装置（足し合わせ）３１によって、伸張により生
成されたＭＰＥＧ４の８×８の動きベクトル情報は８×
８ＭＶ再検索装置（伸張）３６によって、それぞれ周辺
数画素を再検索することで、ＭＰＥＧ４の８×８の動き
ベクトル情報の高精度化を行う。高精度化されたＭＰＥ
Ｇ４の８×８の動きベクトル情報は、それぞれ８×８の
動きベクトル選択装置３９に伝送される。
ル情報を入力とし、足し合わせ及び伸張の２通りの方法
でＭＰＥＧ４の８×８の動きベクトル情報を生成する方
法に関しては、図１８に示した動きベクトル変換装置に
おけるそれと同様である。足し合わせにより生成された
ＭＰＥＧ４の８×８の動きベクトル情報は、８×８ＭＶ
再検索装置（足し合わせ）３１によって、伸張により生
成されたＭＰＥＧ４の８×８の動きベクトル情報は８×
８ＭＶ再検索装置（伸張）３６によって、それぞれ周辺
数画素を再検索することで、ＭＰＥＧ４の８×８の動き
ベクトル情報の高精度化を行う。高精度化されたＭＰＥ
Ｇ４の８×８の動きベクトル情報は、それぞれ８×８の
動きベクトル選択装置３９に伝送される。
【００９１】また、８×８ＭＶ再検索装置（足し合わ
せ）３１の出力となる、足し合わせにより合成され、高
精度化されたＭＰＥＧ４の８×８の動きベクトル情報
は、８×８ＭＶ→１６×１６ＭＶ合成装置（足し合わ
せ）３３に伝送され、ここでＭＰＥＧ４の１６×１６の
動きベクトル情報が合成される。同時に、また、８×８
ＭＶ再検索装置（伸張）３６の出力となる、足し合わせ
により合成され、高精度化されたＭＰＥＧ４の８×８の
動きベクトル情報は、８×８ＭＶ→１６×１６ＭＶ合成
装置（伸張）３８に伝送され、ここでＭＰＥＧ４の１６
×１６の動きベクトル情報が合成される。合成されたＭ
ＰＥＧ４の１６×１６の動きベクトル情報は、それぞれ
１６×１６ＭＶ選択装置３４に伝送される。
せ）３１の出力となる、足し合わせにより合成され、高
精度化されたＭＰＥＧ４の８×８の動きベクトル情報
は、８×８ＭＶ→１６×１６ＭＶ合成装置（足し合わ
せ）３３に伝送され、ここでＭＰＥＧ４の１６×１６の
動きベクトル情報が合成される。同時に、また、８×８
ＭＶ再検索装置（伸張）３６の出力となる、足し合わせ
により合成され、高精度化されたＭＰＥＧ４の８×８の
動きベクトル情報は、８×８ＭＶ→１６×１６ＭＶ合成
装置（伸張）３８に伝送され、ここでＭＰＥＧ４の１６
×１６の動きベクトル情報が合成される。合成されたＭ
ＰＥＧ４の１６×１６の動きベクトル情報は、それぞれ
１６×１６ＭＶ選択装置３４に伝送される。
【００９２】１６×１６ＭＶ選択装置３４及び８×８の
動きベクトル選択装置３９においては、それぞれ、足し
合わせ及び伸張により合成されたＭＰＥＧ４の１６×１
６の動きベクトル情報及びＭＰＥＧ４の８×８の動きベ
クトル情報のうち、予測効率の高い方を選択し、合わせ
てＭＰＥＧ４の動きベクトル情報として出力する。
動きベクトル選択装置３９においては、それぞれ、足し
合わせ及び伸張により合成されたＭＰＥＧ４の１６×１
６の動きベクトル情報及びＭＰＥＧ４の８×８の動きベ
クトル情報のうち、予測効率の高い方を選択し、合わせ
てＭＰＥＧ４の動きベクトル情報として出力する。
【００９３】尚、足し合わせ及び伸張の２通りの方法で
動きベクトルの合成を行うのは、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームにおいて、破棄
されるフレームのピクチャ・コーディング・タイプ（ｐ
ｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）がＰピクチャ
の場合に限る。Ｉピクチャの場合には、足し合わせによ
り合成することが不可能であるため、伸張により合成さ
れたＭＰＥＧ４の動きベクトル情報のみを出力する。
動きベクトルの合成を行うのは、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームにおいて、破棄
されるフレームのピクチャ・コーディング・タイプ（ｐ
ｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）がＰピクチャ
の場合に限る。Ｉピクチャの場合には、足し合わせによ
り合成することが不可能であるため、伸張により合成さ
れたＭＰＥＧ４の動きベクトル情報のみを出力する。
【００９４】また、ＧＯＶ（Group of VOP,VOP:Video O
bject Plane)の最初のＰ−ＶＯＰ、若しくはシーンチェ
ンジ直後のＰ−ＶＯＰにおいてのみ、上述の適応的な方
法によりＭＰＥＧ４の動きベクトル情報を合成するとと
もに、足し合わせ若しくは伸張のどちらの方法を用いて
ＭＰＥＧ４の８×８の動きベクトル情報並びにＭＰＥＧ
４の１６×１６の動きベクトル情報の合成を行ったかに
関する情報をメモリ（記憶手段）に格納し、以後のＰ−
ＶＯＰにおいては、破棄されるフレームが、入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームにお
いてＩピクチャである場合を除き、メモリに格納された
方法を用いてＭＰＥＧ４の８×８の動きベクトル情報並
びにＭＰＥＧ４の１６×１６の動きベクトル情報の合成
を行い、予測効率に基づく選択を行わないことで演算量
の削減を実現することも可能である。
bject Plane)の最初のＰ−ＶＯＰ、若しくはシーンチェ
ンジ直後のＰ−ＶＯＰにおいてのみ、上述の適応的な方
法によりＭＰＥＧ４の動きベクトル情報を合成するとと
もに、足し合わせ若しくは伸張のどちらの方法を用いて
ＭＰＥＧ４の８×８の動きベクトル情報並びにＭＰＥＧ
４の１６×１６の動きベクトル情報の合成を行ったかに
関する情報をメモリ（記憶手段）に格納し、以後のＰ−
ＶＯＰにおいては、破棄されるフレームが、入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームにお
いてＩピクチャである場合を除き、メモリに格納された
方法を用いてＭＰＥＧ４の８×８の動きベクトル情報並
びにＭＰＥＧ４の１６×１６の動きベクトル情報の合成
を行い、予測効率に基づく選択を行わないことで演算量
の削減を実現することも可能である。
【００９５】以上、入力としてＭＰＥＧ２の画像圧縮情
報を示すビットストリームを、出力としてＭＰＥＧ４の
画像圧縮情報を示すビットストリームを対象としてきた
が、入力、出力ともこれに限らず、例えばＭＰＥＧ−１
やＨ．２６３などの画像圧縮情報を示すビットストリー
ムでも良い。
報を示すビットストリームを、出力としてＭＰＥＧ４の
画像圧縮情報を示すビットストリームを対象としてきた
が、入力、出力ともこれに限らず、例えばＭＰＥＧ−１
やＨ．２６３などの画像圧縮情報を示すビットストリー
ムでも良い。
【００９６】
【発明の効果】第１の発明によれば、飛び越し走査のＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームを入力
とし、順次走査のＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームを出力とすると共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームのＢピクチャ
を破棄し、更にＩピクチャ若しくはＰピクチャも一枚お
きに破棄することでフレームレートの変換を実現する画
像情報変換方法における動きベクトル変換方法におい
て、入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるＭＰＥＧ２の１６×１６の動きベク
トルを入力とし、ＭＰＥＧ４の８×８の動きベクトル及
びＭＰＥＧ４の１６×１６の動きベクトルを生成する動
きベクトル変換方法であって、Ｉピクチャ若しくはＰピ
クチャを一枚おきに破棄することにより行われる動きベ
クトル情報の合成を、伸張若しくは足し合わせにより行
い、その伸長とその足し合わせのうち予測効率の高い方
を選択してＭＰＥＧ４の符号化に用い、伸張及び足し合
わせの２通りの方法により、ＭＰＥＧ４の８×８の動き
ベクトル及びＭＰＥＧ４の１６×１６の動きベクトル情
報の両方を合成するようにしたので、予測効率が低下し
ない動きベクトル変換方法を得ることができる。
ＰＥＧ２の画像圧縮情報を示すビットストリームを入力
とし、順次走査のＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームを出力とすると共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームのＢピクチャ
を破棄し、更にＩピクチャ若しくはＰピクチャも一枚お
きに破棄することでフレームレートの変換を実現する画
像情報変換方法における動きベクトル変換方法におい
て、入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるＭＰＥＧ２の１６×１６の動きベク
トルを入力とし、ＭＰＥＧ４の８×８の動きベクトル及
びＭＰＥＧ４の１６×１６の動きベクトルを生成する動
きベクトル変換方法であって、Ｉピクチャ若しくはＰピ
クチャを一枚おきに破棄することにより行われる動きベ
クトル情報の合成を、伸張若しくは足し合わせにより行
い、その伸長とその足し合わせのうち予測効率の高い方
を選択してＭＰＥＧ４の符号化に用い、伸張及び足し合
わせの２通りの方法により、ＭＰＥＧ４の８×８の動き
ベクトル及びＭＰＥＧ４の１６×１６の動きベクトル情
報の両方を合成するようにしたので、予測効率が低下し
ない動きベクトル変換方法を得ることができる。
【００９７】第２の発明によれば、飛び越し走査のＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームを入力と
し、順次走査のＭＰＥＧ４の画像圧縮情報を示すビット
ストリームを出力とすると共に、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームのＢピクチャを
破棄し、更にＩピクチャ若しくはＰピクチャも一枚おき
に破棄することでフレームレートの変換を実現する画像
情報変換装置における動きベクトル変換装置において、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるＭＰＥＧ２の１６×１６の動きベクトル
を入力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトルを生成する動きベ
クトル変換装置であって、Ｉピクチャ若しくはＰピクチ
ャを一枚おきに破棄することにより行われる動きベクト
ル情報の合成を、伸張若しくは足し合わせにより行う第
１の合成手段と、その伸長とその足し合わせのうち予測
効率の高い方を選択してＭＰＥＧ４の符号化に用いる選
択手段と、伸張及び足し合わせの２通りの方法により、
ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１
６×１６の動きベクトル情報の両方をそれぞれ合成する
第２及び第３の合成手段とを有するので、予測効率が低
下しない動きベクトル変換装置を得ることができる。
ＥＧ２の画像圧縮情報を示すビットストリームを入力と
し、順次走査のＭＰＥＧ４の画像圧縮情報を示すビット
ストリームを出力とすると共に、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームのＢピクチャを
破棄し、更にＩピクチャ若しくはＰピクチャも一枚おき
に破棄することでフレームレートの変換を実現する画像
情報変換装置における動きベクトル変換装置において、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるＭＰＥＧ２の１６×１６の動きベクトル
を入力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトルを生成する動きベ
クトル変換装置であって、Ｉピクチャ若しくはＰピクチ
ャを一枚おきに破棄することにより行われる動きベクト
ル情報の合成を、伸張若しくは足し合わせにより行う第
１の合成手段と、その伸長とその足し合わせのうち予測
効率の高い方を選択してＭＰＥＧ４の符号化に用いる選
択手段と、伸張及び足し合わせの２通りの方法により、
ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１
６×１６の動きベクトル情報の両方をそれぞれ合成する
第２及び第３の合成手段とを有するので、予測効率が低
下しない動きベクトル変換装置を得ることができる。
【図１】ＭＰＥＧ２の画像圧縮情報を示すビットストリ
ームからＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームへの変換を実現する従来例の画像情報変換装置を示
すブロック図である。
ームからＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームへの変換を実現する従来例の画像情報変換装置を示
すブロック図である。
【図２】本発明者らの発明によるＭＰＥＧ２の画像圧縮
情報を示すビットストリームからＭＰＥＧ４の画像圧縮
情報を示すビットストリームへの変換を実現する画像情
報変換装置を示すブロック図である。
情報を示すビットストリームからＭＰＥＧ４の画像圧縮
情報を示すビットストリームへの変換を実現する画像情
報変換装置を示すブロック図である。
【図３】ＭＰＥＧ２の画像圧縮情報を示すビットストリ
ーム中の動きベクトル情報と、ＭＰＥＧ４の画像圧縮情
報を示すビットストリーム中の動きベクトル情報の相関
を説明する説明図である。
ーム中の動きベクトル情報と、ＭＰＥＧ４の画像圧縮情
報を示すビットストリーム中の動きベクトル情報の相関
を説明する説明図である。
【図４】図２の解像度・フレームレート変換装置５にお
ける動作原理を示す説明図である。
ける動作原理を示す説明図である。
【図５】図２の画枠サイズ調整フラグに応じた解像度・
フレームレート変換装置５における画素の補填或いは除
去の動作原理を示す説明図である。
フレームレート変換装置５における画素の補填或いは除
去の動作原理を示す説明図である。
【図６】図２の動きベクトル変換装置６における動きベ
クトル変換方法を説明する説明図である。
クトル変換方法を説明する説明図である。
【図７】図２の動きベクトル変換装置６の詳細な回路構
成を示すブロック図である。
成を示すブロック図である。
【図８】図２のＭＰＥＧ２の１６×１６の動きベクトル
→ＭＰＥＧ４の８×８の動きベクトル変換装置８の動作
を説明するフローチャートである。
→ＭＰＥＧ４の８×８の動きベクトル変換装置８の動作
を説明するフローチャートである。
【図９】図７のＭＰＥＧ２の１６×１６の動きベクトル
→ＭＰＥＧ４のベクトル変換の概念を説明する説明図で
ある。
→ＭＰＥＧ４のベクトル変換の概念を説明する説明図で
ある。
【図１０】図９におけるＭＰＥＧ２の画像圧縮情報を示
すビットストリーム中の半画素精度の動きベクトル情報
の、ＭＰＥＧ４の８×８の動きベクトル情報への変換後
の取り扱いを示す表図である。
すビットストリーム中の半画素精度の動きベクトル情報
の、ＭＰＥＧ４の８×８の動きベクトル情報への変換後
の取り扱いを示す表図である。
【図１１】図９における、画像がフレーム構造で、第一
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。
【図１２】図９における、画像がフレーム構造で、第二
フィールド予測であるときについて動きベクトル変換の
概念を説明する説明図である。
フィールド予測であるときについて動きベクトル変換の
概念を説明する説明図である。
【図１３】図９における、画像がフレーム構造で、第二
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。
【図１４】図７における画像サイズ調整フラグによる動
きベクトル調整器９の動作を説明するフローチャートで
ある。
きベクトル調整器９の動作を説明するフローチャートで
ある。
【図１５】図７において、ＭＰＥＧ２のイントラマクロ
ブロックに対する動きベクトル補正器１１の動作を説明
するブロック図である。
ブロックに対する動きベクトル補正器１１の動作を説明
するブロック図である。
【図１６】図７においての、画像がフレーム構造で、第
二フィールド予測であるときについての動きベクトル変
換装置の詳細回路を示すブロック図である。
二フィールド予測であるときについての動きベクトル変
換装置の詳細回路を示すブロック図である。
【図１７】ｎ＝１５；ｍ＝３のＧＯＰ構造を持つ３０Ｈ
ｚのＭＰＥＧ２の画像圧縮情報を示すビットストリーム
を、ｎ＝５；ｍ＝１のＧＯＶ構造を持つ５ＨｚのＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームへ変換する
際の、入力となるＭＰＥＧ２の画像圧縮情報を示すビッ
トストリームにおけるピクチャ・コーディング・タイプ
（ｐｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）と、出力
となるＭＰＥＧ４の画像圧縮情報を示すビットストリー
ムにおけるブイオーピー・コーディング・タイプ（ｖｏ
ｐ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）の対応を示す説明図であ
る。
ｚのＭＰＥＧ２の画像圧縮情報を示すビットストリーム
を、ｎ＝５；ｍ＝１のＧＯＶ構造を持つ５ＨｚのＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームへ変換する
際の、入力となるＭＰＥＧ２の画像圧縮情報を示すビッ
トストリームにおけるピクチャ・コーディング・タイプ
（ｐｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）と、出力
となるＭＰＥＧ４の画像圧縮情報を示すビットストリー
ムにおけるブイオーピー・コーディング・タイプ（ｖｏ
ｐ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）の対応を示す説明図であ
る。
【図１８】入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャも１フレームおきに破棄す
ることでフレームレートの変換を実現する装置で、動き
ベクトル情報の合成を、伸張、或いは足し合わせにより
適応的に行う画像情報変換装置の構成を示すブロック図
である。
ビットストリームにおけるＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャも１フレームおきに破棄す
ることでフレームレートの変換を実現する装置で、動き
ベクトル情報の合成を、伸張、或いは足し合わせにより
適応的に行う画像情報変換装置の構成を示すブロック図
である。
【図１９】図１８における、動きベクトル情報を伸張に
より合成する方法を示す説明図である。
より合成する方法を示す説明図である。
【図２０】図１８における、動きベクトル情報を足し合
わせにより合成する方法の説明図である。
わせにより合成する方法の説明図である。
【図２１】図１８における、動きベクトル情報を足し合
わせにより合成する際、破棄されるフレームを参照する
動きベクトル情報が、どのようにマクロブロックに跨る
かを示す説明図である。
わせにより合成する際、破棄されるフレームを参照する
動きベクトル情報が、どのようにマクロブロックに跨る
かを示す説明図である。
【図２２】図１８における、破棄するフレームがＰピク
チャで、足し合わせによりを動きベクトル情報を合成す
ることを説明するフローチャートである。
チャで、足し合わせによりを動きベクトル情報を合成す
ることを説明するフローチャートである。
【図２３】図２０における、足し合わせた動きベクトル
情報が参照フレームの第２フィールドを参照する場合の
時間補正の方法を説明する説明図である。
情報が参照フレームの第２フィールドを参照する場合の
時間補正の方法を説明する説明図である。
【図２４】本発明の実施の形態の動きベクトル変換装置
の例を示すブロック図である。
の例を示すブロック図である。
２７ ＭＶ及びＭＢ情報バッファ、２８ 足し合わせ動
きベクトル判定装置、２９ 参照ＭＢアドレス算出装
置、３０ 動きベクトル空間・時間補正装置、３１ ８
×８ＭＶ再検索装置（足し合わせ）、３２ ８×８ＭＶ
→１６×１６ＭＶ再検索装置（足し合わせ）、３３ １
６×１６ＭＶ再検索装置（足し合わせ）、３４ １６×
１６ＭＶ選択装置、３５ 動きベクトル伸張 空間・時
間補正装置、３６ ８×８ＭＶ再検索装置、３７ ８×
８ＭＶ→１６×１６ＭＶ合成装置（伸張）、３８ １６
×１６ＭＶ再検索装置（伸張）、３９ ８×８ＭＶ選択
装置。
きベクトル判定装置、２９ 参照ＭＢアドレス算出装
置、３０ 動きベクトル空間・時間補正装置、３１ ８
×８ＭＶ再検索装置（足し合わせ）、３２ ８×８ＭＶ
→１６×１６ＭＶ再検索装置（足し合わせ）、３３ １
６×１６ＭＶ再検索装置（足し合わせ）、３４ １６×
１６ＭＶ選択装置、３５ 動きベクトル伸張 空間・時
間補正装置、３６ ８×８ＭＶ再検索装置、３７ ８×
８ＭＶ→１６×１６ＭＶ合成装置（伸張）、３８ １６
×１６ＭＶ再検索装置（伸張）、３９ ８×８ＭＶ選択
装置。
フロントページの続き (72)発明者 鈴木 輝彦 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 矢ケ崎 陽一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 KK41 LB05 LB07 LC10 MA00 MA23 NN21 NN28 PP05 PP06 PP07 PP25 SS01 SS08 SS10 SS13 TA61 TB07 TB08 TC18 TD02 UA02
Claims (12)
- 【請求項１】 飛び越し走査のＭＰＥＧ２の画像圧縮情
報を示すビットストリームを入力とし、順次走査のＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームを出力と
すると共に、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームのＢピクチャを破棄し、更にＩピク
チャ若しくはＰピクチャも一枚おきに破棄することでフ
レームレートの変換を実現する画像情報変換方法におけ
る動きベクトル変換方法において、 入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるＭＰＥＧ２の１６×１６の動きベクトル
を入力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトルを生成する動きベ
クトル変換方法であって、 Ｉピクチャ若しくはＰピクチャを一枚おきに破棄するこ
とにより行われる動きベクトル情報の合成を、伸張若し
くは足し合わせにより行い、 該伸長と該足し合わせのうち予測効率の高い方を選択し
てＭＰＥＧ４の符号化に用い、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１６
×１６の動きベクトル情報の両方を合成することを特徴
とする動きベクトル変換方法。 - 【請求項２】 飛び越し走査のＭＰＥＧ２の画像圧縮情
報を示すビットストリームを入力とし、順次走査のＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームを出力と
すると共に、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームのＢピクチャを破棄し、更にＩピク
チャ若しくはＰピクチャも一枚おきに破棄することでフ
レームレートの変換を実現する画像情報変換装置におけ
る動きベクトル変換装置において、 入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるＭＰＥＧ２の１６×１６の動きベクトル
を入力とし、ＭＰＥＧ４の８×８の動きベクトル及びＭ
ＰＥＧ４の１６×１６の動きベクトルを生成する動きベ
クトル変換装置であって、 Ｉピクチャ若しくはＰピクチャを一枚おきに破棄するこ
とにより行われる動きベクトル情報の合成を、伸張若し
くは足し合わせにより行う第１の合成手段と、 該伸長と該足し合わせのうち予測効率の高い方を選択し
てＭＰＥＧ４の符号化に用いる選択手段と、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１６
×１６の動きベクトル情報の両方をそれぞれ合成する第
２及び第３の合成手段とを有することを特徴とする動き
ベクトル変換装置。 - 【請求項３】 請求項１に記載の動きベクトル変換方法
において、 上記伸張及び上記足し合わせの２通りの方法により合成
されたＭＰＥＧ４の８×８の動きベクトル情報は、８×
８の動きベクトル情報の選択が行われて、予測効率の高
い方が選択されたものであることを特徴とする動きベク
トル変換方法。 - 【請求項４】 請求項１に記載の動きベクトル変換方法
において、 上記伸張及び上記足し合わせの２通りの方法により合成
されたＭＰＥＧ４の１６×１６の動きベクトル情報は、
１６×１６の動きベクトル情報の選択が行われて、予測
効率の高い方が選択されたものであることを特徴とする
動きベクトル変換方法。 - 【請求項５】 請求項１に記載の動きベクトル変換方法
において、 上記伸張及び上記足し合わせの２通りの方法により合成
されたＭＰＥＧ４の８×８の動きベクトル情報は、８×
８の動きベクトル情報の選択が行われて、予測効率の高
い方が選択され、 上記伸張及び上記足し合わせの２通りの方法により合成
されたＭＰＥＧ４の１６×１６の動きベクトル情報は、
１６×１６の動きベクトル情報の選択が行われて、予測
効率の高い方が選択され、 上記それぞれ選択されたＭＰＥＧ４の８×８の動きベク
トル情報、及びＭＰＥＧ４の１６×１６の動きベクトル
情報を併せて、ＭＰＥＧ４の動きベクトル情報として出
力することを特徴とする動きベクトル変換方法。 - 【請求項６】 請求項１に記載の動きベクトル変換方法
において、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｉピクチャであるフレームが破棄される場合には、伸張
のみによりＭＰＥＧ４の８×８の動きベクトル情報及び
ＭＰＥＧ４の１６×１６の動きベクトル情報を合成して
出力し、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｐピクチャであるフレームが破棄される場合には、伸張
及び足し合わせの２通りの方法で動きベクトル情報を合
成し、予測効率の高い方を選択し出力することを特徴と
する動きベクトル変換方法。 - 【請求項７】 請求項１に記載の動きベクトル変換方法
において、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｉピクチャであるフレームが破棄される場合には、伸張
のみによりＭＰＥＧ４の８×８の動きベクトル情報及び
ＭＰＥＧ４の１６×１６の動きベクトル情報を合成して
出力し、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｐピクチャであるフレームが破棄される場合には、ＧＯ
Ｖ内での最初のＰ−ＶＯＰ（Video Object Plane) 、若
しくはシーンチェンジの直後のＧＯＶに関しては、伸張
及び足し合わせの２通りの方法で動きベクトル情報を合
成し、予測効率の高い方を選択し出力すると同時に、伸
張と足し合わせのどちらの方法が選択されたかに関する
情報を、ＭＰＥＧ４の８×８の動きベクトル情報及びＭ
ＰＥＧ４の１６×１６の動きベクトル情報のそれぞれに
ついて記憶手段に格納し、 それ以降のＰ−ＶＯＰにつ
いては、８×８の動きベクトル情報及びＭＰＥＧ４の１
６×１６の動きベクトル情報のそれぞれを、上記記憶手
段に格納された情報に基づいて合成し、予測効率に基づ
く判定を省略することで、演算量の削減を実現するよう
にしたことを特徴とする動きベクトル変換方法。 - 【請求項８】 請求項２に記載の動きベクトル変換装置
において、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の８×８の動きベクトル情報を合成する上記第
２の合成手段は、８×８の動きベクトル情報の選択を行
って、予測効率の高い方を選択するものであることを特
徴とする動きベクトル変換装置。 - 【請求項９】 請求項２に記載の動きベクトル変換装置
において、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の１６×１６の動きベクトル情報を合成する上
記第３の合成手段は、１６×１６の動きベクトル情報の
選択を行って、予測効率の高い方を選択するものである
ことを特徴とする動きベクトル変換装置。 - 【請求項１０】 請求項２に記載の動きベクトル変換装
置において、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の８×８の動きベクトル情報を合成する上記第
２の合成手段は、８×８の動きベクトル情報の選択を行
って、予測効率の高い方を選択するものであると共に、 上記伸張及び上記足し合わせの２通りの方法により、Ｍ
ＰＥＧ４の１６×１６の動きベクトル情報を合成する上
記第３の合成手段は、１６×１６の動きベクトル情報の
選択を行って、予測効率の高い方を選択するものであ
り、 上記第２及び第３の合成手段によって、それぞれ選択さ
れたＭＰＥＧ４の８×８の動きベクトル情報、及びＭＰ
ＥＧ４の１６×１６の動きベクトル情報を併せて、ＭＰ
ＥＧ４の動きベクトル情報として出力することを特徴と
する動きベクトル変換装置。 - 【請求項１１】 請求項２に記載の動きベクトル変換装
置において、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｉピクチャであるフレームが破棄される場合には、伸張
のみによりＭＰＥＧ４の８×８の動きベクトル情報及び
ＭＰＥＧ４の１６×１６の動きベクトル情報を合成して
出力する第４の合成手段と、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｐピクチャであるフレームが破棄される場合には、伸張
及び足し合わせの２通りの方法で動きベクトル情報を合
成し、予測効率の高い方を選択し出力する第１の合成選
択手段とを有することを特徴とする動きベクトル変換装
置。 - 【請求項１２】 請求項２に記載の動きベクトル変換装
置において、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｉピクチャであるフレームが破棄される場合には、伸張
のみによりＭＰＥＧ４の８×８の動きベクトル情報及び
ＭＰＥＧ４の１６×１６の動きベクトル情報を合成して
出力する第５の合成手段と、 上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてピクチャ・コーディング・タイプが
Ｐピクチャであるフレームが破棄される場合には、ＧＯ
Ｖ内での最初のＰ−ＶＯＰ、若しくはシーンチェンジの
直後のＧＯＶに関しては、伸張及び足し合わせの２通り
の方法で動きベクトル情報を合成し、予測効率の高い方
を選択し出力する第２の合成選択手段と、 該第２の合成選択手段において、上記伸張と足し合わせ
のどちらの方法が選択されたかに関する情報を、ＭＰＥ
Ｇ４の８×８の動きベクトル情報及びＭＰＥＧ４の１６
×１６の動きベクトル情報のそれぞれについて格納され
る記憶手段とを有し、 それ以降のＰ−ＶＯＰについては、８×８の動きベクト
ル情報及びＭＰＥＧ４の１６×１６の動きベクトル情報
のそれぞれを、上記記憶手段に格納された情報に基づい
て合成し、予測効率に基づく判定を省略することで、演
算量の削減を実現するようにしたことを特徴とする動き
ベクトル変換装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001046919A JP4529295B2 (ja) | 2001-02-22 | 2001-02-22 | 動きベクトル変換方法及び変換装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001046919A JP4529295B2 (ja) | 2001-02-22 | 2001-02-22 | 動きベクトル変換方法及び変換装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002252854A true JP2002252854A (ja) | 2002-09-06 |
| JP4529295B2 JP4529295B2 (ja) | 2010-08-25 |
Family
ID=18908452
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001046919A Expired - Fee Related JP4529295B2 (ja) | 2001-02-22 | 2001-02-22 | 動きベクトル変換方法及び変換装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4529295B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014143488A (ja) * | 2013-01-22 | 2014-08-07 | Nikon Corp | 画像圧縮装置、画像復号装置およびプログラム |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11275592A (ja) * | 1998-01-22 | 1999-10-08 | Victor Co Of Japan Ltd | 動画像符号列変換装置及びその方法 |
| JP2000023164A (ja) * | 1998-06-25 | 2000-01-21 | Sony United Kingdom Ltd | デジタルビデオ処理方式 |
| JP2000244927A (ja) * | 1999-02-23 | 2000-09-08 | Matsushita Electric Ind Co Ltd | 動画変換装置 |
| JP2002010267A (ja) * | 2000-06-26 | 2002-01-11 | Sony Corp | 動きベクトル変換装置及び方法 |
-
2001
- 2001-02-22 JP JP2001046919A patent/JP4529295B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11275592A (ja) * | 1998-01-22 | 1999-10-08 | Victor Co Of Japan Ltd | 動画像符号列変換装置及びその方法 |
| JP2000023164A (ja) * | 1998-06-25 | 2000-01-21 | Sony United Kingdom Ltd | デジタルビデオ処理方式 |
| JP2000244927A (ja) * | 1999-02-23 | 2000-09-08 | Matsushita Electric Ind Co Ltd | 動画変換装置 |
| JP2002010267A (ja) * | 2000-06-26 | 2002-01-11 | Sony Corp | 動きベクトル変換装置及び方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014143488A (ja) * | 2013-01-22 | 2014-08-07 | Nikon Corp | 画像圧縮装置、画像復号装置およびプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4529295B2 (ja) | 2010-08-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4682410B2 (ja) | 画像処理装置及び画像処理方法 | |
| RU2251820C2 (ru) | Экстраполяция вектора движения для перекодировки видеопоследовательности | |
| US8036273B2 (en) | Method for sub-pixel value interpolation | |
| US7630566B2 (en) | Method and apparatus for improved estimation and compensation in digital video compression and decompression | |
| AU2002324085A1 (en) | Method for sub-pixel value interpolation | |
| JP2001238218A (ja) | 信号変換装置及び方法 | |
| JP2006279573A (ja) | 符号化装置と方法、ならびに復号装置と方法 | |
| JP3649370B2 (ja) | 動き補償符号化装置及び動き補償符号化方法 | |
| JP2001285863A (ja) | 画像情報変換装置及び方法 | |
| JP4622077B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP2003169349A (ja) | 画像情報符号化方法及び装置、画像情報復号方法及び装置、並びにプログラム | |
| JP2002010267A (ja) | 動きベクトル変換装置及び方法 | |
| JP4529295B2 (ja) | 動きベクトル変換方法及び変換装置 | |
| JP2002044669A (ja) | 画像情報変換装置及び方法 | |
| JP2002247588A (ja) | 動きベクトル変換方法及び変換装置 | |
| JP2001086508A (ja) | 動画像復号方法及び動画像復号装置 | |
| JP4556286B2 (ja) | 動きベクトル変換装置及び方法 | |
| JP2002199399A (ja) | 動きベクトル変換方法及び変換装置 | |
| JP4779207B2 (ja) | 動きベクトル変換装置及び動きベクトル変換方法 | |
| JP2001309389A (ja) | 動きベクトル変換装置及び方法 | |
| JP2002135785A (ja) | 動きベクトル変換方法及び変換装置 | |
| JP2001285875A (ja) | 画像情報変換装置及び方法 | |
| JP2001204027A (ja) | 画像情報変換装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080213 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091001 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091013 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091207 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100518 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100531 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130618 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |