JP2002247588A

JP2002247588A - 動きベクトル変換方法及び変換装置

Info

Publication number: JP2002247588A
Application number: JP2001045366A
Authority: JP
Inventors: Kazufumi Sato; 数史佐藤; Kuniaki Takahashi; 邦明高橋; Teruhiko Suzuki; 輝彦鈴木; Yoichi Yagasaki; 陽一矢ケ崎
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2001-02-21
Filing date: 2001-02-21
Publication date: 2002-08-30

Abstract

(57)【要約】【課題】入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換装置において、符号化効率の判定
に伴う演算量を削減することのできる動きベクトル変換
装置を得る。【解決手段】Ｉピクチャ若しくはＰピクチャを一枚お
きに破棄することにより行われる動きベクトル情報の合
成を、伸張若しくは足し合わせにより行う手段３６と、
伸張と足し合わせのうち予測効率の高い方を選択してＭ
ＰＥＧ４の符号化に用いる手段３５と、符号化効率の判
定を、出力となるＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームにおけるＧＯＶの最初のＰ−ＶＯＰ、或い
はシーンチェンジの直後にのみ行う判定手段とを有す
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＭＰＥＧなどの様
に、離散コサイン変換等の直交変換と動き補償によって
圧縮された画像情報を示すビットストリームを、衛星放
送、ケーブルＴＶ、インターネットなどのネットワーク
メディアを介して受信する際に、若しくは光、磁気ディ
スク、フラッシュメモリのような記憶メディア上で処理
する際に用いられる画像情報変換方法（画像情報変換変
換装置）における動きベクトル変換方法（動きベクトル
変換装置）に関するものである。

【０００２】

【従来の技術】近年、画像情報をデジタル信号として取
り扱い、その際、効率の高い情報の伝送、蓄積を目的と
し、画像情報特有の冗長性を利用して、離散コサイン変
換等の直交変換と動き補償により圧縮するＭＰＥＧなど
の方式に準拠した装置が、放送局などの情報配信、及び
一般家庭における情報受信の双方において普及しつつあ
る。

【０００３】特に、ＭＰＥＧ２（ＩＳＯ／ＩＥＣ１３
８１８−２）は、汎用画像符号化方式として定義されて
おり、飛び越し走査画像及び順次走査画像の双方、並び
に標準解像度画像及び高精細画像を網羅する標準方式
で、プロフェッショナル用途及びコンシューマー用途の
広範なアプリケーションに今後とも用いられるものと予
想される。ＭＰＥＧ２圧縮方式を用いることにより、例
えば７２０×４８０画素を持つ標準解像度の飛び越し走
査画像であれば４〜８Ｍｂｐｓ、１９２０×１０８８画
素を持つ高解像度の飛び越し走査画像であれば１８〜２
２Ｍｂｐｓの符号量（ビットレート）を割り当てること
で、高い圧縮率と良好な画質の実現が可能である。

【０００４】ＭＰＥＧ２は主として放送用に適合する高
画質符号化に適用されていたが、ＭＰＥＧ１より低い符
号量（ビットレート）、つまりより高い圧縮率の符号化
方式には対応していなかった。携帯端末の普及により、
今後そのような符号化方式のニーズは高まると思われ、
これに対応してＭＰＥＧ４の符号化方式の標準化が行わ
れた。画像符号化方式に関しては、１９９８年１２月に
ＩＳＯ／ＩＥＣ１４４９６−２として、その規格が国
際標準に承認された。

【０００５】ところで、ディジタル放送用に一度符号化
されたＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを、携帯端末上等で処理するのにより適した、より低
い符号量（ビットレート）のＭＰＥＧ４の画像圧縮情報
を示すビットストリームに変換したいというニーズがあ
る。

【０００６】かかる目的を達成するための従来の画像情
報変換装置を図１に示し、以下、これについて説明す
る。図１は、入力されたＭＰＥＧ２の画像圧縮情報を示
すビットストリームを、ＭＰＥＧ４の画像圧縮情報を示
すビットストリームへ変換する画像情報変換装置であ
る。すなわち、図１において、１はＭＰＥＧ２の画像情
報復号化装置、２は解像度・フレームレート変換装置、
３はＭＰＥＧ４の画像情報符号化装置である。入力され
たＭＰＥＧ２の画像圧縮情報を示すビットストリーム
は、ＭＰＥＧ２の画像情報復号化装置１により復号化さ
れる。復号化された画像情報は解像度・フレームレート
変換装置２へ伝送され、任意の異なる解像度、フレーム
レートをもつ画像情報へ変換される。変換された画像情
報は、ＭＰＥＧ４の画像情報符号化装置３に入力され
て、ＭＰＥＧ４の画像符号化方式によりＭＰＥＧ４の画
像圧縮情報を示すビットストリームに符号化され出力さ
れる。

【０００７】ＭＰＥＧ２の画像情報復号化装置１におい
ては、水平及び垂直方向成分共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームの８次のＤＣ
Ｔ係数全てを用いた復号処理を行うことが考えられる
が、垂直方向には８次の係数全てを用いるものの、水平
方向には８次の係数のうち低域４成分のみを用いた復号
処理（以下これを４×８ダウンデコードと呼ぶ）、若し
くは、水平、垂直方向共に水平方向には８次の係数のう
ち低域４成分のみを用いた復号処理（以下これを４×４
ダウンデコードと呼ぶ）を行うことで、画質劣化を最小
限に抑えながら、演算量とビデオメモリ容量を削減し、
更に後段のダウンサンプリング処理を簡略化する構成も
考えられる。

【０００８】このような従来方法では、ＭＰＥＧ４の画
像符号化装置において、入力された画像信号を符号化す
る際、動きベクトル情報を検出する演算処理量は、全演
算処理量の約６０〜７０パーセントを占める。そのた
め、画像のリアルタイムでの処理が困難となり、時間遅
延が発生し、装置が大規模になってしまう等の問題点が
生じる。

【０００９】かかる問題を解決する手段として、発明者
らは先に図２に示す画像情報変換装置の発明を行った。
以下、これについて説明する。４はＭＰＥＧ２の画像情
報復号化装置、５は解像度・フレームレート変換装置、
６は動きベクトル変換装置、７はＭＰＥＧ４の画像情報
符号化装置である。図２の画像情報変換装置において、
動きベクトル変換装置６を除く部分の動作原理について
は、図１に示した画像情報変換装置と同様であるため、
動きベクトル変換装置６の動作原理について詳述する。

【００１０】図３は、ＭＰＥＧ２の画像圧縮情報を示す
ビットストリーム中の動きベクトル情報と、ＭＰＥＧ４
の画像圧縮情報を示すビットストリーム中の動きベクト
ル情報の相関を示す図で、以下、これについて説明す
る。画像の解像度が変換される際、変換後の前フレーム
での位置から現フレームでの位置への動きベクトル情報
の水平成分は、解像度変換前の動きベクトル情報の水平
成分と画像の横方向の解像度変換比によって求めること
が可能であり、解像度変換後の垂直成分は、解像度変換
前の動きベクトル情報の垂直成分と画像の垂直方向の解
像度変換レートによって求めることが可能である。解像
度変換前の動きベクトル情報と変換後の動きベクトル情
報は大きな相関を持ち、その相関を利用して解像度変換
前の動きベクトル情報から変換後の動きベクトル情報を
求めることが可能である。

【００１１】すなわち、入力されたＭＰＥＧ２の画像圧
縮情報を示すビットストリームより、ＭＰＥＧ２のマク
ロブロック動きベクトルやマクロブロックタイプ等の情
報を利用し、ＭＰＥＧ４の動きベクトル情報へ変換す
る。ＭＰＥＧ４の符号化装置７内では、動きベクトル情
報の検出を行わず、変換された動きベクトル情報を用い
た画像符号化を行う。これにより、処理量の大幅な削減
を可能とする。

【００１２】ここで、解像度フレームレート変換装置５
の動作原理について述べる。まず、ＭＰＥＧ２の画像情
報復号化装置４より入力された画像の解像度変換を行
う。ここでは、水平方向・垂直方向共に解像度を１／２
にする場合を例にして挙げる。図４に示すように、垂直
方向のダウンサンプリングは、入力された飛び越し走査
画像の第一フィールド、若しくはを第二フィールドを抽
出して、順次走査画像に変換する。水平方向に関して
は、ダウンサンプリングフィルタを用いて、１／２の解
像度に変換する。また、低ビットレートを実現するため
に、解像度の変換による圧縮だけではなく、Ｂピクチャ
を破棄することでフレームレートの低減を実現する。例
えば、図４に示したＭＰＥＧ２のＩＢＢＰの画像は解像
度・フレーム変換後、ＩＰの第一フィールドの構成にな
る。解像度・フレーム変換を行った画像は、ＭＰＥＧ４
の画像情報符号化装置７においてマクロブロック単位の
処理を可能とするため、輝度信号の水平方向・垂直方向
の画素数が共に１６の倍数となるようにする。そのた
め、外部から入力される画像サイズ調整フラグにより、
画素の補填あるいは画素の除去を行う。

【００１３】画像サイズ調整フラグは、解像度・フレー
ムレート変換器の外部から入力され、画像の水平方向・
垂直方向の画素数が１６の倍数でない場合に対し、画像
への画素補填若しくは、除去を判定するためのフラグで
ある。

【００１４】次に、図５を用いて、画像サイズ調整フラ
グによる画像への処理を説明する。ＭＰＥＧ２の画像復
号化装置４より出力された画像の解像度がｍ画素×ｎ画
素であるとすると、ｍ、ｎは共に１６の倍数であるが、
水平方向・垂直方向がそれぞれ１／２にダウンサンプリ
ングされたｍ／２，ｎ／２は、１６の整数倍、若しく
は、１６で割って８画素の余りがある。前者の場合、、
画素数の調整を行う必要はない。後者の場合、マクロブ
ロック単位の処理を可能とするためには、画像サイズ調
整フラグによる画像への処理が必要となる。画像サイズ
調整フラグには、画素の補填と除去の二つの選択肢をも
つ。ｍ／２若しくはｎ／２を１６で割って、８画素が余
った場合においては、画像の除去を選択すれば、余った
８画素は除去される。すなわち、出力画像は（ｍ／２−
８）若しくは（ｎ／２―８）となる。一方画素の補填を
選択すれば、新たに作成した８画素若しくは元の画像か
ら複製した８画素若しくは画像に適した８画素を行、あ
るいは列の先頭若しくは、後部から付け加える。すなわ
ち、出力画像は（ｍ／２＋８）若しくは（ｎ／２＋８）
となる。結果として、変換後の画像解像度の横と縦は１
６の倍数となり、マクロブロック単位の処理に適したサ
イズを持つ画像が出力される。

【００１５】例として、今、入力となるＭＰＥＧ２の画
像圧縮情報を示すビットストリームの解像度が７２０×
４８０画素である場合を考える。この時、ｍ／２＝３６
０，ｎ／２＝２４０となるが、水平方向に関しては、１
６の倍数でない。このため画素の除去を行い、ｍ／２−
８＝３５２画素とするか、若しくは画素の補填を行って
ｍ／２＋８＝３６８画素とする。

【００１６】入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームと、出力となるＭＰＥＧ４の画像圧
縮情報を示すビットストリームにおけるマクロブロック
の対応関係を、図６を用いて説明する。

【００１７】図６Ａおよび図６Ｂの実線で区切られてい
る各正方格子の一つ一つがマクロブロックを示してい
る。図６ＡはＭＰＥＧ２の復号化装置４より出力された
画像、なわち、解像度変換前の画像である。図６Ｂは図
６Ａの画像を解像度・フレームレート変換装置５によ
り、水平方向・垂直方向の解像度とも１／２に変換され
た画像である。たとえば、変換前の図６Ａの左上の網掛
けされた１６×１６マクロブロックは、変換後の図６Ｂ
における左上の８×８ブロックになる。すなわち、図６
Ａに示した４つの網掛けした１６×１６マクロブロック
が、解像度変換された後、それぞれ図６Ｂに示した４つ
の網掛けした８×８ブロックになり、それらによって１
つの１６×１６マクロブロックが構成される。解像度変
換前と後の動きベクトル情報の相関が大きいため、変換
後の８×８ブロックの動きベクトル情報は、変換前の１
６×１６マクロブロックの動きベクトル情報より求める
ことができる。さらに、４つの８×８の動きベクトル情
報から１つの１６×１６の動きベクトル情報を求め、Ｍ
ＰＥＧ４の画像情報符号化装置７における処理に用いる
動きベクトル情報の４つの８×８の動きベクトルと１つ
１６×１６の動きベクトル情報が生成される。

【００１８】図７に、図２における動きベクトル変換装
置６の詳細な回路構成を示し、以下、これについて説明
する。すなわち、８はＭＰＥＧ２の１６×１６の動きベ
クトル→ＭＰＥＧ４の８×８の動きベクトル変換装置、
９は画像サイズ調整フラグによる動きベクトルへの調整
器、１０はＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置、１１はＭＰ
ＥＧ２のイントラマクロブロックに対する動きベクトル
補正器である。

【００１９】入力されたＭＰＥＧ２の画像圧縮情報を示
すビットストリーム中の動きベクトル、画像サイズなど
のパラメータは、ＭＰＥＧ２の１６×１６の動きベクト
ル→ＭＰＥＧ４の８×８の動きベクトル変換器８によ
り、補正前の８×８の動きベクトルが作成される。

【００２０】図８に、図７におけるＭＰＥＧ２の１６×
１６の動きベクトル→ＭＰＥＧ４の８×８の動きベクト
ル変換装置８の動作原理のフローチャートを示す。飛び
越し走査のＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいては、一般的にフレーム構造が用いられる
ため、以下ではフレーム構造の場合への処理のみの変換
方法を説明する。

【００２１】ステップＳＴ−１では、マクロブロック
が、イントラマクロブロック、スキップマクロブロック
及びインターマクロブロックのいずれであらかの判定を
行う。そのマクロブロックがイントラマクロブロックで
ある場合には、ステップＳＴ−２で、解像度変換後の８
×８ブロックが動きベクトル情報を持つことを想定す
る。その処理としては、まず８×８の動きベクトル情報
を０に設定し、さらに、図７の補正器１１による処理を
行うため、イントラモードフラグを設ける。すなわち、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてイントラマクロブロックである場合、イ
ントラモードフラグが立つ。

【００２２】そのマクロブロックがスキップマクロブロ
ックである場合には、ステップＳＴ−３で、各ブロック
の動きベクトル情報を０に設定する。

【００２３】そのマクロブロックがインターマクロブロ
ックである場合には、ステップＳＴ−４で、フレーム予
測かフィールド予測かの判定を行う。画像がフレーム構
造、フレーム予測である場合は、ステップＳＴ−５で、
フレーム予測に適した動きベクトルへの変換を行う。そ
の場合の動きベクトル変換の概念図を図９に示す。図３
で説明したように、変換後の動きベクトル情報の水平成
分は変換前の動きベクトル情報の水平成分と画像の水平
方向の解像度変換比から求められる。垂直成分は変換前
の動きベクトル情報の垂直成分と画像の垂直方向の解像
度変換比から求められる。すなわち、横方向の解像度を
１／２に変換した際、変換後の動きベクトル情報の水平
成分も変換前の１／２になる。縦方向の解像度を１／２
に変換した際、変換後の動きベクトル情報の垂直成分も
変換前の１／２になる。例えば、図９に示した動きベク
トル情報は、図９Ａの変換前の（８，１２）から図９Ｂ
の変換後の（４，６）になる。尚、この場合は、整数画
素の中間値（半画素）の間隔を１としている。図９Ａの
解像度変換前では、黒丸は整数画素の位置を示し、四角
は半画素の位置を示している。解像度変換後の半画素は
白丸で示す。図からわかるように、変換前の整数画素の
位置に示している動きベクトル情報は、変換後の整数画
素若しくは半画素の位置に示す。変換前の半画素の位置
に示している動きベクトル情報は解像度変換後は参照す
る画素がなくなる。そこで、変換後の動きベクトル情報
も予測画像の半画素の位置を示すようにする。それは本
来、復号された画像信号には、量子化による歪みが含ま
れているため、そのまま予測画像として使用すると予測
効率が低下し、画質劣化を引き起こす場合がある。これ
を低減するために、低域通過フィルタに相当する参照画
面での各画素間を１：１で直線補間した半画素精度が選
択されることもあり、これにより、画質劣化を避けるこ
とができる。したがって、ＭＰＥＧ４の画像情報符号化
装置７における処理においても、予測効率を向上し、画
質劣化を防ぐために、ＭＰＥＧ４で動きベクトル情報が
半画素の位置に示している場合、ＭＰＥＧ４の画像圧縮
情報を示すビットストリームへ変換した際も半画素の位
置に示すように変換する。変換前と変換後の動きベクト
ル情報の対応関係を、図１０の表図に示す。

【００２４】次に、ステップＳＴ−４の判定で、画像が
フレーム構造でフィールド予測である場合は、ステップ
ＳＴ−６に移行して、第一フィールド予測であるか、第
二フィールド予測であるかの判定を行う。まず、第一フ
ィールド予測であるときは、ステップＳＴ−７に移行し
て、フィールドの第一フィールド予測に適した動きベク
トルへの変換を行う。図１１にその動きベクトル変換の
概念図を示す。動きベクトル情報の水平成分は、図１０
と同様な処理が行われる。垂直方向は、第一フィールド
を抽出することにより、解像度を１／２に変換すること
を可能とする。また、予測も第一フィールド予測を行っ
ているため、変換前の動きベクトル情報は、そのまま変
換後の動きベクトル情報になる。

【００２５】ステップＳＴ−６の判定で、第二フィール
ド予測の場合は、ステップＳＴ−８に移行して、フィー
ルド予測の第二フィールド予測に適した動きベクトルへ
の変換を行う。その第二フィールド予測である場合の動
きベクトル変換の概念図を図１２及び図１３に示す。解
像度変換した際、第一フィールドのみが抽出されるた
め、変換後は第一フィールドの画素値を参照画像として
用いる。そのため、ＭＰＥＧ２で予測画像として用いた
第二フィールドの画素値を解像度変換後の第一フィール
ド予測に変換するように、動きベクトル情報の時空間補
正を行う。図１２は、第二フィールド予測から近似的に
第一フィールド予測に変換するための空間的な補正を行
う手法を示した図である。すなわち、動きベクトル情報
の垂直成分に１を加える。図からわかるように、第二フ
ィールド予測で求めた動きベクトル情報の垂直成分に１
を加えると、１行が繰り上げられることによって、第二
フィールドが第一フィールドと同様の位相に補正され、
空間上で、第一フィールド予測で求めた動きベクトル情
報のようになる。次に示す数１の式は空間補正により、
第一フィールドと同様な空間位置にある第二フィール
ド、すなわち近似第一フィールドを予測とした時、動き
ベクトルＭＶ_topの垂直成分を表している。

【００２６】

【数１】垂直成分：近似ＭＶ_top＝ＭＶ_bottom＋１

【００２７】また、飛び越し走査のＭＰＥＧ２の画像圧
縮情報には第一フィールドと第二フィールドとで時間ず
れがある。そのため、第二フィールドから近似された第
一フィールドと実際の第一フィールドとの時間ずれの補
正を行う。図１３は各フィールドの時間的位置関係を示
している。ここで、第一フィールドと第二フィールドの
間隔を１とし、ａをＩピクチャの第二フィールドとＰピ
クチャの第一フィールドの間隔とすると、ａは１，３，
５，７，……のような奇数になる。尚、ａが１の場合
は、画像の構成がＩＰＰＰ…の場合である。時間補正し
た動きベクトルＭＶ′を、数２の式に示す。

【００２８】

【数２】垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・近似ＭＶ_top

【００２９】数１の式を数２の式に代入すると、変換後
の動きベクトル情報の垂直成分が数３の式のようにな
る。

【００３０】

【数３】垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・（Ｍ
Ｖ_bottom＋１）

【００３１】尚、変換後の動きベクトル情報の水平成分
は、変換前の動きベクトル情報に、（ａ＋１）／ａを乗
じ、時間的な補正を行った後、図１０に示した動作原理
に基づいて求められる。

【００３２】動きベクトル情報の垂直成分に対して、必
要に応じて、時間的補正を行った後、空間的な補正を行
ってもよい。その場合、動きベクトルＭＶ′の垂直成分
を４の式に示す。尚、水平成分は空間・時間補正（空間
補正を行ってから時間補正を行う）と時間・空間補正
（時間補正が行ってから空間補正を行う）は同様な値と
なる。

【００３３】

【数４】垂直成分：ＭＶ′＝｛（ａ＋１）／ａ｝・ＭＶ
_bottom＋１

【００３４】数３の式と数４の式との差、すなわち、空
間・時間補正を行った場合と、時間・空間補正を行った
場合の動きベクトル情報の垂直成分の差は１／ａにな
る。従って、ａの値によって、その差による影響が異な
るので、ａが１の場合と、１より大きい、すなわち３，
５，７，……の２つの場合における補正方法を説明す
る。

【００３５】まず、ａ＝１の場合について、数３の式の
ａに１を代入すると、動きベクトル情報の垂直成分は数
５の式になる。

【００３６】

【数５】垂直成分：ＭＶ′＝２×（ＭＶ_bottom＋１）

【００３７】数４の式のａに１を代入すると、動きベク
トル情報の垂直成分は数６の式になる。

【００３８】

【数６】垂直成分：ＭＶ′＝２×（ＭＶ_bottom＋１）−１

【００３９】その結果、変換前の動きベクトルＭＶ
_bottomに０，１，２，……を代入すると、数５の式によ
る値は２，４，６，……のような偶数になる。すなわ
ち、空間・時間補正を行うと、変換前の動きベクトル情
報は、整数画素の位相を示す場合も、半画素の位相を示
す場合も、変換後は全て整数画素の位相を示すことにな
る。また、数６の式による値は、１，３，５，……のよ
うな奇数になる。すなわち、時間・空間補正を行うと、
変換前の動きベクトル情報は、整数画素の位相を示す場
合も、半画素の位相に存在する場合も、変換後は全て半
画素の位相を示すことになる。したがって、変換前整数
画素の位相を示す動きベクトル情報は、変換後も整数画
素の位相を示すように空間・時間補正を行う。また、変
換前半画素の位置に示している動きベクトル情報は、変
換後も半画素の位置に示すように時間・空間補正を行
う。

【００４０】以上の動きベクトル変換処理が終了した
後、補正前のＭＰＥＧ４の８×８の動きベクトル情報が
出力される。出力された８×８の動きベクトル情報は、
画像サイズ調整フラグによる動きベクトルへの調整器９
（図７）に伝送され、外部より入力された画像サイズ調
整フラグにより、画像サイズに適した動きベクトル情報
を出力する。

【００４１】画像サイズ調整フラグによる動きベクトル
調整器９におけるフローチャートを図１４に示し、以下
これについて説明する。ステップＳＴ−１１で、入力画
像サイズｍ画素× n画素に対して、ｍ／２，ｎ／２が共
に１６の倍数であるか否かの判定を行い、ＹＥＳあれ
ば、図２の動きベクトル変換装置６から出力されたＭＰ
ＥＧ４の８×８の動きベクトル情報を、処理することな
くそのまま出力する。ステップＳＴ−１１の判定でＮ
Ｏ、すなわち、ｍ／２，ｎ／２のいずれかが１６の倍数
でない場合は、ステップＳＴ−１２に移行して、外部か
ら入力された画像サイズ調整フラグが作動し、画素除去
か否かの判定を行い、ＹＥＳ、すなわち、画素除去の場
合は、除去された８画素の８×８の動きベクトル情報を
出力しないで、他の８×８の動きベクトル情報を出力す
る。ステップＳＴ−１２の判定で、ＮＯのときは、ステ
ップＳＴ−１３に移行して、画素補填か否かの判定を行
い、ＹＥＳ、すなわち、画素補填の場合は、補填された
８画素の８×８の動きベクトル情報を０に設定し、他の
入力された８×８の動きベクトル情報と合わせて出力さ
れる。

【００４２】再び図７に戻って説明するに、画像サイズ
調整フラグによる動きベクトルへの調整器９より出力さ
れた画像サイズに適した８×８の動きベクトル情報は、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０によって変換され
る。以下に、８×８の動きベクトル情報が、ＭＰＥＧ４
の８×８の動きベクトル→ＭＰＥＧ４の１６×１６の動
きベクトル変換装置１０によって変換される動作につい
て述べる。

【００４３】第一の方法として、マクロブロックを構成
する４つのブロックの中、イントラでないマクロブロッ
クから変換されたブロックの動きベクトルの和をインタ
ーマクロブロックから変換されたブロックの数で割った
平均を１６×１６の動きベクトル情報として出力する。

【００４４】第二の方法として、ＭＰＥＧ４の８×８の
動きベクトル→ＭＰＥＧ４の１６×１６の動きベクトル
変換装置１０においては、ＭＰＥＧ２の１６×１６の動
きベクトル→ＭＰＥＧ４の８×８の動きベクトル変換装
置８において生成された、そのマクロブロックに対する
ＭＰＥＧ４の８×８の動きベクトル情報のうち、最も符
号化効率が高いと考えられるマクロブロックより生成さ
れたものを選択し、ＭＰＥＧ４の１６×１６の動きベク
トル情報として出力する。

【００４５】符号化効率の判定は、画像情報変換装置の
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるマクロブロック毎の情報を基に行う。第
一の方法は、４つのマクロブロックのうち、最も非零の
ＤＣＴ係数の少ないマクロブロックを符号化効率が高い
とする方法である。第二の方法は、４つのマクロブロッ
クのうち、輝度成分のＤＣＴ係数に割り当てられたビッ
ト数の最も少ないマクロブロックを符号化効率が高いと
する方法である。第三の方法は、４つのマクロブロック
のうち、ＤＣＴ係数に割り当てられたビット数の最も少
ないマクロブロックを符号化効率が高いとする方法であ
る。第四の方法は、４つのマクロブロックのうち、動き
ベクトル情報を含めた、マクロブロックに割り当てられ
た全ビット数の最も少ないマクロブロックを符号化効率
が高いとする方法である。第五の方法は、４つのマクロ
ブロックのうち、割り当てられた量子化スケールが最も
小さいマクロブロックを符号化効率が高いとする方法で
ある。第六の方法は、４つのマクロブロックのうち、コ
ンプレクシティの最も低いマクロブロックを符号化効率
が高いとする方法である。各マクロブロックに割り当て
られたコンプレクシティＸは、そのマクロブロックに割
り当てられた量子化スケールＱ、及びビット数Ｂを用い
て以下のように計算される。

【００４６】

【数７】Ｘ＝Ｑ・Ｂ

【００４７】ここで、Ｂは、マクロブロック全体に割り
当てられたビット数でも良いし、ＤＣＴ係数に割り当て
られたビット数でも良いし、輝度成分に割り当てられた
ＤＣＴ係数に割り当てられたビット数でも良い。

【００４８】図７で、ＭＰＥＧ４の８×８の動きベクト
ル→ＭＰＥＧ４の１６×１６の動きベクトル変換装置１
０における第三の方法として、ＭＰＥＧ２の１６×１６
の動きベクトル→ＭＰＥＧ４の８×８の動きベクトル変
換装置８において生成された、そのマクロブロックに対
するＭＰＥＧ４の８×８の動きベクトル情報のうち最も
重み付けが高いと考えられるマクロブロックより生成さ
れたものを２回重複して数え、合計５つの８×８の動き
ベクトル情報のうち、中間値の長さを持つ動きベクトル
情報の最も符号化効率が高いものを選択し、ＭＰＥＧ４
の１６×１６の動きベクトル情報として出力する。ここ
で動きベクトルの長さの比較は水平方向、垂直方向に対
して、それぞれの長さの、二乗根の和を用い、平方根を
もとめる処理は省略する。

【００４９】重み付けの判定は、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームにおけるマクロ
ブロック毎の情報を基に行う。すなわち、第一の方法
は、４つのマクロブロックのうち、最も非零ＤＣＴの係
数の少ないマクロブロックを重み付けが高いとする方法
である。第二の方法は、４つのマクロブロックのうち、
輝度成分のＤＣＴ係数に割り当てられたビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第三の方法は、４つのマクロブロックのうち、ＤＣ
Ｔ係数に割り当てられたビット数の最も少ないマクロブ
ロックを重み付けが高いとする方法である。第四の方法
は、４つのマクロブロックのうち、動きベクトルを含め
た、マクロブロックに割り当てられた全ビット数の最も
少ないマクロブロックを重み付けが高いとする方法であ
る。第五の方法は、４つのマクロブロックのうち、割り
当てられた量子化スケールが最も小さいマクロブロック
を重み付けが高いとする方法である。第六の方法は、４
つのマクロブロックのうち、コンプレクシティの最も低
いマクロブロックを重み付けが高いとする方法である。
各マクロブロックに割り当てられたコンプレクシティＸ
は、そのマクロブロックに割り当てられた量子化スケー
ルＱ、及びビット数Ｂを用い、数７の式に基づいて算出
する。Ｂは、マクロブロック全体に割り当てられたビッ
ト数でも良いし、ＤＣＴ係数に割り当てられたビット数
でも良いし、輝度成分に割り当てられたＤＣＴ係数に割
り当てられたビット数でも良い。

【００５０】一方、画像サイズ調整フラグによる動きベ
クトルへの調整器９より出力された、画像サイズに適し
た８×８の動きベクトル情報は、ＭＰＥＧ２のイントラ
マクロブロックに対する動きベクトル補正器１１に入力
される。そこでＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてはイントラであったマクロブロック
から変換されたブロックの８×８の動きベクトル情報
は、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の
１６×１６の動きベクトル変換装置１０によって求めら
れた１６×１６の動きベクトル情報に置き換えられ、補
正される。補正後の８×８の動きベクトル情報と、ＭＰ
ＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６×１
６の動きベクトル変換装置１０で求めた１６×１６の動
きベクトル情報を合わせて、ＭＰＥＧ４動きベクトル情
報として出力する。

【００５１】図１５は、図７における、ＭＰＥＧ２のイ
ントラマクロブロックに対する動きベクトル補正器１１
の動作説明ための図である。画像サイズに適した８×８
の動きベクトル情報がＭＰＥＧ２のイントラマクロブロ
ックに対する補正器１１に入力し、イントラモードフラ
グが立っている場合、すなわち、ＭＰＥＧ２の画像圧縮
情報を示すビットストリームにおいてはイントラマクロ
ブロックである場合、スイッチＳＷの可動接点ｍが固定
接点ａ側に切換えられて、そのイントラマクロブロック
から変換された８×８ブロックの動きベクトル情報を、
ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥＧ４の１６
×１６の動きベクトル変換装置１０より求められた１６
×１６の動きベクトル情報に置き換えられる。若しく
は、そのイントラマクロブロックの周辺に存在するイン
ターマクロブロックの動きベクトル情報から変換された
動きベクトル情報に置き換えてもよい。更にまた、イン
トラマクロブロックに一番近いインターマクロブロック
の動きベクトル情報から変換された動きベクトル情報に
してもよい。尚、４つのブロックともイントラマクロブ
ロックから変換された場合は、４つとも動きベクトルが
０となり、ＭＰＥＧ４の８×８の動きベクトル→ＭＰＥ
Ｇ４の１６×１６の動きベクトル変換装置１０によって
求められる１６×１６の動きベクトルも０となるため、
ＭＰＥＧ４の画像符号化に用いる動きベクトルは０とな
り、マクロブロックタイプがイントラモードとなる。ま
た、イントラモードフラグが立たない場合、すなわち、
ＭＰＥＧ２ではイントラマクロブロックがない場合、ス
イッチＳＷの可動接点ｍが固定接点ｂ側に切換えられ
て、入力された８×８の動きベクトル情報がそのまま出
力される。

【００５２】次に生成された動きベクトル情報の再検索
を行う場合について説明する。インターマクロブロック
に対し、画像がフレーム構造、フレーム予測である場合
の動きベクトル変換の概念図は図９に示したとおりであ
る。図からわかるように、変換前整数画素の位相を示し
ている動きベクトル情報は、変換後整数画素若しくは半
画素の位相を示すが、変換前半画素の位相を示している
動きベクトル情報は解像度変換後参照する画素がなくな
る。このような場合、変換後の動きベクトル情報も予測
画像の最も近い整数画素位置を示すようにする。これ
は、後に動きベクトル補整において動きベクトル周辺画
素を再検索する際に、サーチウィンドウの中心画素値を
整数画素にする為である。まず、サーチウィンドウ内で
最も予測誤差が少ない整数画素の動きベクトル情報を求
め、次にその整数画素周辺の９半画素値を検索すること
により処理のステップを削減している。変換前と変換後
の動きベクトル情報の対応関係は図１０に示した通りで
ある。従来例の図９に示された半画素動きベクトル情報
を先に生成し、これを中心としてサーチを行うことも考
えられるが、処理量の増大を招く。

【００５３】画像がフレーム構造でフィールド予測であ
る場合であるが、まず、第一フィールド予測である時に
ついて、動きベクトル変換の概念図は図１１に示した通
りである。すなわち、動きベクトル情報の水平成分は、
フレーム構造、フレーム予測である場合と同様な処理が
行われる。垂直方向は、第一フィールドを抽出すること
により、解像度を１／２に変換することを可能とする。
また、予測も第一フィールド予測を行っているため、変
換前の動きベクトル情報は、そのまま変換後の動きベク
トル情報になる。

【００５４】第二フィールド予測である場合の動きベク
トル変換の概念図は図１２に示した通りである。すなわ
ち、解像度変換した際、第一フィールドのみが抽出され
るため、変換後は第一フィールドの画素値を参照画像と
して用いる。フィールドのライン補整及び時間方向の動
きベクトル補正は従来例の図１２に示したのと同様な方
法により補整を行い、その後、水平方向の画素値は変換
後に整数画素を示すように、フレーム構造、フレーム予
測である場合と同様な処理が行われる。

【００５５】図１６に動きベクトル変換装置の構成を示
す。すなわち、１２はＭＰＥＧ２→ＭＰＥＧ４の８×８
ＭＶ変換装置、１３は動きベクトル整数画素検索装置、
１４は８×８ＭＶ→１６×１６ＭＶ合成装置、１５は動
きベクトル整数画素検索装置、１６は動きベクトル半画
素検索装置である。

【００５６】まず、ＭＰＥＧ２→ＭＰＥＧ４の８×８Ｍ
Ｖ変換装置１２においては、動きベクトル情報の空間・
時間補整を行い８×８の動きベクトル情報を生成する。
次に、動きベクトル整数画素検索装置１３において、８
×８の動きベクトル情報の再検索処理を行う。例えば、
生成された８×８の動きベクトル情報の参照先を中心
に、検索サーチウィンドウを整数画素で縦横２画素ずつ
で検索を行う。これにより８×８の動きベクトル情報の
予測精度を向上させることが可能である。次に一つのマ
クロブロックを構成する４つの８×８の動きベクトル情
報それぞれに対して、再検索された予測誤差及び、再検
索処理を施した８×８の動きベクトル情報を８×８ＭＶ
→１６×１６ＭＶ合成装置１４へ入力する。

【００５７】８×８の動きベクトル情報を８×８ＭＶ→
１６×１６ＭＶ合成装置１４では、４つの８×８の動き
ベクトル情報に対して、再検索時にもとめられた予測残
差が最も小さい動きベクトル情報を抽出し、１６×１６
の動きベクトル情報に割り当てる。次に生成された１６
×１６の動きベクトル情報に対して、動きベクトル整数
画素検索装置１５において再検索処理を行い、１６×１
６の動きベクトル情報の予測精度を向上させる。これに
よりＭＰＥＧ４の８×８の動きベクトル情報及び、１６
×１６の動きベクトル情報を生成し、出力する。出力さ
れた８×８の動きベクトル情報及び１６×１６の動きベ
クトル情報は、それぞれ半画素検索装置１６に入力さ
れ、半画素精度で８×８の動きベクトル情報及び１６×
１６の動きベクトル情報が出力される。

【００５８】動きベクトル整数画素検索装置１３及び１
５では指定されたサーチウィンドウ内で最も予測画素値
が少ない整数画素動きベクトルを選択し、次に半画素検
索装置１６において、整数画素値で選択された最小予測
誤差の動きベクトルの周辺９半画素値を検索し、最も予
測誤差が少ない最適な動きベクトル値を出力する。

【００５９】ところで、図２に示した画像情報変換装置
においては、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームのＢピクチャのみを破棄するため、
例えば入力となるＭＰＥＧ２の画像圧縮情報が３０Ｈｚ
である場合、出力となるＭＰＥＧ４の画像圧縮情報を示
すビットストリームは１０Ｈｚとなる。しかしながら、
絵柄、及び出力となるＭＰＥＧ４の画像圧縮情報を示す
ビットストリームの符号量（ビットレート）によっては
図２に示した画像情報変換装置を用いても良好な画質が
得られない場合がある。このような場合、Ｂピクチャの
みならず、Ｉ若しくはＰピクチャも一枚おきに破棄する
ことで、５ＨｚのＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームへ変換することが考えられる。

【００６０】図１７に、かかる変換を行う際の、入力と
なるＭＰＥＧ２の画像圧縮情報を示すビットストリーム
におけるピクチャ・コーディング・タイプ（ｐｉｃｔｕ
ｒｅ−ｃｏｄｉｎｇ−ｔｙｐｅ）と、出力となるＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームにおけるブ
イオーピー・コーディング・タイプ｛ｖｏｐ（VideoObj
ect Plane) −ｃｏｄｉｎｇ−ｔｙｐｅ｝の対応の一例
を示す。ＧＯＰ（画像グルーブ）構造がｎ＝１５；ｍ＝
３である３０ＨｚのＭＰＥＧ２の画像圧縮情報を示すビ
ットストリームを、ＧＯＶ（Group of VOP,VOP:Video O
bject Plane)構造がｎ＝５；ｍ＝１である５ＨｚのＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームに変換す
る場合、入力となるＭＰＥＧ２の画像圧縮情報を示すビ
ットストリーム中の、Ｉピクチャ及びＰピクチャを一枚
おきに抽出し、ＭＰＥＧ４の画像圧縮情報を示すビット
ストリームに変換する。図１７の例では、入力となるＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームの２Ｇ
ＯＰが、ＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームの１ＧＯＶと対応するため、Ｐピクチャを破棄する
場合とＩピクチャを破棄する場合が考えられる。ＭＰＥ
Ｇ２動きベクトル情報からＭＰＥＧ４動きベクトル情報
を求める方法として、動きベクトル情報を伸張する方法
及び動きベクトル情報を足し合わせる方法の２通りが考
えられるが、これらのうち、符号化効率の高い動きベク
トル情報を適応的に選択し、ＭＰＥＧ４動きベクトル情
報として出力し、ＭＰＥＧ４の画像符号化処理を行う。

【００６１】このような適応的な選択を行う動きベクト
ル変換装置を図１８に示し、以下これについて説明す
る。すなわち、１７はＭＶ及びＭＢ情報バッファ、１８
は足し合わせベクトル判定装置、１９は参照ＭＢアドレ
ス算出装置、２０は動きベクトル空間・時間補正装置、
２１はＭＶ再検索装置、２２は動きベクトル伸張空間
・時間補正装置、２３はＭＶ再検索装置、２４は８×８
ＭＶ選択装置、２５は８×８ＭＶ→１６×１６ＭＶ合成
装置、２６は１６×１６ＭＶ再検索装置である。

【００６２】以下に、まず、動きベクトル情報を伸張に
より合成する方法及び足し合わせにより合成する方法に
ついて述べる。図１９に、動きベクトル情報を伸張によ
り合成する方法を示す。入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームで、Ｉピクチャにおいて
は動きベクトル情報が存在しない為、Ｐピクチャ内での
そのマクロブロックの動きベクトル情報に、破棄された
Ｉピクチャの動きベクトル情報を足し合わせて動きベク
トル情報を合成することは不可能である。したがって、
上述の方式に基づき、そのマクロブロックの動きベクト
ル情報をスケーリングにより空間・時間補整を施し、次
に破棄されたＩピクチャの直前のＩまたはＰピクチャよ
り変換された動きベクトル情報の大きさを２倍に伸張す
る。これにより、そのＰ−ＶＯＰの動きベクトル情報が
破棄されたフレームの直前のＩまたはＰピクチャより変
換されたＶＯＰを参照する。このようにして、空間・時
間補整によるスケーリングを行って後に時間方向に２倍
に伸張された動きベクトル情報を生成し、８×８の動き
ベクトル情報として出力する。同様の方法を、Ｐピクチ
ャを破棄する際に適用することも可能である。

【００６３】動きベクトル情報を足し合わせる手法につ
いて図２０、図２１、図２２及び図２３を用いて説明す
る。まず、図２０に足し合わせにより動きベクトル情報
を合成する方法の概念図を示す。破棄されるＰピクチャ
に含まれるマクロブロックは動きベクトル情報を有して
いる為、そのマクロブロックの動きベクトル情報に破棄
されるＰピクチャの動きベクトル情報を足し合わせ、破
棄されるＰピクチャの前のフレームを参照する動きベク
トル情報を生成する。図２０に示すように、そのマクロ
ブロックの動きベクトル情報は破棄されるフレームを参
照するが、このとき参照する画素は複数のマクロブロッ
クに跨る。図２１に参照画素がどのように複数のマクロ
ブロックに重なるかを示す。図からわかるように、参照
画素は１つ、または２つ、または４つのマクロブロック
に重なる場合がある。破棄されるＰピクチャの動きベク
トル情報及び、マクロブロックモード並びに予測モード
またはビット数、または量子化スケールは後に動きベク
トル情報の足し合わせの合成を行う為、ＭＢ及びＭＶ情
報バッファ１７にフレーム単位で格納する。ＭＰＥＧ２
からＭＰＥＧ４への動きベクトル変換を行うそのマクロ
ブックにおいて、まず捨てられたＰフレーム上でその動
きベクトルが参照する座標を計算する。複数のマクロブ
ロックに重なる場合には予め定めたパラメータＸに基づ
いて、マクロブロックの優先順位を判定する。すなわ
ち、第一の方法はＸをマクロブロックに重なっている画
素数とし、第２の方法はＸをマクロブロックの重なって
いる画素数／マクロブロックビット数とし、第３の方法
はＸをマクロブロックの重なっている画素数／量子化ス
ケールとし、第４の方法はＸをマクロブロックの重なっ
ている画素数／（マクロブロックビット数×量子化スケ
ール）とし、第５の方法はＸを１／マクロブロックビッ
ト数とし、第６の方法はＸを１／量子化スケールとし、
第７の方法はＸを１／（マクロブロックビット数×量子
化スケール）とする。パラメータＸの最も大きいものを
最大値とし、パラメータＸの最も小さいものを最小値と
する。

【００６４】図２２に破棄するフレームがＰピクチャ
で、足し合わせにより動きベクトル情報を合成する際の
フローチャートを示す。まず、ステップＳＴ−２１で、
そのマクロブロックのＭＰＥＧ２の動きベクトル情報が
参照する画素に重複する、マクロブロックを構成する１
つまたは２つまたは４つのマクロブロックのうち、マク
ロブロックモードがＮｏｔＣｏｄｅｄであり、尚、且つ
重複する画素値が閾値Ｔ以上であるマクロブロックを検
索する。閾値Ｔは例えば１００画素とする。ステップＳ
Ｔ−２１の判定でＹＥＳ、すなわち、重複するマクロブ
ロックのうち一つでもＮｏｔＣｏｄｅｄのマクロブロッ
クが含まれていれば、ステップＳＴ−２２に移行して、
そのマクロブロックアドレスが最も若いＮｏｔＣｏｄｅ
ｄのマクロブロックの動きベクトル情報を選択する。こ
こで、「ＮｏｔＣｏｄｅｄ」は、ＭＰＥＧ２において、
ＤＣＴ係数ビットが発生しないことを意味するマクロブ
ロックモードを言う。

【００６５】ステップＳＴ−２１の判定でＮＯのとき
は、ステップＳＴ−２３に移行して、そのマクロブロッ
クのＭＰＥＧ２の動きベクトル情報が参照する画素に重
複する、マクロブロックを構成する１つまたは２つまた
は４つのマクロブロックのうち、マクロブロックモード
がＮｏＭＣであり、尚、且つ重複する画素値が閾値Ｔ以
上であるマクロブロックを検索する。ステップＳＴ−２
３の判定で、ＹＥＳ、すなわち、重複するマクロブロッ
クのうち一つでもＮｏＭＣのマクロブロックが含まれて
いれば、ステップＳＴ−２４に移行して、そのマクロブ
ロックアドレスが最も若いＮｏＭＣのマクロブロックの
動きベクトル情報を選択する。そのマクロブロックのＭ
ＰＥＧ２動きベクトル情報が参照する画素に重複する、
マクロブロックを構成する１つまたは２つまたは４つの
マクロブロックのうち重複するマクロブロックにＮｏｔ
Ｃｏｄｅｄ及びＮｏＭＣが存在しない場合には、ステッ
プＳＴ−２５に移行して、マクロブロックモードがイン
トラマクロブロックか否かを判定し、ＮＯであれば、ス
テップＳＴ−２８に移行し、ＹＥＳであれば、ステップ
ＳＴ−２６に移行して、全てのマクロブロックモードが
イントラマクロブロックか否かを判定し、ステップＳＴ
−２６の判定で、ＮＯのときは、ステップＳＴ−２５に
戻り、ＹＥＳであれば、０の動きベクトル情報を選択す
る。すなわち、上述のパラメータＸが最も大きいマクロ
ブロックより順番にマクロブロックモードがイントラマ
クロブロックであるか否かを判定する（ステップＳＴ−
２６）。もし、参照マクロブロックがイントラマクロブ
ロックであれば、次にパラメータＸが大きいマクロブロ
ックがイントラマクロブロックであるかを判定する（ス
テップＳＴ−２６）。そのマクロブロックが参照する画
素に重複するマクロブロック全てがイントラマクロブロ
ックであれば（ステップＳＴ−２５）、０の動きベクト
ル情報を選択する（ステップＳＴ−２７）。インターマ
クロブロックを検索した場合には、次の判定ルーチンに
移る。ここで、「ＮｏＭＣ」は、ＭＰＥＧ２において、
動きベクトルが（０，０）であることを意味するマクロ
ブロックモードを言う。

【００６６】ステップＳＴ−２５の判定で、ＮＯのと
き、マクロブロックモードがイントラマクロブロックで
はなく、インターマクロブロックであるときは、ステッ
プＳＴ−２８に移行して、予測モードが、第２フィール
ドを参照するフィールド予測であるか否かを判定する。
ステップＳＴ−２８の判定でＹＥＳ、すなわち、第２フ
ィールドを参照するフィールド予測であるときは、ステ
ップＳＴ−２８に移行して、パラメータＸが次に大きい
参照マクロブロックにおいて同様の判定を行う。ステッ
プＳＴ−２９で、Ｎ（イントラマクロブロックの個数）
個の参照マクロブロックが第２フィールドを参照するフ
ィールド予測であるか否かの判定を行い、ＹＥＳのとき
は、ステップＳＴ−３０に移行して、最も大きなパラメ
ータＸをもった参照マクロブロックの動きベクトル情報
を選択する。Ｎは予め定めた数であり、１〜４の値を持
つ。

【００６７】ステップＳＴ−２８の判定でＮＯのとき、
すなわち、第２フィールドを参照するフィールド予測で
ないマクロブロックを検索した場合には、ステップＳＴ
−３１に移行して、そのマクロブロックの動きベクトル
情報を選択する。

【００６８】このようにしてそのマクロブロックの動き
ベクトル情報に足し合わせる動きベクトル情報を選択す
る。

【００６９】図２３を参照して、第２フィールドを参照
する動きベクトル情報の時間補正を説明する。足し合わ
せた動きベクトル情報のスケーリング方法は従来の技術
で述べた動きベクトル情報の空間・時間補正を施すスケ
ーリング方法と同様の方法で行う。よって、足し合わせ
た動きベクトル情報が参照フレームの第２フィールドを
参照する場合は、動きベクトル情報の垂直成分に対し、
フィールド補正を行い、更に時間方向のベクトル補整と
して１フィールド間隔分動きベクトルを伸張する。図に
示すようにそのフィールドと参照する第２フィールドの
フィールド間隔がａであり、よって１フィールド分の時
間補整を施すのに動きベクトルに（ａ＋１）／ａをかけ
る。このようにして８×８の動きベクトル情報を求め
て、出力する。

【００７０】再び図１８を参照するに、破棄されるフレ
ームが１ピクチャの場合には、入力となるＭＰＥＧ２動
きベクトル情報は動きベクトル伸張空間・時間補正装
置２２に伝送され、Ｐピクチャの場合には、ＭＶ及びＭ
Ｂ情報バッファ１７及び動きベクトル伸張空間・時間
補正装置２２の双方に伝送される。

【００７１】ＭＶ及びＭＢ情報バッファ１７において
は、破棄するＰピクチャの動きベクトル情報及びマクロ
ブロック予測モード、マクロブロック毎のビット量及び
量子化スケールをフレーム単位で格納する。参照ＭＢア
ドレス算出装置１９においては、破棄するＰピクチャ
の、次のＰピクチャの動きベクトル情報を入力とし、そ
のそのマクロブロックの参照位置を計算する。動きベク
トルの参照位置は足し合わせ動きベクトル判定装置１８
に入力され、参照位置を元に、参照画素に重なる、破棄
するＰピクチャに含まれるマクロブロックのアドレスを
算出する。足し合わせ動きベクトル判定装置１８におい
ては、この情報を利用し、上段に述べた足し合わせる動
きベクトル情報を選択する手法に基づき処理を行い、動
きベクトル情報を出力する。出力された動きベクトル情
報はそのマクロブロックの動きベクトル情報と足し合わ
せ（合成）が行われ、合成された動きベクトル情報が生
成される。次に合成された動きベクトル情報は動きベク
トル空間・時間補正装置２０に入力され、上述の空間・
時間の補整スケーリングにより変換を行い、動きベクト
ル情報を生成する。動きベクトル伸張空間時間補正装
置２２においては、上述の方法により、ＭＰＥＧ４の８
×８の動きベクトル情報が伸張方式により求められ、こ
のＭＰＥＧ４の８×８の動きベクトル情報は、ＭＶ再検
索装置２３によって高精度化される。ＭＶ再検索装置２
１及び２３より出力された動きベクトル情報は８×８Ｍ
Ｖ選択装置２４に入力され、より予測残差の少ない動き
ベクトル情報を８×８の動きベクトル情報として出力す
る。８×８ＭＶ→１６×１６ＭＶ合成装置２５において
は、上述の方法により、８×８ＭＶ選択装置２４の出力
となる８×８の動きベクトル情報を基に、１６×１６の
動きベクトル情報の合成を行い、１６×１６ＭＶ再検索
装置２５においては、８×８ＭＶ→１６×１６ＭＶ合成
装置２５において生成された１６×１６の動きベクトル
情報を、周辺数画素サーチすることで高精度化する。こ
れによりＭＰＥＧ４の８×８の動きベクトル情報及び１
６×１６の動きベクトル情報を生成し、出力する。

【００７２】

【発明が解決しようとする課題】ところで、図１８に示
した動きベクトル変換装置では、破棄されるフレームが
Ｐピクチャの場合、伸張により合成された動きベクトル
情報と、足し合わせにより合成された動きベクトル情報
の両方を生成すること、及びこれらの動きベクトル情報
の予測誤差を算出することは演算量の増大を招く。

【００７３】かかる点に鑑み、本発明は、飛び越し走査
のＭＰＥＧ２の画像圧縮情報を示すビットストリームを
入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を示す
ビットストリームを出力とすると共に、入力となるＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームのＢピク
チャを破棄し、更にＩピクチャ若しくはＰピクチャをも
一枚おきに破棄することで、フレームレートの変換を実
現する画像情報変換方法における、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームにおけるＭＰ
ＥＧ２の１６×１６の動きベクトルを入力とし、ＭＰＥ
Ｇ４の８×８の動きベクトル及びＭＰＥＧ４の１６×１
６の動きベクトルを生成する動きベクトル変換方法にお
いて、符号化効率の判定に伴う演算量を削減することの
できる動きベクトル変換方法を提案しようとするもので
ある。

【００７４】又、本発明は、飛び越し走査のＭＰＥＧ２
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とし、入力となるＭＰＥＧ２の画像圧縮情報
を示すビットストリームのＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャをも一枚おきに破棄するこ
とでフレームレートの変換を実現する画像情報変換装置
における、入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＭＰＥＧ２の１６×１６の動
きベクトルを入力とし、ＭＰＥＧ４の８×８の動きベク
トル及びＭＰＥＧ４の１６×１６の動きベクトルを生成
する動きベクトル変換装置において、符号化効率の判定
に伴う演算量を削減することのできる動きベクトル変換
装置を提案しようとするものである。

【００７５】

【課題を解決するための手段】第１の発明は、飛び越し
走査のＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムを入力とし、順次走査のＭＰＥＧ４の画像圧縮情報を
示すビットストリームを出力とすると共に、入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームのＢ
ピクチャを破棄し、更にＩピクチャ若しくはＰピクチャ
をも一枚おきに破棄することで、フレームレートの変換
を実現する画像情報変換方法における、入力となるＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームにおける
ＭＰＥＧ２の１６×１６の動きベクトルを入力とし、Ｍ
ＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１６
×１６の動きベクトルを生成する動きベクトル変換方法
において、Ｉピクチャ若しくはＰピクチャを一枚おきに
破棄することにより行われる動きベクトル情報の合成
を、伸張若しくは足し合わせにより行い、その伸張とそ
の足し合わせのうち予測効率の高い方を選択してＭＰＥ
Ｇ４の符号化に用い、符号化効率の判定を、出力となる
ＭＰＥＧ４の画像圧縮情報を示すビットストリームにお
けるＧＯＶの最初のＰ−ＶＯＰ、或いはシーンチェンジ
の直後にのみ行うことで、符号化効率の判定に伴う演算
量を削減するようにした動きベクトル変換方法である。

【００７６】この第１の発明によれば、Ｉピクチャ若し
くはＰピクチャを一枚おきに破棄することにより行われ
る動きベクトル情報の合成を、伸張若しくは足し合わせ
により行い、その伸張とその足し合わせのうち予測効率
の高い方を選択してＭＰＥＧ４の符号化に用い、符号化
効率の判定を、出力となるＭＰＥＧ４の画像圧縮情報を
示すビットストリームにおけるＧＯＶの最初のＰ−ＶＯ
Ｐ、或いはシーンチェンジの直後にのみ行うことで、符
号化効率の判定に伴う演算量を削減する。

【００７７】第２の発明は、飛び越し走査のＭＰＥＧ２
の画像圧縮情報を示すビットストリームを入力とし、順
次走査のＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームを出力とし、入力となるＭＰＥＧ２の画像圧縮情報
を示すビットストリームのＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャをも一枚おきに破棄するこ
とでフレームレートの変換を実現する画像情報変換装置
における動きベクトル変換装置において、入力となるＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームにおけ
るＭＰＥＧ２の１６×１６の動きベクトルを入力とし、
ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ４の１
６×１６の動きベクトルを生成する動きベクトル変換装
置であって、Ｉピクチャ若しくはＰピクチャを一枚おき
に破棄することにより行われる動きベクトル情報の合成
を、伸張若しくは足し合わせにより行う手段と、伸張と
足し合わせのうち予測効率の高い方を選択してＭＰＥＧ
４の符号化に用いる手段と、符号化効率の判定を、出力
となるＭＰＥＧ４の画像圧縮情報を示すビットストリー
ムにおけるＧＯＶの最初のＰ−ＶＯＰ、或いはシーンチ
ェンジの直後にのみ行う判定手段とを有する動きベクト
ル変換装置である。

【００７８】

【発明の実施の形態】以下、図面を参照し、本発明の実
施の形態の動きベクトル変換方法及び変換装置の例を説
明する。

【００７９】図２４は、本発明によるの実施の形態の動
きベクトル変換装置の例を示し、以下、これについて説
明する。２７はベクトル合成方法選択装置、２８はＭＶ
及びＭＢ情報バッファ、２９は足し合わせ動きベクトル
判定装置、３０は参照ＭＢアドレス算出装置、３１は動
きベクトル空間・時間補正装置、３２はＭＶ再検索装
置、３３は動きベクトル伸張空間・時間補正装置、３
４はＭＶ再検索装置、３５は８×８ＭＶ選択装置、３６
は８×８ＭＶ→１６×１６ＭＶ合成装置、３７は１６×
１６ＭＶ再検索装置、３８はメモリである。

【００８０】図２４において、ベクトル合成方法選択装
置２７、８×８ＭＶ選択装置３５及びメモリ３８を除く
部分の動作原理は、上述の図１８に示した動きベクトル
変換装置と同様であるため、以下の説明では、ベクトル
合成方法選択装置２７、８×８ＭＶ選択装置３５及びメ
モリ３８の動作原理についてのみ述べ、その他の部分に
ついては、図１８等を参照した上述の説明を援用する。

【００８１】図２５に、図２４に示した動きベクトル変
換装置を含む画像情報変換装置の第一の例を示す。すな
わち、３９はＭＰＥＧ２の画像情報復号化装置、４０は
解像度フレームレート変換装置、４１はＭＰＥＧ４の
画像情報符号化装置、４２はＧＯＶ構造検出装置、４３
は動きベクトル検出装置である。尚、ＧＯＶはGroupof
VOPの略で、 VOPはVideo Object Planeの略である。

【００８２】図２６に、図２５に示した画像情報変換装
置において、入力となるＭＰＥＧ２の画像圧縮情報を示
すビットストリームにおけるピクチャ・コーディング・
タイプ（ｐｉｃｔｕｒｅ−ｃｏｄｉｎｇ−ｔｙｐｅ）
と、出力となるＭＰＥＧ４の画像圧縮情報におけるブイ
シーオーピー・コーディング・タイプ｛ｖｏｐ（VideoO
bject Plane) −ｃｏｄｉｎｇ−ｔｙｐｅ｝の対応関係
の例を示す。図２６において、（１）の動きベクトル情
報を合成する際には、ＧＯＶの最初であるとして、図２
４において、伸張と足し合わせの２通りの方法でＭＰＥ
Ｇ４の動きベクトル情報の合成を行い、予測効率の良い
方を選択するという制御信号をベクトル合成方法選択装
置２７及び８×８ＭＶ選択装置３５に伝送する。８×８
ＭＶ選択装置３５において、伸張と足し合わせのどちら
の方法が選択されたかに関する情報がメモリ３８に格納
される。

【００８３】図２６の（２）及び（４）の動きベクトル
情報を合成する際には、メモリ３８に格納されている方
法によりＭＰＥＧ４動きベクトルの合成を行うという制
御信号をベクトル合成方法選択装置２７及び８×８ＭＶ
選択装置３５に伝送する。これにより、２通りの方法で
ＭＰＥＧ４動きベクトルの合成を行い、更にそれぞれの
予測効率を判定するという処理を省くことが可能とな
り、演算量の削減が実現される。（３）のＭＰＥＧ４の
動きベクトル情報を合成する際には、破棄されるフレー
ムがＩピクチャであるため、ベクトル合成方法選択装置
２７及び８×８ＭＶ選択装置３５に伸張によりＭＰＥＧ
４の動きベクトル情報を合成するという制御信号を伝送
する。（５）の動きベクトル情報を合成する際には、再
びＧＯＶの先頭であるため、（１）と同様の処理を行
う。

【００８４】図２７に、図２４に示した動きベクトル変
換装置を含む画像情報変換装置の第二の例を示す。すな
わち、４４はＭＰＥＧ２の画像情報復号化装置、４５は
解像度フレームレート変換装置、４６はＭＰＥＧ４の
画像情報符号化装置、４７はシーンチェンジ検出装置、
４８は動きベクトル検出装置である。

【００８５】再び図２６に戻って説明するに、（１）の
動きベクトル情報を求める方法に関しては、図２５に示
した画像情報変換装置と同様である。図２５に示した画
像情報変換装置との違いは、シーンチェンジ検出装置４
７において、シーンチェンジが検出されない限り、メモ
リ３８に格納された、どちらの方法によりＭＰＥＧ４動
きベクトル情報が合成されたかという情報に基づき動き
ベクトルの合成が実行されるという点にある。すなわ
ち、図２７に示した画像情報変換装置においては、
（５）のＭＰＥＧ４の動きベクトル情報を合成する際に
も、シーンチェンジ検出装置４７においてシーンチェン
ジが検出されない場合にはメモリに格納された情報に基
づきＭＰＥＧ４の動きベクトル情報の合成を行う。逆
に、（２）、（４）でシーンチェンジ検出装置４７によ
りシーンチェンジが検出された場合には、（１）と同様
の処理を行う。（３）に関しては、破棄されるＩピクチ
ャであるため、ベクトル合成方法選択装置２７及び８×
８ＭＶ選択装置３５に伸張によりＭＰＥＧ４の動きベク
トル情報を合成するという制御信号を伝送する。

【００８６】シーンチェンジの検出には様々な方法が考
えられるが、例えば以下のような方法が考えられる。す
なわち、第一の方法は、ＭＰＥＧ２の画像情報復号化装
置４４において復号処理を行った後、現フレームの、画
面全体に亘る輝度成分の平均値をＹ_MEAN-CUR、変換後に
おける前フレームのそれをＹ_MEAN-PREVとして、予め定
められた閾値θに対し、

【００８７】

【数８】｜Ｙ_MEAN-CUR−Ｙ_MEAN-PREV｜＞θ

【００８８】が成り立つとき、シーンチェンジが検出さ
れたとする。

【００８９】第二の方法は、（７）で定義された、入力
となるＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおける各フレームに対するコンプレキシティを用い
る方法である。すなわち、現フレームがＩピクチャの場
合は、現フレームのコンプレキシティをＸ_I-CUR、変換
後における直前のＩフレームのコンプレキシティをＸ
_I-PREVとして、予め定められた閾値θ_Iに対し、

【００９０】

【数９】｜Ｘ_I-CUR−Ｘ_I-PREV｜＞θ_I

【００９１】が成り立つとき、シーンチェンジが検出さ
れたとする。Ｐピクチャの場合も同様で、現フレームの
コンプレキシティをＸ_P-CUR、変換後における直前のＰ
フレームのコンプレキシティをＸ_P-PREVとして、予め定
められた閾値θ_Pに対し、

【００９２】

【数１０】｜Ｘ_P-CUR−Ｘ_P-PREV｜＞θ_P

【００９３】が成り立つとき、シーンチェンジが検出さ
れたとする。

【００９４】第三の方法は、Ｉピクチャに関しては第一
の方法若しくは第二の方法と同様の方法と同様の方法に
よりシーンチェンジ検出を行い、Ｐピクチャに関して
は、入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるそのフレームに含まれる前マクロブ
ロック数をＮ_total、イントラマクロブロックの個数を
Ｎ_intraとし、予め定められた閾値Ｒθに対し、

【００９５】

【数１１】Ｎ_intra／Ｎ_total＞Ｒθ

【００９６】が成り立つときシーンチェンジが検出され
たとする。

【００９７】尚、図２７に示した画像情報変換装置を用
いることにより図２８に示すような処理を行うことで画
質の劣化を低減することも可能である。すなわち、図に
示す通り、破棄されるＩピクチャにシーンチェンジが含
まれる場合、（３）の動きベクトル情報を伸張により求
めても、予測効率の良い動きベクトル情報を生成するこ
とは不可能である。そこで、図に示す通り、直後のＰ−
ＶＯＰをＩ−ＶＯＰへ変換する。

【００９８】図２９に、図２４に示した動きベクトル変
換装置を含む画像情報変換装置の第三の例を示す。すな
わち、４９はＭＰＥＧ２の画像情報復号化装置、５０は
解像度フレームレート変換装置、５１はＭＰＥＧ４の
画像情報符号化装置、５２はＧＯＶ構造検出装置、５３
はシーンチェンジ検出装置、５４は動きベクトル検出装
置である。

【００９９】図２９に示した画像情報変換装置は、図２
５に示した画像情報変換装置と、図２７に示した画像情
報変換装置の機能を併せ持っている。すなわち、ＧＯＶ
の先頭、若しくはシーンチェンジが検出されたときの
み、伸張と足し合わせの２通りの方法で動きベクトル情
報の合成を行う。図２８に示した処理を行うことも可能
である。

【０１００】以上、入力としてＭＰＥＧ２の画像圧縮情
報を示すビットストリームを、出力としてＭＰＥＧ４の
画像圧縮情報を示すビットストリームを対象としてきた
が、入力、出力ともこれに限らず、例えばＭＰＥＧ−１
やＨ．２６３などの画像圧縮情報を示すビットストリー
ムでも良い。

【０１０１】

【発明の効果】第１の発明によれば、飛び越し走査のＭ
ＰＥＧ２の画像圧縮情報を示すビットストリームを入力
とし、順次走査のＭＰＥＧ４の画像圧縮情報を示すビッ
トストリームを出力とすると共に、入力となるＭＰＥＧ
２の画像圧縮情報を示すビットストリームのＢピクチャ
を破棄し、更にＩピクチャ若しくはＰピクチャをも一枚
おきに破棄することで、フレームレートの変換を実現す
る画像情報変換方法における、入力となるＭＰＥＧ２の
画像圧縮情報を示すビットストリームにおけるＭＰＥＧ
２の１６×１６の動きベクトルを入力とし、ＭＰＥＧ４
の８×８の動きベクトル及びＭＰＥＧ４の１６×１６の
動きベクトルを生成する動きベクトル変換方法におい
て、Ｉピクチャ若しくはＰピクチャを一枚おきに破棄す
ることにより行われる動きベクトル情報の合成を、伸張
若しくは足し合わせにより行い、その伸張とその足し合
わせのうち予測効率の高い方を選択してＭＰＥＧ４の符
号化に用い、符号化効率の判定を、出力となるＭＰＥＧ
４の画像圧縮情報を示すビットストリームにおけるＧＯ
Ｖの最初のＰ−ＶＯＰ、或いはシーンチェンジの直後に
のみ行うようにしたので、符号化効率の判定に伴う演算
量を削減することのできる動きベクトル変換方法を得る
ことができる。

【０１０２】第２の発明によれば、飛び越し走査のＭＰ
ＥＧ２の画像圧縮情報を示すビットストリームを入力と
し、順次走査のＭＰＥＧ４の画像圧縮情報を示すビット
ストリームを出力とし、入力となるＭＰＥＧ２の画像圧
縮情報を示すビットストリームのＢピクチャを破棄し、
更にＩピクチャ若しくはＰピクチャをも一枚おきに破棄
することでフレームレートの変換を実現する画像情報変
換装置における動きベクトル変換装置において、入力と
なるＭＰＥＧ２の画像圧縮情報を示すビットストリーム
におけるＭＰＥＧ２の１６×１６の動きベクトルを入力
とし、ＭＰＥＧ４の８×８の動きベクトル及びＭＰＥＧ
４の１６×１６の動きベクトルを生成する動きベクトル
変換装置であって、Ｉピクチャ若しくはＰピクチャを一
枚おきに破棄することにより行われる動きベクトル情報
の合成を、伸張若しくは足し合わせにより行う手段と、
伸張と足し合わせのうち予測効率の高い方を選択してＭ
ＰＥＧ４の符号化に用いる手段と、符号化効率の判定
を、出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおけるＧＯＶの最初のＰ−ＶＯＰ、或いは
シーンチェンジの直後にのみ行う判定手段とを有するの
で、符号化効率の判定に伴う演算量を削減することので
きる動きベクトル変換装置を得ることができる。

【図面の簡単な説明】

【図１】ＭＰＥＧ２の画像圧縮情報を示すビットストリ
ームからＭＰＥＧ４の画像圧縮情報を示すビットストリ
ームへの変換を実現する従来例の画像情報変換装置を示
すブロック図である。

【図２】本発明者らの発明によるＭＰＥＧ２の画像圧縮
情報を示すビットストリームからＭＰＥＧ４の画像圧縮
情報を示すビットストリームへの変換を実現する画像情
報変換装置を示すブロック図である。

【図３】ＭＰＥＧ２の画像圧縮情報を示すビットストリ
ーム中の動きベクトル情報と、ＭＰＥＧ４の画像圧縮情
報を示すビットストリーム中の動きベクトル情報の相関
を説明する説明図である。

【図４】図２の解像度・フレームレート変換装置５にお
ける動作原理を示す説明図である。

【図５】図２の画枠サイズ調整フラグに応じた解像度・
フレームレート変換装置５における画素の補填或いは除
去の動作原理を示す説明図である。

【図６】図２の動きベクトル変換装置６における動きベ
クトル変換方法を説明する説明図である。

【図７】図２の動きベクトル変換装置６の詳細な回路構
成を示すブロック図である。

【図８】図２のＭＰＥＧ２の１６×１６の動きベクトル
→ＭＰＥＧ４の８×８の動きベクトル変換装置８の動作
を説明するフローチャートである。

【図９】図７のＭＰＥＧ２の１６×１６の動きベクトル
→ＭＰＥＧ４のベクトル変換の概念を説明する説明図で
ある。

【図１０】図９におけるＭＰＥＧ２の画像圧縮情報を示
すビットストリーム中の半画素精度の動きベクトル情報
の、ＭＰＥＧ４の８×８の動きベクトル情報への変換後
の取り扱いを示す表図である。

【図１１】図９における、画像がフレーム構造で、第一
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。

【図１２】図９における、画像がフレーム構造で、第二
フィールド予測であるときについて動きベクトル変換の
概念を説明する説明図である。

【図１３】図９における、画像がフレーム構造で、第二
フィールド予測であるときについての動きベクトル変換
の概念を説明する説明図である。

【図１４】図７における画像サイズ調整フラグによる動
きベクトル調整器９の動作を説明するフローチャートで
ある。

【図１５】図７において、ＭＰＥＧ２のイントラマクロ
ブロックに対する動きベクトル補正器１１の動作を説明
するブロック図である。

【図１６】図７においての、画像がフレーム構造で、第
二フィールド予測であるときについての動きベクトル変
換装置の詳細回路を示すブロック図である。

【図１７】ｎ＝１５；ｍ＝３のＧＯＰ構造を持つ３０Ｈ
ｚのＭＰＥＧ２の画像圧縮情報を示すビットストリーム
を、ｎ＝５；ｍ＝１のＧＯＶ構造を持つ５ＨｚのＭＰＥ
Ｇ４の画像圧縮情報を示すビットストリームへ変換する
際の、入力となるＭＰＥＧ２の画像圧縮情報を示すビッ
トストリームにおけるピクチャ・コーディング・タイプ
（ｐｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）と、出力
となるＭＰＥＧ４の画像圧縮情報を示すビットストリー
ムにおけるブイオーピー・コーディング・タイプ（ｖｏ
ｐ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）の対応を示す説明図であ
る。

【図１８】入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおけるＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャも１フレームおきに破棄す
ることでフレームレートの変換を実現する装置で、動き
ベクトル情報の合成を、伸張、或いは足し合わせにより
適応的に行う画像情報変換装置の構成を示すブロック図
である。

【図１９】図１８における、動きベクトル情報を伸張に
より合成する方法を示す説明図である。

【図２０】図１８における、動きベクトル情報を足し合
わせにより合成する方法の説明図である。

【図２１】図１８における、動きベクトル情報を足し合
わせにより合成する際、破棄されるフレームを参照する
動きベクトル情報が、どのようにマクロブロックに跨る
かを示す説明図である。

【図２２】図１８における、破棄するフレームがＰピク
チャで、足し合わせによりを動きベクトル情報を合成す
ることを説明するフローチャートである。

【図２３】図２０における、足し合わせた動きベクトル
情報が参照フレームの第２フィールドを参照する場合の
時間補正の方法を説明する説明図である。

【図２４】本発明の実施の形態の動きベクトル変換装置
の例を示すブロック図である。

【図２５】図２４に示した動きベクトル変換装置を含む
画像情報変換装置の第一の例を示すブロック図である。

【図２６】図２５に示した画像情報変換装置において、
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおけるピクチャ・コーディング・タイプ（ｐｉ
ｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）と、出力となる
ＭＰＥＧ４の画像圧縮情報におけるブイオーピ・コーデ
ィング・タイプ（ｖｏｐ＿ｃｏｄｉｎｇ＿ｔｙｐｅ）の
対応関係の例を示す図である。

【図２７】図２４に示した動きベクトル変換装置を含む
画像情報変換装置の第二の例を示すブロック図である。

【図２８】図２７における、破棄されるＩピクチャにシ
ーンチェンジが含まれる場合の処理を示す図である。

【図２９】図２４に示した動きベクトル変換装置を含む
画像情報変換装置の第三の例を示すブロック図である。

【符号の説明】

２７ベクトル合成方法選択装置、２８ＭＶ及びＭＢ
情報バッファ、２９足し合わせ動きベクトル判定装置、
３０参照ＭＢアドレス算出装置、３１動きベクトル
空間・時間補正装置、３２ＭＶ再検索装置、３３動
きベクトル伸張空間・時間補正装置、３４ＭＶ再検
索装置、３５８×８ＭＶ選択装置、３６８×８ＭＶ
→１６×１６ＭＶ合成装置、３７１６×１６ＭＶ再検
索装置、３８メモリ

───────────────────────────────────────────────────── フロントページの続き (72)発明者鈴木輝彦東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者矢ケ崎陽一東京都品川区北品川６丁目７番35号ソニー株式会社内Ｆターム(参考） 5C059 KK15 KK41 LB05 LB07 MA00 NN00 NN28 NN43 PP05 PP06 PP07 SS10 TA65 TB07 TB08 TC02 TC06 TC10 TC14 TC18 TC27 TD02 TD03 TD12 UA02 5J064 AA02 BA13 BB03 BC22 BD03

Claims

【特許請求の範囲】

【請求項１】飛び越し走査のＭＰＥＧ２の画像圧縮情
報を示すビットストリームを入力とし、順次走査のＭＰ
ＥＧ４の画像圧縮情報を示すビットストリームを出力と
すると共に、上記入力となるＭＰＥＧ２の画像圧縮情報
を示すビットストリームのＢピクチャを破棄し、更にＩ
ピクチャ若しくはＰピクチャをも一枚おきに破棄するこ
とで、フレームレートの変換を実現する画像情報変換方
法における動きベクトル変換方法において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるＭＰＥＧ２の１６×１６の動きベク
トルを入力とし、ＭＰＥＧ４の８×８の動きベクトル及
びＭＰＥＧ４の１６×１６の動きベクトルを生成する動
きベクトル変換方法であって、Ｉピクチャ若しくはＰピクチャを一枚おきに破棄するこ
とにより行われる動きベクトル情報の合成を、伸張若し
くは足し合わせにより行い、該伸張と該足し合わせのうち予測効率の高い方を選択し
てＭＰＥＧ４の符号化に用い、符号化効率の判定を、上記出力となるＭＰＥＧ４の画像
圧縮情報を示すビットストリームにおけるＧＯＶの最初
のＰ−ＶＯＰ、或いはシーンチェンジの直後にのみ行う
ことを特徴とする動きベクトル変換方法。
【請求項２】請求項１に記載の動きベクトル変換方法
において、ベクトル合成方法選択を兼ね備え、上記画像情報変換方法におけるＭＰＥＧ２の画像情報復
号化によって出力される制御信号に基づいて、上記伸張
／足し合わせの選択を行うことを特徴とする動きベクト
ル変換方法。
【請求項３】請求項２に記載の動きベクトル変換方法
において、上記画像情報変換方法によって破棄されるフレームが、
上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるＩピクチャである場合には、上記制
御信号として、伸張により動きベクトル情報を合成する
ためのコマンドを、動きベクトル変換の際に伝送するこ
とを特徴とする動きベクトル変換方法。
【請求項４】請求項２に記載の動きベクトル変換方法
において、ＧＯＶ構造検出を兼ね備えることを特徴とする動きベク
トル変換方法。
【請求項５】請求項４に記載の動きベクトル変換方法
において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおけるＧＯＶに含まれる最初のＰ−ＶＯＰ
に対しては、制御信号として、動きベクトル情報の合成
を、伸張及び足し合わせの両方の方法により行い、予測
効率の高い方を選択するというコマンドを伝送すること
を特徴とする動きベクトル変換方法。
【請求項６】請求項５に記載の動きベクトル変換方法
において、動きベクトル選択により、伸張若しくは足し合わせのど
ちらの方法が選択されたかに関する情報をメモリに伝送
することを特徴とする動きベクトル変換方法。
【請求項７】請求項４に記載の動きベクトル変換方法
において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおけるＧＯＶに含まれる最初のＰ−ＶＯＰ
以外のＰ−ＶＯＰで、破棄されるフレームが、上記入力
となるＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおいてＰピクチャである場合には、制御信号とし
て、メモリに格納されている方法を用いて動きベクトル
情報の合成を行うコマンドを伝送することを特徴とする
動きベクトル変換方法。
【請求項８】請求項２に記載の動きベクトル変換方法
において、シーンチェンジ検出を兼ね備えることを特徴とする動き
ベクトル変換方法。
【請求項９】請求項８に記載の動きベクトル変換方法
において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、シーケンスの最初に現れるＰ−Ｖ
ＯＰ及びシーンチェンジ直後のＰ−ＶＯＰに対しては、
制御信号として、動きベクトル情報の合成を、伸張及び
足し合わせの両方の方法により行い、予測効率の高い方
を選択するコマンドを伝送することを特徴とする動きベ
クトル変換方法。
【請求項１０】請求項９に記載の動きベクトル変換方
法において、動きベクトル選択により、伸張若しくは足し合わせのう
ちのどちらの方法が選択されたかに関する情報をメモリ
に伝送することを特徴とする動きベクトル変換方法。
【請求項１１】請求項９に記載の動きベクトル変換方
法において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、シーケンスの最初に現れるＰ−Ｖ
ＯＰ及びシーンチェンジ直後のＰ−ＶＯＰ以外のＰ−Ｖ
ＯＰで、破棄されるフレームが、入力となるＭＰＥＧ２
の画像圧縮情報を示すビットストリームにおいて、Ｐピ
クチャである場合には、制御信号として、メモリに格納
されている方法を用いて動きベクトル情報の合成を行う
コマンドを伝送することを特徴とする動きベクトル変換
方法。
【請求項１２】請求項８に記載の動きベクトル変換方
法において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームを復号化して得られる、フレームの輝度信号
の、画素値のフレーム全体に亘る平均値をＹ_ME _AN-CURと
すると共に、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、そのＶＯＰの直前のＶＯＰに相当
する、ＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるフレームの、輝度信号の画素値のフレーム全
体に亘る平均値をＹ_MEAN-PREVとして、予め定められた閾値θに対して、｜Ｙ_MEAN-CUR−Ｙ_MEAN-PREV｜＞θ が成立するとき、シーンチェンジが検出されたとするこ
とを特徴とする動きベクトル変換方法。
【請求項１３】請求項８に記載の動きベクトル変換方
法において、入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームで、フレームの平均量子化スケールをＱ、割り当てられた符
号量（ビット数）をＢとして、該フレームに対するコン
プレキシティＸを、Ｘ＝Ｑ・Ｂと定義し、Ｘを用いて上記シーンチェンジ検出を行うこ
とを特徴とする動きベクトル変換方法。
【請求項１４】請求項１３に記載の動きベクトル変換
方法において、現フレームがＩピクチャの場合は、現フレームのコンプ
レキシティをＸ_I-CUR、変換後における直前のＩフレー
ムのコンプレキシティをＸ_I-PREVとして、予め定められ
た閾値θ_iに対し、｜Ｘ_I-CUR−Ｘ_I-PREV｜＞θ_I が成立するとき、シーンチェンジが検出されたとするこ
とを特徴とする動きベクトル変換方法。
【請求項１５】請求項１３に記載の動きベクトル変換
方法において、現フレームがＰピクチャの場合には、該現フレームのコ
ンプレキシティをＸ_P- _CUR、変換後における直前のＰフ
レームのコンプレキシティをＸ_P-PREVとして、予め定め
られた閾値θ_Pに対し、｜Ｘ_P-CUR−Ｘ_P-PREV｜＞θ_P が成立するとき、シーンチェンジが検出されたとするこ
とを特徴とする動きベクトル変換方法。
【請求項１６】請求項８に記載の動きベクトル変換方
法において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてＩピクチャであるフレームに対して
は、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビ
ットストリームを復号化して得られる、フレームの輝度
信号の、画素値のフレーム全体に亘る平均値をＹ
_MEAN-CURとすると共に、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、そのＶＯＰの直前のＶＯＰに相当
する、ＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるフレームの、輝度信号の画素値のフレーム全
体に亘る平均値をＹ_MEAN-PREVとして、予め定められた閾値θに対して、｜Ｙ_MEAN-CUR−Ｙ_MEAN-PREV｜＞θ が成立するとき、シーンチェンジが検出されたとすると
共に、Ｐピクチャであるフレームに対しては、上記入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームにお
ける、フレームに含まれる全マクロブロックの数をＮ
_total、イントラマクロブロックの数をＮ_intraとし
て、予め定められた閾値Ｒθに対し、Ｎ_intra／Ｎ_total＞Ｒθ が成立するとき、シーンチェンジが検出されたとするこ
とを特徴とする動きベクトル変換方法。
【請求項１７】請求項８に記載の動きベクトル変換方
法において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおいてＩピクチャであるフレームに対して
は、フレームの平均量子化スケールをＱ、割り当てられ
た符号量（ビット数）をＢとして、該フレームに対する
コンプレキシティＸを、Ｘ＝Ｑ・Ｂと定義し、Ｘを用いて上記シーンチェンジ検出を行な
い、Ｐピクチャであるフレームに対しては、上記入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームにお
ける、フレームに含まれる全マクロブロックの数をＮ
_total、イントラマクロブロックの数をＮ_intraとし、
予め定められた閾値Ｒθに対し、Ｎ_intra／Ｎ_total＞Ｒθ が成立するとき、シーンチェンジが検出されたとするこ
とを特徴とする動きベクトル変換方法。
【請求項１８】請求項８に記載の動きベクトル変換方
法、破棄されるＩピクチャの前後でシーンチェンジが検出さ
れた場合には、出力となるＭＰＥＧ４の画像圧縮情報を
示すビットストリームにおいて、シーンチェンジの直後
のＰ−ＶＯＰをＩ−ＶＯＰに変換することを特徴とする
動きベクトル変換方法。
【請求項１９】請求項２に記載の動きベクトル変換方
法において、ＧＯＶ構造検出及び上記シーンチェンジ検出を兼ね備え
ることを特徴とする動きベクトル変換方法。
【請求項２０】請求項１９に記載の動きベクトル変換
方法、ＧＯＶ内での最初のＰ−ＶＯＰ、若しくはシーンチェン
ジの直後に位置するＰ−ＶＯＰに対しては、動きベクト
ル情報の合成を、伸張及び足し合わせの両方で行い、予
測効率の高い方を選択することを特徴とする動きベクト
ル変換方法。
【請求項２１】請求項２０に記載の動きベクトル変換
方法において、伸張及び足し合わせのどちらの方法が選択されたかに関
する情報をメモリに伝送することを特徴とする動きベク
トル変換方法。
【請求項２２】請求項２０に記載の動きベクトル変換
方法において、ＧＯＶ内での最初のＰ−ＶＯＰ、若しくはシーンチェン
ジの直後に位置するＰ−ＶＯＰ以外のＰ−ＶＯＰについ
て、動きベクトル情報の合成を、メモリに格納された方
法に基づき行うことを特徴とする動きベクトル変換方
法。
【請求項２３】飛び越し走査のＭＰＥＧ２の画像圧縮
情報を示すビットストリームを入力とし、順次走査のＭ
ＰＥＧ４の画像圧縮情報を示すビットストリームを出力
とし、上記入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームのＢピクチャを破棄し、更にＩピクチ
ャ若しくはＰピクチャをも一枚おきに破棄することでフ
レームレートの変換を実現する画像情報変換装置におけ
る動きベクトル変換装置において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームにおけるＭＰＥＧ２の１６×１６の動きベク
トルを入力とし、ＭＰＥＧ４の８×８の動きベクトル及
びＭＰＥＧ４の１６×１６の動きベクトルを生成する動
きベクトル変換装置であって、Ｉピクチャ若しくはＰピクチャを一枚おきに破棄するこ
とにより行われる動きベクトル情報の合成を、伸張若し
くは足し合わせにより行う手段と、伸張と足し合わせのうち予測効率の高い方を選択してＭ
ＰＥＧ４の符号化に用いる手段と、符号化効率の判定を、上記出力となるＭＰＥＧ４の画像
圧縮情報を示すビットストリームにおけるＧＯＶの最初
のＰ−ＶＯＰ、或いはシーンチェンジの直後にのみ行う
判定手段とを有することを特徴とする動きベクトル変換
装置。
【請求項２４】請求項２３に記載の動きベクトル変換
装置において、ベクトル合成方法選択手段を兼ね備え、上記画像情報変
換装置の構成要素であるＭＰＥＧ２の画像情報復号化装
置から出力される制御信号に基づいて、伸張／足し合わ
せの選択を行うことを特徴とする動きベクトル変換装
置。
【請求項２５】請求項２４に記載の動きベクトル変換
装置において、上記画像情報変換装置で、破棄されるフレームが、上記
入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてＩピクチャである場合には、制御信号と
して、伸張により動きベクトル情報を合成するコマンド
を、上記動きベクトル変換装置に伝送する手段を有する
ことを特徴とする動きベクトル変換装置。
【請求項２６】請求項２４に記載の動きベクトル変換
装置において、上記画像情報変換装置は、ＧＯＶ構造検出装置を兼ね備
えることを特徴とする動きベクトル変換装置。
【請求項２７】請求項２６に記載の動きベクトル変換
装置において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおけるＧＯＶに含まれる最初のＰ−ＶＯＰ
に対しては、制御信号として、動きベクトル情報の合成
を、伸張及び足し合わせの両方の方法により行い、予測
効率の高い方を選択するコマンドを上記動きベクトル変
換装置に伝送する伝送手段を有することを特徴とする動
きベクトル変換装置。
【請求項２８】請求項２７の動きベクトル変換装置に
おいて、動きベクトル選択装置により、伸張若しくは足し合わせ
のどちらの方法が選択されたかに関する情報をメモリに
伝送する伝送手段を有することを特徴とする動きベクト
ル変換装置。
【請求項２９】請求項２６に記載の動きベクトル変換
装置において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおけるＧＯＶに含まれる最初のＰ−ＶＯＰ
以外のＰ−ＶＯＰで、破棄されるフレームが、上記入力
となるＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおいてＰピクチャである場合には、制御信号とし
て、メモリに格納されている方法を用いて動きベクトル
情報の合成を行うコマンドを動きベクトル変換装置に伝
送する伝送手段を有することを特徴とする動きベクトル
変換装。
【請求項３０】請求項２４に記載の動きベクトル変換
装置において、上記画像情報変換装置で、シーンチェンジ検出装置を兼
ね備えることを特徴とする動きベクトル変換装置。
【請求項３１】請求項３０に記載の動きベクトル変換
装置において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、シーケンスの最初に現れるＰ−Ｖ
ＯＰ及びシーンチェンジ直後のＰ−ＶＯＰに対しては、
制御信号として、動きベクトル情報の合成を、伸張及び
足し合わせの両方の方法により行い、予測効率の高い方
を選択するコマンドを上記動きベクトル変換装置に伝送
する伝送手段を有することを特徴とする動きベクトル変
換装置。
【請求項３２】請求項３１に記載の動きベクトル変換
装置において、上記画像情報変換装置の構成要素である上記動きベクト
ル選択装置により、伸張若しくは足し合わせのどちらの
方法が選択されたかに関する情報をメモリに伝送する伝
送手段を有することを特徴とする動きベクトル変換装
置。
【請求項３３】請求項３１に記載の動きベクトル変換
装置において、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、シーケンスの最初に現れるＰ−Ｖ
ＯＰ及びシーンチェンジ直後のＰ−ＶＯＰ以外のＰ−Ｖ
ＯＰで、破棄されるフレームが、上記入力となるＭＰＥ
Ｇ２の画像圧縮情報を示すビットストリームにおいてＰ
ピクチャである場合には、制御信号として、メモリに格
納されている方法を用いて動きベクトル情報の合成を行
うコマンドを動きベクトル変換装置に伝送する伝送手段
を有することを特徴とする動きベクトル変換装置。
【請求項３４】請求項３０に記載の動きベクトル変換
装置において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームを復号化して得られる、フレームの輝度信号
の、画素値のフレーム全体に亘る平均値をＹ_ME _AN-CURと
すると共に、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、そのＶＯＰの直前のＶＯＰに相当
する、ＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるフレームの、輝度信号の画素値のフレーム全
体に亘る平均値をＹ_MEAN-PREVとして、予め定められた閾値θに対して、｜Ｙ_MEAN-CUR−Ｙ_MEAN-PREV｜＞θ が成立するとき、シーンチェンジが検出されたと判定す
る判定手段を有することを特徴とする動きベクトル変換
装置。
【請求項３５】請求項３０に記載の動きベクトル変換
装置において、上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームで、フレームの平均量子化スケールをＱ、割
り当てられた符号量（ビット数）をＢとして、そのフレ
ームに対するコンプレキシティＸをＸ＝Ｑ・Ｂと定義し、Ｘを用いて上記シーンチェンジ検出を行う検
出手段を有することを特徴とする動きベクトル変換装
置。
【請求項３６】請求項３５に記載の動きベクトル変換
装置において、現フレームがＩピクチャの場合は、現フレームのコンプ
レキシティをＸ_I-CUR、変換後における直前のＩフレー
ムのコンプレキシティをＸ_I-PREVとして、予め定められ
た閾値θ_iに対し、｜Ｘ_I-CUR−Ｘ_I-PREV｜＞θ_I が成立するとき、シーンチェンジが検出されたとする検
出手段を有することを特徴とする動きベクトル変換装
置。
【請求項３７】請求項３５に記載の動きベクトル変換
装置において、現フレームがＰピクチャの場合には、現フレームのコン
プレキシティをＸ_P-CU _R、変換後における直前のＰフレ
ームのコンプレキシティをＸ_P-PREVとして、予め定めら
れた閾値θ_Pに対し、｜Ｘ_P-CUR−Ｘ_P-PREV｜＞θ_P が成立するとき、シーンチェンジが検出されたとする検
出手段を有することを特徴とする動きベクトル変換装
置。
【請求項３８】請求項３０に記載の動きベクトル変換
装置において、入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてＩピクチャであるフレームに対しては、
上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームを復号化して得られる、フレームの輝度信号
の、画素値のフレーム全体に亘る平均値をＹ_MEAN-CURと
すると共に、上記出力となるＭＰＥＧ４の画像圧縮情報を示すビット
ストリームにおいて、そのＶＯＰの直前のＶＯＰに相当
する、ＭＰＥＧ２の画像圧縮情報を示すビットストリー
ムにおけるフレームの、輝度信号の画素値のフレーム全
体に亘る平均値をＹ_MEAN-PREVとして、予め定められた閾値θに対して、｜Ｙ_MEAN-CUR−Ｙ_MEAN-PREV｜＞θ が成立するとき、シーンチェンジが検出されたと判定す
る第１の検出手段と、Ｐピクチャであるフレームに対し
ては、上記入力となるＭＰＥＧ２の画像圧縮情報を示す
ビットストリームにおける、フレームに含まれる全マク
ロブロックの数をＮ_total、イントラマクロブロックの
数をＮ_intraとして、予め定められた閾値Ｒθに対し、Ｎ_intra／Ｎ_total＞Ｒθ が成立するとき、シーンチェンジが検出されたと判定す
る第２の検出手段とを有することを特徴とする動きベク
トル変換装置。
【請求項３９】請求項３０に記載の動きベクトル変換
装置において、の装置の構成要素で、入力となるＭＰＥＧ２の画像圧縮情報を示すビットスト
リームにおいてＩピクチャであるフレームに対しては、
上記入力となるＭＰＥＧ２の画像圧縮情報を示すビット
ストリームで、フレームの平均量子化スケールをＱ、割
り当てられた符号量（ビット数）をＢとして、そのフレ
ームに対するコンプレキシティＸをＸ＝Ｑ・Ｂと定義し、Ｘを用いて上記シーンチェンジ検出を行う第
１の検出手段と、Ｐピクチャであるフレームに対しては、上記入力となる
ＭＰＥＧ２の画像圧縮情報を示すビットストリームにお
ける、フレームに含まれる全マクロブロックの数をＮ
_total、イントラマクロブロックの数をＮ_intraとし
て、予め定められた閾値Ｒθに対し、Ｎ_intra／Ｎ_total＞Ｒθ が成立するとき、シーンチェンジが検出されたと判定す
る第２の検出手段とを有することを特徴とする動きベク
トル変換装置。
【請求項４０】請求項３０に記載の動きベクトル変換
装置において、破棄されるＩピクチャの前後でシーンチェンジが検出さ
れた場合には、出力となるＭＰＥＧ４の画像圧縮情報を
示すビットストリームにおいて、シーンチェンジの直後
のＰ−ＶＯＰをＩ−ＶＯＰに変換する変換する変換手段
を有することを特徴とする動きベクトル変換装置。
【請求項４１】請求項２４に記載の動きベクトル変換
装置において、上記画像情報変換装置において、ＧＯＶ構造検出装置及
び上記シーンチェンジ検出装置を兼ね備えることを特徴
とする動きベクトル変換装置。
【請求項４２】請求項４０に記載の動きベクトル変換
装置において、ＧＯＶ内での最初のＰ−ＶＯＰ、若しくはシーンチェン
ジの直後に位置するＰ−ＶＯＰに対しては、動きベクト
ル情報の合成を、伸張及び足し合わせの両方で行い、予
測効率の高い方を選択する選択手段とを有することを特
徴とする動きベクトル変換装置。
【請求項４３】請求項４１に記載の動きベクトル変換
装置において、上記選択手段において、上記伸張及び上記足し合わせの
どちらの方法が選択されたかに関する情報をメモリに伝
送する伝送手段を有することを特徴とする動きベクトル
変換装置。
【請求項４４】請求項４２に記載の動きベクトル変換
装置において、ＧＯＶ内での最初のＰ−ＶＯＰ、若しくはシーンチェン
ジの直後に位置するＰ−ＶＯＰ以外のＰ−ＶＯＰについ
て、動きベクトル情報の合成を、メモリに格納された方
法に基づき行う合成手段を有することを特徴とする動き
ベクトル変換装置。