JP2002125234A - 画像情報変換装置及び方法 - Google Patents
画像情報変換装置及び方法Info
- Publication number
- JP2002125234A JP2002125234A JP2000311316A JP2000311316A JP2002125234A JP 2002125234 A JP2002125234 A JP 2002125234A JP 2000311316 A JP2000311316 A JP 2000311316A JP 2000311316 A JP2000311316 A JP 2000311316A JP 2002125234 A JP2002125234 A JP 2002125234A
- Authority
- JP
- Japan
- Prior art keywords
- information
- coding
- image
- motion vector
- inter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 マクロブロックモード判別を少ない演算量で
実現可能とし、画質劣化を最小限に抑える。 【解決手段】 圧縮情報解析部９はＭＰＥＧ２画像圧縮
情報を解析して、ＭＰＥＧ２マクロブロックの動きベク
トルを取り出し、動きベクトル合成部１４と動きベクト
ル検出部１５では、ＭＰＥＧ４画像符号化に必要な動き
ベクトルを合成して高精度化する。また、ＭＰＥＧ２画
像情報復号化部１０ではＭＰＥＧ２画像圧縮情報を復号
化する。インター／インター４Ｖ判定部１６では、合成
及び高精度化された動きベクトルより求めた分散値Ｄｉ
ｓｔと予め設定した第１，第２の閾値θ1，θ2との比較
に基づいて、ＭＰＥＧ４マクロブロックのインター／イ
ンター４Ｖモード判定を行う。ＭＰＥＧ４画像情報符号
化部１３では、そのマクロブロックモードを用いて画像
情報をＭＰＥＧ４画像圧縮情報に符号化する。
実現可能とし、画質劣化を最小限に抑える。 【解決手段】 圧縮情報解析部９はＭＰＥＧ２画像圧縮
情報を解析して、ＭＰＥＧ２マクロブロックの動きベク
トルを取り出し、動きベクトル合成部１４と動きベクト
ル検出部１５では、ＭＰＥＧ４画像符号化に必要な動き
ベクトルを合成して高精度化する。また、ＭＰＥＧ２画
像情報復号化部１０ではＭＰＥＧ２画像圧縮情報を復号
化する。インター／インター４Ｖ判定部１６では、合成
及び高精度化された動きベクトルより求めた分散値Ｄｉ
ｓｔと予め設定した第１，第２の閾値θ1，θ2との比較
に基づいて、ＭＰＥＧ４マクロブロックのインター／イ
ンター４Ｖモード判定を行う。ＭＰＥＧ４画像情報符号
化部１３では、そのマクロブロックモードを用いて画像
情報をＭＰＥＧ４画像圧縮情報に符号化する。
Description
【０００１】
【発明の属する技術分野】本発明は、ＭＰＥＧ（Moving
Picture image coding Experts Group）などのよう
に、離散コサイン変換等の直交変換と動き補償によって
圧縮された画像情報（ビットストリーム）を、例えば衛
星放送、ケーブルテレビジョン、インターネットなどの
ネットワークを介して受信する際、若しくは光、磁気デ
ィスクのような記憶メディア上で処理する際に好適な画
像情報変換装置及び方法に関する。
Picture image coding Experts Group）などのよう
に、離散コサイン変換等の直交変換と動き補償によって
圧縮された画像情報（ビットストリーム）を、例えば衛
星放送、ケーブルテレビジョン、インターネットなどの
ネットワークを介して受信する際、若しくは光、磁気デ
ィスクのような記憶メディア上で処理する際に好適な画
像情報変換装置及び方法に関する。
【０００２】
【従来の技術】近年、画像情報をディジタル情報として
取り扱い、その際に、効率の高い情報の伝送、蓄積を目
的とし、画像情報特有の冗長性を利用して、離散コサイ
ン変換等の直交変換と動き補償により当該画像情報を圧
縮するＭＰＥＧなどの方式に準拠した装置が、放送局な
どの情報配信、及び一般家庭における情報受信の双方に
おいて普及しつつある。
取り扱い、その際に、効率の高い情報の伝送、蓄積を目
的とし、画像情報特有の冗長性を利用して、離散コサイ
ン変換等の直交変換と動き補償により当該画像情報を圧
縮するＭＰＥＧなどの方式に準拠した装置が、放送局な
どの情報配信、及び一般家庭における情報受信の双方に
おいて普及しつつある。
【０００３】特に、ＭＰＥＧ２（ＩＳＯ／ＩＥＣ １３
８１８−２）は、汎用画像符号化方式として定義されて
おり、飛び越し走査画像及び順次走査画像の双方、並び
に標準解像度画像及び高精細画像を網羅する標準とし
て、プロフェッショナル用途及びコンシューマー用途の
広範なアプリケーションに今後とも用いられるものと予
想される。このＭＰＥＧ２圧縮方式を用いることによ
り、例えば７２０×４８０画素を持つ標準解像度の飛び
越し走査画像であれば４Ｍ〜８Ｍｂｐｓ、１９２０×１
０８８画素を持つ高解像度の飛び越し走査画像であれば
１８〜２２Ｍｂｐｓの符号量（ビットレート）を割り当
てることで、高い圧縮率と良好な画質の実現が可能であ
る。
８１８−２）は、汎用画像符号化方式として定義されて
おり、飛び越し走査画像及び順次走査画像の双方、並び
に標準解像度画像及び高精細画像を網羅する標準とし
て、プロフェッショナル用途及びコンシューマー用途の
広範なアプリケーションに今後とも用いられるものと予
想される。このＭＰＥＧ２圧縮方式を用いることによ
り、例えば７２０×４８０画素を持つ標準解像度の飛び
越し走査画像であれば４Ｍ〜８Ｍｂｐｓ、１９２０×１
０８８画素を持つ高解像度の飛び越し走査画像であれば
１８〜２２Ｍｂｐｓの符号量（ビットレート）を割り当
てることで、高い圧縮率と良好な画質の実現が可能であ
る。
【０００４】ここで、上述のＭＰＥＧ２は、主として放
送用に適合する高画質符号化を対象としていたが、ＭＰ
ＥＧ１より低い符号量（ビットレート）、つまりより高
い圧縮率の符号化方式には対応していなかった。一方、
近年の携帯端末の普及により、今後そのような高い圧縮
率の符号化方式のニーズは高まると思われ、これに対応
してＭＰＥＧ４符号化方式の標準化が行われた。ＭＰＥ
Ｇ４の画像符号化方式に関しては、１９９８年１２月に
ＩＳＯ／ＩＥＣ １４４９６−２としてその規格が国際
標準に承認されている。
送用に適合する高画質符号化を対象としていたが、ＭＰ
ＥＧ１より低い符号量（ビットレート）、つまりより高
い圧縮率の符号化方式には対応していなかった。一方、
近年の携帯端末の普及により、今後そのような高い圧縮
率の符号化方式のニーズは高まると思われ、これに対応
してＭＰＥＧ４符号化方式の標準化が行われた。ＭＰＥ
Ｇ４の画像符号化方式に関しては、１９９８年１２月に
ＩＳＯ／ＩＥＣ １４４９６−２としてその規格が国際
標準に承認されている。
【０００５】ところで、ディジタル放送用に一度符号化
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
を、携帯端末上などで処理するのにより適した、より低
い符号量（ビットレート）のＭＰＥＧ４画像圧縮情報
（ビットストリーム）に変換したいというニーズがあ
る。
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
を、携帯端末上などで処理するのにより適した、より低
い符号量（ビットレート）のＭＰＥＧ４画像圧縮情報
（ビットストリーム）に変換したいというニーズがあ
る。
【０００６】かかる目的を達成する画像情報変換装置
（トランスコーダ）として、“Field-to-Frame Transco
ding with Spatial and Temporal Downsampling”（Sus
ie J.Wee, John G. Apostolopoulos, and Nick Feamste
r, ICIP '99、以下これを文献１と呼ぶ）では、図５に
示すような装置が提案されている。
（トランスコーダ）として、“Field-to-Frame Transco
ding with Spatial and Temporal Downsampling”（Sus
ie J.Wee, John G. Apostolopoulos, and Nick Feamste
r, ICIP '99、以下これを文献１と呼ぶ）では、図５に
示すような装置が提案されている。
【０００７】この図５において、入力端子１１０に供給
された飛び越し走査のＭＰＥＧ２画像圧縮情報（ビット
ストリーム）における各フレームのデータは、先ず、ピ
クチャタイプ判別部１１１に入力する。
された飛び越し走査のＭＰＥＧ２画像圧縮情報（ビット
ストリーム）における各フレームのデータは、先ず、ピ
クチャタイプ判別部１１１に入力する。
【０００８】当該ピクチャタイプ判別部１１１では、各
フレームの入力データがＩピクチャ（画像内符号化画
像）／Ｐピクチャ（前方予測符号化画像）に関するもの
か、Ｂピクチャ（両方向予測符号化画像）に関するもの
であるかを判別し、前者のときのみ、そのＩ／Ｐピクチ
ャに関する情報を後続のＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１１２に出力する。
フレームの入力データがＩピクチャ（画像内符号化画
像）／Ｐピクチャ（前方予測符号化画像）に関するもの
か、Ｂピクチャ（両方向予測符号化画像）に関するもの
であるかを判別し、前者のときのみ、そのＩ／Ｐピクチ
ャに関する情報を後続のＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１１２に出力する。
【０００９】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）１１２における処理は通常のＭＰＥＧ２画像情報
復号化装置と同様である。但し、Ｂピクチャに関するデ
ータはピクチャタイプ判別部１１１において廃棄される
ため、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）
１１２における機能としてはＩ ／ Ｐ ピクチャのみを
復号化出来ればよい。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）１１２の出力となる画素値は、間引き部
１１３に入力される。
チャ）１１２における処理は通常のＭＰＥＧ２画像情報
復号化装置と同様である。但し、Ｂピクチャに関するデ
ータはピクチャタイプ判別部１１１において廃棄される
ため、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）
１１２における機能としてはＩ ／ Ｐ ピクチャのみを
復号化出来ればよい。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）１１２の出力となる画素値は、間引き部
１１３に入力される。
【００１０】当該間引き部１１３は、水平方向について
は１／２の間引き処理を施し、垂直方向については第一
フィールド若しくは第二フィールドのどちらか一方のデ
ータのみを残し、もう一方を廃棄することにより、入力
となる画像情報の１／４の大きさを持つ順次走査画像を
生成する。間引き部１１３によって生成された順次走査
画像は、一旦、ビデオメモリ１１４に蓄積された後に読
み出され、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯ
Ｐ）１１５に入力する。
は１／２の間引き処理を施し、垂直方向については第一
フィールド若しくは第二フィールドのどちらか一方のデ
ータのみを残し、もう一方を廃棄することにより、入力
となる画像情報の１／４の大きさを持つ順次走査画像を
生成する。間引き部１１３によって生成された順次走査
画像は、一旦、ビデオメモリ１１４に蓄積された後に読
み出され、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯ
Ｐ）１１５に入力する。
【００１１】ここで、例えば、入力となるＭＰＥＧ２画
圧縮情報（ビットストリーム）がＮＴＳＣ（National T
elevision System Committee）の規格に準拠したもの、
つまり７２０×４８０画素、３０Ｈｚの飛び越し走査画
像であった場合、上記間引き後の画枠は３６０×２４０
画素ということになるが、後続のＭＰＥＧ４画像情報符
号化部（Ｉ／Ｐ−ＶＯＰ）１１５において符号化を行う
際、マクロブロック単位の処理を行うには、水平方向、
垂直方向ともに、その画素数が１６の倍数である必要が
ある。したがって、このための画素の補填若しくは廃棄
を上記間引き部１１３において同時に行う。すなわちこ
のときの間引き部１１３は、上記画素の補填若しくは廃
棄として、例えば水平方向の右端若しくは左端の８ライ
ンを廃棄して３５２×２４０画素とする。
圧縮情報（ビットストリーム）がＮＴＳＣ（National T
elevision System Committee）の規格に準拠したもの、
つまり７２０×４８０画素、３０Ｈｚの飛び越し走査画
像であった場合、上記間引き後の画枠は３６０×２４０
画素ということになるが、後続のＭＰＥＧ４画像情報符
号化部（Ｉ／Ｐ−ＶＯＰ）１１５において符号化を行う
際、マクロブロック単位の処理を行うには、水平方向、
垂直方向ともに、その画素数が１６の倍数である必要が
ある。したがって、このための画素の補填若しくは廃棄
を上記間引き部１１３において同時に行う。すなわちこ
のときの間引き部１１３は、上記画素の補填若しくは廃
棄として、例えば水平方向の右端若しくは左端の８ライ
ンを廃棄して３５２×２４０画素とする。
【００１２】上記ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ
−ＶＯＰ）１１５では、入力した順次走査画像の信号を
符号化してＭＰＥＧ４画像圧縮情報（ビットストリー
ム）を生成し、そのＭＰＥＧ４画像圧縮情報が出力端子
１１８から後段へ出力される。その際、入力となるＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）中の動きベク
トル情報は、動きベクトル合成部１１６において間引き
後の画像情報に対する動きベクトルにマッピングされ、
また、動きベクトル検出部１１７では、動きベクトル合
成部１１６において合成された動きベクトル値を元に高
精度の動きベクトルを検出する。なお、ＭＰＥＧ４にお
いて、ＶＯＰ（Video Object Plane）とは、オブジェク
トを囲む１つまたは複数のマクロブロックから構成され
る領域を表し、ＭＰＥＧ２におけるフレームに相当する
ものである。このＶＯＰの領域は、符号化される方式に
したがって、Ｉピクチャ、Ｐピクチャ、およびＢピクチ
ャのうちのいずれかに分類される。Ｉ−ＶＯＰ（Ｉピク
チャのＶＯＰ）は、動き補償を行うことなく、画像（領
域）そのものが符号化（イントラ符号化）されるもので
ある。Ｐ−ＶＯＰ（ＰピクチャのＶＯＰ）は、基本的に
は、自身より時間的に前に位置する画像（ＩまたはＰ−
ＶＯＰ）に基づいて、前方予測符号化される。Ｂ−ＶＯ
Ｐ（ＢピクチャのＶＯＰ）は、基本的には、自身より時
間的に前と後ろに位置する２つの画像（ＩまたはＰ−Ｖ
ＯＰ）に基づいて両方向予測符号化されるものである。
−ＶＯＰ）１１５では、入力した順次走査画像の信号を
符号化してＭＰＥＧ４画像圧縮情報（ビットストリー
ム）を生成し、そのＭＰＥＧ４画像圧縮情報が出力端子
１１８から後段へ出力される。その際、入力となるＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）中の動きベク
トル情報は、動きベクトル合成部１１６において間引き
後の画像情報に対する動きベクトルにマッピングされ、
また、動きベクトル検出部１１７では、動きベクトル合
成部１１６において合成された動きベクトル値を元に高
精度の動きベクトルを検出する。なお、ＭＰＥＧ４にお
いて、ＶＯＰ（Video Object Plane）とは、オブジェク
トを囲む１つまたは複数のマクロブロックから構成され
る領域を表し、ＭＰＥＧ２におけるフレームに相当する
ものである。このＶＯＰの領域は、符号化される方式に
したがって、Ｉピクチャ、Ｐピクチャ、およびＢピクチ
ャのうちのいずれかに分類される。Ｉ−ＶＯＰ（Ｉピク
チャのＶＯＰ）は、動き補償を行うことなく、画像（領
域）そのものが符号化（イントラ符号化）されるもので
ある。Ｐ−ＶＯＰ（ＰピクチャのＶＯＰ）は、基本的に
は、自身より時間的に前に位置する画像（ＩまたはＰ−
ＶＯＰ）に基づいて、前方予測符号化される。Ｂ−ＶＯ
Ｐ（ＢピクチャのＶＯＰ）は、基本的には、自身より時
間的に前と後ろに位置する２つの画像（ＩまたはＰ−Ｖ
ＯＰ）に基づいて両方向予測符号化されるものである。
【００１３】上述のように、文献１には、入力となるＭ
ＰＥＧ２画像圧縮情報（ビットストリーム）の１／２×
１／２の大きさを持つ順次走査画像のＭＰＥＧ４画像圧
縮情報（ビットストリーム）を生成する装置に関する技
術が述べられている。すなわち、入力となるＭＰＥＧ２
画圧縮情報（ビットストリーム）が例えばＮＴＳＣの規
格に準拠したものであった場合、出力となるＭＰＥＧ４
画像圧縮情報はＳＩＦサイズ（３５２×２４０）という
ことになるが、上記図５の構成によれば、上記間引き部
１１３における動作の変更を行うことにより、それ以外
の画枠、例えば上記の例では約１／４×１／４の画枠で
あるＱＳＩＦ（１７６×１１２画素）サイズの画像に変
換することも可能となっている。
ＰＥＧ２画像圧縮情報（ビットストリーム）の１／２×
１／２の大きさを持つ順次走査画像のＭＰＥＧ４画像圧
縮情報（ビットストリーム）を生成する装置に関する技
術が述べられている。すなわち、入力となるＭＰＥＧ２
画圧縮情報（ビットストリーム）が例えばＮＴＳＣの規
格に準拠したものであった場合、出力となるＭＰＥＧ４
画像圧縮情報はＳＩＦサイズ（３５２×２４０）という
ことになるが、上記図５の構成によれば、上記間引き部
１１３における動作の変更を行うことにより、それ以外
の画枠、例えば上記の例では約１／４×１／４の画枠で
あるＱＳＩＦ（１７６×１１２画素）サイズの画像に変
換することも可能となっている。
【００１４】また、文献１には、ＭＰＥＧ２画像情報復
号化（Ｉ／Ｐピクチャ）１１２における処理として、水
平方向、垂直方向それぞれについて、入力となるＭＰＥ
Ｇ２画像圧縮情報（ビットストリーム）内の、８次の離
散コサイン変換係数すべてを用いた復号処理を行う装置
について述べられているが、図５に示した装置に関して
はその限りではなく、水平方向のみ、或いは水平方向、
垂直方向ともに、８次の離散コサイン変換係数のうちの
低域成分のみを用いた復号処理を行い、画質劣化を最小
限に抑えながら、復号処理に伴う演算量とビデオメモリ
容量を削減することが可能となされている。
号化（Ｉ／Ｐピクチャ）１１２における処理として、水
平方向、垂直方向それぞれについて、入力となるＭＰＥ
Ｇ２画像圧縮情報（ビットストリーム）内の、８次の離
散コサイン変換係数すべてを用いた復号処理を行う装置
について述べられているが、図５に示した装置に関して
はその限りではなく、水平方向のみ、或いは水平方向、
垂直方向ともに、８次の離散コサイン変換係数のうちの
低域成分のみを用いた復号処理を行い、画質劣化を最小
限に抑えながら、復号処理に伴う演算量とビデオメモリ
容量を削減することが可能となされている。
【００１５】ところで、図５に示した画像情報変換装置
では、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
１１５においてＰ−ＶＯＰの符号化を行う際に、各マク
ロブロックを、ＭＰＥＧ４に規定されるイントラ（INTR
A）マクロブロックとして符号化するか、１６×１６画
素のインター（INTER）マクロブロックとして符号化す
るか、或いは、８×８画素のインター４Ｖ（INTER4V）
マクロブロックとして符号化するかの符号化モードのタ
イプ判定を行う必要がある。
では、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
１１５においてＰ−ＶＯＰの符号化を行う際に、各マク
ロブロックを、ＭＰＥＧ４に規定されるイントラ（INTR
A）マクロブロックとして符号化するか、１６×１６画
素のインター（INTER）マクロブロックとして符号化す
るか、或いは、８×８画素のインター４Ｖ（INTER4V）
マクロブロックとして符号化するかの符号化モードのタ
イプ判定を行う必要がある。
【００１６】ここで、モード判定の一般的な手法として
は、ＭＰＥＧ−４ Ｖｉｄｅｏ Ｖｅｒｉｆｉｃａｔｉ
ｏｎ Ｍｏｄｅｌ（ISO/IEC JTC1/SC29/WG11 N2932、以
下これを文献２とする）において定められた手法を用い
ることが考えられる。
は、ＭＰＥＧ−４ Ｖｉｄｅｏ Ｖｅｒｉｆｉｃａｔｉ
ｏｎ Ｍｏｄｅｌ（ISO/IEC JTC1/SC29/WG11 N2932、以
下これを文献２とする）において定められた手法を用い
ることが考えられる。
【００１７】以下、図６を参照しながら、文献２におい
て述べられているモード判定（図５のＭＰＥＧ４画像情
報符号化部（Ｉ／Ｐ−ＶＯＰ）１１５で行われるモード
判定）の手法について述べる。
て述べられているモード判定（図５のＭＰＥＧ４画像情
報符号化部（Ｉ／Ｐ−ＶＯＰ）１１５で行われるモード
判定）の手法について述べる。
【００１８】先ず、ステップＳ１０１として、動きベク
トル検出により、インター動きベクトル及びインター４
Ｖ動きベクトルを求める。
トル検出により、インター動きベクトル及びインター４
Ｖ動きベクトルを求める。
【００１９】次に、ステップＳ１０２において、インタ
ー動きベクトル及びインター４Ｖ動きベクトルにより生
成される予測画をそれぞれＲｅｆINTER， Ｒｅｆ
INTER4Vで表し、原画をＯｒｇで表すとし、さらに、ス
テップＳ１０３において、当該マクロブロックをインタ
ーマクロブロック、及びインター４Ｖマクロブロックと
して符号化した場合の予測誤差ＥＲＲINTER，ＥＲＲ
INTER4Vをそれぞれ式（１）及び式（２）によって算出
し、また、当該マクロブロックに含まれる画素の平均値
をＭｅａｎ＿ＭＢとして、当該マクロブロックをイント
ラマクロブロックとして符号化した場合の予測誤差ＥＲ
ＲINTRAを、式（3）のように定義する。
ー動きベクトル及びインター４Ｖ動きベクトルにより生
成される予測画をそれぞれＲｅｆINTER， Ｒｅｆ
INTER4Vで表し、原画をＯｒｇで表すとし、さらに、ス
テップＳ１０３において、当該マクロブロックをインタ
ーマクロブロック、及びインター４Ｖマクロブロックと
して符号化した場合の予測誤差ＥＲＲINTER，ＥＲＲ
INTER4Vをそれぞれ式（１）及び式（２）によって算出
し、また、当該マクロブロックに含まれる画素の平均値
をＭｅａｎ＿ＭＢとして、当該マクロブロックをイント
ラマクロブロックとして符号化した場合の予測誤差ＥＲ
ＲINTRAを、式（3）のように定義する。
【００２０】 ＥＲＲINTER ＝ＳＡＤ（Ｏｒｇ−ＲｅｆINTER） (1) ＥＲＲINTER4v＝ＳＡＤ（Ｏｒｇ−ＲｅｆINTER4v） (2) ＥＲＲINTRA ＝ＳＡＤ（Ｏｒｇ−Ｍｅａｎ＿ＭＢ） (3) なお式中のＳＡＤは絶対値誤差和（Sum of Absolute Di
fference）を表す。
fference）を表す。
【００２１】次に、ステップＳ１０４として、上記式
（１）及び式（２）で求められた予測誤差ＥＲ
ＲINTER，ＥＲＲINTER4Vから、インターマクロブロック
として符号化するのと、インター４Ｖマクロブロックと
して符号化するのと、どちらの符号化効率が良いかの判
定を行う。すなわち、式（４）が成立すれば、インター
マクロブロックとして符号化した方が符号化効率が良い
とし、成立しなければインター４Ｖマクロブロックとし
て符号化した方が符号化効率が良いと判定する。
（１）及び式（２）で求められた予測誤差ＥＲ
ＲINTER，ＥＲＲINTER4Vから、インターマクロブロック
として符号化するのと、インター４Ｖマクロブロックと
して符号化するのと、どちらの符号化効率が良いかの判
定を行う。すなわち、式（４）が成立すれば、インター
マクロブロックとして符号化した方が符号化効率が良い
とし、成立しなければインター４Ｖマクロブロックとし
て符号化した方が符号化効率が良いと判定する。
【００２２】 ＥＲＲINTER−Ｏｆｆｓｅｔ＜ＥＲＲINTER4v (4) なおこの式（４）において、Ｏｆｆｓｅｔはインターマ
クロブロックを選ばれ易くするためのパラメータで、文
献２においては１２９と定められている。
クロブロックを選ばれ易くするためのパラメータで、文
献２においては１２９と定められている。
【００２３】次に、式（４）によってインターマクロブ
ロックが選ばれた場合、パラメータＥＲＲを式（５）の
ように定義し、一方、インター４Ｖマクロブロックが選
ばれた場合、パラメータＥＲＲを式（６）のように定義
する。
ロックが選ばれた場合、パラメータＥＲＲを式（５）の
ように定義し、一方、インター４Ｖマクロブロックが選
ばれた場合、パラメータＥＲＲを式（６）のように定義
する。
【００２４】 ＥＲＲ＝ＥＲＲINTER (5) ＥＲＲ＝ＥＲＲINTER4V (6) 次に、上記パラメータＥＲＲ及び前記式（３）により定
義される予測誤差ＥＲＲINTRAから、当該マクロブロッ
クをイントラマクロブロックとして符号化するのと、式
（４）によって選択されたマクロブロックモードで符号
化するのとではどちらが符号化効率が高いかの判定を行
う。すなわち式（７）が成立すれば、イントラマクロブ
ロックとして符号化する方が効率が良いとし、成立しな
ければ式（３）によって選択されたマクロブロックモー
ドで符号化する方が効率が良いとする。
義される予測誤差ＥＲＲINTRAから、当該マクロブロッ
クをイントラマクロブロックとして符号化するのと、式
（４）によって選択されたマクロブロックモードで符号
化するのとではどちらが符号化効率が高いかの判定を行
う。すなわち式（７）が成立すれば、イントラマクロブ
ロックとして符号化する方が効率が良いとし、成立しな
ければ式（３）によって選択されたマクロブロックモー
ドで符号化する方が効率が良いとする。
【００２５】 ＥＲＲINTRA＜ＥＲＲ (7) つまり、図６のステップＳ１０５において、ＥＲＲ
INTER＜ＥＲＲINTRAが成立しないときにはステップＳ１
０８としてイントラマクロブロックモードで符号化する
方が効率が良いとし、成立したときにはステップＳ１０
７としてインターマクロブロックモードで符号化する方
が効率が良いとする。また、ステップＳ１０６におい
て、ＥＲＲINTER4V＜ＥＲＲINTRAが成立しないときには
ステップＳ１０８としてイントラマクロブロックモード
で符号化する方が効率が良いとし、成立したときにはス
テップＳ１０９としてインター４Ｖマクロブロックモー
ドで符号化する方が効率が良いとする。
INTER＜ＥＲＲINTRAが成立しないときにはステップＳ１
０８としてイントラマクロブロックモードで符号化する
方が効率が良いとし、成立したときにはステップＳ１０
７としてインターマクロブロックモードで符号化する方
が効率が良いとする。また、ステップＳ１０６におい
て、ＥＲＲINTER4V＜ＥＲＲINTRAが成立しないときには
ステップＳ１０８としてイントラマクロブロックモード
で符号化する方が効率が良いとし、成立したときにはス
テップＳ１０９としてインター４Ｖマクロブロックモー
ドで符号化する方が効率が良いとする。
【００２６】上述のように、図５のＭＰＥＧ４画像情報
符号化部（Ｉ／Ｐ−ＶＯＰ）１１５では、図６に示した
ようなモード判定手法を用いて、最も符号化効率が高い
マクロブロックモードのタイプを選択し、その選択した
タイプのマクロブロックモードを使用して画像情報の符
号化処理を行うようになされている。
符号化部（Ｉ／Ｐ−ＶＯＰ）１１５では、図６に示した
ようなモード判定手法を用いて、最も符号化効率が高い
マクロブロックモードのタイプを選択し、その選択した
タイプのマクロブロックモードを使用して画像情報の符
号化処理を行うようになされている。
【００２７】なお、前述の動きベクトル合成部１１６及
び動きベクトル検出部１１７における動作原理に関して
は様々な方法が考えられるが、図５に示した画像情報変
換装置のように、入力端子１１０に供給されたＭＰＥＧ
２画像圧縮情報（ビットストリーム）の１／２×１／２
の画枠を持つＭＰＥＧ４画像圧縮情報（ビットストリー
ム）を出力する場合には、例えば図７に示すような流れ
で動きベクトルの合成及び検出を行うことが考えられ
る。
び動きベクトル検出部１１７における動作原理に関して
は様々な方法が考えられるが、図５に示した画像情報変
換装置のように、入力端子１１０に供給されたＭＰＥＧ
２画像圧縮情報（ビットストリーム）の１／２×１／２
の画枠を持つＭＰＥＧ４画像圧縮情報（ビットストリー
ム）を出力する場合には、例えば図７に示すような流れ
で動きベクトルの合成及び検出を行うことが考えられ
る。
【００２８】すなわち、動きベクトル合成部１１６で
は、先ずステップＳ１１１として、入力されたＭＰＥＧ
２画像圧縮情報（ビットストリーム）から動きベクトル
情報を抽出し、次に、ステップＳ１１２として、当該抽
出されたＭＰＥＧ２画像圧縮情報に対する動きベクトル
情報のスケーリング及び時間補正を行うことで、出力と
なるＭＰＥＧ４画像圧縮情報（ビットストリーム）に対
するインター４Ｖ動きベクトル情報を合成する。さら
に、動きベクトル合成部１１６では、ステップＳ１１３
として、上記生成されたインター４Ｖ動きベクトルの平
均値若しくは代表値をインター動きベクトルとする。
は、先ずステップＳ１１１として、入力されたＭＰＥＧ
２画像圧縮情報（ビットストリーム）から動きベクトル
情報を抽出し、次に、ステップＳ１１２として、当該抽
出されたＭＰＥＧ２画像圧縮情報に対する動きベクトル
情報のスケーリング及び時間補正を行うことで、出力と
なるＭＰＥＧ４画像圧縮情報（ビットストリーム）に対
するインター４Ｖ動きベクトル情報を合成する。さら
に、動きベクトル合成部１１６では、ステップＳ１１３
として、上記生成されたインター４Ｖ動きベクトルの平
均値若しくは代表値をインター動きベクトルとする。
【００２９】次に、動きベクトル検出部１０７では、ス
テップＳ１１４として、上記動きベクトル合成部１０６
で生成されたインター動きベクトル及びインター４Ｖ動
きベクトルについて、その周辺の数画素をサーチし、そ
れらインター動きベクトル及びインター４Ｖ動きベクト
ルの高精度化を行う。このようにして高精度化された動
きベクトルが前記図５のＭＰＥＧ４画像情報符号化部１
１５に送られる。
テップＳ１１４として、上記動きベクトル合成部１０６
で生成されたインター動きベクトル及びインター４Ｖ動
きベクトルについて、その周辺の数画素をサーチし、そ
れらインター動きベクトル及びインター４Ｖ動きベクト
ルの高精度化を行う。このようにして高精度化された動
きベクトルが前記図５のＭＰＥＧ４画像情報符号化部１
１５に送られる。
【００３０】
【発明が解決しようとする課題】ところで、図５に示し
た画像情報変換装置を用いて、ＣＣＩＲ（Comite Consu
ltatif International des Redio communications(仏),
International Redio Consultative Commitee(英)：国
際無線通信諮問委員会）に規定されているテストシーケ
ンスの一つであるいわゆる“Ｍｏｂｉｌｅ＆Ｃａｌｅｎ
ｄａｒ”を例えば４Ｍｂｐｓ（ビット／秒）に圧縮した
ＭＰＥＧ２画像圧縮情報（ビットストリーム）を、４０
０ｋｂｐｓのＭＰＥＧ４画像圧縮情報（ビットストリー
ム）に変換した場合を考えてみる。この例の場合、上記
動きベクトル合成部１０６で合成された動きベクトルの
マクロブロック内の下記式（８）に示す分散値（Distri
bution）Ｄｉｓｔと、ＭＰＥＧ４画像符号化部１１５に
おいてインターマクロブロック若しくはインター４Ｖマ
クロブロックのどちらが選択されたかの相関は、図８に
示すようになる。
た画像情報変換装置を用いて、ＣＣＩＲ（Comite Consu
ltatif International des Redio communications(仏),
International Redio Consultative Commitee(英)：国
際無線通信諮問委員会）に規定されているテストシーケ
ンスの一つであるいわゆる“Ｍｏｂｉｌｅ＆Ｃａｌｅｎ
ｄａｒ”を例えば４Ｍｂｐｓ（ビット／秒）に圧縮した
ＭＰＥＧ２画像圧縮情報（ビットストリーム）を、４０
０ｋｂｐｓのＭＰＥＧ４画像圧縮情報（ビットストリー
ム）に変換した場合を考えてみる。この例の場合、上記
動きベクトル合成部１０６で合成された動きベクトルの
マクロブロック内の下記式（８）に示す分散値（Distri
bution）Ｄｉｓｔと、ＭＰＥＧ４画像符号化部１１５に
おいてインターマクロブロック若しくはインター４Ｖマ
クロブロックのどちらが選択されたかの相関は、図８に
示すようになる。
【００３１】
【数１】
【００３２】なお、式（８）において、動きベクトル合
成部１０６により合成されたインター動きベクトルのｘ
方向、ｙ方向成分をそれぞれｍｖ16X16_x，ｍｖ16X16_y
とし、インター４Ｖ動きベクトルのｘ方向、ｙ方向成分
をそれぞれｍｖ8X8_x,i，ｍｖ8X8_y.i（ｉ＝１，２，
３，４）としている。
成部１０６により合成されたインター動きベクトルのｘ
方向、ｙ方向成分をそれぞれｍｖ16X16_x，ｍｖ16X16_y
とし、インター４Ｖ動きベクトルのｘ方向、ｙ方向成分
をそれぞれｍｖ8X8_x,i，ｍｖ8X8_y.i（ｉ＝１，２，
３，４）としている。
【００３３】この図８からも分かる通り、インター動き
ベクトルとインター４Ｖ動きベクトルのばらつき具合が
比較的小さいマクロブロックにおいては、インターマク
ロブロックが選択され易く、インター動きベクトルとイ
ンター４Ｖ動きベクトルのばらつき具合が比較的大きい
マクロブロックにおいてはインター４Ｖマクロブロック
が選択され易いと言える。すなわち、インター動きベク
トルとインター４Ｖ動きベクトルのばらつき具合が大き
いマクロブロックについて、図６に示したフローチャー
トに基づいたモード判定を行うと、前述のようにインタ
ー４Ｖマクロブロックが選択され易くなる。
ベクトルとインター４Ｖ動きベクトルのばらつき具合が
比較的小さいマクロブロックにおいては、インターマク
ロブロックが選択され易く、インター動きベクトルとイ
ンター４Ｖ動きベクトルのばらつき具合が比較的大きい
マクロブロックにおいてはインター４Ｖマクロブロック
が選択され易いと言える。すなわち、インター動きベク
トルとインター４Ｖ動きベクトルのばらつき具合が大き
いマクロブロックについて、図６に示したフローチャー
トに基づいたモード判定を行うと、前述のようにインタ
ー４Ｖマクロブロックが選択され易くなる。
【００３４】しかしながら、符号化効率の観点から言え
ば、インター４Ｖマクロブロックには、より多くの符号
（ビット）が動きベクトル情報に割り当てられるため、
離散コサイン変換係数に対する符号（ビット）が十分に
割り当てられなくなり、符号化効率の低減を招くという
問題点が生じる。
ば、インター４Ｖマクロブロックには、より多くの符号
（ビット）が動きベクトル情報に割り当てられるため、
離散コサイン変換係数に対する符号（ビット）が十分に
割り当てられなくなり、符号化効率の低減を招くという
問題点が生じる。
【００３５】また、図６に示したマクロブロックモード
判別法では、動き補償及び絶対値誤差和（ＳＡＤ）の算
出を行うため、多くの演算量を必要とする。
判別法では、動き補償及び絶対値誤差和（ＳＡＤ）の算
出を行うため、多くの演算量を必要とする。
【００３６】そこで、本発明は、このような実情に鑑み
てなされたものであり、マクロブロックモード判定に伴
う際の演算量を削減しつつ、画質劣化を最小限に抑える
ことを可能とする、画像情報変換装置及び方法を提供す
ることを目的とする。
てなされたものであり、マクロブロックモード判定に伴
う際の演算量を削減しつつ、画質劣化を最小限に抑える
ことを可能とする、画像情報変換装置及び方法を提供す
ることを目的とする。
【００３７】
【課題を解決するための手段】本発明の画像情報変換装
置は、複数画素からなる符号化単位毎に、少なくとも動
き予測を使用する符号化モードを含む複数タイプの符号
化モードの中から各々適応的に選択された符号化モード
を使用して符号化が行われて生成された第１の画像符号
化情報を、第２の画像符号化情報へ変換する画像情報変
換装置であり、上記第１の画像符号化情報を構成する各
符号化単位の動きベクトル情報を抽出する情報抽出手段
と、上記第２の画像符号化情報を構成する所望の符号化
単位に対応する上記第１の画像符号化情報の符号化単位
の上記動きベクトル情報から、上記第２の画像符号化情
報を構成する上記所望の符号化単位の動きベクトル情報
を生成する動きベクトル生成手段と、上記動きベクトル
生成手段により生成された上記所望の符号化単位の動き
ベクトル情報と、予め設定した第１，第２の閾値との比
較に基づいて、上記第２の画像符号化情報を構成する上
記所望の符号化単位についての符号化モードを判定する
符号化モード判定手段とを有し、上記第２の画像符号化
情報を構成する各符号化単位の符号化の際に、上記符号
化モード判定手段により判定された符号化モードを使用
することにより、上述した課題を解決する。
置は、複数画素からなる符号化単位毎に、少なくとも動
き予測を使用する符号化モードを含む複数タイプの符号
化モードの中から各々適応的に選択された符号化モード
を使用して符号化が行われて生成された第１の画像符号
化情報を、第２の画像符号化情報へ変換する画像情報変
換装置であり、上記第１の画像符号化情報を構成する各
符号化単位の動きベクトル情報を抽出する情報抽出手段
と、上記第２の画像符号化情報を構成する所望の符号化
単位に対応する上記第１の画像符号化情報の符号化単位
の上記動きベクトル情報から、上記第２の画像符号化情
報を構成する上記所望の符号化単位の動きベクトル情報
を生成する動きベクトル生成手段と、上記動きベクトル
生成手段により生成された上記所望の符号化単位の動き
ベクトル情報と、予め設定した第１，第２の閾値との比
較に基づいて、上記第２の画像符号化情報を構成する上
記所望の符号化単位についての符号化モードを判定する
符号化モード判定手段とを有し、上記第２の画像符号化
情報を構成する各符号化単位の符号化の際に、上記符号
化モード判定手段により判定された符号化モードを使用
することにより、上述した課題を解決する。
【００３８】また、本発明の画像情報変換方法は、複数
画素からなる符号化単位毎に、少なくとも動き予測を使
用する符号化モードを含む複数タイプの符号化モードの
中から各々適応的に選択された符号化モードを使用して
符号化が行われて生成された第１の画像符号化情報を、
第２の画像符号化情報へ変換する画像情報変換方法であ
り、上記第１の画像符号化情報を構成する各符号化単位
の動きベクトル情報を抽出し、上記第２の画像符号化情
報を構成する所望の符号化単位に対応する上記第１の画
像符号化情報の符号化単位の上記動きベクトル情報か
ら、上記第２の画像符号化情報を構成する上記所望の符
号化単位の動きベクトル情報を生成し、上記生成された
上記所望の符号化単位の動きベクトル情報と、予め設定
した第１，第２の閾値との比較に基づいて、上記第２の
画像符号化情報を構成する上記所望の符号化単位につい
ての符号化モードを判定し、上記第２の画像符号化情報
を構成する各符号化単位の符号化の際に、上記判定され
た符号化モードを使用することにより、上述した課題を
解決する。
画素からなる符号化単位毎に、少なくとも動き予測を使
用する符号化モードを含む複数タイプの符号化モードの
中から各々適応的に選択された符号化モードを使用して
符号化が行われて生成された第１の画像符号化情報を、
第２の画像符号化情報へ変換する画像情報変換方法であ
り、上記第１の画像符号化情報を構成する各符号化単位
の動きベクトル情報を抽出し、上記第２の画像符号化情
報を構成する所望の符号化単位に対応する上記第１の画
像符号化情報の符号化単位の上記動きベクトル情報か
ら、上記第２の画像符号化情報を構成する上記所望の符
号化単位の動きベクトル情報を生成し、上記生成された
上記所望の符号化単位の動きベクトル情報と、予め設定
した第１，第２の閾値との比較に基づいて、上記第２の
画像符号化情報を構成する上記所望の符号化単位につい
ての符号化モードを判定し、上記第２の画像符号化情報
を構成する各符号化単位の符号化の際に、上記判定され
た符号化モードを使用することにより、上述した課題を
解決する。
【００３９】すなわち、本発明によれば、入力となる例
えばＭＰＥＧ２画像圧縮情報（ビットストリーム）に含
まれる動きベクトル情報から、例えばＭＰＥＧ４符号化
に必要な動きベクトル情報の合成を行い、さらに、上記
合成された動きベクトル情報を元に更に高精度の動きベ
クトル検出を行い、出力となるＭＰＥＧ４画像圧縮情報
（ビットストリーム）におけるマクロブロックのモード
判定を行う際には、当該出力となるＭＰＥＧ４画像圧縮
情報（ビットストリーム）に対するインター動きベクト
ル及びインター４Ｖ動きベクトル、並びに予め設定され
た２つの閾値を用いて、出力となるＭＰＥＧ４画像圧縮
情報（ビットストリーム）における当該マクロブロック
がインターモードであるかインター４Ｖモードであるか
の判定を行い、その判定されたモードを使用してＭＰＥ
Ｇ４画像符号化処理を行うようになされている。
えばＭＰＥＧ２画像圧縮情報（ビットストリーム）に含
まれる動きベクトル情報から、例えばＭＰＥＧ４符号化
に必要な動きベクトル情報の合成を行い、さらに、上記
合成された動きベクトル情報を元に更に高精度の動きベ
クトル検出を行い、出力となるＭＰＥＧ４画像圧縮情報
（ビットストリーム）におけるマクロブロックのモード
判定を行う際には、当該出力となるＭＰＥＧ４画像圧縮
情報（ビットストリーム）に対するインター動きベクト
ル及びインター４Ｖ動きベクトル、並びに予め設定され
た２つの閾値を用いて、出力となるＭＰＥＧ４画像圧縮
情報（ビットストリーム）における当該マクロブロック
がインターモードであるかインター４Ｖモードであるか
の判定を行い、その判定されたモードを使用してＭＰＥ
Ｇ４画像符号化処理を行うようになされている。
【００４０】
【発明の実施の形態】以下、本発明の好ましい実施の形
態について、図面を参照しながら説明する。
態について、図面を参照しながら説明する。
【００４１】図１には、本発明実施の形態の画像情報変
換装置の概略構成を示す。
換装置の概略構成を示す。
【００４２】この図１において、入力端子１に供給され
た飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットスト
リーム）は、先ずピクチャタイプ判別部８に入力する。
た飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットスト
リーム）は、先ずピクチャタイプ判別部８に入力する。
【００４３】当該ピクチャタイプ判別部８は、Ｉ／Ｐピ
クチャに関する情報については出力して圧縮情報解析部
９へ送るが、Ｂピクチャに関する情報については破棄す
る。これによりフレームレートの変換が行われる。
クチャに関する情報については出力して圧縮情報解析部
９へ送るが、Ｂピクチャに関する情報については破棄す
る。これによりフレームレートの変換が行われる。
【００４４】圧縮情報解析部９では、ピクチャタイプ判
別部８から送られてきた画像圧縮情報の構文解析を行う
ことにより、当該ＭＰＥＧ２画像圧縮情報の符号化に関
連する情報を抽出し、その符号化に関連する情報を情報
バッファ１４へ送り、また、当該ＭＰＥＧ２動きベクト
ル情報を動きベクトル合成部１５へ送り、画像圧縮情報
についてはＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）１０へ送る。なお、上記圧縮情報解析部９により抽
出される情報の詳細については後述する。
別部８から送られてきた画像圧縮情報の構文解析を行う
ことにより、当該ＭＰＥＧ２画像圧縮情報の符号化に関
連する情報を抽出し、その符号化に関連する情報を情報
バッファ１４へ送り、また、当該ＭＰＥＧ２動きベクト
ル情報を動きベクトル合成部１５へ送り、画像圧縮情報
についてはＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）１０へ送る。なお、上記圧縮情報解析部９により抽
出される情報の詳細については後述する。
【００４５】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）１０は、図５に示した装置のものと同等である。
Ｂピクチャに関する情報は前段のピクチャタイプ判別部
８において既に破棄されているため、当該ＭＰＥＧ２画
像情報復号化部１０の機能としては、Ｉ／Ｐピクチャに
関する情報のみの復号化処理を行えるものであれば良
い。ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１
０の出力となる画素値は、間引き部１１に入力される。
チャ）１０は、図５に示した装置のものと同等である。
Ｂピクチャに関する情報は前段のピクチャタイプ判別部
８において既に破棄されているため、当該ＭＰＥＧ２画
像情報復号化部１０の機能としては、Ｉ／Ｐピクチャに
関する情報のみの復号化処理を行えるものであれば良
い。ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１
０の出力となる画素値は、間引き部１１に入力される。
【００４６】当該間引き部１１は、水平方向については
１／２の間引き処理を施し、垂直方向については第一フ
ィールド若しくは第二フィールドのどちらか一方のデー
タのみを残し、もう一方を廃棄することにより、入力と
なる画像情報の１／４の大きさを持つ順次走査画像を生
成する。ここで例えば、入力端子１へ供給されたＭＰＥ
Ｇ２画圧縮情報（ビットストリーム）がＮＴＳＣ（Nati
onal Television System Committee）の規格に準拠した
もの、つまり７２０×４８０画素、３０Ｈｚの飛び越し
走査画像であった場合、上記間引き後の画枠は３６０×
２４０画素ということになる。但し、後続のＭＰＥＧ４
画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１５において符
号化を行う際、マクロブロック単位の処理を行うには、
水平方向、垂直方向ともに、その画素数が１６の倍数で
ある必要がある。したがって、当該間引き部１１は、上
記間引きと同時に、上記画素数を１６の倍数にするため
の画素の補填若しくは廃棄を同時に行う。すなわち、こ
の例の場合の間引き部１１は、例えば上記３６０×２４
０画素に対して、例えば水平方向の右端若しくは左端の
８ラインを廃棄することで、上記１６の倍数である３５
２×２４０画素の画枠を構成する。当該間引き部１１に
よって生成された順次走査画像は、一旦、ビデオメモリ
１２に蓄積された後、後段のＭＰＥＧ４画像情報符号化
部（Ｉ／Ｐ−ＶＯＰ）１３の要求に応じて読み出され
る。
１／２の間引き処理を施し、垂直方向については第一フ
ィールド若しくは第二フィールドのどちらか一方のデー
タのみを残し、もう一方を廃棄することにより、入力と
なる画像情報の１／４の大きさを持つ順次走査画像を生
成する。ここで例えば、入力端子１へ供給されたＭＰＥ
Ｇ２画圧縮情報（ビットストリーム）がＮＴＳＣ（Nati
onal Television System Committee）の規格に準拠した
もの、つまり７２０×４８０画素、３０Ｈｚの飛び越し
走査画像であった場合、上記間引き後の画枠は３６０×
２４０画素ということになる。但し、後続のＭＰＥＧ４
画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１５において符
号化を行う際、マクロブロック単位の処理を行うには、
水平方向、垂直方向ともに、その画素数が１６の倍数で
ある必要がある。したがって、当該間引き部１１は、上
記間引きと同時に、上記画素数を１６の倍数にするため
の画素の補填若しくは廃棄を同時に行う。すなわち、こ
の例の場合の間引き部１１は、例えば上記３６０×２４
０画素に対して、例えば水平方向の右端若しくは左端の
８ラインを廃棄することで、上記１６の倍数である３５
２×２４０画素の画枠を構成する。当該間引き部１１に
よって生成された順次走査画像は、一旦、ビデオメモリ
１２に蓄積された後、後段のＭＰＥＧ４画像情報符号化
部（Ｉ／Ｐ−ＶＯＰ）１３の要求に応じて読み出され
る。
【００４７】また、動きベクトル合成部１５では、ＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）から取り出さ
れたＭＰＥＧ２動きベクトル情報を、上記間引き後の画
像情報に対する動きベクトルにマッピングし、さらに次
段の動きベクトル検出部１６では、動きベクトル合成部
１５において合成された動きベクトル値と、ビデオメモ
リ１２に記憶された画像情報とを元に、高精度の動きベ
クトルを検出する。この検出された動きベクトルは、Ｍ
ＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１３とイ
ンター／インター４Ｖ判定部１６に送られる。
ＥＧ２画像圧縮情報（ビットストリーム）から取り出さ
れたＭＰＥＧ２動きベクトル情報を、上記間引き後の画
像情報に対する動きベクトルにマッピングし、さらに次
段の動きベクトル検出部１６では、動きベクトル合成部
１５において合成された動きベクトル値と、ビデオメモ
リ１２に記憶された画像情報とを元に、高精度の動きベ
クトルを検出する。この検出された動きベクトルは、Ｍ
ＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１３とイ
ンター／インター４Ｖ判定部１６に送られる。
【００４８】上記ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ
−ＶＯＰ）１３では、情報バッファ１４に保持された前
記ＭＰＥＧ２画像圧縮情報の符号化に関連する情報と、
上記動きベクトル検出部１６からの動きベクトル情報
と、後述するインター／インター４Ｖ判定部１６での判
定処理により得られたマクロブロックモード情報とを用
い、上記ビデオメモリ１２から供給された順次走査画像
の信号を符号化してＭＰＥＧ４画像圧縮情報（ビットス
トリーム）を生成する。当該ＭＰＥＧ４画像圧縮情報
は、出力端子２から後段へ出力される。
−ＶＯＰ）１３では、情報バッファ１４に保持された前
記ＭＰＥＧ２画像圧縮情報の符号化に関連する情報と、
上記動きベクトル検出部１６からの動きベクトル情報
と、後述するインター／インター４Ｖ判定部１６での判
定処理により得られたマクロブロックモード情報とを用
い、上記ビデオメモリ１２から供給された順次走査画像
の信号を符号化してＭＰＥＧ４画像圧縮情報（ビットス
トリーム）を生成する。当該ＭＰＥＧ４画像圧縮情報
は、出力端子２から後段へ出力される。
【００４９】なお、図１に示した本実施の形態の画像情
報変換装置において、イントラ／インター判定部１７及
びインター／インター４Ｖ判定部１６におけるマクロブ
ロックモード判定以外の各構成要素は、図５に示した画
像情報変換装置と同様である。
報変換装置において、イントラ／インター判定部１７及
びインター／インター４Ｖ判定部１６におけるマクロブ
ロックモード判定以外の各構成要素は、図５に示した画
像情報変換装置と同様である。
【００５０】以下、本発明の第１の実施の形態の画像情
報変換装置のイントラ／インター判定部１７及びインタ
ー／インター４Ｖ判定部１６におけるマクロブロックモ
ード判定動作について、以下の図２，図３を用いて説明
する。
報変換装置のイントラ／インター判定部１７及びインタ
ー／インター４Ｖ判定部１６におけるマクロブロックモ
ード判定動作について、以下の図２，図３を用いて説明
する。
【００５１】イントラ／インター判定部１７は、出力と
なるＭＰＥＧ４画像圧縮情報（ビットストリーム）のＰ
−ＶＯＰに含まれる当該マクロブロックについて、先
ず、イントラ／インターのモード判定を行う。ここで、
イントラ／インターのモード判定については、前記式
（７）のように、予測残差の比較によるモード判定を行
ってもよいが、本実施の形態では、ステップＳ１の処理
として、以下に述べるように、情報バッファ１８に格納
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）の
符号化に関連する情報のうち、出力となるＭＰＥＧ４画
像圧縮情報のＰ−ＶＯＰに対応するマクロブロックに関
する情報を抽出し、さらにステップＳ２として、その抽
出した情報を利用してイントラ／インターのモード判定
を行う。
なるＭＰＥＧ４画像圧縮情報（ビットストリーム）のＰ
−ＶＯＰに含まれる当該マクロブロックについて、先
ず、イントラ／インターのモード判定を行う。ここで、
イントラ／インターのモード判定については、前記式
（７）のように、予測残差の比較によるモード判定を行
ってもよいが、本実施の形態では、ステップＳ１の処理
として、以下に述べるように、情報バッファ１８に格納
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）の
符号化に関連する情報のうち、出力となるＭＰＥＧ４画
像圧縮情報のＰ−ＶＯＰに対応するマクロブロックに関
する情報を抽出し、さらにステップＳ２として、その抽
出した情報を利用してイントラ／インターのモード判定
を行う。
【００５２】ここで、上記飛び越し走査のＭＰＥＧ２画
像圧縮情報（ビットストリーム）の約１／２×１／２の
画枠を持つ順次走査のＭＰＥＧ４画像圧縮情報（ビット
ストリーム）を出力する場合において、例えば図３に示
すように、入力端子１に供給されたＭＰＥＧ２画像圧縮
情報を構成する画像ＳＴＲ２に含まれる４つのマクロブ
ロックＭＢMPEG2,i（ｉ＝１，２，３，４）が、ＭＰＥ
Ｇ４画像圧縮情報を構成する画像ＳＴＲ４におけるマク
ロブロックＭＢMPEG4,1に対応している場合を例に挙げ
て考えることとする。
像圧縮情報（ビットストリーム）の約１／２×１／２の
画枠を持つ順次走査のＭＰＥＧ４画像圧縮情報（ビット
ストリーム）を出力する場合において、例えば図３に示
すように、入力端子１に供給されたＭＰＥＧ２画像圧縮
情報を構成する画像ＳＴＲ２に含まれる４つのマクロブ
ロックＭＢMPEG2,i（ｉ＝１，２，３，４）が、ＭＰＥ
Ｇ４画像圧縮情報を構成する画像ＳＴＲ４におけるマク
ロブロックＭＢMPEG4,1に対応している場合を例に挙げ
て考えることとする。
【００５３】この例において、イントラ／インター判定
部１７では、入力ＭＰＥＧ２画像圧縮情報を構成する画
像ＳＴＲ２のＭＢMPEG2,iのうち、マクロブロックのタ
イプがイントラマクロブロックであるものの個数をＮ
INTRA、インターマクロブロックであるものの個数をＮ
INTERとして、下記式（９）が成立する時、ステップＳ
２においてイントラマクロブロックと判定し、ステップ
Ｓ６にて上記出力となるＭＰＥＧ４画像圧縮情報を構成
する画像ＳＴＲ４のマクロブロックをイントラマクロブ
ロックに決定する。
部１７では、入力ＭＰＥＧ２画像圧縮情報を構成する画
像ＳＴＲ２のＭＢMPEG2,iのうち、マクロブロックのタ
イプがイントラマクロブロックであるものの個数をＮ
INTRA、インターマクロブロックであるものの個数をＮ
INTERとして、下記式（９）が成立する時、ステップＳ
２においてイントラマクロブロックと判定し、ステップ
Ｓ６にて上記出力となるＭＰＥＧ４画像圧縮情報を構成
する画像ＳＴＲ４のマクロブロックをイントラマクロブ
ロックに決定する。
【００５４】 ＮINTRA＞ＮINTER (9) 一方、下記式（１０）が成立する時、イントラ／インタ
ー判定部１７は、ステップＳ２においてインターマクロ
ブロック若しくはインター４Ｖマクロブロックと判定
し、次のステップＳ３に処理を渡す。
ー判定部１７は、ステップＳ２においてインターマクロ
ブロック若しくはインター４Ｖマクロブロックと判定
し、次のステップＳ３に処理を渡す。
【００５５】 ＮINTRA＜ＮINTER (10) なお、下記式（１１）が成立する時には、イントラマク
ロブロックとしても良いし、インターマクロブロック若
しくはインター４Ｖマクロブロックとしても良い。
ロブロックとしても良いし、インターマクロブロック若
しくはインター４Ｖマクロブロックとしても良い。
【００５６】 ＮINTRA＝ＮINTER (11) また、前述の式（７）のように、残差を用いたモード判
定を行っても良い。或いは、マクロブロックＭＢ
MPEG2,iにそれぞれ対する量子化スケールをＱ
MPEG2,i（ｉ＝１，２，３，４）とし、それぞれ割り当
てられた符号量（ビット数）をＢ MPEG2,i（ｉ＝１，
２，３，４）としたとき、下記式（１２）のように、そ
れらマクロブロックＭＢMPEG2,iに対するコンプレキシ
ティＸMPEG2,i（ｉ＝１，２，３，４）を、式（１１）
により計算し、このコンプレキシティを用いて符号化効
率が良いと思われるモードを選択するようにしても良
い。
定を行っても良い。或いは、マクロブロックＭＢ
MPEG2,iにそれぞれ対する量子化スケールをＱ
MPEG2,i（ｉ＝１，２，３，４）とし、それぞれ割り当
てられた符号量（ビット数）をＢ MPEG2,i（ｉ＝１，
２，３，４）としたとき、下記式（１２）のように、そ
れらマクロブロックＭＢMPEG2,iに対するコンプレキシ
ティＸMPEG2,i（ｉ＝１，２，３，４）を、式（１１）
により計算し、このコンプレキシティを用いて符号化効
率が良いと思われるモードを選択するようにしても良
い。
【００５７】 ＸMPEG2,i＝ＱMPEG2,i・ＢMPEG2,i (12) 次に、上記イントラ／インター判定部１７において、イ
ンターマクロブロック若しくはインター４Ｖマクロブロ
ックであると判定されたマクロブロックに関しては、以
下に述べる方法により、インター／インター４Ｖ判定部
１６において、インターマクロブロック若しくはインタ
ー４Ｖマクロブロックのいずれであるかのモード判定が
行われる。
ンターマクロブロック若しくはインター４Ｖマクロブロ
ックであると判定されたマクロブロックに関しては、以
下に述べる方法により、インター／インター４Ｖ判定部
１６において、インターマクロブロック若しくはインタ
ー４Ｖマクロブロックのいずれであるかのモード判定が
行われる。
【００５８】ここで、インター／インター４Ｖ判定部１
６には、予め定められた第１の閾値θ1及び第２の閾値
θ2（θ1＜θ2）に関する情報が格納されている。イン
ター／インター４Ｖ判定部１６は、ステップＳ３とし
て、動きベクトル検出部１５から供給されたインター動
きベクトル及びインター４Ｖ動きベクトルを用いて、前
記式（８）若しくは下記式（１３）により、当該マクロ
ブロックにおける動きベクトルの分散値Ｄｉｓｔを算出
する。
６には、予め定められた第１の閾値θ1及び第２の閾値
θ2（θ1＜θ2）に関する情報が格納されている。イン
ター／インター４Ｖ判定部１６は、ステップＳ３とし
て、動きベクトル検出部１５から供給されたインター動
きベクトル及びインター４Ｖ動きベクトルを用いて、前
記式（８）若しくは下記式（１３）により、当該マクロ
ブロックにおける動きベクトルの分散値Ｄｉｓｔを算出
する。
【００５９】
【数２】
【００６０】なお、式（１２）において、動きベクトル
合成部１４により合成されたインター動きベクトルのｘ
方向、ｙ方向成分をそれぞれｍｖ16X16_x，ｍｖ16X16_y
とし、インター４Ｖ動きベクトルのｘ方向、ｙ方向成分
をそれぞれｍｖ8X8_x,i，ｍｖ8X8_y.i（ｉ＝１，２，
３，４）としている。
合成部１４により合成されたインター動きベクトルのｘ
方向、ｙ方向成分をそれぞれｍｖ16X16_x，ｍｖ16X16_y
とし、インター４Ｖ動きベクトルのｘ方向、ｙ方向成分
をそれぞれｍｖ8X8_x,i，ｍｖ8X8_y.i（ｉ＝１，２，
３，４）としている。
【００６１】次に、インター／インター４Ｖ判定部１６
は、ステップＳ４として、上記式（８）若しくは式（１
３）で計算された分散値Ｄｉｓｔと、上記予め定められ
ている第１の閾値θ1を用いて、下記式（１４）が成り
立つか否か判断する。
は、ステップＳ４として、上記式（８）若しくは式（１
３）で計算された分散値Ｄｉｓｔと、上記予め定められ
ている第１の閾値θ1を用いて、下記式（１４）が成り
立つか否か判断する。
【００６２】 Ｄｉｓｔ＜θ1 (14) この式（１４）が成り立つとき、インター／インター４
Ｖ判定部１６は、当該マクロブロックにおけるインター
動きベクトル及びインター４Ｖ動きベクトルのばらつき
が小さいと判断し、この場合はステップＳ７において当
該マクロブロックはインターマクロブロックであると判
定する。
Ｖ判定部１６は、当該マクロブロックにおけるインター
動きベクトル及びインター４Ｖ動きベクトルのばらつき
が小さいと判断し、この場合はステップＳ７において当
該マクロブロックはインターマクロブロックであると判
定する。
【００６３】また、式（１４）が成り立たないとき、イ
ンター／インター４Ｖ判定部１６は、ステップＳ５とし
て、上記式（８）若しくは式（１３）で計算された分散
値Ｄｉｓｔと上記予め定められている第２の閾値θ2を
用いて、下記式（１５）が成り立つか否か判断する。
ンター／インター４Ｖ判定部１６は、ステップＳ５とし
て、上記式（８）若しくは式（１３）で計算された分散
値Ｄｉｓｔと上記予め定められている第２の閾値θ2を
用いて、下記式（１５）が成り立つか否か判断する。
【００６４】 Ｄｉｓｔ＞θ2 (15) この式（１５）が成り立つとき、インター／インター４
Ｖ判定部１６は、当該マクロブロックをインター４Ｖマ
クロブロックとすると、動きベクトルが必要とする符号
量（ビット数）が増大し、符号化効率の低下に繋がるた
め、ステップＳ７においてインターマクロブロックであ
ると判定する。
Ｖ判定部１６は、当該マクロブロックをインター４Ｖマ
クロブロックとすると、動きベクトルが必要とする符号
量（ビット数）が増大し、符号化効率の低下に繋がるた
め、ステップＳ７においてインターマクロブロックであ
ると判定する。
【００６５】一方、式（１４）、式（１５）が共に成り
立たないとき、すなわち、分散地Ｄｉｓｔと第１，第２
の閾値θ1，θ2の関係が式（１６）であるとき、インタ
ー／インター４Ｖ判定部１６は、ステップＳ８として、
当該マクロブロックをインター４Ｖマクロブロックであ
ると判定する。
立たないとき、すなわち、分散地Ｄｉｓｔと第１，第２
の閾値θ1，θ2の関係が式（１６）であるとき、インタ
ー／インター４Ｖ判定部１６は、ステップＳ８として、
当該マクロブロックをインター４Ｖマクロブロックであ
ると判定する。
【００６６】 θ1≦Ｄｉｓｔ≦θ2 (16) 以上の一連のモード判定処理により求められたマクロブ
ロックのモード判定結果はＭＰＥＧ４画像情報符号化部
１３に送られる。上記ＭＰＥＧ４画像情報符号化部１３
では、上記ビデオメモリ１２から供給された順次走査画
像の信号を、上記モード判定結果に応じて符号化してＭ
ＰＥＧ４画像圧縮情報（ビットストリーム）を生成す
る。
ロックのモード判定結果はＭＰＥＧ４画像情報符号化部
１３に送られる。上記ＭＰＥＧ４画像情報符号化部１３
では、上記ビデオメモリ１２から供給された順次走査画
像の信号を、上記モード判定結果に応じて符号化してＭ
ＰＥＧ４画像圧縮情報（ビットストリーム）を生成す
る。
【００６７】以上述べてきた様に、本発明の第１の実施
の形態の画像情報変換装置は、ＭＰＥＧ２画像圧縮情報
（ビットストリーム）を入力とし、ＭＰＥＧ４画像符号
化におけるＰ−ＶＯＰでの各マクロブロック毎のイント
ラ／インター判定の際に、入力となるＭＰＥＧ２画像圧
縮情報から抽出したマクロブロックタイプの個数に応じ
てイントラ／インターモード判定を行うようにし、ま
た、ＭＰＥＧ４画像符号化におけるＰ−ＶＯＰでの各マ
クロブロック毎のインター／インター４Ｖ判定の際に、
入力となるＭＰＥＧ２画像圧縮情報から抽出された動き
ベクトルより生成されたインター動きベクトル及びイン
ター４Ｖ動きベクトルと、予め設定された２つの閾値と
の比較によりモード判定を行うことにより、図６に示し
た従来例のように動き補償及び絶対値誤差和（ＳＡＤ）
の算出を行う場合に比べて、インター／インター４Ｖ判
定に伴う演算量を削減可能となっている。また、本実施
の形態では、上記判定されたモードに応じてＭＰＥＧ４
画像符号化を行うことにより、動きベクトルのばらつき
が大きいマクロブロックについてインター４Ｖ動きベク
トルが選択され易くなるようなことが少なくなり、当該
マクロブロックの動きベクトルに多くの符号ビットが割
り当てられて離散コサイン変換係数に対する符号ビット
が十分に割り当てられなくなる事態の発生を避けること
ができ、その結果、符号化効率が良く且つ画質劣化が最
小限に抑えられたＭＰＥＧ４画像圧縮処理が実現される
ことになる。
の形態の画像情報変換装置は、ＭＰＥＧ２画像圧縮情報
（ビットストリーム）を入力とし、ＭＰＥＧ４画像符号
化におけるＰ−ＶＯＰでの各マクロブロック毎のイント
ラ／インター判定の際に、入力となるＭＰＥＧ２画像圧
縮情報から抽出したマクロブロックタイプの個数に応じ
てイントラ／インターモード判定を行うようにし、ま
た、ＭＰＥＧ４画像符号化におけるＰ−ＶＯＰでの各マ
クロブロック毎のインター／インター４Ｖ判定の際に、
入力となるＭＰＥＧ２画像圧縮情報から抽出された動き
ベクトルより生成されたインター動きベクトル及びイン
ター４Ｖ動きベクトルと、予め設定された２つの閾値と
の比較によりモード判定を行うことにより、図６に示し
た従来例のように動き補償及び絶対値誤差和（ＳＡＤ）
の算出を行う場合に比べて、インター／インター４Ｖ判
定に伴う演算量を削減可能となっている。また、本実施
の形態では、上記判定されたモードに応じてＭＰＥＧ４
画像符号化を行うことにより、動きベクトルのばらつき
が大きいマクロブロックについてインター４Ｖ動きベク
トルが選択され易くなるようなことが少なくなり、当該
マクロブロックの動きベクトルに多くの符号ビットが割
り当てられて離散コサイン変換係数に対する符号ビット
が十分に割り当てられなくなる事態の発生を避けること
ができ、その結果、符号化効率が良く且つ画質劣化が最
小限に抑えられたＭＰＥＧ４画像圧縮処理が実現される
ことになる。
【００６８】次に、図４を用い、本発明の第２の実施の
形態の画像情報変換装置のイントラ／インター判定部１
７及びインター／インター４Ｖ判定部２７におけるマク
ロブロックモード判定動作について述べる。
形態の画像情報変換装置のイントラ／インター判定部１
７及びインター／インター４Ｖ判定部２７におけるマク
ロブロックモード判定動作について述べる。
【００６９】図４に示す第２の実施の形態の画像情報変
換装置において、図１の各構成要素と同じ動作をする構
成要素については、図１と同じ指示符号を付してそれら
の説明を省略し、以下、図１に示した画像情報変換装置
と図４に示した画像情報変換装置と相違する部分のみ説
明する。
換装置において、図１の各構成要素と同じ動作をする構
成要素については、図１と同じ指示符号を付してそれら
の説明を省略し、以下、図１に示した画像情報変換装置
と図４に示した画像情報変換装置と相違する部分のみ説
明する。
【００７０】図１に示した画像情報変換装置では、入力
となるＭＰＥＧ２画像圧縮情報（ビットストリーム）に
含まれる動きベクトル情報を元に、動きベクトル合成部
１４が合成し、さらに動きベクトル検出部１５が高精度
化したインター動きベクトル情報及びインター４Ｖ動き
ベクトル情報を用いて、インター／インター４Ｖ判定部
１６がインター／インター４Ｖモード判定を行うように
なされている。
となるＭＰＥＧ２画像圧縮情報（ビットストリーム）に
含まれる動きベクトル情報を元に、動きベクトル合成部
１４が合成し、さらに動きベクトル検出部１５が高精度
化したインター動きベクトル情報及びインター４Ｖ動き
ベクトル情報を用いて、インター／インター４Ｖ判定部
１６がインター／インター４Ｖモード判定を行うように
なされている。
【００７１】これに対し、図４に示した第１の実施の形
態の画像情報変換装置の場合は、入力となるＭＰＥＧ２
画像圧縮情報（ビットストリーム）に含まれる動きベク
トル情報を元に、動きベクトル合成部２５が合成したイ
ンター動きベクトル情報及びインター４Ｖ動きベクトル
情報を、直接インター／インター４Ｖ判定部２７に送
り、当該インター／インター４Ｖ判定部２７において上
記動きベクトル合成部２５が合成したインター動きベク
トル情報及びインター４Ｖ動きベクトル情報を用いてイ
ンター／インター４Ｖモード判定を行うようになされて
いる。
態の画像情報変換装置の場合は、入力となるＭＰＥＧ２
画像圧縮情報（ビットストリーム）に含まれる動きベク
トル情報を元に、動きベクトル合成部２５が合成したイ
ンター動きベクトル情報及びインター４Ｖ動きベクトル
情報を、直接インター／インター４Ｖ判定部２７に送
り、当該インター／インター４Ｖ判定部２７において上
記動きベクトル合成部２５が合成したインター動きベク
トル情報及びインター４Ｖ動きベクトル情報を用いてイ
ンター／インター４Ｖモード判定を行うようになされて
いる。
【００７２】なお、この第２の実施の形態の画像情報変
換装置において、動きベクトル合成部２５にて合成され
たインター動きベクトル情報及びインター４Ｖ動きベク
トル情報は、動きベクトル検出部２６にて高精度化さ
れ、また、当該動きベクトル検出部２６にて高精度化さ
れたインター動きベクトル情報及びインター４Ｖ動きベ
クトル情報がＭＰＥＧ４画像情報符号化部１３に送られ
ることは、第１の実施の形態の場合と同様である。
換装置において、動きベクトル合成部２５にて合成され
たインター動きベクトル情報及びインター４Ｖ動きベク
トル情報は、動きベクトル検出部２６にて高精度化さ
れ、また、当該動きベクトル検出部２６にて高精度化さ
れたインター動きベクトル情報及びインター４Ｖ動きベ
クトル情報がＭＰＥＧ４画像情報符号化部１３に送られ
ることは、第１の実施の形態の場合と同様である。
【００７３】この第２の実施の形態の画像情報変換装置
においても第１の実施の形態と同様に、インター／イン
ター４Ｖ判定に伴う演算量を削減可能であり、また、符
号化効率が良く且つ画質劣化が最小限に抑えられたＭＰ
ＥＧ４画像圧縮処理を実現可能である。
においても第１の実施の形態と同様に、インター／イン
ター４Ｖ判定に伴う演算量を削減可能であり、また、符
号化効率が良く且つ画質劣化が最小限に抑えられたＭＰ
ＥＧ４画像圧縮処理を実現可能である。
【００７４】なお、図１、図４に示した第１、第２の実
施の形態の画像情報変換装置によれば、先にイントラ／
インターの判定を行った後、インター／インター４Ｖ判
定を行っているが、その逆に、先にインター／インター
４Ｖ判定を行った後、イントラ／インター判定を行うよ
うにしてもよい。
施の形態の画像情報変換装置によれば、先にイントラ／
インターの判定を行った後、インター／インター４Ｖ判
定を行っているが、その逆に、先にインター／インター
４Ｖ判定を行った後、イントラ／インター判定を行うよ
うにしてもよい。
【００７５】また、第１、第２の実施の形態では、入力
としてＭＰＥＧ２画像圧縮情報（ビットストリーム）を
例に挙げ、出力としてＭＰＥＧ４画像圧縮情報（ビット
ストリーム）を対象とした例を挙げたが、入力、出力と
もこれに限らず、例えばＭＰＥＧ１やＨ．２６３などの
画像圧縮情報（ビットストリーム）でも良い。
としてＭＰＥＧ２画像圧縮情報（ビットストリーム）を
例に挙げ、出力としてＭＰＥＧ４画像圧縮情報（ビット
ストリーム）を対象とした例を挙げたが、入力、出力と
もこれに限らず、例えばＭＰＥＧ１やＨ．２６３などの
画像圧縮情報（ビットストリーム）でも良い。
【００７６】
【発明の効果】以上の説明からも明らかなように、本発
明においては、第１の画像符号化情報を構成する各符号
化単位の動きベクトル情報を抽出し、第２の画像符号化
情報を構成する所望の符号化単位に対応する第１の画像
符号化情報の符号化単位の動きベクトル情報から、上記
所望の符号化単位の動きベクトル情報を生成し、当該所
望の符号化単位の動きベクトル情報と、予め設定した第
１，第２の閾値との比較に基づいて、上記所望の符号化
単位についての符号化モードを判定することにより、モ
ード判定に伴う際の演算量を削減可能であり、また、第
２の画像符号化情報を構成する各符号化単位の符号化の
際に、上記判定された符号化モードを使用することによ
り、画質劣化を最小限に抑えることを実現可能である。
明においては、第１の画像符号化情報を構成する各符号
化単位の動きベクトル情報を抽出し、第２の画像符号化
情報を構成する所望の符号化単位に対応する第１の画像
符号化情報の符号化単位の動きベクトル情報から、上記
所望の符号化単位の動きベクトル情報を生成し、当該所
望の符号化単位の動きベクトル情報と、予め設定した第
１，第２の閾値との比較に基づいて、上記所望の符号化
単位についての符号化モードを判定することにより、モ
ード判定に伴う際の演算量を削減可能であり、また、第
２の画像符号化情報を構成する各符号化単位の符号化の
際に、上記判定された符号化モードを使用することによ
り、画質劣化を最小限に抑えることを実現可能である。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態の画像情報変換装置
の概略構成を示すブロック回路図である。
の概略構成を示すブロック回路図である。
【図２】本発明実施の形態の画像情報変換装置における
モード判定処理の流れを示すフローチャートである。
モード判定処理の流れを示すフローチャートである。
【図３】ＭＰＥＧ２画像圧縮情報のマクロブロックとＭ
ＰＥＧ４画像圧縮情報のマクロブロックの対応例を示す
図である。
ＰＥＧ４画像圧縮情報のマクロブロックの対応例を示す
図である。
【図４】本発明の第２の実施の形態の画像情報変換装置
の概略構成を示すブロック回路図である。
の概略構成を示すブロック回路図である。
【図５】従来の画像情報変換装置の概略構成を示すブロ
ック回路図である。
ック回路図である。
【図６】従来の画像情報変換装置におけるモード判定処
理の流れを示すフローチャートである。
理の流れを示すフローチャートである。
【図７】動きベクトルの合成と高精度化の流れを示すフ
ローチャートである。
ローチャートである。
【図８】インターマクロブロック若しくはインター４Ｖ
マクロブロックの選択時の相関を説明するための図であ
る。
マクロブロックの選択時の相関を説明するための図であ
る。
８ ピクチャタイプ判別部、 ９ 画像情報解析部、
１０ ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）、 １１ 間引き部、 １２ ビデオメモリ、１３
ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、
１４，２５ 動きベクトル合成部、 １５，２６ 動き
ベクトル検出部、 １６，２７ インター／インター４
Ｖ判定部、 １７ イントラ／インター判定部、 １８
情報バッファ、 ２２ ＭＰＥＧ２マクロブロックモ
ード情報バッファ、 ２３ ＭＰＥＧ２マクロブロック
アクティビティ情報バッファ、 ２４ ＭＰＥＧ４イン
トラ／インター判定部、 ２５ ＭＰＥＧ４ インター
／インター４Ｖ判定部、 ２５ 動き補償予測部
１０ ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）、 １１ 間引き部、 １２ ビデオメモリ、１３
ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、
１４，２５ 動きベクトル合成部、 １５，２６ 動き
ベクトル検出部、 １６，２７ インター／インター４
Ｖ判定部、 １７ イントラ／インター判定部、 １８
情報バッファ、 ２２ ＭＰＥＧ２マクロブロックモ
ード情報バッファ、 ２３ ＭＰＥＧ２マクロブロック
アクティビティ情報バッファ、 ２４ ＭＰＥＧ４イン
トラ／インター判定部、 ２５ ＭＰＥＧ４ インター
／インター４Ｖ判定部、 ２５ 動き補償予測部
───────────────────────────────────────────────────── フロントページの続き (72)発明者 鈴木 輝彦 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 名雲 武文 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 矢ケ崎 陽一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 KK01 LB05 MA00 NN21 PP05 PP06 TA17 TB07 TC12 TD02 TD04 TD12 5J064 AA02 BA13 BB06 BC01 BC14 BD03
Claims (10)
- 【請求項１】 複数画素からなる符号化単位毎に、少な
くとも動き予測を使用する符号化モードを含む複数タイ
プの符号化モードの中から各々適応的に選択された符号
化モードを使用して符号化が行われて生成された第１の
画像符号化情報を、第２の画像符号化情報へ変換する画
像情報変換装置において、 上記第１の画像符号化情報を構成する各符号化単位の動
きベクトル情報を抽出する情報抽出手段と、 上記第２の画像符号化情報を構成する所望の符号化単位
に対応する上記第１の画像符号化情報の符号化単位の上
記動きベクトル情報から、上記第２の画像符号化情報を
構成する上記所望の符号化単位の動きベクトル情報を生
成する動きベクトル生成手段と、 上記動きベクトル生成手段により生成された上記所望の
符号化単位の動きベクトル情報と、予め設定した第１，
第２の閾値との比較に基づいて、上記第２の画像符号化
情報を構成する上記所望の符号化単位についての符号化
モードを判定する符号化モード判定手段とを有し、 上記第２の画像符号化情報を構成する各符号化単位の符
号化の際に、上記符号化モード判定手段により判定され
た符号化モードを使用することを特徴とする画像情報変
換装置。 - 【請求項２】 上記符号化モード判定手段は、上記動き
ベクトル生成手段により生成された上記所望の符号化単
位の動きベクトルの分散値を求め、上記分散値と上記第
１，第２の閾値との比較に基づいて、上記第２の画像符
号化情報を構成する上記所望の符号化単位についての符
号化モードを判定することを特徴とする請求項１記載の
画像情報変換装置。 - 【請求項３】 上記符号化モード判定手段は、上記動き
ベクトル生成手段により生成された上記所望の符号化単
位の動きベクトルの最大値の分散値を求め、上記最大値
の分散値と上記第１，第２の閾値との比較に基づいて、
上記第２の画像符号化情報を構成する上記所望の符号化
単位についての符号化モードを判定することを特徴とす
る請求項１記載の画像情報変換装置。 - 【請求項４】 上記符号化モード判定手段は、上記第１
の閾値よりも第２の閾値が大きいとき、上記分散値より
第１の閾値が大きい条件、或いは上記第２の閾値より上
記分散値が大きい条件が成り立つならば、上記第２の画
像符号化情報を構成する上記所望の符号化単位の符号化
モードを第１のタイプの符号化モードと判定し、上記分
散値が上記第１の閾値以上で且つ第２の閾値以下である
条件が成り立つならば、上記第２の画像符号化情報を構
成する上記所望の符号化単位の符号化モードを第２のタ
イプの符号化モードと判定することを特徴とする請求項
２記載の画像情報変換装置。 - 【請求項５】 上記符号化モード判定手段は、上記第１
の閾値よりも第２の閾値が大きいとき、上記分散値より
第１の閾値が大きい条件、或いは上記第２の閾値より上
記分散値が大きい条件が成り立つならば、上記第２の画
像符号化情報を構成する上記所望の符号化単位の符号化
モードを第１のタイプの符号化モードと判定し、上記分
散値が上記第１の閾値以上で且つ第２の閾値以下である
条件が成り立つならば、上記第２の画像符号化情報を構
成する上記所望の符号化単位の符号化モードを第２のタ
イプの符号化モードと判定することを特徴とする請求項
３記載の画像情報変換装置。 - 【請求項６】 複数画素からなる符号化単位毎に、少な
くとも動き予測を使用する符号化モードを含む複数タイ
プの符号化モードの中から各々適応的に選択された符号
化モードを使用して符号化が行われて生成された第１の
画像符号化情報を、第２の画像符号化情報へ変換する画
像情報変換方法において、 上記第１の画像符号化情報を構成する各符号化単位の動
きベクトル情報を抽出し、 上記第２の画像符号化情報を構成する所望の符号化単位
に対応する上記第１の画像符号化情報の符号化単位の上
記動きベクトル情報から、上記第２の画像符号化情報を
構成する上記所望の符号化単位の動きベクトル情報を生
成し、 上記生成された上記所望の符号化単位の動きベクトル情
報と、予め設定した第１，第２の閾値との比較に基づい
て、上記第２の画像符号化情報を構成する上記所望の符
号化単位についての符号化モードを判定し、 上記第２の画像符号化情報を構成する各符号化単位の符
号化の際に、上記判定された符号化モードを使用するこ
とを特徴とする画像情報変換方法。 - 【請求項７】 上記生成された上記所望の符号化単位の
動きベクトルの分散値を求め、上記分散値と上記第１，
第２の閾値との比較に基づいて、上記第２の画像符号化
情報を構成する上記所望の符号化単位についての符号化
モードを判定することを特徴とする請求項６記載の画像
情報変換方法。 - 【請求項８】 上記生成された上記所望の符号化単位の
動きベクトルの最大値の分散値を求め、上記分散値と上
記第１，第２の閾値との比較に基づいて、上記第２の画
像符号化情報を構成する上記所望の符号化単位について
の符号化モードを判定することを特徴とする請求項６記
載の画像情報変換方法。 - 【請求項９】 上記第１の閾値よりも第２の閾値が大き
いとき、上記分散値より第１の閾値が大きい条件、或い
は上記第２の閾値より上記分散値が大きい条件が成り立
つならば、上記第２の画像符号化情報を構成する上記所
望の符号化単位の符号化モードを第１のタイプの符号化
モードと判定し、上記分散値が上記第１の閾値以上で且
つ第２の閾値以下である条件が成り立つならば、上記第
２の画像符号化情報を構成する上記所望の符号化単位の
符号化モードを第２のタイプの符号化モードと判定する
ことを特徴とする請求項７記載の画像情報変換方法。 - 【請求項１０】 上記第１の閾値よりも第２の閾値が大
きいとき、上記分散値より第１の閾値が大きい条件、或
いは上記第２の閾値より上記分散値が大きい条件が成り
立つならば、上記第２の画像符号化情報を構成する上記
所望の符号化単位の符号化モードを第１のタイプの符号
化モードと判定し、上記分散値が上記第１の閾値以上で
且つ第２の閾値以下である条件が成り立つならば、上記
第２の画像符号化情報を構成する上記所望の符号化単位
の符号化モードを第２のタイプの符号化モードと判定す
ることを特徴とする請求項８記載の画像情報変換方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000311316A JP2002125234A (ja) | 2000-10-11 | 2000-10-11 | 画像情報変換装置及び方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000311316A JP2002125234A (ja) | 2000-10-11 | 2000-10-11 | 画像情報変換装置及び方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002125234A true JP2002125234A (ja) | 2002-04-26 |
Family
ID=18791103
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000311316A Withdrawn JP2002125234A (ja) | 2000-10-11 | 2000-10-11 | 画像情報変換装置及び方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002125234A (ja) |
-
2000
- 2000-10-11 JP JP2000311316A patent/JP2002125234A/ja not_active Withdrawn
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4517495B2 (ja) | 画像情報変換装置及び画像情報変換方法並びに符号化装置及び符号化方法 | |
| US9197903B2 (en) | Method and system for determining a macroblock partition for data transcoding | |
| EP1618744B1 (en) | Video transcoding | |
| JP4682410B2 (ja) | 画像処理装置及び画像処理方法 | |
| US6870886B2 (en) | Method and apparatus for transcoding a digitally compressed high definition television bitstream to a standard definition television bitstream | |
| US6816617B2 (en) | Motion vector searcher and motion vector search method as well as moving picture coding apparatus | |
| JP3855522B2 (ja) | 動画変換装置 | |
| JP2005260912A (ja) | 映像通信装置および映像通信方法 | |
| US20080137741A1 (en) | Video transcoding | |
| JP2002152759A (ja) | 画像情報変換装置および画像情報変換方法 | |
| JP4470431B2 (ja) | データ処理装置およびその方法 | |
| JP5560009B2 (ja) | 動画像符号化装置 | |
| GB2329783A (en) | Encoding video signal search block motion vectors based on the number of valid reference block motion vectors | |
| JP4622077B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP2002152752A (ja) | 画像情報変換装置及び方法 | |
| JPH10336672A (ja) | 符号化方式変換装置およびその動きベクトル検出方法 | |
| JP2002125227A (ja) | 画像情報変換装置及び方法 | |
| JP4517453B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4517475B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4507418B2 (ja) | 画像情報変換装置及び画像情報変換方法 | |
| JP2002125234A (ja) | 画像情報変換装置及び方法 | |
| JP4608801B2 (ja) | 画像情報変換装置及び方法 | |
| JP4517465B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4505992B2 (ja) | 画像情報変換装置及び方法 | |
| JP2002152728A (ja) | 画像情報変換装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20080108 |