JP2002232891A - 画像情報変換装置及び方法 - Google Patents
画像情報変換装置及び方法Info
- Publication number
- JP2002232891A JP2002232891A JP2001024687A JP2001024687A JP2002232891A JP 2002232891 A JP2002232891 A JP 2002232891A JP 2001024687 A JP2001024687 A JP 2001024687A JP 2001024687 A JP2001024687 A JP 2001024687A JP 2002232891 A JP2002232891 A JP 2002232891A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- image compression
- compression information
- macroblock
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 画像内マクロブロックにおける冗長性を符号
化を排除する。 【解決手段】 第１の画像圧縮情報を離散コサイン変換
と動き補償とを用いて、第２の画像圧縮情報へ変換する
画像情報変換装置において、第１の画像圧縮情報の各マ
クロブロックの符号化モードを判定する判定手段を備
え、当該判定手段は、第１の画像圧縮情報から抽出した
情報を基に判定することを特徴としており、符号化モー
ドが画像内マクロブロック符号化モードであると判定し
た場合は、画像内マクロブロックの符号化を排除する。
化を排除する。 【解決手段】 第１の画像圧縮情報を離散コサイン変換
と動き補償とを用いて、第２の画像圧縮情報へ変換する
画像情報変換装置において、第１の画像圧縮情報の各マ
クロブロックの符号化モードを判定する判定手段を備
え、当該判定手段は、第１の画像圧縮情報から抽出した
情報を基に判定することを特徴としており、符号化モー
ドが画像内マクロブロック符号化モードであると判定し
た場合は、画像内マクロブロックの符号化を排除する。
Description
【０００１】
【発明の属する技術分野】本発明は、ＭＰＥＧ（Moving
Picture Experts Group）などのように、離散コサイン
変換等の直交変換と動き補償によって圧縮された画像情
報（ビットストリーム）を、例えば衛星放送、ケーブル
テレビジョン、インターネットなどのネットワークを介
して受信する際、もしくは光、磁気ディスクのような記
憶メディア上で処理する際に好適な画像情報変換装置及
び方法に関する。
Picture Experts Group）などのように、離散コサイン
変換等の直交変換と動き補償によって圧縮された画像情
報（ビットストリーム）を、例えば衛星放送、ケーブル
テレビジョン、インターネットなどのネットワークを介
して受信する際、もしくは光、磁気ディスクのような記
憶メディア上で処理する際に好適な画像情報変換装置及
び方法に関する。
【０００２】
【従来の技術】近年、画像情報をディジタルとして取り
扱い、その際、効率の高い情報の伝送、蓄積を目的と
し、画像情報特有の冗長性を利用して、離散コサイン変
換等の直交変換と動き補償によりその画像情報を圧縮す
るＭＰＥＧ方式に準拠した装置が、放送局などの情報配
信及び一般家庭における情報受信の双方において普及し
つつある。
扱い、その際、効率の高い情報の伝送、蓄積を目的と
し、画像情報特有の冗長性を利用して、離散コサイン変
換等の直交変換と動き補償によりその画像情報を圧縮す
るＭＰＥＧ方式に準拠した装置が、放送局などの情報配
信及び一般家庭における情報受信の双方において普及し
つつある。
【０００３】特に、ＭＰＥＧ２圧縮方式（ISO/IEC 1381
8-2）は、汎用画像符号化方式として定義されており、
飛び越し走査画像及び順次走査画像の双方、並びに標準
解像度画像及び高精細画像を網羅する標準で、プロフェ
ッショナル用途及びコンシューマー用途の広範なアプリ
ケーションに今後とも用いられるものと予想される。Ｍ
ＰＥＧ２を用いることにより、例えば７２０×４８０画
素を持つ標準解像度の飛び越し走査画像であれば４〜８
Ｍｂｐｓ、１１９２０×１０８８画素を持つ高解像度の
飛び越し走査画像であれば１８〜２２Ｍｂｐｓの符号量
（ビットレート）を割り当てることで、高い圧縮率と良
好な画質の実現が可能である。
8-2）は、汎用画像符号化方式として定義されており、
飛び越し走査画像及び順次走査画像の双方、並びに標準
解像度画像及び高精細画像を網羅する標準で、プロフェ
ッショナル用途及びコンシューマー用途の広範なアプリ
ケーションに今後とも用いられるものと予想される。Ｍ
ＰＥＧ２を用いることにより、例えば７２０×４８０画
素を持つ標準解像度の飛び越し走査画像であれば４〜８
Ｍｂｐｓ、１１９２０×１０８８画素を持つ高解像度の
飛び越し走査画像であれば１８〜２２Ｍｂｐｓの符号量
（ビットレート）を割り当てることで、高い圧縮率と良
好な画質の実現が可能である。
【０００４】上述したＭＰＥＧ２は主として放送用に適
合する高画質符号化を対象としていたが、ＭＰＥＧ１よ
り低い符号量、つまりより高い圧縮率の符号化方式には
対応していなかった。
合する高画質符号化を対象としていたが、ＭＰＥＧ１よ
り低い符号量、つまりより高い圧縮率の符号化方式には
対応していなかった。
【０００５】無線環境で容量の少ない通信路を使う携帯
端末の普及により、ディジタル放送用に一度符号化され
たＭＰＥＧ２画像圧縮情報を、携帯端末上等で処理する
のにより適した、より低い符号量のＭＰＥＧ４画像圧縮
情報に変換したいという要求がある。これに対応してＭ
ＰＥＧ４符号化方式の標準化が行われた。画像符号化方
式に関しては、１９９８年１２月にＩＳＯ／ＩＥＣ １
４４９６−２としてその規格が国際標準に承認された。
端末の普及により、ディジタル放送用に一度符号化され
たＭＰＥＧ２画像圧縮情報を、携帯端末上等で処理する
のにより適した、より低い符号量のＭＰＥＧ４画像圧縮
情報に変換したいという要求がある。これに対応してＭ
ＰＥＧ４符号化方式の標準化が行われた。画像符号化方
式に関しては、１９９８年１２月にＩＳＯ／ＩＥＣ １
４４９６−２としてその規格が国際標準に承認された。
【０００６】かかる目的を達成する画像情報変換装置
（トランスコーダ）として、「Field-to-Frame Transco
ding with Spatial and temporal Downsampling」（Sus
ie J.Wee, John G. apostolopoulos, and Nick Feamste
r, ICIP 99、以下これを文献１と記す。）では、図４に
示すような装置が提案されている。上記装置は、ピクチ
ャタイプ判別部１０１、ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１０２、間引き部１０３、ビデオメ
モリ１０４、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）（Video Object Plane）１０５、動きべクトル合
成部１０６、動きベクトル検出部１０７とを備える。
（トランスコーダ）として、「Field-to-Frame Transco
ding with Spatial and temporal Downsampling」（Sus
ie J.Wee, John G. apostolopoulos, and Nick Feamste
r, ICIP 99、以下これを文献１と記す。）では、図４に
示すような装置が提案されている。上記装置は、ピクチ
ャタイプ判別部１０１、ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１０２、間引き部１０３、ビデオメ
モリ１０４、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）（Video Object Plane）１０５、動きべクトル合
成部１０６、動きベクトル検出部１０７とを備える。
【０００７】まず、ピクチャタイプ判別部１０１は、入
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報におけ
る各フレームのデータを、フレーム内符号化画像（以
下，Ｉピクチャと記す。）及びフレーム間順方向予想符
号化画像（以下，Ｐピクチャと記す。）に関するもの
か、双方向予想符号化画像（以下，Ｂピクチャと記
す。）に関するものであるかを判別する。後続のＭＰＥ
Ｇ２画像情報復号化部（Ｉ／Ｐピクチャ）１０２は、ピ
クチャタイプ判別部１０１からＩ／Ｐピクチャに関する
情報のみを伝送される。ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１０２における処理は、通常のＭＰ
ＥＧ２画像情報復号化部と同様である。ピクチャタイプ
判別部１０１は、Ｂピクチャに関するデータを廃棄する
ため、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）
１０２における機能としては、Ｉ／Ｐピクチャのみを復
号化できればよい。
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報におけ
る各フレームのデータを、フレーム内符号化画像（以
下，Ｉピクチャと記す。）及びフレーム間順方向予想符
号化画像（以下，Ｐピクチャと記す。）に関するもの
か、双方向予想符号化画像（以下，Ｂピクチャと記
す。）に関するものであるかを判別する。後続のＭＰＥ
Ｇ２画像情報復号化部（Ｉ／Ｐピクチャ）１０２は、ピ
クチャタイプ判別部１０１からＩ／Ｐピクチャに関する
情報のみを伝送される。ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）１０２における処理は、通常のＭＰ
ＥＧ２画像情報復号化部と同様である。ピクチャタイプ
判別部１０１は、Ｂピクチャに関するデータを廃棄する
ため、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）
１０２における機能としては、Ｉ／Ｐピクチャのみを復
号化できればよい。
【０００８】間引き部１０３は、ＭＰＥＧ２画像情報復
号化部（Ｉ／Ｐピクチャ）１０２から画素値を伝送され
る。ここで、間引き部１０３は、水平方向には１／２の
間引き処理を施し、垂直方向には第１フィールドもしく
は第２フィールドのどちらか一方のデータのみを残し、
もう一方を廃棄することで入力となる画像情報の１／４
の大きさを持つ順次走査画像を生成する。
号化部（Ｉ／Ｐピクチャ）１０２から画素値を伝送され
る。ここで、間引き部１０３は、水平方向には１／２の
間引き処理を施し、垂直方向には第１フィールドもしく
は第２フィールドのどちらか一方のデータのみを残し、
もう一方を廃棄することで入力となる画像情報の１／４
の大きさを持つ順次走査画像を生成する。
【０００９】ところで、例えば、入力となるＭＰＥＧ２
画像圧縮情報がＮＴＳＣ（NationalTelevision System
Committee）の規格に準拠したもの、つまり７２０×４
８０画素、３０Ｈｚの飛び越し走査画像であった場合、
間引き後の画枠は３６０×２４０画素ということにな
る。しかし、後続のＭＰＥＧ４画像情報符号化部（Ｉ／
Ｐ−ＶＯＰ）１０５において符号化する際、マクロブロ
ック単位で処理するには、水平方向、垂直方向ともに、
その画素数が１６の倍数である必要がある。このための
画素の補填もしくは廃棄を間引き部１０３において同時
に行う。すなわち、上述の場合、例えば画枠の右端もし
くは左端の８画素分の列を廃棄して３５２×２４０画素
とする。
画像圧縮情報がＮＴＳＣ（NationalTelevision System
Committee）の規格に準拠したもの、つまり７２０×４
８０画素、３０Ｈｚの飛び越し走査画像であった場合、
間引き後の画枠は３６０×２４０画素ということにな
る。しかし、後続のＭＰＥＧ４画像情報符号化部（Ｉ／
Ｐ−ＶＯＰ）１０５において符号化する際、マクロブロ
ック単位で処理するには、水平方向、垂直方向ともに、
その画素数が１６の倍数である必要がある。このための
画素の補填もしくは廃棄を間引き部１０３において同時
に行う。すなわち、上述の場合、例えば画枠の右端もし
くは左端の８画素分の列を廃棄して３５２×２４０画素
とする。
【００１０】ビデオメモリ１０４は、間引き部１０３に
よって生成された順次走査画像を一旦蓄積する。その
後、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１
０５は、生成された順次操作画像を符号化し、ＭＰＥＧ
４画像圧縮情報として出力する。尚、ＭＰＥＧ４におい
て、ＶＯＰとは、オブジェクトを囲む１つ又は複数のマ
クロブロックから構成される領域を表し、ＭＰＥＧ２に
おけるフレームに相当するものである。その際、動きベ
クトル合成部１０６は、入力となるＭＰＥＧ２画像圧縮
情報中の動きベクトル情報を、間引き後の画像情報に対
する動きベクトルにマッピングする。その後、動きベク
トル検出部１０７は、動きベクトル合成部１０６におい
て合成された動きベクトル値と、ビデオメモリ１０４に
一旦記憶された画像情報とを基に高精度の動きベクトル
を検出する。
よって生成された順次走査画像を一旦蓄積する。その
後、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１
０５は、生成された順次操作画像を符号化し、ＭＰＥＧ
４画像圧縮情報として出力する。尚、ＭＰＥＧ４におい
て、ＶＯＰとは、オブジェクトを囲む１つ又は複数のマ
クロブロックから構成される領域を表し、ＭＰＥＧ２に
おけるフレームに相当するものである。その際、動きベ
クトル合成部１０６は、入力となるＭＰＥＧ２画像圧縮
情報中の動きベクトル情報を、間引き後の画像情報に対
する動きベクトルにマッピングする。その後、動きベク
トル検出部１０７は、動きベクトル合成部１０６におい
て合成された動きベクトル値と、ビデオメモリ１０４に
一旦記憶された画像情報とを基に高精度の動きベクトル
を検出する。
【００１１】文献１では、入力となるＭＰＥＧ２画像圧
縮情報の１／２×１／２の大きさを持つ順次走査画像か
ら出力となるＭＰＥＧ４画像圧縮情報を生成する装置に
関して述べられている。すなわち、例えば、入力となる
ＭＰＥＧ２画圧縮情報がＮＴＳＣの規格に準拠したもの
であった場合、出力となるＭＰＥＧ４画像圧縮情報はＳ
ＩＦサイズ（３５２×２４０）ということになる。しか
しながら、間引き部１０３における動作の変更を行うこ
とで、これ以外の画枠、例えば上記の例で、約１／４×
１／４の画枠であるＱＳＩＦ（１７６×１１２画素）サ
イズの画像に変換することも可能である。
縮情報の１／２×１／２の大きさを持つ順次走査画像か
ら出力となるＭＰＥＧ４画像圧縮情報を生成する装置に
関して述べられている。すなわち、例えば、入力となる
ＭＰＥＧ２画圧縮情報がＮＴＳＣの規格に準拠したもの
であった場合、出力となるＭＰＥＧ４画像圧縮情報はＳ
ＩＦサイズ（３５２×２４０）ということになる。しか
しながら、間引き部１０３における動作の変更を行うこ
とで、これ以外の画枠、例えば上記の例で、約１／４×
１／４の画枠であるＱＳＩＦ（１７６×１１２画素）サ
イズの画像に変換することも可能である。
【００１２】更に、文献１では、ＭＰＥＧ２画像情報復
号化部（Ｉ／Ｐピクチャ）１０２における処理として、
水平方向、垂直方向それぞれについて、入力となるＭＰ
ＥＧ２画像圧縮情報内の、８次の離散コサイン変換係数
すべてを用いた復号処理を行う装置について述べられて
いるが、図４に示した装置に関してはその限りではな
く、水平方向のみ、あるいは水平方向、垂直方向とも
に、８次の離散コサイン変換係数のうちの低域成分のみ
を用いた復号処理を行い、画質劣化を最小限に抑えなが
ら、復号処理に伴う演算量とビデオメモリ容量を削減す
ることが可能である。
号化部（Ｉ／Ｐピクチャ）１０２における処理として、
水平方向、垂直方向それぞれについて、入力となるＭＰ
ＥＧ２画像圧縮情報内の、８次の離散コサイン変換係数
すべてを用いた復号処理を行う装置について述べられて
いるが、図４に示した装置に関してはその限りではな
く、水平方向のみ、あるいは水平方向、垂直方向とも
に、８次の離散コサイン変換係数のうちの低域成分のみ
を用いた復号処理を行い、画質劣化を最小限に抑えなが
ら、復号処理に伴う演算量とビデオメモリ容量を削減す
ることが可能である。
【００１３】ところで、図４に示した画像情報変換装置
において、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯ
Ｐ）１０５がＰ−ＶＯＰを符号化する際、各マクロブロ
ックを、画像内マクロブロック（以下、ＩＮＴＲＡマク
ロブロックと記す。）として符号化するか、１６×１６
画素画像間マクロブロック（以下、ＩＮＴＥＲマクロブ
ロックと記す。）として符号化するか、８×８画素画像
間マクロブロック（以下、ＩＮＴＥＲ４Ｖマクロブロッ
クと記す。）として符号化するかのモードを判定する必
要がある。一般的な手法としては、ＭＰＥＧ−４ Ｖｉ
ｄｅｏ Ｖｅｒｉｆｉｃａｔｉｏｎ Ｍｏｄｅｌ （IS
O/IEC JTC1/SC29/WG11 N2932、以下これを文献２とす
る。）において定められたモード判定を用いることが考
えられる。以下では、文献２において述べられているモ
ード判定の手法について図５のフローチャート（図４の
ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１０５
で行われるモード判定）を参照にしながら述べる。
において、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯ
Ｐ）１０５がＰ−ＶＯＰを符号化する際、各マクロブロ
ックを、画像内マクロブロック（以下、ＩＮＴＲＡマク
ロブロックと記す。）として符号化するか、１６×１６
画素画像間マクロブロック（以下、ＩＮＴＥＲマクロブ
ロックと記す。）として符号化するか、８×８画素画像
間マクロブロック（以下、ＩＮＴＥＲ４Ｖマクロブロッ
クと記す。）として符号化するかのモードを判定する必
要がある。一般的な手法としては、ＭＰＥＧ−４ Ｖｉ
ｄｅｏ Ｖｅｒｉｆｉｃａｔｉｏｎ Ｍｏｄｅｌ （IS
O/IEC JTC1/SC29/WG11 N2932、以下これを文献２とす
る。）において定められたモード判定を用いることが考
えられる。以下では、文献２において述べられているモ
ード判定の手法について図５のフローチャート（図４の
ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１０５
で行われるモード判定）を参照にしながら述べる。
【００１４】まず、ステップＳ１０１では、動きベクト
ル検出により、ＩＮＴＥＲ動きベクトル及びＩＮＴＥＲ
４Ｖ動きベクトルを求める。次に、ステップＳ１０２に
おいて、ＩＮＴＥＲ動きベクトル及びＩＮＴＥＲ４Ｖ動
きベクトルにより生成される予測画をそれぞれＲｅｆ
ＩＮＴＥＲ，ＲｅｆＩＮＴＥＲ4Ｖで表し、原画をＯｒ
ｇで表す。さらに、ステップＳ１０３において、相当す
るマクロブロックをＩＮＴＥＲマクロブロック及びＩＮ
ＴＥＲ４Ｖマクロブロックとして符号化した場合の予測
誤差ＥＲＲＩＮＴＥＲ及びＥＲＲＩＮＴＥＲ４Ｖをそれ
ぞれ式（１）及び式（２）によって算出する。また、マ
クロブロックに含まれる画素の平均値をＭｅａｎ＿ＭＢ
として、そのマクロブロックをＩＮＴＲＡマクロブロッ
クとして符号化した場合の予測誤差ＥＲＲＩＮＴＲＡを
式（３）のように定義する。ここでＳＡＤは絶対値誤差
和（Sum of Absolute Difference）を表す。
ル検出により、ＩＮＴＥＲ動きベクトル及びＩＮＴＥＲ
４Ｖ動きベクトルを求める。次に、ステップＳ１０２に
おいて、ＩＮＴＥＲ動きベクトル及びＩＮＴＥＲ４Ｖ動
きベクトルにより生成される予測画をそれぞれＲｅｆ
ＩＮＴＥＲ，ＲｅｆＩＮＴＥＲ4Ｖで表し、原画をＯｒ
ｇで表す。さらに、ステップＳ１０３において、相当す
るマクロブロックをＩＮＴＥＲマクロブロック及びＩＮ
ＴＥＲ４Ｖマクロブロックとして符号化した場合の予測
誤差ＥＲＲＩＮＴＥＲ及びＥＲＲＩＮＴＥＲ４Ｖをそれ
ぞれ式（１）及び式（２）によって算出する。また、マ
クロブロックに含まれる画素の平均値をＭｅａｎ＿ＭＢ
として、そのマクロブロックをＩＮＴＲＡマクロブロッ
クとして符号化した場合の予測誤差ＥＲＲＩＮＴＲＡを
式（３）のように定義する。ここでＳＡＤは絶対値誤差
和（Sum of Absolute Difference）を表す。
【００１５】
【数１】
【００１６】
【数２】
【００１７】
【数３】
【００１８】次に、ステップＳ１０４では、式（１）及
び式（２）で求められた予測誤差から、ＩＮＴＥＲマク
ロブロックとして符号化するのと、ＩＮＴＥＲ４Ｖマク
ロブロックとして符号化するのと、どちらの符号化効率
が良いかを判定する。すなわち、以下の式（３）が成立
すれば、ＩＮＴＥＲマクロブロックとして符号化した方
が符号化効率がよいとし、さらにステップＳ１０５へ進
む。一方、式（３）が成立しなければＩＮＴＥＲ４Ｖマ
クロブロックとして符号化した方が符号化効率がよいと
し、さらにステップＳ１０８へ進む。
び式（２）で求められた予測誤差から、ＩＮＴＥＲマク
ロブロックとして符号化するのと、ＩＮＴＥＲ４Ｖマク
ロブロックとして符号化するのと、どちらの符号化効率
が良いかを判定する。すなわち、以下の式（３）が成立
すれば、ＩＮＴＥＲマクロブロックとして符号化した方
が符号化効率がよいとし、さらにステップＳ１０５へ進
む。一方、式（３）が成立しなければＩＮＴＥＲ４Ｖマ
クロブロックとして符号化した方が符号化効率がよいと
し、さらにステップＳ１０８へ進む。
【００１９】
【数４】
【００２０】式（４）において、ＯｆｆｓｅｔはＩＮＴ
ＥＲマクロブロックを選ばれやすくするためのパラメー
タで、文献２においては１２９と定められている。式
（４）によって、パラメータＥＲＲがＩＮＴＥＲマクロ
ブロックとして選ばれた場合は式（５）のように定義す
る。一方、ＩＮＴＥＲ４Ｖマクロブロックとして選ばれ
た場合は、式（６）のように定義する。
ＥＲマクロブロックを選ばれやすくするためのパラメー
タで、文献２においては１２９と定められている。式
（４）によって、パラメータＥＲＲがＩＮＴＥＲマクロ
ブロックとして選ばれた場合は式（５）のように定義す
る。一方、ＩＮＴＥＲ４Ｖマクロブロックとして選ばれ
た場合は、式（６）のように定義する。
【００２１】
【数５】
【００２２】
【数６】
【００２３】次に、上記パラメータＥＲＲ及び式（３）
によって定義されるＥＲＲＩＮＴＲ Ａから、相当するマ
クロブロックをＩＮＴＲＡマクロブロックとして符号化
するのと、式（４）によって選択されたマクロブロック
モードで符号化するのではどちらが符号化効率が高いか
判定する。すなわち、式（７）が成立すれば、ＩＮＴＲＡ
マクロブロックとして符号化する方が効率が良いと判定
し、成立しなければ式（４）によって選択されたマクロ
ブロックモードで符号化する方が効率がよいと判定す
る。
によって定義されるＥＲＲＩＮＴＲ Ａから、相当するマ
クロブロックをＩＮＴＲＡマクロブロックとして符号化
するのと、式（４）によって選択されたマクロブロック
モードで符号化するのではどちらが符号化効率が高いか
判定する。すなわち、式（７）が成立すれば、ＩＮＴＲＡ
マクロブロックとして符号化する方が効率が良いと判定
し、成立しなければ式（４）によって選択されたマクロ
ブロックモードで符号化する方が効率がよいと判定す
る。
【００２４】
【数７】
【００２５】つまり、ステップＳ１０５において、ＥＲ
ＲＩＮＴＥＲ＜ＥＲＲＩＮＴＲＡが成立するときは、ス
テップＳ１０６においてＩＮＴＥＲマクロブロックモー
ドで符号化する方が効率がよいと判定し、成立しないと
きは、ステップＳ１０７においてＩＮＴＲＡマクロブロ
ックモードで符号化する方が効率がよいと判定する。ま
た、ステップＳ１０８において、ＥＲＲＩＮＴＥＲ４Ｖ
＜ＥＲＲＩＮＴＲＡが成立するときは、ステップＳ１０
９においてＩＮＴＥＲ４Ｖマクロブロックモードで符号
化する方が効率がよいと判定し、成立しないときは、ス
テップＳ１０７においてＩＮＴＲＡマクロブロックモー
ドで符号化する方が効率がよいと判定する。
ＲＩＮＴＥＲ＜ＥＲＲＩＮＴＲＡが成立するときは、ス
テップＳ１０６においてＩＮＴＥＲマクロブロックモー
ドで符号化する方が効率がよいと判定し、成立しないと
きは、ステップＳ１０７においてＩＮＴＲＡマクロブロ
ックモードで符号化する方が効率がよいと判定する。ま
た、ステップＳ１０８において、ＥＲＲＩＮＴＥＲ４Ｖ
＜ＥＲＲＩＮＴＲＡが成立するときは、ステップＳ１０
９においてＩＮＴＥＲ４Ｖマクロブロックモードで符号
化する方が効率がよいと判定し、成立しないときは、ス
テップＳ１０７においてＩＮＴＲＡマクロブロックモー
ドで符号化する方が効率がよいと判定する。
【００２６】このようにして、図４のＭＰＥＧ４画像情
報符号化部（Ｉ／Ｐ−ＶＯＰ）１０５では、図５に示し
たモード判定手法を用いて、最も符号化効率が高いマク
ロブロックモードを選択し、そのマクロブロックモード
を使用して画像情報を符号化する。
報符号化部（Ｉ／Ｐ−ＶＯＰ）１０５では、図５に示し
たモード判定手法を用いて、最も符号化効率が高いマク
ロブロックモードを選択し、そのマクロブロックモード
を使用して画像情報を符号化する。
【００２７】
【発明が解決しようとする課題】ところで、図４に示し
た画像情報変換装置においては、入力となるＭＰＥＧ２
画像圧縮情報から抽出された情報を利用して、ＭＰＥＧ
４画像符号化におけるＩＮＴＲＡ／ＩＮＴＥＲマクロブ
ロックモードを判定することが可能であるが、ＩＮＴＲ
Ａと判定されたマクロブロックに対して動きベクトルを
合成及び検出する演算処理工程は、冗長であるという問
題点がある。
た画像情報変換装置においては、入力となるＭＰＥＧ２
画像圧縮情報から抽出された情報を利用して、ＭＰＥＧ
４画像符号化におけるＩＮＴＲＡ／ＩＮＴＥＲマクロブ
ロックモードを判定することが可能であるが、ＩＮＴＲ
Ａと判定されたマクロブロックに対して動きベクトルを
合成及び検出する演算処理工程は、冗長であるという問
題点がある。
【００２８】そこで、本発明は、上述した従来の実情に
鑑みて提案されたものであり、この冗長性を排除するこ
とによって演算量の削減を行うことができる画像情報変
換装置及び方法を提供することを目的としている。
鑑みて提案されたものであり、この冗長性を排除するこ
とによって演算量の削減を行うことができる画像情報変
換装置及び方法を提供することを目的としている。
【００２９】
【課題を解決するための手段】本発明に係る画像情報変
換装置は、上述の問題を解決するために、第１の画像圧
縮情報を離散コサイン変換と動き補償とを用いて、第２
の画像圧縮情報へ変換する画像情報変換装置である。上
記第２の画像圧縮情報を符号化する際、上記第１の画像
圧縮情報を構成する各マクロブロックを、画像内相関に
よって符号化するか、画像間相関によって符号化するか
を判定する符号化モード判定手段を備えている。それに
より、上記マクロブロックが画像内マクロブロックであ
った場合に、画像間マクロブロックでは必要であった動
きベクトル合成手段と動きベクトル検出手段とを排除す
る。
換装置は、上述の問題を解決するために、第１の画像圧
縮情報を離散コサイン変換と動き補償とを用いて、第２
の画像圧縮情報へ変換する画像情報変換装置である。上
記第２の画像圧縮情報を符号化する際、上記第１の画像
圧縮情報を構成する各マクロブロックを、画像内相関に
よって符号化するか、画像間相関によって符号化するか
を判定する符号化モード判定手段を備えている。それに
より、上記マクロブロックが画像内マクロブロックであ
った場合に、画像間マクロブロックでは必要であった動
きベクトル合成手段と動きベクトル検出手段とを排除す
る。
【００３０】また、本発明に係る画像情報変換方法は、
上述の問題を解決するために、第１の画像圧縮情報を離
散コサイン変換と動き補償とを用いて、第２の画像圧縮
情報へ変換する画像情報変換方法である。上記第２の画
像圧縮情報を符号化する際、上記第１の画像圧縮情報を
構成する各マクロブロックを、画像内相関によって符号
化するか、画像間相関によって符号化するかを判定する
符号化モード判定工程を有している。それにより、上記
マクロブロックが画像内マクロブロックであった場合
に、画像間マクロブロックでは必要であった動きベクト
ル合成工程と動きベクトル検出工程とを排除する。
上述の問題を解決するために、第１の画像圧縮情報を離
散コサイン変換と動き補償とを用いて、第２の画像圧縮
情報へ変換する画像情報変換方法である。上記第２の画
像圧縮情報を符号化する際、上記第１の画像圧縮情報を
構成する各マクロブロックを、画像内相関によって符号
化するか、画像間相関によって符号化するかを判定する
符号化モード判定工程を有している。それにより、上記
マクロブロックが画像内マクロブロックであった場合
に、画像間マクロブロックでは必要であった動きベクト
ル合成工程と動きベクトル検出工程とを排除する。
【００３１】
【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して詳細に説明する。
て図面を参照して詳細に説明する。
【００３２】本発明の実施の形態は、第１の画像圧縮情
報としてのＭＰＥＧ２画像圧縮情報を離散コサイン交換
と動き補償とを用いて、第２の画像圧縮情報としてのＭ
ＰＥＧ４画像圧縮情報へ変換する画像情報変換装置に適
用したものである。上記画像情報変換装置は、ＭＰＥＧ
２を構成する各マクロブロックを符号化する際、画像内
相関によって符号化する画像内符号化モードと、画像間
相関によって符号化する画像間符号化モードとを判定す
る手段を備えている。
報としてのＭＰＥＧ２画像圧縮情報を離散コサイン交換
と動き補償とを用いて、第２の画像圧縮情報としてのＭ
ＰＥＧ４画像圧縮情報へ変換する画像情報変換装置に適
用したものである。上記画像情報変換装置は、ＭＰＥＧ
２を構成する各マクロブロックを符号化する際、画像内
相関によって符号化する画像内符号化モードと、画像間
相関によって符号化する画像間符号化モードとを判定す
る手段を備えている。
【００３３】本発明の実施の形態の画像情報変換装置の
概略構成を図１に示す。画像情報変換装置は、ピクチャ
タイプ判別部１と、圧縮情報解析部２と、ＭＰＥＧ２画
像情報復号化部（Ｉ／Ｐピクチャ）３と、間引き部４
と、ビデオメモリ５と、ＭＰＥＧ４画像情報符号化部
（Ｉ／Ｐ−ＶＯＰ）（Video Object Plane）６と、動き
ベクトル合成部７と、動きベクトル検出部８と、ＩＮＴ
ＲＡ／ＩＮＴＥＲ判別部９と、情報バッファ１０とを備
える。
概略構成を図１に示す。画像情報変換装置は、ピクチャ
タイプ判別部１と、圧縮情報解析部２と、ＭＰＥＧ２画
像情報復号化部（Ｉ／Ｐピクチャ）３と、間引き部４
と、ビデオメモリ５と、ＭＰＥＧ４画像情報符号化部
（Ｉ／Ｐ−ＶＯＰ）（Video Object Plane）６と、動き
ベクトル合成部７と、動きベクトル検出部８と、ＩＮＴ
ＲＡ／ＩＮＴＥＲ判別部９と、情報バッファ１０とを備
える。
【００３４】まず、ピクチャタイプ判別部１は、入力と
なる飛び越し走査のＭＰＥＧ２画像圧縮情報における各
フレームのデータを、フレーム内符号化画像（以下、Ｉ
ピクチャと記す。）及びフレーム間順方向予想符号化画
像（以下、Ｐピクチャと記す。）に関するものか、双方
向予想符号化画像（以下、Ｂピクチャと記す。）に関す
るものであるかを判別する。後続の圧縮情報解析部２
は、ピクチャタイプ判別部１から伝送されたＩ／Ｐピク
チャに関する情報の構文解析を行ない、画像圧縮情報を
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）３へ出
力する。また、圧縮情報解析部２は、ＩＮＴＲＡ／ＩＮ
ＴＥＲ判別に必要な情報を情報バッファ１０へ出力し、
さらに、ＭＰＥＧ２動きベクトル情報を動きベクトル合
成部１７へ出力する。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）１０における処理は通常のＭＰＥＧ２画
像情報復号化部と同様である。しかし、ピクチャタイプ
判別部８は、Ｂピクチャに関するデータを廃棄するた
め、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）３
における機能としては、Ｉ／Ｐピクチャのみを復号化で
きればよい。
なる飛び越し走査のＭＰＥＧ２画像圧縮情報における各
フレームのデータを、フレーム内符号化画像（以下、Ｉ
ピクチャと記す。）及びフレーム間順方向予想符号化画
像（以下、Ｐピクチャと記す。）に関するものか、双方
向予想符号化画像（以下、Ｂピクチャと記す。）に関す
るものであるかを判別する。後続の圧縮情報解析部２
は、ピクチャタイプ判別部１から伝送されたＩ／Ｐピク
チャに関する情報の構文解析を行ない、画像圧縮情報を
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）３へ出
力する。また、圧縮情報解析部２は、ＩＮＴＲＡ／ＩＮ
ＴＥＲ判別に必要な情報を情報バッファ１０へ出力し、
さらに、ＭＰＥＧ２動きベクトル情報を動きベクトル合
成部１７へ出力する。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）１０における処理は通常のＭＰＥＧ２画
像情報復号化部と同様である。しかし、ピクチャタイプ
判別部８は、Ｂピクチャに関するデータを廃棄するた
め、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）３
における機能としては、Ｉ／Ｐピクチャのみを復号化で
きればよい。
【００３５】間引き部４は、ＭＰＥＧ２画像情報復号化
部（Ｉ／Ｐピクチャ）３から画素値を伝送される。ここ
で、間引き部４は、水平方向に１／２の間引き処理を施
し、垂直方向には、第１フィールドもしくは第２フィー
ルドのどちらか一方のデータのみを残し、もう一方を廃
棄することで、入力となる画像情報の１／４の大きさを
持つ順次走査画像を生成する。
部（Ｉ／Ｐピクチャ）３から画素値を伝送される。ここ
で、間引き部４は、水平方向に１／２の間引き処理を施
し、垂直方向には、第１フィールドもしくは第２フィー
ルドのどちらか一方のデータのみを残し、もう一方を廃
棄することで、入力となる画像情報の１／４の大きさを
持つ順次走査画像を生成する。
【００３６】ところで、例えば、入力となるＭＰＥＧ２
画像圧縮情報がＮＴＳＣ（NationalTelevision System
Committee）の規格に準拠したもの、つまり７２０×４
８０画素、３０Ｈｚの飛び越し走査画像であった場合、
間引き後の画枠は３６０×２４０画素ということにな
る。しかし、後続のＭＰＥＧ４画像情報符号化部（Ｉ／
Ｐ−ＶＯＰ）６において符号化する際、マクロブロック
単位で処理するには、水平方向、垂直方向ともに、その
画素数が１６の倍数である必要がある。このための画素
の補填もしくは廃棄を、間引き部４において同時に行
う。すなわち、上述の場合、例えば画枠の右端もしくは
左端の８画素分の列を廃棄して３５２×２４０画素とす
る。
画像圧縮情報がＮＴＳＣ（NationalTelevision System
Committee）の規格に準拠したもの、つまり７２０×４
８０画素、３０Ｈｚの飛び越し走査画像であった場合、
間引き後の画枠は３６０×２４０画素ということにな
る。しかし、後続のＭＰＥＧ４画像情報符号化部（Ｉ／
Ｐ−ＶＯＰ）６において符号化する際、マクロブロック
単位で処理するには、水平方向、垂直方向ともに、その
画素数が１６の倍数である必要がある。このための画素
の補填もしくは廃棄を、間引き部４において同時に行
う。すなわち、上述の場合、例えば画枠の右端もしくは
左端の８画素分の列を廃棄して３５２×２４０画素とす
る。
【００３７】ビデオメモリ５は、間引き部４によって生
成された順次走査画像を一旦蓄積する。その後、ＭＰＥ
Ｇ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）６は、上記順
次走査画像を読み出す。
成された順次走査画像を一旦蓄積する。その後、ＭＰＥ
Ｇ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）６は、上記順
次走査画像を読み出す。
【００３８】尚、ＭＰＥＧ４において、ＶＯＰとは、オ
ブジェクトを囲む１つ又は複数のマクロブロックから構
成される領域を表し、ＭＰＥＧ２におけるフレームに相
当するものである。
ブジェクトを囲む１つ又は複数のマクロブロックから構
成される領域を表し、ＭＰＥＧ２におけるフレームに相
当するものである。
【００３９】図３のフローチャートを参照しながら、入
力となるＭＰＥＧ２画像圧縮情報のマクロブロック判別
処理について説明する。
力となるＭＰＥＧ２画像圧縮情報のマクロブロック判別
処理について説明する。
【００４０】まずステップＳ１において、ＩＮＴＲＡ／
ＩＮＴＥＲ判別部９は、情報バッファ１０に格納され
た、入力となるＭＰＥＧ２画像圧縮情報から抽出された
情報を用いて、出力となるＭＰＥＧ４画像圧縮情報にお
けるマクロブロックがＩＮＴＲＡマクロブロックである
か、あるいはＩＮＴＥＲマクロブロックもしくはＩＮＴ
ＥＲ４Ｖマクロブロックであるかを判別する。
ＩＮＴＥＲ判別部９は、情報バッファ１０に格納され
た、入力となるＭＰＥＧ２画像圧縮情報から抽出された
情報を用いて、出力となるＭＰＥＧ４画像圧縮情報にお
けるマクロブロックがＩＮＴＲＡマクロブロックである
か、あるいはＩＮＴＥＲマクロブロックもしくはＩＮＴ
ＥＲ４Ｖマクロブロックであるかを判別する。
【００４１】図１に示した画像情報変換装置により、入
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報の、１
／２×１／２の画枠を持つＭＰＥＧ４画像圧縮情報を出
力する場合を考える。
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報の、１
／２×１／２の画枠を持つＭＰＥＧ４画像圧縮情報を出
力する場合を考える。
【００４２】この時、図２に示すように、入力となるＭ
ＰＥＧ２画像圧縮情報における４つのマクロブロックＭ
ＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）が、出力とな
るＭＰＥＧ４画像圧縮情報における１つのマクロブロッ
クＭＢＭＰＥＧ４，１に対応しているものとする。
ＰＥＧ２画像圧縮情報における４つのマクロブロックＭ
ＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）が、出力とな
るＭＰＥＧ４画像圧縮情報における１つのマクロブロッ
クＭＢＭＰＥＧ４，１に対応しているものとする。
【００４３】ＭＢＭＰＥＧ４，１のＩＮＴＲＡ／ＩＮＴ
ＥＲを判別するのは、情報バッファ１０に格納された、
ＭＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）に関する情
報を用いて、例えば以下のような方法がある。
ＥＲを判別するのは、情報バッファ１０に格納された、
ＭＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）に関する情
報を用いて、例えば以下のような方法がある。
【００４４】第１の方法は、ＭＰＥＧ２画像圧縮情報に
おける各マクロブロックの個数をそれぞれ比較する方法
である。ＭＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の
うち、ＩＮＴＲＡマクロブロックであるものの個数をＮ
ＩＮＴＲＡ、ＩＮＴＥＲマクロブロックであるものの個
数をＮＩＮＴＥＲとしたとき、式（８）が成り立てば、
ＭＢＭＰＥＧ４，１はＩＮＴＲＡマクロブロックである
とし、成立しなければＩＮＴＥＲマクロブロックもしく
はＩＮＴＥＲ４Ｖマクロブロックであるとする方法であ
る。
おける各マクロブロックの個数をそれぞれ比較する方法
である。ＭＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の
うち、ＩＮＴＲＡマクロブロックであるものの個数をＮ
ＩＮＴＲＡ、ＩＮＴＥＲマクロブロックであるものの個
数をＮＩＮＴＥＲとしたとき、式（８）が成り立てば、
ＭＢＭＰＥＧ４，１はＩＮＴＲＡマクロブロックである
とし、成立しなければＩＮＴＥＲマクロブロックもしく
はＩＮＴＥＲ４Ｖマクロブロックであるとする方法であ
る。
【００４５】
【数８】
【００４６】第２の方法は、ＭＰＥＧ２画像圧縮情報の
各マクロブロックに対する量子化スケールと割当符号量
（ビット数）との積で表される変数（以下、アクティビ
ティと記す。）を用いる方法である。ＭＢ
ＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の量子化スケー
ルをＱＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）とし、割
当符号量をＢＭＰＥＧ，ｉ（ｉ＝１，・・・，４）とす
れば、まず、それぞれのマクロブロックに対するアクテ
ィビティＸＰＭＥＧ２，ｉ（ｉ＝１，・・・，４）を、
式（９）のように計算する。
各マクロブロックに対する量子化スケールと割当符号量
（ビット数）との積で表される変数（以下、アクティビ
ティと記す。）を用いる方法である。ＭＢ
ＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の量子化スケー
ルをＱＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）とし、割
当符号量をＢＭＰＥＧ，ｉ（ｉ＝１，・・・，４）とす
れば、まず、それぞれのマクロブロックに対するアクテ
ィビティＸＰＭＥＧ２，ｉ（ｉ＝１，・・・，４）を、
式（９）のように計算する。
【００４７】
【数９】
【００４８】ＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）
は、割当符号量のうち、離散コサイン変換係数の輝度成
分に関するものであってもよいし、離散コサイン変換係
数に関するものであってもよいし、離散コサイン変換係
数およびヘッダ情報に関するものであってもよい。
は、割当符号量のうち、離散コサイン変換係数の輝度成
分に関するものであってもよいし、離散コサイン変換係
数に関するものであってもよいし、離散コサイン変換係
数およびヘッダ情報に関するものであってもよい。
【００４９】式（９）で与えられたＸ
ＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）に対し、式（１
０）を与えるマクロブロックＭＢＭＰＥＧ２，Ｉを、Ｍ
ＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の中で最も符
号化効率のよいマクロブロックとして選択し、そのマク
ロブロックモードに関する情報を情報バッファ１０より
抽出する。
ＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）に対し、式（１
０）を与えるマクロブロックＭＢＭＰＥＧ２，Ｉを、Ｍ
ＢＭＰＥＧ２，ｉ（ｉ＝１，・・・，４）の中で最も符
号化効率のよいマクロブロックとして選択し、そのマク
ロブロックモードに関する情報を情報バッファ１０より
抽出する。
【００５０】
【数１０】
【００５１】ＭＢＭＰＥＧ２，ＩがＩＮＴＲＡマクロブ
ロックであった場合、ＭＢＭＰＥＧ ４，１もＩＮＴＲＡ
マクロブロックであるとし、ＭＢＭＰＥＧ２，ＩがＩＮ
ＴＥＲマクロブロックであった場合、ＭＢ
ＭＰＥＧ４，１はＩＮＴＥＲマクロブロックもしくはＩ
ＮＴＥＲ４Ｖマクロブロックであるとする方法である。
ロックであった場合、ＭＢＭＰＥＧ ４，１もＩＮＴＲＡ
マクロブロックであるとし、ＭＢＭＰＥＧ２，ＩがＩＮ
ＴＥＲマクロブロックであった場合、ＭＢ
ＭＰＥＧ４，１はＩＮＴＥＲマクロブロックもしくはＩ
ＮＴＥＲ４Ｖマクロブロックであるとする方法である。
【００５２】ステップＳ２において、ＭＰＥＧ４画像情
報符号化部（Ｉ／Ｐ−ＶＯＰ）６は、第１の方法、第２
の方法ともに、出力となるＭＰＥＧ４画像圧縮情報にお
いて、ＩＮＴＥＲマクロブロックもしくはＩＮＴＥＲ４
Ｖマクロブロックと判定されたマクロブロックに対し
て、ＩＮＴＥＲ／ＩＮＴＥＲ４Ｖのモード判別を行う。
報符号化部（Ｉ／Ｐ−ＶＯＰ）６は、第１の方法、第２
の方法ともに、出力となるＭＰＥＧ４画像圧縮情報にお
いて、ＩＮＴＥＲマクロブロックもしくはＩＮＴＥＲ４
Ｖマクロブロックと判定されたマクロブロックに対し
て、ＩＮＴＥＲ／ＩＮＴＥＲ４Ｖのモード判別を行う。
【００５３】次に、ステップＳ３において、ベクトル合
成部７は、ＩＮＴＲＡ／ＩＮＴＥＲ判別部９でＩＮＴＥ
ＲマクロブロックもしくはＩＮＴＥＲ４Ｖマクロブロッ
クであると判別されたマクロブロックに関して、そのマ
クロブロックに対するｉｎｔｅｒ動きベクトル及びｉｎ
ｔｅｒ４ｖ動きベクトルを合成する。続いて、ステップ
Ｓ４では、動きベクトル検出部８は、動きベクトル合成
部７において合成されたｉｎｔｅｒ動きベクトル及びｉ
ｎｔｅｒ４ｖ動きベクトルを高精度化及び検出し、ＭＰ
ＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）６へ出力す
る。
成部７は、ＩＮＴＲＡ／ＩＮＴＥＲ判別部９でＩＮＴＥ
ＲマクロブロックもしくはＩＮＴＥＲ４Ｖマクロブロッ
クであると判別されたマクロブロックに関して、そのマ
クロブロックに対するｉｎｔｅｒ動きベクトル及びｉｎ
ｔｅｒ４ｖ動きベクトルを合成する。続いて、ステップ
Ｓ４では、動きベクトル検出部８は、動きベクトル合成
部７において合成されたｉｎｔｅｒ動きベクトル及びｉ
ｎｔｅｒ４ｖ動きベクトルを高精度化及び検出し、ＭＰ
ＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）６へ出力す
る。
【００５４】上記ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ
−ＶＯＰ）６は、上記動きベクトル検出部８で検出され
た高精度な動きベクトル情報と、情報バッファ１０に格
納された情報とを用い、上記ビデオメモリ５から供給さ
れた順次走査画像を符号化してＭＰＥＧ４画像圧縮情報
を生成する。
−ＶＯＰ）６は、上記動きベクトル検出部８で検出され
た高精度な動きベクトル情報と、情報バッファ１０に格
納された情報とを用い、上記ビデオメモリ５から供給さ
れた順次走査画像を符号化してＭＰＥＧ４画像圧縮情報
を生成する。
【００５５】一方、ＩＮＴＲＡ／ＩＮＴＥＲ判別部９で
ＩＮＴＲＡマクロブロックであると判別されたマクロブ
ロックに対しては、動きベクトル合成及び動きベクトル
検出の処理が行われないことで、冗長な演算を省き、よ
り少ない処理量にて画像情報の変換を可能とする。
ＩＮＴＲＡマクロブロックであると判別されたマクロブ
ロックに対しては、動きベクトル合成及び動きベクトル
検出の処理が行われないことで、冗長な演算を省き、よ
り少ない処理量にて画像情報の変換を可能とする。
【００５６】なお、本発明は上述した実施の形態のみに
限定されるものではなく、本発明の要旨を逸脱しない範
囲において種々の変更が可能であることはもちろんであ
る。
限定されるものではなく、本発明の要旨を逸脱しない範
囲において種々の変更が可能であることはもちろんであ
る。
【００５７】例えば、図１では、入力となる飛び越し走
査のＭＰＥＧ２画像圧縮情報の約１／２×１／２の画枠
を持つ順次走査のＭＰＥＧ４画像圧縮情報を出力する場
合の例を示したが、本発明はこれに限らず、例えば、入
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報の約１
／４×１／４の画枠を持つ順次走査のＭＰＥＧ４画像圧
縮情報を出力するといったことも可能である。
査のＭＰＥＧ２画像圧縮情報の約１／２×１／２の画枠
を持つ順次走査のＭＰＥＧ４画像圧縮情報を出力する場
合の例を示したが、本発明はこれに限らず、例えば、入
力となる飛び越し走査のＭＰＥＧ２画像圧縮情報の約１
／４×１／４の画枠を持つ順次走査のＭＰＥＧ４画像圧
縮情報を出力するといったことも可能である。
【００５８】また、本発明の形態では、入力としてＭＰ
ＥＧ２画像圧縮情報を、出力としてＭＰＥＧ４画像圧縮
情報を対象としてきたが、入力、出力ともこれに限ら
ず、例えばＭＰＥＧ１やＨ．２６３などの画像圧縮情報
などのように、直交変換と動き補償によって符号化され
た画像圧縮情報であればよい。
ＥＧ２画像圧縮情報を、出力としてＭＰＥＧ４画像圧縮
情報を対象としてきたが、入力、出力ともこれに限ら
ず、例えばＭＰＥＧ１やＨ．２６３などの画像圧縮情報
などのように、直交変換と動き補償によって符号化され
た画像圧縮情報であればよい。
【００５９】
【発明の効果】以上詳細に説明したように、本発明に係
る画像圧縮変換装置は、第１の画像圧縮情報を離散コサ
イン変換と動き補償とを用いて、第２の画像圧縮情報へ
変換する画像情報変換装置である。また、上記画像圧縮
装置は、上記第２の画像圧縮情報を符号化する際、上記
第１の画像圧縮情報を構成する各マクロブロックを、画
像内相関によって符号化するか、画像間相関によって符
号化するかを判定する符号化モード判定手段を備えてい
る。
る画像圧縮変換装置は、第１の画像圧縮情報を離散コサ
イン変換と動き補償とを用いて、第２の画像圧縮情報へ
変換する画像情報変換装置である。また、上記画像圧縮
装置は、上記第２の画像圧縮情報を符号化する際、上記
第１の画像圧縮情報を構成する各マクロブロックを、画
像内相関によって符号化するか、画像間相関によって符
号化するかを判定する符号化モード判定手段を備えてい
る。
【００６０】それにより、上記判定手段で判定された符
号化モードが画像内マクロブロック符号化モードであっ
た場合、上記第２の画像圧縮情報への変換における演算
量の削減が可能である。
号化モードが画像内マクロブロック符号化モードであっ
た場合、上記第２の画像圧縮情報への変換における演算
量の削減が可能である。
【００６１】また、本発明に係る画像圧縮変換方法は、
第１の画像圧縮情報を離散コサイン変換と動き補償とを
用いて、第２の画像圧縮情報へ変換する画像情報変換方
法である。また、上記画像圧縮方法は、上記第２の画像
圧縮情報を符号化する際、上記第１の画像圧縮情報を構
成する各マクロブロックを、画像内相関によって符号化
するか、画像間相関によって符号化するかを判定する符
号化モード判定工程を有している。
第１の画像圧縮情報を離散コサイン変換と動き補償とを
用いて、第２の画像圧縮情報へ変換する画像情報変換方
法である。また、上記画像圧縮方法は、上記第２の画像
圧縮情報を符号化する際、上記第１の画像圧縮情報を構
成する各マクロブロックを、画像内相関によって符号化
するか、画像間相関によって符号化するかを判定する符
号化モード判定工程を有している。
【００６２】それにより、上記判定工程で判定された符
号化モードが画像内マクロブロック符号化モードであっ
た場合、上記第２の画像圧縮情報への変換における演算
量の削減が可能である。
号化モードが画像内マクロブロック符号化モードであっ
た場合、上記第２の画像圧縮情報への変換における演算
量の削減が可能である。
【図１】本発明の実施の形態に係る画像情報変換装置の
概略構成を示すブロック図である。
概略構成を示すブロック図である。
【図２】図１で示した画像情報変換装置において、入力
となるＭＰＥＧ２画像圧縮情報に含まれるマクロブロッ
クと、出力となるＭＰＥＧ４画像圧縮情報に含まれるマ
クロブロックの対応関係の一例を示すブロック図であ
る。
となるＭＰＥＧ２画像圧縮情報に含まれるマクロブロッ
クと、出力となるＭＰＥＧ４画像圧縮情報に含まれるマ
クロブロックの対応関係の一例を示すブロック図であ
る。
【図３】図１で示した画像情報変換装置において、ＭＰ
ＥＧ２のマクロブロック判別処理を説明するフローチャ
ートである。
ＥＧ２のマクロブロック判別処理を説明するフローチャ
ートである。
【図４】従来のＭＰＥＧ２画像圧縮情報からＭＰＥＧ４
画像圧縮情報への変換を実現する画像情報変換装置の構
成を示すブロック図である。
画像圧縮情報への変換を実現する画像情報変換装置の構
成を示すブロック図である。
【図５】ＭＰＥＧ−４ Ｖｉｄｅｏ Ｖｅｒｉｆｉｃａ
ｔｉｏｎ Ｍｏｄｅｌ（ISO/IEC JTC1/SC29/WG11 N293
2）において定められたマクロブロックモードの判定処
理を説明するフローチャートである。
ｔｉｏｎ Ｍｏｄｅｌ（ISO/IEC JTC1/SC29/WG11 N293
2）において定められたマクロブロックモードの判定処
理を説明するフローチャートである。
【符号の説明】 １ ピクチャタイプ判別部、２ 圧縮情報解析部、３
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）、４
間引き部、５ ビデオメモリ ６ ＭＰＥＧ４画像情報
符号化部（Ｉ／Ｐ−ＶＯＰ）、７ 動きベクトル合成
部、８ 動きベクトル検出部、９ ＩＮＴＲＡ／ＩＮＴ
ＥＲ判別部、１０ 情報バッファ
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）、４
間引き部、５ ビデオメモリ ６ ＭＰＥＧ４画像情報
符号化部（Ｉ／Ｐ−ＶＯＰ）、７ 動きベクトル合成
部、８ 動きベクトル検出部、９ ＩＮＴＲＡ／ＩＮＴ
ＥＲ判別部、１０ 情報バッファ
フロントページの続き (72)発明者 鈴木 輝彦 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 矢ケ崎 陽一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 KK15 KK41 LB05 LB07 MA00 MA04 MA05 MA14 MA23 NN01 NN21 NN28 PP05 PP06 PP07 PP16 PP30 SS08 SS10 SS13 TA23 TB07 TC10 UA02 UA33 5J064 AA01 BA15 BA16 BC14 BC27 BD02
Claims (14)
- 【請求項１】 第１の画像圧縮情報を離散コサイン変換
と動き補償とを用いて、第２の画像圧縮情報へ変換する
画像情報変換装置であって、 上記第２の画像圧縮情報を符号化する際、上記第１の画
像圧縮情報を構成する各マクロブロックを、画像内相関
によって符号化するか、画像間相関によって符号化する
かを判定する符号化モード判定手段を備えることを特徴
とする画像情報変換装置。 - 【請求項２】 上記判定手段は、上記第１の画像圧縮情
報より抽出された情報に基づいて、画像内相関によって
符号化するか、画像間相関によって符号化するかを判定
することを特徴とする請求項１記載の画像情報変換装
置。 - 【請求項３】 上記抽出された情報は、上記第１の画像
圧縮情報における各マクロブロックの個数をそれぞれ比
較して、より個数の多いマクロブロックを最も符号化効
率のよいマクロブロックとすることを特徴とする請求項
２記載の画像情報変換装置。 - 【請求項４】 上記抽出された情報は、上記第１の画像
圧縮情報の各マクロブロックに対する量子化スケールと
割当符号量との積で表される変数のうちで、最小の変数
を与えるマクロブロックを最も符号化効率のよいマクロ
ブロックとすることを特徴とする請求項２記載の画像情
報変換装置。 - 【請求項５】 上記第２の画像圧縮情報符号化に必要な
画像間動きベクトルの合成を行う合成手段を備え、 上記合成手段は、各マクロブロックを画像間相関によっ
て符号化する場合、上記第１の画像圧縮情報に含まれる
動きベクトルの情報を用いて、上記第２の画像圧縮情報
符号化に必要な画像間動きベクトルを合成することを特
徴とする請求項１記載の画像情報変換装置。 - 【請求項６】 上記合成手段で合成された画像間動きベ
クトルを基に、高精度の動きベクトルを検出することを
特徴とする請求項５記載の画像情報変換装置。 - 【請求項７】 上記第１の画像圧縮情報は、ＭＰＥＧ２
画像圧縮情報に準拠した情報であり、上記第２の画像圧
縮情報は、ＭＰＥＧ４画像圧縮情報に準拠した情報であ
ることを特徴とする請求項１記載の画像情報変換装置。 - 【請求項８】 第１の画像圧縮情報を離散コサイン変換
と動き補償とを用いて、第２の画像圧縮情報へ変換する
画像情報変換方法であって、 上記第２の画像圧縮情報を符号化する際、上記第１の画
像圧縮情報を構成する各マクロブロックを、画像内相関
によって符号化するか、画像間相関によって符号化する
かを判定する符号化モード判定工程を有することを特徴
とする画像情報変換方法。 - 【請求項９】 上記判定工程は、上記第１の画像圧縮情
報より抽出された情報に基づいて、画像内相関によって
符号化するか、画像間相関によって符号化するかを判定
することを特徴とする請求項８記載の画像情報変換方
法。 - 【請求項１０】 上記抽出された情報は、上記第１の画
像圧縮情報における各マクロブロックの個数をそれぞれ
比較して、より個数の多いマクロブロックを最も符号化
効率のよいマクロブロックとすることを特徴とする請求
項９記載の画像情報変換方法。 - 【請求項１１】 上記抽出された情報は、上記第１の画
像圧縮情報の各マクロブロックに対する量子化スケール
と割当符号量との積で表される変数のうちで、最小の変
数を与えるマクロブロックを最も符号化効率のよいマク
ロブロックとすることを特徴とする請求項９記載の画像
情報変換方法。 - 【請求項１２】 上記第２の画像圧縮情報符号化に必要
な画像間動きベクトルの合成を行う合成工程を有し、 上記合成工程は、各マクロブロックを画像間相関によっ
て符号化する場合、上記第１の画像圧縮情報に含まれる
動きベクトルの情報を用いて、上記第２の画像圧縮情報
符号化に必要な画像間動きベクトルを合成することを特
徴とする請求項８記載の画像情報変換方法。 - 【請求項１３】 上記合成工程で合成された画像間動き
ベクトルを基に、高精度の動きベクトルを検出すること
を特徴とする請求項１２記載の画像情報変換方法。 - 【請求項１４】 上記第１の画像圧縮情報は、ＭＰＥＧ
２画像圧縮情報に準拠した情報であり、上記第２の画像
圧縮情報は、ＭＰＥＧ４画像圧縮情報に準拠した情報で
あることを特徴とする請求項８記載の画像情報変換方
法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001024687A JP2002232891A (ja) | 2001-01-31 | 2001-01-31 | 画像情報変換装置及び方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001024687A JP2002232891A (ja) | 2001-01-31 | 2001-01-31 | 画像情報変換装置及び方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002232891A true JP2002232891A (ja) | 2002-08-16 |
Family
ID=18889788
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001024687A Pending JP2002232891A (ja) | 2001-01-31 | 2001-01-31 | 画像情報変換装置及び方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002232891A (ja) |
-
2001
- 2001-01-31 JP JP2001024687A patent/JP2002232891A/ja active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9197903B2 (en) | Method and system for determining a macroblock partition for data transcoding | |
| EP1618744B1 (en) | Video transcoding | |
| JP4517495B2 (ja) | 画像情報変換装置及び画像情報変換方法並びに符号化装置及び符号化方法 | |
| US7224732B2 (en) | Motion vector conversion method and conversion apparatus of interlaced MPEG-2 to progressive MPEG-4 | |
| JP3855522B2 (ja) | 動画変換装置 | |
| KR20040077774A (ko) | 화상 정보 부호화 장치 및 방법, 및 화상 정보 복호 장치및 방법 | |
| JP2002152759A (ja) | 画像情報変換装置および画像情報変換方法 | |
| JP4622077B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP2002152752A (ja) | 画像情報変換装置及び方法 | |
| JP2933561B2 (ja) | 動画符号変換装置 | |
| JPH09182087A (ja) | ディジタルビデオ信号を符号化する方法及び装置 | |
| JP2002125227A (ja) | 画像情報変換装置及び方法 | |
| JP4517453B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4517475B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4608801B2 (ja) | 画像情報変換装置及び方法 | |
| JP2002010267A (ja) | 動きベクトル変換装置及び方法 | |
| JP4505992B2 (ja) | 画像情報変換装置及び方法 | |
| JP2002232891A (ja) | 画像情報変換装置及び方法 | |
| JP4517465B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4517468B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| US7012959B2 (en) | Picture information conversion method and apparatus | |
| JP4507418B2 (ja) | 画像情報変換装置及び画像情報変換方法 | |
| JP2001346214A (ja) | 画像情報変換装置及び方法 | |
| JP4779207B2 (ja) | 動きベクトル変換装置及び動きベクトル変換方法 | |
| JP4556286B2 (ja) | 動きベクトル変換装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080111 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090902 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090908 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091102 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100302 |