JP2002010266A - 画像情報変換装置及び方法 - Google Patents
画像情報変換装置及び方法Info
- Publication number
- JP2002010266A JP2002010266A JP2000190056A JP2000190056A JP2002010266A JP 2002010266 A JP2002010266 A JP 2002010266A JP 2000190056 A JP2000190056 A JP 2000190056A JP 2000190056 A JP2000190056 A JP 2000190056A JP 2002010266 A JP2002010266 A JP 2002010266A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- coded
- coded image
- intra
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【課題】 シーンチェンジによる画質劣化を抑制する。
【解決手段】 跳び越し走査のＭＰＥＧ２画像圧縮情報
（ビットストリーム）を順次走査のＭＰＥＧ４画像圧縮
情報（ビットストリーム）に変換するものであって、入
力されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
の各フレームのコンプレキシティを算出するコンプレキ
シティ算出部２４と、コンプレキシティを利用してシー
ンチェンジを検出するシーンチェンジ検出部２５と、シ
ーンチェンジに応じてＭＰＥＧ４画像圧縮情報（ビット
ストリーム）におけるＧＯＶ構造を変換するＧＯＶ構造
変換部２６とを有する。
（ビットストリーム）を順次走査のＭＰＥＧ４画像圧縮
情報（ビットストリーム）に変換するものであって、入
力されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
の各フレームのコンプレキシティを算出するコンプレキ
シティ算出部２４と、コンプレキシティを利用してシー
ンチェンジを検出するシーンチェンジ検出部２５と、シ
ーンチェンジに応じてＭＰＥＧ４画像圧縮情報（ビット
ストリーム）におけるＧＯＶ構造を変換するＧＯＶ構造
変換部２６とを有する。
Description
【０００１】
【発明の属する技術分野】本発明は、画像情報を変換す
る画像情報変換装置及び方法に関し、詳しくは、離散コ
サイン変換等の直交変換と動き補償によって圧縮された
ＭＰＥＧ等の画像情報（ビットストリーム）を衛星放
送、ケーブルＴＶ、インターネット等のネットワークメ
ディアを介して受信する際に、若しくは光、磁気ディス
クのような記憶メディア上で処理する際に用いられる画
像情報を変換する画像情報変換装置及び方法に関する。
る画像情報変換装置及び方法に関し、詳しくは、離散コ
サイン変換等の直交変換と動き補償によって圧縮された
ＭＰＥＧ等の画像情報（ビットストリーム）を衛星放
送、ケーブルＴＶ、インターネット等のネットワークメ
ディアを介して受信する際に、若しくは光、磁気ディス
クのような記憶メディア上で処理する際に用いられる画
像情報を変換する画像情報変換装置及び方法に関する。
【０００２】
【従来の技術】近年、画像情報をディジタルとして取り
扱い、効率の高い情報の伝送、蓄積を目的とし、画像情
報特有の冗長性を利用して、離散コサイン変換等の直交
変換と動き補償により圧縮するＭＰＥＧなどの画像情報
圧縮方式が提供されている。そして、このような画像情
報圧縮方法に準拠した装置は、放送局などの情報配信、
及び一般家庭における情報受信の双方において普及しつ
つある。
扱い、効率の高い情報の伝送、蓄積を目的とし、画像情
報特有の冗長性を利用して、離散コサイン変換等の直交
変換と動き補償により圧縮するＭＰＥＧなどの画像情報
圧縮方式が提供されている。そして、このような画像情
報圧縮方法に準拠した装置は、放送局などの情報配信、
及び一般家庭における情報受信の双方において普及しつ
つある。
【０００３】特に、ＭＰＥＧ２（ＩＳＯ／ＩＥＣ １３
８１８−２）は、飛び越し走査画像及び順次走査画像の
双方、並びに標準解像度画像及び高精細画像を網羅す
る、汎用画像符号化方式として定義されている。
８１８−２）は、飛び越し走査画像及び順次走査画像の
双方、並びに標準解像度画像及び高精細画像を網羅す
る、汎用画像符号化方式として定義されている。
【０００４】すなわち、ＭＰＥＧ２符号化圧縮方式によ
れば、例えば、７２０×４８０画素を持つ標準解像度の
飛び越し走査画像に４〜８Ｍｂｐｓの符号量（ビットレ
ート）を割り当て、１９２０×１０８８画素を持つ高解
像度の飛び越し走査画像に対して１８〜２２Ｍｂｐｓの
符号量（ビットレート）を割り当てることにより、高い
圧縮率と良好な画質の実現が可能となる。
れば、例えば、７２０×４８０画素を持つ標準解像度の
飛び越し走査画像に４〜８Ｍｂｐｓの符号量（ビットレ
ート）を割り当て、１９２０×１０８８画素を持つ高解
像度の飛び越し走査画像に対して１８〜２２Ｍｂｐｓの
符号量（ビットレート）を割り当てることにより、高い
圧縮率と良好な画質の実現が可能となる。
【０００５】このようなことから、ＭＰＥＧ２は、プロ
フェッショナル用途及びコンシューマー用途の広範なア
プリケーションに今後とも用いられるものと予想され
る。しかし、ＭＰＥＧ２は、主として放送用に適合する
高画質符号化を対象としており、例えばＭＰＥＧ１より
低い符号量（ビットレート）、つまりより高い圧縮率の
符号化方式には対応していなかった。
フェッショナル用途及びコンシューマー用途の広範なア
プリケーションに今後とも用いられるものと予想され
る。しかし、ＭＰＥＧ２は、主として放送用に適合する
高画質符号化を対象としており、例えばＭＰＥＧ１より
低い符号量（ビットレート）、つまりより高い圧縮率の
符号化方式には対応していなかった。
【０００６】一方で、近年の携帯端末の普及により、今
後とも高い圧縮率の符号化方式のニーズは高まると思わ
れ、これに対応して、高い圧縮率を有するＭＰＥＧ４符
号化方式の標準化が行われている。この画像符号化方式
に関しては、１９９８年１２月にＩＳＯ／ＩＥＣ １４
４９６−２として国際標準の規格が承認された。
後とも高い圧縮率の符号化方式のニーズは高まると思わ
れ、これに対応して、高い圧縮率を有するＭＰＥＧ４符
号化方式の標準化が行われている。この画像符号化方式
に関しては、１９９８年１２月にＩＳＯ／ＩＥＣ １４
４９６−２として国際標準の規格が承認された。
【０００７】ところで、ディジタル放送用に一度符号化
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
を、携帯端末上等で処理するのにより適した、より低い
符号量（ビットレート）の画像圧縮情報（ビットストリ
ーム）に変換したいというニーズがある。
されたＭＰＥＧ２画像圧縮情報（ビットストリーム）
を、携帯端末上等で処理するのにより適した、より低い
符号量（ビットレート）の画像圧縮情報（ビットストリ
ーム）に変換したいというニーズがある。
【０００８】かかる目的を達成するために、“Field-to
-Frame Transcoding with Spatialand Temporal Downsa
mpling”（Susie L Wee, John G. Apostolopoulos, and
Nick Feamster, ICIP 99、以下これを文献１と呼ぶ）
により、図８に示すような画像情報変換装置（トランス
コーダ）が提供されている。
-Frame Transcoding with Spatialand Temporal Downsa
mpling”（Susie L Wee, John G. Apostolopoulos, and
Nick Feamster, ICIP 99、以下これを文献１と呼ぶ）
により、図８に示すような画像情報変換装置（トランス
コーダ）が提供されている。
【０００９】この文献１において提供された画像情報変
換装置（トランスコーダ）は、図８に示すように、ピク
チャタイプ判別部１と、ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）２と、間引き部３と、ＭＰＥＧ４画
像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４と、動きベクトル
合成部５と、動きベクトル検出部６とから構成されてい
る。
換装置（トランスコーダ）は、図８に示すように、ピク
チャタイプ判別部１と、ＭＰＥＧ２画像情報復号化部
（Ｉ／Ｐピクチャ）２と、間引き部３と、ＭＰＥＧ４画
像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４と、動きベクトル
合成部５と、動きベクトル検出部６とから構成されてい
る。
【００１０】この画像情報変換装置には、フレーム内で
符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、
表示順序で順方向を参照して予測符号化された順方向予
測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向
及び逆方向を参照して予測符号化された双方向予測符号
化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査
のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力
される。
符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、
表示順序で順方向を参照して予測符号化された順方向予
測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向
及び逆方向を参照して予測符号化された双方向予測符号
化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査
のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力
される。
【００１１】このＭＰＥＧ２画像圧縮情報（ビットスト
リーム）は、ピクチャタイプ判別部１において、Ｉ／Ｐ
ピクチャに関するものか、Ｂピクチャに関するものであ
るかを判別され、Ｉ／Ｐピクチャのみ後続のＭＰＥＧ２
画像情報復号化部（Ｉ／Ｐピクチャ）２に出力され、Ｂ
ピクチャは破棄される。
リーム）は、ピクチャタイプ判別部１において、Ｉ／Ｐ
ピクチャに関するものか、Ｂピクチャに関するものであ
るかを判別され、Ｉ／Ｐピクチャのみ後続のＭＰＥＧ２
画像情報復号化部（Ｉ／Ｐピクチャ）２に出力され、Ｂ
ピクチャは破棄される。
【００１２】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）２における処理は通常のＭＰＥＧ２画像情報復号
化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットスト
リーム）を画像信号に復号するものである。
チャ）２における処理は通常のＭＰＥＧ２画像情報復号
化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットスト
リーム）を画像信号に復号するものである。
【００１３】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）２の出力となる画素値は、間引き部３に入力され
る。間引き部３は、水平方向には１／２の間引き処理を
施し、垂直方向には、第一フィールド若しくは第二フィ
ールドのどちらか一方のデータのみを残し、もう一方を
廃棄する。このような間引きによって、入力となる画像
情報の１／４の大きさを持つ順次走査画像を生成する。
チャ）２の出力となる画素値は、間引き部３に入力され
る。間引き部３は、水平方向には１／２の間引き処理を
施し、垂直方向には、第一フィールド若しくは第二フィ
ールドのどちらか一方のデータのみを残し、もう一方を
廃棄する。このような間引きによって、入力となる画像
情報の１／４の大きさを持つ順次走査画像を生成する。
【００１４】間引き部３によって生成された順次走査画
像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４
によってフレーム内で符号化されたＩ−ＶＯＰ及び表示
順序で順方向を参照して予測符号化されたＰ−ＶＯＰに
符号化され、ＭＰＥＧ４画像圧縮情報（ビットストリー
ム）として出力される。尚、ＶＯＰはVideo object Pla
neを意味し、ＭＰＥＧ２におけるフレームに相当するも
のである。
像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４
によってフレーム内で符号化されたＩ−ＶＯＰ及び表示
順序で順方向を参照して予測符号化されたＰ−ＶＯＰに
符号化され、ＭＰＥＧ４画像圧縮情報（ビットストリー
ム）として出力される。尚、ＶＯＰはVideo object Pla
neを意味し、ＭＰＥＧ２におけるフレームに相当するも
のである。
【００１５】その際、入力となるＭＰＥＧ２画像圧縮情
報（ビットストリーム）中の動きベクトル情報は、動き
ベクトル合成部５において間引き後の画像情報に対する
動きベクトルにマッピングされ、動きベクトル検出部６
においては、動きベクトル合成部５において合成された
動きベクトル値を元に高精度の動きベクトルを検出す
る。
報（ビットストリーム）中の動きベクトル情報は、動き
ベクトル合成部５において間引き後の画像情報に対する
動きベクトルにマッピングされ、動きベクトル検出部６
においては、動きベクトル合成部５において合成された
動きベクトル値を元に高精度の動きベクトルを検出す
る。
【００１６】文献１は、入力となるＭＰＥＧ２画像圧縮
情報（ビットストリーム）の１／２×１／２の大きさを
持つ順次走査画像のＭＰＥＧ４画像圧縮情報（ビットス
トリーム）を生成する画像情報変換装置に関して記述し
ている。すなわち、例えば入力となるＭＰＥＧ２画圧縮
情報（ビットストリーム）がＮＴＳＣ（National Telev
ision System Committee）の規格に準拠したものであっ
た場合、出力となるＭＰＥＧ４画像圧縮情報はＳＩＦサ
イズ（３５２×２４０画素）ということになる。
情報（ビットストリーム）の１／２×１／２の大きさを
持つ順次走査画像のＭＰＥＧ４画像圧縮情報（ビットス
トリーム）を生成する画像情報変換装置に関して記述し
ている。すなわち、例えば入力となるＭＰＥＧ２画圧縮
情報（ビットストリーム）がＮＴＳＣ（National Telev
ision System Committee）の規格に準拠したものであっ
た場合、出力となるＭＰＥＧ４画像圧縮情報はＳＩＦサ
イズ（３５２×２４０画素）ということになる。
【００１７】ところで、図８に示した画像情報変換装置
においては、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）４における符号量制御が、出力となるＭＰＥＧ４
画像圧縮情報（ビットストリーム）における画質を決定
する大きな要因となる。ＩＳＯ／ＩＥＣ １４４９６−
２においては、符号量制御の方式に関しては特に規定さ
れておらず、各ベンダが、アプリケーションに応じて、
演算量及び出力画質の観点から最適と考えられる方式を
用いることが出来る。以下では、代表的な符号量制御方
式として、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５（ＩＳ
Ｏ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１ Ｎ０４０
０）で述べられている方式について述べる。
においては、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）４における符号量制御が、出力となるＭＰＥＧ４
画像圧縮情報（ビットストリーム）における画質を決定
する大きな要因となる。ＩＳＯ／ＩＥＣ １４４９６−
２においては、符号量制御の方式に関しては特に規定さ
れておらず、各ベンダが、アプリケーションに応じて、
演算量及び出力画質の観点から最適と考えられる方式を
用いることが出来る。以下では、代表的な符号量制御方
式として、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５（ＩＳ
Ｏ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１ Ｎ０４０
０）で述べられている方式について述べる。
【００１８】この符号量制御のフローを図９に示すフロ
ーを用いて説明する。最初のステップＳ１１において、
画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、目標符号量
（ターゲットビットレート）、及び、ＧＯＰ（ｇroup o
f pictures）構成を入力変数として、各ピクチャヘのビ
ット配分を行う。ここで、ＧＯＰとは、ランダムアクセ
ス可能なピクチャの組である。
ーを用いて説明する。最初のステップＳ１１において、
画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、目標符号量
（ターゲットビットレート）、及び、ＧＯＰ（ｇroup o
f pictures）構成を入力変数として、各ピクチャヘのビ
ット配分を行う。ここで、ＧＯＰとは、ランダムアクセ
ス可能なピクチャの組である。
【００１９】すなわち、ステップＳ１１において、画像
情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、ＧＯＰ内の各ピ
クチャに対する割り当てビット量を、割り当て対象ピク
チャを含めＧＯＰ内でまだ復号化されていないピクチャ
に対して割り当てられるビット量（以下、これをＲとす
る）を基に配分する。この配分をＧＯＰ内の符号化ピク
チャ順に繰り返す。その際、以下に述べる２つの仮定を
用いて各ピクチャヘの符号量割り当てを行う。
情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、ＧＯＰ内の各ピ
クチャに対する割り当てビット量を、割り当て対象ピク
チャを含めＧＯＰ内でまだ復号化されていないピクチャ
に対して割り当てられるビット量（以下、これをＲとす
る）を基に配分する。この配分をＧＯＰ内の符号化ピク
チャ順に繰り返す。その際、以下に述べる２つの仮定を
用いて各ピクチャヘの符号量割り当てを行う。
【００２０】まず、第一に、各ピクチャを符号化する際
に用いる平均量子化スケールコードと発生符号量の積
は、画面が変化しない限り、ピクチャタイプ毎に一定値
となると仮定する。そこで、各ピクチャを符号化した
後、各ピクチャタイプ毎に、画面の複雑さを示す変数Ｘ
i，Ｘp，Ｘb（grobal complelxity measure）を次の式
（１）によって更新する。
に用いる平均量子化スケールコードと発生符号量の積
は、画面が変化しない限り、ピクチャタイプ毎に一定値
となると仮定する。そこで、各ピクチャを符号化した
後、各ピクチャタイプ毎に、画面の複雑さを示す変数Ｘ
i，Ｘp，Ｘb（grobal complelxity measure）を次の式
（１）によって更新する。
【００２１】
【数４】
【００２２】ここでＳi，Ｓp，Ｓbはピクチャ符号化時
の発生符号ビット量であり、Ｑi，Ｑ p，Ｑbは、ピクチ
ャ符号化時の平均量子化スケールコードである。また、
初期値は、目標符号量（ターゲットビットレート）ｂｉ
ｔ＿ｒａｔｅ［ｂｉｔｓ／ｓｅｃ］を用いて、式（２）
で示される値とする。
の発生符号ビット量であり、Ｑi，Ｑ p，Ｑbは、ピクチ
ャ符号化時の平均量子化スケールコードである。また、
初期値は、目標符号量（ターゲットビットレート）ｂｉ
ｔ＿ｒａｔｅ［ｂｉｔｓ／ｓｅｃ］を用いて、式（２）
で示される値とする。
【００２３】
【数５】
【００２４】第二に、Ｉピクチャの量子化スケールコー
ドを基準としたＰ，Ｂピクチャの量子化スケールコード
の比率Ｋp，Ｋbが式（３）に定めた値となる場合に常に
全体の画質が最適化されると仮定する。
ドを基準としたＰ，Ｂピクチャの量子化スケールコード
の比率Ｋp，Ｋbが式（３）に定めた値となる場合に常に
全体の画質が最適化されると仮定する。
【００２５】
【数６】
【００２６】すなわち、Ｂピクチャの量子化スケールコ
ードは、Ｉ，Ｐピクチャの量子化スケールコードの常に
１．４倍としている。これは、ＢピクチャをＩ，Ｐピク
チャに比較して多少粗めに符号化することにより、Ｂピ
クチャで節約できる符号量をＩ，Ｐピクチャに加える
と、Ｉ，Ｐピクチャの画質が改善され、これを参照する
Ｂピクチャの画質も改善されることを想定している。
ードは、Ｉ，Ｐピクチャの量子化スケールコードの常に
１．４倍としている。これは、ＢピクチャをＩ，Ｐピク
チャに比較して多少粗めに符号化することにより、Ｂピ
クチャで節約できる符号量をＩ，Ｐピクチャに加える
と、Ｉ，Ｐピクチャの画質が改善され、これを参照する
Ｂピクチャの画質も改善されることを想定している。
【００２７】上記２つの仮定より、ＧＯＰの各ピクチャ
に対する割り当てビット量（Ｔi，Ｔp，Ｔb）は式
（４）に示す値とする。
に対する割り当てビット量（Ｔi，Ｔp，Ｔb）は式
（４）に示す値とする。
【００２８】
【数７】
【００２９】ここでＮp，ＮbはＧＯＰ内でまだ符号化さ
れていないＰ，Ｂピクチャの枚数である。
れていないＰ，Ｂピクチャの枚数である。
【００３０】このようにして求めた割当符号量を基にし
て、各ピクチャをステップＳ１１，Ｓ１２に従って符号
化する毎に、ＧＯＰ内の未符号化ピクチャに対して割り
当てられるビット量Ｒを式（５）で更新する。
て、各ピクチャをステップＳ１１，Ｓ１２に従って符号
化する毎に、ＧＯＰ内の未符号化ピクチャに対して割り
当てられるビット量Ｒを式（５）で更新する。
【００３１】
【数８】
【００３２】また、ＧＯＰの最初のピクチャを符号化す
る際には、式（６）によりＲを更新する。
る際には、式（６）によりＲを更新する。
【００３３】
【数９】
【００３４】ＮはＧＯＰ内のピクチャ数である。また、
シーケンスの最初でのＲの初期値は０とする。
シーケンスの最初でのＲの初期値は０とする。
【００３５】次に、ステップＳ１２において、画像情報
符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、仮想バッファを用
いたレート制御を行う。すなわち、ステップＳ１２にお
いて、画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、ス
テップＳ１１で式（４）により求められた各ピクチャに
対する割当ビット量（Ｔi，Ｔp，Ｔb）と、実際の発生
符号量を一致させるため、各ピクチャ毎に独立に設定し
た３種類の仮想バッファの容量を基に、量子化スケール
コードを、マクロブロック単位のフィードバック制御で
求める。
符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、仮想バッファを用
いたレート制御を行う。すなわち、ステップＳ１２にお
いて、画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、ス
テップＳ１１で式（４）により求められた各ピクチャに
対する割当ビット量（Ｔi，Ｔp，Ｔb）と、実際の発生
符号量を一致させるため、各ピクチャ毎に独立に設定し
た３種類の仮想バッファの容量を基に、量子化スケール
コードを、マクロブロック単位のフィードバック制御で
求める。
【００３６】まず、ｊ番目のマクロブロック符号化に先
立ち、仮想バッファの占有量を式（７）によって求め
る。
立ち、仮想バッファの占有量を式（７）によって求め
る。
【００３７】
【数１０】
【００３８】ここで、ｄ0 i，ｄ0 p，ｄ0 bは各仮想バッフ
ァの初期占有量、Ｂjはピクチャの先頭からｊ番目のマ
クロブロックまでの発生ビット量、ＭＢ＿ｃｎｔは１ピ
クチャ内のマクロブロック数である。各ピクチャ符号化
終了時の仮想バッファ占有量（ｄMB_cnt i，ｄMB_cnt p，
ｄMB_cnt b）は、それぞれ同一のピクチャタイプで、次
のピクチャに対する仮想バッファ占有量の初期値
（ｄ0 i，ｄ0 p，ｄ0 b）として用いられる。
ァの初期占有量、Ｂjはピクチャの先頭からｊ番目のマ
クロブロックまでの発生ビット量、ＭＢ＿ｃｎｔは１ピ
クチャ内のマクロブロック数である。各ピクチャ符号化
終了時の仮想バッファ占有量（ｄMB_cnt i，ｄMB_cnt p，
ｄMB_cnt b）は、それぞれ同一のピクチャタイプで、次
のピクチャに対する仮想バッファ占有量の初期値
（ｄ0 i，ｄ0 p，ｄ0 b）として用いられる。
【００３９】次に、ｊ番目のマクロブロックに対する量
子化スケールコードを式（８）により計算する。
子化スケールコードを式（８）により計算する。
【００４０】
【数１１】
【００４１】ここで、ｒはリアクションパラメーターと
呼ばれるフィードバックループの応答を制御する変数で
あり、式（９）により与えられる。
呼ばれるフィードバックループの応答を制御する変数で
あり、式（９）により与えられる。
【００４２】
【数１２】
【００４３】尚、符号化開始時における仮想バッファの
初期値は式（１０）で与えられる。
初期値は式（１０）で与えられる。
【００４４】
【数１３】
【００４５】最後に、ステップＳ１３において、画像情
報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、視覚特性を考慮
したマクロブロック毎の適応量子化を行う。すなわち、
ステップＳ１３において、画像情報符号化部（Ｉ／Ｐ−
ＶＯＰ）４は、ステップＳ１２で求められた量子化スケ
ールコードを、視覚的に劣化の目立ちやすい平坦部でよ
り細かく量子化し、劣化の比較的目立ちにくい絵柄の複
雑な部分で粗く量子化するように、各マクロブロック毎
のアクティビティと呼ばれる変数によって変化させてい
る。
報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、視覚特性を考慮
したマクロブロック毎の適応量子化を行う。すなわち、
ステップＳ１３において、画像情報符号化部（Ｉ／Ｐ−
ＶＯＰ）４は、ステップＳ１２で求められた量子化スケ
ールコードを、視覚的に劣化の目立ちやすい平坦部でよ
り細かく量子化し、劣化の比較的目立ちにくい絵柄の複
雑な部分で粗く量子化するように、各マクロブロック毎
のアクティビティと呼ばれる変数によって変化させてい
る。
【００４６】アクティビティは、原画の輝度信号画素値
を用い、フレーム離散コサイン変換モードにおける４個
のブロックと、フィールド離散コサイン変換モードにお
ける４個のブロックとの、合計８ブロックの画素値を用
いて式（１１）で与えられる。
を用い、フレーム離散コサイン変換モードにおける４個
のブロックと、フィールド離散コサイン変換モードにお
ける４個のブロックとの、合計８ブロックの画素値を用
いて式（１１）で与えられる。
【００４７】
【数１４】
【００４８】ここで、Ｐkは原画の輝度信号ブロック内
画素値である。式（１１）において最小値を採るのは、
マクロブロック内の一部だけでも平坦部分のある場合に
は量子化を細かくするためである。
画素値である。式（１１）において最小値を採るのは、
マクロブロック内の一部だけでも平坦部分のある場合に
は量子化を細かくするためである。
【００４９】更に、式（１２）によりその値が０．５〜
２の範囲を取る正規化アクティビティＮａｃｔjを求め
る。
２の範囲を取る正規化アクティビティＮａｃｔjを求め
る。
【００５０】
【数１５】
【００５１】ここで、ａｖｇ＿ａｃｔは、直前に符号化
したピクチャでのａｃｔjの平均値である。
したピクチャでのａｃｔjの平均値である。
【００５２】視覚特性を考慮した量子化スケールコード
ｍｑｕａｎｔjはステップＳ１２で得られた量子化スケ
ールコードＱjを基に式（１３）で与えられる。
ｍｑｕａｎｔjはステップＳ１２で得られた量子化スケ
ールコードＱjを基に式（１３）で与えられる。
【００５３】
【数１６】
【００５４】ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５にお
いて定められた上記符号量制御方式には以下の制限のあ
ることが知られており、実際の制御を行う場合には、こ
れらの制限に対する対策が必要となる。すなわち、第一
の制限は、第一ステップＳ１１はシーンチェンジに対応
出来ず、また、シーンチェンジ後には第三ステップＳ１
３で用いる媒介変数ａｖｇ＿ａｃｔが間違った値となる
ということである。第二の制限は、ＭＰＥＧ２及びＭＰ
ＥＧ４において規定されているＶＢＶ（VideoBuffer Ve
rifier）の拘束条件を満たす保証がないことである。
いて定められた上記符号量制御方式には以下の制限のあ
ることが知られており、実際の制御を行う場合には、こ
れらの制限に対する対策が必要となる。すなわち、第一
の制限は、第一ステップＳ１１はシーンチェンジに対応
出来ず、また、シーンチェンジ後には第三ステップＳ１
３で用いる媒介変数ａｖｇ＿ａｃｔが間違った値となる
ということである。第二の制限は、ＭＰＥＧ２及びＭＰ
ＥＧ４において規定されているＶＢＶ（VideoBuffer Ve
rifier）の拘束条件を満たす保証がないことである。
【００５５】ところで、文献”ＭＰＥＧ圧縮効率の理論
解析とその符号量制御への応用”（信学技報、ＩＥ−９
５， ＤＳＰ９５−１０， １９９５年５月、以下これを
文献２と呼ぶ）でも述べられている通り、Ｔｅｓｔ Ｍ
ｏｄｅｌ ５で定められている符号量制御方式は、ＭＰ
ＥＧ−２画像符号化装置において、必ずしも良好な画質
を与えるものではない。
解析とその符号量制御への応用”（信学技報、ＩＥ−９
５， ＤＳＰ９５−１０， １９９５年５月、以下これを
文献２と呼ぶ）でも述べられている通り、Ｔｅｓｔ Ｍ
ｏｄｅｌ ５で定められている符号量制御方式は、ＭＰ
ＥＧ−２画像符号化装置において、必ずしも良好な画質
を与えるものではない。
【００５６】この文献２では、特に、良好な画質を与え
るための、ＧＯＰ内における各フレーム毎の最適な符号
量配分を与える手法として以下の方式を提案している。
すなわち、ＮI，ＮP，ＮBを、ＧＯＰ内においてまだ符
号化されていないＩ，Ｐ，Ｂピクチャの枚数として、こ
れらに割り当てられる符号量をＲI，ＲP，ＲBとする。
また、式（１４）で与えられる固定レート条件の下に、
それぞれにおける量子化ステップサイズをＱI，ＱP，Ｑ
Bとし、ｍを、量子化ステップサイズと再生誤差分散を
関係付ける次数（すなわち、量子化ステップサイズをｍ
乗したものの平均値の最小化が再生誤差分散を最低にす
ると仮定する）とする。そして、式（１５）を最小にす
ることを考える。
るための、ＧＯＰ内における各フレーム毎の最適な符号
量配分を与える手法として以下の方式を提案している。
すなわち、ＮI，ＮP，ＮBを、ＧＯＰ内においてまだ符
号化されていないＩ，Ｐ，Ｂピクチャの枚数として、こ
れらに割り当てられる符号量をＲI，ＲP，ＲBとする。
また、式（１４）で与えられる固定レート条件の下に、
それぞれにおける量子化ステップサイズをＱI，ＱP，Ｑ
Bとし、ｍを、量子化ステップサイズと再生誤差分散を
関係付ける次数（すなわち、量子化ステップサイズをｍ
乗したものの平均値の最小化が再生誤差分散を最低にす
ると仮定する）とする。そして、式（１５）を最小にす
ることを考える。
【００５７】
【数１７】
【００５８】
【数１８】
【００５９】尚、それぞれのフレームにおける平均量子
化スケールＱ、及び符号量Ｒは、Ｔｅｓｔ Ｍｏｄｅｌ
５でも用いられる媒体変数である各フレームのコンプレ
キシティＸと、式（１６）のように関係づけられる。
化スケールＱ、及び符号量Ｒは、Ｔｅｓｔ Ｍｏｄｅｌ
５でも用いられる媒体変数である各フレームのコンプレ
キシティＸと、式（１６）のように関係づけられる。
【００６０】
【数１９】
【００６１】式（１６）の関係も考慮しつつ、式（１
４）の拘束条件の元に式（１５）を最小にするＲI，
ＲP，ＲBを、ラグランジェの未定乗数法を用いて算出す
ると、最適なＲI，ＲP，ＲBとして以下の式のような値
が求められる。
４）の拘束条件の元に式（１５）を最小にするＲI，
ＲP，ＲBを、ラグランジェの未定乗数法を用いて算出す
ると、最適なＲI，ＲP，ＲBとして以下の式のような値
が求められる。
【００６２】
【数２０】
【００６３】α＝１として、式（１７）と、ＭＰＥＧ２
Ｔｅｓｔ Ｍｏｄｅｌ ５で定められた符号量制御方式
における式（４）との関係は以下の通りであると言え
る。すなわち、式（１７）は、符号量制御の媒介変数で
あるＫp，Ｋbを、各フレームのコンプレキシティＸI，
ＸP，ＸBに応じて、式（１８）のように適応的に算出し
ていることに他ならない。
Ｔｅｓｔ Ｍｏｄｅｌ ５で定められた符号量制御方式
における式（４）との関係は以下の通りであると言え
る。すなわち、式（１７）は、符号量制御の媒介変数で
あるＫp，Ｋbを、各フレームのコンプレキシティＸI，
ＸP，ＸBに応じて、式（１８）のように適応的に算出し
ていることに他ならない。
【００６４】
【数２１】
【００６５】文献２では、１／（１＋ｍ）の値として、
０．６〜１．２程度に設定することで良好な画質が得ら
れることが示されている。
０．６〜１．２程度に設定することで良好な画質が得ら
れることが示されている。
【００６６】図８に示した画像情報変換装置内で、ＭＰ
ＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４におい
て、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５において定
められたのと同様な手法を用いて符号量制御を行った場
合、シーンチェンジ等に起因する、ＧＯＰ内でのコンプ
レキシティの変化に対応することが不可能であるため、
安定した符号量制御が困難となり、画質劣化を引き起こ
すことが考えられる。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）２において抽出される、入力となるＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）内の情報をＭ
ＰＥＧ４画像圧縮情報符号化部（Ｉ／Ｐ−ＶＯＰ）４に
おいて利用することでこの問題を回避することが可能で
あると期待される。
ＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４におい
て、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５において定
められたのと同様な手法を用いて符号量制御を行った場
合、シーンチェンジ等に起因する、ＧＯＰ内でのコンプ
レキシティの変化に対応することが不可能であるため、
安定した符号量制御が困難となり、画質劣化を引き起こ
すことが考えられる。ＭＰＥＧ２画像情報復号化部（Ｉ
／Ｐピクチャ）２において抽出される、入力となるＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）内の情報をＭ
ＰＥＧ４画像圧縮情報符号化部（Ｉ／Ｐ−ＶＯＰ）４に
おいて利用することでこの問題を回避することが可能で
あると期待される。
【００６７】かかる問題を解決するため、本願出願人
は、先に図１０に示すような画像情報変換装置を提案し
た。
は、先に図１０に示すような画像情報変換装置を提案し
た。
【００６８】この画像情報変換装置は、ピクチャタイプ
判別部７と、圧縮情報解析部８と、ＭＰＥＧ２画像情報
復号化部（Ｉ／Ｐピクチャ）９と、間引き部１０と、Ｍ
ＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１と、
動きベクトル合成部１２と、動きベクトル検出部１３
と、情報バッファ１４と、コンプレキシティ算出部１５
とから構成される。
判別部７と、圧縮情報解析部８と、ＭＰＥＧ２画像情報
復号化部（Ｉ／Ｐピクチャ）９と、間引き部１０と、Ｍ
ＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１と、
動きベクトル合成部１２と、動きベクトル検出部１３
と、情報バッファ１４と、コンプレキシティ算出部１５
とから構成される。
【００６９】この画像情報変換装置は、圧縮情報解析部
８、情報バッファ１４、コンプレキシティ算出部１５及
びＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１
における符号量制御以外の動作原理については、図８に
示した画像情報変換装置と同様であるため、以下では、
圧縮情報解析部８、情報バッファ１４、コンプレキシテ
ィ算出部１５における動作原理及びＭＰＥＧ４画像情報
符号化部（Ｉ／Ｐ−ＶＯＰ）１１における符号量制御に
ついて述べることにする。
８、情報バッファ１４、コンプレキシティ算出部１５及
びＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１
における符号量制御以外の動作原理については、図８に
示した画像情報変換装置と同様であるため、以下では、
圧縮情報解析部８、情報バッファ１４、コンプレキシテ
ィ算出部１５における動作原理及びＭＰＥＧ４画像情報
符号化部（Ｉ／Ｐ−ＶＯＰ）１１における符号量制御に
ついて述べることにする。
【００７０】圧縮情報解析部８において、復号処理に用
いられた量子化スケールのフレーム全体に渡る平均値
Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報（ビット
ストリーム）において、当該フレームに割り当てられた
総符号量（ビット数）Ｂは、情報バッファ１４に格納さ
れる。
いられた量子化スケールのフレーム全体に渡る平均値
Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報（ビット
ストリーム）において、当該フレームに割り当てられた
総符号量（ビット数）Ｂは、情報バッファ１４に格納さ
れる。
【００７１】コンプレキシティ算出部１５においては、
情報バッファ１４に格納されたフレーム毎の情報Ｑ及び
Ｂから、当該フレームに対するコンプレキシティＸを式
（１９）により算出する。
情報バッファ１４に格納されたフレーム毎の情報Ｑ及び
Ｂから、当該フレームに対するコンプレキシティＸを式
（１９）により算出する。
【００７２】
【数２２】
【００７３】式（１９）によって算出された、当該フレ
ームに対するコンプレキシティＸは、１ＧＯＶ（group
of VOPs）分バッファリングされた後、ＭＰＥＧ４画像
情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１に符号量制御のた
めの媒介変数として伝送される。このため、１ＧＯＶ分
の遅延が必要となる。この遅延は図示しない遅延バッフ
ァを用いて実現される。ここで、ＧＯＶとは、ランダム
アクセス可能なＶＯＰの組である。
ームに対するコンプレキシティＸは、１ＧＯＶ（group
of VOPs）分バッファリングされた後、ＭＰＥＧ４画像
情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１に符号量制御のた
めの媒介変数として伝送される。このため、１ＧＯＶ分
の遅延が必要となる。この遅延は図示しない遅延バッフ
ァを用いて実現される。ここで、ＧＯＶとは、ランダム
アクセス可能なＶＯＰの組である。
【００７４】以下では、式（１９）において算出され
た、ＧＯＶ内の各フレームに対するコンプレキシティＸ
が、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１
１においてどのように用いられるかについて述べる。
尚、以下では、ピクチャタイプ判別部７がこの画像情報
変換装置内に存在せず、フレームレートの変換を行わな
い場合をも考慮することにする。
た、ＧＯＶ内の各フレームに対するコンプレキシティＸ
が、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１
１においてどのように用いられるかについて述べる。
尚、以下では、ピクチャタイプ判別部７がこの画像情報
変換装置内に存在せず、フレームレートの変換を行わな
い場合をも考慮することにする。
【００７５】式（１８）によつて求められたＫP，ＫBの
意味するところは、Ｉ−ＶＯＰに対する理想的な平均量
子化スケールＱi_idealに対するＰ−ＶＯＰ／Ｂ−ＶＯ
Ｐに対する理想的な平均量子化スケールＱp_ideal，Ｑ
b_idealの比が、式（２０）によって与えられるという
ことである。
意味するところは、Ｉ−ＶＯＰに対する理想的な平均量
子化スケールＱi_idealに対するＰ−ＶＯＰ／Ｂ−ＶＯ
Ｐに対する理想的な平均量子化スケールＱp_ideal，Ｑ
b_idealの比が、式（２０）によって与えられるという
ことである。
【００７６】
【数２３】
【００７７】ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５にお
いては、式（１８）のように適応的にＫp，Ｋbを算出す
ることを行わず、式（３）に示したような固定値を用い
ている。
いては、式（１８）のように適応的にＫp，Ｋbを算出す
ることを行わず、式（３）に示したような固定値を用い
ている。
【００７８】式（１８）及び式（２０）から、或るＶＯ
Ｐ１と、或るＶＯＰ２に対するコンプレキシティをそれ
ぞれＸ1，Ｘ2とし、理想的な量子化スケールをＱ
1_ideal，Ｑ2_idealとすれば、式（２１）のようにな
る。
Ｐ１と、或るＶＯＰ２に対するコンプレキシティをそれ
ぞれＸ1，Ｘ2とし、理想的な量子化スケールをＱ
1_ideal，Ｑ2_idealとすれば、式（２１）のようにな
る。
【００７９】
【数２４】
【００８０】或いはまた、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄ
ｅｌ ５のように、式（３）に示した固定値を用いたい
場合には、式（２１）に代えて、式（２２）のようにす
れば良い。
ｅｌ ５のように、式（３）に示した固定値を用いたい
場合には、式（２１）に代えて、式（２２）のようにす
れば良い。
【００８１】
【数２５】
【００８２】今、ＧＯＶ内の未符号化されたＶＯＰに対
して割り当てられる総符号量（ビット数）をＲとし、Ｒ
が、各ＶＯＰに対して、Ｒ1，Ｒ2，…Ｒnといったよう
に割り当てられる時、当該ＧＯＶに対する画質が最適化
されるものとする。ここでＲとＲ1，Ｒ2，…Ｒnの間に
は式（２３）のような関係式が成り立つ。
して割り当てられる総符号量（ビット数）をＲとし、Ｒ
が、各ＶＯＰに対して、Ｒ1，Ｒ2，…Ｒnといったよう
に割り当てられる時、当該ＧＯＶに対する画質が最適化
されるものとする。ここでＲとＲ1，Ｒ2，…Ｒnの間に
は式（２３）のような関係式が成り立つ。
【００８３】
【数２６】
【００８４】或るＶＯＰkに対する平均量子化スケール
Ｑk、割当符号量Ｒk、コンプレキシティＸkの間には式
（２４）なる関係があることにも注意して、式（２３）
を変形すれば式（２５）が得られる。
Ｑk、割当符号量Ｒk、コンプレキシティＸkの間には式
（２４）なる関係があることにも注意して、式（２３）
を変形すれば式（２５）が得られる。
【００８５】
【数２７】
【００８６】
【数２８】
【００８７】式（２５）において、Ｋ（Ｘ1，Ｘ2）に関
しては、式（２１）に示した値を用いても、式（２２）
に示した値を用いても良いが、前者の方が、画像に応じ
た、より最適な符号量配分を実現することが可能であ
る。その際、１／（１＋ｍ）の値を１．０と設定するこ
とで、指数演算を行うことが不要となり、高速な実行が
可能となる。また、１／（１＋ｍ）の値を１．０以外に
設定する場合にも、予めテーブルを持ち、これを参照し
て指数演算を行うことで高速な実行が可能となる。
しては、式（２１）に示した値を用いても、式（２２）
に示した値を用いても良いが、前者の方が、画像に応じ
た、より最適な符号量配分を実現することが可能であ
る。その際、１／（１＋ｍ）の値を１．０と設定するこ
とで、指数演算を行うことが不要となり、高速な実行が
可能となる。また、１／（１＋ｍ）の値を１．０以外に
設定する場合にも、予めテーブルを持ち、これを参照し
て指数演算を行うことで高速な実行が可能となる。
【００８８】式（２５）における各ＶＯＰに対するコン
プレキシティＸkはＭＰＥＧ４画像符号化によるもので
あるが、ＭＰＥＧ２画像符号化による各フレームに対す
るコンプレキシティと、ＭＰＥＧ４画像符号化による各
フレームに対するコンプレキシティが等しいと仮定すれ
ば、コンプレキシティ算出部１５に格納されたＸkを用
いることで、式（２５）によって当該ＶＯＰに対する目
標符号量を算出することが可能である。
プレキシティＸkはＭＰＥＧ４画像符号化によるもので
あるが、ＭＰＥＧ２画像符号化による各フレームに対す
るコンプレキシティと、ＭＰＥＧ４画像符号化による各
フレームに対するコンプレキシティが等しいと仮定すれ
ば、コンプレキシティ算出部１５に格納されたＸkを用
いることで、式（２５）によって当該ＶＯＰに対する目
標符号量を算出することが可能である。
【００８９】この目標符号量の算出のフローを図１１に
示す。最初のステップＳ２１において、圧縮情報解析部
８は、ＭＰＥＧ２画像情報復号化部９における復号処理
に用いられるＧＯＰ内の各フレームに対する平均量子化
スケールＱ，及び割当符号量（ビット数）Ｂを抽出す
る。
示す。最初のステップＳ２１において、圧縮情報解析部
８は、ＭＰＥＧ２画像情報復号化部９における復号処理
に用いられるＧＯＰ内の各フレームに対する平均量子化
スケールＱ，及び割当符号量（ビット数）Ｂを抽出す
る。
【００９０】ステップＳ２２において、コンプレキシテ
ィ算出部１５は、平均量子化スケールＱ及び割当符号量
（ビット数）Ｂの積で与えられるコンプレキシティＸを
算出する。
ィ算出部１５は、平均量子化スケールＱ及び割当符号量
（ビット数）Ｂの積で与えられるコンプレキシティＸを
算出する。
【００９１】ステップＳ２３において、ＭＰＥＧ４画像
符号化部（Ｉ／Ｐ−ＶＯＰ）１１は、コンプレキシティ
Ｘに応じた目標符号量（ターゲットビット）を算出す
る。
符号化部（Ｉ／Ｐ−ＶＯＰ）１１は、コンプレキシティ
Ｘに応じた目標符号量（ターゲットビット）を算出す
る。
【００９２】ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５で
は、ＧＯＰ内におけるＩ，Ｐ，Ｂピクチャに対するコン
プレキシティＸi，Ｘp，Ｘbは一定であると仮定してい
るが実際にはシーンチェンジをＧＯＰ内に含む場合や、
ＧＯＰ内で背景が著しく変化する場合等ではこの仮定が
成り立たず、安定した符号量制御の妨げとなり、画質劣
化の要因ともなる。図１０に示した画像情報変換装置に
おいては、そのような場合にも、入力となるＭＰＥＧ２
画像圧縮情報（ビットストリーム）における、各フレー
ムに対するコンプレキシティに基づいた符号量制御を行
うため、画質劣化を引き起こすことなく、安定した符号
量制御を行うことが可能である。
は、ＧＯＰ内におけるＩ，Ｐ，Ｂピクチャに対するコン
プレキシティＸi，Ｘp，Ｘbは一定であると仮定してい
るが実際にはシーンチェンジをＧＯＰ内に含む場合や、
ＧＯＰ内で背景が著しく変化する場合等ではこの仮定が
成り立たず、安定した符号量制御の妨げとなり、画質劣
化の要因ともなる。図１０に示した画像情報変換装置に
おいては、そのような場合にも、入力となるＭＰＥＧ２
画像圧縮情報（ビットストリーム）における、各フレー
ムに対するコンプレキシティに基づいた符号量制御を行
うため、画質劣化を引き起こすことなく、安定した符号
量制御を行うことが可能である。
【００９３】
【発明が解決しようとする課題】ところで、ＣＣＩＲ
（Comite Consultantif Internationale des Radio Com
munications ）テストシーケンスの一つである“Ｔａｂ
ｌｅ Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によっ
て、ｎ＝１５；ｍ＝３の条件の元、４Ｍｂｐｓ に圧縮
した画像圧縮情報（ビットストリーム）を、図１０に示
した画像情報変換装置を用いて、ｎ＝５；ｍ＝１、６０
０ｋｂｐｓのＭＰＥＧ４画像圧縮情報（ビットストリー
ム）に変換した時のｐＳＮＲを図１２に示す。 ｐＳＮ
Ｒは次の式（２６）により計算される。
（Comite Consultantif Internationale des Radio Com
munications ）テストシーケンスの一つである“Ｔａｂ
ｌｅ Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によっ
て、ｎ＝１５；ｍ＝３の条件の元、４Ｍｂｐｓ に圧縮
した画像圧縮情報（ビットストリーム）を、図１０に示
した画像情報変換装置を用いて、ｎ＝５；ｍ＝１、６０
０ｋｂｐｓのＭＰＥＧ４画像圧縮情報（ビットストリー
ム）に変換した時のｐＳＮＲを図１２に示す。 ｐＳＮ
Ｒは次の式（２６）により計算される。
【００９４】
【数２９】
【００９５】この式（２６）において、ＭＳＥは、ＭＰ
ＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）１１の、
各フレームに対する入力信号と出力信号の平均２乗誤差
である。
ＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）１１の、
各フレームに対する入力信号と出力信号の平均２乗誤差
である。
【００９６】図１２において、第２１フレーム及び第３
１フレームのＰ−ＶＯＰにはシーンチェンジが含まれ
る。図１０に示した画像情報変換装置を用いることによ
り、これらのワレームには通常のＰ−ＶＯＰより多くの
符号量（ビット数）が割り当てられることになり、その
画質劣化を最小限に抑えることを可能としている。しか
しながら、これらのＰ−ＶＯＰにより多くの符号量（ビ
ット数）を割り当てるため、当該ＧＯＶ内の他のＩ−Ｖ
ＯＰ及びＰ−ＶＯＰに対して割り当てられる符号量（ビ
ット数）が減少し、ＧＯＶ全体の画質劣化が他のＧＯＶ
における画質劣化に比べて大きくなってしまうという問
題点を有する。
１フレームのＰ−ＶＯＰにはシーンチェンジが含まれ
る。図１０に示した画像情報変換装置を用いることによ
り、これらのワレームには通常のＰ−ＶＯＰより多くの
符号量（ビット数）が割り当てられることになり、その
画質劣化を最小限に抑えることを可能としている。しか
しながら、これらのＰ−ＶＯＰにより多くの符号量（ビ
ット数）を割り当てるため、当該ＧＯＶ内の他のＩ−Ｖ
ＯＰ及びＰ−ＶＯＰに対して割り当てられる符号量（ビ
ット数）が減少し、ＧＯＶ全体の画質劣化が他のＧＯＶ
における画質劣化に比べて大きくなってしまうという問
題点を有する。
【００９７】本発明は、上述の実情に鑑みて提案される
もので、シーンチェンジを含む場合にも画質劣化を抑制
するような画像情報変換装置及び方法を提供することを
目的とする。
もので、シーンチェンジを含む場合にも画質劣化を抑制
するような画像情報変換装置及び方法を提供することを
目的とする。
【００９８】
【課題を解決するための手段】上述の課題を解決するた
めに、本発明は、第１の圧縮符号化方式で圧縮された飛
び越し走査の入力画像圧縮情報を、第２の圧縮符号化方
式で圧縮された順次走査の出力画像圧縮情報に変換する
ものであって、上記入力画像圧縮情報及び上記出力画像
圧縮情報は複数の符号化画像からなる画像群を単位とし
て構成され、上記出力画像圧縮情報におけるシーンチェ
ンジを検出し、上記入力画像圧縮情報の各フレームのコ
ンプレキシティを検出し、上記コンプレキシティに基づ
いて上記出力画像圧縮情報に画像情報の符号量を配分す
る際に、上記シーンチェンジに応じて上記出力画像圧縮
情報における画像群の構造を変換するものである。
めに、本発明は、第１の圧縮符号化方式で圧縮された飛
び越し走査の入力画像圧縮情報を、第２の圧縮符号化方
式で圧縮された順次走査の出力画像圧縮情報に変換する
ものであって、上記入力画像圧縮情報及び上記出力画像
圧縮情報は複数の符号化画像からなる画像群を単位とし
て構成され、上記出力画像圧縮情報におけるシーンチェ
ンジを検出し、上記入力画像圧縮情報の各フレームのコ
ンプレキシティを検出し、上記コンプレキシティに基づ
いて上記出力画像圧縮情報に画像情報の符号量を配分す
る際に、上記シーンチェンジに応じて上記出力画像圧縮
情報における画像群の構造を変換するものである。
【００９９】本発明は、飛び越し走査のＭＰＥＧ２画像
圧縮情報（ビットストリーム）を入力画像圧縮情報と
し、順次操作のＭＰＥＧ４画像圧縮情報（ビットストリ
ーム）を出力画像圧縮情報とする。ここで、ＭＰＥＧ２
画像圧縮情報（ビットストリーム）は符号化画像である
ピクチャ（picture）からなる画像群であるＧＯＰ（gro
up of pictures）から構成され、ＭＰＥＧ４画像圧縮情
報（ビットストリーム）は符号化画像であるＶＯＰ（vi
de object plain）からなる画像群であるＧＯＶ（group
of VOPs）から構成されている。そして、上記画像群の
符号化画像は、複数の画素から構成される画素ブロック
すなわちマクロブロックから構成されている。
圧縮情報（ビットストリーム）を入力画像圧縮情報と
し、順次操作のＭＰＥＧ４画像圧縮情報（ビットストリ
ーム）を出力画像圧縮情報とする。ここで、ＭＰＥＧ２
画像圧縮情報（ビットストリーム）は符号化画像である
ピクチャ（picture）からなる画像群であるＧＯＰ（gro
up of pictures）から構成され、ＭＰＥＧ４画像圧縮情
報（ビットストリーム）は符号化画像であるＶＯＰ（vi
de object plain）からなる画像群であるＧＯＶ（group
of VOPs）から構成されている。そして、上記画像群の
符号化画像は、複数の画素から構成される画素ブロック
すなわちマクロブロックから構成されている。
【０１００】すなわち、本発明は、飛び越し走査のＭＰ
ＥＧ２画像圧縮情報（ビットストリーム）を入力とし、
ピクチャタイプ判別部、圧縮情報解析部、ＭＰＥＧ２画
像情報復号化部（Ｉ／Ｐピクチャ）、間引き部、ＭＰＥ
Ｇ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、動きベクト
ル合成部、動きベクトル検出部、情報バッファ、コンプ
レキシティ算出部、シーンチェンジ検出部、及びＧＯＶ
構造変換部を兼ね備え、入力となるＭＰＥＧ２画像圧縮
情報（ビットストリーム）における各フレームに対する
コンプレキシティを元にしてＭＰＥＧ４画像情報符号化
部で符号量制御を行う際、シーンチェンジが検出された
ＧＯＶに対しては、直後のＧＯＶにおける最初のＩ−Ｖ
ＯＰをＰ−ＶＯＰに変換することによりＧＯＶ構造の変
換を行うことで当該ＧＯＶにおける画質劣化を低減し、
各フレームに対する符号量割当が画像に対して最適化さ
れた状態で、順次走査のＭＰＥＧ４画像圧縮情報（ビッ
トストリーム）を出力する手段を提供するものである。
ＥＧ２画像圧縮情報（ビットストリーム）を入力とし、
ピクチャタイプ判別部、圧縮情報解析部、ＭＰＥＧ２画
像情報復号化部（Ｉ／Ｐピクチャ）、間引き部、ＭＰＥ
Ｇ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、動きベクト
ル合成部、動きベクトル検出部、情報バッファ、コンプ
レキシティ算出部、シーンチェンジ検出部、及びＧＯＶ
構造変換部を兼ね備え、入力となるＭＰＥＧ２画像圧縮
情報（ビットストリーム）における各フレームに対する
コンプレキシティを元にしてＭＰＥＧ４画像情報符号化
部で符号量制御を行う際、シーンチェンジが検出された
ＧＯＶに対しては、直後のＧＯＶにおける最初のＩ−Ｖ
ＯＰをＰ−ＶＯＰに変換することによりＧＯＶ構造の変
換を行うことで当該ＧＯＶにおける画質劣化を低減し、
各フレームに対する符号量割当が画像に対して最適化さ
れた状態で、順次走査のＭＰＥＧ４画像圧縮情報（ビッ
トストリーム）を出力する手段を提供するものである。
【０１０１】上記構成において、ピクチャタイプ判別部
は、入力となるＭＰＥＧ２画像圧縮情報（ビットストリ
ーム）内で、Ｉ／Ｐピクチャに関するものだけ残してＢ
ピクチャに関するものは廃棄する。圧縮情報解析部は、
２ＧＯＰ分の遅延を実現し、また、入力となるＭＰＥＧ
２画像圧縮情報（ビットストリーム）内で、各フレーム
に対して割り当てられた符号量（ビット数）及び各フレ
ームにおける平均量子化スケールを抽出する。ＭＰＥＧ
２画像情報復号化部（Ｉ／Ｐピクチャ）は、ピクチャタ
イプ判別部の出力となる、Ｉ／Ｐピクチャに関する圧縮
情報（ビットストリーム）を、水平方向垂直方向とも
に、８次の離散コサイン係数全てを用いた、若しくはそ
の低域成分のみを用いた復号処理を行う。間引き部は、
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）の出力
である画像情報の第一フィールド若しくは第二フイール
ドのみを取り出して順次走査画像への変換を行うと同時
に、所望の画枠サイズに変換するためのダウンサンプリ
ングを行う。ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）は、間引き部の出力となる画像情報をＭＰＥＧ４
符号化方式により符号化する。動きベクトル合成部は、
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）で検出
された、入力となる画像圧縮情報（ビットストリーム）
内の動きベクトル値を元に、走査変換後の画像データに
対する動きベクトル値にマッピングを行う。動きベクト
ル検出部は、動きベクトル合成部から出力される動きベ
クトル値を元に、高精度の動きベクトル検出を行い、情
報パフファにおいては、圧縮情報解析部において抽出さ
れた、入力となるＭＰＥＧ２画像圧縮情報（ビットスト
リーム）における各フレームに割り当てられた符号量
（ビット数）及び各フレームに対する平均量子化スケー
ルを格納する。コンプレキシティ算出部は、情報バッフ
ァに格納された、入力となる画像圧縮情報（ビットスト
リーム）における、各フレームに割り当てられた符号量
（ビット数）、及び各フレームに対する平均量子化スケ
ールから、各フレームに対するコンプレキシティを算出
し、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
へ、符号量制御のための媒介変数として伝送する。シー
ンチェンジ検出部は、コンプレキシティ算出部に格納さ
れた、入力となるＭＰＥＧ２画像圧縮情報（ビットスト
リーム）における各フレームに対するコンプレキシティ
からシーンチェンジが当該ＧＯＰに含まれているかどう
かの検出を行う。ＧＯＶ構造変換部は、シーンチェンジ
検出部においてシーンチェンジが検出された場合、ＭＰ
ＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）において符
号化制御情報として与えられるＧＯＶ構造の変換を行っ
てその情報をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）に伝送する。シーンチェンジ検出は、コンプレキ
シティ算出部に格納された情報ではなく、圧縮情報解析
部において抽出される、各フレームにおけるイントラマ
クロブロックの数等の情報を用いて行っても良い。ま
た、間引き部の後段にフレームバッファを兼ね備え、こ
こでシーンチェンジ検出を行っても良い。
は、入力となるＭＰＥＧ２画像圧縮情報（ビットストリ
ーム）内で、Ｉ／Ｐピクチャに関するものだけ残してＢ
ピクチャに関するものは廃棄する。圧縮情報解析部は、
２ＧＯＰ分の遅延を実現し、また、入力となるＭＰＥＧ
２画像圧縮情報（ビットストリーム）内で、各フレーム
に対して割り当てられた符号量（ビット数）及び各フレ
ームにおける平均量子化スケールを抽出する。ＭＰＥＧ
２画像情報復号化部（Ｉ／Ｐピクチャ）は、ピクチャタ
イプ判別部の出力となる、Ｉ／Ｐピクチャに関する圧縮
情報（ビットストリーム）を、水平方向垂直方向とも
に、８次の離散コサイン係数全てを用いた、若しくはそ
の低域成分のみを用いた復号処理を行う。間引き部は、
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）の出力
である画像情報の第一フィールド若しくは第二フイール
ドのみを取り出して順次走査画像への変換を行うと同時
に、所望の画枠サイズに変換するためのダウンサンプリ
ングを行う。ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）は、間引き部の出力となる画像情報をＭＰＥＧ４
符号化方式により符号化する。動きベクトル合成部は、
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）で検出
された、入力となる画像圧縮情報（ビットストリーム）
内の動きベクトル値を元に、走査変換後の画像データに
対する動きベクトル値にマッピングを行う。動きベクト
ル検出部は、動きベクトル合成部から出力される動きベ
クトル値を元に、高精度の動きベクトル検出を行い、情
報パフファにおいては、圧縮情報解析部において抽出さ
れた、入力となるＭＰＥＧ２画像圧縮情報（ビットスト
リーム）における各フレームに割り当てられた符号量
（ビット数）及び各フレームに対する平均量子化スケー
ルを格納する。コンプレキシティ算出部は、情報バッフ
ァに格納された、入力となる画像圧縮情報（ビットスト
リーム）における、各フレームに割り当てられた符号量
（ビット数）、及び各フレームに対する平均量子化スケ
ールから、各フレームに対するコンプレキシティを算出
し、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
へ、符号量制御のための媒介変数として伝送する。シー
ンチェンジ検出部は、コンプレキシティ算出部に格納さ
れた、入力となるＭＰＥＧ２画像圧縮情報（ビットスト
リーム）における各フレームに対するコンプレキシティ
からシーンチェンジが当該ＧＯＰに含まれているかどう
かの検出を行う。ＧＯＶ構造変換部は、シーンチェンジ
検出部においてシーンチェンジが検出された場合、ＭＰ
ＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）において符
号化制御情報として与えられるＧＯＶ構造の変換を行っ
てその情報をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）に伝送する。シーンチェンジ検出は、コンプレキ
シティ算出部に格納された情報ではなく、圧縮情報解析
部において抽出される、各フレームにおけるイントラマ
クロブロックの数等の情報を用いて行っても良い。ま
た、間引き部の後段にフレームバッファを兼ね備え、こ
こでシーンチェンジ検出を行っても良い。
【０１０２】
【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照して説明する。
て、図面を参照して説明する。
【０１０３】まず、本発明を適用した第１の実施の形態
として、画像情報変換装置を説明する。
として、画像情報変換装置を説明する。
【０１０４】この画像情報変換装置は、図１に示すよう
に、ピクチャタイプ判別部１６と、圧縮情報解析部１７
と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１
８と、間引き部１９と、ＭＰＥＧ４画像情報符号化部
（Ｉ／Ｐ−ＶＯＰ）２０と、動きベクトル合成部２１
と、動きベクトル検出部２２と、情報バッファ２３と、
コンプレキシティ算出部２４と、シーンチェンジ検出部
２５と、ＧＯＶ構造変換部２６とから構成されている。
に、ピクチャタイプ判別部１６と、圧縮情報解析部１７
と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１
８と、間引き部１９と、ＭＰＥＧ４画像情報符号化部
（Ｉ／Ｐ−ＶＯＰ）２０と、動きベクトル合成部２１
と、動きベクトル検出部２２と、情報バッファ２３と、
コンプレキシティ算出部２４と、シーンチェンジ検出部
２５と、ＧＯＶ構造変換部２６とから構成されている。
【０１０５】なお、ピクチャタイプ判別部１６を持た
ず、フレームレートの変換を行わない装置構成も考えら
れるが、以下では説明を簡単にするため、ピクチャタイ
プ判別部１６を兼ね備えた装置構成について述べること
とする。
ず、フレームレートの変換を行わない装置構成も考えら
れるが、以下では説明を簡単にするため、ピクチャタイ
プ判別部１６を兼ね備えた装置構成について述べること
とする。
【０１０６】この画像情報変換装置には、フレーム内で
符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、
表示順序で順方向を参照して予測符号化された順方向予
測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向
及び逆方向を参照して予測符号化された双方向予測符号
化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査
のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力
される。
符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、
表示順序で順方向を参照して予測符号化された順方向予
測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向
及び逆方向を参照して予測符号化された双方向予測符号
化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査
のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力
される。
【０１０７】このＭＰＥＧ２画像圧縮情報（ビットスト
リーム）は、ピクチャタイプ判別部１６において、Ｉ／
Ｐピクチャに関するものか、Ｂピクチャに関するもので
あるかを判別され、Ｉ／Ｐピクチャのみ後続の圧縮情報
解析部１７に出力され、Ｂピクチャは破棄される。
リーム）は、ピクチャタイプ判別部１６において、Ｉ／
Ｐピクチャに関するものか、Ｂピクチャに関するもので
あるかを判別され、Ｉ／Ｐピクチャのみ後続の圧縮情報
解析部１７に出力され、Ｂピクチャは破棄される。
【０１０８】圧縮情報解析部１７において、ＭＰＥＧ２
画像情報復号化装置（Ｉ／Ｐピクチャ）１８における復
号処理に用いられる量子化スケールのフレーム全体に渡
る平均値Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報
（ビットストリーム）において、当該フレームに割り当
てられた総符号量（ビット数）Ｂは、情報バッファ２３
に格納される。
画像情報復号化装置（Ｉ／Ｐピクチャ）１８における復
号処理に用いられる量子化スケールのフレーム全体に渡
る平均値Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報
（ビットストリーム）において、当該フレームに割り当
てられた総符号量（ビット数）Ｂは、情報バッファ２３
に格納される。
【０１０９】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）１８における処理は通常のＭＰＥＧ２画像情報復
号化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットス
トリーム）を画像信号に復号するものである。ここで、
Ｂピクチャに関するデータはピクチャタイプ判別部１６
において廃棄されているので、ＭＰＥＧ２画像情報復号
化部（Ｉ／Ｐピクチャ）１８は、Ｉ／Ｐピクチャのみを
復号化出来る機能を有すればよい。
チャ）１８における処理は通常のＭＰＥＧ２画像情報復
号化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットス
トリーム）を画像信号に復号するものである。ここで、
Ｂピクチャに関するデータはピクチャタイプ判別部１６
において廃棄されているので、ＭＰＥＧ２画像情報復号
化部（Ｉ／Ｐピクチャ）１８は、Ｉ／Ｐピクチャのみを
復号化出来る機能を有すればよい。
【０１１０】ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピク
チャ）１８の出力となる画素値は、間引き部１９に入力
される。間引き部１９は、水平方向には１／２の間引き
処理を施し、垂直方向には、第一フィールド若しくは第
二フィールドのどちらか一方のデータのみを残し、もう
一方を廃棄する。このような間引きによって、入力とな
る画像情報の１／４の大きさを持つ順次走査画像を生成
する。
チャ）１８の出力となる画素値は、間引き部１９に入力
される。間引き部１９は、水平方向には１／２の間引き
処理を施し、垂直方向には、第一フィールド若しくは第
二フィールドのどちらか一方のデータのみを残し、もう
一方を廃棄する。このような間引きによって、入力とな
る画像情報の１／４の大きさを持つ順次走査画像を生成
する。
【０１１１】ところで、間引き部１９から出力された画
像をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２
０において１６×１６画素で構成されるマクロブロック
単位で符号化するためには、水平方向、垂直方向とも
に、その画素数が１６の倍数である必要が有る。間引き
部１９においては、このための画素の補填若しくは廃棄
を、間引きと同時に行う。
像をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２
０において１６×１６画素で構成されるマクロブロック
単位で符号化するためには、水平方向、垂直方向とも
に、その画素数が１６の倍数である必要が有る。間引き
部１９においては、このための画素の補填若しくは廃棄
を、間引きと同時に行う。
【０１１２】例えば、入力となるＭＰＥＧ２画像圧縮情
報（ビットストリーム）がＮＴＳＣ（National Televis
ion System Committee）の規格に準拠したもの、つまり
７２０×４８０画素、３０Ｈｚの飛び越し走査画像であ
った場合、間引き後の画枠はＳＩＦ（３６０×２４０画
素）サイズということになる。この画像に対して、間引
き部１９において、例えば水平方向の右端若しくは左端
の８ラインを廃棄して３５２×２４０画素とする。
報（ビットストリーム）がＮＴＳＣ（National Televis
ion System Committee）の規格に準拠したもの、つまり
７２０×４８０画素、３０Ｈｚの飛び越し走査画像であ
った場合、間引き後の画枠はＳＩＦ（３６０×２４０画
素）サイズということになる。この画像に対して、間引
き部１９において、例えば水平方向の右端若しくは左端
の８ラインを廃棄して３５２×２４０画素とする。
【０１１３】なお、間引き部１９における動作の変更を
行うことで、これ以外の画枠、例えば上記の例で、約１
／４×１／４の画枠であるＱＳＩＦ（１７６×１１２画
素）サイズの画像に変換することも可能である。
行うことで、これ以外の画枠、例えば上記の例で、約１
／４×１／４の画枠であるＱＳＩＦ（１７６×１１２画
素）サイズの画像に変換することも可能である。
【０１１４】更に、上述した文献１は、ＭＰＥＧ２画像
情報復号化部（Ｉ／Ｐピクチャ）１８における処理とし
て、水平方向、垂直方向それぞれについて、入力となる
ＭＰＥＧ２画像圧縮情報（ビットストリーム）内の、８
次の離散コサイン変換係数すべてを用いた復号処理を行
う画像情報変換装置について述べられているが、図１に
示した装置に関してはその限りではなく、水平方向の
み、或いは水平方向、垂直方向ともに、８次の離散コサ
イン変換係数のうちの低域成分のみを用いた復号処理を
行い、画質劣化を最小限に抑えながら、復号処理に伴う
演算量とビデオメモリ容量を削減することが可能であ
る。
情報復号化部（Ｉ／Ｐピクチャ）１８における処理とし
て、水平方向、垂直方向それぞれについて、入力となる
ＭＰＥＧ２画像圧縮情報（ビットストリーム）内の、８
次の離散コサイン変換係数すべてを用いた復号処理を行
う画像情報変換装置について述べられているが、図１に
示した装置に関してはその限りではなく、水平方向の
み、或いは水平方向、垂直方向ともに、８次の離散コサ
イン変換係数のうちの低域成分のみを用いた復号処理を
行い、画質劣化を最小限に抑えながら、復号処理に伴う
演算量とビデオメモリ容量を削減することが可能であ
る。
【０１１５】間引き部１９によって生成された順次走査
画像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
２０によってフレーム内で符号化されたＩ−ＶＯＰ及び
表示順序で順方向を参照して予測符号化されたＰ−ＶＯ
Ｐに符号化され、ＭＰＥＧ４画像圧縮情報（ビットスト
リーム）として出力される。
画像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）
２０によってフレーム内で符号化されたＩ−ＶＯＰ及び
表示順序で順方向を参照して予測符号化されたＰ−ＶＯ
Ｐに符号化され、ＭＰＥＧ４画像圧縮情報（ビットスト
リーム）として出力される。
【０１１６】尚、ＶＯＰはVideo object Planeを意味
し、ＭＰＥＧ２におけるフレームに相当するものであ
る。また、Ｉ−ＶＯＰはＩピクチャに対応するイントラ
符号化ＶＯＰ、Ｐ−ＶＯＰはＰピクチャに対応する順方
向予測符号化ＶＯＰ、Ｂ−ＶＯＰはＢピクチャに対応す
る双方向予測符号化ＶＯＰである。
し、ＭＰＥＧ２におけるフレームに相当するものであ
る。また、Ｉ−ＶＯＰはＩピクチャに対応するイントラ
符号化ＶＯＰ、Ｐ−ＶＯＰはＰピクチャに対応する順方
向予測符号化ＶＯＰ、Ｂ−ＶＯＰはＢピクチャに対応す
る双方向予測符号化ＶＯＰである。
【０１１７】ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−Ｖ
ＯＰ）２０における符号化の際には、入力となるＭＰＥ
Ｇ２画像圧縮情報（ビットストリーム）中の動きベクト
ル情報は、動きベクトル合成部２１において間引き後の
画像情報に対する動きベクトルにマッピングされ、動き
ベクトル検出部２２においては、動きベクトル合成部２
１において合成された動きベクトル値を元に高精度の動
きベクトルを検出する。
ＯＰ）２０における符号化の際には、入力となるＭＰＥ
Ｇ２画像圧縮情報（ビットストリーム）中の動きベクト
ル情報は、動きベクトル合成部２１において間引き後の
画像情報に対する動きベクトルにマッピングされ、動き
ベクトル検出部２２においては、動きベクトル合成部２
１において合成された動きベクトル値を元に高精度の動
きベクトルを検出する。
【０１１８】また、ＭＰＥＧ４画像情報符号化部（Ｉ／
Ｐ−ＶＯＰ）２０は、コンプレキシティ算出部２４から
コンプレキシティの近似値が与えられるので、この近似
値に基づいて各ＶＯＰに対する目標符号量（ターゲット
ビット）を算出し、この目標符号量（ターゲットビッ
ト）に応じて符号化する際に、ＧＯＶ構造変換部２６か
らのＧＯＶ構造に変換を行うことで、当該ＧＯＶにおい
て生じる画質劣化を低減し、符号量配分を最適化する。
Ｐ−ＶＯＰ）２０は、コンプレキシティ算出部２４から
コンプレキシティの近似値が与えられるので、この近似
値に基づいて各ＶＯＰに対する目標符号量（ターゲット
ビット）を算出し、この目標符号量（ターゲットビッ
ト）に応じて符号化する際に、ＧＯＶ構造変換部２６か
らのＧＯＶ構造に変換を行うことで、当該ＧＯＶにおい
て生じる画質劣化を低減し、符号量配分を最適化する。
【０１１９】シーンチェンジ検出部２５においては、コ
ンプレキシティ算出部２４に格納された、入力となるＭ
ＰＥＧ２画像圧縮情報（ビットストリーム）における当
該ＧＯＰ内の各フレームに対するコンプレキシティから
シーンチェンジが当該ＧＯＰに含まれているかどうかの
判断を行う。当該ＧＯＰに対するＩピクチャ及びＰピク
チャのコンプレキシティをそれぞれＸi及びＸp1，
Ｘp2，…Ｘpnとすれば、予め定められた閾値Ｘ
thresholdに対し、次の式（２７）が一つでも成り立つ
時、このＧＯＰにはシーンチェンジが含まれていると判
断する。
ンプレキシティ算出部２４に格納された、入力となるＭ
ＰＥＧ２画像圧縮情報（ビットストリーム）における当
該ＧＯＰ内の各フレームに対するコンプレキシティから
シーンチェンジが当該ＧＯＰに含まれているかどうかの
判断を行う。当該ＧＯＰに対するＩピクチャ及びＰピク
チャのコンプレキシティをそれぞれＸi及びＸp1，
Ｘp2，…Ｘpnとすれば、予め定められた閾値Ｘ
thresholdに対し、次の式（２７）が一つでも成り立つ
時、このＧＯＰにはシーンチェンジが含まれていると判
断する。
【０１２０】
【数３０】
【０１２１】図２に、シーンチェンジ検出装置２５にお
いてシーンチェンジが検出された場合の、ＧＯＶ構造変
換部２６における動作原理の一例を示す。
いてシーンチェンジが検出された場合の、ＧＯＶ構造変
換部２６における動作原理の一例を示す。
【０１２２】図２の例では、入力となるＭＰＥＧ２画像
圧縮情報（ビットストリーム）のＧＯＰ構造がｎ＝１
５；ｍ＝３の場合を想定している。すなわち、図２のＡ
に示すように、入力ＭＰＥＧ２画像圧縮情報（ビットス
トリーム）は、Ｉ0，Ｂ0，Ｂ1，Ｐ0，Ｂ2，Ｂ3，Ｐ1，
Ｂ4，Ｂ5，Ｐ2，Ｂ6，Ｂ7，Ｐ3，Ｂ8，Ｂ9からなるＧＯ
Ｐ０及びＩ1，Ｂ10，Ｂ11，Ｐ4，Ｂ12，Ｂ13，Ｐ5，Ｂ
14，Ｂ15，Ｐ6，Ｂ16，Ｂ 17，Ｐ7，Ｂ18、Ｂ19からなる
ＧＯＰ１から構成されている。
圧縮情報（ビットストリーム）のＧＯＰ構造がｎ＝１
５；ｍ＝３の場合を想定している。すなわち、図２のＡ
に示すように、入力ＭＰＥＧ２画像圧縮情報（ビットス
トリーム）は、Ｉ0，Ｂ0，Ｂ1，Ｐ0，Ｂ2，Ｂ3，Ｐ1，
Ｂ4，Ｂ5，Ｐ2，Ｂ6，Ｂ7，Ｐ3，Ｂ8，Ｂ9からなるＧＯ
Ｐ０及びＩ1，Ｂ10，Ｂ11，Ｐ4，Ｂ12，Ｂ13，Ｐ5，Ｂ
14，Ｂ15，Ｐ6，Ｂ16，Ｂ 17，Ｐ7，Ｂ18、Ｂ19からなる
ＧＯＰ１から構成されている。
【０１２３】この時、ＧＯＶ構造変換前には、出力とな
るＭＰＥＧ４画像圧縮情報（ビットストリーム）におけ
るＧＯＶ構造がｎ＝５；ｍ＝１となる。すなわち、図２
のＢに示すように、変換前の出力ＭＰＥＧ４画像圧縮情
報（ビットストリーム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3
からなるＧＯＰ０及びＩ1，Ｐ4，Ｐ5，Ｐ6，Ｐ7からな
るＧＯＰ１から構成されている。
るＭＰＥＧ４画像圧縮情報（ビットストリーム）におけ
るＧＯＶ構造がｎ＝５；ｍ＝１となる。すなわち、図２
のＢに示すように、変換前の出力ＭＰＥＧ４画像圧縮情
報（ビットストリーム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3
からなるＧＯＰ０及びＩ1，Ｐ4，Ｐ5，Ｐ6，Ｐ7からな
るＧＯＰ１から構成されている。
【０１２４】ここで、式（２７）により、Ｐ1にシーン
チェンジが検出されたとする。この時、変換前のＧＯＶ
０にはシーンチェンジが含まれるとして、ＧＯＶ１の先
頭に存在するＩ−ＶＯＰであるＩ1はＰ−ＶＯＰである
Ｐ4へ変換され、ＧＯＶ０及びＧＯＶ１は統合されて一
つのＧＯＶとなる。すなわち、図２のＣに示すように変
換後の出力ＭＰＥＧ４画像圧縮情報（ビットストリー
ム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3，Ｐ4，Ｐ5，Ｐ6，Ｐ
7，Ｐ8からなるＧＯＶ０から構成されている。なお、図
２のＣにおけるＰ4，Ｐ5，Ｐ6，…は、図２のＢにおけ
るＩ1，Ｐ4，Ｐ5，…の位置に対応している。
チェンジが検出されたとする。この時、変換前のＧＯＶ
０にはシーンチェンジが含まれるとして、ＧＯＶ１の先
頭に存在するＩ−ＶＯＰであるＩ1はＰ−ＶＯＰである
Ｐ4へ変換され、ＧＯＶ０及びＧＯＶ１は統合されて一
つのＧＯＶとなる。すなわち、図２のＣに示すように変
換後の出力ＭＰＥＧ４画像圧縮情報（ビットストリー
ム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3，Ｐ4，Ｐ5，Ｐ6，Ｐ
7，Ｐ8からなるＧＯＶ０から構成されている。なお、図
２のＣにおけるＰ4，Ｐ5，Ｐ6，…は、図２のＢにおけ
るＩ1，Ｐ4，Ｐ5，…の位置に対応している。
【０１２５】図３に、シーンチェンジ検出部２５及びＧ
ＯＶ構造変換部２６における一連の動作フローを示す。
この動作を実現するためには、圧縮情報解析部１７にお
いて２ＧＯＶ分の遅延を実現する必要がある。
ＯＶ構造変換部２６における一連の動作フローを示す。
この動作を実現するためには、圧縮情報解析部１７にお
いて２ＧＯＶ分の遅延を実現する必要がある。
【０１２６】最初のステップＳ３１において、シーンチ
ェンジ検出部２５は、コンプレキシティ算出部２４から
当該ＧＯＶにおける各フレームに対するコンプレキシテ
ィ情報を読み出す。
ェンジ検出部２５は、コンプレキシティ算出部２４から
当該ＧＯＶにおける各フレームに対するコンプレキシテ
ィ情報を読み出す。
【０１２７】ステップＳ３２において、シーンチェンジ
検出部２５は、当該ＧＯＶにシーンチェンジが含まれる
かどうかを調べ、その結果に応じて処理の手順を分岐さ
せる。
検出部２５は、当該ＧＯＶにシーンチェンジが含まれる
かどうかを調べ、その結果に応じて処理の手順を分岐さ
せる。
【０１２８】すなわち、当該ＧＯＶにシーンチェンジが
含まれている場合にはステップＳ３３に処理を進める
が、当該ＧＯＶにシーンチェンジが含まれていない場合
にはステップＳ３４に処理を進める。
含まれている場合にはステップＳ３３に処理を進める
が、当該ＧＯＶにシーンチェンジが含まれていない場合
にはステップＳ３４に処理を進める。
【０１２９】ステップＳ３３において、ＧＯＶ構造変換
部２６は、シーンチェンジ検出部２５で検出したシーン
チェンジに応じてＧＯＶ構造を変換する。
部２６は、シーンチェンジ検出部２５で検出したシーン
チェンジに応じてＧＯＶ構造を変換する。
【０１３０】ステップＳ３４においては、ＭＰＥＧ４画
像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０はＭＰＥＧ４画
像圧縮情報（ビットストリーム）への符号化を行う。こ
こで、ステップＳ３３でＧＯＶ構造を変換した場合に
は、これに応じた符号化を行う。
像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０はＭＰＥＧ４画
像圧縮情報（ビットストリーム）への符号化を行う。こ
こで、ステップＳ３３でＧＯＶ構造を変換した場合に
は、これに応じた符号化を行う。
【０１３１】このような一連の処理により、たとえ入力
となるＭＰＥＧ２画像圧縮情報（ビットストリーム）が
固定ＧＯＶ構造であっても、出力となるＭＰＥＧ４画像
圧縮情報（ビットストリーム）が可変となりうる。この
ことを、図４を用いて説明する。図４で、変換前の固定
ＧＯＶ構造において、ＧＯＶ１及びＧＯＶ６にシーンチ
ェンジのあることが、シーンチェンジ検出装置２５によ
って検出されたとする。すなわち、図４のＡにおいて、
変換前の固定ＧＯＶ構造ＧＯＶ１，ＧＯＰＶ２，ＧＯＶ
３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６，ＧＯＶ７，ＧＯＶ
８の内、シーンチェンジ検出部３５によりＧＯＶ１及び
ＧＯＶ６にシーンチェンジが検出されたものとする。
となるＭＰＥＧ２画像圧縮情報（ビットストリーム）が
固定ＧＯＶ構造であっても、出力となるＭＰＥＧ４画像
圧縮情報（ビットストリーム）が可変となりうる。この
ことを、図４を用いて説明する。図４で、変換前の固定
ＧＯＶ構造において、ＧＯＶ１及びＧＯＶ６にシーンチ
ェンジのあることが、シーンチェンジ検出装置２５によ
って検出されたとする。すなわち、図４のＡにおいて、
変換前の固定ＧＯＶ構造ＧＯＶ１，ＧＯＰＶ２，ＧＯＶ
３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６，ＧＯＶ７，ＧＯＶ
８の内、シーンチェンジ検出部３５によりＧＯＶ１及び
ＧＯＶ６にシーンチェンジが検出されたものとする。
【０１３２】この場合、ＧＯＶ１とＧＯＶ２、及びＧＯ
Ｖ６とＧＯＶ７をそれぞれ統合することにより、図４の
Ｂに示すように、ＧＯＶ０，ＧＯＶ１，ＧＯＶ２、ＧＯ
Ｖ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６のようなＧＯＶ構
造に変換される。変換後において、ＧＯＶ１及びＧＯＶ
５は他のＧＯＶに比べて２倍の長さを持つことになる。
すなわち、このＭＰＥＧ４画像圧縮情報（ビットストリ
ーム）は可変ＧＯＶ構造となる。
Ｖ６とＧＯＶ７をそれぞれ統合することにより、図４の
Ｂに示すように、ＧＯＶ０，ＧＯＶ１，ＧＯＶ２、ＧＯ
Ｖ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６のようなＧＯＶ構
造に変換される。変換後において、ＧＯＶ１及びＧＯＶ
５は他のＧＯＶに比べて２倍の長さを持つことになる。
すなわち、このＭＰＥＧ４画像圧縮情報（ビットストリ
ーム）は可変ＧＯＶ構造となる。
【０１３３】ここで、図４のＢに示す変換後のＧＯＶ
２，ＧＯＶ３，ＧＯＶ４，ＧＯＶ６は、図４のＡに示す
変換前のＧＯＶ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ８の位
置にそれぞれ対応している。
２，ＧＯＶ３，ＧＯＶ４，ＧＯＶ６は、図４のＡに示す
変換前のＧＯＶ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ８の位
置にそれぞれ対応している。
【０１３４】尚、Ｉ−ＶＯＰをＰ−ＶＯＰに変換するた
めには、当該フレームに対する動きベクトル情報が必要
となる。このため、当該フレームに対する動きベクトル
は全て０とするか、或いはまた、動きベクトル検出装置
２２を用いて動きベクトルの検出を行っても良いが、前
後のＰ−ＶＯＰにおける動きベクトル情報を利用するこ
とも考えられる。また、式（２５）に基づいて、当該Ｖ
ＯＰに対する目標符号量（ターゲットビット）を算出す
るには、Ｉ−ＶＯＰからＰ−ＶＯＰに変換されたＶＯＰ
に対するコンプレキシティを推定する必要がある。この
ための処理の一例を図５に示す。図５には、Ｉ0，Ｐ0，
Ｐ1，Ｐ2，Ｐ3からなるＧＯＶ０及びＩ1，Ｐ4，Ｐ5，Ｐ
6，Ｐ7からなるＧＯＶ１が例示されている。
めには、当該フレームに対する動きベクトル情報が必要
となる。このため、当該フレームに対する動きベクトル
は全て０とするか、或いはまた、動きベクトル検出装置
２２を用いて動きベクトルの検出を行っても良いが、前
後のＰ−ＶＯＰにおける動きベクトル情報を利用するこ
とも考えられる。また、式（２５）に基づいて、当該Ｖ
ＯＰに対する目標符号量（ターゲットビット）を算出す
るには、Ｉ−ＶＯＰからＰ−ＶＯＰに変換されたＶＯＰ
に対するコンプレキシティを推定する必要がある。この
ための処理の一例を図５に示す。図５には、Ｉ0，Ｐ0，
Ｐ1，Ｐ2，Ｐ3からなるＧＯＶ０及びＩ1，Ｐ4，Ｐ5，Ｐ
6，Ｐ7からなるＧＯＶ１が例示されている。
【０１３５】図５のＡは、ＧＯＶ内において、最後のＰ
−ＶＯＰ以外のＰ−ＶＯＰでシーンチェンジが検出され
た場合の例である。すなわち、ここではＧＯＶのＰ1に
おいてシーンチェンジが検出されたものとする。この場
合のＩ1に対する動きベクトル情報としては、Ｐ3若しく
はＰ4で用いられた動きベクトル情報をそのまま用い
る、或いは、Ｐ3若しくはＰ4で用いられた動きベクトル
情報を元に動きベクトル検出装置２２を用いて動きベク
トル情報の高精度化を行う。或いはまた、各マクロブロ
ックに対して、Ｐ3若しくはＰ4で用いられた動きベクト
ル情報を用いて予測を行った場合と、動きベクトルを０
として予測を行った場合とを比較して、符号化効率の高
い方を選択するといったことが考えられる。
−ＶＯＰ以外のＰ−ＶＯＰでシーンチェンジが検出され
た場合の例である。すなわち、ここではＧＯＶのＰ1に
おいてシーンチェンジが検出されたものとする。この場
合のＩ1に対する動きベクトル情報としては、Ｐ3若しく
はＰ4で用いられた動きベクトル情報をそのまま用い
る、或いは、Ｐ3若しくはＰ4で用いられた動きベクトル
情報を元に動きベクトル検出装置２２を用いて動きベク
トル情報の高精度化を行う。或いはまた、各マクロブロ
ックに対して、Ｐ3若しくはＰ4で用いられた動きベクト
ル情報を用いて予測を行った場合と、動きベクトルを０
として予測を行った場合とを比較して、符号化効率の高
い方を選択するといったことが考えられる。
【０１３６】コンプレキシティに関しては、直前のＰ−
ＶＯＰであるＰ3、若しくは直後のＰ−ＶＯＰであるＰ4
で用いられたコンプレキシティＸp3若しくはＸp4をその
まま使つても良い。或いは、次の式（２８）で与えられ
る両者の平均値を用いても良い。
ＶＯＰであるＰ3、若しくは直後のＰ−ＶＯＰであるＰ4
で用いられたコンプレキシティＸp3若しくはＸp4をその
まま使つても良い。或いは、次の式（２８）で与えられ
る両者の平均値を用いても良い。
【０１３７】
【数３１】
【０１３８】或いは、次の式（２９）で与えられるシー
ンチェンジ後の全てのＰ−ＶＯＰに対する平均値を用い
ても良い。
ンチェンジ後の全てのＰ−ＶＯＰに対する平均値を用い
ても良い。
【０１３９】
【数３２】
【０１４０】元のＩ−ＶＯＰのコンプレキシティＸi1及
びＸpk（ｋ＝２，…，７）から当該ＶＯＰに対するコン
プレキシティの推測値を算出しても良い。
びＸpk（ｋ＝２，…，７）から当該ＶＯＰに対するコン
プレキシティの推測値を算出しても良い。
【０１４１】図５のＢは、ＧＯＶ内において、最後のＰ
−ＶＯＰでシーンチェンジが検出された場合の例であ
る。すなわち、ここではＧＯＶ０のＰ3においてシーン
チェンジが検出されたものとする。この時、直前のＰ−
ＶＯＰであるＰ3における動きベクトル情報は、Ｉ1をＰ
−ＶＯＰに変換する場合の動きベクトル情報との相関が
低いと考えられる。そこで、直後のＰ−ＶＯＰであるＰ
4における動きベクトル情報をそのまま用いる。或い
は、Ｐ4で用いられた動きベクトル情報を元に動きベク
トル検出装置２２を用いて動きベクトル情報の高精度化
を行う。或いはまた、各マクロブロックに対して、Ｐ4
で用いられた動きベクトル情報を用いて予測を行った場
合と、動きベクトルを０として予測を行った場合とを比
較して、符号化効率の高い方を選択するといったことが
考えられる。
−ＶＯＰでシーンチェンジが検出された場合の例であ
る。すなわち、ここではＧＯＶ０のＰ3においてシーン
チェンジが検出されたものとする。この時、直前のＰ−
ＶＯＰであるＰ3における動きベクトル情報は、Ｉ1をＰ
−ＶＯＰに変換する場合の動きベクトル情報との相関が
低いと考えられる。そこで、直後のＰ−ＶＯＰであるＰ
4における動きベクトル情報をそのまま用いる。或い
は、Ｐ4で用いられた動きベクトル情報を元に動きベク
トル検出装置２２を用いて動きベクトル情報の高精度化
を行う。或いはまた、各マクロブロックに対して、Ｐ4
で用いられた動きベクトル情報を用いて予測を行った場
合と、動きベクトルを０として予測を行った場合とを比
較して、符号化効率の高い方を選択するといったことが
考えられる。
【０１４２】コンプレキシティに関しても、Ｐ3におけ
るコンプレキシティＸp3と、Ｉ1をＰ−ＶＯＰに変換し
た時のコンプレキシティＸとの間の相関は低いと考えら
れる。そこで、Ｐ4におけるコンプレキシティＸp4の値
をそのまま用いるか、或いは次の式（３０）で与えられ
るシーンチェンジ後の全てのＰ−ＶＯＰに対する平均値
を用いる。
るコンプレキシティＸp3と、Ｉ1をＰ−ＶＯＰに変換し
た時のコンプレキシティＸとの間の相関は低いと考えら
れる。そこで、Ｐ4におけるコンプレキシティＸp4の値
をそのまま用いるか、或いは次の式（３０）で与えられ
るシーンチェンジ後の全てのＰ−ＶＯＰに対する平均値
を用いる。
【０１４３】
【数３３】
【０１４４】或いは、元のＩ−ＶＯＰのコンプレキシテ
ィＸi1及びＸpk（ｋ＝４，…，７）から当該ＶＯＰに対
するコンプレキシティの推測値を算出しても良い。
ィＸi1及びＸpk（ｋ＝４，…，７）から当該ＶＯＰに対
するコンプレキシティの推測値を算出しても良い。
【０１４５】次に、本発明を適用した第２の実施の形態
の画像情報変換装置について、図６を参照して説明す
る。
の画像情報変換装置について、図６を参照して説明す
る。
【０１４６】この画像情報変換装置は、ピクチャタイプ
判別部２７と、圧縮情報解析部２８と、ＭＰＥＧ２画像
情報復号化部（Ｉ／Ｐピクチャ）２９と、間引き部３０
と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）３
１と、動きベクトル合成部３２と、動きベクトル検出部
３３と、情報バッファ３４と、コンプレキシティ算出部
３５と、シーンチェンジ検出部３６と、ＧＯＶ構造変換
部３７とから構成されている。
判別部２７と、圧縮情報解析部２８と、ＭＰＥＧ２画像
情報復号化部（Ｉ／Ｐピクチャ）２９と、間引き部３０
と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）３
１と、動きベクトル合成部３２と、動きベクトル検出部
３３と、情報バッファ３４と、コンプレキシティ算出部
３５と、シーンチェンジ検出部３６と、ＧＯＶ構造変換
部３７とから構成されている。
【０１４７】図６に示した画像情報変換装置と、図１に
示した画像情報変換装置の違いは、図１に示した画像情
報変換装置においては、コンプレキシティ算出装置３４
において算出された、入力となる画像圧縮情報（ビット
ストリーム）における、各フレームに対するコンプレキ
シティを元にシーンチェンジ検出が行われるのに対し、
図６に示した画像圧縮情報解析装置においては、シーン
チェンジ検出部３６は、圧縮情報解析装置２８において
抽出される情報を元にシーンチェンジ検出を行う点にあ
る。例えば、圧縮情報解析装置２８において、Ｐピクチ
ャ内のイントラマクロブロックの個数Ｎintraを算出
し、これが予め定められた閥値Ｎthresholdに対して、
次の式（３１）で与えられる関係が成り立つ時、シーン
チェンジが検出されたとしてその後の処理を行う。
示した画像情報変換装置の違いは、図１に示した画像情
報変換装置においては、コンプレキシティ算出装置３４
において算出された、入力となる画像圧縮情報（ビット
ストリーム）における、各フレームに対するコンプレキ
シティを元にシーンチェンジ検出が行われるのに対し、
図６に示した画像圧縮情報解析装置においては、シーン
チェンジ検出部３６は、圧縮情報解析装置２８において
抽出される情報を元にシーンチェンジ検出を行う点にあ
る。例えば、圧縮情報解析装置２８において、Ｐピクチ
ャ内のイントラマクロブロックの個数Ｎintraを算出
し、これが予め定められた閥値Ｎthresholdに対して、
次の式（３１）で与えられる関係が成り立つ時、シーン
チェンジが検出されたとしてその後の処理を行う。
【０１４８】
【数３４】
【０１４９】次に、本発明を適用した第３の実施の形態
の画像情報変換装置について、図７を参照して説明す
る。
の画像情報変換装置について、図７を参照して説明す
る。
【０１５０】この画像情報変換装置は、ピクチャタイプ
判別部３８と、圧縮情報解析部３９と、ＭＰＥＧ２画像
情報復号化部（Ｉ／Ｐピクチャ）４０と、間引き部４１
と、フレームバッファ４２と、ＭＰＥＧ４画像情報符号
化部（Ｉ／Ｐ−ＶＯＰ）４３と、動きベクトル合成部４
４と、動きベクトル検出部４５と、情報バッファ４６
と、コンプレキシティ算出部４７と、シーンチェンジ検
出部４８と、ＧＯＶ構造変換部４９とから構成されてい
る。
判別部３８と、圧縮情報解析部３９と、ＭＰＥＧ２画像
情報復号化部（Ｉ／Ｐピクチャ）４０と、間引き部４１
と、フレームバッファ４２と、ＭＰＥＧ４画像情報符号
化部（Ｉ／Ｐ−ＶＯＰ）４３と、動きベクトル合成部４
４と、動きベクトル検出部４５と、情報バッファ４６
と、コンプレキシティ算出部４７と、シーンチェンジ検
出部４８と、ＧＯＶ構造変換部４９とから構成されてい
る。
【０１５１】図７に示した画像情報変換装置と、図１に
示した画像情報変換装置の違いは、図１に示した画像情
報変換装置においては、コンプレキシティ算出装置３４
において算出された、入力となる画像圧縮情報（ビット
ストリーム）における、各フレームに対するコンプレキ
シティを元にシーンチェンジ検出が行われるのに対し、
図７に示した画像情報変換装置においては、シーンチェ
ンジ検出部４８によりフレームバッファ４２に格納され
た画像情報を元にシーンチェンジ検出が行われる。すな
わち、例えば、ベースバンドにおける１フレームの特徴
量（例えば画素の平均値、分散値等）αを算出し、１フ
レーム前の特微量であるαprev、及び予め定められた閥
値αthresholdに対して、式（３２）で与えられる関係
が成り立つ時、シーンチェンジが検出されたとしてその
後の処理を行う。
示した画像情報変換装置の違いは、図１に示した画像情
報変換装置においては、コンプレキシティ算出装置３４
において算出された、入力となる画像圧縮情報（ビット
ストリーム）における、各フレームに対するコンプレキ
シティを元にシーンチェンジ検出が行われるのに対し、
図７に示した画像情報変換装置においては、シーンチェ
ンジ検出部４８によりフレームバッファ４２に格納され
た画像情報を元にシーンチェンジ検出が行われる。すな
わち、例えば、ベースバンドにおける１フレームの特徴
量（例えば画素の平均値、分散値等）αを算出し、１フ
レーム前の特微量であるαprev、及び予め定められた閥
値αthresholdに対して、式（３２）で与えられる関係
が成り立つ時、シーンチェンジが検出されたとしてその
後の処理を行う。
【０１５２】
【数３５】
【０１５３】以上、入力としてＭＰＥＧ２画像圧縮情報
（ビットストリーム）を、出力としてＭＰＥＧ４画像圧
縮情報（ビットストリーム）を対象としてきたが、入
力、出力ともこれに限らず、例えばＭＰＥＧ−１やＨ．
２６３などの画像圧縮情報（ビットストリーム）でも良
い。
（ビットストリーム）を、出力としてＭＰＥＧ４画像圧
縮情報（ビットストリーム）を対象としてきたが、入
力、出力ともこれに限らず、例えばＭＰＥＧ−１やＨ．
２６３などの画像圧縮情報（ビットストリーム）でも良
い。
【０１５４】
【発明の効果】以上述べてきた様に、本発明は、飛び越
し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）
を入力とし、入力となるＭＰＥＧ２画像圧縮情報（ビッ
トストリーム）における各フレームに対するコンプレキ
シティを元にしてＭＰＥＧ４画像情報符号化部で符号量
制御を行う際、シーンチェンジが検出されたＧＯＶに対
しては、直後のＧＯＶにおける最初のＩ−ＶＯＰをＰ−
ＶＯＰに変換することでＧＯＶ構造の変換を行うことで
当該ＧＯＶにおける画質劣化を低減し、各フレームに対
する符号量割当が画像に対して最適化された状態で順次
走査のＭＰＥＧ４画像圧縮情報（ビットストリーム）に
変換して出力する手段を提供するものである。
し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）
を入力とし、入力となるＭＰＥＧ２画像圧縮情報（ビッ
トストリーム）における各フレームに対するコンプレキ
シティを元にしてＭＰＥＧ４画像情報符号化部で符号量
制御を行う際、シーンチェンジが検出されたＧＯＶに対
しては、直後のＧＯＶにおける最初のＩ−ＶＯＰをＰ−
ＶＯＰに変換することでＧＯＶ構造の変換を行うことで
当該ＧＯＶにおける画質劣化を低減し、各フレームに対
する符号量割当が画像に対して最適化された状態で順次
走査のＭＰＥＧ４画像圧縮情報（ビットストリーム）に
変換して出力する手段を提供するものである。
【図１】第１の実施の形態の画像情報変換装置の構成を
示すブロック図である。
示すブロック図である。
【図２】シーンチェンジ検出部及びＧＯＶ構造変換部に
おける動作原理を説明する図である。
おける動作原理を説明する図である。
【図３】シーンチェンジ検出部及びＧＯＶ構造変換部に
おける一連の動作を示すフローチャートである。
おける一連の動作を示すフローチャートである。
【図４】固定ＧＯＶ構造から可変ＯＰＶ構造の変換を示
す図である。
す図である。
【図５】図６において、Ｉ−ＶＯＰをＰ―ＶＯＰに変換
する処理を示す図である。
する処理を示す図である。
【図６】第２の実施の形態の画像情報変換装置の構成を
示すブロック図である。
示すブロック図である。
【図７】第３の実施の形態の画像情報変換装置の構成を
示すブロック図である。
示すブロック図である。
【図８】従来の画像情報変換装置の構成を示すブロック
図である。
図である。
【図９】ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅ１ ５（ＩＳ
Ｏ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１ Ｎ０４０
０）で述べられている符号量制御方式の動作原理を示す
フローチャートである。
Ｏ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１ Ｎ０４０
０）で述べられている符号量制御方式の動作原理を示す
フローチャートである。
【図１０】本願出願人が提案した画像情報変換装置の構
成を示す図である。
成を示す図である。
【図１１】図１０の画像情報変換装置における符号量制
御の動作を示すフローチャートである。
御の動作を示すフローチャートである。
【図１２】ＣＣＩＲテストシーケンスの一つである“Ｔ
ａｂｌｅ Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によ
って、ＭＰＥＧ４画像圧縮情報（ビットストリーム）に
変換した時のｐＳＮＲを示した図である。
ａｂｌｅ Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によ
って、ＭＰＥＧ４画像圧縮情報（ビットストリーム）に
変換した時のｐＳＮＲを示した図である。
１６ ピクチャタイプ判別部、１７ 圧縮情報解析部、
１８ ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）、１９ 間引き部、２０ ＭＰＥＧ４画像情報符号
化部（Ｉ／Ｐ−ＶＯＰ）、２１ 動きベクトル合成部、
２２ 動きベクトル検出部、２３ 情報バッファ、２４
コンプレキシティ算出部、２５ シーンチェンジ検出
部、２６ ＧＯＶ構造変換部
１８ ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチ
ャ）、１９ 間引き部、２０ ＭＰＥＧ４画像情報符号
化部（Ｉ／Ｐ−ＶＯＰ）、２１ 動きベクトル合成部、
２２ 動きベクトル検出部、２３ 情報バッファ、２４
コンプレキシティ算出部、２５ シーンチェンジ検出
部、２６ ＧＯＶ構造変換部
───────────────────────────────────────────────────── フロントページの続き (72)発明者 高橋 邦明 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 鈴木 輝彦 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 矢ケ崎 陽一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5C059 LA07 LB05 MA00 NN11 NN19 NN43 PP05 PP06 PP07 RC24 SS02 SS08 SS11 SS13 TA06 TA07 TA25 TA46 TA57 TB03 TC02 TC10 TC14 TC38 TD03 TD04 UA02 UA05 UA34 5C063 AB03 AB07 BA04 BA12 CA34 CA36 DA07
Claims (32)
- 【請求項１】 第１の圧縮符号化方式で圧縮された飛び
越し走査の入力画像圧縮情報を、第２の圧縮符号化方式
で圧縮された順次走査の出力画像圧縮情報に変換する画
像情報変換装置において、 上記入力画像圧縮情報及び上記出力画像圧縮情報は複数
の符号化画像からなる画像群を単位として構成され、 上記出力画像圧縮情報におけるシーンチェンジを検出す
るシーンチェンジ検出手段と、 上記入力画像圧縮情報の各フレームのコンプレキシティ
を検出するコンプレキシティ検出手段と、 上記コンプレキシティ検出手段で検出したコンプレキシ
ティに基づいて上記出力画像圧縮情報に画像情報の符号
量を配分する際に、上記シーンチェンジ検出手段で検出
したシーンチェンジに応じて上記出力画像圧縮情報にお
ける画像群の構造を変換する変換手段とを有することを
特徴とする画像情報変換装置。 - 【請求項２】 上記入力画像圧縮情報及び上記出力画像
圧縮情報の画像群は、フレーム内で符号化されたイント
ラ符号化画像、表示順序で順方向を参照して符号化され
た順方向予測符号化画像及び表示順序で順方向及び逆方
向を参照して符号化された双方向予測符号化画像を含
み、 上記入力画像圧縮情報の内、イントラ符号化画像及び順
方向予測符号化画像を通過させるが、双方向予測符号化
画像を破棄する判別手段を有することを特徴とする請求
項１記載の画像情報変換装置。 - 【請求項３】 上記入力画像圧縮情報及び上記出力画像
圧縮情報の画像群は、フレーム内で符号化されたイント
ラ符号化画像、表示順序で順方向を参照して符号化され
た順方向予測符号化画像及び表示順序で順方向及び逆方
向を参照して符号化された双方向予測符号化画像を含
み、 上記変換手段は、上記出力画像圧縮情報において、シー
ンチェンジを含む画像群の直後の画像群の先頭のイント
ラ符号化画像を順方向予測符号化画像に変換することを
特徴とする請求項１記載の画像情報変換装置。 - 【請求項４】 上記変換手段は、上記出力画像圧縮情報
の２画像群に相当する時間に亘って画像情報を遅延させ
る遅延手段を有することを特徴とする請求項３記載の画
像情報変換装置。 - 【請求項５】 上記シーンチェンジ検出手段は、上記コ
ンプレキシティ検出手段で検出した上記入力画像圧縮情
報の各フレームに対するコンプレキシティを利用してシ
ーンチェンジを検出することを特徴とする請求項１記載
の画像情報変換装置。 - 【請求項６】 上記シーンチェンジ検出手段は、次の式
が成立すると順方向予測符号化画像におけるシーンチェ
ンジを検出したと判断することを特徴とする請求項５記
載の画像情報変換装置。 【数１】 ただし、順方向予測符号化画像に対するコンプレキシテ
ィをＸp、順方向予測符号化画像を含む画像群の先頭の
イントラ符号化画像に対するコンプレキシティをＸ
iと、予め設定された閾値をＸthresholdとする。 - 【請求項７】 上記シーンチェンジ検出手段は、上記入
力画像圧縮情報を復号する際に、この入力画像圧縮情報
を解析して得られた情報に基づいてシーンチェンジを検
出することを特徴とする請求項１記載の画像情報変換装
置。 - 【請求項８】 上記シーンチェンジ検出手段は、次の式
が成立すると順方向予測符号化画像におけるシーンチェ
ンジを検出したと判断することを特徴とする請求項７記
載の画像情報変換装置。 【数２】 ただし、上記出力画像圧縮情報の各画像を構成する画素
ブロックについて、フレーム内で符号化された画素ブロ
ックの枚数をＮintraと、予め設定された閾値をＸ
thresholdとする。 - 【請求項９】 １フレームの画像情報を格納するフレー
ムバッファを有し、上記シーンチェンジ検出手段は、上
記フレームバッファに格納された画像情報からシーンチ
ェンジを検出することを特徴とする請求項１記載の画像
情報変換装置。 - 【請求項１０】 上記シーンチェンジ検出手段は、次の
式が成立すると順方向予測符号化画像におけるシーンチ
ェンジを検出したと判断することを特徴とする請求項９
記載の画像情報変換装置。 【数３】 ただし、画像群に対する特徴量をαと、直前の画像群に
対する特徴量をαprevと、予め設定された閾値をα
thresholdとする。 - 【請求項１１】 上記特徴量は、画素値の平均値又は分
散値であることを特徴とする請求項１０記載の画像情報
変換装置。 - 【請求項１２】 上記イントラ符号化画像を順方向予測
符号化画像に変換する際の動きベクトル情報を検出する
動きベクトル検出手段を有することを特徴とする請求項
４記載の画像情報変換装置。 - 【請求項１３】 上記イントラ符号化画像を順方向予測
符号化画像に変換する際の動きベクトル情報を、全ての
動きベクトルを０として予測することを特徴とする請求
項４記載の画像情報変換装置。 - 【請求項１４】 上記イントラ符号化画像を順方向予測
符号化画像に変換する際の動きベクトル情報を、当該イ
ントラ符号化画像の前後の順方向予測符号化画像におけ
る動きベクトル情報を利用して求めることを特徴とする
請求項４記載の画像情報変換装置。 - 【請求項１５】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像におけるシーンチェンジが検
出された際に、上記イントラ符号化画像の直前又は直後
の順方向予測符号化画像における動きベクトル情報を、
上記イントラ符号化画像を順方向予測符号化画像に変換
する際の動きベクトル情報として用いることを特徴とす
る請求項１４記載の画像情報変換装置。 - 【請求項１６】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像におけるシーンチェンジが検
出された際に、上記イントラ符号化画像の直前又は直後
の順方向予測符号化画像における動きベクトル情報に基
づいて動きベクトル情報を求め、上記イントラ符号化画
像を順方向予測符号化画像に変換する際の動きベクトル
情報として用いることを特徴とする請求項１４記載の画
像情報変換装置。 - 【請求項１７】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像におけるシーンチェンジが検
出された際に、複数の画素で構成される各画素ブロック
に対して、上記イントラ符号化画像の直前又は直後の順
方向予測符号化画像における動きベクトル情報と、動き
ベクトルを０とした場合のうち、符号化効率の良いもの
を、上記イントラ符号化画像を順方向予測符号化画像に
変換する際の動きベクトル情報として用いることを特徴
とする請求項１４記載の画像情報変換装置。 - 【請求項１８】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像に
おけるシーンチェンジが検出された際に、上記イントラ
符号化画像の直後の順方向予測符号化画像における動き
ベクトル情報を求め、上記イントラ符号化画像を順方向
予測符号化画像に変換する際の動きベクトル情報として
用いることを特徴とする請求項１４記載の画像情報変換
装置。 - 【請求項１９】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像に
おいてシーンチェンジが検出された際に、上記イントラ
符号化画像の直後の順方向予測符号化画像における動き
ベクトル情報に基づいて動きベクトル情報を求め、上記
イントラ符号化画像を順方向予測符号化画像に変換する
際の動きベクトル情報として用いることを特徴とする請
求項１４記載の画像情報変換装置。 - 【請求項２０】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像に
おけるシーンチェンジが検出された際に、複数の画素で
構成される各画素ブロックに対して、上記イントラ符号
化画像の直後の予測符号化画像における動きベクトル情
報と、動きベクトルを０としたもののうち、符号化効率
の良いものを、上記イントラ符号化画像を順方向予測符
号化画像に変換する際の動きベクトル情報として用いる
ことを特徴とする請求項１４記載の画像情報変換装置。 - 【請求項２１】 上記出力画像圧縮情報を構成する画像
群において、イントラ符号化画像を順方向予測符号化画
像に変換する際のコンプレキシティを、上記イントラ符
号化画像の前後の順方向予測符号化画像におけるコンプ
レキシティを利用して求めることを特徴とする請求項１
４記載の画像情報変換装置。 - 【請求項２２】 上記出力画像圧縮情報を構成する画像
群において、変換後の画像群を構成する画像で、変換前
に順方向予測符号化画像であった、シーンチェンジ後の
全ての画像におけるコンプレキシティの平均値を、上記
イントラ符号化画像を順方向予測符号化画像に変換する
際のコンプレキシティとして用いることを特徴とする請
求項２１記載の画像情報変換装置。 - 【請求項２３】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像におけるシーンチェンジが検
出された際に、上記イントラ符号化画像の直前又は直後
の順方向予測符号化画像におけるコンプレキシティを、
上記イントラ符号化画像を順方向予測符号化画像に変換
する際のコンプレキシティとして用いることを特徴とす
る請求項２１記載の画像情報変換装置。 - 【請求項２４】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像においてシーンチェンジが検
出された際に、上記イントラ符号化画像の直前及び直後
の順方向予測符号化画像におけるコンプレキシティの平
均値を、上記イントラ符号化画像を順方向予測符号化画
像に変換する際のコンプレキシティとして用いることを
特徴とする請求項２１記載の画像情報変換装置。 - 【請求項２５】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像においてシーンチェンジが検
出された際に、上記イントラ符号化画像の変換前のコン
プレキシティ、及び前後の順方向予測符号化画像におけ
るコンプレキシティから推定された値を、上記イントラ
符号化画像を順方向予測符号化画像に変換する際のコン
プレキシティとして用いることを特徴とする請求項２１
記載の画像情報変換装置。 - 【請求項２６】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像においてシーンチェンジが検
出された際に、上記イントラ符号化画像の直後の順方向
予測符号化画像におけるコンプレキシティを、上記イン
トラ符号化画像を順方向予測符号化画像に変換する際の
コンプレキシティとして用いることを特徴とする請求項
２１記載の画像情報装置。 - 【請求項２７】 上記出力画像圧縮情報を構成する画像
群において、上記シーンチェンジ検出手段によりイント
ラ符号化画像の直前に位置する順方向予測符号化画像以
外の順方向予測符号化画像においてシーンチェンジが検
出された際に、上記イントラ符号化画像の変換前のコン
プレキシティ、及び後続の順方向予測符号化画像におけ
るコンプレキシティから推定された値を、上記イントラ
符号化画像を順方向予測符号化画像に変換する際のコン
プレキシティとして用いることを特徴とする請求項２１
記載の画像情報変換装置。 - 【請求項２８】 第１の圧縮符号化方式で圧縮された飛
び越し走査の入力画像圧縮情報を、第２の圧縮符号化方
式で圧縮された順次走査の出力画像圧縮情報に変換する
画像情報変換方法において、 上記入力画像圧縮情報及び上記出力画像圧縮情報は複数
の符号化画像からなる画像群を単位として構成され、 上記出力画像圧縮情報におけるシーンチェンジを検出
し、 上記入力画像圧縮情報の各フレームのコンプレキシティ
を検出し、 上記コンプレキシティに基づいて上記出力画像圧縮情報
に画像情報の符号量を配分する際に、上記シーンチェン
ジに応じて上記出力画像圧縮情報における画像群の構造
を変換することを特徴とする画像情報変換方法。 - 【請求項２９】 上記入力画像圧縮情報及び上記出力画
像圧縮情報の画像群は、フレーム内で符号化されたイン
トラ符号化画像、表示順序で順方向を参照して符号化さ
れた順方向予測符号化画像及び表示順序で順方向及び逆
方向を参照して符号化された双方向予測符号化画像を含
み、 上記入力画像圧縮情報の内、イントラ符号化画像及び順
方向予測符号化画像を通過させるが、双方向予測符号化
画像を破棄することを特徴とする請求項２８記載の画像
情報変換方法。 - 【請求項３０】 上記入力画像圧縮情報及び上記出力画
像圧縮情報の画像群は、フレーム内で符号化されたイン
トラ符号化画像、表示順序で順方向を参照して符号化さ
れた順方向予測符号化画像及び表示順序で順方向及び逆
方向を参照して符号化された双方向予測符号化画像を含
み、 上記出力画像圧縮情報において、シーンチェンジを含む
画像群の直後の画像群の先頭のイントラ符号化画像を順
方向予測符号化画像に変換することを特徴とする請求項
２８記載の画像情報変換方法。 - 【請求項３１】 上記出力画像圧縮情報の２画像群に相
当する時間に亘って画像情報を遅延させることを特徴と
する請求項２８記載の画像情報変換方法。 - 【請求項３２】 上記入力画像圧縮情報の各フレームに
対するコンプレキシティを利用してシーンチェンジを検
出することを特徴とする請求項２８記載の画像情報変換
方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000190056A JP4517465B2 (ja) | 2000-06-23 | 2000-06-23 | 画像情報変換装置及び方法並びに符号化装置及び方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000190056A JP4517465B2 (ja) | 2000-06-23 | 2000-06-23 | 画像情報変換装置及び方法並びに符号化装置及び方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002010266A true JP2002010266A (ja) | 2002-01-11 |
| JP4517465B2 JP4517465B2 (ja) | 2010-08-04 |
Family
ID=18689588
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000190056A Expired - Fee Related JP4517465B2 (ja) | 2000-06-23 | 2000-06-23 | 画像情報変換装置及び方法並びに符号化装置及び方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4517465B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003250159A (ja) * | 2002-02-22 | 2003-09-05 | Fujitsu Ltd | 動画像処理方法及び動画像処理装置 |
| JP2011061287A (ja) * | 2009-09-07 | 2011-03-24 | Brother Industries Ltd | 通信制御装置、通信制御方法、および通信制御プログラム |
| WO2016203539A1 (ja) * | 2015-06-16 | 2016-12-22 | 三菱電機株式会社 | 画像符号化方式変換装置及び画像符号化方式変換方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0654315A (ja) * | 1992-07-31 | 1994-02-25 | Canon Inc | 動画像符号化方法及び装置 |
| JPH0870458A (ja) * | 1994-08-29 | 1996-03-12 | Sanyo Electric Co Ltd | 符号量制御方法 |
| JPH09512410A (ja) * | 1995-02-15 | 1997-12-09 | フィリップス エレクトロニクス ネムローゼ フェンノートシャップ | ビデオ信号の符号変換方法および装置 |
| JPH1066092A (ja) * | 1996-04-23 | 1998-03-06 | Sony Corp | 映像データ圧縮装置およびその方法 |
| JP2000115786A (ja) * | 1998-07-22 | 2000-04-21 | Matsushita Electric Ind Co Ltd | 符号化装置、記録装置および符号化方法 |
| JP2000165887A (ja) * | 1998-11-30 | 2000-06-16 | Nippon Telegr & Teleph Corp <Ntt> | 画像符号化データの再符号化方法およびそのプログラム記録媒体 |
-
2000
- 2000-06-23 JP JP2000190056A patent/JP4517465B2/ja not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0654315A (ja) * | 1992-07-31 | 1994-02-25 | Canon Inc | 動画像符号化方法及び装置 |
| JPH0870458A (ja) * | 1994-08-29 | 1996-03-12 | Sanyo Electric Co Ltd | 符号量制御方法 |
| JPH09512410A (ja) * | 1995-02-15 | 1997-12-09 | フィリップス エレクトロニクス ネムローゼ フェンノートシャップ | ビデオ信号の符号変換方法および装置 |
| JPH1066092A (ja) * | 1996-04-23 | 1998-03-06 | Sony Corp | 映像データ圧縮装置およびその方法 |
| JP2000115786A (ja) * | 1998-07-22 | 2000-04-21 | Matsushita Electric Ind Co Ltd | 符号化装置、記録装置および符号化方法 |
| JP2000165887A (ja) * | 1998-11-30 | 2000-06-16 | Nippon Telegr & Teleph Corp <Ntt> | 画像符号化データの再符号化方法およびそのプログラム記録媒体 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003250159A (ja) * | 2002-02-22 | 2003-09-05 | Fujitsu Ltd | 動画像処理方法及び動画像処理装置 |
| JP2011061287A (ja) * | 2009-09-07 | 2011-03-24 | Brother Industries Ltd | 通信制御装置、通信制御方法、および通信制御プログラム |
| WO2016203539A1 (ja) * | 2015-06-16 | 2016-12-22 | 三菱電機株式会社 | 画像符号化方式変換装置及び画像符号化方式変換方法 |
| JPWO2016203539A1 (ja) * | 2015-06-16 | 2017-08-31 | 三菱電機株式会社 | 画像符号化方式変換装置及び画像符号化方式変換方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4517465B2 (ja) | 2010-08-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4517495B2 (ja) | 画像情報変換装置及び画像情報変換方法並びに符号化装置及び符号化方法 | |
| US7170938B1 (en) | Rate control method for video transcoding | |
| US8374236B2 (en) | Method and apparatus for improving the average image refresh rate in a compressed video bitstream | |
| US6870886B2 (en) | Method and apparatus for transcoding a digitally compressed high definition television bitstream to a standard definition television bitstream | |
| US7421023B2 (en) | Image information conversion apparatus and image information conversion method | |
| EP1725042A1 (en) | Fade frame generating for MPEG compressed video data | |
| JPH07264580A (ja) | 映像信号伝送方法並びに映像信号送信装置及び映像信号受信装置 | |
| US20030174775A1 (en) | Encoding and decoding apparatus, method for monitoring images | |
| JP2000236547A (ja) | 画像情報変換装置及び画像情報変換方法 | |
| JP4517475B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP4517453B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP2002125227A (ja) | 画像情報変換装置及び方法 | |
| US6040875A (en) | Method to compensate for a fade in a digital video input sequence | |
| JP4608801B2 (ja) | 画像情報変換装置及び方法 | |
| JP4517465B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| KR100770873B1 (ko) | 영상 부호화시 비트율 제어 방법 및 장치 | |
| JP4517468B2 (ja) | 画像情報変換装置及び方法並びに符号化装置及び方法 | |
| JP2001346214A (ja) | 画像情報変換装置及び方法 | |
| US7012959B2 (en) | Picture information conversion method and apparatus | |
| JP2001339720A (ja) | 画像情報変換装置及び方法 | |
| JP4505992B2 (ja) | 画像情報変換装置及び方法 | |
| JP4507418B2 (ja) | 画像情報変換装置及び画像情報変換方法 | |
| Zdepski et al. | Overview of the Grand Alliance HDTV video compression system | |
| JP2002232891A (ja) | 画像情報変換装置及び方法 | |
| JP2001148855A (ja) | 画像情報変換装置及び画像情報変換方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070129 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081110 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081202 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090202 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100112 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100303 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100427 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100510 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130528 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |