JP2000354249A - ビデオ信号処理装置、ビデオ信号処理方法及びコンピュータプログラム製品 - Google Patents

Abstract

(57)【要約】 （修正有） 【課題】 映像の質を劣化させることなく、圧縮された
２つのビデオ信号を混合する。 【解決手段】 ビデオ信号処理装置は、信号Ｑのピクチ
ャ（Ｉ、Ｐ、Ｂ）に関連する変換パラメータ、ＤＣＴ型
及び動きベクトルを含む圧縮された第１のビデオ信号Ａ
を受ける第１の入力端子と、ピクチャに関連するパラメ
ータを保存しているときに、圧縮されれた第１のビデオ
信号を復号する復号器Ｄ１と、第１のビデオ信号と結合
されるべき第２のビデオ信号Ｂを受ける第２の入力端子
と、第２のビデオ信号を第１のビデオ信号に結合して、
結合された信号Ｃを生成する結合器１１０と、結合され
た信号Ｃを再符号化すると共に、ピクチャの高品質を維
持する第１の信号のみから得られた結合された信号の少
なくとも部分を復号するためのパラメータ（Ｑ、ＤＣＴ
型、動きベクトル）を再使用する符号化器Ｅ２とから、
構成される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ビデオ信号処理、
例えば、２つ以上のビデオ信号を示す圧縮データが結合
される信号処理に関する。本発明の具体例は、既知のＭ
ＰＥＧ−２標準に従って圧縮されたビデオ信号に関する
が、本発明はかかる信号に限定されるものではない。

【０００２】

【従来の技術】２つ以上のビデオ信号をミックスし、ワ
イプし、又は、スーパーインポーズすることは、たいて
い好ましいことである。例えば、いわゆるワイプ効果
は、テレビジョン番組において、２つの異なる場面間の
遷移に使用されるかもしれないし、或いは、サブタイト
ル、又は、その番組に関係する人達の氏名のような、い
わゆるロゴ、又は、他のコンピュータ生成信号が、その
下の映像を損なうことなく、ビデオ映像上にスーパーイ
ンポーズされるかもしれない。

【０００３】アナログビデオ信号、又は、圧縮されてい
ないビデオ信号については、上述の処理は比較的簡単で
ある。キー信号は、各画素位置における、構成要素であ
るビデオ信号（ビデオ信号Ａ、Ｂと称することにする）
の各レベルを制御するのに、使用することができ、その
２つのレベルの制御された信号は合成される。各画素位
置において、キー信号のレベルＫ、入力画素のレベル
Ａ、Ｂ及び出力画素のレベルの間には、次式の関係があ
るかもしれない。出力画素値＝Ａ（１−Ｋ）＋ＢＫ

【０００４】この処理は、各出力画素で成立する。若
し、ある特別の画素位置で、信号Ａが全部信号Ｂに置き
換えられるとすると、キー信号は１（さもなければ、１
００％）になり、若し、２つの画素の混合比が５０：５
０であるとすると、キーの値は０．５、即ち、５０％に
なる。

【０００５】いずれか一方、又は、両方が、圧縮された
ビデオストリームであるときは、状況は遙に複雑にな
る。ＭＰＥＧ−２のように、圧縮されたビデオストリー
ムでは、画素は、一般に、マクロブロックとして知られ
ているブロックとして圧縮され、このため、圧縮された
ビデオ信号から直接に特別の画素の値を得ることはでき
ない。

【０００６】又、圧縮されたビデオ信号は、しばしば、
その信号を伝達又は蓄積するデータの量によって、全体
の制限に従うことになる。ピクチャからピクチャへ、又
は、ピクチャ群（ＧＯＰ）からピクチャ群（ＧＯＰ）へ
と変化がある限り、時間平均データレートは、しばし
ば、伝送又は蓄積チャンネルの容量に束縛される。ＧＯ
Ｐ対ＧＯＰの画素から画素への許容変化量は、結合され
る２つの信号は、瞬時データレートが全く異なる、名目
上同じデータレートを持つことができることを、意味す
る。１つ以上の圧縮信号を含む１群のビデオ信号から、
複合ビデオ信号を生成するときは、データのオバーフロ
ー又はアンダーフローを回避する必要があることに、十
分注意しなければならない。

【０００７】この議論に直接関連する圧縮されたビデオ
信号の第３番目の特徴は、そのビデオ信号が、一時的に
先行又は後行するピクチャのブロックを示す動きベクト
ルをしばしば利用することであり、そのピクチャのブロ
ックは、現在のピクチャのブロックに似ており、そのた
め現在のピクチャを符号化する必要のあるデータ量を削
ることができる。

【０００８】これらの問題に対処する１つの方法は、圧
縮された入力信号の全体を圧縮解除し、混合を実行する
か、又は、非圧縮システム領域における処理に類似した
処理を実行し、そして、結果として得られた複合ピクチ
ャを再圧縮することである。

【０００９】

【発明が解決しようとする課題】ＭＰＥＧ−２システム
のような圧縮システムでは、圧縮を行うと、結果として
得られる映像の質が低下する傾向にある。若し、ロゴ、
又は、これに類似した情報を単に付加すると、ロゴ情報
が付加されたピクチャの全体の画質が低下するので、好
ましくない。

【００１０】

【課題を解決するための手段】本発明の一態様によれ
ば、第１のビデオ情報を表す、圧縮解除された第１のビ
デオ信号及び信号のピクチャに関連する保存されている
変換パラメータを受ける第１の入力装置と、上記変換パ
ラメータは、相互符号化されたピクチャに関し、基準ピ
クチャの部分に関連する動きベクトルを含み、上記第１
のビデオ情報と結合される第２のビデオ情報を表す第２
のビデオ信号を受ける第２の入力端子と、上記第２のビ
デオ情報を上記第１のビデオ情報と結合して、上記第１
の信号のみから得られた第１の部分及び上記第２の信号
から少なくとも部分的に得られた第２の部分からなる結
合された情報のピクチャを生成する結合器と、上記結合
されたビデオ情報を圧縮符号化して、相互符号化された
ピクチャ及び基準ピクチャを含む圧縮符号化ピクチャを
生成する符号化器とを有し、該符号化器は、上記相互符
号化されたピクチャの上記第１の部分のピクチャのため
の保存された動きベクトルを再使用し、該相互符号化さ
れたピクチャのために保存された動きベクトルは上記基
準ピクチャの部分に関連し、該基準ピクチャは、上記第
１のビデオ信号のみから得られると共に、上記相互符号
化されたピクチャの他の部分のための新たな動きベクト
ルを生成するビデオ信号処理装置が提案される。

【００１１】上記処理装置は、圧縮された第１のビデオ
信号を受ける第１の入力端子と、上記ピクチャに関連す
る上記変換パラメータを保存すると同時に、上記圧縮さ
れた第１のビデオ信号を復号する復号器とを備えても良
い。

【００１２】本発明のもう一つの態様によれば、信号の
ピクチャに関連する変換パラメータを含む第１のビデオ
情報を表す、圧縮された第１のビデオ信号を受けるステ
ップと、上記変換パラメータは、相互符号化されたピク
チャに関し、基準ピクチャの部分に関連する動きベクト
ルを含み、上記ピクチャに関連する上記パラメータを保
存すると同時に、上記圧縮された第１のビデオ信号を復
号する復号ステップと、上記第１のビデオ情報と結合さ
れる第２のビデオ情報を表す第２のビデオ信号を受ける
ステップと、上記第２のビデオ情報を上記第１のビデオ
情報と結合して、上記第１の信号のみから得られた第１
の部分及び上記第２の信号から少なくとも部分的に得ら
れた第２の部分からなる結合された情報のピクチャを生
成する結合ステップと、上記結合されたビデオ情報を圧
縮符号化して、相互符号化されたピクチャ及び基準ピク
チャを含む圧縮符号化ピクチャを生成する符号化ステッ
プとを有し、該符号化ステップは、上記相互符号化され
たピクチャの上記第１の部分のピクチャのための保存さ
れた動きベクトルを再使用し、該相互符号化されたピク
チャのために保存された動きベクトルは上記基準ピクチ
ャの部分に関連し、該基準ピクチャは、上記第１のビデ
オ信号のみから得られると共に、上記相互符号化された
ピクチャの他の部分のための新たな動きベクトルを生成
するビデオ信号処理方法が提案される。

【００１３】それらを再計算すると、誤りを招くかもし
れないので、保存されている動きベクトルを再使用する
と、ピクチャ全体の高品質を維持することができる。更
に、第１の信号のみから得られた映像部分のピクチャの
高品質も維持される。

【００１４】本発明の更にもう一つの態様によれば、プ
ログラム可能なビデオ信号処理装置で稼働するときに、
本発明のもう１つの態様の方法を実行させるコンピュー
タプログラム製品が提案されている。

【００１５】本発明の具体例による処理装置では、上記
第２のビデオ信号から少なくとも部分的に得られる上記
相互符号化されたピクチャの部分のために生成される新
たな動きベクトルが設けられる。上記相互符号化された
ピクチャの部分のために生成され、上記内符号化ピクチ
ャは上記第１の信号のみから得られ、該第１の信号がな
かったら、上記保存されているベクトルは、上記第２の
ビデオ信号から少なくとも部分的に得られる上記基準ピ
クチャの部分に関連する新たな動きベクトルが設けられ
るのが望ましい。

【００１６】一具体例では、上記符号化器は、上記結合
されたビデオ情報のピクチャのために、動きベクトルを
計算し、該計算され保存された動きベクトルを、基準マ
ップに対してテストし、該基準マップは、上記ベクトル
が関連する上記基準ピクチャにおいて、上記第２の信号
から少なくとも部分的に得られた情報の位置を含む。

【００１７】上記第１の信号は、内符号化されたピクチ
ャ及び相互符号化されたピクチャからなり、上記符号化
器が、上記第１の信号の内符号化されたピクチャを、結
合された信号の内符号化された信号として再符号化し、
そして、上記第１の信号の相互符号化されたピクチャ
を、結合された信号の相互符号化されたピクチャとして
再符号化するのが、望ましい。内符号化されたピクチャ
は、ピクチャに適用されたコード構成によって符号化さ
れたピクチャの全ビデオ情報を含む。内符号化されたピ
クチャは、そのピクチャが復号されて、元の全ピクチャ
再生させたとき、どんな他のピクチャからの情報も必要
としない。相互符号化されたピクチャは、他のピクチ
ャ、即ち、復号されたとき、元の全ピクチャを再生する
内符号化されたピクチャを必要とする。相互符号化され
たピクチャは、例えば、ピクチャ及びピクチャの予測値
間の間の差分である。

【００１８】ＭＰＥＧでは、Ｉフレームは、内符号化さ
れたピクチャであり、Ｐ及びＢフレームは、相互符号化
されたピクチャのバージョンである。

【００１９】上記処理装置は、Ｉ、Ｐ及びＢピクチャを
含むビデオ情報を処理し、そして、第１のビデオ信号の
Ｉ、Ｐ及びＢピクチャを、結合された信号のそれぞれ
Ｉ、Ｐ及びＢピクチャとして、符号化する符号化器が設
けられるのが、より一層望ましい。これによって、再符
号化の総数を減らし、映像の高品質を維持するのに役立
つ。

【００２０】

【発明の実施の形態】概観 図１〜図４は、あるビデオ信号（Ａ）を他のビデオ信号
（Ｂ）に結合することを実行し得るビデオ処理動作を示
す。

【００２１】図１及び図２は、スプライス動作及びディ
ゾルブ動作をそれぞれ表す時刻表の概略図である。図１
では、特定の時刻ｔにおける信号Ａから信号Ｂへの急激
な変化が行われている。図２では、特定の時間に亘っ
て、信号Ａが信号Ｂに混入されるゆるやかな変化が行わ
れている。

【００２２】図３及び図４は、テレビジョンピクチャ自
体の概略図を示したものである。図３は、「ロゴ」の挿
入を示し、そこでは、ピクチャＡの副次的部分がピクチ
ャＢと置換されるか、又は、混合され、図４は、２つの
ピクチャがスクリーン上の挨拶部分を占め、２つのピク
チャの境界が移動するワイプ動作を示す。

【００２３】本説明は、図２、図３及び図４に関連して
実行される必要のあるビデオ処理動作に関連して実行さ
れる必要のあるビデオ処理の形式に関するものである。
言い換えれば、これらの形式は、両ピクチャＡ及びＢの
部分が同時にスクリーン上にある場所の動作である。図
１の問題、即ち、あるビデオ信号のもう１つのビデオ信
号へのスプライスは、本発明では取り扱わない。

【００２４】図５〜図７は、再び概略図で、ビデオピク
チャ上へのロゴの重ね合わせ、即ち、図３の詳細版を示
す。

【００２５】図５では、ビデオピクチャは、通常は、動
く物１、２と、静止している物３とを含むかもしれない
元の光景を示す。図６では、テキストのロゴ６及び地図
５のようなそれ以上の情報を含む付加ビデオ情報は、元
の映像の上に重ねられる。負荷ビデオ情報の元の映像へ
の重畳が要求されるかもしれない状況の例としては、下
になっている番組をそれほど損なうことなく、特定の地
域のための天候に関する警報のような差し迫った出来事
の警報を放送することである。

【００２６】図７は、図６のクローズアップ概略図で、
動きのない地図５と元の映像３の部分との間の重複部分
を示す。各映像がいわゆるマクロブロックに分割される
ＭＰＥＧ２のように、ブロックに基礎を置くシステムで
は、多数のマクロブロックが映像の重畳によって影響を
受けることが分かる。マクロブロックは、図７に、正方
形のブロック１０として示されている。

【００２７】本説明の残りの部分は、スクリーン上に同
時に存在するソースＡ及びＢからのビデオ情報の存在を
処理することのできるビデオ信号処理装置を取り扱う。
装置のブロックダイアグラムは図８を参照して説明さ
れ、動作のモードを明確にする図９のフローチャートに
続く。この動作の個別の特徴は、その他の図を参照し
て、説明される。

【００２８】そこで、ビデオ信号処理装置の略図である
図８に言及する。

【００２９】符号化器Ｅ１は入力ビデオ信号Ａを受け、
所望の出力目標ビットレートＴＢＲ及びＧＯＰフォーマ
ットに従って、その入力ビデオ信号Ａを符号化する。２
つのビデオ信号間の混合が要求されない状況では、符号
化器Ｅ１によって符号化されたビデオ信号は、制御装置
１００の制御の下に、切り換えスイッチＳ１を通じて、
直接に出力端子に供給される。若し、入力ビデオ信号が
既に所望のフォーマットに則っていれば、符号化器Ｅ１
は勿論必要ない（このことを図示するために、Ｅ１に括
弧を付して示しても良い）。

【００３０】符号化器Ｅ１の出力は、ビデオを、圧縮さ
れない形式、即ち、ベースバンド形式に戻すように復号
する相補形復号器Ｄ１に供給される。ベースバンドビデ
オ信号は、混合器１１０に供給され、入力ビデオ信号Ａ
の各ブロック毎の元の圧縮に用いられている圧縮パラメ
ータは、制御装置１００に供給される。

【００３１】ビデオＡに混合されるべきビデオ信号の信
号源１２０は、ビデオ信号Ｂをもう１つの符号化器Ｅ３
に供給する。再び、若し、ビデオ信号Ｂが既に所望のフ
ォーマットであれば、Ｅ３は必要でない（このことを図
示するために、Ｅ３に括弧を付して示しても良い）。符
号化器Ｅ３の出力は、対応するビットレート及び符号化
器Ｅ１の出力のそれのＧＯＰフォーマットであって、ビ
デオ信号から圧縮パラメータを取得し、ビデオＢを復号
してベースバンド形式に戻して混合器１１０に供給す
る、もう１つの復号器Ｄ３に供給される。

【００３２】必要であれば、符号化器−復号器対Ｅ１／
Ｄ１又はＥ３／Ｄ３を省略しても良く、圧縮されないビ
デオ信号、即ち、混合器１１０の入力端子の１つに直接
に供給されるようにされた「ベースバンド」のビデオ
が、混合器１１０の他の入力端子において、復号され圧
縮されたビデオに加えられる。

【００３３】又、信号源１２０は、キー信号Ｋを混合器
１１１０に供給する（キー信号は、勿論、外部の信号源
から到来するが）。キー信号は、要求される出力映像の
各画素に用いられるべきビデオＡ及びビデオＢの相対的
な割合を明確にし、それゆえに、キー信号Ｋは０（全て
のビデオＡが使用される）及び１（全てのビデオＢが使
用される）間で変化する。この変化は画素毎のベースで
起こり、その位置での２つの信号の間の混合比を示す、
０及び１間で変化するＫを伴う。

【００３４】従って、混合器１１０は、一般的な慣用の
方法で動作し、画素ベースでは、掛け算器１１２で、ビ
デオＢの画素にＫを掛け、掛け算器１１４で、ビデオＡ
の画素に（１−Ｋ）を掛け、そして、出力混合ビデオ信
号の画素を発生する加算器１１６で、２つの積を加算す
る。混合されたビデオ信号は、もう１つの符号化器Ｅ２
に供給され、再び、同じ名目上のビットレート並びにＥ
１及びＥ３としてのＧＯＰフォーマットに作用し、この
符号化器Ｅ２は混合されたビデオ信号を符号化して、切
換えスイッチＳ１を通じて、出力端子に出力するのに役
立つ。

【００３５】制御装置１００は符号化器Ｅ２の動作を制
御する。基本的には、制御装置１００は、符号化器Ｅ２
が、ビデオ信号Ａ及びＢのブロックの圧縮に関連する圧
縮パラメータのいくつか、又は、全部を再使用するか否
かを制御し、その後に、ビデオ信号Ａ及びＢが混合され
るか、又は、混合されたビデオ信号Ｃのブロックを符号
化するために新たな圧縮パラメータを生成する。

【００３６】制御装置１００の動作については、後に、
より大量の詳細な説明を行うことになるが、その一部を
説明すると、制御装置１００は、ビデオ信号Ａの圧縮パ
ラメータの細部、ビデオ信号Ｂの圧縮パラメータの細部
及び目標出力データレート（ＴＢＲ）を受け取る。又、
制御装置１００は、キー信号Ｋから取得したいくつかの
情報を含む種々の情報を保存し得る記憶装置１３０にア
クセスする。

【００３７】図９は、図８の処理装置の動作を図解する
フローチャートである。

【００３８】ステップ２２０では、「ビットマップ」
が、ロゴの圧縮されたフレームの位置を示すキー信号Ｋ
から得られる。このことについては、図１２Ａ及びＢ、
図１３Ａ及びＢ並びに図１４Ａ〜Ｄを参照して、後によ
り詳細に説明することになる。

【００３９】ステップ２３０では、制御装置１００は、
混合されたビデオ信号の現在のフレームを符号化するの
に必要な全ビット数の見積もりを確定する。これを行う
ために、制御装置１００は、実際には、レート制御アル
ゴリズムを、混合されたビデオ信号には適用しないが、
その代わりに、元の個別の２つのビデオ信号Ａ及びＢの
各マクロブロックを符号化するのに必要なビット数に関
する履歴データの少なくとも一部から、見積もりを計算
する。この処理については、後に詳述する。

【００４０】次のステップ２４５では、Ｉフレームのど
のマクロブロックが完全に再符号化されるべきか並びに
入力ビデオ信号の一方、又は、両方に関連するパラメー
タのいずれを再使用すべきかを決定するのに使用される
（詳細は後述）閾値を設定する。この処理は、図１０を
参照して、後述する。

【００４１】ステップ２６０では、ビデオＡの量子化パ
ラメータが、再符号化される１組のマクロブロックを決
定する閾値と比較される。これは図１１に示されてい
る。

【００４２】ステップ２４５及び２６０は、ステップ２
３０からステップ２７０までの破線によって示された本
発明のいくつかの具体例では、使用されない。

【００４３】ステップ２７０では、混合された信号Ｃの
マクロブロックに関連する動きベクトルが参照映像の有
効な領域を指しているか否かを決定するテストが実行さ
れる。例えば、マクロブロックは、ビデオＡの完全に内
側にあるものとし、しかし、それに関連する動きベクト
ルは、参照フレーム内のビデオＢによって、置換された
領域を指しているかもしれない。これらの周囲の状況の
中で、上述の動きベクトルを使用することは、不適当で
ある。この処理については、図１２、１３及び１４を参
照して、後に詳述する。

【００４４】一旦このテストが完了すれば、再符号化又
は再使用パラメータ情報のフルセットは、制御装置１０
０によって、符号化器Ｅ２に送られ、その符号化器Ｅ２
は、この情報のフルセットに従って、混合されたビデオ
信号Ｃを符号化する。ビデオＡ及びＢ間に混合が生じた
場合は、制御装置１００はスイッチＳ１を操作して、全
体のフレームのために、符号化器Ｅ２の出力を選択す
る。

【００４５】符号化器Ｅ２は、レート制御アルゴリズム
を含んでいる。このアルゴリズムは、例えば、ＭＰＥＧ
システムのいわゆる「テストモデル５」のような予測レ
ート制御アルゴリズムかもしれないし、又は、ＧＢ−Ａ
−２３０６８３１に述べられているように、前置符号
化、又は、リハーサル型のレート制御アルゴリズムであ
るかもしれない。とにかく、パラメータが再使用される
べきマクロブロックの場合及びパラメータが再使用され
るべきでないマクロブロックの場合には、制御装置１０
０によって、レート制御アルゴリズムに適用されたパラ
メータは、復号器Ｄ１及びＤ２から受け取った元の圧縮
パラメータに等しく、又、新しいパラメータが取得され
るレート制御アルゴリズムを示す指示フラグからなる。

【００４６】挿入されたロゴの特別な状況があり、その
状況では、ロゴそれ自体のピクチャの高品質を維持する
ために、量子化処理の厳しさの最大範囲を設定するため
のロゴ素材を含むブロックに使用される量子化パラメー
タの限界を明確にすることが要求されるかもしれない。
再び、その条件は、制御装置１００から、最初の、又
は、全てのビデオＢ素材を含むことが決定されたマクロ
ブロックに関するレート制御アルゴリズムに、信号で伝
えられる。（これは、勿論、挿入されたビデオ信号は、
ロゴ、又は、他の素材からなるか否かについての主観的
な決定に依存し、これは、勿論、操作者、即ち、ユーザ
によりなされた決定である。）

【００４７】符号化器Ｅ２のレート制御アルゴリズム
は、再符号化されるこれらのマクロブロックのための圧
縮パラメータを生成し、そして、符号化器Ｅ２は、受け
取ったか、即ち、取得したパラメータに基づいて、全フ
レームを符号化する。

【００４８】以下の説明では、一例として、図３にビデ
オＢとして示されているロゴ情報（テキストロゴ及び地
図のような）が、ビデオＡに重ねられるものと仮定す
る。又、図８の符号化器Ｅ３及び復号器Ｄ３は、省略さ
れているものと仮定する。

【００４９】ビットマップ 上述したように、キー信号Ｋは、既知の方法で、画素毎
に発生せしめられる。そのキー信号は、上述したよう
に、ロゴ情報を、元の光景に重ね合わせる。ビットマッ
プは、制御装置１００によって、キー信号から発生せし
められる。

【００５０】ビットマップは、画素毎、ロゴ情報を含む
画素位置を示す画素解像度を有しても良い。

【００５１】あるいはまた、ビットマップは、ロゴ情報
を含むマクロブロックを示すマクロブロック解像度を有
しても良い。

【００５２】かくして、ビットマップは、ロゴ情報（ロ
ゴ領域）を含み、又、含まない（ロゴのない領域）画
素、又は、マクロブロックを示す。

【００５３】変換パラメータ 後に論述する本発明の具体例は、下記の変換(transcodi
ng) パラメータについて言及する。 １） フレームのマクロブロックに適用される、量子化
スケールを明確にするパラメータＱと、 ２） ＤＣＴ処理のタイプ（フィールド又はフレーム）
を明確にするパラメータＤＣＴタイプ及び ３） 動きベクトル

【００５４】最初のビットストリームＡは、Ｉ、Ｐ及び
Ｂフレームを有する。これらフレームは、復号器Ｄで復
号され、そして、符号化器Ｅ２で再符号化される。最初
のビットストリームＡのＩフレームがストリームＣのＩ
として再符号化され、ＰフレームがＰとして再符号化さ
れ、ＢフレームがＢとして再符号化されるように、符号
化器Ｅ２は、制御装置１００によって制御される。

【００５５】パラメータＱ及びＤＣＴタイプは、混合さ
れた元の情報及び第１の手法、又は、第２の手法に応じ
たロゴの再符号化に適用される。

【００５６】第１の手法 Ａ） 混合された信号ＣのＩフレームは、変更されない
元の初めのビデオビットストリームＡのＩフレームから
得られたＱ及びＤＣＴタイプパラメータを再使用して、
符号化器フィールド２によって再符号化される。再符号
化されたＩフレームは、重ね合わされたロゴ情報のため
に、元のビットストリームの対応するフレームより多く
のデータを持つ傾向がある。

【００５７】Ｂ及びＣ） Ｐ及びＢフレームは、符号化
器Ｅ２で再符号化される。混合された信号のＰ及びＢフ
レームの量子化パラメータＱは、再計算される。

【００５８】Ｄ） ビットストリームＡのＤＣＴ型タイ
プは、再符号化され混合された信号Ｃの全フレームの全
てのマクロブロックにおいて再使用される。

【００５９】Ｅ） 各フレームの目標ビット数の見積値
は、上述のステップ２３０の通りに、即ち、ビットスト
リームＡのフレームを符号化するの必要な履歴ビット数
から、計算される。レート制御は、再符号化されたＧＯ
ＰのＩ、Ｐ及びＢフレームに対するビットを、目標ビッ
トレート（ＴＢＲ）に一致させるように配分する。

【００６０】第２の手法 Ａ）Ｉフレーム，Ｑ 図１０及び図１１を参照するに、元のビットストリーム
（ロゴなし）のために、マクロブロック中のＱスケール
の配分が決定される。Ｑの閾値Ｑ_Thは経験的に決定され
る。

【００６１】図１１を参照するに、各Ｉフレームの全マ
クロブロックからのＱ値が、Ｑ閾値計算機３５０によっ
て与えられ、記憶装置１３０に記憶される。そして、Ｑ
閾値計算機は、Ｑ値を昇順に並べ、そして、重要なマク
ロブロック上の各可能なＱ値の発生率を取得する。この
処理の概略を示すヒストグラムを図１０に示す。

【００６２】そして、閾値比率ｘ％は、この分布に適用
され、その結果、そのＱ値までの累積発生率が、閾値比
率ｘ％内にある最も高いＱ値が、Ｑ_Thとして確定され
る。閾値比率ｘ％は、例えば、２５％〜６０％の範囲内
にあり、５０％が望ましく、３０％はもっと望ましい。

【００６３】符号化器Ｅ２によるロゴ情報を含むＩフレ
ームの再符号化は、下記の基準に従って生じる。

【００６４】混合された信号Ｃ（即ち、ロゴを含む）の
Ｉフレームにおいて、元のビットストリームＡから得て
保存したＱ値が、ロゴ情報を含まない映像領域（ロゴの
ない領域）において、再使用される。若し、ロゴ情報
が、閾値Ｑ_Th以下のＱ値を有する元の映像のマクロブロ
ック内にある場合は、元のビットストリームＡから得て
保存されたＱ値は再使用される。Ｉフレーム内の全ての
他のロゴ情報は、再計算される。ロゴ領域及びロゴなし
領域は、ビットマップによって、明確にされる。

【００６５】かくして、Ｑ値を有し、その最も高いＱ値
Ｑ_Thを含む、元のビットストリームのマクロブロック
は、たとえそのマクロブロックがロゴ情報を含んでいて
も、その元のＱ値を再使用して、符号化される。ロゴ情
報を含み、元のビットストリームＡのＱ値がＱ_Thを越え
るマクロブロックは、十分に再符号化される。

【００６６】このシステムは、数値的に小さいＱは、そ
れほど粗くない量子化を必然的に伴うという傾向がある
ことに、ここでは注意すべきである。再使用するＱ値を
上限Ｑ_Thまで上げると、元々あまり粗くなく圧縮された
これらのマクロブロック（考慮中のものの）のピクチャ
の質を低下させない効果がある。

【００６７】一旦Ｑ_Thが確定されたら、元のビットスト
リームＡのＱ値が、記憶装置１３０から読出され、比較
器３６０で、Ｑ_Thと比較される。再符号化を行うか再使
用を行うかの決定は、再符号化されたビットストリーム
がロゴ情報を含むマクロブロックでは、以下のように行
われる。ロゴ情報を含むマクロブロックは、ビットマッ
プによって示される。

【００６８】Ｂ） Ｐフレームは、エンコーダＥ２によ
って再符号化される。Ｐフレームでは、保存されている
Ｑ値がロゴなし領域で再使用される。ロゴ領域では、Ｑ
値は再計算される。

【００６９】Ｃ） Ｂフレームは、エンコーダＥ２によ
って再符号化される。Ｂフレームでは、Ｑ値は再計算さ
れる。

【００７０】Ｄ） ＤＣＴタイプは、全フレームの全マ
クロブロックで再使用される。

【００７１】Ｅ）レート制御 再符号化は、レート制御が下記のように変更されたテス
トモデル５（ISO-IEC/JCT1/SC29/WG11/NO44)を用いるの
が望ましい。

【００７２】Ｉフレームのロゴなし領域では、各ＭＢの
ために発生せしめられたビットは、集められて再使用ビ
ット値を形成する。Ｉフレームのロゴ領域では、この再
使用ビット値は、下記のようなレート制御のための目標
値を変更するフレームにおけるその点に対して、ロゴＭ
Ｂの数と共同して、使用される。

【００７３】新たな目標値＝再使用ビット＋｛（目標ビ
ットフレーム）＊（ここまでのロゴＭＢ）／（総Ｍ
Ｂ）｝

【００７４】これは、下記のレート制御の方程式に影響
を及ぼす。

【００７５】新しい仮想buf ＝ init 仮想buf ＋（発生
されたピクチャビット）−（新しい目標値） 但し、「発生されたピクチャビット」は、フレーム内の
現在の点に対して発生されたビット数であり、再使用に
より発生されたビット及びロゴ領域のレート制御によっ
て発生されたビットからなる。

【００７６】即ち、 （発生されたピクチャビット）＝ロゴビット＋再使用ビ
ットである。

【００７７】かくして、新たな目標値は、Ｉフレームの
ロゴ領域の目標ビット数における再使用の効果を取消
し、レート制御を、あたかも全フレームが再符号化され
たままのように実行する。

【００７８】閾値Ｑ_Thを用いる意図は、「低いＱ」を有
する領域では、「Ｑ」を再使用し、「高いＱ」の領域で
は、「レート制御」を動作させることである。「背景」
とロゴの組み合わせがある「低いＱ」の領域では、背景
の高品質を維持するため、「マクロブロックＱ」を再使
用する。これについては、対象物が透かして見える、例
えば、地図５の部分を示す図７を参照のこと。「Ｑ」を
再使用する「ロゴマクロブロック」の数を減少させる
と、「レート制御」に、「Ｐ」及び「Ｂ」フレームに、
より多くのビットを利用させるようにする。

【００７９】変更態様 この第２の手法において、若し、マクロブロックのＱが
基準閾値Ｑ_Thより小さかったら、保存されているＱの値
は、再使用される。その閾値は、下記の内の１つにな
る。

【００８０】ａ） 動きに比例した閾値 ｂ） 動きベクトルの長さに比例した閾値 ｃ） 色内容に比例した閾値

【００８１】保存されたＱの値は、映像ノイズを減少さ
せるのに用いられる。動きベクトルが大きいか、動きが
速いか、又は、いくらか色があるときは、ノイズはあま
り目立たない。

【００８２】動きベクトル処理 概観 図１２〜１５は、図９のステップ２２０及び２７０で実
行される処理を示し、即ち、ピットマップを生成し、２
つのビデオソースからの領域間の境界を確定し、そし
て、再使用されて、保存されている動きベクトルが同じ
ビデオソースからの素材の妥当な部分を指定するかどう
かを決定する保存されている動きベクトルをテストす
る。

【００８３】図３を参照するに、符号化パラメータを再
使用する決定がなされたとき、ビデオＡの領域のマクロ
ブロックのために再使用されるべき保存された動きベク
トルが、実際に、ビデオＡによって形成された映像の一
部を示すこと、即ち、ビデオＡが、混合、ワイプ、又
は、挿入処理の部分として、ビデオＢによって置き換え
られていないことを、確実にすることが重要である。こ
れと同じことが、ビデオＢにも適用される。

【００８４】図１４及び図１５を参照するに、１つの境
界（図１４Ｄの１マクロブロック幅の）が、新たに挿入
された素材の周囲に創設される。これの利点は、ベクト
ルテストが、新しく挿入された素材の回りで実行される
ことを、許容することである。境界が広いと、もしそう
でなければ、このより粗いスケールの接近によって導入
される誤りを回避するための安全の余裕を増加させるの
で、これの利点は、ベクトルテストが、画素のスケール
（図１２及び１３のように）よりも、むしろ、マクロブ
ロックのスケールで実行されることを、許容することで
ある。

【００８５】かくして、例えば、境界が領域Ａから完全
に得られたのではない全マクロブロックの回りに、境界
が創設されても良く、又、領域Ｂから完全に得られたの
ではない全マクロブロックの回りに、境界が創設されて
も良い。

【００８６】このように、若し、領域Ｂからのマクロブ
ロックに関連する保存された動きベクトルが、 ａ） 領域Ａ、 ｂ） 完全に領域Ｂからではないマクロブロック、又
は、 ｃ） 完全に領域Ｂからではないこれらのマクロブロッ
クの回りに創設された境界、 を指すのであれば、その保存された動きベクトルは再使
用されずに、その代わりに、新しい動きベクトルが、そ
の場所から生成される。同様に、若し、領域Ａからのマ
クロブロックに関連する動きベクトルが、 ａ） 領域Ｂ、 ｂ） 完全に領域Ａからではないマクロブロック、又
は、 ｃ） 完全に領域Ａからではないこれらのマクロブロッ
クの回りに創設された境界 を指すのであれば、その動きベクトルは、再使用されず
に、その代わりに、新しい動きベクトルが、その場所か
ら生成される。

【００８７】具体例 動きベクトルは、後述する説明で明らかにする手法Ａ、
Ｂ及びＣのいずれかによって処理されても良い。これら
の手法Ａ、Ｂ及びＣのいずれかには、上述した第１及び
第２の手法が用いられても良い。

【００８８】上述したように、元のビットストリームＡ
の動きベクトルＶ₁ は、再使用されるように、符号化器
Ｅ２に保存されている。新しい動きベクトルＶ₂ は、ロ
ゴ情報及び元のビデオ情報を含む混合されたビデオ情報
のために計算される。動きベクトルＶ₁ 、Ｖ₂ の組は、
動きベクトルが適用するマクロブロックを示す指示と共
にファイルに記憶される。下記の手法Ａ、Ｂ及びＣで
は、動きベクトルはＰ及びＢのみに関連する。Ｂフレー
ムのファイルは、前方及び後方予測の両方のベクトルを
含む。

【００８９】ビットマップ 上述したように、ビットマップは生成される。ビットマ
ップは、そのフレーム内で、ロゴ情報がある場所を示す
どのフレームのためにも生成される。

【００９０】ビットマップは、Ｉフレームのために生成
される。

【００９１】各Ｂフレームは、Ｂフレームの動きベクト
ルが指す前方及び後方フレームのビットマップである、
２つの基準ビットマップを使用する。

【００９２】各Ｐフレームは２枚までのビットマップを
有する。一方のビットマップは、そのフレーム自体のビ
ットマップである。他方のビットマップは、基準ビット
マップ、即ち、Ｐフレームの動きベクトルが指すフレー
ムビットマップである。

【００９３】手法Ａ ビットマップは、どの画素のためにも、画素がロゴ情報
を含んでいるか否かを示す論理ビット「１」又は「０」
を含む。「１」＝ロゴあり、「０」＝ゴゴなし

【００９４】図１２Ａを参照して、混合されたビデオ情
報のＰ又はＢフレームにおけるマクロブロックＭＢ
（ｎ）について考える。

【００９５】ＭＢ（ｎ）の保存された動きベクトルは、
画素解像度で、ロゴビットマップに対してテストされ
る。かくして、図１２Ｂを参照するに、この図では、ｘ
ｘｘｘによって示された１６画素×１６画素に対してテ
ストされる。

【００９６】若し、領域ｘｘｘｘにおけるどんな画素も
１に等しければ、その領域はロゴ情報を有する。そし
て、新しいベクトルＶ₂ はＭＢ（ｎ）のために使用され
る。

【００９７】若し、領域ｘｘｘｘにおけるどんな画素も
０に等しければ、その領域はロゴなし情報を有する。そ
して、保存されているベクトルＶ₁ はＭＢ（ｎ）のため
に使用される。

【００９８】変更態様として、新しいベクトルＶ₂ を使
用する代わりに、若し、領域ｘｘｘｘにおけるどんな画
素もロゴ情報を含んでいれば、保存されているベクトル
Ｖ₁は、若し、領域ｘｘｘｘにおける少数の画素がロゴ
情報を含んでいれば、使用され得る。

【００９９】手法Ｂ この手法Ｂでは、Ｐ及びＢフレームのビットマップは、
マクロブロックの解像度を有する。各マクロブロックに
おいて、「１」は、ロゴ情報を有するマクロブロックを
示し、「０」は、ロゴ情報を有しないマクロブロックを
示す。

【０１００】若し、マクロブロックが１６×１６の画素
を有するとすれば、ベクトルは、たった１つのマクロブ
ロックの解像度、例えば、１６画素の解像度に対して、
テストされる。

【０１０１】図１３Ａ及び１３Ｂの状況を考察された
い。

【０１０２】図１３Ａは、ロゴ情報を有しないＰ及びＢ
フレームのマクロブロックＭＢ（ｎ）を示す。その動き
ベクトルは、図１３Ｂに示すように、もう１つのフレー
ムにおけるベストマッチの領域ｘｘｘを指す。領域ｘｘ
ｘは、マクロブロック（ｎ）の隣にある。かくして、そ
れがＭＢ（ｎ）の１６画素内にある。

【０１０３】若し、ＭＢ（ｎ）が、右方向に向かって、
０から１５画素までの範囲の値の水平ベクトルを有する
ものとすれば、若し、その水平ベクトルがロゴ領域を指
すのであれば、ロゴ画素を正しく選択するすることがで
きない。

【０１０４】図１３Ｂに対応するビットマップは、図１
４Ｂに示されている。図１３Ａ及び１３に関して検討し
た状況に対して保護するために、基準フレームでは、１
つのマクロブロックに等しい幅の境界は、図１４Ｃ及び
１４Ｄに示されるようなロゴ情報を含む各マクロブロッ
クの回りに加えられる。この第２の手法の具体例では、
境界は、常に１つのマクロブロックであり、その境界は
ベクトル範囲及びピクチャタイプに依存しない。

【０１０５】境界は、ベクトル処理のために、ロゴ情報
を含むようになされている。

【０１０６】図１４ＣのＭＢ（ｎ）を参照するに、その
動きベクトルは、ビットマップファイルのにおけるマク
ロブロックに対する１６画素の倍数の解像度に対してテ
ストされる。

【０１０７】若し、動きベクトルが指すどんなマクロブ
ロックもロジック１（即ち、マクロブロックがロゴ情報
を含んでいるか、又は、境界である）であれば、新しい
ベクトルはＭＢ（ｎ）のために使用される。

【０１０８】若し、ベクトルがテストされた全てのマク
ロブロックが、ロゴのない情報を含んでいれば、保存さ
れているベクトルＶ₁ は、ＭＢ（ｎ）のために使用され
る。

【０１０９】Ｂフレームは、上述したように、２つの基
準ビットマップを有する。Ｂフレームは、前方及び後方
の両基準フレームを指す動きベクトルを伴うマクロブロ
ックを有しても良く、そして、２つの基準ビットマップ
に対して、一方向の１つの動きベクトルは、ロゴなし情
報と他のロゴ情報を指すようにしても良い。このような
状況において、本発明の一具体例は、ロゴなし情報を含
む基準フレームを選択しても良く、又、マクロブロック
のために保存されているベクトルＶ₁ を再使用しても良
いが、他の基準フレームは無視される。

【０１１０】手法Ｃ 図１５を参照するに、Ｂ及びＰフレームのビットマップ
は、ロゴ情報４を有するように、示されている。境界２
２は、処理中の現在のフレーム（上述の手法Ａ及びＢに
おける基準フレームとは異なる）におけるロゴ情報の周
囲に設けされている。境界は、最大ベクトル範囲に依存
した幅ｗを有する。幅ｗは、例えば、水平方向に６４画
素及び垂直方法に３２画素である。

【０１１１】幅ｗは、最大ベクトル範囲の２倍が望まし
い。

【０１１２】手法Ｃの変形例では、最大ベクトル範囲
は、元のビデオビットストリームのＭＰＥＧパラメータ
から検出されるか、又は、各フレームのために測定され
る。

【０１１３】境界の外側の全マクロブロックが、その境
界の内側で、ロゴ情報を含んでいるマクロブロックに属
する動きベクトルを持つことができないような幅ｗを、
その境界が持つことが望ましい。

【０１１４】かくして、保存された動きベクトルＶ
₁ は、境界の外側の全マクロブロックのために使用さ
れ、そして、新しい動きベクトルはＶ₂ は、境界の内側
の全マクロブロックのために計算される。

【０１１５】上述の記述では、「フレーム」への言及
は、例のみのためであると理解されるかもしれないが、
一般的には、符号化はピクチャ毎であり、そのピクチャ
は、フレーム、フィールド、結合、又は、他のピクチャ
であり得た。

【０１１６】上述した装置は、適当なソフトウェア上で
動作する汎用コンピュータによって、少なくとも部分的
に、実行されても良いことは、当業者によって理解され
るであろう。そのようなソフトウェアや、そのようなソ
フトウェアが記憶された記憶媒体は、両方とも、本発明
の具体例として考えられる。

【図面の簡単な説明】

【図１】ビデオスプライスの動作を図示する。

【図２】ビデオディゾルブの動作を図示する。

【図３】ビデオロゴ挿入の動作を図示する。

【図４】ビデオワイプの動作を図示する。

【図５】ビデオロゴ挿入の動作を一層細大もらさず示
す。

【図６】ビデオロゴ挿入の動作を一層細大もらさず示
す。

【図７】挿入されたロゴ及び背景ビデオ間の重なりを示
す図６の拡大部分図である。

【図８】ビデオ信号処理装置の略図である。

【図９】図８の処理装置の動作を示すフローチャートで
ある。

【図１０】１つのピクチャ内の量子化パラメータ値の分
布を示すヒストグラムである。

【図１１】量子化パラメータ値の閾値との比較を図示す
る。

【図１２】ビットマップを図示する。

【図１３】ビットマップを図示する。

【図１４】ビットマップを図示する。

【図１５】もう１つのビットマップを図示する。

───────────────────────────────────────────────────── フロントページの続き (72)発明者 ニコラス イアン サンダース イギリス国 ハンプシャー，ベージングス トーク，チャイネハム，モンガース ピー ス 21 (72)発明者 ロバート ウェブ イギリス国 ハンプシャー，ベージングス トーク，チャイネハム，ロングストック クロース 33

Claims (25)

【特許請求の範囲】
1. 【請求項１】 信号のピクチャに関連する変換パラメー
   タを含む第１のビデオ情報を表す、圧縮された第１のビ
   デオ信号を受ける第１の入力端子と、 上記変換パラメータは、相互符号化されたピクチャに関
   し、基準ピクチャの部分に関連する動きベクトルを含
   み、 上記ピクチャに関連する上記パラメータを保存すると同
   時に、上記圧縮された第１のビデオ信号を復号する復号
   器と、 上記第１のビデオ情報と結合される第２のビデオ情報を
   表す第２のビデオ信号を受ける第２の入力端子と、 上記第２のビデオ情報を上記第１のビデオ情報と結合し
   て、上記第１の信号のみから得られた第１の部分及び上
   記第２の信号から少なくとも部分的に得られた第２の部
   分からなる結合された情報のピクチャを生成する結合器
   と、 上記結合されたビデオ情報を圧縮符号化して、相互符号
   化されたピクチャ及び基準ピクチャを含む圧縮符号化ピ
   クチャを生成する符号化器とを有し、 該符号化器は、上記相互符号化されたピクチャの上記第
   １の部分のピクチャのための保存された動きベクトルを
   再使用し、該相互符号化されたピクチャのために保存さ
   れた動きベクトルは上記基準ピクチャの部分に関連し、
   該基準ピクチャは、上記第１のビデオ信号のみから得ら
   れると共に、上記相互符号化されたピクチャの他の部分
   のための新たな動きベクトルを生成することを特徴とす
   るビデオ信号処理装置。
2. 【請求項２】 請求項１に記載のビデオ信号処理装置に
   おいて、 上記新たな動きベクトルは、上記第２のビデオ信号から
   少なくとも部分的に得られる上記相互符号化されたピク
   チャの部分のために生成されることを特徴とするビデオ
   信号処理装置。
3. 【請求項３】 請求項１又は２に記載のビデオ信号処理
   装置において、 上記新たな動きベクトルは、上記相互符号化されたピク
   チャの部分のために生成され、該相互符号化されたピク
   チャは上記第１の信号のみから得られ、該第１の信号が
   なかったら、上記保存されているベクトルは、上記第２
   のビデオ信号から少なくとも部分的に得られる上記基準
   ピクチャの部分に関連することを特徴とするビデオ信号
   処理装置。
4. 【請求項４】 請求項１、２又は３に記載のビデオ信号
   処理装置において、 上記符号化器は、上記結合されたビデオ情報のピクチャ
   のために、動きベクトルを計算し、該計算され保存され
   た動きベクトルを、基準マップに対してテストし、該基
   準マップは、上記ベクトルが関連する上記基準ピクチャ
   において、上記第２の信号から少なくとも部分的に得ら
   れた情報の位置を含むことを特徴とするビデオ信号処理
   装置。
5. 【請求項５】 請求項４に記載のビデオ信号処理装置に
   おいて、 上記基準マップは、１画素の解像度を有することを特徴
   とするビデオ信号処理装置。
6. 【請求項６】 請求項４に記載のビデオ信号処理装置に
   おいて、 上記基準マップは、画素の１ブロックの解像度を有する
   ことを特徴とするビデオ信号処理装置。
7. 【請求項７】 請求項６に記載のビデオ信号処理装置に
   おいて、 上記ブロックはマクロブロックであり、そして、上記動
   きベクトルは１マクロブロックの解像度を有することを
   特徴とするビデオ信号処理装置。
8. 【請求項８】 請求項６又は７に記載のビデオ信号処理
   装置において、 若し、上記基準ピクチャにおいて、動きベクトルが関連
   するブロックが、上記第２の信号から得られた情報のど
   んな画素でも有していれば、新たなベクトルが、上記動
   きベクトルに関連する相互符号化されたピクチャのブロ
   ックのために生成されることを特徴とするビデオ信号処
   理装置。
9. 【請求項９】 請求項６又は７に記載のビデオ信号処理
   装置において、 若し、上記基準ピクチャにおいて、動きベクトルが関連
   するブロックが、上記第２の信号から得られた情報の画
   素の大部分を有していれば、新たなベクトルが上記動き
   ベクトルに関連する相互符号化されたピクチャのマクロ
   ブロックのために生成されることを特徴とするビデオ信
   号処理装置。
10. 【請求項１０】 請求項５乃至９のうちのいずれかの請
    求項に記載のビデオ信号処理装置において、 所定の幅の境界は、上記第２の信号から得られた情報の
    位置を示す基準マップ内の位置の周囲に加えられること
    を特徴とするビデオ信号処理装置。
11. 【請求項１１】 請求項１０に記載のビデオ信号処理装
    置において、 請求項６又は７に間接的に依存しているときは、上記境
    界は、少なくとも１ブロックの幅を有することを特徴と
    するビデオ信号処理装置。
12. 【請求項１２】 請求項１０又は１１に記載のビデオ信
    号処理装置において、 上記新たな動きベクトルは、上記保存されているベクト
    ルが、上記境界内の位置に関係している上記結合されて
    いる情報の全部分のために計算されることを特徴とする
    ビデオ信号処理装置。
13. 【請求項１３】 請求項１に記載のビデオ信号処理装置
    において、 上記符号化器は、少なくとも上記第２の信号から得られ
    た、上記相互符号化されたピクチャの位置のため及びベ
    クトルの大きさに関連する所定の幅の境界のための新た
    な動きベクトルを計算することを特徴とするビデオ信号
    処理装置。
14. 【請求項１４】 請求項１３に記載のビデオ信号処理装
    置において、 上記境界は、上記最大動きベクトル範囲に対する所定の
    比率に等しい幅を有することを特徴とするビデオ信号処
    理装置。
15. 【請求項１５】 請求項１３に記載のビデオ信号処理装
    置において、 上記境界の幅は、少なくとも上記最大動きベクトル範囲
    であることを特徴とするビデオ信号処理装置。
16. 【請求項１６】 請求項１４又は１５に記載のビデオ信
    号処理装置において、 上記最大ベクトル範囲は、上記ビデオ情報から計算され
    ることを特徴とするビデオ信号処理装置。
17. 【請求項１７】 請求項１４又は１５に記載のビデオ信
    号処理装置において、 上記最大ベクトル範囲は、上記圧縮された第１のビデオ
    信号に付随するパラメータデータから決定されることを
    特徴とするビデオ信号処理装置。
18. 【請求項１８】 請求項１３、１４、１５、１６又は１
    ７に記載のビデオ信号処理装置において、 上記新たな動きベクトルは、上記境界内の全映像部分の
    ために計算され、そして、上記保存された動きベクトル
    は、上記境界の外側の全映像部分のために使用されるこ
    とを特徴とするビデオ信号処理装置。
19. 【請求項１９】 請求項１乃至１８のうちのいずれかの
    請求項に記載のビデオ信号処理装置において、 上記結合器は、 上記第２のビデオ情報の上記第１の信号のピクチャ内に
    おける位置を少なくとも示すキー信号を発生するキー信
    号発生器と、 上記キー信号によって示された位置において、上記第２
    のビデオ情報を、上記第１のビデオ情報と結合する手段
    とを有することを特徴とするビデオ信号処理装置。
20. 【請求項２０】 請求項１９に記載のビデオ信号処理装
    置において、 上記結合手段は、方程式 Ｃ＝ＡＫ＋（１−Ｋ）Ｂ （但し、Ｋはキー信号で、０≦Ｋ≦１） に従って、 上記第１（Ａ）及び第２（Ｂ）のビデオ信号結合して、
    結合されたビデオ信号（Ｃ）を生成することを特徴とす
    るビデオ信号処理装置。
21. 【請求項２１】 請求項１乃至２０のうちのいずれかの
    請求項に記載のビデオ信号処理装置において、 上記第１の信号は、内符号化されたピクチャ及び相互符
    号化されたピクチャからなり、 上記符号化器は、上記第１の信号の内符号化されたピク
    チャを、上記結合された信号の内符号化されたピクチャ
    として再符号化すると共に、上記第１の信号の相互符号
    化されたピクチャを、上記結合された信号の相互符号化
    されたピクチャとして再符号化することを特徴とするビ
    デオ信号処理装置。
22. 【請求項２２】 Ｉ、Ｐ及びＢピクチャを含むビデオ情
    報を処理するようにした請求項２１に記載のビデオ信号
    処理装置において、 上記符号化器は、上記第１のビデオ信号のＩ、Ｐ及びＢ
    ピクチャを、上記結合された信号のそれぞれのＩ、Ｐ及
    びＢピクチャとして、符号化するように構成されでいる
    ことを特徴とするビデオ信号処理装置。
23. 【請求項２３】 信号のピクチャに関連する変換パラメ
    ータを含む第１のビデオ情報を表す、圧縮された第１の
    ビデオ信号を受けるステップと、 上記変換パラメータは、相互符号化されたピクチャに関
    し、基準ピクチャの部分に関連する動きベクトルを含
    み、 上記ピクチャに関連する上記パラメータを保存すると同
    時に、上記圧縮された第１のビデオ信号を復号する復号
    ステップと、 上記第１のビデオ情報と結合される第２のビデオ情報を
    表す第２のビデオ信号を受けるステップと、 上記第２のビデオ情報を上記第１のビデオ情報と結合し
    て、上記第１の信号のみから得られた第１の部分及び上
    記第２の信号から少なくとも部分的に得られた第２の部
    分からなる結合された情報のピクチャを生成する結合ス
    テップと、 上記結合されたビデオ情報を圧縮符号化して、相互符号
    化されたピクチャ及び基準ピクチャを含む圧縮符号化ピ
    クチャを生成する符号化ステップとを有し、 該符号化ステップは、上記相互符号化されたピクチャの
    上記第１の部分のピクチャのための保存された動きベク
    トルを再使用し、該相互符号化されたピクチャのために
    保存された動きベクトルは上記基準ピクチャの部分に関
    連し、該基準ピクチャは、上記第１のビデオ信号のみか
    ら得られると共に、上記相互符号化されたピクチャの他
    の部分のための新たな動きベクトルを生成することを特
    徴とするビデオ信号処理方法。
24. 【請求項２４】 プログラム可能なビデオ信号処理装置
    で稼働するときに、 信号のピクチャに関連する変換パラメータを含む第１の
    ビデオ情報を表す、圧縮された第１のビデオ信号を受け
    るステップと、 上記変換パラメータは、相互符号化されたピクチャに関
    し、基準ピクチャの部分に関連する動きベクトルを含
    み、 上記ピクチャに関連する上記パラメータを保存すると同
    時に、上記圧縮された第１のビデオ信号を復号する復号
    ステップと、 上記第１のビデオ情報と結合される第２のビデオ情報を
    表す第２のビデオ信号を受けるステップと、 上記第２のビデオ情報を上記第１のビデオ情報と結合し
    て、上記第１の信号のみから得られた第１の部分及び上
    記第２の信号から少なくとも部分的に得られた第２の部
    分からなる結合された情報のピクチャを生成する結合ス
    テップと、 上記結合されたビデオ情報を圧縮符号化して、相互符号
    化されたピクチャ及び基準ピクチャを含む圧縮符号化ピ
    クチャを生成する符号化ステップとを有し、 該符号化ステップは、上記相互符号化されたピクチャの
    上記第１の部分のピクチャのための保存された動きベク
    トルを再使用し、該相互符号化されたピクチャのために
    保存された動きベクトルは上記基準ピクチャの部分に関
    連し、該基準ピクチャは、上記第１のビデオ信号のみか
    ら得られると共に、上記相互符号化されたピクチャの他
    の部分のための新たな動きベクトルを生成するようにし
    たビデオ信号処理方法を、 実行する命令からなることを特徴とするコンピュータプ
    ログラム製品。
25. 【請求項２５】 第１のビデオ情報を表す、圧縮解除さ
    れた第１のビデオ信号及び信号のピクチャに関連する保
    存されている変換パラメータを受ける第１の入力装置
    と、 上記変換パラメータは、相互符号化されたピクチャに関
    し、基準ピクチャの部分に関連する動きベクトルを含
    み、 上記第１のビデオ情報と結合される第２のビデオ情報を
    表す第２のビデオ信号を受ける第２の入力端子と、 上記第２のビデオ情報を上記第１のビデオ情報と結合し
    て、上記第１の信号のみから得られた第１の部分及び上
    記第２の信号から少なくとも部分的に得られた第２の部
    分からなる結合された情報のピクチャを生成する結合器
    と、 上記結合されたビデオ情報を圧縮符号化して、相互符号
    化されたピクチャ及び基準ピクチャを含む圧縮符号化ピ
    クチャを生成する符号化器とを有し、 該符号化器は、上記相互符号化されたピクチャの上記第
    １の部分のピクチャのための保存された動きベクトルを
    再使用し、該相互符号化されたピクチャのために保存さ
    れた動きベクトルは上記基準ピクチャの部分に関連し、
    該基準ピクチャは、上記第１のビデオ信号のみから得ら
    れると共に、上記相互符号化されたピクチャの他の部分
    のための新たな動きベクトルを生成することを特徴とす
    るビデオ信号処理装置。