JP2002500851A - 符号化データストリームのデータ変更方法及び装置 - Google Patents

Abstract

(57)【要約】 符号化データストリームを復号化し及び再符号化する基本トランスコーダを、そのストリームの部分的に変更するデータに対して用いる。その変更を、所定の変更するデータストリームに基づいて、予測されるデータストリームを規定するとともに、トランスコーダの復号化部及び再符号化部との間で復号化されたストリームに、変更するデータストリームと予測されるデータストリームとの間の差を加算することによって行う。向上した実現において、変更するデータストリームを再処理して、復号化したデータストリーム中に、復号化したデータに対する変更するデータの部分的な差を得る。

Description

【発明の詳細な説明】 符号化データストリームのデータ変更方法及び装置 発明の分野 本発明は、サブ画像に分割した連続する画像に対応する符号化データストリー ムのデータを変更する方法であって、 − 前記符号化データストリームを復号化するステップと、 − 復号化されたデータストリームを再符号化するステップとを具える方法に関 するものである。 また、本発明は、そのような方法を実施するビデオ処理装置に関するものであ る。本発明は、例えば、放送局がそれ自体のロゴのような追加のデータを画像の シーケンスに導入することを所望する場合に有用であり、ＭＰＥＧ−２圧縮(Ｍ ＰＥＧ−２はテレビジョン放送において一般的な規格である。)の分野だけでな く、より一般的なデジタルビデオデータ圧縮装置における用途において見られる 。 発明の背景 そのような状況において、すなわち、存在する符号化ビットストリームの送信 前に追加のデジタルデータを加算する必要があるとき、最も簡単な解決は、その ような加算を行う前にそのビットストリームを復号化することである。この場合 、変更されたビットストリームは、再符号化され及び送信される。しかしながら 、一般的には、完全な復号化は、デコーダ及びエンコーダを必要とするので高価 なものと考えられる。さらに、再評価モード及びベクトルを伴う再符号化によっ て、ロゴの付加によって触れられていない領域にアーチファクトが生じるおそれ がある。 発明の要約 したがって、本発明の目的の一つは、予め存在する符号化ビットストリームに データを追加する際の低コストの解決を提案することである。 このために、本発明は、明細書の冒頭で説明したような方法に関するものであ り、− 変更するデータストリームの入力に基づいて、予測されるデータストリ ームを規定するステップと、 − 前記復号化されたデータストリームを再符号化する前に、前記変更するデー タストリームと前記予測されるデータストリームとの間の差を前記復号化された データストリームに加算するステップを更に具えることを特徴とするものである 。 この方法は、混合ステップによって、追加の信号を、トランスコーダの差信号 に加算することができる特定の補正信号に変換する。 本発明の他の目的は、データの追加に対して向上した品質のデータの挿入を行 う向上した方法を提案する。 このために、本発明は、前記変更するデータストリームを再処理して、前記復 号化されたデータストリーム中に、前記変更するデータと前記復号化されたデー タとの差を得るステップを更に具えることを特徴とする。 本発明の他の目的は、上記方法を実施する装置を提案することである。 このために、本発明は、第１の実現において、データをビデオ符号化データス トリームに加算するビデオ処理装置であって、 （１）前記データストリームを復号化し及び再符号化するトランスコーダと、 （２）加算分岐とを具え、 その加算分岐が、 （ｉ）これら追加のデータ及び前記トランスコーダによって規定された移動ベク トルに基づいて、予測される信号を規定し、かつ、 （ii）前記トランスコーダの復号化部と再符号化部との間のデータストリームへ の挿入を考慮して、前記追加のデータと前記予測される信号との間の差を規定す るようにしたことを特徴とするビデオ処理装置に関するものである。 また、本発明は、第２の実現において、データをビデオ符号化データストリー ムに挿入するビデオ処理装置であって、 （１）前記データストリームを復号化し及び再符号化するトランスコーダと、 （２）挿入分岐とを具え、 その挿入分岐が、 （ｉ）これら追加のデータに基づいて、予測される信号を規定し、 （ii）予め処理された信号及び前記トランスコーダで規定した移動ベクトルに基 づいて、予測される信号を規定し、かつ、 （iii）前記トランスコーダの復号化部と再符号化部との間のデータストリーム への挿入を考慮して、前記予め処理された追加のデータと前記予測される信号と の間の差を規定するようにしたことを特徴とするビデオ処理装置に関するもので ある。 米国特許番号第５６９１９８６号において、符号化データストリームにデータ を挿入する方法及び装置が記載されている。しかしながら、説明されるような解 決では、そのストリームは、実際には、多重化された基本データストリームであ り、それをデマルチプレクサ処理してこれら基本ストリームのうちの一つを抽出 し、この抽出されたストリーム上でデータ減少動作を実行し、かつ、そのデータ を、減少したデータストリームに挿入する必要がある。本発明は個別のオブジェ クトを有し、それは、画像へのデータの追加又は好適例における他の画像データ による画像の一部の局所的な置換となる。 図面の簡単な説明 本発明のこれら及び他の態様を、以後説明する実施の形態を参照して明らかに する。 図面中、 − 図１及び２は、従来のビデオデコーダ及びエンコーダを示す。 − 図３は、入力するビットストリームにロゴを付加する送信回路のあり得る形 態を示す。 − 図４は、ロゴ加算器を有しない既知のトランスコーダの線形図を示す。 − 図５は、ロゴ加算器を設けた本発明によるトランスコーダを示す。 − 図６は、ロゴ挿入装置を設けた本発明によるトランスコーダを示す。 − 図７は、ロゴ挿入装置で行われる演算を示す。 − 図８及び１０は、輝度成分及びクロミナンス成分上で実行される処理を示し 、図１１及び１２は、そのような処理の後に実行されるロゴクリッピングを示す 。 発明の説明 図１に示すような従来のビデオデコーダは、（各々にＶＬＤ，ＩＱ，ＩＤＣＴ を付した）可変長復号化回路１、逆量子化回路２及び逆周波数変換回路３を縦続 に 具える復号化チャネル１２と、（各々にＭＥＭ，ＣＯＭＰ，Ａを付した）デコー ダの出力信号を受信する画像メモリ４、（このメモリ４の出力信号及びデコーダ によって受信される移動ベクトルＶ（ｎ）を圧縮の際に考慮する）移動圧縮回路 ５並びに回路３及び５の出力信号の加算器６を具える移動圧縮チャネル１４とを 有する。（画像メモリ４にも送信される）デコーダの出力画像は、復号化チャネ ル１２の回路３の出力部で利用できる復号化差信号に予測（回路５の出力）を加 えることによって再構成される。 図２に示すような従来のビデオエンコーダは符号化及び復号化チャネル１３を 有し、それは、（各々にＤＣＴ，Ｑ，ＶＬＣを付した）離散余弦変換回路２５、 量子化回路２６及び可変長符号化回路２７と、（各々にＩＱ及びＩＤＣＴを付し た）回路２６の出力部に縦続する逆量子化回路２８及び逆離散余弦変換回路２９ を具え、そのビデオエンコーダは、入力信号から移動圧縮予測を減算する予測チ ャネル１１も有し、その予測チャネルは、（各々にＡ，ＭＥＭ，ＣＯＭＰ，Ｓを 付した）予測前に画像を再構成する加算器２１、画像メモリ２２、移動圧縮回路 ２３及び減算器２４を具える。そのような圧縮は、以前に評価した移動ベクトル Ｖ（ｎ）を考慮する。 ロゴのようなデータを伝送回路の入力ビットストリームに付加するあり得る方 法及び装置を図３に示す。その回路は、（「エンコーダ１」と称する）第１エンコ ーダ３１と、エンコーダ３１の出力部で利用できる符号化ビットストリームにロ ゴを付加するサブシステム３０５と、その後段のデコーダ３５（「デコーダ２」） とを具える。エンコーダとデコーダとの間に設けたサブシステムそれ自体は、図 示したように、デコーダ３２(「デコーダ１」)、ロゴ加算器３３及びエンコーダ３ ４（「エンコーダ２」）とを具える。したがって、デコーダ３２及びエンコーダ３ ４から開始され、その相補的な利点が取り出され、かつ、一部が簡単になって、 最終的には本発明によるトランスコーダの線形図に到達する。 図２によれば、第１エンコーダ３１に対して、 Ｒ(ｎ,１)＝Ｉ(ｎ)−Ｐ(Ｉ’(ｎ−１),１,Ｖ(ｎ)) （１） となる。この場合、Ｒ（.）及びＰ（.）の指標（１,）は「第１」エンコーダ３ １（＝エンコーダ１）を表し、Ｉ（ｎ）を、エンコーダの元のビデオ入力とし、 Ｐ （Ｉ’(ｎ−１)，１，Ｖ(ｎ)）を、以前に「復号化された」画像Ｉ’(ｎ−１)に 移動ベクトルＶ（ｎ）を付加することによって算出した予測信号とし、それを元 の入力ビットストリームＩ（ｎ）から減算して、符号化すべき差信号Ｒ（ｎ）を 得る必要があり、Ｒ（ｎ）は、この差信号を表す。エンコーダの予測チャネルの 入力部で利用できる信号Ｒ’(ｎ)は、符号化誤差と称する値ｅ(ｎ)だけＲ(ｎ)と 相違し、Ｒ’(ｎ)はＲ（ｎ）＋ｅ（ｎ）に等しくなり、したがって、この予測チ ャネルの加算器の出力部の信号はＩ’(ｎ)＝Ｉ（ｎ）＋ｅ（ｎ）となる。 エンコーダ３１に続く第１デコーダ３２に対しては、図１に従う場合と同様に 、 Ｉ’(ｎ,１)＝Ｒ’(ｎ,１)＋Ｐ(Ｉ’(ｎ−１),１;Ｖ(ｎ)) （２） となる。この場合、Ｉ’(.)，Ｒ’(.)及びＰ（.）の指標（，１）は「第１」デ コーダ３２を表し、Ｒ’(ｎ)を、復号化した差信号とし、Ｐ（Ｉ’(ｎ−１)，１ ；Ｖ(ｎ)）を、Ｒ’(ｎ)に付加すべき予測とし、Ｉ’(ｎ)はデコーダの出力を表 す。既に説明したように、Ｉ’(ｎ，１)を、式 Ｉ’(ｎ，１)＝Ｉ（ｎ）＋ｅ（ｎ，１） で示すこともでき、すなわち、デコーダの出力は、Ｉ（ｎ）の符号化動作中の元 の入力信号Ｉ（ｎ）及び符号化誤差ｅ（ｎ）の和となる。ロゴ加算器３３の出力 部では、結果的に、 Ｊ’(ｎ,１)＝Ｉ’(ｎ,１)＋Ｌｏｇｏ(ｎ) （３） となり、この場合、Ｉ’(ｎ)をデコーダ３２の出力とし、Ｌｏｇｏ（ｎ）を、主 ビットストリームに付加すべきデータ（例えばロゴ）とする。結果的に得られる 出力Ｊ’(ｎ)はエンコーダ３４に送信される。 この第２エンコーダに対しては、（第１エンコーダ３１の場合と同様に） Ｒ(ｎ,２)＝Ｊ’(ｎ,１)−Ｐ(Ｊ’(ｎ−１),２;Ｖ(ｎ)) （４） となり、この場合、Ｒ（.）及びＰ（.）の指標（，２）はこの「第２」エンコー ダ３４を表し、Ｐ（Ｊ’(ｎ−１)，２；Ｖ(ｎ)）を、ロゴ加算器３３の出力Ｊ’ （ｎ−１）から減算して符号化すべき差信号を得る必要がある予測とし、Ｒ（ｎ ）は、その差信号を表す。 最後に、第２デコーダ３５に対しては、（第１デコーダ３２の場合と同様に） Ｊ’(ｎ,２)＝Ｒ’(ｎ,２)＋Ｐ(Ｊ’(ｎ−１),２;Ｖ(ｎ)) （５） となり、この場合、Ｊ’(.)，Ｒ’(.)及びＰ（.）の指標（，２）はこの「第２ 」デコーダ３５を表し、Ｒ’(ｎ)を、復号化された差信号とし、Ｐ（Ｊ’(ｎ− １),２；Ｖ(ｎ)）を、Ｒ’(ｎ)に付加すべき予測とし、Ｊ’(ｎ)はデコーダの出 力を表す。デコーダ３２に対して、Ｊ’(ｎ，２)を式 J'(n,2)=J'(n,1)+e(n,2) J'(n,2)=J'(n,1)+Logo(n)+e(n,2) J'(n,2)=J'(n,1)+e(n,1)+Logo(n)+e(n,2) （６） で表現することができ、これは、送信回路の出力信号Ｊ’(ｎ，２)が元の入力信 号Ｉ(ｎ)、第１符号化誤差(第１エンコーダ及びデコーダでの符号化／復号化)、 第２符号化誤差（第２エンコーダ及びデコーダでの符号化／復号化）及び付加デ ータの和に等しいことを意味する。 移動補償オペレータを用いると、 P(J'(n-1),2;V(n))=P[((J'(n-1),1)+(e(n-1),2));V(n)] （７） と表現することができ、それは、式 R(n,2)=J'(n,1)-P[((J'(n-1),1)+(e(n-1),2));V(n)] （８） で関係（４）を表現することができる。圧縮オペレータの線形性を再び用いると 、 P(J'(n-1),1;V(n))=P[(I'(n-1)+Logo(n.1));V(n)] 又は P(J'(n-1),1;V(n))=P(I'(n-1),1;V(n))+P(Logo(n-1),1;V(n)) （９） となる。関係（８）は、 R(n,2)=I'(n,1)+Logo(n)-P(e(n-1),2;V(n)) -P(I'(n,1),1;V(n))-P(Logo(n-1),1;V(n)) （10） 又は関係（２）から、 R(n,2)=R'(n-1)-P(e(n-1),2;V(n)) +Logo(n)-P(e(n-1),2;V(n)) -P(I'(n-1),1;V(n))-P(Logo(n-1),1;V(n)) （11） となり、それは最終的には以下の関係（１２）となる。 R(n,2)=R'(n-1)-P(e(n-1),2;V(n)) +Logo(n)-P(e(n-1);V(n)) （12） それは、本発明によって提案したようなロゴ加算器を有するトランスコーダの最 終システム式となる。 ロゴ加算器を有しないトランスコーダの一般的な線形図を、（図５と比較する ために）図４で再び示す。それは、差復号化分岐４１（可変長復号化ＶＬＤ＋逆 量子化ＩＱ＋逆離散余弦変換ＩＤＣＴ）と、符号化及び復号化分岐４２（逆離散 変換ＤＣＴ＋量子化Ｑ＋可変長符号化ＶＬＣ；逆量子化ＩＱ＋逆離散余弦変換Ｉ ＤＣＴ）と、擬似予測分岐４３と称する中間分岐（第１減算器Ｓ＋メモリＭＥＭ ＋移動ベクトルＶ（ｎ）に基づく移動補償ＣＯＭＰ＋第２減算器Ｓ）とを具える 。この分岐43がそのように称される理由は、正確にはそれが基本エンコーダの場 合のような従来の予測ではないからであり、この場合には第１加算器は減算器に 置換されている。既に説明したような信号Ｒ’(ｎ，１)，Ｒ(ｎ，２)，Ｒ’(ｎ ，２)，ｅ(ｎ，２)，Ｖ(ｎ)，Ｐ（ｅ(ｎ−１)，２；Ｖ(ｎ)）を図４に示す。 本発明によるすなわちロゴ加算器を有するトランスコーダの対応する形態を図 ５に示し、この場合、同一パーツに図４と同一符号を付すものとする。追加のパ ーツをロゴ付加分岐５０とし、それは、付加すべきロゴ（信号Ｌｏｇｏ(ｎ)）を 受信するメモリＭＥＭ５１と、メモリ５１の出力及びベクトルＶ（ｎ）を受信す るとともに予測したデータストリームを発生させる移動圧縮回路ＣＯＭＰ５２と 元の信号Ｌｏｇｏ（ｎ）と回路５２の出力（予測したデータストリーム）で利用 できる移動補償された信号Ｐ（Ｌｏｇｏ(ｎ−１)；Ｖ(ｎ)）との間の差を発生さ せる減算器Ｓ５３と、その減算器５３の出力信号を（連続する画像の全シーケン スに相当する）主ビットストリームに導入する加算器５４とを有する。したがっ て、ロゴ付加は、入力ビットストリームに差を加算することによって行われ、こ の差は、移動補償したロゴ予測をロゴから減算することによって形成され、その ような移動補償したロゴ予測は、以前に記憶されたロゴを有する基準画像に基づ くものであり、入力する主ビットストリームと同一のモード及びベクトルを使用 する。 これまで説明した方法及び装置を更に向上させることができる。実際には、そ れを、画像の他の部分を変更することなく、（ロゴのような）追加のデータを主 ビデオビットストリームに付加するのではなく挿入することによって行われる。 そのようなデータの挿入、すなわち、画像の領域（すなわち画像のシーケンス ）のそのようなデータによる置換は、元の画素（＝画像成分）に対する完全なア クセスを必要とする非線形処理である。したがって、高品質のロゴ挿入に対して 、入力するビットストリームの完全な復号化を行う必要がある。本発明によれば 、そのような完全な復号化は、低コストの粗い復号化に置換される(ここではＭ ＰＥＧ−２規格の場合について説明する。)。 本発明によるすなわちロゴインサータを有するトランスコーダの対応する形態 を図６に示し、この場合、同一パーツに図４と同一符号を付すものとする。（図 ４に対する）追加のパーツは、ここで詳細に説明するロゴ挿入装置４００である 。 このロゴ挿入装置において、４ステップが実現される。第１ステップは、評価 段４１０で実行されるいわゆるＤＣ評価段である。ＭＰＥＧシーケンスの各画像 は、マクロブロックと称する移動補償ユニットに細分される。さらに、ＭＰＥＧ 規格において、３タイプの画像：他の画像を参照することなく符号化されたＩ（ すなわちイントラ）画像、以前の画像（Ｉ又はＰ）を参照して符号化されたＰ（ すなわち予測）画像並びに以前及び以後の画像（Ｉ又はＰ）を参照して符号化さ れたＢ（すなわち双方向予測）画像が考察される。これらＩ画像及びＰ画像は参 照フレームと称される。段４１０において、各マクロブロックの平均値は、（関 連のバッファメモリ４０１及び４０２に以前に格納された）基準フレームの平均 値及び入力する差の現在の平均値（図４のＲ’(ｎ，１)を付した信号）に従って 評価される。ＤＣＢ（ｂ，Ｙ）が、成分Ｙのマクロブロックｂに対する予測ＰＲ （ｂ，Ｙ）の平均値を表し(そのような演算の説明を、補間したマクロブロック の場合について図７に付与する。二つの基準画素の各々のマクロブロック、予測 ＰＲ（ｂ，ｙ）及びその平均値ＤＣＰ（ｂ，Ｙ）を示す。)、ＡＣＲ（ｂ，Ｙ） が同一成分Ｙの同一マクロブロックに対して差（すなわち、トランスコーダの差 復号化分岐４１の出力部のＲ’(ｎ，１)と称する信号）の平均値を表し、かつ、 ＭＤＣ（ｂ，Ｙ）が同一成分Ｙの同一マクロブロックｂの評価された平均値を表 す場合、 ＭＤＣ（ｂ，Ｙ）＝ＤＣＰ（ｂ，Ｙ）＋ＡＣＲ（ｂ，Ｙ） （１３） となる。この表現は、成分Ｙの場合に与えられるが、輝度Ｙの代わりにクロミナ ンス成分Ｕ，Ｖのいずれかを有する場合も同一である。 トランスコーダの入力部の入力ビットストリームが、イントラ画像上でしばし ば十分にリフレッシュすべき予測画像を許容する標準的な放送ＧＯＰ持続時間（ 例えば、Ｎ＝１２）を与える場合、そのような評価に顕著なドラフトが生じない ことが観察される(ＧＯＰすなわち画像群は、Ｉ画像及びそれ自体は含まない次 のＩ画像までの全ての連続する画像からなり、したがって、ＮはＧＯＰのサイズ として規定され、ＭＰＥＧ規格の最も一般的なものｈＮ＝１２となる。)。 第２ステップは、処理段４２０で実行されるロゴ処理ステップである。実際に は、ロゴ画素値の処理は、画素成分がどのようなものであってもロゴの可視性及 び一致を保持するために実行される。 ＭＶ（ＣＰ）＋ＭＶ（Ｌｏｇｏ(ＣＰ)）＝ＲＱＭ（ＣＰ） （１４） この場合、ＣＰは、輝度成分Ｙ又はクロミナンス成分（Ｕ，Ｖ）のうちの任意の ものを表し、ＭＶ（ＣＰ）を、ロゴを成分ＣＰに挿入する必要がある場合の元の 領域の平均値とし(これら値は、既に表した関係（１３）に従って評価される。) 、ＭＶ（Ｌｏｇｏ(ＣＰ)）を、処理されたロゴの平均値とし、ＲＱＭ（ＣＰ）は 、ロゴ領域におけるロゴ挿入後の画像の要求される平均値に相当する。したがっ て、マクロブロックｂに挿入すべきロゴの画素値Ｌｏｇｏ（ｂ，ＣＰ）が、ロゴ 処理後に関係（１５）によって規定される。 Ｌｏｇｏ（ｂ，ＣＰ）＝Ｌｏｇｏ_ｏｒｉ（ｂ，ＣＰ）＋ＲＱＭ（ＣＰ） −ＭＶ（ＣＰ）−ＭＶ_Ｌｏｇｏ_ｏｒｉ（ＣＰ） （１５） この場合、Ｌｏｇｏ_ｏｒｉ（ｂ，ＣＰ）は、マクロブロックｂに挿入すべき ロゴの元の画素値を表し、ＭＶ_Ｌｏｇｏ_ｏｒｉ（ＣＰ）は、成分ＣＰの元のロ ゴの平均値を表す。 このロゴ処理を図８−１０に示す。図８は、挿入前の元のロゴ信号Ｌｏｇｏ_ ｏｒｉ(ｂ，ＣＰ)、その平均値ＭＶ_Ｌｏｇｏ_ｏｒｉ(ＣＰ)，ＲＱＭ（ＣＰ）及 びＭＶ（ＣＰ）を表し、図９は、ＭＶ（ＣＰ）＋Ｌｏｇｏ（ｂ，ＣＰ）＝ＲＱＭ （ＣＰ）となるのに必要なものを示し、図１０は、要求される結果（図示したよ うに、ＭＶ（ＣＰ）−ＲＱＭ（ＣＰ）＋ＭＶ_Ｌｏｇｏ_ｏｒｉ（ＣＰ）に等しい 値のロゴ信号のシフト）を得るために実行される適合の原理を示す。 クロミナンス成分に対して、元のロゴに対するロゴの一致が必要とされ、すな わち、処理されたロゴを画像に挿入することによって、元のロゴの色となる。し たがって、クロミナンス成分Ｕ及びＶに対して、ＲＱＭ（ＣＰ）はＭＶ_Ｌｏｇ ｏ_ｏｒｉ（ＣＰ）となる。輝度に対して、オリジナルに対する好適な一致（す なわち、ＲＱＭ（Ｙ）＝ＭＶ_Ｌｏｇｏ_ｏｒｉ(Ｙ)）と（明るい領域にロゴが暗 く出現し又は暗い領域にロゴが明るく出現するような）可視性との間で選択を行 うことができる。この最後の場合、ＲＱＭ（Ｙ）＝１２８となる。 第３ステップは、クリッピング段４３０で実行されるロゴクリッピングステッ プである。ＭＰＥＧ−２規格によれば、デコーダ側で、メモリに格納した再構成 された画像は、０と２５５との間でクリップされる。エンコーダ側では同様なこ とを行うことができない。その理由は、入力するビットストリームの完全な復号 化が行われないからである。この際、クリッピングステップはマクロブロックに 基づいて行われる。正確な画素値は未知であるが、この状況はクリッピングにマ ージンＭＧをとることによって補償される。この場合、（常にＣＰと称される） 各成分Ｙ，Ｕ又はＶに対して、Ｌｏｇｏ（ｂ，ＣＰ）は、 Ｏ＋ＭＧ＜ＭＶ（ｂ，ＣＰ）＋Ｌｏｇｏ（ｂ，ＣＰ）＜２５５−ＭＧ（１６） となるようにクリップされ、それは、 ＭＧ−ＭＶ（ｂ，ＣＰ）＜Ｌｏｇｏ（ｂ，ＣＰ） （１７） Ｌｏｇｏ（ｂ，ＣＰ）＜２５５−ＭＧ−ＭＶ（ｂ，ＣＰ） （１８） を与える。 このようなロゴクリッピングを図１１及び１２に示し、この場合、図１１は、 ＭＶ(ｂ，ＣＰ)，ＭＶ（ｂ，ＣＰ）＋Ｌｏｇｏ（ｂ，ＣＰ）並びにクリッピング 範囲ＭＧ及び２５５−ＭＧを表し、したがって関係（１６）を表し、それに対し て、図１２は、同様な関係（１７）及び（１８）を表す。 第４ステップは、図５に示すロゴ追加分岐５０と同一のロゴ追加段４４０で実 行されるロゴ追加ステップである。この段４４０は、クリッピング段４３０の出 力部で利用できるクリップされたロゴを受信するメモリと、そのメモリの出力及 びトランスコーダで規定されたベクトルＶ（ｎ）を受信する移動補償回路と、（ ロゴ挿入装置４００の処理部の出力部で利用できるクリップされたロゴと移動補 償回路の出力部で利用できる移動補償されたものとの間の差を発生させる）減算 器 と、（減算器の出力信号を主ビットストリームに挿入する）加算器とを具える。 これら４個の構成要素（メモリ、移動補償回路、減算器、加算器）は、図５の４ 個の構成要素と同様のものである。したがって、ロゴ挿入は、入力するビットス トリームへの差の加算によって実行され、この差は、（既に説明したようにして 予め処理された）ロゴと予め処理されたロゴから取り出される移動補償された予 測との間の差を規定することによって形成され、それは、入力する主ビットスト リームと同一の移動ベクトルを用いる。

───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＣＹ， ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，Ｉ Ｔ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＢＲ，ＣＮ，Ｊ Ｐ，ＫＲ

Claims (1)

1. 【特許請求の範囲】 １．サブ画像に分割した連続する画像に対応する符号化データストリームのデー タを変更する方法であって、 − 前記符号化データストリームを復号化するステップと、 − 復号化されたデータストリームを再符号化するステップとを具える方法にお いて、 − 変更するデータストリームの入力に基づいて、予測されるデータストリーム を規定するステップと、 − 前記復号化されたデータストリームを再符号化する前に、前記変更するデー タストリームと前記予測されるデータストリームとの間の差を前記復号化された データストリームに加算するステップを更に具えることを特徴とする方法。 ２．前記復号化ステップと再符号化ステップとの間に擬似予測サブステップを設 け、そのサブステップが、 − 前記再符号化ステップ中に出現した符号化誤差の規定オペレーションと、 − 各サブ画像に対して予め決定されるとともに前記符号化誤差に適用される移 動ベクトルに基づく移動補償オペレーションと、 − 前記復号化されたデータストリームと前記移動補償オペレーションの出力ス トリームとの間の差によって差信号を規定する減算オペレーションとを具える請 求の範囲１記載の方法において、前記規定ステップが、 − 前記変更するデータストリームを格納するオペレーションと、 − 格納したデータストリームに適用される前記移動ベクトルに基づいて移動を 補償するオペレーションと、 − 前記移動補償オペレーション後に利用できる前記予測されるデータストリー ムを前記変更するデータストリームから減算するオペレーションとを具えること を特徴とする方法。 ３．データをビデオ符号化データストリームに加算するビデオ処理装置であって 、 （１）前記データストリームを復号化し及び再符号化するトランスコーダと、 （２）加算分岐とを具え、 その加算分岐が、 （ｉ）これら追加のデータ及び前記トランスコーダによって規定された移動ベク トルに基づいて、予測される信号を規定し、かつ、 （ii）前記トランスコーダの復号化部と再符号化部との間のデータストリームへ の挿入を考慮して、前記追加のデータと前記予測される信号との間の差を規定す るようにしたことを特徴とするビデオ処理装置。 ４．前記変更するデータストリームを再処理して、前記復号化されたデータスト リーム中に、前記変更するデータと前記復号化されたデータとの差を得るステッ プを更に具えることを特徴とする請求の範囲１又は２記載の方法。 ５．前記復号化ステップと再符号化ステップとの間に擬似予測サブステップを設 け、そのサブステップが、 − 前記再符号化ステップ中に出現した符号化誤差の規定オペレーションと、 − 各サブ画像に対して予め決定されるとともに前記符号化誤差に適用される移 動ベクトルに基づく移動補償オペレーションと、 − 前記復号化されたデータストリームと前記移動補償オペレーションの出力ス トリームとの間の差によって差信号を規定する減算オペレーションとを具える請 求の範囲１記載の方法において、前記再処理ステップが、 − 前記データストリームに対応する現在の画像の全てのサブ画像の平均値を見 積もるオペレーションと、 − 追加のデータを再処理して、どのような画像内容であっても前記追加のデー タの可視性及び一致を保持するオペレーションと、 − 再処理した前記追加のデータをマクロブロックに基づいてクリップするオペ レーションとを有することを特徴とする請求の範囲４記載の方法。 ６．データをビデオ符号化データストリームに挿入するビデオ処理装置であって 、 （１）前記データストリームを復号化し及び再符号化するトランスコーダと、 （２）挿入分岐とを具え、 その挿入分岐が、 （ｉ）これら追加のデータに基づいて、予測される信号を規定し、 （ii）予め処理された信号及び前記トランスコーダで規定した移動ベクトルに基 づいて、予測される信号を規定し、かつ、 （iii）前記トランスコーダの復号化部と再符号化部との間のデータストリーム への挿入を考慮して、前記予め処理された追加のデータと前記予測される信号と の間の差を規定するようにしたことを特徴とするビデオ処理装置。