JP2001128184A - 映像信号処理装置 - Google Patents

映像信号処理装置

Info

Publication number
JP2001128184A
JP2001128184A JP2000267041A JP2000267041A JP2001128184A JP 2001128184 A JP2001128184 A JP 2001128184A JP 2000267041 A JP2000267041 A JP 2000267041A JP 2000267041 A JP2000267041 A JP 2000267041A JP 2001128184 A JP2001128184 A JP 2001128184A
Authority
JP
Japan
Prior art keywords
video signal
frame
information
signal processing
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000267041A
Other languages
English (en)
Inventor
Robert Webb
ロバート ウェブ
Nicholas Ian Saunders
アイアン サウンダーズ、ニコラス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Europe BV United Kingdom Branch
Original Assignee
Sony United Kingdom Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony United Kingdom Ltd filed Critical Sony United Kingdom Ltd
Publication of JP2001128184A publication Critical patent/JP2001128184A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Studio Circuits (AREA)

Abstract

(57)【要約】 （修正有） 【課題】 ２つ以上の圧縮された映像信号を混合、ワイ
プ、スーパーインポーズする場合の画質の低下を防ぐ。 【解決手段】 映像信号処理装置は、信号のフレームに
関連するとともに圧縮に関係するパラメータを含む圧縮
された第１の映像信号（Ａ）が供給される第１の入力端
子を備える。復号器（Ｄ１）は、フレームに関連するパ
ラメータを保存しつつ、圧縮された第１の映像信号を復
号する。第２の入力端子は、第１の映像情報に結合され
る追加の映像情報（Ｂ）が供給される。結合器（１１
０）は、追加の映像情報を第１の映像情報にスーパーイ
ンポーズする。符号化器（Ｅ２）は、結合された映像情
報を符号化する。この符号化器は、スーパーインポーズ
された映像情報から導出されない結合された情報の少な
くとも一部の符号化に保存されたパラメータを再使用す
る。符号化器は、ロゴ情報の端部を符号化し、ロゴ内の
領域内より高い画質にする。

Description

【発明の詳細な説明】
【０００１】発明の背景 発明の分野 本発明は、映像信号処理装置（video signal processo
r）に関し、例えば、２以上の映像信号を含む圧縮デー
タの結合処理に関する。本発明の実施例では、既知のＭ
ＰＥＧ２規格に準拠した圧縮映像信号について説明する
が、本発明はこの規格に限定されるものではない。
【０００２】従来の技術 ２つ以上の映像信号を混合（mix）、ワイプ（wipe）又
はスーパーインポーズ（superimpose）することがしば
しば必要とされる。例えば、いわゆるワイプ効果は、テ
レビジョン番組の２つの異なる場面（scene）を切り換
えるのに用いられ、いわゆるロゴ（logo）すなわち字幕
や制作者一覧等のコンピュータで生成された信号を、背
景の画像を乱すことなくスーパーインポーズする必要が
ある。
【０００３】この操作は、アナログ映像信号を用いて、
又は圧縮されていないデジタル信号を用いても、比較的
簡単に行うことができる。キー信号（key signal）を
用いて、２つの映像信号（信号Ａ、Ｂ）のレベルを画素
毎に制御し、そして、レベルが制御された２つの信号を
加算する。キー信号Ｋ、入力画素レベルＡ，Ｂ及び出力
画素値の基本的な関係は以下の式で表すことができる。
【０００４】出力画素値＝Ａ（１−Ｋ）＋ＢＫ この処理は、各出力画素に対して施される。したがっ
て、特定画素位置において信号Ａを信号Ｂによって完全
に置き換えるときは、キー信号は１（又は１００％）で
あり、２つの画素を５０：５０で混合するときは、キー
値は０．５又は５０％である。
【０００５】入力の一方又は両方が圧縮映像ストリーム
であると、事情は困難になる。ＭＰＥＧ２映像ストリー
ムのような圧縮映像ストリームにおいては、画素は一般
にマクロブロックのようなブロックで圧縮されているの
で、圧縮映像信号から特定画素の値を直接取り出すこと
はできない。
【０００６】また、圧縮映像信号は、信号の伝送や格納
に用いられるデータ量において全体的な制限が課される
ことがしばしばある。ピクチャ（picture）からピクチ
ャには多少の変化があり、ピクチャ群（group-of-pictu
res：以下、ＧＯＰという。）からＧＯＰにも変化があ
るが、時間平均データレートは、しばしば伝送チャンネ
ル又は格納チャンネルの容量によって制限される。ピク
チャからピクチャ又はＧＯＰからＧＯＰへの許容される
変化量は、結合される２つの信号が、同じ公称データレ
ート（nominal data rate）を有するが、非常に異なる
瞬時データレート（instantaneous data rate）を有す
ることを意味する。したがって、１以上の圧縮信号を含
む映像信号の一群から複合映像信号（composite video
signal）を生成する際には、データのオーバーフロー又
はアンダーフローを起こさないように注意する必要があ
る。
【０００７】この問題に関連する圧縮映像信号の第３の
特徴は、現ピクチャのブロックに類似する時間的に先行
又は後続するピクチャのブロックを示す動きベクトルが
しばしば用いられ、この動きベクトルにより、現ピクチ
ャの符号化に必要なデータ量を削減できることである。
【０００８】これらの問題を取り扱う１つの方法は、全
ての圧縮入力信号を伸長（decompress）し、混合などの
処理を非圧縮領域（non-compressed domain）で実行
し、処理された複合画像（composite picture）を再圧
縮（recompress）することである。
【０００９】ＭＰＥＧ２方式のようなシステムでは、圧
縮の世代ごとに、圧縮画像（image）の画質が低下する
傾向にある。ロゴ情報などの単なる追加により、ロゴ情
報が追加される画像全体の画質が低下することは、望ま
しくない。
【００１０】発明の開示 本発明の１つの特徴によると、映像信号処理装置は、信
号のフレームに関連するとともに圧縮に関係するパラメ
ータを含む第１の圧縮映像信号が供給される第１の入力
端子と、フレームに関連する圧縮パラメータを保存しつ
つ、第１の圧縮映像信号を復号する復号器と、第１の圧
縮映像情報に結合される追加の映像情報が供給される第
２の入力端子と、追加の映像情報を第１の映像情報に結
合し、結合された情報のフレームを生成する結合器と、
結合された映像信号のフレームを符号化し、追加の映像
情報を含まない結合された情報のフレームの一部の符号
化及び追加の情報を含む他の部分について、フレームの
他の部分の端部領域（edge region）を端部領域でない
他の部分の領域より高画質に符号化するため、各フレー
ムの保存パラメータを再使用する符号化器とを備える。
【００１１】追加の情報（ロゴ情報）を含まない結合さ
れた情報の一部の保存された圧縮パラメータを再使用す
ることにより、結合された映像情報の全フレームを完全
に再符号化する場合より、全体の画質の劣化は小さくな
る。
【００１２】ロゴ情報の端部領域（edge region）は、
主観画質に関しては、重要であることがわかっている。
ロゴの内部よりロゴの端部を高画質に符号化すること
で、主観画質が改善される。
【００１３】好ましい実施の形態では、端部領域は、第
１の信号が非端部領域より高画質である場合のみ、ロゴ
情報の非端部領域より高画質に符号化される。
【００１４】好ましい実施の形態では、符号化器は、端
部領域を量子化パラメータの所定値Ｑで符号化する。本
実施の形態では、端部領域は、キー信号の値が、閾値よ
り小さいことによって規定することができる。
【００１５】本発明の好ましい実施の形態では、所定の
アルゴリズムに応じて決められる量子化パラメータは、
ロゴ情報を含むフレームの一部の非端部領域にのみ適用
される。これによって、ロゴの量子化は、第１の情報の
みを含む画像領域の量子化とは別に決められる。したが
って、ロゴは、任意の量によって量子化することができ
る。この量は、原則として、だいたい第１の情報の量と
同じであろう。しかし、現在、ユーザは、第１の情報の
質を維持するため、追加の情報の質を低下させる傾向に
ある。
【００１６】１つの実施の形態では、追加の情報の量子
化は、ユーザによって、例えば固定値に選択される。ユ
ーザは、追加の情報が所望の画質になるような値を選択
する。このような追加の情報には、例えば静的識別ロゴ
（station identification logo）又は「アイデント（i
dent）」があり、これらは、主画像にスーパーインポー
ズされ、主画像と同じ質を必要としない。
【００１７】もう１つの実施の形態では、領域には第１
の情報と追加の情報が両方含まれ、領域は、この領域に
おける追加の情報の量子化の固定値と第１の情報の量子
化の保存値の重み付け平均に従って量子化される。
【００１８】領域は、例えばＭＰＥＧ２ビットストリー
ムにおいて用いられるマクロブロックである。
【００１９】本発明の好ましい実施の形態においては、
映像信号処理装置は、追加の情報を含む画像の領域を規
定するキー信号を生成するキー信号生成器を備える。１
つの具体例では、量子化パラメータＱＷは、次の式で与
えられる所定のアルゴリズムによって決定される。
【００２０】ＱＷ＝ＫＡＱＦ＋（１−ＫＡ）ＱＢ ここで、ＫＡはマクロブロックの平均キー値であり、Ｑ
ＦはＱの所定の固定値であり、ＱＢは第１の映像信号の
量子化パラメータの保存値である。
【００２１】本発明のもう１つの特徴によると、映像信
号処理方法は、信号のフレームに関連するとともに圧縮
に関係するパラメータを含む第１の圧縮映像信号が供給
されるステップと、フレームに関連する圧縮パラメータ
を保存しつつ、第１の圧縮映像信号を復号するステップ
と、第１の映像情報に結合される追加の映像情報が供給
されるステップと、追加の映像情報を第１の映像情報に
結合し、結合された情報のフレームを生成するステップ
と、結合された映像情報のフレームを符号化し、追加の
映像情報を含まない結合された情報のフレームの部分の
復号及び追加の情報を含む他の部分について、フレーム
の他の部分の端部領域を端部領域でない他の部分の領域
より高い画質に符号化するため、各フレームの保存パラ
メータを再使用するステップとを有する。
【００２２】本発明の更なる特徴によると、コンピュー
タに実行可能な命令を提供するコンピュータプログラム
製品が提供され、この製品は、プログラム可能な信号処
理装置にロードされると、この信号処理装置に、本発明
のもう１つの特徴を実現させる。
【００２３】本発明の更なる特徴によると、コンピュー
タに実行可能な命令を提供するコンピュータプログラム
製品が提供され、この製品は、プログラム可能な信号処
理装置にロードされると、この信号処理装置に、本発明
の１つの特徴の信号処理装置として動作させる。
【００２４】発明の好適な実施の形態 概要 図１〜図４は、１つの映像信号（Ａ）をもう１つの映像
信号（Ｂ）に結合するために実行される映像処理操作を
示す図である。
【００２５】図１及び図２は、スプライス処理（splice
operation）とディゾルブ処理（dissolve operation）
の「タイムライン（timeline）」表示をそれぞれ示す図
である。図１においては、ある時刻ｔにおいて、信号Ａ
から信号Ｂに突然切り換る。図２においては、切換は徐
々に行われ、信号Ａは、ある期間に亘って信号Ｂと混合
される。
【００２６】図３と図４は、テレビジョンの画像自体を
示している。図３は、「ロゴ」挿入（"logo" insertio
n）を示す図であり、画像Ａの一部（sub-portion）は、
画像Ｂによって置き換えられるか混合される。図４は、
ワイプ処理（wipe operation）を示す図であり、２つの
画像は画面において向かいあっており（complimentary
portion）部分を占め、２つの画像間の境界（boudary）
が移動する。
【００２７】本明細書は、各種の映像処理操作に関し、
各種の映像処理操作は、図２、図３及び図４に関連して
実行される必要がある。換言すると、これらの処理で
は、画像Ａと画像Ｂの両方の一部が画面に同時に表示さ
れる。図１に示した、１つの映像信号からもう１つの映
像信号へのスプライス処理は、本明細書では取り扱わな
い。
【００２８】図５〜図７も、映像画像へのロゴのスーパ
ーポーズ（superpose）を示すが、これらは、図３を詳
細に示すものである。
【００２９】図５においては、映像画像は、例えば動的
オブジェクト（moving object）１，２及び静的オブジ
ェクト（static object）３を含む原場面（original sc
ene）を示している。図６においては、テキストによる
ロゴと地図５のような情報を含む追加の映像情報が原映
像にスーパーポーズされる。好ましい具体例としては、
背景の番組を余り乱さない、特定地域での気象関係の警
報のような緊急事態の警告の放送がある。
【００３０】図７は、静的な地図５と原画像３のオーバ
ーラップを示す図６の一部の拡大図である。ＭＰＥＧ２
のようなブロックを基礎とするシステムでは、各画像は
いわゆるマクロブロックに分割され、マクロブロックの
数は、画像のオーバーラップによって影響されることが
見られる。図７において、マクロブロックは、方形ブロ
ック１０として示されている。
【００３１】本明細書の以下の説明では、２つの供給源
Ａ，Ｂから供給され、画面に同時に表示される映像情報
を処理できる映像信号処理装置を扱う。この映像信号処
理装置について、最初に図８のブロック図を用い、次に
動作のモードを規定する図９のフローチャートを用いて
説明する。処理の特徴については、それぞれの図を用い
てさらに説明する。
【００３２】したがって、まず映像信号処理装置を示す
図８を用いて説明する。
【００３３】符号化器Ｅ１には、入力映像信号Ａが供給
され、符号化器Ｅ１は、所望の出力目標ビットレートＴ
ＢＲ及びＧＯＰフォーマットに応じて入力映像信号Ａを
符号化する。２つの映像信号を混合する必要がなけれ
ば、符号化器Ｅ１によって符号化される映像信号は、コ
ントローラ１００の制御の下、スイッチＳ１を介して出
力端子に直接供給される。符号化器Ｅ１は、かっこで囲
まれているが、これは、入力映像信号が既に所望のフォ
ーマットを有しているときは、符号化器Ｅ１は当然に必
要がないことを示している。
【００３４】符号化器Ｅ１の出力は、対応する（compli
mentary）復号器Ｄ１に供給され、復号器Ｄ１は、映像
信号を復号して、非圧縮、すなわち「ベースバンド」の
信号に復元する。ベースバンド映像信号は、混合器１１
０に供給され、入力映像信号Ａの各ブロックにおける元
の圧縮（original compression）で用いられた圧縮パラ
メータは、コントローラ１００に供給される。
【００３５】供給源１２０は、混合される映像信号、す
なわち映像信号Ｂをもう１つの符号化器Ｅ３に供給す
る。符号化器Ｅ３も、かっこで囲まれているが、これ
は、映像信号が既に所望のフォーマットであれば、符号
化器Ｅ３が必要ないことを示すものである。符号化器Ｅ
３の出力は、符号化器Ｅ１の出力に対応するビットレー
ト及びＧＯＰフォーマットの映像信号であり、次の復号
器Ｄ３に供給され、復号器Ｄ３は、映像信号から圧縮パ
ラメータを抽出し、映像信号Ｂをベースバンドの信号に
復号して混合器１１０に供給する。
【００３６】必要に応じて、符号化器と復号器の対、す
なわち符号化器Ｅ１／復号器Ｄ１又は符号化器Ｅ３／復
号器Ｄ３の何れか一方を省略し、非圧縮、すなわち「ベ
ースバンド」映像信号を混合器の入力端子の一方に直接
供給し、復号した圧縮映像信号を他方の入力端子に供給
することもできる。
【００３７】また、供給源１２０は、キー信号Ｋを混合
器１１０に供給する（なお、キー信号Ｋは、異なる外部
の供給源から供給されるようにしてもよい。）。キー信
号Ｋは、求められる出力映像の各画素に用いられる映像
信号Ａと映像信号Ｂの相対的な比率を規定しており、
（全て映像信号Ａが用いられる）０と（全て映像信号Ｂ
が用いられる）１の間で変化する。この変化は、画素ご
とに生じ、キー信号Ｋは、０と１の間の値により、その
位置での２つの信号の混合比を示す。
【００３８】したがって、混合器１１０は、一般的な従
来の方法で画素ごとに動作し、画素ごとに、乗算器１１
２において映像信号Ｂの画素にＫを乗算し、乗算器１１
４において映像信号Ａの画素に（１−Ｋ）を乗算し、そ
して、加算器１１６において２つの積を加算し、混合さ
れた出力映像信号の画素を生成する。
【００３９】混合された映像信号は、次の符号化器Ｅ２
に供給され、符号化器Ｅ２も符号化器Ｅ１及び符号化器
Ｅ３と同じ公称ビットレートとＧＯＰフォーマットで動
作し、符号化器Ｅ２は、混合映像信号を符号化し、スイ
ッチＳ１を介して出力する。
【００４０】コントローラ１００は、符号化器Ｅ２の動
作を制御する。基本的には、コントローラ１００は、符
号化器Ｅ２が、映像信号Ａ，Ｂを混合する前に、これら
の映像信号のブロックの圧縮に関連する圧縮パラメータ
の一部又は全部を再使用するか、又は混合された映像信
号Ｃのブロックを符号化するための新たな圧縮パラメー
タを生成するかどうかを制御する。
【００４１】この制御の一部として、コントローラ１０
０には、以下で詳細に説明するように、映像信号の圧縮
パラメータの詳細（datail）、映像信号Ｂの圧縮パラメ
ータの詳細、及び目標出力データレート（ＴＢＲ）の仕
様（specification）が供給される。また、コントロー
ラ１００は、キー信号から得られる情報を含む様々な情
報を保持したメモリ１３０にアクセスする。
【００４２】図９は、図８に示した映像信号処理装置の
動作を説明するフローチャートである。
【００４３】ステップ２２０において、「ビットマッ
プ」が、ロゴの圧縮フレームにおける位置を示すキー信
号Ｋから導かれる。これついては、以下で、図１２Ａと
図１２Ｂ、図１３Ａと図１３Ｂ、図１４Ａ〜図１４Ｄを
用いて説明する。
【００４４】ステップ２３０において、コントローラ１
００は、混合映像信号の現フレームを符号化するために
必要とされる全ビット数の推定量を算出する。このため
に、レート制御アルゴリズムを混合映像信号に実際に適
用する代わりに、２つの個別のソース映像信号Ａ，Ｂの
各マクロブロックの符号化に必要とされるビット数に関
連する履歴データから少なくとも一部の推定を算出す
る。この処理については、後に詳細に説明する。
【００４５】次のステップ２４５において、ロゴの端部
におけるロゴマクロブロックの量子化パラメータ（及び
他のトランスコーディングパラメータ（transcoding pa
rameter））を決めるが、これについては後に詳細に説
明する。
【００４６】ステップ２６０において、端部マクロブロ
ックでないロゴマクロブロックの量子化パラメータ（及
びトランスコーディングパラメータ）を決定するが、こ
れについては後に詳細に説明する。
【００４７】ステップ２６０は、本発明の１つの具体例
のように、ステップ２４５が省略されると全ロゴマクロ
ブロックに適用される。
【００４８】ステップ２７０において、混合された信号
Ｃのマクロブロックに関連する動きベクトルが参照映像
の有効な領域を指すかどうかを判定する試験を行う。例
えばマクロブロックの全てが映像Ａの内側にあるかもし
れないが、関連する動きベクトルは参照フレームにおい
て映像Ｂによって置き換えられた領域を指すかもしれな
い。このような状況では、この動きベクトルを使用する
ことは適当でない。この処理については、図１２、図１
３及び図１４を用いて後に詳細に説明する。
【００４９】この試験が一旦完了すると、ステップ２８
０において、再符号化又は再使用パラメータ情報の全内
容は、コントローラ１００によって符号化器Ｅ２に送ら
れ、符号化器Ｅ２は、混合された映像信号Ｃをこの情報
に応じて符号化する。映像Ａと映像Ｂが混合される場
合、コントローラ１００は、スイッチＳ１が全フレーム
について符号化器Ｅ２の出力を選択するように制御す
る。
【００５０】符号化器Ｅ２は、レート制御アルゴリズム
を有している。これは、例えばＭＰＥＧシステムのいわ
ゆる「テストモデル５（test model 5）」のような予測
レート制御アルゴリズム、又はおそらくイギリス国特許
出願第２３０６８３１号（GB-A-2306831）に記載された
前符号化（pre-encode）又はリハーサル（rehearsal）
のような種類のレート制御アルゴリズムである。いずれ
にせよ、コントローラ１００によってレート制御アルゴ
リズムに適用されるパラメータは、パラメータを再使用
すると決められたマクロブロックの場合、復号器Ｄ１，
Ｄ３から供給された原圧縮パラメータに等しく、パラメ
ータを再使用しないと決められたマクロブロックの場
合、新たなパラメータを導出するレート制御アルゴリズ
ムを示す指示フラグ（indicator flag）を有する。
【００５１】ここでの特定の例は、ロゴが挿入された特
別な場合であり、ロゴ自体の画質を維持するために、ロ
ゴ素材を有するブロックに使用する量子化パラメータの
限界を特定することが好ましく、これは、量子化処理の
粗さを最大限に設定するためである。また、この条件
は、映像信号Ｂの素材の主要部又は全部を含むと判定さ
れたマクロブロックに対して、コントローラ１００から
レート制御アルゴリズムに通知される。（これは、もち
ろん、挿入された映像信号がロゴ素材などを含むかどう
かの主観的判定によるもので、当然、操作者又は使用者
によってなされる判定である。）。
【００５２】符号化器Ｅ２のレート制御アルゴリズム
は、再符号化するマクロブロックの圧縮パラメータを生
成し、符号化器Ｅ２は、供給された又は導びかれたパラ
メータに基づいて、全フレームを符号化する。
【００５３】以下の説明では、例えば図３において映像
Ｂで表される（テキストによるロゴ又は地図のような）
ロゴ情報が、映像Ａにスーパーポーズされるものとす
る。また、図８における符号化器Ｅ３と復号器Ｄ３は、
両方とも省略されるものとする。
【００５４】ビットマップ 上述したように、キー信号Ｋは、既知の方法によって画
素ごとに生成される。キー信号Ｋは、上述したように、
ロゴ情報を原場面にスーパーインポーズするのに用いら
れる。ビットマップは、キー信号からコントローラ１０
０によって生成される。
【００５５】ビットマップは、ロゴ情報を含む画素位置
を画素ごとに示す画素分解能を有する。
【００５６】なお、ビットマップは、ロゴ情報を含むマ
クロブロックを示すマクロブロック分解能を有してもよ
い。
【００５７】したがって、ビットマップは、ロゴ情報を
含む（ロゴ領域）又はロゴ情報を含まない（非ロゴ領
域）画素又はマクロブロックＭＢを示す。
【００５８】トランスコーディングパラメータ 以下で説明する本発明の具体例は、（ＭＰＥＧ２で用い
られるパラメータの内で）以下のトランスコーディング
パラメータを用いる。
【００５９】１）Ｑ：フレームに適用される量子化スケ
ールを規定するパラメータ ２）ＤＣＴ−ｔｙｐｅ：ＤＣＴ処理の種類（フィールド
又はフレーム）を規定するパラメータ ３）動きベクトル 第１の映像ビットストリームＡは、Ｉ、Ｐ及びＢフレー
ムを有する。これらのフレームは、デコーダＤ１におい
て復号され、符号化器Ｅ２において再符号化される。符
号化器Ｅ２は、コントローラ１００によって制御され、
第１のビットストリームＡのＩフレームはストリームＣ
のＩフレームとして再符号化され、ＰフレームはＰフレ
ームとして再符号化され、ＢフレームはＢフレームとし
て再符号化される。
【００６０】パラメータＱ及びＤＣＴ−ｔｙｐｅは、第
１の技術、又はこれに代る第２の技術に従って、結合さ
れた原情報及びロゴの再符号化に適用される。
【００６１】 Ａ．ロゴマクロブロック（logo macroblock）の検出 図１０は、ビットマップを示す図である。図１０には、
マクロブロックの配列が示されている。Ｌで示されるマ
クロブロックは、ロゴ情報を含んでいる。これらのマク
ロブロックは、ロゴ情報を含まないマクロブロックによ
って囲まれている。図１０は、説明のために非常に単純
化してある。図８のキー信号生成器１２０によって生成
されたキー信号は、ロゴ情報を含むフレームにおいて画
素ごとに位置を規定する。ビットマップ１８は、キー信
号から生成される。ビットマップについては、後に詳述
する。
【００６２】 Ａ１．ソリッドマクロブロック（solid macroblock） 本発明の１つのバージョン（version）では、マクロブ
ロックにおけるロゴの存在は、そのマクロブロックに対
応するビットマップの一部の全ピクセルがロゴ情報を含
むかどうかを判定することで試験される。この判定に該
当すると、マクロブロックは、「ソリッド」ロゴを含む
と判定され、「ソリッドマクロブロック」と称される。
このソリッドマクロブロックは、画素分解能で処理す
る。
【００６３】 Ａ２．中央マクロブロック（central macroblock） 他のバージョンでは、図１０に示すように、マクロブロ
ックは、そのマクロブロック（図１０におけるＣ）とそ
の周囲の８つのマクロブロックが全てロゴ情報を含むと
判定される。このバージョンは、マクロブロック分解能
で処理するので、画素分解能で処理する具体例より処理
量が少ないが、処理はより不正確である。実際、マクロ
ブロックＣは、第１の映像情報を含むことがある。すな
わち、試験により、マクロブロックと隣接マクロブロッ
クが全てロゴ情報を含むかどうかが判定される。したが
って、この種類のマクロブロックは、「中央マクロブロ
ック」と称される。
【００６４】Ａ３．ソリッドマクロブロック及び中央マ
クロブロックの符号化 ａ）原映像ビットストリーム及び第１の映像ビットスト
リームのＩフレームから保存されたパラメータＱ及びＤ
ＣＴ−ｔｙｐｅは、結合された映像情報のＩフレームの
マクロブロックに変更されることなく適用されるが、こ
のマクロブロックはソリッドマクロブロックでも中央マ
クロブロックでもない。
【００６５】この結果、ソリッドマクロブロック又は中
央マクロブロックでもないマクロブロックは、幾らかの
ロゴ情報を含んでいても、何れも保存されていたパラメ
ータによって符号化される。
【００６６】ｂ）ｂ１）好ましくは、Ｐフレームにおい
て、ソリッドマクロブロック又は中央マクロブロックで
ないマクロブロックは、第１の映像ビットストリームか
ら保存されたトランスコーディングパラメータを再使用
して再符号化され、Ｂフレームの全マクロブロックは完
全に再符号化される。
【００６７】ｂ２）又は、結合された映像情報のＰフレ
ーム及びＢフレームの全マクロブロックは、完全に再符
号化される。
【００６８】ｃ）ＤＣＴ−ｔｙｐｅは、全フレームの全
マクロブロックに再使用される。
【００６９】ｄ）本発明の一具体例では、Ｉフレームに
おいて（好ましくはＰフレームにおいても）、ソリッド
マクロブロック及び中央マクロブロックのＱは、ユーザ
によって選択された所定の固定値である。選択された値
は、例えば装置が初期設定される際に固定されている。
この値は、ユーザが所望する新たな値に変更することが
できる。
【００７０】この技術は、好ましくはロゴに用いられ、
ロゴは、静的識別子（station identification）又は
「アイデント（ident）」のように、フレームにおいて
位置が固定されている。ユーザは、Ｑの値を選択し、こ
の値は、ユーザが望む画質を有するロゴを生成する。Ｑ
の値が小さくなるほど、ロゴを符号化するのに用いられ
るビット数が大きくなり、したがって画質も高くなる。
【００７１】結合された情報のＩフレームは、第１のビ
ットストリームより多いデータを有している。符号化器
Ｅ２のレート制御は、ロゴマクロブロックＬの外側の第
１のビットストリームのＱ値に応じて行われる。レート
制御は、ビットをＩ、Ｐ及びＢフレームに割り当て、目
標ビットレートに適合するように行われる。
【００７２】Ｂ．「透明」マクロブロック（"transpare
nt" macroblock） この技術は、上述した「ソリッド」又は「中央」技術に
代わるものである。
【００７３】ロゴのマクロブロックは、「透明」と称す
ることができる。これは、第１の映像情報（Ｂ）とロゴ
（Ａ）を含むフレームのロゴ領域であり、これらはＡ＊
Ｋ＋（１−Ｋ）＊Ｂに応じて混合される。ここで、Ｋ
は、キー信号の絶対値（magnitude）である。Ｋ＝０の
ときは、ロゴは存在しない。Ｋ＝１のときは、ロゴはソ
リッドである。０＜Ｋ＜１のときは、ロゴは透明であ
る。
【００７４】キー信号Ｋは、ＡとＢの混合の程度を画素
ごとに表す。マクロブロックが透明であるかどうかを検
出するために、Ｋの値は、マクロブロックに亘って平均
される。平均がＫＡ＝０のときは、第１の映像のみが存
在する。平均が１のときは、マクロブロックはソリッド
である。平均が０と１の間にあると、マクロブロックは
透明である。
【００７５】透明マクロブロックの符号化 原映像ビットストリーム及び第１の映像ビットストリー
ムのＩフレームから保存されたロゴ情報を含まないマク
ロブロックに対するＱ及びＤＣＴ−ｔｙｐｅパラメータ
は、これらのマクロブロックについては変更されずに適
用される。
【００７６】ｂ）ｂ１）好ましくは、Ｐフレームにおい
て、ロゴ情報を含まないマクロブロックは、第１のビッ
トストリームから保存されたトランスコーディングパラ
メータを再使用して再符号化され、Ｂフレームの全マク
ロブロックは完全に再符号化される。
【００７７】ｂ２）又は、結合された映像情報のＰフレ
ームとＢフレームの全マクロブロックは、完全に再符号
化される。
【００７８】ｃ）ＤＣＴ−ｔｙｐｅは、全フレームの全
マクロブロックにおいて再使用される。
【００７９】Ｑの決定 ステップｄ）について、Ｉフレームにおいて（好ましく
はＰフレームにおいても）、ロゴ情報を含むマクロブロ
ックのＱ値は、重み付け平均ＱＷとして決められる。
【００８０】ＱＷ＝ＫＡＱＦ＋（１−ＫＡ）ＱＢ ここで、ＫＡはマクロブロックの平均キー値であり、Ｑ
Ｆは上述した「１．ソリッドマクロブロック」技術にお
いて選択された固定値であり、ＱＢは第１の映像情報の
Ｑの保存値である。したがって、マクロブロックが「ソ
リッド」でＫＡ＝１であれば、固定値ＱＦがマクロブロ
ックに適用される。マクロブロックが透明であるとき
は、ＱＦとＱＢの混合値が適用される。
【００８１】好ましくは、重み付け平均ＱＷは、ＱＢ≦
ＱＦ、すなわち背景の映像が固定画質のロゴより高い画
質であるときに用いられる。
【００８２】ロゴの端部 図１１には、キー信号の絶対値が示され、背景ビデオＶ
Ｂを含む映像ラインの一部の簡単な例において、ロゴの
端部Ｅとロゴ情報ＶＬが示されている。ロゴの端部にお
いて背景映像の画質を低下させることは望ましくない。
したがって、本発明のこの特徴に従い、Ｑの値は、キー
信号によって示されるロゴの端部の直後において、背景
映像ＶＢの値ＱＢに対してＲで示されるだけ減少し、し
たがって、端部の画質は高くなる。端部から離れると、
Ｑの値は上述のように決められる。本発明の好ましい具
体例では、これは、ロゴに対して設定されるＱよりＱＢ
が小さいときだけ行なわれる。これは、背景の画質がロ
ゴの画質より高い場合である。
【００８３】端部領域から離れた位置のロゴに対して設
定されるＱは、固定されたＱＦ又は上述した値 ＱＷ＝ＫＡＱＦ＋（１−ＫＡ）ＱＢ である。
【００８４】ロゴの端部における低いＱの領域は、キー
信号Ｋを閾値Ｋｔと比較することによって決められる。
端部領域は、ロゴ領域内にあり、０＜Ｋ≦Ｋｔによって
規定される。端部領域は、画質を維持する必要がある背
景（第１の）映像を含むものとされる。
【００８５】Ｅ）レート制御 再符号化は、好ましくは、次のように改良されたテスト
モデル５（test model5）(ISO-IEC/JCT1/SC29/WG11/NO4
4)レート制御を用いて行われる。
【００８６】すなわち、Ｉフレームの非ロゴ領域では、
各ＭＢの生成されるビットは、蓄積されて値「Reuse_Bi
ts」を形成する。Ｉフレームのロゴ領域では、この値
は、フレームにおいてこの点に関して多くのロゴＭＢに
関連し、レート制御の目標を次のように変更される。
【００８７】New_Target=Reuse_Bits+(target_bit_fram
e*logo_MB_so_far/total_MB)これによって、レート制御
は、次のようになる。
【００８８】New_virtual_buf=int_virtual_buf+pictur
e_bit_generated New_Targetここで、picture_bit_ge
neratedは、フレーム内の現在の位置に対して生成され
たビット数であり、再使用によって生成されたビット
と、ロゴ領域のレート制御によって生成されたビットを
含んでいる。すなわち、次のようになる。
【００８９】picture_bit_generated=logo_bits+Reuse_
Bitsしたがって、New_Targetは、Ｉフレームのロゴ領域
の目標ビット数に対する再使用の効果を相殺し、全フレ
ームが再符号化されるものとしてレート制御が行なわれ
るようにする。
【００９０】動きベクトル処理 概要 図１２〜図１６は、図９のステップ２２０及びステップ
２７０において実行される処理を示している。すなわ
ち、ビットマップを生成し、２つの映像供給源からの領
域間の境界（boundary）に輪郭（border）を適用し、そ
して、保存された再使用する動きベクトルを試験して、
同じ映像供給源の素材の適切な部分を指しているかどう
かを判定する。
【００９１】図３に示すように、符号化パラメータを再
使用すると決定する際、映像Ａのマクロブロックに再使
用される保存された動きベクトルが、実際にまだ映像Ａ
からなる画像の一部を指すようにすること、すなわち、
映像Ｂによって、混合、ワイプ又は挿入処理の一部とし
て置き換えられていないようにすることが重要である。
【００９２】図１４及び図１５に示すように、輪郭（図
１４Ｄでは１マクロブロック幅）が、新たに挿入された
素材の周囲に生成される。これによる利益は、ベクトル
の試験が、新たに挿入された素材の周囲において実行で
きることである。この利益は、ベクトルの試験が、（図
１２及び図１３のように）画素単位でなく、マクロブロ
ック単位で行えることであり、広い輪郭により、この粗
いスケールの手法による誤りを避けるための安全の余裕
が増加したからである。
【００９３】したがって、例えば領域Ａから完全に導出
されない全マクロブロックの周囲に輪郭が形成され、領
域Ｂから完全に導出されない全マクロブロックの周囲に
輪郭が形成される。
【００９４】したがって、領域Ｂのマクロブロックに関
連する保存された動きベクトルが、 ａ）領域Ａ、 ｂ）領域Ｂから完全に導出されないマクロブロック、 ｃ）領域Ｂから完全に導出されないマクロブロックの周
囲に形成された輪郭を指す、又は参照するとき、この動
きベクトルは、再使用されず、新たな動きベクトルが代
わりに生成される。
【００９５】同様に、領域Ａのマクロブロックに関連す
る動きベクトルが、 ａ）領域Ｂ、 ｂ）領域Ａから完全に導出されないマクロブロック、 ｃ）領域Ａから完全に導出されないマクロブロックの周
囲に形成された輪郭を指すとき、この動きベクトルも再
使用されず、新たな動きベクトルが代わりに生成され
る。
【００９６】具体例 動きベクトルは、以下で説明する技術Ａ，Ｂ，Ｃの何れ
かによって処理される。これらの動きベクトル技術Ａ，
Ｂ，Ｃの１つは、何れも、上述したソリッドマクロブロ
ック、中央マクロブロック及び透明マクロブロックの技
術に関して用いられる。
【００９７】上述したように、原ビットストリームＡの
動きベクトルＶ１は、符号化器Ｅ２において再使用のた
め保存される。新たな動きベクトルＶ２は、ロゴ情報及
び原映像情報を含む結合された映像情報のために算出さ
れる。動きベクトルＶ１，Ｖ２の組は、動きベクトルが
適用されるマクロブロックを示し、ファイルに格納され
る。以下に述べる技術Ａ，Ｂ，Ｃにおいては、動きベク
トルはＰ及びＢフレームとのみ関連する。Ｂフレームに
ついてのファイルは、前方予測及び後方予測の両方のベ
クトルを有している。
【００９８】ビットマップ 上述したようにして、ビットマップが生成される。ビッ
トマップは、フレーム内にロゴ情報がある各フレームに
対して生成される。
【００９９】ビットマップは、Ｉフレームに対して生成
される。
【０１００】各Ｂフレームは、２つの参照ビットマップ
を用い、これらの参照ビットマップは、Ｂフレームの動
きベクトルが参照する前方フレーム及び後方フレームの
ビットマップである。
【０１０１】各Ｐフレームは、最大２つのビットマップ
を有する。１つのビットマップは、フレーム自体のビッ
トマップである。他のビットマップは、参照ビットマッ
プ、すなわちＰフレームの動きベクトルが参照するフレ
ームのビットマップである。
【０１０２】技術Ａ ビットマップは、各画素に対して、画素がロゴ情報を含
むか否かを示す論理ビット「１」又は「０」を有する。
【０１０３】「１」＝ロゴ 「０」＝非ロゴ 図１２Ａに示すように、結合される映像情報のＰフレー
ム又はＢフレームにおけるマクロブロックＭＢ（ｎ）を
検討する。ＭＢ（ｎ）は、ロゴ情報を含まないものとす
る。
【０１０４】ＭＢ（ｎ）の保存された動きベクトルは、
画素分解能で、ロゴビットマップに対して試験される。
したがって、図１２Ｂに示すように、動きベクトルはＸ
ＸＸＸと記述される１６×１６画素の領域について試験
される。
【０１０５】領域ＸＸＸＸの何れかの画素が１に等しい
とき、この領域はロゴ情報を含む。そして、新たなベク
トルＶ２がＭＢ（ｎ）に対して用いられる。
【０１０６】領域ＸＸＸＸの全ての画素が０に等しいと
き、この領域は非ロゴ情報を含む。そして、保存された
ベクトルＶ１がＭＢ（ｎ）について用いられる。
【０１０７】変形例として、領域ＸＸＸＸにおける何れ
かの画素がロゴ情報を含み、領域ＸＸＸＸの少数の画素
がロゴ情報を含むとき、新たなベクトルＶ２を用いる代
わりに、保存されたベクトルＶ１を用いることができ
る。
【０１０８】技術Ｂ この技術Ｂにおいては、Ｐフレーム及びＢフレームのビ
ットマップは、マクロブロック分解能を有している。こ
れは、各マクロブロックに対して該当する。
【０１０９】「１」は、ロゴ情報を含むマクロブロック
を示す。
【０１１０】「０」は、ロゴ情報を含まないマクロブロ
ックを示す。
【０１１１】保存されたベクトルは、ただ１つのマクロ
ブロックのみの分解能について、例えばマクロブロック
が１６×１６画素なら１６画素の分解能について試験さ
れる。
【０１１２】図１３Ａ及び図１３Ｂの場合を検討する。
【０１１３】図１３Ａは、ロゴ情報を含まないＰフレー
ム又はＢフレームのマクロブロックＭＢ（ｎ）を示して
いる。その動きベクトルは、図１３Ｂに示す、他のフレ
ームにおいて最も適合する領域ＸＸＸＸを指している。
領域ＸＸＸＸは、マクロブロック（ｎ）に隣接してい
る。したがって、ＭＢ（ｎ）の１６画素内にある。
【０１１４】ＭＢ（ｎ）が右に０から１５画素の範囲の
水平ベクトルの値を有し、ロゴ領域を指すと、ロゴ画素
の選択は不正確になる。
【０１１５】図１３Ｂに対応するビットマップは、図１
４Ｂに示されている。図１３Ａ及び図１３Ｂを用いて説
明した状況に対処するため、参照フレームにおいて、図
１４Ｃと図１４Ｄに示すように、１マクロブロックに等
しい幅の輪郭が、ロゴ情報を含む各マクロブロックの周
囲に加えられる。輪郭は、この第２の技術の具体例では
常に１マクロブロックであり、ベクトルの範囲に及び画
像の種類には無関係である。
【０１１６】輪郭は、ベクトル処理のためにロゴ情報を
含むようになされている。
【０１１７】図１４ＣにおけるＭＢ（ｎ）の動きベクト
ルは、ビットマップファイルのマクロブロックについ
て、１６画素の倍数（multiple）の分解能に対して試験
される。
【０１１８】保存された動きベクトルが指す何れかのマ
クロブロックが論理１（すなわち、ロゴ情報を含むか、
輪郭である）含むときは、新たなベクトルＶ２がＭＢ
（ｎ）に対して用いられる。
【０１１９】保存されたベクトルが試験される全マクロ
ブロックが非ロゴ情報を含むとき、保存されたベクトル
Ｖ１がＭＢ（ｎ）に対して用いられる。
【０１２０】Ｂフレームは、上述したように、２つの参
照ビットマップを用いる。Ｂフレームは、前方及び後方
参照フレームの両方の２つの参照ビットマップを指す動
きベクトルを持つマクロブロックを有し、１つの動きベ
クトルは１つの方向に非ロゴ情報を指し、他の動きベク
トルはロゴ情報を指す。このような状況で、本発明の具
体例は、非ロゴ情報を含む参照フレームを選択し、マク
ロブロックの保存されたベクトルＶ１を再使用し、他の
参照フレームを無視する。
【０１２１】技術Ｃ 図１５に示すように、Ｂフレーム又はＰフレームのビッ
トマップは、ロゴ情報４を有する。輪郭２２は、処理さ
れている現フレーム（上述の技術Ａ及び技術Ｂでの参照
フレームではない）におけるロゴ情報の周囲に設けられ
る。輪郭は、最大ベクトル範囲に応じて幅ｗを有する。
幅ｗは、例えば水平６４画素、垂直３２画素である。
【０１２２】好ましくは、幅ｗは、最大ベクトル範囲の
２倍である。
【０１２３】技術Ｃの１つのバージョンでは、最大ベク
トル範囲は、原映像ビットストリームのＭＰＥＧパラメ
ータから検出されるか、各フレームから測定されるかの
何れかである。
【０１２４】輪郭は、好ましくは、輪郭の外側の全マク
ロブロックが、輪郭内のマクロブロックを参照し、ロゴ
情報を含む動きベクトルを有することができないような
幅ｗを有する。
【０１２５】したがって、保存された動きベクトルＶ１
は、輪郭の外側の全マクロブロックに対して用いられ、
新たな動きベクトルＶ２が輪郭内の全マクロブロックに
対して算出される。
【０１２６】上述の「フレーム」は例示にすぎず、一般
に符号化は画像ごとに行われるが、フレーム、フィール
ド、画像の組み合わせなどでもよい。
【０１２７】上述のビットストリームは、Ｉ、Ｐ及びＢ
フレームから構成される。なお、ＩフレームにＰフレー
ムのみ又はＢフレームのみを組み合わせて構成してもよ
い。
【０１２８】当該技術分野の専門家にとって、上述した
装置が、適切なソフトウェアによって実行される汎用コ
ンピュータの少なくとも一部に実現できることは明らか
である。このようなソフトウェア、及びこのようソフト
ウェアが格納された記録媒体は、両方とも本発明の具体
例であると考えられる。
【図面の簡単な説明】
【図１】図１は、映像スプライス処理を示す図である。
【図２】図２は、映像ディゾルブ処理を示す図である。
【図３】図３は、映像ロゴ挿入処理を示す図である。
【図４】図４は、映像ワイプ処理を示す図である。
【図５】図５は、映像ロゴ挿入処理を詳細に示す図であ
る。
【図６】図６は、映像ロゴ挿入処理を詳細に示す図であ
る。
【図７】図７は、挿入されたロゴと背景の映像のオーバ
ーラップを示す図６の一部を拡大した図である。
【図８】図８は、本発明の特徴に従った映像信号処理装
置を示す図である。
【図９】図９は、図８の映像信号処理装置の動作を示す
フローチャートである。
【図１０】図１０は、ロゴ領域のビットマップを示す図
である。
【図１１】図１１は、本発明の特徴による実施の形態に
従うキー信号及びＱの変化を示す図である。
【図１２】図１２は、ビットマップを示す図である。
【図１３】図１３は、ビットマップを示す図である。
【図１４】図１４は、ビットマップを示す図である。
【図１５】図１５は、他のビットマップを示す図であ
る。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 ウェブ ロバート イギリス国 ケーティー13 ０エックスダ ブリュー サリー ウエィブリッジ ブル ックランズ ザ ハイツ（番地なし） ソ ニー ユナイテッド キングダム リミテ ッド内 (72)発明者 サウンダーズ、ニコラス アイアン イギリス国 ケーティー13 ０エックスダ ブリュー サリー ウエィブリッジ ブル ックランズ ザ ハイツ（番地なし） ソ ニー ユナイテッド キングダム リミテ ッド内

Claims (23)

    【特許請求の範囲】
  1. 【請求項１】 信号のフレームに関連するとともに圧縮
    に関係するパラメータを含む第１の圧縮映像信号が供給
    される第１の入力端子と、 上記フレームに関連する上記圧縮パラメータを保存しつ
    つ、上記第１の圧縮映像信号を復号する復号器と、 上記第１の映像情報に結合される追加の映像情報が供給
    される第２の入力端子と、 上記追加の映像情報を上記第１の映像情報と結合し、結
    合された情報のフレームを生成する結合器と、 上記結合された映像情報のフレームを符号化し、上記追
    加の映像情報を含まない結合された情報のフレームの一
    部の符号化及び追加の情報を含む他の部分について、上
    記フレームの他の部分の端部領域を上記端部領域でない
    上記他の部分の領域より高い画質に符号化するため、上
    記保存されたパラメータを再使用する符号化器とを備え
    る映像信号処理装置。
  2. 【請求項２】 上記符号化器は、上記端部領域を、量子
    化パラメータの所定値で符号化することを特徴とする請
    求項１記載の映像信号処理装置。
  3. 【請求項３】 上記追加の情報を含む上記フレームの上
    記一部を規定するキー信号Ｋを生成するキー信号生成器
    をさらに備えることを特徴とする請求項２記載の映像信
    号処理装置。
  4. 【請求項４】 上記端部領域は、閾値より小さい上記キ
    ー信号Ｋの値によって規定されることを特徴とする請求
    項３記載の映像信号処理装置。
  5. 【請求項５】 上記キー信号は、Ｋｔを上記閾値として
    ０＜Ｋ≦Ｋｔの範囲にあることを特徴とする請求項４記
    載の映像信号処理装置。
  6. 【請求項６】 上記領域は、マクロブロックであること
    を特徴とする請求項１記載の映像信号処理装置。
  7. 【請求項７】 上記第１の映像信号は、Ｐフレーム及び
    ／又はＢフレームとともにＩフレームを含み、上記符号
    化器は、上記追加の映像情報が結合される際、上記第１
    の映像情報のＩ、Ｐ及びＢフレームを、それぞれＩ、Ｐ
    及びＢフレームとして符号化することを特徴とする請求
    項６記載の映像信号処理装置。
  8. 【請求項８】 上記符号化器は、追加の映像情報を含ま
    ない上記Ｉフレームの上記一部を符号化するとき、上記
    第１の情報のＩフレームに関連する上記保存パラメータ
    を再使用することを特徴とする請求項７記載の映像信号
    処理装置。
  9. 【請求項９】 上記符号化器は、上記追加映像情報を含
    まないＰフレームの上記一部を符号化するとき、Ｐフレ
    ームに関連する上記保存パラメータを再使用することを
    特徴とする請求項８記載の映像信号処理装置。
  10. 【請求項１０】 上記符号化器は、上記Ｐフレームを完
    全に再符号化すること特徴とする請求項７記載の映像信
    号処理装置。
  11. 【請求項１１】 上記符号化器は、Ｂフレームを完全に
    再符号化することを特徴とする請求項７記載の映像信号
    処理装置。
  12. 【請求項１２】 上記端部領域でない他の部分の上記領
    域は、所定のアルゴリズムに応じて決められる量子化パ
    ラメータに従って符号化されることを特徴とする請求項
    １記載の映像信号処理装置。
  13. 【請求項１３】 上記所定のアルゴリズムに応じて決め
    られる量子化パラメータは、所定の固定値ＱＦを有する
    ことを特徴とする請求項１２記載の映像信号処理装置。
  14. 【請求項１４】 所定のアルゴリズムに応じて決められ
    る上記量子化パラメータＱは、上記第１の映像信号の量
    子化パラメータの所定の固定値ＱＦ及び上記保存値ＱＢ
    の重み付け平均であることを特徴とする請求項１２記載
    の映像信号処理装置。
  15. 【請求項１５】 上記量子化パラメータは、次の所定の
    アルゴリズムに応じて決められることを特徴とする請求
    項３に依るときの請求項１４記載の映像信号処理装置。 Ｑ＝ＫＡＱＦ＋（１−ＫＡ）ＱＢ ただし、ＫＡは、上記マクロブロックの平均キー信号値
    であり、ＱＦは、上記第１の映像信号の上記量子化パラ
    メータの所定の固定値であり、ＱＢは、その保存値であ
    る。
  16. 【請求項１６】 上記符号化器は、上記領域の全画素が
    追加の情報を含むかどうかを判定する手段を備えること
    を特徴とする請求項１２記載の映像信号処理装置。
  17. 【請求項１７】 上記領域の全画素が追加の情報を含む
    と、上記量子化パラメータＱは上記固定値ＱＦを有する
    ことを特徴とする請求項１３に依るときの請求項１６記
    載の映像信号処理装置。
  18. 【請求項１８】 上記符号化器は、マクロブロックと、
    隣接する全マクロブロックが追加の情報を含むかどうか
    を判定する手段を有することを特徴とする請求項１２乃
    至請求項１５記載の映像信号処理装置。
  19. 【請求項１９】 マクロブロックと、隣接する全マクロ
    ブロックが追加の情報を含むと、上記量子化パラメータ
    Ｑは固定値ＱＦを有することを特徴とする請求項１８記
    載の映像信号処理装置。
  20. 【請求項２０】 上記端部領域は、上記第１の信号が上
    記端部領域でない領域より高い画質を有するときのみ、
    上記端部領域でない領域より高い画質に符号化されるこ
    とを特徴とする請求項１記載の映像信号処理装置。
  21. 【請求項２１】 映像信号処理を処理する映像信号処理
    方法において、 信号のフレームに関連するとともに圧縮に関係するパラ
    メータを含む第１の圧縮映像情報が供給されるステップ
    と、 上記フレームに関連する上記圧縮パラメータを保存しつ
    つ、上記第１の圧縮映像信号を復号するステップと、 上記第１の圧縮映像情報に結合される追加の映像情報が
    供給されるステップと、 上記追加の映像情報を上記第１の映像情報に結合して結
    合された情報のフレームを生成し、上記結合された映像
    情報のフレームを符号化し、追加の映像情報を含まない
    上記結合された情報のフレームの部分の符号化及び追加
    の情報を含まない他の部分について、上記フレームの他
    の部分の端部領域を上記端部領域でない上記他の部分の
    領域より高い画質に符号化するため、各フレームの上記
    保存パラメータを再使用するステップとを有することを
    特徴とする映像信号処理方法。
  22. 【請求項２２】 コンピュータが実行可能な命令を提供
    するコンピュータプログラム製品において、 プログラム可能な信号処理装置にロードされると、上記
    信号処理装置は請求項２１の映像信号処理方法を実現す
    ることを特徴とするコンピュータプログラム製品。
  23. 【請求項２３】 コンピュータが実行可能な命令を提供
    するコンピュータプログラム製品において、 プログラム可能な信号処理装置にロードされると、上記
    信号処理装置は、請求項１の映像信号処理装置として動
    作することを特徴とするコンピュータプログラム製品。
JP2000267041A 1999-09-03 2000-09-04 映像信号処理装置 Pending JP2001128184A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GBGB9920929.8A GB9920929D0 (en) 1999-09-03 1999-09-03 Video signal processor
GB9920929.8 1999-09-03

Publications (1)

Publication Number Publication Date
JP2001128184A true JP2001128184A (ja) 2001-05-11

Family

ID=10860359

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000267041A Pending JP2001128184A (ja) 1999-09-03 2000-09-04 映像信号処理装置

Country Status (5)

Country Link
US (1) US6567128B1 (ja)
EP (1) EP1081957B1 (ja)
JP (1) JP2001128184A (ja)
DE (1) DE60031746T2 (ja)
GB (1) GB9920929D0 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5715009A (en) 1994-03-29 1998-02-03 Sony Corporation Picture signal transmitting method and apparatus
CA2265089C (en) * 1998-03-10 2007-07-10 Sony Corporation Transcoding system using encoding history information
CN1241416C (zh) * 1999-02-09 2006-02-08 索尼公司 编码系统和方法、编码及解码、记录及再现的设备和方法
JP3694888B2 (ja) * 1999-12-03 2005-09-14 ソニー株式会社 復号装置および方法、符号化装置および方法、情報処理装置および方法、並びに記録媒体
EP1380173A1 (en) * 2001-04-12 2004-01-14 Koninklijke Philips Electronics N.V. Watermark embedding
GB2407675B (en) * 2002-09-30 2006-01-04 Adobe Systems Inc Reduction of search ambiguity with multiple media references
KR20050073591A (ko) * 2002-10-30 2005-07-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 가변 비트율 신호의 워터마킹
JP4196726B2 (ja) * 2003-05-14 2008-12-17 ソニー株式会社 画像処理装置および画像処理方法、記録媒体、並びに、プログラム
JP4151962B2 (ja) * 2003-08-25 2008-09-17 インターナショナル・ビジネス・マシーンズ・コーポレーション テロップ画像送信装置、テロップ画像受信装置、テロップ画像送受信システム、エンコード装置、及びデコード装置
GB0321083D0 (en) * 2003-09-09 2003-10-08 British Telecomm Video communications method and system
EP1583364A1 (en) * 2004-03-30 2005-10-05 Matsushita Electric Industrial Co., Ltd. Motion compensated interpolation of images at image borders for frame rate conversion
KR100612691B1 (ko) * 2004-04-30 2006-08-16 에스케이 텔레콤주식회사 동영상 화질 평가시스템 및 방법
JP4739295B2 (ja) * 2007-08-27 2011-08-03 日本電信電話株式会社 映像信号生成装置、映像信号生成方法、映像信号生成プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP5216303B2 (ja) * 2007-11-01 2013-06-19 株式会社東芝 合成映像配信装置ならびにその方法およびプログラム
US9794562B2 (en) * 2009-12-04 2017-10-17 Arris Enterprises, Inc. Generation and detection of private metadata in an encoded video transport stream
US8878996B2 (en) * 2009-12-11 2014-11-04 Motorola Mobility Llc Selective decoding of an input stream
US9542611B1 (en) * 2011-08-11 2017-01-10 Harmonic, Inc. Logo detection for macroblock-based video processing

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261966A (ja) * 1998-03-12 1999-09-24 Toshiba Corp 映像符号化装置および映像符号化方法
JP2000078468A (ja) * 1998-07-31 2000-03-14 Sarnoff Corp 制約付き符号化に基づくロゴ挿入

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR910006465B1 (ko) 1988-12-31 1991-08-26 삼성전자 주식회사 영상신호와 보색관계를 가지는 문자를 영상신호에 삽입하는 문자 합성장치
US5594507A (en) * 1990-09-28 1997-01-14 Ictv, Inc. Compressed digital overlay controller and method for MPEG type video signal
KR940001439B1 (ko) 1991-08-30 1994-02-23 삼성전자 주식회사 자막정보 중첩회로
JP2624087B2 (ja) * 1992-07-02 1997-06-25 松下電器産業株式会社 映像信号復号化方法
DE69422960T2 (de) * 1993-12-01 2000-06-15 Matsushita Electric Industrial Co., Ltd. Verfahren und Vorrichtung zum Editieren oder zur Mischung von komprimierten Bildern
US6208693B1 (en) * 1997-02-14 2001-03-27 At&T Corp Chroma-key for efficient and low complexity shape representation of coded arbitrary video objects
US5974172A (en) * 1997-02-14 1999-10-26 At&T Corp Method and apparatus for coding segmented regions which may be transparent in video sequences for content-based scalability
US6038347A (en) * 1997-11-03 2000-03-14 Victor Company Of Japan, Ltd. Method and apparatus for compressing picture-representing data
US6462744B1 (en) * 1998-02-13 2002-10-08 Matsushita Electric Industrial Co., Ltd. Image decoding apparatus that performs image decoding so that frame areas that occupy a large area in a storage apparatus can be used for other purposes, and a recording medium recording an image decoding program
EP0995316A2 (en) * 1998-03-31 2000-04-26 Koninklijke Philips Electronics N.V. Method and device for modifying data in an encoded data stream
US6122014A (en) * 1998-09-17 2000-09-19 Motorola, Inc. Modified chroma keyed technique for simple shape coding for digital video

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261966A (ja) * 1998-03-12 1999-09-24 Toshiba Corp 映像符号化装置および映像符号化方法
JP2000078468A (ja) * 1998-07-31 2000-03-14 Sarnoff Corp 制約付き符号化に基づくロゴ挿入

Also Published As

Publication number Publication date
DE60031746T2 (de) 2007-09-06
US6567128B1 (en) 2003-05-20
DE60031746D1 (de) 2006-12-21
EP1081957B1 (en) 2006-11-08
EP1081957A1 (en) 2001-03-07
GB9920929D0 (en) 1999-11-10

Similar Documents

Publication Publication Date Title
US6122014A (en) Modified chroma keyed technique for simple shape coding for digital video
US9225945B2 (en) Moving picture encoder and encoding method
KR100620270B1 (ko) 압축된 비디오 비트스트림들을 트랜스코딩하는 방법 및 장치
JP2001128184A (ja) 映像信号処理装置
US6567427B1 (en) Image signal multiplexing apparatus and methods, image signal demultiplexing apparatus and methods, and transmission media
CA2420423A1 (en) Digital transcoder with logo insertion
WO2001019090A1 (en) Circuit and method for formatting each of a series of encoded video images into respective regions
JP2001211453A (ja) 映像信号処理装置及び映像信号処理方法
US6556714B2 (en) Signal processing apparatus and method
US6724436B1 (en) Video signal processing
GB2356999A (en) Video signal processing
JP4133581B2 (ja) テロップ合成装置、テロップ合成方法及びテロップ合成プログラム
JP4689001B2 (ja) ビデオ信号処理装置、コンピュータプログラム及びビデオ信号処理方法
US20020021757A1 (en) Process for the format conversion of an image sequence
US7012959B2 (en) Picture information conversion method and apparatus
EP1107602A1 (en) Video signal processing
GB2349771A (en) Re-using motion vetors to encode a combined picture signal
GB2355125A (en) Re-using preserved parameters to encode a combined image signal
JP2001268581A (ja) 画像予測復号化方法，画像予測復号化装置，画像予測符号化方法，画像予測符号化装置，及びデータ記憶媒体
JP2000354249A (ja) ビデオ信号処理装置、ビデオ信号処理方法及びコンピュータプログラム製品
JP2002051345A (ja) 画像情報変換装置及び方法
GB2356507A (en) Method of encoding a video signal to enable logo insertion
JPH09284775A (ja) 客体単位の処理が可能な動映像の符号化／復号化方法及び符号化／復号化装置
JP2007329906A (ja) ビデオデータの生成および圧縮
JP2000333164A (ja) 符号化装置、復号装置、画像処理装置、画像処理システム、画像処理方法、及び記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070807

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20080415

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100302

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100803