JP2000013765A - 付随情報検出装置及び方法、並びに画像データ処理装置及び方法 - Google Patents

Abstract

(57)【要約】 【課題】 入力され画像に付加されている付随情報を検
出する付随情報検出装置及び方法、並びに画像に付随情
報を付加する画像データ処理装置及び方法に関する。 【解決手段】 ウォータマーク検出器１１は、ウォータ
マークを記憶するウォータマークパターン保持メモリ１
２と、ウォータマークパターン保持メモリ１２に記憶さ
れているウォータマークのパターンと検出値とに基づい
て評価値を演算する評価値算出器１４と、評価値の正規
化を行う評価値正規化器１５と、正規化された評価値に
基づいて付随情報の検出を行う評価値比較器１６とを備
える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、入力され画像に付
加されている付随情報を検出する付随情報検出装置及び
方法、並びに画像に付随情報を付加する画像データ処理
装置及び方法に関する。

【０００２】

【従来の技術】特定の画像データ（静止画像或いは動画
像シーケンス）に対して、それに付随する情報を画像デ
ータ中に付加し、再生時にその付随情報を検出して利用
する技術がある。この代表的な例として、著作権情報の
付加が挙げられる。

【０００３】不特定の利用者が特定の画像データを利用
することが可能である場合、その画像に対して著作権を
持つ者がその権利を主張するためには、あらかじめ著作
権情報を画像データ中に付加しておく必要がある。著作
権情報を付加することにより、画像の再生装置或いは再
生方法の処理手順の中で、その画像データを表示不可と
すべき著作権情報が検出された場合には、その画像デー
タの表示を行わない等の対策を講じることが可能とな
る。

【０００４】上述の著作権情報の付加或いは検出は、現
在ビデオテープの不正コピー防止等でよく利用されてい
る。近頃はビデオテープのレンタルを行う店も多いが、
多くの利用者が店から低価格で借りたビデオテープを不
正にコピーして楽しんだ場合、そのビデオテープの著作
権を持つ者及びビデオテープのレンタルを行う店の損害
は甚大である。

【０００５】ビデオテープには、画像データがアナログ
的に記録されているため、コピーを行った場合に画質が
劣化する場合がある。そのため、コピーが複数回繰り返
された場合、元々保持されていた画質を維持することは
非常に困難となる。

【０００６】これに対し、最近普及しつつあるデジタル
的に画像データを記録し再生する機器等においては、不
正コピーによる損害はさらに大きなものとなる。画像デ
ータをデジタル的に扱う機器等では、原理的にコピーに
よって画質が劣化することはない。そのため、デジタル
的に処理を行う機器等における不正コピー防止は、アナ
ログの場合と比べてはるかに重要である。

【０００７】画像データに付随する情報をその画像デー
タ中に付加する方法は、主に２通りある。

【０００８】第１の方法は、画像データの補助部分に付
加する方法である。例えばビデオテープでは、図１２に
示すように、その画像データの補助的情報が画面上部に
記録されている。この領域の一部を利用して、付随情報
を付加することが可能である。

【０００９】第２の方法は、画像データの主要部分に付
加する方法である。これは、図１３に示すように、ある
特定のパターン、例えば、ウォータマーク（Water Mar
k）パターンを視覚的に感知できない程度に画像の全体
或いは一部に付加するものである。この具体例として、
乱数やＭ系列等を用いて発生させた鍵パターンを利用し
て情報の付加或いは検出を行うスペクトラム拡散等があ
る。

【００１０】以下では、従来より行われているウォータ
マークパターンを用いた場合の画像データの主要部分へ
の付随情報の付加及び検出の一例について説明する。

【００１１】ウォータマークは、図１４に示すように、
各画素について、プラス、マイナスの２つのシンボルの
いずれかを取るものと仮定する。なお、実際には、ウォ
ータマークパターンは２つのシンボルのいずれかをラン
ダムに取るものであり、その領域の形状、大きさについ
ても任意である場合が多い。

【００１２】付随情報を付加する際には、図１５に示す
ように、付加を行う対象となる画像上でウォータマーク
パターンの領域と等しい大きさの領域を設定し、そし
て、設定した領域とウォータマークパターンを重ねて照
らし合わせ、プラスのシンボルの画素については値ａを
足し、マイナスのシンボルの画素については値ｂを引
く。ここで、値ａ，ｂ共に、任意の値であり、そのウォ
ータマークパターンを通じて一定である。例えば、本例
では、図１５中（Ｂ）に示すように、値ａ＝１，ｂ＝１
に設定しており、すなわち、図１５中（Ａ）に示すよう
に付加を行う対象となる領域の画素値が全て１００であ
るとした場合には、この埋め込み操作により画素値は、
図１５中（ｃ）に示すように、１０１、９９のいずれか
になる。

【００１３】付随情報を検出する際には、検出を行う対
象となる画像上でウォータマークパターンの領域と等し
い大きさの領域を設定する。そして、この領域の画素全
てを合計した値を評価値として用いる。具体的には、画
素全てを合計の算出は、図１６中（Ａ）及び（Ｂ）に示
すように、設定された領域とウォータマークパターンを
重ねて照らし合わせ、プラスのシンボルの画素について
は足し算、マイナスのシンボルの画素については引き算
する。このとき、付随情報を付加する際に用いたウォー
タマークパターンと同じパターンを用いることが条件で
あることはいうまでもない。

【００１４】このような検出操作により、付随情報が付
加されている場合には、図１６中（Ａ）に示すように、
その評価値は（４ｎ）＾２（領域に含まれる画素数の数
と同じ）になり、また、付随情報が付加されていない場
合には、図１６中（Ｂ）に示すように、その評価値は０
になる。

【００１５】ウォータマークパターンの領域が充分に広
く、かつウォータマークパターンが充分にランダムであ
る場合、付随情報が付加されていない場合の評価値は常
にほぼ０となる。そのため、評価値がある一定の閾値を
超えた場合には、付随情報が付加されていると判別する
ことができる。上記の手順により、付随情報が付加され
ているか否かという２値の情報（１ビット）を付加する
ことが可能となる。ここで、より多くの情報を付加した
い場合には、画像全体をｋ個の領域に分けてそれぞれ上
記の操作を行う等の処理方法により、２＾ｋ通り（k ビ
ット）の情報を付加することができる。

【００１６】さらに、ウォータマークパターンは、Ｍ系
列を用いて生成したものを利用することができる。Ｍ系
列（最長符号系列）は、０，１の２値のシンボルからな
る数列で、０，１の統計的分布は一定であり、符号相関
は原点で１、その他では−１／符号長となるものであ
る。なお、Ｍ系列を用いる以外の方法でウォータマーク
パターンを生成する方法もある。

【００１７】ところで、画像データをデジタル的に記録
し再生する場合、そのままでは非常に情報量が多くなる
ため、データを圧縮するのが一般的である。画像データ
を圧縮する方法として、ＪＰＥＧ（静止画像符号化方
式；Joint Photographic Coding Experts Groupe）、或
いはＭＰＥＧ（動画像符号化方式；Moving Picture Exp
erts Groupe）等の高能率符号化方法が国際的に標準化
され、実用化に至っている。

【００１８】高能率符号化によって画像データを圧縮す
る場合において、付随情報の付加及び検出は、図１７に
示すように構成されたエンコーダ３０１及び図１８に示
すように構成されたデコーダ３０５により実現される。

【００１９】エンコーダ３０１は、図１７に示すよう
に、ウォータマーク付加器３０２において入力されて画
像データに対して付随情報ｆを付加する。そして、エン
コーダ３０１は、付随情報ｆを付加した画像データを符
号化器３０３に入力し、高能率符号化を行って符号化ビ
ット列を生成する。

【００２０】また、デコーダ３０５については、図１８
に示すように、復号器３０６により入力されたビット列
を画像データとして復元する。そして、エンコーダ３０
５は、ウォータマーク検出器２３１において付随情報ｆ
を検出する。

【００２１】なお、画像データを高能率符号化しない場
合には、エンコーダ３０１から符号化器３０３を除き、
また、デコーダ３０５から復号器３０６を除く構成とさ
れる場合もあり、これにより、画像データ上に付随情報
を付加し、又は画像データに付加されている付随情報を
検出する。

【００２２】ここで、ウォータマーク付加器３０２は、
図１９に示すように構成されており、このような構成に
されたウォータマーク付加器３０２は、付随情報ｆがｏ
ｎである場合には、ウォータマークパターン保持メモリ
３１１に記録されているウォータマークパターンを用い
て、付随情報付加器３１２で入力された画像データに対
して付随情報を付加し、また、付随情報ｆがｏｆｆであ
る場合には、入力された画像データを付随情報付加器３
１２からそのまま出力する。

【００２３】また、ウォータマーク検出器３０７は、図
２０に示すように構成されており、このような構成にさ
れたウォータマーク検出器３０７は、ウォータマークパ
ターン保持メモリ３１５に記録されているウォータマー
クパターンを用いて、入力された画像データに基づいて
評価値算出器３１６により評価値を算出している。ここ
で算出された評価値は、評価値比較器３１７で閾値処理
され、付随情報ｆとして出力されている。また、入力さ
れた画像データ自体については、そのまま出力される。
なお、画像変換器３１８（図中点線で示す。）は、入力
された画像データを加工又は処理する部分である。この
ことについては、後で述べる。

【００２４】ウォータマーク付加器３０２で行われる一
連の処理を図２１に示し、また、ウォータマーク検出器
３０７で行われる一連の処理を図２２に示す。

【００２５】ウォータマーク付加処理については、ウォ
ータマーク付加器３０２は、図２１に示すように、ステ
ップＳ３０１において、ウォータマークの付加レベル
ａ，ｂを設定する。

【００２６】続いて、ウォータマーク付加器３０２は、
ステップＳ３０２において、付随情報の付加を行う対象
となる画像上でウォータマークパターンの領域と等しい
大きさの領域を設定し、その領域内の各画素についてウ
ォータマークパターンとの照合を行い、ステップＳ３０
３において、ウォータマークのシンボルの判別を行う。

【００２７】ここで、ウォータマーク付加器３０２は、
その画素のウォータマークのシンボルがプラスである場
合には、ステップＳ３０４に進み、その画素に値ａを足
し、また、その画素のウォータマークのシンボルがマイ
ナスである場合には、ステップＳ３０５に進み、その画
素から値ｂを引く。

【００２８】そして、ウォータマーク付加器３０２は、
ステップＳ３０６において、対象領域の全画素について
処理を行ったか否かの判別処理を行い、ここで、全画素
について処理を行っていないことを確認した場合には、
上記ステップＳ３０２に戻り再び上記照合等の処理を行
い、対象領域の全画素について処理を繰り返す。

【００２９】ウォータマーク検出処理については、ウォ
ータマーク検出器３０７は、図２２に示すように、ステ
ップＳ３１１において、評価値ｓｕｍの初期化及び閾値
ｔｈの設定を行う。

【００３０】続いて、ウォータマーク検出器３０７は、
ステップＳ３１２において、ウォータマークパターンの
領域と等しい大きさの領域を設定し、その領域内の各画
素についてウォータマークパターンとの照合を行い、ス
テップＳ３１３において、ウォータマークのシンボルの
判別を行う。

【００３１】ここで、ウォータマーク検出器３０７は、
その画素のウォータマークのシンボルがプラスである場
合には、ステップＳ３１４に進み、評価値ｓｕｍにその
画素値ｘを足し、また、その画素のウォータマークのシ
ンボルがマイナスである場合には、ステップＳ３１５に
進み、評価値ｓｕｍからその画素値ｘを引く。

【００３２】そして、ウォータマーク検出器３０７は、
ステップＳ３１６において、対象領域の全画素について
処理を行ったか否かの判別処理を行い、ここで、全画素
について処理を行っていないことを確認した場合には、
上記ステップＳ３１２に戻り再び上記照合等の処理を行
い、対象領域の全画素について処理を繰り返す。

【００３３】全画素について上述した処理を行った後、
ウォータマーク検出器３０７は、ステップＳ３１７にお
いて、評価値ｓｕｍ＞閾値ｔｈとして閾値ｔｈに対して
評価値ｓｕｍを比較する。ここでウォータマーク検出器
３０７は、評価値ｓｕｍ＞閾値ｔｈである場合には、ス
テップＳ３１８に進み、画像データに付随情報が付加さ
れているとみなして付随情報ｆをｏｎ（付随情報ｆが存
在している）にして、また、そうでない場合には、ステ
ップＳ３１９に進み、付随情報ｆをｏｆｆ（付随情報ｆ
が存在していない）にする。

【００３４】ここで検出された付随情報ｆは、例えば不
正コピーを防止する場合には、次のように利用される。

【００３５】上記図１８に示すように構成されるデコー
ダ３０５を例にすると、出力される画像データ及び付随
情報ｆは、図示せぬ画像表示部に渡される。画像表示部
では、付随情報ｆがｏｎである場合にはそのまま画像を
表示するが、付随情報ｆがｏｆｆである場合には、例え
ば画像を表示しない、画像データの主要領域を表示しな
い、画像にスクランブルを掛ける（受けとった画像デー
タをでたらめに表示する）等の加工或いは処理を行う。
例えば、画像変換器３１８は、付随情報ｆに応じてこの
ような画像データの加工又は処理を行う部分である。

【００３６】

【発明が解決しようとする課題】ところで、ウォータマ
ークの検出時に算出される評価値は、一般的に付加量α
がそのまま検出されるわけではなく、付加量αを中心に
様々に変動する。このような場合にあっては、付随情報
の検出精度が悪くなってしまう。よって、変動のすくな
い付加量を算出することが望まれる。すなわち、例え
ば、ウォータマーク検出時に画素値の変換等を行い、付
加量を算出することも考えられるが、このような場合に
その影響により付加量が変動すると考えられる。

【００３７】なお、画像データに付随する情報をその画
像データ中に付加する上述の方法では、検出時に次のよ
うな問題が発生する。

【００３８】画像データに付随した情報を検出する際
は、付加した場合のある特定のパターン、（上述した説
明ではウォータマークパターン）に従って、各画素値を
処理し評価値を算出する。ところが、一般に画素値は正
の値であり、検出時は平均的に０ではない正の値を処理
して評価値を算出することになる。そのため、各画素値
が評価値に与える影響は大きく、ウォータマークパター
ンの系列の長さが短い場合には、誤検出の可能性が高く
なる。

【００３９】すなわち、例えば、上述したＭＰＥＧ等の
高能率符号化では、輝度信号Ｙ、色差信号Ｃｂ，Ｃｒは
どれも０〜２５５の範囲で量子化されている。評価値を
算出する際には、平均的に１２８の各画素値を処理する
ことになり、評価値は平均的に１２８の変動を繰り返
す。例えば、系列の長さが１００で、プラスのシンボル
の個数がマイナスよりも２個だけ多い場合には、評価値
は１２８×２で約＋２５６分だけずれてくる。これによ
り、上述したような例のように一つのシンボルで±１の
付加を行っていた場合では、全体では＋１００の付加し
かできないが、上述したように約＋２５６分だけずれて
しまうような従来の方式では、検出精度は低くなってし
まう。

【００４０】このようなことを踏まえて、上述したよう
に、変動を抑えた付加量の算出も望まれる。

【００４１】そこで、本発明は、上述した実情に鑑みて
なされたものであって、画像情報に付加される付加量の
変動を抑えることができる付随情報検出装置及び方法、
並びに画像データ処理装置及び方法を提供することを目
的とする。

【００４２】

【課題を解決するための手段】本発明に係る付随情報検
出装置は、上述の課題を解決するために、付随情報のパ
ターンを出力する付随情報出力手段と、付随情報出力手
段から出力された付随情報と検出値とに基づいて評価値
を演算する評価値演算手段と、評価値の正規化を行う評
価値正規化手段と、正規化された上記評価値に基づいて
付随情報の検出を行う付随情報検出手段とを備える。

【００４３】このような構成を有する付随情報検出装置
は、評価値演算手段により、付随情報出力手段から出力
された付随情報と検出値とに基づいて演算して求めた評
価値を、評価値正規化手段により正規化する。これによ
り、評価値の変動が抑えられる。

【００４４】また、本発明に係る付随情報検出方法は、
上述の課題を解決するために、付随情報のパターンを出
力する付随情報出力工程と、付随情報出力工程において
出力された付随情報と検出値とに基づいて評価値を演算
する評価値演算工程と、評価値の正規化を行う評価値正
規化工程と、正規化された評価値に基づいて付随情報の
検出を行う付随情報検出工程とを有する。

【００４５】このような付随情報検出方法は、評価値演
算工程により、付随情報出力工程において出力された付
随情報と検出値とに基づいて演算して求めた評価値を、
評価値正規化工程において正規化する。これにより、評
価値の変動が抑えられる。

【００４６】また、本発明に係る画像データ処理装置
は、上述の課題を解決するために、付随情報を画像に付
加させる付随情報付加手段と、画像への上記付随情報の
付加量を適用的に変化させる付加量操作手段とを備え
る。

【００４７】このような構成を有する画像データ処理装
置は、付随情報付加手段により画像に付随情報を付加さ
せる際に、付加量操作手段により付随情報の付加量を適
用的に変化させる。これにより、評価値の変動が抑えら
れる。

【００４８】また、本発明に係る画像データ処理方法
は、上述の課題を解決するために、付随情報を上記画像
に付加させる付随情報付加工程と、画像への付随情報の
付加量を適用的に変化させる付加量操作工程とを有す
る。

【００４９】このような画像データ処理方法は、付随情
報付加工程により画像に付随情報を付加させる際に、付
加量操作工程により付随情報の付加量を適用的に変化さ
せる。これにより、評価値の変動が抑えられる。

【００５０】また、本発明に係る付随情報検出装置は、
上述の課題を解決するために、入力された画像に時間方
向にパターンが変化されて埋め込まれている付随情報を
検出する付随情報検出装置であって、付随情報のパター
ンを出力する付随情報出力手段と、入力される画像の画
素値の時間方向に差分値を算出する差分値算出手段と、
付随情報出力手段から出力された付随情報と差分値に基
づいて評価値を演算する評価値演算手段と、評価値に基
づいて付随情報の検出を行う付随情報検出手段とを備え
る。

【００５１】このような構成を有する付随情報検出装置
は、付随情報出力手段から出力された付随情報と、差分
値算出手段により算出した入力される画像の時間方向の
差分値とに基づいて評価値演算手段により評価値を演算
し、付随情報検出手段により、この評価値に基づいて付
随情報の検出を行う。これにより、評価値の変動が抑え
られる。

【００５２】また、本発明に係る付随情報検出方法は、
上述の課題を解決するために、入力された画像に時間方
向にパターンが変化されて埋め込まれている付随情報を
検出する付随情報検出方法であって、付随情報のパター
ンを出力する付随情報出力工程と、入力される画像の画
素値の時間方向に差分値を算出する差分値算出工程と、
付随情報出力工程において出力された付随情報と差分値
に基づいて評価値を演算する評価値演算工程と、評価値
に基づいて付随情報の検出を行う付随情報検出工程とを
有する。

【００５３】このような付随情報検出方法は、付随情報
出力工程において出力された付随情報と、差分値算出工
程により算出した入力される画像の時間方向の差分値と
に基づいて評価値演算工程において評価値を演算し、付
随情報検出工程により、この評価値に基づいて付随情報
の検出を行う。これにより、評価値の変動が抑えられ
る。

【００５４】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を用いて詳しく説明する。

【００５５】第１の実施の形態は、付随情報を検出する
ために用いる評価値を正規化する本発明に係る付随情報
検出装置及び方法を、入力された画像に埋め込まれてい
る付随情報とされるウォータマークを検出するように構
成されたウォータマーク検出器に適用したものである。

【００５６】第１の実施の形態であるウォータマーク検
出器は、図１に示すように、付随情報のパターンを出力
する付随情報出力手段であるウォータマークパターン保
持メモリ１２と、ウォータマークパターン保持メモリ１
２から出力された付随情報と検出値とに基づいて評価値
を演算する評価値演算手段である評価値算出器１４と、
評価値の正規化を行う評価値正規化手段である評価値正
規化器１５と、正規化された評価値に基づいて付随情報
の検出を行う付随情報検出手段である評価値比較器１６
とを備えている。

【００５７】また、ウォータマーク検出器１１は、入力
された画像において近傍の画素との間の画素値の差分値
を上記検出値として算出する差分値算出手段である差分
算出器１３と、ウォータマークの照合の結果に基づいて
入力された画像に処理を施す画像変換器１７とを備えて
いる。

【００５８】このように構成さえれたウォータマーク検
出器１１は、画像データに付加されているウォータマー
クを検出する際の評価値を安定した値として算出するこ
とができる。

【００５９】このウォータマーク検出器１１は、例え
ば、入力された画像データを復号処理するデコーダに備
えられている。デコーダはこのウォータマーク検出器１
１を備えることにより、ウォータマークを検出して、そ
の検出結果に応じて画像処理を行うことができる。

【００６０】デコーダについては、具体的には、従来の
ウォータマーク検出器の説明において用いた図１８に示
したようにエンコーダ３０５と同様に構成されるもので
あって、すなわち、この場合、ウォータマーク検出器３
０７に替えて本実施の形態であるウォータマーク検出器
１１が適用されることになる。なお、画像データに対す
るウォータマークの付加処理については、図１７に示す
ようなエンコーダ３０１により行われる。

【００６１】このような構成を有するウォータマーク検
出器１１は、差分値算出器１６により算出される画素の
差分値に基づいて評価値を算出している。この差分値に
基づいて評価値を算出する技術について図２に示すウォ
ータマーク検出器２を用いて先ず説明する。図２に示す
ウォータマーク検出器２は、差分値に基づいて評価値を
求めるように構成されたものであって、上記図１に示す
ウォータマーク検出器１１と比較するとわかるように、
評価値正規化器１４を有していない構成としている。

【００６２】すなわち、ウォータマーク検出器２は、ウ
ォータマークのパターンを出力する付随情報出力手段で
あるウォータマークパターン保持メモリ３と、入力され
た画像データにおいて近傍の画素との間の画素値の差分
値を算出する差分値算出手段である差分算出器４と、上
記ウォータマークパターン保持メモリ３から取り出した
ウォータマークのパターンと差分値とに基づいて、評価
値を演算する評価値演算手段である評価値算出器５と、
評価値にも基づいてウォータマークの検出を行う付随情
報検出手段である評価値比較器６とを備えている。ま
た、ウォータマーク検出器２は、ウォータマークの照合
の結果に基づいて入力された画像に処理を施す画像変換
器７を備えている。

【００６３】上記差分算出器４は、入力された画像デー
タのそれぞれの画素に対する差分値を算出する。ここで
算出された差分値は、評価値算出器５に入力される。

【００６４】上記ウォータマークパターン保持メモリ３
は、予めウォータマークが格納される記憶手段であっ
て、上記評価値算出器５は、このウォータマーパターン
保持メモり３に記録されているウォータマークパターン
を用いて、評価値を算出する。ここで算出された評価値
は、評価値比較器６に入力される。

【００６５】評価値比較器６は、評価値を閾値処理し
て、付随情報ｆを出力する。

【００６６】また、入力された画像自体は、通常、その
まま出力されるが、画像変換器７は、必要に応じてこの
入力された画像データを加工又は処理する機能を有して
いる。例えば、画像を表示する画像表示部において、付
随情報ｆがｏｎである場合にはそのまま画像を表示する
が、付随情報ｆがｏｆｆである場合には、例えば画像を
表示しない、画像データの主要領域を表示しない、画像
にスクランブルを掛ける（受けとった画像データをでた
らめに表示する）等の加工或いは処理を行う。この画像
変換器７は、このようにね付随情報ｆに応じて画像デー
タの加工又は処理を行う部分である。

【００６７】このような構成を有するウォータマーク検
出器２は、付随情報の検出処理を、図３に示すように、
一連の処理により実行している。

【００６８】ウォータマーク検出器２は、ステップＳ１
において、評価値ｓｕｍの初期化及び閾値ｔｈの設定を
行う。

【００６９】続いて、ウォータマーク検出器２は、ステ
ップＳ２において、ウォータマークパターンの領域と等
しい大きさの領域を設定し、その領域内の各画素につい
てウォータマークパターンとの照合を行い、ステップＳ
３において、その照合を行った画素Ｘに対する差分値ｘ
ｄを求める。

【００７０】そして、ウォータマーク検出器２は、ステ
ップＳ４において、ウォータマークのシンボルの判別を
行う。ここで、ウォータマーク検出器２は、その画素の
ウォータマークのシンボルがプラスである場合には、ス
テップＳ５に進み、評価値ｓｕｍにその画素値ｘｄを足
し、また、その画素のウォータマークのシンボルがマイ
ナスである場合には、ステップＳ６に進み、評価値ｓｕ
ｍからその画素値ｘｄを引く。

【００７１】それからウォータマーク検出器２は、ステ
ップＳ７において、対象領域の全画素について処理を行
ったか否かの判別処理を行い、ここで、全画素について
処理を行っていないことを確認した場合には、上記ステ
ップＳ２に戻り再び上記照合等の処理を行い、対象領域
の全画素について処理を繰り返す。

【００７２】全画素について上述した処理を行った後、
ウォータマーク検出器２は、ステップＳ８において、評
価値ｓｕｍ＞閾値ｔｈとして閾値ｔｈに対して評価値ｓ
ｕｍを比較する。ここでウォータマーク検出器２は、評
価値ｓｕｍ＞閾値ｔｈである場合には、ステップＳ９に
進み、画像データに付随情報が付加されているとみなし
て付随情報ｆをｏｎ（付随情報ｆが存在している）にし
て、また、そうでない場合には、ステップＳ１０に進
み、付随情報ｆをｏｆｆ（付随情報ｆが存在していな
い）にする。ここで検出された付随情報ｆに基づいて、
従来と同様に、例えば不正コピーの防止処理がなされ
る。

【００７３】以上のようにウォータマーク検出器２は、
評価値ｓｕｍを算出する際、対象の画素Ｘそのもの画素
値ｘを用いるのではなく、画素Ｘの差分値ｘｄを算出し
ている。そして、ウォータマーク検出器２は、差分値ｘ
ｄに基づいて評価値を算出して、これにより付随情報を
検出している。

【００７４】よって、ウォータマーク検出器２は、差分
値を用いて評価値を算出しているので、画像データの個
々の値が評価値に与える影響を小さくすることができ
る。これにより、ウォータマーク検出器２は、付随情報
の検出精度を高くすることができるので、確実は付随情
報の検出が可能になる。

【００７５】すなわち、具体的には、上述したように、
０〜２５５の範囲で量子化されている各画素値につい
て、近隣の画素値との差分をとると、値の範囲自体は−
２５５〜２５５に広がってしまう。しかし、一般的に画
像では近隣の画素値の相関が高いため、差分値は平均的
に０になる。よって、例えば、系列の長さが１００で、
プラスのシンボルの個数がマイナスよりも２個だけ多い
場合でも、評価値のずれは約±０になる。一つのシンボ
ルで±１の付加を行なっていた場合、全体で＋１００の
付加量があれば、従来よりも高い検出精度を得ることが
できることになる。

【００７６】なお、画素Ｘに対する差分値ｘｄの計算方
法については、次のような例が挙げられる。

【００７７】差分値ｘｄを求める第１の計算方法には、
画素Ｘと同じ垂直座標に位置する画素との差分（以下、
横差分と称する。）によりを求める方法がある。

【００７８】すなわち、例えば、画素Ｘの左隣に位置す
る画素ＸＬと差分をとることにして、差分値ｘｄ＝ＸＬ
−Ｘを得る。なお、差分値ｘｄ＝Ｘ−ＸＬとすることに
しても良い。

【００７９】また、差分を求める対象は、左隣に限定さ
れる必要はなく、ｎ個だけ左に位置する画素ＸＬｎとの
差分を用いても良い。この場合、差分値ｘｄ＝ＸＬｎ−
Ｘとなる。または、差分値ｘｄ =Ｘ−ＸＬｎとなる。も
ちろん、画素Ｘの右側に位置する画素と差分をとること
にしても良い。

【００８０】次に、第２の計算方法には、画素Ｘと同じ
水平座標に位置する画素との差（以下、縦差分と称す
る。）を求める方法がある。例えば、画素Ｘの上隣に位
置する画素ＸＵと差分をとることにして、差分値ｘｄ＝
ＸＵ−Ｘを得る。なお、差分値ｘｄ＝Ｘ−ＸＵｄとする
ことにしても良い。

【００８１】また、差分を求める対象は、上隣に限定さ
れる必要はなく、ｎ個だけ上に位置する画素ＸＵｎとの
差分を用いても良い。すなわち、この場合、差分値ｘｄ
＝ＸＵｎ−Ｘとなる。または、差分値ｘｄ＝Ｘ−ＸＵｎ
となる。もちろん、画素Ｘの下側に位置する画素と差分
をとることにしても良い。

【００８２】第３の計算方法としては、差分を求める対
象を、垂直座標か水平座標が同じでないものとして求め
る方法がある。

【００８３】例えば、画素Ｘの座標位置から、上に３画
素、右に１２画素離れた画素との差分をとるようにして
も良い。

【００８４】なお、上述したような計算方法以外にも、
画像の上下左右の端の方に画素が位置された場合に差分
対象となる画素が画像の外側位置に存在する場合を考慮
して計算方法もある（第４の計算方法）。この場合、差
分値ｘｄを任意の値に設定する。例えば、この場合は差
分値が計算できないと判定し、差分値ｘｄ＝０としても
良い。または、上述したような計算方法の何らかを用い
て、差分対象となる画素を構成しても良い。さらに、こ
のように対象とされる画素が画像の外側に位置される場
合に、画像を周期化する方法を用いて差分値を求めるこ
ともできる。例えば、左隣の画素を用いて差分値を求め
る場合について考えると、画素Ｘの座標（ｙ，ｘ）が
（５，０）のとき、差分対象となる左隣の画素ＸＬは座
標（５，−１）となり、画素ＸＬは画像の外側に位置す
ることになる。そこで、画像の水平方向の画素数ＮＨを
画素ＸＬの水平成分に加える周期化を行い、座標（５，
ＮＨ−１）に位置する画素を用いる。もちろん、これ以
外の方法によって、差分対象となる画素を構成しても構
わない。

【００８５】また、第５の計算方法として、次のような
計算方法を用いて、画素Ｘに対する差分値ｘｄを求めて
ることもできる。

【００８６】まず、上述した横差分と縦差分の両方を用
いて、差分値を求める方法が挙げられる。例えば、画素
Ｘ（ｙ，ｘ）に対する差分値ｘｄを求める際には、画素
ＸＬ（ｙ，ｘ−１），ＸＵ（ｙ−１，ｘ），ＸＵＬ（ｙ
−１，ｘ−１）の３画素を用いて、差分値 ｘｄを以下
のように求める。

【００８７】ｘｄ＝（ＸＵＬ−ＸＵ）−（ＸＬ−Ｘ） 複数の画素を用いて差分値を求める方法の例は、これに
限定されることなく次のような算出方法を採ることもで
きる。

【００８８】例えば横差分なら、画素Ｘ０に対する差分
値ｘｄを求める際に、右隣に連続する４つの画素Ｘ０
（ｙ，ｘ），Ｘ１（ｙ，ｘ＋１），Ｘ２（ｙ，ｘ＋
２），Ｘ３（ｙ，ｘ＋３）を用いることにしても良い。
この場合、次のような式により各差分値ｘｄ１，ｘｄ
２，ｘｄ３を求める。

【００８９】ｘｄ１＝Ｘ０−Ｘ１＋Ｘ２−Ｘ３ ｘｄ２＝Ｘ０−Ｘ１−Ｘ２＋Ｘ３ ｘｄ３＝Ｘ０＋Ｘ１−Ｘ２−Ｘ３ そして、最終的に得たい差分値ｘｄを、これらの差分値
ｘｄ１，ｘｄ２，ｘｄ３から算出する。例えば、ｘｄ
１，ｘｄ２，ｘｄ３の平均、中間値、０にもっとも近い
値などを得たい差分値ｘｄに決定する。または、これら
の値それぞれに対して個別に評価値を求めるような構成
をとり、評価値を比較する際にそれらを利用することに
しても良い。

【００９０】また、画素Ｘに対する差分値ｘｄを求める
際に、画素Ｘ自体を用いなくても良い。この場合には、
例えば、Ｘ（ｙ，ｘ）に対する差分値ｘｄを求める際
に、画素ＸＬ（ｙ，ｘ−１），ＸＲ（ｙ，ｘ＋１）を用
い、以下の通り差分値 ｘｄ を求める。

【００９１】 ｘｄ＝ＸＬ（ｙ，ｘ−１）−ＸＲ（ｙ，ｘ＋１） 差分値ｘｄを求める際に画素Ｘ自体を用いない他の例と
しては、さらに、例えば画素Ｘと同じウォータマークシ
ンボルの画素Ｘｓａｍｅと、画素Ｘと異なるウォータマ
ークシンボルの画素Ｘｄｉｆｆから、以下の通り差分値
ｘｄを求める方法もある。

【００９２】ｘｄ = Ｘｓａｍｅ−Ｘｄｉｆｆ ここで、画素Ｘｓａｍｅ, Ｘｄｉｆｆを選ぶ基準は、例
えば画素位置が画素Ｘと一番近いもの、又は、画素Ｘと
値が一番近いものなどにする。

【００９３】上述したように多岐にわたる算出方法によ
り差分値を算出しているが、これは、画像では近隣の画
素値の相関が高いため、画素Ｘの差分値は平均的に０に
なることを利用している。

【００９４】ところで、画素位置がエッジの境界などに
ある場合、その差分値の絶対値は大きな値となってしま
うことが多く、上述のような算出方法においてさらにこ
のよな現象を考慮しないと、評価値はその差分値によっ
て大きな影響を受けてしまう。

【００９５】このことを避けるために、差分値の絶対値
がある範囲を超える場合には、その差分値を評価値に反
映させないような方法を採ることができる。例えば、そ
の値をクリッピングする。

【００９６】クリッピングについて、図４乃至図６を用
いて説明する。なお、クリッピングによる変換後の差分
値については、差分値ｘｄ’と示す。

【００９７】クリッピングについての第１の例は、図４
に示すように、差分値ｘｄの絶対値｜ｘｄ｜＞ａ（ａ≧
０）の場合に、変換後の差分値ｘｄ’を以下のように変
換する。

【００９８】ｘｄ’＝ｘｄ （｜ｘｄ｜≦ａ） ｘｄ’＝０ （｜ｘｄ｜＞ａ） また、クリッピングについての第２の例は、図５に示す
ように、以下のようなに変換する。

【００９９】ｘｄ’＝ｘｄ （｜ｘｄ｜≦ａ） ｘｄ’＝ａ （｜ｘｄ｜＞ａ，ｘｄ≧０） ｘｄ’＝−ａ （｜ｘｄ｜＞ａ，ｘｄ≧０） さらに、クリッピングについての第３の例は、図６に示
すように、算出された差分値ｘｄの平方根をとり、以下
のように変換する。なお、ここで関数ｓｑｒｔ（Ｂ）
は、値Ｂの平方根をとることを示す。

【０１００】 ｘｄ’＝ｓｑｒｔ（ｘｄ） （ｘｄ≧０） ｘｄ’＝−ｓｑｒｔ（−ｘｄ） （ｘｄ＜０） また、この他に、次のような例も挙げることができる。
例えば、次に示すように、差分値ｘｄの４乗根を取る。

【０１０１】 ｘｄ’＝ｓｑｒｔ（ｓｑｒｔ（ｘｄ）） （ｘｄ≧０） ｘｄ’＝−ｓｑｒｔ（ｓｑｒｔ（−ｘｄ）） （ｘｄ＜０） また、次に示すように、折れ線的な関数により差分値ｘ
ｄを変換する。

【０１０２】 ｘｄ’＝−８ （ｘｄ＜−１６） ｘｄ’＝（ｘｄ＋８）／４−６ （−１６≦ｘｄ＜−８） ｘｄ’＝（ｘｄ＋４）／２− ４ （−８≦ｘｄ≦−４） ｘｄ’＝ｘｄ （｜ｘｄ｜≦４） ｘｄ’＝（ｘｄ−４）／２＋４ （４＜ｘｄ≦８） ｘｄ’＝（ｘｄ−８）／４＋６ （８＜ｘｄ≦１６） ｘｄ’＝８ （１６＜ｘｄ） このような差分値の変換処理を行うことにより、エッジ
の境界などにある画素についての差分値が評価値に与え
る影響を少なくすることができる。

【０１０３】以上のように、ウォータマーク検出器２
は、差分値に基づいて評価値を算出している。しかし、
上述したような差分値の変換処理により、評価値が変動
する。例えば、図５に示すような差分値の変換操作を行
った場合には、差分値の絶対値｜ｘｄ｜＞ａ（ａ≧０）
の差分値ｘｄからは、ウォータマーク付加成分は検出で
きないために評価値が変動してしまう。すなわち、ウォ
ータマークの検出時に算出される評価値は、一般的に付
加量α（図１６中（Ａ）で示した例では、（４ｎ）＾
２）がそのまま検出されるのではなく、付加量αを中心
に様々な値に変動する。

【０１０４】すなわち、例えば、各画素を±１して付加
を行なった画像に対して、検出時にａ＝２で差分値ｘｄ
＝１０の画素があったとしても、差分値ｘｄ＝２でクリ
ッピングされてしまうため、この画素のウォータマーク
付加成分は評価値に反映されないことになる。具体例を
挙げると、差分値の半分がクリッピングされると、付加
時の付加量がαであっても、検出時にはα／２になって
しまう。

【０１０５】そこで、本発明の第１の実施の形態である
ウォータマーク検出器１１は、例えば、いわゆる正規化
係数とされるカウント係数ｃを導入して、評価値の正規
化を行っている。ここで、カウント係数ｃは、画像中の
全ての差分値の個数ｃｏｕｎｔ＿ａｌｌの内、差分の絶
対値｜ｘｄ｜≦ａ（ａ≧０）となる個数ｃｏｕｎｔ＿ｓ
ｕｍである場合、ｃ＝ｃｏｕｎｔ＿ａｌｌ／ｃｏｕｎｔ
＿ｓｕｍと定義する。

【０１０６】ウォータマーク検出器１１の行う正規化
は、このカウント係数ｃを評価値ｓｕｍに掛けることに
よって行うものである。

【０１０７】このようにすれば、クリッピングによって
評価値に反映されなかったウォータマーク付加成分があ
った場合でも、それが反映されていた時の評価値を疑似
的に求めることができるため、検出時に安定した（例え
ば常に一定の）評価値を得ることができる。上記で挙げ
た具体例では、例えばｃ＝１／０．５と設定されるた
め、評価値の正規化するとｓｕｍ×ｃ＝α／２×１／
０．５＝αとなり、付加時の付加量αを検出することが
できる。

【０１０８】また、カウント係数ｃを、例えば図６に示
すように差分値ｘｄの平方根を用いて評価値を算出する
場合に適用させることもできる。

【０１０９】例えば、各画素を±１して付加を行なった
とすると、ある画素Ｘ＿ｎｏｗ（画素値ｘ＿ｎｏｗ）の
ウォータマーク付加成分α＿ｎｏｗは、検出時のこの平
方根の変換によって、以下のα＿ｎｏｗ’になると考え
られる。なお、ウォータマークを付加する前の画素値を
画素値ｘ＿ｏｒｉとし、ｘ＿ｏｒｉ＞０と仮定する。

【０１１０】そして、α＿ｎｏｗ＝±１、画素値ｘ＿ｏ
ｒｉの平方根をｓｑｒｔ（ｘ＿ｏｒｉ）、画素値ｘ＿ｎ
ｏｗの平方根をｓｑｒｔ（ｘ＿ｎｏｗ）＝ｓｑｒｔ ｘ
＿ｏｒｉ±１）とした場合、 α＿ｎｏｗ’＝ｓｑｒｔ（ｘ＿ｏｒｉ±１）−ｓｑｒｔ
（ｘ＿ｏｒｉ） となる。

【０１１１】これにより、ｘ＿ｏｒｉ＝２で、＋１の付
加の場合を例にとると、次のようになる。

【０１１２】 すなわち、この例によれば、付加成分は、＋１から＋
０．３２になる。

【０１１３】このように、平方根をとり差分値ｘｄを算
出すると、ウォータマーク付加成分が小さいものとして
検出される。そこで、ある画素Ｘ＿ｎｏｗのウォータマ
ーク付加成分は、差分値の変換式に従った値α＿ｎｏ
ｗ’に比例すると仮定し、カウント係数ｃにこの値を反
映させる。

【０１１４】その方法の一例は、あらかじめｃｏｕｎｔ
＿ｓｕｍ＝０の初期化を行ない、各画素毎の処理では差
分値の変換後の付加成分α＿ｎｏｗ’をｃｏｕｎｔ＿ｓ
ｕｍに加えて更新を行ない、全画素（画素数ｃｏｕｎｔ
＿ａｌｌ）の処理が終わった後でｃ＝ｃｏｕｎｔ＿ａｌ
ｌ／ｃｏｕｎｔ＿ｓｕｍとする。ｃｏｕｎｔ＿ｓｕｍ
は、小数精度でカウントできるようにした方が良い。こ
れ以外の方法でカウント係数ｃに反映させても良い。

【０１１５】なお、上記のα＿ｎｏｗ’では、±１の不
確定成分があるが、例えば＋１あるいは−１等に固定し
て算出しても良いし、ウォータマークパターンを照合す
ることによって付加方向を判定してから算出しても良
い。もちろん、上記で記したα＿ｎｏｗ’以外のどのよ
うな値あるいは変換式を用いても良い。

【０１１６】上述した例では、画素Ｘに対する差分値ｘ
ｄを用いて評価値を算出する場合について説明したが、
差分値にのみ適用されることに限定されない。例えば画
素Ｘの値ｘｓを用いる場合に、ｘｓ＜１００でｘｓ＝１
００，ｘｓ＞１５０でｘｓ＝１５０のようなクリッピン
グを行なうことにし、それに対応したカウント係数を用
いることにしても良い。

【０１１７】また、カウント係数の利用方法は、差分値
や画素値の変換方法と連動していなくても良い。例え
ば、検出時に差分値や画素値の変換を一切行なわないで
評価値を算出するが、図５に示したような変換が行なわ
れた場合のカウント係数を利用して評価値を正規化して
も良い。

【０１１８】カウント係数は、どのようなものであって
も良い。上述した例では、差分値や画素値の変換式から
カウント係数を設定する方法を主に説明したが、それら
の方法に限定される必要はない。例えば、画像の輝度の
平均値そのものをカウント係数にしても良い。

【０１１９】さらに、評価値を算出する際に用いる検出
値（例えば、画素値やその差分値など）自体を正規化し
ても良い。

【０１２０】このウォータマーク検出器１１を構成する
各部の処理は次のようになる。

【０１２１】評価値算出器１４は、入力された画像デー
タと、ウォータマークパターン保持メモリ１２に記憶さ
れているウォータマークパターンを用いて、評価値を算
出する。そして、評価値算出器１４は、この評価値の算
出と同時に、上述したカウント係数ｃを設定する。

【０１２２】なお、このウォータマーク検出器１１は、
上述したように、差分値から評価値を算出するものであ
って、差分算出器１３は、それぞれの画素に対する差分
値を算出する。なお、この差分算出器１３は、このよう
に差分値から評価値を算出する際に用いられるものであ
って、画素値そのものから評価値を算出する場合には備
えることを要件とされなくなる。

【０１２３】評価値正規化器１５は、カウント係数ｃを
用いて評価値の正規化が行なわれる。正規化された評価
値は、評価値比較器１６に入力される。

【０１２４】評価値比較器１６は、評価値から閾値処理
して、付随情報ｆを出力する。また、入力された画像デ
ータ自体も、そのまま出力される。

【０１２５】画像変換器１７は、入力された画像データ
が加工あるいは処理されて出力される。なお、これにつ
いては、備えることを要件としていない。

【０１２６】ウォータマーク検出器１１は、以上のよう
に処理を行うが、図７を用いてその一連の工程を詳しく
説明する。

【０１２７】ウォータマーク検出器１１は、ステップＳ
２１において、評価値ｓｕｍの初期化及び閾値ｔｈの設
定を行う。図には示していないが、例えば、上述したカ
ウント係数ｃの初期化をこの時行うこととしてもよい。

【０１２８】続いて、ウォータマーク検出器１１は、ス
テップＳ２２において、ウォータマークパターンの領域
と等しい大きさの領域を設定し、その領域内の各画素に
ついてウォータマークパターンとの照合を行う。ここ
で、現在処理中の画素Ｘの値はｘｓとする。なお、続く
ステップとしてステップＳ２３を設け、照合を行なった
画素Ｘに対する差分値ｘｄを利用することにし、ｘｓ＝
ｘｄとしても良い。

【０１２９】その後、ウォータマーク検出器１１は、ス
テップＳ２４に示すように、カウント係数ｃの設定ある
いは更新を行なう。なお、ここで、画素Ｘの値ｘｓの変
換を行なっても良い。

【０１３０】そして、ウォータマーク検出器１１は、ス
テップＳ２５において、ウォータマークのシンボルの判
別を行う。ここで、ウォータマーク検出器１１は、その
画素のウォータマークのシンボルがプラスである場合に
は、ステップＳ２６に進み、評価値ｓｕｍにその画素値
ｘｓを足し、また、その画素のウォータマークのシンボ
ルがマイナスである場合には、ステップＳ２７に進み、
評価値ｓｕｍからその画素値ｘｓを引く。

【０１３１】それからウォータマーク検出器１１は、ス
テップＳ２８において、対象領域の全画素について処理
を行ったか否かの判別処理を行い、ここで、全画素につ
いて処理を行っていないことを確認した場合には、上記
ステップＳ２２に戻り再び上記照合等の処理を行い、対
象領域の全画素について処理を繰り返す。

【０１３２】全画素について上述した処理を行った後、
ウォータマーク検出器１１は、ステップＳ２９におい
て、カウント係数ｃで評価値ｓｕｍを正規化する。

【０１３３】評価値の正規化後、ウォータマーク検出器
１１は、ステップＳ３０において、評価値ｓｕｍ＞閾値
ｔｈとして閾値ｔｈに対して正規化された評価値ｓｕｍ
を比較する。ここで、ウォータマーク検出器１１は、評
価値ｓｕｍ＞閾値ｔｈである場合には、ステップＳ３１
に進み、画像データに付随情報が付加されているとみな
して付随情報ｆをｏｎ（付随情報ｆが存在している）に
して、また、そうでない場合には、ステップＳ３２に進
み、付随情報ｆをｏｆｆ（付随情報ｆが存在していな
い）にする。ここで検出された付随情報ｆに基づいて、
従来と同様に、例えば不正コピーの防止処理がなされ
る。

【０１３４】以上のように構成され、ウォータマークの
検出処理を行うウォータマーク検出器１１は、評価値を
正規化して、この正規化した評価値により付随情報の検
出を行っている。これにより、ウォータマーク検出器１
１は、クリッピング操作等により画素値又は差分値（検
出値）が変換されても、その影響により変動することの
ない評価値により付随情報を検出することができる。こ
れにより、付随情報の検出の信頼性を上げることができ
る。

【０１３５】なお、ウォータマークのシンボルについて
は、プラス、マイナス以外のどのようなシンボルを用い
ることもできる。さらに、ウォータマークのシンボルの
種類についても、２種類ではなく、３種類以上のどのよ
うなシンボルを用いることもできる。例えば、プラス、
ゼロ、マイナスの３種類のシンボルを用意しておき、ウ
ォータマークパターンとの照合を行った際にシンボルが
ゼロである画素については、評価値ｓｕｍに影響を与え
ない（その画素値を評価値ｓｕｍに足しも引きもしな
い）ようにするなど、各シンボルにどのような意味を与
える。

【０１３６】また、ウォータマークパターンを画像上に
付加する領域は、任意の形状及び範囲で構わない。

【０１３７】さらに、付加したウォータマークパターン
との整合が取れている限り、検出時に評価値を求める領
域の形状及び範囲は任意で構わない。さらにウォータマ
ークパターンは、時間的或いは空間的に渡るより広い領
域を用いて、検出を行うことにしても良い。例えば動画
像シーケンスにおいては、時間的な基準を用い、現フレ
ームの時間的位置だけでなく、過去や未来のフレームも
利用して良い。例えば非常に大きな画像サイズを持つ静
止画像においては、１枚の画像をある単位で複数の画像
領域に分割して扱うことにし、空間的な基準を用い、現
在対象としている画像領域に対して、例えば走査順で前
や後に位置する画像領域も利用して良い。

【０１３８】次に第２の実施の形態について説明する。
この第２の実施の形態は、画像に付随情報とされるウォ
ータマークを埋め込む処理を行う本発明に係る画像デー
タ処理装置及び方法を適用したウォータマーク付加器２
１である。

【０１３９】このウォータマーク付加器２１は、図８に
示すように、付随情報を画像に付加させる付随情報付加
手段である付随情報付加器２２と、画像への付随情報の
付加量を適用的に変化させる付加量操作手段である付加
量見積器２３とを備えている。そして、ウォータマーク
付加器２２は、付随情報であるウォータマークを記憶す
るウォータマークパターン保持メモリ２４とを備えてい
る。

【０１４０】このように構成されたウォータマーク付加
器２１は、ウォータマークの付加時に各画素に対するウ
ォータマーク付加成分を適応的に変化させることによっ
て、検出時に安定した評価値を得ることができる。

【０１４１】例えば、ウォータマークの検出時に評価値
を算出する際、画像データの個々の値が評価値に与える
影響を小さくするために、上述したように、各画素値
（あるいは、差分値などでも良い）に対する変換操作が
行う場合がある。この変換によって、各画素のウォータ
マーク付加成分は一般に様々な値になるため、検出時の
評価値では付加時の付加量がα以外の値になる、すなわ
ち変動することが多く、本発明の第２の実施形態である
ウォータマーク検出器２１は、このような付加量αの変
動を抑えることができる。

【０１４２】例えば、図６に示したように、差分値ｘｄ
の平方根を用いて評価値を算出する場合を例にとり説明
する。なお、図６における説明では、差分値ｘｄは差分
値であるが、ここでは説明を簡単にするために、差分値
ｘｄが画素値であるとみなして説明する。なお、もちろ
ん、差分値ｘｄが差分値である場合も、これから説明す
ることに適用することはできる。

【０１４３】ウォータマークを付加する前の画素値をｘ
＿ｏｒｉ＞０と仮定すると、検出時のウォータマーク付
加成分は、第１の実施の形態において説明したと同様
に、次のようになる。

【０１４４】α＿ｎｏｗ’＝ｓｑｒｔ（ｘ＿ｏｒｉ±
１）−ｓｑｒｔ（ｘ＿ｏｒｉ） ここで、各画素値ｘ＿ｏｒｉは一般的には互いが異なる
値であるので、各画素のウォータマーク付加成分は一般
に様々な値を取ることが、上式からもわかる。そこで、
ウォータマークの付加時に各画素値毎に付加量を変える
ことによって、例えば検出時のウォータマーク付加成分
を各画素値毎に一定にすることができるようになる。

【０１４５】検出時のウォータマーク付加成分を常に±
１とする場合を例として説明する。例えば検出時の付加
成分を＋１とする場合には、付加時の付加成分βは次の
ように算出される。

【０１４６】１＝ｓｑｒｔ（ｘ＿ｏｒｉ＋β）−ｓｑｒ
ｔ（ｘ＿ｏｒｉ） １＋ｓｑｒｔ（ｘ＿ｏｒｉ）＝ｓｑｒｔ（ｘ＿ｏｒｉ＋
β） ここで、両辺を二乗すると、 ｛１＋ｓｑｒｔ（ｘ＿ｏｒｉ）｝＾２＝ｘ＿ｏｒｉ＋β よって、 β＝｛１＋ｓｑｒｔ（ｘ＿ｏｒｉ）｝＾２− ｘ＿ｏｒｉ ＝１＋２×ｓｑｒｔ（ｘ＿ｏｒｉ）＋ｘ＿ｏｒｉ−ｘ＿ｏｒｉ ＝１＋２×ｓｑｒｔ（ｘ＿ｏｒｉ） なお、このような算出手順により、検出時の付加成分を
−１とする場合のβも、計算することができる。このよ
うにして付加時の付加成分βを設定することにより、検
出時のウォータマーク付加成分を各画値毎に±１で一定
にすることができる。

【０１４７】なお、付加係数ｅを設けることによって、
付加量の変動を表現しても良い。例えば上述した例で
は、ｅ＝β／１と設定する。

【０１４８】例えば、付加成分βを設定する際の基準と
して、上述した例では検出時のウォータマーク付加成分
を常に±１とする場合を説明したが、これ以外の基準で
あっても一向に構わない。例えば、少なくとも±０．２
の付加成分となるように付加成分βを設定しても良い
し、画素値の変化が少ない所ではβ＝０となるように設
定しても良い。もちろん画素値以外の値、例えば差分値
を用いても良いので、差分値が大きな所では、検出時の
付加量が通常よりも遥かに大きくなるようなβに設定し
ても良い。ただ一般的には、ウォータマーク検出時に行
なわれる差分値や画素値の変換と対応させて、付加成分
を設定した方が良い。

【０１４９】このウォータマーク付加器２１を構成する
各部の処理については次のようになる。

【０１５０】付加量見積器２３は、入力された画像デー
タから各画素毎の付加量の変動分を見積り、その変動分
を付加係数ｅとして付随情報付加器２２に渡す。

【０１５１】付随情報付加器２２では、付随情報ｆがｏ
ｎである場合に、この付加係数ｅを反映させながら、ウ
ォータマークパターン保持メモリ２４で記録されている
ウォータマークパターンを用いて、入力された画像デー
タに付随情報を付加する。また、付随情報ｆがｏｆｆで
ある場合には、付随情報付加器２２は入力された画像デ
ータをそのまま出力する。なお、本例では、付加係数ｅ
は各画素毎に設定されると記したが、あるまとまった範
囲あるいは領域を代表して設定されることにしても良
い。

【０１５２】次に、ウォータマーク付加器２１の行う付
加処理の一連の工程について、図９を用いて説明する。

【０１５３】ウォータマーク付加器２１は、ステップＳ
４１において、ウォータマークの付加レベルａ，ｂを設
定する。

【０１５４】続いて、ウォータマーク付加器２１は、ス
テップＳ４２において、付随情報の付加を行う対象とな
る画像上で、各画素について付加係数ｅを設定する。例
えば、付加係数ｅは、あるまとまった範囲あるいは領域
を代表して設定されることにしても良い。

【０１５５】それから、ウォータマーク付加器２１は、
ステップＳ４３において、ウォータマークパターンの領
域と等しい大きさの領域を設定し、その領域内の各画素
についてウォータマークパターンとの照合を行い、ステ
ップＳ４４において、ウォータマークのシンボルの判別
を行う。

【０１５６】ここで、ウォータマーク付加器２１は、そ
の画素のウォータマークのシンボルがプラスである場合
には、ステップＳ４５に進み、その画素に値ａ×ｅを足
し、また、その画素のウォータマークのシンボルがマイ
ナスである場合には、ステップＳ４６に進み、その画素
から値ｂ×ｅを引く。

【０１５７】そして、ウォータマーク付加器２１は、ス
テップＳ４７において、対象領域の全画素について処理
を行ったか否かの判別処理を行い、ここで、全画素につ
いて処理を行っていないことを確認した場合には、上記
ステップＳ４２に戻り再び上記照合等の処理を行い、対
象領域の全画素について処理を繰り返す。

【０１５８】以上のように構成され、ウォータマークの
付加処理を行うウォータマーク付加器２１は、ウォータ
マークの付加時に各画素に対するウォータマーク付加成
分を適用的に変化させることにより、検出時に変動なく
安定した評価値を得することができる。

【０１５９】このようにウォータマークを付加すること
は、ウォータマーク検出時に行なわれる差分値や画素値
の変換と対応させて、付加成分を設定した時に、顕著な
効果として現れる。

【０１６０】なお、ウォータマークのシンボルについて
は、プラス、マイナス以外のどのようなシンボルを用い
ることもできる。さらに、ウォータマークのシンボルの
種類についても、２種類ではなく、３種類以上のどのよ
うなシンボルを用いることもできる。例えば、プラス、
ゼロ、マイナスの３種類のシンボルを用意しておき、ウ
ォータマークパターンとの照合を行った際にシンボルが
ゼロである画素については、評価値ｓｕｍに影響を与え
ない（その画素値を評価値ｓｕｍに足しも引きもしな
い）ようにするなど、各シンボルにどのような意味を与
える。

【０１６１】また、ウォータマークパターンを画像上に
付加する領域は、任意の形状及び範囲で構わない。

【０１６２】さらに、付加したウォータマークパターン
との整合が取れている限り、検出時に評価値を求める領
域の形状及び範囲は任意で構わない。さらにウォータマ
ークパターンは、時間的或いは空間的に渡るより広い領
域を用いて、検出を行うことにしても良い。例えば動画
像シーケンスにおいては、時間的な基準を用い、現フレ
ームの時間的位置だけでなく、過去や未来のフレームも
利用して良い。例えば非常に大きな画像サイズを持つ静
止画像においては、１枚の画像をある単位で複数の画像
領域に分割して扱うことにし、空間的な基準を用い、現
在対象としている画像領域に対して、例えば走査順で前
や後に位置する画像領域も利用して良い。

【０１６３】次に第３の実施の形態について説明する。
この第３の実施の形態は、入力された画時に時間方向に
パターンが変化されて埋め込まれている付随情報を検出
する付随情報検出装置及び方法を、付随情報としてウォ
ータマークを検出するウォータマーク検出器に適用した
ものである。

【０１６４】この第３の実施の形態であるウォータマー
ク検出器は、図１０に示すように、付随情報のパターン
を出力する付随情報出力手段であるウォータマーク保持
メモリ３２と、入力される画像の画素値の時間方向に差
分値を算出する差分値算出手段であるフレーム差分算出
器３３と、ウォータマークパターン保持メモリ３２から
得た付随情報と差分値とに基づいて評価値を演算する評
価値演算手段である評価値算出器３４と、評価値に基づ
いて付随情報の検出を行う付随情報検出手段である評価
値比較器３５とを備えている。

【０１６５】また、ウォータマーク検出器３１は、時間
方向で異なる画像が記憶される記憶手段であるフレーム
メモリ３６と、ウォータマークの照合の結果に基づいて
入力された画像に処理を施す画像変換器３７とを備えて
いる。

【０１６６】このような構成を有するウォータマーク検
出器３１は、入力される画像に対して時間方向にパター
ンが変化されて付加されているウォータマークを検出す
ることができる。なお、上記第１の実施の形態において
説明した差分値は、画素値の差分を空間上でとってい
る。

【０１６７】このウォータマーク検出器３１を構成する
各部の処理については次のようになる。

【０１６８】フレーム差分算出器３３は、入力された画
像データにおけるそれぞれの画素に対するフレーム間差
分値が算出する。ここで算出したフレーム間差分値は、
評価値算出器３４に入力される。

【０１６９】フレームメモリ３６は、現在ウォータマー
ク検出器３１に入力された画像と時間方向において異な
る画像を記憶しておくための記憶手段であって、例え
ば、過去又は未来の画像が記憶される。フレーム差分算
出器３３は、フレーム間差分値の算出に際しては、この
フレームメモリ３６で記憶されている過去（場合によっ
ては未来）のフレームを参照する。

【０１７０】ウォータマークパターン保持メモリ３２は
ウォータマークパターンを記憶する記憶手段であって、
評価値算出器３４は、このウォータマークパターン保持
メモリ３２に記憶されているウォータマークパターンを
用いて評価値を算出する。ここで算出された評価値は、
評価値比較器３５に入力される。

【０１７１】評価値比較器３５は、評価値を閾値処理し
て、付随情報ｆを出力する。

【０１７２】また、入力された画像データ自体は、通
常、そのまま出力されるが、画像変換器３７は、この入
力された画像データが加工あるいは処理して出力する場
合もある。

【０１７３】なお、フレームメモリ３６で記憶されてい
るフレーム情報（画像）は、現フレームに対する処理が
終わった後で、次のフレームに対する処理が開始される
前に更新されるのが、一般的である。

【０１７４】ウォータマーク検出器３１は、以上のよう
に処理を行うが、次に、図１１を用いてその一連の工程
を詳しく説明する。

【０１７５】ウォータマーク検出器３１は、ステップＳ
５１において、評価値ｓｕｍの初期化及び閾値ｔｈの設
定を行う。

【０１７６】続いて、ウォータマーク検出器３１は、ス
テップＳ５２において、ウォータマークパターンの領域
と等しい大きさの領域を設定し、その領域内の各画素に
ついてウォータマークパターンとの照合を行う。

【０１７７】そして、ウォータマーク検出器３１は、ス
テップＳ５３において、照合を行った画素Ｘに対する差
分値ｘｄを算出する。この差分値ｘｄを求める際には、
上述したように、フレームメモリ３６に記憶されている
過去（場合によっては未来）のフレームを参照する。

【０１７８】そして、ウォータマーク検出器３１は、ス
テップＳ５４において、ウォータマークのシンボルの判
別を行う。ここで、ウォータマーク検出器１１は、その
画素のウォータマークのシンボルがプラスである場合に
は、ステップＳ５５に進み、評価値ｓｕｍにその差分値
ｘｄを足し、また、その画素のウォータマークのシンボ
ルがマイナスである場合には、ステップＳ５６に進み、
評価値ｓｕｍからその差分値ｘｄを引く。

【０１７９】それからウォータマーク検出器３１は、ス
テップＳ５７において、対象領域の全画素について処理
を行ったか否かの判別処理を行い、ここで、全画素につ
いて処理を行っていないことを確認した場合には、上記
ステップＳ５２に戻り再び上記照合等の処理を行い、対
象領域の全画素について処理を繰り返す。

【０１８０】そして、ウォータマーク検出器３１は、ス
テップＳ５８において、評価値ｓｕｍ＞閾値ｔｈとして
閾値ｔｈに対して評価値ｓｕｍを比較する。ここで、ウ
ォータマーク検出器３１は、評価値ｓｕｍ＞閾値ｔｈで
ある場合には、ステップＳ５９に進み、画像データに付
随情報が付加されているとみなして付随情報ｆをｏｎ
（付随情報ｆが存在している）にして、また、そうでな
い場合には、ステップＳ６０に進み、付随情報ｆをｏｆ
ｆ（付随情報ｆが存在していない）にする。

【０１８１】そしてその後の処理として、上述したよう
に、次のフレームに対する処理が開始される前に、フレ
ームメモリ３６で記憶されているフレーム情報の更新を
行なう。

【０１８２】以上のような構成とされ、ウォータマーク
の検出処理を行うウォータマーク検出器３１は、ウォー
タマークの検出時に時間方向に差分を取ることによっ
て、安定した評価値を得ることができる。すなわち、一
般に画像では、時間的に前後のフレームと高い相関を持
つという性質があるため、検出時に時間方向に差分を取
ることによって、その性質を利用して検出時に安定した
評価値を得ることができる。

【０１８３】なお、例えば、時間方向にウォータマーク
を付加させる方法としては、時間方向に隣接するフレー
ムについて行うことが考えられるが、これに限定される
ことはない。すなわち、時間方向において隣接しないフ
レームに対してウォータマークを付加する。例えば、Ｍ
ＰＥＧにおいて採用されているＧＯＰ（Group of Pictu
res）内の所定のフレームに対してのみウォータマーク
を付加するととしても良い。例えば、通常ＧＯＰは、Ｉ
ピクチャ（Intra Picture）、Ｐピクチャ（Predictive
Picture）、Ｂピクチャ（Bidirectionally predictive
Picture）とから構成されているが、例えば、Ｉピクチ
ャにのみウォータマークを付加することにより、時間方
向にウォータマークを付加することとする。

【０１８４】また、時間方向におけるフレーム内からウ
ォータマークの差分値を検出するのであるが、この場
合、フレーム毎に付加するウォータマークのパターンを
変化させる方法としては、例えば、フレーム毎にパター
ンを変化させたりする。具体的には、フレーム毎にパタ
ーンを反転させる。また、フレーム毎にパターンの強度
を変化させる。具体的には、±１のパターンで付加され
ていたパターンを次のフレームでは±２のパターンによ
りウォータマークを付加するといったいうように、パタ
ーンの強度を変化させる。

【０１８５】なお、上述したように時間方向に隣接して
いないフレームにウォータマークを付加させることによ
り、時間方向に隣接するフレーム間の差分をとることに
よりウォータマークを検出することもできる。例えば、
Ｉピクチャの次にＢピクチャが入力される場合におい
て、上述したように、Ｉピクチャにのみウォータマーク
を付加しているときには、当該ＩピクチャとＢピクチャ
との間で差分値をとることができ、これによりウォータ
マークを検出することができる。

【０１８６】なお、ウォータマークのシンボルについて
は、プラス、マイナス以外のどのようなシンボルを用い
ることもできる。さらに、ウォータマークのシンボルの
種類についても、２種類ではなく、３種類以上のどのよ
うなシンボルを用いることもできる。例えば、プラス、
ゼロ、マイナスの３種類のシンボルを用意しておき、ウ
ォータマークパターンとの照合を行った際にシンボルが
ゼロである画素については、評価値ｓｕｍに影響を与え
ない（その画素値を評価値ｓｕｍに足しも引きもしな
い）ようにするなど、各シンボルにどのような意味を与
える。

【０１８７】また、ウォータマークパターンを画像上に
付加する領域は、任意の形状及び範囲で構わない。

【０１８８】さらに、付加したウォータマークパターン
との整合が取れている限り、検出時に評価値を求める領
域の形状及び範囲は任意で構わない。さらにウォータマ
ークパターンは、時間的或いは空間的に渡るより広い領
域を用いて、検出を行うことにしても良い。例えば動画
像シーケンスにおいては、時間的な基準を用い、現フレ
ームの時間的位置だけでなく、過去や未来のフレームも
利用して良い。例えば非常に大きな画像サイズを持つ静
止画像においては、１枚の画像をある単位で複数の画像
領域に分割して扱うことにし、空間的な基準を用い、現
在対象としている画像領域に対して、例えば走査順で前
や後に位置する画像領域も利用して良い。

【０１８９】

【発明の効果】本発明に係る付随情報検出装置は、評価
値演算手段により、付随情報出力手段から出力された付
随情報と検出値とに基づいて演算して求めた評価値を、
評価値正規化手段により正規化することにより、評価値
の変動分を抑え、安定した評価値を得ることができる。

【０１９０】また、本発明に係る付随情報検出方法は、
評価値演算工程により、付随情報出力工程において出力
された付随情報と検出値とに基づいて演算して求めた評
価値を、評価値正規化工程において正規化することによ
り、評価値の変動分を抑え、安定した評価値を得ること
ができる。

【０１９１】また、本発明に係る画像データ処理装置
は、付随情報を画像に付加させる付随情報付加手段と、
画像への上記付随情報の付加量を適用的に変化させる付
加量操作手段とを備えることにより、画像に付随情報を
付加させる際に、その付随情報の付加量を適用的に変化
させることができる。これにより、画像データ処理装置
は、検出時に安定した評価値を得ることができる。

【０１９２】また、本発明に係る画像データ処理方法
は、付随情報を上記画像に付加させる付随情報付加工程
と、画像への付随情報の付加量を適用的に変化させる付
加量操作工程とを有することにより、画像に付随情報を
付加させる際に、その付随情報の付加量を適用的に変化
させることができる。これにより、画像データ処理方法
は、検出時に安定した評価値を得ることができる。

【０１９３】また、本発明に係る付随情報検出装置は、
付随情報出力手段から出力された付随情報と、差分値算
出手段により算出した入力される画像の時間方向の差分
値とに基づいて評価値演算手段により評価値を演算し、
付随情報検出手段により、この評価値に基づいて付随情
報の検出を行うことにより、評価値の変動を抑えられ
る。

【０１９４】また、本発明に係る付随情報検出方法は、
付随情報出力工程において出力された付随情報と、差分
値算出工程により算出した入力される画像の時間方向の
差分値とに基づいて評価値演算工程において評価値を演
算し、付随情報検出工程により、この評価値に基づいて
付随情報の検出を行うとにより、評価値の変動を抑える
ことばできる。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態であるウォータマー
ク検出器の構成を示すブロック回路図である。

【図２】差分値により付随情報を検出するウォータマー
ク検出器の構成を示すブロック回路図である。

【図３】上記差分値により付随情報を検出するウォータ
マーク検出器が、付随情報の検出のために行う一連の処
理を示すフローチャートである。

【図４】上記差分値の変換操作のための変換関数の例を
示す図である。

【図５】上記差分値の変換操作のための変換関数の他の
例を示す図である。

【図６】上記差分値の変換操作のための変換関数の他の
例を示す図である。

【図７】上記第１の実施の形態のウォータマーク検出器
による付随情報の検出のための一連の処理を示すフロー
チャートである。

【図８】本発明の第２の実施の形態であるウォータマー
ク付加器の構成を示すブロック回路図である。

【図９】上記第２の実施の形態のウォータマーク付加器
による画像への付随情報の付加のための一連の処理を示
すフローチャートである。

【図１０】本発明の第３の実施の形態であるウォータマ
ーク検出器の構成を示すブロック回路図である。

【図１１】上記第３の実施の形態のウォータマーク検出
器による付随情報の検出のための一連の処理を示すフロ
ーチャートである。

【図１２】ビデオテープにおける補助的情報の画像上で
の位置を示す図である。

【図１３】画像上に特定のパターンを埋め込んでいる例
を示す図である。

【図１４】ウォータマークのパターンの例を示す図であ
る。

【図１５】画像へのウォータマークの付加操作を示す図
である。

【図１６】ウォータマークを用いた付随情報の付加及び
検出を示す図である。

【図１７】エンコーダの構成を示すブロック回路図であ
る。

【図１８】デコーダの構成を示すブロック回路図であ
る。

【図１９】ウォータマーク付加器の構成を示すブロック
回路図である。

【図２０】従来のウォータマーク検出器の構成を示すブ
ロック回路図である。

【図２１】上記ウォータマーク付加器による画像へのウ
ォータマークの付加の一連の処理を示すフローチャート
である。

【図２２】従来のウォータマーク検出器による付随情報
の検出のための一連の処理を示すフローチャートであ
る。

【符号の説明】

１１ ウォータマーク検出器、１２ ウォータマークパ
ターン保持メモリ、１４ 評価値算出器、１５ 評価値
正規化器、１６ 評価値比較器、２１ ウォータマーク
付加器、２２ 付随情報付加器、２３ 付加量見積器、
２４ ウォータマーク保持メモリ、３１ ウォータマー
ク検出器、３２ ウォータマーク保持メモリ、３３ フ
レーム差分算出器、３４ 評価値算出器、３５ 評価値
比較器、３６ フレームメモリ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 保坂 和寿 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B057 CE08 CG07 5C063 AB05 AC01 AC10 CA11 CA36 CA40 DA02 5D044 AB07 DE17 FG18 GK08

Claims (15)

【特許請求の範囲】
1. 【請求項１】 入力された画像に埋め込まれている付随
   情報を検出する付随情報検出装置において、 上記付随情報のパターンを出力する付随情報出力手段
   と、 上記付随情報出力手段から出力された上記付随情報と検
   出値とに基づいて評価値を演算する評価値演算手段と、 上記評価値の正規化を行う評価値正規化手段と、 正規化された上記評価値に基づいて上記付随情報の検出
   を行う付随情報検出手段とを備えることを特徴とする付
   随情報検出装置。
2. 【請求項２】 上記付随情報正規化手段は、上記検出値
   が所定の値に達したカウント数を付随情報のパターンが
   画像中の全ての検出値の個数により除算して得た正規化
   用値に基づいて、上記評価値の正規化を行うことを特徴
   とする請求項１記載の付随情報検出装置。
3. 【請求項３】 入力された画像において近傍の画素との
   間の画素値の差分値を上記検出値として算出する差分値
   算出手段を備え、 上記評価値演算手段は、上記付随情報出力手段から出力
   された上記付随情報のパターンと上記差分値とに基づい
   て、上記評価値を演算することを特徴とする請求項１記
   載の付随情報検出装置。
4. 【請求項４】 入力された画像に埋め込まれている付随
   情報を検出する付随情報検出方法において、 上記付随情報のパターンを出力する付随情報出力工程
   と、 上記付随情報出力工程において出力された上記付随情報
   と検出値とに基づいて評価値を演算する評価値演算工程
   と、 上記評価値の正規化を行う評価値正規化工程と、 正規化された上記評価値に基づいて上記付随情報の検出
   を行う付随情報検出工程とを有することを特徴とする付
   随情報検出方法。
5. 【請求項５】 上記付随情報正規化工程では、上記検出
   値が所定の値に達したカウント数を付随情報のパターン
   が画像中の全ての検出値の個数により除算して得た正規
   化用値に基づいて、上記評価値の正規化を行うことを特
   徴とする請求項４記載の付随情報検出方法。
6. 【請求項６】 画像に付随情報を埋め込む処理を行う画
   像データ処理装置において、 上記付随情報を上記画像に付加させる付随情報付加手段
   と、 上記画像への上記付随情報の付加量を適用的に変化させ
   る付加量操作手段とを備えることを特徴とする画像デー
   タ処理装置。
7. 【請求項７】 上記付加量操作手段は、上記付加量を画
   素値に応じて変化させることを特徴とする請求項６記載
   の画像データ処理装置。
8. 【請求項８】 上記付加量操作手段は、上記付加量を画
   素の検出値が一定となるように変化させることを特徴と
   する請求項６記載の画像データ処理装置。
9. 【請求項９】 上記付加量操作手段は、上記付加量の検
   出時の変換操作処理に対応して逆の変換操作処理となる
   ように付加量を変化させることを特徴とする請求項６記
   載の画像データ処理装置。
10. 【請求項１０】 画像に付随情報を埋め込む処理を行う
    画像データ処理方法において、 上記付随情報を上記画像に付加させる付随情報付加工程
    と、 上記画像への上記付随情報の付加量を適用的に変化させ
    る付加量操作工程とを有することを特徴とする画像デー
    タ処理方法。
11. 【請求項１１】 上記付加量操作工程では、上記付加量
    を画素値に応じて変化させることを特徴とする請求項１
    ０記載の画像データ処理方法。
12. 【請求項１２】 入力された画像に時間方向にパターン
    が変化されて埋め込まれている付随情報を検出する付随
    情報検出装置であって、 上記付随情報のパターンを出力する付随情報出力手段
    と、 入力される画像の画素値の時間方向に差分値を算出する
    差分値算出手段と、 上記付随情報出力手段から出力された上記付随情報と上
    記差分値とに基づいて評価値を演算する評価値演算手段
    と、 上記評価値に基づいて上記付随情報の検出を行う付随情
    報検出手段とを備えることを特徴とする付随情報検出装
    置。
13. 【請求項１３】 上記差分値算出手段は、フレーム内に
    おいて対応される画素の時間方向の差分値を算出するこ
    とを特徴とする請求項１２記載の付随情報検出装置。
14. 【請求項１４】 時間方向で異なる画像が記憶される記
    憶手段を備えることを特徴とする請求項１２記載の付随
    情報検出装置。
15. 【請求項１５】 入力された画像に時間方向にパターン
    が変化されて埋め込まれている付随情報を検出する付随
    情報検出方法であって、 上記付随情報のパターンを出力する付随情報出力工程
    と、 入力される画像の画素値の時間方向に差分値を算出する
    差分値算出工程と、 上記付随情報出力工程において出力された上記付随情報
    と上記差分値とに基づいて評価値を演算する評価値演算
    工程と、 上記評価値に基づいて上記付随情報の検出を行う付随情
    報検出工程とを有することを特徴とする付随情報検出方
    法。