JP2002369161A - 電子透かし埋め込み処理装置、および電子透かし埋め込み処理方法、並びにプログラム - Google Patents

Abstract

(57)【要約】 【課題】 動画像に対する電子透かし埋め込みにおける
動き情報の算出処理を軽減し、効率的な電子透かし埋め
込み処理を可能とする構成を提供する。 【解決手段】 時間的に連続する入力デジタルビデオ信
号に対してフォーマット縮小等の前処理を施した上でフ
レーム相関を用いて動き検出を行い、検出された動き情
報に基づいて電子透かしパターンを画像に追従させるこ
とにより、より演算量を低減して高効率に入力デジタル
ビデオ信号に電子透かしを重畳することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像等のデータに
著作権情報、編集情報などの付加情報を埋め込みまたは
読み取る技術に関し、例えば画像中に通常の観察状態で
は認識困難な付加情報として電子透かし（ウォーターマ
ーク:Digital Watermarkingまたは、DataHidingとも呼
ばれる）を埋め込む処理を実行する電子透かし埋め込み
処理装置、および電子透かし埋め込み処理方法、並びに
プログラムに関する。

【０００２】

【従来の技術】デジタル技術の進歩に伴い、記録、再生
処理の繰り返し実行による画質劣化、音質劣化等の発生
しないデジタル記録再生装置が普及し、また一方では、
様々な画像、音楽等のデジタテルコンテンツがＤＶＤ，
ＣＤなどの媒体またはネットワーク等を通じて配信、流
通可能な状態となってきている。

【０００３】デジタル記録再生では、アナログ記録再生
と異なり、記録再生処理を繰り返し実行してもデータの
劣化が発生しないため、オリジナルデータと同様の品質
が保たれる。このようなデジタル記録再生技術の普及は
不正コピーの氾濫を招く結果となり、著作権の保護とい
う観点から大きな問題となっている。

【０００４】デジタルコンテンツについての不正な複製
（コピー）による著作権侵害に対処するため、デジタル
コンテンツに複製制御のための複製制御情報を付加し、
コンテンツの記録再生時に複製制御情報を読み取り、読
み取られた制御情報に従った処理を実行することにより
不正な複製を防止する構成が提案されている。

【０００５】コンテンツ複製制御態様には様々な態様が
あるが、例えば代表的方式として、ＣＧＭＳ（Ｃｏｐｙ
Ｇｅｎｅｒａｔｉｏｎ Ｍａｎａｇｅｍｅｎｔ Ｓｙｓ
ｔｅｍ；コピー・ジェネレーション・マネージメント・
システム）方式がある。このＣＧＭＳ方式は、アナログ
映像信号（ＣＧＭＳ−Ａと呼ばれる）であれば、その輝
度信号の垂直ブランキング期間内の特定の１水平区間、
例えばＮＴＳＣ信号の場合には、第２０水平区間の有効
映像部分に重畳する２０ビットの付加情報のうちの２ビ
ットを複製制御用の情報として重畳し、また、デジタル
映像信号（ＣＧＭＳ−Ｄと呼ばれる）であれば、デジタ
ル映像データに挿入付加する付加情報として、複製制御
用の２ビットの情報を含めて伝送する方式である。

【０００６】このＣＧＭＳ方式の場合の２ビットの情報
（以下、ＣＧＭＳ情報という）の意味内容は、［００］
……複製可能［１０］……１回複製可能（１世代だけ複
製可能）［１１］……複製禁止（絶対複製禁止）であ
る。

【０００７】上述のＣＧＭＳ方式は代表的な複製制御方
式の１例であり、他にもコンテンツの著作権保護のため
の方式が様々ある。例えば放送局が行なうデジタル放送
などでは、デジタルデータを構成するトランスポートス
トリーム（ＴＳ）パケットに含まれる番組配列情報（Ｓ
Ｉ：Service Information）内にデジタル複製制御記述
子（Digital Copy Control Descriptor）を格納し、受
信機器において受信したデータを記録装置に記録する際
に記述子に従った複製世代制御を行なう方式がある。

【０００８】しかし、上述の制御情報は例えばコンテン
ツのヘッダ等にビットデータとして付加されるものであ
り、付加されたデータの改竄の可能性を完全に排除する
ことが困難である。データ改竄の可能性の排除という点
で有利な構成が電子透かし（ウォーターマーク）であ
る。電子透かし（ウォーターマーク）は、通常のコンテ
ンツ（画像データまたは音声データ）の再生状態では視
覚あるいは知覚困難であり、電子透かしの検出、埋め込
みは特定のアルゴリズムの実行、または特定のデバイス
による処理によってのみ可能となる。受信器、記録再生
装置等におけるコンテンツ処理時に電子透かし（ウォー
ターマーク（ＷＭ））を検出して、電子透かしに従った
制御を行なうことにより、より信頼度の高い制御が可能
となる。

【０００９】光ディスク等の記録媒体や、放送局等より
衛星波や地上波、ケーブル等の媒体を介して伝送される
コンテンツ等についての電子透かし（ウォーターマーク
（ＷＭ））による著作権の保護方法は、ビデオ信号やオ
ーディオ信号等の再生に影響を与えない程度の微小な信
号レベルにより、著作権に関するデータの変調信号等を
ビデオ信号やオーディオ信号等に重畳して記録するもの
である。画像、音声、データ等様々なデジタルコンテン
ツが劣化のない状態でコピーされたり配信されたりする
可能性のあるデジタルネットワーク時代において、電子
透かし技術はコンテンツ自身に情報を埋め込むことによ
り著作権を保護することのできる有力な技術である。

【００１０】電子透かし（ウォーターマーク（ＷＭ））
によってコンテンツに埋め込まれる情報としては、上述
の複製制御情報に限らず、コンテンツの著作権情報、コ
ンテンツ加工情報、コンテンツ構成情報、コンテンツ処
理情報、コンテンツ編集情報、あるいはコンテンツ再生
処理方式等、様々な情報が埋め込み可能であり、例えば
コンテンツの編集処理時に編集情報を埋め込み、各編集
ステップにおいて、電子透かしを参照して処理ステップ
を確認することなどが行なわれる。このような編集情報
は、例えばコンテンツの編集ステップ毎にコンテンツに
対して新たな電子透かしとして埋め込まれ、最終的にコ
ンテンツから取り除かれるなどの処理が行なわれる。

【００１１】データに対する電子透かしの埋め込みおよ
び検出態様としては様々な手法が提案されている。１つ
の代表的な電子透かし埋め込み検出態様には、元信号と
してのデータ、例えば画像のもつ統計的性質に基づいた
手法がある。デジタルビデオ信号等の画像信号の持つ統
計的な性質に基づいて、ＰＮ系列の乱数データを基本パ
ターンとして電子透かしを埋め込む方法について説明す
る。簡単のため輝度信号のフレームデータを水平サイズ
８画素、垂直サイズ６画素とする。

【００１２】まずＰＮ系列の乱数データＰＮを、下記式
のように設定する。

【００１３】

【数１】

【００１４】この乱数データＰＮは統計的に総和が０に
なるように生成される。次に埋め込み情報ＤＣを、上記
式のような性質を持つ乱数データＰＮによりスペクトラ
ム拡散する。すなわち埋め込み情報ＤＣの極性が“１”
の場合には、乱数データＰＮのパターンをそのまま使用
することにより、電子透かしパターンＷＭは、下記式の
ようになる。

【００１５】

【数２】

【００１６】また埋め込み情報ＤＣの極性が“０”の場
合には、乱数データＰＮのパターンを反転したものを使
用することにより、電子透かしパターンＷＭは、下記式
のようになる。

【００１７】

【数３】

【００１８】なお埋め込み情報ＤＣが複数の情報ビット
から構成される場合には、例えば輝度信号のフレームデ
ータを適当な小領域に分割し、各情報ビットをそれぞれ
の小領域に対応させればよい。また、例えば互いに直行
するような複数の異なる電子透かしパターンを使用し、
各情報ビットをそれぞれの電子透かしパターンに対応さ
せればよい。また、これらの手法を組み合わせて使用し
てもよい。

【００１９】一方デジタルビデオ信号等の画像信号にお
いて、あるフレームデータの輝度信号画素値を示すフレ
ームデータＤＶ１が以下のような式で示されたとする。
なお、デジタルビデオ信号の画像信号において、近接す
る輝度信号は同程度の画素値を持つという性質があり、
隣接する画素の値は近似した値に設定してある。

【００２０】

【数４】

【００２１】電子透かしの埋め込みは、輝度信号のフレ
ームデータＤＶ１に電子透かしパターンＷＭを加算する
ことによって実現する。電子透かし埋め込み情報ＤＣの
極性が“１”の場合には、前述の［数２］に示される電
子透かしパターンＷＭを、上述の［数４］に示される輝
度信号に加算する処理となり、電子透かしを埋め込んだ
輝度信号のフレームデータＤＶ２は、下記式によって示
されるデータとなる。

【００２２】

【数５】

【００２３】このようにして電子透かしを埋め込んだ輝
度信号のフレームデータＤＶ２から、埋め込み情報ＤＣ
を検出するためには、埋め込み時と同一のＰＮ系列の乱
数データＰＮを使用する。まず元の輝度信号のフレーム
データＤＶ１と乱数データＰＮとの内積値Ｐ１は、下記
式によって示される値を持つ。

【００２４】

【数６】Ｐ１＝ＤＶ１・ＰＮ＝１

【００２５】画像信号の持つ統計的な性質から内積値Ｐ
１は０近傍の値となる。これに対して電子透かしを埋め
込んだ輝度信号のフレームデータＤＶ２と乱数データＰ
Ｎとの内積値Ｐ２は、埋め込み情報ＤＣの極性が“１”
の場合には、下記式によって示される値を持つ。

【００２６】

【数７】 Ｐ２＝ＤＶ２・ＰＮ ＝（ＤＶ１＋ＷＭ）・ＰＮ ＝（ＤＶ１＋ＰＮ）・ＰＮ ＝Ｐ１＋ＰＮ² ＝１＋４８

【００２７】一方、埋め込み情報ＤＣの極性が“０”の
場合には、下記式によって示される値を持つ。

【００２８】

【数８】 Ｐ２＝ＤＶ２・ＰＮ ＝（ＤＶ１＋ＷＭ）・ＰＮ ＝（ＤＶ１−ＰＮ）・ＰＮ ＝Ｐ１−ＰＮ² ＝１−４８

【００２９】すなわち内積値Ｐ２の絶対値は、乱数デー
タＰＮ自身の内積値ＰＮ²近傍の値となる。元の輝度信
号のフレームデータＤＶ１と乱数データＰＮの内積値Ｐ
１および、電子透かしを埋め込んだ輝度信号のフレーム
データＤＶ２と乱数データＰＮの内積値Ｐ２を様々な画
像に対して計算すると、内積値Ｐ１およびＰ２の分布は
図１に示すような確率密度関数で表現することができ
る。したがって、適当な非負の閾値ＴＨを設定すること
によって、以下に示すように電子透かしの有無および極
性を判別することが可能となる。

【００３０】

【数９】Ｐ２≦−ＴＨ ：電子透かしあり（極性０） ｜Ｐ２｜＜ＴＨ ：電子透かしなし Ｐ２≧ＴＨ ：電子透かしあり（極性１）

【００３１】上記式のように、電子透かしを埋め込んだ
輝度信号のフレームデータＤＶ２から埋め込み情報ＤＣ
を検出することができる。

【００３２】実際に電子透かしを実現する際には、電子
透かし検出の信頼性と、電子透かしの画質に及ぼす影響
の２点が重要なポイントである。電子透かしの有無を正
確に判別するためには、図１における“電子透かしあ
り”の場合の確率密度関数と、“電子透かしなし”の場
合の確率密度関数の分離を精度良く行うような閾値ＴＨ
を設定しなければならない。しかし実際には確率密度関
数の裾野が重なり合い、電子透かしの有無を正確に判別
できるような閾値ＴＨの選択は難しい。電子透かしが埋
め込まれていないのに“電子透かしあり”と判断されて
しまう確率を特にＦａｌｓｅ Ｐｏｓｉｔｉｖｅと呼
び、健全なコンテンツ流通を保証するためには極めて小
さいＦａｌｓｅ Ｐｏｓｉｔｉｖｅ値が要求される。し
たがって電子透かし検出の信頼性を向上するためには、
非負のスカラー量Ｃを用いて電子透かしの埋め込み強度
を大きくする処理が実行される。スカラー量Ｃを用いて
電子透かしの埋め込み強度を大きくして電子透かしを埋
め込んだ場合の輝度信号のフレームデータＤＶ２は、下
記式によって示される値を持つ。

【００３３】

【数１０】ＤＶ２＝ＤＶ１＋ＣＷＭ

【００３４】電子透かしを埋め込んだ輝度信号のフレー
ムデータＤＶ２と乱数データＰＮの内積値Ｐ２を十分に
大きくすればよい。具体的には、フレームデータＤＶ２
は、下記式によって示される値を持つ。

【００３５】

【数１１】 Ｐ２＝ＤＶ２・ＰＮ ＝（ＤＶ１＋ＣＷＭ）・ＰＮ ＝（ＤＶ１±ＣＰＮ）・ＰＮ ＝Ｐ１±ＣＰＮ²

【００３６】しかし、このようにして電子透かしの埋め
込み強度を大きくした場合、電子透かしの画質に及ぼす
影響は無視できないものになってしまう。電子透かし検
出の信頼性と電子透かしの画質に及ぼす影響とは、トレ
ードオフの関係にある。

【００３７】電子透かしを埋め込んだ画像に対して、画
像フォーマット変換、デジタル-アナログ変換、ＭＰＥ
Ｇ圧縮、フィルタリング、クリッピング、リサイズ、ロ
ーテーション等の種々の攻撃を加えた場合にも、埋め込
まれた電子透かし情報は正しく検出されなければならな
い。著作権を不当に侵そうとする者は、電子透かしを埋
め込んだ画像に対して悪意を持ってこれらの攻撃を加え
る恐れがある。そこでこれらの攻撃に対する耐性を強化
して、電子透かし検出の信頼性を確保するために、様々
な手法が提案されている。しかしあらゆる攻撃に対して
頑強な耐性を有するような電子透かし技術は未だ開発さ
れておらず、早急な対策が望まれている。

【００３８】図２は、電子透かしを用いてコピー制御情
報をデータに埋め込み、電子透かし検出によるコピー制
御を実行する態様について説明する図である。

【００３９】ビデオソースであるデジタルビデオ信号Ｄ
Ｖを放送局等より衛星波や地上波、ケーブル等の媒体を
介して送信する際に、電子透かし埋め込み処理装置１０
０により電子透かし情報ＤＣを付加して送信する。ここ
で埋め込む電子透かし情報ＤＣはビデオソースの著作権
情報等により構成され、“Ｃｏｐｙ Ｏｎｃｅ”（１回
コピー可）という情報を持つものとする。

【００４０】このように、“Ｃｏｐｙ Ｏｎｃｅ”（１
回コピー可）という情報を電子透かしにより埋め込んで
送信されたデジタルビデオ信号のうちセットトップボッ
クス等により受信して再生するデジタルビデオ信号にお
いては、再生したデジタルビデオ信号から録画機器２に
内蔵する電子透かし検出装置３により埋め込まれた電子
透かし情報ＤＣを検出する。

【００４１】録画機器２に内蔵された電子透かし検出装
置３が、“Ｃｏｐｙ Ｏｎｃｅ”という電子透かし情報
を検出すると、録画機器２に内蔵する電子透かし書換装
置４が電子透かし情報ＤＣを書き換えて光ディスク５等
に記録する。ここで書き換える電子透かし情報ＤＣはビ
デオソースの著作権情報等により構成され、“ＮｏＭｏ
ｒｅ Ｃｏｐｙ”（コピー禁止）という情報を有する。

【００４２】このようにして録画機器２によって複製記
録された光ディスク５が、例えば市場に流通する媒体と
して提供された場合、提供された複製記録光ディスク５
を録画機器６において再度複製しようとすると、録画機
器６に内蔵する電子透かし検出装置３が再生したデジタ
ルビデオ信号から埋め込まれた電子透かし情報ＤＣを検
出する。

【００４３】この場合の電子透かし情報ＤＣは、複製を
許可しない“Ｎｏ Ｍｏｒｅ Ｃｏｐｙ”という情報であ
り、録画機器６は、“Ｎｏ Ｍｏｒｅ Ｃｏｐｙ”に従っ
た処理、すなわち、再生したデジタルビデオ信号を光デ
ィスク７に記録するのを中止する。これによりコピー世
代が管理される。

【００４４】また、電子透かし埋め込み処理装置１００
は、ビデオソースであるデジタルビデオ信号ＤＶを格納
した光ディスク８を製造する際に、“Ｎｅｖｅｒ Ｃｏ
ｐｙ”（コピー禁止）という情報を持つ電子透かし情報
ＤＣを付加して光ディスク８等に記録する処理を実行し
たとする。

【００４５】このようにして記録された光ディスク８が
市場に流通する場合において、提供された光ディスク８
を録画機器６において再生して他の記録媒体に複製しよ
うとすると、録画機器６に内蔵する電子透かし検出装置
３が再生したデジタルビデオ信号から埋め込まれた電子
透かし情報ＤＣを検出する。

【００４６】この場合の電子透かし情報ＤＣは、複製を
許可しない“Ｎｅｖｅｒ Ｃｏｐｙ”（コピー禁止）と
いう情報であり、録画機器６は、“Ｎｅｖｅｒ Ｃｏｐ
ｙ”に従った処理、すなわち、再生したデジタルビデオ
信号を光ディスク７に記録するのを中止する。これによ
り不正コピーが排除される。

【００４７】電子透かし検出の信頼性を確保しつつ、電
子透かしの画質に及ぼす影響を極力抑えるために、人間
の視覚特性を効果的に利用して電子透かしを埋め込む手
法が提案されている。これらの手法は人間の視覚特性を
考慮して、電子透かしパターンを画像内で配分しなおす
ものや、電子透かしパターンを画像の動きに追従させる
もの等であり、全体の埋め込み強度を変えることなく電
子透かしの画質に及ぼす影響を効果的に抑えている。人
間の目は平坦部分等の低周波領域での変化には敏感であ
るが、エッジ部分等の高周波領域での変化には鈍感であ
る。これを利用して電子透かしパターンを目立ちやすい
平坦部分から目立ちにくいエッジ部分へと再配分するこ
とにより、電子透かし検出の信頼性を確保しつつ、電子
透かしの画質に及ぼす影響を抑えることができる。また
画像が静止している場合には電子透かしパターンも静止
させ、画像が動いている場合には電子透かしパターンも
追従して動かすことにより、人間の目に感知しにくくな
るように電子透かしを埋め込むことができる。

【００４８】動き検出は、動画像符号化の国際標準規格
ＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒ
ｔｓ Ｇｒｏｕｐ-２）やサンプリングレート変換等にお
いて用いられる手法である。しかし電子透かしの重畳に
応用して好適な動き検出手法は未だ提案されておらず、
効果的な動き検出手法を実現して、電子透かしの画質に
及ぼす影響を抑制することが望まれている。

【００４９】

【発明が解決しようとする課題】本発明は、上述の問題
点に鑑みてなされたものであり、動画に対する電子透か
し埋め込みに際して、動き検出を実行して、電子透かし
検出の信頼性を確保しながら人間の目に感知しにくくな
るように電子透かしを埋め込むことを可能とする電子透
かし埋め込み処理装置、および電子透かし埋め込み処理
方法、並びにプログラムを提供することを目的とする。

【００５０】さらに具体的には、画像が静止している場
合には電子透かしパターンも静止させ、画像が動いてい
る場合には電子透かしパターンも追従して動かすことに
より、電子透かし検出の信頼性を確保しながら人間の目
に感知しにくくなるように電子透かしを埋め込むことを
可能とした電子透かし埋め込み処理装置、および電子透
かし埋め込み処理方法、並びにプログラムを提供するこ
とを目的とする。

【００５１】

【課題を解決するための手段】本発明の第１の側面は、
画像信号に対する電子透かしの埋め込み処理を実行する
電子透かし埋め込み処理装置であり、埋め込み情報に基
づいて電子透かしパターンを生成する電子透かしパター
ン生成手段と、電子透かしパターン埋め込み処理対象と
なる画像信号の縮小変換処理を実行し、縮小画像データ
に基づいて動きベクトルを取得し、該動きベクトルに基
いて動き情報を出力する動き検出手段と、前記電子透か
しパターン生成手段の生成した電子透かしパターンに対
して、前記動き情報の示す動きに追従する動きを示すよ
うに変調処理を実行する信号変調手段と、前記信号変調
手段により変調された電子透かしパターンを前記画像信
号に対して埋め込む処理を実行する加算手段と、を有す
ることを特徴とする電子透かし埋め込み処理装置にあ
る。

【００５２】さらに、本発明の電子透かし埋め込み処理
装置の一実施態様において、前記動き検出手段は、画像
信号をフレーム毎に読み込み、画像縮小処理を実行する
信号縮小手段と、前記信号縮小手段の出力する縮小画像
データを入力し、時間的に連続する複数の縮小画像フレ
ームデータ間の相関を計算し相関情報を出力する相関計
算手段と、前記相関計算手段の出力する相関情報に基づ
いて動きベクトルを算出して、算出された動きベクトル
に基づいて動き情報Ｖを出力する動き判定手段とを有
し、前記信号変調手段は、前記電子透かしパターン生成
手段の生成した電子透かしパターンに対して、前記動き
情報Ｖに基づく変調処理を実行する構成であることを特
徴とする。

【００５３】さらに、本発明の電子透かし埋め込み処理
装置の一実施態様において、前記動き検出手段は、画像
信号をフレーム毎に読み込み、画像縮小処理を実行する
信号縮小手段と、前記信号縮小手段の出力する縮小画像
データを入力し、時間的に連続する複数の縮小画像フレ
ームデータ間の相関を、フレーム内における対応画素の
輝度値の差分の絶対値の総和として算出するマッチング
値に基づいて相関情報を出力する相関計算手段と、前記
相関計算手段の出力する相関情報に基づいて、最小のマ
ッチング値となる動きベクトルを算出して、算出した動
きベクトルに基づいて動き情報Ｖを出力する動き判定手
段とを有し、前記信号変調手段は、前記電子透かしパタ
ーン生成手段の生成した電子透かしパターンに対して、
前記動き情報Ｖに基づく変調処理を実行する構成である
ことを特徴とする。

【００５４】さらに、本発明の電子透かし埋め込み処理
装置の一実施態様において、前記動き検出手段は、縮小
画像データに基づいて算出される動きベクトルを、縮小
前の縮尺に拡大して出力動き情報として前記信号変調手
段に出力する構成であることを特徴とする。

【００５５】さらに、本発明の電子透かし埋め込み処理
装置の一実施態様において、前記電子透かし埋め込み処
理装置は、さらに、前記縮小画像データをフレーム単位
で複数のブロックに分割する信号分割手段を有し、前記
動き検出手段は、前記信号分割手段の分割したブロック
領域単位で動きベクトルを取得し、該動きベクトルの評
価処理に基いて動き情報を出力する構成を有することを
特徴とする。

【００５６】さらに、本発明の第２の側面は、画像信号
に対する電子透かしの埋め込み処理を実行する電子透か
し埋め込み処理方法であり、埋め込み情報に基づいて電
子透かしパターンを生成する電子透かしパターン生成ス
テップと、電子透かしパターン埋め込み処理対象となる
画像信号の縮小変換処理を実行し、縮小画像データに基
づいて動きベクトルを取得し、該動きベクトルに基いて
動き情報を出力する動き検出ステップと、前記電子透か
しパターン生成ステップにおいて生成した電子透かしパ
ターンに対して、前記動き情報の示す動きに追従する動
きを示すように変調処理を実行する信号変調ステップ
と、前記信号変調ステップにおいて変調された電子透か
しパターンを前記画像信号に対して埋め込む処理を実行
する加算ステップと、を有することを特徴とする電子透
かし埋め込み処理方法にある。

【００５７】さらに、本発明の電子透かし埋め込み処理
方法の一実施態様において、前記動き検出ステップは、
画像信号をフレーム毎に読み込み、画像縮小処理を実行
する信号縮小ステップと、前記信号縮小ステップにおい
て出力する縮小画像データを入力し、時間的に連続する
複数の縮小画像フレームデータ間の相関を計算し相関情
報を出力する相関計算ステップと、前記相関計算ステッ
プにおいて出力する相関情報に基づいて動きベクトルを
算出して、算出された動きベクトルに基づいて動き情報
Ｖを出力する動き判定ステップとを有し、前記信号変調
ステップは、前記電子透かしパターン生成ステップにお
いて生成した電子透かしパターンに対して、前記動き情
報Ｖに基づく変調処理を実行することを特徴とする。

【００５８】さらに、本発明の電子透かし埋め込み処理
方法の一実施態様において、前記動き検出ステップは、
画像信号をフレーム毎に読み込み、画像縮小処理を実行
する信号縮小ステップと、前記信号縮小ステップにおい
て出力する縮小画像データを入力し、時間的に連続する
複数の縮小画像フレームデータ間の相関を、フレーム内
における対応画素の輝度値の差分の絶対値の総和として
算出するマッチング値に基づいて相関情報を出力する相
関計算ステップと、前記相関計算ステップにおいて出力
する相関情報に基づいて、最小のマッチング値となる動
きベクトルを算出して、算出した動きベクトルに基づい
て動き情報Ｖを出力する動き判定ステップとを有し、前
記信号変調ステップは、前記電子透かしパターン生成ス
テップにおいて生成した電子透かしパターンに対して、
前記動き情報Ｖに基づく変調処理を実行することを特徴
とする。

【００５９】さらに、本発明の電子透かし埋め込み処理
方法の一実施態様において、前記動き検出ステップは、
縮小画像データに基づいて算出される動きベクトルを、
縮小前の縮尺に拡大して出力動き情報として出力するこ
とを特徴とする。

【００６０】さらに、本発明の電子透かし埋め込み処理
方法の一実施態様において、前記電子透かし埋め込み処
理方法は、さらに、前記縮小画像データをフレーム単位
で複数のブロックに分割する信号分割ステップを有し、
前記動き検出ステップは、前記信号分割ステップにおい
て分割したブロック領域単位で動きベクトルを取得し、
該動きベクトルの評価処理に基いて動き情報を出力する
ことを特徴とする。

【００６１】さらに、本発明の第３の側面は、画像信号
に対する電子透かしの埋め込み処理をコンピュータ・シ
ステム上で実行せしめるプログラムであって、埋め込み
情報に基づいて電子透かしパターンを生成する電子透か
しパターン生成ステップと、電子透かしパターン埋め込
み処理対象となる画像信号の縮小変換処理を実行し、縮
小画像データに基づいて動きベクトルを取得し、該動き
ベクトルに基いて動き情報を出力する動き検出ステップ
と、前記電子透かしパターン生成ステップにおいて生成
した電子透かしパターンに対して、前記動き情報の示す
動きに追従する動きを示すように変調処理を実行する信
号変調ステップと、前記信号変調ステップにおいて変調
された電子透かしパターンを前記画像信号に対して埋め
込む処理を実行する加算ステップと、を有することを特
徴とするプログラムにある。

【００６２】なお、本発明のプログラムは、例えば、様
々なプログラム・コードを実行可能な汎用コンピュータ
・システムに対して、コンピュータ可読な形式で提供す
る媒体、例えば、ＣＤやＦＤ、ＭＯなどの記憶媒体に格
納されて提供可能であり、本発明のプログラムは、例え
ば、様々なプログラム・コードを実行可能な汎用コンピ
ュータ・システムに対して、コンピュータ・プログラム
をコンピュータ可読な形式で提供する媒体に記憶可能で
ある。媒体は、ＣＤやＦＤ、ＭＯなどの記録媒体、ある
いは、ネットワークなどの伝送媒体など、その形態は特
に限定されない。

【００６３】このようなプログラムは、プロセッサ制御
の下でプログラムの読み取りに基づき、システムの有す
る各種機能の実行を規程するとともに、システム上の協
働的作用を発揮するものであり、本発明の他の側面と同
様の作用効果を得ることができるものである。

【００６４】本発明のさらに他の目的、特徴や利点は、
後述する本発明の実施例や添付する図面に基づくより詳
細な説明によって明らかになるであろう。

【００６５】

【発明の実施の形態】以下、図面を参照して、本発明の
電子透かし埋め込み処理装置、および電子透かし埋め込
み処理方法について詳細に説明する。

【００６６】［電子透かし埋め込み処理装置構成例１］
図３は、本発明の一実施例に係る電子透かし埋め込み処
理装置１００を示すブロック図である。電子透かし埋め
込み処理装置１００において、ＰＮ生成部１２１はＰＮ
（Ｐｓｅｕｄｏｒａｎｄｏｍ Ｎｏｉｓｅ；擬似雑音符
号）系列の乱数データＰＮを生成し、これを基本パター
ンとして電子透かしを埋め込む。続く乗算部１２２は電
子透かし埋め込み情報ＤＣをこの乱数データＰＮにより
スペクトラム拡散し、これを電子透かしパターンＷＭ１
とする。埋め込み情報ＤＣを乱数データＰＮによりスペ
クトラム拡散することにより、解析困難な電子透かしパ
ターンＷＭ１を生成することができる。図３の構成にお
いて、ＰＮ生成部１２１、乗算部１２２が電子透かしパ
ターンＷＭ１を生成するための第１の電子透かしパター
ン生成手段を構成する。

【００６７】なお、電子透かし埋め込み情報ＤＣは、例
えば複製制御情報として、電子透かし埋め込み対象信号
に応じて、「複製可能（ＣｏｐｙＦｒｅｅ）」、「１回
複製可能（Ｃｏｐｙ Ｏｎｃｅ）」「絶対複製禁止（Ｎ
ｅｖｅｒ Ｃｏｐｙ）」などを意味する情報を含む情報
である。

【００６８】電子透かし埋め込み処理装置１００におい
て、動き検出部１２３は順次入力されるデジタルビデオ
信号ＤＶ１に対して画像の動き検出を行い、動き情報Ｖ
を出力する。この動き検出部１２３における動き検出処
理は人間の視覚特性を考慮した画像分析手法により、入
力画像を分析することにより実行される。

【００６９】本発明の電子透かし埋め込み処理装置１０
０は、動き検出部１２３の検出した動き情報に基づい
て、画像が静止している場合には電子透かしパターンも
静止させ、画像が動いている場合には電子透かしパター
ンも追従して動かす処理を実行する構成としたことによ
り、人間の目に感知しにくくなるように電子透かしを埋
め込むものである。これにより全体の埋め込み強度を変
えることなく、電子透かしの画質に及ぼす影響を効果的
に抑えることができる。

【００７０】図４は、電子透かし埋め込み処理装置１０
０中の動き検出部１２３の詳細構成を示すブロック図で
ある。動き検出部１２３において、信号記憶部１２６は
順次入力されるデジタルビデオ信号ＤＶ１をフレーム毎
に記憶し、１フレーム遅延させた遅延デジタルビデオ信
号ＤＶ１’を出力する。ここでは時間的に連続する２つ
の画像信号は相関の高い画素値となることを利用して、
最適に設定した探索範囲においてフレーム相関が最大に
なるような動きベクトルを決定することにより、画像信
号の動き検出を行う。

【００７１】続く相関計算部１２７は、この信号記憶部
１２６が出力する遅延デジタルビデオ信号ＤＶ１’と入
力デジタルビデオ信号ＤＶ１とのフレーム相関を計算
し、相関情報Ｍを出力する。ここでは時間的に連続する
２つのデジタルビデオ信号ＤＶ１’とＤＶ１において、
例えばそれぞれ対応する画素間で輝度値の差分の絶対値
を計算し、フレーム内で総和したマッチング値をフレー
ム相関の指標とする。すなわち、動きベクトルの探索範
囲（Ｖｘ，Ｖｙ）におけるマッチング値は、以下の式で
示される値となる。

【００７２】

【数１２】Ｍ（Ｖｘ，Ｖｙ）＝Σ｜ＤＶ１’（ｘ，ｙ）
−ＤＶ１（ｘ＋Ｖｘ，ｙ＋Ｖｙ）｜

【００７３】次に動きベクトルの探索範囲を変更して、
上記［数１２］の計算を繰り返し、それぞれの動きベク
トルに対するマッチング値を全て算出する。これによ
り、動きベクトルの探索範囲（Ｖｘ，Ｖｙ）におけるフ
レーム相関平面が得られる。

【００７４】続く動き判定部１２８は、この相関計算部
１２７が出力する相関情報Ｍに基づいてフレーム相関が
最大になる動きベクトル（Ｖｘ，Ｖｙ）を決定し、動き
情報Ｖを出力する。すなわち相関計算部１２７で得られ
たフレーム相関平面において、最大の相関を与える（こ
の場合は最小のマッチング値となる）動きベクトル（Ｖ
ｘ，Ｖｙ）を動き情報Ｖとして出力する。動き情報は以
下に示す式によって示される。

【００７５】

【数１３】Ｖ（ｘ，ｙ）＝ａｒｇ ｍｉｎ Ｍ（Ｖｘ，
Ｖｙ）

【００７６】このとき遅延デジタルビデオ信号ＤＶ１’
は、動きベクトル（Ｖｘ，Ｖｙ）により移動して入力デ
ジタルビデオ信号ＤＶ１に時間変化したことになる。こ
れにより最適に設定した探索範囲において、時間的に連
続する２つの画像信号のフレーム相関を最大化するよう
な動きベクトルを決定することにより、画像信号の動き
情報を検出することができる。

【００７７】図３に戻り、電子透かし埋め込み処理装置
の説明を続ける。信号変調部１２４は、動き検出部１２
３が出力する動き情報Ｖを入力し、動き情報Ｖに基づい
て電子透かしパターンＷＭ１を変調し、人間の視覚特性
を考慮した電子透かしパターンＷＭ２を加算部１２５に
出力する。

【００７８】信号変調部１２４は、入力デジタルビデオ
信号ＤＶ１が静止している場合には、動き検出部１２３
が出力する動き情報Ｖ＝（０，０）に応じて電子透かし
パターンＷＭ１も静止させたパターンとして変調して電
子透かしパターンＷＭ２を生成し、入力デジタルビデオ
信号ＤＶ１が動きベクトル（Ｖｘ，Ｖｙ）により移動す
る場合には、動き検出部１２３が出力する動き情報Ｖ＝
（Ｖｘ，Ｖｙ）に応じて電子透かしパターンＷＭ１を画
像に追従して動かす処理を実行した変調処理により電子
透かしパターンＷＭ２を生成して加算部１２５に出力す
る。この処理により、静止画には、静止した電子透かし
パターン埋め込み、動画には、動きに追従した電子透か
しパターン埋め込みが可能となり、人間の目に感知しに
くくなるように電子透かしを埋め込むことができる。こ
れにより全体の埋め込み強度を変えることなく、電子透
かしの画質に及ぼす影響を効果的に抑制することが可能
になる。

【００７９】動き検出部１２３が出力する動き情報Ｖに
従って、信号変調部１２４が電子透かしパターンＷＭ１
の変調処理を実行することによって生成した電子透かし
パターンＷＭ２を入力する加算部１２５は、入力デジタ
ルビデオ信号ＤＶ１に信号変調部１２４が出力する電子
透かしパターンＷＭ２を加算することにより、入力デジ
タルビデオ信号ＤＶ１と同一の形式により電子透かし情
報ＤＣを埋め込んだデジタルビデオ信号ＤＶ２を出力す
る。

【００８０】この出力デジタルビデオ信号ＤＶ２は、例
えば、所定のエンコーダによりエンコードして放送局等
より衛星波や地上波、ケーブル等の媒体を介して伝送さ
れたり、また出力デジタルビデオ信号ＤＶ２を所定のエ
ンコーダによりエンコードしてディスク原盤を露光し、
このディスク原盤より光ディスクによって提供される。

【００８１】このように、図３に示す本発明の電子透か
し埋め込み処理装置は、電子透かしの埋め込み処理対象
画像の動き情報を取得し、動き情報に応じて電子透かし
パターンの変調処理を実行して、静止画に対しては静止
した電子透かしパターンを入力画像に加算し、動画に
は、動きに追従した電子透かしパターン埋め込みを実行
する構成としたので、人間の目に感知しにくくなるよう
に電子透かしを埋め込むことができる。これにより全体
の埋め込み強度を変えることなく、電子透かしの画質に
及ぼす影響を効果的に抑制することが可能になる。

【００８２】［電子透かし埋め込み処理フロー］次に、
本発明の電子透かし埋め込み処理装置における処理手順
について、図５に示すフローを参照して説明する。図５
は、例えばデジタルビデオ信号等の入力信号に対して動
き検出を実行して、動き情報に応じた電子透かしパター
ンの変調を実行して入力信号に埋め込む処理を実行する
電子透かし埋め込み処理装置の処理手順を示すフローチ
ャートである。各ステップについて説明する。

【００８３】電子透かし埋め込み処理装置は、まず、ス
テップＳ１１においてＰＮ系列の乱数データを生成し、
ステップＳ１２において、電子透かし埋め込み対象信号
に応じて、「複製可能（ＣｏｐｙＦｒｅｅ）」、「１回
複製可能（Ｃｏｐｙ Ｏｎｃｅ）」「絶対複製禁止（Ｎ
ｅｖｅｒ Ｃｏｐｙ）」などの複製制御情報などからな
る埋め込み情報を乱数データＰＮによりスペクトラム拡
散し、電子透かしパターンＷＭ１を生成する。

【００８４】続いて電子透かし埋め込み処理装置は、ス
テップＳ１３において、入力デジタルビデオ信号ＤＶ１
を順次フレームデータ毎に読み込み、ステップＳ１４に
おいて、時間的に連続する入力デジタルビデオ信号ＤＶ
１に対して画像相関を計算し、相関情報Ｍを出力する。
続いて電子透かし埋め込み処理装置はステップＳ１５に
おいて、相関情報Ｍに基づいて画像の動き検出を行い、
動き情報Ｖを出力する。すなわち入力デジタルビデオ信
号ＤＶ１をフレーム毎に記憶して１フレーム遅延させた
遅延デジタルビデオ信号ＤＶ１’を生成し、時間的に連
続する２つのデジタルビデオ信号ＤＶ１’とＤＶ１とに
基づいて、前述の［数１２］を適用して、動きベクトル
の探索範囲（Ｖｘ，Ｖｙ）においてフレーム相関平面を
算出し、さらに［数１３］を適用して最大の相関を与え
る動きベクトル（Ｖｘ，Ｖｙ）を決定し、これを動き情
報Ｖとして出力する。

【００８５】続いて電子透かし埋め込み処理装置は、ス
テップＳ１６において、動き情報Ｖに基づいて電子透か
しパターンＷＭ１を変調し、人間の視覚特性を考慮した
電子透かしパターンＷＭ２を出力する。すなわち検出さ
れた動き情報Ｖに基づいて、入力デジタルビデオ信号Ｄ
Ｖ１が静止している場合には電子透かしパターンＷＭ１
も静止させ、入力デジタルビデオ信号ＤＶ１が動いてい
る場合には電子透かしパターンＷＭ１も追従して動かす
処理を実行して電子透かしパターンＷＭ２を生成して出
力する。

【００８６】このような変調処理のなされた電子透かし
パターンＷＭ２は、入力画像が静止しているときは、静
止し、入力画像に動きがあるときは、画像の動きに併せ
て移動することになり、人間の目に感知しにくくなる。
これにより全体の埋め込み強度を変えることなく、電子
透かしの画質に及ぼす影響を効果的に抑制することが可
能になる。

【００８７】続いて電子透かし埋め込み処理装置は、ス
テップＳ１７に移り、入力信号にこの変調した電子透か
しパターンＷＭ２を加算し、続くステップＳ１８におい
て、入力信号と同一の形式により電子透かし情報を埋め
込んだ信号を出力する。

【００８８】続いて電子透かし埋め込み処理装置はステ
ップＳ１９において、入力信号の処理を完了したか否か
を判断し、ここで否定結果が得られるとステップＳ１３
に戻り、以下の処理を繰り返し実行する。電子透かし埋
め込み処理装置は、順次入力信号について、同様の処理
を繰り返して入力信号を処理し、ステップＳ１９におけ
る入力終了の判定において肯定結果が得られると、処理
を完了する。

【００８９】［電子透かし埋め込み処理装置構成例２］
上述した電子透かし埋め込み処理装置は、画像信号のフ
レーム相関を利用して動き検出を行なう構成であった。
しかし、このようなフレーム相関からの動き検出処理に
基づく電子透かしパターンの調整処理においても電子透
かしパターンが目立たないように設定されない場合があ
る。

【００９０】例えば図６は画像信号が横方向にシフトす
る場合の、図７は画像信号がズームアウトする場合の、
ブロック分割を施した動き検出を説明する図である。こ
の図６、図７の画像の例は走行している車と背景の家や
木、そしてさらに後方の景色といった具合に画像信号中
に複数の動きベクトルが存在する画像信号である。時間
的に連続する画像信号（ａ）および（ｂ）に対してフレ
ーム相関を利用して、前述の［数１２］および［数１
３］により動き情報を検出すると、フレーム全体に対し
て画像相関を計算することになるため、検出される動き
情報は面積比が大きい物体の動きベクトルに大きく影響
されることになる。

【００９１】このため、例えば図６の横方向シフトの例
において、上述の手法では、フレーム相関による動き情
報が面積比に依存して出力されることになり、電子透か
しパターンは後方の景色の動きベクトル、この場合、ほ
とんど静止状態を示す動きベクトルであり、動き情報Ｖ
は、静止した動きベクトルに大きく依存することにな
る。従って、電子透かしを例えば走行している車の動き
ベクトルに電子透かしパターンを追従させようとして
も、上述の方法では、追従がなされないことになる。

【００９２】また図７のズームアウトの例において、フ
レーム全体としては、例えば１方向へのシフトが存在し
ないため電子透かしパターンを静止させようとしても、
フレーム相関による動き情報が面積比に依存することに
より、電子透かしパターンは何らかの予期せぬ方向への
動きベクトルに追従する可能性があり、通常の観察状態
においても人間の視覚にとらえられてしまうような電子
透かしとなる場合がある。

【００９３】上述のような問題を解決するために、画像
信号に対してブロック分割等の前処理を施した上で画像
信号のブロック相関を利用して動き検出を行って電子透
かしの埋め込み処理を実行する電子透かし埋め込み処理
装置について、以下、説明する。

【００９４】図６および図７の例において、まず時間的
に連続する画像信号（ａ）および（ｂ）に対して複数の
画像ブロックへの分割を行い、適当なブロックサイズの
分割画像信号（ｃ）および（ｄ）に変換した上で、これ
らの分割画像信号（ｃ）および（ｄ）の各ブロックに対
してブロック相関を利用して、前述のマッチング値算出
式［数１２］および動き情報算出式［数１３］に基づい
て、各ブロックにおける動き情報（ｅ）を検出する。図
６，図７の例では、１フレーム画像を９ブロックに分割
してあるが、分割ブロック数は任意の数に設定可能であ
る。

【００９５】分割した各ブロックに対して動きベクトル
が算出され、算出された複数の動きベクトルについて、
所定の評価を行ない、評価結果に基づいてその画像信号
全体の最適な動き情報（ｆ）を一つ設定する。

【００９６】ブロック領域単位で求められる複数の動き
ベクトルについての評価方法は、様々に設定可能であ
る。例えば複数の動きベクトルについて、方向および大
きさが最多数の動きベクトルを選択して、この最多数を
占めるベクトルに対応する情報を動き情報Ｖとして出力
する。または、複数の動きベクトルについての平均値を
取得して、平均値を動き情報Ｖとして出力するなどの処
理が可能である。

【００９７】さらに、ブロック領域単位で求められる複
数の動きベクトルについて、大きな動きを示す動きベク
トルに対しては、重み付けを大とし、小さな動きを示す
動きベクトルに対しては、重み付けを小とした評価処理
に基づいて動き情報Ｖを出力する。あるいは、画像中心
に近い領域の動きベクトルに対しては、重み付けを大と
し、画像周辺部に近い領域の動きベクトルに対しては、
重み付けを小とした評価処理に基づいて動き情報Ｖを出
力する構成とするなどである。

【００９８】具体的には、例えば分割した複数ブロック
のうち過半数以上のブロックにおいて１方向への動きベ
クトルが算出された場合には、多数決によりその動きベ
クトルをこの画像信号の動き情報とする方法がある。

【００９９】また各ブロック毎に算出された動きベクト
ルに対して、その動きベクトルの大きさで重み付けを行
って動きベクトルを評価判定する構成としてもよい。人
間の目は、より大きな動きを持つ領域に集中しやすい傾
向があり、動きベクトルが大きい場合には重み付けを大
とすることで、人間の目が集中しやすい動きのある部分
を重視した、画像信号の動き情報を取得することができ
る。

【０１００】さらに各ブロック毎に算出された動きベク
トルに対して、画像中央部分のブロックが大きく、画像
周縁部分のブロックが小さくなるような重み付けを行っ
て動きベクトルを評価判定することにより、人間の目が
集中しやすい画像中央部分を重視した、画像信号の動き
情報を取得することができる。

【０１０１】このように、ブロック分割した各領域にお
いて、動きベクトルを算出し、算出された複数の動きベ
クトルの評価に基づいて取得した動き情報に基づいて、
埋め込み電子透かしパターンの調整をする。このような
構成によれば、例えば図６の横方向シフトの例におい
て、前述のフレーム相関を利用した際には後方の景色の
動きベクトルが画像信号の動き情報として検出され、ほ
とんど静止状態の電子透かしパターン埋め込みがなされ
るのに対して、本実施例におけるブロック相関を利用し
た複数の動きベクトル検出による手法を実行し、例えば
人間の目が集中しやすい動きのある部分や画像中央部分
を重視して動きベクトルを評価判定すれば、走行する車
に追従するような画像信号の動き情報（ｆ）を抽出し
て、走行する車に追従する電子透かしパターン埋め込み
がなされることになる。

【０１０２】また図７のズームアウトの例において、前
述のフレーム相関を利用した際には何らかの予期せぬ方
向への動きベクトルが画像信号の動き情報として検出さ
れ、予期せぬ方向への動きを示す電子透かしパターン埋
め込みがなされるのに対して、本実施例におけるブロッ
ク相関を利用した複数の動きベクトル検出による手法を
実行し、例えば多数決により動きベクトルを評価判定す
る方法を採用すれば、どの方向にも追従しない静止画と
同様の動き情報（ｆ）を抽出することができ、ほとんど
静止状態の電子透かしパターン埋め込みがなされること
になる。

【０１０３】このように、ブロック分割した各領域にお
いて、動きベクトルを算出し、算出された複数の動きベ
クトルの評価に基づいて動き情報を取得することによ
り、人間の視覚特性に合致した動き検出が可能になり、
元の電子透かしパターン（ｇ）を取得された動きベクト
ルに追従させるように調整処理により電子透かしパター
ン（ｈ）を変調した後、画像信号に重畳することによ
り、電子透かしの画質に及ぼす影響を効果的に抑制し、
視覚的に目立たない電子透かしの埋め込みが可能とな
る。

【０１０４】図６、図７では、画像を９ブロックに分割
した例について説明したが、さらに細密なブロック分割
を行った上で、画像信号のオブジェクト毎のブロック相
関を利用して動き検出を行い、画像信号の動き情報を検
出してもよい。

【０１０５】例えば図８は、先に説明した図６に示す画
像と同様、画像信号が横方向シフトする場合の、微少ブ
ロックへの分割を施し、各ブロックの動き情報からオブ
ジェクト毎の動きを検出する処理を説明する図である。
この図８に示す例において、まず時間的に連続する画像
信号（ａ）および（ｂ）に対して多数の微少な画像ブロ
ックへの分割を行い、各ブロックについて動きベクトル
検出処理を実行する。

【０１０６】すなわち、各ブロックサイズの分割画像信
号（ｃ）および（ｄ）に変換し、これらの分割画像信号
（ｃ）および（ｄ）の各ブロックに対してブロック相関
を利用して、前述のマッチング値算出式［数１２］およ
び動きベクトル算出式［数１３］に基づいて、各ブロッ
クにおける動き情報（ｅ）を検出する。

【０１０７】微少ブロックにおける多数の動きベクトル
のうち同方向への動きベクトルを有する複数ブロックを
まとめて１つのオブジェクトとして判定する。図８
（ｅ）のように、家、車、木の各領域において、ほぼ同
様の動きベクトルを持つ領域が抽出され、３つの異なる
動きベクトルを持つオブジェクトが抽出される。さら
に、各オブジェクト毎に算出された複数の動きベクトル
を評価判定し、その結果、その画像信号全体の最適な動
き情報（ｆ）を一つ抽出する。すなわち、同様の動きベ
クトルを持つ画像領域を１つのオブジェクト領域と判定
し、オブジェクト単位の動きベクトル間における評価処
理に基づいて動き情報を出力する。

【０１０８】なお、動きベクトルの評価は、前述したよ
うに、過半数をしめるベクトルを抽出、多数決、または
最も動きの大きなものに大きな重み付けを行なう、ある
いは画面中央部に大きな重み付けを行なうなどの方法が
適用可能である。また、これらの評価は複合的に適用、
すなわち、動きの大きなもので中央部にあるものについ
ては、さらに大きな重みづけを行なうといった評価方法
を適用してもよい。

【０１０９】このように、ブロック分割した各領域にお
いて、動きベクトルを算出し、算出された複数の動きベ
クトルの評価に基づいて動き情報を取得して取得した動
き情報に基づいて電子透かしの埋め込み処理を実行する
電子透かし埋め込み処理装置は、先の図３の電子透かし
埋め込み処理装置１００において動き検出部１２３の構
成を変更することによって実現される。

【０１１０】図９は、ブロック分割等の前処理を施した
上で画像信号のブロック相関を利用して動き検出を行
う、電子透かし埋め込み処理装置１００中の動き検出部
１２３を示すブロック図である。まず動き検出部１２３
において、信号分割部１２９は順次入力されるデジタル
ビデオ信号ＤＶ１を適当なサイズの複数ブロック（例え
ばｎ）に分割し、ブロック分割された分割デジタルビデ
オ信号ＤＶ１Ｂを出力する。続く信号記憶部１３０は、
この信号分割部１２９が出力する分割デジタルビデオ信
号ＤＶ１Ｂをフレーム毎に記憶し、１フレーム遅延させ
た遅延分割デジタルビデオ信号ＤＶ１Ｂ’を出力する。
ここでは時間的に連続する２つの画像信号は相関の高い
画素値となることを利用して、最適に設定した探索範囲
において、ｎ個の各ブロック毎にブロック相関が最大に
なるような動きベクトルを評価判定することにより、画
像信号の動き検出を行う。

【０１１１】続く相関計算部１３１は、信号記憶部１３
０が出力する遅延分割デジタルビデオ信号ＤＶ１Ｂ’と
分割デジタルビデオ信号ＤＶ１Ｂとの各ブロック毎のブ
ロック相関を計算し、相関情報Ｍを出力する。ここでは
時間的に連続する２つのデジタルビデオ信号ＤＶ１Ｂ’
とＤＶ１Ｂにおいて、前述の［数１２］を適用してそれ
ぞれ対応する画素間で輝度値の差分の絶対値を各ブロッ
ク内で総和したマッチング値を計算し、これをブロック
相関の指標とする。次に動きベクトルの探索範囲を変更
して［数１２］の計算を繰り返し、それぞれの動きベク
トルに対するマッチング値を全て算出する。これによ
り、動きベクトルの探索範囲（Ｖｘ，Ｖｙ）におけるｎ
個の各ブロック毎のブロック相関平面が得られる。

【０１１２】動き判定部１３２は、相関計算部１３１が
出力する相関情報Ｍに基づいてｎ個の各ブロック毎にブ
ロック相関が最大になる動きベクトル（Ｖｘ，Ｖｙ）を
決定し、さらにこれらの複数の動きベクトルを評価判定
することにより動き情報Ｖを出力する。すなわち相関計
算部１３１で得られた各ブロック毎のブロック相関平面
において、前述の［数１３］に基づいて最大の相関を与
えるｎ個の動きベクトル（Ｖｘ，Ｖｙ）が算出される。

【０１１３】次に、動き判定部１３２は、これらのｎ個
のブロックに対応するｎ個の動きベクトル（Ｖｘ，Ｖ
ｙ）の評価を実行する。評価は、前述したように、多数
決方式、あるいは最も動きの大きなものに大きな重み付
けを行なったり、画面中央部に大きな重み付けを行なう
などの方法が適用可能である。

【０１１４】例えば、多数決方式の評価を実行する場合
は、分割したｎ個の複数ブロックのうち過半数以上のブ
ロックにおいて１方向への動きベクトルが算出された場
合には、その動きベクトルをこの画像信号の動き情報Ｖ
として設定する。また各ブロック毎に算出された動きベ
クトルに対して、その動きベクトルの大きさで重み付け
を行って動きベクトルを評価判定する場合は、重み付け
係数を各算出ベクトルに乗算し総和を算出するなどの演
算を実行する。このような手法で出力した動き情報Ｖに
基づいて電子透かしパターンの調整を実行することによ
り、人間の目が集中しやすい動きのある部分を重視し
た、画像信号の動き情報を検出することができる。

【０１１５】あるいは、各ブロック毎に算出された動き
ベクトルに対して、画像中央部分のブロックに大きく、
画像周縁部分のブロックに小さい重み付けを行って、各
動きベクトルを評価判定も可能である。この評価手法に
よれば、人間の目が集中しやすい画像中央部分を重視し
た、画像信号の動き情報を検出することができる。

【０１１６】［画像フォーマット変換を伴う動きベクト
ル検出処理］ところで画像相関を利用した動き情報の検
出は演算量が膨大であり、前述のマッチング算出式［数
１２］の演算量は画像信号のフレームサイズと動きベク
トル探索範囲との積に比例する。これはＨＤ（Ｈｉｇｈ
Ｄｅｆｉｎｉｔｉｏｎ）画像信号から動き検出を行っ
て電子透かし情報を埋め込む際に特に問題となり、動き
ベクトルを精度良く検出するためには高効率な動き検出
アルゴリズムの実現が重要である。

【０１１７】この演算量の増加という問題を解決する構
成について、以下、説明する。演算量の増加を解決する
ために、画像信号に対してフォーマット縮小等の前処理
を施した上で画像信号のフレーム相関を利用して動き検
出を行う。

【０１１８】図１０は、画像信号が横方向シフトする場
合の、フォーマット縮小を施した動き検出処理について
説明する図である。まず時間的に連続する画像信号
（ａ）および（ｂ）に対して画像フォーマットの縮小を
行い、適当なフレームサイズの縮小画像信号（ｃ）およ
び（ｄ）に変換する。

【０１１９】これらの縮小画像信号（ｃ）および（ｄ）
に対してフレーム相関を利用して、前述のマッチング値
算出式［数１２］および動きベクトル算出式［数１３］
に基づいて、動きベクトル、すなわち動き情報（ｅ）を
算出する。このような縮小処理による画像フォーマット
変換を経た場合でも時間的に連続する２つの画像信号は
相関の高い画素値となる。この縮小画像信号（ｃ）およ
び（ｄ）において最適に設定した探索範囲においてフレ
ーム相関が最大になるような動きベクトルを決定する。
このように、画像フォーマットの縮小を行なうことによ
り、少ない演算量で画像信号の動き検出を行うことがで
きる。なおこのようにして検出された動き情報（ｅ）は
縮小画像信号の動きベクトルであり、元の縮尺に拡大す
ることにより元の画像信号の動き情報（ｆ）を得ること
ができる。

【０１２０】図１０に示す例は、画像全体の処理を実行
して１つの動きベクトルを算出する処理例を示している
が、図６、図７、図８等を用いて説明したブロック分割
を実行して、各ブロックにおいて、前述のマッチング値
算出式［数１２］および動きベクトル算出式［数１３］
に基づいて、各ブロック毎の動きベクトルを算出する場
合も、このような縮小処理による画像フォーマット変換
を経た後に算出処理を実行することで演算量が低減す
る。この構成例については、後段で説明する。

【０１２１】例えば画像信号に対して水平方向、垂直方
向共に１／２になるような画像フォーマット変換を施し
た場合、縮小画像信号のフレームサイズは元の画像信号
の（１／２）×（１／２）＝１／４に低減することがで
きる。このようにすれば、前述の［数１２］を適用した
演算において、動き検出に要する演算量は画像信号のフ
レームサイズと動きベクトル探索範囲との積に比例する
から、１／４の演算量で画像信号の高効率な動き検出を
行うことができ、高速処理が可能となる。

【０１２２】なお、画像フォーマットの縮小を行なうこ
とにより設定可能な動きベクトルの探索範囲も水平方
向、垂直方向共に１／２の精度に落ちるため、実用上十
分な検出精度が確保できる範囲において画像信号のフレ
ームサイズを縮小し、動き検出に要する演算量を低減さ
せる必要がある。このようにして検出された縮小画像信
号の動き情報（ｅ）を２倍することにより元の画像信号
の動き情報（ｆ）が得られ、元の電子透かしパターン
（ｇ）をこうして検出された動きベクトルにより移動し
て電子透かしパターン（ｈ）に変調した後画像信号に重
畳することにより、電子透かしの画質に及ぼす影響を効
果的に抑制し、視覚的に目立ち難い電子透かし埋め込み
が実現される。

【０１２３】また画像フォーマットの縮小に際しては、
実用上十分な検出精度が確保できる範囲においてより簡
易的にフォーマット変換を施すことができる。例えば水
平方向１／ｍ、垂直方向１／ｎになるように画像フォー
マットを縮小する場合には、水平方向１／ｍ、垂直方向
１／ｎになるようにサンプルを間引くことによりフォー
マット変換を施してもよい。また水平方向ｍピクセル×
垂直方向ｎピクセルのブロックにおいて、相加平均等に
より新しいサンプルを算出することによりフォーマット
変換を施してもよい。

【０１２４】このように、画像のフォーマット変換をし
た後、動きベクトルを算出し、算出された動きベクトル
に基づいて動き情報を取得して取得した動き情報に基づ
いて電子透かしの埋め込み処理を実行する電子透かし埋
め込み処理装置は、先の図３の電子透かし埋め込み処理
装置１００において動き検出部１２３の構成を変更する
ことによって実現される。

【０１２５】図１１は、このように画像信号に対してフ
ォーマット縮小等の前処理を施した上で画像信号のフレ
ーム相関を利用して動き検出を行う電子透かし埋め込み
処理装置１００中の動き検出部１２３を示すブロック図
である。図１１に示す動き検出部１２３において、信号
縮小部１３３は順次入力されるデジタルビデオ信号ＤＶ
１を適当なフレームサイズの縮小画像にフォーマット変
換し、フォーマット変換された縮小デジタルビデオ信号
ＤＶ１Ｒを出力する。続く信号記憶部１３４は、この信
号縮小部１３３が出力する縮小デジタルビデオ信号ＤＶ
１Ｒをフレーム毎に記憶し、１フレーム遅延させた遅延
縮小デジタルビデオ信号ＤＶ１Ｒ’を出力する。ここで
は時間的に連続する２つの縮小画像信号は相関の高い画
素値となることを利用して、最適に設定した探索範囲に
おいてフレーム相関が最大になるような動きベクトルを
決定することにより、画像信号の動き検出を行う。

【０１２６】続く相関計算部１３５は、この信号記憶部
１３４が出力する遅延縮小デジタルビデオ信号ＤＶ１
Ｒ’と縮小デジタルビデオ信号ＤＶ１Ｒとのフレーム相
関を計算し、相関情報Ｍを出力する。ここでは時間的に
連続する２つのデジタルビデオ信号ＤＶ１Ｒ’とＤＶ１
Ｒにおいて、前述の［数１２］を適用して、それぞれ対
応する画素間で輝度値の差分の絶対値をフレーム内で総
和したマッチング値を計算し、これをフレーム相関の指
標とする。次に動きベクトルの探索範囲を変更して［数
１２］の計算を繰り返し、それぞれの動きベクトルに対
するマッチング値を全て算出する。これにより、動きベ
クトルの探索範囲（Ｖｘ，Ｖｙ）におけるフレーム相関
平面が得られる。

【０１２７】動き判定部１３６は、相関計算部１３５が
出力する相関情報Ｍに基づいてフレーム相関が最大にな
る動きベクトル（Ｖｘ，Ｖｙ）を決定し、動き情報Ｖを
出力する。すなわち相関計算部１３５で得られたフレー
ム相関平面において、前述の［数１３］に基づいて最大
の相関を与える動きベクトル（Ｖｘ，Ｖｙ）を動き情報
Ｖとして出力する。最適設定探索範囲において、時間的
に連続する２つの縮小画像信号のフレーム相関を最大化
するような動きベクトルを決定することにより、効果的
に演算量を低減して高効率に画像信号の動き情報を検出
することができる。

【０１２８】［フォーマット変換およびブロック分割を
実行する電子透かし埋め込み処理装置］次に、画像信号
に対してフォーマット縮小等の前処理を施し、さらに、
前述の複数ブロックに分割して各ブロック毎に動きベク
トルを算出して、複数の動きベクトルに基づいて動き情
報を算出する構成とした電子透かし埋め込み処理装置に
ついて説明する。このような電子透かし埋め込み処理装
置は、先の図３の電子透かし埋め込み処理装置１００に
おいて動き検出部１２３の構成を変更することによって
実現される。

【０１２９】動き検出部の構成を図１２を用いて説明す
る。図１２示す動き検出部１２３において、信号縮小部
１４１は順次入力されるデジタルビデオ信号ＤＶ１を適
当なフレームサイズの縮小画像にフォーマット変換し、
フォーマット変換された縮小デジタルビデオ信号ＤＶ１
Ｒを出力する。続いて、縮小画像データは、信号分割部
１４２に入力され、信号分割部１４２は順次入力される
縮小デジタルビデオ信号ＤＶ１Ｒを適当なサイズの複数
ブロック（例えばｎ）に分割し、ブロック分割された分
割デジタルビデオ信号ＤＶ１ＲＢを出力する。

【０１３０】信号記憶部１４３は、信号分割部１４２が
出力する縮小分割デジタルビデオ信号ＤＶ１ＲＢをフレ
ーム毎に記憶し、１フレーム遅延させた遅延分割デジタ
ルビデオ信号ＤＶ１ＲＢ’を出力する。ここでは時間的
に連続する２つの画像信号は相関の高い画素値となるこ
とを利用して、最適に設定した探索範囲において、ｎ個
の各ブロック毎にブロック相関が最大になるような動き
ベクトルを評価判定することにより、画像信号の動き検
出を行う。

【０１３１】続く相関計算部１４４は、信号記憶部１４
３が出力する遅延分割デジタルビデオ信号ＤＶ１ＲＢ’
と分割デジタルビデオ信号ＤＶ１ＲＢとの各ブロック毎
のブロック相関を計算し、相関情報Ｍを出力する。ここ
では時間的に連続する２つのデジタルビデオ信号ＤＶ１
ＲＢ’とＤＶ１ＲＢにおいて、前述の［数１２］を適用
してそれぞれ対応する画素間で輝度値の差分の絶対値を
各ブロック内で総和したマッチング値を計算し、これを
ブロック相関の指標とする。次に動きベクトルの探索範
囲を変更して［数１２］の計算を繰り返し、それぞれの
動きベクトルに対するマッチング値を全て算出する。こ
れにより、縮小画像の各ブロックにおける動きベクトル
の探索範囲（Ｖｘ，Ｖｙ）でブロック毎のブロック相関
平面が得られる。

【０１３２】動き判定部１４５は、相関計算部１４４が
出力する相関情報Ｍに基づいてｎ個の各ブロック毎にブ
ロック相関が最大になる動きベクトル（Ｖｘ，Ｖｙ）を
決定し、さらにこれらの複数の動きベクトルを評価判定
することにより動き情報Ｖを出力する。すなわち相関計
算部１４４で得られた各ブロック毎のブロック相関平面
において、前述の［数１３］に基づいて最大の相関を与
えるｎ個の動きベクトル（Ｖｘ，Ｖｙ）が算出される。

【０１３３】次に、動き判定部１４５は、これらのｎ個
のブロックに対応するｎ個の動きベクトル（Ｖｘ，Ｖ
ｙ）の評価を実行する。評価は、前述したように、多数
決方式、あるいは最も動きの大きなものに大きな重み付
けを行なったり、画面中央部に大きな重み付けを行なう
などの方法が適用可能である。

【０１３４】例えば、多数決方式の評価を実行する場合
は、分割したｎ個の複数ブロックのうち過半数以上のブ
ロックにおいて１方向への動きベクトルが算出された場
合には、その動きベクトルをこの画像信号の動き情報Ｖ
として設定する。また各ブロック毎に算出された動きベ
クトルに対して、その動きベクトルの大きさで重み付け
を行って動きベクトルを評価判定する場合は、重み付け
係数を各算出ベクトルに乗算し総和を算出するなどの演
算を実行する。このような手法で出力した動き情報Ｖに
基づいて電子透かしパターンの調整を実行することによ
り、人間の目が集中しやすい動きのある部分を重視し
た、画像信号の動き情報を検出することができる。

【０１３５】あるいは、各ブロック毎に算出された動き
ベクトルに対して、画像中央部分のブロックに大きく、
画像周縁部分のブロックに小さい重み付けを行って、各
動きベクトルを評価判定も可能である。この評価手法に
よれば、人間の目が集中しやすい画像中央部分を重視し
た、画像信号の動き情報を検出することができる。

【０１３６】このように、縮小処理によるフォーマット
変換を実行し、かつブロック分割した領域毎に動きベク
トルを取得して、動き情報を取得する構成によれば、動
きベクトルの算出処理数は、プロック数に応じて増加す
るが、縮小処理により演算量の低減が実現でき、演算量
を大幅に増大させることなく、最適な電子透かし調整、
埋め込みが可能となり、高効率に画像信号の動き情報を
検出し、電子透かしの画質に及ぼす影響を効果的に抑制
し、視覚的に目立ち難い電子透かし埋め込みが実現され
る。

【０１３７】［電子透かし埋め込み処理フロー］次に、
上述したブロック分割あるいはフォーマット変換等の処
理を実行する電子透かし埋め込み処理装置における処理
手順について、図１３に示すフローを参照して説明す
る。図１３は、例えばデジタルビデオ信号等の入力信号
に対してブロック分割あるいはフォーマット変換等の処
理を実行した後、動き検出を実行して、動き情報に応じ
た電子透かしパターンの変調を実行して入力信号に埋め
込む処理を実行する電子透かし埋め込み処理装置の処理
手順を示すフローチャートである。各ステップについて
説明する。

【０１３８】電子透かし埋め込み処理装置は、まず、ス
テップＳ３１においてＰＮ系列の乱数データを生成し、
ステップＳ３２において、電子透かし埋め込み対象信号
に応じて、「複製可能（ＣｏｐｙＦｒｅｅ）」、「１回
複製可能（Ｃｏｐｙ Ｏｎｃｅ）」「絶対複製禁止（Ｎ
ｅｖｅｒ Ｃｏｐｙ）」などの複製制御情報などからな
る埋め込み情報を乱数データＰＮによりスペクトラム拡
散し、電子透かしパターンＷＭ１を生成する。

【０１３９】続いて電子透かし埋め込み処理装置は、ス
テップＳ３３において、入力デジタルビデオ信号ＤＶ１
を順次フレームデータ毎に読み込み、ステップＳ３４に
おいて、入力デジタルビデオ信号ＤＶ１に対して前処理
を施す。この前処理は、前述したブロック分割処理、あ
るいは縮小等のフォーマット変換の少なくともいずれか
の処理、または２つの処理をシーケンシャルに実行する
処理として行なわれる。

【０１４０】例えば前処理として、入力デジタルビデオ
信号ＤＶ１に対してブロック分割を施し、分割デジタル
ビデオ信号ＤＶ１Ｂを出力する。このブロック分割によ
り、人間の視覚特性に合致した画像信号の動き検出が可
能となる。または入力デジタルビデオ信号ＤＶ１に対し
てフォーマット縮小を施し、縮小デジタルビデオ信号Ｄ
Ｖ１Ｒを出力する。この前処理により、少ない演算量で
画像信号の動き検出が可能となる。あるいは、入力デジ
タルビデオ信号ＤＶ１に対してフォーマット縮小を施
し、縮小デジタルビデオ信号ＤＶ１Ｒを出力し、さら
に、入力デジタルビデオ信号ＤＶ１Ｒに対してブロック
分割を施し、分割デジタルビデオ信号ＤＶ１ＲＢを出力
する。

【０１４１】次に、ステップＳ３５において、前処理の
施された時間的に連続する入力デジタルビデオ信号ＤＶ
１Ｒ、またはＤＶ１Ｂ、またはＤＶ１ＲＢに対して画像
相関を計算し、相関情報Ｍを出力する。続いて電子透か
し埋め込み処理装置はステップＳ３６において、相関情
報Ｍに基づいて画像の動き検出を行い、動き情報Ｖを出
力する。

【０１４２】例えば、分割デジタルビデオ信号ＤＶ１Ｂ
をフレーム毎に記憶して１フレーム遅延させた遅延デジ
タルビデオ信号ＤＶ１Ｂ’を生成し、時間的に連続する
２つのデジタルビデオ信号ＤＶ１Ｂ’とＤＶ１Ｂにおい
て、前述の［数１２］に基づいて、動きベクトルの探索
範囲（Ｖｘ，Ｖｙ）における各ブロック毎のブロック相
関平面を算出し、［数１３］に基づいて各ブロック毎に
最大の相関を与える動きベクトル（Ｖｘ，Ｖｙ）を決定
し、これらの複数の動きベクトルを評価判定することに
より動き情報Ｖを出力する。

【０１４３】または、縮小デジタルビデオ信号ＤＶ１Ｒ
をフレーム毎に記憶して１フレーム遅延させた縮小デジ
タルビデオ信号ＤＶ１Ｒ’を生成し、時間的に連続する
２つのデジタルビデオ信号ＤＶ１Ｒ’とＤＶ１Ｒにおい
て、前述の［数１２］に基づいて、動きベクトルの探索
範囲（Ｖｘ，Ｖｙ）におけるフレーム相関平面を算出
し、前述の［数１３］に基づいて、最大の相関を与える
動きベクトル（Ｖｘ，Ｖｙ）を決定し、これを動き情報
Ｖとして出力する。

【０１４４】あるいは、縮小分割デジタルビデオ信号Ｄ
Ｖ１ＲＢをフレーム毎に記憶して１フレーム遅延させた
遅延デジタルビデオ信号ＤＶ１ＲＢ’を生成し、時間的
に連続する２つの縮小分割デジタルビデオ信号ＤＶ１Ｒ
Ｂ’とＤＶ１ＲＢにおいて、前述の［数１２］に基づい
て、動きベクトルの探索範囲（Ｖｘ，Ｖｙ）における各
ブロック毎のブロック相関平面を算出し、［数１３］に
基づいて各ブロック毎に最大の相関を与える動きベクト
ル（Ｖｘ，Ｖｙ）を決定し、これらの複数の動きベクト
ルを評価判定することにより動き情報Ｖを出力する。

【０１４５】続いて電子透かし埋め込み処理装置は、ス
テップＳ３７において、動き情報Ｖに基づいて電子透か
しパターンＷＭ１を変調し、人間の視覚特性を考慮した
電子透かしパターンＷＭ２を出力する。すなわち検出さ
れた動き情報Ｖに基づいて、入力デジタルビデオ信号Ｄ
Ｖ１が静止している場合には電子透かしパターンＷＭ１
も静止させ、入力デジタルビデオ信号ＤＶ１が動いてい
る場合には電子透かしパターンＷＭ１も追従して動かす
処理を実行して電子透かしパターンＷＭ２を生成して出
力する。このような変調処理のなされた電子透かしパタ
ーンＷＭ２は、入力画像が静止ししているときは、静止
し、入力画像に動きがあるときは、画像の動きに併せて
移動することになる。

【０１４６】続いて電子透かし埋め込み処理装置は、ス
テップＳ３８に移り、入力信号にこの変調した電子透か
しパターンＷＭ２を加算し、続くステップＳ３９におい
て、入力信号と同一の形式により電子透かし情報を埋め
込んだ信号を出力する。

【０１４７】続いて電子透かし埋め込み処理装置はステ
ップＳ４０において、入力信号の処理を完了したか否か
を判断し、ここで否定結果が得られるとステップＳ３３
に戻り、以下の処理を繰り返し実行する。電子透かし埋
め込み処理装置は、順次入力信号について、同様の処理
を繰り返して入力信号を処理し、ステップＳ４０におけ
る入力終了の判定において肯定結果が得られると、処理
を完了する。

【０１４８】本発明のブロック分割した各領域におい
て、動きベクトルを算出し、算出された複数の動きベク
トルの評価に基づいて動き情報を取得する構成によれ
ば、人間の視覚特性に合致した動き検出に基づく電子透
かしパターンの変調が可能となり、画像信号に重畳する
ことにより、電子透かしの画質に及ぼす影響を効果的に
抑制し、視覚的に目立たない電子透かしの埋め込みが可
能となる。

【０１４９】また、本発明の画像縮小等のフォーマット
変換処理後の画像についての動きベクトルを算出する構
成によれば、動きベクトルの算出に必要な演算量が低減
され、動きベクトルの算出効率、電子透かし埋め込み処
理効率の向上が達成される。

【０１５０】［電子透かし検出処理装置］次に図１４を
参照して、電子透かし検出処理装置の構成について説明
する。図１４に示す電子透かし検出処理装置１５０は、
例えば放送局等より衛星波や地上波、ケーブル等の媒体
を介して受信して得られるデジタルビデオ信号ＤＶ２
や、光ディスク等を再生して得られるデジタルビデオ信
号ＤＶ２より、埋め込まれた電子透かし情報ＤＣを検出
する。

【０１５１】電子透かし検出装置１５０において、ＰＮ
生成部１５１はＰＮ系列の乱数データＰＮを生成し、こ
れを基本パターンとして電子透かしを検出する。このと
きＰＮ生成部１５１は、電子透かし埋め込み処理装置１
００におけるＰＮ生成部１２１またはＰＮ生成部１４１
と同一の乱数データＰＮを生成することにより、スペク
トラム拡散を用いて解析困難に埋め込んだ電子透かし情
報ＤＣを正しく検出することができる。

【０１５２】電子透かし検出装置１５０において、内積
計算部１５２は順次入力されるデジタルビデオ信号ＤＶ
２に対して乱数データＰＮとの内積値を計算し、内積値
Ｓを出力する。続く比較判定部１５３は、この内積値Ｓ
を最適に設定した閾値と比較することにより、電子透か
し情報ＤＣの有無、さらには埋め込まれた電子透かし情
報ＤＣの極性を判定する。すなわち非負の閾値ＴＨに基
づいて以下に示す判定を行なう。

【０１５３】

【数１４】Ｓ≦−ＴＨ ：電子透かしあり（極性０） ｜Ｓ｜＜ＴＨ ：電子透かしなし Ｓ≧ＴＨ ：電子透かしあり（極性１）

【０１５４】上記式のように、入力信号から埋め込み電
子透かし情報ＤＣを検出することができる。

【０１５５】例えば、放送局等より衛星波や地上波、ケ
ーブル等の媒体を介して受信して得られるデジタルビデ
オ信号ＤＶ２や、光ディスク等を再生して得られるデジ
タルビデオ信号ＤＶ２をコピーする際に、この電子透か
し情報ＤＣに基づいてコピー制限できるように成され、
さらに不正コピーされた疑いのあるソースについては、
ソースの出所を究明できるように成されている。

【０１５６】［電子透かし検出処理フロー］次に、電子
透かし検出処理装置における処理手順について、図１５
に示すフローを参照して説明する。各ステップについて
説明する。

【０１５７】電子透かし検出処理装置は、まず、ステッ
プＳ５１において、ＰＮ系列の乱数データＰＮを生成す
る。続いて電子透かし検出処理装置は、ステップＳ５２
において、例えばデジタルビデオ信号ＤＶ２等のフレー
ムデータを順次読み込み、ステップＳ５３において、入
力フレームデータと乱数データＰＮとの内積値を計算
し、内積値Ｓを出力する。

【０１５８】続いて電子透かし検出処理装置はステップ
Ｓ５４において、算出した内積値Ｓを設定した閾値（Ｔ
Ｈ）と比較することにより、電子透かし情報ＤＣの有
無、さらには埋め込まれた電子透かし情報ＤＣの極性を
判定する。すなわち非負の閾値ＴＨに対して、上述の
［数１４］の判定に基づいて入力信号から電子透かし情
報ＤＣを検出することができる。続いて電子透かし検出
処理装置は、ステップＳ５５において、このようにして
検出された電子透かし情報ＤＣを出力する。

【０１５９】続いて電子透かし検出処理装置は、ステッ
プＳ５６に移り、入力信号の処理を完了したか否かを判
断し、ここで否定結果が得られるとステップＳ５２に戻
り、順次入力データ毎に同様の処理手順を繰り返して入
力信号を処理する。ステップＳ５６において入力信号の
終了判定について肯定結果が得られると、処理を完了す
る。

【０１６０】［システム構成］上述の実施例で述べた一
連の処理は、ハードウェア、またはソフトウェア、ある
いは両者の複合構成によって実行することが可能であ
る。ソフトウェアによる処理を実行する場合は、処理シ
ーケンスを記録したプログラムを、専用のハードウェア
に組み込まれたデータ処理装置内のメモリにインストー
ルして実行させるか、あるいは、各種処理が実行可能な
汎用コンピュータにプログラムをインストールして実行
させることが可能である。一連の処理をソフトウェアに
よって行う場合には、そのソフトウェアを構成するプロ
グラムが、例えば汎用のコンピュータや１チップのマイ
クロコンピュータ等にインストールされる。図１６は、
上述した一連の処理、具体的には、電子透かし埋め込
み、検出の少なくともいずれかの処理を実行する装置の
システム構成例を示している。

【０１６１】システムは、ＣＰＵ(Central Processing
Unit)２０２を有する。ＣＰＵ(Central processing Uni
t)２０２は、各種アプリケーションプログラムや、ＯＳ
（Operating System）を実際に実行する。ＲＯＭ（Read
-Only-Memory）２０３は、ＣＰＵ２０２が実行するプロ
グラム、あるいは演算パラメータとしての固定データを
格納する。ＲＡＭ（Random Access Memory）２０４は、
ＣＰＵ２０２の処理において実行されるプログラム、お
よびプログラム処理において適宜変化するパラメータの
格納エリア、ワーク領域として使用される。ＣＰＵ２０
２、ＲＯＭ２０３、ＲＡＭ２０４、およびハードディス
ク２０５はバス２０１によって接続されており、相互に
データ転送が実行可能である。さらに入出力インタフェ
ース２１１に接続された各種入出力装置とのデータ転送
が可能となっている。

【０１６２】キーボード２１２、マウス２１３はＣＰＵ
２０２に各種の指令を入力するためにユーザにより操作
され、コマンド入力データ入力などの際にユーザによっ
て操作され、キーボードマウスコントローラ２１４介し
て入力される。

【０１６３】ドライブ２０９は、フロッピー（登録商
標）ディスク、ＣＤ−ＲＯＭ(Compact Disc Read Only
Memory)，ＭＯ(Magneto optical)ディスク，ＤＶＤ(Dig
ital Versatile Disc)、磁気ディスク、半導体メモリな
どのリムーバブル記録媒体２１０の記録再生を実行する
ドライブであり、各リムーバブル記録媒体２１０からの
プログラムまたはデータ再生、リムーバブル記録媒体２
１０に対するプログラムまたはデータ格納を実行する。

【０１６４】ＣＰＵ２０２は、入出力インタフェース２
１０を介して、キーボード２１２やマウス２１３等を介
して指令が入力されると、入力にしたがって、ＲＯＭ(R
eadOnly Memory)２０３に格納されているプログラムを
実行する。

【０１６５】上述の実施例における電子透かしの埋め込
み対象となる画像等の信号、あるいは検出対象となる信
号は、入力部２０７に接続されたカメラ２０７１他の入
力機器、例えばスキャナ等のデータ入力装置、あるいは
ドライブ２０９に接続されたフロッピーディスク、ＣＤ
−ＲＯＭ(Compact Disc Read Only Memory)，ＭＯ(Magn
eto optical)ディスク，ＤＶＤ(Digital Versatile Dis
c)、磁気ディスク、半導体メモリなどのリムーバブル記
録媒体２１０から入力可能である。音声データの入力も
マイク２０７２を介して可能な構成である。さらに、通
信部２０８を介して受信するデータを電子透かしの埋め
込み対象とするデータ、あるいは検出対象となるデータ
として処理することも可能である。

【０１６６】ＣＰＵ２０２は、ＲＯＭ格納プログラムに
限らず、ハードディスク２０５に格納されているプログ
ラム、衛星若しくはネットワークから転送され、通信部
２０８で受信されてハードディスク２０５にインストー
ルされたプログラム、またはドライブ２０９に装着され
たリムーバブル記録媒体２１０から読み出されてハード
ディスク２０５にインストールされたプログラムを、Ｒ
ＡＭ(Random Access Memory)２０４にロードして実行す
ることも可能である。

【０１６７】図１６に示す構成を持つシステムにおい
て、ＣＰＵ２０２は、上述した各実施例にしたがった処
理、あるいは上述したブロック図、フローチャートに従
って行われる処理を行う。そして、ＣＰＵ２０２は、そ
の処理結果を、必要に応じて、例えば、入出力インタフ
ェース２１１を介して、ＬＣＤ(Liquid Crystal Displa
y)やＣＲＴなどの表示装置２０６１、スピーカ２０６２
に対して出力部２０６を介して出力する。また、処理デ
ータは通信部２０８からの送信、さらには、ハードディ
スク２０５等の記録媒体に対する格納処理が可能であ
る。

【０１６８】各種処理の実行プログラムは、システムに
内蔵されている記録媒体としてのハードディスク２０５
やＲＯＭ２０３に予め記録しておくことができる。ある
いは、プログラムはフロッピーディスク、ＣＤ−ＲＯＭ
(Compact Disc Read Only Memory)，ＭＯ(Magneto opti
cal)ディスク，ＤＶＤ(Digital Versatile Disc)、磁気
ディスク、半導体メモリなどのリムーバブル記録媒体２
１０に、一時的あるいは永続的に格納（記録）しておく
ことができる。このようなリムーバブル記録媒体２１０
は、いわゆるパッケージソフトウエアとして提供するこ
とができる。

【０１６９】なお、プログラムは、上述したようなリム
ーバブル記録媒体２１０からコンピュータにインストー
ルする他、ダウンロードサイトから、ディジタル衛星放
送用の人工衛星を介して、コンピュータに無線で転送し
たり、ＬＡＮ(Local Area Network)、インターネットと
いったネットワークを介して、コンピュータに有線で転
送し、コンピュータでは、そのようにして転送されてく
るプログラムを、通信部２０８で受信し、内蔵するハー
ドディスク２０５にインストールすることができる。

【０１７０】ここで、本明細書において、コンピュータ
に各種の処理を行わせるためのプログラムを記述する処
理ステップは、必ずしもフローチャートとして記載され
た順序に沿って時系列に処理する必要はなく、並列的あ
るいは個別に実行される処理（例えば、並列処理あるい
はオブジェクトによる処理）も含むものである。

【０１７１】また、プログラムは、１つのコンピュータ
により処理されるものであっても良いし、複数のコンピ
ュータによって分散処理されるものであっても良い。さ
らに、プログラムは、遠方のコンピュータに転送されて
実行されるものであっても良い。

【０１７２】なお上述の実施の形態においては、時間的
に連続する２つのデジタルビデオ信号において、それぞ
れ対応する画素間で輝度値の差分の絶対値を計算して総
和する例を中心として説明したが、本発明はこれに限ら
ず、例えばそれぞれ対応する画素間で輝度値の積を計算
して総和する相互相関を用いる構成においても適用する
ことができる。

【０１７３】また上述の実施の形態においては、時間的
に連続する２つのデジタルビデオ信号の画像相関（マッ
チング）を利用して動き検出を行う場合について述べた
が、本発明はこれに限らず、例えば時間的に連続する２
つのデジタルビデオ信号の勾配や位相相関を利用して動
き検出を行う構成においても適用することができる。

【０１７４】また上述の実施の形態においては、時間的
に連続する２つのデジタルビデオ信号の画像相関を利用
して動き検出を行う場合について述べたが、本発明はこ
れに限らず、例えば時間的に連続する３つ以上のデジタ
ルビデオ信号の画像相関を利用して動き検出を行う構成
としてもよい。このように３以上の複数画像の相関を検
出する処理構成とすれば、その分時間方向への変動の小
さい動き検出を行うことができる。

【０１７５】また上述の実施の形態においては、デジタ
ルビデオ信号に対してフォーマット縮小を施した上で動
き検出を行う場合について述べたが、本発明はこれに限
らず、実用上十分な精度を確保できる場合には、より簡
易的にデジタルビデオ信号を縮小して動き検出を行う場
合に広く適用することができる。このようにすれば、そ
の分全体構成を簡略化することができる。

【０１７６】また上述の実施の形態においては、デジタ
ルビデオ信号のフレーム信号に対して動き検出を行う場
合について述べたが、本発明はこれに限らず、デジタル
ビデオ信号のフィールド信号に対して動き検出を行う場
合に広く適用することができる。この場合には各フィー
ルド信号毎に動き検出を行ってもよく、またはどちらか
一方のフィールド信号に対してのみ動き検出を行っても
よい。このようにすれば、より少ない演算量により動き
検出を行うことができる。

【０１７７】また上述の実施の形態においては、人間の
視覚特性を考慮した画像分析に際して、デジタルビデオ
信号の動き情報を検出して電子透かしパターンをこれに
追従させる場合について述べたが、本発明はこれに限ら
ず、デジタルビデオ信号のエッジ情報等を検出して電子
透かしパターンを変調する場合や、デジタルビデオ信号
の輝度情報や色情報等の種々の情報を分析して処理する
場合等と組み合わせて画像分析を行う場合に広く適用す
ることができる。

【０１７８】また上述の実施の形態においては、著作権
情報を乱数データによりスペクトラム拡散することで電
子透かしパターンを生成し、この電子透かしパターンを
デジタルビデオ信号に加算する場合について述べたが、
本発明はこれに限らず、デジタルビデオ信号のベースバ
ンド信号上で電子透かしの重畳を行う種々の電子透かし
埋め込み方式、さらにはデジタルビデオ信号のビットス
トリーム信号上で電子透かしの重畳を行う種々の電子透
かし埋め込み方式に広く適用することができる。

【０１７９】また上述の実施の形態においては、著作権
情報をＰＮ系列の乱数データによりスペクトラム拡散す
る場合について述べたが、本発明はこれに限らず、統計
的に総和が０になるような種々の数値パターンにより著
作権情報を解析困難に変調する場合に広く適用すること
ができる。

【０１８０】さらに上述の実施の形態においては、著作
権情報を重畳する場合について述べたが、本発明はこれ
に限らず、必要に応じて種々の情報を重畳して伝送する
場合に広く適用することができる。

【０１８１】以上、特定の実施例を参照しながら、本発
明について詳解してきた。しかしながら、本発明の要旨
を逸脱しない範囲で当業者が該実施例の修正や代用を成
し得ることは自明である。すなわち、例示という形態で
本発明を開示してきたのであり、限定的に解釈されるべ
きではない。本発明の要旨を判断するためには、冒頭に
記載した特許請求の範囲の欄を参酌すべきである。

【０１８２】なお、明細書に記載された各種の処理は、
記載に従って時系列に実行されるのみならず、処理を実
行する装置の処理能力あるいは必要に応じて並列的にあ
るいは個別に実行されてもよい。また、本明細書におい
てシステムとは、複数の装置の論理的集合構成であり、
各構成の装置が同一筐体内にあるものには限らない。

【０１８３】

【発明の効果】以上の説明から明らかなように本発明に
よれば、入力デジタルビデオ信号を処理する際に、時間
的に連続する入力デジタルビデオ信号に対してフレーム
相関を用いて動き検出を行い、検出された動き情報に基
づいて、画像が静止している場合には電子透かしパター
ンも静止させ、画像が動いている場合には電子透かしパ
ターンも追従して動かすことにより、人間の目に感知し
にくくなるように入力デジタルビデオ信号に電子透かし
を重畳することができ、これにより全体の埋め込み強度
を変えることなく、電子透かしの画質に及ぼす影響を効
果的に抑制することが可能になる。

【０１８４】さらに、本発明によれば、入力デジタルビ
デオ信号を処理する際に、時間的に連続する入力デジタ
ルビデオ信号に対してブロック分割等の前処理を施した
上でブロック相関を用いて動き検出を行い、各ブロック
毎に算出された複数の動き情報を多数決や重み付け等に
より評価判定し、検出された動き情報に基づいて電子透
かしパターンを画像に追従させることにより、人間の目
が集中しやすい部分を重視する等より視覚特性に合致す
るように入力デジタルビデオ信号に電子透かしを重畳す
ることができる。

【０１８５】さらに、本発明によれば、入力デジタルビ
デオ信号を処理する際に、時間的に連続する入力デジタ
ルビデオ信号に対してフォーマット縮小等の前処理を施
した上でフレーム相関を用いて動き検出を行い、検出さ
れた動き情報に基づいて電子透かしパターンを画像に追
従させることにより、より演算量を低減して高効率に入
力デジタルビデオ信号に電子透かしを重畳することがで
きる。

【０１８６】本発明によれば、画像信号の動きを検出し
てこれに追従する電子透かし情報の埋め込みが可能とな
り、デジタルネットワーク時代のコンテンツ配信におい
て、画質劣化の少なく信頼性の高い著作権保護システム
を構築することができ、今後デジタル放送等において開
始されるＨＤ画像コンテンツの配信に際しても電子透か
しの高効率な重畳を実現することが可能になる。

【図面の簡単な説明】

【図１】電子透かし検出の説明に供する、内積値の確率
密度関数を示す図である。

【図２】電子透かしの埋め込み、検出処理による著作権
保護処理について説明する図である。

【図３】本発明の電子透かしの埋め込み処理装置の構成
例を示す図である。

【図４】本発明の電子透かしの埋め込み処理装置におけ
る動き検出部の構成例を示す図である。

【図５】本発明の電子透かしの埋め込み処理装置の処理
例を示すフロー図である。

【図６】本発明の電子透かしの埋め込み処理装置におけ
るブロック分割処理について説明する図である。

【図７】本発明の電子透かしの埋め込み処理装置におけ
るブロック分割処理について説明する図である。

【図８】本発明の電子透かしの埋め込み処理装置におけ
るブロック分割処理について説明する図である。

【図９】本発明の電子透かしの埋め込み処理装置におけ
る動き検出部の構成例を示す図である。

【図１０】本発明の電子透かしの埋め込み処理装置にお
けるフォーマット変換処理について説明する図である。

【図１１】本発明の電子透かしの埋め込み処理装置にお
ける動き検出部の構成例を示す図である。

【図１２】本発明の電子透かしの埋め込み処理装置にお
ける動き検出部の構成例を示す図である。

【図１３】本発明の電子透かしの埋め込み処理装置にお
ける処理フローを示す図である。

【図１４】電子透かしの検出処理装置の構成例を示す図
である。

【図１５】電子透かしの検出処理装置の処理例を示すフ
ロー図である。

【図１６】電子透かし埋め込み、検出の少なくともいず
れかの処理を実行するシステム構成例を示す図である。

【符号の説明】

１ 電子透かし埋め込み装置 ２ 録画機器 ３ 電子透かし検出装置 ４ 電子透かし書き換え装置 ５ 光ディスク ６ 録画機器 ７ 光ディスク ８ 光ディスク １００ 電子透かし埋め込み処理装置 １２１ ＰＮ生成部 １２２ 乗算部 １２３ 動き検出部 １２４ 信号変調部 １２５ 加算部 １２６ 信号記憶部 １２７ 相関計算部 １２８ 動き判定部 １２９ 信号分割部 １３０ 信号記憶部 １３１ 相関計算部 １３２ 動き判定部 １３３ 信号縮小部 １３４ 信号記憶部 １３５ 相関計算部 １３６ 動き判定部 １４１ 信号縮小部 １４２ 信号分割部 １４３ 信号記憶部 １４４ 相関計算部 １４５ 動き判定部 １５０ 電子透かし検出処理装置 １５１ ＰＮ生成部 １５２ 内積計算部 １５３ 比較判定部 ２０２ ＣＰＵ ２０３ ＲＯＭ ２０４ ＲＡＭ ２０５ ハードディスク ２０６ 出力部 ２０７ 入力部 ２０８ 通信部 ２０９ ドライブ ２１０ リムーバブル記録媒体 ２１２ キーボード ２１３ マウス ２１４ キーボードマウスコントローラ ２０６１ 表示装置 ２０６２ スピーカ ２０７１ カメラ ２０７２ マイク

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 1/393 Ｈ０４Ｎ 7/08 Ｚ 7/081 (72)発明者 相馬 俊一 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 (72)発明者 小橋 貴志 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B057 CD05 CE08 CH01 CH11 5C063 CA07 DA20 DB09 5C076 AA14 AA22 BA06 5J104 AA14 5L096 HA04

Claims (11)

【特許請求の範囲】
1. 【請求項１】画像信号に対する電子透かしの埋め込み処
   理を実行する電子透かし埋め込み処理装置であり、 埋め込み情報に基づいて電子透かしパターンを生成する
   電子透かしパターン生成手段と、 電子透かしパターン埋め込み処理対象となる画像信号の
   縮小変換処理を実行し、縮小画像データに基づいて動き
   ベクトルを取得し、該動きベクトルに基いて動き情報を
   出力する動き検出手段と、 前記電子透かしパターン生成手段の生成した電子透かし
   パターンに対して、前記動き情報の示す動きに追従する
   動きを示すように変調処理を実行する信号変調手段と、 前記信号変調手段により変調された電子透かしパターン
   を前記画像信号に対して埋め込む処理を実行する加算手
   段と、 を有することを特徴とする電子透かし埋め込み処理装
   置。
2. 【請求項２】前記動き検出手段は、 画像信号をフレーム毎に読み込み、画像縮小処理を実行
   する信号縮小手段と、前記信号縮小手段の出力する縮小
   画像データを入力し、時間的に連続する複数の縮小画像
   フレームデータ間の相関を計算し相関情報を出力する相
   関計算手段と、 前記相関計算手段の出力する相関情報に基づいて動きベ
   クトルを算出して、算出された動きベクトルに基づいて
   動き情報Ｖを出力する動き判定手段とを有し、 前記信号変調手段は、前記電子透かしパターン生成手段
   の生成した電子透かしパターンに対して、前記動き情報
   Ｖに基づく変調処理を実行する構成であることを特徴と
   する請求項１に記載の電子透かし埋め込み処理装置。
3. 【請求項３】前記動き検出手段は、 画像信号をフレーム毎に読み込み、画像縮小処理を実行
   する信号縮小手段と、 前記信号縮小手段の出力する縮小画像データを入力し、
   時間的に連続する複数の縮小画像フレームデータ間の相
   関を、フレーム内における対応画素の輝度値の差分の絶
   対値の総和として算出するマッチング値に基づいて相関
   情報を出力する相関計算手段と、 前記相関計算手段の出力する相関情報に基づいて、最小
   のマッチング値となる動きベクトルを算出して、算出し
   た動きベクトルに基づいて動き情報Ｖを出力する動き判
   定手段とを有し、 前記信号変調手段は、前記電子透かしパターン生成手段
   の生成した電子透かしパターンに対して、前記動き情報
   Ｖに基づく変調処理を実行する構成であることを特徴と
   する請求項１に記載の電子透かし埋め込み処理装置。
4. 【請求項４】前記動き検出手段は、 縮小画像データに基づいて算出される動きベクトルを、
   縮小前の縮尺に拡大して出力動き情報として前記信号変
   調手段に出力する構成であることを特徴とする請求項１
   に記載の電子透かし埋め込み処理装置。
5. 【請求項５】前記電子透かし埋め込み処理装置は、さら
   に、 前記縮小画像データをフレーム単位で複数のブロックに
   分割する信号分割手段を有し、 前記動き検出手段は、 前記信号分割手段の分割したブロック領域単位で動きベ
   クトルを取得し、該動きベクトルの評価処理に基いて動
   き情報を出力する構成を有することを特徴とする請求項
   １に記載の電子透かし埋め込み処理装置。
6. 【請求項６】画像信号に対する電子透かしの埋め込み処
   理を実行する電子透かし埋め込み処理方法であり、 埋め込み情報に基づいて電子透かしパターンを生成する
   電子透かしパターン生成ステップと、 電子透かしパターン埋め込み処理対象となる画像信号の
   縮小変換処理を実行し、縮小画像データに基づいて動き
   ベクトルを取得し、該動きベクトルに基いて動き情報を
   出力する動き検出ステップと、 前記電子透かしパターン生成ステップにおいて生成した
   電子透かしパターンに対して、前記動き情報の示す動き
   に追従する動きを示すように変調処理を実行する信号変
   調ステップと、 前記信号変調ステップにおいて変調された電子透かしパ
   ターンを前記画像信号に対して埋め込む処理を実行する
   加算ステップと、 を有することを特徴とする電子透かし埋め込み処理方
   法。
7. 【請求項７】前記動き検出ステップは、 画像信号をフレーム毎に読み込み、画像縮小処理を実行
   する信号縮小ステップと、 前記信号縮小ステップにおいて出力する縮小画像データ
   を入力し、時間的に連続する複数の縮小画像フレームデ
   ータ間の相関を計算し相関情報を出力する相関計算ステ
   ップと、 前記相関計算ステップにおいて出力する相関情報に基づ
   いて動きベクトルを算出して、算出された動きベクトル
   に基づいて動き情報Ｖを出力する動き判定ステップとを
   有し、 前記信号変調ステップは、前記電子透かしパターン生成
   ステップにおいて生成した電子透かしパターンに対し
   て、前記動き情報Ｖに基づく変調処理を実行することを
   特徴とする請求項６に記載の電子透かし埋め込み処理方
   法。
8. 【請求項８】前記動き検出ステップは、 画像信号をフレーム毎に読み込み、画像縮小処理を実行
   する信号縮小ステップと、 前記信号縮小ステップにおいて出力する縮小画像データ
   を入力し、時間的に連続する複数の縮小画像フレームデ
   ータ間の相関を、フレーム内における対応画素の輝度値
   の差分の絶対値の総和として算出するマッチング値に基
   づいて相関情報を出力する相関計算ステップと、 前記相関計算ステップにおいて出力する相関情報に基づ
   いて、最小のマッチング値となる動きベクトルを算出し
   て、算出した動きベクトルに基づいて動き情報Ｖを出力
   する動き判定ステップとを有し、 前記信号変調ステップは、前記電子透かしパターン生成
   ステップにおいて生成した電子透かしパターンに対し
   て、前記動き情報Ｖに基づく変調処理を実行することを
   特徴とする請求項６に記載の電子透かし埋め込み処理方
   法。
9. 【請求項９】前記動き検出ステップは、 縮小画像データに基づいて算出される動きベクトルを、
   縮小前の縮尺に拡大して出力動き情報として出力するこ
   とを特徴とする請求項６に記載の電子透かし埋め込み処
   理方法。
10. 【請求項１０】前記電子透かし埋め込み処理方法は、さ
    らに、 前記縮小画像データをフレーム単位で複数のブロックに
    分割する信号分割ステップを有し、 前記動き検出ステップは、 前記信号分割ステップにおいて分割したブロック領域単
    位で動きベクトルを取得し、該動きベクトルの評価処理
    に基いて動き情報を出力することを特徴とする請求項６
    に記載の電子透かし埋め込み処理方法。
11. 【請求項１１】画像信号に対する電子透かしの埋め込み
    処理をコンピュータ・システム上で実行せしめるプログ
    ラムであって、 埋め込み情報に基づいて電子透かしパターンを生成する
    電子透かしパターン生成ステップと、 電子透かしパターン埋め込み処理対象となる画像信号の
    縮小変換処理を実行し、縮小画像データに基づいて動き
    ベクトルを取得し、該動きベクトルに基いて動き情報を
    出力する動き検出ステップと、 前記電子透かしパターン生成ステップにおいて生成した
    電子透かしパターンに対して、前記動き情報の示す動き
    に追従する動きを示すように変調処理を実行する信号変
    調ステップと、 前記信号変調ステップにおいて変調された電子透かしパ
    ターンを前記画像信号に対して埋め込む処理を実行する
    加算ステップと、 を有することを特徴とするプログラム。