JP2010008699A - 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム - Google Patents
電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム Download PDFInfo
- Publication number
- JP2010008699A JP2010008699A JP2008167702A JP2008167702A JP2010008699A JP 2010008699 A JP2010008699 A JP 2010008699A JP 2008167702 A JP2008167702 A JP 2008167702A JP 2008167702 A JP2008167702 A JP 2008167702A JP 2010008699 A JP2010008699 A JP 2010008699A
- Authority
- JP
- Japan
- Prior art keywords
- band
- watermark information
- carrier signal
- digital watermark
- band carrier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Abstract
【課題】 電子透かし情報の埋め込み後にキャリア信号が外乱を受けても、安定して電子透かし情報をキャリア信号から抽出できるようにする。
【解決手段】 帯域分割部110は、キャリア信号xp(n)を複数の帯域キャリア信号に分割する。埋め込み部120−0、120−1は、帯域キャリア信号X(ω0)、X(ω1)を埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成する。また、ウェーブレット係数に対して、電子透かし情報に対応した変調信号m0、m1による変調を施し、この変調後のウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する。帯域合成部130は、この帯域キャリア信号と帯域分割部110が出力する他の帯域キャリア信号とを合成して出力する。
【選択図】図1
【解決手段】 帯域分割部110は、キャリア信号xp(n)を複数の帯域キャリア信号に分割する。埋め込み部120−0、120−1は、帯域キャリア信号X(ω0)、X(ω1)を埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成する。また、ウェーブレット係数に対して、電子透かし情報に対応した変調信号m0、m1による変調を施し、この変調後のウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する。帯域合成部130は、この帯域キャリア信号と帯域分割部110が出力する他の帯域キャリア信号とを合成して出力する。
【選択図】図1
Description
この発明は、電子透かし情報の埋め込み技術に係り、特に空気中を伝播する音響信号への電子透かし情報の埋め込みおよび音響信号に埋め込まれた電子透かし情報の抽出に好適な装置、方法およびプログラムに関する。
音楽等のオーディオ信号を電子透かし情報の担い手であるキャリア信号とし、このオーディオ信号自体に電子透かし情報を埋め込む技術が各種提案されている(例えば特許文献1および2参照)。この埋め込み技術によれば、例えば電子透かし情報の埋め込まれたオーディオ信号の圧縮符号化データが復号化されて音として再生され、この音をマイクにより収音することにより得られるオーディオ信号が録音されて伝播する過程においても、録音されたオーディオ信号に電子透かし情報を留めておくことができる。従って、この埋め込み技術は、圧縮符号化データに電子透かし情報を埋め込む技術に比べて、幅広い用途に使用することができる。
特許第3659321号
特開2006−251676号公報
特表2007−535699号公報
ところで、キャリア信号たるオーディオ信号がアナログ形式で伝送され、あるいは音として空気中を伝搬する過程において、キャリア信号に様々な外乱が与えられると、キャリア信号に埋め込まれた電子透かし情報が変容し、電子透かし情報の抽出が困難になる、という問題があった。
この発明は、以上説明した事情に鑑みてなされたものであり、電子透かし情報の埋め込み後においてキャリア信号が外乱を受ける場合においても、安定して電子透かし情報をキャリア信号から抽出することができるロバスト性に優れた電子透かし情報の埋め込み伝送技術を提供することを目的とする。
この発明は、キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割手段と、前記帯域分割手段が出力した複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報の埋め込み先である埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換手段と、前記ウェーブレット変換手段が生成するウェーブレット係数に対して、電子透かし情報を示すシンボル列に対応した変調信号による変調を施す変調手段と、前記変調手段により電子透かし情報を示すシンボル列に対応した変調信号による変調が施されたウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する逆ウェーブレット変換手段と、前記電子透かし情報の埋め込まれた帯域キャリア信号と前記帯域分割手段が出力する前記埋め込み先帯域キャリア信号以外の帯域キャリア信号とを合成し、電子透かし情報の埋め込まれたキャリア信号を出力する帯域合成手段とを具備する電子透かし情報の埋め込み装置を提供する。
また、この発明は、キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割手段と、前記帯域分割手段が出力した複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報を示すシンボル列の埋め込み先である埋め込み先帯域キャリア信号とし、前記埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換手段と、前記ウェーブレット変換手段が生成するウェーブレット係数の列を電子透かし情報を示すシンボル列の1シンボルに対応した長さの区間に区切り、区間毎に、電子透かし情報を示す各種のシンボルに対応した変調信号との相関を判定し、この相関の判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列を判定する電子透かし情報抽出手段とを具備する電子透かし情報の抽出装置を提供する。
かかる発明によれば、埋め込み装置では、キャリア信号を帯域分割することにより得られた複数の帯域キャリア信号のうちの少なくとも1つの帯域キャリア信号が埋め込み先帯域キャリア信号とされ、この埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すと考えられる同振幅シーケンスのウェーブレット係数に電子透かし情報に対応した変調信号による変調が与えられる。そして、抽出装置では、キャリア信号を帯域分割することにより得られた複数の帯域キャリア信号のうちの少なくとも1つの帯域キャリア信号が埋め込み先帯域キャリア信号とされ、この埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すと考えられる同振幅シーケンスのウェーブレット係数の列の各区間と電子透かし情報を示す各種のシンボルに対応した変調信号との相関が判定され、この判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列が判定される。ここで、電子透かし情報を示すシンボル列に対応した変調信号による変調の対象となる埋め込み先帯域キャリア信号の振幅シーケンスのウェーブレット係数は、同振幅シーケンスの概形を示すものであり、キャリア信号が外乱を受ける場合でもその影響を受けにくい。従って、ロバスト性に優れた電子透かし情報の埋め込み伝送を実現することができる。
また、この発明は、キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割手段と、前記帯域分割手段が出力した複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報を示すシンボル列の埋め込み先である埋め込み先帯域キャリア信号とし、前記埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換手段と、前記ウェーブレット変換手段が生成するウェーブレット係数の列を電子透かし情報を示すシンボル列の1シンボルに対応した長さの区間に区切り、区間毎に、電子透かし情報を示す各種のシンボルに対応した変調信号との相関を判定し、この相関の判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列を判定する電子透かし情報抽出手段とを具備する電子透かし情報の抽出装置を提供する。
かかる発明によれば、埋め込み装置では、キャリア信号を帯域分割することにより得られた複数の帯域キャリア信号のうちの少なくとも1つの帯域キャリア信号が埋め込み先帯域キャリア信号とされ、この埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すと考えられる同振幅シーケンスのウェーブレット係数に電子透かし情報に対応した変調信号による変調が与えられる。そして、抽出装置では、キャリア信号を帯域分割することにより得られた複数の帯域キャリア信号のうちの少なくとも1つの帯域キャリア信号が埋め込み先帯域キャリア信号とされ、この埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すと考えられる同振幅シーケンスのウェーブレット係数の列の各区間と電子透かし情報を示す各種のシンボルに対応した変調信号との相関が判定され、この判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列が判定される。ここで、電子透かし情報を示すシンボル列に対応した変調信号による変調の対象となる埋め込み先帯域キャリア信号の振幅シーケンスのウェーブレット係数は、同振幅シーケンスの概形を示すものであり、キャリア信号が外乱を受ける場合でもその影響を受けにくい。従って、ロバスト性に優れた電子透かし情報の埋め込み伝送を実現することができる。
以下、図面を参照し、この発明の実施の形態を説明する。
<第1実施形態>
キャリア信号に電子透かし情報を埋め込んで伝送する埋め込み伝送技術は、電子透かし情報の抽出の際に電子透かし情報の埋め込まれていない元のキャリア信号を必要としないブラインド透かし方式の埋め込み伝送技術と、元のキャリア信号を必要とするノンブラインド透かし方式の埋め込み伝送技術に大別される。以下説明する第1実施形態は、前者のブラインド透かし方式の埋め込み伝送技術に属する。図1は、この発明の第1実施形態による電子透かし情報の埋め込み装置100の構成を示すブロック図、図2は、同実施形態による電子透かし情報の抽出装置200の構成を示すブロック図である。なお、埋め込み装置100および抽出装置200の各々は、キャリア信号へ電子透かし情報を埋め込む処理またはキャリア信号から電子透かし情報を抽出する処理を実行する専用のハードウェアとして実現してもよいし、埋め込み処理や抽出処理をコンピュータに実行させるコンピュータプログラムとして実現してもよい。この点は、第2実施形態以降の他の実施形態についても同様である。
<第1実施形態>
キャリア信号に電子透かし情報を埋め込んで伝送する埋め込み伝送技術は、電子透かし情報の抽出の際に電子透かし情報の埋め込まれていない元のキャリア信号を必要としないブラインド透かし方式の埋め込み伝送技術と、元のキャリア信号を必要とするノンブラインド透かし方式の埋め込み伝送技術に大別される。以下説明する第1実施形態は、前者のブラインド透かし方式の埋め込み伝送技術に属する。図1は、この発明の第1実施形態による電子透かし情報の埋め込み装置100の構成を示すブロック図、図2は、同実施形態による電子透かし情報の抽出装置200の構成を示すブロック図である。なお、埋め込み装置100および抽出装置200の各々は、キャリア信号へ電子透かし情報を埋め込む処理またはキャリア信号から電子透かし情報を抽出する処理を実行する専用のハードウェアとして実現してもよいし、埋め込み処理や抽出処理をコンピュータに実行させるコンピュータプログラムとして実現してもよい。この点は、第2実施形態以降の他の実施形態についても同様である。
まず、電子透かし情報の埋め込み装置100について説明する。図1に示すように、埋め込み装置100は、帯域分割部110と、帯域合成部130と、これらの間に介挿された複数の埋め込み部120−0、120−1、…と、変調信号生成部140とを有する。なお、図1では、図面が煩雑になるのを防ぐため、複数の埋め込み部120−0、120−1、…のうち2個の埋め込み部120−0および120−1のみが図示されている。
図3は、帯域分割部110の処理内容を説明する図である。本実施形態において、電子透かし情報の担い手となるキャリア信号は、オーディオ波形を一定のサンプリングレートでサンプリングしたオーディオサンプルxp(n)である。帯域分割部110は、このキャリア信号であるオーディオサンプルxp(n)の列を受け取って、互いに異なるM個の帯域に属する帯域キャリア信号に分割する。
さらに詳述すると、帯域分割部110は、窓掛け部と、帯域分割フィルタバンクとにより構成されている(図示略)。ここで、窓掛け部は、オーディオサンプルxp(n)の列を1ブロック当たりNサンプル(N=M/2)のブロックxp(n)(n=0〜N−1)に区切る処理と、現時点までの最新の2ブロック分のオーディオサンプルxp(n)(n=0〜2N−1)に窓関数を乗じて帯域分割フィルタバンクに供給する処理を繰り返す。窓関数としては、次式を満たす窓関数w(n)が好適である。この窓関数w(n)を用いた場合、帯域分割時と帯域合成時の窓掛け処理の際に信号の歪みを防止することができるという利点がある。
具体的には、次式に示すようなサイン窓が挙げられる。
帯域分割フィルタバンクは、各々、通過帯域中心角周波数がωi(i=0〜M−1)であるM個の複素係数BPF(Band Pass Filter;帯域通過フィルタ)からなる。各通過帯域中心角周波数ωi(i=0〜M−1)に対応した各複素係数BPFは、窓掛け部から窓関数の乗算された2ブロック分のオーディオサンプルxp(n)(n=0〜2N−1)の列を受け取る都度、受け取ったオーディオサンプル列xp(n)(n=0〜2N−1)に対して、各通過帯域中心角周波数ωiに対応した複素係数を用いたBPF処理を施すことにより、オーディオサンプル列xp(n)(n=0〜2N−1)に含まれた通過帯域中心角周波数ωiの成分を示す複素スペクトラム係数X(ωi)を算出し、帯域キャリア信号として出力する。本実施形態では、このようにして帯域分割部110の帯域分割フィルタバンクから得られるM帯域分の各帯域キャリア信号のうち一部または全部の帯域の各帯域キャリア信号が電子透かし情報を示すシンボル列の埋め込みを行う埋め込み先帯域キャリア信号となる。また、本実施形態では、複数の埋め込み先帯域キャリア信号を、帯域が隣り合ったもの同士の2つの埋め込み先帯域キャリア信号のペアに分け、電子透かし情報のシンボル列を構成する個々のシンボルを埋め込み先帯域キャリア信号の複数のペアに分散させて埋め込む。その際、本実施形態では、1つのシンボルを1つのペアをなす2個の埋め込み先帯域キャリア信号に埋め込む。なお、埋め込み先帯域キャリア信号の各ペアに埋め込むシンボル列は、同一種類の電子透かし情報を示すシンボル列を分解したシンボルであってもよいし、異なる複数種類の電子透かし情報のうちの1種類の電子透かし情報を示すシンボル列であってもよい。帯域分割により得られた複数の帯域キャリア信号のうちいずれを埋め込み先帯域キャリア信号とするかについては、埋め込み装置100と抽出装置200との間で合意されていればよく、埋め込み先帯域キャリア信号の選択方法は任意である。
図1において、埋め込み部120−0および120−1は、複素スペクトラム係数X(ω0)の列からなる埋め込み先帯域キャリア信号と複素スペクトラム係数X(ω1)の列からなる埋め込み先帯域キャリア信号のペアに対して、電子透かし情報を示すシンボルの埋め込みを行う手段である。図示を省略した他の埋め込み部120−2、120−3、…も各2個ずつのペアに分かれている。埋め込み部の各ペアは、各々に与えられる2帯域分の埋め込み先帯域キャリア信号の振幅シーケンスの低域成分(あるいは概形)に対し、埋め込み対象のシンボルを示す2相の変調信号を用いた振幅変調処理を施すことにより、シンボル列の埋め込みを行うものである。
変調信号生成部140は、電子透かし情報を示すシンボルをキャリア信号に埋め込むために、埋め込み対象であるシンボルを示し、同じ振幅および周波数を有し、かつ、互いに逆相関係にある2相の変調信号を発生する。2相の変調信号の振幅または周波数は、その変調信号が適用される埋め込み先帯域キャリア信号のペアの帯域に依存して決定される。なお、変調信号生成部140によって発生される変調信号の詳細については後述する。
次に、埋め込み部のペアを構成する各埋め込み部のうち埋め込み部120−0を例に各埋め込み部の構成を説明する。埋め込み部120−0において、絶対値検出部121は、次式に示す絶対値|X(ω0)|を複素スペクトラム係数X(ω0)の実数部Re(X(ω0))および虚数部Im(X(ω0))から算出する。この絶対値検出部121により順次算出される絶対値|X(ω0)|の列が埋め込み先帯域キャリア信号の振幅シーケンスである。
帯域分割部123は、絶対値検出部121から出力される埋め込み先帯域キャリア信号の振幅シーケンスに対して帯域分割を施し、振幅シーケンスの概形と詳細とを分離する手段である。具体的には、帯域分割部123は、絶対値検出部121から得られる複素スペクトラム係数の絶対値|X(ω0)|の列、すなわち、埋め込み先帯域キャリア信号の振幅シーケンスに対し、複素型離散ウェーブレット変換を施す手段である。周知の通り、離散ウェーブレット変換は、式(5)に示すような離散的なウェーブレット基底ψj,k(t)が与えられている場合に、式(6)に示すように、任意の時間関数f(t)とこのウェーブレット基底ψj,k(t)との内積であるウェーブレット係数Wf(j,k)を演算する変換式である。
この離散ウェーブレット変換により各種のj、kに対応したウェーブレット係数Wf(j,k)が得られると、元の時間関数f(t)は、各種のj,kに対応したウェーブレット基底ψj,k(t)に対して、ウェーブレット係数Wf(j,k)を重み付け加算した一次結合として近似することができる。
複素ウェーブレット変換部である帯域分割部123は、例えば図4に示すようなフィルタバンクである。この複素ウェーブレット変換部は、複素スペクトラム係数の絶対値|X(ω0)|の列に対する離散ウェーブレット変換を行い、式(6)のウェーブレット係数Wf(j,k)に相当するものとして複素ウェーブレット係数を算出する。
図4に示すように、フィルタバンクである複素ウェーブレット変換部は、複素ウェーブレット係数の実数部を算出するツリーTRaと虚数部を算出するツリーTRbとからなる。ツリーTRaにおいて、LPF1231a、HPF1232a、ダウンサンプラ1233aおよび1234aからなる部分は、絶対値検出部121から与えられる連続したL個の複素スペクトラム係数の絶対値|X(ω0)|に対し、レベル1の帯域分割を行う。さらに詳述すると、LPF1231aは、L個の複素スペクトラム係数の絶対値|X(ω0)|の列の中からj=0のウェーブレット基底ψ0,k(t)とウェーブレット係数Wf(0,k)との一次結合により近似可能な低域成分を選択し、この低域成分を示すL個のサンプルを出力する。ダウンサンプラ1233aは、このLPF1231aから出力されるL個のサンプルを2個に1個の割合で間引くことにより、L/2個のレベル1のウェーブレット係数x0の実数部x0aを出力する。一方、HPF1232aは、L個の複素スペクトラム係数の絶対値|X(ω0)|の列の中から、j=0のウェーブレット基底ψ0,k(t)とウェーブレット係数Wf(0,k)との一次結合に属しない高域成分を選択し、この高域成分を示すL個のサンプルを出力する。ダウンサンプラ1234aは、このHPF1232aから出力されるL個のサンプルを2個に1個の割合で間引くことにより、L/2個のレベル1のウェーブレット係数x1の実数部x1aを出力する。
また、ツリーTRaにおいて、LPF1235a、HPF1236a、ダウンサンプラ1237aおよび1238aからなる部分は、ダウンサンプラ1233aから与えられるL/2個の複素ウェーブレット係数の実数部x0aに対し、レベル2の帯域分割を行う。さらに詳述すると、LPF1235aは、L/2個の複素ウェーブレット係数の実数部x0aの列の中からj=1のウェーブレット基底ψ1,k(t)とウェーブレット係数Wf(1,k)との一次結合により近似可能な低域成分を選択し、この低域成分を示すL/2個のサンプルを出力する。ダウンサンプラ1237aは、このLPF1235aから出力されるL/2個のサンプルを2個に1個の割合で間引くことにより、L/4個のレベル2のウェーブレット係数の実数部x00aを出力する。一方、HPF1236aは、L/2個の複素ウェーブレット係数x00の実数部x0aの列の中から、j=1のウェーブレット基底ψ1,k(t)とウェーブレット係数Wf(1,k)との一次結合に属しない高域成分を選択し、この高域成分を示すL/2個のサンプルを出力する。ダウンサンプラ1238aは、このHPF1236aから出力されるL/2個のサンプルを2個に1個の割合で間引くことにより、L/4個のレベル2のウェーブレット係数x01の実数部x01aを出力する。
以上、ツリーTRaについて述べたが、ツリーTRbもツリーTRaのものと同様なLPF1231b、HPF1232b、ダウンサンプラ1233bおよび1234bからなる部分と、LPF1235b、HPF1236b、ダウンサンプラ1237bおよび1238bからなる部分とにより構成されている。そして、これらの各部の働きにより、絶対値検出部121から与えられる連続したL個の複素スペクトラム係数の絶対値|X(ω0)|の列から、L/2個のレベル1のウェーブレット係数x1の虚数部x1b、L/4個のレベル2のウェーブレット係数x00の虚数部x00bおよびL/4個のレベル2のウェーブレット係数x01の虚数部x01bを算出して出力する。
図4に例示するように、複素ウェーブレット変換部である帯域分割部123がレベル2までの帯域分割を行う場合、絶対値検出部121が出力する複素スペクトラム係数の絶対値|X(ω0)|の列から、3種類のウェーブレット係数x1、x00およびx01の実数部および虚数部が得られる。これらのうちj=0のウェーブレット基底ψ0,k(t)に対応したウェーブレット係数x1の絶対値|x1|は、埋め込み先帯域キャリア信号の振幅シーケンス(具体的には複素スペクトラム係数の絶対値|X(ω0)|のエンベロープ)の詳細な変化を表すものとなる。これに対し、j=1のウェーブレット基底ψ1,k(t)に対応したウェーブレット係数x00の絶対値|x00|は、埋め込み先帯域キャリア信号の振幅シーケンスを最も大雑把に示すもの、すなわち、同振幅シーケンスの概形または低域成分を示すものとなる。
図1における絶対値検出部124は、帯域分割部123から出力される埋め込み先帯域キャリア信号の振幅シーケンスの各帯域成分、すなわち、各ウェーブレット係数x1、x00およびx01の実数部および虚数部に基づき、各ウェーブレット係数x1、x00およびx01の絶対値|x1|、|x00|および|x01|を次式に従って算出する。
また、偏角検出部125は、帯域分割部123から得られる各ウェーブレット係数x1、x00およびx01の実数部および虚数部に基づき、各ウェーブレット係数x1、x00およびx01の偏角Arg(x1)、Arg(x00)およびArg(x01)を次式に従って算出する。
乗算器126および加算器127は、絶対値検出部124から出力される埋め込み先帯域キャリア信号の振幅シーケンスの各帯域成分の絶対値、すなわち、ウェーブレット係数の絶対値|x1|、|x00|および|x01|のうち、最も低い帯域に属し、振幅シーケンスの概形を最もよく示していると考えられる絶対値|x00|に対し、振幅変調を施す振幅変調器を構成している。さらに詳述すると、乗算器126は、変調信号生成部140が埋め込み対象であるシンボル列に基づいて発生する変調信号Am0を受け取り、この変調信号Am0をウェーブレット係数の絶対値|x00|に乗算する。そして、加算器127は、この乗算結果とウェーブレット係数の絶対値|x00|とを加算し、振幅変調済みの絶対値(1+Am0)|x00|を出力する。ここで、変調信号Am0は、−1から+1までの振幅を持った基本的な変調信号m0に対し、変調強度Aを乗算した信号である。変調強度Aは、0から1までの範囲の中から選択される。A=1である場合、最大限の振幅変調が行われ、A=0である場合は無変調となる。この変調強度Aは、帯域毎に要求されるシンボル埋め込みによる音質劣化の抑制効果、シンボルの外乱に対する耐性等に応じて決定される。
位相再結合部128aは、加算器127から得られる振幅変調済みの絶対値(1+Am0)|x00|と偏角検出部125から得られる偏角Arg(x00)とを再結合させて、埋め込み先帯域キャリア信号の振幅シーケンスの低域成分を示す複素ウェーブレット係数x00に戻す。また、位相再結合部128aは、絶対値検出部124から得られるウェーブレット係数の絶対値|x1|および|x01|を所定の量子化ステップで量子化し、この量子化後の絶対値に偏角検出部125から得られる各ウェーブレット係数の偏角Arg(x1)およびArg(x01)を各々再結合させて、複素ウェーブレット係数x1およびx01に戻す。このようにして得られる埋め込み先帯域キャリア信号の振幅シーケンスの各帯域成分(複素形式の帯域成分)である各ウェーブレット係数が位相再結合部128bおよび帯域合成部129の処理対象となる。
ここで、位相再結合部128aが振幅変調の対象とならないウェーブレット係数の絶対値|x1|および|x01|に量子化処理を施すのは次の理由によるものである。まず、隣接した帯域のウェーブレット係数同士は、周波数領域で実用的に完全といえる程度までは分離されておらず、オーバラップしている。従って、隣接した帯域のウェーブレット係数のうち振幅変調の対象(電子透かし情報の埋め込み先)とはならないウェーブレット係数に何ら処理を施さずに後述の複素ウェーブレット逆変換に用いると、そのウェーブレット係数がオーディオサンプル列から電子透かしを抽出する際に外乱として働くことになる。しかし、その一方、振幅変調の対象(電子透かし情報の埋め込み先)とはならないウェーブレット係数を完全に除去し、振幅変調済みのウェーブレット係数のみを用いて後述の複素ウェーブレット逆変換を行うと、電子透かし情報の埋め込まれたオーディオサンプル列の音質の劣化につながる。そこで、抽出時における電子透かし情報の抽出精度と音質とのトレードオフを考慮し、抽出精度と音質の両方を適度に満足させるように、振幅変調の対象とならないウェーブレット係数の絶対値|x1|および|x01|については量子化処理を施すようにしているのである。
以上述べた位相再結合部128aの処理を経た複素ウェーブレット係数x1、x00およびx01は、帯域合成部129に引き渡される。この帯域合成部129は、複素ウェーブレット逆変換部である。この複素ウェーブレット逆変換部は、位相再結合部128aから引き渡される3種類の複素ウェーブレット係数x1、x00およびx01に複素ウェーブレット逆変換を施し、複素スペクトル係数の絶対値|X’(ω0)|を出力する。この複素ウェーブレット逆変換は、前掲図4の処理を全く逆にしたものである。すなわち、例えば実数部に着目すると、L/4個の複素ウェーブレット係数の実数部x00aの各間に零サンプルを挿入する2倍アップサンプリングを行った後、フィルタ1235aと逆の伝達関数を持ったフィルタ処理を施すとともに、L/4個の複素ウェーブレット係数の実数部x01aの各間に零サンプルを挿入する2倍アップサンプリングを行った後、フィルタ1236aと逆の伝達関数を持ったフィルタ処理を施し、両フィルタ処理の結果を加算する。これにより、L/2個の複素ウェーブレット係数の実数部x0aが得られる。このような処理をツリーTRaの先端から根本に向けて、また、ツリーTRbの先端から根本に向けて繰り返すことにより複素型離散ウェーブレット変換前の状態に戻すのである。
位相再結合部128bは、このようにして帯域合成部129から得られる複素スペクトル係数の絶対値|X’(ω0)|に対し、偏角検出部122から出力される偏角Arg(X(ω0))を再結合させ、複素スペクトラム係数X’(ω0)を算出する。
以上が埋め込み部120−0の詳細である。
以上が埋め込み部120−0の詳細である。
埋め込み部120−1も埋め込み部120−0と基本的に同様な構成であり、帯域分割部110から得られる複素スペクトル係数X(ω1)の振幅シーケンスの概形に対し、埋め込み部120−0が埋め込みを行うのと同じシンボル列を埋め込む。ただし、埋め込み部120−1の乗算器126に相当するものには、埋め込み部120−0の乗算器126に与えられる変調信号Am0に対して、周波数および振幅が同じであり、かつ、逆相関係にある変調信号Am1が変調信号生成部140から供給される。
ここで、変調信号Am0およびAm1とこれらを用いた振幅変調の対象とのタイミング関係を説明するとともに、埋め込み対象であるシンボルと変調信号Am0およびAm1との関係を説明する。図5(a)および(d)は、帯域分割部110が出力する複素スペクトラム係数の絶対値|X(ω1)|および|X(ω0)|を各々示している。また、図5(b)および(e)は、シンボルの埋め込み先となる複素ウェーブレット係数の絶対値|x00|のうち埋め込み部120−1において得られる絶対値|x00(ω1)|および埋め込み部120−0において得られる絶対値|x00(ω0)|を各々示している。そして、図5(c)および(f)は、変調信号生成部140が出力する変調信号Am0およびAm1を各々示している。
図5(a)、(b)に示すように、埋め込み部120−1では、帯域分割部110から出力されるL個の複素スペクトラム係数の絶対値|X(ω1)|を単位として複素型離散ウェーブレット変換が実行され、このL個の複素スペクトラム係数の絶対値|X(ω1)|から得られるL/4個の複素ウェーブレット係数の絶対値|x00(ω1)|が1シンボルの埋め込み先となる。また、図5(d)、(e)に示すように、埋め込み部120−0では、帯域分割部110から出力されるL個の複素スペクトラム係数の絶対値|X(ω0)|を単位として複素型離散ウェーブレット変換が実行され、このL個の複素スペクトラム係数の絶対値|X(ω0)|から得られるL/4個の複素ウェーブレット係数の絶対値|x00(ω0)|が1シンボルの埋め込み先となる。図5(c)、(f)に示すように、変調信号生成部140は、L/4個分の複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|の長さを1周期とする三角波の変調信号Am1およびAm0を出力する。ここで、埋め込み対象のシンボルbがビット“0”である場合、変調信号Am1は前半が山、後半が谷となるのに対し、変調信号Am0は前半が谷、後半が山となる。また、埋め込み対象のシンボルbがビット“1”である場合、変調信号Am1は前半が谷、後半が山となるのに対し、変調信号Am0は前半が山、後半が谷となる。このように同一シンボルを表す変調信号Am1およびAm0は、互いに逆相関係となり、また、個々の変調信号Am1またはAm0は、各々が表すシンボルの種類により波形が異なったものとなる。
埋め込み部120−1および120−0は、以上のような共通のシンボルに基づいて発生された変調信号Am1およびAm0を受け取り、各変調信号Am1およびAm0を各々用いた振幅変調を複素スペクトラム係数X(ω1)およびX(ω0)の振幅シーケンスの概形を示す複素ウェーブレット係数の絶対値|x00(ω1)|および|x00(ω0)|に各々施し、共通のシンボルが埋め込まれた複素スペクトラム係数X’(ω0)およびX’(ω1)を発生するのである。
そして、図1における帯域合成部130は、この埋め込み部120−0および120−1から得られる埋め込み先帯域キャリア信号(複素スペクトラム係数X’(ω0)およびX’(ω1))と、他の埋め込み部の各ペアから得られる埋め込み先帯域キャリア信号と、帯域分割部110から出力される埋め込み先帯域キャリア信号以外の帯域キャリア信号を時間領域の信号に戻して加算するとともに窓掛け処理を行い、電子透かし情報の埋め込まれたオーディオサンプル列xp’(n)を出力する。
さて、上述した帯域分割部110は、キャリア信号を時間軸上においてオーバラップしたブロックに区切って帯域分割を行った。これに対し、埋め込み部120−0および120−1内の帯域分割部123が複素ウェーブレット変換部である態様では、同帯域分割部123は、埋め込み先帯域キャリア信号たる複素スペクトラム係数の絶対値|X(ω0)|および|X(ω1)|の各列を時間軸上においてオーバラップしないL個の絶対値からなるブロックに各々区切り、複素型離散ウェーブレット変換を行い、変調信号生成部140は、このブロック単位で1ビット分の変調信号Am1およびAm0を発生し、振幅変調を行わせる。このように帯域分割とシンボルの埋め込みとでブロックの区切り方が異なる理由は次の通りである。
まず、帯域分割部110では、高い周波数分解能が必要なため、FFTの基底関数のような複素指数関数列を想定して帯域分割を行っている。このため、ブロック間のオーバラップを設けないで帯域分割・合成を行うと、合成時にブロックの両端で信号のレベルの不連続または位相の不連続が生じる。そこで、このような不具合の発生を回避するため、帯域分割部110では、キャリア信号を時間軸上においてオーバラップしたブロックに区切って帯域分割を行っている。
一方、シンボルの埋め込みでは、シンボルを埋め込む各ブロック(この例ではL/4個分の複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|)を時間軸上においてオーバラップさせると、シンボルの抽出時に相前後して埋め込まれたシンボル間の干渉が発生する可能性がある。このような干渉が発生するのは好ましくない。また、帯域分割部123として複素ウェーブレット変換部を用いる態様では、埋め込み先帯域キャリア信号の振幅シーケンスの“概形(低い周波数から高い周波数まで一定程度含まれている)”にシンボルを埋め込めば足りるので、複素型離散ウェーブレット変換では厳密な周波数分割が要求されない。そこで、埋め込み先帯域キャリア信号を時間軸上においてオーバラップしないブロックに各々区切り、複素型離散ウェーブレット変換を行っているのである。
以上が図1に示す埋め込み装置100の詳細である。
以上が図1に示す埋め込み装置100の詳細である。
次に図2を参照し、電子透かし情報の抽出装置200について説明する。抽出装置200において、帯域分割部210は、埋め込み装置100の帯域分割部110と同じ構成を有する。この帯域分割部210は、電子透かし情報が埋め込まれたオーディオサンプルxp’(n)の列を受け取り、このオーディオサンプルxp’(n)の列から例えばM個の帯域に属する複素スペクトラム係数X’(ωk)(k=0〜M−1)を生成する。
絶対値検出部221−0、帯域分割部223−0および絶対値検出部224−0からなる部分は、埋め込み装置100の埋め込み部120−0内の絶対値検出部121、帯域分割部123および絶対値検出部124からなる部分と同様な役割を果たす部分である。すなわち、この部分は、帯域分割部210から得られる複素スペクトラム係数X’(ω0)の絶対値|X’(ω0)|を求め、この絶対値|X’(ω0)|の列に複素型離散ウェーブレット変換を施し、この結果得られる複素ウェーブレット係数の1つの絶対値、すなわち、埋め込み装置100において変調信号Am0による振幅変調が施された絶対値(1+Am0)|x00(ω0)|を算出する。同様に、絶対値検出部221−1、帯域分割部223−1および絶対値検出部224−1からなる部分は、埋め込み装置100の埋め込み部120−1内の絶対値検出部121、帯域分割部123および絶対値検出部124からなる部分と同様な役割を果たす部分である。すなわち、この部分は、埋め込み装置100において変調信号Am1による振幅変調が施された複素ウェーブレット係数の絶対値(1+Am1)|x00(ω1)|を、帯域分割部210が出力する複素スペクトラム係数X’(ω1)から算出する。
ここで、複素ウェーブレット係数x00(ω1)と複素ウェーブレット係数x00(ω0)は、隣接した帯域の複素スペクトラム係数から得られたものであるため、互いに近似した値となる。また、電子透かし情報の埋め込まれたオーディオサンプルxp’(n)の列の伝搬中、様々な外乱が発生し、この外乱に基づくノイズがオーディオサンプルxp’(n)に混入する場合もあるが、このノイズは同相成分となって複素ウェーブレット係数x00(ω1)と複素ウェーブレット係数x00(ω0)に含まれることとなる。従って、上記式(13)の除算において、同相ノイズを含んだ複素ウェーブレット係数|x00(ω1)|および|x00(ω0)|が相殺し、変調波形データmは、理想的には次式(14)に示すように、電子透かし情報のビットbを示す変調信号Am1およびAm0のみに依存した値に近似することができる。
オフセット除去部252aは、過去一定期間内に出力された変調波形データmの平均値(すなわち、移動平均値)を求めて、それをオフセットとして、変調波形データmから減算する。これにより変調波形データmからオフセット成分(直流成分)が除去される。
正規化部252bは、オフセット除去部252aから過去一定期間内に出力された変調波形データmの絶対値の最大値を求め、オフセット除去部252aから現在出力された変調波形データmをこの最大値によって除算することにより正規化し、正規化された変調波形データmnを出力する。
電子透かし情報抽出部260は、正規化された変調波形データmnから電子透かし情報を示すシンボルbを抽出する手段であり、バッファ261と、変調信号生成部262と、相関係数演算部263と、相関判定部264とを有する。バッファ261は、正規化部252bから出力された最新のL/4個の変調波形データmnを記憶するバッファである。変調信号生成部262、相関係数演算部263および相関判定部264の動作は、正規化部252bから出力される変調波形データmnにおけるシンボルの区切り位置を見つけるまでの同期捕捉期間とそれ以降の同期維持期間とで異なったものとなる。
まず、同期捕捉期間中、変調信号生成部262は、バッファ261が新規な変調波形データmnを正規化部252bから取り込んで記憶する毎に、埋め込み装置100の変調信号生成部140側におけるビット“0”に対応した変調信号m1(変調強度Aを乗算する前の振幅が±1の変調信号)と同様な波形の変調信号とビット“1”に対応した変調信号m1と同様な波形の変調信号とを生成する。また、相関係数演算部263は、バッファ261内のL/4個の変調波形データmnと変調信号生成部262が生成するビット“0”に対応した変調信号との相関を示す相関係数R0を算出するとともに、バッファ261内のL/4個の変調波形データmnと変調信号生成部262が生成するビット“1”に対応した変調信号との相関を示す相関係数R1を算出する。そして、相関判定部264は、バッファ261に新規な変調波形データmnが記憶される毎に得られる相関係数R0およびR0の変化の状況に基づいて、変調波形データmnにおけるビットbの区切り位置を判定する。具体的には、相関係数R0またはR1のピークがL/4サンプルの周期で発生していることが判明した場合、そのピークの発生点がビットbの区切り位置であると判定し、次に述べる同期維持の期間の動作に移行する。
同期維持期間中、変調信号生成部262は、1個のシンボルbを表現するL/4個の変調波形データmnがバッファ261に書き込まれる毎に、ビット“0”に対応した変調信号とビット“1”に対応した変調信号を生成する。また、相関係数演算部263は、バッファ261内のL/4個の変調波形データmnとビット“0”に対応した変調信号との相関を示す相関係数R0を算出するとともに、バッファ261内のL/4個の変調波形データmnとビット“1”に対応した変調信号との相関を示す相関係数R1を算出する。そして、相関判定部264は、R0>R1である場合には、抽出結果である電子透かし情報のシンボルbとしてビット“0”を出力し、R1>R0である場合には、抽出結果である電子透かし情報のシンボルbとしてビット“1”を出力する。
以上が、埋め込み先帯域キャリア信号のペアの1つから電子透かし情報のシンボルを抽出するための構成の詳細である。埋め込み装置100側において、埋め込み先帯域キャリア信号の複数のペアに電子透かし情報のシンボル列を分散させて埋め込んでいる場合には、抽出装置200では、帯域分割部210から得られる埋め込み先帯域キャリア信号の各ペアについて、以上説明した構成によりシンボルの抽出を実施し、抽出したシンボルを集めて元の電子透かし情報を再現することとなる。
以上が本実施形態の詳細である。
以上が本実施形態の詳細である。
本実施形態によれば、次の効果が得られる。
(1)本実施形態において埋め込み装置100では、特許文献1〜3に開示の技術とは異なり、埋め込み先帯域キャリア信号の振幅シーケンスの複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|に対し、電子透かし情報に対応した変調信号による振幅変調を行っている。この複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|は、埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すものであり、キャリア信号が外乱を受ける場合でもその影響を受けにくい。従って、ロバスト性に優れた電子透かし情報の埋め込み伝送を実現することができる。
(1)本実施形態において埋め込み装置100では、特許文献1〜3に開示の技術とは異なり、埋め込み先帯域キャリア信号の振幅シーケンスの複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|に対し、電子透かし情報に対応した変調信号による振幅変調を行っている。この複素ウェーブレット係数の絶対値|x00(ω1)|または|x00(ω0)|は、埋め込み先帯域キャリア信号の振幅シーケンスの概形を示すものであり、キャリア信号が外乱を受ける場合でもその影響を受けにくい。従って、ロバスト性に優れた電子透かし情報の埋め込み伝送を実現することができる。
(2)埋め込み先帯域キャリア信号をブロックに区切って、ブロックの中から変調信号を作用させる部分を切り出す場合において、この切り出しのための手段として、FFTを用いると、電子透かし情報の抽出時にブロック境界においてアーティファクト(振幅や位相の不連続)が生じる。このため、切り出しのための手段としてFFTを用いるときには、特許文献3に開示のように、埋め込み先帯域キャリア信号を時間軸上においてオーバラップしたブロックに区切る必要がある。しかし、埋め込み先帯域キャリア信号をこのようなオーバラップしたブロックに区切って、電子透かし情報のビットを各ブロックに埋め込むと、電子透かし情報の抽出時に隣接するビット間の干渉が発生するので好ましくない。これに対し、本実施形態では、上記切り出しのための手段として、FFTのような周波数分割手段ではなく、時間・周波数的な分割を行うウェーブレット変換を使用している。従って、抽出時のアーティファクトを発生させることなく、埋め込み先帯域キャリア信号を時間軸上においてオーバラップしないブロックに区切って、埋め込み先帯域キャリア信号の中から変調信号を作用させる部分を切り出す処理を行うことができ、抽出時における隣接ビットの干渉を回避することができる。
(3)本実施形態において埋め込み装置100では、2個の埋め込み先帯域キャリア信号を用い、これらの振幅シーケンスの複素ウェーブレット係数の絶対値|x00(ω1)|および|x00(ω0)|に対し、電子透かし情報に対応した波形を持った2相の変調信号であって、互いに逆相関係にある2相の変調信号により振幅変調を施すことより、電子透かし情報のキャリア信号への埋め込みを行っている。従って、抽出装置200側では、変調に用いられた変調信号を大きな振幅で抽出することができ、安定して電子透かし情報をキャリア信号から抽出することができる。
<第2実施形態>
本実施形態は、ブラインド透かし方式の埋め込み伝送技術に属する上記第1実施形態をノンブラインド透かし方式に変更したものである。図示は省略したが、本実施形態における電子透かし情報の埋め込み装置は、上記第1実施形態における埋め込み装置100において例えば埋め込み部120−1を省略し、埋め込み部120−0のみを帯域分割部110および帯域合成部130間に介挿した構成となっている。
本実施形態は、ブラインド透かし方式の埋め込み伝送技術に属する上記第1実施形態をノンブラインド透かし方式に変更したものである。図示は省略したが、本実施形態における電子透かし情報の埋め込み装置は、上記第1実施形態における埋め込み装置100において例えば埋め込み部120−1を省略し、埋め込み部120−0のみを帯域分割部110および帯域合成部130間に介挿した構成となっている。
図6は本実施形態における電子透かし情報の抽出装置200Aの構成を示すブロック図である。この抽出装置200Aは、上記第1実施形態における抽出装置200に対し、帯域分割部210’を追加し、同抽出装置200の絶対値検出部221−1、帯域分割部223−1および絶対値検出部224−1を絶対値検出部221−0’、帯域分割部223−0’および絶対値検出部224−0’に置き換えた構成となっている。なお、図7では、オフセット除去部252a以降の部分の図示が省略されている。
本実施形態において、電子透かし情報の埋め込まれたオーディオサンプル列xp’(n)が帯域分割部210に供給されるのに同期し、電子透かし情報の埋め込まれていない元のオーディオサンプル列xp(n)が帯域分割部210’に供給される。帯域分割部210’は、元のオーディオサンプル列xp(n)の帯域分割を行い、帯域分割部210が出力する複素スペクトラム係数X’(ω0)と同じ帯域の複素スペクトラム係数X(ω0)を出力する。そして、絶対値検出部221−0’、帯域分割部223−0’および絶対値検出部224−0’からなる部分は、絶対値検出部221−0、帯域分割部223−0および絶対値検出部224−0からなる部分が複素スペクトラム係数X’(ω0)に対して行う処理と全く同じ処理を複素スペクトラム係数X’(ω0)に対して行う。
この結果、既に第1実施形態において述べたように、絶対値検出部224−0からは、シンボルに応じた変調信号Am0による振幅変調が施された複素ウェーブレット係数の絶対値(1+Am0)|x00(ω0)|が出力される。一方、絶対値検出部224−0’からは、変調信号Am0による振幅変調が施されていない複素ウェーブレット係数の絶対値|x00(ω0)|が出力される。そして、除算器251では、絶対値検出部224−0の出力データ(1+Am0)|x00(ω0)|が絶対値検出部224−0’の出力データ|x00(ω0)|によって除算され、除算結果(1+Am0)が変調波形データとして出力される。この変調波形データからシンボルを抽出する処理の内容は上記第1実施形態と同様である。
<第3実施形態>
上記第1実施形態では、オーディオサンプル列xp(n)の所定の帯域の複素スペクトラム係数の振幅シーケンスの概形を示す複素ウェーブレット係数に対し、シンボルに応じた変調信号を用いた振幅変調を施すことによりシンボルの埋め込みを行った。これに対し、本実施形態では、オーディオサンプル列xp(n)の所定の帯域の複素スペクトラム係数の振幅シーケンスの概形を示す複素ウェーブレット係数に対し、シンボルに応じた変調信号を用いた位相変調を施すことによりシンボルの埋め込みを行う。さらに詳述すると、本実施形態では、オーディオサンプル列xp(n)の隣接する2つの帯域の各複素スペクトラム係数の振幅シーケンスの各複素ウェーブレット係数が、電子透かし情報に応じた位相差を持つように位相変調を行う。
上記第1実施形態では、オーディオサンプル列xp(n)の所定の帯域の複素スペクトラム係数の振幅シーケンスの概形を示す複素ウェーブレット係数に対し、シンボルに応じた変調信号を用いた振幅変調を施すことによりシンボルの埋め込みを行った。これに対し、本実施形態では、オーディオサンプル列xp(n)の所定の帯域の複素スペクトラム係数の振幅シーケンスの概形を示す複素ウェーブレット係数に対し、シンボルに応じた変調信号を用いた位相変調を施すことによりシンボルの埋め込みを行う。さらに詳述すると、本実施形態では、オーディオサンプル列xp(n)の隣接する2つの帯域の各複素スペクトラム係数の振幅シーケンスの各複素ウェーブレット係数が、電子透かし情報に応じた位相差を持つように位相変調を行う。
図7は本実施形態による電子透かし情報の埋め込み装置100Bの構成を示すブロック図である。この埋め込み装置100Bにおいて、埋め込み部120−0Bおよび120−1Bは、上記第1実施形態の埋め込み装置100の埋め込み部120−0および120−1の一部を変更した構成となっている。また、埋め込み装置100Bでは、上記第1実施形態における変調信号生成部140が変調信号生成部140Bに置き換えられている。他の部分の構成は、基本的に上記第1実施形態の埋め込み装置100と同様である。
埋め込み部120−0Bにおいて、偏角検出部125は、上記第1実施形態と同様、帯域分割部123から出力される各ウェーブレット係数の実数部および虚数部に基づき、各ウェーブレット係数x1、x00およびx01の偏角Arg(x1)、Arg(x00)およびArg(x01)を算出する。加算器125aは、これらの偏角のうち例えば偏角Arg(x00)に変調信号生成部140Bから与えられる変調信号Δp0を加算する。
位相再結合部128aは、絶対値検出部124から得られるウェーブレット係数の絶対値|x00|と加算器125aから得られる位相変調済みの偏角Arg(x00)+Δp0を再結合させて、複素ウェーブレット係数x00に戻す。また、位相再結合部128aは、絶対値検出部124から得られるウェーブレット係数の絶対値|x1|を所定の量子化ステップで量子化し、この量子化後の絶対値に偏角検出部125から得られる偏角Arg(x1)を再結合させて、複素ウェーブレット係数x1に戻す。また、位相再結合部128aは、絶対値検出部124から得られるウェーブレット係数の絶対値|x01|を所定の量子化ステップで量子化し、この量子化後の絶対値に偏角検出部125から得られる偏角Arg(x01)を再結合させて、複素ウェーブレット係数x01に戻す。このようにして得られる3種類の複素ウェーブレット係数x1、x00およびx01が帯域合成部129(図1参照)の処理対象となる。
埋め込み部120−1Bは、埋め込み部120−0Bと同様な処理を帯域分割部110(図1参照)から得られる複素スペクトラム係数X(ω1)に施す。ただし、埋め込み部120−1Bの加算器125aに相当するものには、埋め込み部120−0Bの加算器125aに与えられる変調信号Δp0と協働してシンボルに応じた位相差を表現する変調信号Δp1が変調信号生成部140Bから供給される。
さらに詳述すると、変調信号生成部140Bは、上記第1実施形態の変調信号m1およびm0と同様な相補対称な三角波の変調信号Δp1およびΔp0を出力するが、1周期分(1ビット分)の変調信号Δp1−Δp0が出力される間、変調信号の差分Δp1−Δp0は、−Rから+Rまでの変化するようになっている(ただし、Rはπ以下の値)。その変化の態様は、電子透かし情報を示すシンボルがビット“0”であるかビット“1”であるかにより決定される。
図8は、本実施形態における電子透かし情報の抽出装置200Bの構成を示すブロック図である。この抽出装置200Bは、上記第1実施形態における抽出装置200における帯域分割部223−1および223−0の後段の絶対値検出部224−1および224−0と除算器251を、偏角検出部225−1および225−0と減算器253に置き換えた構成となっている。
この構成において、絶対値検出部221−0、帯域分割部223−0および偏角検出部225−0からなる部分は、埋め込み装置100Bの埋め込み部120−0B内の絶対値検出部121、帯域分割部123および偏角検出部125からなる部分と同様な役割を果たす部分である。すなわち、この部分は、帯域分割部210から得られる複素スペクトラム係数X(ω0)の絶対値|X(ω0)|を求め、この絶対値|X(ω0)|の列に複素型離散ウェーブレット変換を施し、この結果得られる複素ウェーブレット係数の1つの偏角、すなわち、埋め込み装置100Bにおいて変調信号Δp0による位相変調が施された偏角Arg(x00(ω0))+Δp0を算出する。同様に、絶対値検出部221−1、帯域分割部223−1および偏角検出部225−1からなる部分は、埋め込み装置100Bの埋め込み部120−1B内の絶対値検出部121、帯域分割部123および偏角検出部125からなる部分と同様な役割を果たす部分である。すなわち、この部分は、埋め込み装置100Bにおいて変調信号Δp1による位相変調が施された複素ウェーブレット係数の偏角Arg(x00(ω1))+Δp1を、帯域分割部210が出力する複素スペクトラム係数X(ω1)から算出する。
そして、減算器253は、この両偏角の差分{Arg(x00(ω1))+Δp1}−{Arg(x00(ω0))+Δp0}を算出する。ここで、偏角Arg(x00(ω1))と偏角Arg(x00(ω0))は隣接する帯域のものであるので両者は近似していると考えられる。従って、減算器253から得られる減算結果は、Δp1−Δp0に近い値となる。そして、正規化部252b以降の部分により、この減算結果Δp1−Δp0から電子透かし情報を示すシンボルを抽出する処理が行われる。この処理の内容は、上記第1実施形態と基本的に同様なので説明を省略する。
<第4実施形態>
本実施形態は、ブラインド透かし方式の埋め込み伝送技術に属する上記第3実施形態をノンブラインド透かし方式に変更したものである。図示は省略したが、本実施形態における電子透かし情報の埋め込み装置は、上記第3実施形態における埋め込み装置100Bにおいて例えば埋め込み部120−1Bを省略し、埋め込み部120−0Bのみを帯域分割部110および帯域合成部130間に介挿した構成となっている。また、埋め込み部120−0Bが位相変調に用いる変調信号Δp0は、電子透かし情報を示すシンボルに応じた位相で−Rから+R(Rはπ以下の値)まで変化する三角波となっている。
本実施形態は、ブラインド透かし方式の埋め込み伝送技術に属する上記第3実施形態をノンブラインド透かし方式に変更したものである。図示は省略したが、本実施形態における電子透かし情報の埋め込み装置は、上記第3実施形態における埋め込み装置100Bにおいて例えば埋め込み部120−1Bを省略し、埋め込み部120−0Bのみを帯域分割部110および帯域合成部130間に介挿した構成となっている。また、埋め込み部120−0Bが位相変調に用いる変調信号Δp0は、電子透かし情報を示すシンボルに応じた位相で−Rから+R(Rはπ以下の値)まで変化する三角波となっている。
図9は本実施形態における電子透かし情報の抽出装置200Cの構成を示すブロック図である。この抽出装置200Cは、上記第3実施形態における抽出装置200Bに対し、帯域分割部210’を追加し、同抽出装置200Bの絶対値検出部221−1、帯域分割部223−1および偏角検出部225−1を絶対値検出部221−0’、帯域分割部223−0’および偏角検出部225−0’に置き換えた構成となっている。なお、図10では、オフセット除去部252a以降の部分の図示が省略されている。
上記第2実施形態と同様、本実施形態においても、電子透かし情報の埋め込まれたオーディオサンプル列xp’(n)が帯域分割部210に供給されるのに同期し、電子透かし情報の埋め込まれていない元のオーディオサンプル列xp(n)が帯域分割部210’に供給される。帯域分割部210’は、元のオーディオサンプル列xp(n)の帯域分割を行い、帯域分割部210が出力する複素スペクトラム係数X’(ω0)と同じ帯域の複素スペクトラム係数X(ω0)を出力する。そして、絶対値検出部221−0’、帯域分割部223−0’および偏角検出部225−0’からなる部分は、絶対値検出部221−0、帯域分割部223−0および偏角検出部225−0からなる部分が複素スペクトラム係数X’(ω0)に対して行う処理と全く同じ処理を複素スペクトラム係数X(ω0)に対して行う。
この結果、既に第3実施形態において述べたように、偏角検出部225−0からは、電子透かし情報に応じた変調信号Δp0による位相変調が施された複素ウェーブレット係数の偏角Arg(x00(ω0))+Δp0が出力される。一方、偏角検出部225−0’からは、変調信号Δp0による位相変調が施されていない複素ウェーブレット係数の偏角Arg(x00(ω0))が出力される。そして、減算器253では、偏角検出部225−0の出力データArg(x00(ω0))+Δp0から偏角検出部225−0’の出力データArg(x00(ω0))が減算され、減算結果Δp0が変調波形データとして出力される。この変調波形データから電子透かし情報を示すシンボルを抽出する処理の内容は上記第1実施形態と同様である。
<他の実施形態>
以上、この発明の第1〜第4実施形態を説明したが、この発明には、他にも各種の実施形態が考えられる。例えば次の通りである。
以上、この発明の第1〜第4実施形態を説明したが、この発明には、他にも各種の実施形態が考えられる。例えば次の通りである。
(1)ブラインド透かし方式に対応した上記第1実施形態、第3実施形態では、帯域分割により得られた複数の帯域キャリア信号のうち最も低周波側の隣接する2個の帯域キャリア信号を埋め込み先帯域キャリア信号としたが、2個の埋め込み先帯域キャリア信号は、必ずしも隣接する帯域のものでなくてもよい。
(2)上記各実施形態では、1周期の前半と後半とで山から谷へまたは谷から山へ変化する三角波を変調信号として用いたが、変調信号の波形は任意である。例えば図10に例示するように、電子透かし情報のシンボルbがビット“0”であるときは変調信号m1(m0)の前半が山(谷)、後半が平坦な零レベルとなり、ビット“1”であるときは変調信号m1(m0)の前半が平坦な零レベル、後半が山(谷)となるような変調信号m1およびm0を発生してもよい。
(3)上記各実施形態では、帯域分割部123が発生する複数種類の複素ウェーブレット係数のうち埋め込み先帯域キャリア信号の振幅シーケンスの概形を最もよく表わす1種類の複素ウェーブレット係数に電子透かし情報に応じた変調を施した。しかし、複数種類の複素ウェーブレット係数に電子透かし情報に応じた変調を施すようにしてもよい。この場合、複素ウェーブレット係数のレベルが異なると複素ウェーブレット係数の1ブロック当たりの個数が変わるので、変調信号の1周期分のサンプル数は変調対象である複素ウェーブレット係数の1ブロック当たりの個数に合わせる必要がある。
(4)上記各実施形態において、1個のシンボルは、2値を表すビットであったが、1つのシンボルを表す変調波形を3種類以上用意し、1シンボル当たり3値以上を表すシンボルを埋め込み先帯域キャリア信号に埋め込んでもよい。
100,100B……埋め込み装置、200,200A,200B,200C……抽出装置、110,210,210’……帯域分割部、120−0,120−1,120−0B,120−1B……埋め込み部、121,124,221−0,221−1,224−0,224−1,221−0’,224−0’……絶対値検出部、122,125,225−0,225−1,225−0’……偏角検出部、128a,128b……位相再結合部、123,223−0,223−1,223−0’……帯域分割部、129……帯域合成部、140,140B……変調信号生成部、126……乗算器、127,125a……加算器、251……除算器、252b……正規化部、260……電子透かし情報抽出部。
Claims (11)
- キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割手段と、
前記帯域分割手段が出力した複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報の埋め込み先である埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換手段と、
前記ウェーブレット変換手段が生成するウェーブレット係数に対して、電子透かし情報を示すシンボル列に対応した変調信号による変調を施す変調手段と、
前記変調手段により前記シンボル列に対応した変調信号による変調が施されたウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する逆ウェーブレット変換手段と、
前記電子透かし情報の埋め込まれた帯域キャリア信号と前記帯域分割手段が出力する前記埋め込み先帯域キャリア信号以外の帯域キャリア信号とを合成し、電子透かし情報の埋め込まれたキャリア信号を出力する帯域合成手段と
を具備することを特徴とする電子透かし情報の埋め込み装置。 - 前記ウェーブレット変換手段は、前記帯域分割手段が出力した複数の帯域キャリア信号のうちの2つの帯域キャリア信号を埋め込み先帯域キャリア信号とし、この2つの埋め込み先帯域キャリア信号の振幅シーケンスのウェーブレット係数を生成し、
前記変調手段は、前記ウェーブレット変換手段が生成する2つの埋め込み先帯域キャリア信号から得られる各ウェーブレット係数に対し、共通の電子透かし情報のシンボル列に対応した2相の変調信号であって、互いに逆相関係にある2相の変調信号による変調を施すことを特徴とする請求項1に記載の電子透かし情報の埋め込み装置。 - 前記ウェーブレット変換手段は、前記埋め込み先帯域キャリア信号の振幅シーケンスを一定の時間長のブロックに区切り、ブロック単位でウェーブレット変換を行い、
前記ウェーブレット逆変換手段は、ブロック単位で、前記ウェーブレット逆変換を行うことを特徴とする請求項1または2に記載の電子透かし情報の埋め込み装置。 - 前記帯域分割手段は、前記キャリア信号を時間軸上においてオーバラップしたブロックに区切り、ブロック毎に窓関数を乗算して、前記複数の帯域キャリア信号への分割を行うことを特徴とする請求項1〜3のいずれか1の請求項に記載の電子透かし情報の埋め込み装置。
- 前記ウェーブレット変換手段は、前記埋め込み先帯域キャリア信号の振幅シーケンスに複素ウェーブレット変換を施して、複素ウェーブレット係数を生成し、
前記変調手段は、前記複素ウェーブレット係数の絶対値に前記電子透かし情報を示すシンボル列に対応した変調信号による振幅変調を施すことを特徴とする請求項1〜4のいずれか1の請求項に記載の電子透かし情報の埋め込み装置。 - 前記ウェーブレット変換手段は、前記埋め込み先帯域キャリア信号の振幅シーケンスに複素ウェーブレット変換を施して、複素ウェーブレット係数を生成し、
前記変調手段は、前記複素ウェーブレット係数の偏角に前記電子透かし情報を示すシンボル列に対応した変調信号による位相変調を施すことを特徴とする請求項1〜5のいずれか1の請求項に記載の電子透かし情報の埋め込み装置。 - キャリア信号を帯域分割し、互いに異なる複数の帯域に属する複数の帯域キャリア信号を出力する帯域分割手段と、
前記帯域分割手段が出力した複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報を示すシンボル列の埋め込み先である埋め込み先帯域キャリア信号とし、前記埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換手段と、
前記ウェーブレット変換手段が生成するウェーブレット係数の列を電子透かし情報を示すシンボル列の1シンボルに対応した長さの区間に区切り、区間毎に、電子透かし情報を示す各種のシンボルに対応した変調信号との相関を判定し、この相関の判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列を判定する電子透かし情報抽出手段と
を具備することを特徴とする電子透かし情報の抽出装置。 - キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割過程と、
前記帯域分割過程において出力される複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報の埋め込み先である埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換過程と、
前記ウェーブレット変換過程において生成されるウェーブレット係数に対して、電子透かし情報を示すシンボル列に対応した変調信号による変調を施す変調過程と、
前記変調過程において前記シンボル列に対応した変調信号による変調が施されたウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する逆ウェーブレット変換過程と、
前記電子透かし情報の埋め込まれた帯域キャリア信号と前記帯域分割過程において出力される前記埋め込み先帯域キャリア信号以外の帯域キャリア信号とを合成し、電子透かし情報の埋め込まれたキャリア信号を出力する帯域合成過程と
を具備することを特徴とする電子透かし情報の埋め込み方法。 - キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割過程と、
前記帯域分割過程において出力される複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報を示すシンボル列の埋め込み先である埋め込み先帯域キャリア信号とし、前記埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換過程と、
前記ウェーブレット変換過程において生成されるウェーブレット係数の列を電子透かし情報を示すシンボル列の1シンボルに対応した長さの区間に区切り、区間毎に、電子透かし情報を示す各種のシンボルに対応した変調信号との相関を判定し、この相関の判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列を判定する電子透かし情報抽出過程と
を具備することを特徴とする電子透かし情報の抽出方法。 - コンピュータに、
キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割過程と、
前記帯域分割過程において出力される複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報の埋め込み先である埋め込み先帯域キャリア信号とし、この埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換過程と、
前記ウェーブレット変換過程において生成されるウェーブレット係数に対して、電子透かし情報を示すシンボル列に対応した変調信号による変調を施す変調過程と、
前記変調過程において前記シンボル列に対応した変調信号による変調が施されたウェーブレット係数に逆ウェーブレット変換を施し、電子透かし情報の埋め込まれた帯域キャリア信号を生成する逆ウェーブレット変換過程と、
前記電子透かし情報の埋め込まれた帯域キャリア信号と前記帯域分割過程において出力される前記埋め込み先帯域キャリア信号以外の帯域キャリア信号とを合成し、電子透かし情報の埋め込まれたキャリア信号を出力する帯域合成過程と
を実行させることを特徴とするコンピュータプログラム。 - コンピュータに、
キャリア信号を帯域分割し、互いに異なる帯域に属する複数の帯域キャリア信号を出力する帯域分割過程と、
前記帯域分割過程において出力される複数の帯域キャリア信号の少なくとも1つの帯域キャリア信号を電子透かし情報を示すシンボル列の埋め込み先である埋め込み先帯域キャリア信号とし、前記埋め込み先帯域キャリア信号の振幅シーケンスにウェーブレット変換を施して、ウェーブレット係数を生成するウェーブレット変換過程と、
前記ウェーブレット変換過程において生成されるウェーブレット係数の列を電子透かし情報を示すシンボル列の1シンボルに対応した長さの区間に区切り、区間毎に、電子透かし情報を示す各種のシンボルに対応した変調信号との相関を判定し、この相関の判定結果に基づいてウェーブレット係数列の各区間の変調に用いられた変調信号に対応したシンボル列を判定する電子透かし情報抽出過程と
を実行させることを特徴とするコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008167702A JP2010008699A (ja) | 2008-06-26 | 2008-06-26 | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008167702A JP2010008699A (ja) | 2008-06-26 | 2008-06-26 | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010008699A true JP2010008699A (ja) | 2010-01-14 |
Family
ID=41589291
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008167702A Withdrawn JP2010008699A (ja) | 2008-06-26 | 2008-06-26 | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010008699A (ja) |
-
2008
- 2008-06-26 JP JP2008167702A patent/JP2010008699A/ja not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Krawczyk et al. | STFT phase reconstruction in voiced speech for an improved single-channel speech enhancement | |
RU2598326C2 (ru) | Устройство и метод для обработки аудио сигнала, содержащего переходный сигнал | |
US6526385B1 (en) | System for embedding additional information in audio data | |
US20020061118A1 (en) | Electronic watermarking method and system | |
JP5908472B2 (ja) | 信号を解析し、瞬時周波数および短時間フーリエ変換を提供するための方法、ならびに信号を解析するためのデバイス | |
EP1514268B1 (en) | Re-embedding of watermarks in multimedia signals | |
US20060253209A1 (en) | Sound processing with frequency transposition | |
JP2009104015A (ja) | 帯域拡張再生装置 | |
EP0657873B1 (en) | Speech signal bandwidth compression and expansion apparatus, and bandwidth compressing speech signal transmission method, and reproducing method | |
JP6017591B2 (ja) | 音声合成装置、電子透かし情報検出装置、音声合成方法、電子透かし情報検出方法、音声合成プログラム及び電子透かし情報検出プログラム | |
JP4254479B2 (ja) | オーディオ帯域拡張再生装置 | |
JP5338170B2 (ja) | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム | |
US7266466B2 (en) | Watermark time scale searching | |
US7546467B2 (en) | Time domain watermarking of multimedia signals | |
JP5051051B2 (ja) | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム | |
US20050147248A1 (en) | Window shaping functions for watermarking of multimedia signals | |
JP2010008699A (ja) | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム | |
JP2010044147A (ja) | 電子透かし情報の埋め込みおよび抽出を行う装置、方法およびプログラム | |
Liu et al. | A subband excitation substitute based scheme for narrowband speech watermarking | |
Salcic | Audio watermarking | |
JP4290014B2 (ja) | ウォーターマークされた情報信号のデコーディング | |
JP5218020B2 (ja) | 電子透かし情報の埋め込みおよび抽出を行うための装置およびプログラム | |
JP4984178B2 (ja) | 高域信号補間装置及び高域信号補間方法 | |
US20150134342A1 (en) | Enhancement of Narrowband Audio Signals Using Single Sideband AM Modulation | |
JP2004200972A (ja) | 信号のスクランブル・スクランブル解除方法及びシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20110906 |