CN101512638B - 对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码/解码的方法及设备 - Google Patents
对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码/解码的方法及设备 Download PDFInfo
- Publication number
- CN101512638B CN101512638B CN200780032899.3A CN200780032899A CN101512638B CN 101512638 B CN101512638 B CN 101512638B CN 200780032899 A CN200780032899 A CN 200780032899A CN 101512638 B CN101512638 B CN 101512638B
- Authority
- CN
- China
- Prior art keywords
- reference sequences
- watermark
- payload data
- symbol
- relevant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 23
- 238000007792 addition Methods 0.000 claims description 63
- 230000003595 spectral effect Effects 0.000 claims description 17
- 230000002087 whitening effect Effects 0.000 claims description 17
- 238000001228 spectrum Methods 0.000 claims description 13
- 238000007493 shaping process Methods 0.000 claims description 10
- 230000005236 sound signal Effects 0.000 abstract description 6
- 238000005516 engineering process Methods 0.000 description 9
- 101150012367 PLD1 gene Proteins 0.000 description 4
- 101100248440 Danio rerio ric8b gene Proteins 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 101150067075 PLD2 gene Proteins 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
- H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/018—Audio watermarking, i.e. embedding inaudible data in the audio signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/835—Generation of protective data, e.g. certificates
- H04N21/8358—Generation of protective data, e.g. certificates involving watermark
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Computer Security & Cryptography (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
水印信息(表示为WM)由若干符号组成，这些符号通过参考序列调制被连续地嵌入于音频或视频信号中。在解码器侧，通过将所接收的信号与相应的参考序列进行相关，来恢复WM。这些符号构成水印数据帧。本发明针对每个有效载荷符号中的比特值“0”和“1”以及水印数据帧中的每个有效载荷符号使用不同的参考序列，而不使用同步符号。在WM解码器中执行对数搜索以减少所要执行的相关计算的次数。本发明使得对关键声音信号的水印添加更为健壮。
Description
技术领域
本发明涉及一种对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码的方法及设备，并且涉及一种对承载着添加水印后的音频或视频信号的有效载荷数据的符号进行解码的方法及设备。
背景技术
水印信息(表示为WM)由若干符号组成，这些符号被连续地嵌入于承载内容，如(编码后的)音频或视频信号中，以例如标识这些信号的作者。例如，在将扩频(spread spectrum)用作基本技术的情况下，通过将所接收的信号与已知的m-序列进行相关，在解码器侧恢复WM。大多数WM技术发送用于纠错的冗余比特。
在许多音频水印添加系统中，以帧的形式来组织有效载荷数据。帧以一个或多个同步符号开始，后接一个或多个有效载荷符号。同步符号信号仅仅是有效载荷比特的开始，而有效载荷符号承载包括用于纠错的比特在内的实际有效载荷比特。图3的上半部分示出了3个连续帧FRn-1、FRn和FRn+1。帧包括：用于检测解码器侧帧起始位置的多个同步块SYNBL(至少一个同步块)、以及承载实际信息的多个有效载荷块PLBL(至少一个有效的有效载荷块或符号)。根据具体技术，将帧以同步或异步方式插入音频流中。有效载荷块的插入是连续进行的，即，在SYNBL块之后有效载荷块的插入获得同步。每个有效载荷块保存一个或多个比特的信息。
许多音频水印添加技术(如，扩频或EP05090261中公开的相位成形(phase shaping))，将某种参考序列嵌入承载信号中。如果使用二进制相位键控(binary phase keying)，则序列的极性对比特值进行编码。对于码移键控(CSK)，针对所发送的比特值的不同值使用不同的序列。图3的下半部分示出了这样的帧：该帧以3个同步符号S1、S2和S3开始，后接8个有效载荷符号Pld1至Pld8。在解码器处或在接收机侧，例如由于受到攻击，无法对所接收的错误水印符号进行解码。接着，对有效载荷数据进行纠错和解码。
发明内容
然而，同步符号SYNBL对于解码来说是必须的。如果在接收机侧不能对所有同步块进行解码，那么即使可以对所有有效载荷符号进行(纠错和)解码，整个帧也将丢失。
本发明要解决的问题是，提供一种水印添加，其中即使正确接收到的同步符号不可用，也可以将有效载荷符号解码。通过如下所述的根据本发明的第一、第五和第十一方面的方法解决了该问题。在如下所述的根据本发明的第三、第八和第十二方面中公开了使用这些方法的设备。
本发明允许发送和对没有同步符号或比特的帧进行解码，虽然额外需要的处理能力很小，但这却出乎意料地使得WM检测更为健壮。在现有技术水印添加处理中使用两个参考序列来表示比特值“0”和“1”。本发明针对帧中的每个有效载荷符号使用不同的参考序列，针对每个有效载荷符号中的比特值“0”和“1”使用不同的参考序列，而不使用同步符号，并且在WM解码器中执行对数搜索以减少所要执行的相关计算的次数。
本发明使得对关键声音信号的水印添加更为健壮，这可以区分接收到WM与根本没接收到WM。
根据本发明的第一方面，提供了一种对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码的方法，所述添加水印使用参考序列进行调制，其中，所述有效载荷数据符号能够通过使用相应的参考序列进行解调在解码侧予以恢复，并且，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，其特征在于以下步骤：使用所述参考序列中的N*2M个不同参考序列对当前水印数据帧的所述有效载荷数据进行调制，并在未添加同步符号的情况下组合所述当前水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数；对所述当前水印数据帧进行心理声学成形，并且将其嵌入所述音频或视频信号中以供输出；对于下一个水印数据帧继续执行相应的步骤。
根据本发明的第二方面，在根据本发明第一方面的方法中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
根据本发明的第三方面，提供了一种用于对承载对音频或视频信号添加水印的有效载荷数据的符号进行编码的设备，所述添加水印利用参考序列进行调制，其中，所述有效载荷数据符号能够通过在解码侧使用相应的参考序列进行解调予以恢复，并且，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，所述编码设备包括：适于使用所述参考序列中的N*2M个不同参考序列对当前水印数据帧的所述有效载荷数据进行调制，并在未添加同步符号的情况下组合所述当前水印数据帧的所述有效载荷数据符号的装置，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数；适于对所述当前水印数据帧进行心理声学成形，并将其嵌入所述音频或视频信号中以供输出的装置，据此，此后相应装置继续对下一水印数据帧进行处理。
根据本发明的第四方面，在根据本发明第三方面的设备中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
根据本发明的第五方面，提供了一种对承载添加水印后的音频或视频信号的有效载荷数据的符号进行解码的方法，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，并且其中，水印数据帧的所述有效载荷数据是使用N*2M个不同参考序列进行调制的，并且在未添加同步符号的情况下组合所述水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数，并且其中，对所述水印数据帧进行心理声学成形，并将其嵌入所述音频或视频信号中，所述解码方法包括以下步骤：将所述添加水印后的音频或视频信号进行谱白化，所述谱白化使所述心理声学成形逆转；通过以下步骤对当前水印数据帧的所述调制后的有效载荷数据进行解调，以得到所述有效载荷数据：a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，并与步骤b)中的所述第二半集的相应的求和信号执行相关；d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
根据本发明的第六方面，在根据本发明第五方面的方法中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
根据本发明的第七方面，在根据本发明第五方面的方法中，有效载荷符号数据包括纠错数据，并且对所述解调后的有效载荷数据进行纠错。
根据本发明的第八方面，提供了一种用于对承载添加水印后的音频或视频信号的有效载荷数据的符号进行解码的设备，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，并且其中，水印数据帧的所述有效载荷数据是使用N*2M个不同参考序列进行调制的，并且在未添加同步符号的情况下组合所述水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数，并且其中，对所述水印数据帧进行心理声学成形，并将其嵌入所述音频或视频信号中，所述解码设备包括：适于将所述添加水印后的音频或视频信号进行谱白化的装置，所述谱白化使所述心理声学成形逆转；适于通过以下步骤对当前水印数据帧的所述调制后的有效载荷数据进行解调，以得到所述有效载荷数据的装置：a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
根据本发明的第九方面，在根据本发明第八方面的设备中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
根据本发明的第十方面，在根据本发明第八方面的设备中，有效载荷符号数据包括纠错数据，并且对所述解调后的有效载荷数据进行纠错。
根据本发明的第十一方面，提供了一种对承载添加水印后的音频或视频信号的有效载荷数据的符号进行解码的方法，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，并且其中，水印数据帧的所述有效载荷数据是使用N*2M个不同参考序列进行调制的，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“1”的整数，并且其中，所述水印数据帧被嵌入所述音频或视频信号中，所述解码方法包括以下步骤：通过以下步骤对当前水印数据帧的所述调制后的有效载荷数据进行解调，以得到所述有效载荷数据：a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
根据本发明的第十二方面，提供了一种用于对承载添加水印后的音频或视频信号的有效载荷数据的符号进行解码的设备，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧，并为每个有效载荷数据符号分配M个水印数据比特，并且其中，水印数据帧的所述有效载荷数据是使用N*2M个不同参考序列进行调制的，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“1”的整数，并且其中，所述水印数据帧被嵌入所述音频或视频信号中，所述解码设备包括：适于通过以下步骤对当前水印数据帧的所述调制后的有效载荷数据进行解调，以得到所述有效载荷数据的装置：a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
附图说明
参考附图描述了本发明的示例实施例，附图中：
图1是本发明的水印信号编码器；
图2是本发明的水印信号解码器；
图3是现有帧构成；
图4是根据本发明的水印帧构成。
具体实施方式
如上所述，使用图3的现有WM帧结构的缺点是，高度依赖于同步符号的检测。例如，在上述帧中的三个同步符号不可检测的情况下，由于不知道哪个恢复值与哪个符号相对应，所以即使可以恢复所有8个有效载荷符号，还是会丢失这8个有效载荷符号。
如图4的帧结构所示，本发明根本不使用任何同步符号，在图4的帧结构中，在每个帧或每个由8个有效载荷符号Pld1至Pld8构成的组之后是下一帧或下一个由8个有效载荷符号构成的组。
帧中的每个符号使用唯一的参考序列来对其有效载荷进行编码。例如，如果每个符号发送一比特，则符号1或有效载荷Pld1使用序列0来对比特值“0”进行编码，并且使用序列1对比特值“1”进行编码，符号2或有效载荷Pld2使用序列2对比特值“0”进行编码，并且使用序列3对比特值“1”进行编码，...，符号8或有效载荷Pld8使用序列14对比特值“0”进行编码，并且使用序列15对比特值“1”进行编码。此后，在后续的帧中，符号1/有效载荷Pld1再次使用序列0对比特值“0”进行编码，并且再次使用序列1对比特值“1”进行编码，等等。
这种处理比使用同步比特要健壮得多，这是因为：可以通过纠错来纠正有效载荷符号中的误差，使得例如即使错过前几个符号还是可以恢复有效载荷，而在使用同步符号的情况下则并非如此。
如果N是每个帧的符号数，M是在每个符号内发送的比特数，则本发明的处理技术需要N*2M个不同的参考序列，每个参考序列具有以例如16比特表示的长度。然而这还导致要在检测侧执行N*2M次相关。然而，因为参考序列是正交的或几乎正交的，所以可以使用以下处理技术来极大地减少对每个符号进行解码所需要的相关的次数：
1)将N*2M个参考序列分成第一半和第二半。
2)将第一半的所有参考序列相加，并且将第二半的所有参考序列相加(这分别表示时域中N*M个模拟信号的相加。输出是两个数字时域求和信号，每个求和信号具有例如16比特的相应长度)。
3)将音频信号的相应部分与第一半的求和信号进行相关，并与第二半的求和信号进行相关。
4)如果第一相关高于或强于第二相关，则将参考序列的第一半分成第一半和第二半，将所述第一半的参考序列相加并且将所述第二半的参考序列相加，继续执行步骤3，否则，将参考序列的第二半分成第一半和第二半，将所述第一半的参考序列相加并且将所述第二半的参考序列相加，继续执行步骤3。
5)如果上述处理技术中的求和信号仅包含一个序列，或者如果当前一半仅包含单个参考序列，则针对当前符号找到了正确的参考序列并退出循环。
在上述示例中，需要8*21＝16个参考序列。这意味着，还需要针对每个有效载荷符号计算16次相关。
使用上述处理技术将其减少至：
-与8个序列的和进行2次相关；
-与4个序列的和进行2次相关；
-与2个序列的和进行2次相关；
-与1个序列进行2次相关。
总计，这导致8次相关，从而将必要计算能力减少了一半。
有利地，如果使用具有同步符号的上述已知帧结构，并且每符号发送一个以上比特，即，每符号要测试两个以上参考序列，则可以使用相同的对数查找处理。
在图1的水印添加编码器中，将要用于对音频信号AS添加水印的有效载荷数据PLD输入至可选的纠错和/或检测编码步骤或阶段ECDE，所述ECDE添加冗余比特，冗余比特有助于恢复在解码器中错误检测的符号。阶段ECDE的输出经过调制和谱扩展步骤或阶段MS到达可选的心理声学成形(psycho-acoustical shaping)PAS，其中，如上所述使用例如16个不同的参考序列(即，每有效载荷比特2个参考序列)来调制一个WM帧的8个有效载荷符号，所述PAS对WS信号进行成形使得WM不可闻或不可见。在未添加同步符号的情况下，步骤或阶段PAS接收音频流信号AS并且逐符号地处理WM帧。在完成WM帧的处理之后，输出嵌入音频信号中的相应地添加水印后的帧WAS。此后，继续执行对当前帧之后的帧FRn+1的处理。
在图2的水印添加解码器中，音频信号的添加水印后的帧经过可选的谱白化步骤或阶段SPW(所述SPW使阶段PAS中实现的成形逆转)以及解扩和解调步骤或阶段DSPDM，所述DSPDM使用上述处理步骤1)至5)从信号WAS中获取嵌入的数据。此后，可以将WM符号传送到纠错和/或检测解码步骤或阶段ECDD，所述ECDD输出有效的有效载荷数据PLD。
本发明不限于使用扩频技术。例如，作为替代，可以使用基于载波的技术或回波隐匿(echo echohiding)技术来实现水印添加编码和解码。
Claims (12)
1.一种对承载用于对音频或视频信号(AS)添加水印的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行编码的方法，所述添加水印使用参考序列进行调制，其中，所述有效载荷数据符号能够通过使用相应的参考序列进行解调在解码侧予以恢复，并且，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，其特征在于以下步骤：
使用所述参考序列中的N*2M个不同参考序列对当前水印数据帧(FRn)的所述有效载荷数据(PLD)进行调制(MS)，并在未添加同步符号的情况下组合所述当前水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数；
对所述当前水印数据帧(FRn)进行心理声学成形(PAS)，并且将其嵌入所述音频或视频信号(AS)中以供输出(WAS)；
-对于下一个水印数据帧(FRn+1)继续执行相应的步骤。
2.根据权利要求1所述的方法，其中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
3.一种用于对承载对音频或视频信号(AS)添加水印的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行编码的设备，所述添加水印利用参考序列进行调制，其中，所述有效载荷数据符号能够通过在解码侧使用相应的参考序列进行解调予以恢复，并且，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，所述编码设备包括：
-适于使用所述参考序列中的N*2M个不同参考序列对当前水印数据帧(FRn)的所述有效载荷数据(PLD)进行调制，并在未添加同步符号的情况下组合所述当前水印数据帧的所述有效载荷数据符号的装置(MS)，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数；
-适于对所述当前水印数据帧(FRn)进行心理声学成形，并将其嵌入所述音频或视频信号(AS)中以供输出(WAS)的装置(PAS)，
据此，此后相应装置继续对下一水印数据帧(FRn+1)进行处理。
4.根据权利要求3所述的设备，其中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
5.一种对承载添加水印后的音频或视频信号(WAS)的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行解码的方法，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，
并且其中，水印数据帧(FRn)的所述有效载荷数据(PLD)是使用N*2M个不同参考序列进行调制(MS)的，并且在未添加同步符号的情况下组合所述水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数，
并且其中，对所述水印数据帧(FRn)进行心理声学成形(PAS)，并将其嵌入所述音频或视频信号(AS)中，
所述解码方法包括以下步骤：
-将所述添加水印后的音频或视频信号(WAS)进行谱白化(SPW)，所述谱白化使所述心理声学成形(PAS)逆转；
-通过以下步骤对当前水印数据帧(FRn)的所述调制后的有效载荷数据(PLD)进行解调(DSPDM)，以得到所述有效载荷数据
(Pld1-Pld8)：
a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；
b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；
c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，并与步骤b)中的所述第二半集的相应的求和信号执行相关；
d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，
否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；
并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
6.根据权利要求5所述的方法，其中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
7.根据权利要求5所述的方法，其中，有效载荷符号数据包括纠错数据，并且对所述解调后的有效载荷数据进行纠错(ECDD)。
8.一种用于对承载添加水印后的音频或视频信号(WAS)的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行解码的设备，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，
并且其中，水印数据帧(FRn)的所述有效载荷数据(PLD)是使用N*2M个不同参考序列进行调制(MS)的，并且在未添加同步符号的情况下组合所述水印数据帧的所述有效载荷数据符号，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“0”的整数，
并且其中，对所述水印数据帧(FRn)进行心理声学成形(PAS)，并将其嵌入所述音频或视频信号(AS)中，
所述解码设备包括：
-适于将所述添加水印后的音频或视频信号(WAS)进行谱白化的装置(SPW)，所述谱白化使所述心理声学成形(PAS)逆转；
-适于通过以下步骤对当前水印数据帧(FRn)的所述调制后的有效载荷数据(PLD)进行解调，以得到所述有效载荷数据(Pld1-Pld8)的装置(DSPDM)：
a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；
b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；
c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；
d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，
否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；
并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
9.根据权利要求8所述的设备，其中，所述水印添加是扩频类型的、或是基于载波的、或使用回波隐匿。
10.根据权利要求8所述的设备，其中，有效载荷符号数据包括纠错数据，并且对所述解调后的有效载荷数据进行纠错(ECDD)。
11.一种对承载添加水印后的音频或视频信号(WAS)的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行解码的方法，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，
并且其中，水印数据帧(FRn)的所述有效载荷数据(PLD)是使用N*2M个不同参考序列进行调制(MS)的，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“1”的整数，
并且其中，所述水印数据帧(FRn)被嵌入所述音频或视频信号(AS)中，
所述解码方法包括以下步骤：
-通过以下步骤对当前水印数据帧(FRn)的所述调制后的有效载荷数据(PLD)进行解调(DSPDM)，以得到所述有效载荷数据(Pld1-Pld8)：
a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；
b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；
c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；
d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，
否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；
并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
12.一种用于对承载添加水印后的音频或视频信号(WAS)的有效载荷数据(PLD，Pld1-Pld8)的符号(PLBL)进行解码的设备，其中，在所有情况下N个所述有效载荷数据符号一起构成水印数据帧(FRn-1，FRn，FRn+1)，并为每个有效载荷数据符号分配M个水印数据比特，
并且其中，水印数据帧(FRn)的所述有效载荷数据(PLD)是使用N*2M个不同参考序列进行调制(MS)的，其中，每个水印数据比特值对应一个参考序列，N是大于“1”的整数，“M”是大于“1”的整数，
并且其中，所述水印数据帧(FRn)被嵌入所述音频或视频信号(AS)中，
所述解码设备包括：
-适于通过以下步骤对当前水印数据帧(FRn)的所述调制后的有效载荷数据(PLD)进行解调(DSPDM)，以得到所述有效载荷数据(Pld1-Pld8)的装置：
a)将所述N*2M个不同参考序列分成参考序列的第一半集和参考序列的第二半集；
b)将所述第一半集中的所有参考序列相加，并且将所述第二半集中的所有参考序列相加；
c)将所述谱白化后的添加水印后的音频或视频信号的相应部分与步骤b)中的所述第一半集的相应的求和信号执行相关，以及与步骤b)中的所述第二半集的相应的求和信号执行相关；
d)如果步骤c)中第一相关强于第二相关，则将所述参考序列集合的第一半分成第一半参考序列的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号，
否则，如果步骤c)中第二相关强于第一相关，则将所述参考序列集合的第二半分成第一半参考序列的相应更小的集合和第二半参考序列的集合，将所述第一半参考序列的集合中的参考序列相加并且将所述第二半参考序列的集合中的参考序列相加，继续执行步骤c)，但其中所述求和信号是步骤d)中的求和信号；
并且其中，如果步骤d)中的所述相加所得的求和信号仅包含所述参考序列之一，或者如果步骤d)中的当前半集仅包含所述参考序列之一，则认为该参考序列是用于解调相应的有效载荷数据符号的正确的参考序列。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP06120311A EP1898396A1 (en) | 2006-09-07 | 2006-09-07 | Method and apparatus for encoding/decoding symbols carrying payload data for watermarking of an audio or video signal |
| EP06120311.3 | 2006-09-07 | ||
| PCT/EP2007/058472 WO2008028770A1 (en) | 2006-09-07 | 2007-08-15 | Method and apparatus for encoding/decoding symbols carrying payload data for watermarking of an audio or video signal |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101512638A CN101512638A (zh) | 2009-08-19 |
| CN101512638B true CN101512638B (zh) | 2012-04-18 |
Family
ID=37708978
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200780032899.3A Expired - Fee Related CN101512638B (zh) | 2006-09-07 | 2007-08-15 | 对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码/解码的方法及设备 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US8175325B2 (zh) |
| EP (2) | EP1898396A1 (zh) |
| JP (1) | JP5020326B2 (zh) |
| KR (1) | KR101331712B1 (zh) |
| CN (1) | CN101512638B (zh) |
| DE (1) | DE602007010645D1 (zh) |
| WO (1) | WO2008028770A1 (zh) |
Families Citing this family (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2169939A1 (en) * | 2006-05-18 | 2010-03-31 | Thomson Licensing | Data hiding technique |
| EP2362384A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark generator, watermark decoder, method for providing a watermark signal, method for providing binary message data in dependence on a watermarked signal and a computer program using improved synchronization concept |
| EP2362386A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark generator, watermark decoder, method for providing a watermark signal in dependence on binary message data, method for providing binary message data in dependence on a watermarked signal and computer program using a two-dimensional bit spreading |
| EP2362382A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark signal provider and method for providing a watermark signal |
| EP2362387A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark generator, watermark decoder, method for providing a watermark signal in dependence on binary message data, method for providing binary message data in dependence on a watermarked signal and computer program using a differential encoding |
| EP2362383A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark decoder and method for providing binary message data |
| EP2362385A1 (en) | 2010-02-26 | 2011-08-31 | Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. | Watermark signal provision and watermark embedding |
| EP2393060A1 (en) * | 2010-06-02 | 2011-12-07 | Thomson Licensing | Providing a watermarked decoded audio or video signal derived from a watermarked audio or video signal that was low bit rate encoded and decoded |
| DE102010031411B4 (de) * | 2010-07-15 | 2012-04-26 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Konzept zur Kombination codierter Datenpakete |
| US20120084559A1 (en) * | 2010-09-30 | 2012-04-05 | Hunt Technologies, Llc | Communications Source Authentication |
| CN102123327B (zh) * | 2010-12-23 | 2012-12-26 | 上海交通大学 | 基于流媒体非关键帧的数字水印嵌入和提取的方法 |
| PT2675451E (pt) | 2011-02-18 | 2015-10-16 | Incyte Corp | Terapia de combinação com inibidores mtor/jak |
| CN102354389B (zh) * | 2011-09-23 | 2013-07-31 | 河海大学 | 基于视觉显著性的图像零水印算法及图像版权认证方法 |
| CN103905474B (zh) * | 2012-12-25 | 2017-09-26 | 腾讯数码（天津）有限公司 | 一种信息共享方法、终端、服务器及系统 |
| US9742554B2 (en) * | 2013-02-04 | 2017-08-22 | Dolby Laboratories Licensing Corporation | Systems and methods for detecting a synchronization code word |
| CN104658542B (zh) * | 2015-03-16 | 2018-01-12 | 武汉大学 | 基于正交的加性扩频音频水印嵌入方法、检测方法及系统 |
| CN105374360B (zh) * | 2015-11-25 | 2018-12-14 | 武汉大学 | 交叉加性扩频音频水印嵌入方法、检测方法及系统 |
| US10742257B1 (en) | 2018-09-26 | 2020-08-11 | Novatel Inc. | System and method for demodulating code shift keying data from a satellite signal utilizing a binary search |
| US10742258B1 (en) * | 2018-09-26 | 2020-08-11 | Novatel Inc. | System and method for demodulating code shift keying data utilizing correlations with combinational PRN codes generated for different bit positions |
| JP2020056953A (ja) * | 2018-10-03 | 2020-04-09 | キヤノン株式会社 | 防振装置、画像処理装置、及び検出方法 |
| US11115693B2 (en) * | 2019-03-27 | 2021-09-07 | Advanced Micro Devices, Inc. | Source clock recovery in wireless video systems |
| WO2023133433A1 (en) * | 2022-01-05 | 2023-07-13 | Lisnr, Inc | Transmitting data using audio transmissions and quadrature amplitude modulation and associated equalization strategies |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1542227A1 (en) * | 2003-12-11 | 2005-06-15 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for transmitting watermark data bits using a spread spectrum, and for regaining watermark data bits embedded in a spread spectrum |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| IL137311A0 (en) * | 1998-11-17 | 2001-07-24 | Koninkl Philips Electronics Nv | Embedding and extracting supplemental data in an information signal |
| US6456726B1 (en) * | 1999-10-26 | 2002-09-24 | Matsushita Electric Industrial Co., Ltd. | Methods and apparatus for multi-layer data hiding |
| JP3659321B2 (ja) * | 2000-06-29 | 2005-06-15 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 電子透かし方法およびそのシステム |
| US6738744B2 (en) * | 2000-12-08 | 2004-05-18 | Microsoft Corporation | Watermark detection via cardinality-scaled correlation |
| JP2002244685A (ja) * | 2001-02-22 | 2002-08-30 | Kowa Co | 電子透かしの埋め込みおよび検出 |
| AU2003291205A1 (en) * | 2002-11-27 | 2004-06-23 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Watermarking digital representations that have undergone lossy compression |
-
2006
- 2006-09-07 EP EP06120311A patent/EP1898396A1/en not_active Withdrawn
-
2007
- 2007-08-15 JP JP2009527092A patent/JP5020326B2/ja not_active Expired - Fee Related
- 2007-08-15 KR KR1020097004807A patent/KR101331712B1/ko not_active IP Right Cessation
- 2007-08-15 EP EP07802628A patent/EP2059923B1/en not_active Expired - Fee Related
- 2007-08-15 US US12/310,765 patent/US8175325B2/en not_active Expired - Fee Related
- 2007-08-15 DE DE602007010645T patent/DE602007010645D1/de active Active
- 2007-08-15 WO PCT/EP2007/058472 patent/WO2008028770A1/en active Application Filing
- 2007-08-15 CN CN200780032899.3A patent/CN101512638B/zh not_active Expired - Fee Related
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1542227A1 (en) * | 2003-12-11 | 2005-06-15 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for transmitting watermark data bits using a spread spectrum, and for regaining watermark data bits embedded in a spread spectrum |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101512638A (zh) | 2009-08-19 |
| JP5020326B2 (ja) | 2012-09-05 |
| US20100021003A1 (en) | 2010-01-28 |
| JP2010503034A (ja) | 2010-01-28 |
| EP1898396A1 (en) | 2008-03-12 |
| KR101331712B1 (ko) | 2013-11-20 |
| EP2059923B1 (en) | 2010-11-17 |
| DE602007010645D1 (de) | 2010-12-30 |
| EP2059923A1 (en) | 2009-05-20 |
| WO2008028770A1 (en) | 2008-03-13 |
| KR20090060287A (ko) | 2009-06-11 |
| US8175325B2 (en) | 2012-05-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101512638B (zh) | 对承载用于对音频或视频信号添加水印的有效载荷数据的符号进行编码/解码的方法及设备 | |
| CN101185121B (zh) | 使用扩频并利用水印数据给视频或音频信号加水印的方法和设备 | |
| TWI403974B (zh) | 帶有酬載資料藉以對聲頻或視頻訊號加以水印之符號編碼及解碼方法和裝置 | |
| KR101355297B1 (ko) | 두 개의 데이터 섹션을 상관시키는 방법 및 장치 | |
| US7886152B2 (en) | Method and device for embedding watermark information and method and device for extracting embedded watermark information | |
| CN101918999B (zh) | 执行音频水印嵌入以及水印检测和提取的方法和设备 | |
| CN102047324A (zh) | 数据嵌入系统 | |
| CA2811806A1 (en) | Watermark generator, watermark decoder, method for providing a watermarked signal based on discrete valued data and method for providing discrete valued data in dependence on a watermarked signal | |
| EP1798686A1 (en) | Method and apparatus for decoding watermark information items of a watermarked audio or video signal using correlation | |
| EP1703461B1 (en) | Method and apparatus for encoding and decoding symbols carrying payload data for watermarking an audio or video signal | |
| JP2775710B2 (ja) | スペクトラム拡散方式通信装置 | |
| WO2023212753A1 (en) | A method for embedding or decoding audio payload in audio content | |
| JP2002515678A (ja) | デジタル隠蔽データ転送（ｄｈｄｔ） |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120418 Termination date: 20150815 |
|
| EXPY | Termination of patent right or utility model |