CN101352045B - 用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流 - Google Patents

用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流 Download PDF

Info

Publication number
CN101352045B
CN101352045B CN2006800499507A CN200680049950A CN101352045B CN 101352045 B CN101352045 B CN 101352045B CN 2006800499507 A CN2006800499507 A CN 2006800499507A CN 200680049950 A CN200680049950 A CN 200680049950A CN 101352045 B CN101352045 B CN 101352045B
Authority
CN
China
Prior art keywords
mark
data stream
stream segment
data flow
mda
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2006800499507A
Other languages
English (en)
Other versions
CN101352045A (zh
Inventor
G·巴斯
I·科皮罗维克
M·瓦格纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of CN101352045A publication Critical patent/CN101352045A/zh
Application granted granted Critical
Publication of CN101352045B publication Critical patent/CN101352045B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

在用于从经编码的数据流中产生经标记的数据流的方法中，由经编码的数据流的第一数据流段包括经编码的多媒体信息；将经编码的数据流的至少一个第一数据流段标记成经标记的数据流段；和通过对经标记的数据流段的标记表明，经标记的数据流段适于与水印混合。此外本发明包括用于将水印插入到经标记的数据流中的方法以及用于产生经标记的数据流和用于将水印插入到经标记的数据流中的装置。

Description

用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流
本发明涉及用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流。
通过引入对诸如图像、视频或音乐作品的多媒体信息的数字化，不仅大大便于这种内容的未经授权的复制，而且大大便于这种内容的不允许的散布。在此例如通过借助于MP3对音乐作品进行压缩、或者借助于MPEG(MPEG-运动图像专家组(Motion Picture Expert Group))压缩方法将故事片烧录到DVD(DVD-数字视频光盘(Digital Video Disc))上。
为了避免或使难以对多媒体信息进行未经授权的复制和/或散布，过去已开发出在数字版权管理(DRM，Digital Rights Management)领域中的多种技术。为了保护防止非法复制，所述DRM技术之一使用数字签名。在此情况下，借助密钥对数字内容进行加密。用户可以仅借助另一密钥读取和进一步处理被加密的信息。另一DRM技术使用水印。在此情况下，使水印与多媒体信息如此混合，使得混合多媒体信息对于用户来说绝不会显出多媒体信息的可觉察到的质量上的恶化。借助于适当的算法，在混合多媒体信息中的水印可以被重构并因此被证实。
在保护数字多媒体信息时的问题是所谓的“模拟漏洞”(AnalogHole)。数字信息(例如数字视频数据)在从视频服务器传输至用户的机顶盒时以加密的方式传输。在机顶盒中对这些数字信息进行解密，且大多数情况下进行解压缩。接下来，经解密和解压缩的数字信息可以例如通过扬声器和/或监视器被再现。在此，扬声器和监视器通过相应的模拟信号来激励，所述模拟信号通过对经解压缩的数字信息的数字/模拟转换来形成。因为这些模拟信号可容易得到，所以所述模拟信号可以例如由视频记录器记录用于未经授权地复制。这称为模拟漏洞。为了能够识别出这种复制，其中可以使用例如被嵌入到视频数据的图像中的水印。
除了将用于证实未经授权的复制的保护机制嵌入到数字信息中外，还需要能够领会哪个用户已制作了未经授权的复制或者未经授权地转发了所述复制。为此可以单独地为每个用户创建水印。
单独的、也即针对用户的水印的插入可以通过如下方式来进行，即在数字信息中插入单独的水印并且接下来对数字信息进行压缩。这种实施方式的优点在于，一方面必须针对每个用户单独地处理或者压缩数字信息。另一方面，数字信息在请求式(On-Demand)业务的情况下以压缩的形式处于服务器上。在此情况下，必须针对每个用户单独地将被压缩的信息解压缩，插入单独的水印，并最后重新压缩配备有水印的数字信息。这种实施方式在经济上并不实用，因为除了大的存储空间外，还必须在请求式服务器上提供高的计算效率。
另外，在这种实施方式的情况下，组播散布的优点、诸如经压缩的数字信息从请求式服务器向网络中的节点的一次传输不能得到应用，其中所述网络节点接管向各个用户的继续散布。
因此在[1]中对于视频压缩方法MPEG-2来说公知的是，在机顶盒中、即在用户侧，在将视频数据、即视觉信息解密之后进行部分解码。在此针对视频数据的一个或多个图像块如此实施部分解码，使得执行解码直至呈现变换系数。将这些变换系数与水印混合。接下来，对混有水印的变换系数再次编码，从而产生有效的MPEG-2视频数据流。
这种实施方式具有如下缺点，即对于现有的机顶盒来说，经编码的数据流的部分解码在计算效率和存储空间方面已经太复杂了。因此例如在也公知为MPEG-4-AVC或ISO/IEC 14496-10的视频压缩标准ITU H.264(ITU-国际电信联盟)中使用名称为CABAC编码(CABAC-上下文自适应二进制算术编码(Context Adaptive Binary Arithmetic Koding))的算术编码。CABAC编码是一种计算麻烦的自适应压缩方法，其中图像的信息或者其部分被存储在唯一的不可分的代码字中。为了访问图像的各个信息，必须将通过CABAC编码所产生的代码字完全解码。
本发明所基于的任务在于，说明用于从经编码的数据流中产生经标记的数据流的方法或装置、或者用于将水印插入到经标记的数据流中的方法和装置，其中所述方法/所述装置可以针对任意压缩方法以微小复杂度将单独的水印插入到经编码的数据流中。
所述任务通过独立权利要求得以解决。本发明的其它改进在从属权利要求中说明。
在用于从经编码的数据流中产生经标记的数据流的方法中，由经编码的数据流的至少一个第一数据流段包括经编码的多媒体信息，将经编码的数据流的第一数据流段标记为经标记的数据流段，并通过经标记的数据流段来表明，经标记的数据流段适于与水印混合。
通过所述方法可以实现，通过解码装置例如在发送器中选择、即标记至少一个第一数据流段，所述第一数据流段例如在插入装置中、如在用户侧的机顶盒中被配备水印。在此编码装置可以考虑，应该仅仅在能以微小的复杂度被处理的第一数据流段中实现第一数据流段与水印的混合。实际上在此可能合理的是，编码装置利用不太复杂的算法产生经标记的第一数据流段。
尤其，经标记的数据流段可以在不考虑其它数据流段的情况下被处理。在此情况下，编码装置可以规定，其它第一和/或第二数据流段的所使用的编码模式不对经标记的数据流段的编码模式产生影响。因此例如独立地，即不依赖于其它数据流段地产生用于经标记的数据流段的算术编码。
在一种实施形式中，标记信息以第二数据流段(DA2)形式被插入到经编码的数据流中，其中借助标记信息来定位经标记的数据流段。由此可以以简单和成本低廉的方式对经标记的数据流段进行定位。
在此情况下优选地将标记信息置于经标记的数据流段之前。这可以实现对经标记的数据流段的识别，而无需中间存储经标记的数据流段。在一种有益的设计中，在此前置的标记信息以SEI消息的形式按照标准H.264来形成。因此对于H.264标准可以符合标准地实现该方法。
在一种替代实施形式中，标记信息置于经标记的数据流段之后。在此情况下确保无延迟地基于前置的标记信息来提供经标记的数据流段的内容。在此合理的是，后置的标记信息以NAL单元的形式按照标准H.264来形成。因此可以针对H.264标准符合标准地实现该方法。
优选地通过经标记的数据流段来描述一组图像块，由此在基于块的编码方法中可以使用本方法。
如果经标记的数据流段通过经标记的数据流段的特定编码特性来定位，则可以在无信令字段的情况下标识经标记的数据流段。因此可以在不增大数据容量的情况下实现本方法。
在此，特定编码特性可以通过可预先给定数量的图像块来定义。所述编码特性可以以微小的计算复杂度来识别。附加地或可替代地，特定的编码特性可以通过经标记的数据流段内的图像块的最小尺寸来再现。该编码特性可以在不执行经编码的数据流的至少部分解码的情况下被识别。在一种可选的扩展方案中，经标记的数据流段的图像块按照内编码模式来产生。这确保经标记的数据流段可以在不考虑其它第一数据流段的情况下被解码，并且因此水印可以以微小的计算和/或存储耗费被插入。
在一种优选的扩展方案中，经标记的数据流段的多个图像块中的至少一部分被混有水印。因此可以进一步降低用于插入水印所需要的计算功率，因为每个经标记的数据流段待处理的图像块的数量被减少。
优选地，在不进行算术编码的情况下形成经标记的数据流段，从而可以避免在对经标记的数据流段编码时与其它数据流段的依赖关系。
本发明还涉及用于将水印插入到经标记的数据流中的方法，其中对经标记的数据流中的经标记的数据流段进行定位，通过使水印与被定位和标记的数据流段混合来产生混合的数据流段，将混有水印的数据流段如此集成到经标记的数据流中，使得混合数据流段代替被定位的经标记的数据流段。利用这种插入方法可以在接收器侧、例如在机顶盒中以简单快速的方式实现经标记的数据流段与水印的混合。在此情况下，尤其可以以微小的耗费插入用户独有的水印。
此外，本发明包括用于从经编码的数据流中产生经标记的数据流的装置，具有用于将经编码的数据流的至少一个第一数据流段标记成经标记的数据流段的编码装置，其中通过标记经标记的数据流段来表明，经标记的数据流段适于与水印混合，和其中通过经编码的数据流的第一数据流段来包括经编码的多媒体信息。借助该装置可实现用于产生经标记的数据流的方法。
本发明还涉及用于将水印插入到经标记的数据流中的装置，具有插入装置用于对经标记的数据流中的经标记的数据流段进行定位，用于将水印和被定位和标记的数据流段混合成混合数据流段，和用于将混合数据流段集成到经标记的数据流中，其中混合数据流段代替被定位的标记的数据流段。在使用本发明装置的情况下可以实现用于将水印插入到经标记的数据流中的方法。
本发明还涉及经标记的数据流，所述经标记的数据流在使用用于产生经编码的数据流的情况下被形成。所产生的数据流可以从发送器被传输至接收器。另外所述数据流可以有组织地被存储在存储介质上，例如存储在存储盘或存储器芯片上。
下面根据附图详细说明本发明的实例。具体地：
图1示出用于产生经标记的数据流用于插入水印的装置以及用于将水印插入到经标记的数据流中的装置；
图2A示出具有第一和第二数据流段的经编码的数据流；
图2B，2C分别示出具有第一和第二数据流段的经标记的数据流；
图3示出用于产生经标记的数据流的流程图的一个实例，该数据流具有置于第一数据流段之前的标记信息；
图4示出用于产生经标记的数据流的流程图的另一个实例，该数据流具有置于第一数据流段之后的标记信息；
图5示出第一数据流段的结构；
图6示出对用于产生经标记的数据流或者用于将水印插入到经标记的数据流中的方法或装置的应用。
在图1至6中，具有相同功能和作用方式的元件标有相同的附图标记。
在图1中，例如包括图像序列的数据流D被编码成经编码的数据流DC。编码借助于第一编码模块ENCA被执行。编码通常被理解成规范，其中，一种表示的符号被转成另一种表示的符号。在该说明书的范围内，利用编码对信息进行压缩。这例如通过标准化编码方法来实现，如例如为了压缩视觉信息而采用按照MPEG-1、MPEG-2或H.264的视频编码方法。在本说明书的范围内，信息被理解成多媒体信息，例如视频、图像或音乐作品。对于技术人员来说，用于压缩多媒体信息的方法是公知的，因此对此不予以详细说明。原则上，可以使用用于压缩多媒体信息的标准化的和/或非标准化的编码方法。本发明方法可以被用于每一种多媒体信息。下面举例地借助视频序列来说明本发明。
图2A示出经编码的数据流DC的时间连续的片段。该经编码的数据流DC包括第一和第二数据流段DA1和DA2。数据流段分别被理解成经编码的数据流DC的相关的区域，在所述区域中组合在内容上休戚相关的经编码的信息。
第一数据流段DA1表示待编码的数据流D的经编码的多媒体信息。在按照MPEG-1编码的数据流DC中，例如具有亮度信息的四个图像块和具有颜色信息的两个图像块以组合的方式被编码成一个宏块。在此，这种宏块表示待编码的数据流D的经编码的多媒体信息、即第一数据流段DA1。另外，第一数据流段DA1也可以通过组合多个宏块来形成。这在MPEG-1中称为片(Slice)。
通过第二数据流段DA2来说明经编码的数据流DC的控制信息。在MPEG-1中例如使用序列头字段(用英文为sequence header)，所述序列头字段此外说明图像序列的图像高度和宽度。另外在MPEG-1中例如使用图像头字段(用英文为picture header)，所述图像头字段包括关于当前待编码的图像的信息。
如果不考虑视频编码标准MPEG-1而考虑视频编码标准H.264，那么在那里通过所谓的NAL单元(NAL-网络自适应层(Network AdaptationLayer))来定义数据流段。NAL单元原则上可以被划分成两类。一类包括控制信息，例如关于图像尺寸和每秒图像数量的信息。这类代表第二数据流段DA2。此外存在NAL单元，例如一组宏块，称为VCL-NAL(VCL-视频编码层)或片，其包括待编码的数据流D的待编码的图像信息。NAL单元的所述另一类对应于第一数据流段DA1。
经编码的数据流DC的产生按照图1通过第一编码模块ENCA进行。在此，待编码的数据流D、例如图像序列以片的方式被编码。这种片表示第一数据流段DA1。如果片或片的块应在稍后的处理步骤中与水印WM混合，那么使该第一数据流段DA1首先配有标记。这种经标记的第一数据流段DA1称为经标记的数据流段MDA。在第二编码模块ENCB中进行标记。第一和第二编码模块可以集成在编码装置ENC中。经标记的经编码的数据流称为经标记的数据流DS。
在第一实施例中，为了标记第一数据流段、即片，将包括标记信息MI的第二数据流段DA2在时间上在待标记的第一数据流段DA1之前放置到经编码的数据流中。如在图2B中所示，在该变型方案中，具有标记信息的第二数据流段DA2(MI)分别直接在待标记的片之前被插入到经编码的数据流DC中。经标记的经编码的数据流称为经标记的数据流DS，经标记的片称为经标记的数据流段MDA。这种关系在图2B中用半圆形箭头象征性地表示。箭头末端起始于对随后的第一数据流段进行标记的该第二数据流段。箭头尖端指向经标记的数据流段MDA。经标记的片用菱形图案标出。图2A和图2B之间的虚线箭头表示内容相同的第一数据流段DA1或经标记的数据流段MDA。在使用H.264时，标记信息可以借助SE I消息(SEI-辅助增强信息(Supplementary Enhanced Information))来产生，例如具有“MI＝有效载荷类型＝22”。
在另一实例中，为了标记第一数据流段、例如片，具有标记信息MI的第二数据流段DA2在时间上被置于待标记的第一数据流段DA1之后。如从图2C可看出，具有标记信息MI的第二数据流段DA2直接被插入在待标出的片、即待标记的第一数据流段DA1之后。图2C中的半圆形箭头以图形方式示出这种关系。在该实例中，对于H.264，具有标记信息的第二数据流段DA2可以由NAL类型为“nal单元-类型＝30”的NAL单元构成。
经标记的数据流DS因此包括第一和第二数据流段DA1、DA2，其中经标记的数据流段MDA可以借助标记信息MI在经标记的数据流DS中被定位。
该经标记的数据流DS可以从包括编码装置ENC的发送器S被传输至接收器E。发送器S可以以请求式服务器的形式来构造，接收器E可以被构造为机顶盒。经标记的数据流DS的传输例如通过基于IP的因特网(IP-因特网协议)来进行。
编码装置ENC例如借助于第一编码模块ENCA和第二编码模块ENCB来实现。第一编码模块ENCA包括商业上通用的例如按照标准化视频编码标准的编码模块。由第一编码模块ENCA所产生的经编码的数据流DC被输送给第二编码模块ENCB。该第二编码模块ENCB在所产生的数据流中选择一个或多个待标记的第一数据流区，或者例如根据图2将标记信息添加到所产生的数据流中。第二编码模块ENCB例如根据编码特性选择待标记的第一数据流段。编码特性的使用将在稍后予以说明。第二编码模块ENCB产生经标记的数据流DS。
在接收器E中，所接收的经标记的数据流DS被输送给用于插入水印的插入装置WE。将水印插入到经标记的数据流中借助图3根据分别置于经标记的数据段MDA之前的标记信息MI根据按照视频编码标准H.264的第一实施例来详细说明。在此，经标记的数据流DS按照图2B构成，其中作为用于对经标记的数据流段MDA进行标记的第二数据流段DA2，具有作为标记信息MI的例如包括“有效载荷类型＝22”的SEI消息的NAL单元被插入。
当在状态STA下开始按照图3的流程图之后，在第一步骤S1中，从经标记的数据流DS读入NAL单元。在第二步骤S2中确定所读入的NAL单元的特定类型。如果该类型是具有“有效载荷类型＝22”的SEI类型，则由此得出，这对应于经标记的数据流段MDA的前置的标记信息MI。在这种情况下调用第三步骤S3。否则继续步骤S7。
在步骤S3中读入下一NAL单元。对应于经标记的片或经标记的数据流段MDA的该新读入的NAL单元随后被解码。解码在第四步骤S4中进行。在第五步骤S5中将水印WM嵌入到被解码的片中。对此的方法例如由[1]已知。在随后的步骤S6中对混有水印的片进行编码。
在第七步骤S7中，新编码的片、即新编码的NAL单元和未处理的NAL单元以其读入顺序被合并成经修改的经编码的数据流DS′。在第八步骤S8中检查是否到达经标记的数据流DS的末端。如果的确如此，则流程图在状态END下结束。否则以步骤S1继续该流程图。
在根据图3的实施例中，包括待标记的数据流段MDA用的标记信息MI的第二数据流段DA2并未被接纳到经修改的经编码的数据流DS′中。对此可选地，也可以将这些第二数据流段DS2插入到经修改的经编码的数据流DS′中，因为后接的解码器DEC在解码时忽略具有标记信息的第二数据流段DA2，其中所述解码器从经修改的经编码的数据流DS′中产生经解码的数据流D′。经解码的数据流D′例如包括未编码的图像数据，例如针对未编码的图像数据的每个像点例如分别具有用于颜色红、绿和蓝的8比特颜色值。除了所述表示之外，亮度值和色度值(Crominanzwert)也可以描述像点。其它表示形式对于技术人员来说是公知的。
下面利用图4对用于借助后置的标记信息MI将水印插入到经标记的数据流中的实施方式予以详细说明。在此，经标记的数据流DS示出了按照图2C的结构。在此具有标记信息的第二数据流段DA2(MI)分别借助“nal单元-类型＝30”的NAL单元来表示。在该流程图在状态STA下开始之后，在第九步骤S9中首先读入第一NAL单元。在随后的第十步骤S10中检查是否到达经标记的数据流DS的末端。如果的确如此，则所读入的第一NAL单元在第十八步骤S18中被插入在经修改的经编码的数据流DS′的末端处。接下来流程图以状态END结束。
如果在第十步骤S10中并未达到经标记的数据流DS的末端，则在第十一步骤S11中读入第二NAL单元。在第十二步骤S12中如下检查该第二NAL单元是否对应于特定的NAL类型，例如具有“nal单元-类型＝30”的NAL类型。如果并非如此，则第二NAL单元不是包括标记信息MI的第二数据流段DS2。在这种情况下，继续第十七步骤S17，在该步骤中，所读入的第一NAL单元被添加在经修改的经编码的数据流DS′的末端处。接下来在第二十一步骤S21中检查是否达到经标记的数据流DS的末端，如果的确如此，则在第二十三步骤S23中将第二NAL单元添加在经修改的经编码的数据流DS′的末端处，并且以状态END结束流程图。如果在步骤S21中未确定出结束，则在第二十二步骤中，第二NAL单元变成第一NAL单元。然后继续第十一步骤S11。
如果在第十二步骤S12中检测到具有标记信息MI的第二数据流段DA2，则继续第十三步骤S13。在此情况下，对应于经标记的片MDA的第一NAL单元被解码或至少被部分编码。在第十四步骤S14中，水印WM被嵌入到经解码的片中，配有所嵌入的水印的片在第十五步骤S15中被编码。接下来在第十六步骤S16中经编码的片被置于经修改的经编码的数据流DS′的末端。然后在第十九步骤中检查是否达到经标记的数据流DS的末端。如前所述，在这种情况下，流程图或者以状态END结束，或者流程图以第九步骤S9继续。
在根据图4的流程图的改进中，可以在步骤S19和S9之间插入第二十步骤S20。步骤S20用虚线示出。在此情况下，第二NAL单元可选地被添加在经修改的经编码的数据流DS′的末端处，且在稍后的解码时可以不被考虑。使用这种选项实际上是符合目的的，因为借助于包括标记信息的第二数据流段例如为了检查目的或者在改变水印时能够在经修改的经编码的数据流中快速且简单地找到经标记的数据流段。
如根据图2至4所述，经标记的数据流段MDA形式的片可以与水印逻辑连接(verknüpfen)。片包括一个或多个宏块，其中每个宏块含有多个图像块BB1、...、BBn。根据一种改进，标记信息MI还可以含有信息：在与水印逻辑连接时应使用片的哪些图像块或宏块。在此，虽然整个片可以被解码，但只在已借助标记信息MI标识的图像块或宏块情况下发生水印嵌入。在此，在标记信息内可以插入附加字段，该附加字段针对在片中所含有的每个图像块用例如二进制的说明来表明，相应的图像块是否适合与水印信号逻辑连接。只有在相应的图像块适于逻辑连接时，才可以完全进行逻辑连接，其中不是每个适于逻辑连接的图像块都必须强制地被配备水印。插入装置WE例如决定，只将适当的每个第三图像块或经标记的数据流段与水印混合。另外，插入装置W可以借助用于进行混合的复杂度来决定：将哪些经标记的数据流段或适用于混合的块与水印混合，其中用于进行混合的复杂度不超过可预先给定的阈值。
在图5中举例地示出第二数据流段DA2，该第二数据流段除了NAL类型“NT＝na1_单元_类型＝30”外还包括说明字段AF，该说明字段AF分别表示针对所属片中的相应图像块的比特。具有值“0”的第一比特表明，片中的第一图像块不应配备有水印。具有值“1”的第二比特表明，片中的第二图像块应与水印逻辑连接。其它比特可相应地应用于片中的其它图像块。因此字段AF可以为“0，1，1，0，0”。
在上述实施例中，通过包括标记信息MI的第二数据流段DA2明确地说明，与第二数据流段DA2有关的第一数据流段DA1应该被标记。在一种替代方案中，经标记的数据流段可以通过如下方式来定位和检测，即借助于第一数据流段的至少一个可预先给定的特定编码特性来识别出第一数据流段是或不是经标记的数据流段。例如在经标记的数据流段中总是四个宏块被编码。相反，总是具有数量不等于四的宏块的未经标记的数据流段被编码。对于视频编码领域或其它编码方法领域的技术人员来说，除了确定每个经标记的数据流段的宏块数量外，可用于区分经标记的和未经标记的数据流段的其它编码特性也是公知的。对每个经标记的数据流段的宏块数量的替代和附加地，例如考虑经编码的图像块的确定的块尺寸或量化值。
通过使用经标记的数据流段MDA，对于插入装置WE来说明显易于仅借助标记信息来检测经标记的数据流段。这种实施方式在计算技术上不太复杂且需要小的存储器尺寸用于中间存储第一或第二数据流段。
在一种改进方案中，用于插入水印的复杂度可以通过如下方式得到降低，即经标记的数据流段可通过简单的方式被解码和编码。这例如通过如下方式来实现：每个经标记的数据流段MDA使用少数的宏块或图像块。另外通过在经标记的数据流段中使用具有最小尺寸的图像块，可以进一步降低用于对经标记的数据流段的图像块进行解码和编码的处理复杂度。此外可以通过如下方式实现简化，即经标记的数据流段的各个图像块借助于内编码模式(Intrakodiermodus)来产生。在这种情况下，在选择待标记的数据流段时不必考虑例如与先前的图像的编码依赖关系。可以通过如下方式来实现对经标记的数据流段的编码或解码的大大简化，即不采用算术编码。这尤其具有如下优点：例如可以以块的方式对经标记的数据流段内的图像块进行处理，而无需对经标记的数据流段的所有图像块进行麻烦的解码。特别是对应该与水印逻辑连接的图像块的标记信息的明确说明可以实现大大地简化处理复杂度。
在图6中示出本发明的两种实现变型方案。发送器S(例如视频服务器)包括用于产生经标记的数据流的装置。经标记的数据流可以通过网络NET(例如基于IP的LAN(IP-因特网协议，LAN-局域网络))被传输至接收器(例如机顶盒或计算机)。对此可替代地，经标记的数据流可以从基站BS以无线的方式被发送至接收器E，例如移动无线电设备，其中无线传输MOB例如按照GSM、UMTS或WLAN标准来实施(WLAN-无线局域网络，GSM-全球移动通信系统，UMTS-通用移动电信系统)。
接收器E包括插入装置WE和可选地包括解码器DEC。由此可以实现：用户特定的水印可以通过接收器、即通过用户设备来插入。在另一种实施形式中，可以将插入装置集成在发送器S中，使得在相应的接收器E中只需要解码器DEC。
所引用的文献：
S.Arean，M.Caramma，″Digital watermarking applied toMPEG-2coded video sequences exploiting space and fre-quency masking″，Proc.Int.Conf.On Image Processing(ICIP-2000)，Vol.3，pp.438-441，Vancouver，Canada，2000；

Claims (1)

1.用于从经编码的数据流（DC）中产生经标记的数据流（DS）的方法，其中
－由经编码的数据流（DC）的至少一个第一数据流段（DA1）包括经编码的多媒体信息；
－将经编码的数据流（DC）的第一数据流段（DA1）标记成经标记的数据流段（MDA），从而产生经标记的数据流（DS）；
－通过经标记的数据流段（MDA）表明，经标记的数据流段（MDA）适于与水印混合，
其中经标记的数据流段（MDA）的编码模式与其它第一数据流段（DAI）的编码模式无关。
2. 如权利要求1所述的方法，其特征在于，将标记信息（MI）以第二数据流段（DA2）的形式插入到经编码的数据流（DS）中，其中借助所述标记信息（MI）对经标记的数据流段（MDA）进行定位。
3. 如权利要求2所述的方法，其特征在于，将所述标记信息（MI）置于经标记的数据流段（MDA）之前。
4. 如权利要求3所述的方法，其特征在于，所述前置的标记信息（MI）以SEI消息的形式按照标准H.264来构成。
5. 如权利要求2所述的方法，其特征在于，将所述标记信息（MI）置于经标记的数据流段（MDA）之后。
6. 如权利要求5所述的方法，其特征在于，所述置后的标记信息（MI）以NAL单元的形式按照标准H.264来构成。
7. 如前述权利要求中任一项所述的方法，其特征在于，通过经标记的数据流段（MDA）来描述一组图像块（BB）。
8. 如权利要求1-6中任一项所述的方法，其特征在于，经标记的数据流段（MDA）通过经标记的数据流段（MDA）的特定编码特性来定位。
9. 如权利要求8所述的方法，其特征在于，特定编码特性通过经标记的数据流段（MDA）内可预先规定数量的图像块（BB）来定义。
10. 如权利要求9所述的方法，其特征在于，特定编码特性通过经标记的数据流段（MDA）内图像块（BB）的最小尺寸（MG）来再现。
11. 如权利要求9至10中任一项所述的方法，其特征在于，经标记的数据流段（MDA）的图像块（BB）按照内编码模式来产生。
12. 如权利要求9至10中任一项所述的方法，其特征在于，将经标记的数据流段（MDA）的多个图像块（BB）中的至少一部分与水印（WM）混合。
13. 如权利要求1-6中任一项所述的方法，其特征在于，经标记的数据流段（MDA）在不进行算术编码的情况下被形成。
14. 用于将水印（WM）插入到经标记的数据流（DS）中的方法，其中经标记的数据流（DS）按照前述权利要求中任一项来构成，其特征在于，
－在经标记的数据流（DS）中对经标记的数据流段（MDA）进行定位，其中经标记的数据流段（MDA）的编码模式与其它第一数据流段（DAI）的编码模式无关；
－通过混合水印（WM）与被定位和标记的数据流段（MDA）来产生混合数据流段；
－将混有水印（WM）的数据流段集成到经标记的数据流（DS）中，使得混合数据流段代替被定位的经标记的数据流段（MDA）。
15. 用于从经编码的数据流（DC）中产生经标记的数据流（DS）的装置，具有用于将经编码的数据流（DC）的至少一个第一数据流段（DA1）标记成经标记的数据流段（MDA）从而产生经标记的数据流（DS）的编码装置，其中通过经标记的数据流段（MDA）表明，经标记的数据流段（MDA）适于与水印混合，和其中由经编码的数据流（DC）的第一数据流段（DA1）包括经编码的多媒体信息，其中经标记的数据流段（MDA）的编码模式与其它第一数据流段（DAI）的编码模式无关。
16. 如权利要求15所述的装置，所述的装置装配有设备，使得可实施按照权利要求2至13中任一项所述的方法。
17. 用于将水印（WM）插入到经标记的数据流（DS）中的装置，其中经标记的数据流（DS）按照权利要求1至13中任一项来构成，所述装置具有插入装置（WE）用于在经标记的数据流（DS）中对经标记的数据流段（MDA）进行定位，用于将水印（WM）与被定位和标记的数据流段（MDA）混合成混合数据流段和用于将混合数据流段集成到经标记的数据流（DS）中，其中混合数据流段代替被定位的经标记的数据流段（MDA）。
CN2006800499507A 2005-12-30 2006-12-05 用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流 Expired - Fee Related CN101352045B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102005063136A DE102005063136B3 (de) 2005-12-30 2005-12-30 Verfahren und Vorrichtung zum Generieren eines markierten Datenstroms, Verfahren und Vorrichtung zum Einfügen eines Wasserzeichens in einen markierten Datenstrom und markierter Datenstrom
DE102005063136.3 2005-12-30
PCT/EP2006/069307 WO2007077074A2 (de) 2005-12-30 2006-12-05 Verfahren und vorrichtung zum generieren eines markierten datenstroms, verfahren und vorrichtung zum einfügen eines wasserzeichens in einen markierten datenstrom und markierter datenstrom

Publications (2)

Publication Number Publication Date
CN101352045A CN101352045A (zh) 2009-01-21
CN101352045B true CN101352045B (zh) 2013-09-18

Family

ID=38136044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800499507A Expired - Fee Related CN101352045B (zh) 2005-12-30 2006-12-05 用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流

Country Status (5)

Country Link
US (1) US20090219987A1 (zh)
EP (1) EP1967007A2 (zh)
CN (1) CN101352045B (zh)
DE (1) DE102005063136B3 (zh)
WO (1) WO2007077074A2 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5277180B2 (ja) * 2007-03-23 2013-08-28 トムソン ライセンシング 符号化ビットストリームの修正
US8588459B2 (en) * 2007-06-14 2013-11-19 Thomson Licensing Modifying a coded bitstream
KR20120092432A (ko) * 2011-02-11 2012-08-21 삼성전자주식회사 디지털 방송 시스템에서 컨텐츠 송수신 장치 및 방법
WO2013112744A2 (en) * 2012-01-24 2013-08-01 Futurewei Technologies, Inc. Compressed domain watermarking with reduced error propagation
DE102013226780A1 (de) * 2013-12-19 2015-06-25 Siemens Aktiengesellschaft Verfahren und Vorrichtung zum digitalen Signieren einer Datei
EP3363210A1 (en) * 2015-10-15 2018-08-22 Nagravision S.A. A system for inserting a mark into a video content
US10958989B2 (en) * 2016-02-25 2021-03-23 Synamedia Limited Framework for embedding data in encoded video
RU2634179C1 (ru) * 2016-12-12 2017-10-24 Акционерное общество "Лаборатория Касперского" Способ и система для доверенного доведения информации до пользователя
US10560728B2 (en) * 2017-05-29 2020-02-11 Triton Us Vp Acquisition Co. Systems and methods for stitching separately encoded NAL units into a stream

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1708084A (zh) * 2004-06-05 2005-12-14 三星电子株式会社 识别图像的拍摄者的设备

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3696723B2 (ja) * 1997-09-02 2005-09-21 ソニー株式会社 画像データ処理装置及び方法
US6373960B1 (en) * 1998-01-06 2002-04-16 Pixel Tools Corporation Embedding watermarks into compressed video data
US7142691B2 (en) * 2000-03-18 2006-11-28 Digimarc Corporation Watermark embedding functions in rendering description files
KR100426305B1 (ko) * 2001-11-27 2004-04-08 한국전자통신연구원 웨이블릿 기반에서 블라인드 방식을 이용한 디지털워터마크 삽입/추출장치 및 방법
US20040006575A1 (en) * 2002-04-29 2004-01-08 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
US7003131B2 (en) * 2002-07-09 2006-02-21 Kaleidescape, Inc. Watermarking and fingerprinting digital content using alternative blocks to embed information
US6795584B2 (en) * 2002-10-03 2004-09-21 Nokia Corporation Context-based adaptive variable length coding for adaptive block transforms
JP4134807B2 (ja) * 2003-04-25 2008-08-20 ブラザー工業株式会社 特殊画像付加方法、描画処理システム、及びドライバプログラム
US7657056B2 (en) * 2004-06-05 2010-02-02 Samsung Electronics Co., Ltd. Apparatus for identifying a photographer of an image
US7570782B2 (en) * 2004-12-10 2009-08-04 Hewlett-Packard Development Company, L.P. Method and system for watermarking
JP4716357B2 (ja) * 2005-03-29 2011-07-06 Ｋｄｄｉ株式会社 圧縮データスクランブル配信装置、その再生装置および配信・再生装置
CN101218827B (zh) * 2005-07-06 2013-01-30 汤姆森许可贸易公司 对包括图像序列和标识的视频内容进行编码的方法和设备
US7596239B2 (en) * 2005-08-02 2009-09-29 Lsi Corporation Method and/or apparatus for video watermarking and steganography using simulated film grain
EP1958430A1 (en) * 2005-12-05 2008-08-20 Thomson Licensing Watermarking encoded content

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1708084A (zh) * 2004-06-05 2005-12-14 三星电子株式会社 识别图像的拍摄者的设备

Also Published As

Publication number Publication date
US20090219987A1 (en) 2009-09-03
EP1967007A2 (de) 2008-09-10
WO2007077074A2 (de) 2007-07-12
CN101352045A (zh) 2009-01-21
WO2007077074A3 (de) 2008-01-03
DE102005063136B3 (de) 2007-07-05

Similar Documents

Publication Publication Date Title
CN101352045B (zh) 用于产生经标记的数据流的方法和装置、用于将水印插入到经标记的数据流中的方法和装置以及经标记的数据流
US6208745B1 (en) Method and apparatus for imbedding a watermark into a bitstream representation of a digital image sequence
EP2206273B1 (en) Method, device and system for dynamically embedding watermark information into multimedia content
CN102144237B (zh) 压缩媒体的有效水印方法
US6421450B2 (en) Electronic watermark system
Lin et al. Issues and solutions for authenticating MPEG video
US7680269B2 (en) Method for ciphering a compressed audio or video stream with error tolerance
US6061451A (en) Apparatus and method for receiving and decrypting encrypted data and protecting decrypted data from illegal use
KR100805604B1 (ko) 데이터 스케일링 방법 및 데이터 처리 방법
US20040120404A1 (en) Variable length data encoding method, variable length data encoding apparatus, variable length encoded data decoding method, and variable length encoded data decoding apparatus
KR101485852B1 (ko) 역추적성을 갖는 drm 콘텐트 스트림 전송 장치, 방법 및 송수신 시스템
US20070003102A1 (en) Electronic watermark-containing moving picture transmission system, electronic watermark-containing moving picture transmission method, information processing device, communication control device, electronic watermark-containing moving picture processing program, and storage medium containing electronic watermark-containing
US7801326B2 (en) Digital watermark and film mark
CN114930835A (zh) 变换系数为水印提供嵌入式信令的用途
US9712845B2 (en) Media content processing method
US20090110059A1 (en) Method and system for transmitting end-user access information for multimedia content
JP2007534230A (ja) プログレッシブ暗号化されたスケーラブルデータ列をスケーリングするための方法
JP3754847B2 (ja) データ処理方法、データ処理装置およびその記憶媒体
EP1628482A2 (en) Method and apparatus for transmitting copy control information
KR100439521B1 (ko) 헤더 정보 암호화에 의한 멀티미디어 컨텐츠 보호 방법
Dufaux et al. Securing JPEG 2000 compressed images
CN118338045A (zh) 视频码流加密方法、视频码流解密方法及相关装置
Ya et al. High-Capacity Reversible Data Hiding in Encrypted Image Based on Hierarchical Quad-Tree Coding and Multi-MSB Prediction. Electronics 2021, 10, 664
Su et al. Information embedding in JPEG-2000 compressed images
Tirupathamma SECRET DATA TRANSMISSION IN VIDEO USING LSB AND DWT.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130918

Termination date: 20161205