CN104412609A - 处理数字服务信号的方法及装置 - Google Patents

处理数字服务信号的方法及装置 Download PDF

Info

Publication number
CN104412609A
CN104412609A CN201380035801.5A CN201380035801A CN104412609A CN 104412609 A CN104412609 A CN 104412609A CN 201380035801 A CN201380035801 A CN 201380035801A CN 104412609 A CN104412609 A CN 104412609A
Authority
CN
China
Prior art keywords
content
watermark
information
frame
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380035801.5A
Other languages
English (en)
Inventor
吴世珍
徐琮烈
朴丙善
金镇泌
文京洙
安承柱
金庆镐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104412609A publication Critical patent/CN104412609A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0042—Fragile watermarking, e.g. so as to detect tampering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/005—Robust watermarking, e.g. average attack or collusion attack resistant
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/005—Robust watermarking, e.g. average attack or collusion attack resistant
    • G06T1/0071—Robust watermarking, e.g. average attack or collusion attack resistant using multiple or alternating watermarks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0085—Time domain based watermarking, e.g. watermarks spread over several images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0092—Payload characteristic determination in a watermarking scheme, e.g. number of bits to be embedded
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/3232—Robust embedding or watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • H04N1/32149—Methods relating to embedding, encoding, decoding, detection or retrieval operations
    • H04N1/32331—Fragile embedding or watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

公开了一种处理数字服务信号的装置及其方法。本发明包括：接收模块，该接收模块被构造为接收具有水印的内容，其中，所述水印被包括在所述内容的音频帧或视频帧中，其中，所述水印携带与所述内容有关的信道消息、和具有用于所述内容的附加数据的URL信息的内容信息；提取模块，该提取模块被构造为从所述音频帧或视频帧中提取所述水印；和获取模块，该获取模块被构造使用所提取的水印通过因特网协议IP网络来获取所述附加数据。

Description

处理数字服务信号的方法及装置
技术领域
本发明涉及一种用于处理与广播节目有关的自动内容识别(ACR)服务的方法及装置，并且更具体地，涉及一种用于在ACR环境中提供与广播内容有关的附加服务的方法及装置。
背景技术
随着已经引入数字卫星广播，数字数据广播已经作为新的补充服务而出现。交互式数据广播(其是代表性的交互式服务)可以不仅将数据信号，而且将现有广播信号发送给用户，以便提供各种补充服务。
可经由增强TV(ETV)使用虚拟频道以及广播相关服务，来将数字数据广播大体划分为独立服务。该独立服务仅包括文本和图形，而不包括广播图像信号，并且以与现有因特网网页类似的格式来提供。独立服务的代表性示例包括：天气和股票信息提供服务、TV银行服务、商业交易服务等。该广播相关服务不仅发送广播图像信号，而且发送附加文本和图形信息。观众可以经由广播相关服务来获取与所观看的广播节目有关的信息。例如，在观看戏剧的同时，存在使观众能够观看前一故事或者放映位置的服务。
在数字数据广播的广播相关服务中，可以基于ACR技术来提供ETV服务。ACR表示如下的技术：即，当装置回放音频/视频(A/V内容)时，经由隐藏在内容中的信息来自动识别内容的技术。
在ACR技术的实现中，可使用加水印或加指纹方案来获取与内容有关的信息。加水印涉及用于将指示数字内容提供者的信息插入到数字内容中的技术。加指纹与加水印相同的是：将特定信息插入到数字内容中，并且与其不同的是：插入与内容购买者有关的信息，而不是与内容提供者有关的信息。
然而，用于经由ACR功能提供互动服务的常规系统具有若干限制。
如果内容提供者(或广播者)发送用于实时服务的内容和用于ETV服务的增强数据(或附加数据)，并且TV接收机通过外部输入来接收用于实时服务的内容和增强数据，则可以接收用于实时服务的内容，但不可以接收增强数据。
此外，如果在ACR系统上提供现有ETV服务，则不可避免地需要单独ACR服务器(或ACR解决方案提供者)的介入(intervention)。因此，需要用于单独执行ACR功能的接收机，而不需要单独的ACR服务器。
另外，在用于提供ETV服务的加水印技术中，如果包括在水印中的信息量是大的，则嵌入了水印的内容的质量可能会降低。因此，对水印的有效使用存在限制。
此外，在用于提供ETV服务的指纹技术中，用于识别内容的外部ACR服务器也是需要的，并且内容识别结果取决于参考集的大小。
发明内容
技术问题
本发明的目的旨在解决如下的问题：使用广播系统来识别与广播节目有关的信息，并提供所识别的实时广播节目的附加信息。
技术方案
本发明的目的能够通过提供根据本发明的处理数字服务信号的方法来实现，该方法包括：接收具有水印的内容，其中，水印插入在内容的音频帧或视频帧中，其中，水印携带与内容有关的信道消息、和具有用于内容的附加数据的URL信息的内容信息；从音频帧或视频帧中提取水印；并使用所提取的水印通过IP(因特网协议)网络来获取附加数据。
优选地，其中，该内容信息还包括：识别内容的提供者的内容提供者id信息和识别内容中的每个内容的内容id信息。
优选地，根据内容信息，以不同的周期将水印插入到音频帧或视频帧中。
优选地，从音频帧或视频帧中提取水印还包括如下操作：将音频帧或视频帧划分成子帧；从所划分的子帧当中检测具有水印的特定子帧；并从检测到的特定子帧中提取水印。
优选地，当将内容信息划分成子内容信息，并将所划分的子内容信息插入到连续的音频帧或视频帧中时，提取还包括如下操作：从连续的音频帧或视频帧中提取子内容信息；从所提取的子内容信息中提取内容信息的开始标签和结束标签；并使用开始信息和结束信息来将子内容信息组装成内容信息。
优选地，从音频帧或视频帧中提取水印还包括如下操作：从视频帧中的标志数据区域中提取水印。
优选地，当内容是3D(三维)内容时，提取还包括如下操作：从3D内容的左视频帧和/或右视频帧中提取水印。
优选地，该方法还包括如下操作：从内容中提取指纹签名；并创建包括内容信息和指纹签名的查询。
在本发明的另一方面中，本文提供了根据本发明的处理数字服务信号的方法，该方法包括如下操作：产生水印；将所产生的水印插入到内容的音频帧或视频帧中，其中，水印携带与内容有关的信道消息、和具有用于内容的附加数据的URL信息的内容信息；并发送内容。
优选地，其中，该内容信息还包括：识别内容的提供者的内容提供者id信息和识别内容中的每个的内容id信息。
优选地，插入还包括如下操作：根据内容信息，以不同的周期将水印插入到音频帧或视频帧中。
优选地，插入还包括如下操作：将音频帧或视频帧划分成子帧；从所划分的子帧当中检测特定子帧来插入水印；将水印插入到检测到的特定子帧中；并将所划分的子帧组装成音频帧或视频帧。
优选地，该方法还包括如下操作：将内容信息的开始标签和结束标签插入到内容信息中；将内容信息划分成子内容信息；并将子内容信息插入到连续的音频帧或视频帧中。
优选地，插入还包括如下操作：当内容是3D(三维)内容时，将水印插入到3D内容的左视频帧和/或右视频帧中。
优选地，插入还包括如下操作：从视频帧中的标志数据区域插入水印。
发明的有益效果
根据本发明，能够使用ACR技术来识别与实时广播节目有关的信息。
根据本发明，能够使用ACR功能来接收与广播节目有关的增强数据，从而具有改进的TV观看体验。
根据本发明，通过使用加水印技术来识别与广播节目有关的信息和接收增强数据，TV接收机能够单独执行ACR功能，而无需单独的ACR服务器。
根据本发明，即使当包括在水印中的信息量大时，能够根据包括在水印中的信息来对水印进行资料剖析并有效地利用水印。
根据本发明，能够通过组合加水印和加指纹，来有效地提供ACR服务。
附图说明
附图被包括进来以提供对本发明的进一步理解，附图图示本发明的实施方式并与说明书一起用来解释本发明的原理。
附图中：
图1是示出基于ACR的ETV服务系统的图；
图2是示出根据本发明的实施方式的ACR服务处理系统的图；
图3是示出根据本发明的另一实施方式的ACR服务处理系统的图；
图4是示出根据本发明的实施方式的接收机的结构的图；
图5是示出根据本发明的实施方式的ACR服务处理系统的结构的图；
图6是示出根据本发明的实施方式的ETV服务接收装置的结构的图；
图7是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图；
图8是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图；
图9是示出根据本发明的实施方式的数字加水印技术的流程的图；
图10是示出根据本发明的实施方式的ACR查询结果格式的图；
图11是示出根据本发明的实施方式的内容识别符(ID)的结构的图；
图12是示出根据本发明的实施方式的、使用加水印的接收机的操作的图；
图13是示出根据本发明的实施方式的水印提取处理的图；
图14是示出根据本发明的实施方式的水印信息的资料剖析的图；
图15是示出根据本发明的实施方式的、在视频帧中嵌入水印的方法的图；
图16是示出根据本发明的另一实施方式的、在视频帧中嵌入水印的方法的图；
图17是示出根据本发明的另一实施方式的、在视频帧中嵌入水印的方法的图；
图18是示出根据本发明的实施方式的、在音频帧中嵌入水印的方法的图；
图19是示出根据本发明的实施方式的、嵌入经资料剖析的水印的方法的图；
图20是示出根据本发明的实施方式的、在连续帧中嵌入水印的方法的图；
图21是示出根据本发明的实施方式的、提取插入到连续帧中的水印的方法的图；
图22是示出根据本发明的实施方式的、在3D视频中嵌入水印的方法的图；
图23是示出根据本发明的实施方式的、ACR服务提供系统的结构的图；
图24是示出根据本发明的实施方式的、使用广播者标志来提供ACR服务的方法的图；
图25是示出根据本发明的实施方式的广播者标志的图；
图26是示出根据本发明的实施方式的、使用广播者标志的ACR服务的图；
图27是示出根据本发明的实施方式的、使用标志和水印的ACR服务提供方法的图；
图28是示出根据本发明的实施方式的、处理与广播节目有关的ACR服务的方法的图；以及
图29是示出根据本发明的另一实施方式的、处理与广播节目有关的ACR服务的方法的图。
具体实施方式
现将对本发明的优选实施方式进行详细参考，本发明的优选实施方式的示例在附图中图示。
现将对本发明的优选实施方式进行详细参考，本发明的优选实施方式的示例在附图中图示。将参照附图来描述本发明的实施方式的构造和操作。在不限制本发明的精神和范围的情况下，将在至少一个实施方式中描述在附图中示出并在下文中描述的本发明的构造和操作。
尽管本发明中所使用的术语选自通常已知的并使用的术语，但是在此所使用的术语可以根据操作人员的意图或本领域惯例、新技术的出现等而改变。另外，在本发明的说明书中所提及的某些术语已经由申请人自行选择，在本说明书的相关部分中描述了这些术语的详细含义。此外，需要的是，不是简单地通过所使用的实际术语，而是通过每个术语内在的意义来理解本发明。
图1是示出基于ACR的ETV服务系统。
图1示出的基于ACR的ETV服务系统可以包括：广播者或内容提供者100、多频道视频节目分销者(MVPD)101、机顶盒(STB)102、诸如数字TV接收机这样的接收机103、和ACR服务器(或ACR解决方案提供者)104。接收机103可根据高级电视系统委员会(ATSC)的定义来操作，并可支持ACR功能。实时广播服务110可包括A/V内容。
数字广播服务可大体上划分为：由广播者100提供的地面广播服务；和由MVPD101提供的、诸如有线广播或卫星广播这样的多信道广播服务。广播者100可一起发送实时广播服务110和增强数据(或附加数据)120。在这种情况下，如图1所示，接收机103可通过MVPD 101和STB 102仅接收实时广播服务110，但不可以接收增强数据120。
因此，为了接收增强数据120，接收机103分析并处理作为实时广播服务110的A/V内容输出，并识别广播节目信息和/或广播节目相关元数据。使用所识别的广播节目信息和/或广播节目相关元数据，接收机103可以从广播者100或ACR服务器104接收增强数据(140)。在这种情况下，可以经由因特网协议(IP)网络150来发送增强数据。
如果从单独的ACR服务器104接收增强数据(140)，则在ACR服务器104与接收机103之间的机制中，在ATSC 2.0标准中所限定的触发声明性对象(TDO)当中的请求/响应模型可应用于ACR服务器104。在下文中，将描述TDO和请求/响应模型。
TDO指示被包括在广播内容中的附加信息。TDO用于及时触发广播内容内的附加信息。例如，如果广播试听节目，则可与广播内容一起显示由观众优选的试听参与者的当前排序。此时，试听参与者的当前级别的附加信息可以是TDO。可以通过与观众互动来改变这样的TDO或根据观众的意图来提供这样的TDO。
在标准ATSC 2.0的请求/响应ACR模型中，预期数字广播接收机(103)定期(例如，每5秒)产生内容的签名，并向ACR服务器(104)发送包括签名的请求。当ACR服务器(104)获取来自数字广播接收机(103)的请求时，该ACR服务器(104)返回响应。通信会话在请求/响应实例之间没有保持开启。在该模型中，ACR服务器(104)向客户发起消息是不可行的。
然而，在上述ETV服务系统中，在没有单独的ACR服务器的情况下，不可以提供ACR功能。因此，需要在接收机处独立地执行ACR功能，而不需要单独的ACR服务器的方法。
图2是示出根据本发明的实施方式的ACR服务处理系统的图。
根据图2所示的ACR服务处理系统，在没有ACR服务器的介入的情况下，可使用加水印来接收与实时广播有关的增强数据，以提供互动服务。
图2所示的ACR服务处理系统可包括：用于产生并发送数字服务信号的发射机200；和/或用于接收并处理数字服务信号的接收机210。发射机200可以是内容提供者或广播者，并且接收机210可以是诸如数字TV接收机这样的接收机。发射机200可包括：产生模块201、插入模块202和/或发送模块203。接收机210可包括接收模块211和/或提取模块212。
在下文中，将描述图2所示的ACR服务处理系统的每个模块的操作。
首先，发射机200的产生模块201可产生水印，并将水印插入到待发送的A/V内容的帧中。水印可包括：与水印插入到的内容的信道有关的信息，和/或诸如内容的增强数据的URL信息这样的内容信息(或元数据)。发送模块203可将水印插入到的内容发送到接收机210。
接收机210的接收模块211可接收水印插入到的内容，并将该内容传递到提取模块212。提取模块212可从所传递的内容的A/V帧中提取所插入的水印。
图3是示出根据本发明的另一实施方式的ACR服务处理系统的图。
更具体地，图3示出支持基于ACR的ETV服务的广播服务的构架。
如图所示3，ACR服务处理系统可包括：内容提供者或广播者300、MVPD 302、机顶盒303、接收机304、应用URL查寻服务器(ALS)306和应用服务器(AS)307。内容提供者300可包括水印插入器301，并且接收机304可包括水印提取器305。ALS306和AS 307在物理上从属于一个服务器。
图3所示的接收机304具有ACR功能。
内容提供者300可将与增强数据有关的元数据以水印的形式插入到实时发送的A/V内容中。即使当经由MVPD 302来接收A/V内容时，也可接收与增强数据有关的元数据以水印的形式插入到的A/V内容。具有ACR功能的接收机304可从通过MVPD302接收到的A/V内容中提取水印，并识别与实时节目广播和元数据有关的信息。接收机304可经由IP网络来接收增强数据。
在下文中，将描述图3所示的各个部件的操作。
广播者304可将与用于识别内容的内容ID(content ID)这样的增强数据有关的元数据以水印的形式插入到A/V内容中。更具体地，水印插入器301针对A/V内容搜索水印将适当地插入到的区域，并将水印插入到搜索到的区域中。
具有ACR功能的接收机304可通过MVPD 302和机顶盒303来接收水印所插入到的A/V内容，从A/V内容中提取水印并获取与增强数据有关的元数据。更具体地，接收机304的水印提取器305可针对接收到的A/V内容搜索水印插入到的区域，并提取插入到搜索到的区域中的水印。
接收机304可经由从所提取的水印中获取的元数据，来下载与实时广播节目有关的增强数据。更具体地，接收机304可经由IP网络来访问ALS 306，以接收根据查询的相关应用的URL。根据该应用的URL，接收机304可访问用于管理应用的AS306，并下载从属于来自AS 306的应用的增强数据。
图4是示出根据本发明的实施方式的接收机的结构的图。
更具体地，图4示出使用加水印来支持基于ACR的ETV服务的接收机的构造的实施方式。
如图4所示，根据本发明的实施方式的、支持基于ACR的ETV服务的接收机可包括：输入数据处理器、ATSC主服务处理器、ATSC移动/手持(MH)服务处理器、和/或ACR服务处理器。输入数据处理器可包括：调谐器/解调器400和/或残留边带(VSB)解码器401。ATSC主服务处理器可包括：传输协议(TP)多路分解器402、非实时(NRT)指南信息处理器403、数字存储媒体命令和控制(DSM-CC)可寻址部分分析器404、信息提供者(IP)/用户数据报协议(UDP)分析器405、FLUTE分析器406、元数据模块407、文件模块408、电子服务指南(ESG)/数据载波检测(DCD)处理器409、存储控制模块410、文件/TP交换器411、回放控制模块412、第一存储装置413、IP分组存储控制模块414、因特网访问控制模块415、IP接口416、实时/记录交换器417、文件(对象)解码器418、TP/封装基本流(PES)解码器420、节目特定信息(PSI)/节目和系统信息协议(PSIP)解码器421、和/或电子节目指南(EPG)处理器422。ATSC MH服务处理器可包括：主/MH/NRT交换器419、MH基带处理器423、MH物理适配处理器424、IP协议堆栈425、文件处理器426、ESG处理器427、第二存储装置428、和/或流处理器429。ACR服务处理器可包括：主/MH/NRT交换器419、A/V解码器430、A/V处理模块431、外部输入处理器432、水印提取器433、和/或应用434。
在下文中，将描述每个处理器的各模块的操作。
在输入数据处理器中，调谐器/解调器400可调谐并解调从天线接收到的广播信号。通过该处理，可以提取VSB符号。VSB解码器401可解码由调谐器/解调器400提取的VSB符号。
VSB解码器401可根据解码来输出ATSC主服务数据和MH服务数据。可将ATSC主服务数据传递到ATSC主服务处理器，并由该ATSC主服务处理器来处理；并且可将MH服务数据传递到ATSC MH服务处理器，并由该ATSC MH服务处理器来处理。
ATSC主服务处理器可处理主服务信号，以便将不包括MH信号的主服务数据传递到ACR服务处理器。TP多路分解器402可多路分解经由VSB信号发送的ATSC主服务数据的传输分组，并将多路分解后的传输分组传递到其它处理模块。也就是说，TP多路分解器402可多路分解被包括在传输分组中的各种信息并传递信息，使得广播信号的元素由广播接收机的模块分别处理。多路分解后的数据可包括：实时流、DSM-CC可寻址部分和/或NRT服务表/A/90&92信令表。更具体地，如图所示4，TP多路分解器402可将实时流输出到实时/记录交换器417，将DSM-CC可寻址部分输出到DSM-CC可寻址部分分析器404，并且将NRT服务表/A/90&92信令表输出到NRT指南信息处理器403。
NRT指南信息处理器403可从TP多路分解器402接收NRT服务表/A/90&92信令表，提取FLUT会话信息并将该FLUT会话信息传递到DSM-CC可寻址部分分析器404。DSM-CC可寻址部分分析器404可从TP多路分解器402接收DSM-CC可寻址部分，从NRT指南信息处理器403接收FLUT会话信息并处理DSM-CC可寻址部分。IP/UDP分析器405可接收从DSM-CC可寻址部分分析器404中输出的数据，并分析根据IP/UDP发送的IP数据报。FLUTE分析器406可接收从IP/UDP分析器405中输出的数据，并处理用于发送以异步分层编码(ALC)对象的形式发送的数据服务的FLUTE数据。元数据模块407和文件模块408可接收从FLUTE分析器406中输出的数据，并处理元数据和所恢复的文件。ESG/DCD处理器409可接收从元数据模块407中输出的数据，并处理电子服务指南和/或与广播节目有关的下行链路信道描述符。所恢复的文件可以以诸如ATSC 2.0内容和参考指纹这样的文件对象的形式传递到存储控制模块410。该文件对象可由存储控制处理模块410来处理，并被划分为待存储在第一存储装置413中的TP文件和常规文件。回放控制模块412可更新所存储的文件对象，并将该文件对象传递到文件/TP交换器411，以便对常规文件和TP文件进行解码。文件/TP交换器411可将常规文件传递到文件解码器418，并将TP文件传递到实时/记录交换器417，使得常规文件和TP文件通过不同路径进行解码。
文件解码器418可对常规文件进行解码，并将解码后的文件传递到ACR服务处理器。可将解码后的常规文件传递到ACR服务处理器的主/MH/NRT交换器419。在实时/记录交换器417的控制下，可将TP文件传递到TP/PES解码器420。TP/PES解码器420对TP文件进行解码，并且PSI/PSIP解码器421再对解码后的TP文件进行解码。EPG处理器422可根据ATSC来处理解码后的TP文件并处理EPG服务。
ATSC MH服务处理器可处理MH信号，以便将ATSC MH服务数据发送到ACR服务处理器。更具体地，MH基带处理器423可将ATSC MH服务数据信号转换为适合于传输的脉冲波形。MH物理适配处理器424可处理呈适于MH物理层形式的ATSCMH服务数据。
IP协议堆栈模块425可接收从MH物理适配处理器424中输出的数据，并处理用于因特网传输/接收的、根据通信协议的数据。文件处理器426可接收从IP协议堆栈模块425中输出的数据，并处理应用层的文件。ESG处理器427可接收从文件处理器426中输出的数据，并处理移动ESG。另外，第二存储装置428可接收从文件处理器426中输出的数据，并存储文件对象。另外，根据ATSC，从IP协议堆栈模块425中输出的数据中的某些可成为用于接收机的ACR服务的数据，而不是移动ESG服务的数据。在这种情况下，流处理器429可处理经由实时传输协议(RTP)接收到的实时流，并将该实时流传递到ACR服务处理器。
ACR服务处理器的主/MH/NRT交换器419可接收从ATSC主服务处理器和/或ATSC MH服务处理器中输出的信号。A/V解码器430可对从主/MH/NRT交换器419接收到的压缩A/V数据进行解码。可将解码后的A/V数据传递到A/V处理模块431。
外部输入处理器432可处理通过外部输入接收到的A/V内容，并将该A/V内容发送到A/V处理模块431。
A/V处理模块431可处理从A/V解码器430和/或外部输入处理器432接收到的、待在屏幕上显示的A/V数据。在这种情况下，水印提取器433可从A/V数据中提取以水印的形式插入的数据。可将所提取的水印数据传递到应用434。该应用434可提供基于ACR功能的增强服务，识别广播内容并提供与其关联的增强数据。如果应用434将增强数据传递到A/V处理模块431，则该A/V处理模块431可处理待在屏幕上显示的、接收到的A/V数据。
图5是示出根据本发明的实施方式的ACR服务处理系统的结构的图。
更具体地，图5示出当接收机500通过诸如机顶盒这样的外部装置的外部输入来接收地面信道时，使用水印来获取节目信息的操作。
图5所示的ACR服务处理系统可包括：接收机500、CE服务器501、广播者或内容提供者502和应用服务器503。接收机500可包括：A/V处理器510，水印提取器520和应用模块530。CE服务器501可包括水印管理器511。此外，接收机500可具有ACR功能。
A/V处理器510将通过外部输入接收到的A/V内容传递到水印提取器520，并且水印提取器520可从A/V内容中提取以水印的形式插入的数据，并访问应用服务器503。此时，CE服务器501可管理加水印相关模块和微代码。
根据本发明的一个实施方式的微代码涉及用于提取插入到A/V内容中的水印的代码，并且可由A/V解码器芯片和/或原始数据处理芯片动态地下载。接收机可压缩并存储必要的微代码中的一个或多个，或通过下载接口来下载微代码中的一个或多个。下载接口可根据芯片类型而不同地实施。
在下文中，将描述图5所示的每个部件的操作。
接收机500的水印提取器520可从音频内容或视频内容中提取水印，或使用音频内容和视频内容来提取水印。所提取的水印可包括频道信息和/或内容信息。内容信息可包括与ATSC 2.0服务中使用的内容有关的信息。
应用程序模块530可调谐到如下信道，该信道用于发送与该信道有关的内容，和/或发送基于信道消息和从水印中所提取的内容信息的元数据，并接收内容信息。另外，应用模块530可经由IP网络来接收与信道关联的内容和/或元数据。根据本发明的一个实施方式，该信道可包括ATSC消息处理器(MH)信道。
CE服务器501可管理并更新加水印相关微代码和/或软件。即，CE服务器501可根据广播者500的协议连续地添加、删除或更新相关微代码和/或软件。如果从接收机500接收到请求或更新CE服务器501，则CE服务器501可通知接收机500请求被接收到或CE服务器501被更新，并下载新代码。
水印提取器520可实现为在接收机500的芯片上操作的微代码或软件模块。可从CE服务器501上连续地下载新微代码或软件模块。
图6至图8是示出根据本发明的实施方式的ETV服务接收装置的结构的图。
图6至图8是示出如下的接收机的结构的图，该接收机用于提取基于视频解码器和/或音频解码器的芯片中的微代码插入到实时内容的水印，并识别基于水印的内容。在下文中，将参照图6至图8来描述本发明的实施方式。
图6是示出根据本发明的实施方式的ETV服务接收装置的结构的图。
根据图6所示的本发明的实施方式的ETV服务接收装置可包括：遥控器600、遥控器接收机601、UI模块602、网络接口603、微代码下载器604、网络浏览器605、触发器处理器606、微处理器607、微代码接口(mif)608、音频解码器609、视频解码器610、图形处理器611、应用612、扬声器613、显示模块614、天线615、调谐器616、解调器611、和/或系统解码器618。系统解码器618可以是MPEG-2 TS解码器。解调器617可以是VSB解调器或数字视频广播(DVB)解调器。音频解码器609和视频解码器610中的每个可包括微代码接口608。
如图6所示，ETV服务接收装置可使用在视频解码器或音频解码器的芯片上运行的微代码从通过地面波实时地发送的A/V内容中提取水印，将所提取的水印发送到应用并接收增强服务。可通过微代码下载器604来从外部装置下载微代码。可经由微代码接口608在视频解码器609或音频解码器610的芯片上动态地下载微代码。
在下文中，将描述图6所示的ETV服务接收装置的部件之间的操作。
遥控器接收机601可通过来自遥控器600的红外(IR)光来接收观众的请求信号，并使用键控代码来将该信号发送到UI模块602。该UI模块602和/或遥控器接收机601可使用浏览器键控代码来将信号传递到网络浏览器605。可将通过UI模块602的信号传递到图形处理器601。
调谐器616调谐从天线615接收的信号，并且解调器617可恢复调谐后的信号的波形。解码器618可对恢复后的信号进行解码，并将该解码后的信号传递到触发器处理器606。该触发器处理器606可将解码后的信号处理成触发器数据，并将该触发器数据发送到网络浏览器605。
如果将传递到网络浏览器605的信号传递到微代码下载器604，则可下载微代码并将该微代码传递到微代码接口608。可将通过微代码接口608的微代码和解码后的信号划分为音频信号和视频信号，该视频信号和视频信号被分别传递到音频解码器609和视频解码器610。音频解码器609和视频解码器610的微代码接口619可使用微代码来提取插入到A/V内容中的水印。
可将所提取的水印传递到应用612，可将音频信号传递到扬声器613，并且可将视频信号与从图形处理器611接收到的图形信号一起输出到显示模块614。
图7是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图。
根据图7所示的本发明的实施方式的ETV服务接收装置可包括：遥控器700、遥控器接收机701、UI模块702、网络接口703、微代码下载器704、网络浏览器705、触发器处理器706、微处理器707、微代码接口(mif)708、音频解码器709、视频解码器710、图形处理器711、应用712、扬声器713、显示模块714、天线715、调谐器716、解调器717、系统解码器718、音频后处理器和放大器719、和/或视频显示处理器720。根据本发明的实施方式，系统解码器718可包括MPEG-2 TS解码器。根据本发明的实施方式，解调器717可包括VSB解调器和/或DVB解调器。音频后处理器和放大器719和视频显示处理器720中的每个可包括微代码接口708。
如图所示7，ETV服务接收装置可在后处理芯片(不是音频解码器或视频解码器的芯片)上通过实时微代码提取插入到A/V内容中的水印。根据本发明的实施方式，后处理芯片可包括音频后处理器和放大器719以及视频显示处理器720。ETV服务接收装置可使用所提取的水印来自动地识别A/V内容。ETV服务接收装置可通过微代码下载器704来从外部装置下载微代码。另外，ETV服务接收装置的音频或视频后处理芯片可通过微代码接口708来下载微代码。
在下文中，将描述图7所示的ETV服务接收装置的部件之间的操作。
遥控器接收机701可通过来自遥控器700的红外(IR)光来接收观众的请求信号，并使用键控代码来将接收到的信号发送到UI模块702。UI模块702和/或遥控器接收机701可使用浏览器键控代码来将该信号传递到网络浏览器705。可将通过UI模块702的信号传递到图形处理器701。
调谐器716调谐从天线715接收到的信号，并且解调器717可恢复调谐后的信号的波形。解码器718可对所恢复的信号进行解码，并将解码后的信号传递到触发器处理器706。该触发器处理器706可将解码后的信号处理成触发器数据，并将该触发器数据发送到网络浏览器705。
如果将传递到网络浏览器705的信号传递到微代码下载器704，则可下载微代码并通过微代码接口708来将该微代码传递到音频后处理器和放大器719和/或显示处理器720的微代码接口708。
可将解码后的信号划分成音频信号和视频信号，将该音频信号和视频信号分别传递到音频解码器709和视频解码器710。可将由音频解码器709解码的音频信号传递到音频后处理器和放大器719。可将由视频解码器710解码的视频信号传递到视频显示处理器720。
如果音频后处理器和放大器719和/或显示处理器720的微代码接口708接收通过微代码接口708的音频信号和/或视频信号，则可通过微代码来提取插入到音频和/或视频内容中的水印。
可将所提取的水印传递到应用712，可将音频信号输出到扬声器713，并且可将视频信号输出到显示模块714。
图8是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图。
根据图8所示的本发明的实施方式的ETV服务接收装置可包括：遥控器800、遥控器接收机801、UI模块802、网络接口803、微代码下载器804、网络浏览器805、触发器处理器806、微处理器807、微代码接口(mif)808、音频解码器809、视频解码器810、图形处理器811、应用812、扬声器813、显示模块814、音频后处理器和放大器815、机顶盒817和外部输入处理器818。该外部输入处理器818可通过高清晰度多媒体接口(HDMI)来接收外部输入。
如图8所示，即使当A/V内容不是通过地面波发送，而是经由诸如机顶盒817这样的外部装置来接收时，ETV服务接收装置也可使用微代码来自动地识别A/V内容并接收ETV服务。即，如果从外部装置接收到A/V内容，则ETV服务接收装置可使用微代码来实时从A/V内容中提取水印。此时，视频或音频后处理芯片可通过微代码接口808来下载微代码。可将所提取的水印传递到应用812，并且接收机可使用包括在水印中的数据来获取增强数据。根据本发明的实施方式，后处理芯片可包括音频后处理器和放大器815和/或视频显示处理器816。
在下文中，将描述图8所示的ETV服务接收装置的部件之间的操作。
遥控器接收机801可通过来自遥控器800的红外(IR)光来接收观众的请求信号，并使用键控代码来将所接收到的信号发送到UI模块802。UI模块802和/或遥控器接收机801可使用浏览器键控代码来将信号传递到网络浏览器805。如果将传递到网络浏览器805的信号传递到微代码下载器804，则ETV服务接收装置可下载微代码，并将该微代码传递到微代码接口808。可将通过UI模块802的信号传递到图形处理器811。
可通过触发器处理器806将通过机顶盒从外部装置接收到的信号处理成触发器数据(而不通过外部输入处理器818进行解码)，并可将该触发器数据递送给网络浏览器805。另选地，可将通过外部输入处理器818的外部输入信号划分为音频信号和视频信号，该音频信号和视频信号被分别传递到音频解码器809和视频解码器810。此时，音频解码器809可对音频信号进行解码。
可将解码后的音频信号传递到音频后处理器和放大器819，并且可将解码后的视频信号传递到视频显示处理器816。音频后处理器和放大器819和显示处理器816的微代码接口808可使用该微代码来提取插入到音频和/或视频内容中的水印。
可将所提取的水印传递到应用812，可将音频信号输出到扬声器813，并且可将视频信号输出到显示模块814。
图9是示出根据本发明的实施方式的数字加水印技术的流程的图。
数字加水印是以难以移除的方式将信息嵌入到数字信号中的处理。例如，信号可以是音频、图片或视频。如果复制信号，则副本中也携带有该信息。信号可同时携带若干个不同的水印。
在可视的加水印中，图片或视频中的信息是可视的。典型地，信息是识别媒体的所有者的文本或标志。当电视广播商将其标志(logo)添加到所发送的视频的角部时，这也是可视的水印。
在不可视的加水印中，信息作为数字数据被添加到音频、图片或视频中，虽然能够检测到一定量的信息被隐藏，但它无法如此察觉。水印可旨在广泛使用并且因此使其易于检索，或者它可以是信息隐藏(Steganography)的形式，其中，一方针对数字信号中嵌入的秘密消息进行通信。在任一情况下，如在可视的加水印中，目标是以难以移除的方式将所有权或其它描述性信息附加到信号中。也能够以在个体之间隐蔽通信的方式使用隐藏嵌入信息。
加水印的一个应用是在版权保护系统中，该版权保护系统旨在防止或阻止数字媒体的未经授权的复制。在此用途中，在进行复制之前，复制装置从信号中获取水印；装置根据水印的内容来作出是否复制的决定。另一应用是在源跟踪中。将水印嵌入到各分销(distribution)点处的数字信号中。如果以后发现工作的副本，则能够从副本中获取水印，且可知分销源。已报道该技术用于检测非法复制的电影的源。
具有描述性信息的数字照片的注释是不可视加水印的另一应用。
虽然用于数字媒体的某些文件格式能够包括称为元数据的附加信息，但是数字加水印的不同之处在于在信号本身中携带数据。
虽然在某些情形下短语数字水印(phrase digital watermark)表示被加水印的信号和覆盖信号之间的差异，但是待嵌入的信息称为数字水印。待嵌入水印的信号称为主机信号。
加水印系统通常被划分成三个不同的步骤：嵌入901、侵袭(attack)902和检测(通常称为提取)903。
在嵌入901中，算法接受待嵌入的数据和主机，并产生加水印的信号。
然后，发送或存储加水印的信号，通常发送到另一个人。如果此人做出修改，则这称为侵袭902。虽然修改可能不是蓄意的，但是术语侵袭由版权保护应用而引起，其中，盗版者试图通过修改来移除数字水印。存在很多可能的修改，例如，数据的有损压缩、剪切图像或视频，或有意地添加噪声。
检测903是应用于受侵袭的信号以试图从受侵袭的信号中提取水印的算法。如果该信号在传输期间未被修改，则水印仍然存在，并且能够提取该水印。在鲁棒加水印应用中，即使修改是强的，提取算法应该也能够正确地产生水印。在脆弱加水印中，如果对信号做出任何改动，则提取算法会无效。
即使通过任何数目的转化而劣化，如果能够从被标记信号中可靠地检测到嵌入信息，则数字水印称为针对转化鲁棒。典型的图像劣化是：JPEG压缩、旋转、裁剪、增加噪声和量化。对于视频内容，通常将时间修改和MPEG压缩添加到该列表中。如果加水印的内容在感觉上与原始的、未加水印的内容等同，则水印称为难以察觉的。通常，容易创建鲁棒水印或者难以察觉的水印，但是已证明鲁棒和难以察觉水印的创建是相当有挑战性的。已提出鲁棒难以察觉的水印作为用于保护数字内容的工具，例如，作为专业视频内容中的嵌入的“不允许拷贝”标志。
数字加水印技术能够以若干方式进行分类。
首先，如果在最轻微修改之后，未检测到水印，则该水印称为脆弱水印(鲁棒性)。该脆弱水印通常用于纂改检测(完整性证明)。可清楚察觉到的对原始工作的修改通常不称为水印，而称为一般性的条形码。如果水印耐受良性(benign)转化，但在恶性转化后无法检测，则该水印称为半脆弱。半脆弱水印通常用来检测恶性转化。如果水印耐受指定级的转化，则该水印称为鲁棒。可以在副本保护应用中使用鲁棒水印来携带副本并访问控制信息。
第二，如果原始覆盖信号和被标记的信号在感觉上是(接近)不可区分的(感知度Perceptibility)，则水印称为难以察觉的。如果在被标记的信号中水印的存在是明显的，而非侵入式的(non-intrusive)，则水印称为可察觉的。
第三，关于能力，嵌入的消息的长度确定两种不同的主要类型的水印方案：
该消息在概念上是零比特长度，并系统被设计为以便检测被标记对象中水印的存在或不存在。这种加水印方案通常称为斜体零比特(Italic zero-bit)或斜体存在加水印方案。有时，这类加水印方案称为1比特水印，因为1表示存在(而0表示不存在)水印。
该消息是n比特长流(具有n＝︱m︱)或M＝{0，1}n并在水印中进行调制。这种方案通常称为多比特加水印或非零比特加水印方案。
第四，存在用于嵌入步骤的若干种方法。如果通过附加修改来获取已标记的信号，则该加水印方法称为扩频。已知扩频水印是适度鲁棒，但是由于主机干扰所以也具有低信息容量。如果通过量化来获取已标记的信号，则该加水印方法称为量化型。量化水印具有低鲁棒性，但由于抑制主机干扰，所以具有高信息容量。如果由与扩频方法类似但具体地在空间域中嵌入的附加修改来嵌入所标记的信号，则该加水印方法称为幅度调制。图10是示出根据本发明的实施方式的ACR查询结果格式的图。
根据现有ACR服务处理系统，如果广播者一起发送用于实时服务的内容和用于ETV服务的增强数据，并且TV接收机接收该内容和ETV服务，则可接收用于实时服务的内容，但不可接收增强数据。
在这种情况下，根据本发明的本实施方式，能够使用IP网络通过独立的IP信令信道来解决现有ACR处理系统的问题。即，TV接收机可经由MVPD来接收用于实时服务的内容，并经由独立的IP信令信道来接收增强数据。
在这种情况下，根据本发明的实施方式，IP信令信道可被构造为使得以二进制流的形式来传递并处理PSIP流。此时，IP信令信道可被构造为使用挽方法(pullmethod)或推方法(push method.)。
可根据HTTP请求/响应方法来构造挽方法的IP信令信道。根据HTTP请求/响应方法，PSIP二进制流可被包括在用于HTTP请求信号的HTTP响应信号中，并通过SignalingChannelURL(信令信道URL)来发送。在这种情况下，轮询周期可根据作为ACR查询结果传递的元数据中的轮询周期(Polling_cycle)来进行周期性地请求。另外，可将待更新的与时间和/或周期有关的信息包括在信令信道中并发送。在这种情况下，接收机可基于从IP信令信道接收到的更新的时间和/或循环信息，来从服务器请求信令信息。
可使用XMLHTTP请求(XMLHTTPRequest)应用编程接口(API)来构造推方法的IP信令信道。如果使用XMLHTTP请求API，则能够从服务器异步地接收更新。这是如下的方法：如果已改变信令信息，则在接收机处，通过XMLHTTP请求对象从服务器异步地请求信令信息；并且在服务器处，响应于此，经由该信道来提供信令信息。如果会话的准备时间存在限制，则可产生会话超时响应，并且接收机可再次识别会话超时响应、请求信令信息，并维护接收机与服务器之间的信令信道。
为了通过IP信令信道来接收增强数据，接收机可使用加水印和加指纹来操作。加指纹涉及如下技术，该技术用于将与内容购买者(而不是内容提供者)有关的信息插入到内容中。如果使用加指纹，则接收机可搜索参考数据库来识别内容。识别内容的结果称为ACR查询结果。ACR查询结果可包括提供给TV观众的查询和该查询的回复信息，从而实现ACR功能。接收机可基于ACR查询结果提供ETV服务。
可将与ACR查询结果有关的信息插入/嵌入到/在基于水印的ACR系统上的A/V内容中，并可发送该消息。接收机可通过水印提取器来提取并获取ACR查询结果信息，并且然后提供ETV服务。在这种情况下，可提供ETV服务，而不需要单独的ACR服务器，并且可省略通过IP网络的查询。
图10是指示根据本发明的实施方式的ACR查询结果的XML方案的图。如图10所示，ACR查询结果的XML格式可包括结果代码(result code)元素1010，ACR查询结果类型1000可包括内容ID(content ID)元素1001、网络时间协议(NTP：networktime protocol)时间戳(NTP timestamp)元素1002、信令信道信息(signaling channelinformation)元素1003、服务信息元素(service information)1004和其它识别符元素1005。信令信道信息元素1003可包括：信令信道URL(signaling channel URL)元素1013、更新模式(update mode)元素1023和轮询周期(polling cycle)元素1033，并且服务信息元素1004可包括：服务名称(service name)元素1014、服务标志(servicelogo)元素1024和服务描述(service description)元素1034。
在下文中，将详细描述图10所示的ACR查询结果的XML方案的图，并将描述XML方案的示例。
结果代码元素1010可指示ACR查询的结果值。如果无法以代码值的形式进行查询，则这可指示查询成功或失败以及失败原因。例如，如果结果代码元素1010的值是200，则这可指示查询成功并返回与其相对应的内容信息；并且如果结果代码元素1010的值是404，则这可指示没有找到内容。
内容ID元素1001可指示用于全局地和唯一地识别内容的识别符，并可包括全局服务识别符(global service identifier)元素，该全局服务识别符元素是用于识别服务的识别符。
NTP时间戳元素1002可指示以NTP时间戳的形式来提供用于ACR查询的示例帧间隔的特定点的时间。这里，特定点可以是示例帧的起点或终点。NTP表示如下协议，该协议用于通过因特网使计算机的时间与参考时钟同步，并可用于在计算机网络上分布的客户和时间服务器和之间的时间同步。由于NTP使用通用协调时间(UTC)并保证10毫秒的精度，所以接收机可准确地处理帧同步操作。
信令信道信息元素1003可指示在用于ETV服务的IP网络上的独立信令信道的访问信息。
更具体地，信令信道URL元素1013(其是信令信道信息元素1003的子元素)可指示信令信道的URL信息。该信令信道URL元素1013可包括作为子元素的更新模式元素1023和轮询周期元素1033。更新模式元素1023可指示经由IP信令信道来获取信息的方法。例如，在挽模式中，接收机可根据挽方法定期执行轮询来获取信息，并且在推模式中，服务器可根据推方法将信息发送到接收机。如果更新模式元素1023是挽模式，则轮询循环元素1033可根据挽方法来指示接收机的基本轮询周期值。然后，接收机可指定基本轮询周期值，并以随机时间间隔将请求信号发送到服务器，从而防止在服务器中过载请求。
服务信息元素1004可指示与广播频道有关的信息。内容id元素1001可指示观众当前正在观看的服务的识别符，并且服务信息元素1004可指示与广播频道有关的详细信息。例如，由服务信息元素1004指示的详细信息可以是频道名称、标志、或文本说明。
更具体地，服务名称元素1014(其是服务信息元素1004的子元素)可指示频道名称，服务标志元素1024可指示频道标志，并且服务描述元素1034可指示频道文本说明。
根据本发明的实施方式的图10所示的ACR查询结果的元素的XML方案示出如下。
<xs：complexType name＝″ACR-ResultType″>
<xs：sequence>
<xs：element name＝″ContentID″type＝″xs：anyURI″/>
<xs：element name＝″NTPTimestamp″type＝″xs：unsignedLong″/>
<xs：element name＝″SignalingChannelInformation″>
<xs：complexType>
<xs：sequence>
<xs：element name＝″SignalingChannelURL″maxOccurs＝″unbounded″>
<xs：complexType>
<xs：simpleContent>
<xs：extension base＝″xs：anyURI″>
<xs：attribute name＝″UpdateMode″>
<xs：simpleType>
<xs：restriction base＝″xs：string″>
<xs：enumeration value＝″Pull″/>
<xs：enumeration value＝″Push″/>
</xs：restriction>
</xs：simpleType>
</xs：attribute>
<xs：attribute name＝″PollingCycle″type＝″xs：unsignedInt″/>
</xs：extension>
</xs：simpleContent>
</xs：complexType>
</xs：element>
</xs：sequence>
</xs：complexType>
</xs：element>
<xs：element name＝″ServiceInformation″>
<xs：complexType>
<xs：sequence>
<xs：element name＝″ServiceName″type＝″xs：string″/>
<xs：element name＝″ServiceLogo″type＝″xs：anyURI″minOccurs＝″0″/>
<xs：element name＝″ServiceDescription″type＝″xs：string″minOccurs＝″0″maxOccurs＝″unbounded″/>
</xs：sequence>
</xs：complexType>
</xs：element>
<xs：any namespace＝″##other″processContents＝″skip″minOccurs＝″0″maxOccurs＝″unbounded″/>
</xs：sequence>
<xs：attribute name＝″ResultCode″type＝″xs：string″use＝″required″/>
<xs：anyAttribute processContents＝″skip″/>
</xs：complexType>
图11是示出根据本发明的实施方式的内容识别符(ID)的结构的图。
图11示出根据本发明的实施方式的、根据ATSC标准的内容ID的语法结构。ATSC内容ID可用作用于识别由接收机接收的内容的识别符。
ATSC内容识别符是由TSID(发送用户识别)和具有唯一性的周期的“房屋号码”构成的结构。“房屋号码”是TSID的持有者希望的、如在此约束的任何号码。号码对于TSID的各值是唯一的。ATSC内容识别符结构的语法将在图11中限定。
“TSID”(16位无符号整数字段)应包括transport_stream_id(传输流id)的值。对于美国，这些值的分配机构是在墨西哥、加拿大和美国这些国家当中由正式协议建立的FC范围。由适当机构来建立在其它区域中的值。
“end_of_day(结束日期)”字段(5位无符号整数)应被设置为通用协调时间(UTC)中的天的小时，在该时间中，广播日结束并在该时间过后，content_id(内容_id)值可根据unique_for(唯一_用于)来重复使用。该字段的值应在0？23范围内。值24？31被保留。注意的是，对于每个广播者，期望该字段的值是静态的。
“unique_for”字段(是9位无符号整数)应被设置为相对于end_of_day所指示的小时进行测量(四舍五入)的天数，在此期间content_id值未被重新指定给不同的内容。该值应在1到511范围内。应当禁止值0。值511应具有“无限地”的特殊含义。注意的是，对于每个广播者，期望该字段的值基本上是静态的，仅当房屋编号的方法改变时才改变。另外注意的是，解码器能够将存储的content_values(内容_值)处理为唯一的，直到unique_for字段期满，这能够通过在end_of_day的每一天递减所有存储的unique_for字段直到该字段达到0来实现。
“content_id”字段，根据房屋号码系统或用于TSID值的系统，将该可变长度字段设置为识别符的值。在由在end_of_day和unique_for字段中的值所设定的唯一性的周期内，并不是每个这样的值都应被分配给不同内容。识别符可以是人可读和/或二进制值的任何组合，并且不需要精确匹配的房屋号码的形式，不超过242字节1。
图12是示出根据本发明的实施方式的、使用加水印的接收机的操作的图。
作为提供支持ACR功能的ETV服务的方法，在本发明提出了使用加水印的方法。图12是示出用于使用加水印来执行ACR功能的接收机的模块之间的操作的图。
如图所示12，使用加水印的接收机可包括：移动/手持(M/H)接收模块1200、因特网模块1201、存储模块1202、外部输入模块1203、水印提取模块1204、应用模块1205、A/V处理模块1206和显示模块1207。
如图所示12，接收机可使用水印来识别内容提供者(CP)，并处理由已识别的CP提供的增强服务。
在根据本发明的实施方式的接收机中，水印提取模块1204可通过从由M/H接收模块1200通过外部输入接收到的A/V信号提取水印，并获取包括在A/V信号中的内容信息。在下文中将描述可被包括在根据本发明的实施方式的水印中的内容信息。
可通过应用模块1205向观众显示所提取的内容信息，并且观众可使用所显示的内容信息通过M/H或因特网，来有选择地接收用于增强服务的增强数据。
虽然图12未示出，但是可将所接收的增强数据存储在存储模块1202中待用于ACR服务。在这种情况下，将内容信息和元数据存储在存储模块1202中，并可将所存储的内容信息和元数据用于接收A/V回放时的相关增强数据。另选地，接收机可访问内容提供者，或在A/V回放时通过M/H调谐来新接收增强数据。
在下文中，将描述图12所示的每个模块的操作，并且然后将描述可从水印中提取的内容信息。
M/H接收模块1200可通过M/H信号来从内容提供者接收增强数据。
因特网模块1201可经由因特网从内容提供者接收增强数据。
存储模块1201可存储如下数据，该数据包括从内容提供者处接收到的增强数据和/或A/V信息。如果水印提取模块1204提取水印，则该水印可在存储装置中显示并存储作为特定元数据。
外部输入模块1203可通过外部输入来接收内容提供者的A/V信号。
水印提取模块1204可从由外部输入模块1203接收到的A/V信号提取水印。如果将内容存储在TV的存储器中，并且然后进行回放，则在回放时可提取水印。
应用模块1205可接收如下水印，该水印由水印提取模块1204从包括从内容提供者处接收到的和存储在存储模块1201中的增强数据和/或A/V信息的数据中提取，并且应用模块1205可使用与该水印有关的信息来处理包括A/V信息和/或增强数据的数据。
A/V处理模块1206可通过音频解码器和/或视频解码器来对A/V信号进行解码，以处理从应用模块1205接收到的数据。
显示模块1207可以以屏上显示(OSD)方式在接收机的屏幕上显示由A/V处理模块1206处理的数据。
在下文中，将描述根据本发明的一个实施方式的内容信息。
通过水印提取的内容信息可包括与内容提供者有关的信息。更具体地，内容信息可包括：内容提供者或广播者的ID信息、内容的ID信息、与内容的时间有关的信息、内容寿命周期信息、和/或与增强数据有关的信息。在根据本发明的一个实施方式的、使用加指纹的ACR服务中，ACR查询结果可用作用于经由ACR功能获取的内容的元数据。
CP ID信息可表示用于识别内容提供者或广播者的识别符。根据本发明的实施方式，CP ID信息用作主识别符。CP ID信息可包括用于识别制作者名称和制作者的序列号、和/或用于识别国家、地区和服务属性(类型)的序列号的集合。根据本发明的一个实施方式，用于ATSC节目和系统信息协议(PSIP)的TS-id可用作CP ID信息。
内容ID信息可表示用于识别内容而不是内容提供者的识别符。更具体地，内容ID信息可包括用于识别内容名称和内容的序列号、和用于识别内容属性(类型)的序列号的集合。根据本发明的一个实施方式，用于ATSC PSIP的event_id可用作内容ID信息。
CP ID信息可被包括在具有高于内容ID信息的频率的频率的水印中，并CP ID信息可被构造为更容易提取。在这种情况下，CP ID信息可包括被进一步压缩的信息或更详细的信息。
时间信息可指示与内容有关的时间信息。更具体地，时间信息可包括：开始时间、持续时间，结束时间、和/或表示总服务回放时间的前导时间。根据本发明的一个实施方式，时间信息可以基于UTC或GPS，并且可以以诸如ATSC PSIP的STT这样的另一格式来构造。此外，当提供诸如同步小控件(synchronized widget)这样的服务时，时间信息可用于在显示处理中的同步。此外，时间信息可用于由有线或卫星个人视频记录器(PVR)机顶盒来对内容进行重新安排。
内容寿命周期信息可包括与寿命周期(在该寿命周期内服务是有效的)有关的信息。
与增强数据有关的信息可包括：与增强数据的存在/不存在和水印的使用有关的信息；和/或与用于接收增强数据的路径有关的信息。更具体地，与增强数据有关的信息可包括：与由内容提供者提供的增强数据的存在有关的信息；和指示水印是否用于防止非法复制和发布的许可、收视率调查、或内容提供者识别的附加服务的信息。与用于接收增强数据的路径有关的信息可包括：指示是否使用IP网络或诸如移动装置这样的另一介质的信息。更具体地，如果经由IP网络来接收增强数据，则可包括IP地址和/或URL信息；并且如果经由移动装置来接收增强数据，则可包括：频率信息、标准信息(ATSC MH、DMB、媒体流、DVB-H、NGH等)和/或信道信息。
图13是示出根据本发明的实施方式的水印提取处理的图。
诸如常规数字TV接收机这样的接收机1320通过HDMI或组件连接来从安装在接收机1320中的有线或卫星机顶盒1310接收A/V信号。在下文中，根据图13所示的本发明的实施方式，将在机顶盒1310和接收机1320中的阶段描述提取水印和识别CP的操作。
如果将接收机1320的输入模式设置为外部输入模式，则接收机1320可搜索用于识别内容提供者或广播者的CP ID。如果开启机顶盒1310，并转到一频道，则接收机1302可检测CP ID。接收机1302可检测由被检测的内容提供者提供的内容的内容ID和时间信息。如果更改从机顶盒1310接收到的服务的频道，则接收机1320可新搜索用于识别根据改变的频道的内容提供者的CP ID。
图14是示出根据本发明的实施方式的水印信息的资料剖析(profiling)的图。
如参照图12和图13所述，根据本发明的一个实施方式的接收机可使用用于发送包括在A/V内容中的CP信息的水印来识别CP。在这种情况下，如果增加存储在水印中的信息量，则可能降低水印插入到的A/V内容的质量。因此，在本发明中，为了解决这样的问题，提出了一种根据存储在水印中的信息的属性来对水印进行资料剖析和调级(leveling)，并将调级后的水印插入到A/V内容中的方法。在这种情况下，由于根据所存储信息的属性来对调级后的水印进行区分，并将该调级后的水印插入到A/V内容中，所以可调节与插入的水印有关的信息量，以防止内容质量出现下降。
因此，在本发明中，为了根据资料剖析来对水印进行调级，可根据存储在水印中的信息的属性来将水印划分为基本资料水印和扩展资料水印。基本资料水印可包括识别实时广播节目信息以执行ACR功能实质上必要的信息。扩展资料水印可包括附加信息，而不包括执行ACR功能实质上必要的信息。可存在多个扩展资料水印，并可根据信息的属性再次进行调级。在这种情况下，可根据不同的周期来将基本资料水印和扩展资料水印插入到A/V内容中。
图14是示出将调级后的水印插入到如上描述的A/V内容中的处理的图。
如上所述，内容提供者1400可接收诸如视频/音频这样的原始信号1410；搜索(1401)水印中水印将插入和嵌入(1402)的区域，与待提供的内容有关的元数据1420。此后，内容提供者1400可将加水印的信号1430发送到接收机。在加水印的信号1430中，可以以水印的形式存储原始信号1410和元数据1420。在一个实施方式中，图14的水印可包括基本资料水印W11440和第一扩展资料水印W21450和第二扩展资料水印W31460。
基本资料水印1440可包括内容提供者ID元素和扩展指示符。
内容提供者ID元素可指示用于识别广播者或提供内容的CP的信息。
扩展指示符元素可指示是否额外地插入下一级的水印，即，第一扩展资料水印1450。如果扩展指示符元素的值是1，则这表示插入下一级的第一扩展资料水印1450。
第一扩展资料水印1450可包括：内容ID元素、时间戳元素和扩展指示符元素。
内容ID元素可指示用于识别内容名称或内容的序列号信息。
时间戳元素指示内容的时间信息。
扩展指示符元素可指示是否如上所述额外地插入下一级的水印(即，第二扩展资料水印1460)。如图14所示，第二扩展资料水印1460可包括：水印插入用途(watermarkinsertion usage)元素、附加信息的URL元素和扩展指示符元素。
水印插入用途元素可指示与水印插入用途有关的信息。
附加信息的URL元素可指示附加信息或用于接收服务的URL信息。
扩展指示符元素可指示是否插入下一级的水印。
如图14所示，当将调级后的水印插入到A/V内容中时，内容提供者或广播者可根据水印资料来区分将水印插入到A/V内容中的次数。例如，由于基本资料水印1440包括广播节目的重要基本信息，所以内容提供者或广播者可设定插入基本资料水印的次数，以便接收机尽可能快地准确地识别信息。
即，内容提供者或者广播者可在加水印的信号1430的发送周期期间，插入比扩展资料水印1450和1460多的基本资料水印1440。因此，接收机可优选地提取基本资料水印1440，并且然后提取必要的扩展资料水印1450和1460。在这种情况下，接收机可根据扩展指示符元素的值来检查扩展资料水印的存在，并提取扩展资料水印。即，接收机可根据水印的资料区别地提取区别地插入的水印，并有效地存储和管理包括在水印中的信息。
到目前为止，已经描述了根据本发明的实施方式的、使用加水印来提供ACR服务的方法和系统。在下文中，将详细描述根据本发明的实施方式的、在内容提供者处在内容中嵌入水印的方法以及在接收机处从内容中提取水印的方法。
将参照图15-17来描述在内容提供者处在视频帧中嵌入水印的方法以及在接收机处从内容中提取水印的方法，并且将参照图18来描述在内容提供者处在音频帧中嵌入水印的方法以及在接收机处从内容中提取水印的方法。
图15是示出根据本发明的实施方式的、在视频帧中嵌入水印的方法的图。
内容提供者首先将一个视频帧1500细分(subdivide)为子帧1501，搜索所细分的子帧1502，并确定水印将适当嵌入的区域。如果确定水印将嵌入的子帧区域，则在该子帧区域1510嵌入水印并组合子帧以再生一个视频帧(1520)。
为了在接收机处从在一个视频帧的整个区域中嵌入的视频帧提取水印，首先，接收机将一个视频帧细分为子帧。从所细分的子帧中检测可以嵌入水印的区域。从所检测的子帧区域提取水印，并且对所提取的水印进行比较，以最终确定一个水印。可通过所确定的水印使用内容信息来下载增强数据。
图16是示出根据本发明的另一实施方式的、在视频帧中嵌入水印的方法的图。
更具体地，图16示出根据本发明的一个实施方式的、在视频帧的条形数据(bardata)区域中嵌入水印的方法。
如果在一个视频帧的整个区域中嵌入水印，则可提高加水印鲁棒性，但可增加在接收机处提取水印所需的处理。因此，能够通过在视频帧的某些区域中嵌入水印，来减少在接收机处提取水印所需的处理，从而提高接收机的操作效率。可根据发射机/接收机的规则来预先限定视频帧的整个区域中的某些区域(在该某些区域中将嵌入水印)。在下文中，根据本发明的实施方式，内容提供者可在条形数据区域(其是视频帧的整个区域的一部分)中嵌入水印。
当内容提供者将内容发送到接收机时，如果内容的图像比与传输格式不匹配，则可在屏幕上产生条形数据区域1600。例如，如图16所示，在将具有纵横比16：9的视频帧转换成纵横比4：3的情况下，可在具有纵横比4：3的屏幕的上边缘和下边缘中产生黑带，使得没有剪裁屏幕的左边缘和右边缘。黑带区域可以是称为宽屏幕(letterbox)的条形数据区域1600。
如图16所示，在视频帧中存在条形数据区域1600的情况下，可在条形数据区域1600中嵌入水印以便发送。在条形数据区域1600中嵌入水印的方法可与在参照图15所述的视频帧中嵌入水印的处理同样地执行。
更具体地，内容提供者可搜索视频帧的水印将嵌入的条形数据区域1600(1610)，并在条形数据区域1600中嵌入水印(1620)。
为了提取在视频帧的某些区域中嵌入的水印，首先，接收机将一个视频帧细分为子帧。从所细分的子帧中检测可嵌入水印的区域。根据图16所示的本发明的实施方式，接收机可从所细分的子帧中检测条形数据区域。从所检测的子帧区域中提取水印，并对所提取的水印进行比较，以最终确定一个水印。可通过所确定的水印使用内容信息来下载增强数据。
图17是示出根据本发明的另一实施方式的、在视频帧中嵌入水印的方法的图。
更具体地，图17示出将包括不同的内容信息(或元数据)的多个水印嵌入到一个视频帧的不同区域的方法。
例如，如图17所示，可在位于屏幕的右上侧的标志区域1700中嵌入包括CP ID信息的水印，并且可在相同屏幕的中央区域1701中嵌入包括内容ID和时间戳信息的水印。
根据本发明的实施方式，一种将包括不同内容信息的多个水印嵌入到一个视频帧中的方法可大体上划分成两种方法。
可在视频帧的不同区域1700和1701中嵌入多个不同水印。此时，可根据本发射机/接收机的规则，来预先限定视频帧的将嵌入水印的两个或更多个区域1700和1701。
另选地，可首先嵌入包括与视频帧的不同区域1700和1701有关的信息的单独水印。可通过单独水印来检测将嵌入包括内容信息的水印的不同区域1700和1701，并且可分别地在区域1700和1701中嵌入水印。可在视频帧的特定区域或标志部分中嵌入单独水印，并可根据发射机/接收机的规则来预先限定该单独水印。
如果接收到的视频帧包括具有根据区域的不同内容信息的水印，那么首先，接收机通过另一路径或根据发射机/接收机的规则来获取与嵌入水印的区域有关的信息。使用所获取的信息，从视频帧的每个区域中提取水印。根据图17所示的本发明的实施方式，可从标志区域1700中提取包括与内容提供者有关的信息的水印，并且可从屏幕的中央区域1701中提取包括内容ID和时间信息的水印。另选地，如果包括用于从所提取的水印中提取不同水印的信息(例如，与嵌入水印的区域有关的信息)，则能够使用该信息来提取不同的水印。
图18是示出根据本发明的实施方式的、在音频帧中嵌入水印的方法的图。
更具体地，图18示出在音频帧中嵌入一个水印的处理。
将原始音频信号划分为具有恒定长度的帧(1800)，并且将所划分的音频帧细分为子帧(1801)。使用所细分的子帧，可搜索将嵌入水印的区域(1802)。例如，可搜索高于人耳敏感的4千赫兹的频带，并将其确定为水印嵌入区域。在搜索的区域中嵌入水印(1803)，并将子帧重新组合成一个音频信号(1803)。
此外，根据本发明的实施方式，可在基于图18所示的水印嵌入处理的音频信号中嵌入多个水印。该嵌入方法可包括：将水印分别嵌入到两个或更多个不同频带并且将子帧重新组合成一个音频信号的方法；以及在连续音频帧中嵌入一个水印并将其它水印嵌入到不同的频带的方法。
根据本发明的上述实施方式，如果接收到嵌入水印的音频信号，则接收机可首先将该音频信号划分为具有固定长度的帧，以便从音频信号中提取水印。可将所划分的帧细分为子帧，并可从子帧检测水印提取区域。从所检测的区域提取水印。如果在音频信号中嵌入多个水印，则可在根据发射机/接收机的规则所限定的两个或更多个频带处从接收到的音频信号中提取水印。另选地，可从连续音频帧中提取一个水印，并可从根据发射机/接收机的规则所限定的不同频带的信号中提取其它水印。另外，根据参照图15-18所述的嵌入水印的方法的、本发明的实施方式，可在音频内容和视频内容两者中嵌入水印。
如果可在视频帧和音频帧两者中嵌入包括相同内容信息的水印，则可以以预定周期在视频帧和音频帧中重复嵌入相同水印。根据这样的方法，由于接收机可同时从嵌入水印的视频帧和音频帧中提取相同水印，所以能够提高提取水印的结果的精度，并减少为最终获取精确的结果所消耗的时间。
另选地，可根据包括在水印中的内容信息来划分水印，并且可在视频帧和音频帧中嵌入所划分的水印。例如，将包括在水印中的内容信息划分成用于识别广播节目的基本信息，诸如CP ID、内容ID和附加信息。可在视频帧中嵌入基本信息，而可在音频帧中嵌入附加信息。相反，可在音频帧中嵌入基本信息，而可在视频帧中嵌入附加信息。由于在一个视频或音频帧中嵌入的信息量受到限制，所以如果使用这样的方法来嵌入水印，则能够提高预定时间期间所嵌入的元数据的量。
图19是示出根据本发明的实施方式的、嵌入资料剖析后的水印的方法的图。
如参照图14所述，由于A/V内容的质量可随着存储在水印中的内容信息的量的增加而降低，所以如果根据存储在水印中的信息的类型而对水印进行调级，则能够有效地利用水印，同时保持内容的质量。
根据本发明的实施方式，在根据存储在水印中的信息的属性对水印进行资料剖析后，可以不同地设定在预定周期期间在内容帧中嵌入水印的次数。
例如，可将存储在水印中的信息划分为：用于识别广播节目的基本信息和附加信息；或具有短更改周期的信息和具有长更改周期的信息。包括基本信息和/或在预定周期期间在帧中具有短更改周期的信息的水印的嵌入次数可增加，而包括基本信息和/或在预定周期期间在帧中具有长更改周期的信息的水印的嵌入次数可减少。
更具体地，如图19所示，可在标志区域1900嵌入包括识别节目所需的、诸如CP ID和内容ID这样的信息的水印，并且可在帧的另一特定区域1901中嵌入包括诸如URL信息这样的附加信息的水印。在这种情况下，标志区域1900的水印是识别节目所需的数据，并且因此可在所有视频帧1910、1920和1930中嵌入，并且用于帧的、提供附加信息的特定区域1901的水印可在两个帧1910和1930中各嵌入一次。
图20和图21示出根据本发明的实施方式的、嵌入和提取水印的方法。
图20是示出根据本发明的实施方式的、在连续帧中嵌入水印的方法的图。
图21是示出根据本发明的实施方式的、提取插入到连续帧中的水印的方法的图。
可在一个A/V帧中嵌入的内容信息的量受到限制。根据图20和图21所示的本发明的实施方式，水印可包括大量的内容信息。
如图20所示，内容提供者可将包括内容信息的水印嵌入到连续帧中。为了指示内容信息的开始和结束，在内容信息中嵌入指示内容信息的开始信息的开始标签2001和结束标签2002后，将内容信息划分为子内容信息2003。可在连续A/V帧200中分别嵌入包括子内容信息2003的水印。另外，如果在预定周期期间在连续A/V帧2000中重复嵌入水印，则接收机可有效地提取水印。
如图21所示，接收机可从嵌入水印的连续帧中提取水印。首先，接收机提取在连续A/V帧中嵌入的水印。可从所提取的水印中检测内容信息的开始标签2101和结束标签2102。如果从开始标签2101中获取内容信息的开始信息，则从在已检测开始标签2101之后所接收到的A/V帧中提取水印，以便获取子内容信息2103，并对所获取的子内容信息2103进行组合。如果从结束标签2102中获取内容信息的结束信息，则结束组合子内容信息2103的处理以获取一条内容信息。
图22是示出根据本发明的实施方式的、在3D视频中嵌入水印的方法的图。
可通过使用两个摄像机获取左图像和右图像，使左眼能够观看左图像并使右眼能够观看右图像，来实现全3D视频图像。在本发明中，提出了一种在3D视频帧中嵌入水印并从3D视频帧中提取水印的方法。
如图22所示，3D视频帧可包括左帧2200和右帧2201。内容提供者可将内容信息(或元数据)2202嵌入到左帧220和右帧2201中，并产生嵌入水印的左帧(在下文中，称为加水印的左帧)2203和嵌入水印的右帧(在下文中，称为加水印的右帧)2204。
可产生并发送标准清晰度(SD)或高清晰度(HD)图像。
首先，内容提供者可仅在左帧2200或右帧2201中嵌入水印，并将加水印的左帧和右帧发送到接收机。接收机可从加水印的左帧2203或加水印的右帧2204中的一个中提取水印。在这种情况下，如参照图15至图17所述，可采用在视频帧中嵌入水印的方法和从视频帧中提取水印的方法。可根据发射机/接收机的规则来预先限定加水印的视频帧。
其次，内容提供者可将包括相同内容信息的水印嵌入到左帧2200或右帧2201中，并将加水印的左帧和右帧发送到接收机。接收机可从加水印的左帧2203或加水印的右帧2204中的每个中提取水印。如果水印是相同的或如果水印之间的差异是在允许误差范围内，则可比较并校正所提取的水印。在这种情况下，参照图15-17所述的方法可应用于将水印插入到左帧2200或右帧2201中的方法和提取所嵌入的标记的方法。可使用相同的方法或不同的方法来在左帧2200或右帧2201中嵌入水印。虽然当接收机提取水印时，这样的方法可能增加复杂度，但是可提高水印提取鲁棒性。
第三，内容提供者可在左帧2200或右帧2201中嵌入不同的水印，并将加水印的左帧和右帧发送到接收机。接收机可从加水印的左帧2203或加水印的右帧2204中的每个中提取水印。所提取的水印可包括一条内容信息。另选地，可将包括在所提取的水印中的内容信息进行组合，以产生一条新的内容信息。在后一种情况下，可在视频帧中嵌入在数量上大于可经由一个视频帧发送的内容信息的数量的内容信息。另选地，可包括在一个视频帧中的内容信息可被划分，并在左帧2200或右帧2201中嵌入。在这种情况下，能够减少图像质量下降的可能性。
图23是示出根据本发明的实施方式的ACR服务提供系统的结构的图。
更详细地，图23示出根据本发明的一个实施方式的、用于使用加水印和加指纹两种技术来识别广播内容的ACR服务提供系统。
在加水印中，如果在水印中嵌入大量的内容信息，则在一个帧中嵌入的内容的识别率高，但内容质量可能会降低。即，嵌入的元数据的数量受到限制。
在加指纹中，内容质量不受影响，但需要用于识别内容的ACR服务器。另外，识别内容所消耗的时间和内容识别结果取决于参考集的大小。
根据图23所示本发明的实施方式，如果通过加水印和加指纹技术的组合来识别广播内容，则能够有效地提供ACR服务，同时解决两个技术的问题。
本发明包括使用两种技术来识别正被观看的广播节目的方法。元数据(用于识别节目，诸如内容提供者或广播者的识别符，并需要最精确地识别)可在广播A/V内容中嵌入并可发送。
在下文中，将详细描述图23所示的ACR服务提供系统的部件之间的机制。
如果内容提供者2300将加水印的A/V内容和增强数据发送到MVPD 2301(2310，2330)，则接收机2303可通过机顶盒2302来接收A/V内容，但不可接收增强数据(2320)。因此，为使接收机2303能够通过另一路径来接收增强数据，内容提供者2300可将A/V内容的附加信息发送到ACR服务器2304(2340)，并将增强数据发送到应用服务器2305(2350)。A/V内容的附加信息可以是用于将与A/V内容有关的增强数据传递到接收机2303的信息，并可包括内容ID、时间戳、URL等。
接收机2303的水印提取器2306可从接收到的A/V内容中提取水印，同时，指纹提取器2307可从A/V内容中提取指纹签名。接收机2303可将包含被包括在水印和指纹签名中的内容信息的查询发送到ACR服务器2304(2360)，并从ACR服务器2304中获取A/V内容的附加信息(2360)。然后，接收机2303可使用A/V内容的附加信息来从应用服务器2305接收增强数据(2380)。通过在查询中包括加水印结果，能够减少在ACR服务器处识别内容所消耗的时间，并提高ACR服务器的内容识别精度。
图24是示出根据本发明的实施方式的、使用广播者标志来提供ACR服务的方法的图。
图25是示出根据本发明的实施方式的广播者标志的图；
图26是示出根据本发明的实施方式的、使用广播者标志的ACR服务的图；
内容提供者(或广播者)具有指示其内容的标志。例如，内容提供者可具有图25所示的标志。广播者或内容提供者可将标志插入到图26所示的屏幕的右上侧、左上侧、右下侧或左下侧，以便显示内容。即使当在屏幕上显示的视频场景发生变化时，标志也不会发生变化，并连续地显示。在本发明中，提出了使用标志的属性来自动识别在屏幕的特定部分中连续显示的信息的ACR服务方法。
如图24所示，根据本发明的实施方式，可将水印插入到标志中，以提供ACR服务。接收机可识别该标志，以获取指示该标志的内容提供者信息，并访问内容提供者，以接收服务，从而提供ACR服务。在下文中，将详细描述使用标志来提供ACR服务的方法。
首先，接收机可通过标志识别步骤2401和标志比较步骤2402来获取标志信息。接收机可获取内容提供者信息作为比较结果，以识别内容提供者(2403)，并访问内容提供者服务器(2404)。可从内容提供者服务器接收到内容的附加信息(2405)，以提供附加服务器(2406)。
可通过将由接收机所识别的标志与在接收机中预先存储的内容提供者的标志进行比较，来执行接收机的标志识别步骤2401和标志比较步骤2402。
与所存储的标志有关的信息是由接收机通过IP网络或MH接收到的并存储的信息，或是在接收机中存储的默认信息。可保持标志的新版本信息。在经由IP网络或MH来接收信息的情况下，可通过IP网络或MH连续地接收标志信息来保持新标志信息，并且在默认信息的情况下，可通过连续更新来保持新标志信息。
在标志比较步骤2402中，如果将所识别的标志与存储在接收机中的所有标志信息进行比较，则信息量大。因此，在接收机上增加了负担。根据本发明的实施方式，由于可基于标志的详细属性来执行提取、存储和比较，所以能够克服这样的限制。例如，可识别诸如标志颜色、字母(SBS、CNN等)和轮廓(contour)这样的标志属性来执行比较。如果使用轮廓，则可使用坐标特性通过坐标来划分显示标志的空间，以识别标志。
图27是示出根据本发明的实施方式的、使用标志和水印的ACR服务提供方法的图。
如图27所示，在ACR服务中，接收机可提取标志信息2701或水印2702，以获取与内容提供者有关的信息，并通过IP网络或MH来接收由内容提供者提供的附加服务。
如上所述，如果在内容中嵌入水印，则可能改变内容的数据。因此，在本发明中，提出了一种在被包括在内容中的标志区域中嵌入水印的方法。
在下文中，将详细描述在用于根据图25所示的本发明的实施方式的ACR服务在接收机处利用标志信息和水印的方法。
如上所述，当回放内容时，根据本发明的实施方式的接收机可提取并利用如下的水印，该水印包括通过特定算法插入到A/V帧数据的特定字段中的预定量的内容信息。例如，接收机(其接收包括每秒30帧的视频内容)可从M帧中提取如下的水印，该水印包括与每一帧中的特定字段或特定位置相对应的N比特的数据。在这种情况下，所提取的水印数据的总量可以是N*M比特。如果增加加水印的帧的数量，则增加待提取的水印数据的量。因此，可增加在接收机处提取水印所消耗的时间，并可降低由接收机处理的A/V内容的质量。
因此，在本发明中，提出了一种在被包括在视频帧中的标志区域中嵌入水印的方法。该标志区域被包括在所有视频帧中，并且甚至当回放屏幕发生变化时，也可在屏幕上的相同位置显示。因此，即使当数据量很大时，如果在标志区域嵌入水印，则能够减少提取水印所消耗的时间，并减少A/V内容质量下降的可能性。
在下文中，将描述根据本发明的一个实施方式的、在标志中嵌入水印的方法。根据本发明的实施方式的、在标志中嵌入水印的方法可包括：在标志的预定位置处嵌入条形码数据的方法，利用作为水印的标志信息的元数据包的方法，和在标志的图像数据中的一部分中嵌入水印的方法。
在标志的预定位置处嵌入条形码数据的方法的情况下，接收机可识别位于特定位置的、作为水印的条形码数据。在这种情况下，不显示条形码数据。
在利用作为水印的标志信息的元数据包的方法中，描述标志的元数据包用作水印，同时保持标志的图像数据的原始形式。在这种情况下，元数据包可包括CP ID、内容ID、时间信息等。
在标志信息中嵌入水印的方法中，使用标志的图像数据的一部分的比特来组合N个标志帧，并且在标志图像数据中嵌入N个水印比特。在这种情况下，包括在水印中的内容信息或元数据如上所述。
图28是示出根据本发明的实施方式的、处理与广播节目有关的ACR服务的方法的图。
更具体地，图28是图示根据参照图15-22所述的本发明的处理与广播节目有关的ACR服务的方法的具体方式的、内容提供者的操作的流程图。
内容提供者可产生水印(S2801)。该水印可包括：与内容有关的频道信息、和/或具有内容附加信息的URL信息的内容信息。更具体地，如参照图12所述，该水印可包括：内容提供者或广播者的ID信息、和/或内容的ID信息。另外，如参照图14所述，可根据包括在水印中的信息的属性来对水印进行调级。
内容提供者可在内容中嵌入所产生的水印(S2802)。
内容提供者可在视频帧和/或音频帧中嵌入水印。
如果在视频帧中嵌入水印，如参照图15所述，则内容提供者可将视频内容的帧细分为子帧，并在所细分的子帧中嵌入水印。如参照图16所述，内容提供者可在视频帧的某一区域中嵌入水印。如参照图17所述，内容提供者可将包括不同内容信息的多个水印嵌入到一个视频帧的不同区域中。
如果在音频帧嵌入水印，如参照图18所述，则内容提供者可将一个音频帧细分为子帧，并在所细分的子帧中嵌入水印。如参照图18所述，内容提供者可在一个音频信号中嵌入多个水印。
如参照图15-18所述，内容提供者可在音频内容和视频内容两者中嵌入水印。如参照图20所述，内容提供者可在连续帧中嵌入水印。如参照图22所述，内容提供者可在3D内容中嵌入水印。如参照图24-27所述，内容提供者可在标志区域中嵌入水印。
如果根据内容信息的属性对水印进行调级，如参照图19所述，则内容提供者可根据内容信息来更改周期，并在帧中嵌入水印。在这种情况下，如参照图14和图19所述，可通过更改嵌入根据层级的水印的次数来在A/V内容中嵌入调级后的水印。
内容提供者可发送包括水印的内容(S2803)。
图29是示出根据本发明的另一实施方式的、处理与广播节目有关的ACR服务的方法的图。
更具体地，图29是图示根据处理与参照图15-22所述的本发明的广播节目有关的ACR服务的方法的具体方式的、接收机的操作的流程图。
接收机可接收包括水印的内容(S2901)。
水印可包括：与内容有关的频道信息、和/或具有内容附加信息的URL信息的内容信息。更具体地，如参照图12所述，水印可包括：内容提供者或广播者的ID信息、和/或内容的ID信息。另外，如参照图14所述，可根据包括在水印中的信息的属性对水印进行调级。
接收机可从视频帧和/或音频帧中提取水印(S2902)。
如参照图28所述，内容提供者可在视频帧和/音频帧中嵌入水印。接收机可接收嵌入水印的视频帧和/或音频帧，并提取水印。更具体地，如参照图5所述，接收机可使用微代码来提取水印。
如果在视频帧中嵌入水印，如参照图15所述，则接收机可将一个视频帧细分为子帧，检测嵌入水印的子帧，并提取水印。如参照图16所述，接收机可从所细分的子帧中检测条形数据区域，并提取水印。如参考图17所述，如果视频帧包含包括根据区域而不同的内容信息的水印，则接收机可获取与嵌入水印的区域有关的信息，并使用所获取的信息来从视频帧的每个区域中提取水印。
如果在音频帧中嵌入水印，如参照图18所述，则接收机可将音频信号细分为子帧，检测水印提取区域并提取水印。
如参照图21所述，如果从连续帧中提取水印，则接收机可从连续帧中提取子内容信息，使用开始标签和结束标签来组合子内容信息，并获取一条内容信息。另外，如参照图22所述，如果在3D内容中嵌入水印，则接收机可从3D内容的左帧和/或右帧中提取水印。
如果根据内容信息的属性对水印进行调级，如参照图19所述，则内容提供者可根据内容信息来改变周期，并在帧中嵌入水印。在这种情况下，如参照图14和图19所述，接收机可区别地提取根据水印的资料区别地嵌入的水印。
接收机可使用所提取的水印通过IP网络来获取附加信息(S2903)。
更具体地，如参照图23所述，本发明的处理与广播节目有关的ACR服务的方法可包括：通过组合加水印和加指纹来处理ACR服务的方法。
对于本领域技术人员而言，将显而易见的是，在本发明中能够做出各种修改和变型，而不脱离本发明的精神或范围。因此，期望的是，本发明涵盖这些修改和变型，只要它们落在所附权利要求及其等同物的范围内即可。
实施方式
已经以执行本发明的具体实施方式来描述了各种实施方式。
对于本领域技术人员而言，将显而易见的是，在本发明中能够做出各种修改和变型，而不脱离本发明的精神或范围。因此，期望的是，本发明涵盖这些修改和变型，只要它们落在所附权利要求及其等同物的范围内即可。
工业实用性
如上所述，本发明能够全部或部分地应用于用于双显示器的装置。

Claims (20)

1.一种处理数字服务信号的方法，该方法包括如下步骤：
接收具有水印的内容，其中，所述水印插入在所述内容的音频帧或视频帧中，其中，所述水印携带与所述内容有关的频道信息、和具有用于所述内容的附加数据的URL信息的内容信息；
从所述音频帧或视频帧中提取所述水印；以及
使用所提取的水印通过因特网协议IP网络来获取所述附加数据。
2.根据权利要求1所述的方法，其中，所述内容信息还包括：
识别所述内容的提供者的内容提供者id信息和识别所述内容中的每个内容的内容id信息。
3.根据权利要求1所述的方法，根据所述内容信息，以不同的周期将所述水印插入到所述音频帧或视频帧中。
4.根据权利要求1所述的方法，从所述音频帧或视频帧中提取所述水印还包括如下步骤：
将所述音频帧或视频帧划分成子帧；
从所划分的子帧当中检测具有所述水印的特定子帧；以及
从检测到的特定子帧中提取所述水印。
5.根据权利要求4所述的方法，当将所述内容信息划分成子内容信息，并将所划分的子内容信息插入到连续的音频帧或视频帧中时，所述提取还包括如下步骤：
从所述连续的音频帧或视频帧中提取所述子内容信息；
从所提取的子内容信息中提取所述内容信息的开始标签和结束标签；以及
使用该开始信息和该结束信息来将所述子内容信息组装成所述内容信息。
6.根据权利要求4所述的方法，当将所述内容信息划分成子内容信息，并将所划分的子内容信息插入到连续的音频帧或视频帧中时，所述提取还包括如下步骤：
从所述连续的音频帧或视频帧中提取所述子内容信息；
从所提取的子内容信息中提取所述内容信息的开始标签和结束标签；以及
使用该开始信息和该结束信息来将所述子内容信息组装成所述内容信息。
7.根据权利要求1所述的方法，当所述内容是三维3D内容时，所述提取还包括如下步骤：
从所述3D内容的左视频帧和/或右视频帧中提取所述水印。
8.根据权利要求1所述的方法，所述方法还包括如下步骤：
从所述内容中提取指纹签名；以及
创建包括所述内容信息和所述指纹签名的查询。
9.一种处理数字服务信号的方法，该方法包括如下步骤：
产生水印；
将所产生的水印插入到内容的音频帧或视频帧中，其中，所述水印携带与所述内容有关的信道消息、和具有用于所述内容的附加数据的URL信息的内容信息；以及
发送所述内容。
10.根据权利要求9所述的方法，其中，所述内容信息还包括：
识别所述内容的提供者的内容提供者id信息和识别所述内容中的每个内容的内容id信息。
11.根据权利要求9所述的方法，所述插入还包括如下步骤：
根据所述内容信息，以不同的周期将所述水印插入到所述音频帧或所述视频帧中。
12.根据权利要求11所述的方法，所述插入还包括如下步骤：
将所述音频帧或视频帧划分成子帧；
从所划分的子帧当中检测特定子帧来插入所述水印；
将所述水印插入到检测到的特定子帧中；以及
将所划分的子帧组装成所述音频帧或视频帧。
13.根据权利要求12所述的方法，所述方法还包括如下步骤：
将所述内容信息的开始标签和结束标签插入到所述内容信息中；
将所述内容信息划分成子内容信息；以及
将所述子内容信息插入到连续的音频帧或视频帧中。
14.根据权利要求9所述的方法，所述插入还包括如下步骤：
当所述内容是三维3D内容时，将所述水印插入到所述3D内容的左视频帧和/或右视频帧中。
15.根据权利要求9所述的方法，所述插入还包括如下步骤：
从所述视频帧中的标志数据区域插入所述水印。
16.一种用于处理数字服务信号的装置，该装置包括：
接收模块，该接收模块被构造为接收具有水印的内容，其中，所述水印插入在所述内容的音频帧或视频帧中，其中，所述水印携带与所述内容有关的信道消息、和具有用于所述内容的附加数据的URL信息的内容信息；
提取模块，该提取模块被构造为从所述音频帧或视频帧中提取所述水印；以及
获取模块，该获取模块被构造使用所提取的水印通过因特网协议IP网络来获取所述附加数据。
17.根据权利要求16所述的装置，其中，所述内容信息还包括：
识别所述内容的提供者的内容提供者id信息和识别所述内容中的每个内容的内容id信息。
18.根据权利要求16所述的装置，所述提取模块还进行如下操作：
将所述音频帧或视频帧划分成子帧；
从所划分的子帧当中检测具有所述水印的特定子帧；以及
从检测到的特定子帧中提取所述水印。
19.一种用于处理数字服务信号的装置，该装置包括：
产生模块，该产生模块被构造为产生水印；
插入模块，该插入模块被构造为将所产生的水印插入到内容的音频帧或视频帧中，其中，所述水印携带与所述内容有关的信道消息、和具有用于所述内容的附加数据的URL信息的内容信息；以及
发送模块，该发送模块被构造为发送所述内容。
20.根据权利要求19所述的装置，该插入模块还进行如下操作：
将所述音频帧或视频帧划分成子帧；
从所划分的子帧当中检测特定子帧来插入所述水印；
将所述水印插入到检测到的特定子帧中；以及
将所划分的子帧组装成所述音频帧或视频帧。
CN201380035801.5A 2012-07-05 2013-07-05 处理数字服务信号的方法及装置 Pending CN104412609A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261668437P 2012-07-05 2012-07-05
US61/668,437 2012-07-05
PCT/KR2013/005980 WO2014007571A1 (en) 2012-07-05 2013-07-05 Method and apparatus for processing digital service signals

Publications (1)

Publication Number Publication Date
CN104412609A true CN104412609A (zh) 2015-03-11

Family

ID=49879560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380035801.5A Pending CN104412609A (zh) 2012-07-05 2013-07-05 处理数字服务信号的方法及装置

Country Status (6)

Country Link
US (2) US8990844B2 (zh)
EP (1) EP2870774A4 (zh)
KR (1) KR101664424B1 (zh)
CN (1) CN104412609A (zh)
CA (1) CA2876061A1 (zh)
WO (1) WO2014007571A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105187817A (zh) * 2015-09-09 2015-12-23 武汉大学 基于数字水印加密的裸眼3d视频加密方法及系统
CN106250729A (zh) * 2016-08-01 2016-12-21 腾讯科技（深圳）有限公司 一种歌曲数据处理方法及其设备
CN107197395A (zh) * 2017-05-05 2017-09-22 中广热点云科技有限公司 一种为视频终端提供增强服务的方法
CN107771396A (zh) * 2015-06-08 2018-03-06 高通股份有限公司 广播内容再分配和广告插入
CN107852530A (zh) * 2015-07-06 2018-03-27 Lg电子株式会社 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
CN108353201A (zh) * 2015-10-01 2018-07-31 索伦森媒体有限公司 循序覆盖媒体内容
CN109275035A (zh) * 2016-03-01 2019-01-25 夏普株式会社 信令不透明用户数据的方法
CN111431904A (zh) * 2020-03-25 2020-07-17 上海威固信息技术股份有限公司 一种基于时间特征的云存储访问控制方法
CN113009411A (zh) * 2021-02-25 2021-06-22 浙江德清知路导航研究院有限公司 一种具有定位功能的音频编解码芯片、定位方法及应用

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1586045A1 (en) 2002-12-27 2005-10-19 Nielsen Media Research, Inc. Methods and apparatus for transcoding metadata
US9210208B2 (en) 2011-06-21 2015-12-08 The Nielsen Company (Us), Llc Monitoring streaming media content
US9313544B2 (en) * 2013-02-14 2016-04-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9189627B1 (en) 2013-11-21 2015-11-17 Fireeye, Inc. System, apparatus and method for conducting on-the-fly decryption of encrypted objects for malware detection
US9621963B2 (en) 2014-01-28 2017-04-11 Dolby Laboratories Licensing Corporation Enabling delivery and synchronization of auxiliary content associated with multimedia data using essence-and-version identifier
US9930409B2 (en) 2014-02-10 2018-03-27 Lg Electronics Inc. Apparatus for transmitting broadcast signals, apparatus for receiving broadcast signals, method for transmitting broadcast signals and method for receiving broadcast signals
KR20150115314A (ko) * 2014-04-03 2015-10-14 삼성전자주식회사 디스플레이 장치, 이의 제어 방법, 서버, 이의 제어 방법, 채널 정보의 위치에 대한 정보를 검출하기 위한 시스템 및 이의 제어 방법
US20150358507A1 (en) * 2014-06-04 2015-12-10 Sony Corporation Timing recovery for embedded metadata
US9418395B1 (en) * 2014-12-31 2016-08-16 The Nielsen Company (Us), Llc Power efficient detection of watermarks in media signals
CN113113031B (zh) 2015-02-14 2023-11-24 三星电子株式会社 用于对包括系统数据的音频比特流进行解码的方法和设备
KR101838084B1 (ko) * 2015-04-23 2018-03-13 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016172585A1 (en) * 2015-04-24 2016-10-27 Verance Corporation Efficient and secure watermark screening in media servers
US20180048408A1 (en) * 2015-04-27 2018-02-15 Sharp Kabushiki Kaisha Service signaling extensions
US9762965B2 (en) 2015-05-29 2017-09-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
WO2016204421A1 (ko) * 2015-06-15 2016-12-22 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
CN106331744A (zh) * 2015-07-03 2017-01-11 上海尚恩华科网络科技股份有限公司 一种基于音频水印的视频交互方法
CN106331743A (zh) * 2015-07-03 2017-01-11 上海尚恩华科网络科技股份有限公司 一种基于音频水印的视频交互的系统及方法
US11172093B2 (en) 2015-12-07 2021-11-09 Disney Enterprises, Inc. System and method for creating a temporal-based dynamic watermark
ES2629484B1 (es) * 2016-02-09 2018-03-08 Eloi MOLINAS LOMBART Método y sistema de sincronización de vídeo y datos
MX2020001303A (es) * 2017-08-10 2020-03-09 Sony Corp Aparato de transmision, metodo de transmision, aparato de recepcion y metodo de recepcion.
CN110636348B (zh) * 2018-06-22 2021-12-31 杭州海康威视系统技术有限公司 视频播放方法、装置及系统
US10448122B1 (en) 2018-07-02 2019-10-15 The Nielsen Company (Us), Llc Methods and apparatus to extend a timestamp range supported by a watermark
US10448123B1 (en) 2018-07-02 2019-10-15 The Nielsen Company (Us), Llc Methods and apparatus to extend a timestamp range supported by a watermark
CN109982157A (zh) * 2019-04-01 2019-07-05 北京火眼目测科技有限公司 在数字视频上嵌入隐式指纹的方法、系统和存储介质
WO2020263621A1 (en) * 2019-06-24 2020-12-30 The Nielsen Company (Us), Llc Use of watermarking to trigger fingerprint-related action
CN111064993A (zh) * 2019-12-24 2020-04-24 深圳Tcl数字技术有限公司 基于水印的数据传递、生成方法、电视、机顶盒及系统
US11443401B2 (en) * 2020-05-21 2022-09-13 At&T Intellectual Property I, L.P. Digital watermarking
US20220351323A1 (en) * 2021-04-29 2022-11-03 Genetec Inc. Steganographic techniques for tracking video access events
US11949944B2 (en) 2021-12-29 2024-04-02 The Nielsen Company (Us), Llc Methods, systems, articles of manufacture, and apparatus to identify media using screen capture

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6505160B1 (en) * 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
US20030191941A1 (en) * 2002-04-05 2003-10-09 Koichi Terada Data transmitting apparatus, contents distribution apparatus, contents distribution system, digital contents distribution method and data storage apparatus
US20060107195A1 (en) * 2002-10-02 2006-05-18 Arun Ramaswamy Methods and apparatus to present survey information
EP1720354A1 (en) * 2004-02-17 2006-11-08 Mitsubishi Electric Corporation Electronic watermarking method, electronic watermark detecting method, apparatus and program
CN101783807A (zh) * 2001-01-17 2010-07-21 康坦夹德控股股份有限公司 使用标准演示引擎作数字权限管理的系统及方法
US20120063635A1 (en) * 2010-09-14 2012-03-15 Kabushiki Kaisha Toshiba Information processing device and computer program product
CA2814197A1 (en) * 2010-11-24 2012-05-31 Lg Electronics Inc. Video display device and method of controlling the same

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030133592A1 (en) 1996-05-07 2003-07-17 Rhoads Geoffrey B. Content objects with computer instructions steganographically encoded therein, and associated methods
US6411725B1 (en) * 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
US7450734B2 (en) 2000-01-13 2008-11-11 Digimarc Corporation Digital asset management, targeted searching and desktop searching using digital watermarks
EP2278497A3 (en) 2000-02-19 2013-06-26 Digimarc Corporation Watermark encoder and decoder enabled software and devices
US7269735B2 (en) * 2000-08-28 2007-09-11 Contentgaurd Holdings, Inc. Instance specific digital watermarks
US20020162118A1 (en) * 2001-01-30 2002-10-31 Levy Kenneth L. Efficient interactive TV
KR20040081162A (ko) 2002-02-01 2004-09-20 코닌클리케 필립스 일렉트로닉스 엔.브이. 워터마크 기반 액세스 제어 방법 및 디바이스
US20100058065A1 (en) * 2006-12-11 2010-03-04 Koninklijke Philips Electronics N.V. Extracting auxiliary data from a host signal
US8055708B2 (en) * 2007-06-01 2011-11-08 Microsoft Corporation Multimedia spaces
US8565472B2 (en) * 2007-10-30 2013-10-22 General Instrument Corporation Method, device and system for dynamically embedding watermark information into multimedia content
US8538136B2 (en) * 2010-06-21 2013-09-17 Nbcuniversal Media, Llc Digital watermark detection in 2D-3D content conversion
US8578404B2 (en) * 2011-06-30 2013-11-05 The Nielsen Company (Us), Llc Program telecast monitoring using watermarks

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6505160B1 (en) * 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
CN101783807A (zh) * 2001-01-17 2010-07-21 康坦夹德控股股份有限公司 使用标准演示引擎作数字权限管理的系统及方法
US20030191941A1 (en) * 2002-04-05 2003-10-09 Koichi Terada Data transmitting apparatus, contents distribution apparatus, contents distribution system, digital contents distribution method and data storage apparatus
US20060107195A1 (en) * 2002-10-02 2006-05-18 Arun Ramaswamy Methods and apparatus to present survey information
EP1720354A1 (en) * 2004-02-17 2006-11-08 Mitsubishi Electric Corporation Electronic watermarking method, electronic watermark detecting method, apparatus and program
US20120063635A1 (en) * 2010-09-14 2012-03-15 Kabushiki Kaisha Toshiba Information processing device and computer program product
CA2814197A1 (en) * 2010-11-24 2012-05-31 Lg Electronics Inc. Video display device and method of controlling the same

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107771396A (zh) * 2015-06-08 2018-03-06 高通股份有限公司 广播内容再分配和广告插入
US10779057B2 (en) 2015-06-08 2020-09-15 Qualcomm Incorporated Broadcast content redistribution and ad insertion
US10939145B2 (en) 2015-07-06 2021-03-02 Lg Electronics Inc. Broadcasting signal transmission device, broadcasting signal reception device, broadcasting signal transmission method, and broadcasting signal reception method
US10721502B2 (en) 2015-07-06 2020-07-21 Lg Electronics Inc. Broadcasting signal transmission device, broadcasting signal reception device, broadcasting signal transmission method, and broadcasting signal reception method
CN107852530A (zh) * 2015-07-06 2018-03-27 Lg电子株式会社 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
US11483599B2 (en) 2015-07-06 2022-10-25 Lg Electronics Inc. Broadcasting signal transmission device, broadcasting signal reception device, broadcasting signal transmission method, and broadcasting signal reception method
US11070854B2 (en) 2015-07-06 2021-07-20 Lg Electronics Inc. Broadcasting signal transmission device, broadcasting signal reception device, broadcasting signal transmission method, and broadcasting signal reception method
CN105187817A (zh) * 2015-09-09 2015-12-23 武汉大学 基于数字水印加密的裸眼3d视频加密方法及系统
CN108353201A (zh) * 2015-10-01 2018-07-31 索伦森媒体有限公司 循序覆盖媒体内容
CN109275035A (zh) * 2016-03-01 2019-01-25 夏普株式会社 信令不透明用户数据的方法
CN106250729A (zh) * 2016-08-01 2016-12-21 腾讯科技（深圳）有限公司 一种歌曲数据处理方法及其设备
CN106250729B (zh) * 2016-08-01 2020-05-26 腾讯科技（深圳）有限公司 一种歌曲数据处理方法及其设备
CN107197395B (zh) * 2017-05-05 2019-08-20 中广热点云科技有限公司 一种为视频终端提供增强服务的方法
CN107197395A (zh) * 2017-05-05 2017-09-22 中广热点云科技有限公司 一种为视频终端提供增强服务的方法
CN111431904A (zh) * 2020-03-25 2020-07-17 上海威固信息技术股份有限公司 一种基于时间特征的云存储访问控制方法
CN113009411A (zh) * 2021-02-25 2021-06-22 浙江德清知路导航研究院有限公司 一种具有定位功能的音频编解码芯片、定位方法及应用

Also Published As

Publication number Publication date
US20150172771A1 (en) 2015-06-18
EP2870774A4 (en) 2016-03-02
WO2014007571A1 (en) 2014-01-09
EP2870774A1 (en) 2015-05-13
CA2876061A1 (en) 2014-01-09
KR101664424B1 (ko) 2016-10-10
KR20150013852A (ko) 2015-02-05
US8990844B2 (en) 2015-03-24
US20140013374A1 (en) 2014-01-09

Similar Documents

Publication Publication Date Title
KR101664424B1 (ko) 디지털 서비스 신호 처리 방법 및 장치
US9756381B2 (en) Method and apparatus for processing digital service signals
EP2891316B1 (en) Method and apparatus for processing digital service signal
JP6290935B2 (ja) 映像表示装置及びその動作方法
EP2387250B1 (en) Method and system for watermark insertion using video start codes
JP6294503B2 (ja) 放送信号送信装置、放送信号受信装置、放送信号送信方法、及び放送信号受信方法
JP6174702B2 (ja) デジタルサービス信号処理方法及び装置
KR102254838B1 (ko) 영상 표시 장치 및 그의 동작 방법
KR102263146B1 (ko) 영상 표시 장치 및 그 동작 방법
CA2822968A1 (en) Broadcast service transmitting method, broadcasting service receiving method and broadcast service receiving apparatus

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150311