CN104160713B - 视频显示设备及其操作方法 - Google Patents

视频显示设备及其操作方法 Download PDF

Info

Publication number
CN104160713B
CN104160713B CN201380012946.3A CN201380012946A CN104160713B CN 104160713 B CN104160713 B CN 104160713B CN 201380012946 A CN201380012946 A CN 201380012946A CN 104160713 B CN104160713 B CN 104160713B
Authority
CN
China
Prior art keywords
video display
display devices
information
content
acr
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380012946.3A
Other languages
English (en)
Other versions
CN104160713A (zh
Inventor
文京洙
李俊徽
金相铉
金镇泌
池爱娣
安承柱
金庆镐
吴世珍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104160713A publication Critical patent/CN104160713A/zh
Application granted granted Critical
Publication of CN104160713B publication Critical patent/CN104160713B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224—Monitoring of user activity on external systems, e.g. Internet browsing
    • H04N21/44226—Monitoring of user activity on external systems, e.g. Internet browsing on social networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2541—Rights Management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供一种视频显示装置及其操作方法。视频显示装置向不依赖于任何单个频道的第三方服务器请求内容识别配置信息，并且从第三方服务器接收内容识别配置信息。视频显示装置从内容识别配置信息提取多个内容识别配置信息项目，并且在视频显示装置中配置多个内容识别配置信息项目。视频显示装置基于多个内容识别配置信息项目获得未被压缩的内容的内容信息，基于内容信息获得应用，并且执行该应用。

Description

视频显示设备及其操作方法
技术领域
本公开涉及一种视频显示装置及其操作方法。
背景技术
随着数字广播正为其广泛传播铺平道路，广播站传送视听(AV) 内容和增强型服务数据两者，该增强型服务数据可以被链接到主AV内容以提供信息和服务或者可以为了其它用途而被单独提供。
然而，在当前的广播环境下每个家庭中的视频显示装置可能不太可能直接以无线方式接收广播信号。更确切地说，对于大多数情况，每个家庭中的视频显示装置被连接到广播接收装置以显示广播接收装置提供的未被压缩的视听内容。
另外，广播接收装置从服务器(被称为多频道视频节目分发商 (MVPD))接收内容。MVPD从广播站接收广播信号，从所接收的广播信号中提取内容，将所提取的内容转换成具有正确传输格式的信号，并且将转换的信号提供给广播接收装置。在这些过程期间，MVPD可以排除所提取的增强型服务数据或者可以添加其它的增强型服务数据，使得强迫广播接收装置接收取决于MVPD的增强型服务。
MVPD将由内容提供商提供的多个频道提供给广播接收装置。
因为广播接收装置从从MVPD接收的信号中提取主AV数据并且仅将未压缩的视听数据提供到视频显示装置，仅从广播接收装置而非视频显示装置提供的增强型服务是可用的。
发明内容
技术问题
实施例提供独立于MVPD的增强型服务的视频显示装置及其操作方法。
技术方案
在一个实施例中，包括显示单元的视频显示装置的操作方法包括：向不依赖于任何单个频道的第三方服务器请求内容识别配置信息；从第三方服务器接收内容识别配置信息；从内容识别配置信息提取多个内容识别配置信息；以及在视频显示装置中配置多个内容识别配置信息。
在另一实施例中，视频显示装置包括：显示单元；接收单元，该接收单元获得未被压缩的AV内容；和内容识别配置管理单元，该内容识别配置管理单元从不依赖于任何单个频道的第三方服务器接收内容识别配置信息，并且在视频显示装置中配置从内容识别配置信息中提取的多个内容识别配置信息项目。
有益效果
根据本发明的实施例，提供与MVPD无关的增强型服务。特别地，根据本发明的实施例，即使当广播公司或者内容提供商没有提供增强型服务时，通过与广播公司或者内容提供商无关的第三方服务器提供增强型服务。
另外，根据本发明的各种实施例，在没有通过遥控器的不便的文本输入的情况下，与主AV内容有关的信息搜索、聊天、新闻搜索、数字媒体下载、产品目录下载、以及产品购买是可能的。
另外，根据本发明的实施例，提供超过无线信道的带宽的增强型服务。
根据本发明的实施例的视频显示装置可以基于通过外部输入输入的未被压缩的AV数据获得频道映射。
根据本发明的实施例的第三方服务器向视频显示装置提供关于是否允许leanback应用的信息，以便于防止leanback应用严重地影响视频显示装置的稳定性。
通过通知在本地靠近根据本发明的实施例的视频显示装置的ACR 服务器的URL地址，视频显示装置快速地执行内容识别并且减少网络延迟。
根据本发明的实施例的第三方服务器可以通过将关于ACR打开时间间隔的信息提供给视频显示装置防止不必要的资源消耗。
附图说明
图1是图示根据实施例的网络拓扑的框图。
图2是图示根据实施例的基于水印的网络拓扑的框图。
图3是图示根据实施例的基于水印的网络拓扑中的数据流的梯形图。
图4是图示根据实施例的基于水印的内容识别时序的视图。
图5是图示根据实施例的基于指纹的网络拓扑的框图。
图6是图示根据实施例的基于指纹的网络拓扑中的数据流的梯形图。
图7是图示根据实施例的包含查询结果的ACR-Resulttype的XML 模型图的视图。
图8是图示根据实施例的基于水印和指纹的网络拓扑的框图。
图9是图示根据实施例的基于水印和指纹的网络拓扑中的数据流的梯形图。
图10是图示根据实施例的视频显示装置的框图。
图11是图示根据实施例的同步主AV内容的回放时间与增强型服务的回放时间的方法的流程图。
图12是图示根据实施例的同步主AV内容的回放时间与增强型服务的回放时间的方法的概念图。
图13是根据实施例的当执行自动播放应用时的屏幕。
图14是根据实施例的当执行内容提供商应用时的屏幕。
图15是根据实施例的用于控制ACR功能的用户界面的视图。
图16是图示根据实施例的控制视频显示装置的方法的流程图。
图17是图示根据本发明的实施例的网络拓扑的视图。
图18是图示根据本发明的各种实施例的Live+应用的视图。
图19是图示根据本发明的各种实施例的执行Live+应用的方法的视图。
图20是图示根据本发明的实施例的Live+应用的选项卡功能的视图。
图21是图示根据本发明的实施例的第三方服务器90的架构的视图。
图22是图示根据本发明的实施例的用于自动执行应用的视频显示装置的操作的梯形图。
图23是图示根据本发明的实施例的用于频道无关的应用的视频显示装置的操作的梯形图。
图24是图示根据本发明的另一实施例的用于频道无关的应用的视频显示装置的操作的梯形图。
图25是图示根据本发明的实施例的视频显示装置的概念图。
图26是图示根据本发明的另一实施例的视频显示装置的操作的梯形图。
图27是根据本发明的实施例的ACR配置信息的XML模型图。
图28是图示根据本发明的另一实施例的视频显示装置的操作的梯形图。
图29是根据本发明的实施例的ACR配置信息的XML模型图。
图30是根据本发明的实施例的显示卫星运营商Dish网络的MVPD标志的EPG窗口的视图。
图31是根据本发明的实施例的显示有线电视运营商ComCast的 MVPD标志的EPG窗口的视图。
图32是示出根据本发明的实施例的显示有线电视运营商Comcast 的MVPD标志的EPG窗口的视图。
图33是根据本发明的实施例的显示卫星运营商DirecTV的MVPD 标志的菜单窗口的视图。
图34是根据本发明的实施例的频道映射处理的视图。
图35是根据本发明的实施例的频道映射处理的视图。
图36是根据本发明的实施例的视频显示装置的概念图。
图37是根据本发明的实施例的视频显示装置的概念图。
图38是图示根据另一实施例的基于指纹的视频显示装置的结构的框图。
图39是图示根据另一实施例的基于水印的视频显示装置的结构的框图。
具体实施方式
下文中，将参考附图更加详细地描述涉及本发明的移动终端。考虑到在撰写说明书的过程中的容易，在以下的描述中给予或混合用于组件的名词后缀“引擎”、“模块”和“单元”。即，名词后缀它们自身并没有分别可区分的含义或作用。
将会根据实施例参考图1至图9描述网络拓扑。
图1是图示根据实施例的网络拓扑的框图。
如图1中所示，网络拓扑包括内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40、多个增强型服务提供服务器50、广播接收装置60、网络70和视频显示装置100。
内容提供服务器10可以对应于广播站并且广播包括主视听内容的广播信号。广播信号还可以包括增强型服务。增强型服务可以或者可以不涉及主视听内容。增强型服务可以具有格式，诸如服务信息、元数据、额外数据、编译执行文件、网页应用、超文本标记语言(HTML) 文档、XML文档、层叠风格表(CSS)文档、音频文件、视频文件、 ATSC 2.0内容和诸如统一资源定位符(URL)的地址。可能存在至少一个内容提供服务器。
内容识别服务提供服务器20提供内容识别服务，该内容识别服务允许视频显示装置100基于主视听内容识别内容。内容识别服务提供服务器20可以或者不可以编辑主视听内容。可能存在至少一个内容识别服务提供服务器。
内容识别服务提供服务器20可以是水印服务器，该水印服务器编辑主视听内容，以将可以看到标志的可视水印插入主视听内容中。此水印服务器可以将每帧的左上或右上处的内容提供商的标志作为水印插入主视听内容中。
另外，内容识别服务提供服务器20可以是水印服务器，该水印服务器编辑主视听内容，以将内容信息作为不可视水印插入主视听内容中。
另外，内容识别服务提供服务器20可以是指纹服务器，该指纹服务器从主视听内容的一些帧或音频采样中提取特征信息并且将其存储。此特征信息被称为签名。
多频道视频分发服务器30从多个广播站接收并复用广播信号并且将复用的广播信号提供到广播接收装置60。特别地，多频道视频分发服务器30对所接收的广播信号执行解调和频道解码，以提取主视听内容和增强型服务，并且然后，对所提取的主视听内容和增强型服务执行频道编码，以产生复用信号，用于分发。此时，因为多频道视频分发服务器30可以排除所提取的增强型服务或者可以添加其他的增强型服务，所以广播站可以不提供其引导的服务。可能存在至少一个多频道视频分发服务器。
广播接收装置60可以调谐用户选择的频道并且接收经调谐频道的信号，并且然后，对所接收的信号执行解调和频道解码以提取主视听内容。广播接收装置60通过H.264/运动图像专家组4先进视频编码 (MPEG-4AVC)、Dolby(杜比)AC-3或运动图像专家组-2高级音频编译(MPEG-2AAC)算法对被提取的主视听内容进行解码，以产生未压缩的主视听AV内容。广播接收装置60通过其外部输入端口将所产生的未压缩的主AV内容提供到视频显示装置100。
增强型服务信息提供服务器40响应于视频显示装置的请求，提供关于涉及主AV内容的至少一个可用增强型服务的增强型服务信息。可能存在至少一个增强型服务提供服务器。增强型服务信息提供服务器 40可以提供关于多个可用增强型服务当中的具有最高优先级的增强型服务的增强型服务信息。
增强型服务提供服务器50响应于视频显示装置的请求，提供涉及主AV内容的至少一个可用增强型服务。可能存在至少一个增强型服务提供服务器。
视频显示装置100可以是均包括显示单元的电视机、笔记本电脑、手机和智能电话。视频显示装置100可以从广播接收装置60接收未压缩的主AV内容，或者从内容提供服务器10或多频道视频分发服务器 30接收包括经编码的主AV内容的广播信号。视频显示装置100可以通过网络70从内容识别服务提供服务器20接收内容识别服务，通过网络70从增强型服务信息提供服务器40接收涉及主AV内容的至少一个可用增强型服务的地址，并且从增强型服务提供服务器50接收涉及主AV内容的至少一个可用增强型服务。
内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40和多个增强型服务提供服务器50中的至少两个可以以一个服务器的形式被组合并且可以由一个提供商操作。
图2是图示根据实施例的基于水印的网络拓扑的框图。
如图2中所示，基于水印的网络拓扑还可以包括水印服务器21。
如图2中所示，水印服务器21编辑主AV内容，以将内容信息插入其中。多频道视频分发服务器30可以接收并且分发包括经更改的主 AV内容的广播信号。特别地，水印服务器可以使用下述的数字加水印技术。
数字水印是一种用于将可能几乎不可删除的信息插入数字信号中的过程。例如，数字信号可以是音频、图片或视频。如果复制数字信号，则在复制品中包括插入的信息。一个数字信号可以同时携带多个不同的水印。
在可视加水印的过程中，被插入的信息在图片或视频中可能是可识别的。典型地，被插入的信息可以是识别媒体拥有者的文本或标志。如果电视广播站将其标志添加在视频的角落处，则这是可识别的水印。
在不可视加水印的过程中，尽管信息作为数字数据被添加到音频、图片或视频中，但是用户可以意识到预定数量的信息但是可能无法识别。可以通过不可视加水印传递秘密的消息。
加水印的一个应用是用于防止数字媒体的非法复制的版权保护系统。例如，复制装置在复制数字媒体之前从数字媒体获得水印，并且基于水印的内容确定是否进行复制。
加水印的另一个应用是数字媒体的源追踪。在分发路径的每个点处水印被嵌入在数字媒体中。如果以后发现了这种数字媒体，则可以从数字媒体提取水印并且可以从水印的内容识别分发源。
不可视加水印的另一个应用是对数字媒体的描述。
数字媒体的文件格式可以包括称为元数据的附加信息，并且数字水印与元数据的区别在于数字水印作为数字媒体的AV信号自身被传递。
加水印方法可以包括扩频、量化和调幅。
如果通过额外编辑获得经标记的信号，则加水印方法对应于扩频。尽管已知扩频水印十分强大，但是因为水印干扰嵌入的主信号，所以没有包含太多的信息。
如果通过量化获得经标记的信号，则加水印方法对应于量化型。量化水印弱，可以包括大量信息。
如果在空间域中通过与扩频类似的额外编辑方法获得经标记的信号，则加水印方法对应于调幅。
图3是图示根据实施例的基于水印的网络拓扑中的数据流的梯形图。
首先，在操作S101中内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S103中，水印服务器21接收内容提供服务器10提供的广播信号，通过编辑主AV内容将可视水印诸如标志或作为不可视水印的水印信息插入主AV内容中，并且将加水印的主AV内容和增强型服务提供到MAPD 30。
通过不可视水印插入的水印信息可以包括水印用途、内容信息、增强型服务信息和可用增强型服务中的至少一个。水印功能代表非法复制防止、收视率和增强型服务获取中的一个。
内容信息可以包括提供主AV内容的内容提供商的识别信息、主 AV内容识别信息、内容信息获取中使用的内容段的时间信息、通过其主AV内容被广播的频道的名字、通过其主AV内容被广播的频道的标志、通过其主AV内容被广播的频道的描述、使用信息报告时间段、使用信息获取的最短使用时间以及涉及主AV内容的可用增强型服务信息中的至少一个。
如果视频显示装置100使用水印以获取内容信息，则被用于内容信息获取的内容段的时间信息可以是其中嵌入所使用水印的内容段的时间信息。如果视频显示装置100使用指纹获取内容信息，则被用于内容信息获取的内容段的时间信息可以是从其中提取特征信息的内容段的时间信息。被用于内容信息获取的内容段的时间信息可以包括用于内容信息获取的内容段的开始时间、用于内容信息获取的内容段的持续时间和用于内容信息获取的内容段的结束时间中的至少一个。
使用信息报告地址可以包括主AV内容观看信息报告地址和增强型服务使用信息报告地址中的至少一个。使用信息报告时间段可以包括主AV内容观看信息报告时间段和增强型服务使用信息报告时间段中的至少一个。用于使用信息获取的最短使用时间可以包括用于主AV 内容观看信息获取的最短观看时间和用于增强型服务使用信息提取的最短使用时间中的至少一个。
基于在超过最短观看时间的时间内观看主AV内容，视频显示装置100获取主AV内容的观看信息并且在主AV内容观看信息报告时间段内将所获取的观看信息报告到主AV内容观看信息报告地址。
基于在超过最短使用时间的时间内使用增强型服务，视频显示装置100获取增强型服务使用信息并且在增强型服务使用信息报告时间段内将所获取的使用信息报告到增强型服务使用信息报告地址。
增强型服务信息可以包括关于是否存在增强型服务的信息、增强型服务地址提供服务器地址、用于各个可用增强型服务的获取路径、各个可用增强型服务的地址、各个可用增强型服务的开始时间、各个可用增强型服务的结束时间、各个可用增强型服务的使用期限、各个可用增强型服务的获取模式、各个可用增强型服务的请求时间段、各个可用增强型服务的优先级信息、各个可用增强型服务的说明、各个可用增强型服务的类别、使用信息报告地址、使用信息报告时间段和使用信息获取的最短使用时间中的至少一个。
可用增强型服务的获取路径可以用IP或高级电视系统委员会-移动/手持(ATSCM/H)来表示。如果可用增强型服务的获取路径是ATSC M/H，则增强型服务信息还可以包括频率信息和频道信息。各个可用增强型服务的获取模式可以表示推或拉。
此外，水印服务器21可以将水印信息作为不可视水印插入主AV 内容的标志中。
例如，水印服务器21可以在标志的预定位置插入条形码。此时，标志的预定位置可以对应于显示标志的区域底部处的第一行。当接收包括其中插入条形码的标志的主AV内容时，视频显示装置100可以不显示条形码。
例如，水印服务器21可以在标志的预定位置处插入条形码。此时，标志可以保持其形式。
例如，水印服务器21可以在M个帧的各个标志处插入N比特的水印信息。即，水印服务器21可以在M个帧中插入M*N个水印信息。
在操作S105中，MVPD 30接收包括加水印的主AV内容和增强型服务的广播信号并且产生复用信号，以将其提供到广播接收装置60。此时，复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在操作S106中，广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号，解调所接收的信号，对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容，并且然后，将所产生的未压缩的主AV内容提供到视频显示装置100。
此外，在操作S107中，内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外，在操作S108中，MVPD 30可以在没有经过广播接收装置 60的情况下将包括主AV内容的广播信号直接发送到视频显示装置 100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV 内容。另外，视频显示装置100可以通过无线频道接收广播信号，并且然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。另外，视频显示装置100可以从MVPD接收广播信号，并且然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。视频显示装置100从所获得的主AV内容的一些帧或音频采样片段中提取水印信息。如果水印信息对应于标志，则视频显示装置100确认与从多个标志和多个水印服务器地址之间的对应关系中提取的标志对应的水印服务器地址。当水印信息对应于标志时，视频显示装置100不能够仅通过标志来识别主AV内容。另外，当水印信息不包括内容信息时，视频显示装置100不能够识别主AV内容，但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时，视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以这样的方式，在操作S109中，当视频显示装置100 不能够仅通过水印信息识别视频显示装置100的主AV内容时，它访问与所获得的水印服务器地址对应的水印服务器21，以发送第一查询。
在操作S111中，水印服务器21向第一查询提供第一应答。第一应答可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
如果水印信息和第一应答不包括增强型服务地址，则视频显示装置100不能够获得增强型服务。然而，水印信息和第一应答可以包括增强型服务地址提供服务器地址。以这样的方式，视频显示装置100 没有通过水印信息和第一应答获得服务地址或增强型服务。在操作 S119中，如果视频显示装置100获得增强型服务地址提供服务器地址，则它访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40，以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及第二查询的内容信息的至少一个可用增强型服务。以后，在操作S121中，增强型服务信息提供服务器40向视频显示装置100提供用于至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答。
在操作S123中，如果视频显示装置100通过水印信息、第一应答或第二应答获得至少一个可用增强型服务地址，则它访问至少一个可用增强型服务地址以请求增强型服务，然后，在操作S125中，获得增强型服务。
图4是图示根据实施例的基于水印的内容识别时序的视图。
如图4中所示，当广播接收装置60被打开并且调谐频道，并且另外，视频显示装置100通过外部输入端口111从广播接收装置60接收经调谐频道的主AV内容时，视频显示装置100可以从主AV内容的水印中感测内容提供商标识符(或广播站标识符〉。然后，视频显示装置100可以基于感测到的内容提供商标识符从主AV内容的水印中感测内容信息。
此时，如图4中所示，内容提供商标识符的检测可用时间段可以与内容信息的检测可用时间段不同。特别地，内容提供商标识符的检测可用时间段可以比内容信息的检测可用时间段短。通过此，视频显示装置100可以具有用于仅检测必要信息的有效配置。
图5是图示根据实施例的基于指纹的网络拓扑的框图。
如图5中所示，网络拓扑还可以包括指纹服务器22。
如图5中所示，指纹服务器22没有编辑主AV内容，而是从主AV 内容的一些帧或音频采样片段中提取特征信息并且存储所提取的特征信息。然后，当从视频显示装置100接收特征信息时，指纹服务器22 提供与所接收的特征信息对应的AV内容的时间信息和标识符。
图6是图示根据实施例的基于指纹的网络拓扑中的数据流的梯形图。
首先，在操作S201中，内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S203中，指纹服务器22接收内容提供服务器10提供的广播信号，从主AV内容的多个帧片段或多个音频片段中提取多条特征信息，并且创建与多个特征信息对应的多个查询结果的数据库。查询结果可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
在操作S205中，MVPD 30接收包括主AV内容和增强型服务的广播信号并且产生复用信号，以将其提供到广播接收装置60。此时，复用信号可以排除所接收的增强型服务或者可以包括新的增强型服务。
在操作S206中，广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号，解调所接收的信号，对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容，然后，将所产生的未压缩的主AV内容提供到视频显示装置100。
此外，在操作S207中，内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外，在操作S208中，MVPD 30可以在没有经过广播接收装置 60的情况下将包括主AV内容的广播信号直接发送到视频显示装置 100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV 内容。另外，视频显示装置100可以通过无线频道接收广播信号，并且然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。另外，视频显示装置100可以从MVPD 30接收广播信号，并且然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。在操作 S213中，视频显示装置100从所获得的主AV内容的一些帧或音频采样片段中提取特征信息。
在操作S215中，视频显示装置100访问与预定的指纹服务器地址对应的指纹服务器22，以发送包括所提取的特征信息的第一查询。
在操作S217中，指纹服务器22向第一查询提供作为第一应答的查询结果。如果第一应答对应于失败，则视频显示装置100访问与另一个指纹服务器地址对应的指纹服务器22，以发送包括所提取的特征信息的第一查询。
指纹服务器22可以提供可扩展标记语言(XML)文档作为查询结果。将参考图7和表1描述包含查询结果的XML文档的示例。
图7是图示根据实施例的包含查询结果的ACR-Resulttype的XML 模型图的视图。
如图7中所示，包含查询结果的ACR-Resulttype包括ResultCode 属性和ContentID、NTPTimestamp、SignalingChannelInformation以及 ServiceInformation元素。
例如，如果ResultCode属性具有200，则这可能意味着查询结果是成功的。例如，如果ResultCode属性具有404，则这可能意味着查询结果是不成功的。
SignalingChannelInformation元素包括SignalingChannelURL，并且SignalingChannelURL元素包括UpdateMode和PollingCycle属性。 UpdateMode属性可以具有拉(Pull)值或推(Push)值。
ServiceInformation元素包括ServiceName、ServiceLogo、 ServiceDescription元素。
表1图示包含查询结果的ACR-ResultType的XML模型。
[表1]
作为ContentID元素，ATSC内容标识符可以如表2中所示地使用。
[表2]
如表2中所示，ATSC内容标识符具有包括TSID和房号的结构。
16位不带符号的整数TSID携带传输流标识符。
用当在完成广播之后能够重新使用content_id值时的那天中的小时，设置5位不带符号的整数end_of_day。
用当不能够重新使用content_id值时的天数，设置9位不带符号的整数unique_for。
Content_id代表内容标识符。视频显示装置100每天在end_of_day 的对应时间中将unique_for减少了1，并且假定如果unique_for不是0，则content_id是唯一的。
此外，作为ContentID元素，可以如下所述地使用ATSC-M/H服务的全局服务标识符。
全局服务标识符具有下面的形式。
-urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>
在此，<region>是包括ISO 639-2规定的两个字符的国际国家代码。用于本地服务的<xsid>是如在<region>中定义的TSID的十进制数，并且<xsid>(区域性服务)(major>69)是“0”。<serviceid>是用<major> 或<minor>定义的。<major>代表主频道号，并且<minor>代表次频道号。
全局服务标识符的示例如下。
-urn:oma:bcast:iauth:atsc:service:us:1234:5.1
-urn:oma:bcast:iauth:atsc:service:us:0:100.200
此外，作为ContentID元素，可以如下所述地使用ATSC内容标识符。
ATSC内容标识符具有下面的形式。
urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>
在此，<xsid>是包括ISO 639-2规定的两个字符的国际国家代码。用于本地服务的<xsid>是如在<region>中定义的TSID的十进制数，并且可以后面跟着“.”<serviceid>。用于(区域性服务)(major>69) 的<xsid>是<serviceid>。<content_id>是表2中定义的content_id字段的 base64符号，<unique_for>是用于表2中定义的unique_for的十进制数符号，并且<end_of_day>是表2中定义的end_of_day字段的十进制数符号。
下文中，再次描述图6。
在操作S219中，如果查询结果不包括增强型服务地址或增强型服务，而是包括增强型服务地址提供服务器地址，则视频显示装置100 访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40，以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及第二查询的内容信息的至少一个可用的增强型服务。随后，在操作S221中，增强型服务信息提供服务器40将用于至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答提供到视频显示装置100。
在操作S223中，如果视频显示装置100通过第一应答或第二应答获得至少一个可用的增强型服务地址，则它访问至少一个可用增强型服务地址以请求增强型服务，然后在操作S225中，获得增强型服务。
当UpdateMode属性具有拉值时，视频显示装置100通过SignalingChannelURL将HTTP请求发送到增强型服务提供服务器50，并且响应于请求，从增强型服务提供服务器50接收包括PSIP二进制流的HTTP应答。在这种情况下，视频显示装置100可以根据如PollingCycle属性指定的轮询(Polling)时间段发送HTTP请求。另外，SignalingChannelURL元素可以具有更新时间属性。在这种情况下，视频显示装置100可以根据如更新时间属性指定的更新时间发送HTTP 请求。
如果UpdateMode属性具有推值，则视频显示装置100可以通过 XMLHTTPRequestAPI从服务器异步地接收更新。在视频显示装置100 通过XMLHTTPRequest对象向服务器发送异步请求之后，如果信令信息有变化，则服务器通过频道提供信令信息作为应答。如果会话等待时间有限制，则服务器产生会话超时应答并且接收器识别所产生的超时应答以再次发送请求，使得接收器和服务器之间的信令频道可以一直保持。
图8是示出根据实施例的基于水印和指纹的网络拓扑的框图。
如图8中所示，基于水印和指纹的网络拓扑还可以包括水印服务器21和指纹服务器22。
如图8中所示，水印服务器21将内容提供商识别信息插入主AV 内容中。水印服务器21可以将内容提供商识别信息作为可视水印如标志或不可视水印插入主AV内容中。
指纹服务器22不编辑主AV内容，而是从主AV内容的一些帧或音频采样的某些片段中提取特征信息并且存储所提取的特征信息。然后，当从视频显示装置100接收特征信息时，指纹服务器22提供与所接收的特征信息对应的AV内容的时间信息和标识符。
图9是图示根据实施例的基于水印和指纹的网络拓扑中的数据流的梯形图。
首先，在操作S301中，内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S303中，水印服务器21接收内容提供服务器10提供的广播信号，通过编辑主AV内容将可视水印诸如标志或作为不可视水印的水印信息插入主AV内容中，并且将加水印的主AV内容和增强型服务提供到MVPD 30。通过不可视水印插入的水印信息可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在操作S305中，MVPD 30接收包括加水印的主AV内容和增强型服务的广播信号并且产生复用信号，以将其提供到广播接收装置60。此时，复用信号可以排除所接收的增强型服务或者可以包括新的增强型服务。
在操作S306中，广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号，解调所接收的信号，对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容，然后，将所产生的未压缩的主AV内容提供到视频显示装置100。
此外，在操作S307中，内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外，在操作S308中，MVPD 30可以在不经过广播接收装置60 的情况下将包括主AV内容的广播信号直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV 内容。另外，视频显示装置100可以通过无线频道接收广播信号，然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。另外，视频显示装置100可以从MVPD 30接收广播信号，并且然后，可以对所接收的广播信号进行解调和解码，以获得主AV内容。视频显示装置100从所获得的主AV内容的一些帧或时间段的音频采样中提取水印信息。如果水印信息对应于标志，则视频显示装置100确认与从多个标志和多个水印服务器地址之间的对应关系中提取的标志对应的水印服务器地址。当水印信息对应于标志时，视频显示装置100不能够仅通过标志来识别主AV内容。另外，当水印信息不包括内容信息时，视频显示装置100不能够识别主AV内容，但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时，视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以这样的方式，在操作S309中，当视频显示装置100不能够仅通过水印信息识别视频显示装置100的主AV内容时，它访问与所获得的水印服务器对应的水印服务器21，以发送第一查询。
在操作S311中，水印服务器21为第一查询提供第一应答。第一应答可以包括指纹服务器地址、内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在操作S313中，如果水印信息和第一应答包括指纹服务器地址，则视频显示装置100从主AV内容的音频采样的一些帧或某个片段中提取特征信息。
在操作S315中，视频显示装置100访问与第一应答中的指纹服务器地址对应的指纹服务器22，以发送包括所提取的特征信息的第二查询。
在操作S317中，指纹服务器22将查询结果作为第二应答提供给第二查询。
在操作S319中，如果查询结果不包括增强型服务地址或增强型服务，而是包括增强型服务地址提供服务器地址，则视频显示装置100 访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40，以发送包括内容信息的第三查询。
增强型服务信息提供服务器40搜索涉及第三查询的内容信息的至少一个可用增强型服务。随后，在操作S321中，增强型服务信息提供服务器40将用于至少一个可用的增强型服务的增强型服务信息作为对第三查询的第三应答提供到视频显示装置100。
在操作S323中，如果视频显示装置100通过第一应答、第二应答或第三应答获得至少一个可用增强型服务地址，则它访问至少一个可用增强型服务地址以请求增强型服务，并且然后，在操作S325中，获得增强型服务。
然后，参考图10，将会描述根据实施例的视频显示装置100。
图10是图示根据实施例的视频显示装置的框图。
如图10中所示，视频显示装置100包括广播信号接收单元101、解调单元103、频道解码单元105、解复用单元107、AV解码单元109、外部输入端口111、播放控制单元113、播放装置120、增强型服务管理单元130、数据发送/接收单元141和存储器150。
广播信号接收单元101从内容提供服务器10或MVPD 30接收广播信号。
解调单元103对所接收的广播信号进行解调，以产生经解调的信号。
频道解码单元105对经解调的信号执行频道解码，以产生经频道解码数据。
解复用单元107将主AV内容和增强型服务与经频道解码数据分开。被分开的增强型服务被存储在增强型服务存储单元152中。
AV解码单元109对被分开的主AV内容执行AV解码，以产生未压缩的主AV内容。
此外，外部输入端口111从广播接收装置60、数字多功能盘(DVD) 播放器、蓝光(Blu-ray)盘播放器等接收未压缩的主AV内容。外部输入端口111可以包括DSUB端口、高清晰度多媒体接口(HDMI)端口、数字视频接口(DVI)端口、复合端口、组件端口和S视频端口中的至少一个。
播放控制单元113控制播放装置120，以根据用户的选择，播放AV解码单元109产生的未压缩的主AV内容和从外部输入端口111接收的未压缩的主AV内容中的至少一个。
播放装置120包括显示单元121和扬声器122。显示单元121可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器和3D显示器中的至少一个。
增强型服务管理单元130获得主AV内容的内容信息并且基于获得的内容信息获得可用的增强型服务。特别地，如上所述，增强型服务管理单元130可以基于未压缩的主AV内容的音频采样的一些帧或某个片段，获得主AV内容的识别信息。在本说明书中这被称为自动内容识别(ACR)。
数据发送/接收单元141可以包括高级电视系统委员会-移动/手持 (ATSC-M/H)频道发送/接收单元141a和IP发送/接收单元141b。
存储器150可以包括存储介质诸如闪存存储器类型、硬盘类型、多媒体卡微型、卡型存储器诸如SD或XD存储器、随机存取存储器 (RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘和光盘中的至少一种类型。视频显示装置100可以与网络存储器相链接而操作，在互联网上执行存储器150的存储功能。
存储器150可以包括内容信息存储单元151、增强型服务存储单元 152、标志存储单元153、设置信息存储单元154、书签存储单元155、用户信息存储单元156和使用信息存储单元157。
内容信息存储单元151存储与多个特征信息对应的多个内容信息。
增强型服务存储单元152可以存储与多个特征信息对应的多个增强型服务或者与多个内容信息对应的多个增强型服务。
标志存储单元153存储多个标志。另外，标志存储单元153还可以存储与多个标志相对应的内容提供商标识符或者与多个标志对应的水印服务器地址。
设置信息存储单元154存储用于ACR的设置信息。
书签存储单元155存储多个书签。
用户信息存储单元156存储用户信息。用户信息可以包括用于至少一个服务的至少一个账户信息、区域性信息、家庭成员信息、首选流派信息、视频显示装置信息和使用信息范围中的至少一个。至少一个账户信息可以包括用于使用信息测量服务器的账户信息和社交网络服务诸如推特和脸书的账户信息。区域性信息可以包括地址信息和邮政区码。家庭成员信息可以包括家庭成员的数量、每个成员的年龄、每个成员的性别、每个成员的宗教信仰和每个成员的工作。可以用运动、电影、戏剧、教育、新闻、娱乐和其它流派中的至少一个设置首选流派信息。视频显示装置信息可以包括信息诸如类型、制造商、固件版本、分辨率、型号、OS、浏览器、存储装置可用性、存储装置容量和视频显示装置的网速。一旦设置了使用信息范围，视频显示装置 100在设置范围内收集并报告主AV内容观看信息和增强型服务使用信息。可以在每个虚拟频道中设置使用信息范围。另外，可以在整个物理频道内设置使用信息测量可容许范围。
使用信息提供单元157存储由视频显示装置100收集的主AV内容观看信息和增强型服务使用信息。另外，视频显示装置100基于收集的主AV内容观看信息和增强型服务使用信息分析服务使用模式，并且将经分析的服务使用模式存储在使用信息存储单元157中。
增强型服务管理单元130可以从指纹服务器22或内容信息存储单元151获得主AV内容的内容信息。如果在内容信息存储单元151中没有与所提取的特征信息对应的内容信息或者充分的内容信息，则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的内容信息。此外，增强型服务管理单元130可以连续地更新内容信息。
增强型服务管理单元130可以从增强型服务提供服务器50或增强型服务存储单元152获得可用的增强型服务。如果在增强型服务存储单元152中没有增强型服务或充分的增强型服务，则增强型服务管理单元130可以通过数据发送/接收单元141更新增强型服务。此外，增强型服务管理单元130可以连续地更新增强型服务。
增强型服务管理单元130可以从主AV内容中提取标志，然后，可以查询标志存储单元153，以获得与所提取的标志对应的内容提供商标识符或水印服务器地址。如果在标志存储单元153中没有与所提取的标志对应的标志或充分的标志，则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的标志。此外，增强型服务管理单元130可以连续地更新标志。
增强型服务管理单元130可以通过各种方法将从主AV内容中提取的标志与标志存储单元153中的多个标志进行比较。各种方法可以减少比较运算的负荷。
例如，增强型服务管理单元130可以基于颜色特性执行比较。即，增强型服务管理单元130可以将所提取的标志的颜色特性与标志存储单元153中的标志的颜色特性进行比较，以确定它们是否相同。
此外，增强型服务管理单元130可以基于字符识别执行比较。即，增强型服务管理单元130可以将从所提取的标志中识别的字符与从标志存储单元153中的标志中识别的字符进行比较，以确定它们是否相同。
此外，增强型服务管理单元130可以基于标志的简档执行比较。即，增强型服务管理单元130可以将所提取的标志的简档与标志存储单元153中的标志的简档进行比较，以确定它们是否相同。
然后，参考图11和图12，将会描述同步主AV内容的回放时间与增强型服务的回放时间的方法。
图11是图示根据实施例的同步主AV内容的回放时间与增强型服务的回放时间的方法的流程图。
增强型服务信息可以包括增强型服务的开始时间。此时，视频显示装置100可能需要在开始时间开始增强型服务。然而，因为视频显示装置100在没有时间戳的情况下接收发送未压缩的主AV内容的信号，所以主AV内容的播放时间的参考时间与增强型服务的开始时间的参考时间不同。尽管视频显示装置100接收具有时间信息的主AV内容，但是主AV内容的播放时间的参考时间可以与增强型服务的开始时间的参考时间不同，如同重新广播一样。因此，视频显示装置100可能需要将主AV内容的参考时间与增强型服务的参考时间同步。特别地，视频显示装置100可能需要将主AV内容的回放时间与增强型服务的开始时间同步。
首先，在操作S801中，增强型服务管理单元130提取主AV内容的某个片段。主AV内容的片段可以包括主AV内容的一些视频帧或某个音频片段中的至少一个。增强型服务管理单元130提取主AV内容的该片段的时间被指定为Tn。
在操作S803中，增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。更加详细地，增强型服务管理单元130对所提取的片段中的通过不可视水印编码的信息进行解码，以获得内容信息。另外，增强型服务管理单元130可以提取所提取的片段中的特征信息，并且基于所提取的特征信息，从指纹服务器22或内容信息存储单元151 获得主AV内容的内容信息。增强型服务管理单元130获得内容信息的时间被指定为Tm。
此外，内容信息包括所提取的片段的开始时间Ts。在内容信息获取时间Tm之后，在操作S805中，增强型服务管理单元130基于Ts、 Tm、以及Tn将主AV内容的回放时间与增强型服务的开始时间同步。更加详细地，增强型服务管理单元130将内容信息获取时间Tp视为通过下述等式1计算出的时间Tp。
[等式1]
Tp＝Ts+(Tm-Tn)
另外，增强型服务管理单元130将当内容信息获取时间之后Tx流逝时的时间视为Tp+Tx。
然后，在操作S 807中，增强型服务管理单元130在所获得的内容信息中获得增强型服务和其开始时间Ta。
在操作S809中，如果被同步的主AV内容的回放时间与增强型服务的开始时间Ta相同，则增强型服务管理单元130开始所获得的增强型服务。更加详细地，当满足下述等式2时，增强型服务管理单元130 可以开始增强型服务。
[等式2]
Tp+Tx＝Ta
图12是示出根据实施例的将主AV内容的回放时间与增强型服务的回放时间同步的方法的概念图。
如图12中所示，视频显示装置100在系统时间Tn期间提取AV 采样。
视频显示装置100从所提取的AV采样中提取特征信息，并且将包括所提取的特征信息的查询发送到指纹服务器22，以接收查询结果。视频显示装置100通过解析查询结果，确认在Tm处所提取的AV采样的开始时间Ts是否对应于11000ms。
因此，视频显示装置100将根据等式1确认的所提取的AV采样的开始时间的时间视为Ts+(Tm–Tn)，使得，然后，主AV内容的回放时间可以与增强型服务的开始时间同步。
接着，将会参考图13至图14描述根据各种实施例的ACR应用。
ACR应用可以包括自动播放应用、内容提供商应用和视频显示制造商应用。
图13是根据实施例的当执行自动播放应用时的画面。
自动播放应用自动地播放增强型服务，即使当在用户没有采取动作时。从这个意义上讲，在本说明书中自动播放应用被指定为往后靠应用。
在没有用户输入的情况下，自动播放应用根据主AV内容的回放时间自动地播放增强型服务，诸如内容提供商或广播站在主AV内容的播放期间提供的场景相关信息。即，内容提供商或广播站完全控制自动播放应用。例如，当自动播放应用与特定频道或者特定内容相关时，当视频显示装置100进入与自动播放应用相关的频道或者内容时，在没有用户输入的情况下视频显示装置100可以自动地执行相对应的自动播放应用。然后，当视频显示装置100变成在与自动播放应用相关的频道或者内容之外时，可以在没有用户输入的情况下自动地终止相对应的自动播放应用。在这种意义上讲，在本说明书中自动播放应用将会被称为频道依赖的应用或者内容依赖的应用。
如图13中所示，一旦执行自动播放应用，画面200就可以包括播放减少的主AV内容的子画面210和其中显示附加信息的子画面220。其中显示附加信息的子画面200可以在空间上与其中播放主AV内容的子画面210分离。
此外，当执行自动播放应用时，其中显示附加信息的区域可以是半透明的。在这种情况下，其中显示附加信息的区域可以与其中播放主AV内容的区域重叠。
图14是根据实施例的当执行内容提供商应用时的画面。
在本说明书中，内容提供商应用被指定为完全交互式应用。
如图14(A)中所示，视频显示装置100下载并存储多个应用。图14(A)图示应用的图标230。多个应用当中的内容提供商应用是由内容提供商创建并分发的应用，并且因此，可以处于内容提供商的控制下。
视频显示装置100的用户可以从应用商店下载内容提供商应用并且确定是否要执行所下载的内容提供商应用。
图14(B)是当执行内容提供商应用时的画面。如图14(B)中所示，画面200可以包括其中播放减少的主AV内容的子画面210和其中显示附加信息的子画面220。
在下文中，将会根据实施例参考图23至图35描述视频显示装置制造商应用。
视频显示装置制造商应用是由视频显示装置制造商创建并控制的，并且当制造视频显示装置100时可以预先被存储。即，视频显示装置制造商应用可以提供相同的服务和用户界面，不论内容提供商或内容如何。
视频显示装置制造商应用可以单独地包括其中显示内容提供商提供的增强型服务的区域和其中显示视频显示装置制造商提供的增强型服务的区域。视频显示装置100的用户可以确定是否要执行视频显示装置制造商应用。
视频显示装置制造商应用可以具有两种类型。
第一种类型的视频显示装置制造商应用具有缩放用户界面。具有缩放用户界面的视频显示装置制造商应用减小其中显示主AV内容的区域的尺寸，以在缩小的区域中显示所有主AV内容。另外，具有缩放用户界面的视频显示装置制造商应用重塑其中显示应用的具有L或者倒L形的结构的区域。
第二种类型的视频显示装置制造商应用具有重叠的用户界面。具有重叠的用户界面的视频显示装置制造商应用保持其中显示主AV内容的区域的尺寸，并且将其中显示应用的区域重叠在主AV内容上。因为其中显示应用的区域覆盖主AV内容，所以应用区域可以是半透明的。
像这样，视频显示装置制造商应用不取决于任何单个内容提供商或者任何单个频道。尽管描述了由视频显示装置制造商制造这样的应用，但是本发明不限于此。不取决于任何单个内容提供商或者任何单个频道的应用没有通过频道变化而执行或者没有通过频道变化而终止。为了在下面的说明书中便于描述，不取决于任何单个内容提供商或者任何单个频道的应用可以被称为频道无关的应用、视频显示装置制造商应用或者Live+应用。
然后，将会参考图15和图16描述根据实施例的ACR功能的开/ 关控制。
图15是根据实施例的用于控制ACR功能的用户界面的视图。
如图15中所示，播放控制单元113显示ACR功能设置窗口。用户可以通过ACR功能设置窗口对ACR功能进行激活或停用。
当激活ACR功能时，用户可以选择ACR模式。ACR模式可以被设置为具有自动播放应用模式、内容提供商应用模式和视频显示制造商应用模式中的一个。
当以上述方式设置ACR功能模式时，播放控制单元113将设置信息存储在设置信息存储单元154上。
图16是示出根据实施方式的控制视频显示装置的方法的流程图。
在操作S1901中，增强型服务管理单元130确认ACR功能是否启动。
如果ACR功能被停用，则增强型服务管理单元130不再执行内容信息获得程序。
如果激活ACR功能，则在操作S1902中增强型服务管理单元130 提取主AV内容的某个片段。
在操作S1903中，增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。
在操作S1905中，增强型服务管理单元130将主AV内容的参考时间与替选广告的参考时间同步。
在操作S1907中，增强型服务管理单元130基于所获得的内容信息获得增强型服务。增强型服务管理单元130基于内容信息获得增强型服务信息，然后基于增强型服务信息获得增强型服务。
然后，在操作S1909中，增强型服务管理单元130确认ACR模式。
在操作S1911中，增强型服务管理单元130根据ACR模式播放增强型服务。
更详细地，如果ACR模式是自动播放应用模式，则增强型服务管理单元130执行自动播放应用，并且所执行的自动播放应用播放所获得的增强型服务。
如果ACR模式是内容提供商应用模式，则增强型服务管理单元 130在后台执行与所获得的内容信息对应的内容提供商应用。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示内容提供商应用。此内容提供商应用可以播放所获得的增强型服务。替代内容提供商应用在后台自动执行，可以通过用户输入执行。
如果ACR模式是视频显示装置制造商应用模式，则增强型服务管理单元130在后台执行视频显示装置制造商应用。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示视频显示装置制造商应用。此视频显示装置制造商应用可以播放所获得的增强型服务。替代视频显示装置制造商应用在后台自动执行，可以通过用户输入执行。
下文中，将会参考图17至图37描述根据本发明的实施例的第三方增强型服务。
图17是图示根据本发明的实施例的网络拓扑的视图。
如在图17中所示，网络拓扑包括诸如广播公司/CP后端服务器的内容提供服务器10、诸如增强型服务提供服务器50的第三方服务器 90、诸如ACR服务器的内容识别服务提供服务器20、以及诸如ACR 智能TV的视频显示装置100。
视频显示装置100可以通过使用频道依赖的应用或者诸如内容依赖的应用的Leanback应用从内容提供服务器10获得广播公司增强型服务，并且可以通过使用诸如频道无关的应用的Live+应用从第三方服务器90获得第三方增强型服务。
诸如频道依赖的应用的Leanback应用，是广播公司或者CP提供的应用，并且也提供通过节目单元或者场景单元同步的服务。因为广播公司是生产节目的主体，所以其掌握哪一个场景是在节目中。因此，广播公司可以显示对于特定场景最适合的内容。一旦视频显示装置100 识别节目，则其从相对应的节目的内容提供服务器10下载Leanback 应用，并且然后，自动地执行被下载的Leanback应用。然而，当视频显示装置100将当前频道变成与执行的Leanback应用无关的另一频道时，其自动地终止相对应的Leanback应用，并且如果存在改变的频道的Leanback应用，则其执行相对应的Leanback应用。
Live+应用是第三方(例如，制造商)提供的应用，被预先安装在TV中，并且可以被一直执行，不论用户当前观看的频道或者节目如何，不同于Leanback应用。与本发明建议的ACR架构相关，Live+应用显示通过场景单元同步的节目有关的增强型信息和内容。Live+应用具有一致的用户界面并且一直被执行，不论节目如何。即使当广播公司没有提供与节目有关的附加信息时Live+应用可以通过使用节目有关的元数据提供各种服务。例如，Live+应用可以提供关于节目的基本信息和对其中出现节目演员的电影的推荐。因为Live+应用具有被指配给广播公司/CP的区域，所以当广播公司提供与节目有关的附加信息时其可以在相对应的区域上显示相对应的与节目有关的增强型数据。例如，广播公司提供的增强型数据可以包括用户当前观看的节目的事先广播的重放和场景同步的内容(例如，产品购买、地点预定、音乐源购买和下载、以及产品广告)。
视频显示装置100包括ACR模块，该ACR模块从未经压缩的AV 内容提取签名，并且通过被提取的签名查询内容识别服务提供服务器 20以便于识别节目。而且，视频显示装置100基于被识别的节目驱动与节目有关的应用。在节目识别之后可以下载Leanback应用并且然后执行。当TV被发布时通过制造商可以预先安装Leanback应用，或者可以从应用商店下载并且安装。
内容识别服务提供服务器20存储被广播的节目的音频和/或视频的签名。内容识别服务提供服务器20可以通过使用签名捕获系统来提取并且存储实时广播的签名，并且可以从广播公司接收包括与特定节目相对应的签名的ACR DB并且然后可以进行存储。内容识别服务提供服务器20的ACR DB存储节目的内容ID、签名、时间戳、以及URL。在本说明书中，可以使用两种类型的内容ID。
第一类型的内容ID，作为广播公司直接指配的ID，是唯一地标识广播公司中的节目的标识符。广播公司可以将内容ID以其所期待的格式指配给节目。当向内容提供服务器10请求节目有关的增强型数据时可以使用内容ID。
作为全局唯一内容ID的第二类型的内容ID，是唯一地标识全国或者全球节目的标识符。因为通过国家广播频道、本地广播频道、有线广播、或者卫星广播发送节目，所以为了提取所有节目的签名，多个签名捕获设备可以被安装在多个区域中。而且，为了在全国或者全世界唯一地标识和区分各个节目，全局唯一内容ID可以被指配给各个节目。为了将各个节目映射到全局唯一内容ID，可以使用元数据。因为除了诸如节目有关的附加信息的元数据之外，元数据数据库还包括节目时间表信息，所以通过使用元数据数据库从捕获系统递送的签名可以被映射到某个节目中。捕获系统获知被提取的签名与哪个区域、频道、以及时间有关，并且因此，当利用此信息搜索元数据数据库时，可以找到节目。内容识别服务提供服务器20和第三方服务器90可以共享元数据数据库，并且可以通过使用元数据数据库通过全局唯一内容ID识别节目。全局唯一内容ID的格式可以由操作服务器的第三方指定，或者可以从元数据数据库提供。
从第三方服务器90提供Live+应用提供的所有服务。第三方服务器90可以从视频显示装置100接收内容识别服务提供服务器20递送的全局唯一内容ID。第三方服务器90可以通过全局唯一内容ID从元数据数据库提取与全局唯一内容ID相对应的节目有关的元数据，并且基于被提取的元数据，可以将与节目有关的各种服务提供给视频显示装置100。另外，如果存在关于广播公司提供的被识别的节目的附加信息，则第三方服务器90访问广播公司服务器以便于接收节目有关的增强性数据，并且进行处理并且将其提供给视频显示装置100。广播公司通过Live+应用提供的节目有关的增强型数据具有与通过Leanback应用提供的增强型数据相同的内容但是不同的用户界面。然而，在另一实施例中，根据广播公司，通过Live+应用提供的节目有关的增强型数据可以不同于Leanback应用提供的增强型数据。
对于多个广播公司或者多个CP可以存在多个内容提供服务器10。内容提供服务器10具有节目导向的Leanback应用和Leanback应用输出的节目有关的增强数据。
图18是图示根据本发明的各种实施例的Live+应用的视图。
Live+应用可以调整主AV媒体内容的大小，以便于在屏幕的左上区域上显示，可以在屏幕的右区域上显示节目有关的附加信息，并且可以在屏幕的底区域上显示节目有关的广告。Live+应用可以在右区域中的内容区域的顶区域上显示多个选项卡。多个选项卡可以包括节目选项卡、推荐选项卡、话题选项卡、以及加选项卡。
图19是图示根据本发明的各种实施例的执行Live+应用的方法的视图。
视频显示装置100可以显示主画面或我的应用画面。我的应用画面是显示被安装在视频显示装置100中的应用的列表的画面。
在接收从在主画面或者我的应用画面上示出的多个应用中选择 Live+应用的用户输入之后，视频显示装置100可以执行Live+应用。
另外，当播放广播时，视频显示装置100可以通过定时器以预定的时间间隔显示通知存在Live+应用的的图形，并且当接收与此图形有关的用户输入时，可以执行Live+应用。
图20是图示根据本发明的实施例的Live+应用的选项卡功能的视图。
节目选项卡提供关于观众当前观看的节目的基本信息和节目的重放服务。视频显示装置100可以从第三方服务器90的元数据DB中取回节目基本信息。通过第三方服务器90，视频显示装置100可以从创建相对应的节目的内容提供服务器10带来关于节目重放服务的信息。
推荐选项卡可以推荐与当前节目有关的另一AV内容，即，与当前节目有关的电影或者视频(例如，Youtube)或者应用。第三方服务器90可以基于当前节目的标题、流派、或者演员表确定用于推荐的电影或者视频，并且然后可以处理关于此的信息以提供视频显示装置100 的Live+应用的推荐选项卡。
话题选项卡提供与当前节目有关的会话内容相对应的推特文章。第三方服务器90可以基于当前节目的标题、流派、或者演员表搜寻当前节目有关的推特文章，并且然后可以处理搜索到的文章以提供视频显示装置100的Live+应用的话题选项卡。
加选项卡是广播公司提供节目有关的数据的区域。加选项卡可以如原样提供从广播公司接收到的信息，或者可以提供从广播公司服务器接收到并且通过第三方服务器90处理的信息。对加选项卡提供的数据的类型和数目没有限制。加选项卡可以提供诸如产品购买、地点预定、音乐源购买、以及产品广告的各种增强型数据。然而，当来自于广播公司服务器的信息被如原样提供给加选项卡时，第三方服务器90 处理来自于广播公司服务器的信息以被适配Live+应用的内容区域的位置和大小，并且然后将已处理的信息提供给视频显示装置100。
图21是图示根据本发明的实施例的第三方服务器90的架构的视图。
如在图21中所示，第三方服务器90包括应用层、服务组件层、后端系统层、以及数据组件层。
应用层可以通过传递接口与包括视频显示装置100的各种装置通信。应用层可以包括应用商店组件。应用商店组件可以支持开发者通过其注册应用的接口，并且也可以支持通过其一般用户搜索、下载、并且安装应用的接口。另外，Live+应用可以通过应用商店组件接收第三方服务器90中的诸如广告、搜索、以及推荐的服务。
服务组件层可以通过服务集成接口与应用层通信。服务组件层包括广告服务组件、集成搜索组件、推荐组件、以及ACR组件。服务组件层从后端系统层接收被处理的数据并且将它们传递到应用层。ACR 组件可以通过使用从视频显示装置100接收到的内容ID(Content ID)、全局内容ID(Global Content ID)、时间戳、以及广播公司服务器URL 通过后端系统层的元数据组件获得节目有关的基本附加信息。另外，为了与节目有关的搜索结果，ACR组件可以传递从元数据获得的关于节目标题和演员的信息。
后端系统层从数据组件层读取原始数据并且进行处理并且将该数据传递到服务组件层。后端系统层可以包括搜索引擎安全组件、DRAM 组件、元数据组件、广告平台组件、以及ACR组件。
数据组件层可以具有实际的数据。在此，数据组件层可以包括文件仓库、集成的DB、用户简档仓库、元数据仓库、以及广告数据存储。用户简档仓库可以存储关于观众或者用户的性别、年龄、区域、收入、家庭成员、首选的流派、以及首选的节目的信息。元数据仓库可以包括关于内容的标题、剧集、导演、概要、演员表、频道、以及广播时间的信息。第三方服务器90可以接收来自于元数据提供商的关于内容的信息或者实时广播指南信息(例如，在ATSC陆地波、PSIP的情况下)，并且然后可以将接收到的信息存储在元数据仓库中。
图22是根据本发明的实施例的用于自动执行应用的视频显示装置的操作的梯形图。
首先，在操作S2105中，视频显示装置100从主AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，并且将包括被提取的特征信息的ACR查询请求消息发送到与ACR服务器相对应的指纹服务器22。
在操作S2107中，指纹服务器22查询在来自于ACR DB的ACR 查询请求消息中的特征信息以识别与特征信息相对应的节目，并且将包括关于被识别的节目的内容信息的ACR查询响应提供给视频显示装置100。此时，ACR查询响应消息可以包括关于节目识别是否成功的信息、内容信息、以及Leanback应用的URL。如在上面所提及的，内容信息可以包括被识别的节目的内容ID和时间戳。在此，内容ID的格式可以是只有相对应的广播公司识别的格式。特别地，这是广播公司将相对应节目的ACR DB提供给内容识别服务提供服务器20的情况。
当节目识别成功并且Leanback应用URL有效时，在操作S2109 中，视频显示装置100通过相对应Leanback应用URL的请求Leanback 应用。
在操作S2111中，内容提供服务器10提供视频显示装置100请求视频显示装置100的Leanback应用。因此，视频显示装置100可以下载Leanback应用。
当视频显示装置100成功地下载Leanback应用时，在操作S2113 中，其自动地执行相对应的Leanback应用。
在视频显示装置100中执行的Leanback应用从视频显示装置100 中的ACR引擎中定期地获得内容ID和时间戳，并且在操作S2115中，将包括所获得的内容ID和时间戳的增强型数据请求消息发送到内容提供服务器10，并且然后请求与内容ID和时间戳对应的场景有关的增强型数据。
内容提供服务器10将被请求的增强型数据传递给Leanback应用。因为Leanback应用是广播公司提供的应用，所以一个广播公司的内容提供服务器10的界面可以不同于另一广播公司的内容提供服务器10 的界面。当存在与场景有关的附加信息时，Leanback应用可以重复地执行操作S2113和S2117。
图23是图示根据本发明的实施例的用于频道无关的应用的视频显示装置的操作的梯形图。
在接收执行被安装的Live+应用的用户输入之后，在操作S2201 中视频显示装置100执行Live+应用。
当ACR功能被关闭时，在操作S2203 中在视频显示装置100中执行的Live+应用打开ACR模块。
在操作S2205中，视频显示装置100从主AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，并且将包括被提取的特征信息的ACR查询请求消息发送到与指纹服务器22相对应的ACR服务器。
在操作S2207中，指纹服务器22从ACR DB中查询ACR查询请求消息中的特征信息以识别与特征信息相对应的节目，并且将包括关于被识别的节目的内容信息的ACR查询响应消息提供给视频显示装置 100。此时，ACR查询响应消息可以包括关于节目识别是否成功的信息和内容信息。如在上面所提及的，内容信息可以包括被识别的节目的全局唯一内容ID和时间戳。
在操作S2209中，在视频显示装置100中执行的Live+应用接收用于服务类型选择的用户输入。此时，服务类型可以对应于节目类型、推荐类型、会话类型、以及加类型中的至少一个。例如，与所选择的服务类型相对应的增强型数据可以是与演员表成员有关的实时新闻和推荐其中节目演员表成员作为主角出现的电影的服务。
在视频显示装置100中执行的Live+应用从视频显示装置100中的 ACR引擎中获得关于当前识别的节目的内容信息，并且在操作S2211 中将节目有关的内容请求消息发送到第三方服务器90以便于请求与所选择的服务类型相对应的请求增强型数据。此时，节目有关的内容请求消息可以包括关于当前识别的节目的内容信息和关于所选择的服务类型的信息。
Live+应用可以通过ajax调用将基于HTTP的请求发送到第三方服务器90。此时传递的参数可以包括服务类型、内容ID、全局内容ID、时间戳、以及广播公司服务器URL。HTTP请求可以使用下面的语法传递基于HTTP GET的参数。
[HTTP GET syntax]
？service＝<servicename>contentId＝<Content
ID>&globalContentId＝<Global Content
ID>&ts＝<timestamp>[&url＝<broadcaster server URL>].
<service name>是Live+应用请求的服务的名称。在本实施例中，可以使用下面的<service name>。
-“getProgram”：是用于接收节目有关的基本信息和先前的剧集的服务名称，并且被用于Live+应用的节目选项卡。
-“getRecommends”：是用于接收节目有关的推荐(VOD推荐和应用推荐)的数据的服务名称，并且被用于Live+应用的推荐选项卡。
-“getTalk”：是用于接收与文章/推特有关的节目的服务名称，并且被用于Live+应用的话题选项卡。
-“getPlus”：是用于接收广播公司提供的节目有关的增强型数据的服务名称，并且被用于Live+应用的加选项卡。
<Content ID>是广播公司传递给内容识别服务提供服务器20的值，并且是广播公司内部使用以便于唯一地标识节目的内容ID。
<Global Content ID>被用于唯一地和全局地标识节目，并且为此，内容识别服务提供服务器20和第三方服务器90可能需要使用相同的元数据DB。全局内容ID可以遵循元数据DB的内容ID格式。
<timestamp>通知被识别的节目的当前观看时间并且是从内容识别服务提供服务器20传递的值。
<广播服务器URL>当广播公司提供节目有关的增强型数据时被传递，并且通过此值，第三方服务器90可以访问广播公司服务器。
为了定位与被递送的全局内容ID相对应的节目的增强型数据，在操作S2213中第三方服务器90搜索元数据仓库。元数据仓库将关于与被传递的全局内容ID相对应的节目的增强型数据的搜索结果返回到第三方服务器90。
在操作S2221中，第三方服务器90处理来自于元数据仓库的接收到的节目增强型数据并且将被处理的增强型数据提供给在视频显示装置100中执行的Live+应用。第三方服务器90可以通过ajax调用在基于HTTP的响应中发送被处理的增强型数据。
图24是图示根据本发明的另一实施例的用于频道无关的应用的视频显示装置的操作的梯形图。
在接收执行被安装的Live+应用的用户输入之后，在操作S2301 中视频显示装置100执行Live+应用。
当ACR功能被关闭时，在操作S2303 中在视频显示装置100中执行的Live+应用打开ACR模块。
在操作S2305中，视频显示装置100的ACR引擎从主AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，并且将包括被提取的特征信息的ACR查询请求消息发送到与指纹服务器22相对应的ACR服务器。
在操作S2307中，指纹服务器22从ACR DB中查询ACR查询请求消息中的特征信息以识别与特征信息相对应的节目，并且将包括关于被识别的节目的内容信息的ACR查询响应信息提供给视频显示装置 100的ACR引擎。此时，ACR查询响应消息可以包括关于节目识别是否成功的信息、内容信息、以及内容提供服务器10的URL。如在上面所提及的，内容信息可以包括识别的节目的全局唯一内容ID和识别的节目的广播公司标识的内容ID和时间戳。在另一实施例中，视频显示装置100可以事先具有内容提供服务器10的URL，而不从ACR查询响应消息中获得URL。
在操作S2309中，在视频显示装置100中执行的Live+应用接收用于服务类型选择的用户输入。此时，服务类型可以对应于节目类型、推荐类型、会话类型、以及加类型中的至少一个。例如，与所选择的服务类型相对应的增强型数据可以是与演员表成员有关的实时新闻和推荐其中节目演员表成员作为主角出现的电影的服务。
在视频显示装置100中执行的Live+应用从视频显示装置100中的 ACR引擎中获得关于当前识别的节目的内容信息，并且在操作S2311 中将节目有关的内容请求消息发送到第三方服务器90以便于请求与所选择的服务类型相对应的请求增强型数据。此时，节目有关的内容请求消息可以包括关于当前识别的节目的内容信息、关于所选择的服务类型的信息、以及广播公司内容提供服务器10的URL。
为了定位与被递送的全局内容ID相对应的节目的增强型数据，在操作S2313中第三方服务器90搜索元数据仓库。元数据仓库将关于与被传递的全局内容ID相对应的节目的增强型数据的搜索结果返回到第三方服务器90。
在操作S2317中，第三方服务器90访问被传递的广播公司内容提供服务器10的URL，并且将包括被传递的广播公司内容ID和时间戳的元数据请求消息发送到内容提供服务器10，以便于向内容提供服务器10请求与当前场景有关的增强型数据。
在操作S2319中，第三方服务器90从内容提供服务器10接收与当前场景有关的增强型数据。
在操作S2321中，第三方服务器90处理来自于元数据仓库的接收到的节目增强型数据和来自于内容提供服务器10的接收到的节目增强型数据的一个或者组合，并且将被处理的增强型数据提供给在视频显示装置100中执行的Live+应用。
图25是图示根据本发明的实施例的视频显示装置的概念图。
如在图25中所示，视频显示装置100包括音频/视频驱动器601、 ACR引擎603、ACR中间件605、ACR用户界面607、以及ACR插件 609。
音频/视频驱动器601从TV的外部输入捕获音频/视频信号并且将其传递给ACR引擎603。音频/视频驱动器601可以提供API以允许 ACR引擎603访问音频/视频缓冲器。音频/视频驱动器601也可以提供关于从诸如HDMI的外部输入输入的音频/视频的特性信息。例如，在音频的情况下，音频/视频驱动器601可以提供诸如采样深度、采样速率、声道的数目(单声道/立体声)、采样的数目、以及采样时间的信息。在视频的情况下，音频/视频驱动器601可以提供诸如视频格式、和视频的宽度、高度、步幅、流时间、输入类型(HDMI1、HDMI2、合成、组件等等)、以及每秒帧数的信息。
ACR引擎603可以作为附加的处理被执行，并且可以通过使用在上面提及的各种方法识别节目。ACR引擎603从音频/视频采样提取签名，并且将被提取的签名传递到ACR服务器以识别内容。如上所述， ACR引擎603可以取决于平台的实施调用API以访问音频/视频缓冲器，并且可以通过诸如套接字ACR引擎603除了签名之外还将ACR 查询请求发送到ACR服务器、并且从ACR服务器接收包括内容识别是否成功、内容ID、全局内容ID、时间戳、Leanback应用URL以及广播公司服务器URL的ACR查询响应的方法，将通过音频/视频驱动器601捕获到的音频/视频流传递给ACR处理。ACR引擎603可以将来自于ACR服务器的结果传递给ACR中间件605。
ACR中间件605是与DTV处理的中间件相对应的模块，并且处理来自于ACR引擎603的ACR控制并且ACR查询响应。ACR中间件 605通过执行或者终止ACR处理或者开始或者停止ACR引擎603来控制ACR。另外，ACR中间件605通过解析ACR查询响应存储诸如内容ID、全局内容ID、以及时间戳的值。ACR中间件605可以提供API 以将被存储的值发送到ACR UI或者可以通过消息队列和全局变量将被存储的值发送到ACR用户接口607。另外，为了将诸如内容ID、全局内容ID、以及时间戳的数据传递给诸如Live+应用或者Leanback应用的ACR应用，ACR中间件605可以通过共享的存储器和套接字的进程间通信(IPC)将数据传递给网络浏览器。
为了ACR开/关的ACR控制，ACR用户接口607可以向用户显示 UI，或者可以通过TV的状态条UI向用户提供关于被识别的节目的名称和时间的信息。
当ACR中间件605将要被传递给ACR应用的诸如内容ID、全局内容ID、以及时间戳的数据传递给浏览器，ACR插件609接收数据。 ACR插件609可以通过插件对象接口将相对应的值传递给ACR应用。在下面示出根据实施例的ACR插件609的接口。
如在上面所提及的，元数据提供关于被识别的节目的基本的元数据。
backendURL表示广播公司/CP服务器的URL。
getACRMetadata()是用于获得关于被识别的节目的基本元数据的函数并且返回与元数据属性相同的值。
getBackendURL()是用于返回广播公司/CP服务器的URL的函数。
NotifyACRAppLaunched()是用于当诸如移动终端的第二画面和 TV配对并且ACR应用在TV上执行特定的URL或者应用时通知第二画面的应用的函数。
SetAppInfo()是用于通知ACR应用的当前状态和相对应的应用的第二画面版本的应用URL。
onContentChanged()是当识别的节目被改变时调用的回调函数。
onMediaTimeUpdated()是每次通过ACR改变时间戳调用的回调函数。
onAppShow()是在TV和第二屏幕配对的情况下，当在第二画面中的应用移向TV时调用的回调函数。
onAppHide()是在TV和第二屏幕配对的情况下，当在TV中的应用移向第二画面时调用的回调函数。
图26是图示根据本发明的另一实施例的视频显示装置的操作的梯形图。
首先，一旦在操作S3101中打开视频显示装置100，在操作S3103 中其将请求ACR配置信息的ACR配置信息请求消息发送到第三服务器90。第三方服务器90可以是与任何单个频道无关的增强型服务提供服务器并且可以包括用于多个频道的增强型服务。另外，第三方服务器90可以是与任何单个频道、任何内容提供商、以及任何MVPD(服务提供商)无关的服务器。
ACR配置信息请求消息可以是基于HTTE GET的请求消息，并且作为参数，可以包括关于被应用于视频显示装置100的ACR配置信息的版本的信息、关于产品类型的信息、关于平台类型的信息。ACR配置信息请求消息可以具有下述语法。
在上面的语法中，<version>指示关于被应用于视频显示装置100 的ACR配置信息的版本的信息。如果没有ACR配置信息被应用于视频显示装置100，则<version>可以具有0的值。
<productType>指示关于视频显示装置100的产品类型的信息。例如，如果视频显示装置100是智能TV，则<productType>的值可以是“智能TV”。另外，如果视频显示装置100是蓝光盘播放器(BDP)，则 <productType>的值可以是“BDP”。如果ACR配置信息请求消息不包括<productType>，则其可以请求关于所有类型的产品的ACR配置信息。
<platformVer>指示关于视频显示装置100的平台类型的信息。例如，视频显示装置100的平台类型是“NetCast”并且其版本是“3.0”，则<platformVer>的值可以是“NetCast3.0”。
如果ACR配置信息请求消息不包括<platformVer>，则其可以请求关于所有类型的平台的ACR配置信息。
如果满足预定的条件，则视频显示装置100可以将ACR配置信息请求消息发送到第三方服务器90。例如，视频显示装置100一被打开，其就可以将ACR配置信息请求消息立即发送到第三方服务器90。另外，视频显示装置100可以将ACR配置信息请求消息定期地发送到第三方服务器90。另外，视频显示装置100可以在预定的时间点将ACR配置信息请求消息发送到第三方服务器90。
响应于ACR配置信息请求消息，在操作S3105中，第三方服务器 90将包括ACR配置信息的ACR配置信息响应消息发送到视频显示装置100。
特别地，ACR配置信息响应消息可以包括与ACR配置信息请求消息的ACR配置信息版本、产品类型、以及平台类型相对应的至少一个ACR配置信息项目组。
如果第三方服务器90具有的ACR配置信息版本与ACR配置信息请求消息的相同，则ACR配置信息响应消息可以不包括ACR配置信息。
当在没有ACR配置信息请求消息的情况下改变ACR配置信息时， ACR配置信息响应消息可以被发送到视频显示装置100。
然后，参考图27描述根据本发明的实施例的ACR配置信息。
图27是根据本发明的实施例的ACR配置信息的XML模型图。
特别地，表3a和3b图示根据图27的实施例的ACR配置信息的 XML模型。表 3b紧跟在表3a之后。
[表3a]
[表3b]
如在图27和表3a和3b中所示，根据本发明的实施例的ACR配置信息，作为一个XML文档，包括ACR_config元素，即，顶级元素。
ACR_config元素可以包括指示ACR配置版本的ACR_config_ver 属性，并且作为子元素，包括country_list元素和测量元素。
country_list元素包括至少一个国家元素。每个国家元素包括被应用于与此国家元素相对应的每个国家的ACR配置信息。country_list元素包括分别被应用于多个国家的多个ACR配置信息项目组。
每个国家元素代码包括代码属性、device_product_type属性、 device_platform_type属性、至少一个ACR_server_url元素、至少一个广播元素、以及至少一个ACR_on_time元素。
代码属性包含标识对其应用包括代码属性的国家元素的ACR配置信息项目的国家的标识代码，并且特别地，此标识代码可以符合ISO 639语言代码。
device_product_type属性包含对其应用包括装置产品属性的国家
元素的ACR配置信息项目的产品的类型。例如，device_product_type 属性的值可以是“智能TV”或者“BDP”。
device_platform_type属性包含对其应用包括装置平台属性的国家元素的ACR配置信息项目的产品的版本和/或平台类型。例如，如果应用ACR配置信息项目的产品的平台类型是“NetCast”并且其版本是“3.0”，则device_platform_type属性的值可以是“NetCast3.0”。
即，每个国家元素包括与国家属性、装置产品类型属性、以及装置平台类型属性相对应的ACR配置信息项目组。ACR配置信息项目组包括与国家属性、装置产品类型属性、以及装置平台类型属性相对应的多个ACR配置信息项目。
虽然在下面将会描述，但是与国家属性、装置产品类型属性、以及装置平台类型属性相对应的多个ACR配置信息可以包括用于国家属性的国家中的至少一个区域的至少一个ACR服务器、关于是否允许 leanback应用的信息、以及用于国家属性的国家中的至少一个区域的 ACR功能的打开时间间隔的列表。
关于是否允许leanback应用的信息包括关于leanback应用的驱动许可信息和关于leanback应用的驱动限制信息。关于leanback应用的驱动许可信息可以包括允许leanback应用的驱动的广播公司的列表，和允许leanback应用的驱动的节目的列表。关于leanback应用的驱动限制信息可以包括限制leanback应用的驱动的广播公司的列表、限制驱动leanback应用的频道的列表、以及限制leanback应用的驱动的节目的列表。以这样的方式，第三方服务器90将关于是否允许leanback 应用的信息提供给视频显示装置100以便于防止leanback应用严重地影响视频显示装置100的稳定性。
每个ACR_server_url元素包括区域属性，并且每个ACR_server_url 元素的值可以指示被应用于与区域属性相对应的区域的ACR服务器的地址(例如，URL)。不具有区域属性的ACR_server_url元素的值可以指示被应用于与ACR_server_url元素相对应的国家的所有区域的ACR 服务器的地址(例如，URL)。以这样的方式，通过通知在本地靠近视频显示装置100的ACR服务器ULR地址，视频显示装置100执行快速的内容识别并且减少网络延迟。
每个广播公司元素包括名称属性、leanback_enable元素、以及至少一个频道元素。
广播公司元素的名称属性的值指示与广播公司元素相对应的广播公司的名称。在广泛意义上，广播公司的标识符可以被使用。
广播公司的leanback_enable元素的值指示是否对于与广播公司元素相对应的广播公司驱动leanback应用。例如，如果广播公司元素的 leanback_enable元素的值是“真”，则视频显示装置100对于与广播公司元素相对应的广播公司下载和执行leanback引用。另一方面，如果广播公司元素的leanback_enable元素的值是“假”，则视频显示装置 100不对于与广播公司元素相对应的广播公司下载和执行leanback应用。如果广播公司元素不具有leanback_enable元素，则广播公司元素的leanback_enable元素的值可以通过默认被视为“真”或者“假”。
每个频道元素包括名称属性、leanback_enable元素、以及至少一个节目元素。
频道元素的名称属性的值指示与频道元素相对应的频道的名称。在广泛意义上，频道的标识符可以被使用。
频道元素的leanback_enable元素的值指示是否对于与频道元素相对应的频道驱动leanback应用。例如，如果频道元素的leanback_enable 元素的值是“真”，视频显示装置100对于与频道元素相对应的频道下载和执行leanback应用。另一方面，如果频道元素的leanback_enable 元素的值是“假”，则视频显示装置100不对于与频道元素相对应的频道下载和执行leanback应用。如果频道元素不具有leanback_enable元素，则频道元素的leanback_enable元素的值可以通过默认被视为“真”或者“假”。
如果频道元素的leanback_enable元素的值不同于广播公司的 leanback_enable元素的值，则其具有优先级。
每个节目元素包括名称属性、leanback_enable元素、以及至少一个节目元素。
节目元素的名称属性的值指示与节目元素相对应的节目的名称。在广泛的意义上，节目的标识符可以被使用。
节目元素的leanback_enable元素的值指示是否对于与节目元素相对应的节目驱动leanback应用。例如，如果节目元素的leanback_enable 元素的值是“真”，则视频显示装置100对于与节目元素相对应的节目下载和执行leanback应用。另一方面，如果节目元素的leanback_enable 元素的值是“假”，则视频显示装置100不对于与节目元素相对应的节目下载和执行用于leanback应用。如果节目元素不具有leanback_enable 元素，则节目元素的leanback_enable元素的值可以通过默认被视为“真”或者“假”。
如果节目元素的leanback_enable元素的值不同于频道元素的 leanback_enable元素的值，则其具有优先级。
每个ACR_on_time元素包括区域属性、日属性、从(from)属性、以及到(to)属性。
ACR_on_time元素的区域属性的值指示对其应用与ACR_on_time 元素相对应的ACR时间间隔的区域。如果ACR_on_time元素不具有区域属性，则与ACR_on_time元素元素相对应的ACR时间间隔可以被应用与包括ACR_on_time元素的国家元素的国家的所有区域。
ACR_on_time元素的日属性的值指示与ACR_on_time元素相对应的ACR时间间隔开始的日子。特别地，ACR_on_time元素的日属性的值指示与ACR_on_time元素相对应的ACR时间间隔开始的一周的一天。在这样的情况下，如果与ACR_on_time元素相对应的ACR时间间隔开始的一周的一天是周日、周一、周二、周三、周四、周五、或者周六，则ACR_on_time元素的日属性的值可以分别是“SUN”、“MON”、“TUE”、“WED”、“THU”、“FRI”或者“STA”。
ACR_on_time元素的from属性的值指示与ACR_on_time元素相对应的ACR时间间隔开始的开始时间。
ACR_on_time元素的to属性的值指示与ACR_on_time元素相对应的ACR时间间隔结束的结束时间。
如果ACR_on_time元素的to属性的值小于ACR_on_time元素的 from属性的值，则与ACR_on_time元素相对应的ACR时间间隔的开始时间变成与日属性相对应的日子的from属性的值，并且与 ACR_on_time元素相对应的ACR时间间隔的结束时间变成与日属性相对应的第二天的to属性的值。例如，如果日属性的值是“MON”，from 属性的值是“18:00:00”，并且to属性的值是“02:00:00”，则ACR时间间隔的开始时间是周一18:00并且ACR时间间隔的结束时间是第二天，周二14:00。
通常，增强型服务没有被提供给所有时隙中的主AV内容，并且被提供给流行的主AV内容。在这样的情况下，当视频显示 装置100将 ACR查询同时发送到ACR服务器时，视频显示 装置100消耗不必要的资源并且ACR服务器也需要处理许多查询，使得要求服务器扩充。第三方服务器90可以通过将关于ACR时间间隔的信息提供给视频显示 装置100来防止这样的问题。
测量元素包括max_log_size属性和report_interval属性。
max_log_size属性指示视频显示装置100能够存储的观看信息的最大大小。例如，如果视频显示装置100存储的观看信息的大小超过 max_log_size属性的最大大小的90％，则视频显示装置100将被存储的观看信息的一些或者全部发送到第三方服务器90，并且然后删除被发送的信息。max_log_size的单位可以是字节。
report_interval属性指示视频显示装置100发送观看信息的时间间隔。例如，在视频显示装置100将先前的观看信息发送到第三方服务器90之后，当经过了与report_interval属性相对应的报告时间间隔时，视频显示装置100将被存储的观看信息中的一些或者全部发送到第三方服务器90，并且然后删除被发送的信息。report_interval属性的单位可以是字节。视频显示装置100报告的观看信息可以包括主AV内容的观看时间、主AV内容的观看的数目、以及对leanback应用的用户响应的数目。
第三方服务器90可以从多个视频显示装置收集和积累观看信息。视频显示装置100可以向第三方服务器90请求积累的观看信息，并且然后可以响应于其进行接收。
如在图27和表3a和3b中所示，ACR配置信息可以包括作为元素或属性的各种信息项目，但是没有必要地限于此。即，不同于图27和表3a和3b，ACR配置信息可以包括作为元素、作为属性包括的信息项目，并且也可以包括作为属性、作为元素包括的信息项目。此外，根据本发明的各种实施例，可以改变ACR配置信息中的包括各种信息项目的元素或者属性的名称。
表4图示根据本发明的实施例的ACR配置信息。
[表4]
通过表4的ACR配置信息，视频显示装置100可以识别ACR配置信息被应用于具有DTV的产品类型和NetCast3.0的平台类型的产品，并且也包括被应用于美国的一个ACR配置信息项目组。
另外，视频显示装置100可以识别用于具有DTV的产品类型和NetCast3.0的平台类型的产品的ACR服务器的地址是usa.zeitera.com。
另外，视频显示装置100可以识别有必要对于NBCU广播公司的 BRAVO频道的TOPCHEF节目驱动leanback应用。
另外，视频显示装置100可以识别有必要对于TURNER广播公司的TBS频道的所有节目驱动leanback应用。
另外，视频显示装置100可以识别有必要对于TURNER广播公司的TNT频道的LEVERAGE节目和“FALLING SKIES SEASON 2”节目驱动leanback应用，并且没有必要驱动TURNER广播公司的TNT 频道的DALLS节目。
另外，视频显示装置100可以识别有必要从周一18:00到周二 04:00、从周三18:00到周四02:00、以及从周五18:00到周六02:00打开ACR功能，并且有必要其它时间中关闭ACR功能。
在操作S3107中，视频显示装置100从ACR配置信息中提取与其属于的国家、其产品类型、以及其平台类型相对应的ACR配置信息项目组。
在操作S3109中，视频显示装置100从提取的ACR配置信息项目组中提取多个ACR配置信息。如上所提及的，多个ACR配置信息项目可以包括用于国家属性的国家中的至少一个区域的至少一个ACR服务器地址、关于是否允许leanback应用的信息、以及用于国家属性的国家中的至少一个区域的ACR功能的打开时间间隔的列表。特别地，视频显示装置100从提取的ACR配置信息项目组中提取用于视频显示装置100属于的区域的多个ACR配置信息项目。
在操作S3111中，视频显示装置100在其中配置多个提取的ACR 配置信息项目。视频显示装置100可以将多个提取的ACR配置信息项目与配置的值进行比较并且可以更新。
在操作S3112中，视频显示装置100基于配置的ACR打开时间间隔打开ACR功能。
当ACR功能被打开时，在操作S3113中，视频显示装置100的 ACR引擎从主AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，并且将包括提取的特征信息的ACR查询请求消息发送到相对应的ACR服务器。视频显示装置100的ACR引擎可以将ACR查询请求消息发送到与配置的ACR服务器地址相对应的ACR服务器。
当ACR功能被关闭时，视频显示装置100的ACR引擎停止从主 AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，使得可以减少资源浪费。
在操作S3115中，指纹服务器22从ACR DB中查询ACR查询请求消息中的特征信息，标识与特征信息相对应的节目，并且将包括关于标识的节目的内容信息的ACR查询响应消息发送到视频显示装置 100的ACR引擎。在这一点上，ACR查询响应消息可以包括关于是否成功地识别节目的信息、内容信息、leanback应用的URL地址、以及内容提供服务器10的URL。如上所述，内容信息可以包括被识别的节目的全局内容ID、被识别的节目的广播公司能够标识的内容ID、被识别的节目的时间戳、提供被识别的节目的广播公司的标识符、提供被识别的节目的频道的标识符、以及被识别的节目的名称。广播公司的标识符可以是广播公司的名称。广播公司的标识符可以是广播公司的名称。根据另一实施例，视频显示装置100可以已经具有内容提供服务器10的URL，而不是来自于ACR查询响应消息。
在操作S3117中，视频显示装置100基于关于是否允许leanback 应用的配置的信息向leanback应用的URL地址请求leanback应用。
更加详细地，如果ACR查询响应消息中的内容信息与leanback应用的驱动许可信息有关，则视频显示装置100可以向其URL地址请求leanback应用。另外，如果在ACR查询响应消息中的内容信息与 leanback应用的驱动限制信息有关，则视频显示装置100可以不请求 leanback应用。
更加详细地，如果通过ACR查询响应消息标识提供主AV内容的广播公司，并且被标识的广播公司属于允许leanback应用的驱动的广播公司的列表，则视频显示装置100可以向其URL地址请求leanback 应用。如果标识的广播公司属于限制leanback应用的驱动的广播公司的列表，则视频显示装置100可以向其URL地址请求leanback应用。另外，如果通过ACR查询响应消息标识提供主AV内容的广播公司并且被标识的广播公司属于许可leanback应用的驱动的广播公司的列表，则视频显示装置100可以不向其URL地址请求leanback应用。如果标识的广播公司属于限制leanback应用的驱动的广播公司的列表，则视频显示装置100可以不向其URL地址请求leanback应用。另外，如果通过ACR查询响应消息标识主AV内容并且被标识的主AV内容属于许可leanback应用的驱动的节目的列表，则视频显示装置100可以向其URL地址请求leanback应用。如果标识的主AV内容属于限制 leanback应用的驱动的节目的列表，则视频显示装置100可以不向其 URL地址请求leanback应用。
在操作S3119中，视频显示装置100从其URL地址接收leanback 应用，并且自动地执行接收到的leanback应用，不论用户输入如何。
图28是图示根据本发明的另一实施例的视频显示装置的操作的梯形图。
在操作S3305中，视频显示装置100从第三方服务器90获得ACR 配置信息。视频显示装置100从第三方服务器90获得ACR配置信息的过程可以遵循图28。
参考图29描述根据本发明的实施例的ACR配置信息。
图29是根据本发明的实施例的ACR配置信息的XML模型图。
特别地，表5a和5b图示根据图29的实施例的ACR配置信息的 XML模型。表5b跟随表5a。
[表5a]
[表5b]
如在图29和表5a和表5b中所示，ACR配置信息，作为一个XML 文档，包括ACR_config元素，即，顶级元素。
ACR_config元素可以包括country_code属性、 acr_config_format_ver属性、以及版本属性，并且也包括至少一个装置元素。
每个装置元素包括device_product_type属性、device_platform_type 属性、ACR_On属性、query_interval属性、以及user_query_interval属性，并且也包括至少一个ACR_server_url元素、至少一个广播公司元素、至少一个MVPD元素、以及至少一个ACR_on_time元素。每个装置元素包括被应用于与装置元素的device_product_type属性相对应的产品类型和与装置元素的device_platform_type属性相对应的平台类型的ACR配置信息项目组。
因为参考表3a和3b描述了device_product_type属性和 device_platform_type属性，所以将会省略它们的描述。
因为参考表3a和3b描述了ACR_server_url元素、广播公司元素、以及ACR_on_time要求，所以将会省略它们的描述。
每个MVPD元素包括ID属性、类型属性、DetectOn属性、以及 detect_interval属性，并且也包括至少一个MVPD_logo元素。
MVPD元素的ID属性的值指示唯一地标识与MVPD元素相对应的MVPD的标识符。例如，在北美的情况下，MVPD元素的ID属性的值可以是“时代华纳(TimeWarner)”、“康卡斯特(Comcast)”等等。
MVPD元素的类型属性的值指示与MVPD元素相对应的MVPD 的类型。特别地，MVPD元素的类型属性的值指示与MVPD元素相对应的MVPD的广播网络类型。例如，MVPD元素的类型属性的值可以是“有线”、“卫星”、“IPTV”等等。
MVPD元素的DetectOn属性指示是否视频显示装置100识别 MVPD的登录。如果MVPD元素的DetectOn属性的值是“开(On)(或者“真”)，则视频显示装置100根据从广播接收装置60输出的未被压缩的AV内容检测MVPD的标志，并且然后基于检测到的标志识别 MVPD。如果已经识别MVPD，为了防止视频显示装置100的不必要的资源消耗，MVPD元素的DetectOn属性的值可以被配置为关(Off)。如果MVPD元素的DetectOn属性的值是“关”，则视频显示装置100 没有执行用于基于从未被压缩的AV内容检测到的标志识别MVPD的操作。
如果MVPD元素的DetectOn属性的值是“开”，则可以存在MVPD 元素的检测间隔属性。MVPD元素的检测间隔属性指示视频显示装置 100从未被压缩的AV内容检测MVPD的标志的时间间隔，并且其单位是秒。例如，如果detect_interval是300(5x 60)，则视频显示装置100 试图在每5分钟从未被压缩的AV内容识别MVPD的标志。
通常，因为用户倾向于通过EPG确认另一频道的节目同时在节目结束之后观看商业广告，考虑到用户通过STB遥控器选择指南或者菜单的趋势，第三方服务器90可以确定用于确定MVPD的标志的时间间隔。另外，如果在每个小时或者30分钟频繁地改变节目，则考虑到此情形第三方服务器90可以确定检测MVPD的标志的时间间隔。例如，第三方服务器90可以被配置为仅从每55分钟至5分钟识别标志。另外，第三方服务器90可以被配置为每5分钟识别标志。
每个MVPD_logo元素包括包含关于显示MVPD标志的屏幕的类型的信息的类型属性和包含关于显示MVPD标志的屏幕区域的信息的标志区域属性。标志区域属性包括包含关于MVPD标志的屏幕位置的信息的标志位置属性和包含关于MVPD标志的大小的信息的标志大小属性。标志位置属性包括x坐标(x)属性和y坐标(y)属性。标志属性包括宽度属性和高度属性。
MVPD标志元素的类型属性的值指示与MVPD标志元素相对应的 MVPD标志的类型。更加详细地，MVPD标志元素的类型属性的值指示显示与MVPD标志元素相对应的MVPD标志的屏幕的类型。例如，类型属性的值可以是“EPG”、“菜单”、“通栏”等等。
然后，参考图30至图33描述根据本发明的各种实施例的MVPD 标志的类型和位置。
图30是根据本发明的实施例的卫星运营商Dish网络的MVPD标志的EPG窗口的视图。图31是根据本发明的实施例的显示有线运营商 Comcast的MVPD标志的EPG窗口的视图。
如在图30和图31中所示，当MVPD标志元素的类型属性的值是“EPG”时，MVPD标志被显示在EPG屏幕上。因此，如果MVPD标志元素的类型属性的值是“EPG”，则当EPG屏幕被显示在未被压缩的 AV内容上时，视频显示装置100可以从EPG屏幕提取MVPD标志。
图32是根据本发明的实施例的显示有线运营商Comcast的MVPD 标志的菜单窗口的视图。图33是根据本发明的实施例的显示卫星运营商DirecTV的MVPD标志的菜单窗口的视图。
如在图32和图33中所示，当MVPD标志元素的类型属性的值是“菜单”时，MVPD标志被显示在菜单屏幕上。如果MVPD标志元素的类型属性的值是“菜单”，则当菜单屏幕被显示在未被压缩的AV内容上时视频显示装置100可以从菜单屏幕提取MVPD标志。
当MVPD标志元素的类型属性的值是“通栏”时，MVPD标志被显示在通栏屏幕上。如果MVPD标志元素的类型属性的值是“通栏”，则当通栏屏幕被显示在未被压缩的AV内容上时，视频显示装置100可以从通栏屏幕提取MVPD标志。
x属性的值和y属性的值指示关于与MVPD标志元素相对应的 MVPD标志的位置的信息。MVPD标志元素的x属性的值指示与MVPD 标志元素相对应的MVPD标志的x坐标。MVPD标志元素的y属性的值指示与MVPD标志元素相对应的MVPD标志的y坐标的位置。
可以基于分辨率来确定MVPD标志的x坐标和y坐标的位置值。例如，如果屏幕具有1920x1080的分辨率，则通过从0至1919的值中的一个可以确定MVPD标志的x坐标的位置值，并且通过从0至1079 中的一个可以确定MVPD标志的y坐标的位置值。
另外，基于相对位置关系可以确定MVPD标志的x坐标和y坐标的位置值，不论分辨率如何。例如，即使屏幕的分辨率是1920x1080，在屏幕的大小被标准化为100x100之后，通过标准化的范围中的值中的一个可以确定MVPD标志的x坐标和y坐标的位置值。在这样的情况下，视频显示装置100缩放具有在标准化范围中的值的x坐标和y 坐标的位置值，以便获得MVPD标志的位置。
宽度属性的值和高度属性的值指示与MVPD标志元素相对应的 MVPD标志的大小的信息。MVPD标志元素的宽度属性的值指示与 MVPD标志元素相对应的MVPD标志的宽度。MVPD标志元素的高度属性的值指示与MVPD标志元素相对应的MVPD标志的高度。
可以基于分辨率确定MVPD标志的宽度和高度值。例如，如果屏幕具有1920x1080的分辨率，则可以通过从0至1919的值中的一个确定MVPD标志的宽度，并且可以通过从0至1079的值中的一个确定 MVPD标志的高度。
另外，可以基于相对大小确定MVPD标志的宽度和高度，不论分辨率如何。例如，即使屏幕的分辨率是1920x1080，在屏幕的大小被标准化为100x100之后，可以通过标准化的范围中的值中的一个确定 MVPD标志的宽度和高度。在这样的情况下，视频显示装置100缩放具有在标准化范围内的值的宽度和高度，以便获得MVPD标志的大小。
在操作S3307中，视频显示装置100从ACR配置信息中提取与其产品类型和其平台类型相对应的ACR配置信息项目组。
在操作S3309中，视频显示装置100从提取的ACR配置信息项目组中提取多个ACR配置信息。如在上面所提及的，多个ACR配置信息项目包括用于至少一个区域的至少一个ACR服务器地址和分别与至少一个MVPD相对应的至少一个MVPD信息项目组。每个MVPD信息项目组包括关于MVPD标识符、MVPD类型、是否检测MVPD标志、 MVPD标志检测时间间隔、MVPD标志屏幕类型、以及MVPD标志屏幕区域的信息。关于MVPD标志屏幕区域的信息包括关于MVPD标志屏幕位置和MVPD标志大小的信息。
在操作S3311中，视频显示装置100配置多个被提取的ACR配置信息。视频显示装置100可以将多个提取的ACR配置信息项目与配置的值进行比较并且可以进行更新。
然后，在操作S3313中，视频显示装置100从基于至少一个MVPD 信息项目组输入的未被压缩的AV内容提取被评估为MVPD标志的至少一个图像。特别地，如果MVPD信息项目组的数目大于1，则视频显示装置100可以提取分别与多个MVPD信息项目组相对应的多个MVPD标志评估图像。因为基于相对应的检测时间间隔提取多个 MVPD标志评估图像中的每一个，所以可以不必要同时提取多个 MVPD标志评估图像。如果属于多个MVPD信息项目组的多个MVPD 标志检测时间间隔彼此相同，则多个MVPD标志评估图像可以被同时提取。
更加详细地，当MVPD元素的Detectoh属性的值是“开”时，当从输入的未被压缩的AV内容显示与MVPD标志元素的类型属性的值相对应的屏幕时，视频显示装置100可以根据与MVPD元素的检测间隔属性相对应的时间间隔从与MVPD元素的标志区域属性的值相对应的屏幕区域提取其数目对应于MVPD信息项目组的数目的图像。然后，视频显示装置100可以获得多个MVPD标志评估图像。
然后，在操作S3315中，视频显示装置100标识视频显示装置100 订阅的订阅MVPD，并且获得订阅MVPD的标识符。特别地，如果 MVPD信息项目组的数目大于1，则视频显示装置100可以基于多个提取的MVPD标志评估图像标识MVPD。
根据实施例，视频显示装置100将关于分别与多个MVPD相对应的多个MVPD标志图像的请求消息发送到第三方服务器90。然后，视频显示装置100从第三方服务器90接收分别与多个MVPD相对应的多个MVPD标志图像，并且然后，通过使用接收到的MVPD标志图像创建数据库。如果视频显示装置100包括具有分别与多个MVPD相对应的多个MVPD标志图像的数据库，则其将多个MVPD标志图像与多个提取的MVPD标志评估图像进行比较。如果多个提取的MVPD标志评估图像中的至少一个对应于多个MVPD标志图像中的一个，则视频显示装置100可以将与对应的MVPD标志图像相对应的MVPD标识为视频显示装置100订阅的MVPD。
根据另一实施例，视频显示装置100可以将多个提取的MVPD标志评估图像发送到第三方服务器90或者指纹服务器22。在这样的情况下，第三方服务器90或者指纹服务器22具有包括分别与多个MVPD 相对应的多个MVPD标志图像的数据库。第三方服务器90或者指纹服务器22将多个MVPD标志图像与多个提取的MVPD标志评估图像进行比较。如果多个提取的MVPD标志估计图像中的至少一个对应于多个MVPD标志图像中的一个，则第三方服务器90或者指纹服务器22 可以将与对应的MVPD标志图像相对应的MVPD标识为90或者22订阅的MVPD。然后，第三方服务器90或者指纹服务器22将视频显示装置100订阅的MVPD的标识符发送到视频显示装置100，使得视频显示装置100标识订阅MVPD。当第三方服务器90将订阅MVPD的标识符发送到视频显示装置100时，因为视频显示装置100不再需要执行MVPD标志提取和MVPD标识，所以为了防止第三方服务器90 或者视频显示装置100的不必要的资源消耗，第三方服务器90在用于视频显示装置100的ACR配置信息中将MVPD元素的DetechOn属性的值配置为关(OFF)或者假，并且然后将MVPD元素的DetechOn属性的值是关的ACR配置信息提供给视频显示装置100。另外，即使在视频显示装置100标识MVPD之后，因为用户可以改变MVPD，所以当经过预定的时间时，第三方服务器90可以在用于视频显示装置100 的ACR配置信息中将MVPD元素的DetechOn属性的值配置为开(ON)。
此外，在操作S3317中，视频显示装置100基于订阅MVPD的标识符从至少一个MVPD信息项目组确认订阅MVPD的类型。即，在多个MVPD信息项目组当中，因为多个MVPD标识符中的每一个具有相对应的MVPD类型，所以视频显示装置100可以基于订阅MVPD的标识符从至少一个MVPD信息项目组确认订阅MVPD的类型。
如果订阅MVPD的类型不是卫星运营商，则在操作S3319中视频显示装置100确定地理订阅位置。如果订阅MVPD的类型是有线运营商或者卫星运营商，则视频显示装置100可以确认地理订阅位置。
根据实施例，视频显示装置100可以基于用户输入确认地理订阅位置。在这一点上，在北美，用户输入可以是邮政编码。
根据另一实施例，视频显示装置100可以基于Geo-IP确认其地理位置。Geo-IP是从其IP地址获得终端的地理位置的方法。
视频显示装置100可以将其自身的IP地址发送到第三方服务器 90、指纹服务器22、或者位置确认服务器。第三方服务器90、指纹服务器22、或者位置确认服务器可以通过使用IP地址确认视频显示装置的地理订阅位置，并且将关于确认的地理订阅位置的信息发送到视频显示装置100，使得视频显示装置100可以确认地理订阅位置。在这一点上，在北美中，关于被确认的地理订阅位置的信息可以是邮政编码。
另外，在操作S3321中，视频显示装置100可以将分组信息请求消息发送到第三方服务器90。在这一点上，分组信息请求消息可以包括MVPD的标识符、MVPD的类型、以及地理订阅位置。即使在相同的分组中，因为频道映射可以根据区域不同，所以分组信息请求消息可以包括地理订阅位置。
第三方服务器90将关于为了视频显示装置100的地理订阅位置与 MVPD标识符和MVPD类型相对应的MVPD提供的多个分组的信息发送到视频显示装置100。通过这样做，在操作S3323中，视频显示装置100从第三方服务器90接收关于为了视频显示装置100的地理订阅位置与MVPD标识符和MVPD类型相对应的MVPD提供的多个分组的信息。
如在图6中所示，关于多个分组的信息包括关于多个分组中的每一个提供的频道的列表的信息。
[表6]
标准 TV基本 优质 体育直通
USA O O X X
HBO X X O X
ESPN O X X O
CNN O O X X
特别地，表6图示关于美国的时代华纳有线运营商提供的多个分组的信息。
如在表6中所示，美国的时代华纳运营商通过标准(Standard)分组、TV基本(TVEssentials)分组、优质(Premium)分组、以及体育直通(Sports Pass)分组。标准分组提供USA频道、ESPN频道、以及 CNN频道，但是不提供HBO频道。TV基本分组提供USA频道和CNN 频道，但是不提供ESPN频道和HBO频道。优质分组提供HBO频道但是不提供USA频道、ESPN频道、以及CNN频道。体育直通分组提供ESPN频道但是不提供USA频道、HBO频道、以及CNN频道。
在操作S3325中，视频显示装置100从输入的未被压缩的主AV 内容标识至少一个频道。因为用户通常一天改变频道数次，所以视频显示装置100可以从未被压缩的AV内容标识至少一个频道。特别地，通过在图3、图6、以及图9中示出的过程，视频显示装置100可以通过获得关于输入的未被压缩的AV内容的内容信息来标识频道。更加详细地，视频显示装置100从未被压缩的AV内容确认广播公司标志，即，显示的水印，并且基于确认的广播公司标志标识提供未被压缩的AV内容的频道。在这样的情况下，视频显示装置100可以通过使用包括多个广播公式标志的内容数据库或者水印服务器标识频道。另外，视频显示装置100可以通过从不可视的水印获得内容信息识别频道。另外，视频显示装置100可以通过从未被压缩的AV内容提取签名并且将提取的签名发送到水印服务器来标识频道。如果未被压缩的主AV内容是再销售的内容或者通过多个频道广播相同的AV内容，则视频显示装置 100可以执行基于广播公司标志的频道标识。
在操作S3327中，视频显示装置100基于至少一个标识的频道确认订阅分组。
参考表6，一旦HBO频道被标识，视频显示装置100确认订阅分组是优质分组。一旦USA频道和ESPN频道被标识，视频显示装置100 确认订阅分组是标准分组。一旦CNN频道被标识，如果在预定的时间内ESPN频道没有被标识，则视频显示装置100确认订阅分组是TV基本分组。
如果基于至少一个标识的频道没有唯一地标识订阅分组，则视频显示装置100执行附加的频道标识。
在操作S3329中，视频显示装置100向第三方服务器90请求与确认的订阅分组相对应的频道映射。响应于频道映射请求，第三方服务器90将在用于视频显示装置100的ACR配置信息中的MVPD元素的DetectOn属性的值配置为关(OFF)或者假，并且然后，将与视频显示装置100的订阅分组相对应的频道映射提供给视频显示装置100。
在操作S3331中，视频显示装置100从第三方服务器90接收与确认的订阅分组相对应的频道映射。
在操作S3333中，视频显示装置100处理接收到的频道映射。
图34是根据本发明的实施例的频道映射处理的视图。如在图34 中所示，视频显示装置100可以在屏幕上显示当前未被压缩的主AV内容的频道名称和频道编号。
图35是根据本发明的实施例的频道映射处理的视图。如在图35 中所示，视频显示装置100可以基于频道映射获得EPG信息，并且然后，可以显示获得的EPG信息。
然后，参考图36至图39描述根据本发明的各种实施例的视频显示装置的结构。
图36是根据本发明的实施例的视频显示装置的概念图。
如在图36中所示，视频显示装置100包括音频/视频驱动器601、 ACR引擎603、ACR中间件605、ACR用户接口607、ACR插件609、增强型服务管理单元611、频道映射管理单元613、以及MVPD标志数据库管理单元615。
ACR引擎603包括内容识别配置管理单元631、MVPD分组信息管理单元633、以及MVPD标志匹配单元635。
内容识别配置管理单元631将请求ACR配置信息的ACR配置信息请求消息发送到第三方服务器90，并且接收包括ACR配置信息的 ACR配置信息响应消息。在操作S3107中，内容识别配置管理单元631 从ACR配置信息中提取与其属于的国家、其产品类型、以及其平台类型相对应的ACR配置信息项目组。内容识别配置管理单元631从提取的ACR配置信息项目组提取多个ACR配置信息项目。内容识别配置管理单元631配置视频显示装置100中的多个提取的ACR配置信息项目。内容识别配置管理单元631基于配置的ACR打开时间间隔列表打开ACR功能。
当ACR功能被打开时，视频显示装置100的ACR引擎603从主 AV内容的一些帧或者主AV内容的音频采样的片段中提取特征信息，并且将包括提取的特征信息的ACR查询消息发送到相对应的ACR服务器，以便于接收包括关于标识的节目的内容信息的ACR查询响应消息。视频显示装置100的ACR引擎603从输入的未被压缩的主AV内容标识至少一个频道。
增强型服务管理单元611基于关于是否允许leanback应用的配置的信息向leanback应用的URL地址请求leanback应用，接收leanback 应用，并且然后，自动地执行接收到的leanback应用，不论用户输入如何。
频道映射管理单元613向第三方服务器90请求与订阅分组相对应的频道映射，从第三方服务器90接收与确认的订阅分组相对应的频道映射，并且然后，处理接收到的频道映射。
MVPD分组信息管理单元633基于至少一个MVPD信息项目组从输入的未被压缩的AV内容提取被评估为MVPD标志的至少一个图像，并且然后，基于至少一个提取的MVPD标志评估图像标识视频显示装置100订阅的订阅MVPD以获得订阅MVPD的标识符。MVPD分组信息管理单元633基于订阅MVPD的标识符从至少一个MVPD信息项目组确认订阅MVPD的类型，并且如果订阅MVPD的类型不是卫星运营商则确认地理订阅位置。MVPD分组信息管理单元633将分组信息请求消息发送到第三方服务器90，并且然后从第三方服务器90接收关于订阅MVPD提供的多个分组的信息。MVPD分组信息管理单元633基于至少一个标识的频道确认订阅分组。
MVPD标志数据库管理单元615将用于分别与MVPD相对应的多个MVPD标志图像的请求消息发送到第三方服务器90，从第三方服务器90接收多个MVPD标志图像，并且然后，通过使用接收到的多个 MVPD标志图像创建数据库。
MVPD标志匹配单元635将多个MVPD标志图像与多个创建的 MVPD标志评估图像进行比较。如果多个提取的MVPD标志评估图像中的至少一个对应于多个MVPD标志图像中的一个，则MVPD标志匹配单元635可以将与对应的MVPD标志图像相对应的MVPD标识为 MVPD标志匹配单元635订阅的MVPD。
图37是根据本发明的实施例的视频显示装置的概念图。
如在图37中所示，视频显示装置100包括音频/视频驱动器601、 ACR引擎603、ACR中间件605、ACR用户接口607、ACR插件609、增强型服务管理单元611、以及频道映射管理单元613。
ACR引擎603包括内容识别配置管理单元631和MVPD分组信息管理单元633。
根据图37的实施例，在第三方服务器90或者指纹服务器22中，替代视频显示装置100，执行标志匹配。这在上面参考图28进行了描述并且因此，其描述将会被省略。
接下来，将会参考图38和图39描述根据各种实施例的视频显示装置的结构。
图38是图示根据另一实施例的基于指纹的视频显示装置的框图。
如图38中所示，调谐器501从通过空中信道发送的8-VSB RF信号中提取符号。
8-VSB解调器503对调谐器501提取的8-VSB符号进行解调并且恢复有意义的数字数据。
VSB解码器505对8-VSB解调器503用于恢复ATSC主服务和 ATSC M/H服务的数字数据进行解码。
TP解复用器507从通过8-VSB信号发送的MPEG-2传输包中过滤出视频显示装置100将要处理的传输包或者PVR存储器中存储的 MPEG-2传输包，以将过滤出的传输包转达到处理模块。
PES解码器539缓冲并恢复通过MPEG-2传输流发送的分组基本流。
PSI/PSIP解码器541缓冲并分析通过MPEG-2传输流发送的 PSI/PSIP段数据。经分析的PSI/PSIP数据由服务管理器(未示出)收集，然后以服务地图和指南数据的形式存储在DB中。
DSMCC可寻址段解析器511通过MPEG-2TP和IP分组封装处理供DSMCC段数据，以进行文件传输。
IP/UDP数据包缓冲器/报头解析器513缓冲并恢复通过DSMCC可寻址的段封装和通过MPEG-2TP发送的IP分组，以分析各个数据包的报头。另外，IP/UDP数据包缓冲器/报头解析器513缓冲和恢复通过IP 分组发送的UDP数据包，并且然后分析和处理被恢复的UDP报头。
流组件处理器557可以包括ES缓冲器/处理器、PCR处理器、STC 模块、解扰器、CA流缓冲器/处理器和服务信令段缓冲器/处理器。
ES缓冲器/处理器缓冲并恢复基本流诸如以PES形式发送的视频和音频数据，以将其传递到正确的A/V解码器。
PCR处理器处理用于音频和视频流的时间同步的节目时钟基准 (PCR)数据。
STC模块校正使用通过PCR处理器接收的基准时钟值来校正A/V 解码器的时钟值，以执行时间同步。
当向接收到的IP分组施加扰频时，解扰器通过使用CA流处理器传递的加密钥恢复负载的数据。
CA流缓冲器/处理器缓冲并处理用于对EMM和ECM进行解扰的数据诸如加密值，所述数据是通过MPEG-2TS或IP流针对条件接入函数发送的。CA缓冲器/处理器的输出被传递到解扰器，并且然后，解扰器将承载的A/V数据和文件数据的MPEG-2TP或IP分组进行解扰。
服务信令段缓冲器/处理器缓冲、恢复并分析以IP分组形式发送的 NRT服务信令信道段数据。服务管理器(未示出)收集经分析的NRT 服务信令信道段数据并且将其以服务图和指南数据的形式存储。
A/V解码器561对通过ES处理器接收的音频/视频数据进行解码，以将其向用户呈现。
MPEG-2服务解复用器(未示出)可以包括MPEG-2TP缓冲器/ 解析器、解扰器和PVR存储模块。
MPEG-2TP缓冲器/解析器(未示出)缓冲并恢复通过8-VSB信号发送的MPEG-2传输包，并且还检测并处理传输包报头。
解扰器通过对MPEG-2TP中的被施加扰频的包负载使用由CA流处理器传递的加密钥来恢复负载的数据。
PVR存储模块根据用户请求存储通过8-VSB信号接收的MPEG-2 TP并且根据用户的请求时输出MPEG-2TP。PVR存储模块可以由PVR 管理器(未示出)控制。
文件处理器551可以包括ALC/LCT缓冲器/解析器、FDT处理器、 XML解析器、文件重构缓冲器、解压缩器、文件解码器和文件存储器。
ALC/LCT缓冲器/解析器缓冲并恢复通过UDP/IP流发送的 ALC/LC数据，并且分析ALC/LCT的报头和报头扩展。ALC/LCT缓冲器/解析器可以由NRT服务管理器(未示出)控制。
FDT处理器分析并处理通过ALC/LCT会话发送的FLUTE协议的文件说明表。FDT处理器可以由NRT服务管理器(未示出)控制。
XML解析器分析通过ALC/LCT会话发送的XML文档，并且然后，将经分析的数据发送到正确的模块诸如FDT处理器和SG处理器。
文件重构缓冲器恢复通过ALC/LCT、FLUTE会话发送的文件。
如果通过ALC/LCTT和FLUTE会话发送的文件被压缩，则解压缩器执行处理以对文件进行解压缩。
文件解码器对文件重构缓冲器中恢复的文件、在解压缩器中解压缩的文件或从文件存储器中提取的文件进行解码。
如果有必要，文件存储器存储或提取经恢复的文件。
M/W(未示出)处理数据如文件，该数据不是通过DSMCC段和IP分组发送的A/V流。M/W引擎将经处理的数据传递到呈现管理器模块。
SG处理器(未示出)收集并分析以XML文档形式发送的服务指南数据，然后将数据传递到EPG管理器。
服务管理器(未示出)收集并分析通过MPEG-2传送流发送的 PSI/PSIP数据和通过IP流发送的服务信令段数据，以产生服务地图。服务管理器(未示出)将所产生的服务地图存储在服务地图&指南数据库中，并且控制对用户想要的服务的访问。通过操作控制器控制器(未示出)控制服务管理器，并且其控制调谐器501、TP解复用器507和 IP/UDP解析器513。
NRT服务管理器(未示出)对通过FLUTE会话以对象/文件形式发送的NRT服务执行整体管理。NRT服务管理器(未示出)可以控制 FDT处理器和文件存储器。
应用管理器(未示出)对以对象和文件形式发送的应用数据执行整体管理。
UI管理器(未示出)通过用户接口将用户输入传递到操作控制器，并且开始针对用户请求的服务的处理。
操作控制器(未示出)处理通过UI管理器接收的用户的命令，并且允许必要模块的管理器执行相对应的动作。
指纹提取器565从AV流中提取指纹特征信息。
指纹比较器567将通过指纹提取器提取的特征信息与参考指纹进行比较，以找到相同的内容。指纹比较器567可以使用本地存储的参考指纹DB并且可以在互联网上查询指纹查询服务器以接收结果。通过比较结果获得的匹配的结果数据可以被传递到应用并且可以被使用。
因为ACR功能管理模块或应用模块基于ACR提供增强型服务，所以应用569在观看中识别广播内容，以提供与其有关的增强型服务。
图39是图示根据另一个实施方式的基于水印的视频显示装置的结构的框图。
尽管图39的基于水印的视频显示装置与图38的基于指纹的视频显示装置类似，但是基于指纹的视频显示装置不包括指纹提取器565 和指纹比较器567，但是还包括水印提取器566。
水印提取器566从音频/视频流中提取以水印形式插入的数据。所提取的数据可以被传递到应用并且可以被使用。
根据实施例，与MVPD无关的增强型服务是可用的。特别地，即使当广播公司或者内容提供商没有提供增强型服务时，与广播公司或者内容提供商无关的第三方服务器可以提供增强型服务。
此外，根据实施例，在没有使用遥控器的不便的文本输入的情况下，与主AV内容有关的信息搜索、聊天、新闻搜索、数字媒体下载、产品目录下载、以及产品购买是可用的。
另外，根据实施例，超过无线频道的带宽限制的增强型服务变成可用的。
此外，本发明的上述方法也能够被实现为计算机可读记录介质上的计算机可读代码。计算机可读记录介质的例子包括只读介质(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置和载波(如通过互联网进行的数据发送〉。
上述实施方式的配置和方法在没有任何限制的情况下被应用到视频显示装置，并且实施方式中的全部或部分可以被选择性组合以具有各种修改形式。
虽然已经参考多个示例性实施例描述了实施例，但是应该理解，本领域的技术人员可以想到许多落入本公开原理的精神和范围内其他修改和实施例。更具体地，在本公开、附图和所附权利要求书的范围内，主题组合布置的组件部分和/或布置方面的各种变化和修改都是可能的。除了组件部分和/或布置方面的变化和修改之外，对于本领域的技术人员来说，替选使用也将是显而易见的。

Claims (8)

1.一种包括显示单元的视频显示装置的操作方法，所述方法包括：
获得未被压缩的AV内容；
从所述未被压缩的AV内容的帧或者所述未被压缩的AV内容的音频采样的片段提取签名；
基于所述签名获得服务器的地址；
基于所述签名获得响应，其中，所述响应包括与所述未被压缩的AV内容有关的应用的地址、所述应用的请求时段以及所述应用的获取路径；
通过使用所述响应接收所述应用；以及
当关于所述视频显示装置的使用的信息的大小超过大小的标准时，基于所述服务器的地址向所述服务器报告关于所述视频显示装置的使用的信息，
其中，关于所述视频显示装置的使用的信息包括所述应用的激活时间。
2.根据权利要求1所述的操作方法，其中，关于所述视频显示装置的使用的信息包括第一时间间隔，在所述第一时间间隔期间，查看由所述视频显示装置播放的内容。
3.根据权利要求2所述的操作方法，其中，关于所述视频显示装置的使用的信息包括关于增强型服务的使用的信息，
其中，所述增强型服务与由所述视频显示装置播放的内容相关。
4.根据权利要求1所述的操作方法，报告关于所述视频显示装置的使用的信息包括：
当查看由所述视频显示装置播放的内容超过查看的持续时间的标准时，报告关于增强型服务的使用的信息。
5.一种视频显示装置，包括：
显示单元；
接收单元，所述接收单元获得未被压缩的AV内容；以及
增强型服务管理单元，所述增强型服务管理单元从所述未被压缩的AV内容的帧或者所述未被压缩的AV内容的音频采样的片段提取签名，基于所述签名获得服务器的地址，基于所述签名获得响应，其中，所述响应包括与所述未被压缩的AV内容有关的应用的地址、所述应用的请求时段以及所述应用的获取路径，通过使用所述响应接收所述应用，以及当关于所述视频显示装置的使用的信息的大小超过大小的标准时，基于所述服务器的地址向所述服务器报告关于所述视频显示装置的使用的信息，
其中，关于所述视频显示装置的使用的信息包括所述应用的激活时间。
6.根据权利要求5所述的视频显示装置，其中，关于所述视频显示装置的使用的信息包括第一时间间隔，在所述第一时间间隔期间，查看由所述视频显示装置播放的内容。
7.根据权利要求6所述的视频显示装置，其中，关于所述视频显示装置的使用的信息包括关于增强型服务的使用的信息，
其中，所述增强型服务与由所述视频显示装置播放的内容相关。
8.根据权利要求5所述的视频显示装置，
当超过查看的持续时间的标准查看由所述视频显示装置播放的所述内容时，所述增强型服务管理单元报告关于增强型服务的使用的信息。
CN201380012946.3A 2012-03-05 2013-03-05 视频显示设备及其操作方法 Expired - Fee Related CN104160713B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261606949P 2012-03-05 2012-03-05
US61/606,949 2012-03-05
US201261684820P 2012-08-20 2012-08-20
US61/684,820 2012-08-20
PCT/KR2013/001755 WO2013133601A1 (en) 2012-03-05 2013-03-05 Video display apparatus and operating method thereof

Publications (2)

Publication Number Publication Date
CN104160713A CN104160713A (zh) 2014-11-19
CN104160713B true CN104160713B (zh) 2018-06-05

Family

ID=49117021

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380012946.3A Expired - Fee Related CN104160713B (zh) 2012-03-05 2013-03-05 视频显示设备及其操作方法

Country Status (5)

Country Link
US (2) US9516365B2 (zh)
EP (1) EP2810445B1 (zh)
KR (1) KR102116679B1 (zh)
CN (1) CN104160713B (zh)
WO (1) WO2013133601A1 (zh)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9661397B2 (en) * 2010-12-26 2017-05-23 Lg Electronics Inc. Broadcast service transmitting method, broadcast service receiving method and broadcast service receiving apparatus
US9292894B2 (en) 2012-03-14 2016-03-22 Digimarc Corporation Content recognition and synchronization using local caching
KR20140008237A (ko) * 2012-07-10 2014-01-21 한국전자통신연구원 엠엠티의 하이브리드 전송 서비스에서 패킷 전송 및 수신 장치 및 방법
US9769503B2 (en) * 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US8997164B2 (en) * 2013-01-07 2015-03-31 Gracenote, Inc. Authorizing devices based on identifying content distributor
US9648086B2 (en) 2013-06-28 2017-05-09 Sonic Ip, Inc. System, method, and computer program product for providing test logic to user devices
WO2015011877A1 (ja) 2013-07-26 2015-01-29 パナソニックＩｐマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
WO2015015712A1 (ja) 2013-07-30 2015-02-05 パナソニックＩｐマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
WO2015033500A1 (ja) 2013-09-04 2015-03-12 パナソニックＩｐマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
WO2015033501A1 (ja) 2013-09-04 2015-03-12 パナソニックＩｐマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
US9872086B2 (en) * 2013-09-30 2018-01-16 Sony Corporation Receiving apparatus, broadcasting apparatus, server apparatus, and receiving method
KR101966940B1 (ko) * 2013-11-15 2019-08-13 삼성전자주식회사 디스플레이 장치 및 이의 통합 리모컨 설정 방법
US9332290B2 (en) * 2013-12-31 2016-05-03 Sonic Ip, Inc. Methods, systems, and media for certifying a playback device
WO2015145491A1 (ja) * 2014-03-26 2015-10-01 パナソニックＩｐマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
CN105144735A (zh) 2014-03-26 2015-12-09 松下知识产权经营株式会社 影像接收装置、影像识别方法以及附加信息显示系统
US9794599B2 (en) * 2014-04-10 2017-10-17 Telibrahma Convergent Communications Private Limited Method and system for auditing multimedia content
JP6471359B2 (ja) 2014-07-17 2019-02-20 パナソニックＩｐマネジメント株式会社 認識データ生成装置、画像認識装置および認識データ生成方法
CN106233746B (zh) 2014-08-21 2019-07-09 松下知识产权经营株式会社 内容辨识装置、内容辨识方法以及记录介质
JP6043767B2 (ja) * 2014-09-26 2016-12-14 株式会社アステム 番組出力装置、補助情報管理サーバ、番組と補助情報の出力方法、及びプログラム
CN104618811A (zh) * 2014-12-30 2015-05-13 乐视致新电子科技（天津）有限公司 智能电视及在其中展示cp内容的方法和装置
US10521367B2 (en) * 2015-04-22 2019-12-31 Sharp Kabushiki Kaisha Systems and methods for content information communication
US20160320922A1 (en) * 2015-04-28 2016-11-03 Nhn Entertainment Corporation Service method and system for providing service by associating appstore with timeline
USD772912S1 (en) * 2015-05-21 2016-11-29 Layer3 TV, Inc. Display screen or portion thereof with graphical user interface
US9813781B2 (en) * 2015-10-27 2017-11-07 Sorenson Media, Inc. Media content matching and indexing
US20170171615A1 (en) * 2015-12-15 2017-06-15 Le Holdings (Beijing) Co., Ltd. Method and Electronic Device for Controlling Video Playing
US10063918B2 (en) 2016-02-29 2018-08-28 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on single-match
US9930406B2 (en) 2016-02-29 2018-03-27 Gracenote, Inc. Media channel identification with video multi-match detection and disambiguation based on audio fingerprint
US9924222B2 (en) 2016-02-29 2018-03-20 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on location
WO2018117619A1 (en) 2016-12-21 2018-06-28 Samsung Electronics Co., Ltd. Display apparatus, content recognizing method thereof, and non-transitory computer readable recording medium
CN107168996B (zh) * 2017-03-29 2019-11-15 武汉斗鱼网络科技有限公司 一种第三方多媒体的推广方法及装置
CN107690078B (zh) * 2017-09-28 2020-04-21 腾讯科技（深圳）有限公司 弹幕信息显示方法、提供方法以及设备
KR102504174B1 (ko) 2018-05-11 2023-02-27 삼성전자주식회사 전자 장치 및 그의 제어방법
KR102546026B1 (ko) * 2018-05-21 2023-06-22 삼성전자주식회사 전자 장치 및 그의 컨텐츠 인식 정보 획득
KR102599951B1 (ko) 2018-06-25 2023-11-09 삼성전자주식회사 전자 장치 및 그의 제어방법
KR20200080387A (ko) 2018-12-18 2020-07-07 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
EP3926967A4 (en) * 2019-02-14 2022-09-14 LG Electronics Inc. DISPLAY DEVICE AND RELATED METHOD OF OPERATION
KR20210135851A (ko) * 2020-05-06 2021-11-16 엘지전자 주식회사 영상표시장치 및 그 동작방법
CN113068055B (zh) * 2021-03-15 2023-08-18 广州虎牙科技有限公司 数据传输方法、装置、系统、电子设备和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101742246A (zh) * 2009-12-01 2010-06-16 中广传播有限公司 实现移动多媒体广播互动业务的系统及方法

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6240555B1 (en) * 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US6948183B1 (en) * 1998-06-18 2005-09-20 General Instrument Corporation Dynamic security for digital television receivers
EP1286541B1 (en) * 2000-04-14 2012-05-02 Nippon Telegraph And Telephone Corporation Method, system, and apparatus for acquiring information concerning broadcast information
KR100344582B1 (ko) * 2000-04-17 2002-07-20 주식회사 디티비로 방송수신장치와 부가정보제공장치를 이용한 부가정보서비스 방법
US20020080161A1 (en) 2000-11-02 2002-06-27 St. Maurice Susan T. Network appliance for enhanced television services
US6965683B2 (en) * 2000-12-21 2005-11-15 Digimarc Corporation Routing networks for use with watermark systems
CA2520621A1 (en) * 2003-04-03 2004-10-21 Sedna Patent Services, Llc Content notification and delivery
US20050050578A1 (en) * 2003-08-29 2005-03-03 Sony Corporation And Sony Electronics Inc. Preference based program deletion in a PVR
US20070124796A1 (en) 2004-11-25 2007-05-31 Erland Wittkotter Appliance and method for client-sided requesting and receiving of information
KR100738925B1 (ko) * 2006-01-09 2007-07-12 에스케이 텔레콤주식회사 Ｄｍｂ 데이터 방송에서 애플리케이션 시그널링 방법 및시스템
US8973072B2 (en) * 2006-10-19 2015-03-03 Qualcomm Connected Experiences, Inc. System and method for programmatic link generation with media delivery
US20080162356A1 (en) 2006-12-27 2008-07-03 Jeff Parket Portable electronic display device for viewing publications and method of using the same
ATE483326T1 (de) * 2007-05-08 2010-10-15 Koninkl Philips Electronics Nv Erkennung eines übergangs zwischen videosegmenten
KR20080099497A (ko) 2007-05-09 2008-11-13 삼성전자주식회사 양방향 통신망을 통해 콘텐츠를 제공하는 장치 및 방법
US8578432B2 (en) * 2007-12-07 2013-11-05 Cisco Technology, Inc. Policy control over switched delivery networks
US9226047B2 (en) * 2007-12-07 2015-12-29 Verimatrix, Inc. Systems and methods for performing semantic analysis of media objects
JP5374080B2 (ja) * 2008-06-25 2013-12-25 キヤノン株式会社 撮影装置、その制御方法及びコンピュータプログラム
KR101599465B1 (ko) * 2009-03-03 2016-03-04 삼성전자주식회사 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법
US9015741B2 (en) * 2009-04-17 2015-04-21 Gracenote, Inc. Method and system for remotely controlling consumer electronic devices
KR20110061234A (ko) 2009-12-01 2011-06-09 에스케이 텔레콤주식회사 양방향 통신 기반의 방송 편성정보 제공 시스템 및 방법, 그리고 이에 적용되는 장치
US10511887B2 (en) * 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
WO2012070251A1 (ja) * 2010-11-25 2012-05-31 パナソニック株式会社 通信機器
US8931037B2 (en) 2010-12-27 2015-01-06 Microsoft Corporation Policy-based access to virtualized applications
US8387084B1 (en) * 2011-09-28 2013-02-26 United Video Properties, Inc. Systems and methods for detecting unauthorized use of a user equipment device
US9055120B1 (en) * 2011-12-16 2015-06-09 Google Inc. Device capability filtering
US8832723B2 (en) * 2012-02-07 2014-09-09 Turner Broadcasting System, Inc. Method and system for a synchronous event manager for automatic content recognition
KR20150030669A (ko) 2012-07-12 2015-03-20 소니 주식회사 수신 장치, 정보 처리 방법, 프로그램, 송신 장치 및 애플리케이션 연동 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101742246A (zh) * 2009-12-01 2010-06-16 中广传播有限公司 实现移动多媒体广播互动业务的系统及方法

Also Published As

Publication number Publication date
US20150089535A1 (en) 2015-03-26
CN104160713A (zh) 2014-11-19
EP2810445B1 (en) 2017-08-02
US9992522B2 (en) 2018-06-05
EP2810445A4 (en) 2016-01-06
EP2810445A1 (en) 2014-12-10
US9516365B2 (en) 2016-12-06
US20140082655A1 (en) 2014-03-20
KR102116679B1 (ko) 2020-05-29
WO2013133601A1 (en) 2013-09-12
KR20150045918A (ko) 2015-04-29

Similar Documents

Publication Publication Date Title
CN104160713B (zh) 视频显示设备及其操作方法
CN105075280B (zh) 视频显示设备及其操作方法
CN104137560B (zh) 图像显示设备及其操作方法
CN105009596B (zh) 视频显示设备及其操作方法
US20190082212A1 (en) Method for receiving enhanced service and display apparatus thereof
CA2862575C (en) Video display apparatus and operating method thereof
EP3010241B1 (en) Image display device and method for operating same
US10587927B2 (en) Electronic device and operation method thereof
US20170347154A1 (en) Video display apparatus and operating method thereof
KR102263146B1 (ko) 영상 표시 장치 및 그 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180605

Termination date: 20210305