CN103828382B - 视频显示装置、终端装置及其方法 - Google Patents

视频显示装置、终端装置及其方法 Download PDF

Info

Publication number
CN103828382B
CN103828382B CN201280044992.7A CN201280044992A CN103828382B CN 103828382 B CN103828382 B CN 103828382B CN 201280044992 A CN201280044992 A CN 201280044992A CN 103828382 B CN103828382 B CN 103828382B
Authority
CN
China
Prior art keywords
enhanced service
video display
display devices
information
terminal installation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201280044992.7A
Other languages
English (en)
Other versions
CN103828382A (zh
Inventor
文京洙
郑在喜
李贤在
金镇泌
池爱娣
金庆镐
金相铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103828382A publication Critical patent/CN103828382A/zh
Application granted granted Critical
Publication of CN103828382B publication Critical patent/CN103828382B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4112Peripherals receiving signals from specially adapted client devices having fewer capabilities than the client, e.g. thin client having less processing power or no tuning capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42607Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H04N21/4263Internal components of the client ; Characteristics thereof for processing the incoming bitstream involving specific tuning arrangements, e.g. two tuners
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4367Establishing a secure communication between the client and a peripheral device or smart card
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/441Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4627Rights management associated to the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4758End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for providing answers, e.g. voting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种视频显示设备与第一终端装置配对。所述视频显示设备接收视听内容,并显示所述视听内容。所述视频显示设备获取关于针对所述视听内容的可用增强型服务的增强型服务信息,并将所述可用增强型服务的出现通知给所述第一终端装置。

Description

视频显示装置、终端装置及其方法
技术领域
本发明涉及视频显示装置、终端装置及其方法。
背景技术
随着数字广播正为其广泛传播铺平道路,广播站发送主视听(AV)内容和增强型服务数据二者,增强型服务数据可以联合主AV内容来提供信息和服务或者可以出于其它目的被单独提供。
然而,在当前的广播环境下,每个家庭中的视频显示装置可能不太可能直接以无线方式接收广播信号。确切地说,对于大多数情况,每个家庭中的视频显示装置连接到广播接收装置,以显示广播接收装置提供的未压缩的视听内容。
另外,广播接收装置从服务器(称为多频道视频节目分发商(MVPD))接收内容。MVPD从广播站接收广播信号,从所接收的广播信号中提取内容,将所提取的内容转换成具有正确传输格式的信号,并且将经转换的信号提供给广播接收装置。在这些过程期间,MVPD可以不包括所提取的增强型服务内容或者可以添加另外的增强型服务数据,使得广播站可以用于提供AV内容,但是可以不提供广播站引导的增强型服务。
因为广播接收装置由从MVPD接收的信号中提取主AV数据并且只将未压缩的视听数据提供到视频显示装置,只有从广播接收装置而非视频显示装置提供的增强型服务是可用的。此外,广播站可以不提供其自身引导的增强型服务。
另外,即使当广播站通过无线频道提供增强型服务时,由于带宽限制,导致可能不足以提供增强型服务。
另外,当提供由广播站引导的增强型服务时,其被显示在视频显示装置的显示单元的一部分上。因此,可能给观看内容的用户带来不便。
发明内容
技术问题
实施方式提供一种图像显示器、终端装置及其操作方法,其在不给观看内容的用户带来不便的情况下提供由广播站引导的可用增强型服务。
技术方案
在一个实施方式中,一种视频显示设备的操作方法包括以下步骤:与第一终端装置配对;接收视听内容;显示所述视听内容;获取关于用于所述视听内容的可用增强型服务的增强型服务信息;以及将所述可用增强型服务的出现通知给所述第一终端装置。
在另一实施方式中,一种视频显示设备包括:显示单元;接收器,其接收视听内容;增强型服务管理器,其获取关于用于所述视听内容的可用增强型服务的增强型服务信息;以及再现控制器,其通过所述显示单元再现所述视听内容,其中,所述增强型服务管理器与第一终端装置配对,并将所述可用增强型服务的出现通知给所述第一终端装置。
在另一实施方式中,一种终端装置的操作方法包括以下步骤:与视频显示设备配对;从所述视频显示设备接收用于由所述视频显示设备再现的视听内容的可用增强型服务的出现;以及执行所述可用增强型服务。
在另一实施方式中,一种终端装置包括:显示单元;通信单元,其与视频显示设备通信;控制器,其通过所述通信单元与所述视频显示设备配对,从所述视频显示设备接收用于由所述视频显示设备再现的视听内容的可用增强型服务的出现,并且在所述显示单元上显示所述可用增强型服务。
在另一实施方式中,一种视频显示设备的操作方法包括以下步骤:接收视听内容;显示所述视听内容;获取关于用于所述视听内容的可用增强型服务的增强型服务信息;以及如果选择终端装置并选择执行所述可用增强型服务,则向所选择的终端装置请求执行所述可用增强型服务。
在以下的附图和描述中阐述一个或更多个实施方式的细节。根据描述和附图以及根据权利要求书,其它特征将是显而易见的。
有益效果
一个实施方式实现由广播站引导的增强型服务,而不会给观看内容的用户带来不便。
此外,根据另一实施方式,视频显示设备仅将增强型服务的控制功能转移给终端装置,使得用户可通过终端装置的各种输入装置来控制视频显示设备内的增强型服务。
另外,另一实施方式越过无线频道的带宽限制实现增强型服务。
附图说明
图1是示出根据实施方式的网络拓扑的框图。
图2是示出根据实施方式的基于水印的网络拓扑的框图。
图3是示出根据实施方式的基于水印的网络拓扑中的数据流的梯形图。
图4是示出根据实施方式的基于水印的内容识别时序的视图。
图5是示出根据实施方式的基于指纹的网络拓扑的框图。
图6是示出根据实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图7是示出根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。
图8是示出根据实施方式的基于水印和指纹的网络拓扑的框图。
图9是示出根据实施方式的基于水印和指纹的网络拓扑中的数据流的梯形图。
图10是示出根据实施方式的视频显示装置的框图。
图11是根据实施方式的增强型服务管理单元的层次结构关系图。
图12是示出根据实施方式的增强型服务管理单元的操作的流程图。
图13是根据实施方式的增强型服务管理单元的层次结构关系图。
图14是示出根据实施方式的增强型服务管理单元的操作的流程图。
图15是根据实施方式的增强型服务管理单元的层次结构关系图。
图16是示出根据实施方式的增强型服务管理单元的操作的流程图。
图17是根据实施方式的增强型服务管理单元的层次结构关系图。
图18是示出根据实施方式的增强型服务管理单元的操作的流程图。
图19是示出根据实施方式的将主AV内容的回放时间与增强型服务的回放时间同步的方法的流程图。
图20是示出根据实施方式的将主AV内容的回放时间与增强型服务的回放时间同步的方法的概念图。
图21是根据实施方式的当执行自动播放应用时的画面。
图22是根据实施方式的当执行内容提供商应用时的画面。
图23是根据实施方式的当执行具有缩放用户界面的视频显示装置制造商应用时的画面。
图24是根据实施方式的当执行具有重叠用户界面的视频显示装置制造商应用时的画面。
图25是示出根据实施方式的执行视频显示装置制造商应用的方法的流程图。
图26是根据实施方式的当显示应用选择菜单时的画面。
图27是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的全部子菜单时的画面。
图28是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的参与子菜单时的画面。
图29是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的发现子菜单时的画面。
图30是示出根据实施方式的搜索方法的流程图。
图31是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的搜索子菜单时的画面。
图32是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的搜索子菜单时的另一个画面。
图33是示出根据实施方式的聊天窗口显示方法的流程图。
图34是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的Twitter子菜单时的画面。
图35是示出根据实施方式的新闻获得方法的流程图。
图36是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的新闻子菜单时的画面。
图37是示出根据实施方式的观众列表显示方法的流程图。
图38是根据实施方式的当选择视频显示装置制造商应用中的社交主菜单的观众列表子菜单时的画面。
图39是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
图40是根据另一个实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
图41是示出根据实施方式的偏好显示方法的流程图。
图42是根据实施方式的当选择视频显示装置制造商应用中的社交主菜单的偏好显示子菜单时的画面。
图43是示出根据实施方式的数字媒体下载方法的流程图。
图44是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的前一剧集子菜单时的画面。
图45是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的VOD子菜单时的画面。
图46是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的应用子菜单时的画面。
图47是示出根据实施方式的目录显示方法的流程图。
图48是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的风格子菜单时的画面。
图49是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的音乐子菜单时的画面。
图50是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的另一个子菜单时的画面。
图51是根据实施方式的用于控制ACR功能的用户界面的视图。
图52是示出根据实施方式的控制视频显示装置的方法的流程图。
图53是示出根据实施方式的配对过程的梯形图。
图54是根据实施方式的执行互通应用的终端的正视图。
图55是根据实施方式的验证号码输入窗口。
图56是示出根据实施方式的ACR控制方法的梯形图。
图57是示出根据实施方式的装置之间的互通处理的梯形图。
图58是示出根据另一实施方式的装置之间的互通处理的梯形图。
图59是根据实施方式的显示增强型服务通知UI的终端装置的正视图。
图60是根据另一实施方式的显示增强型服务通知UI的终端装置的正视图。
图61是根据另一实施方式的显示增强型服务通知UI的终端装置的正视图。
图62是根据实施方式的执行增强型服务的终端装置的正视图。
图63是根据另一实施方式的当视频显示装置和终端装置中执行增强型服务时的视图。
图64是根据另一实施方式的执行增强型服务的终端装置的正视图。
图65是根据另一实施方式的执行增强型服务的终端装置的正视图。
图66是示出根据另一实施方式的装置之间的互通处理的梯形图。
图67是示出根据另一实施方式的装置之间的互通处理的梯形图。
图68是示出根据另一实施方式的装置之间的互通处理的梯形图。
图69是示出根据另一实施方式的装置之间的互通处理的梯形图。
图70是示出根据另一实施方式的装置之间的互通处理的梯形图。
图71是示出根据另一实施方式的装置之间的互通处理的梯形图。
图72是示出根据另一实施方式的装置之间的互通处理的梯形图。
图73是根据另一实施方式的执行互通应用的终端装置的正视图。
图74是根据另一实施方式的执行互通应用的终端装置的正视图。
图75是根据另一实施方式的执行互通应用的终端装置的正视图。
图76是根据另一实施方式的执行互通应用的终端装置的正视图。
图77是根据另一实施方式的执行互通应用的终端装置的正视图。
图78是根据另一实施方式的执行互通应用的终端装置的正视图。
图79是根据另一实施方式的执行互通应用的终端装置的正视图。
图80是根据另一实施方式的执行互通应用的终端装置的正视图。
图81是根据另一实施方式的执行互通应用的终端装置的正视图。
图82是根据另一实施方式的执行互通应用的终端装置中的显示单元的顶部正视图。
图83是示出根据实施方式的通过基于IP的网络获得AIT的方法的流程图。
图84是示出根据实施方式的SD&S信息的结构的视图。
图85是示出根据另一实施方式的SD&S信息的结构的视图。
图86是示出根据实施方式的SD&S信息的结构的视图。
图87是示出根据实施方式的通过广播网络获得关于可用增强型服务的信息的方法的流程图。
图88是示出根据另一实施方式的提供增强型服务的方法的梯形图。
图89是根据另一实施方式的执行互通应用的终端装置的正视图。
图90是根据另一实施方式的执行显示内容信息的服务的终端装置的正视图。
图91是示出根据另一实施方式的装置之间的互通方法的梯形图。
图92是根据实施方式的显示询问用户以确定是否将增强型服务提供给视频显示装置的UI的终端装置的正视图。
图93是从终端装置接收增强型服务并执行该增强型服务的视频显示装置的正视图。
图94是示出根据另一个实施方式的基于指纹的视频显示装置的结构的框图。
图95是示出根据另一个实施方式的基于水印的视频显示装置的结构的框图。
图96是根据实施方式的终端装置的框图。
具体实施方式
下文中,将参照附图更详细地描述涉及本发明的实施方式。在书写说明书的过程中,为了容易,在以下的描述中,提供或混合组件的名词后缀“引擎”、“模块”和“单元”。也就是说,名词后缀自身并没有分别可区分的含义或作用。
将根据实施方式参照图1至图9描述网络拓扑。
图1是示出根据实施方式的网络拓扑的框图。
如图1中所示,网络拓扑包括内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40、多个增强型服务提供服务器50、广播接收装置60、网络70、视频显示装置100和终端装置400。
内容提供服务器10可以对应于广播站并且广播包括主视听内容的广播信号。广播信号还可以包括增强型服务。增强型服务可以涉及或者可以不涉及主视听内容。增强型服务可以具有一些格式,如服务信息、元数据、增强型数据、编译执行文件、网页应用、超文本标记语言(HTML)文档、XML文档、层叠风格表(CSS)文档、音频文件、视频文件、ATSC2.0内容和地址(如统一资源定位符(URL))。可能存在至少一个内容提供服务器。
内容识别服务提供服务器20提供内容识别服务,该内容识别服务允许视频显示装置100基于主视听内容识别内容。内容识别服务提供服务器20可以编辑或者可以不编辑主视听内容。可能存在至少一个内容识别服务提供服务器。
内容识别服务提供服务器20可以是水印服务器,水印服务器编辑主视听内容,以将可以看到徽标的可视水印插入主视听内容中。这个水印服务器可以将每帧的左上或右上的内容提供商的徽标作为水印插入主视听内容中。
另外,内容识别服务提供服务器20可以是水印服务器,水印服务器编辑主视听内容,以将内容信息作为不可视水印插入主视听内容中。
另外,内容识别服务提供服务器20可以是指纹服务器,该指纹服务器从主视听内容的一部分帧或一部分音频样本中提取特征信息并且将其存储。这个特征信息被称为签名。
多频道视频分发服务器30从多个广播站接收并复用广播信号并且将复用的广播信号提供到广播接收装置60。尤其是,多频道视频分发服务器30对所接收的广播信号执行解调和频道解码,以提取主视听内容和增强型服务,然后对所提取的主视听内容和增强型服务执行频道编码,以生成复用信号供分发。此时,因为多频道视频分发服务器30可以不包括所提取的增强型服务或者可以添加另外的增强型服务,所以广播站可以不提供其引导的服务。可能存在至少一个多频道视频分发服务器。
广播装置60可以调谐用户选择的频道并且接收经调谐频道的信号,然后对所接收的信号执行解调和频道解码,以提取主视听内容。广播装置60通过H.264/运动图像专家组-4先进视频编码(MPEG-4AVC)、Dolby AC-3或运动图像专家组-2先进音频编码(MPEG-2ACC)算法对所提取的主视听内容进行解码,以生成未压缩的主视听(AV)内容。广播接收装置60通过其外部输入端口将所生成的未压缩的主AV内容提供到视频显示装置100。
增强型服务信息提供服务器40响应于视频显示装置的请求,提供与涉及主AV内容的至少一个可用增强型服务有关的增强型服务信息。增强型服务信息提供服务器40和视频显示装置可通过网络70通信。可能存在至少一个增强型服务提供服务器。增强型服务信息提供服务器40可以提供与多个可用增强型服务之中具有最高优先级的增强型服务有关的增强型服务信息。
增强型服务提供服务器50响应于视频显示装置的请求,提供涉及主AV内容的至少一个可用增强型服务。可能存在至少一个增强型服务提供服务器。增强型服务提供服务器50和视频显示装置100可通过网络70彼此通信。
网络70可以是基于IP的网络。
视频显示装置100可以是均包括显示单元的电视机、笔记本电脑、手机和智能电话。视频显示装置100可以通过外部输入端口从广播接收装置60接收未压缩的主AV内容,并通过广播网络从内容提供服务器10或多频道视频分发服务器30接收包括经编码的主AV内容的广播信号。视频显示装置100可以通过网络70从内容识别服务提供服务器20接收内容识别服务,通过网络70从增强型服务提供服务器40接收涉及主AV内容的至少一个可用增强型服务的地址,并且通过网络70从增强型服务提供服务器50接收涉及主AV内容的至少一个可用增强型服务。终端装置400可以是移动终端装置(诸如笔记本计算机、移动电话和智能电话)或其它视频显示装置。
内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40和多个增强型服务提供服务器50中的至少两个可以按一个服务器的形式组合并且可以由一个提供商操作。
图2是示出根据实施方式的基于水印的网络拓扑的框图。
如图2中所示,基于水印的网络拓扑还可以包括水印服务器21。
如图2中所示,水印服务器21编辑主AV内容,以将内容信息插入其中。多频道视频分发服务器30可以接收并分发包括经更改的主AV内容的广播信号。具体地,水印服务器可以使用下述的数字加水印技术。
数字水印是一种用于将可能几乎不能被删除的信息插入数字信号中的过程。例如,数字信号可以是音频、图片或视频。如果复制数字信号,则在复制品中包括插入的信息。一个数字信号可以同时承载多个不同的水印。
在可视加水印的过程中,被插入的信息在图片或视频中可能能被识别出来。典型地,被插入的信息可以是识别媒体拥有者的文本或徽标。如果电视广播站将其徽标添加在视频的角落处,则这是可识别的水印。
在不可视加水印的过程中,尽管信息作为数字数据被添加到音频、图片或视频中,但是用户可以获知预定量的信息但是可能无法识别它。可以通过不可视加水印传递秘密的消息。
加水印的一个应用是用于防止数字媒体的非法复制的版权保护系统。例如,复制装置在复制数字媒体之前从数字媒体获得水印,并且基于水印的内容判定是否进行复制。
加水印的另一个应用是数字媒体的源追踪。在分发路径的每个点,水印被嵌入在数字媒体中。如果这种数字媒体之后被发现,则可以从数字媒体提取水印并且可以从水印的内容识别分发源。
不可视加水印的另一个应用是对数字媒体的说明。
数字媒体的文件格式可以包括称为元数据的增强信息,并且数字水印与元数据的区别在于数字水印被作为数字媒体的AV信号自身传递。
加水印方法可以包括扩频、量化和调幅。
如果通过额外编辑获得经标记的信号,则加水印方法对应于扩频。尽管已知的是扩频水印十分强,但是因为水印干扰嵌入的主信号,所以没有包含太多的信息。
如果通过量化获得经标记的信号,则加水印方法对应于量化型。量化水印弱,可以包括大量信息。
如果在空间域中通过与扩频类似的额外编辑方法获得经标记的信号,则加水印方法对应于调幅。
图3是示出根据实施方式的基于水印的网络拓扑中的数据流的梯形图。
首先,在步骤S100中,终端装置400执行互通(interworking)应用。一旦执行互通应用,终端装置400就可与视频显示装置100执行互通操作。
在步骤S101中,视频显示装置100和终端装置400执行配对操作以形成配对会话。详细的配对处理将稍后描述。
然后,在步骤S102中,视频显示装置100和终端装置400通过配对会话执行ACR控制。详细ACR控制处理将稍后描述。
首先,在步骤S103中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在步骤S104中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容将可视水印如徽标或作为不可视水印的水印信息插入主AV内容中,并且将加水印的主AV内容和增强型服务提供到MVPD30。
通过不可视水印插入的水印信息可以包括水印功能、内容信息、增强型服务信息和可用增强型服务中的至少一者。水印功能代表非法复制防止、收视率和增强型服务获取中的一者。
内容信息可以包括提供主AV内容的内容提供商的识别信息、主AV内容识别信息、内容信息获取过程中使用的内容段的时间信息、主AV内容通过其广播的频道的名字、主AV内容通过其广播的频道的徽标、对主AV内容通过其广播的频道的说明、使用信息报告时间段、使用信息获取的最短使用时间和涉及主AV内容的可用增强型服务信息中的至少一个。
如果视频显示装置100使用水印获取内容信息,则用于内容信息获取的内容段的时间信息可以是其中嵌入所使用水印的内容段的时间信息。如果视频显示装置100使用指纹获取内容信息,则用于内容信息获取的内容段的时间信息可以是从其中提取特征信息的内容段的时间信息。用于内容信息获取的内容段的时间信息可以包括用于内容信息获取的内容段的起始时间、用于内容信息获取的内容段的持续时间和用于内容信息获取的内容段的结束时间中的至少一个。
使用信息报告地址可以包括主AV内容观看信息报告地址和增强型服务使用信息报告地址中的至少一个。使用信息报告时间段可以包括主AV内容观看信息报告时间段和增强型服务使用信息报告时间段中的至少一个。使用信息获取的最短使用时间可以包括主AV内容观看信息获取的最短观看时间和增强型服务使用信息提取的最短使用时间中的至少一个。
基于在超过最短观看时间的时间内观看主AV内容,视频显示装置100获取关于主AV内容的观看信息并且在主AV内容观看信息报告时间段内将所获取的观看信息报告到主AV内容观看信息报告地址。
基于在超过最短使用时间的时间内使用增强型服务,视频显示装置100获取增强型服务使用信息并且在增强型服务使用信息报告时间段内将所获取的使用信息报告到增强型服务使用信息报告地址。
增强型服务信息可以包括关于是否存在增强型服务的信息、增强型服务地址提供服务器地址、每个可用增强型服务的获取路径、每个可用增强型服务的地址、每个可用增强型服务的起始时间、每个可用增强型服务的结束时间、每个可用增强型服务的使用期限、每个可用增强型服务的获取模式、每个可用增强型服务的请求时间段、每个可用增强型服务的优先级信息、每个可用增强型服务的说明、每个可用增强型服务的类别、使用信息报告地址、使用信息报告时间段和使用信息获取的最短使用时间中的至少一个。
可用增强型服务的获取路径可以用IP网络或先进电视系统委员会-移动/手持频道(ATSC M/H频道)表达。如果可用增强型服务的获取路径是ATSC M/H,则增强型服务信息还可以包括频率信息和频道信息。每个可用增强型服务的获取模式可以代表推送(Push)或拉取(Pull)。
此外,水印服务器21可以将水印信息作为不可视水印插入主AV内容的徽标中。
例如,水印服务器21可以在徽标的预定位置插入条形码。此时,徽标的预定位置可以对应于显示徽标的区域底部的第一行。当接收包括其中插入了条形码的徽标的主AV内容时,视频显示装置100可以不显示条形码。
例如,水印服务器21可以在徽标的预定位置插入条形码。此时,徽标可以保持其形式。
例如,水印服务器21可以在M个帧的各个徽标处插入N位水印信息。也就是说,水印服务器21可以在M个帧中插入M*N水印信息。
在步骤S105中,MVPD30接收包括加水印的主AV内容和增强型服务的广播信号并且生成复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在步骤S106中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以生成未压缩的主AV内容,然后,将所生成的未压缩的主AV内容提供到视频显示装置100。
此外,在步骤S107中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,在步骤S108中,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。视频显示装置100从所获得的主AV内容的一部分帧或一部分音频样本中提取水印信息。如果水印信息对应于徽标,则视频显示装置100确认与从多个徽标和多个水印服务器地址之间的对应关系中提取的徽标对应的水印服务器地址。当水印信息对应于徽标时,视频显示装置100不可以只通过徽标来识别主AV内容。另外,当水印信息不包括内容信息时,视频显示装置100不可以识别主AV内容,但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时,视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以此方式,在步骤S109中,当视频显示装置100不可以只通过水印信息识别视频显示装置100的主AV内容时,它访问与所获得的水印服务器地址对应的水印服务器21,以发送第一查询。
在步骤S111中,水印服务器21向第一查询提供第一应答。第一应答可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
如果水印信息和第一应答不包括增强型服务地址,则视频显示装置100不可以获得增强型服务。然而,水印信息和第一应答可以包括增强型服务地址提供服务器地址。以此方式,视频显示装置100没有通过水印信息和第一应答获得服务地址或增强型服务。在步骤S119中,如果视频显示装置100获得增强型服务地址提供服务器地址,则它访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及关于第二查询的内容信息的至少一个可用增强型服务。随后,在步骤S121中,增强型服务信息提供服务器40向视频显示装置100提供至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答。
因此,根据实施方式,视频显示装置100可从加水印AV内容的加水印信息获得内容信息,并且可基于所获得的内容信息来通过查询/重放获得关于可用增强型服务的信息。
另外,根据实施方式,视频显示装置100可通过广播网络从内容提供服务器10获得关于可用增强型服务的信息。广播网络可以是通过物理层使用基于MPEG-2传输流的广播技术的网络,例如DVB-T、DVB-S或DVB-C。将稍后描述通过广播网络获得可用增强型服务。
此外,根据另一实施方式,视频显示装置100可基于服务发现和选择(SD&S)来通过基于IP的网络获得关于可用增强型服务的信息。将稍后描述通过基于IP的网络获得增强型服务信息。
另外,根据另一实施方式,终端装置400捕获视频显示装置100播放的AV内容,从关于所捕获的AV内容的加水印信息获得内容信息,并将所获得的内容信息提供给视频显示装置100。视频显示装置100可基于从终端装置400获得的内容信息来通过查询/重放获得关于可用增强型服务的信息。
在步骤S123中,如果视频显示装置100通过水印信息、第一应答或第二应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后,在步骤S125中,获得增强型服务。
然后,在步骤S127中,视频显示装置100和终端装置400通过配对会话或通过推送通知机制执行装置之间的互通处理。装置之间的互通处理和推送通知机制将稍后描述。
在步骤S129中,终端装置400与增强型服务提供服务器500执行增强型服务互通处理。终端装置400可根据互通处理与增强型服务提供服务器500执行增强型服务互通处理。此增强型服务互通处理将稍后更详细地描述。
图4是示出根据实施方式的基于水印的内容识别时序的视图。
如图4中所示,当广播接收装置60打开并且调谐频道,并且另外视频显示装置100通过外部输入端口111从广播接收装置60接收经调谐频道的主AV内容时,视频显示装置100可以从主AV内容的水印中感测内容提供商标识符(或广播站标识符)。然后,视频显示装置100可以基于感测到的内容提供商标识符,从主AV内容的水印中感测内容信息。
此时,如图4中所示,内容提供商标识符的检测可用时间段可以与内容信息的检测可用时间段不同。具体地,内容提供商标识符的检测可用时间段可以比内容信息的检测可用时间段短。据此,视频显示装置100可以具有用于只检测必要信息的有效构造。
图5是示出根据实施方式的基于指纹的网络拓扑的框图。
如图5中所示,网络拓扑还可以包括指纹服务器22。
如图5中所示,指纹服务器22不编辑主AV内容,而是从主AV内容的一部分帧或一部分音频样本中提取特征信息并且存储所提取的特征信息。然后,当从视频显示装置100接收特征信息时,指纹服务器22提供关于与所接收的特征信息对应的AV内容的时间信息和标识符。
图6是示出根据实施方式的基于指纹的网络拓扑中的数据流的梯形图。
首先,在步骤S200中,终端装置400执行互通应用。一旦执行互通应用,终端装置400就可与视频显示装置100执行互通操作。
在步骤S201中,视频显示装置100和终端装置400执行配对操作以便形成配对会话。详细的配对处理将稍后描述。
然后,在步骤S202中,视频显示装置100和终端装置400通过配对会话执行ACR控制。
首先,在步骤S203中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在步骤S204中,指纹服务器22接收内容提供服务器10提供的广播信号,从主AV内容的多个帧片段或多个音频片段中提取多条特征信息,并且创建与多个特征信息对应的多个查询结果的数据库。查询结果可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
在步骤S205中,MVPD30接收包括主AV内容和增强型服务的广播信号并且生成复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在步骤S206中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以生成未压缩的主AV内容,然后,将所生成的未压缩的主AV内容提供到视频显示装置100。
此外,在步骤S207中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。在步骤213中,视频显示装置100从所获得的主AV内容的一部分帧或一部分音频样本中提取特征信息。
在步骤S215中,视频显示装置100访问与预定的指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第一查询。
在步骤S217中,指纹服务器22向第一查询提供作为第一应答的查询结果。如果第一应答对应于失败,则视频显示装置100访问与另一个指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第一查询。
指纹服务器22可以提供可扩展标记语言(XML)文档作为查询结果。将参照图7和表1描述包含查询结果的XML文档的例子。
图7是示出根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。
如图7中所示,包含查询结果的ACR-Resulttype包括ResultCode属性和ContentID、NTPTimestamp、SignalingChannelInformation和ServiceInformation元素。
例如,如果ResultCode属性具有200,则这可能意味着查询结果是成功的。例如,如果ResultCode属性具有404,则这可能意味着查询结果是不成功的。
SignalingChannelInformation元素包括SignalingChannelURL,并且SignalingChannelURL元素包括UpdateMode和PollingCycle属性。UpdateMode属性可以具有Pull值或Push值。
ServiceInformation元素包括ServiceName、ServiceLogo和ServiceDescription元素。
表1示出包含查询结果的ACR-Resulttype的XML架构图。
[表1]
作为ContentID元素,ATSC内容标识符可以如表2中所示地使用。
[表2]
如表2中所示,ATSC内容标识符具有包括TSID和房号的结构。
16位不带符号的整数TSID承载传输流标识符。
用当在完成广播之后可以重新使用content_id值时的那天中的小时,设置5位不带符号的整数end_of_day。
用当不可以重新使用content_id值时的天数,设置9位不带符号的整数unique_for。
content_id代表内容标识符。视频显示装置100每天在end_of_day的对应时间中将unique_for减去1,并且假定如果unique_for不是0,则content_id是唯一的。
此外,作为Contentid元素,可以如下所述地使用ATSC-M/H服务的全局服务标识符。
全局服务标识符具有下面的形式。
-urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>
这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是如<region>中定义的TSID的十进制数,并且<xsid>(区域性服务)(major>69)是“0”。<serviceid>是用<major>或<minor>定义的。<major>代表主频道号,并且<minor>代表次频道号。
全局服务标识符的例子如下。
-urn:oma:bcast:iauth:atsc:service:us:1234:5.1
-urn:oma:bcast:iauth:atsc:service:us:0:100.200
此外,作为ContentID元素,可以如下所述地使用ATSC内容标识符。
ATSC内容标识符具有下面的形式。
urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>
这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是如<region>中定义的TSID的十进制数,并且可以后面跟着“.”<serviceid>。(区域性服务)(major>69)的<xsid>是<serviceid>。<content_id>是表2中定义的content_id域的Base64符号,<unique_for>是表2中定义的unique_for域的十进制数符号,并且<end_of_day>是表2中定义的end_of_day域的十进制数符号。
下文中,再描述图6。
在步骤S219中,如果查询结果不包括增强型服务地址或增强型服务,而是包括增强型服务地址提供服务器地址,则视频显示装置100访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及关于第二查询的内容信息的至少一个可用增强型服务。随后,在步骤S221中,增强型服务信息提供服务器40将至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答提供到视频显示装置100。
在步骤S223中,如果视频显示装置100通过第一应答或第二应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后在步骤S225中,获得增强型服务。
当UpdateMode属性具有Pull值时,视频显示装置100通过SignalingChannelURL将HTTP请求发送到增强型服务提供服务器50,并且响应于请求,从增强型服务提供服务器50接收包括PSIP二进制流的HTTP应答。在这种情况下,视频显示装置100可以根据如PollingCycle属性指定的Polling时间段发送HTTP请求。另外,SignalingChannelURL元素可以具有更新时间属性。在这种情况下,视频显示装置100可以根据如更新时间属性指定的更新时间发送HTTP请求。
如果UpdateMode属性具有Push值,则视频显示装置100可以通过XMLHTTPRequestAPI从服务器异步地接收更新。在视频显示装置100通过XMLHTTPRequest对象向服务器发送异步请求之后,如果信令信息有变化,则服务器通过频道提供信令信息作为应答。如果会话等待时间有限制,则服务器生成会话超时应答并且接收器识别所生成的超时应答以再次发送请求,使得接收器和服务器之间的信令频道可以一直保持。
然后,在步骤S227中,视频显示装置100和终端装置400通过配对会话或推送通知机制执行装置之间的互通处理。装置之间的互通处理和推送通知机制将稍后描述。
在步骤S229中,终端装置400与增强型服务提供服务器500执行增强型服务互通处理。终端装置400可根据互通处理与增强型服务提供服务器500执行增强型服务互通处理。此增强型服务互通处理将稍后更详细地描述。
图8是示出根据实施方式的基于水印和指纹的网络拓扑的框图。
如图8中所示,基于水印和指纹的网络拓扑还可以包括水印服务器21和指纹服务器22。
如图8中所示,水印服务器21将内容提供商识别信息插入主AV内容中。水印服务器21可以将内容提供商识别信息作为可视水印如徽标或不可视水印插入主AV内容中。
指纹服务器22不编辑主AV内容,而是从主AV内容的一部分帧或一部分音频样本中提取特征信息并且存储所提取的特征信息。然后,当从视频显示装置100接收特征信息时,指纹服务器22提供关于与所接收的特征信息对应的AV内容的时间信息和标识符。
图9是示出根据实施方式的基于水印和指纹的网络拓扑中的数据流的梯形图。
首先,在步骤S300中,终端装置400执行互通应用。一旦执行互通应用,终端装置400就可与视频显示装置100执行互通操作。
在步骤S301中,视频显示装置100和终端装置400执行配对操作以便形成配对会话。详细的配对处理将稍后描述。
然后,在步骤S302中,视频显示装置100和终端装置400通过配对会话执行ACR控制。详细的ACR控制处理将稍后描述。
首先,在步骤S303中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在步骤S304中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容将可视水印如徽标或作为不可视水印的水印信息插入主AV内容中,并且将加水印的主AV内容和增强型服务提供到MVPD30。通过不可视水印插入的水印信息可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在步骤S305中,MVPD30接收包括加水印的主AV内容和增强型服务的广播信号并且生成复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在步骤S306中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以生成未压缩的主AV内容,然后,将所生成的未压缩的主AV内容提供到视频显示装置100。
此外,在步骤S307中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,在步骤S308中,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。视频显示装置100从所获得的主AV内容的一部分帧或一部分音频样本中提取水印信息。如果水印信息对应于徽标,则视频显示装置100确认与从多个徽标和多个水印服务器地址之间的对应关系中提取的徽标对应的水印服务器地址。当水印信息对应于徽标时,视频显示装置100不可以只通过徽标来识别主AV内容。另外,当水印信息不包括内容信息时,视频显示装置100不可以识别主AV内容,但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时,视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以此方式,在步骤S309中,当视频显示装置100不可以只通过水印信息识别视频显示装置100的主AV内容时,它访问与所获得的水印服务器对应的水印服务器21,以发送第一查询。
在步骤S311中,水印服务器21为第一查询提供第一应答。第一应答可以包括指纹服务器地址、内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在步骤S313中,如果水印信息和第一应答包括指纹服务器地址,则视频显示装置100从主AV内容的一部分帧或一部分音频样本中提取特征信息。
在步骤S315中,视频显示装置100访问与第一应答中的指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第二查询。
在步骤S317中,指纹服务器22将查询结果作为第二应答提供给第二查询。
在步骤S319中,如果查询结果不包括增强型服务地址或增强型服务,而是包括增强型服务地址提供服务器地址,则视频显示装置100访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第三查询。
增强型服务信息提供服务器40搜索涉及关于第三查询的内容信息的至少一个可用增强型服务。随后,在步骤S321中,增强型服务信息提供服务器40将至少一个可用增强型服务的增强型服务信息作为对第三查询的第三应答提供到视频显示装置100。
在步骤S323中,如果视频显示装置100通过第一应答、第二应答或第三应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后在步骤S325中,获得增强型服务。
然后,在步骤S327中,视频显示装置100和终端装置400通过配对会话或推送通知机制执行装置之间的互通处理。装置之间的互通处理和推送通知机制将稍后描述。
在步骤S329中,终端装置400与增强型服务提供服务器500执行增强型服务互通处理。终端装置400可根据互通处理与增强型服务提供服务器500执行增强型服务互通处理。此增强型服务互通处理将稍后更详细地描述。
然后,参照图10和图18,将根据实施方式描述视频显示装置100。
图10是示出根据实施方式的视频显示装置的框图。
如图10中所示,视频显示装置100包括广播信号接收单元101、解调单元103、频道解码单元105、解复用单元107、AV解码单元109、外部输入端口111、回放控制单元113、回放装置120、增强型服务管理单元130、数据发送/接收单元141和存储器150。
广播信号接收单元101通过广播网络从内容提供服务器10或MVPD30接收广播信号。
解调单元103对所接收的广播信号进行解调,以生成经解调的信号。
频道解码单元105对经解调的信号执行频道解码,以生成经频道解码数据。
解复用单元107将主AV内容和增强型服务与经频道解码数据分开。被分开的增强型服务被存储在增强型服务存储单元152中。
AV解码单元109对被分开的主AV内容执行AV解码,以生成未压缩的主AV内容。
此外,外部输入端口111从广播接收装置60、数字多功能盘(DVD)播放器、蓝光(Blu-ray)盘播放器等接收未压缩的主AV内容。外部输入端口111可以包括DSUB端口、高清晰度多媒体接口(HDMI)端口、数字视频接口(DVI)端口、复合端口、组件端口和S-视频端口中的至少一个。
回放控制单元113控制回放装置120,以根据用户的选择,回放AV解码单元109生成的未压缩的主AV内容和从外部输入端口111接收的未压缩的主AV内容中的至少一个。
回放装置120包括显示单元121和扬声器123。显示单元121可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器和3D显示器中的至少一个。
增强型服务管理单元130获得关于主AV内容的内容信息并且基于获得的内容信息获得可用的增强型服务。具体地,如上所述,增强型服务管理单元130可以基于未压缩的主AV内容的一部分帧或一部分音频样本,获得关于主AV内容的识别信息。在这个说明书中,这被称为自动内容识别(ACR)。
数据发送/接收单元141可以包括先进电视系统委员会-移动/手持(ATSC M/H)频道发送/接收单元141a、IP发送/接收单元141b和近距离通信模块141c。
ATSC-M/H频道发送/接收单元141a通过ATSC-M/H频道与其它装置通信。
IP发送/接收单元141b通过基于IP的网络与其它装置或服务器通信。
近距离通信模块141c是用于近距离通信的模块。近距离通信技术可包括WiFi、蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)和ZigBee。图像显示单元100的近距离通信模块141c与终端装置400的近距离通信模块414执行配对处理以便形成配对会话。
存储器150可以包括存储介质如闪存存储器类型、硬盘类型、多媒体卡微型、卡型存储器如SD或XD存储器、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘和光盘中的至少一种类型。视频显示装置100可以与网络存储器连接地操作,从而在互联网上执行存储器150的存储功能。
存储器150可以包括内容信息存储单元151、增强型服务存储单元152、徽标(LOGO)存储单元153、设置信息存储单元154、书签存储单元155、用户信息存储单元156和使用信息存储单元157。
内容信息存储单元151存储与多个特征信息对应的多个内容信息。
增强型服务存储单元152可以存储与多个特征信息对应的多个增强型服务或者与多个内容信息对应的多个增强型服务。
徽标存储单元153存储多个徽标。另外,徽标存储单元153还可以存储与多个徽标对应的内容提供商标识符或者与多个徽标对应的水印服务器地址。
设置信息存储单元154存储ACR的设置信息。
书签存储单元155存储多个书签。
用户信息存储单元156存储用户信息。用户信息可以包括一个或更多个服务的一个或更多个账户信息、区域性信息、家庭成员信息、偏好类别信息、视频显示装置信息和使用信息范围中的至少一个。至少一个账户信息可以包括使用信息测量服务器的账户信息和关于社交网络服务(如Twitter和Facebook)的账户信息。区域性信息可以包括地址信息和邮政区码。家庭成员信息可以包括家庭成员的数量、每个成员的年龄、每个成员的性别、每个成员的宗教信仰和每个成员的工作。可以用运动、电影、戏剧、教育、新闻、娱乐和其它类别中的至少一个设置优选类别信息。视频显示装置信息可以包括信息如类型、制造商、固件版本、分辨率、型号、OS、浏览器、存储装置可用性、存储装置容量和视频显示装置的网速。一旦设置了使用信息范围,视频显示装置100就在设置范围内收集并报告主AV内容观看信息和增强型服务使用信息。可以在每个虚拟频道中设置使用信息范围。另外,可以在整个物理频道内设置使用信息测量可容许范围。
使用信息提供单元157存储由视频显示装置100收集的主AV内容观看信息和增强型服务使用信息。另外,视频显示装置100基于收集的主AV内容观看信息和增强型服务使用信息分析服务使用模式,并且将经分析的服务使用模式存储在使用信息存储单元157中。
增强型服务管理单元130可以从指纹服务器22或内容信息存储单元151获得关于主AV内容的内容信息。如果在内容信息存储单元151中没有与所提取的特征信息对应的内容信息或者足够的内容信息,则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的内容信息。此外,增强型服务管理单元130可以连续地更新内容信息。
增强型服务管理单元130可以从增强型服务提供服务器50或增强型服务存储单元153获得可用的增强型服务。如果在增强型服务存储单元153中没有增强型服务或足够的增强型服务,则增强型服务管理单元130可以通过数据发送/接收单元141更新增强型服务。此外,增强型服务管理单元130可以连续地更新增强型服务。
增强型服务管理单元130可以从主AV内容中提取徽标,然后,可以查询徽标存储单元155,以获得与所提取的徽标对应的内容提供商标识符或水印服务器地址。如果在徽标存储单元155中没有与所提取的徽标对应的徽标或足够的徽标,则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的徽标。此外,增强型服务管理单元130可以连续地更新徽标。
增强型服务管理单元130可以通过各种方法将从主AV内容中提取的徽标与徽标存储单元155中的多个徽标进行比较。这各种方法可以减少比较运算的负荷。
例如,增强型服务管理单元130可以基于颜色特征执行比较。也就是说,增强型服务管理单元130可以将所提取的徽标的颜色特征与徽标存储单元155中的徽标的颜色特征进行比较,以判定它们是否相同。
此外,增强型服务管理单元130可以基于字符识别执行比较。也就是说,增强型服务管理单元130可以将从所提取的徽标中识别的字符与从徽标存储单元155中的徽标中识别的字符进行比较,以判定它们是否相同。
此外,增强型服务管理单元130可以基于徽标的轮廓执行比较。也就是说,增强型服务管理单元130可以将所提取的徽标的轮廓与徽标存储单元155中的徽标的轮廓进行比较,以判定它们是否相同。
下文中,参照图11和图18,将根据各种实施方式描述增强型服务管理单元130。
图11是根据实施方式的增强型服务管理单元的层次结构关系图。
如图11中所示,增强型服务管理单元130可以包括操作系统131a、音频驱动器132a、视频驱动器133a、网络驱动器134a、ACR平台应用程序接口(API)135a、至少一个ACR引擎136a、ACR守护进程137a、ACR中间件138a和至少一个ACR应用139a。
当如图11中所示地使用增强型服务管理单元130时,用户不需要一定识别频道或内容并且可以一直执行ACR操作。
增强型服务管理单元130可以通过数据发送/接收单元141访问应用存储件,以下载应用。
音频驱动器132a可以访问用于音频指纹或音频水印的音频缓冲器。
视频驱动器133a可以访问用于视频指纹或视频水印的音频缓冲器。
网络驱动器134a允许ACR引擎136a访问数据发送/接收单元141。
平台API135a提供API,以允许ACR引擎136a访问音频驱动器132a、视频驱动器133a和网络驱动器134a。
因为多个广播站或内容提供商分别使用不同的内容识别服务,所以视频显示装置100可以包括多个ACR引擎136a。也就是说,视频显示装置100可以包括多个视频水印提取算法、多个音频水印提取算法、多个视频签名提取算法和多个音频签名提取算法中的至少一个的ACR引擎。基于水印的ACR引擎136a可以提取水印信息,然后可以从所提取的水印信息中获得水印功能、内容信息、增强型服务信息和可用增强型服务中的至少一个。基于指纹的ACR引擎136a可以提取关于主AV内容的特定片段的特征信息,然后可以基于所提取的特征信息,获得内容信息、增强型服务信息和可用增强型服务中的至少一个。
ACR守护进程137a管理至少一个ACR引擎136a。连续地执行该守护进程,以处理周期性服务请求。守护进程合适地传递所收集的请求,以允许另一个程序来处理它们。ACR守护进程137a可以管理ACR引擎136a的执行和终止。ACR守护进程137a在多个ACR引擎136a之中搜索与当前的主AV内容匹配的ACR引擎。具体地,如果因为执行多个ACR引擎而使系统资源被大大消耗,则ACR守护进程137a根据特定规则或优先级逐一地顺序执行多个ACR引擎136a,以确认内容识别是否是成功的。另外,如果多个ACR引擎136a之一成功地进行内容识别,则ACR守护进程137a针对所识别内容获得并执行与增强型服务对应的ACR应用139a。虽然ACR引擎136a成功地执行内容识别,但是如果由于频道改变导致内容不再被识别,则ACR守护进程137a可以终止ACR应用139a。
ACR中间件138a用作至少一个ACR应用139a的浏览器。
ACR应用139a可以向用户提供由ACR增强的用户体验。ACR应用139a可以是从应用商店或互联网下载的应用,或者可以是统一资源定位符(URL)。ACR应用139a可以提供内容目标广告、内容提供商门户服务、节目特定服务(如电子节目指南(EPG))或内容提供商特定服务。在ACR应用139a通过ACR应用与ACR引擎136a交互时,它从ACR引擎136a接收内容信息或签名并且额外获得与内容信息或签名对应的增强型服务,以在回放装置120中回放它们。为此,在以下的表3中示出ACR应用139a使用的ACR应用程序接口。
[表3]
图12是示出根据实施方式的增强型服务管理单元的操作的流程图。
在步骤S401中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR守护进程137a通过至少一个ACR引擎136a获得关于经调谐频道中广播的主AV内容的内容信息。
然后,在步骤S403中,ACR守护进程137a获得涉及内容信息的可用增强型服务。
在步骤S405中,ACR守护进程137a执行在后台获得的增强型服务。
在步骤S407中,ACR守护进程137a在显示单元121上显示颜色按钮,以通知用户,增强型服务是可用的。
在步骤S409中,当ACR守护进程137a接收增强型服务的使用时,它在回放装置120中在后台播放执行的增强型服务。
在步骤S411中,如果改变或主AV内容发生改变,则ACR守护进程137a通过至少一个ACR引擎136a识别改变并且终止增强型服务。
图13是根据实施方式的增强型服务管理单元的层次结构关系图。
如图13中所示,增强型服务管理单元130可以包括操作系统131b、音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台应用程序接口(API)135b、至少一个ACR引擎136b、ACR引擎管理单元137b、ACR中间件138b和至少一个ACR应用139b。
当如图13中所示地使用增强型服务管理单元130时,用户可能需要一定识别频道或内容。然而,因为对ACR的查询的次数减少,所以服务器耗费可能降低。
图13的增强型服务管理单元130中的音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台API135b、至少一个ACR引擎136b和ACR中间件138b与图11的增强型服务管理单元130中的那些132a、133a、134a、135a、136a和138a相同或类似。因此,将省略对其的详细描述。
ACR引擎管理单元137b管理至少一个ACR引擎136b的列表并且将ACR引擎136b的选择接口提供给ACR应用139b。
ACR应用139b可以为用户提供由ACR增强的用户体验。ACR应用139b可以是从应用商店或互联网下载的应用,或者可以是简单的统一资源定位符(URL)。ACR应用139b可以提供内容目标广告、内容提供商门户服务、节目特定服务(如电子节目指南(EPG))或内容提供商特定服务。
在ACR应用139b通过ACR中间件138b的ACR应用接口与ACR引擎管理单元137b交互时,它可以选择所要使用的ACR引擎136b。为此,在以下的表4和表5中示出ACR应用139b使用的ACR应用程序接口。
[表4]
[表5]
当ACR应用139b通过ACR中间件138b的ACR应用程序接口与ACR引擎136b交互时,它控制ACR引擎136b,并且从ACR引擎136b接收内容信息或签名,以额外获得与内容信息或签名对应的增强型服务。然后,ACR应用139b在回放装置120中播放它们。为此,在以下的表6中示出ACR应用139b使用的ACR应用程序接口。
[表6]
因此,在表7中示出使用这种ACR应用程序接口的内容提供商相关应用的指纹样本代码的一个例子。
[表7]
因此,在表8中示出使用这种ACR应用程序接口的内容提供商相关应用的指纹样本代码的一个例子。
[表8]
因此,在表9中示出使用这种ACR应用程序接口的内容提供商相关应用的加水印样本代码的一个例子。
[表9]
因此,在表10中示出使用这种ACR应用程序接口的内容提供商相关应用的加水印样本代码的一个例子。
[表10]
图14是示出根据实施方式的增强型服务管理单元的操作的流程图。
尽管广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111,但是视频显示装置100可以在执行ACR应用139b之前不执行自动内容识别。
在步骤S501中,一旦识别主AV内容的频道的用户执行对应的频道相关ACR应用139b,ACR应用139b向ACR引擎管理单元137b查询与ACR应用139b使用的ACR引擎136b相关的信息并且接收它。
然后,ACR应用139b在步骤S503中启动它使用的ACR引擎136b并且在步骤S505中通过ACR引擎136b获得内容信息。
ACR应用139b在步骤S507中通过获得的内容信息获得涉及主AV内容的可用增强型服务,并且在步骤S509中在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在步骤S511中,当ACR应用139b接收增强型服务的使用时,它在回放装置120中播放增强型服务。
在步骤S513中,当ACR中间件138b接收涉及终止ACR应用139b的用户输入时,它终止ACR应用139b。
图15是根据实施方式的增强型服务管理单元的层次结构关系图。
如图15中所示,增强型服务管理单元130可以包括操作系统131c、音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c、ACR引擎136c、ACR中间件138c和至少一个ACR应用139c。
当如图15中所示地使用增强型服务管理单元130时,用户可能需要一定识别频道或内容。然而,因为对ACR的查询的数量可能减少,所以服务器消耗可能减少。
图15的增强型服务管理单元130中的音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c和ACR中间件138c与图11的增强型服务管理单元130中的那些132a、133a、134a、135a和138a相同或类似。因此,将省略对其的详细描述。
ACR引擎136c从主AV内容的一部分帧或一部分音频样本中提取特征信息,以向ACR调节服务器(未示出)发送包括所提取的特征信息的查询。ACR调节服务器可以响应于查询发送指纹服务器地址。另外,ACR调节服务器可以发送与特征信息对应的内容信息连同指纹服务器地址。
当从ACR引擎136c接收指纹服务器地址时,ACR应用139c向与指纹服务器地址对应的指纹服务器发送包括ACR引擎136c所提取的特征信息的查询。为此,在以下的表11中示出ACR应用139c使用的ACR应用程序接口。
[表11]
因此,在表12中示出使用这种ACR应用程序接口的指纹样本代码的一个例子。[表12]
图16是示出根据实施方式的增强型服务管理单元的操作的流程图。
在步骤S601中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR引擎136c从主AV内容的一部分帧或一部分音频样本中提取特征信息,以向ACR调节服务器(未示出)发送包括所提取的特征信息的查询。
在步骤S603中,ACR引擎136c接收响应于查询的指纹服务器地址。
ACR应用139c通过getACRBackend()方法从ACR引擎136c获得指纹服务器地址。
在步骤S607中,ACR应用139c通过getSignature()方法从ACR引擎136c获得关于主AV内容的特定视频帧片段或特定音频片段的特征信息。
在步骤S609中,ACR应用139c向与所获得的指纹服务器地址对应的指纹服务器发送包括所获得的特征信息的查询。
在步骤S611中,ACR应用139c接收响应于查询的内容信息。
ACR应用139c在步骤S613中基于所获得的内容信息获得可用增强型服务,并且在步骤S615中在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在步骤S617中,当ACR应用139c接收增强型服务的使用时,它在回放装置120中播放增强型服务。
在步骤S619中,当ACR中间件138c接收涉及终止ACR应用139c的用户输入时,它终止ACR应用139c。
图17是根据实施方式的增强型服务管理单元的层次结构关系图。
如图17中所示,增强型服务管理单元130可以包括操作系统131d、音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d、至少一个ACR引擎136d、ACR引擎管理单元137d、应用管理单元138d和至少一个ACR应用139d。
当如图17中所示地使用增强型服务管理单元130时,用户不需要一定识别频道或内容,并且可以一直执行ACR操作。
图17的增强型服务管理单元130中的音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d和多个ACR引擎与图11的增强型服务管理单元130中的那些132a、133a、134a、135a和136a相同或类似。因此,将省略对其的详细描述。
ACR引擎管理单元137d确认ACR引擎136d与从外部输入端口111接收的主AV内容匹配并且确认ACR引擎136d与应用139d匹配。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。如果多个ACR引擎136d之一成功识别主AV内容,则ACR引擎管理单元137d将其余ACR引擎置于休眠模式,并且从正在工作的ACR引擎获得关于主AV内容的内容信息。
当应用管理单元138d与ACR引擎管理单元137d交互时,它控制ACR应用的生成、开始、停止、休眠和终止。
ACR应用139d可以是内置的应用。ACR应用139d可以通过表13中示出的函数控制ACR引擎136b。
[表13]
图18是示出根据实施方式的增强型服务管理单元的操作的流程图。
在步骤S701中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR引擎管理单元137d确认ACR引擎136a与从外部输入端口111接收的主AV内容匹配。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。
如果多个ACR引擎136d之一成功识别主AV内容,则ACR引擎管理单元137d在步骤S702中将其余ACR引擎置于休眠模式,并且在步骤S703中从正在工作的ACR引擎获得关于主AV内容的内容信息。
然后,ACR引擎管理单元137d在步骤S704中确认涉及内容信息的可用应用,并且请求应用管理单元138d执行经确认的应用139d。
在步骤S705中,应用管理单元138d在后台执行经确认的应用139d。
在步骤S707中,在后台执行的应用139d在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在步骤S709中,当在后台执行的应用139d从用户接收增强型服务的使用时,它在回放装置120中播放增强型服务。
如果在步骤S710中频道或主AV内容被改变,则ACR引擎管理单元137d在步骤S711中确认与应用139d匹配的ACR引擎136a并且将经确认的ACR引擎136a连接到应用139d。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。
如果应用管理单元138d在步骤S712中接收用于终止应用139d的用户输入,则它在步骤S713中终止应用139d。
然后,参照图19和图20,将描述根据实施方式的将主AV内容的回放时间与增强型服务的回放时间同步的方法。
图19是示出根据实施方式的将主AV内容的回放时间与增强型服务的回放时间同步的方法的流程图。
增强型服务信息可以包括增强型服务的开始时间。此时,视频显示装置100可能需要在开始时间开始增强型服务。然而,因为视频显示装置100在没有时间戳的情况下接收发送未压缩的主AV内容的信号,所以主AV内容的播放时间的参考时间与增强型服务的开始时间的参考时间不同。尽管视频显示装置100接收具有时间信息的主AV内容,但是主AV内容的播放时间的参考时间可以与增强型服务的开始时间的参考时间不同,如同重新广播一样。因此,视频显示装置100可能需要将主AV内容的参考时间与增强型服务的参考时间同步。具体地,视频显示装置100可能需要将主AV内容的回放时间与增强型服务的开始时间同步。
首先,在步骤S801中,增强型服务管理单元130提取主AV内容的片段。主AV内容的该片段可以包括主AV内容的一部分视频帧或一部分音频样本中的至少一个。增强型服务管理单元130提取主AV内容的该片段的时间被指定为Tn。
增强型服务管理单元130基于所提取的片段获得关于主AV内容的内容信息。更详细地,增强型服务管理单元130对所提取的片段中的用不可视水印编码的信息进行解码,以获得内容信息。另外,增强型服务管理单元130可以提取所提取的片段中的特征信息,并且基于所提取的特征信息,从指纹服务器22或内容信息存储单元151获得关于主AV内容的内容信息。增强型服务管理单元130获得内容信息的时间被指定为Tm。
此外,内容信息包括所提取的片段的开始时间Ts。在内容信息获取时间Tm之后,增强型服务管理单元130基于Ts、Tm和Tn将主AV内容的回放时间与增强型服务的开始时间同步。更详细地,增强型服务管理单元130将内容信息获取时间Tm视为通过以下的等式1计算出的时间Tp。
[等式1]
Tp=Ts+(Tm-Tn)
另外,增强型服务管理单元130将内容信息获取时间之后过去的Tx的时间视为Tp+Tx。
然后,在步骤S807中,增强型服务管理单元130在所获得的内容信息中获得增强型服务和其开始时间Ta。
在步骤S809中,如果被同步的主AV内容的回放时间与增强型服务的开始时间Ta相同,则增强型服务管理单元130开始所获得的增强型服务。更详细地,当满足以下的等式2时,增强型服务管理单元130可以开始增强型服务。
[等式2]
Tp+Tx=Ta
图20是示出根据实施方式的将主AV内容的回放时间与增强型服务的回放时间同步的方法的概念图。
如图20中所示,视频显示装置100在系统时间Tn期间提取AV样本。
视频显示装置100从所提取的AV样本中提取特征信息,并且将包括所提取的特征信息的查询发送到指纹服务器22,以接收查询结果。视频显示装置100通过解析查询结果,确认所提取的AV样本的开始时间Ts是否对应于11000ms的Tm。
因此,视频显示装置100将根据等式1确认的所提取的AV样本的开始时间的时间视为Ts+(Tm-Tn),使得,在此之后,主AV内容的回放时间可以与增强型服务的开始时间同步。
接着,将参照图21至图50根据各种实施方式描述ACR应用。
ACR应用可以包括自动播放应用、内容提供商应用和图像显示制造商应用。
图21是根据实施方式的当执行自动播放应用时的画面。
自动播放应用自动地播放增强型服务,即使是在用户没有采取动作时。从这个意义上讲,在本说明书中,自动播放应用被指定为后靠型应用(lean back application)。
在没有用户输入的情况下,自动播放应用根据主AV内容的回放时间自动地播放增强型服务,如内容提供商或广播站在主AV内容的播放期间提供的场景相关信息。也就是说,内容提供商或广播站完全控制自动播放应用。
如图21中所示,一旦执行自动播放应用,画面200就可以包括播放减少的主AV内容的子画面210和其中显示增强信息的子画面220。其中显示增强信息的子画面200可以在空间上与其中播放主AV内容的子画面210分开。
此外,当执行自动播放应用时,其中显示增强信息的区域可以是半透明的。在这种情况下,其中显示增强信息的区域可以与其中播放主AV内容的区域重叠。
图22是根据实施方式的当执行内容提供商应用时的画面。
在本说明书中,内容提供商应用被指定为完全交互式应用。
如图22(A)中所示,视频显示装置100下载并存储多个应用。图22(A)示出应用的图标230。多个应用之中的内容提供商应用是由内容提供商创建并分发的应用,因此,可以处于内容提供商的控制下。
视频显示装置100的用户可以从应用商店下载内容提供商应用并且判定是否要执行所下载的内容提供商应用。
图22(B)是当执行内容提供商应用时的画面。如图22(B)中所示,画面200可以包括其中播放减少的主AV内容的子画面210和其中显示增强信息的子画面220。
下文中,将参照图23至图50根据实施方式描述视频显示装置制造商应用。
视频显示装置制造商应用是由视频显示装置制造商创建并控制的,并且当制造视频显示装置100时可以预先被存储。也就是说,视频显示装置制造商应用可以提供相同的服务和用户界面,而不管内容提供商或内容为何。
视频显示装置制造商应用可以单独包括其中显示内容提供商提供的增强型服务的区域和其中显示视频显示装置制造商提供的增强型服务的区域。视频显示装置100的用户可以判定是否要执行视频显示装置制造商应用。
视频显示装置制造商应用可以具有两种类型。
第一种类型的视频显示装置制造商应用具有缩放用户界面。具有缩放用户界面的视频显示装置制造商应用减小其中显示主AV内容的区域的尺寸,以在减小的区域中显示所有主AV内容。另外,具有缩放用户界面的视频显示装置制造商应用重新确定其中显示应用的区域的形状,使其具有L或倒L形的结构。
第二种类型的视频显示装置制造商应用具有重叠的用户界面。具有重叠的用户界面的视频显示装置制造商应用保持其中显示主AV内容的区域的尺寸,并且将其中显示应用的区域重叠在主AV内容上。因为其中显示应用的区域覆盖主AV内容,所以应用区域可以是半透明的。
图23是根据实施方式的当执行具有缩放用户界面的视频显示装置制造商应用时的画面。
如图23中所示,当执行具有缩放用户界面的视频显示装置制造商应用时的画面300包括:主内容区310,其中显示主AV内容;主菜单区320,其中显示主菜单;通知区330,其中显示通知消息;控制按钮区340,其中显示用于控制视频显示装置制造商应用的控制按钮;子菜单区350,其中显示子菜单;增强信息区360,其中显示增强信息;和广告区370,其中显示广告。
控制按钮区340包括:结束按钮341,其用于结束视频显示装置制造商应用;隐藏按钮342,其用于隐藏视频显示装置制造商应用;和返回按钮343,其用于返回之前的信息。
在具有缩放用户界面的视频显示装置制造商应用中,主AV内容区310位于画面300的左上部;主菜单区320和通知区330位于主AV内容区310的下部;控制按钮区340位于左上部;子菜单区350位于控制按钮区340和增强信息区360之间;广告区370位于右下部;并且增强信息区360位于子菜单区350和广告区370之间。然而,它们的位置可能发生变化。
图24是根据实施方式的当执行具有重叠的用户界面的视频显示装置制造商应用时的画面。
如图24中所示,如同具有缩放用户界面的视频显示装置制造商应用一样,当执行具有重叠的用户界面的视频显示装置制造商应用时的画面300包括:主内容区310,其中显示主AV内容;主菜单区320,其中显示主菜单;通知区330,其中显示通知消息;控制按钮区340,其中显示用于控制视频显示装置制造商应用的控制按钮;子菜单区350,其中显示子菜单;增强信息区360,其中显示增强信息;和广告区370,其中显示广告。
在具有重叠的用户界面的视频显示装置制造商应用中,主AV内容区310位于画面300的左上部;主菜单区320和通知区330位于主AV内容区310的下部;控制按钮区340位于左上部;子菜单区350位于控制按钮区340和增强信息区360之间;广告区370位于右下部;并且增强信息区360位于子菜单区350和广告区370之间。然而,它们的位置可能发生变化。
下文中,将主要描述具有缩放用户界面的视频显示装置制造商应用。
视频显示装置制造商应用从内置于视频显示装置100内的ACR引擎接收必要信息并且很大程度上根据其符号具有两种类型的菜单。
第一种类型的菜单是针对时间不敏感增强型服务。也就是说,当选择涉及时间不敏感增强型服务的菜单时,视频显示装置100获得当前在画面上播放的主AV内容的标识符,基于所获得的标识符获得增强型服务,并且在增强信息区360上显示所获得的增强型服务。这种时间不敏感增强型服务的例子包括标题、类别、演员、导演和其它人的评价、短剪辑和短说明。通过这种基础信息,视频显示装置100可以与社交网络服务如Facebook和Twitter连接以搜索增强信息,或者提供经推荐的服务和相关的广告。
第二种类型的菜单是针对时间敏感增强型服务。也就是说,当选择涉及时间敏感增强型服务的菜单时,视频显示装置100获得关于当前在画面上播放的主AV内容的标识符和回放时间信息,基于所获得的标识符和回放时间信息获得时间敏感增强型服务,并且在增强信息区360上显示所获得的增强型服务。
视频显示装置制造商应用的主菜单包括节目菜单、信息菜单、社交菜单、推荐菜单和目录菜单。在这些菜单之中,时间不敏感菜单包括信息菜单、社交菜单、推荐菜单和目录菜单,并且时间敏感菜单包括节目菜单。如果选择时间不敏感菜单,则可以调用时间敏感应用。除了这五个主菜单之外,可以添加其它的主菜单。如果选择各个主菜单,则在子菜单区350上显示所选择主菜单的子菜单。
图25是示出根据实施方式的执行视频显示装置制造商应用的方法的流程图。
当在步骤S901中通过压下遥控器的特定键接收与应用选择菜单显示对应的用户输入,将运动遥控器朝向下方向晃动,在播放主AV内容的同时将运动遥控器的光标在画面的底部方向上缩放时,在步骤S903中,视频显示装置100显示图26的应用选择菜单。
图26是根据实施方式的当显示应用选择菜单时的画面。
如图26中所示,应用选择菜单380位于画面300的底部。应用选择菜单380可以是半透明的。
应用选择菜单380包括安装在视频显示装置100中的多个应用的执行图标。所显示的执行图标中的一个图标对应于视频显示装置制造商应用的执行图标。
当在步骤S905中通过操纵遥控器中的左箭头键和右箭头键或者根据运动遥控器的移动移动光标来接收与视频显示装置制造商应用的图标选择对应的用户输入时,在步骤S907中,视频显示装置100执行视频显示装置制造商应用。通过这个步骤,如果用户想的话,他/她可以立即执行应用,而不用在观看主AV内容的同时访问应用商店。
一旦执行视频显示装置制造商应用,就显示其主菜单。如果默认选择的是节目菜单,则在子菜单区350上显示其子菜单。在节目菜单的子菜单之中,默认选择的是全部子菜单。注意力放在全部子菜单上。随着时间流逝,自动地更新显示在增强信息区360上的增强型服务。<-按钮用于返回到前一菜单并且X按钮用于在关闭视频显示装置制造商应用之后返回到整个画面。
然后,将参照图27至图29根据实施方式描述视频显示装置制造商应用。
节目主菜单是用于在增强信息区360上显示应用的菜单,该菜单与正在播放的主AV内容在时间上相关。可以由内容拥有者如TV广播商提供显示与主AV内容相链接的应用的增强型服务信息。视频显示装置100分析增强型服务信息,以按正确时序在增强信息区360中显示对应的应用。画面中的UI在以下的图中示出。
节目菜单包括全部子菜单、参与子菜单和发现子菜单。
全部子菜单是用于在增强信息区360上显示涉及参与子菜单和发现子菜单的全部应用的菜单。参与子菜单是用于在节目中显示引导节目参与(如投票)的应用的菜单。发现子菜单是用于显示应用如场景相关信息的菜单。可以根据内容拥有者想要的应用的内容,添加或编辑节目菜单的子菜单。
图27是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的全部子菜单时的画面。
当选择全部子菜单即节目主菜单的第一子菜单时,视频显示装置100显示涉及参与子菜单的全部应用并且在增强信息区360上显示子菜单。
当选择全部子菜单时,视频显示装置100在增强信息区360上显示与特定时间同步的应用或事件。如果不存在与特定时间同步的应用,则视频显示装置100可以保留增强信息区350为空的空间。然而,因为空的空间没有刺激与用户的额外互动,所以如果没有与特定时间同步的应用,则视频显示装置100可以收集在现在之前出现的应用或事件以显示历史。
当用户进入视频显示装置制造商应用时,可以看到,用户可以在观看主AV内容的同时意图执行涉及主AV内容的交互式应用。在操纵多个菜单的同时,用户在特定时间可能没有观看到事件。具体地,当用户操纵菜单寻求时间不敏感增强型服务时,可能会出现以上情况。因此,在进入视频显示装置制造商应用之后,如果在操纵期间出现时间敏感事件,则视频显示装置100在通知区330上显示针对此的通知消息,以通知用户广播站在当前时间广播了特定事件。
当用户通过视频显示装置制造商应用确认音乐信息或地点信息时,出现时间链接应用,视频显示装置100在通知区330上显示通知消息。当接收与按压“转到(Go To)”按钮对应的用户输入时,视频显示装置100进入涉及出现时间链接应用的子菜单并且在增强信息区360上显示出现时间链接应用。通知消息可以是文本消息。另外,视频显示装置100可以用数字显示所传递的应用的数量。可以用Push方法将通知消息传递给观众。
图28是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的参与子菜单时的画面。
如图28中所示,一旦选择参与子菜单,视频显示装置100就在增强信息区360上显示引导观众参与(如投票)的应用。如果出现观众参与应用,则视频显示装置100将其在增强信息区360上显示。如果观众参与应用正进行投票,则视频显示装置100可以显示投票问题和投票结果。此外,视频显示装置100显示当前事件并且为了观众的方便起见,还在当前事件的底部显示观众参与的前一个事件。
图29是根据实施方式的当选择视频显示装置制造商应用中的节目主菜单的发现子菜单时的画面。
如图29中所示,一旦选择发现子菜单,视频显示装置100就在增强信息区360上除了观众参与应用之外还显示所有时间链接应用。例如,视频显示装置100在主AV内容中示出的产品或地点显示场景相关信息。视频显示装置100可以同时显示当前的场景相关信息和前一个场景相关信息。
此外,视频显示装置100可以显示通知消息,通知在子菜单上存在时间链接应用或事件。例如,如果出现观众参与应用,则视频显示装置100在参与子菜单上显示具有闪烁N的图标以引导观众参与。如果用户在预定时间内没有响应于该通知,则视频显示装置100可以去除该通知。
下文中,将参照图30至图36根据实施方式描述视频显示装置制造商应用的信息主菜单。
信息主菜单对应于时间敏感区。如同节目主菜单的UI一样,信息主菜单没有以应用自动显示并且在特定时间消失的UI方式进行操作。当然,尽管可以通过这个菜单显示上述时间链接应用,但是当选择除了节目主菜单之外的主菜单时,可以链接第二服务如搜索服务或Twitter服务。
信息主菜单包括搜索子菜单、Twitter子菜单和新闻子菜单。
然后,将参照图30至图32根据实施方式描述视频显示装置制造商应用中的信息主菜单的搜索子菜单。
图30是示出根据实施方式的搜索方法的流程图。
视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1002中选择视频显示装置制造商应用中的信息主菜单的搜索子菜单,在步骤S1003中,视频显示装置100就基于所获得的内容信息获得包括与增强型服务对应的多个搜索项的搜索列表。搜索列表包括类别、演员、导演、地点和产品中的至少一个。
在步骤S1007中,视频显示装置100在增强信息区360上显示搜索列表。将参照图30描述搜索列表的显示例子。
图31是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的搜索子菜单时的画面。
如图31中所示,搜索列表包括主AV内容的符号。视频显示装置100可以在增强信息区360上显示搜索项的图片或名字中的至少一个。
当在步骤S1009中通过遥控器的光标选择多个搜索项中的一个时,在步骤S1011中视频显示装置100搜索关于所选的搜索项的信息。此时,视频显示装置100可以使用互联网搜索引擎如Google。此外,视频显示装置100可以使用信息如Tribune媒体或IMDb。
在步骤S1013中,视频显示装置100显示搜索到的关于增强信息区360的信息。因为搜索到的结果是通过服务提供商的编程(如Open API)自动获取的,所以可以大大节省画面设计的时间。将参照图32描述搜索信息的显示例子。
图32是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的搜索子菜单时的另一个画面。
如图32中所示,视频显示装置100在增强信息区360上显示针对所选择的搜索项的搜索结果。此外,视频显示装置在增强信息区360上设置Twitter按钮和编辑按钮,以关注演员的Twitter或者编辑演员的简档如全部影片目录或传记。
像这样,如果使用根据实施方式的搜索方法,则可以通过一次点击搜索涉及主AV数据的信息,使得可以不那么费力地输入搜索词。
接着,将参照图33至图34根据实施方式描述视频显示装置制造商应用中的信息主菜单的Twitter子菜单。
图33是示出根据实施方式的聊天窗口显示方法的流程图。
在步骤S1101中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1102中选择视频显示装置制造商应用中的信息主菜单的Twitter子菜单,在步骤S1103中视频显示装置100就基于所获得的内容信息获得与增强型服务对应的Twitter聊天列表。视频显示装置100在Twitter的Hashtag上写上节目名字,以下载涉及该节目的Twitter聊天列表。这个聊天列表链接到Twitter并且实时地持续更新。
在步骤S1107中,视频显示装置100通过用户选择或者自动地在增强信息区360上显示Twitter聊天列表中的一个聊天窗口。将参照图34描述聊天窗口的显示例子。
图34是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的Twitter子菜单时的画面。
如图34中所示,视频显示装置100在增强信息区360上显示聊天窗口,以支持观看同一节目的观众之间进行聊天。
当广播节目时,该节目的用户可以实际上直接在聊天室中写消息。如果视频显示装置100具有如同智能TV一样的登录机制,则视频显示装置100的用户可以在进入菜单时立即在他自己的ID处于登录状态的情况下开始聊天。如果不方便通过遥控器对视频显示装置100进行输入,则视频显示装置100可以只显示聊天消息。如果视频显示装置100链接到第二装置如智能电话或平板电脑,则可以使用第二装置的输入装置键入消息。尽管Hashtag中的信息基本上是节目名字,但是它可以被选择作为演员或导演的标记,即,上述其它基本信息,使得可以用户可以选择性地参与对应主题的聊天。
接着,将参照图35至图36根据实施方式描述视频显示装置制造商应用中的信息主菜单的新闻子菜单。
图35是示出根据实施方式的新闻获得方法的流程图。
在步骤S1201中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1202中选择视频显示装置制造商应用中的信息主菜单的新闻子菜单,在步骤S1203中视频显示装置100就基于所获得的内容信息获得与增强型服务对应的新闻。此时,新闻可以涉及或者可以不涉及主AV内容。或者,新闻可以由主AV内容的广播商提供。如果广播商没有通过Open API提供新闻,则视频显示装置100可以通过互联网服务如Google或Yahoo的新闻馈送接收新闻。
在步骤S1207中,视频显示装置100在增强信息区360上显示所获得的新闻。将参照图36描述新闻的显示例子。
图36是根据实施方式的当选择视频显示装置制造商应用中的信息主菜单的新闻子菜单时的画面。
如图36中所示,视频显示装置100可以在增强信息区360上显示所获得的新闻。
下文中,将参照图37至图42根据实施方式描述视频显示装置制造商应用的社交主菜单。
社交主菜单对应于时间不敏感区。如同节目主菜单的UI一样,社交主菜单没有以应用自动显示并且在特定时间消失的UI方式进行操作。当然,尽管可以通过这个菜单显示上述时间链接应用,但是当选择除了节目主菜单之外的主菜单时,可以链接第二服务如Facebook。
社交主菜单包括观众列表子菜单和偏好显示子菜单。
然后,将参照图37至图40根据实施方式描述视频显示装置制造商应用中的社交主菜单的观众列表子菜单。
图37是示出根据实施方式的观众列表显示方法的流程图。
在步骤S1301中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1302中选择视频显示装置制造商应用中的社交主菜单的观众列表子菜单,在步骤S1303中视频显示装置100就基于所获得的内容信息获得与朋友列表以及每个朋友是否观看主AV内容有关的信息。视频显示装置100可以与社交网络服务如Facebook链接,以获得观看主AV内容的朋友的列表。
在步骤S1307中,视频显示装置100在增强信息区360上显示所获得的观众列表。将参照图38描述观众列表的显示例子。
图38是根据实施方式的当选择视频显示装置制造商应用中的社交主菜单的观众列表子菜单时的画面。
如图38中所示,视频显示装置100可以在增强信息区360上显示与所获得的观众列表对应的观众的照片和名字。
具体地,视频显示装置100可以显示朋友列表连同每个朋友是否观看内容或者可以只显示当前观看内容的朋友的列表。
当在步骤S1309中从所显示的朋友中选择一个朋友时,在步骤S1311中视频显示装置100确认所选择的朋友是否匹配主AV内容。
如果所选择的朋友观看主AV内容,则在步骤S1313中视频显示装置100在增强信息区360上显示所选择朋友的的聊天窗口。
另外,如果所选择的朋友没有观看主AV内容,则在步骤S1315中视频显示装置100将推荐观看主AV内容的消息发送到所选择朋友的电子邮件或移动电话。即使所选择的朋友没有观看主AV内容,视频显示装置100也可以在增强信息区360上显示所选择朋友的聊天窗口。
为了聊天,用户可以使用视频显示装置100的遥控器或者与视频显示装置100连接的第二装置的输入装置,并且可以通过智能电话的社交网络服务应用与朋友聊天,而不管视频显示装置100如何。在任一种情况下,社交网络服务的聊天画面可以在视频显示装置100的画面上显示。通过评价节目的按钮,用户可以将他/她的意图发送给朋友。例如,用户可以通知朋友他/她当前观看主AV内容并且可以通过“好(good)”按钮推荐没有观看主AV内容的朋友观看该主AV内容。
像这样,视频显示装置100通过观众列表子菜单使用ACR技术自动地识别谁正在观看什么节目。为了确认谁正在观看哪个节目,用户需要登录。一旦登录账号在视频显示装置100中注册,每当视频显示装置100启动时,用户就可以自动地登录。因此,视频显示装置100识别谁正在观看主AV内容。
图39是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
如图39中所示,如果朋友A的视频显示装置播放主AV内容A,则在步骤S1401中它将主AV内容A的标识符和朋友A的标识符发送到SNS提供服务器75。
另外,如果朋友B的视频显示装置播放主AV内容A,则在步骤S1403中它将主AV内容A的标识符和朋友B的标识符发送到SNS提供服务器75。
如果视频显示装置100播放主AV内容A,则在步骤S1405中它将用户ID和主AV内容A的标识符发送到SNS提供服务器75。
在步骤S1407中,SNS提供服务器75基于朋友关系信息和接收到的内容标识符,确认与视频显示装置100的朋友列表和每个朋友是否观看主AV内容有关的信息。
图40是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
如图40中所示,如果朋友A的视频显示装置播放主AV内容A,则在步骤S1501中它将朋友A的标识符发送到SNS提供服务器75并且在步骤S1503中将主AV内容A发送到ACR服务器。ACR服务器77可以是水印服务器21、指纹服务器22、增强型服务信息提供服务器40和增强型服务提供服务器50中的一个。
另外,如果朋友B的视频显示装置播放主AV内容A,则在步骤S1505中它将朋友B的标识符发送到SNS提供服务器75,并且在步骤S1507中将主AV内容A发送到ACR服务器77。
在步骤1509中,视频显示装置100将用户ID发送到SNS提供服务器75。
然后,在步骤S1511中,SNS提供服务器75将与用户ID对应的朋友列表提供到ACR服务器75。
此外,如果视频显示装置100播放主AV内容A,则在步骤S1513中它将用户ID和主AV内容A的标识符发送到ACR服务器75。
在步骤S1515中,ACR服务器75基于与用户ID和内容标识符对应的朋友列表,确认与视频显示装置100的朋友列表和每个朋友是否观看主AV内容有关的信息,然后将确认的信息提供到视频显示装置100。
然后,将参照图41至图42根据实施方式描述视频显示装置制造商应用中的社交主菜单的偏好显示子菜单。
图41是示出根据实施方式的偏好显示方法的流程图。
在步骤S1601中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1602中选择视频显示装置制造商应用中的社交主菜单的偏好显示子菜单,在步骤S1603中视频显示装置100就基于所获得的内容信息获得包括多个偏好显示项的偏好显示列表。这里,偏好显示项可以包括预览或预览地址。预览可以是图像或短视频。预览可以直接由广播商通过Open API提供,或者可以通过互联网服务的搜索引擎获得,或者通过只从广播商的互联网服务器提取必要部分而获得。可以提供与对应于几分钟的时间间隔的重要场景对应的图像或者可以提供一个节目的一个图像。
在步骤S1607中,视频显示装置100在增强信息区360上显示获得的偏好显示列表。将参照图42描述观众列表的显示例子。
图42是根据实施方式的当选择视频显示装置制造商应用中的社交主菜单的偏好显示子菜单时的画面。
如图42中所示,视频显示装置100可以在偏好显示列表中显示预览并且在增强信息区360上显示用于偏好显示的“喜欢它”按钮。
一旦在步骤S1609中选择与一个偏好显示项对应的“喜欢它”按钮,在步骤S1611中视频显示装置100就将与所选择的偏好显示项对应的预览和简单文本张贴在SNS如Facebook上。这里,简单文本可以是自动生成的,或者可以是通过遥控器或第二装置的输入装置输入的。
下文中,将参照图43至图46根据实施方式描述视频显示装置制造商应用的推荐主菜单。
推荐主菜单对应于时间不敏感区。如同节目主菜单的UI一样,推荐主菜单没有以应用自动显示并且在特定时间消失的UI方式进行操作。当然,通过这个菜单,可以显示上述时间链接应用,但是如果选择了推荐菜单,则可以链接另一个服务。
推荐主菜单可以包括前一剧集子菜单、VOD子菜单和应用子菜单。
图43是示出根据实施方式的数字媒体下载方法的流程图。
在步骤S1701中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1702中选择视频显示装置制造商应用中的推荐主菜单,在步骤S1703中视频显示装置制造商应用就基于所获得的内容信息获得数字媒体列表。如果选择前一剧集子菜单,则视频显示装置100获得前一剧集列表。如果选择VOD子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的VOD列表。如果选择应用子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的VOD列表。这里,数字媒体列表可以包括预览、预览地址和图标相关图像。
在步骤S1707中,视频显示装置制造商应用在增强信息区360上显示所获得的数字媒体列表。
参照图44描述前一剧集列表的例子。
图44是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的前一剧集子菜单时的画面。
如图44中所示,视频显示装置100在增强信息区360上显示前一剧集列表的预览和标题。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示前一剧集。
将参照图45描述VOD列表的显示例子。
图45是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的VOD子菜单时的画面。
如图45中所示,视频显示装置100在增强信息区360上显示VOD列表的预览和标题。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的VOD。
将参照图46描述应用列表的显示例子。
图46是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的应用子菜单时的画面。
如图46中所示,视频显示装置100在增强信息区360上显示应用列表的图标和应用名称。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的应用。
一旦在步骤S1709中从数字媒体列表中选择一项,在步骤S1711中视频显示装置制造商应用就下载与所选择项对应的数字媒体。此时,视频显示装置100可以在支付之后下载数字媒体。如果所选项是前一剧集或VOD,则视频显示装置100可以回放所下载的数字媒体。如果所选项是应用,则视频显示装置可以自动回放所下载的应用或者可以通过用户的选择回放它。
像这样,根据实施方式,视频显示装置可以通过简单操纵下载数字媒体。
下文中,将参照图47至图50根据实施方式描述视频显示装置制造商应用的目录主菜单。
目录主菜单对应于时间不敏感区。如同节目主菜单的UI一样,目录主菜单没有以应用自动显示并且在特定时间消失的UI方式进行操作。当然,通过这个菜单,可以显示上述时间链接应用,但是如果选择了目录菜单,则可以链接另一个服务。
目录主菜单可以包括风格子菜单、音乐主菜单和其它子菜单。
图47是示出根据实施方式的目录显示方法的流程图。
在步骤S1801中,视频显示装置100提取主AV内容的特定片段并且基于所提取的片段获得内容信息。
一旦在步骤S1802中选择视频显示装置制造商应用中的目录主菜单,在步骤S1803中视频显示装置制造商应用就基于所获得的内容信息获得目录列表。如果选择风格子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的装扮(clothing)目录列表。如果选择音乐子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的音乐目录列表。如果选择其它子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的产品或地点目录列表。这里,数字媒体列表可以包括相关图像、价格信息、说明和优惠券。优惠券可以是数字或QR代码。视频显示装置100可以只在用户观看主AV内容时显示优惠券,或者可以允许用户在将优惠券存储在存储器150上之后在有效期内使用优惠券。
在步骤S1807中,视频显示装置制造商应用在增强信息区360上显示所获得的目录列表。
将参照图48描述装扮目录列表的显示例子。
图48是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的风格子菜单时的画面。
如图48中所示,视频显示装置100在增强信息区360上显示制作者信息、价格信息、关于涉及主AV内容的装扮的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示装扮目录。
参照图49描述音乐目录列表的例子。
图49是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的音乐子菜单时的画面。
如图49中所示,视频显示装置100在增强信息区360上显示演唱者信息、价格信息、关于涉及主AV内容的音乐的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示音乐目录。
将参照图50描述其它目录列表的显示例子。
图50是根据实施方式的当选择视频显示装置制造商应用中的推荐主菜单的其它子菜单时的画面。
如图50中所示,视频显示装置100在增强信息区360上显示价格信息和关于涉及主AV内容的产品和地点的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的产品或地点目录。
一旦在步骤S1809中从目录列表中选择一项,则在步骤S1811中视频显示装置制造商应用显示与所选项对应的购买项。
像这样,根据实施方式,用户可以通过简单操纵购买产品。
可以在目录列表中的每项中设置购买后评价按钮和书签按钮。
一旦选择购买后评价按钮,视频显示装置100就可以在增强信息区360上显示产品的用后评价。另外,用户可以写入购买后评价。
另外,在通过书签按钮对特定项加书签之后,用户可以通过社交主菜单的观众列表子菜单推荐加书签的项。
在这种情况下,视频显示装置100可以将书签项信息提供到ACR服务器77或SNS提供服务器75。
然后,接收推荐的用户的视频显示装置100基于从主AV内容提取的片段获得内容信息,并且如果主AV内容基于所获得的内容信息对应于所推荐项的广告的话,则可以显示推荐消息如“这个产品是由朋友U推荐的”。另外,可以显示短视频来替代推荐消息。
然后,将参照图51和图52根据实施方式描述ACR功能的开启/关闭控制。
图51是根据实施方式的用于控制ACR功能的用户界面的视图。
如图51中所示,回放控制单元113显示ACR功能设置窗口。用户可以通过ACR功能设置窗口对ACR功能进行激活或去激活。
当激活ACR功能时,用户可以选择ACR模式。ACR模式可以被设置为具有自动播放应用模式、内容提供商应用模式和图像显示制造商应用模式中的一个。
当用以上方式设置ACR功能模式时,回放控制单元113将设置信息存储在设置信息存储单元154上。
图52是示出根据实施方式的控制视频显示装置的方法的流程图。
在步骤S1901中,增强型服务管理单元130确认ACR功能是否启动。
如果去激活ACR功能,则增强型服务管理单元130不再执行内容信息获得程序。
如果激活ACR功能,则在步骤S1902中增强型服务管理单元130提取主AV内容的特定片段。
在步骤S1903中,增强型服务管理单元130基于所提取的片段获得关于主AV内容的内容信息。
在步骤S1905中,增强型服务管理单元130将主AV内容的参考时间与替代广告的参考时间同步。
在步骤S1907中,增强型服务管理单元130基于所获得的内容信息获得增强型服务。增强型服务管理单元130基于内容信息获得增强型服务信息,然后基于增强型服务信息获得增强型服务。
然后,在步骤S1909中,增强型服务管理单元130确认ACR模式。
在步骤S1911中,增强型服务管理单元130根据ACR模式播放增强型服务。
更详细地,如果ACR模式是自动回放应用模式,则增强型服务管理单元130执行自动回放应用,并且所执行的自动回放应用播放所获得的增强型服务。
如果ACR模式是内容提供商应用模式,则增强型服务管理单元130在后台执行与所获得的内容信息对应的内容提供商应用。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示内容提供商应用。这个内容提供商应用可以回放所获得的增强型服务。作为内容提供商应用在后台自动执行的替代方式,内容提供商应用可以通过用户输入执行。
如果ACR模式是视频显示装置制造商应用模式,则增强型服务管理单元130在后台执行视频显示装置制造商应用。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示视频显示装置制造商应用。这个视频显示装置制造商应用可以回放所获得的增强型服务。作为视频显示装置制造商应用在后台自动执行的替代方式,视频显示装置制造商应用可以通过用户输入执行。
接下来,将参照图53描述根据实施方式的配对过程。
图53是示出根据实施方式的配对过程的梯形图。
首先,在步骤S2000中,终端装置400执行互通应用。互通应用可由视频显示装置100的制造商提供。当终端装置400与视频显示装置100之间的互通协议是公共协议时,广播商、内容提供商、第三方可制造并提供互通应用。
将参照图54描述互通应用。
图54是根据实施方式的执行互通应用的终端装置的正视图。
如图54所示,互通应用显示视频显示装置控制UI。就这一点,视频显示装置控制UI在顶部包括用于控制视频显示装置100的各种功能按钮并且在底部包括多个轻触改变按钮。视频显示装置控制UI包括用于控制视频显示装置100的音量和频道的VOL/CH轻触改变按钮、ACR轻触改变按钮以及用于改变互通应用的设置的设置轻触改变按钮。一旦点击VOL/CH轻触改变按钮,视频显示装置控制UI就可显示音量增大按钮、音量减小按钮、频道号增大按钮、频道号减小按钮、静音按钮和主画面按钮作为功能按钮。
再描述图53。
终端装置300在步骤S2001中搜索将要配对的装置,并在步骤S2003中显示搜索到的装置。终端装置400通过数字生活网络联盟(DLNA)、Bonjour、通用即插即用(UpnP)或制造商的原始搜索方法搜索连接到网络的装置,然后确认搜索到的装置提供的服务。
在步骤S2005中,用户500选择搜索到的装置中的一个,并且终端装置400识别搜索到的装置中的被选择的一个。就这一点,假设选择视频显示装置100。
当进入验证过程时,在步骤S2007中终端装置400确认此验证过程是否为首次。例如,终端装置400确认验证信息存储单元中是否存储有验证信息。如果是,则终端装置400确定这不是首次验证,如果否,则确定这是首次验证。
如果验证过程是首次,则在步骤S2009中,终端装置400请求视频显示装置100的验证号码。为此,终端装置400可将表14的HTTP请求发送给视频显示装置100。
[表14]
如表14所示,验证号码请求消息包括用于指示验证的auth元素。auth元素包括用于指示消息类型的type元素。type元素的值为AuthKeyRequest的HTTP请求指示验证号码请求消息。
接收到验证号码请求的视频显示装置100在步骤S2011中生成验证号码,然后在步骤S2013中将验证号码生成结果发送给终端装置400。验证号码生成结果可能不包括所生成的验证号码,而是可能包括关于成功或失败的信息。例如,如果可连接到视频显示装置100的终端的数量有限,并且最大数量的终端正连接到视频显示装置100,则即使当终端装置400发送验证号码请求时,视频显示装置100也可能将验证号码生成结果发送给终端装置400,该验证号码生成结果包括指示失败的信息。
验证号码生成结果消息可具有表15和表16所示的HTTP响应的格式。
[表15]
如表15所示,验证号码生成结果消息包括用于指示此HTTP响应涉及验证的auth元素。auth元素包括result元素和resultDetail元素,result元素包含关于验证号码生成结果的信息,resultDetail元素包含关于验证号码生成结果的详细信息。表16中示出result元素、resultDetail元素可包含的值的列表以及各个值的描述。
[表16]
Result resultDetail 描述
200 OK 处理完成
400 Bad Request 错误格式请求
402 Unauthorized 验证失败,来自授权会话ID的请求
406 Not Acceptable 错误的URL
409 Conflict 由于不同的协议或服务版本而支持不可用
500 Internal Server Error 主机装置中的处理期间发生内部错误
503 Service Unavailable 请求的命令在当前服务中不可用
如表16所示,在成功处理来自终端400的请求之后,视频显示装置100可向终端装置400发送验证号码生成结果消息,该消息包括值为200的result元素和值为“OK”的resultDetail元素。
如表16所示,在成功处理来自终端400的请求之后,视频显示装置100可向终端装置400发送验证号码生成结果消息,该消息包括值为400的result元素和值为“OK”的resultDetail元素。
当视频显示装置100由于验证号码请求消息是来自未授权会话标识符的请求而验证失败时,它可向终端装置400发送验证号码生成结果消息,该消息包括值为401的result元素和值为“Unauthorized”的resultDetail元素。
如果URL错误,则视频显示装置100可向终端装置400发送验证号码生成结果消息,该消息包括值为406的result元素和值为“Not Acceptable”的resultDetail元素。
如果图像显示器100由于协议或服务版本差异而无法支持来自终端装置400的请求,则它可向终端装置400发送验证号码生成结果消息,该消息包括值为409的result元素和值为“Conflict”的resultDetail元素。
如果在视频显示装置100处理来自终端装置400的请求时发生内部错误,则视频显示装置100可向终端装置400发送验证号码生成结果消息,该消息包括值为500的result元素和值为“Internal Server Error”的resultDetail元素。
如果来自终端装置400的请求在当前服务中不可用,则视频显示装置100可向终端装置400发送验证号码生成结果消息,该消息包括值为503的result元素和值为“ServiceUnavailable”的resultDetail元素。
在步骤S2015中,视频显示装置100显示生成的验证号码。
在步骤S2017中,接收到包括指示成功的信息的验证号码生成结果的终端装置400显示验证号码输入窗口。
图55是根据实施方式的验证号码输入窗口。
如图55(A)所示,验证号码输入窗口包括用于输入验证密钥的文本框、用于输入用户类型的组合框以及用于输入视频显示装置100的密码的文本框。
例如,用于输入用户类型的组合框可包括“家庭”项和“访客”项。如果选择“访客”项,则用于输入视频显示装置的密码的文本框可消失。视频显示装置100可根据用户类型指派增强型服务的使用权限。根据实施方式,视频显示装置100可将相对高的权限指派给与“家庭”用户类型配对的终端装置400,并将相对低的权限指派给与“访客”用户类型配对的终端400。根据另一实施方式,视频显示装置100可将无限制的权限指派给与“家庭”用户类型配对的终端装置400,并且仅将观看权限指派给与“访客”用户类型配对的终端400,以便使用增强型服务。
再描述图53。
当用户500观看视频显示装置100上显示的验证号码并将验证号码输入到终端装置400时,终端装置400在步骤S2019中通过所显示的验证号码输入窗口接收验证号码,然后将所接收到的验证号码存储在验证信息存储单元中。
另外,终端装置400在步骤S2021中通过所显示的验证号码输入窗口接收用户类型,并将所接收到的用户类型存储在验证信息存储单元中。
另外,终端装置400在步骤S2023中通过所显示的验证号码输入窗口接收视频显示装置100的密码,并将所接收到的密码存储在验证信息存储单元中。如果“访客”被选为用户类型,则终端装置400可不接收视频显示装置100的密码。
在步骤S2025中,除了验证号码、用户类型和视频显示装置100的密码之外,终端装置400将验证请求发送给视频显示装置100。验证请求消息可具有表17所示的HTTP请求格式。
[表17]
如表17所示,验证请求消息包括用于指示HTTP请求涉及验证的auth元素。auth元素包括用于指示消息类型的type元素、包含验证号码的key元素、包含用户类型的userType元素以及包含视频显示装置100的密码的pwd元素。如果type元素的值为AuthRequest的HTTP请求指示验证请求消息。如上所述,userType元素可具有值“家庭”或值“访客”。如果userType元素的值为“访客”,则验证请求消息可不具有pwd元素。
在步骤S2027中,视频显示装置100基于随验证请求一起接收的验证号码、用户类型和密码执行验证处理。如果接收的验证号码与生成的验证号码相同,并且接收的密码与存储的密码相同,则视频显示装置100确定与接收的用户类型有关的验证成功。如果接收的验证号码不与生成的验证号码相同,或者接收的密码不与存储的密码相同,则视频显示装置100确定与接收的用户类型有关的验证失败。
如果视频显示装置100成功执行验证,则在步骤S2028中它发布用于终端装置400的会话值。
在执行验证之后,在步骤S2029中视频显示装置100将验证结果发送给终端装置400。验证结果消息可具有表18所示的HTTP响应格式。
[表18]
如表18所示,验证结果消息包括用于指示此HTTP响应涉及验证的auth元素。auth元素包括包含验证结果信息的result元素、包含关于验证结果的详细信息的resultDetail元素以及包含会话值的session元素。表16中示出result元素、resultDetail元素可包含的值的列表以及各个值的描述。session元素所包含的会话值在互通处理中使用。当在互通处理期间消息中的会话值不与视频显示装置100所发布的会话值相同时,发生错误。
在步骤S2031中,终端装置400显示接收的验证结果。
在步骤S2033中,响应于包括肯定验证结果的验证结果消息或者能力信息请求消息,终端装置400将包括关于终端装置400的能力信息的能力信息响应消息发送给视频显示装置100。能力信息响应消息可包括deviceCapability元素。deviceCapability元素可包括包含关于终端装置400的分辨率信息的resolution元素。deviceCapability元素可包括包含CPU规格和剩余可用存储器的元素。视频显示装置100可存储并管理配对的终端装置的列表以及该列表上关于各个终端装置的容量信息。
另外,视频显示装置100可将包括关于视频显示装置100的容量信息的消息发送给终端装置400。在步骤S2033中,视频显示装置100可响应于容量信息响应消息或附加容量信息请求消息,将包括关于视频显示装置100的容量信息的消息发送给终端装置400。另外,步骤S2029中的验证结果消息可包括关于视频显示装置100的能力信息。
此外,如果验证过程不是首次,则在步骤S2025中,除了存储在验证信息存储单元中的验证号码、用户类型和视频显示装置100的密码之外,终端装置400将验证请求发送给视频显示装置100,然后执行以下过程。
上面描述了配对过程,在配对过程中使用HTTP请求和HTTP响应。然而,可使用基于UDP或TCP的分组,或者可使用具有其它格式的消息。
与此类似,装置之间的互通可在视频显示装置100与终端装置400之间的配对过程之后执行。然而,在配对状态下存储关于终端装置400的信息之后,即使视频显示装置100未与终端装置400配对,视频显示装置100也可将装置之间的互通处理所需的消息传送给终端装置400。另外,在配对状态下存储关于视频显示装置100的信息之后,即使配对状态结束,终端装置400也可将装置之间的互通处理所需的消息传送给视频显示装置100。
视频显示装置100在配对状态下存储关于终端装置400的信息,然后在不配对状态下基于存储的信息通过推送通知机制将用于装置之间的互通处理的消息发送给终端装置400。
另外,终端装置400在配对状态下存储关于视频显示装置100的信息,然后在不配对状态下基于存储的信息通过推送通知机制将用于装置之间的互通处理的消息发送给视频显示装置100。
接下来将参照图56描述根据实施方式的ACR控制方法。
图56是示出根据实施方式的ACR控制方法的梯形图。
将基于HTTP请求和HTTP响应描述图56所示的实施方式。然而,可使用基于UDP或TCP的分组,或者可使用其它各种格式的消息。
首先,在步骤S2301中,终端装置400执行互通应用。
在步骤S2302中,终端装置400的互通应用和视频显示装置100执行配对处理。
然后,在步骤S2303中,终端装置400的互通应用将ACR能力请求消息发送给视频显示装置100,以便询问视频显示装置100是否支持ACR。能力请求消息可具有如表19所示的HTTP请求格式。
[表19]
如表19所示,ACR能力请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。此acrCommand元素包括:session元素,其包含视频显示装置100所分发的会话值;以及name元素,其包含“ACRSupportRequest”,即,指示HTTP请求是ACR能力请求消息的文本值。
在步骤S2305中,视频显示装置100响应于ACR能力请求消息将ACR能力响应消息发送给终端装置400。ACR能力响应消息包括关于视频显示装置100是否支持ACR的信息。ACR能力响应消息可具有如表20所示的HTTP请求格式。
[表20]
如表20所示,ACR能力请求消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过HTTP响应向终端装置400发送响应。此acrResponse元素包括:session元素,其包含视频显示装置100所分发的会话值;name元素,其包含“ACRSupportRequest”,即,指示HTTP请求是ACR能力响应消息的文本值;以及acrSupport元素,其包含关于视频显示装置100是否支持ACR的信息。具有值“Support”的acrSupport元素指示视频显示装置100支持ACR,具有值“NotSupport”的acrSupport元素指示视频显示装置100不支持ACR。
然后,在步骤S2307中,终端装置400的互通应用基于ACR能力响应消息确定视频显示装置100是否支持ACR。
如果视频显示装置100不支持ACR,则终端装置400的互通应用可不进行随后的操作。
根据另一实施方式,如果视频显示装置100不支持ACR,则终端装置400可基于捕获的视频显示装置100所输出的视频或音频的一些间隔类似支持ACR的视频显示装置100一样执行ACR。这将被描述。
当视频显示装置100支持ACR时,在步骤S2309中,终端装置400的互通应用将ACR设置状态请求消息发送给视频显示装置100,以便询问视频显示装置100是否开启ACR功能。
在步骤S2311中,视频显示装置100响应于ACR设置状态请求消息将ACR设置状态响应消息发送给终端装置400。ACR设置状态响应消息包括关于视频显示装置100是否开启ACR功能的信息。如果ACR被打开,则它被分成制造商应用模式和广播商应用模式。在制造商应用模式下,不能驱动广播商的自动回放应用,仅可驱动视频显示装置的制造商的应用。在广播商应用模式下,自动回放应用和视频显示装置的制造商的应用均可被驱动。
在步骤S2313中,终端装置400的互通应用基于ACR设置状态响应消息确定视频显示装置100是否开启ACR功能。
如果视频显示装置100没有开启ACR功能,则在步骤S2315中终端装置400的互通应用将ACR ON请求消息发送给视频显示装置100。终端装置400的互通应用提供UI以便打开/关闭视频显示装置100的ACR功能。当通过该UI接收到打开/关闭ACR功能的用户输入时,互通应用将ACR ON请求消息发送给视频显示装置100以便允许视频显示装置100开启ACR功能。
一旦ACR被打开,在步骤S2317中,视频显示装置100执行自动内容识别以便获得关于主AV内容的内容信息。如上所述,视频显示装置100可基于自动内容识别获得关于主AV内容的内容信息。除了自动内容识别之外,视频显示装置100可执行其它内容识别以便获得关于主AV内容的内容信息。
与此类似,根据实施方式,视频显示装置100可基于一部分主AV内容来获得内容信息。此外,根据另一实施方式,视频显示装置100通过广播网络从内容提供服务器10接收并获得关于主AV内容的内容信息。此外,根据另一实施方式,终端装置400捕获视频显示装置100播放的AV内容的一部分,基于捕获的那部分AV内容获得内容信息,并将获得的内容信息提供给视频显示装置100。
然后,在步骤S2318中,终端装置400的互通应用和视频显示装置100执行装置之间的互通处理。
以下将参照图57至图89描述根据各种实施方式的装置之间的互通处理。
图57是示出根据实施方式的装置之间的互通处理的梯形图。
首先,在步骤S2501中,终端装置400执行互通应用。
在步骤S2503中,终端装置400的互通应用和视频显示装置100执行上述配对处理。
在步骤S2505中,终端装置400的互通应用和视频显示装置100执行上述ACR控制处理。
当视频显示装置100的ACR功能被打开时,在步骤S2507中,视频显示装置100执行上述自动内容识别。
此外,在步骤S2509中,终端装置400的互通应用将事件注册请求消息发送给配对的视频显示装置100,该消息请求注册将要接收的事件。根据实施方式,可使用内容识别状态改变事件、可用增强型服务通知事件、视频显示装置100中的应用执行/终止事件、在视频显示装置100中执行的应用中发生的事件、控制功能之前的冲突事件、URL开始事件以及视频显示装置的制造商的应用事件。终端装置400的互通应用可基于用户输入确定将要接收的事件。
事件注册请求消息可具有如表21所示的HTTP请求格式。特别是,表21示出根据实施方式的应用执行/终止事件的事件注册请求消息的格式。
[表21]
如表21所示,事件注册请求消息包括command元素,该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。此command元素包括:session元素,其包含视频显示装置100所分发的会话值;以及name元素,其包含“RegisterAppOnOffStatusEvent”,即,指示HTTP请求是的应用执行/终止事件的事件注册请求消息的文本值。
视频显示装置100在步骤S2510中注册与事件注册请求消息对应的事件,并在步骤S2511中将包括事件注册结果的事件注册确认消息发送给终端装置400。
当在步骤S2512中发生终端装置400所注册的事件时,在步骤S2513中视频显示装置100将通知事件发生的事件通知消息发送给终端装置400。
所述事件可通过HTTP请求发送,并且可被张贴到下面的URL。
http://target_ip:8080/hdcp/api/event
就这一点,target_ip是注册事件接收的终端装置的IP地址。
当注册了内容识别状态改变事件,并且视频显示装置100执行自动内容识别操作并识别出主AV内容改变时,视频显示装置100可将关于内容识别状态改变事件的事件通知消息发送给终端装置400。当关于视频显示装置100所获得的主AV内容的标识符或当前时间信息改变时,视频显示装置100可将包括改变的信息的内容识别状态改变事件通知消息发送给终端装置400。有关内容识别状态改变事件的事件通知消息可包括主AV内容的标识符、主AV内容的当前时间、可用应用的URL。
当注册了可用增强型服务通知事件,并且视频显示装置100确认与主AV内容有关的可用增强型服务时,视频显示装置100可将关于可用增强型服务通知事件的事件通知消息发送给终端装置400。
当在视频显示装置100中注册应用执行/终止事件,并且视频显示装置100执行应用时,视频显示装置100可将应用执行/终止事件发送给终端装置400,以便通知视频显示装置100执行应用的事实。特别是,当通过自动内容识别获得并执行与主AV内容有关的可用应用时,视频显示装置100可将应用事件发送给终端装置400。当视频显示装置100终止应用时,它可将应用终止事件发送给终端装置400以便通知视频显示装置100终止应用的事实。应用执行/终止事件可包括用于终端装置400的应用URL。用于终端装置400的应用URL可以与用于视频显示装置100的应用URL相同或不同。特别是,如果用于终端装置400的应用URL不同于用于视频显示装置100的应用URL,则视频显示装置100可得到适合于终端装置400的应用URL,然后可将其提供给终端装置400。另外,视频显示装置100将用于视频显示装置100的应用URL提供给终端装置400,终端装置400基于该URL搜索查找表,并且可识别出适合于终端装置400的URL。应用执行/终止事件可具有如表22所示的HTTP响应格式。
[表22]
如表22所示,应用执行/终止事件消息包括event元素,该元素指示此消息是视频显示装置100发送给终端装置400的事件消息。此event元素包括:session元素,其包含视频显示装置100所分发的会话值;以及name元素,其包含“AppOnOffStatus”,即,指示HTTP请求是应用执行/终止事件消息的文本值。另外,event元素包括appId元素和status元素。appId元素包含在视频显示装置100中执行/终止的应用的标识符。status元素包含关于由appId元素值标识的应用是被执行还是终止的信息。值为on的status元素指示由appId元素的值标识的应用被执行,值为off的status元素指示由appId元素的值标识的应用被终止。应用执行/终止事件消息可包括应用的URL。
当由视频显示装置100执行的应用中发生的事件被注册,并且该事件发生于在视频显示装置100中执行的应用中时,视频显示装置100可将应用中的事件发送给终端装置400,以便通知该事件发生于该应用中。特别是,应用中的事件可通过用户的选择生成。
根据实施方式,如参照图30至图32所示,一旦搜索到关于选择的搜索项的信息,视频显示装置100将与其有关的事件发送给终端装置400,终端装置400获得并显示搜索结果。基于此,用户可执行附加搜索。通过此,用户可自由地使用搜索服务,而不会体验到不方便,例如TV遥控器的有限输入以及阻挡观看画面的TV浏览器。
根据另一实施方式,在视频显示装置100中执行的应用可在播放主AV内容的同时基于用户的选择提供关于与主AV内容有关的地点和地图的信息。就这一点,视频显示装置100将与以上有关的事件发送给终端装置400,并且因此,终端装置400获得并显示与主AV内容有关的地点的地图数据。此外,终端装置400可在地图上另外显示与主AV内容有关的详细位置信息。
根据另一实施方式,一旦选择视频显示装置的制造商应用中的聊天服务,视频显示装置100将与所述选择有关的事件发送给终端装置400,并且因此,终端装置400获得并显示视频显示装置的制造商应用的控制功能。就这一点,视频显示装置的制造商应用的控制功能可以是显示在触摸屏上的键盘或键区。
根据另一实施方式,终端装置400可使用上传服务。一旦选择视频显示装置的制造商应用中的上传服务,视频显示装置100将与所述选择有关的事件发送给终端装置400,并且因此,终端装置400获得并显示上传服务相关应用。终端装置400可通过上传服务应用将节目相关信息或报告的内容上传到内容提供服务器10和增强型服务提供服务器50中。
根据另一实施方式,当选择视频显示装置的制造商应用中的下载服务时,视频显示装置100将与所述选择有关的事件发送给终端装置400,并且因此,终端装置400下载选择的项,然后存储、管理并播放它。下载服务的示例包括音乐、最后广播VOD、优惠卷、产品目录和上传信息。用户可在观看视频显示装置100的同时下载各种服务,并且可在四处走动的同时使用下载的服务。
当注册控制功能转移冲突事件,并且视频显示装置100确认控制功能转移冲突时,视频显示装置100可在控制功能之前将关于冲突事件的事件通知消息发送给终端装置400。
当注册URL开始事件,并且视频显示装置100确认URL开始时,视频显示装置100可将关于URL开始事件的事件通知消息发送给终端装置400。视频显示装置100可通过URL开始事件通知终端装置400特定URL被点击。如果URL是典型的Web URL,并且视频显示装置100无法正确地显示与点击的URL对应的页面,则视频显示装置100将包括点击的URL的URL开始事件发送给终端装置,以便于终端装置400显示与点击的URL对应的页面。
当URL是ACR应用URL时,视频显示装置100可执行将用于视频显示装置100的ACR应用URL的版本解析为用于终端装置400的ACR应用URL的版本的处理。例如,当在视频显示装置100中执行ACR应用功能的显示功能,并且在终端装置400中执行ACR应用的控制功能时,视频显示装置100可将用于ACR应用的控制功能的ACR应用URL提供给终端装置100。
当注册视频显示装置的制造商应用事件,并且视频显示装置100执行或终止视频显示装置的制造商应用时,视频显示装置100可将关于视频显示装置的制造商应用事件的事件通知消息发送给终端装置400。终端装置400可通过视频显示装置的制造商应用事件确认在视频显示装置100中是否执行视频显示装置的制造商应用。如果确认在视频显示装置100中执行视频显示装置的制造商应用事件,则终端装置400可请求视频显示装置100通过终止、禁用或隐藏它来不显示视频显示装置的制造商应用并且允许终端装置400执行视频显示装置的制造商应用。
在步骤S2514中,终端装置400的互通应用可以按照历史形式存储通知的事件。然后,终端装置400可通过用户的选择显示存储的事件的列表。存储的事件的列表上的项可被再次访问,或者可被删除。当访问存储的事件的列表上的一项被选择时,终端装置400可根据与所选择的项对应的事件执行操作。
终端装置400的互通应用可根据通知的事件执行操作。
另外,在步骤S2516中,当在特定条件下需要视频显示装置100的状态时,终端装置400可将询问视频显示装置100的状态的消息发送给视频显示装置100。例如,当视频显示装置100中执行的增强型服务被转移至终端装置400时,终端装置100询问视频显示装置100在视频显示装置100中执行的增强型服务的UI状态,并且将转移的增强型服务的UI状态维持为就像视频显示装置100中执行的UI状态一样。即,在视频显示装置100中执行的增强型服务的UI状态可连续改变。然而,如果增强型服务未被转移至终端装置400,则终端装置400可能没有必要每当其改变时接收UI改变的通知。
终端装置400的互通应用通过HTTP Get发送查询消息,查询消息可具有以下URL格式。
http://target_ip:8080/hdcp/api/data?<query>
就这一点,target_ip可以是接收查询消息的视频显示装置100的IP地址。<query>可包括HTTP GET格式的具有一对Key-value的查询项。
根据实施方式,当终端装置400询问视频显示装置100的特定应用的当前状态时,查询消息可具有以下如表23所示的URL格式。
[表23]
在步骤S2517中,视频显示装置100响应于查询消息将查询响应消息发送给终端装置400。当终端装置400询问视频显示装置100的状态时,视频显示装置100可将包括关于视频显示装置100的状态的信息的查询响应消息发送给终端装置400。特别是,当终端装置400询问在视频显示装置100中执行的增强型服务的UI状态时,视频显示装置100可将包括关于视频显示装置100中执行的增强型服务的UI状态的信息的查询响应消息发送给终端装置400。查询响应消息可具有以下如表24所示的格式。
[表24]
此外,在步骤S2518中,终端装置400的互通应用将事件注销请求消息发送给配对的视频显示装置100,该消息请求注销未接收的事件。根据实施方式,可使用内容识别状态改变事件、可用增强型服务通知事件、控制功能转移冲突事件、URL开始事件以及视频显示装置的制造商应用事件。终端装置400的互通应用可基于用户输入确定将要接收的事件。
视频显示装置100在步骤S2519中注销与事件注销请求消息对应的事件,并在步骤S2521中将包括事件注销结果的事件注销确认消息发送给终端装置400。
图58是示出根据另一实施方式的装置之间的互通处理的梯形图。
首先,在步骤S2701中,终端装置400执行互通应用。
在步骤S2703中,终端装置400的互通应用和视频显示装置100执行上述配对处理。
在步骤S2705中,终端装置400的互通应用和视频显示装置100执行上述ACR控制处理。
在步骤S2707中,当视频显示装置100的ACR功能被打开时,视频显示装置100执行上述自动内容识别。
此外,在步骤S2719中,终端装置400的互通应用将内容识别状态请求消息发送给视频显示装置100。内容识别状态请求消息可具有如表25所示的HTTP请求格式。
[表25]
如表25所示,内容识别状态请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素、name元素和repeat元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“CheckACRStatus”,即,指示此消息是内容识别状态请求消息的文本值。repeat元素包含关于视频显示装置100多频繁地向终端装置400发送内容识别状态响应消息的信息。例如,如果repeat元素的值为once,则视频显示装置100响应于内容识别状态请求消息仅向终端装置400发送一次内容识别状态响应消息。例如,如果repeat元素的值为always,则视频显示装置100每当在接收到内容识别状态请求消息之后ACR识别状态改变时向终端装置400发送内容识别状态响应消息。
在步骤S2721中,视频显示装置100响应于内容识别状态请求消息将内容识别状态响应消息发送给终端装置400。内容识别状态响应消息可具有如表26所示的HTTP响应格式。
[表26]
如表26所示,内容识别状态响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、recognition元素、contentId元素和mediaTime元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“CheckACRStatus”,即,指示此消息是内容识别状态响应消息的文本值。
recognition元素包括关于视频显示装置100是否标识主AV内容以便获得内容信息的信息。值为“found”的recognition元素指示视频显示装置100标识主AV内容以便获得内容信息。值为“Notfound”的recognition元素指示视频显示装置100没有标识主AV内容,因此没有获得内容信息。如果recognition元素的值为“Found”,则acrResponse元素可具有contentID元素和mediaTime元素。contentID元素的值对应于视频显示装置100所获得的主AV内容标识信息。mediaTime元素的值对应于用于内容信息获取的内容间隔的时间或者主AV内容的当前时间。例如,如表26所示,mediaTime元素的值为210。这表示在用于内容信息获取的内容间隔的时间或者主AV内容的当前时间开始之后逝去了210秒。
如果内容识别状态请求消息中的repeat元素的值为always,则视频显示装置100每当在接收到内容识别状态请求消息之后contentID元素的值或mediaTime元素的值改变时将内容识别状态响应消息发送给终端装置400。
内容识别状态响应消息可另外包括可用应用URL、自动回放应用URL和后端URL。
然后,终端装置400的互通应用在步骤S2303中将增强型服务发生事件注册请求消息发送给视频显示装置100,以便向视频显示装置100请求关于是否存在与主AV内容有关的可用增强型服务的通知。增强型服务发生事件注册请求消息可具有如表27所示的HTTP请求格式。
[表27]
如表27所示,增强型服务发生事件注册请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素和name元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“RegisterAppNotifyEvent”,即,指示此消息是增强型服务发生事件注册请求消息的文本值。
在步骤S2725中,视频显示装置100响应于增强型服务发生事件注册请求消息将增强型服务发生事件注册响应消息发送给终端装置400。
然后,如果与当前主AV内容有关的可用增强型服务发生,则视频显示装置100将增强型服务发生事件消息发送给终端装置400。
增强型服务发生事件消息可具有如表28所示的HTTP响应格式。
[表28]
如表28所示,增强型服务发生事件消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素和至少一个app元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“RegisterAppNotifyEvent”,即,指示此消息是增强型服务发生事件消息的文本值。
app元素包括appId元素、appName元素和至少一个addType元素。appId元素的值是与主AV内容有关的可用增强型服务的标识符;appName元素的值是与主AV内容有关的可用增强型服务的名称;appType元素的值是与主AV内容有关的可用增强型服务的类型。appType元素的值是“controller”和“appTransfer”之一。值为“controller”的appType元素指示与app元素对应的增强型服务的功能当中的显示功能在视频显示装置100中执行,控制功能在终端装置400中执行。值为“appTransfer”的appType元素指示与app元素对应的增强型服务在视频显示装置100中被终止、禁用或隐藏,并且在终端装置400中执行。
如果appType元素的值为“controller”,则app元素还可包括maxController元素。maxController元素的值指示可转移增强型服务的控制功能的终端装置的最大数量。例如,如果maxController元素的值为1,则仅一个终端装置可具有在视频显示装置100中执行的增强型服务的控制功能。
例如,如果maxController元素的值为2,则最多两个终端装置可具有在视频显示装置100中执行的增强型服务的控制功能。例如,如果增强型服务是用于两个用户的战争游戏,则两个终端装置与视频显示装置100配对以便分别控制两个角色。
如果maxController元素的值为N,并且N+1个终端装置请求在视频显示装置100中执行的增强型服务的控制功能,则可能发生冲突。稍后将描述调节上述冲突的方法。
当appType元素的值为“appTransfer”时,执行与视频显示装置100链接的增强型服务的终端装置的数量不受限制。执行增强型服务的多个终端装置中的每一个可分别与视频显示装置100链接。
与此类似,根据实施方式,终端装置400将增强型服务发生事件注册请求消息发送给视频显示装置100以便接收增强型服务发生事件。
根据另一实施方式,终端装置400将增强型服务通知请求消息发送给视频显示装置100以便接收增强型服务响应事件。增强型服务发生事件注册请求消息可以是增强型服务通知请求消息,增强型服务发生事件可以是增强型服务通知响应消息。
当终端装置400将增强型服务通知请求消息发送给视频显示装置100时,视频显示装置100可通过增强型服务通知响应消息将关于所有可用增强型服务的标识符、类型和执行时间的信息发送给终端装置400。在这种情况下,当到达增强型服务的执行时间时,终端装置400可显示指示增强型服务可被执行的UI,或者可执行增强型服务。
当终端装置400将增强型服务通知请求消息发送给视频显示装置100时,视频显示装置100可在所有可用应用发生时通过增强型服务通知响应消息将关于所有可用应用的标识符、类型和执行时间的信息发送给终端装置400。在这种情况下,一旦接收到增强型服务通知响应消息,终端装置400可显示指示增强型服务可被执行的UI,或者可执行增强型服务。
终端装置400的互通应用基于增强型服务发生事件消息识别出存在与主AV内容有关的可用增强型服务,并且在步骤S2727中显示指示存在可用增强型服务的增强型服务通知UI。
如果可用增强型服务的数量为一,则增强型服务通知UI可包括用于询问是否在终端装置400中执行可用增强型服务的UI。如果可用增强型服务的数量为多个,则增强型服务通知UI可包括用于选择所述多个可用增强型服务中的一个的UI。如果可用增强型服务具有多种类型,则增强型服务通知UI可包括用于选择所述多种类型中的一种的UI。除了显示增强型服务通知UI之外,终端装置400的互通应用可生成诸如振动的触觉事件、诸如报警声的听觉事件以及诸如闪烁或颜色改变的视觉事件。
终端装置400的互通应用可基于增强型服务执行/终止事件消息显示指示存在可用增强型服务的增强型服务通知UI。
接下来将参照图59和图60描述根据实施方式的增强型服务通知UI。
图59是根据实施方式的显示增强型服务通知UI的终端装置的正视图。
如图59所示,当终端装置400的互通应用接收到包括存在可用增强型服务的信息的增强型服务发生事件消息时,互通应用改变ACR轻触改变按钮的颜色或亮度,以便通知用户存在与主AV内容有关的可用增强型服务。
图60是根据另一实施方式的显示增强型服务通知UI的终端装置的正视图。
如图60所示,终端装置400的互通应用可显示UI以便询问是否在终端装置400中执行可用增强型服务。如果用户接受增强型服务执行,则在执行互通应用的同时不再询问是否接受它。
图61是根据另一实施方式的显示增强型服务通知UI的终端装置的正视图。
如图61所示,终端装置400的互通应用可显示UI以便选择多种增强型服务类型中的一种。如果在图61中选择TV按钮,则终端装置400可将增强型服务的执行类型识别为控制功能转移类型。如果选择“移动”按钮,则终端装置400可将增强型服务的执行类型识别为增强型服务转移类型。
再描述图58。
在步骤S2729中,终端装置400通过增强型服务通知UI接收与可用增强型服务的执行有关的用户输入。
如果可用增强型服务具有多种类型,则在步骤S2731中终端装置400通过增强型服务通知UI接收与可用增强型服务的类型选择有关的用户输入。
在步骤S2733中,终端装置400将请求转移所选择的增强型服务的增强型服务转移请求消息发送给视频显示装置100。增强型服务转移请求消息可具有如表29所示的HTTP请求格式。
[表29]
如表29所示,增强型服务转移请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrResponse元素包括session元素、name元素、appId元素、type元素和deviceCapability元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“ACRAppRequest”,即,指示此消息是增强型服务转移请求消息的文本值。
appId元素包含用户想要的增强型服务的标识符。
type元素包含指示用户想要的转移类型的信息。appType元素的值是“controller”和“appTransfer”中的一个。值为“controller”的type元素表示对增强型服务的控制功能的转移请求,值为“appTransfer”的type元素表示整个增强型服务的转移注册。
deviceCapability元素包含关于终端装置400的能力的信息。deviceCapability元素可包括resolution元素,该元素包含关于终端装置400的分辨率信息。deviceCapability元素还可包括包含CPU规格和剩余可用存储器的元素。当终端装置400在验证之后预先将能力信息传送给视频显示装置100时,增强型服务转移请求消息可不包括deviceCapability元素。
视频显示装置100可根据增强型服务转移请求消息控制增强型服务。
当终端装置400请求转移增强型服务的控制功能时,视频显示装置100启用请求的增强型服务的显示功能,并且生成增强型服务转移响应消息,该消息包括与请求的增强型服务的控制功能、请求的增强型服务类型和终端装置400的能力对应的增强型服务URL。视频显示装置100可启用或禁用请求的增强型服务的控制功能。
当终端装置400请求转移增强型服务时,视频显示装置100禁用、隐藏或终止请求的增强型服务以便不显示增强型服务,全屏显示主AV内容,并且生成增强型服务转移响应消息,该消息包括与请求的增强型服务、请求的增强型服务类型和终端装置400的能力对应的增强型服务URL。
在步骤S2735中,视频显示装置100将增强型服务转移响应消息发送给终端装置400。增强型服务转移响应消息可具有如表30所示的HTTP响应格式。
[表30]
如表30所示,增强型服务转移响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、type元素、appURL元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“ACRAppRequest”,即,指示此消息是增强型服务转移响应消息的文本值。
type元素包括指示对通过增强型服务请求消息请求的那种类型的增强型服务的响应的信息。当接收到type元素的值为“controller”的增强型服务请求消息时,响应于此,视频显示装置100发送type元素的值为“controller”的增强型服务转移响应消息。当接收到type元素的值为“appTransfer”的增强型服务请求消息时,响应于此,视频显示装置100发送type元素的值为“appTransfer”的增强型服务转移响应消息。
appURL元素包括与请求的增强型服务、请求的增强型服务类型和终端装置400的能力对应的增强型服务URL。
appType元素的值为OK、NotOK和Conflict中的一个。如果终端装置400的增强型服务请求被成功执行,则视频显示装置100将包括值为OK的result元素的增强型服务转移响应消息发送给终端装置400。如果终端装置400的增强型服务请求未成功执行,则视频显示装置100将包括值为NotOK的result元素的增强型服务转移响应消息发送给终端装置400。在可转移增强型服务的控制功能的终端装置的最大数量为N,并且正在执行增强型服务的控制功能的终端装置的数量为N的情况下,当视频显示装置100接收到type元素的值为“controller”的增强型服务请求消息时,视频显示装置100将包括值为Conflict的result元素的增强型服务转移响应消息发送给终端装置400。
当接收到type元素的值为“controller”的增强型服务请求消息时,代替发送增强型服务URL,视频显示装置100将包括控制命令(例如键位置或触摸位置)的增强型服务转移响应消息发送给终端装置400,并且因此代替通过增强型服务URL创建控制UI,终端装置400可通过该控制命令创建控制UI。
终端装置400可基于视频显示装置100的增强型服务响应确认可用增强型服务的URL。另外,代替基于视频显示装置100的增强型服务响应,终端装置400可通过将包括视频显示装置100的内容识别状态响应的内容标识符和内容时间的查询发送给增强型服务信息提供服务器40来确认可用增强型服务的URL。
增强型服务转移响应消息可包括关于视频显示装置100中执行的增强型服务的状态信息。
在步骤S2737中,终端装置400将请求与增强型服务URL对应的增强型服务的增强型服务请求消息发送给增强型服务提供服务器50。终端装置400与增强型服务提供服务器50之间的信息交换可直接实现,而无需视频显示装置100。
在步骤S2739中,增强型服务提供服务器50将增强型服务提供给终端装置400。
在步骤S2741中,终端装置400执行由增强型服务提供服务器50提供的增强型服务。如果增强型服务转移响应消息包括关于视频显示装置100中执行的增强型服务的状态信息,则终端装置400的互通应用可通过根据该状态信息执行增强型服务来连续地提供服务。
将参照图62至图68描述增强型服务的执行。
图62是根据实施方式的执行增强型服务的终端装置的正视图。
特别是,图62是当终端装置400向视频显示装置100请求增强型服务转移类型的聊天增强型服务以便执行获得的聊天增强型服务时的视图。由于终端装置400向视频显示装置100请求增强型服务转移类型的聊天增强型服务,所以视频显示装置100可禁用、隐藏或终止请求的增强型服务以便不显示增强型服务,然后可全屏显示主AV内容。观众可没有中断地观看主AV内容。
图63是根据另一实施方式的当在视频显示装置和终端装置中执行增强型服务时的视图。
特别是,图63是当终端装置400向视频显示装置100请求控制功能转移类型的聊天增强型服务并执行所获得的聊天增强型服务时的视图。由于终端装置400向视频显示装置100请求控制功能转移类型的聊天增强型服务,所以视频显示装置100如图63(A)所示执行请求的增强型服务的显示功能,并且如图63(B)所示执行请求的增强型服务的控制功能。这样,可通过终端装置400的各种输入装置来控制视频显示装置100。
图64是根据另一实施方式的执行增强型服务的终端装置的正视图。
如图64所示,终端装置400可执行显示拍摄地点的服务。
图65是根据另一实施方式的执行增强型服务的终端装置的正视图。
如图65(A)所示,所获得的增强型服务可包括各种子服务,例如用于显示拍摄地点的服务、SNS、背景音乐下载服务和剧集重播服务。根据实施方式,终端装置400根据内容提供商的意图或用户偏好确定暴露优先级,并首先显示优先级最高的子服务。根据另一实施方式,终端装置400可如图65(A)所示显示用于选择多个子服务的UI,并且可显示所选择的子服务。
如图65(B)所示,终端装置400可执行与主AV内容有关的音乐提供服务。
再描述图58。
在步骤S2743中,增强型服务提供服务器50将增强型服务事件提供给终端装置400。例如,如果增强型服务对应于聊天应用,则增强型服务事件可对应于新对话文本数据。当终端装置400的聊天应用获得新对话文本数据时,其更新对话窗口。
在步骤S2745中,终端装置400将增强型服务事件响应发送给增强型服务提供服务器50。例如,当增强型服务事件对应于新对话文本数据时,增强型服务事件响应可对应于对新对话文本数据的正常接收响应ACK。
视频显示装置100维持并管理关于配对的终端装置400所执行的增强型服务的信息,并且在通过广播网络或基于IP的网络获得用于增强型服务的增强型数据之后,通过增强型服务事件将所获得的增强型数据发送给终端装置400。增强型服务事件可包括与增强型数据有关的目标增强型服务的标识符和增强型数据。目标增强型服务的标识符可通过AppID元素来指派。接收到增强型服务事件的终端装置400将对应事件按原样传送给利用AppID指派的增强型服务,以使得所指派的增强型服务可处理该事件。构成各个事件的字段可根据事件没有限制地被指定,然后可被使用。
图66是示出根据另一实施方式的装置之间的互通处理的梯形图。
在步骤S2746中,终端装置400执行增强型服务提供服务器50提供的增强型服务。
然后,当在步骤S2747中终端装置400接收到终止所执行的增强型服务的用户输入时,在步骤S2749中,终端装置400确认所执行的增强型服务的类型。
当执行的增强型服务的类型对应于控制功能转移时,在步骤S2751中终端装置400将控制功能转移释放请求消息发送给视频显示装置100。控制功能转移释放消息可具有如表31所示的HTTP请求格式。
[表31]
如表31所示,控制功能转移释放请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素、name元素和appId元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“UnregisterController”,即,指示此消息是控制功能转移释放请求消息的文本值。appId元素包含与控制功能转移释放对应的增强型服务的标识符。
在步骤S2753中,视频显示装置100释放对发送控制功能转移释放请求消息的终端装置400的控制功能转移。视频显示装置100可将由于控制功能转移而注册的终端装置的数量减一。视频显示装置100可启用被转移给终端装置100的增强型服务的控制功能。
然后,在步骤S2755中,视频显示装置100响应于控制功能转移释放请求消息将包括控制功能转移释放结果的控制功能转移释放响应消息发送给终端装置400。控制功能转移释放响应消息具有如表32所示的HTTP响应格式。
[表32]
如表32所示,增强型服务转移释放响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、appID元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“UnregisterController”,即,指示此消息是控制功能转移释放请求消息的文本值。appId元素包含与控制功能转移释放对应的增强型服务的标识符。result元素包含控制功能转移释放结果作为响应。result元素的值可为OK(表示控制功能转移释放成功完成)或NotOK(表示未成功完成)中的一个。
当执行的增强型服务的类型对应于控制功能转移时,在步骤S2757中,终端装置400将增强型服务转移释放请求发送给视频显示装置100。增强型服务转移请求消息可具有如表33所示的HTTP请求格式。
[表33]
如表33所示,增强型服务转移释放请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素、name元素和appId元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“UnregisterAppTransfer”,即,指示此消息是控制功能转移释放请求消息的文本值。appId元素包含与增强型服务转移释放对应的增强型服务的标识符。如果没有appId元素或者其值为空(即,<appId></appId>),则与增强型服务转移释放对应的增强型服务可以是被转移给终端400的所有增强型服务。
在步骤S2759中,视频显示装置100释放对发送增强型服务转移释放请求的终端装置400的增强型服务转移。视频显示装置100可将由于增强型服务转移而注册的终端装置的数量减一。视频显示装置100可启用、重播或显示被转移给终端装置100的增强型服务。
然后,在步骤S2761中,视频显示装置100响应于增强型服务转移释放请求将包括增强型服务转移释放结果的增强型服务转移释放响应消息发送给终端装置400。增强型服务转移释放响应消息可具有如表34所示的HTTP响应格式。
[表34]
如表34所示,增强型服务转移释放响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、appID元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“UnregisterAppTransfer”,即,指示此消息是增强型服务转移释放响应消息的文本值。appId元素包含与增强型服务转移释放对应的增强型服务的标识符。result元素包含增强型服务转移释放结果作为响应。result元素的值可为OK(表示增强型服务转移释放成功完成)或NotOK(表示未成功完成)中的一个。
在步骤S2763中,终端装置400在接收到肯定注册释放结果的控制功能转移释放响应消息或肯定注册释放结果的增强型服务转移释放响应消息时终止执行的增强型服务。
图67是示出根据另一实施方式的装置之间的互通处理的梯形图。
在步骤S2801中,视频显示装置100和终端装置400执行配对处理。
在步骤S2803中,终端装置400存储关于视频显示装置100的信息以便在配对释放状态期间向视频显示装置100发送消息。
另外,在步骤S2805中,视频显示装置100存储关于终端装置400的信息以便在配对释放状态期间向终端装置400发送消息。
然后,在步骤S2807中可释放视频显示装置100与终端装置400之间的配对状态。
视频显示装置100识别出存在与主AV内容有关的可用增强型服务,并在步骤S2809中显示指示存在可用增强型服务的增强型服务通知UI。
根据实施方式,视频显示装置100从一部分主AV内容获得内容信息,并基于所获得的内容信息通过查询/响应获得关于可用增强型服务的信息,以便识别出存在与主AV内容有关的增强型服务。
根据另一实施方式,视频显示装置100通过广播网络从内容提供服务器10获得关于可用增强型服务的信息,然后识别出存在与主AV内容有关的增强型服务。
根据另一实施方式,视频显示装置10通过基于IP的网络来0基于服务发现和选择(SD&S)获得关于可用增强型服务的信息,然后识别出存在与主AV内容有关的增强型服务。视频显示装置100可获得并执行可用增强型服务。
根据另一实施方式,终端装置400基于在视频显示装置100中播放的主AV内容的捕获数据来获得增强型服务信息,视频显示装置100在向终端装置400或其它终端装置询问可用增强型服务之后获得可用增强型服务。
在步骤S2811中,视频显示装置100通过增强型服务通知UI接收与可用增强型服务的执行有关的用户输入。视频显示装置100通过遥控器接收与可用增强型服务的执行有关的用户输入。
如果可用增强型服务具有多种类型,则在步骤S2813中,视频显示装置100通过增强型服务通知UI接收用于可用增强型服务的类型选择的用户输入。视频显示装置100可通过遥控器接收用于可用增强型服务的类型选择的用户输入。所述类型可以是增强型服务转移类型或控制功能转移类型。
在步骤S2815中,视频显示装置100获得可用终端装置的列表并显示它。作为一个示例,视频显示装置100获得配对的终端装置的列表并显示它。
表35和表36示出用于获得在视频显示装置100中执行的视频显示装置的制造商应用或者与诸如自动执行应用的应用配对的终端装置的列表的APU。
在视频显示装置100中执行的应用可使用DeviceList getPairedDeviceList()函数。DeviceList getPairedDeviceList()函数返回配对的终端装置的列表。
表35示出配对的终端装置的列表DeviceList的定义。
typedef collection<Device>DeviceList
[表35]
名称
性质 Readonly Integer length//装置的数量
方法 Device item(Integer index)//在对应索引中返回Device
表36示出配对的终端装置的列表DeviceList中的Device类,即,单独的实例。
[表36]
如表36所示,在视频显示装置100中执行的应用调用getPairedDeviceList()函数,以便获得配对的终端装置的标识符、名称、类型和分辨率。
视频显示装置100可通过UI接收用于终端装置选择的用户输入。视频显示装置100可通过遥控器接收用于终端装置选择的用户输入。
然后,在步骤S2819中,视频显示装置100将具有选择的增强型服务类型的选择的增强型服务的执行请求消息发送给终端装置400。执行请求消息可包括增强型服务的地址。执行请求消息可包括增强型服务的地址。执行请求消息可包括关于选择的增强型服务类型的信息。另外,执行请求消息包括关于多个增强型服务类型的信息,使得终端装置400可选择增强型服务类型。
就这一点,选择的终端装置400可以与视频显示装置100配对或者可以不与视频显示装置100配对。在不配对状态期间,视频显示装置100可基于存储的终端装置信息通过推送通知机制将执行请求消息发送给终端装置。
在视频显示装置100中执行的应用调用Boolean transferApp(DeviceParamListdeviceList)函数以便将执行请求消息发送给终端装置。
在视频显示装置100中执行的应用可通过deviceList参数将URL发送给至少一个终端装置。
表37示出DeviceParamList的定义。
typedef collection<DeviceParam>DeviceParamList
[表37]
名称
性质 Readonly Integer length//装置的数量
方法 DeviceParam item(Integer index)//在对应索引中返回DeviceParam
表38示出DeviceParam类的性质。
[表38]
如表38所示,视频显示装置100可将APP URL或Web URL传送给由id参数标识的终端装置。
在从主AV内容的一部分获得内容信息并基于所获得的内容信息通过查询/响应获得关于可用增强型服务的信息之后,如果视频显示装置100识别出存在与主AV内容有关的可用增强型服务,则可从被识别为MIME类型的ACR Object提供表35至表38的Plugin API。
MIME Type:application/x-netcast-acr
当视频显示装置100通过广播网络从内容提供服务器10获得关于可用增强型服务的信息,或者通过基于IP的网络来基于服务发现和选择(SD&S)获得关于可用增强型服务的信息时,可从被识别为以下MIME类型的HbbTV Object提供表35至表38的Plugin API。
MIME Type:application/oipfPairedDevice
增强型服务执行请求消息可具有如表39所示的HTTP请求格式。
[表39]
如表39所示,增强型服务执行请求消息包括command元素,该元素指示视频显示装置100通过该HTTP请求向终端装置100发送命令。command元素包括session元素、type元素(或name元素)和value元素。session元素包含视频显示装置100分发给终端装置400的值。type元素包含“TransferAppTo2ndDevice”,即,指示此消息是增强型服务执行请求消息的文本值。value元素包含被转移给终端装置400的增强型服务的URL。
在步骤S2821中,终端装置400根据增强型服务执行请求消息执行增强型服务。终端装置400可在接收到用于增强型服务执行的用户输入时执行增强型服务。
在终端装置400与视频显示装置100之间的配对被释放的情况下,在步骤S2823中,终端装置400可与视频显示装置100执行配对。特别是,执行的增强型服务可执行配对。
在步骤S2825中,终端装置400将包括增强型服务执行结果(即,OK/ERROR)的增强型服务执行响应消息发送给视频显示装置100。就这一点,终端装置400可以与视频显示装置100配对或者可以不与视频显示装置100配对。在不配对状态期间,终端装置400可基于存储的视频显示装置信息通过推送通知机制将执行响应消息发送给视频显示装置。
在步骤S2827中,视频显示装置100基于包括增强型服务执行结果的增强型服务执行响应消息控制在视频显示装置100中执行的增强型服务。例如,如果在终端装置400中执行的增强型服务的类型是增强型服务转移类型,则视频显示装置100可禁用执行的增强型服务。另外,如果在终端装置400中执行的增强型服务的类型是控制功能转移类型,则视频显示装置100可禁用执行的增强型服务并启用显示功能。
图68是示出根据另一实施方式的装置之间的互通处理的梯形图。
特别是,图68示出装置之间的互通处理以便调节当转移有在视频显示装置100中执行的增强型服务的控制功能的终端装置的最大数量大于需要转移对应增强型服务的控制功能的终端装置的数量时发生的冲突。
为了描述图68,假设可转移有与当前主AV内容有关的增强型服务的控制功能的终端装置的最大数量为一。
在步骤S2901中,终端装置400将type元素值为“controller”的增强型服务请求消息提供给视频显示装置100,以便向视频显示装置100请求增强型服务的控制功能转移。
在步骤S2903中,视频显示装置100根据增强型服务请求消息控制增强型服务。由于可转移有与当前主AV内容有关的增强型服务的控制功能的终端装置的最大数量为一,并且转移有增强型服务的控制功能的终端装置的数量为零,所以视频显示装置100可将增强型服务的控制功能转移给终端装置400。由于终端装置40请求转移增强型服务的控制功能,所以视频显示装置100启用请求的增强型服务的显示功能,并生成增强型服务转移响应消息,该消息包括与请求的增强型服务的控制功能、请求的增强型服务类型和终端装置400的能力对应的增强型服务URL。
在步骤S2905中,视频显示装置100将result元素的值为OK的增强型服务转移响应消息发送给终端装置400。
在步骤S2907中,终端装置400将控制功能转移冲突事件注册请求消息发送给视频显示装置100。控制功能转移冲突事件注册请求消息可具有如表40所示的HTTP请求格式。
[表40]
如表40所示,附加控制功能转移冲突事件注册请求消息包括command元素,该元素指示视频显示装置100通过该HTTP请求向终端装置100发送命令。acrCommand元素包括session元素、name元素和appId元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“RegisterControllerConflictEvent”,即,指示此消息是附加控制功能转移冲突事件注册请求消息的文本值。appId元素包含与控制功能转移冲突事件注册对应的增强型服务的标识符。
在步骤S2909中,视频显示装置100将控制功能转移冲突事件注册确认消息发送给终端装置400。控制功能转移冲突事件注册确认消息可具有如表41所示的HTTP响应格式。
[表41]
如表41所示,控制功能转移冲突事件注册确认消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、appID元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“RegisterControllerConflictEvent”,即,指示此消息是增强型服务转移释放响应消息的文本值。appId元素包含与控制功能转移冲突事件注册对应的增强型服务的标识符。result元素包含控制功能转移冲突事件注册结果。result元素的值可为OK(表示控制功能转移冲突事件注册释放成功完成)或NotOK(表示未成功完成)中的一个。
另外,在步骤S2911中,另一终端装置410将type元素的值为“ontroller”的增强型服务请求消息提供给视频显示装置100,以便向视频显示装置100请求增强型服务的控制功能转移。
由于可转移有与当前主AV内容有关的增强型服务的控制功能的终端装置的最大数量为一个,并且转移有增强型服务的控制功能的终端装置的数量为一个,所以视频显示装置100无法将增强型服务的控制功能转移给附加终端装置410。因此,在步骤S2913中,视频显示装置100将result元素的值为Conflict的增强型服务转移响应消息发送给终端装置400。
另外,由于终端装置400在视频显示装置100中注册控制功能转移冲突事件并且控制功能转移冲突事件发生,在步骤S2915中视频显示装置100将控制功能转移冲突事件发送给终端装置400。控制功能转移冲突事件可具有以下如表42所示的格式。
[表42]
如表42所示,控制功能转移冲突事件消息包括acrEvent元素,该元素指示视频显示装置100通过该HTTP响应向终端装置400发送事件。acrEvent元素包括session元素、name元素和appId元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“ControllerConflictEvent”,即,指示此消息是控制功能转移冲突事件消息的文本值。appId元素包含发生控制功能转移冲突事件的增强型服务的标识符。
当接收到控制功能转移冲突事件时,终端装置400有权限确定是维持还是终止执行的增强型服务的控制功能。当接收到用于终止执行的增强型服务的用户输入时,在步骤S2919中终端装置400将控制功能转移释放请求消息发送给视频显示装置100。
在步骤S2921中,视频显示装置100释放对发送控制功能转移释放请求消息的终端装置400的控制功能转移。视频显示装置100可将由于控制功能转移而注册的终端装置的数量减一。
在步骤S2923中,视频显示装置100响应于控制功能转移释放请求消息将包括控制功能转移释放结果的控制功能转移释放响应消息发送给终端装置400。
由于可转移有与当前主AV内容有关的增强型服务的控制功能的终端装置的最大数量为一个,并且转移有增强型服务的控制功能的终端装置的数量为零,所以视频显示装置100可将增强型服务的控制功能转移给附加终端装置410。因此,在步骤S2925中,视频显示装置100将控制功能转移可用性通知消息发送给终端装置400。
在步骤S2927中,终端装置410将type元素的值为“controller”的增强型服务请求消息提供给视频显示装置100,以便向视频显示装置100请求增强型服务的控制功能转移。
在步骤S2929中,视频显示装置100可根据增强型服务请求消息控制增强型服务。由于可转移有与当前主AV内容有关的增强型服务的控制功能的终端装置的最大数量为一个,并且转移有增强型服务的控制功能的终端装置的数量为零,所以视频显示装置100可将增强型服务的控制功能转移给附加终端装置410。由于终端装置410请求转移增强型服务的控制功能,所以视频显示装置100启用请求的增强型服务的显示功能,并且生成增强型服务转移响应消息,该消息包括与请求的增强型服务的控制功能、请求的增强型服务类型和终端装置400的能力对应的增强型服务URL。视频显示装置100可启用或禁用请求的增强型服务的控制功能。
在步骤S2913中,视频显示装置100将result元素的值为OK的增强型服务转移响应消息发送给终端装置400。
图69是示出根据另一实施方式的装置之间的互通处理的梯形图。
即使当与主AV内容有关的增强型服务被转移给终端装置400时,视频显示装置100可不终止但禁用,或者可启用对应的增强型服务。即使当与主AV内容有关的增强型服务被转移给终端装置400时,视频显示装置100可启用对应服务的显示功能。另外,视频显示装置100可执行与主AV内容有关的多个增强型服务。
终端装置400可显示或隐藏增视频显示装置100当前执行的强型服务或者增强型服务的一些功能。
首先,在步骤S3101中,终端装置400接收用于控制目标的增强型服务选择的用户输入以及用于选择的增强型服务的显示控制的用户输入。就这一点,用于显示控制的用户输入可涉及示出或隐藏增强型服务。
在步骤S3102中,终端装置400将增强型服务显示控制请求消息发送给视频显示装置100。增强型服务显示控制请求消息可具有如表43所示的HTTP请求格式。
[表43]
如表43所示,增强型服务显示控制请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素、name元素、appID元素和show元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“ShowACRApp”,即,指示此消息是增强型服务显示控制请求消息的文本值。
appId元素包含显示控制目标增强型服务的标识符。如果不存在appId元素或者其值为空(即,<appId></appId>),则显示控制目标增强型服务可以是视频显示装置100执行的所有增强型服务。
show元素包含关于视频显示装置100是否示出与appId元素的值对应的增强型服务的信息。show元素的值可为true或false。值为true的show元素指示视频显示装置100示出与appId元素的值对应的增强型服务,值为false的show元素指示视频显示装置100隐藏与appId元素的值对应的增强型服务。
在步骤S3103中,视频显示装置100根据增强型服务显示控制请求控制显示增强型服务。当接收到show元素的值为true的增强型服务显示控制请求消息时,视频显示装置100示出与appId元素的值对应的增强型服务。当接收到show元素的值为false的增强型服务显示控制请求消息时,视频显示装置100隐藏与appId元素的值对应的增强型服务。
在步骤S3105中,视频显示装置100将对所选择的增强型服务的增强型服务控制响应消息发送给终端装置400。增强型服务显示控制响应消息可具有如表44所示的HTTP响应格式。
[表44]
如表44所示,增强型服务显示控制响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素、appID元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。name元素包含“ShowACRApp”,即,指示此消息是增强型服务显示控制响应消息的文本值。
appId元素包含显示控制目标增强型服务的标识符。如果不存在appId元素或者其值为空(即,<appId></appId>),则显示控制目标增强型服务可以是视频显示装置100执行的所有增强型服务。
result元素包含增强型服务显示控制结果。result元素的值可以是OK(表示增强型服务显示控制成功完成)或NotOK(表示未成功完成)中的一个。
图70是示出根据另一实施方式的装置之间的互通处理的梯形图。
在步骤S3301中,终端装置400接收用于控制目标媒体的选择的用户输入以及用于所选择的媒体的控制命令的用户输入。例如,用户输入可以是点击终端装置400执行的增强型服务中的特定URL或者点击用于特定媒体的控制按钮。就这一点,执行中的增强型服务可以是自动回放应用、视频显示装置的制造商应用以及上述增强型服务,例如与主AV内容有关的增强型服务。
在步骤S3302中,终端装置400将对选择的控制目标媒体的媒体回放控制请求消息发送给视频显示装置100。媒体回放控制请求消息可具有如表45所示的HTTP请求格式。
[表45]
如表45所示,媒体回放控制请求消息包括acrCommand元素(或command元素),该元素指示终端装置400通过此HTTP请求向视频显示装置100发送命令。acrCommand元素包括session元素和name元素。session元素包含视频显示装置100分发给终端装置400的会话值。
name元素包含消息所指示的控制命令。表46示出name元素所具有的值的列表。
[表46]
控制命令 url元素 speed元素 offset元素
Playback ×
Pause × × ×
Stop × × ×
Seek × ×
FF × ×
REW × ×
如果name元素的值为“playback”,则acrCommand元素还包括url元素和offset元素。url元素包含控制目标媒体的url。Offset元素包含关于回放开始位置的信息。
如果name元素的值为“seek”,则acrCommand元素还包括offset元素。Offset元素包含关于移动的位置的信息。所述位置可用时间或字节偏移来表示。
如果name元素的值为“FF”,则acrCommand元素还包括speed元素。speed元素包含关于回放速度的信息。
如果name元素的值为“REW”,则acrCommand元素还包括speed元素。speed元素包含关于回放速度的信息。
在步骤S3303中,视频显示装置100根据媒体回放控制请求消息控制媒体回放。
当name元素的值为“playback”时,视频显示装置100从与url元素的值对应的url取得媒体,并从与offset元素的值对应的位置开始回放该媒体。
当name元素的值为“pause”时,视频显示装置100可暂停回放中的媒体。
当name元素的值为“stop”时,视频显示装置100可终止回放中的媒体。
当name元素的值为“seek”时,视频显示装置100可将回放中的媒体的回放位置移到与offset元素值对应的位置。
当name元素的值为“FF”时,视频显示装置100可将回放中的媒体的回放速度改变为与speed元素值对应的速度。
当name元素的值为“REW”时,视频显示装置100可将回放中的媒体的回放速度改变为与speed元素值对应的速度。
在步骤S3305中,视频显示装置100将包括媒体回放控制结果的媒体回放控制响应消息发送给终端装置400。媒体回放控制响应消息可具有如表47所示的HTTP响应格式。
[表47]
如表47所示,媒体回放控制响应消息包括acrResponse元素(或response元素),该元素指示视频显示装置100通过该HTTP响应向终端装置400发送响应。acrResponse元素包括session元素、name元素和result元素。session元素包含视频显示装置100分发给终端装置400的会话值。
name元素包含指示此消息是对控制命令的响应消息的文本值。
result元素包含媒体回放控制结果。result元素的值可以是OK(表示媒体回放控制成功完成)或NotOK(表示未成功完成)中的一个。
图71是示出根据另一实施方式的装置之间的互通处理的梯形图。
在步骤S3501中,视频显示装置100接收用于控制目标媒体的选择的用户输入以及用于选择的媒体的控制命令的用户输入。例如,所述用户输入可以是点击终端装置400执行的增强型服务中的特定URL或者点击用于特定媒体的控制按钮。就这一点,执行中的增强型服务可以是自动回放应用、视频显示装置的制造商应用以及上述增强型服务,例如与主AV内容有关的增强型服务。视频显示装置100通过遥控器接收这种用户输入。
在步骤S3502中,视频显示装置100将对选择的控制目标媒体的媒体回放控制请求消息发送给终端装置400。媒体回放控制请求消息可具有与以下如表45所示的消息相同或相似的格式。
在步骤S3503中,终端装置400可根据媒体回放控制请求消息控制媒体回放。终端装置400可根据操作S3303执行与视频显示装置100相同或相似的操作。
在步骤S3505中,终端装置400将包括媒体回放控制结果的媒体回放控制响应消息发送给终端装置400。此媒体回放控制响应消息可具有与以下如表47所示的消息相同或相似的格式。
图72是示出根据另一实施方式的装置之间的互通处理的梯形图。
首先,在步骤S3701中,终端装置400执行互通应用。
图73是根据另一实施方式的执行互通应用的终端装置的正视图。
如图73所示,互通应用显示视频显示装置控制UI。就这一点,视频显示装置控制UI包括在顶部的用于控制视频显示装置100的各种功能按钮以及在底部的多个轻触改变按钮。视频显示装置控制UI包括用于控制视频显示装置100的音量和频道的VOL/CH轻触改变按钮、ACR轻触改变按钮以及用于改变互通应用的设置的设置轻触改变按钮。一旦点击VOL/CH轻触改变按钮,视频显示装置控制UI就可显示音量增大按钮、音量减小按钮、频道号增大按钮、频道号减小按钮、静音按钮和主画面按钮作为功能按钮。
再描述图72。
在步骤S3703中,终端装置400的互通应用和视频显示装置100执行上述配对处理。
在步骤S3705中,终端装置400的互通应用和视频显示装置100执行上述ACR控制处理。
图74是根据另一实施方式的执行互通应用的终端装置的正视图。
在终端装置400的ACR控制处理期间,终端装置400的互通应用可通过图74的按钮接收用于打开视频显示装置100的ACR功能的用户输入。当接收到用于打开视频显示装置100的ACR功能的用户输入时,终端装置400将图56的ACR ON请求消息发送给视频显示装置100。
再描述图72。
当接收到用于执行视频显示装置的制造商应用的用户输入时,在步骤S3707中,终端装置400的互通应用将视频显示装置的制造商应用的执行请求消息发送给视频显示装置100。终端装置400的互通应用可通过如图74所示的按钮接收用于执行视频显示装置的制造商应用的用户输入。
当接收到视频显示装置的制造商应用的执行请求消息时,视频显示装置100在步骤S3709中执行视频显示装置的制造商应用,并且在步骤S3711中将包括视频显示装置的制造商应用的执行结果的视频显示装置的制造商应用的执行响应消息发送给终端装置400。
在步骤S3713中,终端装置400的互通应用将请求转移视频显示装置的制造商应用的应用转移请求消息发送给视频显示装置100。应用转移请求消息可具有如表29所示的HTTP请求格式。就这一点,应用转移请求消息可请求转移视频显示装置的制造商应用,或者可请求转移视频显示装置的制造商应用的一些功能或一些内容。就这一点,一些功能中的一个可以是控制功能。
在步骤S3715中,视频显示装置100根据视频显示装置的制造商应用转移请求消息控制增强型服务。
当终端装置400请求转移视频显示装置的制造商应用的一些功能时,视频显示装置100可生成视频显示装置的制造商应用转移响应消息,该消息包括与请求的视频显示装置的制造商应用的一些功能和终端装置400的能力对应的视频显示装置的制造商应用URL。视频显示装置100可启用或禁用请求的视频显示装置的制造商应用的一些功能。
当终端装置400请求转移视频显示装置的制造商应用的一些功能时,视频显示装置100可生成视频显示装置的制造商应用转移响应消息,该消息包括与请求的视频显示装置的制造商应用的一些功能和终端装置400的能力对应的视频显示装置的制造商应用URL。视频显示装置100可启用或禁用请求的视频显示装置的制造商应用的一些功能。
当终端装置400请求转移视频显示装置的制造商应用时,视频显示装置100禁用、隐藏或终止请求的视频显示装置的制造商应用以便不显示它,全屏显示主AV内容,并生成视频显示装置的制造商应用转移响应消息,该消息包括与请求的视频显示装置的制造商应用和终端装置400的能力对应的视频显示装置的制造商应用URL。
在步骤S3717中,视频显示装置100将视频显示装置的制造商应用转移响应消息发送给终端装置400。视频显示装置的制造商应用转移响应消息可具有如表30所示的HTTP响应格式。视频显示装置的制造商应用转移响应消息可包括关于在视频显示装置100中执行的视频显示装置的制造商应用的状态信息。
在步骤S3719中,终端装置400的互通应用基于视频显示装置的制造商应用URL获得并执行视频显示装置的制造商应用。如果视频显示装置的制造商应用转移响应消息包括关于在视频显示装置100中执行的视频显示装置的制造商应用的状态信息,终端装置400的互通应用可通过根据状态信息执行视频显示装置的制造商应用来连续地提供服务。
在步骤S3721中,终端装置400将视频显示装置的制造商应用转移释放请求消息发送给终端装置400。视频显示装置的制造商应用转移释放请求消息可具有如表31或表33所示的HTTP请求格式。视频显示装置的制造商应用转移释放请求消息可包括关于在视频显示装置400中执行的视频显示装置的制造商应用的状态信息。
在步骤S3723中,视频显示装置100释放对发送视频显示装置的制造商应用转移释放请求消息的终端装置400的视频显示装置的制造商应用转移。特别是,如果视频显示装置的制造商应用转移释放请求消息包括关于在终端装置400中执行的视频显示装置的制造商应用的状态信息,则视频显示装置400可通过根据状态信息启用视频显示装置的制造商应用来连续地提供服务。
然后,在步骤S3725中,视频显示装置100响应于视频显示装置的制造商应用转移释放请求消息将包括视频显示装置的制造商应用转移释放结果的视频显示装置的制造商应用转移释放响应消息发送给终端装置400。视频显示装置的制造商应用转移释放响应消息可具有如表32或表34所示的HTTP响应格式。
当接收到视频显示装置的制造商应用转移释放响应消息时,在步骤S3727中,终端装置400的互通应用终止视频显示装置的制造商应用。
当接收到用于终止视频显示装置的制造商应用的用户输入时,在步骤S3729中,终端装置400的互通应用将视频显示装置的制造商应用的终止请求消息发送给视频显示装置100。终端装置400的互通应用可通过如图74所示的按钮来接收用于终止视频显示装置的制造商应用的用户输入。
当接收到视频显示装置的制造商应用的终止请求消息时,视频显示装置100在步骤S3731中终止视频显示装置的制造商应用,并在步骤S3733中将包括视频显示装置的制造商应用的终止结果的视频显示装置的制造商应用的终止响应消息发送给终端装置400。
图74主要基于视频显示装置的制造商应用进行描述。然而,诸如自动回放应用的其它应用也可应用于图74。
将参照图75至图82描述根据各种实施方式的UI和使用情况。
图75是根据另一实施方式的执行互通应用的终端装置的正视图。
如图75所示,终端装置400可显示可用增强型服务的内容标识符、内容时间信息和URL作为关于互通应用的UI,这些信息是通过内容识别状态响应消息、增强型服务发生事件消息、增强型服务转移响应消息或内容识别状态改变事件消息获得的。
图76是根据另一实施方式的执行互通应用的终端装置的正视图。
如图76所示,当视频显示装置100将主AV内容搜索相关事件发送给终端装置400时,因此,终端装置400获得并显示搜索结果。基于此,用户可执行附加搜索。通过此,用户可自由地使用搜索服务而不会体验到不便,例如TV遥控器的有限输入以及阻挡观看画面的TV浏览器。
图77是根据另一实施方式的执行互通应用的终端装置的正视图。
如图77所示,终端装置400可获得并显示与主AV内容有关的地点的地图数据。此外,终端装置400可在地图上另外显示与主AV内容有关的详细位置信息。
图78是根据另一实施方式的执行互通应用的终端装置的正视图。
如图78所示,一旦选择视频显示装置的制造商应用中的聊天服务,视频显示装置100将与所述选择有关的事件发送给终端装置400,并且因此,终端装置400获得并显示视频显示装置的制造商应用的控制功能。就这一点,视频显示装置的制造商应用的控制功能可以是显示在触摸屏上的键盘或键区。
图79是根据另一实施方式的执行互通应用的终端装置的正视图。
如图79所示,当选择视频显示装置的制造商应用中的下载服务时,视频显示装置100将与所述选择有关的事件发送给终端装置400,并且因此,终端装置400下载选择的项,然后存储、管理并播放它。
图80是根据另一实施方式的执行互通应用的终端装置的正视图。
终端装置400的互通应用可以按照历史形式存储通知的事件。然后,如图80所示,终端装置400可通过用户选择显示存储的事件的列表。存储的事件的列表上的项可被再次访问,或者可被删除。当访问存储的事件的列表上的一项被选择时,终端装置400可根据与所选择的项对应的事件来执行操作。
图81是根据另一实施方式的执行互通应用的终端装置的正视图。
如图81所示,终端装置400可回放视频,该视频是与正在视频显示装置100中播放的主AV内容有关的增强型服务。
图82是根据另一实施方式的执行互通应用的终端装置中的显示单元的顶部正视图。
视频显示装置100将web应用形式的事件发送给终端装置400。因此,互通应用可提供附加UI以使得用户的附加导航方便。如图82所示,互通应用可提供用于重新加载web应用的重新加载按钮、用于查看主页的主画面按钮、用于查看前一页的向后按钮、用于查看下一页的向前按钮以及用于直接输入web地址以便于用户的附加搜索的地址窗口。
另外,如图82所示,互通应用可提供ACR状态复选框、常用应用(Common App)复选框、ACR事件复选框以及用于视频显示装置100和终端装置400之间的应用的选择框。
当勾选ACR状态复选框时,终端装置400可将内容识别状态请求消息发送给视频显示装置100。
当取消勾选ACR状态复选框时,终端装置400可将内容识别状态请求释放消息发送给视频显示装置100。
当勾选常用应用复选框时,终端装置400可将常用应用执行请求消息发送给视频显示装置100。
当取消勾选常用应用复选框时,终端装置400可将常用应用终止请求消息发送给视频显示装置100。
当勾选ACR事件复选框时,终端装置400可将事件注册请求消息提供给视频显示装置100。
当取消勾选ACR事件复选框时,终端装置400可将事件注册释放消息发送给视频显示装置100。
当通过用于视频显示装置100和终端装置400之间的应用的选择框选择视频显示装置100时,在终端装置400中执行的增强型服务可被转移至视频显示装置100。例如,终端装置400可将增强型服务转移释放请求消息或常用应用转移释放请求消息发送给视频显示装置100。
当通过用于视频显示装置100和终端装置400之间的应用的选择框选择终端装置400时,在视频显示装置100中执行的增强型服务可被转移至终端装置400。例如,终端装置400可将增强型服务转移请求消息或常用应用转移请求消息发送给视频显示装置100。
然后,将参照图83描述根据实施方式的通过基于IP的网络获得应用信息表(AIT)的方法。
图83是示出根据实施方式的通过基于IP的网络获得AIT的方法的流程图。
特别是,图83是示出视频显示装置100基于服务发现和选择(SD&S)获得AIT的方法的视图。
首先,在步骤S3901中,视频显示装置100确定服务发现入口点。根据实施方式,视频显示装置100可将熟知的多播地址确定为服务发现入口点。根据另一实施方式,视频显示装置100可接收SD&S入口点的列表,然后可将它们中的一个确定为服务发现入口点。
在步骤S3903中,视频显示装置100通过基于IP的网络从所确定的服务发现入口点接收服务提供商发现信息。服务提供商发现信息可包括至少一个服务提供商信息元素。各个服务提供商信息元素可包括服务提供商的名称、关于服务提供商的详细信息以及服务提供商的域名。
在步骤S3905中,视频显示装置100基于服务提供商的域名访问服务提供商发现信息中的一个或更多个服务提供商当中的一个。
在步骤S3907中,视频显示装置100通过基于IP的网络从访问的服务提供商接收AIT。视频显示装置100从访问的服务提供商接收SD&S信息,并且解析所获得的SD&S信息以便获得AIT。
接下来,将参照图84至图86描述根据实施方式的SD&S信息。
图84是示出根据实施方式的SD&S信息的结构的视图。
如图84所示,视频显示装置100接收包括ServiceDiscovery元素作为SD&S信息的XML文档。
ServiceDiscovery元素选择地包括至少一个BroadcastDiscovery元素、至少一个CodDiscovery元素、至少一个ServiceFromOtherSP元素、至少一个PackageDiscovery元素、至少一个ServiceProviderDiscovery元素以及零个或至少一个ApplicationDiscovery元素。
ServiceDiscovery元素中包括什么种类的元素可由有效载荷标识符来标识。表48示出有效载荷标识符与SD&S信息的类型之间的关系。
[表48]
BroadcastDiscovery元素包括视频显示装置100搜索实时媒体广播服务所需的信息。
CodDiscovery元素提供视频显示装置100发现可用CoD服务所需的信息。
ServiceFromOtherSP元素提供关于另一服务提供商所提供的服务的信息。
PackageDiscovery元素提供关于服务集的信息。一个服务可属于至少一个分组。服务可以不必属于任意分组。
ServiceProviderDiscovery元素包括关于服务提供商的信息。
ApplicationDiscoveryelement包括关于服务提供商所提供的可用应用的信息。
BroadcastDiscovery元素具有BroadcastOffering类型,BroadcastOffering类型的元素包括至少一个ServiceList元素。
ServiceList元素具有ServiceList类型,ServiceList类型的元素包括零个或至少一个ServiceDescriptionLocation元素以及至少一个SingleService元素。
SingleService元素具有IPService类型,IPService类型的元素包括ServiceLocation元素、TextualIdentifier元素、DVBTriplet元素、MaxBitrate元素和SI元素。另外,IPService类型的元素选择地包括零个或至少一个ApplicationList元素以及零个或至少一个AITDescriptor元素。
视频显示装置100可基于AITDescriptor元素所包括的信息来通过基于IP的网络利用MPEG2语法接收AIT。在这种情况下,视频显示装置100还可执行图87所示的操作。
ServiceLocation元素包括服务可能被找到的位置。ServiceLocation元素可包括IP多播地址或实时流协议(RTSP)URL。
TextualIdentifier元素包括在MHP中定义的文本标识符。
DVBTriplet元素包括如DVB中定义的原始网络标识符、传输流标识符和服务标识符。
MaxBitrate元素包括承载服务的总体流的最大比特率。
SI元素包括关于服务的信息。
ApplicationList元素具有ApplicationList类型,并且包括零个或至少一个ApplicationList元素以及零个或至少一个ApplicationReference。ApplicationReference元素具有ApplicationIdentifier类型,并且参考ApplicationDescovery元素中的application元素。
此外,ApplicationDiscovery元素具有ApplicationOfferingType类型,并且包括零个或至少一个ApplicationList元素。ApplicationDiscovery元素中的ApplicationList元素包括零个或至少一个Application元素。
图85是示出根据另一实施方式的SD&S信息的结构的视图。
如图85所示,视频显示装置100接收包括ServiceDiscovery元素作为SD&S信息的XML文档。
ServiceDiscovery元素选择地包括至少一个BroadcastDiscovery元素、至少一个CodDiscovery元素、至少一个ServiceFromOtherSP元素、至少一个PackageDiscovery元素、至少一个ServiceProviderDiscovery元素以及零个或至少一个ApplicationDiscovery元素。
PackageDiscovery具有PackagedServices类型,并且包括至少一个Package元素。
Package元素包括至少一个Package元素、至少一个Service元素、零个或至少一个CountryAvailability元素、零个或至少一个PackageDescription元素以及至少一个ApplicationList元素。
ApplicationList元素具有ApplicationList类型,并且包括零个或至少一个ApplicationList元素以及零个或至少一个ApplicationReference。ApplicationReference元素具有ApplicationIdentifier类型,并且参考ApplicationDescovery元素中的application元素。
此外,ApplicationDiscovery元素具有ApplicationOfferingType类型,并且包括零个或至少一个ApplicationList元素。ApplicationDiscovery元素中的ApplicationList元素包括零个或至少一个Application元素。
图86是示出根据实施方式的SD&S信息的结构的视图。
Application元素具有Application类型,并且包括零个或至少一个appName元素、applicationIdentifier元素、applicationDescriptor元素、零个或至少一个applicationSpecificDescriptor元素、零个或至少一个applicationUsageDescriptor元素、零个或至少一个applicationBoundary元素、至少一个applicationTransport元素以及applicationLocation元素。
appName元素包括应用的名称。
applicationIdentifier元素包括应用的标识符。
applicationTransport元素包括关于由applicationIdentifier元素标识的应用是通过广播网络还是基于IP的网络获得的信息。
如果应用是通过基于IP的网络获得的,则applicationLocation元素可包括诸如URL的IP地址,该IP地址用于获得由applicationIdentifier元素标识的应用。
接下来,将参照图87描述根据实施方式的通过广播网络获得关于可用增强型服务的信息的方法。
图87是示出根据实施方式的通过广播网络获得关于可用增强型服务的信息的方法的流程图。特别是,图87的视频显示装置100接收AIT作为可用增强型服务。
首先,在步骤S4101中,视频显示装置100接收节目映射表。节目映射表可具有如表49所示的语法。
[表49]
如表49所示,节目映射表包括table_id字段、Section_syntax_indicator字段、section_length字段、program_number字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、PCR_PID字段、program_info_length字段、descriptor循环、基本流循环和CRC_32字段。
节目映射表的table_id字段用0x02设置,section_syntax_indicator字段用1设置。
section_length字段指示紧随section_length字段之后直至CRC_32字段的字节数。
program_number字段指示可应用program_map_PID的节目。
version_number字段指示节目映射表的版本号。
current_next_indicator字段指示节目映射表当前是否可应用。
section_number字段可用0x00设置。
section_number字段可用0x00设置。
PCR_PID字段指示包括用于program_number字段所指示的节目的有效节目时钟基准(PCR)字段的传输流分组的分组标识符(PID)。
program_info_length字段指示descriptor循环具有N个descriptor()字段。
CRC_32字段包括用于节目映射表的循环冗余校验(CRC)值。
基本流循环具有N1个循环项。各个循环项具有stream_type字段、elementary_PID字段、ES_info_length字段和N2个descriptor()字段。
stream_type字段可指示通过具有由elementary_PID字段定义的PID的分组承载的program元素的类型。当相关program元素是AIT,stream_type字段的值为0x05。
elementary_PID字段可指示承载相关program元素的传输流分组的分组标识符。
ES_info_length字段可指示相关program元素的描述符的字节数。
descriptor()字段可包括相关program元素的描述符。descriptor()字段可包括用于AIT的应用信令描述符。表50示出应用信令描述符。
[表50]
如表50所示,应用信令描述符包括descriptor_tag字段、descriptor_length字段、N个application_type字段以及N个AIT_version_number字段。
descriptor_tag字段可包括用于标识描述符的信息。如果描述符是应用信令描述符,则descriptor_tag字段的值可为0x6F。
descriptor_length字段可指示跟随在descriptor_length字段之后的字节数。
application_type字段可指示AIT子表的应用类型。
AIT_version_number字段可指示由application_type字段标识的AIT子表的当前版本号。
在步骤S4103中,视频显示装置100确认承载与节目映射表的基本流循环中的增强型服务信息对应的AIT的传输流分组的分组标识符。视频显示装置100可将descriptor_tag字段的值为0x6F的基本流循环的elementary_PID字段的值确定为承载AIT的传输流分组的分组标识符。
在步骤S4105中,视频显示装置100基于所确认的分组标识符从广播网络接收承载AIT(即,增强型服务信息)的传输流分组。
在步骤S4107中,视频显示装置100从基于所确认的分组标识符接收的传输流分组提取AIT(即,增强型服务信息)。表51示出AIT。
[表51]
如表51所示,AIT包括table_id字段、section_syntax_indicator字段、section_length字段、test_application_flag字段、application_type字段、version_number字段、current_next_indicator字段、section_number字段、last_section_number字段、common_descriptors_length字段、descriptor循环、application_loop_length字段和application循环。
table_id字段的值可以是标识AIT的0x74。
section_syntax_indicator字段可用1设置。
section_length字段指示紧随在section_length字段之后直至CRC_32字段的字节数。
test_application_flag字段指示应用是否用于测试。
application_type字段可指示AIT子表中描述的应用类型。
version_number字段指示AIT子表的版本号。
current_next_indicator字段可用1设置。
section_number字段可指示区段号。AIT子表中的第一区段的section_number字段可用0x00设置。对于具有相同table_id字段和application_type字段的附加区段,附加section_number字段可加一。
last_section_number字段指示AIT子表的最后区段号。
common_descriptors_length字段可指示descriptor循环的长度。
application_loop_length字段可指示application循环的长度。
application循环包括application_identifier()字段、application_control_code字段、application_descriptors_loop_length字段和application descriptor循环。
application_identifier()字段可指示应用标识符。
application_control_code字段可控制应用的状态。
application_descriptors_loop_length字段可指示application descriptor循环的长度。
application descriptor循环可包括关于由application_identifier()字段标识的应用的详细描述。
application descriptor循环包括关于由application_identifier()字段标识的应用是通过广播网络还是基于IP的网络获得的信息。如果应用是通过基于IP的网络获得的,则application descriptor循环可包括诸如URL的IP地址,其用于获得应用。
接下来,将参照图88和图93描述根据另一实施方式的提供增强型服务的方法。
图88是示出根据另一实施方式的提供增强型服务的方法的梯形图。
首先,在步骤S4301中,终端装置400执行互通应用。将参照图89描述根据实施方式的互通应用。
图89是根据另一实施方式的执行互通应用的终端装置的正视图。
如图89所示,互通应用显示视频显示装置控制UI。就这一点,视频显示装置控制UI包括在顶部的用于控制视频显示装置100的各种功能按钮以及在底部的多个轻触改变按钮。视频显示装置控制UI包括用于控制视频显示装置100的音量和频道的VOL/CH轻触改变按钮、ACR轻触改变按钮以及用于改变互通应用的设置的设置轻触改变按钮。一旦点击VOL/CH轻触改变按钮,视频显示装置控制UI就可显示音量增大按钮、音量减小按钮、频道号增大按钮、频道号减小按钮、静音按钮和主画面按钮作为功能按钮。
再描述图88。
在步骤S4303中,终端装置400的互通应用和视频显示装置100执行配对处理。
然后,在步骤S4305中,终端装置400的互通应用将ACR能力请求消息发送给视频显示装置100,以便询问视频显示装置100是否支持ACR。
在步骤S4307中,视频显示装置100响应于ACR能力请求消息将ACR能力响应消息发送给终端装置400。ACR能力响应消息包括关于视频显示装置100是否支持ACR的信息。
然后,在步骤S4309中,终端装置400的互通应用基于ACR能力响应消息确定视频显示装置100是否支持ACR。
当视频显示装置100不支持ACR时,终端装置400在步骤S4310中开启ACR功能,并且在步骤S4311中获得视频显示装置100所输出的一部分AV内容的捕获数据。根据实施方式,终端装置通过经由麦克风或相机捕获视频显示装置100所输出的一部分视频或音频来获得捕获数据。根据另一实施方式,包括用于与视频显示装置100通信的通信模块的终端装置400向视频显示装置100请求AV内容捕获数据,进而通过配对会话接收视频显示装置100所捕获的AV内容,以便获得捕获数据。
在步骤S4313中,终端装置400基于捕获数据通过像支持ACR的视频显示装置100一样执行ACR来获得关于主AV内容的内容信息。例如,根据实施方式,终端装置400可执行图3的操作S109至S125。根据另一实施方式,终端装置400可执行图6的操作S213至S225。根据另一实施方式,终端装置400可执行图9的操作S313至S325。
终端装置400将所获得的内容信息发送给视频显示装置100。在这种情况下,视频显示装置100还可基于所获得的内容信息执行上述操作。
在步骤S4315中,终端装置400基于所获得的内容信息通过基于IP的网络获得增强型服务,然后执行所获得的增强型服务。增强型服务可以是聊天服务、用于示出拍摄者的位置的服务、用于示出内容信息的服务和下载服务中的一个。将参照图90描述用于示出内容信息的服务。
图90是根据另一实施方式的执行用于示出内容信息的服务的终端装置的正视图。
如图90所示,终端装置400可通过消息框显示所获得的内容信息。
再描述图88。
然后,终端装置400在步骤S4317中执行增强型服务互通,并在步骤S4319中通过配对会话执行装置之间的互通。终端装置400可执行上述增强型服务互通。终端装置400可执行上述装置之间的互通。
图91是示出根据另一实施方式的装置之间的互通方法的梯形图。
在步骤S4320中,终端装置400的互通应用显示询问用户以确定是否将获得的增强型服务提供给视频显示装置100的UI。将参照图92描述该UI。
图92是根据实施方式的显示询问用户以确定是否将增强型服务提供给视频显示装置的UI的终端装置的正视图。
如图92所示,终端装置400可通过消息框询问用户以确定是否将增强型服务提供给视频显示装置。
再描述图91。
如果用户想要将增强型服务提供给视频显示装置100,则在步骤S4321中,终端装置400通过配对会话将所获得的增强型服务提供给视频显示装置100。终端装置400可将所获得的增强型服务的URL提供给视频显示装置100,或者可将所获得的增强型服务数据提供给视频显示装置100。终端装置400可将与视频显示装置100的能力对应的增强型服务的URL提供给视频显示装置100,或者可将与视频显示装置100的能力对应的增强型服务数据提供给视频显示装置100。
根据实施方式,终端装置400将整个获得的增强型服务发送给视频显示装置100。
根据另一实施方式,终端装置400可将所获得的增强型服务的显示功能提供给视频显示装置100。特别是,此情况的增强型服务可以是聊天服务。
在步骤S4323中,视频显示装置100执行终端装置400所提供的增强型服务。如果终端装置400将增强型服务的URL提供给视频显示装置100,则视频显示装置100基于该URL获得增强型服务数据,然后执行所获得的增强型服务数据。
在步骤S4325中,视频显示装置100通过配对会话将包括增强型服务执行结果的增强型服务执行响应发送给终端装置400。另外,在步骤S4327中,视频显示装置100执行增强型服务互通。
将参照图93描述执行增强型服务的视频显示装置100。
图93是从终端装置接收增强型服务并执行它的视频显示装置的正视图。
如图93所示,视频显示装置100从终端装置400获得增强型服务,并通过部分画面来显示所获得的增强型服务。
再描述图91。
在步骤S4329中,终端装置400基于增强型服务执行响应的增强型服务执行结果来控制增强型服务。当终端装置400将整个获得的增强型服务提供给视频显示装置100时,它可启用或禁用所执行的增强型服务。当终端装置400将获得的增强型服务的显示功能提供给视频显示装置100时,它可启用或禁用所提供的显示功能,或者可简化显示功能的UI。
然后,终端装置400和视频显示装置100执行装置之间的增强型服务互通处理。
接下来,将参照图94和图95描述根据各种实施方式的视频显示装置的结构。
图94是示出根据另一个实施方式的基于指纹的视频显示装置的结构的框图。
如图94中所示,调谐器501从通过广播频道发送的8-VSB RF信号中提取符号。
8-VSB解调器503对调谐器501提取的8-VSB符号进行解调并且恢复有意义的数字数据。
VSB解码器505对8-VSB解调器503用于恢复ATSC主服务和ATSC M/H服务的数字数据进行解码。
MPEG-2TP解复用器507从通过8-VSB信号发送的MPEG-2传输包中过滤出视频显示装置100将要处理的传输包或者PVR存储器中存储的MPEG-2传输包,以将过滤出的传输包转达到处理模块。
PES解码器539缓冲并恢复通过MPEG-2传输流发送的分组基本流。
PSI/PSIP解码器541缓冲并分析通过MPEG-2传输流发送的PSI/PSIP段数据。经分析的PSI/PSIP数据由服务管理器(未示出)收集,然后以服务地图和指南数据的形式存储在DB中。
DSMCC段缓冲器/处理器511通过MPEG-2TP和IP数据包封装处理供DSMCC段数据,以进行文件发送。
IP/UDP数据包缓冲器/头部解析器513缓冲并恢复通过DSMCC可寻址段封装并且通过MPEG-2TP发送的IP数据包,以分析每个数据包的头部。另外,IP/UDP数据包缓冲器/头部解析器513缓冲并恢复通过IP数据包发送的UDP数据包,然后分析并处理经恢复的UDP头部。
流组件处理器557可以包括ES缓冲器/处理器、PCR处理器、STC模块、解扰器、CA流缓冲器/处理器和服务信令段缓冲器/处理器。
ES缓冲器/处理器缓冲并恢复基本流如以PES形式发送的食品和音频数据,以将其传递到正确的A/V解码器。
PCR处理器处理用于音频和视频流的时间同步的节目时钟基准(PCR)数据。
STC模块校正使用通过PCR处理器接收的基准时钟值来校正A/V解码器的时钟值,以执行时间同步。
当向接收到的IP数据包施加扰频时,解扰器通过使用CA流处理器传递的加密钥恢复负载的数据。
CA流缓冲器/处理器缓冲并处理用于对EMM和ECM进行解扰的数据如加密值,所述数据是通过MPEG-2TS或IP流针对条件接收函数发送的。CA流缓冲器/处理器的输出被传递到解扰器,然后解扰器将携载A/V数据和文件数据的MPEG-2TP或IP数据包进行解扰。
服务信令段缓冲器/处理器缓冲、恢复并分析以IP数据包形式发送的NRT服务信令信道段数据。服务管理器(未示出)收集经分析的NRT服务信令信道段数据并且将其以服务图和指南数据的形式存储。
A/V解码器561对通过ES处理器接收的音频/视频数据进行解码,以将其向用户程序。
MPEG-2服务解复用器(未示出)可以包括MPEG-2缓冲器/解析器、解扰器和PVR存储模块。
MPEG-2TP缓冲器/解析器(未示出)缓冲并恢复通过8-VSB信号发送的MPEG-2传输包,并且还检测并处理传输包头部。
解扰器通过对MPEG-2TP中的被施加扰频的包负载使用由CA流处理器传递的加密钥来恢复负载的数据。
PVR存储模块在用户请求时存储通过8-VSB信号接收的MPEG-2并且在用户请求时输出MPEG-2TP。PVR存储模块可以受PVR管理器(未示出)控制。
文件处理器551可以包括ALC/LCT缓冲器/解析器、FDT处理器、XML解析器、文件重构缓冲器、解压缩器、文件解码器和文件存储器。
ALC/LCT缓冲器/解析器缓冲并恢复通过UDP/IP流发送的ALC/LCT数据,并且分析ALC/LCT的头部和头部扩展。ALC/LCT缓冲器/解析器可以受NRT服务管理器(未示出)控制。
FDT处理器分析并处理通过ALC/LCT会话发送的FLUTE协议的文件说明表。FDT处理器可以受NRT服务管理器(未示出)控制。
XML解析器分析通过ALC/LCT会话发送的XML文档,然后将经分析的数据发送到正确的模块如FDT处理器和SG处理器。
文件重构缓冲器恢复通过ALC/LCT、FLUTE会话发送的文件。
如果通过ALC/LCT和FLUTE会话发送的文件被压缩,则解压缩器执行处理以对文件进行解压缩。
文件解码器对文件重构缓冲器中恢复的文件、在解压缩器中解压缩的文件或从文件存储器中提取的文件进行解码。
如果有必要,文件存储器存储或提取经恢复的文件。
M/W机(未示出)处理数据如文件,该数据不是通过DSMCC段和IP数据包发送的A/V流。M/W机将经处理的数据传递到呈现管理器模块。
SG处理器(未示出)收集并分析以XML文档形式发送的服务指南数据,然后将数据传递到EPG管理器。
服务管理器(未示出)收集并分析通过MPEG-2传输流发送的PSI/PSIP数据和通过IP流发送的服务信令段数据,以生成服务地图。服务管理器(未示出)将所生成的服务地图存储在服务地图&指南数据库中,并且控制进入用户想要的服务。服务管理器受操作控制器(未示出)控制,并且控制调谐器501、MPEG-2TP解复用器507和IP数据包缓冲器/处理器513。
NRT服务管理器(未示出)对通过FLUTE会话以对象/文件形式发送的NRT服务执行整体管理。NRT服务管理器(未示出)可以控制FDT处理器和文件存储器。
应用程序管理器(未示出)对以对象和文件形式发送的应用程序数据执行整体管理。
UI管理器(未示出)通过用户接口将用户输入传递到操作控制器,并且开始针对用户请求的服务的处理。
操作控制器(未示出)处理通过UI管理器接收的用户的命令,并且允许必要模块的管理器执行对应动作。
指纹提取器565从AV流中提取指纹特征信息。
指纹比较器567将通过指纹提取器提取的特征信息与基准指纹进行比较,以找到相同的内容。指纹比较器567可以使用本地存储的基准指纹DB并且可以在互联网上查询指纹查询服务器以接收结果。通过比较结果获得的匹配的结果数据可以被传递到应用程序并且可以被使用。
因为ACR功能管理模块或应用程序模块基于ACR提供增强型服务,所以应用程序569在观看过程中识别广播内容,以提供涉及它的增强型服务。
图95是示出根据另一个实施方式的基于水印的视频显示装置的结构的框图。
尽管图95的基于水印的视频显示装置与图94的基于指纹的视频显示装置类似,但是基于指纹的视频显示装置不包括指纹提取器565和指纹比较器567,但是还包括水印提取器566。
水印提取器566从音频/视频流中提取以水印形式插入的数据。所提取的数据可以被传递到应用程序并且可以被使用。
接下来,将参照图96描述根据实施方式的终端装置的结构。
图96是根据实施方式的终端装置的框图。
终端装置400包括无线通信单元410、音频/视频(A/V)输入单元420、用户输入单元430、感测单元440、输出单元450、存储器460、接口单元470、控制单元480、电源单元490等。由于终端装置400不限于图96所示的组件,可以利用更多或更少的组件实现。
以下将依次描述这些组件。
无线通信单元410可包括允许终端装置400与无线通信系统之间或者终端装置400与终端装置400所属于的网络之间的无线通信的至少一个模块。例如,无线通信单元410可包括广播接收模块411、移动通信模块412、无线互联网模块413、近距离通信模块414和位置信息模块415。
广播接收模块411通过广播频道从外部广播管理服务器接收广播信号和/或广播相关信息。
广播频道可包括卫星频道和地面频道。广播管理服务器可指生成并发送广播信号和/或广播相关信息的服务器,或者接收先前生成的广播信号和/或广播相关信息并将其发送给终端的服务器。除了TV广播信号、无线电广播信号和数据广播信号之外,广播信号可包括数据TV广播信号和TV广播信号或无线电广播信号的组合形式的广播信号。
广播相关信息可指关于广播频道、广播节目或广播服务提供商的信息。广播相关信息可通过移动通信网络来提供。在这种情况下,广播相关信息可通过移动通信模块412来接收。
广播相关信息可以按照各种形式存在。例如,广播相关信息可以是诸如DMB(数字多媒体广播)的电子节目指南(EPG)或手持数字视频广播(DVB-H)的电子服务指南(ESG)的形式。
广播接收模块411可利用诸如地面数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、仅媒体前向链路(MediaFLO)、手持数字视频广播(DVB-H)和地面综合业务数字广播(ISDB-T)的数字广播系统来接收数字广播信号。当然,广播接收模块411可被配置为适合于数字广播系统以及其它广播系统。
通过广播接收模块411接收的广播信号和/或广播相关信息可存储在存储器460中。
移动通信模块412在移动通信网络上向基站、外部终端和服务器中的至少一个发送无线信号/从其接收无线信号。无线信号可包括根据语音呼叫信号、视频呼叫信号或字符/多媒体消息传输的各种形式的数据。控制单元480可通过移动通信模块412与基于IP的网络通信。另外,控制单元480通过移动通信模块412与视频显示装置100通信。
无线互联网模块413是指用于无线互联网接入的模块,并且可嵌入或外部安装在终端装置400上。无线互联网技术包括无线LAN(WLAN)(即,Wi-Fi)、无线宽带(Wibro)、全球微波接入互操作性(Wimax)和高速下行链路分组接入(HSDPA)。控制单元480可通过无线互联网模块413与基于IP的网络通信。另外,控制单元480可通过无线通信模块413与视频显示装置100通信。
近距离通信模块414是指用于近距离通信的模块。近距离通信技术包括蓝牙、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)以及ZigBee。控制单元480可通过近距离通信模块414与视频显示装置100通信。
位置信息模块415是用于获得终端装置的位置的模块,其代表性示例包括全球定位系统(GPS)模块。
A/V输入单元420用于音频信号或视频信号输入,并且可包括相机421和麦克风422。相机421处理在视频呼叫模式或拍照模式期间通过图像传感器获得的静止图像或运动图像的图像帧。经处理的图像帧可显示在显示单元451上。
在相机421中处理的图像帧可存储在存储器460中,或者可通过无线通信单元410向外部发送。可根据使用环境配备至少两个相机421。
麦克风422在呼叫模式、录制模式或语音识别模式期间通过麦克风接收外部声音信号,然后将所接收到的信号处理为电语音数据。在呼叫模式的情况下,经处理的语音数据可被转换成能够利用移动通信模块412发送给移动通信基站的格式,然后可被输出。在麦克风122中可实现各种噪声消除算法以消除在接收外部声音信号时发生的噪声。
用户输入单元430针对用户对终端的操作控制生成输入数据。用户输入单元430可包括键区、薄膜开关(dome switch)、触摸板(电阻式/电容式)、滚轮(jog wheel)和触合式开关(jog switch)。
感测单元440通过感测终端装置400的当前状态(例如终端装置400的闭合/打开状态、终端装置400的位置、终端装置400的用户接触、终端装置400的取向以及终端装置400的加速/减速)来生成用于控制终端装置400的操作的感测信号。例如,如果终端装置400为滑盖电话的形式,则感测单元440感测滑盖电话是打开的还是闭合的。另外,感测单元440感测电源单元490是否供电或者接口单元470是否与外部装置组合。此外,感测单元440可包括接近传感器441。
输出单元450生成视觉、听觉或触觉输出,并且包括显示单元451、声音输出模块452、警报单元453和触觉模块454。
显示器451显示(输出)由终端装置400处理的信息。例如,当终端装置400处于呼叫模式时,显示单元451显示呼叫相关UI或GUI。当终端装置400处于视频呼叫模式或拍照模式时,显示单元451显示拍摄或/和接收的图像、UI或GUI。
显示模块451包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器和三维显示器中的至少一个。
一些显示器可配置为透明型或光透射型,以便穿过显示器看到外部。这可称为透明显示器,其代表性示例为透明OLED(TOLED)。显示单元451可配置有背面结构或光透射结构。根据这种结构,用户可穿过终端主体的显示单元451所占据的区域看到终端主体背后的物体。
根据终端装置400的实现形式,可提供至少两个显示单元451。例如,多个显示单元可在一侧彼此间隔开,可一体地设置在一侧,或者可分别设置在终端装置400中的不同侧。
当显示单元451和触摸操作感测传感器(以下称为触摸传感器)具有相互层结构(以下称为触摸屏)时,除了输出装置之外,显示单元451可用作输入装置。触摸传感器可具有诸如触摸膜、触摸片和触摸板的形式。
触摸传感器可被配置为将施加于显示单元451的特定部分的压力变化或在显示单元451的特定部分处发生的电容变化转换为电输入信号。除了触摸位置和区域之外,触摸传感器可被配置为检测触摸期间的压力。
如果对触摸传感器提供了触摸输入,则与其对应的信号被发送给触摸控制器。触摸控制器处理所述信号,然后将对应数据发送给控制单元480。这样,控制单元480识别显示单元451的哪一区域被触摸。
可在终端装置400被触摸屏包围的内部区域中或触摸屏附近设置接近传感器441。接近传感器441是在没有机械接触的情况下,利用电磁力或红外线检测靠近预定检测面的物体或者存在于接近传感器441附近的物体的传感器。与接触型传感器相比,接近传感器441具有更长的寿命和更高的实用性。
接近传感器441可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡型接近传感器、电容型接近传感器、磁性接近传感器和红外接近传感器。如果触摸屏为电容型,则其被配置为利用电场随指针的接近而发生的改变来检测指针的接近。在这种情况下,触摸屏(即,触摸传感器)可归类为接近传感器。
为了方便描述,识别指针被置于触摸屏上的动作称为“接近触摸”,指针实际接触触摸屏的动作称为“接触触摸”。指针通过接近触摸接触触摸屏的位置表示指针通过接近触摸垂直接触触摸屏。
接近传感器检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸方向、接近触摸速度、接近触摸时间、接近触摸位置和接近触摸移动状态)。关于检测到的接近触摸操作和接近触摸模式的信息可在屏幕上输出。
音频输出模块452可在呼叫信号接收、呼叫模式、录制模式、语音识别模式或广播接收模式期间,输出从无线通信单元410接收或存储在存储器460中的音频数据。声音输出模块452输出与终端装置400的功能有关的声音信号(例如,呼叫信号到来音和消息到来音)。声音输出模块452可包括接收器、扬声器和蜂鸣器。
警报单元453输出通知终端装置400的事件发生的信号。终端装置400中发生的事件的示例包括呼叫信号接收、消息接收、键信号输入和触摸输入。除了视频信号或音频信号之外,警报单元453可通过振动来输出通知事件发生的信号。由于视频信号或音频信号可通过显示单元451或声音输出模块452输出,所以显示单元451或声音输出模块452可被归类为警报单元453的一部分。
触觉模块454生成用户能够感觉到的各种触觉效果。触觉模块454所生成的触觉效果的代表性示例包括振动。触觉模块454所生成的振动的强度和模式是可控的。例如,不同的振动被组合并输出或被依次输出。
除了振动之外,触觉模块454可生成各种触觉效果,例如相对于皮肤接触表面垂直移动的插针排列、通过注入口或抽吸口对空气的注入或抽吸力、对皮肤表面的摩擦、电极接触、模拟诸如静电力的效果以及利用吸热或发热的装置表现热/冷感觉的效果。
触觉模块454可被实现为通过直接接触来传送触觉效果,并且还允许用户通过手指或手臂的肌肉觉来感觉到触觉效果。根据便携式终端400的配置方面,可配备至少两个触觉模块454。
存储器460可存储用于控制单元480的操作的程序,并且可临时存储输入/输出数据(例如电话簿、消息、静止图像和运动图像)。存储器460还可存储有关在触摸屏上的触摸输入期间输出的各种模式的振动和声音的数据。该存储器可包括用于存储验证信息的验证信息存储单元。
存储器460可包括闪存型、硬盘型、微型多媒体卡型、卡型存储器(例如,SD或XD存储器)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、磁存储器、磁盘和光盘中的至少一种存储介质。终端装置400可与在互联网上执行存储器460的存储功能的Web存储器关联地操作。
接口单元470用作通向连接到终端装置400的所有外部装置的路径。接口单元470从外部装置接收数据或电力,以将其传送给终端装置400中的各个组件,或者将终端装置400中的数据发送给外部装置。例如,接口单元470可包括有线/无线头戴式耳机端口、外部充电器端口、存储卡端口、用于连接到具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口和耳机端口。
所述标识模块是存储用于验证终端装置400的使用许可的各种信息的芯片,并可包括用户标识模块(UIM)、订户标识模块(SIM)和全球订户标识模块(USIM)。具有标识模块的装置(以下称为标识装置)可被制造为智能卡型。因此,标识装置可通过端口连接至终端装置400。
当终端装置400连接至外部托架时,接口单元470可用作向终端装置400供应来自托架的电力的路径,或者将从托架输入的各种命令信号传送给终端装置400的路径。从托架输入的各种命令信号或电力可用作识别终端装置400被正确安装在托架上的信号。
控制单元480通常控制终端装置400的总体操作。例如,控制单元480控制并处理与语音呼叫、数据通信和视频呼叫有关的操作。控制单元480执行上述各种增强型服务,并且通过无线通信单元410执行配对过程、ACR控制过程、ACR过程、装置之间的互通过程以及增强型服务互通过程。另外,控制单元480可通过麦克风或扬声器捕获视频显示装置100所播放的AV内容的一部分。
控制单元480可包括用于播放多媒体的多媒体模块481。多媒体模块481可被实现于控制单元480中,并且可独立于控制单元480来实现。
控制单元480可执行模式识别处理,以将触摸屏上的手写输入和绘画输入分别识别为字符和图像。
电源单元490根据控制单元480的控制接收外部电力和内部电力,然后供应各种组件的操作所需的电力。
本文所述的各种实施方式可通过软件、硬件或其组合来利用计算机或类似装置可读介质实现。
就硬件实现而言,本文所述的实施方式可利用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、用于执行其它功能的电子单元中的至少一个来实现。在一些情况下,实施方式可通过控制单元480来实现。
就软件实现而言,与过程或功能有关的实施方式可利用执行至少一个功能或操作的附加软件模块来实现。软件代码可通过利用合适的程序语言编写的软件应用来实现。软件代码被存储在存储器460中,并由控制单元480执行。
此外,本发明的实施方式还可以被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质的例子包括只读介质(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置和载波(如通过互联网进行的数据发送)。
上述实施方式的构造和方法在没有任何限制的情况下被应用到视频显示装置,并且实施方式中的全部或部分可以被选择性组合以具有各种修改形式。

Claims (6)

1.一种视频显示设备的操作方法,该操作方法包括以下步骤:
与第一终端装置配对;
接收未压缩的视听内容;
显示所述未压缩的视听内容;
从所述未压缩的视听内容获取指纹;
向自动内容识别服务器发送包括所述指纹的第一询问;
从所述自动内容识别服务器获取与所述指纹相对应的响应,
其中,所述响应包括增强型服务地址提供服务器的地址;
利用所述增强型服务地址提供服务器的地址发送第二询问;
获取可用增强型服务和关于针对与所述第二询问相对应的所述未压缩的视听内容的所述可用增强型服务的增强型服务信息,
其中,所述增强型服务信息包括可用增强型服务的地址和所述可用增强型服务的起始时间;
显示指示存在所述可用增强型服务的增强型服务通知用户界面;
经由所述增强型服务通知用户界面接收用于执行所述可用增强型服务的用户输入;
经由所述增强型服务通知用户界面接收用于所述可用增强型服务的类型选择的用户输入,其中,所述类型是增强型服务转移类型或控制功能转移类型中的一个;以及
向所述第一终端装置发送增强型服务执行请求消息,所述增强型服务执行请求消息包括所述可用增强型服务的地址、所述可用增强型服务的起始时间和关于所选择的类型的信息,
其中,当所选择的类型是所述控制功能转移类型时,所述方法还包括以下步骤:
终止对所述增强型服务的控制功能的显示;
保持不包括发送给所述第一终端装置的控制功能的所述增强型服务的显示功能;
接收对在所述视频显示设备上输出的所述增强型服务的转移控制功能的请求;
转移所述增强型服务的控制功能;
如果能够转移有所述控制功能的终端装置的最大数量等于已转移有所述控制功能的终端装置的数量,则将控制功能转移冲突事件发送给所述第一终端装置;以及
基于所述第一终端装置的控制功能转移释放请求,释放对所述第一终端装置的控制功能的转移,并且
其中,当所选择的类型是所述增强型服务转移类型时,所述方法还包括以下步骤:
去激活所执行的增强型服务,
其中,与所述第一终端装置配对的步骤包括以下步骤:
从所述第一终端装置接收验证号码生成请求;
响应于所述验证号码生成请求,针对所述第一终端装置生成第一验证号码;
将验证号码生成结果发送给所述第一终端装置,其中,接收所述验证号码生成结果的所述第一终端装置显示验证号码输入窗口;
显示所述第一验证号码;
从所述第一终端装置接收包括第二验证号码的验证请求消息;
如果所述第二验证号码与所述第一验证号码相同,则针对所述第一终端装置生成会话值;以及
将所述会话值发送给所述第一终端装置,
其中,所述验证号码输入窗口包括用于输入验证密钥的文本框、用于输入用户类型的组合框以及用于输入所述视频显示设备的密码的文本框,
其中,所述用户类型包括家庭用户类型和访客类型,所述家庭用户类型指示所述视频显示设备将无限制的权限指派给所述第一终端装置,所述访客类型指示所述视频显示设备仅将观看权限指派给所述第一终端装置。
2.根据权利要求1所述的操作方法,该操作方法还包括以下步骤:
从所述第一终端装置接收关于所述第一终端装置的能力的信息,
其中,所述地址是与所述第一终端装置的所述能力对应的所述可用增强型服务的地址。
3.根据权利要求2所述的操作方法,
其中,关于所述能力的信息包括关于所述第一终端装置的分辨率、CPU性能和可用剩余存储器大小中的至少一个的信息。
4.根据权利要求1所述的操作方法,
通过广播网络获取所述增强型服务信息包括以下步骤:
接收节目映射表;
在所述节目映射表的基本流循环中识别承载所述增强型服务信息的传输流分组的分组标识符;
基于所识别出的分组标识符来从所述广播网络接收承载所述增强型服务信息的所述传输流分组;以及
从承载所述增强型服务信息的所述传输流分组提取所述增强型服务信息。
5.根据权利要求1所述的操作方法,该操作方法还包括以下步骤:
从所述第一终端装置获取针对可用增强型服务出现的事件的注册的请求;
针对所述可用增强型服务出现的事件,注册所述第一终端装置;以及
当出现针对所注册的第一终端装置的所述可用增强型服务时,向所注册的第一终端装置发送针对所述可用增强型服务出现的事件。
6.一种视频显示设备,该视频显示设备包括:
显示单元;
接收器,其接收未压缩的视听内容;以及
增强型服务管理器,其从所述未压缩的视听内容获取指纹;向自动内容识别服务器发送包括所述指纹的第一询问;从所述自动内容识别服务器获取与所述指纹相对应的响应,其中,所述响应包括增强型服务地址提供服务器的地址;利用所述增强型服务地址提供服务器的地址发送第二询问;获取可用增强型服务和关于针对与所述第二询问相对应的所述未压缩的视听内容的所述可用增强型服务的增强型服务信息,其中,所述增强型服务信息包括可用增强型服务的地址和所述可用增强型服务的起始时间,显示指示存在所述可用增强型服务的增强型服务通知用户界面,经由所述增强型服务通知用户界面接收用于执行所述可用增强型服务的用户输入,并且经由所述增强型服务通知用户界面接收用于所述可用增强型服务的类型选择的用户输入,其中,所述类型是增强型服务转移类型或控制功能转移类型中的一个,
其中,所述增强型服务管理器与第一终端装置配对,并向所述第一终端装置发送增强型服务执行请求消息,所述增强型服务执行请求消息包括所述可用增强型服务的地址、所述可用增强型服务的起始时间和关于所选择的类型的信息,
其中,当所选择的类型是所述控制功能转移类型时,所述增强型服务管理器终止对所述增强型服务的控制功能的显示,保持不包括发送给所述第一终端装置的控制功能的所述增强型服务的显示功能,接收对在所述视频显示设备上输出的所述增强型服务的转移控制功能的请求,转移所述增强型服务的控制功能,如果能够转移有所述控制功能的终端装置的最大数量等于已转移有所述控制功能的终端装置的数量,则将控制功能转移冲突事件发送给所述第一终端装置,并且基于所述第一终端装置的控制功能转移释放请求,释放对所述第一终端装置的控制功能的转移,
其中,当所选择的类型是所述增强型服务转移类型时,所述增强型服务管理器去激活所执行的增强型服务,
其中,增强型服务管理器从所述第一终端装置接收验证号码生成请求,响应于所述验证号码生成请求,针对所述第一终端装置生成第一验证号码,将验证号码生成结果发送给所述第一终端装置,其中,接收所述验证号码生成结果的所述第一终端装置显示验证号码输入窗口,显示所述第一验证号码,从所述第一终端装置接收包括第二验证号码的验证请求消息,如果所述第二验证号码与所述第一验证号码相同,则针对所述第一终端装置生成会话值,并且将所述会话值发送给所述第一终端装置,
其中,所述验证号码输入窗口包括用于输入验证密钥的文本框、用于输入用户类型的组合框以及用于输入所述视频显示设备的密码的文本框,
其中,所述用户类型包括家庭用户类型和访客类型,所述家庭用户类型指示所述视频显示设备将无限制的权限指派给所述第一终端装置,所述访客类型指示所述视频显示设备仅将观看权限指派给所述第一终端装置。
CN201280044992.7A 2011-08-21 2012-08-03 视频显示装置、终端装置及其方法 Expired - Fee Related CN103828382B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201161525835P 2011-08-21 2011-08-21
US61/525,835 2011-08-21
US201161543288P 2011-10-04 2011-10-04
US61/543,288 2011-10-04
US201161549236P 2011-10-20 2011-10-20
US61/549,236 2011-10-20
KR10-2012-0063969 2012-06-14
KR1020120063969A KR101893151B1 (ko) 2011-08-21 2012-06-14 영상 표시 장치, 단말 장치 및 그 동작 방법
PCT/KR2012/006209 WO2013027942A1 (en) 2011-08-21 2012-08-03 Video display device, terminal device, and method thereof

Publications (2)

Publication Number Publication Date
CN103828382A CN103828382A (zh) 2014-05-28
CN103828382B true CN103828382B (zh) 2017-09-05

Family

ID=48174005

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201280044992.7A Expired - Fee Related CN103828382B (zh) 2011-08-21 2012-08-03 视频显示装置、终端装置及其方法
CN201280045048.3A Expired - Fee Related CN103814579B (zh) 2011-08-21 2012-08-03 视频显示装置、终端装置及其方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201280045048.3A Expired - Fee Related CN103814579B (zh) 2011-08-21 2012-08-03 视频显示装置、终端装置及其方法

Country Status (6)

Country Link
US (8) US9113188B2 (zh)
EP (2) EP2745528B1 (zh)
KR (2) KR101893151B1 (zh)
CN (2) CN103828382B (zh)
CA (2) CA2846060C (zh)
WO (2) WO2013027942A1 (zh)

Families Citing this family (168)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
KR101540797B1 (ko) * 2009-03-12 2015-07-30 삼성전자 주식회사 무선 통신 기기의 연결 방법 및 이를 이용한 무선 통신 기기
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US9515904B2 (en) * 2011-06-21 2016-12-06 The Nielsen Company (Us), Llc Monitoring streaming media content
KR101893151B1 (ko) 2011-08-21 2018-08-30 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
US9015785B2 (en) * 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
KR20140100933A (ko) * 2011-12-08 2014-08-18 엘지전자 주식회사 네트워크 tv 및 네트워크 tv 동작 방법
US10015557B2 (en) * 2011-12-31 2018-07-03 Intel Corporation Content-based control system
US8832723B2 (en) 2012-02-07 2014-09-09 Turner Broadcasting System, Inc. Method and system for a synchronous event manager for automatic content recognition
EP2800392A4 (en) * 2012-02-10 2015-09-09 Lg Electronics Inc IMAGE DISPLAY DEVICE AND OPERATING METHOD THEREFOR
CN102710992B (zh) * 2012-03-22 2015-07-29 华为技术有限公司 一种互动消息展示方法、装置及系统
JP6345424B2 (ja) * 2012-04-19 2018-06-20 サターン ライセンシング エルエルシーSaturn Licensing LLC 受信装置、受信方法、送信装置、送信方法、プログラム、及びテレビジョン受像機
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US8944313B2 (en) * 2012-06-29 2015-02-03 Honeywell International Inc. Computer configured to display multimedia content
US9883247B2 (en) * 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
US9788055B2 (en) 2012-09-19 2017-10-10 Google Inc. Identification and presentation of internet-accessible content associated with currently playing television programs
US9866899B2 (en) * 2012-09-19 2018-01-09 Google Llc Two way control of a set top box
EP2925007B1 (en) * 2012-11-23 2019-06-26 Saturn Licensing LLC Information processing device and information processing method
US8914832B2 (en) * 2012-12-14 2014-12-16 Sony Corporation Information processing apparatus, information processing method, and program
US9167276B2 (en) 2012-12-28 2015-10-20 Turner Broadcasting System, Inc. Method and system for providing and handling product and service discounts, and location based services (LBS) in an automatic content recognition based system
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
US9602848B2 (en) 2013-03-04 2017-03-21 Comcast Cable Communications, Llc Optimized content delivery
KR102097640B1 (ko) * 2013-03-08 2020-04-06 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US8878997B2 (en) 2013-03-11 2014-11-04 Sony Corporation Electronic displays having paired canvases
US9258597B1 (en) 2013-03-13 2016-02-09 Google Inc. System and method for obtaining information relating to video images
US9955231B2 (en) * 2013-03-14 2018-04-24 DISH Technologies L.L.C. Relevant video content pushed to a mobile phone
US9247309B2 (en) 2013-03-14 2016-01-26 Google Inc. Methods, systems, and media for presenting mobile content corresponding to media content
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9705728B2 (en) 2013-03-15 2017-07-11 Google Inc. Methods, systems, and media for media transmission and management
US9203813B2 (en) * 2013-03-15 2015-12-01 Panasonic Intellectual Property Management Co., Ltd. Content distribution method, content distribution system, source device, and sink device
TWI514861B (zh) * 2013-04-19 2015-12-21 Chih Yao Lin 影音播放媒體之廣告方法
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US20150002743A1 (en) * 2013-07-01 2015-01-01 Mediatek Inc. Video data displaying system and video data displaying method
US20150019653A1 (en) * 2013-07-15 2015-01-15 Civolution B.V. Method and system for adding an identifier
WO2015011877A1 (ja) 2013-07-26 2015-01-29 パナソニックIpマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
WO2015015712A1 (ja) 2013-07-30 2015-02-05 パナソニックIpマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
WO2015033500A1 (ja) 2013-09-04 2015-03-12 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
WO2015033501A1 (ja) * 2013-09-04 2015-03-12 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
US9872086B2 (en) * 2013-09-30 2018-01-16 Sony Corporation Receiving apparatus, broadcasting apparatus, server apparatus, and receiving method
US11055721B2 (en) * 2013-10-30 2021-07-06 Tencent Technology (Shenzhen) Company Limited Method, device and system for information verification
CN103616860B (zh) 2013-11-08 2017-02-15 海信集团有限公司 一种远程控制家电设备的方法和装置
CN105794220A (zh) * 2013-11-13 2016-07-20 Lg电子株式会社 管理通过网络连接的在广播接收设备和另一个设备之间的连接的方法和装置
KR20150069760A (ko) * 2013-12-16 2015-06-24 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US9456237B2 (en) 2013-12-31 2016-09-27 Google Inc. Methods, systems, and media for presenting supplemental information corresponding to on-demand media content
US10002191B2 (en) 2013-12-31 2018-06-19 Google Llc Methods, systems, and media for generating search results based on contextual information
US9491522B1 (en) 2013-12-31 2016-11-08 Google Inc. Methods, systems, and media for presenting supplemental content relating to media content on a content interface based on state information that indicates a subsequent visit to the content interface
EP3920544A1 (en) * 2014-01-07 2021-12-08 Sony Group Corporation Information processing device and information processing method
JP6400715B2 (ja) * 2014-01-14 2018-10-03 エルジー エレクトロニクス インコーポレイティド ネットワークにより連結された放送受信デバイスと他のデバイス間の連結を管理する方法及び装置
US9621963B2 (en) 2014-01-28 2017-04-11 Dolby Laboratories Licensing Corporation Enabling delivery and synchronization of auxiliary content associated with multimedia data using essence-and-version identifier
CN103888817B (zh) 2014-03-24 2018-02-27 青岛海信移动通信技术股份有限公司 一种将文件上传到智能电视和播放文件的方法及设备
CN105144735A (zh) 2014-03-26 2015-12-09 松下知识产权经营株式会社 影像接收装置、影像识别方法以及附加信息显示系统
WO2015145491A1 (ja) 2014-03-26 2015-10-01 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
CN105100906A (zh) * 2014-04-17 2015-11-25 海信集团有限公司 一种播放控制方法和设备
CN105100832A (zh) 2014-04-24 2015-11-25 海信集团有限公司 一种多媒体资源的推送方法及装置
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
CN106471817B (zh) 2014-06-30 2020-04-24 Lg电子株式会社 广播接收装置及其操作方法、用于链接到广播接收装置的链接装置及其操作方法
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
KR101901944B1 (ko) * 2014-07-09 2018-09-28 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
KR101594874B1 (ko) 2014-07-16 2016-02-17 삼성전자주식회사 전자 장치, 외부 장치 및 전자 장치의 외부 장치 전원 제어방법
JP6471359B2 (ja) 2014-07-17 2019-02-20 パナソニックIpマネジメント株式会社 認識データ生成装置、画像認識装置および認識データ生成方法
WO2016028052A2 (ko) * 2014-08-20 2016-02-25 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
CN106233746B (zh) 2014-08-21 2019-07-09 松下知识产权经营株式会社 内容辨识装置、内容辨识方法以及记录介质
KR102077237B1 (ko) * 2014-09-17 2020-02-13 삼성전자주식회사 영상 재생 장치에 의해 캡쳐된 이미지에 관련된 연관 정보를 휴대용 디바이스에게 제공하는 방법 및 시스템
WO2016060410A1 (ko) 2014-10-14 2016-04-21 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016068342A1 (en) * 2014-10-30 2016-05-06 Sharp Kabushiki Kaisha Media playback communication
KR102199568B1 (ko) 2014-11-10 2021-01-07 엘지전자 주식회사 전자 장치 및 그 동작 방법
EP3054694A1 (en) * 2015-02-04 2016-08-10 Iddeando Business Consulting, S.L. Device, server and system for interacting with broadcasting media content
KR102019493B1 (ko) * 2015-02-09 2019-09-06 삼성전자주식회사 디스플레이 장치 및 그 정보 제공 방법
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10204104B2 (en) * 2015-04-14 2019-02-12 Google Llc Methods, systems, and media for processing queries relating to presented media content
CN106304851A (zh) * 2015-04-23 2017-01-04 Lg电子株式会社 发送广播信号的装置、接收广播信号的装置、发送广播信号的方法和接收广播信号的方法
KR101667603B1 (ko) * 2015-05-06 2016-10-19 경희대학교 산학협력단 방송 채널별 채팅 제공 방법, 시스템 및 채팅 서버
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9516377B1 (en) * 2015-06-12 2016-12-06 Sorenson Media, Inc. Detecting channel change in automatic content recognition fingerprint matching
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
CN113438518B (zh) * 2015-07-06 2023-02-28 Lg电子株式会社 处理广播数据的方法、接收系统和发送系统
CN107852409A (zh) * 2015-07-21 2018-03-27 Lg 电子株式会社 广播信号发送装置、广播信号接收装置、广播信号发送方法以及广播信号接收方法
US9913056B2 (en) 2015-08-06 2018-03-06 Dolby Laboratories Licensing Corporation System and method to enhance speakers connected to devices with microphones
JPWO2017029990A1 (ja) * 2015-08-17 2018-06-07 ソニー株式会社 受信装置、送信装置、およびデータ処理方法
US9578351B1 (en) * 2015-08-28 2017-02-21 Accenture Global Services Limited Generating visualizations for display along with video content
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US9723347B2 (en) * 2015-10-01 2017-08-01 Sorenson Media, Inc Frequency capping for media content
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
FR3046515B1 (fr) * 2015-12-30 2018-02-16 Viaccess Procede et dispositif de traitement de flux multimedia pour verification des droits d'acces
KR101811719B1 (ko) * 2016-02-11 2017-12-22 삼성전자주식회사 컨텐트를 제공하는 디바이스를 제어하는 방법, 그 디바이스 및 서버
WO2017209514A1 (ko) 2016-06-01 2017-12-07 엘지전자(주) 방송 신호 송수신 장치 및 방법
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10271093B1 (en) * 2016-06-27 2019-04-23 Amazon Technologies, Inc. Systems and methods for routing content to an associated output device
US20180007428A1 (en) * 2016-06-29 2018-01-04 Intel Corporation Wireless display implementation of applications
US10079871B2 (en) 2016-10-10 2018-09-18 Google Llc Customizing media items for playback on alternative playback devices paired with a user device
CN108377576B (zh) * 2016-11-14 2020-09-29 展讯通信(上海)有限公司 一种多通路终端的来电应答方法及装置
CN108184143B (zh) * 2016-12-08 2020-12-11 腾讯科技(深圳)有限公司 获取资源的方法及装置
US10701438B2 (en) 2016-12-31 2020-06-30 Turner Broadcasting System, Inc. Automatic content recognition and verification in a broadcast chain
WO2018131875A1 (en) * 2017-01-11 2018-07-19 Samsung Electronics Co., Ltd. Display apparatus and method for providing service thereof
KR102664418B1 (ko) * 2017-01-11 2024-05-09 삼성전자주식회사 디스플레이 장치 및 그의 서비스 제공 방법
US11665758B2 (en) 2017-05-01 2023-05-30 Axon Enterprise, Inc. Systems and methods for dynamic pairing of electronic devices
US10912132B2 (en) * 2017-05-01 2021-02-02 Axon Enterprise, Inc. Systems and methods for dynamic pairing of electronic devices
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
CN108322805B (zh) * 2018-02-05 2020-07-17 青岛海信传媒网络技术有限公司 一种hbbtv显示的处理方法及装置
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
CN108419132B (zh) * 2018-04-16 2021-04-13 海信视像科技股份有限公司 HbbTV应用控制方法及装置、HbbTV终端
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10506275B1 (en) 2018-07-16 2019-12-10 Gracenote, Inc. Dynamic control of fingerprinting rate to facilitate time-accurate revision of media content
CN108900875A (zh) * 2018-07-27 2018-11-27 北京感动无限科技有限公司 用于播放内容应用的部署方法及装置
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
CN112205035B (zh) * 2018-09-29 2023-04-14 Oppo广东移动通信有限公司 数据传输方法、通信设备及计算机可读存储介质
US11638059B2 (en) * 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US20200275168A1 (en) 2019-02-22 2020-08-27 The Nielsen Company (Us), Llc Use of Watermarking to Trigger Fingerprint-Related Action
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11451865B1 (en) * 2019-04-11 2022-09-20 CUE Audio, LLC Relay of audio and/or video steganography to improve second screen experiences
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
TWI744947B (zh) * 2019-06-24 2021-11-01 美商六科股份有限公司 使用浮水印技術來觸發指紋相關動作的方法、媒體客戶端和電腦可讀介質
GB2589894B (en) * 2019-12-11 2022-11-02 VML Labs Ltd A method for distributing personalised video content across a network
WO2021141152A1 (ko) * 2020-01-07 2021-07-15 엘지전자 주식회사 디스플레이 장치 및 이를 제어하는 리모컨
US11647178B2 (en) * 2020-02-07 2023-05-09 Sony Corporation Digital television rendering verification
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
JP2021180477A (ja) * 2020-05-12 2021-11-18 パナソニックIpマネジメント株式会社 映像出力装置、映像表示装置、映像表示システムとそのためのペアリング方法
CN111612873B (zh) * 2020-05-29 2023-07-14 维沃移动通信有限公司 Gif图片生成方法、装置及电子设备
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
CN114071050B (zh) * 2020-07-29 2024-08-02 北京字节跳动网络技术有限公司 一种基于视频的互动方法、装置、电子设备及介质
WO2022040574A1 (en) 2020-08-21 2022-02-24 Beam, Inc. Integrating overlaid digital content into displayed data via graphics processing circuitry
CN113225571B (zh) * 2021-03-25 2022-10-04 海南车智易通信息技术有限公司 一种直播封面的处理系统、方法及计算设备
US11481933B1 (en) 2021-04-08 2022-10-25 Mobeus Industries, Inc. Determining a change in position of displayed digital content in subsequent frames via graphics processing circuitry
US11601276B2 (en) 2021-04-30 2023-03-07 Mobeus Industries, Inc. Integrating and detecting visual data security token in displayed data via graphics processing circuitry using a frame buffer
US20220351425A1 (en) * 2021-04-30 2022-11-03 Mobeus Industries, Inc. Integrating overlaid digital content into data via processing circuitry using an audio buffer
US11475610B1 (en) 2021-04-30 2022-10-18 Mobeus Industries, Inc. Controlling interactivity of digital content overlaid onto displayed data via graphics processing circuitry using a frame buffer
US11586835B2 (en) 2021-04-30 2023-02-21 Mobeus Industries, Inc. Integrating overlaid textual digital content into displayed data via graphics processing circuitry using a frame buffer
US11682101B2 (en) 2021-04-30 2023-06-20 Mobeus Industries, Inc. Overlaying displayed digital content transmitted over a communication network via graphics processing circuitry using a frame buffer
US11477020B1 (en) 2021-04-30 2022-10-18 Mobeus Industries, Inc. Generating a secure random number by determining a change in parameters of digital content in subsequent frames via graphics processing circuitry
US11483156B1 (en) 2021-04-30 2022-10-25 Mobeus Industries, Inc. Integrating digital content into displayed data on an application layer via processing circuitry of a server
US11562153B1 (en) 2021-07-16 2023-01-24 Mobeus Industries, Inc. Systems and methods for recognizability of objects in a multi-layer display

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1531710A (zh) * 2001-07-03 2004-09-22 �ʼҷ����ֵ������޹�˾ 增强的水印计算方法
CN101809955A (zh) * 2007-10-01 2010-08-18 思科技术公司 蓝牙设备之间的迅速配对

Family Cites Families (72)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6122403A (en) * 1995-07-27 2000-09-19 Digimarc Corporation Computer system linked by using information in data objects
EP1526472A3 (en) * 1995-02-13 2006-07-26 Intertrust Technologies Corp. Systems and methods for secure transaction management and electronic rights protection
US6829368B2 (en) * 2000-01-26 2004-12-07 Digimarc Corporation Establishing and interacting with on-line media collections using identifiers in media signals
US5831664A (en) * 1995-12-15 1998-11-03 Mediaone Group, Inc. Method and system for synchronizing data between at least one mobile interface device and an interactive terminal
JP2003503907A (ja) * 1999-06-28 2003-01-28 ユナイテッド ビデオ プロパティーズ, インコーポレイテッド ニッチハブを有する双方向テレビ番組ガイドシステムおよび方法
US7631338B2 (en) 2000-02-02 2009-12-08 Wink Communications, Inc. Interactive content delivery methods and apparatus
WO2001058151A2 (en) * 2000-02-04 2001-08-09 Intel Corporation Displaying enhanced content information on a remote control unit
US7698727B2 (en) * 2000-06-30 2010-04-13 Jlb Ventures Llc Method and apparatus for notifying users of interactive functions using a remote device
ATE495628T1 (de) * 2000-10-15 2011-01-15 Directv Group Inc Verfahren und system zum werben während einer pause
US20020162120A1 (en) 2001-04-25 2002-10-31 Slade Mitchell Apparatus and method to provide supplemental content from an interactive television system to a remote device
ATE355702T1 (de) * 2001-09-10 2006-03-15 Ericsson Telefon Ab L M Vorrichtung und verfahren zur darstellung von informationen
US20030066091A1 (en) * 2001-10-03 2003-04-03 Koninklijke Philips Electronics N.V. Business models, methods, and apparatus for unlocking value-added services on the broadcast receivers
US7813954B1 (en) * 2001-12-14 2010-10-12 Keen Personal Media, Inc. Audiovisual system and method for displaying segmented advertisements tailored to the characteristic viewing preferences of a user
US20030188322A1 (en) * 2002-03-28 2003-10-02 General Instrument Corporation Method and system for remotely displaying television program content using streaming video
JP3823929B2 (ja) 2002-05-17 2006-09-20 ソニー株式会社 情報処理装置、情報処理方法、およびコンテンツ配信装置、コンテンツ配信方法、並びにコンピュータ・プログラム
JP2004171105A (ja) 2002-11-18 2004-06-17 Nippon Telegr & Teleph Corp <Ntt> 広告効果解析方法及び広告システム
JP2004328109A (ja) * 2003-04-22 2004-11-18 Matsushita Electric Ind Co Ltd 情報回収配信システム
US7668939B2 (en) * 2003-12-19 2010-02-23 Microsoft Corporation Routing of resource information in a network
JP2006005897A (ja) * 2004-05-19 2006-01-05 Dowango:Kk 端末装置、コンテンツ配信システム、情報出力方法、情報出力プログラム
WO2005120051A1 (ja) * 2004-06-02 2005-12-15 Matsushita Electric Industrial Co., Ltd. 携帯端末装置
EP1787470A1 (en) * 2004-08-30 2007-05-23 Telecom Italia S.p.A. Method and system for providing interactive services in digital television
DK2408202T3 (en) * 2004-11-19 2017-08-28 Tivo Solutions Inc Method and device for secure transfer and playback of multimedia content
US8923835B2 (en) * 2004-11-22 2014-12-30 The Invention Science Fund I, Llc Bring call here selectively
US7451078B2 (en) 2004-12-30 2008-11-11 All Media Guide, Llc Methods and apparatus for identifying media objects
JPWO2006080291A1 (ja) * 2005-01-25 2008-06-19 松下電器産業株式会社 情報配信装置、及び情報配信方法
US20070022437A1 (en) * 2005-07-19 2007-01-25 David Gerken Methods and apparatus for providing content and services coordinated with television content
US7344084B2 (en) * 2005-09-19 2008-03-18 Sony Corporation Portable video programs
GB2435367A (en) 2006-02-15 2007-08-22 Intime Media Ltd User interacting with events in a broadcast audio stream, such a a quizz, by comparing patterns in the stream to a stored signature.
US8195650B2 (en) 2007-02-28 2012-06-05 Samsung Electronics Co., Ltd. Method and system for providing information using a supplementary device
JP2008085515A (ja) * 2006-09-27 2008-04-10 Hitachi Ltd コンテンツ受信端末システム及びコンテンツ受信端末装置
US8418206B2 (en) 2007-03-22 2013-04-09 United Video Properties, Inc. User defined rules for assigning destinations of content
US7870026B2 (en) * 2007-06-08 2011-01-11 Yahoo! Inc. Selecting and displaying advertisement in a personal media space
US8661464B2 (en) * 2007-06-27 2014-02-25 Google Inc. Targeting in-video advertising
US10580459B2 (en) * 2007-08-23 2020-03-03 Sony Interactive Entertainment America Llc Dynamic media interaction using time-based metadata
US7987478B2 (en) * 2007-08-28 2011-07-26 Sony Ericsson Mobile Communications Ab Methods, devices, and computer program products for providing unobtrusive video advertising content
WO2009035691A2 (en) 2007-09-11 2009-03-19 Realnetworks, Inc. Apparatus, system and methods for controlling the presentation of media content
JP2010541415A (ja) * 2007-09-28 2010-12-24 グレースノート インコーポレイテッド マルチメディアイベントのプレゼンテーションの合成
US20090113481A1 (en) * 2007-10-24 2009-04-30 At&T Intellectual Property I, L.P. Systems, methods and computer program products for providing presence based services
US9226047B2 (en) * 2007-12-07 2015-12-29 Verimatrix, Inc. Systems and methods for performing semantic analysis of media objects
US8154523B2 (en) 2007-12-13 2012-04-10 Eastman Kodak Company Electronic device, display and touch-sensitive user interface
KR20090069689A (ko) * 2007-12-26 2009-07-01 엘지전자 주식회사 서비스 가이드 정보 처리 방법 및 서비스 가이드 정보 처리장치
CN101472159A (zh) * 2007-12-29 2009-07-01 东方有线网络有限公司 一种基于互动电视平台的实现信息服务的系统和方法
JP2009267954A (ja) * 2008-04-28 2009-11-12 Victor Co Of Japan Ltd 出力装置および出力方法
US8745502B2 (en) * 2008-05-28 2014-06-03 Snibbe Interactive, Inc. System and method for interfacing interactive systems with social networks and media playback devices
US20090294538A1 (en) * 2008-05-28 2009-12-03 Sony Ericsson Mobile Communications Ab Embedded tags in a media signal
US8225124B2 (en) 2008-07-30 2012-07-17 Symbol Technologies, Inc. Method and system for determining power over ethernet class capabilities
JP2012500585A (ja) * 2008-08-18 2012-01-05 アイファロ メディア ゲーエムベーハー 補足情報配信
US8613026B2 (en) * 2008-09-10 2013-12-17 Qualcomm Incorporated Methods and systems for viewer interactivity and social networking in a mobile TV broadcast network
US8108887B2 (en) * 2008-10-30 2012-01-31 The Nielsen Company (Us), Llc Methods and apparatus for identifying media content using temporal signal characteristics
US20100205628A1 (en) * 2009-02-12 2010-08-12 Davis Bruce L Media processing methods and arrangements
US9800837B2 (en) 2008-12-31 2017-10-24 Echostar Technologies L.L.C. Virtual control device
US8433306B2 (en) 2009-02-05 2013-04-30 Digimarc Corporation Second screens and widgets
US8813127B2 (en) 2009-05-19 2014-08-19 Microsoft Corporation Media content retrieval system and personal virtual channel
US8799496B2 (en) * 2009-07-21 2014-08-05 Eloy Technology, Llc System and method for video display transfer between video playback devices
JP2011085865A (ja) * 2009-10-19 2011-04-28 Kddi Corp 広告情報配信システム
EP2494541A4 (en) * 2009-10-29 2013-08-07 Thomson Licensing INTERACTIVE SCREEN ARCHITECTURE WITH SEVERAL SCREENS
US9066154B2 (en) * 2009-11-13 2015-06-23 Triveni Digital, Inc. System and method for enhanced television and delivery of enhanced television content
US9386075B2 (en) * 2009-12-08 2016-07-05 At&T Intellectual Property I, L.P. Flexible download destination
CA3030066A1 (en) * 2010-01-05 2011-07-14 Rovi Guides, Inc. Method and system to provide subtitles on a wireless comminications device
US9858593B2 (en) * 2010-04-09 2018-01-02 Go Daddy Operating Company, LLC URL shortening based online advertising
US8763060B2 (en) 2010-07-11 2014-06-24 Apple Inc. System and method for delivering companion content
BR112013001383B1 (pt) * 2010-07-20 2021-12-21 Interdigital Madison Patent Holdings Método para apresentar conteúdo durante operações de modos de truque
US8863165B2 (en) * 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US20120117511A1 (en) * 2010-11-09 2012-05-10 Sony Corporation Method and apparatus for providing an external menu display
US20120151532A1 (en) * 2010-12-09 2012-06-14 General Instrument Corporation Sdv quick tune algorithm
US8555327B2 (en) * 2011-03-28 2013-10-08 Google Inc. Broadcasting links to enhanced content
US8806540B2 (en) * 2011-05-10 2014-08-12 Verizon Patent And Licensing Inc. Interactive media content presentation systems and methods
US8996557B2 (en) * 2011-05-18 2015-03-31 Microsoft Technology Licensing, Llc Query and matching for content recognition
US20120324504A1 (en) * 2011-06-14 2012-12-20 United Video Properties, Inc. Systems and methods for providing parental controls in a cloud-based media guidance application
RU2594000C2 (ru) 2011-08-05 2016-08-10 Сони Корпорейшн Приемное устройство, способ приема, носитель записи и система обработки информации
KR101893151B1 (ko) 2011-08-21 2018-08-30 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
US9025739B2 (en) * 2011-10-20 2015-05-05 At&T Intellectual Property I, L.P. System and method for visual voice mail in a multi-screen environment

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1531710A (zh) * 2001-07-03 2004-09-22 �ʼҷ����ֵ������޹�˾ 增强的水印计算方法
CN101809955A (zh) * 2007-10-01 2010-08-18 思科技术公司 蓝牙设备之间的迅速配对

Also Published As

Publication number Publication date
KR101893151B1 (ko) 2018-08-30
CN103814579B (zh) 2018-07-24
US10432995B2 (en) 2019-10-01
KR20130020873A (ko) 2013-03-04
CA2846052A1 (en) 2013-02-28
US20150156532A1 (en) 2015-06-04
WO2013027942A1 (en) 2013-02-28
EP2745525A1 (en) 2014-06-25
US20150121416A1 (en) 2015-04-30
US9113188B2 (en) 2015-08-18
US20150082336A1 (en) 2015-03-19
US20150382043A1 (en) 2015-12-31
US20130047178A1 (en) 2013-02-21
CA2846052C (en) 2017-11-28
EP2745525B1 (en) 2017-05-03
US9942592B2 (en) 2018-04-10
EP2745528A1 (en) 2014-06-25
EP2745525A4 (en) 2015-08-12
CN103814579A (zh) 2014-05-21
US20190373302A1 (en) 2019-12-05
KR101995425B1 (ko) 2019-07-02
EP2745528B1 (en) 2018-10-10
US20190082209A1 (en) 2019-03-14
US9948972B2 (en) 2018-04-17
KR20130020874A (ko) 2013-03-04
CA2846060C (en) 2018-01-02
EP2745528A4 (en) 2015-04-08
US20130047180A1 (en) 2013-02-21
US9723349B2 (en) 2017-08-01
CN103828382A (zh) 2014-05-28
US8990845B2 (en) 2015-03-24
WO2013027941A1 (en) 2013-02-28
CA2846060A1 (en) 2013-02-28

Similar Documents

Publication Publication Date Title
CN103828382B (zh) 视频显示装置、终端装置及其方法
CN103229513B (zh) 视频显示装置及其控制方法
CN105657465B (zh) 多媒体装置及其控制方法
CN103229514B (zh) 视频显示装置及其控制方法
CN103733637B (zh) 接收广播服务的方法及其接收装置
CA2820574C (en) Method of receiving enhanced service and video display device thereof
US11895174B2 (en) Systems and methods for adapting content items to endpoint media devices
CN105808182B (zh) 显示控制方法及系统、广告破口判断装置、影音处理装置
CN107113469A (zh) 控制装置的系统、数字装置及其控制方法
CN108028956A (zh) 移动终端及其控制方法
CN110234026A (zh) 使用光学字符识别对机顶盒进行双向控制

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170905

Termination date: 20210803

CF01 Termination of patent right due to non-payment of annual fee