CN103229514A - 视频显示装置及其控制方法 - Google Patents

视频显示装置及其控制方法 Download PDF

Info

Publication number
CN103229514A
CN103229514A CN2011800567469A CN201180056746A CN103229514A CN 103229514 A CN103229514 A CN 103229514A CN 2011800567469 A CN2011800567469 A CN 2011800567469A CN 201180056746 A CN201180056746 A CN 201180056746A CN 103229514 A CN103229514 A CN 103229514A
Authority
CN
China
Prior art keywords
content
enhanced service
information
time
video display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800567469A
Other languages
English (en)
Other versions
CN103229514B (zh
Inventor
金相铉
徐琮烈
金官奭
李俊徽
郑在喜
李贤在
金镇泌
徐东完
文京洙
池爱娣
徐永在
金庆镐
朴盛玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103229514A publication Critical patent/CN103229514A/zh
Application granted granted Critical
Publication of CN103229514B publication Critical patent/CN103229514B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/951Indexing; Web crawling techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

视频显示装置包括显示单元。视频显示装置获得未压缩的视听内容,并且通过显示单元播放所述未压缩的视听内容。视频显示装置基于来自所述未压缩的视听内容的一个内容片断,获得所述未压缩的视听内容的内容片段,并且基于所述内容信息,获得与内容改变时间有关的信息和与增强型服务有关的信息。视频显示装置基基于与内容改变时间有关的信息,确定用于获得下一个内容信息的延迟时间。

Description

视频显示装置及其控制方法
技术领域
本发明涉及视频显示装置及其控制方法。
背景技术
随着数字广播正为其广泛传播铺平道路,广播站发送主视听(AV)内容和增强型服务数据二者,增强型服务数据可以联合主AV内容来提供信息和服务或者可以出于其它目的被单独提供。
然而,在当前的广播环境下,每个家庭中的视频显示装置可能不太可能直接以无线方式接收广播信号。确切地说,对于大多数情况,每个家庭中的视频显示装置连接到广播接收装置,以显示广播接收装置提供的未压缩的视听内容。
另外,广播接收装置从服务器(称为多频道视频节目分发商(MVPD))接收内容。MVPD从广播站接收广播信号,从所接收的广播信号中提取内容,将所提取的内容转换成具有正确传输格式的信号,并且将经转换的信号提供给广播接收装置。在这些过程期间,MVPD可以不包括所提取的增强型服务内容或者可以添加另外的增强型服务数据,使得广播站可以用于提供AV内容,但是可以不提供广播站引导的增强型服务。
因为广播接收装置由从MVPD接收的信号中提取主AV数据并且只将未压缩的视听数据提供到视频显示装置,只有从广播接收装置而非视频显示装置提供的增强型服务是可用的。此外,广播站可以不提供其自身引导的增强型服务。
另外,即使当广播站通过无线频道提供增强型服务时,由于带宽限制,导致可能不足以提供增强型服务。
发明内容
技术问题
实施方式提供用于广播站引导的可用增强型服务的视频显示装置及其控制方法。
技术方案
在一个实施方式中,一种控制视频显示装置的方法包括以下步骤:获得未压缩的视听(AV)内容;通过显示单元播放所述未压缩的AV内容;基于所述未压缩的AV内容的内容片断,获得所述未压缩的AV内容的内容信息;基于所述内容信息,获得内容改变时间信息和增强型服务信息;以及基于所述内容改变时间信息,确定用于获得下一个内容信息的延迟时间。
在另一个实施方式中,一种控制包括显示单元的视频显示装置的方法包括以下步骤:获得未压缩的AV内容;通过所述显示单元播放所述未压缩的AV内容;提取所述未压缩的AV内容的内容片断;基于所提取的内容片断,获得包括所述未压缩的AV内容的标识符和所提取的内容片断的开始时间的内容信息;基于所提取的内容片断或所述内容信息,获得包括第一延迟时间的增强型服务信息;基于所述第一延迟时间,确定第二延迟时间;以及当所述第二延迟时间过去时,开始与所述增强型服务信息对应的增强型服务。
在另一个实施方式中,一种视频显示装置包括:显示单元;接收单元,其获得未压缩的AV内容;增强型服务管理单元,其基于所述未压缩的AV内容的内容片断获得所述未压缩的AV内容的内容信息,基于所述内容信息获得内容改变时间信息和增强型服务信息,并且基于所述内容改变时间信息确定用于获得下一个内容信息的延迟时间;以及播放控制单元,其通过所述显示单元播放所述未压缩的AV内容。
在另一个实施方式中,一种视频显示装置包括:显示单元;接收单元,其获得未压缩的AV内容;增强型服务管理单元,其基于从所述未压缩的AV内容中提取的内容片断获得包括所述未压缩的AV内容的标识符和所提取的内容片断的开始时间的内容信息,基于所提取的内容片断或所述内容信息获得包括第一延迟时间的增强型服务信息,基于所述第一延迟时间确定第二延迟时间,并且当所述第二延迟时间过去时,开始与所述增强型服务信息对应的增强型服务;以及播放控制单元,其通过所述显示单元播放所述未压缩的AV内容。
在另一个实施方式,一种视频显示装置包括:显示单元;接收单元,其获得未压缩的AV内容;内容识别单元,其基于所述未压缩的AV内容的内容片断,获得所述未压缩的AV内容的内容信息;生命周期管理单元,其根据基于所述内容信息获得的增强型服务信息,管理增强型服务;以及播放控制单元,其在所述显示单元上播放所述未压缩的AV内容和所述增强型服务。
在以下的附图和描述中阐述一个或多个实施方式的细节。根据描述和附图和权利要求书,其它特征将是显而易见的。
附图说明
图1是示出根据实施方式的网络拓扑的框图。
图2是示出根据实施方式的基于水印的网络拓扑的框图。
图3是示出根据实施方式的基于水印的网络拓扑中的数据流的梯形图。
图4是示出根据实施方式的基于水印的内容识别时序的视图。
图5是示出根据实施方式的基于指纹的网络拓扑的框图。
图6是示出根据实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图7是示出根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。
图8是示出根据实施方式的基于水印和指纹的网络拓扑的框图。
图9是示出根据实施方式的基于水印和指纹的网络拓扑中的数据流的梯形图。
图10是示出根据实施方式的视频显示装置的框图。
图11是根据实施方式的增强型服务管理单元的层次结构关系图。
图12是示出根据实施方式的增强型服务管理单元的操作的流程图。
图13是根据实施方式的增强型服务管理单元的层次结构关系图。
图14是示出根据实施方式的增强型服务管理单元的操作的流程图。
图15是根据实施方式的增强型服务管理单元的层次结构关系图。
图16是示出根据实施方式的增强型服务管理单元的操作的流程图。
图17是根据实施方式的增强型服务管理单元的层次结构关系图。
图18是示出根据实施方式的增强型服务管理单元的操作的流程图。
图19是示出根据实施方式的将主AV内容的播放时间与增强型服务的播放时间同步的方法的流程图。
图20是示出根据实施方式的将主AV内容的播放时间与增强型服务的播放时间同步的方法的概念图。
图21是根据实施方式的当执行自动播放应用程序时的画面。
图22是根据实施方式的当执行内容提供商应用程序时的画面。
图23是根据实施方式的当执行具有缩放用户界面的视频显示装置制造商应用程序时的画面。
图24是根据实施方式的当执行具有重叠的用户界面的视频显示装置制造商应用程序时的画面。
图25是示出根据实施方式的执行视频显示装置制造商应用程序的方法的流程图。
图26是根据实施方式的当显示应用程序选择菜单时的画面。
图27是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的全部子菜单时的画面。
图28是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的参与子菜单时的画面。
图29是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的发现子菜单时的画面。
图30是示出根据实施方式的搜索方法的流程图。
图31是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的搜索子菜单时的画面。
图32是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的搜索子菜单时的另一个画面。
图33是示出根据实施方式的聊天窗口显示方法的流程图。
图34是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的Twitter子菜单时的画面。
图35是示出根据实施方式的新闻获得方法的流程图。
图36是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的新闻子菜单时的画面。
图37是示出根据实施方式的观众列表显示方法的流程图。
图38是根据实施方式的当选择视频显示装置制造商应用程序中的社交主菜单的观众列表子菜单时的画面。
图39是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
图40是根据另一个实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
图41是示出根据实施方式的优先显示方法的流程图。
图42是根据实施方式的当选择视频显示装置制造商应用程序中的社交主菜单的优先显示子菜单时的画面。
图43是示出根据实施方式的数字媒体下载方法的流程图。
图44是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的前一剧集子菜单时的画面。
图45是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的VOD子菜单时的画面。
图46是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的应用程序子菜单时的画面。
图47是示出根据实施方式的目录显示方法的流程图。
图48是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的风格子菜单时的画面。
图49是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的音乐子菜单时的画面。
图50是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的另一个子菜单时的画面。
图51是根据实施方式的用于控制ACR功能的用户界面的视图。
图52是示出根据实施方式的控制视频显示装置的方法的流程图。
图53是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
图54是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
图55是根据实施方式的增强型服务的时序图。
图56是根据另一个实施方式的增强型服务的时序图。
图57是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图58是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图59是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图60是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
图61是示出根据另一个实施方式的基于水印的网络拓扑中的数据流的梯形图。
图62是根据另一个实施方式的增强型服务的时序图。
图63是根据另一个实施方式的增强型服务的时序图。
图64是根据另一个实施方式的增强型服务管理单元的层次结构关系图。
图65是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图66是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图67是根据实施方式的由生命周期管理应用程序控制的画面。
图68是示出根据另一个实施方式的基于指纹的视频显示装置的结构的框图。
图69是示出根据另一个实施方式的基于水印的视频显示装置的结构的框图。
具体实施方式
下文中,将参照附图更详细地描述涉及本发明的移动终端。在书写说明书的过程中,为了容易,在以下的描述中,提供或混合组件的名词后缀“引擎”、“模块”和“单元”。也就是说,名词后缀自身并没有分别可区分的含义或作用。
将根据实施方式参照图1至图9描述网络拓扑。
图1是示出根据实施方式的网络拓扑的框图。
如图1中所示,网络拓扑包括内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40、多个增强型服务提供服务器50、广播接收装置60、网络70和视频显示装置100。
内容提供服务器10可以对应于广播站并且广播包括主视听内容的广播信号。广播信号还可以包括增强型服务。增强型服务可以涉及或者可以不涉及主视听内容。增强型服务可以具有一些格式,如服务信息、元数据、额外数据、编译执行文件、网页应用、超文本标记语言(HTML)文档、XML文档、层叠风格表(CSS)文档、音频文件、视频文件、ATSC2.0内容和地址(如统一资源定位符(URL))。可能存在至少一个内容提供服务器。
内容识别服务提供服务器20提供内容识别服务,该内容识别服务允许视频显示装置100基于主视听内容识别内容。内容识别服务提供服务器20可以编辑或者可以不编辑主视听内容。可能存在至少一个内容识别服务提供服务器。
内容识别服务提供服务器20可以是水印服务器,水印服务器编辑主视听内容,以将可以看到徽标的可视水印插入主视听内容中。这个水印服务器可以将每帧的左上或右上的内容提供商的徽标作为水印插入主视听内容中。
另外,内容识别服务提供服务器20可以是水印服务器,水印服务器编辑主视听内容,以将内容信息作为不可视水印插入主视听内容中。
另外,内容识别服务提供服务器20可以是指纹服务器,指纹服务器从主视听内容的一些帧或音频样本中提取特征信息并且将其存储。这个特征信息被称为签名。
多频道视频分发服务器30从多个广播站接收并复用广播信号并且将复用的广播信号提供到广播接收装置60。尤其是,多频道视频分发服务器30对所接收的广播信号执行解调和频道解码,以提取主视听内容和增强型服务,然后对所提取的主视听内容和增强型服务执行频道编码,以产生复用信号供分发。此时,因为多频道视频分发服务器30可以不包括所提取的增强型服务或者可以添加另外的增强型服务,所以广播站可以不提供其引导的服务。可能存在至少一个多频道视频分发服务器。
广播装置60可以调谐用户选择的频道并且接收经调谐频道的信号,然后对所接收的信号执行解调和频道解码,以提取主视听内容。广播装置60通过H.264/运动图像专家组-4先进视频编码(MPEG-4AVC)、Dolby AC-3或运动图像专家组-2先进音频编码(MPEG-2ACC)算法对所提取的主视听内容进行解码,以产生未压缩的主视听(AV)内容。广播接收装置60通过其外部输入端口将所产生的未压缩的主AV内容提供到视频显示装置100。
增强型服务信息提供服务器40响应于视频显示装置的请求,提供与涉及主AV内容的至少一个可用增强型服务有关的增强型服务信息。可能存在至少一个增强型服务提供服务器。增强型服务信息提供服务器40可以提供与多个可用增强型服务之中具有最高优先级的增强型服务有关的增强型服务信息。
增强型服务提供服务器50响应于视频显示装置的请求,提供涉及主AV内容的至少一个可用增强型服务。可能存在至少一个增强型服务提供服务器。
视频显示装置100可以是均包括显示单元的电视机、笔记本电脑、手机和智能电话。视频显示装置100可以从广播接收装置60接收未压缩的主AV内容,或者从内容提供服务器10或多频道视频分发服务器30接收包括经编码的主AV内容的广播信号。视频显示装置100可以通过网络70从内容识别服务提供服务器20接收内容识别服务,通过网络70从增强型服务提供服务器40接收涉及主AV内容的至少一个可用增强型服务的地址,并且从增强型服务提供服务器50接收涉及主AV内容的至少一个可用增强型服务。
内容提供服务器10、内容识别服务提供服务器20、多频道视频分发服务器30、增强型服务信息提供服务器40和多个增强型服务提供服务器50中的至少两个可以按一个服务器的形式组合并且可以由一个提供商操作。
图2是示出根据实施方式的基于水印的网络拓扑的框图。
如图2中所示,基于水印的网络拓扑还可以包括水印服务器21。
如图2中所示,水印服务器21编辑主AV内容,以将内容信息插入其中。多频道视频分发服务器30可以接收并分发包括经更改的主AV内容的广播信号。具体地,水印服务器可以使用下述的数字加水印技术。
数字水印是一种用于将可能几乎不能被删除的信息插入数字信号中的过程。例如,数字信号可以是音频、图片或视频。如果复制数字信号,则在复制品中包括插入的信息。一个数字信号可以同时携带多个不同的水印。
在可视加水印的过程中,被插入的信息在图片或视频中可能能被识别出来。典型地,被插入的信息可以是识别媒体拥有者的文本或徽标。如果电视广播站将其徽标添加在视频的角落处,则这是可识别的水印。
在不可视加水印的过程中,尽管信息作为数字数据被添加到音频、图片或视频中,但是用户可以获知预定量的信息但是可能无法识别它。可以通过不可视加水印传递秘密的消息。
加水印的一个应用是用于防止数字媒体的非法复制的版权保护系统。例如,复制装置在复制数字媒体之前从数字媒体获得水印,并且基于水印的内容判定是否进行复制。
加水印的另一个应用是数字媒体的源追踪。在分发路径的每个点,水印被嵌入在数字媒体中。如果这种数字媒体之后被发现,则可以从数字媒体提取水印并且可以从水印的内容识别分发源。
不可视加水印的另一个应用是对数字媒体的说明。
数字媒体的文件格式可以包括称为元数据的附加信息,并且数字水印与元数据的区别在于数字水印被作为数字媒体的AV信号自身传递。
加水印方法可以包括扩频、量化和调幅。
如果通过额外编辑获得经标记的信号,则加水印方法对应于扩频。尽管已知的是扩频水印十分强,但是因为水印干扰嵌入的主信号,所以没有包含太多的信息。
如果通过量化获得经标记的信号,则加水印方法对应于量化型。量化水印弱,可以包括大量信息。
如果在空间域中通过与扩频类似的额外编辑方法获得经标记的信号,则加水印方法对应于调幅。
图3是示出根据实施方式的基于水印的网络拓扑中的数据流的梯形图。
首先,在操作S101中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S103中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容将可视水印如徽标或作为不可视水印的水印信息插入主AV内容中,并且将加水印的主AV内容和增强型服务提供到MVPD30。
通过不可视水印插入的水印信息可以包括水印功能、内容信息、增强型服务信息和可用增强型服务中的至少一者。水印功能代表非法复制防止、收视率和增强型服务获取中的一者。
内容信息可以包括提供主AV内容的内容提供商的识别信息、主AV内容识别信息、内容信息获取过程中使用的内容段的时间信息、主AV内容通过其广播的频道的名字、主AV内容通过其广播的频道的徽标、对主AV内容通过其广播的频道的说明、使用信息报告时间段、使用信息获取的最短使用时间和涉及主AV内容的可用增强型服务信息中的至少一个。
如果视频显示装置100使用水印获取内容信息,则用于内容信息获取的内容段的时间信息可以是其中嵌入所使用水印的内容段的时间信息。如果视频显示装置100使用指纹获取内容信息,则用于内容信息获取的内容段的时间信息可以是从其中提取特征信息的内容段的时间信息。用于内容信息获取的内容段的时间信息可以包括用于内容信息获取的内容段的起始时间、用于内容信息获取的内容段的持续时间和用于内容信息获取的内容段的结束时间中的至少一个。
使用信息报告地址可以包括主AV内容观看信息报告地址和增强型服务使用信息报告地址中的至少一个。使用信息报告时间段可以包括主AV内容观看信息报告时间段和增强型服务使用信息报告时间段中的至少一个。使用信息获取的最短使用时间可以包括主AV内容观看信息获取的最短观看时间和增强型服务使用信息提取的最短使用时间中的至少一个。
基于在超过最短观看时间的时间内观看主AV内容,视频显示装置100获取主AV内容的观看信息并且在主AV内容观看信息报告时间段内将所获取的观看信息报告到主AV内容观看信息报告地址。
基于在超过最短使用时间的时间内使用增强型服务,视频显示装置100获取增强型服务使用信息并且在增强型服务使用信息报告时间段内将所获取的使用信息报告到增强型服务使用信息报告地址。
增强型服务信息可以包括关于是否存在增强型服务的信息、增强型服务地址提供服务器地址、每个可用增强型服务的获取路径、每个可用增强型服务的地址、每个可用增强型服务的起始时间、每个可用增强型服务的结束时间、每个可用增强型服务的使用期限、每个可用增强型服务的获取模式、每个可用增强型服务的请求时间段、每个可用增强型服务的优先级信息、每个可用增强型服务的说明、每个可用增强型服务的类别、使用信息报告地址、使用信息报告时间段和使用信息获取的最短使用时间中的至少一个。
可用增强型服务的获取路径可以用IP或先进电视系统委员会-移动/手持(ATSCM/H)表达。如果可用增强型服务的获取路径是ATSC M/H,则增强型服务信息还可以包括频率信息和频道信息。每个可用增强型服务的获取模式可以代表推(Push)或拉(Pull)。
此外,水印服务器21可以将水印信息作为不可视水印插入主AV内容的徽标中。
例如,水印服务器21可以在徽标的预定位置插入条形码。此时,徽标的预定位置可以对应于显示徽标的区域底部的第一行。当接收包括其中插入了条形码的徽标的主AV内容时,视频显示装置100可以不显示条形码。
例如,水印服务器21可以在徽标的预定位置插入条形码。此时,徽标可以保持其形式。
例如,水印服务器21可以在M个帧的各个徽标处插入N位水印信息。也就是说,水印服务器21可以在M个帧中插入M*N水印信息。
在操作S105中,MVPD30接收包括加水印的主AV内容和增强型服务的广播信号并且产生复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在操作S106中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容,然后,将所产生的未压缩的主AV内容提供到视频显示装置100。
此外,在操作S107中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,在操作S108中,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。视频显示装置100从所获得的主AV内容的一些帧或音频样本片段中提取水印信息。如果水印信息对应于徽标,则视频显示装置100确认与从多个徽标和多个水印服务器地址之间的对应关系中提取的徽标对应的水印服务器地址。当水印信息对应于徽标时,视频显示装置100不可以只通过徽标来识别主AV内容。另外,当水印信息不包括内容信息时,视频显示装置100不可以识别主AV内容,但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时,视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以此方式,在操作S109中,当视频显示装置100不可以只通过水印信息识别视频显示装置100的主AV内容时,它访问与所获得的水印服务器地址对应的水印服务器21,以发送第一查询。
在操作S111中,水印服务器21向第一查询提供第一应答。第一应答可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
如果水印信息和第一应答不包括增强型服务地址,则视频显示装置100不可以获得增强型服务。然而,水印信息和第一应答可以包括增强型服务地址提供服务器地址。以此方式,视频显示装置100没有通过水印信息和第一应答获得服务地址或增强型服务。在操作S119中,如果视频显示装置100获得增强型服务地址提供服务器地址,则它访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及第二查询的内容信息的至少一个可用增强型服务。随后,在操作S121中,增强型服务信息提供服务器40向视频显示装置100提供至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答。
在操作S123中,如果视频显示装置100通过水印信息、第一应答或第二应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后,在操作S125中,获得增强型服务。
图4是示出根据实施方式的基于水印的内容识别时序的视图。
如图4中所示,当广播接收装置60打开并且调谐频道,并且另外视频显示装置100通过外部输入端口111从广播接收装置60接收经调谐频道的主AV内容时,视频显示装置100可以从主AV内容的水印中感测内容提供商标识符(或广播站标识符)。然后,视频显示装置100可以基于感测到的内容提供商标识符,从主AV内容的水印中感测内容信息。
此时,如图4中所示,内容提供商标识符的检测可用时间段可以与内容信息的检测可用时间段不同。具体地,内容提供商标识符的检测可用时间段可以比内容信息的检测可用时间段短。据此,视频显示装置100可以具有用于只检测必要信息的有效构造。
图5是示出根据实施方式的基于指纹的网络拓扑的框图。
如图5中所示,网络拓扑还可以包括指纹服务器22。
如图5中所示,指纹服务器22不编辑主AV内容,而是从主AV内容的一些帧或音频样本片段中提取特征信息并且存储所提取的特征信息。然后,当从视频显示装置100接收特征信息时,指纹服务器22提供与所接收的特征信息对应的AV内容的时间信息和标识符。
图6是示出根据实施方式的基于指纹的网络拓扑中的数据流的梯形图。
首先,在操作S201中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S203中,指纹服务器22接收内容提供服务器10提供的广播信号,从主AV内容的多个帧片段或多个音频片段中提取多条特征信息,并且创建与多个特征信息对应的多个查询结果的数据库。查询结果可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。
在操作S205中,MVPD30接收包括主AV内容和增强型服务的广播信号并且产生复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在操作S206中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容,然后,将所产生的未压缩的主AV内容提供到视频显示装置100。
此外,在操作S207中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。在操作213中,视频显示装置100从所获得的主AV内容的一些帧或音频样本片段中提取特征信息。
在操作S215中,视频显示装置100访问与预定的指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第一查询。
在操作S217中,指纹服务器22向第一查询提供作为第一应答的查询结果。如果第一应答对应于失败,则视频显示装置100访问与另一个指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第一查询。
指纹服务器22可以提供可扩展标记语言(XML)文档作为查询结果。将参照图7和表1描述包含查询结果的XML文档的例子。
图7是示出根据实施方式的包含查询结果的ACR-Resulttype的XML架构图的视图。
如图7中所示,包含查询结果的ACR-Resulttype包括ResultCode属性和ContentID、NTPTimestamp、SignalingChannelInformation和ServiceInformation要素。
例如,如果ResultCode属性具有200,则这可能意味着查询结果是成功的。例如,如果ResultCode属性具有404,则这可能意味着查询结果是不成功的。
SignalingChannelInformation要素包括SignalingChannelURL,并且SignalingChannelURL要素包括UpdateMode和PollingCycle属性。UpdateMode属性可以具有Pull值或Push值。
ServiceInformation要素包括ServiceName、ServiceLogo和ServiceDescription要素。
表1示出包含查询结果的ACR-Resulttype的XML架构图。
[表1]
Figure BDA00003244555600141
作为ContentID要素,ATSC内容标识符可以如表2中所示地使用。
[表2]
Figure BDA00003244555600151
如表2中所示,ATSC内容标识符具有包括TSID和房号的结构。
16位不带符号的整数TSID携带传输流标识符。
用当在完成广播之后可以重新使用content_id值时的那天中的小时,设置5位不带符号的整数end_of_day。
用当不可以重新使用content_id值时的天数,设置9位不带符号的整数unique_for。
content_id代表内容标识符。视频显示装置100每天在end_of_day的对应时间中将unique_for减去1,并且假定如果unique_for不是0,则content_id是唯一的。
此外,作为Contentid要素,可以如下所述地使用ATSC-M/H服务的全局服务标识符。
全局服务标识符具有下面的形式。
-urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>
这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是如<region>中定义的TSID的十进制数,并且<xsid>(区域性服务)(major>69)是“0”。<serviceid>是用<major>或<minor>定义的。<major>代表主频道号,并且<minor>代表次频道号。
全局服务标识符的例子如下。
-urn:oma:bcast:iauth:atsc:service:us:1234:5.1
-urn:oma:bcast:iauth:atsc:service:us:0:100.200
此外,作为ContentID要素,可以如下所述地使用ATSC内容标识符。
ATSC内容标识符具有下面的形式。
urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>
这里,<region>是包括ISO639-2规定的两个字符的国际国家代码。本地服务的<xsid>是如<region>中定义的TSID的十进制数,并且可以后面跟着“.”<serviceid>。(区域性服务)(major>69)的<xsid>是<serviceid>。<content_id>是表2中定义的content_id域的Base64符号,<unique_for>是表2中定义的unique_for域的十进制数符号,并且<end_of_day>是表2中定义的end_of_day域的十进制数符号。
下文中,再描述图6。
在操作S219中,如果查询结果不包括增强型服务地址或增强型服务,而是包括增强型服务地址提供服务器地址,则视频显示装置100访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第二查询。
增强型服务信息提供服务器40搜索涉及第二查询的内容信息的至少一个可用增强型服务。随后,在操作S221中,增强型服务信息提供服务器40将至少一个可用增强型服务的增强型服务信息作为对第二查询的第二应答提供到视频显示装置100。
在操作S223中,如果视频显示装置100通过第一应答或第二应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后在操作S225中,获得增强型服务。
当UpdateMode属性具有Pull值时,视频显示装置100通过SignalingChannelURL将HTTP请求发送到增强型服务提供服务器50,并且响应于请求,从增强型服务提供服务器50接收包括PSIP二进制流的HTTP应答。在这种情况下,视频显示装置100可以根据如PollingCycle属性指定的Polling时间段发送HTTP请求。另外,SignalingChannelURL要素可以具有更新时间属性。在这种情况下,视频显示装置100可以根据如更新时间属性指定的更新时间发送HTTP请求。
如果UpdateMode属性具有Push值,则视频显示装置100可以通过XMLHTTPRequest API从服务器异步地接收更新。在视频显示装置100通过XMLHTTPRequest对象向服务器发送异步请求之后,如果信令信息有变化,则服务器通过频道提供信令信息作为应答。如果会话等待时间有限制,则服务器产生会话超时应答并且接收器识别所产生的超时应答以再次发送请求,使得接收器和服务器之间的信令频道可以一直保持。
图8是示出根据实施方式的基于水印和指纹的网络拓扑的框图。
如图8中所示,基于水印和指纹的网络拓扑还可以包括水印服务器21和指纹服务器22。
如图8中所示,水印服务器21将内容提供商识别信息插入主AV内容中。水印服务器21可以将内容提供商识别信息作为可视水印如徽标或不可视水印插入主AV内容中。
指纹服务器22不编辑主AV内容,而是从主AV内容的一些帧或音频样本的某些片段中提取特征信息并且存储所提取的特征信息。然后,当从视频显示装置100接收特征信息时,指纹服务器22提供与所接收的特征信息对应的AV内容的时间信息和标识符。
图9是示出根据实施方式的基于水印和指纹的网络拓扑中的数据流的梯形图。
首先,在操作S301中,内容提供服务器10发送包括主AV内容和增强型服务的广播信号。
在操作S303中,水印服务器21接收内容提供服务器10提供的广播信号,通过编辑主AV内容将可视水印如徽标或作为不可视水印的水印信息插入主AV内容中,并且将加水印的主AV内容和增强型服务提供到MVPD30。通过不可视水印插入的水印信息可以包括内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在操作S305中,MVPD30接收包括加水印的主AV内容和增强型服务的广播信号并且产生复用信号,以将其提供到广播接收装置60。此时,复用信号可以不包括所接收的增强型服务或者可以包括新的增强型服务。
在操作S306中,广播接收装置60调谐用户选择的频道并且接收经调谐频道的信号,解调所接收的信号,对经解调的信号执行频道解码和AV解码以产生未压缩的主AV内容,然后,将所产生的未压缩的主AV内容提供到视频显示装置100。
此外,在操作S307中,内容提供服务器10还通过无线频道广播包括主AV内容的广播信号。
另外,在操作S308中,MVPD30可以将包括主AV内容的广播信号不经过广播接收装置60而直接发送到视频显示装置100。
视频显示装置100可以通过广播接收装置60接收未压缩的主AV内容。另外,视频显示装置100可以通过无线频道接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。另外,视频显示装置100可以从MVPD30接收广播信号,然后,可以对所接收的广播信号进行解调和解码,以获得主AV内容。视频显示装置100从所获得的主AV内容的一些帧或时间段的音频样本中提取水印信息。如果水印信息对应于徽标,则视频显示装置100确认与从多个徽标和多个水印服务器地址之间的对应关系中提取的徽标对应的水印服务器地址。当水印信息对应于徽标时,视频显示装置100不可以只通过徽标来识别主AV内容。另外,当水印信息不包括内容信息时,视频显示装置100不可以识别主AV内容,但是水印信息可以包括内容提供商识别信息或水印服务器地址。当水印信息包括内容提供商识别信息时,视频显示装置100可以确认与从多个内容提供商识别信息和多个水印服务器地址之间的对应关系中提取的内容提供商识别信息对应的水印服务器地址。以此方式,在操作S309中,当视频显示装置100不可以只通过水印信息识别视频显示装置100的主AV内容时,它访问与所获得的水印服务器对应的水印服务器21,以发送第一查询。
在操作S311中,水印服务器21为第一查询提供第一应答。第一应答可以包括指纹服务器地址、内容信息、增强型服务信息和可用增强型服务中的至少一个。内容信息和增强型服务信息如上所述。
在操作S313中,如果水印信息和第一应答包括指纹服务器地址,则视频显示装置100从主AV内容的音频样本的一些帧或某个片段中提取特征信息。
在操作S315中,视频显示装置100访问与第一应答中的指纹服务器地址对应的指纹服务器22,以发送包括所提取的特征信息的第二查询。
在操作S317中,指纹服务器22将查询结果作为第二应答提供给第二查询。
在操作S319中,如果查询结果不包括增强型服务地址或增强型服务,而是包括增强型服务地址提供服务器地址,则视频显示装置100访问与所获得的增强型服务地址提供服务器地址对应的增强型服务信息提供服务器40,以发送包括内容信息的第三查询。
增强型服务信息提供服务器40搜索涉及第三查询的内容信息的至少一个可用增强型服务。随后,在操作S321中,增强型服务信息提供服务器40将至少一个可用增强型服务的增强型服务信息作为对第三查询的第三应答提供到视频显示装置100。
在操作S323中,如果视频显示装置100通过第一应答、第二应答或第三应答获得至少一个可用增强型服务地址,则它访问至少一个可用增强型服务地址以请求增强型服务,然后在操作S325中,获得增强型服务。
然后,参照图10和图18,将根据实施方式描述视频显示装置100。
图10是示出根据实施方式的视频显示装置的框图。
如图10中所示,视频显示装置100包括广播信号接收单元101、解调单元103、频道解码单元105、解复用单元107、AV解码单元109、外部输入端口111、播放控制单元113、播放装置120、增强型服务管理单元130、数据发送/接收单元141和存储器150。
广播信号接收单元101从内容提供服务器10或MVPD30接收广播信号。
解调单元103对所接收的广播信号进行解调,以产生经解调的信号。
频道解码单元105对经解调的信号执行频道解码,以产生经频道解码数据。
解复用单元107将主AV内容和增强型服务与经频道解码数据分开。被分开的增强型服务被存储在增强型服务存储单元152中。
AV解码单元109对被分开的主AV内容执行AV解码,以产生未压缩的主AV内容。
此外,外部输入端口111从广播接收装置60、数字多功能盘(DVD)播放器、蓝光(Blu-ray)盘播放器等接收未压缩的主AV内容。外部输入端口111可以包括DSUB端口、高清晰度多媒体接口(HDMI)端口、数字视频接口(DVI)端口、复合端口、组件端口和S-视频端口中的至少一个。
播放控制单元113控制播放装置120,以根据用户的选择,播放AV解码单元109产生的未压缩的主AV内容和从外部输入端口111接收的未压缩的主AV内容中的至少一个。
播放装置120包括显示单元121和扬声器123。显示单元121可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器和3D显示器中的至少一个。
增强型服务管理单元130获得主AV内容的内容信息并且基于获得的内容信息获得可用的增强型服务。具体地,如上所述,增强型服务管理单元130可以基于未压缩的主AV内容的音频样本的一些帧或某个片段,获得主AV内容的识别信息。在这个说明书中,这被称为自动内容识别(ACR)。
数据发送/接收单元141可以包括先进电视系统委员会-移动/手持(ATSC M/H)频道发送/接收单元141a和IP发送/接收单元141b。
存储器150可以包括存储介质如闪存存储器类型、硬盘类型、多媒体卡微型、卡型存储器如SD或XD存储器、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘和光盘中的至少一种类型。视频显示装置100可以与网络存储器连接地操作,从而在互联网上执行存储器150的存储功能。
存储器150可以包括内容信息存储单元151、增强型服务存储单元152、徽标(LOGO)存储单元153、设置信息存储单元154、书签存储单元155、用户信息存储单元156和使用信息存储单元157。
内容信息存储单元151存储与多个特征信息对应的多个内容信息。
增强型服务存储单元152可以存储与多个特征信息对应的多个增强型服务或者与多个内容信息对应的多个增强型服务。
徽标存储单元153存储多个徽标。另外,徽标存储单元153还可以存储与多个徽标对应的内容提供商标识符或者与多个徽标对应的水印服务器地址。
设置信息存储单元154存储ACR的设置信息。
书签存储单元155存储多个书签。
用户信息存储单元156存储用户信息。用户信息可以包括至少一个服务的至少一个账户信息、区域性信息、家庭成员信息、优先类别信息、视频显示装置信息和使用信息范围中的至少一个。至少一个账户信息可以包括使用信息测量服务器的账户信息和社交网络服务如Twitter和Facebook的账户信息。区域性信息可以包括地址信息和邮政区码。家庭成员信息可以包括家庭成员的数量、每个成员的年龄、每个成员的性别、每个成员的宗教信仰和每个成员的工作。可以用运动、电影、戏剧、教育、新闻、娱乐和其它类别中的至少一个设置优选类别信息。视频显示装置信息可以包括信息如类型、制造商、固件版本、分辨率、型号、OS、浏览器、存储装置可用性、存储装置容量和视频显示装置的网速。一旦设置了使用信息范围,视频显示装置100就在设置范围内收集并报告主AV内容观看信息和增强型服务使用信息。可以在每个虚拟频道中设置使用信息范围。另外,可以在整个物理频道内设置使用信息测量可容许范围。
使用信息提供单元157存储由视频显示装置100收集的主AV内容观看信息和增强型服务使用信息。另外,视频显示装置100基于收集的主AV内容观看信息和增强型服务使用信息分析服务使用模式,并且将经分析的服务使用模式存储在使用信息存储单元157中。
增强型服务管理单元130可以从指纹服务器22或内容信息存储单元151获得主AV内容的内容信息。如果在内容信息存储单元151中没有与所提取的特征信息对应的内容信息或者足够的内容信息,则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的内容信息。此外,增强型服务管理单元130可以连续地更新内容信息。
增强型服务管理单元130可以从增强型服务提供服务器50或增强型服务存储单元153获得可用的增强型服务。如果在增强型服务存储单元153中没有增强型服务或足够的增强型服务,则增强型服务管理单元130可以通过数据发送/接收单元141更新增强型服务。此外,增强型服务管理单元130可以连续地更新增强型服务。
增强型服务管理单元130可以从主AV内容中提取徽标,然后,可以查询徽标存储单元155,以获得与所提取的徽标对应的内容提供商标识符或水印服务器地址。如果在徽标存储单元155中没有与所提取的徽标对应的徽标或足够的徽标,则增强型服务管理单元130可以通过数据发送/接收单元141接收额外的徽标。此外,增强型服务管理单元130可以连续地更新徽标。
增强型服务管理单元130可以通过各种方法将从主AV内容中提取的徽标与徽标存储单元155中的多个徽标进行比较。这各种方法可以减少比较运算的负荷。
例如,增强型服务管理单元130可以基于颜色特性执行比较。也就是说,增强型服务管理单元130可以将所提取的徽标的颜色特性与徽标存储单元155中的徽标的颜色特性进行比较,以判定它们是否相同。
此外,增强型服务管理单元130可以基于字符识别执行比较。也就是说,增强型服务管理单元130可以将从所提取的徽标中识别的字符与从徽标存储单元155中的徽标中识别的字符进行比较,以判定它们是否相同。
此外,增强型服务管理单元130可以基于徽标的轮廓执行比较。也就是说,增强型服务管理单元130可以将所提取的徽标的轮廓与徽标存储单元155中的徽标的轮廓进行比较,以判定它们是否相同。
下文中,参照图11和图18,将根据各种实施方式描述增强型服务管理单元130。
图11是根据实施方式的增强型服务管理单元的层次结构关系图。
如图11中所示,增强型服务管理单元130可以包括操作系统131a、音频驱动器132a、视频驱动器133a、网络驱动器134a、ACR平台应用程序接口(API)135a、至少一个ACR引擎136a、ACR守护进程137a、ACR中间件138a和至少一个ACR应用程序139a。
当如图11中所示地使用增强型服务管理单元130时,用户不需要一定识别频道或内容并且可以一直执行ACR操作。
增强型服务管理单元130可以通过数据发送/接收单元141访问应用程序存储件,以下载应用程序。
音频驱动器132a可以访问用于音频指纹或音频水印的音频缓冲器。
视频驱动器133a可以访问用于视频指纹或视频水印的音频缓冲器。
网络驱动器134a允许ACR引擎136a访问数据发送/接收单元141。
平台API135a提供API,以允许ACR引擎136a访问音频驱动器132a、视频驱动器133a和网络驱动器134a。
因为多个广播站或内容提供商分别使用不同的内容识别服务,所以视频显示装置100可以包括多个ACR引擎136a。也就是说,视频显示装置100可以包括多个视频水印提取算法、多个音频水印提取算法、多个视频签名提取算法和多个音频签名提取算法中的至少一个的ACR引擎。基于水印的ACR引擎136a可以提取水印信息,然后可以从所提取的水印信息中获得水印功能、内容信息、增强型服务信息和可用增强型服务中的至少一个。基于指纹的ACR引擎136a可以提取主AV内容的某个片段的特征信息,然后可以基于所提取的特征信息,获得内容信息、增强型服务信息和可用增强型服务中的至少一个。
ACR守护进程137a管理至少一个ACR引擎136a。连续地执行该守护进程,以处理周期性服务请求。守护进程合适地传递所收集的请求,以允许另一个程序来处理它们。ACR守护进程137a可以管理ACR引擎136a的执行和终止。ACR守护进程137a在多个ACR引擎136a之中搜索与当前的主AV内容匹配的ACR引擎。具体地,如果因为执行多个ACR引擎而使系统资源被大大消耗,则ACR守护进程137a根据特定规则或优先级逐一地顺序执行多个ACR引擎136a,以确认内容识别是否是成功的。另外,如果多个ACR引擎136a之一成功地进行内容识别,则ACR守护进程137a针对所识别内容获得并执行与增强型服务对应的ACR应用程序139a。虽然ACR引擎136a成功地执行内容识别,但是如果由于频道改变导致内容不再被识别,则ACR守护进程137a可以终止ACR应用程序139a。
ACR中间件138a用作至少一个ACR应用程序139a的浏览器。
ACR应用程序139a可以向用户提供由ACR增强的用户体验。ACR应用程序139a可以是从应用程序商店或互联网下载的应用程序,或者可以是统一资源定位符(URL)。ACR应用程序139a可以提供内容目标广告、内容提供商门户服务、节目特定服务(如电子节目指南(EPG))或内容提供商特定服务。在ACR应用程序139a通过ACR应用程序与ACR引擎136a交互时,它从ACR引擎136a接收内容信息或签名并且额外获得与内容信息或签名对应的增强型服务,以在播放装置120中播放它们。为此,在以下的表3中示出ACR应用程序139a使用的ACR应用程序接口。
[表3]
Figure BDA00003244555600231
图12是示出根据实施方式的增强型服务管理单元的操作的流程图。
在操作S401中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR守护进程137a通过至少一个ACR引擎136a获得经调谐频道中广播的主AV内容的内容信息。
然后,在操作S403中,ACR守护进程137a获得涉及内容信息的可用增强型服务。
在操作S405中,ACR守护进程137a执行在后台获得的增强型服务。
在操作S407中,ACR守护进程137a在显示单元121上显示颜色按钮,以通知用户,增强型服务是可用的。
在操作S409中,当ACR守护进程137a接收增强型服务的使用时,它在播放装置120中在后台播放执行的增强型服务。
在操作S411中,如果改变或主AV内容发生改变,则ACR守护进程137a通过至少一个ACR引擎136a识别改变并且终止增强型服务。
图13是根据实施方式的增强型服务管理单元的层次结构关系图。
如图13中所示,增强型服务管理单元130可以包括操作系统131b、音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台应用程序接口(API)135b、至少一个ACR引擎136b、ACR引擎管理单元137b、ACR中间件138b和至少一个ACR应用程序139b。
当如图13中所示地使用增强型服务管理单元130时,用户可能需要一定识别频道或内容。然而,因为对ACR的查询的次数减少,所以服务器耗费可能降低。
图13的增强型服务管理单元130中的音频驱动器132b、视频驱动器133b、网络驱动器134b、ACR平台API135b、至少一个ACR引擎136b和ACR中间件138b与图11的增强型服务管理单元130中的那些132a、133a、134a、135a、136a和138a相同或类似。因此,将省略对其的详细描述。
ACR引擎管理单元137b管理至少一个ACR引擎136b的列表并且将ACR引擎136b的选择接口提供给ACR应用程序139b。
ACR应用程序139b可以为用户提供由ACR增强的用户体验。ACR应用程序139b可以是从应用程序商店或互联网下载的应用程序,或者可以是简单的统一资源定位符(URL)。ACR应用程序139b可以提供内容目标广告、内容提供商门户服务、节目特定服务(如电子节目指南(EPG))或内容提供商特定服务。
在ACR应用程序139b通过ACR中间件138b的ACR应用程序接口与ACR引擎管理单元137b交互时,它可以选择所要使用的ACR引擎136b。为此,在以下的表4和表5中示出ACR应用程序139b使用的ACR应用程序接口。
[表4]
Figure BDA00003244555600241
[表5]
当ACR应用程序139b通过ACR中间件138b的ACR应用程序接口与ACR引擎136b交互时,它控制ACR引擎136b,并且从ACR引擎136b接收内容信息或签名,以额外获得与内容信息或签名对应的增强型服务。然后,ACR应用程序139b在播放装置120中播放它们。为此,在以下的表6中示出ACR应用程序139b使用的ACR应用程序接口。
[表6]
Figure BDA00003244555600261
因此,在表7中示出使用这种ACR应用程序接口的内容提供商相关应用程序的指纹样本代码的一个例子。
[表7]
Figure BDA00003244555600271
因此,在表8中示出使用这种ACR应用程序接口的内容提供商相关应用程序的指纹样本代码的一个例子。
[表8]
Figure BDA00003244555600281
因此,在表9中示出使用这种ACR应用程序接口的内容提供商相关应用程序的加水印样本代码的一个例子。
[表9]
Figure BDA00003244555600291
因此,在表10中示出使用这种ACR应用程序接口的内容提供商相关应用程序的加水印样本代码的一个例子。
[表10]
Figure BDA00003244555600301
图14是示出根据实施方式的增强型服务管理单元的操作的流程图。
尽管广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111,但是视频显示装置100可以在执行ACR应用程序139b之前不执行自动内容识别。
在操作S501中,一旦识别主AV内容的频道的用户执行对应的频道相关ACR应用程序139b,ACR应用程序139b向ACR引擎管理单元137b查询与ACR应用程序139b使用的ACR引擎136b相关的信息并且接收它。
然后,ACR应用程序139b在操作S503中启动它使用的ACR引擎136b并且在操作S505中通过ACR引擎136b获得内容信息。
ACR应用程序139b在操作S507中通过获得的内容信息获得涉及主AV内容的可用增强型服务,并且在操作S509中在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在操作S511中,当ACR应用程序139b接收增强型服务的使用时,它在播放装置120中播放增强型服务。
在操作S513中,当ACR中间件138b接收涉及终止ACR应用程序139b的用户输入时,它终止ACR应用程序139b。
图15是根据实施方式的增强型服务管理单元的层次结构关系图。
如图15中所示,增强型服务管理单元130可以包括操作系统131c、音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c、ACR引擎136c、ACR中间件138c和至少一个ACR应用程序139c。
当如图15中所示地使用增强型服务管理单元130时,用户可能需要一定识别频道或内容。然而,因为对ACR的查询的数量可能减少,所以服务器消耗可能减少。
图15的增强型服务管理单元130中的音频驱动器132c、视频驱动器133c、网络驱动器134c、ACR平台API135c和ACR中间件138c与图11的增强型服务管理单元130中的那些132a、133a、134a、135a和138a相同或类似。因此,将省略对其的详细描述。
ACR引擎136c从主AV内容的音频样本的一些帧或某个片段中提取特征信息,以向ACR调节服务器(未示出)发送包括所提取的特征信息的查询。ACR调节服务器可以响应于查询发送指纹服务器地址。另外,ACR调节服务器可以发送与特征信息对应的内容信息连同指纹服务器地址。
当从ACR引擎136c接收指纹服务器地址时,ACR应用程序139c向与指纹服务器地址对应的指纹服务器发送包括ACR引擎136c所提取的特征信息的查询。为此,在以下的表11中示出ACR应用程序139c使用的ACR应用程序接口。
[表11]
Figure BDA00003244555600321
因此,在表12中示出使用这种ACR应用程序接口的指纹样本代码的一个例子。
[表12]
Figure BDA00003244555600331
图16是示出根据实施方式的增强型服务管理单元的操作的流程图。
在操作S601中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR引擎136c从主AV内容的音频样本的一些帧或某个片段中提取特征信息,以向ACR调节服务器(未示出)发送包括所提取的特征信息的查询。
在操作S603中,ACR引擎136c接收响应于查询的指纹服务器地址。
ACR应用程序139c通过getACRBackend()方法从ACR引擎136c获得指纹服务器地址。
在操作S607中,ACR应用程序139c通过getSignature()方法从ACR引擎136c获得主AV内容的某个视频帧片段或某个音频片段的特征信息。
在操作S609中,ACR应用程序139c向与所获得的指纹服务器地址对应的指纹服务器发送包括所获得的特征信息的查询。
在操作S611中,ACR应用程序139c接收响应于查询的内容信息。
ACR应用程序139c在操作S613中基于所获得的内容信息获得可用增强型服务,并且在操作S615中在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在操作S617中,当ACR应用程序139c接收增强型服务的使用时,它在播放装置120中播放增强型服务。
在操作S619中,当ACR中间件138c接收涉及终止ACR应用程序139c的用户输入时,它终止ACR应用程序139c。
图17是根据实施方式的增强型服务管理单元的层次结构关系图。
如图17中所示,增强型服务管理单元130可以包括操作系统131d、音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d、至少一个ACR引擎136d、ACR引擎管理单元137d、应用程序管理单元138d和至少一个ACR应用程序139d。
当如图17中所示地使用增强型服务管理单元130时,用户不需要一定识别频道或内容,并且可以一直执行ACR操作。
图17的增强型服务管理单元130中的音频驱动器132d、视频驱动器133d、网络驱动器134d、ACR平台API135d和多个ACR引擎与图11的增强型服务管理单元130中的那些132a、133a、134a、135a和136a相同或类似。因此,将省略对其的详细描述。
ACR引擎管理单元137d确认ACR引擎136d与从外部输入端口111接收的主AV内容匹配并且确认ACR引擎136d与应用程序139d匹配。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。如果多个ACR引擎136d之一成功识别主AV内容,则ACR引擎管理单元137d将其余ACR引擎置于休眠模式,并且从正在工作的ACR引擎获得主AV内容的内容信息。
当应用程序管理单元138d与ACR引擎管理单元137d交互时,它控制ACR应用程序的产生、开始、停止、休眠和终止。
ACR应用程序139d可以是内置的应用程序。ACR应用程序139d可以通过表13中示出的函数控制ACR引擎136b。
[表13]
Figure BDA00003244555600351
图18是示出根据实施方式的增强型服务管理单元的操作的流程图。
在操作S701中,当广播接收装置60和视频显示装置100启动并且选择视频显示装置100的外部输入端口111时,ACR引擎管理单元137d确认ACR引擎136a与从外部输入端口111接收的主AV内容匹配。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。ACR引擎管理单元137d通过优先级控制多个ACR引擎136d。
如果多个ACR引擎136d之一成功识别主AV内容,则ACR引擎管理单元137d在操作S702中将其余ACR引擎置于休眠模式,并且在操作S703中从正在工作的ACR引擎获得主AV内容的内容信息。
然后,ACR引擎管理单元137d在操作S704中确认涉及内容信息的可用应用程序,并且请求应用程序管理单元138d执行经确认的应用程序139d。
在操作S705中,应用程序管理单元138d在后台执行经确认的应用程序139d。
在操作S707中,在后台执行的应用程序139d在显示单元121上显示颜色按钮,以通知用户增强型服务是可用的。
在操作S709中,当在后台执行的应用程序139d从用户接收增强型服务的使用时,它在播放装置120中播放增强型服务。
如果在操作S710中频道或主AV内容被改变,则ACR引擎管理单元137d在操作S711中确认与应用程序139d匹配的ACR引擎136a并且将经确认的ACR引擎136a连接到应用程序139d。此时,ACR引擎管理单元137d控制多个ACR引擎136d,以同时或顺序地执行水印提取或查询发送。
如果应用程序管理单元138d在操作S712中接收用于终止应用程序139d的用户输入,则它在操作S713中终止应用程序139d。
然后,参照图19和图20,将描述根据实施方式的将主AV内容的播放时间与增强型服务的播放时间同步的方法。
然后,参照图19和图20,将描述根据实施方式的将主AV内容的播放时间与增强型服务的播放时间同步的方法。
增强型服务信息可以包括增强型服务的开始时间。此时,视频显示装置100可能需要在开始时间开始增强型服务。然而,因为视频显示装置100在没有时间戳的情况下接收发送未压缩的主AV内容的信号,所以主AV内容的播放时间的参考时间与增强型服务的开始时间的参考时间不同。尽管视频显示装置100接收具有时间信息的主AV内容,但是主AV内容的播放时间的参考时间可以与增强型服务的开始时间的参考时间不同,如同重新广播一样。因此,视频显示装置100可能需要将主AV内容的参考时间与增强型服务的参考时间同步。具体地,视频显示装置100可能需要将主AV内容的播放时间与增强型服务的开始时间同步。
首先,在操作S801中,增强型服务管理单元130提取主AV内容的某个片段。主AV内容的该片段可以包括主AV内容的一些视频帧或某个音频片段中的至少一个。增强型服务管理单元130提取主AV内容的该片段的时间被指定为Tn。
增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。更详细地,增强型服务管理单元130对所提取的片段中的用不可视水印编码的信息进行解码,以获得内容信息。另外,增强型服务管理单元130可以提取所提取的片段中的特征信息,并且基于所提取的特征信息,从指纹服务器22或内容信息存储单元151获得主AV内容的内容信息。增强型服务管理单元130获得内容信息的时间被指定为Tm。
此外,内容信息包括所提取的片段的开始时间Ts。在内容信息获取时间Tm之后,增强型服务管理单元130基于Ts、Tm和Tn将主AV内容的播放时间与增强型服务的开始时间同步。更详细地,增强型服务管理单元130将内容信息获取时间Tm视为通过以下的等式1计算出的时间Tp。
[等式1]
Tp=Ts+(Tm-Tn)
另外,增强型服务管理单元130将内容信息获取时间之后过去的Tx的时间视为Tp+Tx。
然后,在操作S807中,增强型服务管理单元130在所获得的内容信息中获得增强型服务和其开始时间Ta。
在操作S809中,如果被同步的主AV内容的播放时间与增强型服务的开始时间Ta相同,则增强型服务管理单元130开始所获得的增强型服务。更详细地,当满足以下的等式2时,增强型服务管理单元130可以开始增强型服务。
[等式2]
Tp+Tx=Ta
图20是示出根据实施方式的将主AV内容的播放时间与增强型服务的播放时间同步的方法的概念图。
如图20中所示,视频显示装置100在系统时间Tn期间提取AV样本。
视频显示装置100从所提取的AV样本中提取特征信息,并且将包括所提取的特征信息的查询发送到指纹服务器22,以接收查询结果。视频显示装置100通过解析查询结果,确认所提取的AV样本的开始时间Ts是否对应于11000ms的Tm。
因此,视频显示装置100将根据等式1确认的所提取的AV样本的开始时间的时间视为Ts+(Tm-Tn),使得,在此之后,主AV内容的播放时间可以与增强型服务的开始时间同步。
接着,将参照图21至图50根据各种实施方式描述ACR应用程序。
ACR应用程序可以包括自动播放应用程序、内容提供商应用程序和视频显示制造商应用程序。
图21是根据实施方式的当执行自动播放应用时的画面。
自动播放应用程序自动地播放增强型服务,即使是在用户没有采取动作时。从这个意义上讲,在本说明书中,自动播放应用程序被指定为往后靠应用程序(lean backapplication)。
在没有用户输入的情况下,自动播放应用程序根据主AV内容的播放时间自动地播放增强型服务,如内容提供商或广播站在主AV内容的播放期间提供的场景相关信息。也就是说,内容提供商或广播站完全控制自动播放应用程序。
如图21中所示,一旦执行自动播放应用程序,画面200就可以包括播放减少的主AV内容的子画面210和其中显示附加信息的子画面220。其中显示附加信息的子画面200可以在空间上与其中播放主AV内容的子画面210分开。
此外,当执行自动播放应用程序时,其中显示附加信息的区域可以是半透明的。在这种情况下,其中显示附加信息的区域可以与其中播放主AV内容的区域重叠。
图22是根据实施方式的当执行内容提供商应用程序时的画面。
在本说明书中,内容提供商应用程序被指定为完全交互式应用程序。
如图22(A)中所示,视频显示装置100下载并存储多个应用程序。图22(A)示出应用程序的图标230。多个应用程序之中的内容提供商应用程序是由内容提供商创建并分发的应用程序,因此,可以处于内容提供商的控制下。
视频显示装置100的用户可以从应用程序商店下载内容提供商应用程序并且判定是否要执行所下载的内容提供商应用程序。
图22(B)是当执行内容提供商应用程序时的画面。如图22(B)中所示,画面200可以包括其中播放减少的主AV内容的子画面210和其中显示附加信息的子画面220。
下文中,将参照图23至图50根据实施方式描述视频显示装置制造商应用程序。
视频显示装置制造商应用程序是由视频显示装置制造商创建并控制的,并且当制造视频显示装置100时可以预先被存储。也就是说,视频显示装置制造商应用程序可以提供相同的服务和用户界面,而不管内容提供商或内容为何。
视频显示装置制造商应用程序可以单独包括其中显示内容提供商提供的增强型服务的区域和其中显示视频显示装置制造商提供的增强型服务的区域。视频显示装置100的用户可以判定是否要执行视频显示装置制造商应用程序。
视频显示装置制造商应用程序可以具有两种类型。
第一种类型的视频显示装置制造商应用程序具有缩放用户界面。具有缩放用户界面的视频显示装置制造商应用程序减小其中显示主AV内容的区域的尺寸,以在减小的区域中显示所有主AV内容。另外,具有缩放用户界面的视频显示装置制造商应用程序重新确定其中显示应用程序的区域的形状,使其具有L或倒L形的结构。
第二种类型的视频显示装置制造商应用程序具有重叠的用户界面。具有重叠的用户界面的视频显示装置制造商应用程序保持其中显示主AV内容的区域的尺寸,并且将其中显示应用程序的区域重叠在主AV内容上。因为其中显示应用程序的区域覆盖主AV内容,所以应用程序区域可以是半透明的。
图23是根据实施方式的当执行具有缩放用户界面的视频显示装置制造商应用程序时的画面。
如图23中所示,当执行具有缩放用户界面的视频显示装置制造商应用程序时的画面300包括:主内容区310,其中显示主AV内容;主菜单区320,其中显示主菜单;通知区330,其中显示通知消息;控制按钮区340,其中显示用于控制视频显示装置制造商应用程序的控制按钮;子菜单区350,其中显示子菜单;附加信息区360,其中显示附加信息;和广告区370,其中显示广告。
控制按钮区340包括:结束按钮341,其用于结束视频显示装置制造商应用程序;隐藏按钮342,其用于隐藏视频显示装置制造商应用程序;和返回按钮343,其用于返回之前的信息。
在具有缩放用户界面的视频显示装置制造商应用程序中,主AV内容区310位于画面300的左上部;主菜单区320和通知区330位于主AV内容区310的下部;控制按钮区340位于左上部;子菜单区350位于控制按钮区340和附加信息区360之间;广告区370位于右下部;并且附加信息区360位于子菜单区350和广告区370之间。然而,它们的位置可能发生变化。
图24是根据实施方式的当执行具有重叠的用户界面的视频显示装置制造商应用时的画面。
如图24中所示,如同具有缩放用户界面的视频显示装置制造商应用程序一样,当执行具有重叠的用户界面的视频显示装置制造商应用程序时的画面300包括:主内容区310,其中显示主AV内容;主菜单区320,其中显示主菜单;通知区330,其中显示通知消息;控制按钮区340,其中显示用于控制视频显示装置制造商应用程序的控制按钮;子菜单区350,其中显示子菜单;附加信息区360,其中显示附加信息;和广告区370,其中显示广告。
在具有重叠的用户界面的视频显示装置制造商应用程序中,主AV内容区310位于画面300的左上部;主菜单区320和通知区330位于主AV内容区310的下部;控制按钮区340位于左上部;子菜单区350位于控制按钮区340和附加信息区360之间;广告区370位于右下部;并且附加信息区360位于子菜单区350和广告区370之间。然而,它们的位置可能发生变化。
下文中,将主要描述具有缩放用户界面的视频显示装置制造商应用程序。
视频显示装置制造商应用程序从内置于视频显示装置100内的ACR引擎接收必要信息并且很大程度上根据其符号具有两种类型的菜单。
第一种类型的菜单是针对时间不敏感增强型服务。也就是说,当选择涉及时间不敏感增强型服务的菜单时,视频显示装置100获得当前在画面上播放的主AV内容的标识符,基于所获得的标识符获得增强型服务,并且在附加信息区360上显示所获得的增强型服务。这种时间不敏感增强型服务的例子包括标题、类别、演员、导演和其它人的评价、短剪辑和短说明。通过这种基础信息,视频显示装置100可以与社交网络服务如Facebook和Twitter连接以搜索附加信息,或者提供经推荐的服务和相关的广告。
第二种类型的菜单是针对时间敏感增强型服务。也就是说,当选择涉及时间敏感增强型服务的菜单时,视频显示装置100获得当前在画面上播放的主AV内容的标识符和播放时间信息,基于所获得的标识符和播放时间信息获得时间敏感增强型服务,并且在附加信息区360上显示所获得的增强型服务。
视频显示装置制造商应用程序的主菜单包括节目菜单、信息菜单、社交菜单、推荐菜单和目录菜单。在这些菜单之中,时间不敏感菜单包括信息菜单、社交菜单、推荐菜单和目录菜单,并且时间敏感菜单包括节目菜单。如果选择时间不敏感菜单,则可以调用时间敏感应用程序。除了这五个主菜单之外,可以添加其它的主菜单。如果选择各个主菜单,则在子菜单区350上显示所选择主菜单的子菜单。
图25是示出根据实施方式的执行视频显示装置制造商应用程序的方法的流程图。
当在操作S901中通过压下遥控器的特定键接收与应用程序选择菜单显示对应的用户输入,将运动遥控器朝向下方向晃动,在播放主AV内容的同时将运动遥控器的光标在画面的底部方向上缩放时,在操作S903中,视频显示装置100显示图26的应用程序选择菜单。
图26是根据实施方式的当显示应用程序选择菜单时的画面。
如图26中所示,应用程序选择菜单380位于画面300的底部。应用程序选择菜单380可以是半透明的。
应用程序选择菜单380包括安装在视频显示装置100中的多个应用程序的执行图标。所显示的执行图标中的一个图标对应于视频显示装置制造商应用程序的执行图标。
当在操作S905中通过操纵遥控器中的左箭头键和右箭头键或者根据运动遥控器的移动移动光标来接收与视频显示装置制造商应用程序的图标选择对应的用户输入时,在操作S907中,视频显示装置100执行视频显示装置制造商应用程序。通过这个步骤,如果用户想的话,他/她可以立即执行应用程序,而不用在观看主AV内容的同时访问应用程序商店。
一旦执行视频显示装置制造商应用程序,就显示其主菜单。如果默认选择的是节目菜单,则在子菜单区350上显示其子菜单。在节目菜单的子菜单之中,默认选择的是全部子菜单。注意力放在全部子菜单上。随着时间流逝,自动地更新显示在附加信息区360上的增强型服务。<-按钮用于返回到前一菜单并且X按钮用于在关闭视频显示装置制造商应用程序之后返回到整个画面。
然后,将参照图27至图29根据实施方式描述视频显示装置制造商应用程序。
节目主菜单是用于在附加信息区360上显示应用程序的菜单,该菜单与正在播放的主AV内容在时间上相关。可以由内容拥有者如TV广播商提供显示与主AV内容相链接的应用程序的增强型服务信息。视频显示装置100分析增强型服务信息,以按正确时序在附加信息区360中显示对应的应用程序。画面中的UI在以下的图中示出。
节目菜单包括全部子菜单、参与子菜单和发现子菜单。
全部子菜单是用于在附加信息区360上显示涉及参与子菜单和发现子菜单的全部应用程序的菜单。参与子菜单是用于在节目中显示引导节目参与(如投票)的应用程序的菜单。发现子菜单是用于显示应用程序如场景相关信息的菜单。可以根据内容拥有者想要的应用程序的内容,添加或编辑节目菜单的子菜单。
图27是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的全部子菜单时的画面。
当选择全部子菜单即节目主菜单的第一子菜单时,视频显示装置100显示涉及参与子菜单的全部应用程序并且在附加信息区360上显示子菜单。
当选择全部子菜单时,视频显示装置100在附加信息区360上显示与特定时间同步的应用程序或事件。如果不存在与特定时间同步的应用程序,则视频显示装置100可以保留附加信息区350为空的空间。然而,因为空的空间没有刺激与用户的额外互动,所以如果没有与特定时间同步的应用程序,则视频显示装置100可以收集在现在之前出现的应用程序或事件以显示历史。
当用户进入视频显示装置制造商应用程序时,可以看到,用户可以在观看主AV内容的同时意图执行涉及主AV内容的交互式应用程序。在操纵多个菜单的同时,用户在特定时间可能没有观看到事件。具体地,当用户操纵菜单寻求时间不敏感增强型服务时,可能会出现以上情况。因此,在进入视频显示装置制造商应用程序之后,如果在操纵期间出现时间敏感事件,则视频显示装置100在通知区330上显示针对此的通知消息,以通知用户广播站在当前时间广播了特定事件。
当用户通过视频显示装置制造商应用程序确认音乐信息或地点信息时,出现时间链接应用程序,视频显示装置100在通知区330上显示通知消息。当接收与按压“转到(Go To)”按钮对应的用户输入时,视频显示装置100进入涉及出现时间链接应用程序的子菜单并且在附加信息区360上显示出现时间链接应用程序。通知消息可以是文本消息。另外,视频显示装置100可以用数字显示所传递的应用程序的数量。可以用Push方法将通知消息传递给观众。
图28是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的参与子菜单时的画面。
如图28中所示,一旦选择参与子菜单,视频显示装置100就在附加信息区360上显示引导观众参与(如投票)的应用程序。如果出现观众参与应用程序,则视频显示装置100将其在附加信息区360上显示。如果观众参与应用程序正进行投票,则视频显示装置100可以显示投票问题和投票结果。此外,视频显示装置100显示当前事件并且为了观众的方便起见,还在当前事件的底部显示观众参与的前一个事件。
图29是根据实施方式的当选择视频显示装置制造商应用程序中的节目主菜单的发现子菜单时的画面。
如图29中所示,一旦选择发现子菜单,视频显示装置100就在附加信息区360上除了观众参与应用程序之外还显示所有时间链接应用程序。例如,视频显示装置100在主AV内容中示出的产品或地点显示场景相关信息。视频显示装置100可以同时显示当前的场景相关信息和前一个场景相关信息。
此外,视频显示装置100可以显示通知消息,通知在子菜单上存在时间链接应用程序或事件。例如,如果出现观众参与应用程序,则视频显示装置100在参与子菜单上显示具有闪烁N的图标以引导观众参与。如果用户在预定时间内没有响应于该通知,则视频显示装置100可以去除该通知。
下文中,将参照图30至图36根据实施方式描述视频显示装置制造商应用程序的信息主菜单。
信息主菜单对应于时间敏感区。如同节目主菜单的UI一样,信息主菜单没有以应用程序自动显示并且在特定时间消失的UI方式进行操作。当然,尽管可以通过这个菜单显示上述时间链接应用程序,但是当选择除了节目主菜单之外的主菜单时,可以链接第二服务如搜索服务或Twitter服务。
信息主菜单包括搜索子菜单、Twitter子菜单和新闻子菜单。
然后,将参照图30至图32根据实施方式描述视频显示装置制造商应用程序中的信息主菜单的搜索子菜单。
图30是示出根据实施方式的搜索方法的流程图。
视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1002中选择视频显示装置制造商应用程序中的信息主菜单的搜索子菜单,在操作S1003中,视频显示装置100就基于所获得的内容信息获得包括与增强型服务对应的多个搜索项的搜索列表。搜索列表包括类别、演员、导演、地点和产品中的至少一个。
在操作S1007中,视频显示装置100在附加信息区360上显示搜索列表。将参照图30描述搜索列表的显示例子。
图31是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的搜索子菜单时的画面。
如图31中所示,搜索列表包括主AV内容的符号。视频显示装置100可以在附加信息区360上显示搜索项的图片或名字中的至少一个。
当在操作S1009中通过遥控器的光标选择多个搜索项中的一个时,在操作S1011中视频显示装置100搜索关于所选的搜索项的信息。此时,视频显示装置100可以使用互联网搜索引擎如Google。此外,视频显示装置100可以使用信息如Tribune媒体或IMDb。
在操作S1013中,视频显示装置100显示搜索到的关于附加信息区360的信息。因为搜索到的结果是通过服务提供商的编程(如Open API)自动获取的,所以可以大大节省画面设计的时间。将参照图32描述搜索信息的显示例子。
图32是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的搜索子菜单时的另一个画面。
如图32中所示,视频显示装置100在附加信息区360上显示针对所选择的搜索项的搜索结果。此外,视频显示装置在附加信息区360上设置Twitter按钮和编辑按钮,以关注演员的Twitter或者编辑演员的简档如全部影片目录或传记。
像这样,如果使用根据实施方式的搜索方法,则可以通过一次点击搜索涉及主AV数据的信息,使得可以不那么费力地输入搜索词。
接着,将参照图33至图34根据实施方式描述视频显示装置制造商应用程序中的信息主菜单的Twitter子菜单。
图33是示出根据实施方式的聊天窗口显示方法的流程图。
在操作S1101中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1102中选择视频显示装置制造商应用程序中的信息主菜单的Twitter子菜单,在操作S1103中视频显示装置100就基于所获得的内容信息获得与增强型服务对应的Twitter聊天列表。视频显示装置100在Twitter的Hashtag上写上节目名字,以下载涉及该节目的Twitter聊天列表。这个聊天列表链接到Twitter并且实时地持续更新。
在操作S1107中,视频显示装置100通过用户选择或者自动地在附加信息区360上显示Twitter聊天列表中的一个聊天窗口。将参照图34描述聊天窗口的显示例子。
图34是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的Twitter子菜单时的画面。
如图34中所示,视频显示装置100在附加信息区360上显示聊天窗口,以支持观看同一节目的观众之间进行聊天。
当广播节目时,该节目的用户可以实际上直接在聊天室中写消息。如果视频显示装置100具有如同智能TV一样的登录机制,则视频显示装置100的用户可以在进入菜单时立即在他自己的ID处于登录状态的情况下开始聊天。如果不方便通过遥控器对视频显示装置100进行输入,则视频显示装置100可以只显示聊天消息。如果视频显示装置100链接到第二装置如智能电话或平板电脑,则可以使用第二装置的输入装置键入消息。尽管Hashtag中的信息基本上是节目名字,但是它可以被选择作为演员或导演的标记,即,上述其它基本信息,使得可以用户可以选择性地参与对应主题的聊天。
接着,将参照图35至图36根据实施方式描述视频显示装置制造商应用程序中的信息主菜单的新闻子菜单。
图35是示出根据实施方式的新闻获得方法的流程图。
在操作S1201中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1202中选择视频显示装置制造商应用程序中的信息主菜单的新闻子菜单,在操作S1203中视频显示装置100就基于所获得的内容信息获得与增强型服务对应的新闻。此时,新闻可以涉及或者可以不涉及主AV内容。或者,新闻可以由主AV内容的广播商提供。如果广播商没有通过Open API提供新闻,则视频显示装置100可以通过互联网服务如Google或Yahoo的新闻馈送接收新闻。
在操作S1207中,视频显示装置100在附加信息区360上显示所获得的新闻。将参照图36描述新闻的显示例子。
图36是根据实施方式的当选择视频显示装置制造商应用程序中的信息主菜单的新闻子菜单时的画面。
如图36中所示,视频显示装置100可以在附加信息区360上显示所获得的新闻。
下文中,将参照图37至图42根据实施方式描述视频显示装置制造商应用程序的社交主菜单。
社交主菜单对应于时间不敏感区。如同节目主菜单的UI一样,社交主菜单没有以应用程序自动显示并且在特定时间消失的UI方式进行操作。当然,尽管可以通过这个菜单显示上述时间链接应用程序,但是当选择除了节目主菜单之外的主菜单时,可以链接第二服务如Facebook。
社交主菜单包括观众列表子菜单和优先显示子菜单。
然后,将参照图37至图40根据实施方式描述视频显示装置制造商应用程序中的社交主菜单的观众列表子菜单。
图37是示出根据实施方式的观众列表显示方法的流程图。
在操作S1301中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1302中选择视频显示装置制造商应用程序中的社交主菜单的观众列表子菜单,在操作S1303中视频显示装置100就基于所获得的内容信息获得与朋友列表以及每个朋友是否观看主AV内容有关的信息。视频显示装置100可以与社交网络服务如Facebook链接,以获得观看主AV内容的朋友的列表。
在操作S1307中,视频显示装置100在附加信息区360上显示所获得的观众列表。将参照图38描述观众列表的显示例子。
图38是根据实施方式的当选择视频显示装置制造商应用程序中的社交主菜单的观众列表子菜单时的画面。
如图38中所示,视频显示装置100可以在附加信息区360上显示与所获得的观众列表对应的观众的照片和名字。
具体地,视频显示装置100可以显示朋友列表连同每个朋友是否观看内容或者可以只显示当前观看内容的朋友的列表。
当在操作S1309中从所显示的朋友中选择一个朋友时,在操作S1311中视频显示装置100确认所选择的朋友是否匹配主AV内容。
如果所选择的朋友观看主AV内容,则在操作S1313中视频显示装置100在附加信息区360上显示所选择朋友的的聊天窗口。
另外,如果所选择的朋友没有观看主AV内容,则在操作S1315中视频显示装置100将推荐观看主AV内容的消息发送到所选择朋友的电子邮件或移动电话。即使所选择的朋友没有观看主AV内容,视频显示装置100也可以在附加信息区360上显示所选择朋友的聊天窗口。
为了聊天,用户可以使用视频显示装置100的遥控器或者与视频显示装置100连接的第二装置的输入装置,并且可以通过智能电话的社交网络服务应用程序与朋友聊天,而不管视频显示装置100如何。在任一种情况下,社交网络服务的聊天画面可以在视频显示装置100的画面上显示。通过评价节目的按钮,用户可以将他/她的意图发送给朋友。例如,用户可以通知朋友他/她当前观看主AV内容并且可以通过“好(good)”按钮推荐没有观看主AV内容的朋友观看该主AV内容。
像这样,视频显示装置100通过观众列表子菜单使用ACR技术自动地识别谁正在观看什么节目。为了确认谁正在观看哪个节目,用户需要登录。一旦登录账号在视频显示装置100中注册,每当视频显示装置100启动时,用户就可以自动地登录。因此,视频显示装置100识别谁正在观看主AV内容。
图39是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
如图39中所示,如果朋友A的视频显示装置播放主AV内容A,则在操作S1401中它将主AV内容A的标识符和朋友A的标识符发送到SNS提供服务器75。
另外,如果朋友B的视频显示装置播放主AV内容A,则在操作S1403中它将主AV内容A的标识符和朋友B的标识符发送到SNS提供服务器75。
如果视频显示装置100播放主AV内容A,则在操作S1405中它将用户ID和主AV内容A的标识符发送到SNS提供服务器75。
在操作S1407中,SNS提供服务器75基于朋友关系信息和接收到的内容标识符,确认与视频显示装置100的朋友列表和每个朋友是否观看主AV内容有关的信息。
图40是根据实施方式的当视频显示装置获得朋友列表和观看信息时的信号流。
如图40中所示,如果朋友A的视频显示装置播放主AV内容A,则在操作S1501中它将朋友A的标识符发送到SNS提供服务器75并且在操作S1503中将主AV内容A发送到ACR服务器。ACR服务器77可以是水印服务器21、指纹服务器22、增强型服务信息提供服务器40和增强型服务提供服务器50中的一个。
另外,如果朋友B的视频显示装置播放主AV内容A,则在操作S1505中它将朋友B的标识符发送到SNS提供服务器75,并且在操作S1507中将主AV内容A发送到ACR服务器77。
在操作1509中,视频显示装置100将用户ID发送到SNS提供服务器75。
然后,在操作S1511中,SNS提供服务器75将与用户ID对应的朋友列表提供到ACR服务器75。
此外,如果视频显示装置100播放主AV内容A,则在操作S1513中它将用户ID和主AV内容A的标识符发送到ACR服务器75。
在操作S1515中,ACR服务器75基于与用户ID和内容标识符对应的朋友列表,确认与视频显示装置100的朋友列表和每个朋友是否观看主AV内容有关的信息,然后将确认的信息提供到视频显示装置100。
然后,将参照图41至图42根据实施方式描述视频显示装置制造商应用程序中的社交主菜单的优先显示子菜单。
图41是示出根据实施方式的优先显示方法的流程图。
在操作S1601中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1602中选择视频显示装置制造商应用程序中的社交主菜单的优先显示子菜单,在操作S1603中视频显示装置100就基于所获得的内容信息获得包括多个优先显示项的优先显示列表。这里,优先显示项可以包括预览或预览地址。预览可以是图像或短视频。预览可以直接由广播商通过Open API提供,或者可以通过互联网服务的搜索引擎获得,或者通过只从广播商的互联网服务器提取必要部分而获得。可以提供与对应于几分钟的时间间隔的重要场景对应的图像或者可以提供一个节目的一个图像。
在操作S1607中,视频显示装置100在附加信息区360上显示获得的优先显示列表。将参照图42描述观众列表的显示例子。
图42是根据实施方式的当选择视频显示装置制造商应用程序中的社交主菜单的优先显示子菜单时的画面。
如图42中所示,视频显示装置100可以在优先显示列表中显示预览并且在附加信息区360上显示用于优先显示的“喜欢它”按钮。
一旦在操作S1609中选择与一个优先显示项对应的“喜欢它”按钮,在操作S1611中视频显示装置100就将与所选择的优先显示项对应的预览和简单文本张贴在SNS如Facebook上。这里,简单文本可以是自动产生的,或者可以是通过遥控器或第二装置的输入装置输入的。
下文中,将参照图43至图46根据实施方式描述视频显示装置制造商应用程序的推荐主菜单。
推荐主菜单对应于时间不敏感区。如同节目主菜单的UI一样,推荐主菜单没有以应用程序自动显示并且在特定时间消失的UI方式进行操作。当然,通过这个菜单,可以显示上述时间链接应用程序,但是如果选择了推荐菜单,则可以链接另一个服务。
推荐主菜单可以包括前一剧集子菜单、VOD子菜单和应用程序子菜单。
图43是示出根据实施方式的数字媒体下载方法的流程图。
在操作S1701中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1702中选择视频显示装置制造商应用程序中的推荐主菜单,在操作S1703中视频显示装置制造商应用程序就基于所获得的内容信息获得数字媒体列表。如果选择前一剧集子菜单,则视频显示装置100获得前一剧集列表。如果选择VOD子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的VOD列表。如果选择应用程序子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的VOD列表。这里,数字媒体列表可以包括预览、预览地址和图标相关图像。
在操作S1707中,视频显示装置制造商应用程序在附加信息区360上显示所获得的数字媒体列表。
参照图44描述前一剧集列表的例子。
图44是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的前一剧集子菜单时的画面。
如图44中所示,视频显示装置100在附加信息区360上显示前一剧集列表的预览和标题。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示前一剧集。
将参照图45描述VOD列表的显示例子。
图45是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的VOD子菜单时的画面。
如图45中所示,视频显示装置100在附加信息区360上显示VOD列表的预览和标题。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的VOD。
将参照图46描述应用程序列表的显示例子。
图46是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的应用子菜单时的画面。
如图46中所示,视频显示装置100在附加信息区360上显示应用程序列表的图标和应用程序名称。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的应用程序。
一旦在操作S1709中从数字媒体列表中选择一项,在操作S1711中视频显示装置制造商应用程序就下载与所选择项对应的数字媒体。此时,视频显示装置100可以在支付之后下载数字媒体。如果所选项是前一剧集或VOD,则视频显示装置100可以播放所下载的数字媒体。如果所选项是应用程序,则视频显示装置可以自动播放所下载的应用程序或者可以通过用户的选择播放它。
像这样,根据实施方式,视频显示装置可以通过简单操纵下载数字媒体。
下文中,将参照图47至图50根据实施方式描述视频显示装置制造商应用程序的目录主菜单。
目录主菜单对应于时间不敏感区。如同节目主菜单的UI一样,目录主菜单没有以应用程序自动显示并且在特定时间消失的UI方式进行操作。当然,通过这个菜单,可以显示上述时间链接应用程序,但是如果选择了目录菜单,则可以链接另一个服务。
目录主菜单可以包括风格子菜单、音乐主菜单和其它子菜单。
图47是示出根据实施方式的目录显示方法的流程图。
在操作S1801中,视频显示装置100提取主AV内容的某个片段并且基于所提取的片段获得内容信息。
一旦在操作S1802中选择视频显示装置制造商应用程序中的目录主菜单,在操作S1803中视频显示装置制造商应用程序就基于所获得的内容信息获得目录列表。如果选择风格子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的装扮(clothing)目录列表。如果选择音乐子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的音乐目录列表。如果选择其它子菜单,则视频显示装置100获得涉及主AV内容或者主AV内容的提供商推荐的产品或地点目录列表。这里,数字媒体列表可以包括相关图像、价格信息、说明和优惠券。优惠券可以是数字或QR代码。视频显示装置100可以只在用户观看主AV内容时显示优惠券,或者可以允许用户在将优惠券存储在存储器150上之后在有效期内使用优惠券。
在操作S1807中,视频显示装置制造商应用程序在附加信息区360上显示所获得的目录列表。
将参照图48描述装扮目录列表的显示例子。
图48是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的风格子菜单时的画面。
如图48中所示,视频显示装置100在附加信息区360上显示制作者信息、价格信息、涉及主AV内容的装扮的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示装扮目录。
参照图49描述音乐目录列表的例子。
图49是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的音乐子菜单时的画面。
如图49中所示,视频显示装置100在附加信息区360上显示演唱者信息、价格信息、涉及主AV内容的音乐的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示音乐目录。
将参照图50描述其它目录列表的显示例子。
图50是根据实施方式的当选择视频显示装置制造商应用程序中的推荐主菜单的其它子菜单时的画面。
如图50中所示,视频显示装置100在附加信息区360上显示价格信息和涉及主AV内容的产品和地点的说明信息。像这样,根据实施方式,视频显示装置100可以在没有用户操纵的情况下自动搜索并显示涉及主AV内容的产品或地点目录。
一旦在操作S1809中从目录列表中选择一项,则在操作S1811中视频显示装置制造商应用程序显示与所选项对应的购买项。
像这样,根据实施方式,用户可以通过简单操纵购买产品。
可以在目录列表中的每项中设置购买后评价按钮和书签按钮。
一旦选择购买后评价按钮,视频显示装置100就可以在附加信息区360上显示产品的用后评价。另外,用户可以写入购买后评价。
另外,在通过书签按钮对特定项加书签之后,用户可以通过社交主菜单的观众列表子菜单推荐加书签的项。
在这种情况下,视频显示装置100可以将书签项信息提供到ACR服务器77或SNS提供服务器75。
然后,接收推荐的用户的视频显示装置100基于从主AV内容提取的片段获得内容信息,并且如果主AV内容基于所获得的内容信息对应于所推荐项的广告的话,则可以显示推荐消息如“这个产品是由朋友U推荐的”。另外,可以显示短视频来替代推荐消息。
然后,将参照图51和图52根据实施方式描述ACR功能的开启/关闭控制。
图51是根据实施方式的用于控制ACR功能的用户界面的视图。
如图51中所示,播放控制单元113显示ACR功能设置窗口。用户可以通过ACR功能设置窗口对ACR功能进行激活或去激活。
当激活ACR功能时,用户可以选择ACR模式。ACR模式可以被设置为具有自动播放应用程序模式、内容提供商应用程序模式和视频显示制造商应用程序模式中的一个。
当用以上方式设置ACR功能模式时,播放控制单元113将设置信息存储在设置信息存储单元154上。
图52是示出根据实施方式的控制视频显示装置的方法的流程图。
在操作S1901中,增强型服务管理单元130确认ACR功能是否启动。
如果去激活ACR功能,则增强型服务管理单元130不再执行内容信息获得程序。
如果激活ACR功能,则在操作S1902中增强型服务管理单元130提取主AV内容的某个片段。
在操作S1903中,增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。
在操作S1905中,增强型服务管理单元130将主AV内容的参考时间与替代广告的参考时间同步。
在操作S1907中,增强型服务管理单元130基于所获得的内容信息获得增强型服务。增强型服务管理单元130基于内容信息获得增强型服务信息,然后基于增强型服务信息获得增强型服务。
然后,在操作S1909中,增强型服务管理单元130确认ACR模式。
在操作S1911中,增强型服务管理单元130根据ACR模式播放增强型服务。
更详细地,如果ACR模式是自动播放应用程序模式,则增强型服务管理单元130执行自动播放应用程序,并且所执行的自动播放应用程序播放所获得的增强型服务。
如果ACR模式是内容提供商应用程序模式,则增强型服务管理单元130在后台执行与所获得的内容信息对应的内容提供商应用程序。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示内容提供商应用程序。这个内容提供商应用程序可以播放所获得的增强型服务。作为内容提供商应用程序在后台自动执行的替代方式,内容提供商应用程序可以通过用户输入执行。
如果ACR模式是视频显示装置制造商应用程序模式,则增强型服务管理单元130在后台执行视频显示装置制造商应用程序。增强型服务管理单元130在接收与增强型服务使用对应的用户输入时显示视频显示装置制造商应用程序。这个视频显示装置制造商应用程序可以播放所获得的增强型服务。作为视频显示装置制造商应用程序在后台自动执行的替代方式,视频显示装置制造商应用程序可以通过用户输入执行。
下文中,将参照图53和图54描述控制视频显示装置的方法。
图53是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
当视频显示装置100启动时,在操作S2001中增强型服务管理单元130提取主AV内容的某个片段。
在操作S2003中,增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。例如,增强型服务管理单元130从所提取的片段中提取水印信息,并且从所提取的水印信息中获得内容信息。另外,增强型服务管理单元130提取所提取的片段的特征信息,并且将包括所提取的特征信息的查询发送到指纹服务器22,使得响应于查询获得内容信息。
在操作S2005中,增强型服务管理单元130基于所获得的内容信息获得增强型服务信息或增强型服务。
在获得增强型服务信息或增强型服务之后,当在操作S2007中过去预定时间(Tdelay)时,增强型服务管理单元130再次执行从操作S2001开始的处理。
即使通过ACR识别主AV内容或频道,因为视频显示装置100可能未预测在同一频道中主AV内容何时发生变化,所以ACR不需要周期性地执行。另外,当用户改变频道时,视频显示装置100需要以最大快周期执行ACR,以检测频道改变时序。
为此,如果预定时间(Tdelay)缩短,则视频显示装置100的资源(CPU和存储器占用)浪费,并且频繁需求减少了频道带宽的使用效率。
另外,频繁需求增加了内容识别服务提供服务器20、增强型服务信息提供服务器40和增强型服务提供服务器50的负荷。
关于基于指纹的ACR,如果从提取主AV内容的某个片段到获得内容信息的时间被称为Tacr并且从获得内容信息到获得增强型服务信息或增强型服务的时间被称为Tr,则可以如以下等式3地确定ACR周期(Tp)。
[等式3]
Tp=Tacr+Tr+Tdelay
因此,当在Tc期间保持同一主AV内容时,可以如以下等式4地确定对增强型服务信息或增强型服务的请求的数量。
[等式4]
N=[Tc/Tp]
在等式4中,[]代表高斯符号。
如等式4中所示,对于增强型服务信息或增强型服务的(N-1)个请求可能不是必须的。
此外,当改变频道时,从频道改变时刻到获得内容信息所耗费的时间介于等式5的Tmin和等式6的Tmax之间。
[等式5]
Tmin=Tacr+Tr
[等式6]
Tmax=Tacr+Tr+Tdelay+Tacr+Tr
从频道改变时刻到获得内容信息所耗费的平均时间Tt如以下等式7。
[等式7]
Tt=(Tmin+Tmax)/2
Tmin对应于恰在频道改变之后立即开始ACR操作的时间并且Tmax对应于恰在频道改变前一刻开始ACR操作的时间。
如果Tdelay缩短以缩短Tmax,则系统负荷可能急剧增大。
图54是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
当视频显示装置100打开时,在操作S2101中增强型服务管理单元130提取主AV内容的某个片段。
在操作S2103中,增强型服务管理单元130基于所提取的片段获得主AV内容的内容信息。例如,增强型服务管理单元130从所提取的片段中提取水印信息,并且从所提取的水印信息中获得内容信息。另外,增强型服务管理单元130提取所提取的片段的特征信息,并且将包括所提取的特征信息的查询发送到指纹服务器22,使得响应于查询获得内容信息。
在操作S2105中,增强型服务管理单元130基于所获得的内容信息获得增强型服务信息或增强型服务。此时,在操作S2107中,除了增强型服务信息或增强型服务之外,增强型服务管理单元130还获得与内容改变时间信息对应的ACR时间信息。具体地,增强型服务信息可以包括内容改变时间信息。
随后,在操作S2109中,增强型服务管理单元130基于内容改变时间信息确定延迟时间(Tdelay)。具体地,增强型服务管理单元130可以延迟ACR操作,直到内容发生改变。
在获得增强型服务信息或增强型服务之后,即使在操作S2111中没有过去延迟时间(Tdelay),在操作S2113中增强型服务管理单元130也检测频道改变。当从广播接收装置60接收未压缩的主AV内容时,视频显示装置(100)可能不容易检测频道改变。因此,视频显示装置100可以在预定时间内通过检测在外部输入端口111中没有视频或音频信号来检测频道改变。具体地,可以省略用于检测频道改变的操作S2113。
当在操作S2113中检测到频道改变时,增强型服务管理单元130可以再次执行从操作S2001开始的处理。
在获得增强型服务信息或增强型服务之后,当在操作S2111中过去延迟时间(Tdelay)时,增强型服务管理单元130再次执行从操作S2001开始的处理。
通过以上处理,对增强型服务信息或增强型服务的(N-1)个请求可能不是必须的,使得系统负荷可以降低。另外,从频道改变时刻到当同一频道中内容发生改变时获得内容信息所耗费的平均时间Tt是Tmin。
下文中,将参照图55至图63描述增强型服务获得时刻。
图55是根据实施方式的增强型服务的时序图。
如图55中所示,在时刻①,广告应用程序、节目相关应用程序和CP相关应用程序是可用的。在时刻②,演唱者信息应用程序、投票应用程序、节目相关应用程序和CP相关应用程序是可用的。在时刻③,广告应用程序、投票应用程序、节目相关应用程序和CP相关应用程序是可用的。
像这样,因为在各个时刻可用的应用程序有所不同,所以在应用程序开始时刻之前需要识别这些应用程序。
图56是根据另一个实施方式的增强型服务的时序图。
在图56中,涉及主AV内容的增强型服务是演唱者应用程序。
应用程序的开始时间被指定为Tstart(app)。应用程序的结束时间被指定为Tend(app)。应用程序开始的最后时间被指定为Ts-limit(app)。T(app)代表演唱者执行程序的执行时间的长度。
另外,与增强型服务信息对应的演唱者应用程序的元数据的范围可以从Tstart(meta)至Tend(meta)。t(m)是演唱者应用程序的元数据的可用时间的长度。
t(pre)代表从Tend(meta)到Tstart(app)的时间。
t(w)代表从获得附加信息到Tstart(app)的时间。
图57是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
在操作S2201中,视频显示装置100通过对主AV内容进行采样,提取主AV内容的某个片段。
在操作S2203中,视频显示装置100提取所提取的某个片段的特征信息。
在操作S2205中,视频显示装置100将包括所提取的特征信息的第一查询发送到指纹服务器22。
在操作S2207中,指纹服务器22搜索内部数据库以获得与第一查询的特征信息对应的内容信息和增强型服务信息,并且产生包括内容信息的第一应答和增强型服务信息。此时,第一应答或增强型服务信息包括在等式8中表示的服务器待机时间(ts(w))。
[等式8]
ts(w)=(增强型服务的开始时间)-(被从中提取特征信息的片段的开始时间)
在操作S2209中,指纹服务器22将第一应答发送到视频显示装置100。
在操作S2211中,视频显示装置100基于第一应答或增强型服务信息中的服务器待机时间(ts(w))获得客户机待机时间(tc(w)),并且当客户机待机时间(tc(w))过去时开始基于增强型服务信息获得的增强型服务。
客户机待机时间(tc(w))可以通过以下等式9获得。
[等式9]
tc(w)=ts(w)-t(a)
等式9中的t(a)是采样开始时间和第一应答获取时间之间的时间差。视频显示装置100可以容易地获得采样开始时间和第一应答获取时间之间的时间差。
理论上,如以下等式10地表示t(a)。
[等式10]
t(a)=t(s)+t(g)+t(q)+t(p)+t(r)
在等式10中,t(s)代表采样所耗费的时间,t(g)代表从采样数据中提取特征信息所耗费的时间,t(q)代表发送第一查询所耗费的时间,t(p)代表服务器220用于搜索内部数据库所耗费的时间,并且t(r)代表发送第一应答所耗费的时间。
图58是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
如图58中所示,主AV内容在9p.m开始并且在10p.m结束。关于主AV内容,应用程序app1在9:10p.m开始并且在9:20p.m结束。
假设视频显示装置100在9:09:45p.m进行采样并且提取特征信息(kxxx),并且将包括所提取的特征信息(kxxx)的第一查询发送到指纹服务器22。
此时,指纹服务器22确认从中提取所提取的特征信息的片段的时间戳是9分45秒。另外,指纹服务器22确认应用程序app1的开始时间是10分0秒。因此,指纹服务器22可以获得15秒的服务器待机时间(ts(w))(10分0秒-9分45秒)。
指纹服务器22将包括内容信息、增强型服务信息和服务器待机时间(15秒)的第一应答提供到视频显示装置100。
如果视频显示装置100在下午的9时9分55秒这一时刻接收第一应答,则它可以获得10秒的t(a)(9时9分55秒-9时9分45秒)。
因此,指纹服务器100可以获得5秒(ts(w)-t(a))的客户机待机时间(tc(w))。
图59是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
在操作S2301中,视频显示装置100通过对主AV内容进行采样,提取主AV内容的某个片段。
在操作S2303中,视频显示装置100提取所提取片段的特征信息。
在操作S2305中,视频显示装置100将包括所提取的特征信息的第一查询发送到指纹服务器22。
在操作S2307中,指纹服务器22搜索内部数据库以获得与第一查询的特征信息对应的内容信息,并且产生包括内容信息的第一应答。
在操作S2309中,指纹服务器22将第一应答发送到视频显示装置100。
在操作S2311中,视频显示装置100将包括第一应答的内容信息的第二查询发送到增强型服务信息提供服务器40。
在操作S2313中增强型服务信息提供服务器40搜索内部数据库,以获得与第二查询的内容信息对应的增强型服务信息,并且产生包括内容信息的第二应答和增强型服务信息。此时,因为增强型服务信息提供服务器40可以从第二查询的内容信息获得从中提取特征信息的片段的开始时间并且从内部数据库获得增强型服务的开始时间,所以它获得服务器待机时间(ts(w))。因此,第二应答或增强型服务信息可以包括等式8中的服务器待机时间(ts(w))。
在操作S2315中,增强型服务信息提供服务器40将第二应答发送到视频显示装置100。
在操作S2317中,视频显示装置100基于第二应答或增强型服务信息中的服务器待机时间(ts(w))获得等式11中的客户机待机时间(tc(w)),并且当客户机待机时间(tc(w))过去时开始基于增强型服务信息获得的增强型服务。
客户机待机时间(tc(w))可以通过以下等式11获得。
[等式11]
tc(w)=ts(w)-t(a)
等式11中的t(a)是采样开始时间和第二应答获取时间之间的时间差。视频显示装置100可以容易地获得采样开始时间和第二应答获取时间之间的时间差。
图60是示出根据另一个实施方式的控制视频显示装置的方法的流程图。
在操作S2401中,视频显示装置100从主AV内容的某个片段提取水印信息并且从所提取的水印信息获得内容信息和增强型服务信息。此时,增强型服务信息包括第一待机时间(ts(w)),第一待机时间(ts(w))在概念上与等式8中的服务器待机时间类似。
在操作S2403中,视频显示装置100基于第一待机时间(ts(w))获得第二待机时间(tc(w)),并且当第二待机时间(tc(w))过去时开始基于增强型服务信息获得的增强型服务。此时,第二待机时间(tc(w))可以如以下等式12表示。
[等式12]
tc(w)=ts(w)-t(a)
等式12中的t(a)是水印信息提取开始时间和增强型服务信息获取时间之间的时间差。视频显示装置100可以容易地获得水印信息提取开始时间和增强型服务信息获取时间之间的时间差。
图61是示出根据另一个实施方式的基于水印的网络拓扑中的数据流的梯形图。
在操作S2501中,视频显示装置100从主AV内容的某个片段提取水印信息并且从所提取的水印信息获得内容信息。
在操作S2503中,视频显示装置100将包括所获得的内容信息的第一查询发送到增强型服务信息提供服务器40。
在操作S2505中,增强型服务信息提供服务器40搜索内部数据库,以获得与第二查询的内容信息对应的增强型服务信息,并且产生包括内容信息的第一应答和增强型服务信息。此时,因为增强型服务信息提供服务器40可以从来自内部数据库的第一查询的内容信息和增强型服务的开始时间获得从中提取水印信息的片段的开始时间,所以增强型服务信息提供服务器40获得服务器待机时间(ts(w))。因此,第一应答或增强型服务信息可以包括等式8中的服务器待机时间(ts(w))。
在操作S2507中,增强型服务信息提供服务器40将第一应答发送到视频显示装置100。
在操作S2509中,视频显示装置100基于第一应答或增强型服务信息中的服务器待机时间(ts(w))获得等式11中的客户机待机时间(tc(w)),并且当客户机待机时间(tc(w))过去时开始基于增强型服务信息获得的增强型服务。
客户机待机时间(tc(w))可以如以下等式13表示。
[等式13]
tc(w)=ts(w)-t(a)
等式13中的t(a)是水印信息提取开始时间和第一应答获取时间之间的时间差。视频显示装置100可以容易地获得水印信息提取开始时间和第一应答获取时间之间的时间差。
图62是根据另一个实施方式的增强型服务的时序图。具体地,图62示出当t(a)大于t(pre)和t(m)时的时序图。
关于图62的查询时刻1,视频显示装置100可以通过t(m)的查询获得增强型服务信息。然而,因为t(a)大于t(pre),所以增强型服务可以不在其开始时间开始。
关于图62的查询时刻2和3,当视频显示装置100恰在t(m)前一刻发送查询时,因为t(a)大于t(m),所以视频显示装置100可以不获得增强型服务信息。因此,可能没有发现增强型服务。
图63是根据另一个实施方式的增强型服务的时序图。具体地,图62示出当t(a)小于t(pre)和t(m)时的时序图。
关于图63的查询时刻1和2,当视频显示装置100恰在t(m)前一刻发送第一查询时,因为视频显示装置100可能未获得增强型服务信息,所以可能没有发现增强型服务。然而,因为t(a)小于t(m),所以视频显示装置100可以通过第二查询获得增强型服务信息,并且可以发现增强型服务。此时,视频显示装置100在待机的tc(w)之后开始增强型服务。
关于图63的查询时刻3,即使当视频显示装置100在t(m)的结束时间前一刻发送查询,因为t(a)小于t(pre),所以视频显示装置100可以在增强型服务的精确开始时间开始增强型服务。此时,视频显示装置100在待机的tc(w)之后开始增强型服务。
下文中,将根据实施方式参照图64至图67描述管理生命周期的方法。
图64是根据另一个实施方式的增强型服务管理单元的层次结构关系图。
如图64中所示,增强型服务管理单元130包括ACR引擎131e、浏览器132e、ACR插件133e、生命周期管理应用程序(LCM应用程序)134e和至少一个应用程序135e。
ACR插件133e被插入浏览器132e中。
生命周期管理应用程序134e管理应用程序135e的下载、执行和终止。
图65是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
图65的生命周期管理应用程序134e可以使用表14中示出的方法和事件。
[表14]
ACRMetadata类在表15中示出。
[表15]
Figure BDA00003244555600612
在操作S2601中,ACR引擎131e提取主AV内容的某个片段的特征信息。
在操作S2603中,ACR引擎131e将包括所提取的特征信息的内容信息请求消息发送到内容识别服务提供服务器20。
在操作S2605中,内容识别服务提供服务器20搜索内容数据库,以获得与特征信息对应的内容信息,并且将所获得的内容信息发送到ACR引擎131e。
在操作S2607中,ACR引擎131e将接收到的内容信息传递到ACR插件133e,并且在操作S2609中ACR插件133e将接收到的内容信息传递到生命周期管理应用程序134e。具体地,生命周期管理应用程序134e可以通过getACRMetadata()方法、onContentChanged(String contentId)事件或onMediaTimeUpdated(Number mediaTime)事件获得内容信息。
在操作S2611中,生命周期管理应用程序134e将包括内容信息的增强型服务信息请求消息发送到增强型服务提供服务器50或增强型服务信息提供服务器40。
在操作S2613中,增强型服务提供服务器50或增强型服务信息提供服务器40搜索内部数据库,以获得与内容信息获得的增强型服务信息,并且将所获得的增强型服务信息发送到生命周期管理应用程序134e。
在操作S2615中,生命周期管理应用程序134e根据接收到的增强型服务信息管理应用程序135e。如上所述,增强型服务信息可以包括增强型服务地址、增强型服务开始时间和增强型服务结束时间。生命周期管理应用程序134e访问增强型服务地址,以获得与增强型服务对应的应用程序135e,在增强型服务开始时间开始所获得的应用程序135e,并且在增强型服务结束时间结束应用程序135e。
图66是示出根据另一个实施方式的基于指纹的网络拓扑中的数据流的梯形图。
[表16]
[表17]
Figure BDA00003244555600622
首先,在操作S2701中,增强型服务提供服务器50或增强型服务信息提供服务器40将增强型服务信息提供到内容识别服务提供服务器20。
在操作S2703中,ACR引擎131e提取主AV内容的某个片段的特征信息。
在操作S2705中,ACR引擎131e将包括所提取的特征信息的ACR查询消息发送到内容识别服务提供服务器20。
在操作S2707中,内容识别服务提供服务器20搜索内容数据库,以获得与特征信息对应的内容信息和增强型服务信息,并且将所获得的内容信息和增强型服务信息发送到ACR引擎131e。
在操作S2709中,ACR引擎131e将接收到的内容信息和增强型服务信息传递到ACR插件133e,并且在操作S2711中,ACR插件133e将接收到的内容信息和增强型服务信息传递到生命周期管理应用程序134e。
具体地,生命周期管理应用程序134e可以通过ACRMetadata getACRMetadata()方法、onContentChanged(String contentId)事件或onMediaTimeUpdated(NumbermediaTime)事件获得内容信息和附加服务信息。
在操作S2713中,生命周期管理应用程序134e根据接收到的增强型服务信息管理应用程序135e。如上所述,增强型服务信息可以包括增强型服务地址、增强型服务开始时间和增强型服务结束时间。生命周期管理应用程序134e访问增强型服务地址,以获得与增强型服务对应的应用程序135e,在增强型服务开始时间开始所获得的应用程序135e,并且在增强型服务结束时间结束应用程序135e。
图67是根据实施方式的由生命周期管理应用程序控制的画面。
如图67中所示,当应用程序135e到达开始时间时,生命周期管理应用程序134e在画面600上显示触发器图标610,该图标通知应用程序135e是可用的。
当选择特定按钮如遥控器的红色按钮时,生命周期管理应用程序134e在附加信息显示区620上显示关于应用程序135e的信息。
接着,参照图68和图69描述根据实施方式的视频显示装置的结构。
图68是示出根据另一个实施方式的基于指纹的视频显示装置的结构的框图。
如图68中所示,调谐器501从通过广播频道发送的8-VSB RF信号中提取符号。
8-VSB解调器503对调谐器501提取的8-VSB符号进行解调并且恢复有意义的数字数据。
VSB解码器505对8-VSB解调器503用于恢复ATSC主服务和ATSC M/H服务的数字数据进行解码。
MPEG-2TP解复用器507从通过8-VSB信号发送的MPEG-2传输包中过滤出视频显示装置100将要处理的传输包或者PVR存储器中存储的MPEG-2传输包,以将过滤出的传输包转达到处理模块。
PES解码器539缓冲并恢复通过MPEG-2传输流发送的分组基本流。
PSI/PSIP解码器541缓冲并分析通过MPEG-2传输流发送的PSI/PSIP段数据。经分析的PSI/PSIP数据由服务管理器(未示出)收集,然后以服务地图和指南数据的形式存储在DB中。
DSMCC段缓冲器/处理器511通过MPEG-2TP和IP数据包封装处理供DSMCC段数据,以进行文件发送。
IP/UDP数据包缓冲器/头部解析器513缓冲并恢复通过DSMCC可寻址段封装并且通过MPEG-2TP发送的IP数据包,以分析每个数据包的头部。另外,IP/UDP数据包缓冲器/头部解析器513缓冲并恢复通过IP数据包发送的UDP数据包,然后分析并处理经恢复的UDP头部。
流组件处理器557可以包括ES缓冲器/处理器、PCR处理器、STC模块、解扰器、CA流缓冲器/处理器和服务信令段缓冲器/处理器。
ES缓冲器/处理器缓冲并恢复基本流如以PES形式发送的食品和音频数据,以将其传递到正确的A/V解码器。
PCR处理器处理用于音频和视频流的时间同步的节目时钟基准(PCR)数据。
STC模块校正使用通过PCR处理器接收的基准时钟值来校正A/V解码器的时钟值,以执行时间同步。
当向接收到的IP数据包施加扰频时,解扰器通过使用CA流处理器传递的加密钥恢复负载的数据。
CA流缓冲器/处理器缓冲并处理用于对EMM和ECM进行解扰的数据如加密值,所述数据是通过MPEG-2TS或IP流针对条件接收函数发送的。CA流缓冲器/处理器的输出被传递到解扰器,然后解扰器将携载A/V数据和文件数据的MPEG-2TP或IP数据包进行解扰。
服务信令段缓冲器/处理器缓冲、恢复并分析以IP数据包形式发送的NRT服务信令信道段数据。服务管理器(未示出)收集经分析的NRT服务信令信道段数据并且将其以服务图和指南数据的形式存储。
A/V解码器561对通过ES处理器接收的音频/视频数据进行解码,以将其向用户程序。
MPEG-2服务解复用器(未示出)可以包括MPEG-2缓冲器/解析器、解扰器和PVR存储模块。
MPEG-2TP缓冲器/解析器(未示出)缓冲并恢复通过8-VSB信号发送的MPEG-2传输包,并且还检测并处理传输包头部。
解扰器通过对MPEG-2TP中的被施加扰频的包负载使用由CA流处理器传递的加密钥来恢复负载的数据。
PVR存储模块在用户请求时存储通过8-VSB信号接收的MPEG-2并且在用户请求时输出MPEG-2TP。PVR存储模块可以受PVR管理器(未示出)控制。
文件处理器551可以包括ALC/LCT缓冲器/解析器、FDT处理器、XML解析器、文件重构缓冲器、解压缩器、文件解码器和文件存储器。
ALC/LCT缓冲器/解析器缓冲并恢复通过UDP/IP流发送的ALC/LCT数据,并且分析ALC/LCT的头部和头部扩展。ALC/LCT缓冲器/解析器可以受NRT服务管理器(未示出)控制。
FDT处理器分析并处理通过ALC/LCT会话发送的FLUTE协议的文件说明表。FDT处理器可以受NRT服务管理器(未示出)控制。
XML解析器分析通过ALC/LCT会话发送的XML文档,然后将经分析的数据发送到正确的模块如FDT处理器和SG处理器。
文件重构缓冲器恢复通过ALC/LCT、FLUTE会话发送的文件。
如果通过ALC/LCT和FLUTE会话发送的文件被压缩,则解压缩器执行处理以对文件进行解压缩。
文件解码器对文件重构缓冲器中恢复的文件、在解压缩器中解压缩的文件或从文件存储器中提取的文件进行解码。
如果有必要,文件存储器存储或提取经恢复的文件。
M/W机(未示出)处理数据如文件,该数据不是通过DSMCC段和IP数据包发送的A/V流。M/W机将经处理的数据传递到呈现管理器模块。
SG处理器(未示出)收集并分析以XML文档形式发送的服务指南数据,然后将数据传递到EPG管理器。
服务管理器(未示出)收集并分析通过MPEG-2传输流发送的PSI/PSIP数据和通过IP流发送的服务信令段数据,以产生服务地图。服务管理器(未示出)将所产生的服务地图存储在服务地图&指南数据库中,并且控制进入用户想要的服务。服务管理器受操作控制器(未示出)控制,并且控制调谐器501、MPEG-2TP解复用器507和IP数据包缓冲器/处理器513。
NRT服务管理器(未示出)对通过FLUTE会话以对象/文件形式发送的NRT服务执行整体管理。NRT服务管理器(未示出)可以控制FDT处理器和文件存储器。
应用程序管理器(未示出)对以对象和文件形式发送的应用程序数据执行整体管理。
UI管理器(未示出)通过用户接口将用户输入传递到操作控制器,并且开始针对用户请求的服务的处理。
操作控制器(未示出)处理通过UI管理器接收的用户的命令,并且允许必要模块的管理器执行对应动作。
指纹提取器565从AV流中提取指纹特征信息。
指纹比较器567将通过指纹提取器提取的特征信息与基准指纹进行比较,以找到相同的内容。指纹比较器567可以使用本地存储的基准指纹DB并且可以在互联网上查询指纹查询服务器以接收结果。通过比较结果获得的匹配的结果数据可以被传递到应用程序并且可以被使用。
因为ACR功能管理模块或应用程序模块基于ACR提供增强型服务,所以应用程序569在观看过程中识别广播内容,以提供涉及它的增强型服务。
图69是示出根据另一个实施方式的基于水印的视频显示装置的结构的框图。
尽管图69的基于水印的视频显示装置与图68的基于指纹的视频显示装置类似,但是基于指纹的视频显示装置不包括指纹提取器565和指纹比较器567,但是还包括水印提取器566。
水印提取器566从音频/视频流中提取以水印形式插入的数据。所提取的数据可以被传递到应用程序并且可以被使用。
根据实施方式,广播站所引导的服务是可用的。具体地,实施方式提供替代的广告服务、场景相关信息提供服务、基于分级的内容服务和基于用户属性的服务。
另外,服务器和视频显示装置的负荷减少。
另外,根据实施方式,即使当接收没有时间信息的AV内容或者与增强型服务具有不同基准时间的AV内容时,视频显示装置也可以将时间敏感增强型服务与AV内容同步。
此外,根据实施方式,在不用不方便地使用遥控器进行文本输入的情况下,涉及主AV内容的信息搜索、聊天、新闻搜索、数字媒体下载、产品类别下载和产品购买是可用的。
此外,本发明的以上方法还可以被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质的例子包括只读介质(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储装置和载波(如通过互联网进行的数据发送)。
上述实施方式的构造和方法在没有任何限制的情况下被应用到视频显示装置,并且实施方式中的全部或部分可以被选择性组合以具有各种修改形式。
尽管已经参照实施方式的多个示例性实施方式描述了实施方式,但是应该理解,本领域的技术人员可以料想到将落入本发明的精神和范围内的众多其它修改形式和实施方式。更具体地,在本发明、附图和所附权利要求书的范围内,主题组合布置的组件部分和/或布置的各种变化形式和修改形式是可能的。除了组件部分和/或布置的变化形式和修改形式之外,对于本领域的技术人员,替代使用也将是显而易见的。

Claims (26)

1.一种控制视频显示装置的方法,所述方法包括以下步骤:
获得未压缩的视听内容;
通过显示单元播放所述未压缩的视听内容;
基于所述未压缩的视听内容的内容片断,获得所述未压缩的视听内容的内容信息;
基于所述内容信息,获得内容改变时间信息和增强型服务信息;以及
基于所述内容改变时间信息,确定用于获得下一个内容信息的延迟时间。
2.根据权利要求1所述的方法,还包括以下步骤:在所述延迟时间过去之后,基于视听内容片断获得下一个内容信息。
3.根据权利要求2所述的方法,还包括以下步骤:即使是在所述延迟时间过去之前,如果检测到频道改变,则也获得下一个内容信息。
4.根据权利要求3所述的方法,其中当检测到频道改变时获得下一个内容信息的步骤还包括:
当在预定时间内没有检测到视频信号和音频信号中的至少一个时,识别频道改变;以及
当识别到所述频道改变时,获得下一个内容信息。
5.一种控制包括显示单元的视频显示装置的方法,所述方法包括以下步骤:
获得未压缩的视听内容;
通过所述显示单元播放所述未压缩的视听内容;
提取所述未压缩的视听内容的内容片断;
基于所提取的内容片断,获得包括所述未压缩的视听内容的标识符和所提取的内容片断的开始时间的内容信息;
基于所提取的内容片断或所述内容信息,获得包括第一延迟时间的增强型服务信息;
基于所述第一延迟时间,确定第二延迟时间;以及
当所述第二延迟时间过去时,开始与所述增强型服务信息对应的增强型服务。
6.根据权利要求5所述的方法,其中所述第一延迟时间对应于所述增强型服务的开始时间和所提取的内容片断的开始时间之间的第一时间差。
7.根据权利要求6所述的方法,其中确定所述第二延迟时间的步骤包括:基于所述内容片断的提取时间、所述增强型服务信息的获取时间和所述第一延迟时间,确定所述第二延迟时间。
8.根据权利要求7所述的方法,其中基于所述内容片断的提取时间、所述增强型服务信息的获取时间和所述第一延迟时间,确定所述第二延迟时间的步骤包括:
获得所述内容片断的提取时间和所述增强型服务信息的获取时间之间的第二时间差;以及
通过所述第一延迟时间和所述第二时间差之间的时间差,确定所述第二延迟时间。
9.根据权利要求8所述的方法,其中所述第二时间差短于所述增强型服务信息的可用时间。
10.根据权利要求8所述的方法,其中所述第二时间差短于所述增强型服务信息的可用时间的结束时间和所述增强型服务信息的可用时间的开始时间之间的时间差。
11.一种视频显示装置,该视频显示装置包括:
显示单元;
接收单元,其获得未压缩的视听内容;
增强型服务管理单元,其基于所述未压缩的视听内容的内容片断获得所述未压缩的视听内容的内容信息,基于所述内容信息获得内容改变时间信息和增强型服务信息,并且基于所述内容改变时间信息确定用于获得下一个内容信息的延迟时间;以及
播放控制单元,其通过所述显示单元播放所述未压缩的视听内容。
12.根据权利要求11所述的视频显示装置,其中所述增强型服务管理单元在所述延迟时间过去之后基于视听内容片断获得下一个内容信息。
13.根据权利要求12所述的视频显示装置,其中即使在所述延迟时间过去之前,如果检测到频道改变,则所述增强型服务管理单元也获得下一个内容信息。
14.根据权利要求13所述的视频显示装置,其中当在预定时间内没有检测到视频信号和音频信号中的至少一个时,所述增强型服务管理单元识别频道改变;以及
当识别到所述频道改变时,所述增强型服务管理单元获得下一个内容信息。
15.一种视频显示装置,该视频显示装置包括:
显示单元;
接收单元,其获得未压缩的视听内容;
增强型服务管理单元,其基于从所述未压缩的视听内容中提取的内容片断获得包括所述未压缩的视听内容的标识符和所提取的内容片断的开始时间的内容信息,基于所提取的内容片断或所述内容信息获得包括第一延迟时间的增强型服务信息,基于所述第一延迟时间确定第二延迟时间,并且当所述第二延迟时间过去时,开始与所述增强型服务信息对应的增强型服务;以及
播放控制单元,其通过所述显示单元播放所述未压缩的AV内容。
16.根据权利要求15所述的视频显示装置,其中所述第一延迟时间对应于所述增强型服务的开始时间和所提取的内容片断的开始时间之间的第一时间差。
17.根据权利要求16所述的视频显示装置,其中所述增强型服务管理单元基于所述内容片断的提取时间、所述增强型服务信息的获取时间和所述第一延迟时间,确定所述第二延迟时间。
18.根据权利要求17所述的视频显示装置,其中所述增强型服务管理单元通过从所述第一延迟时间中减去所述增强型服务信息的获取时间并且加上所述内容片断的提取时间,确定所述第二延迟时间。
19.根据权利要求18所述的视频显示装置,其中所述第二时间差短于所述增强型服务信息的可用时间。
20.根据权利要求19所述的视频显示装置,其中所述第二时间差短于所述增强型服务信息的可用时间的结束时间和所述增强型服务信息的可用时间的开始时间之间的时间差。
21.一种视频显示装置,该视频显示装置包括:
显示单元;
接收单元,其获得未压缩的视听内容;
内容识别单元,其基于所述未压缩的视听内容的内容片断,获得所述未压缩的视听内容的内容信息;
生命周期管理单元,其根据基于所述内容信息获得的增强型服务信息,管理增强型服务;以及
播放控制单元,其在所述显示单元上播放所述未压缩的视听内容和所述增强型服务。
22.根据权利要求21所述的视频显示装置,其中所述增强型服务信息包括所述增强型服务的位置;并且
所述生命周期管理单元从所述位置下载所述增强型服务。
23.根据权利要求21所述的视频显示装置,其中所述增强型服务信息包括所述增强型服务的开始时间;并且
所述生命周期管理单元在所述开始时间开始所述增强型服务。
24.根据权利要求21所述的视频显示装置,其中所述增强型服务信息包括所述增强型服务的结束时间;并且
所述生命周期管理单元在所述结束时间结束所述增强型服务。
25.根据权利要求21所述的视频显示装置,其中所述内容识别单元基于所述内容信息获得所述增强型服务信息,并且将所获得的所述增强型服务信息提供到所述生命周期管理单元。
26.根据权利要求21所述的视频显示装置,其中所述生命周期管理单元基于所述内容信息获得所述增强型服务信息。
CN201180056746.9A 2010-11-24 2011-11-24 视频显示装置及其控制方法 Active CN103229514B (zh)

Applications Claiming Priority (11)

Application Number Priority Date Filing Date Title
US41719610P 2010-11-24 2010-11-24
US61/417,196 2010-11-24
US201161490067P 2011-05-26 2011-05-26
US61/490,067 2011-05-26
US201161526685P 2011-08-24 2011-08-24
US61/526,685 2011-08-24
US201161549238P 2011-10-20 2011-10-20
US201161549237P 2011-10-20 2011-10-20
US61/549,238 2011-10-20
US61/549,237 2011-10-20
PCT/KR2011/009044 WO2012070902A2 (ko) 2010-11-24 2011-11-24 영상 표시 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
CN103229514A true CN103229514A (zh) 2013-07-31
CN103229514B CN103229514B (zh) 2017-03-08

Family

ID=46146329

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180056746.9A Active CN103229514B (zh) 2010-11-24 2011-11-24 视频显示装置及其控制方法

Country Status (6)

Country Link
US (6) US8848108B2 (zh)
EP (1) EP2645730A4 (zh)
KR (1) KR20130136369A (zh)
CN (1) CN103229514B (zh)
CA (1) CA2814196C (zh)
WO (1) WO2012070902A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105765988A (zh) * 2013-09-24 2016-07-13 三星电子株式会社 图像显示装置、服务器、用于操作图像显示装置的方法、以及用于操作服务器的方法

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9661397B2 (en) * 2010-12-26 2017-05-23 Lg Electronics Inc. Broadcast service transmitting method, broadcast service receiving method and broadcast service receiving apparatus
CN103718564B (zh) * 2011-08-05 2018-01-09 索尼公司 接收装置、接收方法以及信息处理系统
US8918832B2 (en) * 2012-02-07 2014-12-23 Turner Broadcasting Systems, Inc. Method and system for outcome prediction utilizing automatic content recognition
US20150020094A1 (en) * 2012-02-10 2015-01-15 Lg Electronics Inc. Image display apparatus and method for operating same
US10255227B2 (en) * 2012-05-21 2019-04-09 Oath Inc. Computerized system and method for authoring, editing, and delivering an interactive social media video
KR101952702B1 (ko) * 2012-06-01 2019-02-28 삼성전자주식회사 개인 정보에 기초한 서비스를 제공하는 사용자 단말 장치 및 그 서비스 제공 방법
US9848230B2 (en) 2013-02-21 2017-12-19 Lg Electronics Inc. Video display apparatus and operating method thereof
KR20150069760A (ko) * 2013-12-16 2015-06-24 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
KR102254838B1 (ko) * 2014-08-04 2021-05-24 엘지전자 주식회사 영상 표시 장치 및 그의 동작 방법
JP1526604S (zh) * 2014-09-03 2015-06-15
KR101499397B1 (ko) * 2014-09-05 2015-03-05 임홍재 동영상 분석기능을 갖는 모바일 단말기
USD771099S1 (en) * 2015-03-20 2016-11-08 Beijing Eryiju Technology Co., Ltd Display screen with graphical user interface
USD810763S1 (en) * 2014-09-23 2018-02-20 Beijing Eryiju Technology Co., Ltd Display screen with graphical user interface
EP3043572A1 (en) * 2015-01-07 2016-07-13 Dolby Laboratories Licensing Corporation Hybrid automatic content recognition and watermarking
USD788148S1 (en) * 2015-03-20 2017-05-30 Beijing Eryiju Technology Co., Ltd Display screen with graphical user interface
KR102424839B1 (ko) 2015-10-14 2022-07-25 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
KR102482207B1 (ko) 2016-03-11 2022-12-29 삼성전자주식회사 디지털 방송 시스템에서 서비스 전환을 위한 방법 및 장치
MX2018010723A (es) 2016-03-17 2018-11-09 Sharp Kk Mensajes de emergencia en marcas de agua.
KR102481643B1 (ko) * 2017-01-31 2022-12-28 삼성전자주식회사 디스플레이 제어 방법 및 전자 장치
US20180227255A1 (en) * 2017-02-03 2018-08-09 AIXEP, Inc. Method and system for distributing digital content
CN106953935B (zh) * 2017-05-19 2022-05-17 腾讯科技(深圳)有限公司 一种媒体信息推送方法、装置及存储介质
KR20210051048A (ko) * 2019-10-29 2021-05-10 삼성전자주식회사 전자 장치 및 그 제어 방법
WO2022066692A1 (en) * 2020-09-22 2022-03-31 VIDAA USA, Inc. Display apparatus

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020124182A1 (en) * 2000-11-20 2002-09-05 Bacso Stephen R. Method and system for targeted content delivery, presentation, management and reporting in a communications nertwork
WO2007011889A2 (en) * 2005-07-19 2007-01-25 Etv Corporation Methods and apparatus for providing content and services coordinated with television content
CN101233558A (zh) * 2005-07-27 2008-07-30 夏普株式会社 视频合成设备及程序
US7434154B2 (en) * 2005-01-07 2008-10-07 Dell Products L.P. Systems and methods for synchronizing media rendering
CN101554054A (zh) * 2006-11-20 2009-10-07 Sk电信有限公司 用于提供与广播内容相关的补充信息服务的系统、服务器和方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6240555B1 (en) * 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
DE19813784A1 (de) * 1998-03-27 1999-09-30 Nokia Deutschland Gmbh Verfahren zum Erhöhen der Speicherkapazität für Serviceinformation in einem Empfänger für digitale TV-Sendungen
US20020112237A1 (en) * 2000-04-10 2002-08-15 Kelts Brett R. System and method for providing an interactive display interface for information objects
US20030084453A1 (en) * 2001-11-01 2003-05-01 Commerce Tv Corporation System and method for providing product information over an interactive television system
WO2003096669A2 (en) * 2002-05-10 2003-11-20 Reisman Richard R Method and apparatus for browsing using multiple coordinated device
US20060156003A1 (en) * 2002-08-21 2006-07-13 Junbiao Zhang Watermarking digital data at a user device
KR100738685B1 (ko) * 2005-09-27 2007-07-11 주식회사 케이티 양방향 방송 서비스를 이용한 부가정보 제공 장치 및 그방법
JP5191493B2 (ja) * 2006-11-20 2013-05-08 エスケー プラネット カンパニー、リミテッド 放送コンテンツに関連した付加情報サービス提供システム、付加情報サービス提供サーバー及び付加情報サービス提供方法
KR101356163B1 (ko) * 2007-07-12 2014-01-24 엘지전자 주식회사 휴대 단말기 및 그 휴대 단말기의 채널정보 표시 방법과방송정보 표시 방법
US8230226B2 (en) * 2007-08-17 2012-07-24 Intel Corporation Advanced watermarking system and method
US8351643B2 (en) * 2007-10-05 2013-01-08 Dolby Laboratories Licensing Corporation Media fingerprints that reliably correspond to media content
KR101436887B1 (ko) * 2008-02-26 2014-09-02 에스케이플래닛 주식회사 방송 컨텐츠와 부가 정보의 동기화 방법 및 시스템
KR20100053300A (ko) * 2008-11-12 2010-05-20 삼성전자주식회사 방송 부가정보를 제공하는 방송수신장치 및 그 방법
US9015741B2 (en) * 2009-04-17 2015-04-21 Gracenote, Inc. Method and system for remotely controlling consumer electronic devices
US8209730B2 (en) * 2009-06-22 2012-06-26 Sony Corporation Speculative video on demand
US8705933B2 (en) * 2009-09-25 2014-04-22 Sony Corporation Video bookmarking

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020124182A1 (en) * 2000-11-20 2002-09-05 Bacso Stephen R. Method and system for targeted content delivery, presentation, management and reporting in a communications nertwork
US7434154B2 (en) * 2005-01-07 2008-10-07 Dell Products L.P. Systems and methods for synchronizing media rendering
WO2007011889A2 (en) * 2005-07-19 2007-01-25 Etv Corporation Methods and apparatus for providing content and services coordinated with television content
CN101233558A (zh) * 2005-07-27 2008-07-30 夏普株式会社 视频合成设备及程序
CN101554054A (zh) * 2006-11-20 2009-10-07 Sk电信有限公司 用于提供与广播内容相关的补充信息服务的系统、服务器和方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105765988A (zh) * 2013-09-24 2016-07-13 三星电子株式会社 图像显示装置、服务器、用于操作图像显示装置的方法、以及用于操作服务器的方法

Also Published As

Publication number Publication date
WO2012070902A3 (ko) 2012-07-19
US20150002741A1 (en) 2015-01-01
US20160112733A1 (en) 2016-04-21
US10080046B2 (en) 2018-09-18
US20140028915A1 (en) 2014-01-30
CN103229514B (zh) 2017-03-08
US20190014364A1 (en) 2019-01-10
WO2012070902A2 (ko) 2012-05-31
US9154668B2 (en) 2015-10-06
EP2645730A2 (en) 2013-10-02
CA2814196A1 (en) 2012-05-31
US20150373413A1 (en) 2015-12-24
EP2645730A4 (en) 2014-08-27
US20150085191A1 (en) 2015-03-26
US8848108B2 (en) 2014-09-30
US9253372B2 (en) 2016-02-02
KR20130136369A (ko) 2013-12-12
CA2814196C (en) 2016-10-25

Similar Documents

Publication Publication Date Title
CN103229514B (zh) 视频显示装置及其控制方法
KR101960314B1 (ko) 영상 표시 장치 및 그 제어 방법
KR101706832B1 (ko) 부가 서비스 수신 방법 및 그를 이용한 영상 표시 장치
CN103733637B (zh) 接收广播服务的方法及其接收装置
CN101390390B (zh) 用于交互式媒体环境内的剧集跟踪的系统和方法
CN102098537B (zh) 用于交互式媒体环境内的剧集跟踪的系统和方法
CN104137560A (zh) 图像显示设备及其操作方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant