CN105657510A - 图像显示装置及其信息提供方法 - Google Patents
图像显示装置及其信息提供方法 Download PDFInfo
- Publication number
- CN105657510A CN105657510A CN201510847726.3A CN201510847726A CN105657510A CN 105657510 A CN105657510 A CN 105657510A CN 201510847726 A CN201510847726 A CN 201510847726A CN 105657510 A CN105657510 A CN 105657510A
- Authority
- CN
- China
- Prior art keywords
- information
- image display
- display device
- context
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/38—Creation or generation of source code for implementing user interfaces
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
Abstract
一种图像显示装置包括:显示器,显示内容;通信器,与服务器通信;以及处理器,控制通信器从服务器接收针对显示的内容的附加信息以及信息提供规则,并且当在显示器上显示内容的同时产生了与信息提供规则相对应的上下文时,提供接收到的附加信息中与所述上下文相对应的目标信息。
Description
本申请要求于2014年11月28日提交到韩国知识产权局的韩国专利申请No.10-2014-0168956的优先权,该申请的全部内容通过引用合并于此。
技术领域
装置和方法涉及一种图像显示装置及其信息提供方法,更具体地,涉及一种能够立即提供与显示的内容相对应的信息的图像显示装置及其信息提供方法。
背景技术
最近,己被用作仅显示广播内容的装置的图像显示装置还可以通过与各种类型的装置连接而被用作外围装置的中央装置,并可以使得用户能够通过互联网连接观看网络上的各种内容。此外,诸如TV的图像显示装置已经演进为还安装有各种应用以增强可用性的智能TV。
因此,可以再图像显示装置中使用的内容(诸如从图像显示装置本身提供的内容和从外部服务器接收的内容)的数量增加。
此外,为了用户方便,可以将与各种类型的内容相对应的信息与内容一起显示。然而,对外部服务器或存储大量的内容以及与内容相对应的信息的装置的使用对希望使用内容以及内容的信息的用户造成了不便。
因此,需要一种由用户使用的在显示内容的同时立即提供信息的方法。
发明内容
示例性实施例克服以上缺点以及以上未描述的其它缺点。此外,不要求实施例克服上述缺点,并且示例性实施例可以不克服上述任何问题。
提供了一种能够立即提供与显示的内容相对应的信息的图像显示装置及其信息提供方法。
根据一方面,一种图像显示装置包括:显示器,显示内容;通信器,与服务器通信;处理器,控制通信器从服务器接收针对显示的内容的附加信息以及信息提供规则,并且当在显示器上显示内容的同时产生了与信息提供规则相对应的上下文时,提供接收到的附加信息中与所述上下文相对应的目标信息。
信息提供规则可以包括与是否提供信息内容有关的信息或者根据产生的上下文提供的信息。
图像显示装置还可以包括:存储器,存储信息提供历史,其中,当产生了与信息提供规则相对应的上下文时,处理器可以基于存储的信息提供历史来提供与所述上下文相对应的目标信息。
当基于存储的信息提供历史,比预设频率更频繁地提供与所述上下文相对应的目标信息或者目标信息是先前在临界时间内提供的时,即使产生了与信息提供规则相对应的上下文,所述处理器也不提供所述目标信息。
处理器可以控制通信器基于针对显示的内容的元数据和简档信息产生询问数据,并向服务器发送产生的询问数据。
用于产生询问数据的简档信息可以包括用户信息和位置信息中的至少一个。
处理器可以控制通信器:使用用于产生询问数据的简档信息来更新所述询问数据,并向服务器发送更新的询问数据。
处理器可以确定是否基于显示的内容的显示信息、字幕信息和音频信息以及被输入到图像显示装置的用户语音信息来产生所述上下文。
处理器可以控制显示器将与所述上下文相对应的目标信息与内容一起显示。
处理器可以控制通信器向预设用户终端发送与所述上下文相对应的目标信息。
根据另一方面,一种图像显示装置的信息提供方法包括:显示内容;从服务器接收针对显示的内容的附加信息以及信息提供规则;以及当在显示内容的同时产生了与信息提供规则相对应的上下文时,提供接收到的附加信息中与所述上下文相对应的目标信息。
信息提供规则可以包括与是否提供信息内容有关的信息或者根据产生的上下文所提供的信息。
信息提供方法还可以包括:存储信息提供历史,其中,在所述提供中,当产生了与信息提供规则相对应的上下文时,可以基于存储的信息提供历史提供与所述上下文相对应的目标信息。
在所述提供中,当基于存储的信息提供历史,比预设频率更频繁地提供与所述上下文相对应的目标信息或者目标信息是先前在临界时间内提供的时,即使产生了与信息提供规则相对应的上下文,也不提供所述目标信息。
信息提供方法还可以包括:基于针对显示的内容的元数据和简档信息产生询问数据,并向服务器发送产生的询问数据。
用于产生询问数据的简档信息可以包括用户信息和位置信息中的至少一个。
信息提供方法还可以包括:使用用于产生询问数据的简档信息来更新所述询问数据,并向服务器发送更新的询问数据。
信息提供方法还可以包括:确定是否基于显示的内容的显示信息、字幕信息和音频信息以及被输入到图像显示装置的用户语音信息来产生所述上下文。
在所述提供中,可以将与所述上下文相对应的目标信息与内容一起显示以提供所述目标信息。
所述提供还可以包括:向预设用户终端发送与所述上下文相对应的目标信息。
提供了一种非暂时性计算机可读介质,记录有用于执行如上所述的信息提供方法的程序代码。
根据另一方面,图像显示装置包括:接收器,被配置为接收与显示的内容相关联的信息以及针对信息的请求;以及处理器,在显示内容的同时立即在接收到的信息中搜索符合针对信息的请求的目标信息。
将在下面的描述中部分地阐述附加和/或其它方面和优点,并且从描述中,这部分内容将是清楚的,或者可以通过实践被学习。
附图说明
通过参照附图描述特定示例性实施例,以上和/或其它方面将更加清楚,其中:
图1是示出根据示例性实施例的图像显示装置和服务器的框图;
图2是示意地示出根据示例性实施例的图像显示装置的配置的框图;
图3是详细地示出根据示例性实施例的图像显示装置的配置的框图;
图4是示出根据示例性实施例的根据图像显示装置的上下文显示信息的方法的流程图;
图5是详细地示出根据示例性实施例的由图像显示装置通过执行与外部服务器200的通信来获取附加信息的方法的流程图;
图6是示出根据示例性实施例的根据棒球比赛的各种类型的上下文接收信息并根据上下文显示信息的方法的流程图;
图7是示出根据示例性实施例的根据上下文提取信息的方法的流程图;
图8A和图8B是示出根据示例性实施例的当至少两名选手出现在棒球比赛中时显示与选手相关联的信息的外观的示图;
图9A和图9B是示出根据示例性实施例的当在棒球比赛中出现预设事件时显示与选手相关联的信息的外观的示图;
图10A-10C是示出根据示例性实施例的当特定人物出现在图像内容中且感测到针对外部环境的上下文时显示与特定人物相关联的信息的外观的示图;
图11是示出根据示例性实施例的显示信息提供功能的设置菜单的外观的示图。
具体实施方式
在下文中,将参照附图更详细地描述各种示例性实施例。此外,当认为对与实施例相关的公知功能或配置的详细描述可能模糊主旨时,将省略其详细描述。此外,考虑实施例的功能定义以下术语,并且将根据用户和操作者的意图而以不同地方式解释所述术语。因此,应该基于贯穿说明书的内容来解释术语的定义。
图1是示出根据示例性实施例的图像显示装置100和服务器200的示图。具体地,图像显示装置100是用于显示内容的组件。此外,图像显示装置100可以向服务器200请求针对显示的内容的信息,以从服务器接收针对要被显示的内容的附加信息。附加信息可以包括与内容相关联的各种信息。
此外,图像显示装置100可以分析显示的内容或者感测周围环境以感测上下文的产生。图像显示装置100可以提供从服务器200接收到的附加信息中与产生的上下文相对应的目标信息。
也就是说,图像显示装置100可以基于显示的内容的元数据和简档信息产生询问数据,并向服务器200发送产生的询问数据。简档信息是在预定时间内不改变的信息,并可以包括用户信息。
接收到询问数据的服务器200可以基于询问数据提取与内容相关联的附加信息,并向图像显示装置100发送提取的附加信息。当产生上下文时,从服务器200接收到附加信息的图像显示装置100可以提供与产生的上下文相对应的目标信息。
具体地,服务器200可以向图像显示装置100提供附加信息和信息提供规则。因此,当产生了满足信息提供规则的上下文时,图像显示装置100可以提供与产生的上下文相对应的目标信息。
同时,上下文意味着针对情景的信息。也就是说,可以从显示内容的图像显示装置产生的上下文可以包括从显示多个内容或多个内容中的一个内容的图像显示装置的内部和外部获取的信息。
具体地,上下文可以包括诸如显示信息、字幕信息、音频信息、内容类型、主题、制片人、人物(character)、观看年龄、播放时间、频道号和包括在内容中的特定事件的产生之类的信息。此外,上下文可以包括感测周围环境的结果。例如,上下文可以包括观看内容的用户的用户信息、通过分析用户的拍摄图像或输入的用户语音而获取的信息、图像显示装置100所位于的空间的温度、亮度和湿度的信息等。
同时,信息提供规则是根据产生了什么上下文而是否提供每个附加信息的规则。例如,作为附加信息的“针对人物A的信息”可以是在“人物A在内容中第一次出现的情况”、“用户说出人物A的名字的情况”、以及“用户使用图像显示装置在24小时内搜索人物A的情况”下提供的信息。在此情况下,“人物A在内容中第一次出现的情况”、“用户说出人物A的名字的情况”、以及“用户使用图像显示装置在24小时内搜索人物A的情况”成为用于提供“针对人物A的信息”的信息提供规则。
如图1中所示,图像显示装置100可以是TV,这仅仅是示例。因此,图像显示装置100可以被实施为包括显示器的各种电子设备,诸如移动电话、LFD、PDA、平板PC、家庭影院、数字相机、摄像机、笔记本电脑、冰箱和洗衣机。
同时,服务器200可以存储针对各种类型的内容的信息。也就是说,服务器200可以收集并存储针对各种类型的内容的附加信息。
此外,服务器200可以产生针对收集的附加信息的作为提供每个附加信息的规则的信息提供规则。也就是说,服务器200可以产生根据产生了什么上下文而是否提供每个附加信息的信息提供规则。因此,服务器200可以将收集的附加信息与针对每个产生的附加信息的信息提供规则进行匹配,并存储匹配的信息。
同时,当从图像显示装置100接收到询问数据时,服务器200可以向图像显示装置200发送针对内容的附加信息。也就是说,服务器200可以分析接收到的询问数据以确定由图像显示装置100显示的内容,提取与相应内容和简档信息相对应的附加信息,并向图像显示装置100发送提取的附加信息。
在下文中,将详细描述用于提供以上信息的图像显示装置100。
图2是示出根据示例性实施例的图像显示装置100的配置的框图。如图2中所示,图像显示装置100被配置为包括显示器110、通信器120和处理器130。
显示器110是用于显示内容的组件。显示器110可以显示通过广播频道接收到的内容。也就是说,图像显示装置100还可以接收通过RF通信网络从广播站发送的各种类型的广播信号,并且还可以通过IP网络从各种类型的服务器接收内容,并且显示器110可以显示接收到的内容。将接收到的内容显示在显示器110上仅仅是示例,因此显示器110还可以显示预存储的内容。
此外,显示器110可以显示各种UI。具体地,显示器110可以基于从服务器200接收到的附加信息和信息提供规则来显示与上下文相对应的目标信息。同时,通信器120被配置为根据各种类型的通信方案与各种类型的外部设备通信。通信器120可以包括各种通信模块,诸如WiFi模块、蓝牙模块和近场通信(NFC)模块。在此情况下,WiFi模块、蓝牙模块和NFC模块分别执行WiFi方案、蓝牙方案和NFC方案下的通信。具体地,NFC模块表示在使用诸如135kHz、13.56MHz、433MHz、860~960MHz、2.45GHz等的各种RFID频带中的13.56MHz频带的NFC方案下操作的模块。在使用Wi-Fi模块或蓝牙模块的情况下,首先发送和接收诸如SSID、会话密钥等的各种连接信息,并且通过使用连接信息来连接通信。之后,可以发送和接收各种信息。
具体地,通信器120可以与服务器200执行通信。也就是说,通信器120可以向服务器发送询问数据,并可以从服务器200接收与内容相对应的附加信息以及信息提供规则。
具体地,通信器120可以在处理器的控制下,向服务器200发送基于显示的内容的元数据和简档信息所产生的询问数据。此外,通信器120可以从服务器200接收基于询问数据所提取的附加信息以及每个附加信息的信息提供规则。处理器130大体被配置为用于控制装置。处理器130可以被用作与中央处理单元、微处理器、控制单元等相同的装置。此外,处理器130可以与诸如通信器120的其它功能单元一起被实施为单片系统或者片上系统(SOC或SoC)。
处理器130控制图像显示装置100的总体操作。具体地,处理器130可以控制通信器120从服务器200接收针对在显示器110上显示的内容的附加信息以及信息提供规则。此外,当产生了与信息提供规则相对应的上下文时,处理器130可以提供接收到的附加信息中与产生的上下文相对应的目标信息。
具体地,处理器130可以控制通信器120基于针对显示的内容的元数据和简档信息产生询问数据,并向服务器200发送产生的询问数据。此外,处理器130可以控制通信器120从服务器200接收基于询问数据所产生的附加信息和信息提供条件。
当产生了与信息提供规则相对应的内容时,处理器130可以在接收到的附加信息中检测与产生的上下文相对应的目标信息,并向用户提供检测到的目标信息。
同时,用于产生询问数据的简档信息表示在临界时间内不改变的信息。例如,简档信息可以包括用于用户观看显示内容的用户信息或者针对图像显示装置100的位置的位置信息。
处理器130可以以预设周期更新用于产生询问数据的简档信息。也就是说,处理器可以以预设周期更新用于用户使用图像显示装置100的信息或者更新图像显示装置100的位置信息。例如,当通过图像显示装置100输入或者登录的用户信息改变时,处理器130可以将简档信息更新为针对改变的用户的信息。
处理器130可以使用更新的简档信息来更新询问数据。此外,处理器130可以控制通信器120向服务器200发送更新的询问数据。
此外,处理器130可以控制显示器110将与产生的上下文相对应的目标信息与内容一起显示。
此外,处理器130还可以控制通信器120向预设用户终端发送与产生的上下文相对应的目标信息。例如,处理器130还可以控制通信器120向观看显示的内容的用户所使用的智能电话发送获取的目标信息。
在下文中,将参照图3更详细地描述图像显示装置100的配置。图3是详细地示出根据示例性实施例的图像显示装置的配置的框图。如图3中所示,图像显示装置包括显示器110、通信器120、处理器130、存储器140、图像接收器150、图像处理器160、音频处理器170、音频输出180、输入190和传感器195。
同时,图3总体示出例如在图像显示装置100是包括各种功能(诸如上下文获取功能、UI显示功能、挂起到内存(RAM)或挂起到磁盘功能、通信功能、运动图片播放功能和显示功能)的装置的情况下的各种组件。因此,根据示例性实施例,可以省略或者改变图3中示出的一些组件,并且还可以添加其它组件。
显示器110是用于显示图像的组件。显示器110可以显示通过广播频道接收到的内容。也就是说,显示器110可以显示通过由图像处理器160处理从图像接收器150(将在下文描述)接收的图像数据而获取的视频帧以及由图形处理器产生的各种屏幕中的至少一个。
此外,显示器110可以显示各种UI。具体地,显示器110可以在从服务器200接收到的附加信息之中提取与产生的上下文相对应的目标信息,并使用各种类型的UI显示提取的目标信息。
同时,通信器120被配置为根据各种类型的通信方案与各种类型的外部设备通信。通信器120可以包括各种类型的通信模块,诸如WiFi模块、蓝牙模块和近场通信(NFC)模块。
具体地,通信器120可以与服务器200执行通信。也就是说,通信器120可以向服务器发送针对在显示器110上显示的内容的询问数据,并从服务器200接收与内容相对应的信息。
具体地,通信器120可以在处理器130的控制下向服务器200发送产生的询问数据,并接收从服务器200发送的信息。
同时,存储器140存储用于驱动图像显示装置100的各种模块。例如,存储器140可以存储包括基础模块、感测模块、通信模块、呈现模块、网络浏览器模块和服务模块在内的软件。在此情况下,基础模块是处理从包括在图像显示装置100中的每个硬件传输的信号并向上层模块传输处理后的信号的基本模块。感测模块(作为收集来自各种传感器的信息并分析和管理收集的信息的模块)可以包括面部识别模块、音频识别模块、运动识别模块、NFC识别模块等。呈现模块是用于配置显示屏幕的模块,并且可以包括播放和输出多媒体内容的多媒体模块以及执行UI和图形处理的UI渲染模块。服务模块是包括用于提供各种服务的各种应用的模块。
如上所述,存储器140可以包括各种程序模块,根据图像显示装置100的类型和特征,其中的一些可以被省略、改变或者添加。例如,当图像显示装置100被实施为智能电话时,基础模块还可以包括用于确定基于GPS的位置的位置确定模块,并且感测模块还可以包括用于感测用户的操作的感测模块。
同时,存储器140可以存储从服务器200接收到的附加信息。具体地,可以通过通信器120向服务器200发送询问数据,并且当从服务器200接收到与显示内容相对应的附加信息时,存储器140可以存储接收到的附加信息。
此外,当显示的内容结束时,存储器140可以删除存储的与显示的内容相对应的附加信息。也就是说,当接收到与新内容相对应的附加信息时,存储器140可以存储通过显示新内容而新接收到的附加信息。
同时,存储器140可以存储信息提供历史。也就是说,存储器140可以存储关于被提供给用户的作为目标信息的信息的提供历史。
因此,当基于存储在存储器140中的信息提供历史比预设频率更频繁地提供与上下文相对应的目标信息或者目标信息是先前在临界时间内的时,即使产生了与信息提供规则相对应的上下文,处理器130也可以不提供目标信息。
同时,图像接收器150通过各种源接收图像数据。例如,图像接收器140可以从外部广播站接收广播数据,实时从外部服务器接收图像数据,并接收存储在存储器140中的图像数据。
图像处理器160是用于处理由图像接收器150接收到的图像数据的组件。图像处理器160可以对图像数据执行各种图像处理,诸如解码、缩放、噪声滤波、帧率转换和分辨率转换。
音频处理器170是用于对音频数据执行处理的组件。音频处理器170可以对音频数据执行各种处理,诸如解码、放大和噪声滤波。经音频处理器170处理的音频数据可以被输出给音频输出180。
除了经音频处理器170处理的各种音频数据,音频输出180还用于输出各种警报声或声音消息的组件。在此情况下,音频输出180可以被实施为扬声器,这仅仅是示例并且因此可以被实施为音频端子。
同时,输入190是用于接收用户命令的组件。输入190接收用于控制图像显示装置100的整体操作的用户命令。
在此情况下,输入190可以被实施为包括4向键(上、下、左和右)和确认键的遥控器,这仅仅是示例。因此,输入可以被实施为各种输入设备,诸如触摸屏、鼠标和指点设备。
此外,输入190可以接收通过用户语音的用户命令。也就是说,输入130可以包括用于接收用户语音的诸如麦克风的组件。
同时,传感器195是用于感测周围环境的组件。也就是说,在处理器130控制下由传感器195感测的各种周围环境信息可以是上下文信息。例如,传感器195可以包括用于感测用户语音的麦克风(未示出),并且处理器130可以分析感测到的用户语音以获取上下文。备选地,传感器195还可以包括用于感测用户的存在或者用户的姿势、表情等的改变的相机(未示出),并且处理器130可以分析拍摄的图像以获取针对用户的上下文信息。
同时,处理器130控制图像显示装置100的整体操作。具体地,处理器130可以获取针对显示的内容的附加信息。此外,当产生了上下文时,处理器130可以向用户提供获取的附加信息中的与产生的上下文相对应的目标信息。
具体地,处理器130可以控制通信器120基于针对显示的内容的元数据和简档信息产生询问数据,并向服务器200发送产生的询问数据。此外,处理器130可以控制通信器120从服务器200接收基于询问数据产生的附加信息和信息提供条件。
当产生了与信息提供规则相对应的上下文时,处理器130可以在接收到的附加信息中检测与产生的上下文相对应的目标信息,并向用户提供检测到的目标信息。
同时,简档信息表示在临界时间内不改变的信息。例如,简档信息可以包括用于用户观看显示内容的用户信息或者针对图像显示装置100的位置的位置信息。
处理器130可以以预设周期更新简档信息。也就是说,处理器可以以预设周期更新用于用户使用图像显示装置100的信息,或者更新图像显示装置100的位置信息。
例如,当登录图像显示装置100的用户信息改变时,处理器130可以将简档信息更新为改变的用户信息。
处理器130可以使用更新的简档信息来更新询问数据。此外,处理器130可以控制通信器120向服务器200发送更新的询问数据。
上下文可以包括针对可以在通过显示器110显示内容的同时由处理器130获取的所有情景的信息。具体地,处理器130可以提取显示在显示器110上的字幕信息以获取上下文。
也就是说,处理器130可以针对显示的图像执行字符(character)识别以获取上下文。例如,处理器130可以捕捉在显示器110上显示的图像并对捕捉的图像执行光学字符识别(OCR)以执行字符识别。作为执行字符识别的结果,当特定词语被提取为字幕信息时,处理器130可以获取提取的词语作为上下文。
除了字幕信息,处理器130还可以分析在显示器110上显示的图像,以获取各种上下文。
例如,当显示图像是针对特定区域的图像时,处理器130可以获取针对该特定区域的信息作为上下文。备选地,当特定人物包括在显示图像中时,处理器130还可以获取针对特定人物的信息作为上下文。
同时,处理器130可以获取包括在显示的内容中的音频信息作为上下文信息。具体地,当通过音频输出180输出与预设特定词语相对应的音频信息时,处理器130可以提取输出的特定音频信息作为上下文。
同时,处理器130可以使用由传感器195感测的周围环境信息来提取上下文。当通过包括在传感器195中的麦克风输入了预注册的用户语音,但是由包括在传感器195中的相机拍摄到预注册的用户面部时,处理器130可以提取针对特定用户的存在的信息作为上下文。
备选地,作为分析通过麦克风输入的用户语音的结果,当输入预设特定词语时,处理器130可以提取作为用户语音而输入的特定词语作为上下文。
当由包括上述方法的各种方法获取的上下文满足从服务器200接收到的信息提供规则时,处理器130可以检测与上下文相对应的目标信息。此外,处理器130可以提供检测到的目标信息。
此外,处理器130可以控制显示器110将检测到的目标信息与内容一起显示。
此外,处理器130还可以控制通信器120向预设用户终端发送检测到的目标信息。例如,处理器130还可以控制通信器120向用户观看显示的内容所使用的智能电话发送获取的目标信息。
同时,处理器130可以控制显示器110显示用于控制图像显示装置100的信息提供功能之类的设置菜单。
具体地,如图11中所示,当显示了用于设置信息提供功能的信息提供菜单1200时,用户可执行诸如用户信息输入、信息提供历史初始化和信息提供功能的设置。
具体地,用户可以通过输入的用户信息接收用于用户访问图像显示装置100和服务器200的信息。
此外,用户可以初始化信息提供历史。也就是说,当产生了与从服务器200接收到的信息提供规则相对应的上下文时,如果与产生的上下文相对应的目标信息被存储在被预先提供给用户的信息提供历史中,则可以不提供目标信息。因此,用户可以初始化信息提供历史以防止提供目标信息被信息提供历史改变。
此外,用户可以控制信息提供功能本身的开启/关闭。当用户不希望接收目标信息或者已经接收到足够的信息时,他/她可以关闭信息提供功能。
同时,如图11中所示的信息提供菜单1200仅仅是一个示例。因此,可以通过信息提供菜单1200来改变可被用户设置的菜单。
通过上述图像显示装置100,用户可以立即接收与显示的内容的上下文相对应的信息。
同时,图4是用于详细描述根据示例性实施例的显示图像显示装置100的方法的流程图。
首先,图像显示装置100显示内容(S400)。内容可以是广播内容,但这仅是示例。因此,内容可以是包括与各种应用相关联的内容、诸如通过各种类型的通信网络下载的电影和音乐之类的内容在内的各种多媒体内容。
图像显示装置100从服务器200接收针对显示的内容的附加信息和信息提供规则(S410)。也就是说,图像显示装置100可以从服务器200接收与显示的内容相关联的各种附加信息以及信息提供规则,所述信息提供规则是用于提供每个附加信息的规则。
当产生了与信息提供规则相对应的上下文时(S420-是),图像显示装置100提供接收到的附加信息中的与上下文相对应的目标信息(S430)。也就是说,当产生了与预定规则相对应的上下文时,图像显示装置100可以在从服务器200接收到的附加信息中提取与所产生的上下文相对应的目标信息,并提供提取的目标信息。
例如,对于棒球比赛内容,在附加信息中,“参加2008年北京奥运会的选手A和选手B的记录”可以考虑“选手A”和“选手B”同时显示在显示图像中超过5分钟的情况作为信息提供条件。因此,当图像显示装置100显示棒球比赛内容时,当产生了“选手A”和“选手B”同时显示在显示图像中超过5分钟的上下文时,图像显示装置100可以提供“参加2008年北京奥运会的选手A和选手B的记录”作为目标信息。
图像显示装置100可以通过将目标信息与内容重叠来显示用于显示屏的目标信息。备选地,图像显示装置100还可以通过扬声器将获取的附加信息输出为音频数据。除了上述方法,图像显示装置100还可以使用向用户传输附加信息的各种方法。
同时,图5是用于描述用于通过将图像显示装置100带入与服务器200的通信来获取附加信息的详细方法的流程图。首先,图像显示装置100显示内容(S500)。此外,图像显示装置100可以基于显示的内容的元数据和简档信息来产生询问数据,并向服务器200发送产生的询问数据。
元数据表示使用户知晓内容是什么的各种信息。例如,元数据可以包括诸如内容的标题、导演、人物、主题、类型等的信息。
简档信息表示在临界时间内不改变的信息。也就是说,简档信息包括用于用户观看显示的内容的用户信息或者针对图像显示装置100的位置的位置信息。例如,简档信息可以是针对登录的用户的信息。
图像显示装置100可以基于元数据和简档信息产生询问数据,并向服务器200发送产生的询问数据。图像显示装置100可以根据预设周期或者用户命令而更新询问数据。
例如,当登录的用户信息改变时,图像显示装置100可以基于改变的简档信息更新询问数据。因此,当询问数据被更新时,图像显示装置100可以向服务器200发送更新的询问数据。
服务器200可以存储与各种类型的内容相对应的信息。此外,服务器200可以产生作为用于提供每个附加信息的规则的信息提供规则。因此,服务器200可以存储与内容相对应的信息、多个附加信息中的每个以及信息提供规则。
接收到针对内容的询问数据的服务器200可以基于询问数据提取多个存储的附加信息中的与内容相对应的附加信息以及信息提供规则,并向图像显示装置100发送提取的附加信息。
也就是说,图像显示装置100从服务器接收基于询问数据产生的与内容相对应的附加信息和信息提供规则(S520)。
当产生了与信息提供规则相对应的上下文时(S530-是),图像显示装置100在接收到的附加信息中检测与产生的上下文相对应的目标信息(S540)。
具体地,图像显示装置100可以分析显示的内容以获取针对内容的上下文。也就是说,图像显示装置100可以实时获取可以在显示内容的同时获取的上下文。
上下文表示针对情景的信息。也就是说,可以从显示内容的图像显示装置产生的上下文可以包括可以从显示多个内容或者多个内容中的一个内容的图像显示装置的内部或外部获取的信息。
具体地,上下文可以包括在内容中包括的诸如显示信息、字幕信息、音频信息、内容类型、主题、制片人、人物、观看年龄、播放时间、频道号、特定事件的产生之类的信息。此外,上下文可以包括感测周围环境的结果。例如,上下文可以包括用于用户观看内容的用户信息、通过分析用户的拍摄图像或输入的用户语音而获取的信息、针对图像显示装置100所位于的空间的温度、亮度和湿度的信息等。
当产生的上下文满足特定信息提供规则时,图像显示装置100可以从接收到的附加信息中检测针对产生的上下文的目标信息。
此外,图像显示装置100确认针对检测到的目标信息的信息提供历史(S550)。也就是说,图像显示装置100可以将作为目标信息提供给用户的信息的提供历史存储为信息提供历史。
因此,图像显示装置100确定是否比预设频率更频繁地提供基于信息提供历史检测到的目标信息或者存在先前在临界时间内提供的历史(S560)。
作为确定结果,当没有比预设频率更频繁地将检测到的目标信息提供给信息提供历史,并且不存在在临界时间内提供的历史时(S560,否),图像显示装置100提供检测到的目标信息(S570)。
也就是说,在图像显示装置100中,即使当产生了与信息提供规则相对应的上下文以检测针对产生的上下文的目标信息时,如果确定基于信息提供历史的确认结果是比预设频率更频繁地提供检测到的目标信息或者存在先前在临界时间内提供的历史,则不提供检测到的目标信息。
具体地,将描述如下示例:产生“选手A”和“选手B”同时显示在棒球比赛内容中超过5分钟的上下文,以允许图像显示装置100提供“参加2008年北京奥运会的选手A和选手B的记录”作为附加信息中的目标信息。
当根据从服务器200接收到的针对棒球比赛内容的附加信息产生“选手A”和“选手B”同时显示超过5分钟的上下文时,图像显示装置100可以提取“参加2008年北京奥运会的选手A和选手B的记录”作为与产生的上下文相对应的目标信息。
此外,图像显示装置100可以分析信息提供历史以确定在临界时间内是否提供了“参加2008年北京奥运会的选手A和选手B的记录”。
也就是说,当在“选手A”和“选手B”经常同时显示超过5分钟的情况下,如果将“参加2008年北京奥运会的选手A和选手B的记录”显示或输出为音频数据,则用户会感到非常不便。
因此,如果通过信息提供历史确定在临界时间(例如1小时)内显示或提供棒球比赛内容的同时预先提供了“参加2008年北京奥运会的选手A和选手B的记录”,则图像显示装置100可以不提供“参加2008年北京奥运会的选手A和选手B的记录”作为目标信息。
同时,图像显示装置100可以以视频或音频方式向用户提供检测到的目标信息。例如,图像显示装置100可以在显示器110上将检测到的目标信息与显示的内容一起显示。然而,这仅仅是示例。因此,图像显示装置100可以输出以各种形式检测到的目标信息,诸如通过音频输出180输出目标信息。在下文中,将参照图6和图7详细描述图像显示装置100显示A队和B队的棒球比赛的情况。
图6是示出用于当图像显示装置100显示A队和B队的棒球比赛时,显示从服务器200接收到的附加信息中的与上下文相对应的目标信息的方法的序列图。
首先,图像显示装置100显示棒球比赛(S600)。也就是说,图像显示装置100可以根据用户命令显示棒球比赛。
此外,图像显示装置100可以基于显示的棒球比赛的元数据和简档信息产生询问数据,并向服务器200发送产生的询问数据。元数据表示使用户知道显示的内容是什么的信息。
此外,简档信息是在临界时间内不改变的信息。例如,当显示的棒球比赛是“A队和B队之间的比赛”并且在“X体育场”进行,则“A队”、“B队”和“X体育场”可以是元数据。
根据登录的用户信息,观看内容的用户是20岁的男人并且他更喜欢“A队”可以是简档信息。
因此,图像显示装置100可以基于元数据“A队”、“B队”和“X体育场”以及简档信息“偏好A队”、“20岁”和“男人信息”产生询问数据,并向服务器200发送产生的询问数据。
服务器200基于接收到的询问数据在各种类型的存储的信息中提取与内容和简档信息相对应的附加信息(S620)。也就是说,服务器200可以提取针对“A队和B队的记录”、“属于A队和B队的选手”、“属于A队和B队的选手所保持的记录”、“韩国棒球的各种类型的新记录”、“在C市的棒球场中创造的记录”、“从C市的棒球场中产生的事件”、“20岁男人的偏好”等的信息。
此外,服务器200可以产生作为提供存储的每个附加信息的规则的信息提供规则。也就是说,服务器200可以产生信息提供规则,该信息提供规则是关于根据产生了什么上下文而是否提供每个附加信息的规则。例如,服务器200可以产生信息提供规则,其在产生了“在比赛期间创造的新纪录的情况”和“收集各种类型的记录”上下文时,提供针对“韩国棒球的各种类型的新记录”的附加信息。
此外,服务器200将提取的附加信息与信息提供规则一起发送给图像显示装置100。
图像显示装置100确定是否产生了与信息提供规则相对应的上下文(S640)。具体地,图像显示装置100分析显示的棒球比赛屏幕,以通过使用在屏幕上出现的选手、事件产生内容、显示的文本等确定是否产生了与信息提供规则相对应的上下文。
例如,图像显示装置100可以分析显示图像以提取字符或字幕。此外,图像显示装置100还可以分析显示图像以提取字符或字幕。此外,图像显示装置100还可以分析输出的音频数据以提取特定词语。
具体地,图像显示装置100可以分析包括在捕捉的图像中的人物以确定人物是否是“选手A”,并分析显示的文本和输出的音频数据,以确定是否发生了“本垒打”事件。
图像显示装置100在从服务器200接收到的附加信息中检测与产生的上下文相对应的目标信息(S650),并处理和显示检测到的信息以与获取的上下文相对应(S660)。
也就是说,图像显示装置200可以在从服务器200接收到的针对“A队和B队的记录”、“属于A队和B队的选手”、“属于A队和B队的选手所保持的记录”、“韩国棒球的各种类型的新记录”、“在C市的棒球场中创造的记录”、“从C市的棒球场中产生的事件”等的附加信息中检测作为提取的内容的与“选手X的本垒打事件的发生”相匹配的目标信息。
例如,当“选手X的本垒打事件的发生”被产生为上下文时,图像显示装置100可以提供与“选手X的本垒打事件的发生”相对应的目标信息,诸如“选手X保持的记录”和“韩国棒球的本垒打新记录”。
此外,图像显示装置100可以显示在显示器的一部分上检测到的目标信息。具体地,图像显示装置100可以处理和显示检测到的信息以使之与显示的图像和谐。例如,图像显示装置100可以显示针对检测到的“选手X保持的记录”的信息,使得该信息在显示在“选手X”附近的同时随着“选手X”的移动而移动。
根据上述方法,图像显示装置100可以立即提供与上下文相对应的信息。
同时,当“选手X保持的记录”和“韩国棒球的本垒打新记录”被提供为目标信息时,图像显示装置100可以将被提供为目标信息的历史存储在信息提供历史中。
因此,当产生了适于提供“选手X保持的记录”和“韩国棒球的本垒打新记录”作为目标信息的上下文时,图像显示装置100可以基于信息提供历史确定是否提供目标信息。
例如,图像显示装置100可以将提供的关于“选手X保持的记录”和“韩国棒球的本垒打新记录”的历史存储在信息提供历史中,并可以在临界时间内不提供相同信息。
同时,图7是用于详细描述图6所示的用于提取信息以使得图像显示装置100能够立即提供与棒球比赛的上下文相对应的信息的方法的流程图。
首先,图像显示装置100从服务器200接收与棒球比赛相对应的多个附加信息和信息提供规则(S700)。
也就是说,服务器200可以以预设时间间隔收集数据并存储针对各种类型的内容的信息。例如,服务器200可以收集针对在世界各地(诸如韩国、日本、美国)进行的棒球比赛的记录的信息,从每场比赛中产生的事件、以及选手或队伍在每场比赛中新创造的记录,并更新针对棒球比赛的信息。
图像显示装置100可以使用服务器200中的韩国的“体育场C”中的“A队和B队之间的棒球比赛”作为元数据,并使用针对“用户是20岁男人”的信息作为简档信息,来产生询问数据,并向服务器200发送产生的询问数据。此外,图像显示装置100可以从接收到询问数据的服务器200接收针对“A队和B队之间的棒球比赛”的信息。
也就是说,图像显示装置100在不以预设时间间隔执行收集和更新各种信息的操作的情况下向服务器200发送询问数据,从而快速接收针对显示的内容的信息。
此外,图像显示装置100可以分析显示的棒球比赛屏幕,以使用上下文信息确定“选手X的出现”和“选手A的本垒打事件的发生”的产生(S710)。
具体地,图像显示装置100可以分析显示图像以确定包括在图像中的字符,并可以对包括在图像中的文本执行光学字符识别(OCR)等以提取文本。此外,图像显示装置100还可以分析输出的音频数据以提取特定词语。
例如,图像显示装置100可以分析包括在显示图像中的人物以确定该人物是否是“选手X”。备选地,图像显示装置100可以分析输出的音频以在从在棒球比赛期间输出为音频的解说员的解说中提取出称呼“选手X”的音频数据时,确定该人物是“选手X”。
此外,当称呼“本垒打”的词语被显示为文本时,图像显示装置100可以对显示图像执行OCR等,以提取显示的文本“本垒打”,并确定产生了“本垒打”事件。备选地,图像显示装置100可以从在棒球比赛期间输出为音频的解说员的解说中检测称呼“本垒打”的音频数据,并确定产生了“本垒打”事件。
因此,图像显示装置100在从服务器200接收的附加信息中检测与“选手X”的出现时间相对应的附加信息以及针对“本垒打”的附加信息作为目标信息(S720)。
例如,图像显示装置100可以检测“选手X前一个赛季的记录”、“选手X本赛季的记录”、“与选手X所属的队相关联的信息”、“针对选手X产生的事件”、“韩国职业棒球比赛的全时本垒打新纪录”、“本赛季保持最多本垒打的选手的记录”、“本赛季保持最多本垒打的选手与选手X之间的差别”等,作为目标信息。
此外,图像显示装置100提供检测到的目标信息(S730)。例如,图像显示装置100可以在显示器的一部分中显示提取的附加信息。具体地,图像显示装置100可以处理和显示检测到的附加信息以使之与显示的图像和谐。例如,图像显示装置100可以显示针对检测到的“选手X本赛季的记录”的信息,使得该信息在显示在“选手X”附近的同时随着“选手X”的移动而移动。
同时,图8A和图8B是描述根据示例性实施例的用于在棒球比赛内容被显示的同时将目标信息显示为UI的方法的示图。
当开始显示棒球比赛时,图像显示装置100可以向服务器200发送基于针对棒球比赛的元数据和简档信息所产生的询问数据。也就是说,图像显示装置100可以向服务器200发送显示的内容的标题、种类、主题和类型以及针对用户的信息等作为询问数据。
因此,图像显示装置100可以向服务器200发送询问数据,其中,通过使用表示显示的棒球比赛是“A队和B队”之间的比赛且棒球比赛在“C市的体育场”中进行的信息作为元数据并且使用被称为“用户是20岁男人”的信息作为简档信息来产生所述询问数据。
也就是说,接收到询问数据的服务器200可以从预存储的附加信息中提取针对“A队和B队的记录”、“属于A队和B队的选手”、“属于A队和B队的选手所保持的记录”、“属于A队和B队的选手之间的事件”、“韩国棒球的各种类型的新记录”、“在C市的棒球场中创造的记录”、“从C市的棒球场中产生的事件”、“20岁男人的偏好”等的信息。
此外,服务器200可以同时提取作为用于提供每个附加信息的规则的信息提供规则。也就是说,服务器200产生信息提供规则,该信息提供规则是关于在任何上下文的产生时间是否提供附加信息的规则。
例如,服务器200可以产生“在临界时间内至少两个选手同时出现的情况”作为用于提供针对“属于A队和B队的选手之间的事件”的信息的信息提供规则。服务器200可以向图像显示装置100发送提取的信息。
接收到信息的图像显示装置100可以以预设时间间隔分析显示的棒球比赛图像。也就是说,图像显示装置100可以分析显示图像以获取上下文。
也就是说,图显示装置100可以分析如图8A所示的显示图像,以获取被称为“目前在场上击球的选手是击球手X”且“投手是选手Y”的上下文。
因此,图像显示装置100可以确定“选手X800”和“选手Y810”同时出现的上下文满足信息提供条件中的在临界时间内至少两个选手同时出现的情况。
此外,图像显示装置100可以提供从服务器200接收到的多个附加信息中的“选手X800”和“选手Y810”“在2012年属于同一队伍”的情况作为目标信息,其中,所述目标信息是与满足信息提供规则的“选手X800”和“选手Y810”同时出现的上下文相对应的附加信息。
此外,图像显示装置100可以在显示器110的一部分上将目标信息显示为UI,但是如图8B中所示,可以处理和显示提取的信息。
例如,图像显示装置100可以在“选手X800”和“选手Y810”之间显示作为与目标信息相对应的文本UI的“你是否碰巧知道选手X和选手Y曾经为2012年的职业棒球队Z队效力?”。
同时,图9A和图9B示出用于描述图像显示装置100提取文本数据或音频数据以获取上下文并显示与获取的上下文相对应的信息的示例的示图。
也就是说,当根据事件产生而显示文本UI时,图像显示装置100可以分析显示的文本UI以提取文本数据。
如图9A中所示,当显示被称为“本垒打~!900”的文本数据时,图像显示装置100可以提取文本数据以获取在棒球比赛期间产生了“本垒打事件”的上下文。
具体地,如图8A中所示,当获取了击球手“选手X800”在场上击球的上下文并获取了在预设时间内产生了“本垒打事件”的上下文时,图像显示装置100可以确定“本垒打事件”是由“选手X800”产生的。
因此,图像显示装置100可以在从服务器200接收到的附加信息中提取与由“选手X800”产生“本垒打事件”的上下文相对应的“选手X的本垒打记录信息910”、“韩国职业棒球赛的全时本垒打纪录920”、“本赛季的本垒打记录930”作为附加信息。
此外,如图9B中所示,图像显示装置100可以在预定时间内将提取的附加信息显示在显示器110的一部分上。
用户可以立即接收与通过图像显示装置100显示的内容的上下文相对应的信息。
同时,如上所述,通过图像显示装置100显示诸如棒球比赛的体育内容作为内容仅仅是示例。因此,图显示装置100可以显示广播内容、电影内容、节目内容和与各种类型的应用相关联的内容。
例如,当图像显示装置100显示的内容是电影内容时,在图像显示装置100显示电影内容时,图像显示装置100可以提取电影的标题、制片年份和导演名字作为元数据,并可以提取“表示用户将演员P存储为最爱的信息”作为简档信息。此外,图像显示装置100可以基于提取的元数据和简档信息产生询问数据。
具体地,当如图10A所示显示电影内容时,图像显示装置100可以如上所述产生询问数据并向服务器200发送产生的询问数据。
此外,图像显示装置100可以从接收到询问数据的服务器200接收与显示的电影内容相对应的附加信息。也就是说,服务器200可以向图像显示装置100发送根据询问数据的针对显示的电影内容的附加信息以及针对被用户存储为最爱的“演员P”的附加信息。
如图1OB中所示,当用户说出诸如“演员P!P!”的语音时,图像显示装置100可以分析输入的用户语音以获知用户说出了“演员P!”的名字。
当产生了“用户说出演员P的名字”的上下文时,图像显示装置100可以确定“用户说出演员P的名字”的上下文对应于用于提供针对“演员P”的新信息和新闻信息的信息提供规则。
因此,图像显示装置100可以提供从服务器200接收到的附加信息中的与“用户说出P的名字”的上下文的产生相对应的目标信息。也就是说,图像显示装置100可以提供针对“演员P”的新信息、新闻等作为目标信息。
具体地,如图10C中所示,图像显示装置100可以在显示在图像内容中的“演员P1000”上显示作为围绕“演员P1000”所获得的附加信息的目标信息1100。
图像显示装置100可以使用存储的信息提供历史来调整目标信息的显示频率,使得用户不会感到不便。例如,图像显示装置100可以不在显示电影内容的同时每当产生了特定人物出现的上下文时都提供针对特定人物的信息,而是可以在用户说出特定人物的名字的情况下,在信息提供历史中不存在作为目标信息的针对特定人物的历史提供新信息的情况下,或者基于存储的信息提供历史以预设时间间隔来提供信息。
同时,图像显示装置100的组件可以被实施为软件。例如,虽然在图2和图3中没有示出,但是图像显示装置100还可以包括闪存、其它非易失性存储器。非易失性存储器可以存储与每个组件相对应的程序。
此外,处理器130可以被实施为包括CPU(未示出)和随机存取存储器(RAM)的形式。处理器130的CPU将存储在非易失性存储器中的程序拷贝到RAM中,并随后执行拷贝的程序以能够自动提供如上所述的目标信息。
同时,如上所述的根据各个实施例的图像显示装置的信息提供方法可以存储在非暂时性可读介质中,并以软件形式编码。非暂时性可读介质可以在被装配在各个装置中的同时被使用。
非暂时性计算机可读介质不是诸如寄存器、高速缓存器、内存等的暂时存储数据的介质,而是半永久性地存储数据并可以被设备读取的装置。具体地,非暂时性计算机可读介质可以是CD、DVD、硬盘、蓝光盘、USB、存储卡、ROM等。
如上所述,根据各种示例性实施例,可以提供能够立即提供与显示的内容相对应的信息的图像显示装置及其信息提供方法。
虽然在上文已经示出和描述了示例性实施例,但是实施例不限于上述特定示例性实施例,而是可以在不脱离所附权利要求中公开的范围和精神的情况下被本领域技术人员不同地修改。这些修改应被理解为落入范围中。
Claims (15)
1.一种图像显示装置,包括:
显示器,显示内容;
通信器,与服务器通信;以及
处理器,控制所述通信器从所述服务器接收针对显示的内容的附加信息以及信息提供规则,并且当在显示器上显示内容的同时产生了与所述信息提供规则相对应的上下文时,提供接收到的附加信息中与所述上下文相对应的目标信息。
2.如权利要求1所述的图像显示装置,其中,所述信息提供规则包括与是否提供信息内容有关的信息或者根据产生的上下文所提供的信息。
3.如权利要求1所述的图像显示装置,还包括:
存储器,存储信息提供历史,
其中,当产生了与所述信息提供规则相对应的上下文时,所述处理器基于存储的信息提供历史来提供与所述上下文相对应的目标信息。
4.如权利要求3所述的图像显示装置,其中,当基于存储的信息提供历史,比预设频率更频繁地提供与所述上下文相对应的目标信息或者目标信息是先前在临界时间内提供的时,即使产生了与信息提供规则相对应的上下文,所述处理器也不提供所述目标信息。
5.如权利要求1所述的图像显示装置,其中,所述处理器控制所述通信器:基于针对显示的内容的元数据和简档信息产生询问数据,并向所述服务器发送产生的询问数据。
6.如权利要求5所述的图像显示装置,其中,用于产生询问数据的简档信息包括用户信息和位置信息中的至少一个。
7.如权利要求6所述的图像显示装置,其中,所述处理器控制所述通信器:使用用于产生询问数据的简档信息来更新所述询问数据,并向服务器发送更新的询问数据。
8.如权利要求1所述的图像显示装置,其中,所述处理器确定是否基于显示的内容的显示信息、字幕信息和音频信息以及被输入到图像显示装置的用户语音信息来产生所述上下文。
9.如权利要求1所述的图像显示装置,其中,所述处理器控制所述显示器将与所述上下文相对应的目标信息与内容一起显示。
10.如权利要求1所述的图像显示装置,其中,所述处理器控制所述通信器向预设用户终端发送与所述上下文相对应的目标信息。
11.一种图像显示装置的信息提供方法,包括:
显示内容;
从服务器接收针对显示的内容的附加信息以及信息提供规则;以及
当在显示内容的同时产生了与所述信息提供规则相对应的上下文时,提供接收到的附加信息中与所述上下文相对应的目标信息。
12.如权利要求11所述的信息提供方法,其中,所述信息提供规则包括与是否提供信息内容有关的信息或者根据产生的上下文所提供的信息。
13.如权利要求11所述的信息提供方法,还包括:
存储信息提供历史,
其中,在所述提供中,当产生了与信息提供规则相对应的上下文时,基于存储的信息提供历史提供与所述上下文相对应的目标信息。
14.如权利要求13所述的信息提供方法,其中,在所述提供中,当基于存储的信息提供历史,比预设频率更频繁地提供与所述上下文相对应的目标信息或者目标信息是先前在临界时间内提供的时,即使产生了与信息提供规则相对应的上下文,也不提供所述目标信息。
15.如权利要求11所述的信息提供方法,还包括:基于针对显示的内容的元数据和简档信息产生询问数据,并向服务器发送产生的询问数据。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140168956A KR102185700B1 (ko) | 2014-11-28 | 2014-11-28 | 디스플레이 장치 및 이의 정보 제공 방법 |
KR10-2014-0168956 | 2014-11-28 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105657510A true CN105657510A (zh) | 2016-06-08 |
CN105657510B CN105657510B (zh) | 2021-06-01 |
Family
ID=54782424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510847726.3A Active CN105657510B (zh) | 2014-11-28 | 2015-11-27 | 图像显示装置及其信息提供方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10503776B2 (zh) |
EP (1) | EP3026925B1 (zh) |
KR (1) | KR102185700B1 (zh) |
CN (1) | CN105657510B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102407127B1 (ko) * | 2016-01-05 | 2022-06-10 | 삼성전자주식회사 | 디스플레이 시스템, 디스플레이 장치 및 그의 제어 방법 |
US10623525B2 (en) * | 2016-06-23 | 2020-04-14 | DISH Technologies L.L.C. | Methods, systems, and apparatus for presenting participant information associated with a media stream |
US11250071B2 (en) * | 2019-06-12 | 2022-02-15 | Microsoft Technology Licensing, Llc | Trigger-based contextual information feature |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101377786A (zh) * | 2007-08-30 | 2009-03-04 | 三星电子株式会社 | 成像设备、成像系统及其文件管理方法 |
CN102685582A (zh) * | 2011-03-15 | 2012-09-19 | Lg电子株式会社 | 控制电子设备的方法及其便携式终端 |
US20120278821A1 (en) * | 2011-04-30 | 2012-11-01 | Samsung Electronics Co., Ltd. | Middle partners |
US20130198651A1 (en) * | 2012-01-31 | 2013-08-01 | Samsung Electronics Co., Ltd. | Display apparatus and additional information providing method using the same |
US20130241952A1 (en) * | 2012-03-15 | 2013-09-19 | Jason Richman | Systems and methods for delivery techniques of contextualized services on mobile devices |
CN104053034A (zh) * | 2013-03-14 | 2014-09-17 | Lg电子株式会社 | 视频显示设备及其控制方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8843467B2 (en) | 2007-05-15 | 2014-09-23 | Samsung Electronics Co., Ltd. | Method and system for providing relevant information to a user of a device in a local network |
US8115869B2 (en) | 2007-02-28 | 2012-02-14 | Samsung Electronics Co., Ltd. | Method and system for extracting relevant information from content metadata |
KR20080078217A (ko) * | 2007-02-22 | 2008-08-27 | 정태우 | 영상에 포함된 객체 색인 방법과 그 색인 정보를 이용한부가 서비스 방법 및 그 영상 처리 장치 |
US9043444B2 (en) | 2011-05-25 | 2015-05-26 | Google Inc. | Using an audio stream to identify metadata associated with a currently playing television program |
US10019962B2 (en) * | 2011-08-17 | 2018-07-10 | Microsoft Technology Licensing, Llc | Context adaptive user interface for augmented reality display |
KR20130127338A (ko) * | 2012-05-14 | 2013-11-22 | 삼성전자주식회사 | 디스플레이 장치, 서버 및 그 제어 방법 |
KR20140004341A (ko) * | 2012-07-02 | 2014-01-13 | 한국전자통신연구원 | 시청자 선택형 증강방송 서비스 제공 장치 및 방법 |
JP6025522B2 (ja) * | 2012-11-27 | 2016-11-16 | キヤノン株式会社 | 画像処理装置、画像処理方法、画像処理システム及びプログラム |
-
2014
- 2014-11-28 KR KR1020140168956A patent/KR102185700B1/ko active IP Right Grant
-
2015
- 2015-10-30 US US14/927,771 patent/US10503776B2/en active Active
- 2015-11-19 EP EP15195468.2A patent/EP3026925B1/en active Active
- 2015-11-27 CN CN201510847726.3A patent/CN105657510B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101377786A (zh) * | 2007-08-30 | 2009-03-04 | 三星电子株式会社 | 成像设备、成像系统及其文件管理方法 |
CN102685582A (zh) * | 2011-03-15 | 2012-09-19 | Lg电子株式会社 | 控制电子设备的方法及其便携式终端 |
US20120278821A1 (en) * | 2011-04-30 | 2012-11-01 | Samsung Electronics Co., Ltd. | Middle partners |
US20130198651A1 (en) * | 2012-01-31 | 2013-08-01 | Samsung Electronics Co., Ltd. | Display apparatus and additional information providing method using the same |
US20130241952A1 (en) * | 2012-03-15 | 2013-09-19 | Jason Richman | Systems and methods for delivery techniques of contextualized services on mobile devices |
CN104053034A (zh) * | 2013-03-14 | 2014-09-17 | Lg电子株式会社 | 视频显示设备及其控制方法 |
Also Published As
Publication number | Publication date |
---|---|
US10503776B2 (en) | 2019-12-10 |
CN105657510B (zh) | 2021-06-01 |
US20160154824A1 (en) | 2016-06-02 |
KR20160064813A (ko) | 2016-06-08 |
KR102185700B1 (ko) | 2020-12-02 |
EP3026925A1 (en) | 2016-06-01 |
EP3026925B1 (en) | 2021-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109725863B (zh) | 一种用于进行投屏的方法、装置、设备和系统 | |
KR101298823B1 (ko) | 구두 피드백을 프로세싱하고 디지탈 비디오 레코더(dvr) 기록 패턴을 업데이트하기 위한 설비 | |
CN102193794B (zh) | 链接实时媒体情境到相关的应用程序和服务 | |
US20050262548A1 (en) | Terminal device, contents delivery system, information output method and information output program | |
US20190220492A1 (en) | Display apparatus and method of controlling the same | |
CN103026673A (zh) | 多功能远程控制装置 | |
CN104205854A (zh) | 在与第一屏幕上的内容同步的第二屏幕上提供社交消息的显示的方法和系统 | |
CN103403655A (zh) | 与上下文有关的用户界面 | |
KR102238330B1 (ko) | 디스플레이 장치 및 그의 동작 방법 | |
CN103377268B (zh) | 运用后设数据来进行目标识别与事件重现的系统 | |
JP6046874B1 (ja) | 情報処理装置、情報処理方法、プログラム | |
CN112672208B (zh) | 视频播放方法、装置、电子设备、服务器及系统 | |
EP2757799A1 (en) | Display apparatus and method for providing customer-built information using the same | |
CN106550252A (zh) | 信息的推送方法、装置及设备 | |
CN109151565A (zh) | 播放语音的方法、装置、电子设备及存储介质 | |
CN105635795A (zh) | 电视用户行为信息采集方法及装置 | |
US20180139502A1 (en) | Display device | |
CN106162357A (zh) | 获取视频内容的方法及装置 | |
US20160212465A1 (en) | Preference channel setting apparatus and method of setting the preference channel | |
CN105657510A (zh) | 图像显示装置及其信息提供方法 | |
CN105472433A (zh) | 提供节目内容的方法、装置及智能电视 | |
KR20170035167A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
CN109769130B (zh) | 基于收视大数据的遥控器个性化设置方法及系统 | |
CN103856813A (zh) | 电视节目切换系统及方法 | |
CN106454462A (zh) | 智能电视的观看权限控制方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |