CN103947220B - 显示装置和使用显示装置提供内容的方法 - Google Patents

显示装置和使用显示装置提供内容的方法 Download PDF

Info

Publication number
CN103947220B
CN103947220B CN201280056441.2A CN201280056441A CN103947220B CN 103947220 B CN103947220 B CN 103947220B CN 201280056441 A CN201280056441 A CN 201280056441A CN 103947220 B CN103947220 B CN 103947220B
Authority
CN
China
Prior art keywords
frame
video
content
controller
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280056441.2A
Other languages
English (en)
Other versions
CN103947220A (zh
Inventor
姜培根
韩盛斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103947220A publication Critical patent/CN103947220A/zh
Application granted granted Critical
Publication of CN103947220B publication Critical patent/CN103947220B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors

Abstract

公开了显示装置和使用显示装置提供内容的方法。控制器接收搜索词并且搜索包括与接收到的搜索词关联的视频帧的至少一个内容。显示器显示搜索到的内容的列表。

Description

显示装置和使用显示装置提供内容的方法
技术领域
本发明涉及显示装置和使用显示装置提供内容的方法，更具体地，涉及可接收、存储、编辑和再现内容的显示装置和使用显示装置提供内容的方法。
背景技术
显示装置具有例如接收和处理用户可观看的广播图像的功能。这种显示装置可在显示器上显示从广播站发送的广播信号之中的由用户选择的广播。当前的广播设备正从模拟广播过渡到数字广播。
数字广播是指发送数字音频信号和视频信号的广播。相比于模拟广播，数字广播由于对抗外部噪声的鲁棒性而降低数据丢失、具有有利的纠错、高分辨率和高清晰度画面。另外，不同于模拟广播，数字广播可提供双向服务。
为了能够利用数字广播，多媒体装置被开发成具有比传统多媒体装置更高的性能和更多的功能，进而，多媒体装置可用的服务被多样化为互联网服务、视频点播(VOD)、电子相册服务等。
传统的显示装置只基于人物信息提供内容检索，因此，对与所期望的内容相关的视频帧的检索需要用户直接观看和听再现的视频和音频内容。
发明内容
技术问题
本发明的一个目的是提供可搜索内容中包含的视频帧和音频的显示装置和使用显示装置提供内容的方法。
本发明的另一个目的是提供可搜索另一个装置中存储的内容中包含的视频帧和音频的显示装置和使用显示装置提供内容的方法。
本发明的又一个目的是提供用户界面以有助于容易地检验搜索的视频帧和音频的搜索结果并且容易地选择和编辑搜索到的视频帧和音频的显示装置和使用显示装置提供内容的方法。
问题的方案
本发明另外的优点、目的和特征将部分在后面的描述中阐述并且部分地对于阅读了下文的普通技术人员而言将变得清楚或者可根据本发明的实践而获知。本发明的目的和其它优点可通过书面说明书及其权利要求书和附图中具体指出的结构来实现和获得。
为了实现这些目的和其它优点并且根据本发明的目的，如本文实施和广义描述地，一种使用显示装置提供内容的方法包括：接收用户输入；搜索包括与接收到的用户输入中包括的搜索词关联的视频帧的至少一个内容；显示搜索到的内容的列表。
所述方法还可包括编辑搜索到的内容的所述列表中包括的内容。编辑可包括以下步骤中的至少一个：用另一个视频帧代替所述内容的视频帧；对所述内容配音；改变所述内容中包括的音频数据的至少一部分的语音水平；用先前存储的音频数据代替所述内容中包括的音频数据的至少一部分。
所述内容可被存储在全球资源和本地资源中的至少一种中。
所显示的列表可包括针对所述视频帧的缩略图。
所述方法还可包括：检测选择所述缩略图的用户动作，并且显示与所选择的缩略图关联的视频帧。
所述方法还可包括：检测选择所述列表中包括的内容的用户动作，并且显示所述内容中包括的视频帧之中的与所述搜索词关联的视频帧的缩略图。
搜索所述内容可包括：使用内容信息数据库搜索与所述搜索词关联的视频帧，所述内容信息数据库包括针对所述内容中包括的视频帧的图像信息。
所述方法还可包括：构建所述内容信息数据库。
构建可包括：访问内容；提取所访问的内容中包括的视频帧；检验所提取的所述视频帧是否满足关键帧的要求；如果所述视频帧满足所述关键帧的要求，则选择所述视频帧作为所述关键帧；并且产生与所选择的视频帧关联的图像信息。
产生所述图像信息可包括：使用所述内容的视觉描述符中包括的信息来产生图像信息。
所述内容信息数据库还可包括所述视频帧的位置信息和用于将所述视频帧的位置信息与所述图像信息关联的信息。
所述图像信息可包括关于所述视频帧的特征信息、关于所述视频帧的主观信息和关于所述视频帧的说明信息中的至少一个。
根据另一个方面，一种显示装置包括：控制器，其用于接收搜索词并且搜索包括与接收到的搜索词关联的视频帧的至少一个内容；显示器，其用于显示搜索到的内容的列表。
要理解，对本发明的以上总体描述和以下详细描述是示例性的和说明性的，并且旨在提供对要求保护的本发明的进一步说明。
本发明的有益效果
如从以上描述中清楚的，通过提供根据本发明的显示装置和使用显示装置提供内容的方法，用户可搜索内容中包含的视频帧和音频。更具体地，用户可在不直接观看视频帧的情况下搜索与特定人物到来的场景对应的视频帧，并且还可搜索另一个装置中存储的内容的视频帧和音频。此外，可基于各装置，在除了执行检索之外的时间搜索期望的视频帧和音频。由于搜索到的结果可以以缩略图的形式提供并且与所选择的缩略图关联的视频帧和音频可被直接显示，因此用户可容易地选择和编辑搜索到的视频帧和音频。
附图说明
附图被包括以提供对本发明的进一步理解，并入且构成本申请的一部分，附图示出本发明的实施方式并且与描述一起用于说明本发明的原理。在附图中：
图1是示出根据本发明的示例性实施方式的多媒体系统的构造的示图。
图2是示出根据本发明的示例性实施方式的显示装置的构造的框图。
图3是示出根据本发明的示例性实施方式的用于构建内容信息数据库的方法的实现过程的流程图。
图4是示出根据本发明的示例性实施方式的用于分析关于视频帧的信息的方法的实现过程的流程图。
图5是示出视频帧的示例性实施方式的示图。
图6是示出视频帧的另一个示例性实施方式的示图。
图7是示出根据本发明的示例性实施方式的用于提供内容的方法的实现过程的流程图。
图8是示出其上显示有用于输入搜索词的GUI的画面的示例性实施方式的示图。
图9是示出其上显示有搜索结果的画面的示例性实施方式的示图。
图10是示出其上显示有缩略图的画面的示例性实施方式的示图。
图11是示出根据本发明的示例性实施方式的用于提供内容的方法的实现过程的流程图。
图12是示出其上显示有对象选择标记的画面的示例性实施方式的示图。
图13是示出其上显示有缩略图的画面的另一个示例性实施方式的示图。
图14是示出根据本发明的另一个实施方式的用于提供内容的方法的实现过程的流程图。
图15是示出根据本发明的又一个实施方式的用于提供内容的方法的实现过程的流程图。
图16是示出其上显示有用于选择对象的声调的GUI的画面的示例性实施方式的示图。
图17是示出其上显示有用于选择表演者的GUI的画面的示例性实施方式的示图。
图18是示出根据本发明的示例性实施方式的控制器的构造的框图。
图19是示出其上显示有用于设置语音调制水平的GUI的画面的示例性实施方式的示图。
具体实施方式
将参照附图描述可实施上述对象的本发明的示例性实施方式。这里，应该理解，在附图中示出并且结合图示进行说明的本发明的构造和操作仅仅被描述为至少一个实施方式，本发明的技术构思及必要构造和操作不受说明书的限制。
尽管本发明中使用的术语是考虑到其在本发明中的功能从通常已知和使用的术语中选择的，但这些术语可根据本领域技术人员的意图、惯例或新技术的出现而变化。此外，申请人在特定情况下慎重选择术语，在这种情况下，在本文说明书的相关部分中描述这些术语的详细含义。因此，本文使用的术语应该不是仅仅按所使用的实际术语来理解，而是按落入本文公开的说明书内的含义来理解。
图1是示出根据本发明的示例性实施方式的多媒体系统的构造的示图。
参照图1，根据本发明的多媒体系统100可包括显示装置110、外部资源112、114、120、130和140、以及中继器150。外部资源112、114、120、130和140可分成全球资源140以及本地资源112、114、120和130。
全球资源140是位于广域网(WAN)上的服务器。全球资源140可为显示装置110提供互联网服务和广播服务。互联网服务是指经由互联网提供的服务(诸如，内容点播(CoD)服务、YouTube服务、用于提供天气、新闻和本地信息并且能够进行信息检索等的信息服务、与游戏、唱歌等相关的娱乐服务、以及与TV邮件和TV短消息服务(SMS)服务等相关的通信服务)。广播服务可包括IPTV广播服务。
在本地资源112、114、120和130中，信息通信设备120和130设置有存储器并且可实现网络功能，网络功能的示例可包括家庭服务器、PC、膝上型计算机、蜂窝电话、个人数字助理(PDA)等。另外，包括USB外部硬盘112和USB闪速存储器114的外部存储介质经由串行总线接口连接到显示装置110。在一个示例中，包括显示装置110和外部资源112、114、120、130和140的多个组件可被设置为构成单个家庭网络。可用显示装置110代替本地资源120和130。
根据本发明的多媒体系统100还包括遥控器111，遥控器111可以以有线或无线方式向显示装置110发送数据或者从显示装置110接收数据。用户可以以有线或无线方式经由遥控器111控制显示装置110。
显示装置110可根据标准协议通信以有线或无线方式直接连接到本地资源120和130，或者可经由中继器150连接到本地资源120和130。中继器150用于中继显示装置110与本地资源120和130之间的数据发送/接收。显示装置110可采用标准协议通信(诸如，IEEE802.11、IEEE802.11n、IEEE802.11g、IEEE802.15.4、WiFi、以太网、WCDMA、GRS等)。显示装置110可使用数字生活网络联盟(DLNA)从本地资源120和130接收内容并且可显示接收到的内容。
显示装置110可从全球资源140接收互联网服务和广播服务。在一个示例中，显示装置110可从全球资源140接收包括内容数据的流数据并且可显示包括在接收到的流数据中的内容数据。
图2是示出根据本发明的示例性实施方式的显示装置的构造的框图。
参照图2，根据本发明的显示装置110可包括接收器201、解复用器240、视频解码器244、音频解码器248、显示器250、音频输出单元260、输入单元270、存储单元280和控制器290。在一些实施方式中，显示装置110可包括图像拍摄单元295。
接收器201可接收广播数据、视频数据、音频数据、信息数据和应用。接收器201可包括调谐器210、解调器220、移动通信单元215、网络接口230、语音感测单元233和外部信号接收器235。调谐器210可经由广播网络接收应用，移动通信单元215可经由移动通信网络(诸如，2G、3G和4G通信网络等)接收应用。网络接口230可从全球资源140以及本地资源120和130接收应用和内容，外部信号接收器235可从本地资源112、114、120和130接收应用和内容。
解复用器240用于将解调器220输出的流信号解复用成视频信号和音频信号。另外，解复用器240可从移动通信单元215、网络接口230和外部信号接收器235接收视频数据、音频数据、广播数据、信息数据和应用数据。
视频解码器244实现对来自解复用器240的经解复用的视频信号的解码并且将解码后的视频信号输出到显示器250。
音频解码器248实现对来自解复用器240的经解复用的音频信号的解码并且将解码后的音频信号输出到音频输出单元260。
显示器250用于显示图像252。显示器250可与控制器290结合起来操作。显示器250可显示图形用户界面(GUI)253，GUI253提供用于允许用户容易地访问显示装置的操作系统(OS)或正在操作系统上执行的应用的界面。
音频输出单元260可从音频解码器248和控制器290接收音频数据并且经由再现接收到的音频数据来输出声音261。在一些实施方式中，声音261可以是语音，根据声调设置值来调制所述语音的声调。在一些实施方式中，除了由音频解码器248解码的音频信号的声音之外，声音261可以是在显示图像252期间由语音感测单元233感测到的声音。
输入单元270可以是布置在显示器250上或者在显示器250前面的触摸屏，或者可以是从遥控器接收信号的通信单元。输入单元270可从遥控器111接收遥控器发送信号。
在一些实施方式中，接收器201可以是用于从遥控器111接收信号的通信单元。具体地，外部信号接收器235可从遥控器111接收遥控器发送信号。遥控器发送信号可包含内容数据，根据本发明的显示装置110可接收遥控器发送信号中包含的内容。
存储单元280通常提供存储将被显示装置110使用的程序代码和数据的位置。程序代码可以是接收器201接收的应用的程序代码和在制造显示装置10时先前存储的应用的程序代码。可以用诸如HTML、XML、HTML5、CSS、CSS3、JavaScript、Java、C、C++、Visual C++、c#等编程语言对所述应用编程。
存储单元280可存储内容信息数据库和声调设置值。内容信息数据库可存储用于标识内容的内容标识符、用于指示存储内容的地址的内容位置信息、内容图像信息和用于将位置信息与图像信息关联的信息。图像信息可包括针对图像中包括的场景的缩略图、关于场景位置的信息、关于场景的客观和主观信息、以及关于场景的说明信息。可按单个视频帧或一个或多个视频帧来组织场景，关于场景的客观信息可以指关于场景的特征信息。
存储单元280可被实现为只读存储器(ROM)、随机存取存储器(RAM)、硬盘驱动等。程序代码和数据可被存储在可分离的存储介质中并且可根据需要被加载或安装到显示装置110上。可分离的存储介质可包括CD-ROM、PC-CARD、存储卡、软盘、磁盘和网络组件。
控制器290用于执行指令并且实现与显示装置110关联的操作。例如，控制器290可使用从存储单元280中搜索到的指令来控制显示装置110的组件之间的输入和输出的接收和处理以及数据接收和处理。
控制器290还用于与操作系统一起执行程序代码并且产生和使用数据。操作系统通常是公知的，因此，省略对其的详细描述。操作系统的示例可包括Windows OS、Unix、Linux、Palm OS、DOS、Android、Mac OS。在结合控制器290进行操作的存储单元280内可存在操作系统、其它计算机代码和数据。
控制器290可在单个芯片、多个芯片或多个电子组件上实现。例如，可针对控制器290使用各种架构，所述各种架构包括专用或嵌入式处理器、单用途处理器、控制器、专用集成电路(ASIC)等。
控制器290可识别用户动作并且可基于识别到的用户动作来控制显示装置110。用户动作可包括选择显示装置或遥控器上的实体按钮、执行指定手势或选择触摸屏显示器上的软按钮、执行从通过图像拍摄单元拍摄的图像中识别的指定手势、产生通过声音识别而识别的指定声音。所述手势可包括触摸手势和空间手势。
输入单元270接收手势271，控制器290执行指令以实现与手势271关联的操作。另外，存储单元280可包含手势操作程序281，手势操作程序281可以是操作系统或单独应用的一部分。手势操作程序281通常包含一系列指令，这些指令用于识别手势271的出现并且将手势271和/或响应于手势271应该采取哪个动作通知给一个或更多个软件代理。
图3是示出根据本发明的示例性实施方式的用于构建内容信息数据库的方法的实现过程的流程图。
参照图3，控制器290控制对内容的访问(S100)。内容可被存储在存储单元290以及外部资源112、114、120、130和140中。可通过流从全球资源140发送内容。操作S100可在启动后被自动地实现，可被周期性实现，或者可根据用户请求被实现。另外，在通过流从全球资源140发送内容数据时，操作S100可被自动地实现。
控制器290提取所访问的内容中包含的视频帧(S110)。控制器290可提取I帧、B帧甚至P帧。
控制器290分析关于所提取的视频帧的空间-时间信息(S120)。控制器290可使用通过运动图像专家组(MPEG)7定义的视觉描述符中包含的信息来分析关于视频帧的空间-时间信息。
控制器290检验所提取的视频帧是否满足关键帧的要求(S130)。关键帧的要求可包括如下的要求：关键帧对应于出现场景变化的位置的视频帧。也就是说，控制器290可检验所提取的视频帧是否是出现场景变化的那部分的视频帧。在一些实施方式中，控制器290可使用在操作S120中分析的关于视频帧的空间-时间信息来检验视频帧是否是出现场景变化的那部分的视频帧。在一些实施方式中，控制器290可通过将当前视频帧与前一视频帧进行比较来计算变化率，并且如果计算出的变化率是50％或更大，则可选择视频帧500作为关键帧。
如果视频帧满足关键帧的要求，则控制器290选择视频帧作为关键帧(S140)。
控制器290分析关于被选择作为关键帧的视频帧的信息(S150)。控制器290可使用通过MPEG7定义的视觉描述符中包括的信息来分析关于视频帧的信息。经分析信息可以是图像信息。在一些实施方式中，操作S150可包括图4的用于分析关于视频帧的信息的方法的实现过程。
控制器290存储在操作S150中分析的信息(S160)。信息可被存储在存储单元280中，并且可被存储在外部资源112、114、120、130和140中。另外，信息可被包括在内容信息数据库中。控制器290可存储关于在操作S100中访问的内容的信息(诸如，内容标识符、内容位置信息和用于将内容标识符与内容位置信息关联的信息)。
内容信息数据库可对在操作150中基于各关键帧分析的信息进行编索引和存储。在一些实施方式中，在操作S150中分析的信息可基于作为索引关键字的人物被编索引和存储，所述人物是操作150分析的信息中包括的信息之一。
图4是示出根据本发明的示例性实施方式的用于分析关于视频帧的信息的方法的实现过程的流程图。
参照图4，控制器290分析关于关键帧的客观信息(S200)。客观信息包括基于颜色、形状和图案的关于关键帧的特征值。在操作S200中，控制器200从关键帧中提取特征值。
控制器290分析关于关键帧的主观信息(S210)。主观信息是用于指示高兴、悲伤、愤怒、爱慕等的信息。在操作S210中，控制器290确定关键帧所表现的主观信息。
控制器290分析关于关键帧的说明信息(S220)。说明信息包括关于与视频帧相关的事件、动作和评论的说明信息以及关于视频中包括的人物的信息。在操作S220中，控制器290检测关于关键帧的说明信息。
图5是示出视频帧的示例性实施方式的示图。
参照图5，控制器290可从内容中提取视频帧500。然后，控制器290可检验视频帧500是否是出现场景变化的那部分的视频帧，并且基于检验结果，可选择视频帧500作为关键帧。控制器290可通过将视频帧500与前一视频帧进行比较来计算变化率，并且如果计算出的变化率是50％或更大，则可选择视频帧500作为关键帧。
控制器290从关键帧500中提取客观信息(诸如，表现圆形瞄准仪511、黑色外套513等的特征值)。另外，控制器290基于关于关键帧500的主观信息确定关键帧500是指示悲伤的。控制器290可从MPEG7视觉描述符中提取主观信息。
控制器290检测关于关键帧500的说明信息(诸如，人物520的名字“LEEBYEONGHEON”、人物520的动作“射击”和包含关键帧500的内容的名称“IRIS”)。
图6是示出视频帧的另一个示例性实施方式的示图。
参照图6，控制器290可从内容中提取视频帧600。然后，控制器290可检验视频帧600是否是出现场景变化的那部分的视频帧，并且基于检验结果，可选择视频帧600作为关键帧。控制器290可通过将视频帧600与前一视频帧进行比较来计算变化率，并且如果计算出的变化率是50％或更大，则可选择视频帧600作为关键帧。
控制器290从关键帧600中提取客观信息(诸如，表现黑/白条纹611等的特征值)。另外，控制器290基于关于关键帧600的主观信息确定关键帧600是指示爱慕的。控制器290可从MPEG7视觉描述符中提取主观信息。
控制器290检测关于关键帧600的说明信息(诸如，人物621的名字“HA GEE WON”、人物623的名字“HYUN BIN”、人物623的动作“仰卧起坐”、视频帧600的背景“体育馆”和包含关键帧600的内容的名称“秘密花园”)。
图7是示出根据本发明的示例性实施方式的用于提供内容的方法的实现过程的流程图。
参照图7，控制器290构建内容信息数据库(S300)。操作S300可包括图3的用于构建内容信息数据库的方法的实现过程。
控制器290检测请求检索的用户动作(S310)。
响应于检测到的用户动作，控制器290可控制显示用于输入搜索词的GUI(S310)。GUI可以被显示为覆盖广播画面，或者可在整个画面上显示GUI。
图8是示出其上显示有用于输入搜索词的GUI的画面的示例性实施方式的示图。
参照图8，在操作S310中，显示器250可显示画面800。画面800包括图像区810和GUI区820。图像区810显示当前显示的图像，并且GUI区820显示用于输入关键词的GUI。
GUI区820包括搜索词输入窗口821、虚拟键盘823、“确认”按钮825和“取消”按钮827。用户可使用虚拟键盘823输入搜索词，并且在搜索词输入窗口821中显示输入搜索词。搜索词输入窗口821显示当前输入的搜索词“LEE BYEONGHEON”。用户可通过按下“确认”按钮825请求使用输入到的搜索词输入窗口821的搜索词进行检索，并且通过按下“取消”按钮827使GUI区820消失而不进行检索。另外，用户可使用指示物830按下虚拟键盘823的按钮(“确认”按钮825和“取消”按钮827)。
控制器290检验是否输入了搜索词(S330)。在一些实施方式中，在按下图8中示出的“确认”按钮825的情况下，控制器290确认输入了搜索词输入窗口821上显示的搜索词。
如果输入了搜索词，则控制器290基于输入搜索词在构建的内容信息数据库中搜索内容(S340)。控制器290通过将内容信息数据库中包括的图像信息与输入搜索词进行比较，搜索包括与搜索词关联的视频帧的内容。也就是说，控制器290搜索包含与输入的搜索词相同或类似的图像信息的视频帧。
例如，如果输入的搜索词是“LEE BYEONGHEON”，则控制器290可在内容信息数据库中搜索包括“LEE BYEONGHEON”的图像信息并且可检测包括该图像信息的视频帧。如果输入的搜索词是“IRIS中穿着黑色外套的LEE BYEONGHEON带着悲伤表情射击的场景”，则控制器290可在内容信息数据库中搜索包括瞄准仪、黑色外套、悲伤、LEE BYEONGHEON、射击和IRIS的图像信息，并且可检测包括搜索到的图像信息的图5的视频帧500。另外，如果输入的搜索词是“秘密花园中穿着黑色训练服的HYUN BIN正在体育馆与心爱的HA GEEWON一起进行仰卧起坐的场景”，则控制器290可搜索包括黑/白条纹、爱慕、HA GEE WON、HYUB BIN、体育馆和秘密花园的图像信息，并且可检测包括搜索到的图像信息的图6的视频帧600。
控制器290显示搜索结果(S350)。搜索结果可以被显示为覆盖广播画面，或者可在整个画面上显示搜索结果。
图9是示出其上显示搜索结果的画面的示例性实施方式的示图。
参照图9，在操作S350中，显示器250可显示画面900。画面900包括图像区910和搜索结果区920。图像区910显示当前显示的图像，并且搜索结果区920显示搜索结果。
搜索结果区920显示基于搜索词搜索到的内容930、940、950和960以及内容的缩略图935、945、955和965。内容930、940、950和960可以是内容标识符(例如，文件名称或标题)。也就是说，标号930所指定的“AAA”可以是内容的文件名称。
缩略图935、945、955和965可以是与搜索词关联的视频帧的缩略图。也就是说，缩略图935、945、955和965可通过缩小关联的视频帧来产生，并且可以被产生为包含关联视频帧中包括的特定对象。
在单个内容中存在与搜索词关联的多个视频帧的情况下，控制器290可在多个视频帧之中选择代表性的视频帧，并且可控制在搜索结果区920中显示所选择的代表性视频帧的缩略图。例如，“AAA”930可包括与图8的输入的搜索词关联的多个视频帧，并且缩略图935可以是视频帧之中首先显示的视频帧的缩略图或者是与搜索词的关联度最大的视频帧的缩略图。
控制器290检验是否选择了内容文件(S360)。在选择了被作为搜索结果显示的内容之中的特定内容的情况下，控制器290可确认选择了内容文件。例如，如果选择了图9的标号940所指定的“BBB”，则控制器290可确认选择了内容文件“BBB”。
控制器290显示所选择的内容文件的缩略图(S370)。可显示所选择内容文件中包括的视频帧之中的与搜索词关联的视频帧的缩略图。
图10是示出其上显示有缩略图的画面的示例性实施方式的示图。
参照图10，在操作S360中选择了图9的“AAA”930的情况下，显示器250可在操作S370中显示画面1000。画面1000包括图像区1010和缩略图区1020。图像区1010显示当前显示的图像，缩略图区1020显示缩略图1030、1040、1050和1060以及显示缩略图时的时间1035、1045、1055和1065。缩略图1030、1040、1050和1060可以是“AAA”930中包括的视频帧之中的与搜索词关联的视频帧的缩略图。例如，缩略图1040是“AAA”930中包括的在过去了“AAA”930的显示时间(例如，20分钟)之后显示的视频帧的缩略图。
控制器290检验是否选择了缩略图(S380)。缩略图可以是在操作S350中显示的搜索结果的缩略图或者在操作S270中显示的缩略图。例如，在图9的缩略图935或图10的缩略图1040被选择时，控制器290可确认选择了缩略图。
如果选择了缩略图，则控制器290控制显示所选择缩略图所指示的视频帧(S390)。例如，如果选择了图9的缩略图935，则控制器290显示与缩略图935关联的视频帧。可从与缩略图935关联的视频帧起显示“AAA”930。另外，如果选择了图10的缩略图1040，则控制器290控制显示与缩略图1040关联的视频帧。也就是说，可从与缩略图1040关联的视频帧起显示“AAA”930。
图11是示出根据本发明的示例性实施方式的用于提供内容的方法的实现过程的流程图。
参照图11，控制器290构建内容信息数据库(S400)。操作S400可包括图3的用于构建内容信息数据库的方法的实现过程。
控制器290控制显示图像(S410)。图像可以是存储单元280中存储的图像，可以是从外部资源112、114、120、130和140接收的图像，或者可以是通过调谐器210接收的图像。
控制器290检测请求检索的用户动作(S420)。
控制器290响应于检测到的用户动作控制显示对象选择标记(S430)。对象选择标记可用于选择在操作S420中显示的图像中包括的对象。对象可包括人、动物和自然对象中的至少一种。
图12是示出其上显示有对象选择标记的画面的示例性实施方式的示图。
参照图12，在操作S430中，显示器250显示画面1200。画面1200可包括用于选择图像中包括的对象的对象选择标记1210、1220、1230和1240。用户可通过将指示物1201置于由相应的对象选择标记占据的区域并且按下遥控器上的特定按钮(例如，“确认”按钮)来选择对象选择标记1210、1220、1230和1240中的一个。另选地，用户可使用指示物1205来选择对象选择标记。
控制器290检验是否选择了对象(S440)。如果在操作S440中选择了所显示的对象选择标记中的一个，则控制器290确认选择了由所选择的对象选择标记所指示的对象。
如果选择了对象，则控制器290在操作S410中显示的图像中包括的视频帧之中搜索包括所选择的对象的视频帧(S450)。控制器290可使用在操作S400中构建的内容信息数据库来搜索视频帧。
控制器290控制显示搜索到的视频帧的缩略图。
图13是示出其上显示有缩略图的画面的另一个示例性实施方式的示图。
参照图13，在操作S460中，显示器250可显示画面1300。画面1300可包括图像区130和缩略图区1320。图像区1310显示在操作S410中显示的图像，缩略图区1320显示在操作S450中搜索到的视频帧的缩略图1330、1340和1350。另外，缩略图区1320显示在显示缩略图时的时间1335、1345和1355。缩略图1330、1340和1350可以是包括在操作S440中选择的对象的缩略图，其中，所述对象包括在视频帧中。
控制器290检验是否选择了缩略图(S470)。缩略图可以是在操作S460中显示的的缩略图。例如，如果选择了在图13的缩略图1330，则控制器290可确认选择了缩略图。
如果选择了缩略图，则控制器290控制显示所选择的缩略图所指示的视频帧(S480)。例如，如果选择了图13的缩略图1330，则控制器290控制显示与缩略图1330关联的视频帧。也就是说，可从与缩略图1330关联的视频帧起显示在图像区1310上显示的图像。
在一些实施方式中，控制器290可从内容信息数据库中包括的内容的视频帧之中搜索包括在操作S450中选择的对象的视频帧。在这种情况下，替代操作S460至S480，可实现操作S350至S390。
图14是示出根据本发明的另一个实施方式的用于提供内容的方法的实现过程的流程图。
参照图14，控制器290构建内容信息数据库(S500)。操作S500可包括图14的用于构建内容信息数据库的方法的实现过程。
控制器290检测请求检索的用户动作(S505)。
响应于检测到的用户动作，控制器290可控制显示用于输入搜索词的GUI(S510)。GUI可以被显示为覆盖广播画面，或者可在整个画面上显示GUI。显示器250可显示画面800。
控制器290检验是否输入了搜索词(S515)。在一些实施方式中，如果按下了图8中示出的“确认”按钮825，则控制器290确认输入了搜索词输入窗口821上显示的搜索词。
如果输入了搜索词，则控制器290基于输入的搜索词在构建的内容信息数据库中搜索内容(S520)。控制器290通过将内容信息数据库中包括的图像信息与输入的搜索词进行比较来搜索包括与搜索词关联的视频帧的内容。也就是说，控制器290搜索具有与输入的搜索词相同或类似的图像信息的视频帧。
例如，如果输入的搜索词是“IRIS中穿着黑色外套的LEE BYEONGHEON带着悲伤表情射击的场景”，则控制器290可在内容信息数据库中搜索包括瞄准仪、黑色外套、悲伤、LEEBYEONGHEON、射击和IRIS的图像信息，并且可检测包含搜索到的图像信息的图5的视频帧500。另外，如果输入的搜索词是“秘密花园中穿着黑色训练服的HYUN BIN正在体育馆与心爱的HA GEEWON一起进行仰卧起坐的场景”，则控制器290可搜索包括黑/白条纹、爱慕、HAGEE WON、HYUB BIN、体育馆和秘密花园的图像信息，并且可检测包括搜索到的图像信息的图6的视频帧600。
控制器290显示搜索结果(S525)。搜索结果可以被显示为覆盖广播画面，或者可在整个画面上显示搜索结果。显示器250可显示画面900。
控制器290检验是否选择了内容文件(S530)。如果选择了被作为搜索结果显示的内容之中的特定内容，则控制器290可确认选择了内容文件。例如，如果选择了图9的“BBB”940，则控制器290可确认选择了“BBB”940的内容文件。
如果选择了内容文件，则控制器290显示所选择的内容文件的缩略图(S535)。可显示所选择内容文件中包括的视频帧之中的与搜索词关联的视频帧的缩略图。如果在操作S530中选择了“AAA”930，则显示器250可在操作S535中显示画面1000。
控制器290检测请求配音的用户动作(S540)。在一些实施方式中，操作S540可与操作S505与S535并行地实现。
控制器290响应于检测到的用户动作将显示模式切换成配音模式(S545)。
控制器290检验是否选择了缩略图(S550)。缩略图可以是在操作S525中显示的搜索结果的缩略图或者可以是在操作S535中显示的缩略图。例如，如果图9的缩略图935或图10的缩略图1040被选择，则控制器290可确认选择了缩略图。
如果选择了缩略图，则控制器290控制显示所选择的缩略图所指示的视频帧(S555)。例如，如果选择了图9的缩略图935，则控制器290控制显示与缩略图935关联的视频帧。也就是说，可从与缩略图935关联的视频帧起显示“AAA”930。如果选择了图10的缩略图1040，则控制器290控制显示与缩略图1040关联的视频帧。也就是说，可从与缩略图1040关联的视频帧起显示“AAA”930。
语音感测单元233感测用户语音并且将感测到的语音提供给控制器290(S560)。
控制器290复用语音感测单元230感测到的语音和所显示的图像(S565)。在一些实施方式中，控制器290可压缩并且复用语音和所显示的图像。
控制器290存储经复用的语音和图像(S570)。经复用的语音和图像可被存储在存储单元280中并且可被存储在外部资源112、114、120、130和140中。
图15是示出根据本发明的又一个实施方式的用于提供内容的方法的实现过程的流程图。
参照图15，控制器290构建内容信息数据库(S600)。操作S600可包括图3用于构建的内容信息数据库的方法的实现过程。
控制器290控制显示内容(S610)。内容可被存储在存储单元280中，可从外部资源112、114、120、130和140接收，或者可由调谐器210接收。
控制器290检测请求检索的用户动作(S620)。
控制器2900响应于检测到的用户动作控制显示对象选择标记(S630)。对象选择标记可用于选择在操作S610中显示的内容的图像中包括的对象。对象可包括人、动物和自然对象中的至少一种。在操作S630中，显示器250可显示画面1200。
控制器290检验是否选择了对象(S640)。如果选择了在操作S640中显示的对象选择标记中的一个，则控制器290确认选择了由所选择的对象选择标记所指示的对象。
如果选择了对象，则控制器290控制显示用于选择所选择的对象的声调的GUI的(S650)。
图16是示出其上显示有用于选择对象的声调的GUI的画面的示例性实施方式的示图。
参照图16，在操作S650中，显示器250可显示GUI1600。GUI1600可以被显示为覆盖广播画面，或者可在整个画面或部分画面上显示。
GUI1600可包括用于选择用户的声调的单选按钮1610、用于选择著名表演者的声调的单选按钮1620、“确认”按钮1530和“取消”按钮1640。
图17是示出其上显示有用于选择表演者的GUI的画面的示例性实施方式的示图。
参照图17，如果选择了图16的单选按钮1620，则控制器290可控制显示GUI1700。GUI1700包括输入窗口1710、列表框1720和“确认”按钮1730用户可将具有期望的声调的表演者的名字直接输入到输入窗口1710，并且可从列表框1720中选择具有期望的声调的表演者。用户可通过点击“确认”按钮1730来完成对表演者的选择。
控制器290检测请求改变所选择的对象的声调的用户动作(S660)。在一些实施方式中，如果在选择了图16的单选按钮1610的状态下按下“确认”按钮1630，则控制器290检测请求将所选择的对象的声调改变成用户的声调的用户动作。也就是说，用户动作指示用户的声调。
在一些实施方式，如果按下了图17的“确认”按钮1730，则控制器290检测请求将所选择的对象的声调改变成图17中选择的表演者的声调的用户动作。也就是说，用户动作指示图17中选择的表演者的声调。
控制器290响应于检测到的用户动作控制从对象的声调到用户动作所指示的声调的改变(S670)。也就是说，在操作S670中，将在操作S610中显示的内容中包括的对象的语音改变成在操作S660中检测到的用户动作所指示的声调。
在一些实施方式中，控制器290可将用户动作所指示的声调作为声调值存储在存储单元280中。声调设置值可与标识对象的对象标识值和标识操作S610中显示的内容的内容标识值关联地进行存储。当再次再现在操作S610中显示的内容时，控制器290可根据声调设置值控制与声调设置值关联的对象标识值所指示的对象的声调的改变和显示。
在一些实施方式中，在操作S610中显示的内容的音频数据之中，控制器290可将提供操作S640中选择的对象的语音的音频数据改变成提供用户动作所指示的语音的音频数据。
图18是示出根据本发明的示例性实施方式的控制器的构造的框图。
参照图18，控制器290可包括语音调制器1810、语音编码器1820和语音信息检测器1830。
语音调制器1810基于语音特征信息来对音频解码器248输出的语音信号进行调制。语音特征信息是关于语音分量的信息。语音特征信息可包括指示声压级(SPL)的信息、音频信息、音色信息、频谱平坦度信息和包络信息中的至少一个。另外，语音特征信息可包括用户的语音特征信息和表演者的语音特征信息。用户的语音特征信息是关于用户的语音的分量的信息，并且表演者的语音特征信息是关于表演者的语音的分量的信息。
如果检测到选择GUI1600的单选按钮1610的用户动作，则语音调制器1810可访问存储单元280中的用户的语音特征信息，并且可基于所访问的用户的语音特征信息对语音信号进行调制。例如，语音调制器1810可将语音信号的音频调制成由用户的语音特征信息中包括的音频信息所指示的音频，可将语音信号的音色调制成由用户的语音特征信息中包括的音色信息所指示的音色，并且可将语音信号的声压级调制成由用户的语音特征信息中包括的SPL信息所指示的声压级。
另外，如果检测到请求改变成特定表演者的声调的用户动作，则语音调制器180可访问存储单元280中的关于特定表演者的表演者的语音特征信息，并且可基于所访问的表演者的语音特征信息来对语音信号进行调制。
语音调制器180可将经调制的语音信号提供给语音输出单元260，并且可将经调制的语音信号提供给音频编码器1820。
音频编码器1820可压缩语音调制器180输出的语音信号，并且可将经压缩的语音信号存储在存储单元280中。
语音信息检测器1830接收语音感测单元233检测到的用户语音，并且检测接收到的用户语音的分量。也就是说，语音信息检测器1830可检测用户语音的声压级、音频、音色、频谱平坦度和包络中的至少一个。语音信息检测器1830可产生由检测到的语音分量所指示的用户的语音特征信息，并且可将产生的用户语音特征信息存储在存储单元280中。
图19是示出其上显示有用于设置语音调制水平的GUI的画面的示例性实施方式的示图。
参照图19，显示器250可显示用于设置语音调制水平的GUI1900。控制器290可检测请求设置语音调制水平的用户动作，并且可响应于检测到的用户动作来控制显示GUI1900。
GUI1900包括用于调节SPL的指示物1910、用于调节音频水平的指示物1920、用于调节音色水平的指示物1930、用于调节频谱平坦度水平的指示物1940、用于调节包络水平的指示物1950。GUI1900包括用于显示由指示物1910、1920、1930、1940和1950所指示的各个水平的输入窗口1915、1925、1935、1945和1955，并且还包括“确认”按钮1970和“取消”按钮1980。
当初始地显示GUI1900时，指示物1910、1920、1930、1940和1950可位于与由语音特征信息中包括的SPL、音程、音色、频谱平坦度和包络信息所指示的水平对应的位置。语音特征信息可以是用户的语音特征信息或表演者的语音特征信息。如果在操作S660中选择了选择图16的单选按钮1610的用户动作，则语音特征信息可以是用户的语音特征信息。如果检测到经由图17的GUI1700选择特定表演者的用户动作，则语音特征信息可以是所选择的表演者的语音特征信息。
用户可通过拖拽指示物1910、1920、1930、1940和1950中的一个来执行指示调节对应语音分量水平的用户动作。控制器290可检测到该用户动作，并且基于因用户动作而移动的指示物所指示的水平来改变相应的语音分量水平。指示物1910、1920、1930、1940和1950移动达拖拽的长度。例如，如果用户将指示物1910拖拽到对应于水平35的位置，则指示物1910移动到对应于水平35的位置。控制器290基于移动后的指示物1910所指示的水平35来改变SPL水平。
可在显示内容期间显示GUI1900。在这种情况下，如果用户拖拽指示物1910、1920、1930、1940和1950中的一个，则控制器290可基于被拖拽的指示物所指示的水平来改变与被拖拽的指示物关联的语音分量水平，并且内容的语音可被调制成改变后的语音分量水平。例如，如果用户将指示物1920拖拽到对应于水平65的位置，则控制器290基于水平65改变音频水平，并且正再现的内容的音频可被调制成改变后的音频水平。
如果用户执行按下“确认”按钮1970的用户动作，则语音特征信息中包括的SPL信息、音频信息、音色信息、频谱平坦度信息和包络信息的水平基于输入窗口1915、1925、1935、1945和1955上显示的各个水平而变化，并且GUI1900从画面中消失。如果用户执行按下“取消”按钮1980的用户动作，则GUI1900从画面中消失，而语音特征信息没有变化。
如从以上描述中清楚的，通过提供根据本发明的显示装置和使用显示装置提供内容的方法，用户可搜索内容中包含的视频帧和音频。更具体地，用户可在不直接观看视频帧的情况下搜索与特定人物到来的场景对应的视频帧，并且还可搜索另一个装置中存储的内容的视频帧和音频。此外，可基于各装置，在除了执行检索之外的时间搜索期望的视频帧和音频。由于搜索到的结果可以以缩略图的形式提供并且与所选择的缩略图关联的视频帧和音频可被直接显示，因此用户可容易地选择和编辑搜索到的视频帧和音频。
工业可应用性
本发明可被实现为可在计算机可读记录介质上编写并且因此可被计算机读取的代码。计算机可读记录介质包括数据以计算机可读方式存储在其中的所有类型的记录装置。计算机可读记录介质的示例包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储器、载波(例如，通过互联网的数据传输)。计算机可读记录介质可分布于通过网络连接的多个计算机装置，使得计算机可读代码被编写到其中并且由其以分布式方式执行。
本领域的技术人员应该清楚，在不脱离本发明的精神或范围的情况下，可在本发明中进行各种修改和变形。因此，本发明旨在覆盖落入所附权利要求书及其等同物的范围内的本发明的修改和变形。

Claims (11)

1.一种用于提供内容的显示装置，所述显示装置包括：
存储单元，所述存储单元用于构建内容信息数据库；
输入单元，所述输入单元用于接收用户输入；
控制器，所述控制器用于在所述内容信息数据库中搜索包括与接收到的用户输入中包括的搜索词关联的视频帧的至少一个内容；以及
显示器，所述显示器用于显示搜索到的内容的列表，
其中，构建所述内容信息数据库包括：
访问内容；
从所访问的内容中提取视频帧；
检验所提取的视频帧是否满足关键帧的要求；
如果所述视频帧满足所述关键帧的要求，则选择所述视频帧作为所述关键帧；以及
产生与所选择的视频帧关联的图像信息，
其特征在于，所述关键帧的要求包括所提取的视频帧是否对应于所访问的内容中的场景变化。
2.根据权利要求1所述的显示装置，所述控制器还对搜索到的内容的列表中包括的内容进行编辑。
3.根据权利要求1所述的显示装置，其中，所述控制器还执行以下步骤中的至少一个：
用另一个视频帧代替所述内容的视频帧；
对所述内容进行配音；
改变所述内容中包括的音频数据的至少一部分的语音水平；以及
用先前存储的音频数据代替所述内容中包括的音频数据的至少一部分。
4.根据权利要求1所述的显示装置，其中所述内容被存储在全球资源和本地资源中的至少一种中。
5.根据权利要求1所述的显示装置，其中所显示的列表包括针对所述视频帧的缩略图。
6.根据权利要求5所述的显示装置，其中，所述控制器还执行以下步骤：
检测选择所述缩略图的用户动作；以及
显示与所选择的所述缩略图关联的视频帧。
7.根据权利要求1所述的显示装置，其中，所述控制器还执行以下步骤：
检测选择所述列表中包括的内容的用户动作；以及
显示所述内容中包括的视频帧之中的与所述搜索词关联的视频帧的缩略图。
8.根据权利要求1所述的显示装置，其中，所述控制器执行以下步骤：使用内容信息数据库搜索与所述搜索词关联的视频帧，所述内容信息数据库包括针对所述内容中包括的视频帧的图像信息。
9.根据权利要求1所述的显示装置，其中，所述控制器执行以下步骤：使用所述内容的视觉描述符中包括的信息来产生图像信息。
10.根据权利要求8所述的显示装置，其中所述内容信息数据库还包括所述视频帧的位置信息和用于将所述视频帧的所述位置信息与所述图像信息关联的信息。
11.根据权利要求8所述的显示装置，其中所述图像信息包括关于所述视频帧的特征信息、关于所述视频帧的主观信息和关于所述视频帧的说明信息中的至少一个。
CN201280056441.2A 2011-11-18 2012-03-07 显示装置和使用显示装置提供内容的方法 Active CN103947220B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020110121114A KR101835327B1 (ko) 2011-11-18 2011-11-18 디스플레이기기 및 디스플레이기기의 컨텐츠 제공 방법
KR10-2011-0121114 2011-11-18
PCT/KR2012/001640 WO2013073748A1 (en) 2011-11-18 2012-03-07 Display device and method for providing content using the same

Publications (2)

Publication Number Publication Date
CN103947220A CN103947220A (zh) 2014-07-23
CN103947220B true CN103947220B (zh) 2017-08-25

Family

ID=48428257

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280056441.2A Active CN103947220B (zh) 2011-11-18 2012-03-07 显示装置和使用显示装置提供内容的方法

Country Status (5)

Country Link
US (1) US8850487B2 (zh)
EP (1) EP2781104B1 (zh)
KR (1) KR101835327B1 (zh)
CN (1) CN103947220B (zh)
WO (1) WO2013073748A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7596755B2 (en) * 1997-12-22 2009-09-29 Ricoh Company, Ltd. Multimedia visualization and integration environment
EP3101526A1 (en) * 2011-12-31 2016-12-07 Nokia Technologies Oy Causing elements to be displayed
JP5997592B2 (ja) 2012-04-27 2016-09-28 株式会社Ｎｔｔドコモ 音声復号装置
US20150286719A1 (en) * 2014-04-03 2015-10-08 Sony Corporation Recognizing and registering faces in video
US9696414B2 (en) 2014-05-15 2017-07-04 Sony Corporation Proximity detection of candidate companion display device in same room as primary display using sonic signaling
US10070291B2 (en) 2014-05-19 2018-09-04 Sony Corporation Proximity detection of candidate companion display device in same room as primary display using low energy bluetooth
US9836469B2 (en) * 2014-06-06 2017-12-05 Dropbox, Inc. Techniques for processing digital assets for editing in a digital asset editing computer program
US20160378863A1 (en) * 2015-06-24 2016-12-29 Google Inc. Selecting representative video frames for videos
CN105933788A (zh) * 2016-04-15 2016-09-07 成都趣梦网络科技有限公司 一种html5游戏控制方法、装置及终端
KR101924634B1 (ko) * 2017-06-07 2018-12-04 네이버 주식회사 콘텐츠 제공 서버, 콘텐츠 제공 단말 및 콘텐츠 제공 방법
KR102650138B1 (ko) * 2018-12-14 2024-03-22 삼성전자주식회사 디스플레이장치, 그 제어방법 및 기록매체
KR20210073280A (ko) * 2019-12-10 2021-06-18 삼성전자주식회사 전자장치 및 그 제어방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1229990A (zh) * 1998-03-25 1999-09-29 索尼公司 图象搜索装置及其方法
US6005565A (en) * 1997-03-25 1999-12-21 Sony Corporation Integrated search of electronic program guide, internet and other information resources
US8028314B1 (en) * 2000-05-26 2011-09-27 Sharp Laboratories Of America, Inc. Audiovisual information management system

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR950002458A (ko) * 1993-06-02 1995-01-04 이헌조 영상신호의 압축/신장 장치
US7165098B1 (en) * 1998-11-10 2007-01-16 United Video Properties, Inc. On-line schedule system with personalization features
JP2002007415A (ja) 2000-06-19 2002-01-11 Toru Sugimoto キーワードによる映像検索方法
US7512881B2 (en) * 2002-11-14 2009-03-31 International Business Machines Corporation Tool-tip for multimedia files
KR100654445B1 (ko) * 2004-12-17 2006-12-06 삼성전자주식회사 멀티미디어 컨텐츠에 대한 썸네일 리스트를 제공하는 장치및 그 방법
US20100153885A1 (en) * 2005-12-29 2010-06-17 Rovi Technologies Corporation Systems and methods for interacting with advanced displays provided by an interactive media guidance application
US20080046925A1 (en) 2006-08-17 2008-02-21 Microsoft Corporation Temporal and spatial in-video marking, indexing, and searching
US20080104058A1 (en) * 2006-11-01 2008-05-01 United Video Properties, Inc. Presenting media guidance search results based on relevancy
JP5061774B2 (ja) * 2007-08-02 2012-10-31 ソニー株式会社 動画像信号生成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6005565A (en) * 1997-03-25 1999-12-21 Sony Corporation Integrated search of electronic program guide, internet and other information resources
CN1229990A (zh) * 1998-03-25 1999-09-29 索尼公司 图象搜索装置及其方法
US8028314B1 (en) * 2000-05-26 2011-09-27 Sharp Laboratories Of America, Inc. Audiovisual information management system

Also Published As

Publication number Publication date
EP2781104A4 (en) 2015-06-17
WO2013073748A1 (en) 2013-05-23
CN103947220A (zh) 2014-07-23
KR20130055393A (ko) 2013-05-28
EP2781104A1 (en) 2014-09-24
EP2781104B1 (en) 2018-07-04
US20130133013A1 (en) 2013-05-23
US8850487B2 (en) 2014-09-30
KR101835327B1 (ko) 2018-04-19

Similar Documents

Publication Publication Date Title
CN103947220B (zh) 显示装置和使用显示装置提供内容的方法
CN105578267B (zh) 终端装置及其信息提供方法
CN107995523B (zh) 视频播放方法、装置、终端及存储介质
KR101419937B1 (ko) 기호 추출 장치, 기호 추출 방법 및 기호 추출 프로그램이 기록된 컴퓨터 판독가능한 기록 매체
CN102761786B (zh) 数字接收器和用于控制该数字接收器的方法
US8977983B2 (en) Text entry method and display apparatus using the same
CN109729420A (zh) 图片处理方法及装置、移动终端及计算机可读存储介质
JP5001362B2 (ja) カスタマイズされたマルチメディア・セグメントを作成しかつ視聴するための方法と装置
CN113596536B (zh) 显示设备及信息显示方法
CN102193794B (zh) 链接实时媒体情境到相关的应用程序和服务
CN105210376B (zh) 使用音频流识别与当前播放的电视节目相关联的元数据
WO2015167884A2 (en) Method and apparatus for augmenting media content
US10088901B2 (en) Display device and operating method thereof
CA2938477A1 (en) Methods and apparatus to synchronize second screen content with audio/video programming using closed captioning data
CN106204296A (zh) 计算系统和方法
CN103747292A (zh) 与电视节目关联的应用程序推荐方法及推荐装置
US20080095515A1 (en) Contents Character Information Acquisition Method, Contents Character Information Acquisition Program, Contents Character Information Acquisition Apparatus, and Video Content Recording Apparatus
US20150026744A1 (en) Display system, display apparatus, display method, and program
CN106713973A (zh) 搜索节目的方法及装置
KR20090020930A (ko) 개인 맞춤형 녹화 컨텐츠 처리 방법 및 장치
CN106060641A (zh) 用于搜索的显示装置及其控制方法
CN105657510B (zh) 图像显示装置及其信息提供方法
JP2013098997A (ja) 映像解析情報送信装置、映像解析情報配信システム及び配信方法、映像視聴システム及び映像視聴方法
CN110234026A (zh) 使用光学字符识别对机顶盒进行双向控制
JP2013098640A (ja) 映像解析情報アップロード装置及び映像視聴システム及び方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant