CN102413359B - 提供媒体内容相关信息的方法及执行该方法的设备和服务器 - Google Patents

提供媒体内容相关信息的方法及执行该方法的设备和服务器 Download PDF

Info

Publication number
CN102413359B
CN102413359B CN201110277365.5A CN201110277365A CN102413359B CN 102413359 B CN102413359 B CN 102413359B CN 201110277365 A CN201110277365 A CN 201110277365A CN 102413359 B CN102413359 B CN 102413359B
Authority
CN
China
Prior art keywords
media content
information
identification information
server
content related
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110277365.5A
Other languages
English (en)
Other versions
CN102413359A (zh
Inventor
崔闰熙
朴喜仙
崔溢焕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201911136128.XA priority Critical patent/CN110839163B/zh
Publication of CN102413359A publication Critical patent/CN102413359A/zh
Application granted granted Critical
Publication of CN102413359B publication Critical patent/CN102413359B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/237—Communication with additional data server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Abstract

提供了一种使用能够经由网络访问服务器的设备提供媒体内容相关信息的方法，该方法包括：生成正由所述设备再现的媒体内容的识别信息；将该识别信息从所述设备发送到服务器；响应于该识别信息，从服务器接收关键信息和媒体内容相关信息中的至少一个；以及基于从服务器接收到的关键信息和媒体内容相关信息中的至少一个，向所述设备的用户提供关于所述媒体内容的媒体内容相关信息。

Description

提供媒体内容相关信息的方法及执行该方法的设备和服务器
优先权
本申请要求于2010年9月17日向韩国知识产权局提交的韩国专利申请第10-2010-0091960号的优先权，其全部公开内容通过引用合并于此。
技术领域
本发明涉及提供媒体内容相关信息的方法、以及用于执行所述方法的设备、服务器和计算机可读存储介质。
背景技术
媒体内容可以基于诸如地面广播、卫星广播、有线广播、互联网广播、数字多媒体广播、蓝牙存储介质(如蓝光(Blu-ray)和数字视频盘(DVD))等等的媒介来提供。媒体内容可以表示为音频和/或视频(或图像)和/或文本格式，并且可以是广播内容或多媒体内容。
可以与媒体内容一起提供各种相关信息。例如，可以提供媒体内容提供方信息、媒体内容指南信息、位置信息、生产信息、演员信息、艺术家信息、横幅广告信息、登广告者信息、媒体内容购买信息以及事件信息，作为媒体内容相关信息。
能够再现媒体内容的设备的例子包括具有媒体播放器功能的设备和电视机(TV)。能够再现媒体内容的传统设备通常具有媒体内容播放功能，但不具备提供上述媒体内容相关信息的功能。
因此，用户通过利用互联网访问设备，基于用户已经知晓的媒体内容信息搜索互联网，来获得上述媒体内容相关信息。例如，用户可以使用互联网搜索引擎，基于用户知晓的信息搜索媒体内容相关信息，或者可以访问提供媒体内容的网站来搜索媒体内容相关信息。
这样，用户可能无法容易地获得与当前再现的媒体内容同步的相关信息，并且可获得的媒体内容相关信息是有限的，因为互联网搜索仅仅是基于用户知晓的信息执行的。例如，当使用上述互联网搜索引擎时，为了获得准确的媒体内容相关信息，要对找到的信息进行单独地分析，而当访问提供相应媒体内容的网站时，用户仅仅可以获得由该网站提供的媒体内容相关信息。
发明内容
本发明的一方面提供了实时提供与媒体内容同步的媒体内容相关信息的方法。
本发明的另一方面提供了用于执行所述方法的设备、服务器和计算机可读存储介质。
根据本发明的一方面，提供一种使用能够经由网络访问服务器的设备来提供媒体内容相关信息的方法，该方法包括：生成当前正由所述设备再现的媒体内容的识别信息；将所生成的识别信息从所述设备发送到服务器；从服务器接收关键信息(key information)和媒体内容相关信息中的至少一个；以及基于从服务器接收的信息向用户提供与关于媒体内容的媒体内容相关信息。
根据本发明的另一方面，提供一种使用被至少一个设备经由网络访问的服务器提供媒体内容相关信息的方法，所述方法包括：在服务器中基于接收到的媒体内容的隐藏字幕(closed caption)信息检测关键信息；在服务器中生成基于其接收到的媒体内容中检测到关键信息的媒体内容的识别信息；同步该识别信息和该关键信息，并在服务器中存储同步的信息；当从至少一个设备接收到媒体内容的识别信息时，从在服务器中存储的识别信息中搜索与接收到的识别信息匹配的识别信息；以及当找到匹配的识别信息时，将与找到的识别信息同步的关键信息从服务器发送到所述设备。
根据本发明的另一方面，提供一种设备，包括：媒体内容接收单元，其接收媒体内容；再现单元，其再现接收到的媒体内容；网络接口单元，其与网络接口；以及处理器，其生成当前正使用再现单元再现的媒体内容的识别信息，并将所生成的识别信息经由网络接口单元发送到服务器，以及，当从服务器接收到关键信息和媒体内容相关信息中的至少一个时，基于接收到的信息、使用再现单元将关于媒体内容的媒体内容相关信息提供给用户。
根据本发明的另一方面，提供一种服务器，包括：关键信息检测单元，其基于接收到的媒体内容的隐藏字幕信息检测关键信息；识别信息检测单元，其检测基于其检测到关键信息的媒体内容的识别信息；网络接口单元，其与网络接口；处理器，其同步检测到的关键信息和检测到的识别信息，并存储同步的信息，并且当经由网络接口单元从至少一个设备接收到媒体内容的识别信息时，在存储的识别信息中搜索与接收到的识别信息匹配的识别信息，并且经由网络接口单元将与找到的识别信息同步的关键信息发送到所述设备；以及存储单元，其存储关键信息和识别信息。
根据本发明的另一方面，提供一种其上包含有计算机程序的非瞬时性计算机可读记录介质，该计算机程序用于执行用于提供媒体内容相关信息的方法，其中，所述用于提供媒体内容相关信息的方法可以以与上面描述的用于提供媒体内容相关信息的方法相同的方式来执行。
附图说明
通过参照附图详细描述本发明的示例性实施例，本发明的上述及其他方面、特征和优点将变得更加清楚，附图中：
图1是示出根据本发明实施例的设备的功能框图；
图2是示出根据本发明实施例的使用设备提供媒体内容相关信息的方法的流程图；
图3示出了可应用根据本发明实施例的设备和服务器的网络系统；
图4是示出根据本发明实施例的使用设备向用户提供媒体内容相关信息的过程的步骤的详细流程图；
图5是示出根据本发明实施例的服务器的功能框图；
图6是示出根据本发明实施例的经由服务器提供媒体内容相关信息的方法的流程图；
图7是示出根据本发明实施例的在设备和服务器之间的步骤的流程图；
图8是示出根据本发明实施例的经由服务器提供媒体内容相关信息的方法的流程图；以及
图9是示出在图2和图8中示出的设备和服务器之间的步骤的流程图。
具体实施方式
现在将参照附图更充分地描述本发明，附图中示出了本发明的示例性实施例。
图1是示出根据本发明实施例的设备100的功能框图。设备100包括连接到有线/无线网络的功能和再现媒体内容的功能。
设备100可以是具有多播放器功能的计算机、具有媒体播放器功能的移动设备和能够连接到有线/无线网络的电视机(TV)。移动设备的例子有移动电话、智能电话、个人数字助理(PDA)、便携式多媒体播放器(PMP)和导航设备。移动设备可以被称为便携式设备。TV可以包括在移动设备中，并且可以是诸如网际协议电视机(IPTV)或数字多媒体广播设备的设备。设备100可以是用户设备。设备100可以是不具备隐藏字幕功能的TV。
参照图1，设备100包括输入单元110、媒体内容接收单元120、再现单元130、存储单元140、网络接口单元150和处理器160。设备100可以包括比图1所示的更多或更少的元件。例如，输入单元110和再现单元130可以组合成用户接口单元或图形用户接口。再现单元130可以包括再现信号处理单元和输出单元。如果再现单元130被定义为再现信号处理单元和输出单元，则上述用户接口单元或图形用户接口可以包括输入单元110和输出单元。输出单元可以是显示单元。存储单元140或网络接口单元150可以包括在处理器160中。处理器160可以基于识别信息生成单元161和媒体内容相关信息提供单元162来实现。
用户可以经由输入单元110输入信息或命令。根据本发明实施例可以由用户输入的信息或命令的例子可以包括有关将要再现的媒体内容的选择信号。输入单元110可以是基于触摸的。也就是说，输入单元110可以使用根据手指或输入笔的接触位置生成输入信号(或输入数据)的触摸板或触屏、基于触摸界面来实现。
媒体内容接收单元120接收媒体内容。媒体内容可以基于诸如地面广播、卫星广播、有线广播、互联网广播、数字多媒体广播、蓝牙存储介质(如蓝光(Blu-ray)和数字视频盘(DVD))等等的媒介来接收。媒体内容的例子可以包括实时广播内容，包括现场直播(live broadcasting)。媒体内容接收单元120可以被配置为根据设置的媒体类型接收媒体内容。
例如，在诸如地面广播、卫星广播、有线广播、互联网广播和数字多媒体广播的广播接收模式中，媒体内容接收单元120可以接收由广播提供方提供的媒体内容。广播提供方可以是广播站、广播公司、广播运营商或广播载波。所接收的媒体内容可以是实时广播内容。在基于诸如蓝牙的无线通信的接收模式中，媒体内容接收单元120基于诸如蓝牙的无线通信来接收由外部设备提供的媒体内容。在基于存储介质的接收模式中，媒体内容接收单元120从以有线或无线方式连接的存储介质接收媒体内容。
为了基于各种媒介接收媒体内容，媒体内容接收单元120可以被配置为包括根据媒体类型的模块。在基于网络接收媒体内容的情况下，可以经由网络接口单元150接收媒体内容。例如，可以经由网络接口单元150接收经由互联网广播、数字多媒体广播提供的媒体内容或由特定网站提供的媒体内容。媒体内容接收单元120可以不包括检测隐藏字幕信息的功能。
再现单元130再现从媒体内容接收单元120接收的媒体内容。当媒体内容是视频内容时，再现可以通过显示来执行。当媒体内容是视频和音频内容时，再现可以是显示和音频输出。当媒体内容是文本时，再现可以是显示。再现单元130可以包括相对于所接收的媒体内容的再现信号处理。
当再现单元130和输入单元110被形成为用户接口单元时，再现单元130可以是输出单元。再现单元130可以由处理器160进行控制，并输出媒体内容相关信息。媒体内容相关信息可以是与媒体内容相关的信息。再现单元130可以被配置为包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器、3D显示器、有源矩阵有机发光二极管(Active-Matrix Organic Light-Emitting Diode，AM OLED)等等。
存储单元140可以存储应用程序、用于执行根据本发明实施例的提供媒体内容相关信息的方法的数据、接收到的媒体内容、媒体内容相关信息和关键信息。
网络接口单元150可以由处理器160控制以访问有线或无线网络，并接收来自网站或互联网广播提供方的媒体内容。互联网广播提供方可以是互联网广播载波或互联网广播站。网络接口单元150可以访问服务器，并且接收媒体内容相关信息和关键信息中的至少一个，或将处理器160生成的媒体内容的识别信息发送到服务器。因此，网络接口单元150可以包括诸如广播接收功能、移动通信功能、近距离通信功能和互联网访问功能的通信功能。网络接口单元150可以是通信单元。网络接口单元150的功能不局限于上述功能。
处理器160可以通过加载存储在存储单元140中的用于执行提供媒体内容相关信息的方法的程序来工作。程序可以在制造设备100时存储在存储单元140中，但是也可以经由网络接口单元150从服务器(未示出)下载并存储在存储单元140中。服务器(未示出)可以是应用商店服务器(App Storeserver)(未示出)，但是不局限于此。并且，用于提供媒体内容相关信息的方法可以是生成媒体内容相关信息的方法。
处理器160控制设备100的所有功能，并且可以是控制器或微处理器，但不局限于此。处理器160可以包括作为硬件的识别信息生成单元161和媒体内容相关信息提供单元162。加载到处理器160中的程序可以执行与识别信息生成单元161和媒体内容相关信息提供单元162的功能对应的功能。
识别信息生成单元161可以生成当前正由再现单元130再现的媒体内容的识别信息。在当前再现的媒体内容是视频内容时，当前再现的媒体内容可以是当前正显示的视频帧。识别信息可以是当前正在显示的视频帧的数字指纹。视频帧的数字指纹可以通过数字信号处理来生成。例如，可以使用诸如尺度不变特征变换(Scale Invariant FeatureTransform，SIFT)、加速鲁棒特征(Speeded Up Robust Feature，SURF)和最稳定极值区域(Maximally StableExtremal Regions，MSER)的兴趣点提取算法来生成视频帧的数字指纹。
在生成识别信息时，识别信息生成单元161可以考虑镜头(shot)的改变来生成识别信息。镜头是指描绘相同场景的帧或通过单个摄影操作来分割的帧。因此，识别信息生成单元161可以通过测量再现单元130所再现的视频帧之间的差，或者通过使用小波变换技术来检测镜头改变，并且可以生成在检测到镜头改变的点的视频帧的数字指纹以作为识别信息。镜头改变可以是镜头检测(shot detection)，并且在检测到镜头改变的点的视频帧可以是镜头的第一帧或代表帧。
如果镜头在预定时段内没有改变，则识别信息生成单元161可以在预定时段已经经过之后生成当前在显现单元130上再现的媒体内容(视频帧)的识别信息。所述时段可以被设置为例如10秒，但不局限于此。
媒体内容相关信息提供单元162可以基于经由网络接口单元150接收的关键信息，将经由网络接口单元150找到的媒体内容相关信息或经由网络接口单元150接收的媒体内容相关信息输出到再现单元130，以向用户提供所述信息。
处理器160可以如图2所示的那样工作。图2是示出根据本发明实施例的使用设备100提供媒体内容相关信息的方法的流程图。如图3所示，设备100可以经由网络310访问服务器320并向用户提供媒体内容相关信息。图3示出了根据本发明实施例的、可以应用设备100和服务器320的网络系统310。网络310是有线/无线网络。服务器320向根据本发明实施例的设备100提供媒体内容相关信息或关键信息。媒体内容相关信息生成系统330将通过访问设备100或服务器320而生成的媒体内容相关信息发送到设备100或服务器320。
参照图2，在步骤S201，如在上面描述的图1的识别信息生成单元161中所描述的那样，处理器160生成当前正使用再现单元130再现的媒体内容的识别信息。因此，识别信息可以是在关于检测到如针对上述识别信息生成单元161所描述的镜头改变的点处的、在再现单元130上再现的视频帧的数字指纹。
在步骤S202，处理器160将生成的识别信息经由网络接口单元150发送到服务器320。因此，在步骤S203和S204，当从服务器320接收到关键信息和媒体内容相关信息中的至少一个时，处理器160基于接收到的信息将媒体内容相关信息提供给用户。关键信息基于分析与媒体内容(或视频帧)同步的隐藏字幕信息的结果，所述媒体内容(或视频帧)是在步骤S201生成其识别信息的媒体内容(或视频帧)。关键信息可以包括在使用可获得的互联网搜索引擎搜索数据时可以使用的关键字或关键短语。
图2的步骤S204可以如图4所示的那样来实现。图4是示出根据本发明实施例的、使用设备100向用户提供媒体内容相关信息的过程的流程图。
在步骤S401和S402，当经由网络接口单元150从服务器320仅仅接收到关键信息时，处理器160基于接收到的关键信息，从经由网络接口单元150连接的网络搜索媒体内容相关信息。媒体内容相关信息可以是从图3中示出的媒体内容相关信息生成系统330提供的。媒体内容相关信息生成系统330被配置为数据库服务器，并且可以基于媒体内容提供方或信息提供方所输入的信息，生成、存储和管理媒体内容相关信息，但其不局限于此。在步骤S403，处理器160可以经由再现单元130将找到的或搜索到的媒体内容相关信息提供给用户。
在步骤S404和S405，当经由网络接口单元150从服务器320仅仅接收到媒体内容相关信息时，处理器160经由再现单元130向用户提供接收到的媒体内容相关信息。
在步骤S406和S407，当经由网络接口单元150从服务器320接收到关键信息和媒体内容相关信息两者时，处理器160可以经由再现单元130向用户提供媒体内容相关信息，并且可以经由再现单元130向用户选择性地提供关键信息。可以根据用户经由输入单元110输入的请求选择性地向用户提供关键信息。例如，经由再现单元130输出有关是否将接收到的关键信息与接收到的媒体内容相关信息一起输出(或提供)的询问，并且如果经由输入单元110也请求了输出接收到的关键信息，则可以经由再现单元130将关键信息与媒体内容相关信息一起输出。
图5是示出根据本发明实施例的服务器320的功能框图。参照图5，服务器320可以包括媒体内容接收单元510、处理器520、存储单元530和网络接口单元540。处理器520可以被配置为包括作为硬件的关键信息检测单元521和识别信息生成单元522。服务器320可以包括比图5所示的更多或更少的元件。例如，存储单元530可以包括在被配置为数据库服务器的服务器320的外部。
媒体内容接收单元510被配置为接收与图1的媒体内容接收单元120相同的媒体内容。因此，可接收的媒体内容可以包括实时广播内容，包括现场直播。
包括在处理器520中的关键信息检测单元521从接收自媒体内容接收单元510的媒体内容中检测隐藏字幕信息。隐藏字幕信息是指字幕(subtitle)信息，并且可以包括特殊的附加信息。根据本发明实施例，附加信息可以包括关键信息，利用所述关键信息可以搜索媒体内容相关信息。
关键信息检测单元521可以包括作为硬件的解码器过滤器(decoderfilter)，以检测隐藏字幕信息。关键信息检测单元521可以从检测到的字幕信息中检测与关键词相对应的名词和/或与关键短语相对应的名词短语、动词短语、形容词短语、管形词(pre-noun)短语和副词短语。可以通过与词典中定义的名词或短语相比较来检测关键词或关键短语。为此，关键信息检测单元521可以包括词典功能。
当检测到关键信息时，识别信息生成单元522生成基于其检测到关键信息的媒体内容(或视频帧)的识别信息。识别信息的产生可以涉及如关于图1的识别信息生成单元161所描述的生成视频帧的数字指纹。
处理器520同步使用关键信息检测单元521检测到的关键信息和使用识别信息生成单元522生成的识别信息，并将同步的信息存储在存储单元530中。并且，处理器520可以基于检测到的关键信息经由网络接口单元540搜索媒体内容相关信息，并将搜索结果与关键信息同步，并将同步的信息存储在存储单元530中。可以从图3的媒体内容相关信息生成系统330中搜索媒体内容相关信息，但本发明不局限于此。
存储单元530可以同步关键信息和识别信息并对其进行存储，或者可以同步关键信息、识别信息和媒体内容相关信息并对其进行存储。并且，处理器520可以存储用于执行根据本发明当前实施例的提供媒体内容相关信息的方法的程序和数据。
处理器520控制服务器320的所有功能，并且可以被定义为控制器或微处理器，但不局限于此。处理器520可以如图6所示的那样工作。图6是示出根据本发明实施例的经由服务器320提供媒体内容相关信息的方法的流程图。如在图3中示出的网络系统300中所示，服务器320可以由设备100经由网络310来访问，以向用户提供媒体内容相关信息。因此，图3是根据本发明实施例的可以应用设备100和服务器320的网络系统的示例性示图。
参照图6，在步骤S601，处理器520从经由媒体内容接收单元510接收的媒体内容中检测隐藏字幕信息。在步骤S602，处理器520分析隐藏字幕信息以检测关键信息。可以以关于关键信息检测单元521所描述的方式来检测关键信息。在步骤S603，处理器520检测基于其检测到关键信息的媒体内容的识别信息。
在步骤S604，处理器520同步检测到的识别信息和检测到的关键信息，并将同步的信息存储在存储单元530中。当在步骤S605从经由网络连接的至少一个设备100接收到媒体内容的识别信息时，在步骤S606，处理器520从存储在存储单元530中的识别信息中搜索与接收到的识别信息匹配的识别信息。在步骤S607和S608，当找到匹配的识别信息时，处理器520将与找到的识别信息同步的关键信息发送到设备100。当在步骤S605没有从设备100接收到媒体内容的识别信息时，处理器520返回到步骤S601并重复上述过程。
同时，在步骤S607和S609，当没有从存储单元530找到与接收到的识别信息匹配的识别信息时，处理器520可以经由网络接口单元540向设备100发送指南消息。该指南消息可以是例如“不存在媒体内容相关信息。”
当包括在服务器320中的处理器520如图6所示那样操作时，可以如图7所示那样定义在设备100与服务器320之间的步骤的流程图。图7是示出根据本发明实施例的在设备与服务器之间的步骤的流程图。
参照图7，在步骤S710，设备100和服务器320接收相同的媒体内容。图7的步骤S711至S717可以被看作是对应于图6的步骤S601至S608。图7的步骤S718、S715、S719和S720可以被看作是分别对应于图2的步骤S201至S204。
处理器520可以如图8所示的那样工作。图8是示出根据本发明实施例的经由服务器320提供媒体内容相关信息的方法的另一个流程图。
图8对应于向其增加搜索媒体内容相关信息并将其发送到设备100的服务器320的功能的图6的流程图。因此，步骤S801至S803分别对应于图6的步骤S601至S603，并且步骤S806至S808以及步骤S810分别对应于图6的步骤S605至S607以及步骤S609，因此此处将不再重复对这些步骤的描述。
在步骤S804，服务器320的处理器520基于关键信息经由网络接口单元540搜索媒体内容相关信息。当找到媒体内容相关信息时，在步骤S805，处理器520同步识别信息、关键信息以及找到的媒体内容相关信息，并存储同步的信息。
当在步骤S808找到匹配的识别信息时，在步骤S809，处理器520经由网络接口单元540将与找到的识别信息同步的关键信息和媒体内容相关信息发送到设备100。
图9是示出分别在图2和图8中示出的在设备100与服务器320之间的步骤的流程图。如图7所示，在步骤S910，设备100和服务器320接收相同的媒体内容。图9的步骤S911至S917可以被看作是对应于图8的步骤S801至S808。在图9的步骤S918，服务器320的处理器520发送与找到的识别信息同步的关键信息和媒体内容相关信息，或者仅仅发送同步的媒体内容相关信息。图9的步骤S919、S916和S920可以被看作是对应于图2的步骤S201至S204。
本发明还可以实现为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是能够存储数据、且所述数据之后能被计算机系统读取的任何数据存储设备。计算机可读记录介质的例子包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光数据存储器设备等等。计算机可读记录介质还可以分布于经网络耦合的计算机系统之上，以使计算机可读代码以分布式方式存储和执行。
虽然已经参照示例性实施例详细示出并描述了本发明，但本领域普通技术人员将理解，可以对本发明做出形式和细节上的各种改变，而不会偏离由权利要求及其等效物所限定的本发明的精神和范围。

Claims (9)

1.一种使用能够经由网络访问服务器的设备提供媒体内容相关信息的方法，该方法包括：
由所述设备再现媒体内容；
生成正被所述设备再现的媒体内容的视频帧的识别信息；
将所述识别信息从所述设备发送到所述服务器；
基于所述识别信息，在所述设备处从所述服务器接收关键信息或接收关键信息和媒体内容相关信息两者，其中，所述关键信息基于与所述正被所述设备再现的媒体内容的视频帧同步的隐藏字幕信息，并且所述媒体内容相关信息使用所述关键信息来确定；以及
当从所述服务器接收到所述关键信息时，在所述设备处从所述关键信息中确定所述媒体内容相关信息，并且使用所述设备输出在所述设备处确定的所述媒体内容相关信息，
当从所述服务器接收到所述关键信息和媒体内容相关信息两者时，使用所述设备输出从所述服务器接收到的所述媒体内容相关信息。
2.如权利要求1所述的方法，其中，生成所述识别信息被基于包括在描绘相同场景的帧和通过单一摄影操作来分割的帧之一中的媒体内容的改变来执行。
3.如权利要求2所述的方法，其中，生成所述识别信息包括：
当包括在所述帧中的媒体内容在预定时段内没有发生改变时，生成所述识别信息。
4.如权利要求1至3中任意一项所述的方法，其中，所述识别信息包括：
正被所述设备再现的所述媒体内容的帧的数字指纹。
5.如权利要求1所述的方法，其中，输出媒体内容相关信息包括：
当从所述服务器接收到关键信息和媒体内容相关信息时，根据用户输入选择输出所述关键信息。
6.如权利要求1所述的方法，其中，所述媒体内容包括广播节目、广播内容、视频内容、音频内容、以及组合的视频和音频内容之一。
7.一种使用被至少一个设备经由网络访问的服务器提供媒体内容相关信息的方法，该方法包括：
通过分析与正在被再现的媒体内容的视频帧同步的隐藏字幕信息来在所述服务器中检测关键信息；
在所述服务器中生成正在被再现的媒体内容的视频帧的识别信息；
同步所述识别信息和所述关键信息；
将同步的所述识别信息和所述关键信息存储在所述服务器中；
当基于所述关键信息经由网络在所述服务器中搜索媒体内容相关信息时，同步所述媒体内容相关信息、关键信息和识别信息；
在所述服务器中存储同步的所述媒体内容相关信息、关键信息和识别信息；
当从至少一个设备接收到视频帧的识别信息时，从在所述服务器中存储的识别信息中搜索与接收到的识别信息匹配的识别信息；以及
当找到匹配的识别信息时，将与找到的识别信息同步的关键信息或者关键信息和媒体内容相关信息二者从所述服务器发送到所述设备。
8.一种媒体内容再现设备，包括：
媒体内容接收单元，用于接收媒体内容；
再现单元，用于再现接收到的媒体内容；
网络接口单元，用于与网络接口；以及
处理器，用于控制所述媒体内容接收单元、再现单元和网络接口单元执行以下操作：
由所述再现单元再现所述媒体内容，
使用所述再现单元生成正被再现的媒体内容的视频帧的识别信息，
经由所述网络接口单元将所生成的识别信息发送到服务器，
从所述服务器接收关键信息或接收关键信息和媒体内容相关信息两者，
当从所述服务器接收到所述关键信息时，从所述关键信息中确定所述媒体内容相关信息，并且在所述设备处使用所述再现单元输出所述媒体内容相关信息，
当从所述服务器接收到所述关键信息和媒体内容相关信息两者时，使用所述再现单元输出从所述服务器接收到的所述媒体内容相关信息，
其中，所述关键信息基于与所述正被再现的媒体内容的视频帧同步的隐藏字幕信息，并且所述媒体内容相关信息使用所述关键信息来确定。
9.一种服务器，包括：
关键信息检测单元，用于通过分析与正被再现的媒体内容的视频帧同步的隐藏字幕信息来检测关键信息；
识别信息检测单元，用于检测正被再现的媒体内容的视频帧的识别信息；
网络接口单元，用于与网络接口；
处理器，用于将检测到的关键信息和检测到的识别信息同步并存储同步的关键信息和识别信息，当基于所述关键信息经由网络搜索媒体内容相关信息时，同步所述关键信息、识别信息和媒体内容相关信息；存储同步的所述关键信息、识别信息和媒体内容相关信息以及当经由网络接口单元从至少一个设备接收到视频帧的识别信息时，搜索所存储的识别信息中与接收到的识别信息匹配的识别信息，并经由网络接口单元将与找到的识别信息同步的关键信息或者关键信息和媒体内容相关信息二者发送到所述设备；以及
存储单元，用于存储所述关键信息和所述识别信息。
CN201110277365.5A 2010-09-17 2011-09-19 提供媒体内容相关信息的方法及执行该方法的设备和服务器 Expired - Fee Related CN102413359B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911136128.XA CN110839163B (zh) 2010-09-17 2011-09-19 服务器和其信息提供方法及计算机可读记录介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2010-0091960 2010-09-17
KR1020100091960A KR101700365B1 (ko) 2010-09-17 2010-09-17 미디어 컨텐츠 관련 정보 제공 방법, 이 방법을 수행할 수 있는 디바이스와 서버 및 저장 매체

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201911136128.XA Division CN110839163B (zh) 2010-09-17 2011-09-19 服务器和其信息提供方法及计算机可读记录介质

Publications (2)

Publication Number Publication Date
CN102413359A CN102413359A (zh) 2012-04-11
CN102413359B true CN102413359B (zh) 2019-12-13

Family

ID=44651238

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201110277365.5A Expired - Fee Related CN102413359B (zh) 2010-09-17 2011-09-19 提供媒体内容相关信息的方法及执行该方法的设备和服务器
CN201911136128.XA Active CN110839163B (zh) 2010-09-17 2011-09-19 服务器和其信息提供方法及计算机可读记录介质

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201911136128.XA Active CN110839163B (zh) 2010-09-17 2011-09-19 服务器和其信息提供方法及计算机可读记录介质

Country Status (5)

Country Link
US (1) US9071852B2 (zh)
EP (3) EP2432244A1 (zh)
JP (1) JP5958986B2 (zh)
KR (1) KR101700365B1 (zh)
CN (2) CN102413359B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120213404A1 (en) 2011-02-18 2012-08-23 Google Inc. Automatic event recognition and cross-user photo clustering
EP2798529B1 (en) * 2011-12-28 2019-08-14 Intel Corporation Real-time natural language processing of datastreams
KR101396413B1 (ko) * 2012-05-07 2014-05-19 주식회사 마크애니 디지털 핑거프린팅을 이용한 정보 제공 시스템 및 방법
JP6509111B2 (ja) * 2012-06-27 2019-05-08 グーグル エルエルシー イベントコンテンツストリーム向けの適切なコンテンツを判定するためのシステムおよび方法
US9391792B2 (en) 2012-06-27 2016-07-12 Google Inc. System and method for event content stream
GB2507097A (en) * 2012-10-19 2014-04-23 Sony Corp Providing customised supplementary content to a personal user device
US9418370B2 (en) 2012-10-23 2016-08-16 Google Inc. Obtaining event reviews
JP5574556B1 (ja) * 2013-09-26 2014-08-20 株式会社電通 視聴番組同定システム、方法およびプログラム
KR20150037372A (ko) * 2013-09-30 2015-04-08 삼성전자주식회사 영상표시장치, 컨텐츠 동기화 서버 및 그 동작방법
EP3274878A1 (en) 2015-09-28 2018-01-31 Google LLC Sharing images and image albums over a communication network
CN106301815B (zh) * 2016-07-26 2019-12-20 贵阳语玩科技有限公司 基于语音聊天室的动态背景分享方法及系统
GB2575388A (en) * 2017-04-11 2020-01-08 Tagflix Inc Method, apparatus and system for discovering and displaying information related to video content
US10432728B2 (en) 2017-05-17 2019-10-01 Google Llc Automatic image sharing with designated users over a communication network
WO2019221511A1 (ko) * 2018-05-15 2019-11-21 Ko Hyun Sung 컨텐츠를 중심으로 하는 정보 제공 방법
US20220303642A1 (en) * 2021-03-19 2022-09-22 Product Development Associates, Inc. Securing video distribution

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1723458A (zh) * 2002-12-11 2006-01-18 皇家飞利浦电子股份有限公司 用于利用视频内容获得文本关键字或短语以提供至基于网络资源的内容相关链接的方法和系统
CN101146260A (zh) * 2007-10-19 2008-03-19 吕利勇 手机广告投放系统及方法
CN101374234A (zh) * 2008-09-25 2009-02-25 清华大学 一种基于内容的视频拷贝监测方法及装置

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6637032B1 (en) * 1997-01-06 2003-10-21 Microsoft Corporation System and method for synchronizing enhancing content with a video program using closed captioning
US6253375B1 (en) 1997-01-13 2001-06-26 Diva Systems Corporation System for interactively distributing information services
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
JP3976183B2 (ja) 2002-08-14 2007-09-12 インターナショナル・ビジネス・マシーンズ・コーポレーション コンテンツ受信装置、ネットワークシステム及びプログラム
AU2003278558A1 (en) * 2002-11-08 2004-06-07 Aliope Limited Multimedia management
US7519685B2 (en) * 2003-04-04 2009-04-14 Panasonic Corporation Contents linkage information delivery system
US7373122B2 (en) * 2003-07-14 2008-05-13 Sony Corporation Reproduction device information setting method, and information setting program
US20070124796A1 (en) * 2004-11-25 2007-05-31 Erland Wittkotter Appliance and method for client-sided requesting and receiving of information
US7400364B2 (en) * 2005-04-26 2008-07-15 International Business Machines Corporation Sub-program avoidance redirection for broadcast receivers
KR20070065608A (ko) 2005-12-20 2007-06-25 엘지전자 주식회사 캡쳐된 영상 신호에서 목적 대상물 정보 취득 장치 및 그제어 방법
EP1974300A2 (en) * 2006-01-16 2008-10-01 Thomson Licensing Method for determining and fingerprinting a key frame of a video sequence
US8209724B2 (en) 2007-04-25 2012-06-26 Samsung Electronics Co., Ltd. Method and system for providing access to information of potential interest to a user
US8115869B2 (en) * 2007-02-28 2012-02-14 Samsung Electronics Co., Ltd. Method and system for extracting relevant information from content metadata
US20080066098A1 (en) * 2006-08-25 2008-03-13 Skyclix, Inc. Phone-based targeted advertisement delivery
JP4341656B2 (ja) * 2006-09-26 2009-10-07 ソニー株式会社 コンテンツ管理装置、ウェブサーバ、ネットワークシステム、コンテンツ管理方法、コンテンツ情報管理方法およびプログラム
KR100916717B1 (ko) * 2006-12-11 2009-09-09 강민수 플레이 되고 있는 동영상 내용 맞춤형 광고 콘텐츠 제공방법 및 그 시스템
EP3145200A1 (en) 2007-01-12 2017-03-22 ActiveVideo Networks, Inc. Mpeg objects and systems and methods for using mpeg objects
US20080201736A1 (en) 2007-01-12 2008-08-21 Ictv, Inc. Using Triggers with Video for Interactive Content Identification
KR100898142B1 (ko) * 2007-06-26 2009-05-19 박근섭 컨텐츠에 관련된 정보 키워드/정보 컨텐츠 제공 방법 및검색 방법 그리고 그 시스템
EP2009638A1 (en) * 2007-06-28 2008-12-31 THOMSON Licensing Video copy prevention if the difference betweeen the fingerprints before and after its modification is above a threshold
JP2009010797A (ja) 2007-06-29 2009-01-15 Hitachi Ltd 情報提示方法及び装置
DE102007030131B3 (de) * 2007-06-29 2008-10-23 Whatmore Gmbh Verfahren, Vorrichtung und Computerprogrammprodukt zum synchronisierten Bereitstellen von relevanten Informationen in einer interaktiven Portalanwendung
JP2009021816A (ja) * 2007-07-11 2009-01-29 Sharp Corp コンテンツ表示装置、コンテンツ表示方法、コンテンツ表示プログラム、および記録媒体
EP2188711A4 (en) 2007-09-14 2012-08-22 Auditude Inc RESTORING PROGRAM INFORMATION FOR CLIPS FROM ONLINE USED BROADCASTING PROGRAMS
DE102008039241A1 (de) 2007-11-10 2009-05-14 Waldemar Link Gmbh & Co. Kg Instrumentarium zur Durchführung eines Operationsverfahrens an einem Gelenk
KR101348598B1 (ko) * 2007-12-21 2014-01-07 삼성전자주식회사 디지털 티비 방송 제공 시스템과 디지털 티비 및 그 제어방법
JP5143592B2 (ja) * 2008-03-04 2013-02-13 シャープ株式会社 コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生システム、プログラム、および記録媒体
US20090320061A1 (en) * 2008-06-19 2009-12-24 Microsoft Corporation Advertising Based on Keywords in Media Content
CN101639841B (zh) * 2008-07-30 2012-05-09 深圳市九洲电器有限公司 一种提供多媒体数据搜索和查询服务的方法及系统
US20100057527A1 (en) * 2008-08-29 2010-03-04 Disney Enterprises, Inc. System and method for personalized action based on a comparison of delivered content with a content fingerprint database
JP2010087976A (ja) 2008-10-01 2010-04-15 Sony Corp 情報処理装置、情報取得方法、情報取得プログラム及び情報検索システム
US8831272B2 (en) * 2008-10-14 2014-09-09 Koninklijke Philips N.V. Content item identifier
US9355554B2 (en) * 2008-11-21 2016-05-31 Lenovo (Singapore) Pte. Ltd. System and method for identifying media and providing additional media content
US20100169930A1 (en) * 2008-12-25 2010-07-01 Samsung Electronics Co., Ltd. Broadcasting receiver and method of searching for keyword of broadcasting receiver
JP4873018B2 (ja) 2009-01-09 2012-02-08 ソニー株式会社 データ処理装置、データ処理方法、及び、プログラム
KR101599465B1 (ko) * 2009-03-03 2016-03-04 삼성전자주식회사 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1723458A (zh) * 2002-12-11 2006-01-18 皇家飞利浦电子股份有限公司 用于利用视频内容获得文本关键字或短语以提供至基于网络资源的内容相关链接的方法和系统
CN101146260A (zh) * 2007-10-19 2008-03-19 吕利勇 手机广告投放系统及方法
CN101374234A (zh) * 2008-09-25 2009-02-25 清华大学 一种基于内容的视频拷贝监测方法及装置

Also Published As

Publication number Publication date
KR101700365B1 (ko) 2017-02-14
CN102413359A (zh) 2012-04-11
EP2432244A1 (en) 2012-03-21
EP3451679A1 (en) 2019-03-06
KR20120029861A (ko) 2012-03-27
CN110839163A (zh) 2020-02-25
EP3451679B1 (en) 2020-11-04
US9071852B2 (en) 2015-06-30
JP5958986B2 (ja) 2016-08-02
US20120072947A1 (en) 2012-03-22
CN110839163B (zh) 2022-03-08
JP2012065320A (ja) 2012-03-29
EP2811751A1 (en) 2014-12-10

Similar Documents

Publication Publication Date Title
CN102413359B (zh) 提供媒体内容相关信息的方法及执行该方法的设备和服务器
US20220358155A1 (en) Systems and methods for searching for a media asset
US9961404B2 (en) Media fingerprinting for content determination and retrieval
US9301008B2 (en) Broadcasting receiving apparatus and method for providing broadcasting signal relation information
US9100701B2 (en) Enhanced video systems and methods
KR101828342B1 (ko) 방송수신장치, 방송신호 관련 연관정보 제공방법 및 서버
US20230421826A1 (en) Systems and methods for managing available bandwidth in a household
CA2952945C (en) Systems and methods for identifying content corresponding to a language spoken in a household
JP6202815B2 (ja) 文字認識装置および文字認識方法並びに文字認識プログラム
US8391673B2 (en) Method, system, and apparatus to derive content related to a multimedia stream and dynamically combine and display the stream with the related content
CN102262643A (zh) 信息处理系统、信息处理装置和信息处理方法
US20120162513A1 (en) Dual-connection multimedia apparatus
KR20130074245A (ko) 부가 정보 제공 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20191213