CN108370447A - 内容处理装置及其内容处理方法、服务器、服务器的信息提供方法和信息提供系统 - Google Patents

内容处理装置及其内容处理方法、服务器、服务器的信息提供方法和信息提供系统 Download PDF

Info

Publication number
CN108370447A
CN108370447A CN201680071997.7A CN201680071997A CN108370447A CN 108370447 A CN108370447 A CN 108370447A CN 201680071997 A CN201680071997 A CN 201680071997A CN 108370447 A CN108370447 A CN 108370447A
Authority
CN
China
Prior art keywords
information
content
characteristic information
characteristic
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680071997.7A
Other languages
English (en)
Other versions
CN108370447B (zh
Inventor
高光贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108370447A publication Critical patent/CN108370447A/zh
Application granted granted Critical
Publication of CN108370447B publication Critical patent/CN108370447B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4826—End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

提供一种内容处理装置。所述内容处理装置包括：输出单元，包括被配置为输出内容的输出电路；通信器，包括被配置为与服务器通信的通信电路；以及处理器，被配置为从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息，控制通信电路将提取的第一特性信息发送到服务器，并响应于接收到与发送的第一特性信息对应的多个匹配信息，控制输出电路输出与从所述内容提取的第二特性信息对应的匹配信息。

Description

内容处理装置及其内容处理方法、服务器、服务器的信息提供 方法和信息提供系统
技术领域
本公开总体来说涉及一种内容处理装置、一种服务器、一种服务器的信息提供方法和一种信息提供系统，例如，本公开涉及能够使用不同类型的特性信息来准确识别内容的内容处理装置、服务器、服务器的信息提供方法和信息提供系统。
背景技术
随着用户需求变得更多样化，广播内容或多媒体内容的源也已变得更多样化，从基于公共TV的单一源到诸如有线、互联网协议TV(IPTV)等的各种源。此外，已经引入了提供关于定制化广告、节目推荐等的信息的源。
有必要提供关于定制化广告、推荐节目等的这种信息，使其适用于正在输出的场景。例如，当展示特定产品的场景被显示时，一起显示关于所述特定产品的广告消息是最有效果的。因此，识别当前显示的图像的技术为显示装置所需要。
为此，已经提出了通过从正在输出的图像提取特性数据并将提取的特性数据与预存数据进行比较来识别图像的技术。然而，在相关领域的内容识别技术中，不同内容包括相同场景，因此，当相同特性信息被提取时，无法将每条内容彼此区分。
发明内容
一个或多个示例实施例提供一种可以使用不同类型的特性信息来准确识别内容的内容处理装置、一种内容处理方法、一种服务器、一种服务器的信息提供方法和一种信息提供系统。
根据示例实施例的一方面，提供一种内容处理装置，包括：输出单元，包括被配置为输出内容的输出电路；通信器，包括被配置为与服务器通信的通信电路；以及处理器，被配置为从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息，控制通信电路将提取的第一特性信息发送到服务器，响应于接收到与发送的第一特性信息对应的多个匹配信息，控制输出电路输出所述多个匹配信息之中、与从内容提取的第二特性信息对应的匹配信息。
第一特性信息可以是视频特性信息或音频特性信息，并且，第二特性信息可以是与第一特性信息不同类型的视频特性信息或音频特性信息。
通信器可以从服务器接收多个匹配信息以及与所述多个匹配信息之中的每个匹配信息对应的多个第二特性信息，并且，处理器可以基于所述多个第二特性信息与从内容提取的第二特性信息的比较结果，控制输出单元输出所述多个匹配信息之中、与从内容提取的第二特性信息对应的匹配信息。
所述多个匹配信息可以包括附加信息，并且，附加信息可以包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
处理器可以响应于以下事件之一的发生来从当前正在输出的内容提取第一特性信息和第二特性信息：预设时间段开始的第一事件、提供内容的源被改变的第二事件、或频道被改变的第三事件。
处理器可以控制通信器向服务器发送所述多个匹配信息之中、与从所述内容提取的第二特性信息对应的匹配信息，作为内容识别信息。
根据示例实施例，提供一种服务器，包括：通信器，包括被配置为从内容处理装置接收第一特性信息的通信电路；以及处理器，被配置为响应于检索到与接收的第一特性信息匹配的多个第一特性信息，控制通信电路向内容处理装置发送与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与多个检索到的第一特性信息之中的每个第一特性信息对应的第二特性信息。
第一特性信息可以是视频特性信息或音频特性信息，并且，第二特性信息可以是与第一特性信息不同类型的视频特性信息或音频特性信息。
所述多个匹配信息可以包括附加信息，并且，附加信息可以包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
处理器可以响应于从内容处理装置接收到内容识别信息，针对在接收到内容识别信息之后从内容处理装置接收的第一特性信息，在与接收的内容识别信息对应的搜索范围内执行检索。
处理器可以响应于检索到与接收的第一特性信息匹配的一个第一特性信息，控制通信器向观看数据收集服务器发送与检索到的第一特性信息对应的匹配信息。
根据示例实施例，提供一种信息提供系统，包括：显示装置，被配置为从内容提取第一特性信息和第二特性信息，并将提取的第一特性信息发送到服务器；以及服务器，被配置为将与从显示装置接收的第一特性信息对应的匹配信息发送到显示装置，其中，显示装置可以响应于从服务器接收到多个匹配信息，被配置为显示所述多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。
根据示例实施例，提供一种内容处理方法，包括：输出内容；从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息；将提取的第一特性信息发送到服务器；从服务器接收与发送的第一特性信息对应的多个匹配信息；以及输出所述多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。
第一特性信息可以是视频特性信息或音频特性信息，并且，第二特性信息可以是与第一特性信息不同类型的视频特性信息或音频特性信息。
所述接收可以包括从服务器接收所述多个匹配信息以及与所述多个匹配信息之中的每个匹配信息对应的多个第二特性信息，并且，所述输出可以包括基于所述多个第二特性信息与从所述内容提取的第二特性信息的比较结果，输出所述多个匹配信息之中与从所述内容提取的第二特性信息对应的匹配信息。
所述多个匹配信息可以包括附加信息，并且，附加信息可以包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
所述提取可以包括响应于以下事件的发生从当前正在输出的内容提取第一特性信息和第二特性信息：预设时间段开始的第一事件、提供内容的源被改变的第二事件、或频道被改变的第三事件。
根据本公开的方法可以还包括向服务器发送所述多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息，作为内容识别信息。
根据示例实施例，提供一种服务器的信息提供方法，包括：从内容处理装置接收第一特性信息；检索与接收的第一特性信息匹配的第二特性信息；以及响应于检索到与接收的第一特性信息匹配的多个第一特性信息，向内容处理装置发送与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与多个检索到的第一特性信息之中的每个第一特性信息对应的第二特性信息。
所述检索可以包括：响应于从内容处理装置接收到内容识别信息，针对在接收到内容识别信息之后从内容处理装置接收的第一特性信息，在与接收的内容识别信息对应的搜索范围内执行检索。
附图说明
通过以下参照附图进行的详细描述，本公开的上述和其他方面将变得更加清楚，在所述附图中，相同的标号指示相同的元素，其中：
图1和图2是示出根据各种示例实施例的示例信息提供系统的示图；
图3是示出根据各种示例实施例的内容处理装置的示例配置的框图；
图4、图5、图6a和图6b是示出根据各种示例实施例的内容处理装置与服务器之前的示例通信的示图；
图7是示出根据示例实施例的从内容处理装置提供的示例附加信息的示图；
图8是示出根据示例实施例的内容处理装置和服务器的示例内容识别的顺序图；
图9是示出根据示例实施例的内容处理装置的示例附加信息提供方法的示图；
图10是示出根据示例实施例的示例内容处理方法的流程图；
图11是示出根据示例实施例的示例服务器的框图；
图12是示出根据另一示例实施例的内容处理装置和服务器的示例内容识别的顺序图；
图13是示出根据另一示例实施例的信息提供系统的示例配置的示图；
图14是示出根据示例实施例的信息提供系统的示例内容识别方法的流程图；以及
图15是示出根据示例实施例的示例信息提供方法的流程图。
具体实施方式
以下，将简要描述说明书中使用的术语，并将参照附图来更详细地描述示例实施例。
关于在本公开的各种示例实施例中使用的术语，考虑到关于本公开的功能来选择当前广泛使用的一般术语。然而，术语可以根据相关领域中技术实践的意图、新技术的出现等而变化。在特定情况下，术语可以被任意选取，并且，在这种情况下，将在相应公开的描述中阐述其定义。因此，在说明书中使用的术语不应必然解释为术语的简单名称，而应基于术语的含义和本公开的整体内容来定义所述术语。
示例实施例可以变化，并可以在不同示例实施例中被提供。将参照附图来描述各种示例实施例。然而，这并不必然将示例实施例的范围限制为特定实施例形式。相反，可以采用包括在本公开的公开构思和技术范围中的变型物、等同物和替换物。在描述示例实施例时，如果确定关于已知技术的描述将模糊本公开的要旨，则可以省略详细描述。
诸如“第一”、“第二”等的术语可以用于解释多个元素，但是元素不应受限于此。术语可以用于将一实体与另一实体区分，而不必然意味着所述实体治安的任何实际关系或顺序。
单数术语包括复数形式，除非另有指示。说明书中的术语“包括”、“包含”、“被配置为”等用于指示存在特征、数值、步骤、操作、元素、部件或其组合，而并不排除组合或添加一个或多个特征、数值、步骤、操作、元素、部件或其组合的可能性。
在示例实施例中，“模块”或“单元”执行至少一个功能或操作，并可以实现为硬件(例如，电路)、软件或其组合。此外，除了不得不由特定硬件实施的“模块”或“单元”之外，多个“模块”或多个“单元”可以被集成到至少一个模块并实现为至少一个处理器(未示出)，诸如作为示例而非限制的专用处理器、各种处理电路等。
在示例实施例中，在部件被“连接”到另一部件的情况下，该情况也包括所述部件被“电连接”到所述另一部件，在其间插入或不插入另一元件的情况。
以下，将按照本领域普通技术人员将理解的方式来更详细地描述示例实施例。所述示例实施例可以按照各种形式来实施，而不限于这里描述的示例实施例。此外，为了更清楚地描述示例实施例，与本公开无关的那些元素、特征等可以被省略，并且，在整个公开中，相似的附图标号用于相似的元素。
以下，将参照附图来更加详细地描述本公开。
图1是示出根据示例实施例的示例信息提供系统的示图。
参照图1，信息提供系统1000包括内容处理装置100和服务器200。
作为示例，内容处理装置100可以指能够从内容提取特性信息以识别内容的装置。例如，作为非限制性示例，内容处理装置100可以被实现为能够显示内容的显示装置，诸如TV、PC、膝上型PC、蜂窝电话、平板PC、PDA等。
内容处理装置100可以输出内容。作为示例，输出内容可以指通过包括在内容处理装置100中的显示器或扬声器来输出图像和/或声音。
此外，内容处理装置100可以从当前正在输出的内容提取第一特性信息和与第一特性信息不同类型的第二特性信息，并将提取的第一特性信息发送到服务器200。
例如，内容处理装置100可以从内容的图像或声音提取特性信息。在本公开中，作为示例，从图像提取的特性信息可以指视频特性信息，并且，作为示例，从声音提取的特性信息可以指音频特性信息。如果第一特性信息是视频特性信息，则第二特性信息可以是音频特性信息。如果第一特性信息是音频特性信息，则第二特性信息可以是视频特性信息。
这样的视频或音频特性信息可以包括视频指纹或音频指纹等。
指纹指对于内容的分段中的图像或声音而言独有的数据。例如，作为示例，指纹可以指从图像信号或音频信号提取的特性信息，其不同于基于文本的元数据，反映对于信号自身而言独有的特性。因此，指纹可以被称为指纹数据、DNA数据或基因数据。例如，作为示例，从音频信号提取的音频指纹可以指用于指示音频信号的诸如频率、幅度等特性的信息，并且，作为示例，从图像信号提取的视频指纹可以指用于指示图像信号的诸如运动向量、色彩等特性的信息。
可以通过各种常规已知算法来提取指纹。例如，可以按照预定时间的间隔来划分音频信号，并且包括在每个间隔中的频率的信号的大小可以被确定。此外，可以获取相邻频率间隔中的信号之间的大小差异以确定频率倾向，如果倾向为正，则可以将倾向量化为1，如果倾向为负，则可以将倾向量化为0，由此产生指纹。
在本领域普通技术人员了解的自动内容识别(ACR)技术中可以使用以上提到的指纹。因此，将省略详细解释。
作为示例，服务器200可以指能够处理从内容处理装置100接收的ACR的查询请求的装置。还可以按各种方式将服务器200称为匹配服务器。尽管图1仅示出一个服务器，但是可以存在多个服务器。
例如，服务器200可以将与从内容处理装置100接收的第一特性信息对应的匹配信息发送到内容处理装置100。换言之，可以响应于第一特性信息被从内容处理装置100发送到服务器200来提供匹配信息。
例如，服务器200可以包括包含从各种内容提取的特性信息的数据库，并且，可以利用那个数据库的每个特性信息对内容信息进行标记(或索引)。在该示例中，作为示例，当内容是实况直播时，内容信息可以是关于每个频道的EPG元数据，并且当内容是诸如VOD和OTT的内容或定制内容时，内容信息可以是关于预录内容的信息。
此外，服务器200的数据库的每个特性信息可以对应于附加信息。作为示例，附加信息可以指可以连同内容的输出而一起提供的信息，例如，其可以包括广告信息、内容推荐信息、调查信息、通用资源定位符(URL)信息等，但不限于此。这里，作为示例，URL信息可以指关于涉及内容的信息的连接信息。以上提到的附加信息可以被存储在服务器200中，或可以从连接到服务器200的附加信息提供服务器来提供。
服务器200可以将包括以上提到的内容信息的匹配信息发送到内容处理装置100。根据情况，匹配信息可以包括以上提到的附加信息。
此外，内容处理装置100可以响应于接收到从服务器200发送的、与第一特性消息对应的多个匹配信息，选择多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。此外，内容处理装置100可以基于选择的匹配信息来执行各种操作。例如，内容处理装置100可以输出包括在匹配信息中的广告信息等，或可以将匹配信息存储为内容识别信息，以为了例如收集观看数据的目的来使用内容识别信息。
根据以上提到的信息提供系统，可以使用特性信息来识别当前正在输出的内容。例如，可以使用视频特性信息和音频特性信息两者来识别内容，由此提高内容识别的准确性。
尽管参照图1描述了信息提供系统1000包括一个内容处理装置100和一个服务器200，但是若干内容处理装置可以被连接到一个服务器，并且，若干服务器200可以被连接到一个显示装置。其他组合也是可行的。
尽管在图1中示出内容处理装置100被实施为显示装置，但是根据另一示例实施例，如图2所示，内容处理装置100可以被实施为显示装置100的外部装置。
图2是示出根据另一示例实施例的示例信息提供系统1000’的示图。
参照图2，信息提供系统1000’包括显示装置300、内容处理装置100和服务器200。与参照图1的描述重复的本信息提供系统1000’的特征的描述将被省略。
在图2的实施例的情况下，在显示装置300中处理显示功能，并在内容处理装置100中执行其他功能。在该示例中，由内容处理装置100输出内容或匹配信息指的是将内容或匹配信息发送到显示装置300。
例如，内容处理装置100可以被实施为连接到显示装置300的机顶盒。作为示例，机顶盒可以指接收诸如地面广播、有线TV广播、卫星广播等TV广播信号，并将接收的信号输出到显示装置300的装置，其也可以被称为调谐器盒(tuner box)。
作为示例，显示装置300可以指能够提供从内容处理装置100提供的内容或匹配信息，以按照图像和/或声音的形式向用户提供内容或匹配信息的装置。
例如，显示装置300可以被实施为各种类型的装置，诸如TV、PC、膝上型PC、蜂窝电话、平板PC、PDA、MP3播放器、信息亭(kiosk)、电子相框、平板显示装置等，但不限于此。
在图1和图2中示出仅提供一个服务器。然而，示例不限于此。也可以提供两个或更多个服务器。
以下，将参照图3来更详细地描述内容处理装置100。
图3是示出根据示例实施例的示例内容处理装置100的示图。
参照图3，内容处理装置100包括输出单元(例如，包括输出电路)110、通信器(例如，包括通信电路)120和处理器(例如，包括处理电路)130。
输出单元110可以包括用于输出内容和从服务器200接收的匹配信息的各种输出电路。如果内容处理装置100被实施为显示装置，则作为示例而非限制，输出单元110的输出电路可以包括显示器或扬声器。
如果内容处理装置100被实施为显示装置的外部装置，诸如，机顶盒，则内容处理装置100可以被实施为可以使用预定通信方法将内容发送到显示装置的配置。在该示例中，输出单元110和通信器120并非分离的配置。
通信器110可以包括用于与各种外部装置通信的各种通信电路。通信器110可以包括各种通信电路，诸如作为示例而非限制性的各种通信芯片，例如，包括Wi-Fi芯片、蓝牙芯片、无线通信芯片等之中的一项或多项。Wi-Fi芯片和蓝牙芯片分别按照Wi-Fi方式和蓝牙方式来进行通信。作为示例，无线通信芯片可以指根据诸如电气与电子工程师协会(IEEE)、Zigbee、第三代(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)等各种通信标准来执行通信的芯片。此外，通信器110可以还包括按照近场通信(NFC)方式来操作的NFC芯片。
例如，通信器110可以将从内容提取的第一特性信息发送到服务器200，并从服务器接收与第一特性信息对应的匹配信息。
例如，服务器200可以从服务器200的数据库中检索与从内容处理装置100接收的第一特性信息一致的第一特性信息或相似度高于预设阈值的第一特性信息。例如，如果从内容处理装置100接收的第一特性信息是视频特性信息，则服务器200从数据库中检索与接收的视频特性信息一致的视频特性信息或相似度高于预设阈值的视频特性信息。当视频特性信息被检索到时，服务器可以将与检索到的视频特性信息对应的内容信息和与检索到的视频特性信息对应的音频特性信息发送到内容处理装置100，作为匹配信息。如果存在与检索到的视频特性信息对应的附加信息或期望提供附加信息，则服务器可以将附加信息与内容信息和音频特性信息一起发送到内容处理装置，作为匹配信息。
在另一示例中，如果从内容处理装置100接收的第一特性信息是音频特性信息，则服务器200从数据库中检索与接收的音频特性信息一致的音频特性信息或相似度高于预设阈值的音频特性信息。当音频特性信息被检索到时，服务器可以将与检索到的音频特性信息对应的内容信息和与检索到的音频特性信息对应的音频特性信息发送到内容处理装置100，作为匹配信息。如果存在与检索到的音频特性信息对应的附加信息或期望提供附加信息，则服务器可以将附加信息与内容信息和视频特性信息一起发送到内容处理装置，作为匹配信息。
换言之，通过通信器120接收的匹配信息可以包括与发送到服务器200的第一特性信息对应的内容信息、第二特性信息和(可选地)附加信息。
在该示例中，作为示例，内容信息可以是关于与发送到服务器200的第一特性信息对应的内容的信息。作为具体示例，当内容是实况直播时，内容信息可以是关于每个频道的EPG元数据，当内容是诸如VOD和OTT的内容或定制内容时，内容信息可以是关于预录内容的信息。此外，作为示例，附加信息可以包括广告信息、内容推荐信息、调查信息等。
处理器130可以包括用于控制内容处理装置100的整体操作的各种处理电路。例如，处理器130使用存储在内容处理装置100的存储器(未示出)中的各种程序来控制内容处理装置100的整体操作。例如，处理器130可以包括各种电路，包括但不限于CPU、RAM、ROM和系统总线。在该示例中，作为示例，ROM可以指存储用于系统引导的命令集的配置，CPU将存储在内容处理装置100的存储器中的操作系统(O/S)复制到RAM，运行O/S，并引导系统。当引导完成时，CPU可以将存储在存储器中的各种应用复制到RAM，并运行复制到RAM中的应用以执行各种操作。以上描述了处理器130仅包括一个CPU；然而，处理器130可以被实施为多个处理电路，诸如作为示例而非限制性的多个CPU(或DSP、SoC等)。
例如，处理器130可以从当前正在输出的内容提取第一特性信息并提取与第一特性信息不同类型的第二特性信息。处理器130可以按照以下描述的示例方法从内容提取特性信息。
例如，处理器130可以按照预定时间的间隔来划分包括内容的音频信号，并确定包括在每个时间间隔中的频率的信号的大小。此外，获取相邻频率间隔中的信号之间的大小差异以确定频率倾向，如果倾向为正，则作为示例，可以将倾向量化为1，并且如果倾向为负，则作为示例，可以将倾向量化为0，由此提取音频特性信息。
作为另一示例，处理器130可以按照预定标准，在包括内容的图像帧内提取包括预定坐标的特征点和所述坐标的向量的大小。此外，可以按照从最大到最小的顺序来选择几个特征点。当所选择的特征点之中的预定关系被设置时，可以提取关于一个图像帧的视频特性信息。除以上描述的示例之外，可以使用各种指纹提取算法来提取第一特性信息和第二特性信息。
此外，处理器130可以控制通信器120将从内容提取的第一特性信息和第二特性信息之中的第一特性信息发送到服务器200。
此外，可以接收从服务器200发送的与第一特性信息对应的一个匹配信息，或者，可以接收多个匹配信息。
当多个匹配信息被接收时，处理器130可以从多个匹配信息之中选择与从内容提取的第二特性信息对应的匹配信息。在该示例中，当第一特性信息是视频特性信息时，第二特性信息是音频特性信息。此外，当第一特性信息是音频特性信息时，第二特性信息是视频特性信息。
例如，第二特性信息可以包括多个匹配信息之中的每个匹配信息，并且，处理器130将预先提取的第二特性信息与包括在多个匹配信息之中的每个匹配信息中的第二特性信息进行比较，以选择包括与预先提取的第二特性信息一致的第二特性信息的匹配信息或包括相似度高于预设阈值的第二特性信息的匹配信息。
多个匹配信息被接收的示例包括但不限于下述情况：例如，可以存在显示相同画面但可能以不同语言广播的多个内容。例如，可以在两个频道提供实况世界杯广播，一个用英语，另一个用西班牙语。以下将参照图4来更加信息地描述上述示例。
图4是示出内容处理装置接收多个匹配信息的示例的示图。
参照图4，服务器200包括以英语广播的足球比赛内容的特性信息数据库和以西班牙语广播的足球比赛内容的特性信息数据库。此外，内容处理装置100输出以英语广播的足球比赛内容，其中，从任意一个场景提取视频特性信息41和音频特性信息42。此外，内容处理装置将提取的视频特性信息41发送到服务器200。
服务器200可以在以英语广播的足球比赛内容的特性信息数据库中找到与视频特性信息41对应的视频特性信息，还可以在以西班牙语广播的足球比赛内容的特性信息数据库中找到与视频特性信息41对应的视频特性信息。因此，服务器200将两个匹配信息43和44发送到内容处理装置100。两者之中的一个是与以英语广播的足球比赛内容对应的匹配信息43，另一个是与以西班牙语广播的足球比赛内容对应的匹配信息44。
此外，内容处理装置100可以在多个接收的匹配信息43和44之中选择与预先提取的音频特性信息42对应的匹配信息43，以识别内容。
如上所述，虽然相同图像被显示，但是音频识别出不同内容，当只有视频特性信息被使用时，获取多个匹配信息，由此无法知晓场景属于哪个内容。然而，当内容处理装置100将视频特性信息发送到服务器200，并过滤多个接收的匹配信息以得到音频特性信息时，可以知晓场景属于哪个内容。
接收多个匹配信息的另一示例可以是相似场景被连续显示但会话连续地有所区别。以下将参照图5来更加详细地描述上述情况。
图5是示出内容处理装置接收多个匹配信息的另一示例。
参照图5，内容处理装置100输出脱口秀内容。尽管在时间t1和t2的输出场景不同，但演员正谈论的主题不同。此外，服务器200具有脱口秀内容的特性信息数据库。
在时间t1，从场景510提取视频特性信息51和音频特性信息52。此外，提取的视频特性信息51被发送到服务器200。
服务器200可以在脱口秀内容的特性信息数据库中找到与接收的视频特性信息51对应的多个特性信息。因此，服务器200将多个匹配信息53和54发送到内容处理装置100。它们之中的一个是与在时间t1的场景对应的匹配信息53，另一个是与在时间t2的场景对应的匹配信息54。
此外，内容处理装置100可以在多个接收的匹配信息53和54之中选择与预先提取的音频特性信息52对应的匹配信息53，以识别内容。
同样地，在时间t2，从场景520提取视频特性信息55和音频特性信息56。此外，提取的视频特性信息55被发送到服务器200。
服务器200可以在脱口秀内容的特性信息数据库中找到与接收的视频特性信息55对应的多个特性信息。因此，服务器200将多个匹配信息53和54发送到内容处理装置100。它们之中的一个是与在时间t1的场景对应的匹配信息53，另一个是与在时间t2的场景对应的匹配信息54。
此外，内容处理装置100可以在多个接收的匹配信息53和54之中选择与预先提取的音频特性信息56对应的匹配信息54，以识别内容。
如上所述，在显示的图像保持不变而音频会改变时，当只有视频特性信息被使用时，获取多个匹配信息，无法知晓场景属于哪个内容。然而，当内容处理装置100将视频特性信息发送到服务器200，并过滤多个接收的匹配信息以得到音频特性信息时，可以知晓场景属于哪个内容。
在图4和图5的实施例中描述了视频特性信息被发送到服务器200且内容处理装置100按照音频特性信息来对于多个匹配信息执行选择；然而，也可以将音频特性信息发送到服务器200，并且，内容处理装置100可以按照视频特性信息来对于多个匹配信息执行选择。以下将参照图6a和图6b来更加详细地描述上述示例。
图6a和图6b是示出内容处理装置接收多个匹配信息的其他示例。
参照图6a，内容处理装置100正输出实况直播总统演讲的CBS新闻内容。参照图6b，内容处理装置100正输出实况直播总统演讲的NBC新闻内容。也就是说，图6a和图6b输出相同音频但输出不同图像。
此外，服务器200包括CBS新闻内容的特性信息数据库和NBC新闻内容的特性信息数据库。
如图6a中所示，从CBS新闻内容的任意一个场景610提取视频特性信息61和音频特性信息62，并且，提取的音频特性信息62被发送到服务器200。服务器200可以在CBS新闻内容的特性信息数据库中找到与接收的音频特性信息62对应的音频特性信息，还可以在NBC新闻内容的特性信息数据库中找到与接收的音频特性信息62对应的音频特性信息。因此，服务器200将两个匹配信息63和64发送到内容处理装置100。它们之中的一个是与CBS新闻内容对应的匹配信息63，另一个是与NBC新闻内容对应的匹配信息64。
此外，内容处理装置100可以从多个接收的匹配信息63和64之中选择与预先提取的视频特性信息61对应的匹配信息63，以识别内容。
如图6b中所示，从NBC新闻内容的任意一个场景620提取视频特性信息65和音频特性信息66，并且，提取的音频特性信息66被发送到服务器200。服务器200可以在CBS新闻内容的特性信息数据库中找到与接收的音频特性信息66对应的音频特性信息，还可以在NBC新闻内容的特性信息数据库中找到与接收的音频特性信息66对应的音频特性信息。因此，服务器200将两个匹配信息63和64发送到内容处理装置100。它们之中的一个是与CBS新闻内容对应的匹配信息63，另一个是与NBC新闻内容对应的匹配信息64。
此外，内容处理装置100可以从多个接收的匹配信息63和64之中选择与预先提取的视频特性信息65对应的匹配信息64，以识别内容。
如上所述，关于输出相同音频却不同图像的内容，当只有音频特性信息被使用时，获取多个匹配信息，由此无法知晓场景属于哪个内容。然而，当内容处理装置100将音频特性信息发送到服务器200，并过滤多个接收的匹配信息以得到视频特性信息时，可以知晓场景属于哪个内容。
以上描述了处理器130仅将第一特性信息和第二特性信息之中的第一特性信息发送到服务器200以控制通信器120；然而，根据另一示例实施例，处理器130可以控制通信器120将第一特性信息和第二特性信息两者发送到服务器200。在该示例中，服务器200可以将与接收的第一特性信息和第二特性信息两者对应的匹配信息发送到内容处理装置100。
例如，在图6b中，从NBS新闻内容的任意一个场景620提取视频特性信息65和音频特性信息66，并且，视频特性信息65和音频特性信息66可以被发送到服务器200。当在CBS新闻内容的特性信息数据库和NBC新闻内容的特性信息数据库两者中找到了与接收的音频特性信息66对应的音频特性信息时，也就是说，当检索到两个音频特性信息时，服务器200在与两个音频特性信息之中的每个音频特性信息对应的两个视频特性信息之中检测与视频特性信息65对应的视频。此外，服务器200可以将包括与检测到的视频特性信息对应的内容信息和(可选地)附加信息的匹配信息发送到内容处理装置100。
内容处理装置100将第一特性信息和第二特性信息两者发送到服务器200的示例实施例与仅将第一特性信息发送到服务器200的示例实施例相比，可以降低在内容处理装置100中进行数据处理所导致的代价。由于服务器200可以仅将一个匹配信息而不是多个匹配信息发送到内容处理装置100，可以降低在服务器200与内容处理装置100之间的数据处理所导致的代价。
同时，处理器130可以使用包括在根据上述操作选择或接收的匹配信息中的内容信息和/或附加信息来执行各种操作。
例如，处理器130可以控制输出单元110来输出包括在匹配信息中的附加信息。附加信息可以是涉及识别出的内容的信息，诸如广告信息、内容推荐信息、调查信息等，但不限于此。
广告信息可以是涉及识别出的内容的广告信息，其中，作为示例，当内容是为特定产品做广告的内容时，广告信息可以包括关于售卖该特定产品的商店的信息。此外，内容推荐信息可以是关于涉及识别出的内容的推荐信息，作为示例，当识别出的内容是特定演员出演的电影内容时，内容推荐信息可以是关于该演员出演的不同电影的信息。例如，内容推荐信息可以包括关于播放该演员出演的另一电影的频道的信息。此外，调查信息是用于收集观众对识别出的内容的评论的信息，作为示例，当识别出的内容是烹饪比赛内容时，该信息可以是显示用于询问观众在比赛的参赛者之中哪位参赛者将赢得比赛的弹窗的信息。图7示出输出附加信息的示例。
图7是示出根据示例实施例的由内容处理装置100输出的示例附加信息的示图。
参照图7，内容处理装置100正输出为便携式设备做广告的广告内容的场景(710)。按照上述方法，内容处理装置100可以识别广告内容的一个场景710，并连同识别出的场景710一起来输出附加信息711。附加信息711显示可以在哪里购买当前正在输出的广告的便携式设备。
根据上述实施例，在特定产品被显示时显示附加信息，由此最大化和/或增强产品的广告效果。同时，为了控制在适当时机显示附加信息，内容处理装置100可以使用从服务器200接收的附加信息输出时间信息。以下将参照图9来更加详细地描述上述情况。
根据另一示例实施例，处理器130可以将包括在选择的匹配信息中的内容信息作为内容识别信息发送到服务器200，并且，服务器200可以基于接收的内容识别信息，针对此后从内容处理装置接收的特性信息执行搜索操作。将参照图8来更加详细地描述本示例实施例。
图8是示出内容处理装置100与服务器200之间的示例通信的顺序图。
参照图8，首先，在步骤S810，内容处理装置100从正在输出的内容提取第一特性信息和第二特性信息。
在步骤S815，内容处理装置100可以将提取的第一特性信息发送到服务器200。在步骤S820，服务器200搜索在服务器200的数据库中是否包括与接收的第一特性信息匹配的第一特性信息。
在步骤S825，作为搜索结果，服务器200将匹配信息发送到内容处理装置100。内容处理装置100确定是否接收到多个匹配信息。例如，在步骤S830，内容处理装置100确定是否发生多重匹配。
作为确定结果，当仅有一个匹配信息被接收时，例如，当没有发生多重匹配时，在步骤S840，内容处理装置100基于接收的匹配信息来执行服务。然而，作为确定结果，当多个匹配信息被接收时，例如，当发生多重匹配时，在步骤S835，内容处理装置100执行与从步骤S810提取的第二特性信息的匹配，并从多个接收的匹配信息之中选择与第二特性信息对应的匹配信息。此外，在步骤S840，内容处理装置100基于选择的匹配信息来执行服务。
例如，执行服务可以是执行输出如图7所示的包括在选择的匹配信息中的附加信息的服务，或可以是执行存储选择的匹配信息作为内容识别信息并将内容识别信息发送到观看数据收集服务器的服务。
此外，在步骤S845，内容处理装置100可以将选择的匹配信息发送到服务器200作为内容识别信息，并且，在步骤S850，服务器200可以存储接收的内容识别信息。在该示例中，作为内容识别信息被发送到服务器200的信息可以是在步骤S835中使用的第二特性信息。在图8中描述的是内容识别信息被单独发送；然而，内容识别信息可以在步骤S860连同第一特性信息一起被发送。
此外，服务器200可以基于接收的内容识别信息来识别当前正在内容处理装置100中输出什么内容。因此，服务器200在与接收的内容识别信息对应的搜索范围中执行匹配，而不需要针对所有内容执行匹配。
例如，当从内容处理装置提取第一特性信息和第二特性信息时，响应于提取的第一特性信息在步骤S860被发送到服务器，在步骤S865，服务器仅在与内容识别信息对应的搜索范围内，搜索与接收的第一特性信息匹配的第一匹配信息是否在服务器200的数据库中。此外，在步骤S870，服务器200将搜索结果发送到内容处理装置100作为匹配信息，并在其后重复以上提到的步骤S830和步骤S835。
根据本示例实施例，在服务器200中执行的搜索范围可以被减小，因此，服务器200可以迅速地将搜索结果提供给内容处理装置100，并且，发生多重匹配的可能性可以进一步降低。
本示例实施例基于内容处理装置100即使在将内容识别信息发送到服务器200之后还输出相同内容的假设；然而，如果在内容处理装置100中内容被改变，则服务器200可能不得不将搜索范围扩展到所有内容。
为此，当产生内容被改变的事件时，内容处理装置100可以立即向服务器通知该事件。在该示例中，内容处理装置100在产生内容被改变的事件时执行提取特性信息的操作，并将指示内容改变的信息连同提取的特性信息一起发送到服务器200。因此，由于服务器会知晓内容已经被改变，所以服务器会将搜索范围扩展到所有内容，并利用接收的特性信息来执行搜索。
同时，处理器130可以对内容的每一帧执行提取特性信息的操作；然而，处理器130可以仅在发生特定事件时执行提取特性信息的操作。
例如，当如以上所提到的，发生内容被改变的事件时，处理器130可以从当前正在输出的内容提取第一特性信息和第二特性信息。内容被改变的事件可以包括提供内容的源被改变的事件和频道被改变的事件。例如，可以基于是否接收到外部输入转换命令来确定提供内容的源被改变的事件，并可以基于是否接收到频道改变命令来确定频道被改变的事件。内容处理装置100可以从诸如遥控器的远程控制装置来接收以上提到的命令。
作为另一示例，处理器100可以在发生预设周期开始的事件时从当前正在输出的内容提取第一特性信息和第二特性信息。该时段越短，内容识别越准确。然而，由于数据处理的代价增大，所以有必要设置适当的周期。
图9是示出根据示例实施例的由内容处理装置100显示附加信息的示例的示图。
参照图9，时间线指示时间的流逝。当内容处理装置100正在输出内容时，在时间Ti，处理器130在步骤S910从内容提取视频特性信息(VFP1)和音频特性信息(AFP1)。
在步骤S920，处理器130通过通信器120来发送提取的视频特性信息(VFP1)。响应于上述处理，在步骤S930，可以从服务器200接收多个匹配信息930-1到930-n。
多个匹配信息930-1到930-n之中的每个匹配信息可以包括音频特性信息AFP1、AFPn、附加信息(例如，附加信息1、附加信息n)和时间信息(时间信息t1、时间信息tn)。时间信息是通知附加信息将被输出的时间的信息。同时，并非所有匹配信息都包括音频特性信息。例如，当音频的特性为静音或不可识别时，匹配信息可以不包括音频指纹，而可以包括指示音频指纹的预设消息。
此外，多个匹配信息930-1到930-n可以包括关于从内容处理装置100提取的VFP1的信息或关于VFP1被提取的时间的信息。基于上述时间信息，内容处理装置100可以识别到多个接收的匹配信息930-1到930-n是对从在与时间信息对应的时间输出的内容提取的特性信息的响应。
处理器130可以使用多个匹配信息930-1到930-n之中具有与在提取步骤S910提取的音频特性信息AFP1一致的特性信息的匹配信息930-1的时间信息t1，来确定附加信息1将被输出的时间。例如，在步骤S940，在通过将时间信息t1与视频特性信息VFP1和音频特性信息AFP1的时间Ti相加而获取的时间Ti+t1，将附加信息输出。例如，内容处理装置100可以提前接收将在时间Ti+t1显示的附加信息，由此在时间Ti+t1准确地输出附加信息1。
根据上述示例实施例，基于从服务器200接收的时间信息，内容处理装置100可以在内容的特定场景被输出的更准确时间，将适用于所述特定场景的附加信息连同所述特定场景一起输出。
图10是示出根据示例实施例的内容处理装置的示例内容处理方法的流程图。
参照图10，在步骤S1010，内容处理装置输出内容。内容可以从各种源提供。例如，内容可以是从广播台提供的广播内容或从外部源提供的外部输入内容。
此外，在步骤S1020，内容处理装置从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息。提取的第一特性信息和第二特性信息是从内容的特定场景(或帧)的图像和声音提取的特性信息。特性信息可以是作为特定场景的固有信息的指纹。
此外，在步骤S1030，内容处理装置将提取的第一特性信息发送到服务器。例如，内容处理装置可以将包括第一特性信息的ACR查询请求消息发送到服务器。在该示例中，发送ACR查询请求消息的频率可以取决于内容而不同。例如，在插入具有许多附加信息的内容的情况下，可以将查询频率控制为较高。在插入具有相对较少的附加信息的内容的情况下，可以将查询频率控制为较低。
在该示例中，服务器可以被称为ACR服务器和/或指纹服务器。服务器可以对于包括在ACR查询请求消息中的特性信息搜索ACR数据库以识别与第一特性信息对应的内容，并将关于识别的内容的ACR请求响应消息发送到内容处理装置。在该示例中，ACR查询响应消息可以被称为匹配信息。
例如，在步骤S1040，内容处理装置接收响应于被接收的第一特性信息的与第一特性信息对应的多个匹配信息。
此外，在步骤S1050，内容处理装置输出多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。例如，内容处理装置提取第一特性信息和第二特性信息，存储提取的第二特性信息，然后在从服务器接收到多个匹配信息时利用存储的第二特性信息来选择多个匹配信息之一。
本公开的各种示例实施例可以由计算机来实施，或通过记录介质来实施，其中，所述记录介质可以利用使用软件、硬件或其组合的类似于计算机的装置来读取。在硬件方面，可以使用各种处理电路来实施本公开中描述的示例实施例，诸如作为示例而非限制的以下项之中的至少一项：专用处理器、专用应用集成线路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、CPU和用于执行其他功能的电子单元。在一些情况下，本公开的示例实施例可以被实施为处理器130自身。在软件方面，在本公开中描述的诸如过程和功能的示例实施例可以被实施为单独的软件模块。每个软件模块可以执行本公开中描述的一个或多个功能和操作。
图11是示出根据示例实施例的服务器的示例配置的框图。
参照图11，服务器200包括通信器(例如，包括通信电路)210和处理器(例如，包括处理电路)220。
通信器210可以包括用于与各种外部装置通信的各种通信电路。通信器210可以包括各种通信电路，诸如作为示例而非限制性的例如Wi-Fi芯片、蓝牙芯片、无线通信芯片等的通信芯片。Wi-Fi芯片和蓝牙芯片分别按照Wi-Fi方式和蓝牙方式来进行通信。作为示例，无线通信芯片可以指根据诸如电气与电子工程师协会(IEEE)、Zigbee、第三代(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)等各种通信标准来执行通信的芯片。此外，通信器110可以还包括按照近场通信(NFC)方式来操作的NFC芯片。
例如，通信器210可以从内容处理装置100接收特性信息，并将作为对接收的特性信息的响应的匹配信息发送到内容处理装置100。此外，通信器210可以从内容处理装置100接收内容识别信息。
通信器210不仅可以与内容处理装置100通信，还可以与各种外部装置通信。例如，服务器200可以使用从各种服务器接收的各种信息，诸如作为示例而非限制性的事件服务器、广告服务器、捕获(capture)服务器、EPG元数据服务器等。以下将参照图12来更加详细地描述上述情况。此外，服务器200自身可以被实施为能够执行各种外部装置的功能的装置。
处理器220可以包括如上阐述的各种处理电路，用于控制服务器200的整体操作。例如，处理器220可以使用存储在服务器200的存储器(未示出)中的各种程序来控制服务器200的整体操作。例如，处理器220可以包括各种电路，诸如作为示例的CPU、RAM、ROM和系统总线。在该示例中，ROM是存储用于系统引导的命令集的配置，CPU将存储在内容处理装置200的存储器中的操作系统(O/S)复制到RAM，运行O/S，并引导系统。当引导完成时，CPU可以将存储在存储器中的各种应用复制到RAM，并运行复制到RAM中的应用以执行各种操作。以上描述了处理器220仅包括一个CPU；然而，处理器130可以被实施为多个CPU(或DSP、SoC等)。
例如，当处理器220检索到与从内容处理装置100接收的第一特性信息匹配的多个第一特性信息时，控制通信器110将与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与多个检索到的第一特性信息之中的每个第一特性信息对应的多个第二特性信息发送到内容处理装置100。
在该示例中，如果第一特性信息是视频特性信息，则第二特性信息是音频特性信息。如果第一特性信息是音频特性信息，则第二特性信息是视频特性信息。
在该示例中，匹配信息可以包括附加信息，并且，附加信息可以包括涉及内容的广告信息、频道推荐信息和调查信息之中的至少一项。服务器200可以从诸如广告信息提供服务器、频道推荐信息提供服务器和调查信息提供服务器的各种外部服务器接收广告信息、频道推荐信息、调查信息等，以将接收的信息提供给内容处理装置100。
同时，处理器220可以在从内容处理装置100接收到内容视频信息时，针对在接收到内容识别信息之后从内容处理装置接收的第一特性信息，在与接收的内容识别信息对应的搜索范围之内执行检索。
例如，可以通过内容识别信息来识别当前正从内容处理装置100输出的内容。因此，服务器200可以仅需要在识别的内容的搜索范围之内，检索在接收到内容识别信息之后从内容处理装置100接收的特性信息，而不需要针对整个数据库执行检索。
根据本示例实施例，可以提高内容识别速度。此外，发生多重匹配的概率可以变得更低。
然而，为了防止即使内容处理装置100中的内容被改变服务器200也在先前识别的内容的范围中检索特性信息，内容处理装置100在发生内容被改变的事件时，立即向服务器200通知所述事件。
同时，处理器220可以在与从内容处理装置100接收的第一特性信息匹配的一个第一特性信息被检索到时，控制通信器210将与一个检索到的第一特性信息对应的匹配信息发送到观看数据收集服务器。此外，在从内容处理装置100接收到以上提到的内容识别信息的情况下，处理器100可以控制通信器210将接收的内容识别信息发送到观看数据收集服务器。
根据本示例实施例，内容处理装置100的用户可以获取针对被观看内容的观看数据，并且，这种观看数据可以用于各种目的，例如，用于广告、用于提供用户定制化内容、用于包括媒体多样化决定的公共政策的目的。
本公开的各种示例实施例可以由计算机来实施，或通过记录介质来实施，其中，所述记录介质可以利用使用软件、硬件或其组合的类似于计算机的装置来读取。在硬件方面，可以使用各种处理电路来实施本公开中描述的实施例，诸如作为示例而非限制的以下项之中的至少一项：专用应用集成线路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器和用于执行其他功能的电子单元。在一些情况下，本公开中的示例实施例可以被实施为处理器220自身。在软件方面，在本公开中描述的诸如过程和功能的示例实施例可以被实施为单独的软件模块。每个软件模块可以执行本公开中描述的一个或多个功能和操作。
尽管以上描述的示例所描述的是服务器200仅接收第一特性信息，但是根据另一示例实施例，服务器200可以接收第一特性信息和第二特性信息两者以执行内容识别操作。以下将参照图12来更加详细地描述示例实施例。
图12是示出根据另一示例实施例的内容处理装置100与服务器200之间的示例通信的顺序图。
参照图12，在步骤S1210，内容处理装置100从正在输出的内容提取第一特性信息和第二特性信息。
在步骤S1220，内容处理装置100将提取的第一特性信息和第二特性信息发送到服务器200。
在步骤S1230，服务器200确定与接收的第一特性信息匹配的第一特性信息是否包括在服务器200的数据库中。作为检索结果，在步骤S1240，当多个第一特性信息被检索到时，例如，当确定已经发生多重匹配时，在步骤S1260，服务器200从多个第一特性信息之中检索是否存在与第二特性信息匹配的、与第二特性信息所对应的第一特性信息。例如，使用第二特性信息来过滤检索结果。因此，由于音频特性信息和视频特性信息两者被用于识别内容，所以可以准确地识别实际正在内容处理装置100中输出的内容。
此外，在步骤S1250，在没有发生多重匹配且只有一个检索结果被得到时，服务器200将检索结果发送到内容处理装置100，作为匹配信息。此外，在步骤S1270，服务器将在发生多重匹配之后过滤出的一个匹配信息发送到内容处理装置100，作为一个匹配信息。
在步骤S1280，内容处理装置100基于接收的匹配信息来执行服务。
例如，执行服务可以是执行输出如图7所示的包括在匹配信息中的附加信息的服务，或可以是执行存储匹配信息作为内容识别信息并将内容识别信息发送到观看数据收集服务器的服务。
图13是示出根据另一示例实施例的示例信息提供系统的示图。在本示例实施例中，指纹被用作特性信息。
参照图13，信息提供系统包括内容处理装置100’、匹配服务器200’、事件服务器400、EPG元数据服务器500和捕获服务器600。
内容处理装置100’包括捕获单元104、指纹提取单元103和通信器(例如，包括通信电路)105，其中，捕获单元104从自调谐器输入或外部输入接收的多媒体内容信号捕获音频或视频，指纹提取单元103提取指纹，且通信器105与匹配服务器200’通信。
指纹提取单元103在指纹被提取时同时提取视频指纹和音频指纹，并且，提取的音频指纹被存储在参考数据库102中。
捕获服务器是从内容提取指纹的服务器。例如，捕获服务器600可以捕获实况直播调谐器库或文件/流传输的内容，以提取指纹。
EPG元数据服务器500是提供EPG元数据信息的服务器，且事件服务器400是提供关于覆盖或内容交互服务的事件的服务器。也就是说，以上提到的服务器是能够提供如上所述的附加信息的服务器。
此外，匹配服务器200’是将从捕获服务器600、EPG元数据服务器500和事件服务器400等提供的信息分组的服务器，并且，当指纹被从内容处理装置100提供时，匹配服务器200’找到与所发送的指纹一致的指纹，并提供内容信息。
匹配服务器200’包括存储音频指纹和视频指纹两者的数据库201。当在使用视频指纹的视频匹配期间发生多重匹配时，匹配服务器200’可以将与多重匹配之中的每个的结果对应的音频指纹提供给内容处理装置100’。例如，如图13所示，多重匹配结果1到n之中的每个匹配结果包括内容信息。
在该示例中，多重匹配结果可以包括或不包括事件信息或音频指纹。例如，当音频的特性为静音或不可识别时，多重匹配结果可以不包括音频指纹，而可以包括指示音频指纹的预设消息。可替换地，EPG元数据可以代替音频指纹而被提供给内容处理装置100。
此外，单个匹配结果可以不包括音频指纹。
当发生多重匹配时，内容处理装置100’的匹配单元101可以执行将从匹配服务器200’发送的音频指纹与先前存储在参考数据库102中的音频指纹进行比较的本地音频匹配的功能。
事件管理单元106可以将用于执行事件的信息发送到服务执行单元107。例如，可以发送事件信息以及关于将输出事件信息的时间的信息。服务执行单元107可以提供包括将事件信息连同内容等一起显示的服务。
同时，如果内容处理装置100’是TV，则可以在TV中执行以上提到的服务，但是也可以在经由网络连接到内容处理装置100’的另一装置中执行所述服务，例如，诸如智能电话的移动装置。
图14是示出图13中示出的信息系统系统的示例操作处理流程的流程图。
参照图14，在步骤S1，匹配服务器200’不是从一个或多个内容源提取音频或视频中的一个的指纹，而是同时从音频和视频两者提取指纹，并存储提取的指纹。在步骤S2，利用关于内容的信息对以上提到的指纹进行标记。内容信息是关于实况直播的每个频道的EPG元数据，并且是关于对诸如VoD/OTT的内容的记录内容或定制化内容的信息。
此外，在步骤S3，当从内容处理装置100’产生使用视频指纹的查询时，匹配服务器200’检索存储的视频指纹以找到匹配的指纹。然而，当多个指纹被多重匹配时，在步骤S4，匹配服务器200’将与视频指纹关联的音频指纹添加到多重匹配结果，并将结果发送到内容处理装置。在该示例中，检索处理可以是通过执行索引来利用哈希信息执行快速搜索，或者可以是检索指纹自身。
同时，所有的多重匹配结果可以包括音频指纹，或者，仅有一些多重匹配结果可以包括音频指纹。
发送到内容处理装置100’的数据可以包括连同视频指纹先前从内容处理装置100’发送的链接信息(时间或索引)以及音频指纹。
同时，发送到内容处理装置100’的音频指纹可以仅包括与视频匹配的视频指纹的时间或索引对应的音频指纹，或者也可以包括与视频指纹的时间的预定范围之内的时间对应的音频指纹。
内容处理装置100’在步骤T1捕获视频或音频，并在步骤T2同时从视频和音频提取指纹。此外，在步骤T3，内容处理装置100’将视频指纹发送到匹配服务器200’，并且，音频指纹被存储在内容处理装置100’之内的参考数据库中。同时，在步骤T4，相同内容场景中提取的音频指纹和视频指纹通过时间信息或链接索引而彼此关联，时间信息或链接索引被发送到匹配服务器200’并存储在内容处理装置之内的参考数据库中。
在步骤S3，匹配服务器200’利用从内容处理装置100’接收的视频指纹来执行服务器匹配(视频匹配)。
当从服务器发送的消息仅具有单个匹配的结果或不具有音频指纹时，内容处理装置100’在步骤T6执行事件触发并在步骤T7执行服务。例如，当仅有一个结果时，内容处理装置100’使用接收的内容信息将结果提供给需要该结果的服务。
另一方面，当多重匹配被执行且音频指纹被发送时，在步骤T5，内容处理装置100’执行将多个发送的音频指纹与存储在参考数据库中的音频指纹进行比较的本地音频匹配，并且，当存在匹配指纹时，在步骤T6和步骤T7，内容处理装置100’选择信息作为一个匹配信息，并使用内容信息和事件信息。
作为参考，根据情况，通过单个匹配选择的信息可以再次被发送到观看数据收集服务器。
同时，步骤T6和步骤T7可以根据情况而发生或不发生，而非强制性处理。例如，当不存在将从识别的内容部分输出的附加信息时，可以不发生步骤T6或步骤T7。
如上所述，同时使用视频匹配和音频匹配的混合匹配方法可以允许在内容处理装置100’中执行的本地音频匹配根据在音频装置100’或匹配服务器200’中作出的选择而停止。
以上描述的示例实施例示出在匹配服务器200’中执行视频匹配而在内容处理装置100’中执行音频匹配。然而，还可以实现的是在服务器200’中执行音频匹配而在内容处理装置100’中执行视频匹配。在该示例中，内容处理装置100’将音频指纹而不是视频指纹发送到匹配服务器200’。此外，匹配服务器200’将随附有视频指纹的内容信息或事件信息发送到内容处理装置100’。
根据另一示例实施例，可以实现的是在匹配服务器200’中执行音频匹配和视频匹配两者。在该示例中，内容处理装置100’可以将视频指纹和音频指纹两者发送到匹配服务器200’，并且，在针对接收的视频指纹和音频指纹之中的任何一个(例如，针对视频指纹)执行匹配的同时，当发生多重匹配时，匹配服务器200’可以利用音频指纹来过滤多重匹配的结果以准确地识别内容。例如，还可以实现的是在以上提到的其他示例实施例中描述的内容处理装置的多重匹配处理操作可以在匹配服务器200’中执行。此外，匹配服务器200’可以将与识别的内容对应的附加信息等发送到内容处理装置100’。
图15是示出根据示例实施例的服务器的示例信息提供方法的流程图。
参照图15，在步骤S1510，服务器从内容处理装置接收第一特性信息。在该示例中，第一特性信息是视频特性信息或音频特性信息。
此外，在步骤S1520，服务器检索与接收的第一特性信息匹配的第一特性信息。例如，服务器在从捕获服务器(未示出)提供的特性信息之中检索与第一特性信息匹配的特性信息。
此外，在步骤S1530，服务器确定是否检索到与第一特性信息匹配的多个第一特性信息，并且，当一个第一特性信息被检索到时，在步骤S1550，服务器发送与所述一个特性信息对应的内容信息和/或包括附加信息的一个匹配信息。
当多个第一特性信息被检索到时，在步骤S1540，服务器将与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与所述多个检索到的第一特性信息对应的多个第二特性信息发送到内容处理装置。在该示例中，如果第一特性信息是视频特性信息，则第二特性信息是音频特性信息。如果第一特性信息是音频特性信息，则第二特性信息是视频特性信息。
根据本公开，使用音频特性和视频特性两者的信息匹配方案，由此拓宽了可识别范围。此外，可以提高观看数据收集的准确率，并还可以扩展随同内容来提供交互服务的范围。
同时，根据上述各种示例实施例的方法可以被生成为软件并加载到电子装置上。
例如，可以提供存储执行以下处理的程序的非暂时性计算机可读介质：从正在输出的内容提取第一特性信息和与第一类型信息不同类型的第二特性信息，将提取的第一特性信息发送到服务器，响应于接收到与发送的第一特性信息对应的多个匹配信息，输出所述多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。
根据另一示例实施例，可以提供存储执行以下处理的程序的非暂时性计算机可读介质：从内容处理装置接收第一特性信息，并且，响应于检索到与接收的第一特性信息匹配的多个第一特性信息，将与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与所述多个第一特性信息之中的每个第一特性信息对应的多个第二特性信息发送到内容处理装置。
所述非暂时性可读介质指能够半永久地存储数据且机器可读的介质。例如，非暂时性可读介质可以是CD、DVD、硬盘、蓝光盘、USB、存储卡、ROM等。
尽管参照本公开的各种示例实施例示出并描述了本公开，但是本领域技术人员将理解：在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下，可以进行形式和细节上的各种改变。

Claims (15)

1.一种内容处理装置，包括：
输出单元，包括被配置为输出内容的输出电路；
通信器，包括被配置为与服务器通信的通信电路；以及
处理器，被配置为从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息，控制通信器的通信电路将提取的第一特性信息发送到服务器，并响应于接收到与发送的第一特性信息对应的多个匹配信息，控制输出单元的输出电路输出所述多个匹配信息之中与从所述内容提取的第二特性信息对应的匹配信息。
2.如权利要求1所述的装置，其中，第一特性信息是视频特性信息或音频特性信息，并且，
其中，第二特性信息是与第一特性信息不同类型的视频特性信息或音频特性信息。
3.如权利要求1所述的装置，其中，通信器的通信电路被配置为从服务器接收所述多个匹配信息以及与所述多个匹配信息之中的每个匹配信息对应的多个第二特性信息，并且，
其中，处理器被配置为基于所述多个第二特性信息与从内容提取的第二特性信息的比较结果，控制输出单元的输出电路输出所述多个匹配信息之中与从内容提取的第二特性信息对应的匹配信息。
4.如权利要求1所述的装置，其中，所述多个匹配信息包括附加信息，并且，
其中，所述附加信息包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
5.如权利要求1所述的装置，其中，处理器被配置为响应于预设时间段开始的第一事件、提供内容的源被改变的第二事件、或频道被改变的第三事件的发生，从当前正在输出的内容提取第一特性信息。
6.如权利要求1所述的装置，其中，处理器被配置为控制通信器的通信电路向服务器发送所述多个匹配信息之中与从所述内容提取的第二特性信息对应的匹配信息，作为内容识别信息。
7.一种服务器，包括：
通信器，包括被配置为从内容处理装置接收第一特性信息的通信电路；以及
处理器，被配置为响应于检索到与接收的第一特性信息匹配的多个第一特性信息，控制通信器的通信电路向内容处理装置发送与多个检索到的第一特性信息之中的每个第一特性信息对应的多个匹配信息以及与多个检索到的第一特性信息之中的每个第一特性信息对应的多个第二特性信息。
8.如权利要求7所述的服务器，其中，第一特性信息是视频特性信息或音频特性信息，并且，
其中，第二特性信息是与第一特性信息不同类型的视频特性信息或音频特性信息。
9.如权利要求7所述的服务器，其中，所述多个匹配信息包括附加信息，并且，
其中，所述附加信息包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
10.如权利要求7所述的服务器，其中，处理器被配置为响应于从内容处理装置接收到内容识别信息，针对在接收到内容识别信息之后从内容处理装置接收的第一特性信息，在与接收的内容识别信息对应的搜索范围内执行检索。
11.如权利要求7所述的服务器，其中，处理器被配置为响应于检索到与接收的第一特性信息匹配的一个第一特性信息，控制通信电路向观看数据收集服务器发送与检索到的第一特性信息对应的匹配信息。
12.一种内容处理方法，包括：
输出内容；
从内容提取第一特性信息和与第一特性信息不同类型的第二特性信息；
将提取的第一特性信息发送到服务器；
从服务器接收与发送的第一特性信息对应的多个匹配信息；以及
输出所述多个匹配信息之中与从所述内容提取的第二特性信息对应的匹配信息。
13.如权利要求12所述的方法，其中，第一特性信息是视频特性信息或音频特性信息，并且，
其中，第二特性信息是与第一特性信息不同类型的视频特性信息或音频特性信息。
14.如权利要求12所述的方法，其中，所述接收包括从服务器接收多个匹配信息以及与所述多个匹配信息之中的每个匹配信息对应的多个第二特性信息，并且，
其中，所述输出包括基于所述多个第二特性信息与从所述内容提取的第二特性信息的比较结果，输出所述多个匹配信息之中与从所述内容提取的第二特性信息对应的匹配信息。
15.如权利要求12所述的方法，其中，所述多个匹配信息包括附加信息，并且，
其中，附加信息包括涉及所述内容的广告信息、内容推荐信息、调查信息和URL信息之中的至少一项。
CN201680071997.7A 2015-12-10 2016-12-06 内容处理装置及其内容处理方法、服务器 Active CN108370447B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150176288A KR101757878B1 (ko) 2015-12-10 2015-12-10 컨텐츠 처리장치, 그의 컨텐츠 처리방법, 서버, 서버의 정보 제공방법 및 정보제공 시스템
KR10-2015-0176288 2015-12-10
PCT/KR2016/014199 WO2017099444A1 (en) 2015-12-10 2016-12-06 Content processing apparatus, content processing method thereof, server, information providing method of server and information providing system

Publications (2)

Publication Number Publication Date
CN108370447A true CN108370447A (zh) 2018-08-03
CN108370447B CN108370447B (zh) 2021-06-29

Family

ID=57539082

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680071997.7A Active CN108370447B (zh) 2015-12-10 2016-12-06 内容处理装置及其内容处理方法、服务器

Country Status (5)

Country Link
US (1) US10142679B2 (zh)
EP (1) EP3179409B1 (zh)
KR (1) KR101757878B1 (zh)
CN (1) CN108370447B (zh)
WO (1) WO2017099444A1 (zh)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014134630A1 (en) 2013-03-01 2014-09-04 RedOwl Analytics, Inc. Modeling social behavior
KR102560635B1 (ko) * 2015-12-28 2023-07-28 삼성전자주식회사 컨텐트 인식 장치 및 그 동작 방법
US9924222B2 (en) 2016-02-29 2018-03-20 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on location
US9930406B2 (en) 2016-02-29 2018-03-27 Gracenote, Inc. Media channel identification with video multi-match detection and disambiguation based on audio fingerprint
US10063918B2 (en) 2016-02-29 2018-08-28 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on single-match
US20170371963A1 (en) 2016-06-27 2017-12-28 Facebook, Inc. Systems and methods for identifying matching content
KR20180037826A (ko) 2016-10-05 2018-04-13 삼성전자주식회사 디스플레이 장치, 이의 제어 방법 및 정보 제공 시스템
US11888859B2 (en) 2017-05-15 2024-01-30 Forcepoint Llc Associating a security risk persona with a phase of a cyber kill chain
US10999296B2 (en) 2017-05-15 2021-05-04 Forcepoint, LLC Generating adaptive trust profiles using information derived from similarly situated organizations
US10318729B2 (en) 2017-07-26 2019-06-11 Forcepoint, LLC Privacy protection during insider threat monitoring
US11314787B2 (en) 2018-04-18 2022-04-26 Forcepoint, LLC Temporal resolution of an entity
KR102546026B1 (ko) 2018-05-21 2023-06-22 삼성전자주식회사 전자 장치 및 그의 컨텐츠 인식 정보 획득
KR102599951B1 (ko) 2018-06-25 2023-11-09 삼성전자주식회사 전자 장치 및 그의 제어방법
US11436512B2 (en) * 2018-07-12 2022-09-06 Forcepoint, LLC Generating extracted features from an event
US11755584B2 (en) 2018-07-12 2023-09-12 Forcepoint Llc Constructing distributions of interrelated event features
US11810012B2 (en) 2018-07-12 2023-11-07 Forcepoint Llc Identifying event distributions using interrelated events
US10949428B2 (en) 2018-07-12 2021-03-16 Forcepoint, LLC Constructing event distributions via a streaming scoring operation
US11811799B2 (en) 2018-08-31 2023-11-07 Forcepoint Llc Identifying security risks using distributions of characteristic features extracted from a plurality of events
KR102494591B1 (ko) 2018-09-18 2023-02-03 삼성전자주식회사 전자 장치, 그 제어 방법 및 전자 시스템
US11025659B2 (en) 2018-10-23 2021-06-01 Forcepoint, LLC Security system using pseudonyms to anonymously identify entities and corresponding security risk related behaviors
KR20200059060A (ko) * 2018-11-20 2020-05-28 삼성전자주식회사 디스플레이 장치 및 그 동작 방법
KR20200080387A (ko) 2018-12-18 2020-07-07 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US11025354B2 (en) * 2019-07-19 2021-06-01 Ibiquity Digital Corporation Targeted fingerprinting of radio broadcast audio
CN110740358B (zh) * 2019-09-02 2021-11-19 优地网络有限公司 一种观看路径信息的获取方法及装置
KR20210041904A (ko) * 2019-10-08 2021-04-16 삼성전자주식회사 네트워크 연결을 관리하는 전자 장치 및 그의 제어 방법
KR20210051048A (ko) * 2019-10-29 2021-05-10 삼성전자주식회사 전자 장치 및 그 제어 방법
KR20210057354A (ko) * 2019-11-12 2021-05-21 삼성전자주식회사 전자 장치 및 그 제어 방법
US11489862B2 (en) 2020-01-22 2022-11-01 Forcepoint Llc Anticipating future behavior using kill chains
US11630901B2 (en) 2020-02-03 2023-04-18 Forcepoint Llc External trigger induced behavioral analyses
US11836265B2 (en) 2020-03-02 2023-12-05 Forcepoint Llc Type-dependent event deduplication
US11429697B2 (en) 2020-03-02 2022-08-30 Forcepoint, LLC Eventually consistent entity resolution
US11568136B2 (en) 2020-04-15 2023-01-31 Forcepoint Llc Automatically constructing lexicons from unlabeled datasets
US11516206B2 (en) 2020-05-01 2022-11-29 Forcepoint Llc Cybersecurity system having digital certificate reputation system
US11544390B2 (en) 2020-05-05 2023-01-03 Forcepoint Llc Method, system, and apparatus for probabilistic identification of encrypted files
US11895158B2 (en) 2020-05-19 2024-02-06 Forcepoint Llc Cybersecurity system having security policy visualization
US11704387B2 (en) 2020-08-28 2023-07-18 Forcepoint Llc Method and system for fuzzy matching and alias matching for streaming data sets

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103999473A (zh) * 2011-12-20 2014-08-20 雅虎公司 用于内容识别的音频指纹
CN104137560A (zh) * 2012-02-10 2014-11-05 Lg电子株式会社 图像显示设备及其操作方法
US20150110340A1 (en) * 2013-10-23 2015-04-23 Gracenote, Inc. Identifying video content via color-based fingerprint matching
US20150181263A1 (en) * 2013-01-07 2015-06-25 Gracenote, Inc. Authorizing devices based on identifying content distributor
US20150254497A1 (en) * 2014-03-05 2015-09-10 Samsung Electronics Co., Ltd. Display device, server, and method of controlling the display device

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
US8990876B2 (en) 2010-11-24 2015-03-24 Lg Electronics Inc. Method for receiving enhanced service and display apparatus thereof
US9398322B2 (en) * 2011-04-27 2016-07-19 Time Warner Cable Enterprises Llc Multi-lingual audio streaming
WO2014042368A1 (en) 2012-09-12 2014-03-20 Lg Electronics Inc. Apparatus and method for processing an interactive service
US9769503B2 (en) 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
KR102024168B1 (ko) * 2012-11-27 2019-09-23 삼성전자주식회사 컨텐츠 인식 서버, 단말 장치를 포함하는 컨텐츠 연관 정보 제공 시스템 및 그 제어 방법
KR20150104358A (ko) * 2014-03-05 2015-09-15 삼성전자주식회사 서버 장치 및 그의 핑거프린트 전송 방법, 그리고 방송수신장치
KR20150107464A (ko) * 2014-03-14 2015-09-23 삼성전자주식회사 컨텐츠 처리 장치 및 그 이벤트 제공 방법
KR102155129B1 (ko) * 2014-03-26 2020-09-11 삼성전자주식회사 디스플레이 장치, 디스플레이 장치의 제어 방법 및 디스플레이 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103999473A (zh) * 2011-12-20 2014-08-20 雅虎公司 用于内容识别的音频指纹
CN104137560A (zh) * 2012-02-10 2014-11-05 Lg电子株式会社 图像显示设备及其操作方法
US20150181263A1 (en) * 2013-01-07 2015-06-25 Gracenote, Inc. Authorizing devices based on identifying content distributor
US20150110340A1 (en) * 2013-10-23 2015-04-23 Gracenote, Inc. Identifying video content via color-based fingerprint matching
US20150254497A1 (en) * 2014-03-05 2015-09-10 Samsung Electronics Co., Ltd. Display device, server, and method of controlling the display device

Also Published As

Publication number Publication date
KR101757878B1 (ko) 2017-07-14
KR20170069057A (ko) 2017-06-20
EP3179409A1 (en) 2017-06-14
WO2017099444A1 (en) 2017-06-15
US10142679B2 (en) 2018-11-27
US20170171609A1 (en) 2017-06-15
EP3179409B1 (en) 2019-02-13
CN108370447B (zh) 2021-06-29

Similar Documents

Publication Publication Date Title
CN108370447A (zh) 内容处理装置及其内容处理方法、服务器、服务器的信息提供方法和信息提供系统
US11860915B2 (en) Systems and methods for automatic program recommendations based on user interactions
CN107087224B (zh) 内容同步设备和方法
TWI524195B (zh) 透過關鍵字選擇之連結媒體裝置中的頻道導航技術
CN105578267B (zh) 终端装置及其信息提供方法
CA2924065C (en) Content based video content segmentation
US9241195B2 (en) Searching recorded or viewed content
KR102053821B1 (ko) 방송 스트림 수신 장치 및 방법
KR101382499B1 (ko) 영상 태깅 방법 및 이를 사용하는 영상 재생 장치.
US20130124551A1 (en) Obtaining keywords for searching
WO2018027119A1 (en) Data processing method and live broadcasting method and device
CN105611382A (zh) 产生概要内容的电子设备及其方法
JP5135024B2 (ja) コンテンツのシーン出現を通知する装置、方法およびプログラム
US20170324700A1 (en) Method and system for adding an identifier
US20160277808A1 (en) System and method for interactive second screen
US20150012946A1 (en) Methods and systems for presenting tag lines associated with media assets
US8913869B2 (en) Video playback apparatus and video playback method
US20150358663A1 (en) Personal linear channel
JP2009225207A (ja) 情報処理装置
CN103179459A (zh) 信息回放设备及其控制方法
WO2014103374A1 (ja) 情報管理装置、サーバ及び制御方法
JP2013141050A (ja) コンテンツ推薦サーバ、コンテンツ表示端末、およびコンテンツ推薦システム
KR101334127B1 (ko) 클라이언트 단말기를 이용한 동영상 콘텐츠 공유 서비스 제공 시스템 및 방법
CN108495163A (zh) 视频弹幕朗读装置、系统、方法及计算机可读存储介质
CN108875315A (zh) 变换指纹以检测未授权媒体内容项的方法、系统和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant