CN105874454B - 用于基于场境信息生成搜索结果的方法、系统和介质 - Google Patents

用于基于场境信息生成搜索结果的方法、系统和介质 Download PDF

Info

Publication number
CN105874454B
CN105874454B CN201480071926.8A CN201480071926A CN105874454B CN 105874454 B CN105874454 B CN 105874454B CN 201480071926 A CN201480071926 A CN 201480071926A CN 105874454 B CN105874454 B CN 105874454B
Authority
CN
China
Prior art keywords
query
program
keywords
presented
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480071926.8A
Other languages
English (en)
Other versions
CN105874454A (zh
Inventor
因格里德·麦考利·特罗洛普
安特·厄兹塔斯肯特
雅罗斯拉夫·沃洛维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN105874454A publication Critical patent/CN105874454A/zh
Application granted granted Critical
Publication of CN105874454B publication Critical patent/CN105874454B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63—Querying
    • G06F16/632—Query formulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63—Querying
    • G06F16/632—Query formulation
    • G06F16/634—Query by example, e.g. query by humming
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7834—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using audio features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供了用于基于场境信息生成搜索结果的方法、系统和介质。在一些实施方式中，提供了一种用于呈现搜索结果的方法，所述方法包括：使用硬件处理器接收与当前所呈现的媒体相关的查询；识别当前所呈现的节目；识别与所识别的节目相关联的多个关键词；确定所述多个关键词中与所述查询场境上相关的一个或多个；基于所述查询以及所述场境上相关的一个或多个关键词而获得多个搜索结果；并且使得所述多个搜索结果中的至少一个被呈现给用户。

Description

用于基于场境信息生成搜索结果的方法、系统和介质
相关申请的交叉引用
本申请要求于2014年2月26日提交的美国专利申请序列号14/191034的权益，后者要求于2013年12月31日提交的美国临时专利申请序列号61/922218的权益，其全部内容因此通过引用合并于此。
技术领域
提供了用于基于场境信息生成搜索结果的方法、系统和介质。
背景技术
在观看诸如电影或电视节目的节目时，用户经常具有与节目内容有关的问题，除其它之外，诸如节目中的演员的姓名，节目的位置，节目中还有什么其它演员，与节目有关的细节，节目的情节。找到这些问题的答案经常涉及用户执行多个步骤，诸如找出节目的名称，使用搜索引擎或节目信息的数据库搜索与节目有关的细节，并且对搜索结果或数据库入口进行梳理，但是它们可能与尝试找到答案的用户问题并不相关。这对于用户而言会是一项耗时的过程并且会导致用户错过节目中的重要部分或者以其它方式打扰用户的观看体验。
因此，期望用于基于场境信息生成搜索结果的新的方法、系统和媒体。
发明内容
根据所公开主题的一些实施方式，提供了用于基于场境信息生成搜索结果的机制。
根据所公开主题的一些实施方式，提供了一种用于呈现搜索结果的方法，所述方法包括：使用硬件处理器接收与当前所呈现的媒体相关的查询；识别当前所呈现的节目；识别与所识别的节目相关联的多个关键词；确定所述多个关键词中与所述查询场境上相关的一个或多个；基于所述查询以及所述场境上相关的一个或多个关键词而获得多个搜索结果；并且使得所述多个搜索结果中的至少一个被呈现给所述用户。
根据所公开主题的一些实施方式，提供了一种用于呈现搜索结果的系统，所述系统包括：硬件处理器，其被编程为：接收与当前所呈现的媒体相关的查询；识别当前所呈现的节目；识别与所识别的节目相关联的多个关键词；确定所述多个关键词中与所述查询场境上相关的一个或多个；基于所述查询以及所述场境上相关的一个或多个关键词而获得多个搜索结果；并且使得所述多个搜索结果中的至少一个被呈现给所述用户。
根据所公开主题的一些实施方式，提供了一种包含计算机可执行指令的非暂时性计算机可读介质，所述指令在被处理器所执行时使得所述处理器执行一种用于呈现搜索结果的方法，所述方法包括：接收与当前所呈现的媒体相关的查询；识别当前所呈现的节目；识别与所识别的节目相关联的多个关键词；确定所述多个关键词中与所述查询场境上相关的一个或多个；基于所述查询以及所述场境上相关的一个或多个关键词而获得多个搜索结果；并且使得所述多个搜索结果中的至少一个被呈现给所述用户。
根据所公开主题的一些实施方式，提供了一种用于呈现搜索结果的系统，所述系统包括：用于接收与当前所呈现的媒体相关的查询的装置；用于识别当前所呈现的节目的装置；用于识别与所识别的节目相关联的多个关键词的装置；用于确定所述多个关键词中与所述查询场境上相关的一个或多个的装置；用于基于所述查询以及所述场境上相关的一个或多个关键词而获得多个搜索结果的装置；和用于使得所述多个搜索结果中的至少一个被呈现给所述用户的装置。
在一些实施方式中，所述查询从第一设备被接收并且所述媒体由第二设备进行呈现，并且所述多个搜索结果中的至少一个由第一设备进行呈现。
在一些实施方式中，所述系统进一步包括用于从第一设备接收音频数据的装置；用于使得所接收到的音频数据的第一音频指纹被与和多个节目相对应的音频指纹进行比较的装置；和用于基于所述比较而接收所述第一音频指纹与之相对应的所述多个节目中的第一节目的标识的装置；其中当前所呈现的节目基于所接收到的第一节目的标识来识别。
在一些实施方式中，所述系统进一步包括用于基于所述第一音频指纹与和第一节目相关联的多个音频指纹的比较接收当前所呈现的所述第一节目的部分的装置，其中与所述第一节目相关联的多个音频指纹中的每一个都与所述第一节目的特定部分相对应。
在一些实施方式中，所述用于确定与所述查询场境上相关的所述多个关键词中的一个或多个的装置包括用于确定所述多个关键词中的一个或多个与当前被呈现的所述第一节目的所述部分相关联的装置。
在一些实施方式中，所述用于识别多个关键词的装置包括：用于对与多个节目相关联的关键词数据库查询与所述节目相关联的关键词的装置；和用于响应于数据库查询而从所述关键词数据库接收与所述节目相关联的关键词的装置。
在一些实施方式中，所述用于确定所述多个关键词中与所述查询场境相关的一个或多个的装置包括用于使用自然语言处理来确定所述多个关键词中的一个或多个是响应于所述查询的至少一部分的类型的装置。
在一些实施方式中，所述关键词与在节目中出现的感兴趣对象相对应。
附图说明
在结合以下附图进行考虑时，所公开主题的各种目标、特征和优势能够参考以下对所公开主题的详细描述而被更为全面地理解，其中同样的附图标记识别同样的元素。
图1示出了根据所公开主题的一些实施方式的用于基于场境信息生成搜索结果的过程的示例。
图2示出了根据所公开主题的一些实施方式的一旦接收到搜索查询就提供诸如电视节目的媒体内容的设备以及一旦接收到搜索查询就提供基于该查询和电视节目提供搜索结果的移动设备的说明性示例。
图3示出了根据所公开主题的一些实施方式的适用于用来基于场境信息生成搜索结果的本文中所描述的机制的实施方式的说明性系统的示意图。
图4示出了能够根据所公开主题的一些实施方式而使用的图3的服务器和计算设备之一的详细示例。
图5示出了根据所公开主题的一些实施方式的用于基于场境信息生成搜索结果的流程的示例。
具体实施方式
根据所公开主题的一些实施方式，提供了用于基于场境信息生成搜索结果的机制。
在一些实施方式中，本文中所描述的机制能够接收与当前所呈现的媒体内容相关的查询。例如，该机制能够接收来自智能电话的查询，其中该查询与当前在该智能电话的位置处所呈现的媒体内容相关。在更为特定的示例中，该查询可以包括短语“我能够从哪里得知电视上现在的角色”。
在一些实施方式中，结合该查询，本文中所描述的机制能够接收与当前所呈现的媒体内容相关的媒体数据。例如，该机制能够基于智能电话所记录的音频来接收音频数据和/或音频指纹。在一些实施方式中，该媒体数据能够被本文中所描述的机制用来识别当前所呈现的节目。与正在呈现什么有关的信息能够由本文中所描述的机制基于节目的标识来确定。例如，音频指纹能够被用来确定所呈现的节目的一部分，并且在节目的该部分期间出现在视频数据中的演员(或角色)的标识能够基于该部分来确定。在一些实施方式中，该信息(例如，哪些演员出现在视频数据中)能够由本文中所描述的机制在获得响应于查询的搜索结果时所使用。此外，在一些实施方式中，本文中所描述的机制在获得响应于查询的搜索结果时能够使用来自该查询的场境信息。
在一些实施方式中，本文中所描述的机制能够使得搜索结果被呈现给用户。例如，本文中所描述的机制能够从智能电话以及该智能电话所记录的音频数据接收查询“我能够从哪里得知电视上现在的角色”。本文中所描述的机制能够确定与该音频相对应的节目是“节目Z”并且该音频与人物“演员A”和“演员B”出现在视频数据之中期间的该节目部分相对应。基于该查询的场境，本文中所描述的机制能够确定该查询与在所识别的节目部分期间出现在视频数据中的人物相关，并且该查询与还有其它什么人出现在其中相关。如果无法确定查询被定向到哪个人，则本文中所描述的机制能够针对已经出现的“演员A”和“演员B”二者而获得搜索结果。该机制随后能够使得搜索结果被智能电话所呈现。例如，该搜索结果能够包括演员姓名(例如，“演员A”、“演员B”等)、演员图像、他们出演过什么(例如，按照时间先后顺序、流行度等进行排列)和/或任意其它适当信息。
转向图1，根据所公开主题的一些实施方式示出了用于基于场境信息生成搜索结果的过程的示例100。如图1所示，过程100能够在102处通过接收来自用户的查询而开始，其具有该查询被指向到当前所呈现的媒体的指示。该查询能够使用任意适当的一种或多种技术被接收。例如，在一些实施方式中，过程100能够从被用来形成查询的计算设备接收查询。该查询能够由计算设备使用任意适当的一种或多种技术而形成。例如，该查询能够在与使用诸如智能电话、平板电脑、可穿戴电脑、膝上型电脑等的计算设备上的浏览器进行访问的搜索引擎相关联的搜索域中形成。作为另一个示例，该查询能够在与使用安装在计算设备上的搜索应用(例如，并非web浏览器的一般功能的应用)进行访问的搜索引擎相关联的搜索域中形成。作为又另一个示例，该查询能够在与用于找出并呈现与当前所呈现的媒体内容有关的信息的应用相关联的搜索域中形成。在更为特定的示例中，该查询能够在音频指纹应用的搜索域中形成，该音频指纹应用接收音频数据并且使用该音频数据识别当前所呈现的媒体。作为又另一个示例，该查询能够由计算设备上所运行的操作系统或其它应用(在一些实施方式中，其可以在后台运行)形成，上述应用能够对该查询进行解释并且与搜索引擎等进行通信从而获得搜索结果。
在一些实施方式中，能够使用任意适当技术来形成该搜索查询。例如，用来形成该查询的设备能够接收用户利用鼠标或用于录入查询文本的任意其它适当设备所输入的文本。作为另一个示例，形成查询的设备能够接收音频(例如，由用户讲出该查询)，并且能够基于该音频形成查询(例如，通过对该音频进行处理以提取出单词并且基于该单词创建查询)。
在一些实施方式中，过程100能够使用任意适当的一种或多种技术接收该查询被定向到当前所呈现的媒体的指示。例如，在102处所接收的查询可以包括该查询被指向到当前所呈现媒体的指示。在更为特定的示例中，该查询能够包括诸如“on TV now”、“thisshow”、“this movie”、“on screen now”的短语和/或指示该查询的答案与当前所呈现的媒体相关的任意其它短语。在一些实施方式中，该查询必须包括特定短语(或特定短语的近似变化形式)以发起与当前所呈现媒体内容有关的查询。
作为另一个示例，在102处所接收的查询能够从被编程以形成被指向到当前所呈现媒体的查询的应用或网页所接收。在这样的示例中，过程100能够基于该查询源自于的应用和/或网页来确定该查询与当前所呈现的媒体相关。
在104处，过程100能够接收与当前所呈现的媒体相对应的第一媒体数据。在一些实施方式中，过程100能够接收音频数据，后者包括当前所呈现的节目的音频数据。例如，用来形成在102处所接收的查询的计算设备能够记录当前呈现该媒体内容的设备所呈现的媒体内容的音频的一部分。该音频能够被执行过程100的设备所接收。作为另一个示例，过程100能够接收基于从所呈现媒体内容记录的音频数据的一部分生成的媒体内容的音频指纹。在这样的示例中，能够由被用来形成查询的设备或者诸如运行用于从音频数据生成音频指纹的过程的服务器的另一个设备来创建该音频指纹。
在一些实施方式中，过程100能够接收与当前所呈现的媒体内容相关联的元数据。例如，过程100能够接收与当前所呈现的媒体内容相关联的电子节目指南。作为另一个示例，过程100能够接收与节目相关联的元数据(例如，从内容提供者随节目一起被传送的元数据)。
在一些实施方式中，过程100能够接收图像数据，后者包括当前所呈现的媒体内容的图像数据中的至少一部分。例如，该图像数据能够包括被用来形成在102处所接收的查询的设备所捕捉到的媒体内容的视频数据。例如，被用来形成在102处所接收的查询的计算设备能够记录由呈现该媒体内容的设备所呈现的媒体内容的视频的一部分。该视频能够被执行过程100的设备所接收。作为另一个示例，过程100能够接收根据从所呈现媒体内容而创建的视频数据的一部分而创建的该媒体内容的视频指纹。在这样的示例中，能够由被用来形成该查询的设备或者诸如运行用于从视频数据生成视频指纹的过程的服务器的另一个设备来创建该视频指纹。
在一些实施方式中，过程100能够接收与所呈现媒体内容有关的数据，其能够包括与该媒体内容有关的各种信息。例如，与该媒体内容有关的数据可以包括从其接收该内容的服务提供者，在其上呈现该内容的频道，呈现该内容的时间，该内容的标题，和/或与所呈现媒体内容有关的任意其它适当数据。在一些实施方式中，与媒体内容有关的数据能够从被用来在102处形成查询的计算设备所接收，后者能够使用任意适当技术生成该数据。例如，被用来形成查询的计算设备能够通过捕捉音频数据(和/或生成音频指纹)并且使用基于音频数据识别媒体数据的服务来识别节目从而识别出该节目。作为另一个示例，被用来形成查询的计算设备能够提示用户录入与当前所呈现的媒体内容有关的信息，诸如内容提供者(例如，提供该内容的有线电视、卫星或电话提供者，或者该内容是否作为广播而经由天线被接收)，该节目现在和/或曾经在其上被呈现的频道(例如，内容提供者的频道)，该内容被呈现的日期和/或时间(其可以是当前正从内容提供者被接收并呈现的内容的当前时间)，等等。
在106处，过程100能够基于在104处所接收的第一媒体数据而识别所呈现的节目。能够使用任意适当的一种或多种技术来识别媒体数据。例如，在一些实施方式中，在104处所接收的音频数据能够被用来生成当前所呈现的媒体内容的音频指纹。能够将该音频指纹与已知的与特定媒体内容相对应的音频指纹进行比较，并且当前所呈现的媒体内容能够基于该比较而被识别。作为另一个示例，在104处所接收的音频指纹能够被用来识别媒体内容(例如，而不是接收音频并且基于所接收的音频生成音频指纹)。作为又另一个示例，能够将在104处所接收的电子节目指南信息和/或元数据与已知与特定媒体内容相对应的电子节目指南信息和/或元数据进行比较，并且当前所呈现的媒体内容能够基于该比较而被识别。作为又另一个示例，能够将在104处所接收的图像数据、视频数据和/或视频指纹数据与已知与特定媒体内容相对应的类似数据进行比较，并且当前所呈现的媒体内容能够基于该比较而被识别。在更为特定的示例中，在104处所接收的图像数据能够包括编码，诸如条形码、QR码和/或用于对信息进行视觉编码的任意其它适当类型的视觉编码。作为另一个更为特定的示例，在104处所接收的图像数据和/或视频数据能够包括被速记编码的数据，并且过程100能够使得该被编码的数据从图像数据和/或视频数据中被提取。作为进一步的示例，与在104处所接收的节目有关的数据能够被用来识别当前所呈现的媒体内容和/或能够与已知与特定媒体内容相对应的节目数据进行比较，并且当前所呈现的媒体内容能够基于该比较而被识别。
在一些实施方式中，过程100能够访问与已知节目相对应的媒体数据(例如，音频指纹、元数据、视频指纹和/或任意其它适当媒体数据)的数据库。例如，为了在106处识别当前所呈现的媒体，过程100能够访问该数据库以便将在104处所接收的音频指纹与与已知节目相对应的数据库中的音频指纹进行比较。
在一些实施方式中，过程100能够识别与当前所呈现媒体相对应的节目部分。例如，媒体数据的数据库能够识别与当前所呈现媒体相对应的节目部分。在更为特定的示例中，能够将从节目所生成的音频指纹与具有与该音频指纹相对应的音频数据的节目部分相关联。如以下结合图3所描述的，音频指纹能够从接收自内容源的节目的音频所生成。这些音频指纹中的每一个能够与具有与该音频指纹相对应的音频的节目部分相关联。例如，这些音频指纹能够关联于识别该节目以及该节目中该音频指纹与之相对应的部分的信息而被存储在音频指纹的数据库中。一旦将当前所呈现媒体的音频指纹与已知节目的音频指纹的数据库进行比较，过程100能够识别当前所呈现媒体与之相对应的节目，以及当前所呈现媒体与之相对应的该节目部分。在一些实施方式中，能够使用时序信息(例如，具有与音频指纹相对应的音频的节目内的时间)来识别该节目的部分。
在一些实施方式中，与当前所呈现媒体内容相对应的节目部分能够使用(例如，除了音频指纹之外的)任意其它适当信息来确定，诸如视频指纹、电子节目指南数据、节目元数据、来自呈现节目的设备的时序信息、来自用于识别当前所呈现媒体内容的服务的时序信息，等等。
在108处，过程100能够识别与在106处所识别的节目相关联的关键词。在一些实施方式中，关键词能够与来自节目的实体和/或节目自身相对应并且对其进行表示。例如，关键词能够包括与该节目相关的人、地方、事件、对象、生物、标志、特性、特征、情节、音乐、非常规或科学用词、产品、品牌和/或任意其它适当实体。这些关键词能够以各种方式与节目相关联。例如，人或地标的图像能够被包括在与节目相关联的视频数据中。作为另一个示例，能够在节目中对人或事件加以讨论(例如，人的姓名或识别事件的单词能够被包括在与节目相关联的音频数据和/或字幕数据中)。作为又另一个示例，能够通过与该节目相关联的视频数据和/或通过与该节目相关联的音频数据而识别节目中的地方。作为又另一个示例，关键词能够被包括在与节目相关联的文本中，诸如元数据、电子节目指南数据和/或与节目相关联的任意其它文本。应当注意的是，之前仅是示例并且所要认识到关键词可以以许多不同方式与节目相关联。
如以下结合图3所描述的，能够使用任意适当技术将特定关键词与所识别节目进行关联。例如，在一些实施方式中，关键词能够基于从元数据所提取的节目的演员表、基于电子节目指南数据而与节目相关联，和/或通过搜索节目的演员表信息的数据库而被找到，所述节目能够使用节目的标题(或者与节目有关的任意其它适当信息)进行搜索。作为另一个示例，关键词能够基于用来识别来自关联于该节目的视频数据的一个或多个截屏中所包括的人的面部识别技术而与该节目相关联。作为又另一个示例，关键词能够基于用来识别从与节目相关联的视频数据中的一个或多个截屏中所包括的人的面部识别技术而与该节目相关联。作为又另一个示例，关键词能够基于用来识别从与节目相关联的视频数据所提取的一个或多个截屏中所包括的地标的图像识别技术而与该节目相关联。
在一些实施方式中，能够将关键词与节目的特定部分相关联。例如，出现在节目中的人的标识可以是关键词，并且这个人出现在节目之中时能够将一个或多个部分与该关键词相关联。如果该同一个人也是该节目的演员表成员，则也能够将这个人的关键词与作为整体的该节目相关联，而并不是该节目的特定部分与该关键词相关联。作为另一个示例，能够将出现在元数据或电子节目指南数据中的关键词与节目相关联而并不与该节目的特定部分相关联。作为又另一个示例，能够将出现节目中的文本与该文本出现在视频数据、音频数据、字幕数据等的节目部分相关联。
在一些实施方式中，与节目相关联的关键词例如能够与各种节目相关联而被存储在关键词数据的数据库中。在一些实施方式中，能够将关键词在节目场境中与之相对应的实体的类型与关键词相关联。例如，如果关键词与出现在节目中的人相对应，则该关键词能够被识别为人物关键词、演员表关键词等。作为另一个示例，如果关键词与出现在节目中的建筑物或地标相对应，则该关键词能够被识别为建筑关键词、地标关键词等。在一些实施方式中，过程100能够在108处访问关键词数据库以识别与在106处所识别的节目相关联的关键词。
在110处，过程100能够确定所识别关键词中与查询场境相关和/或与在104处所接收的第一媒体数据场境上相关的的一个或多个。在一些实施方式中，过程100能够使用自然语言处理来确定特定关键词是否与查询场境上相关。例如，如果查询包括短语“who is”或类似短语，则过程100能够确定场境上相关的关键词是对应于人的关键词。作为另一个示例，如果查询包括短语“哪里还有电视里这个人？”，则过程100能够确定场境上相关的关键词是与人相对应的关键词，因为该查询要求识别出当前所呈现媒体中的人。作为又另一个示例，如果查询包括短语“when”，则过程100能够确定场境相关的关键词是对应于时间的关键词。能够使用用于确定相关的关键词的类型的任意适当技术。例如，本文中所描述的机制能够使用任意适当的自然语言处理来确定何种类型的关键词场境对应于该查询。在一些实施方式中，查询能够被提交至自然语言处理服务器以便执行自然语言处理并且确定该查询的场境。
在一些实施方式中，过程100能够基于在104处所接收到的第一媒体数据来确定特定关键词是否与查询场境相关。例如，如以上结合106处所描述的，该第一媒体数据能够被用来确定当前所呈现的媒体与之相对应的节目部分。在一些实施方式中，基于该查询的场境，过程100能够确定该查询是否是时间敏感查询。例如，时间敏感查询能够与当前所呈现的事物相关而不是总体上与节目相关。在更为特定的示例中，“现在电视上是谁？”能够是时间敏感查询，而“这部影片何时上映”则可能不是时间敏感的，因为其总体上应用于节目而并不是当前所呈现的节目部分。
在一些实施方式中，过程100能够确定查询和/或第一媒体数据的场境，并且在识别关键词时使用该场境，而不是在108处识别与节目相关联的关键词，并且在110处识别场境上相关的关键词。例如，过程100能够确定第一媒体数据与节目的特定部分相对应，并且随后仅识别与该特定部分相对应的关键词或者整体上与节目相对应(例如，并不与节目的任何特定部分相对应)的关键词。作为另一个示例，过程100能够确定查询与人相关，并且能够仅识别与人相对应的关键词(例如，并不识别与地标、地方等相对应的关键词)。
在112处，过程100能够基于查询的至少一部分以及在110处所识别的场境上相关的关键词而获得搜索结果。在一些实施方式中，过程100能够访问搜索引擎以获得与在102处所接收的查询以及在110处所识别的场境上相关的关键词中的至少一个两者在场境上相关的搜索结果。例如，如果查询与当前所呈现的视频中所包括的人相关，诸如“电视上的那个人是谁？”，过程100能够使用该查询以及在110处所识别的场境上相关的关键词(例如，与当前所呈现节目部分相关联的演员表成员)来访问搜索引擎。在一些实施方式中，在110处所识别的场境上相关的关键词能够作为对搜索的约束而被传递至搜索引擎。例如，搜索引擎能够被约束为确定仅与场境上相关的关键词的搜索结果相关。
在一些实施方式中，该搜索结果能够包括与在110处所识别的场境上相关的关键词有关的信息，诸如与该关键词有关的图像、描述性信息(例如，与演员表成员有关的传记信息，与地标有关的背景信息等)，和/或与关键词有关的任意其它相关信息。
在114处，过程100能够使得场境上相关的关键词之间的搜索结果中的一个或多个和/或与场境上相关的关键词中的一个或多个相关联的信息得以被呈现。在一些实施方式中，任意适当数量的搜索结果都能够响应于查询而被呈现。例如，针对在110所识别的场境上相关的关键词中的每个的搜索结果都能够被呈现给用户。作为另一个示例，搜索结果中的每个都能够与信心参数(和/或任意其它适当参数)相关联，后者指示特定搜索结果与该查询相关的概率。在这样的示例中，仅能够呈现具有高于阈值信心的信心参数的搜索结果，和/或能够呈现预定数量的具有最高信心参数的搜索结果。
在一些实施方式中，过程100能够通过向形成并发送查询的设备传送结果而使得搜索结果得以被呈现。例如，如果查询形成于移动计算设备上并且使用web浏览器被发送，则过程100能够将结果传送至该移动设备，后者进而能够使用web浏览器(或者任意其它适当应用)在该移动设备的显示器上呈现该搜索结果。
在一些实施方式中，所使得在114处被呈现的搜索结果能够包括指向与该搜索结果与之相关联的关键词有关的进一步的信息的超链接。例如，针对演员的搜索结果能够包括指向网页的链接，该网页包括与该演员有关的传记信息。作为另一个示例，针对演员的搜索结果能够包括指向网页的链接，该网页包括关于该演员出现于其中的其它节目的信息。
图2示出了呈现媒体内容的设备以及被用来形成有关媒体内容的查询的设备的示例。如图2所示，具有显示器204的媒体播放设备202能够使用显示器204和扬声器(未示出)来呈现诸如电影的媒体内容。
除其它之外，当前由媒体播放设备202所呈现的媒体能够包括示出人206和地标208的视频。例如，如以上结合108所描述的，人206和地标208的标识可以是与节目(例如，“Movie about Paris”)以及该节目的特定部分(例如，与时间0:18:13相关联的部分)相关联的关键词。当前由媒体播放设备202所呈现的媒体还可以包括诸如对话、声轨、背景噪声等的音频。
在一些实施方式中，如图2所示，移动设备210可以呈现用于形成要在执行搜索时使用的查询的用户界面212。例如，在移动设备210上运行的web浏览器能够被用来访问搜索引擎网页，后者具有能够在其中形成查询的搜索域214。在一些实施方式中，移动设备210能够基于针对与移动设备210相关联的键盘(未示出)的输入和/或基于使用与移动设备210相关联的麦克风216所接收的音频数据而在搜索域214中形成查询。
如图2所示，用户能够讲出查询218，后者能够被麦克风216记录为音频数据。在图2所示的示例中，所讲出的查询218可以包括短语“现在电视上的这人是谁？”。移动设备210能够使用麦克风216所记录的音频数据来形成要在搜索域214中使用的搜索查询。能够使用任意适当的一种或多种技术从麦克风216所记录的音频数据形成搜索查询，诸如话音识别技术。这样的话音识别技术能够由移动设备210所执行或者由用于执行话音识别技术的设备来执行。例如，移动设备210能够将麦克风216所记录的音频数据(和/或从该音频数据所创建的其它适当数据)发送至执行话音识别的服务器。这些话音识别技术的结果能够被用来形成要在搜索域214中使用的查询。
在一些实施方式中，一旦选择搜索用户界面元素220(例如，用户界面212中的按钮)能够发起搜索。除此之外或替选地，移动设备210能够响应于对诸如键盘上的“done”或“enter”按键的任意其它适当用户界面元素的选择而发起搜索，和/或能够响应于形成查询(例如，响应于完成话音识别技术)而发起搜索。在一些实施方式中，能够响应于任意其它适当条件和/或标准被满足和/或条件和/或标准的任意适当组合被满足而发起该搜索。
在一些实施方式中，一旦发起搜索，移动设备210能够使得使用用户界面212所形成的查询被传送至远程设备(例如，服务器)，后者能够响应于该查询而执行搜索和/或生成搜索结果。例如，该服务器能够使用过程100来生成搜索结果以便由移动设备210进行呈现。
如图2所示，搜索结果222和224能够作为响应于使用用户界面212所形成的查询的搜索结果而被呈现。例如，用户界面212能够被用来基于所讲出的查询218而形成查询。在一些实施方式中，移动设备218能够记录音频(例如，使用麦克风216)以便在识别当前所呈现(例如，由媒体播放设备202)的媒体时使用。例如，响应于移动设备218(或向其提交该查询的远程服务器)确定该查询被指向到当前所呈现的媒体，移动设备218能够记录关联于显示器204所呈现的视频而被呈现的音频的一部分。该音频随后能够被执行过程100的设备用来识别当前在移动设备210所分享的位置所呈现的媒体。
在一些实施方式中，搜索结果222和224能够从执行过程100的设备返回至移动设备210。如所示出的，搜索结果222能够与在接收到所讲出的查询218时所呈现的节目部分期间出现在显示器204上的演员(演员A)相对应。如以上结合图1(例如，在108处)所描述的，人206的标识能够是与当前所呈现的节目部分相关联的关键词。搜索结果224能够与在与当前所呈现的部分(例如，与移动设备210所记录的音频相关联的部分)紧密相关的节目部分期间出现在显示器204上的另一个演员(演员B)相对应。
在一些实施方式中，搜索结果222和224能够分别包括与演员A和演员B相关联的图像以及传记信息。如以上结合图1所描述的，搜索结果222和224能够包括超链接，其在被选择时使得移动设备218呈现与搜索结果相关的附加信息。例如，如果用户选择了搜索结果222，则与搜索结果222相关联的超链接能够使得移动设备210请求包括与演员A有关的附加信息的网页226，如图2所示。
转向图3，根据所公开主题的一些实施方式所示出的用于基于场境信息生成搜索结果的机制在其上的系统的总体示意图的说明性示例300。如图3所示，系统300可以包括一个或多个计算设备310。计算设备310能够由一个或多个通信链路308连接至通信网络306，后者能够经由通信链路304被链接至服务器302。在一些实施方式中，计算设备304和服务器302能够经由通信链路312被链接至一个或多个内容源314。
系统300能够包括一个或多个服务器302。服务器302可以是用于提供对本文中所描述的机制的访问的任意适当服务器，诸如处理器、计算机、数据处理设备和/或这样的设备的任意适当组合。例如，本文中所描述的机制能够被分布至多个后端组件和多个前端组件和/或接口。在更为特定的示例中，诸如数据集合和数据分布、索引和搜索信息和/或任意其它适当组件的后端组件能够在一个或多个服务器302上被执行。在另一个更为特定的示例中，诸如用于接收搜索查询、收集要在识别当前所呈现媒体时使用的媒体数据、呈现搜索结果的用户界面和/或能够在一个或多个计算设备310上被执行的任意其它适当组件。
在一些实施方式中，计算设备310和服务器302中的每一个能够是诸如计算机的通用设备或者诸如客户端、服务器等的专用设备。这些通用或专用设备中的任意都能够包括任意适当组件，诸如硬件处理器(其可以是微处理器、数字信号处理器、控制器等)、存储器、通信接口、显示控制器、输入设备等。例如，计算设备310能够被实现为智能电话、平板计算机、可穿戴计算机、电视、智能电视、机顶盒、数字媒体接收器、游戏机、个人计算机、膝上型计算机、个人数字助理(PDA)、家庭娱乐系统、立体声接收器、扬声器、投影仪、游戏机，和/或任意其它适当设备，和/或它们的任意适当组合。在一些实施方式中，例如，能够使用诸如智能电视、机顶盒、数字媒体接收器等的第一计算设备310来呈现节目，并且诸如平板计算机、智能电话、可穿戴计算机、PDA、游戏机等的第二计算设备310能够形成查询、记录和/或传送与第一计算设备所呈现的节目有关的媒体数据，使得基于该查询和/或与所呈现节目有关的媒体数据来执行搜索，呈现与该查询场境上相关(例如，基于过程100生成)的搜索结果，和/或执行任意其它适当功能。
在一些实施方式中，内容源314可以是任意适当的内容源，诸如有线(或电话)电视内容源、卫星电视内容源、按需节目内容源、加值(over-the top)节目内容源、互联网内容源、流节目内容源，任意其它适当内容源和/或它们的任意适当组合。
在一些实施方式中，通信网络306可以是任意适当计算机网络或者这样的网络的组合，包括互联网、内联网、广域网(WAN)、局域网(LAN)、无线网络、数字订户线路(DSL)网络、帧中继网络、异步传输模式(ATM)网络、虚拟私人网络(VPN)等。通信链路304、308和312可以是适于在计算设备310、服务器302和/或内容源314之间通信数据的任意通信链路，所述内容源314诸如网络链路、拨号链路、无线链路、硬线链路，任意其它适当通信链路和/或这样的链路的任意适当组合。计算设备310能够使用本文中所描述的技术，后者能够允许本文中所描述的机制的特征得以被使用。计算设备310、服务器302和/或内容源314能够位于任意适当位置。
在一些实施方式中，服务器302能够包括能够互连的一个或多个模块320-332和/或数据库340-344以便执行本文中所描述的机制的各种功能和/或促进本文中所描述的用于基于场境信息生成搜索结果的机制。
在一些实施方式中，例如，前端服务器模块320能够执行以上结合图1和图2所描述的用于基于场境信息生成搜索结果的过程。
在一些实施方式中，例如，如以上结合图1所描述的，捕捉模块322能够接收与节目有关的媒体数据，诸如视频数据、音频数据、电子节目指南数据、元数据等。除此之外或替选地，捕捉模块322能够从提供自内容源的内容提取各种媒体数据。例如，这样的所提取的媒体数据能够包括音频指纹、字幕、视频截屏等。例如，该信息能够被存储在数据库(未示出)中以便由前端模块320在识别关键词和/或各种其它操作中使用。
在一些实施方式中，例如，匹配模块324能够从捕捉模块322接收节目的音频指纹数据，并且将所接收到的音频指纹数据存储在指纹数据库342中。例如，指纹数据库342能够被用来在如以上所描述的图1的106处识别节目，以识别当前所呈现并且与在102处所接收的查询相关的媒体。
在一些实施方式中，注释模块326能够基于捕捉模块322所捕捉的数据和/或捕捉模块322所提取的诸如音频指纹、视频截屏、字幕等的信息而提取与节目相关联的一个或多个关键词。例如，注释模块326能够包括关键词提取模块328，其能够使用识别模块330从接收自捕捉模块的数据和/或信息提取关键词，上述识别模块330被配置为执行诸如面部识别技术、图像识别技术、光学字符识别技术等的识别技术来识别在关键词与之相关联的节目中被提及和/或出现的人、对象、地标、地方和/或任意其它适当关键词。
在一些实施方式中，关键词提取模块328能够提取关键词，诸如以上结合图1所描述的关键词。例如，关键词提取模块328能够提取人的标识、地方、事件、对象、生物、标志、特性、特征、情节、音乐、非常规或科学词语、产品、品牌和/或任意其它适当关键词。除此之外或替选地，关键词提取模块328能够使用识别模块330来识别关键词，例如，后者能够将来自(例如，由捕捉模块322所捕捉的)视频截屏中的脸部的图像的信息与已知脸部信息(例如，已知个人的脸部信息)的数据库进行比较以确定图像中的一个或多个人的标识。类似地，例如，识别模块330能够将来自诸如建筑物、雕像、产品包装、电子器件、水果蔬菜或者任意其它适当对象的对象的图像的信息与已知对象信息的数据库进行比较以确定图像中的对象的标识。如以上所描述的，识别模块330能够使用任意适当的识别技术来促进由关键词提取模块328和/或注释模块326从节目相关数据进行关键词提取。
在一些实施方式中，例如，注释模块326能够将提取自音频数据或视频数据的关键词与关键词在其间出现在这样的数据之中的节目部分相关联。例如，关键词以及与各种节目相关联的那些关键词能够被存储在关键词数据库中，后者能够利用注释模块326所生成的信息被周期性更新和/或能够被定期更新以去除与在预定时间段内已经不再(例如，由内容源314)呈现的节目相对应的关键词、节目和/或关键词与节目之间的关联。
在一些实施方式中，在112处获得搜索结果时能够使用搜索模块332。例如，搜索模块332能够使用在102处所接收的查询和/或在110处所识别的场境上相关的关键词作为输入以便由搜索引擎用来生成与该查询场境上相关的搜索结果。
在一些实施方式中，电子节目指南(EPG)数据库340能够存储与能够由诸如内容发行者或广播者的第三方所提供的电子节目指南数据相对应的指南数据。此外，例如，EPG数据库340能够提供与从内容源314所提供的一个或多个节目有关的信息。
应当注意的是，虽然模块320-332和数据库340-344被示为包括于服务器302之中，但是这些模块和/或数据库能够以不同组合的形式被提供在不同服务器(和/或其它适当计算设备)中。例如，搜索模块332能够在第一服务器上被提供，而模块320-330则能够在第二服务器上被提供。作为另一个示例，每个模块能够在不同服务器上被提供。应当注意的是，这些仅是作为示例，并且所描述的模块能够以任意适当方式进行组织。
还应当注意的是，模块320-332能够作为本文中所描述的机制的一部分而被包括，能够是单独的机制，和/或能够是任意其它适当机制的部分。例如，在一些实施方式中，能够使用任意适当技术将关键词与节目相关联而并非必然通过同样执行过程100的一方被关联。在更为特定的示例中，诸如公司的一方能够使用任意适当技术将关键词与来自内容源314的节目相关联并且能够使得与节目相关联的关键词能够在任意适当情况下被他人所访问。在另一个更为特定的示例中，公司能够维护与节目相关联的关键词和/或关键词与哪些节目部分相关联的数据库，并且能够允许数据库被自由访问或者为了一些形式的酬劳而被访问。
图4图示了根据所描述主题的一些实施方式的能够被用来实施图4中所描绘的服务器302和计算设备310之一的硬件的示例400。参考图4，计算设备310能够包括能够互连的硬件处理器412、显示器414、输入设备416和存储器418。在一些实施方式中，存储器418能够包括用于存储用来控制硬件处理器412的计算机程序的存储设备(诸如非暂时性计算机可读介质)。
硬件处理器412能够使用该计算机程序来在显示器414上呈现内容和/或用户界面，后者允许用户访问本文中所描述的机制并且通过通信链路308发送并接收数据。还应当注意的是，通过通信链路308或者任意其它通信链路所接收的数据能够从任意适当源被接收。在一些实施方式中，例如，硬件处理器412能够使用传送器、接收器、传送器/接收器、收发器或者任意其它适当通信设备来使得数据通过通信链路308和/或任意其它通信链路被发送和接收。输入设备416能够是计算机键盘、麦克风、鼠标、轨迹球、小键盘、远程控制，或者任意其它适当输入设备和/或它们的任意适当组合。除此之外或替选地，输入设备416可以包括能够接收输入(例如，使用手指、输入笔等)的触摸屏显示器414。
服务器302可以包括能够互连的硬件处理器422、显示器424、输入设备426和存储器428。在一些实施方式中，存储器428能够包括用于存储通过通信链路304或通过其它链路所接收的数据的存储设备，并且处理器422能够接收例如计算设备310的一个或多个用户所传送的命令和数值。存储设备能够进一步包括用于控制硬件处理器422的服务器程序。
本文中所描述的用于基于场境信息生成搜索结果的机制能够作为软件、固件、硬件和/或它们的任意适当组合而在计算设备310和/或服务器302中被实现。
在一些实施方式中，服务器302能够被实现为一个服务器或者能够作为任意适当数量的服务器进行分布。例如，多个服务器302能够在各个位置被实现以提高可靠性，本文中所描述的机制的功能，和/或服务器能够与计算设备310进行通信的速度。
图5示出了根据所公开主题的一些实施方式的用于基于场境信息生成搜索结果的流程的示例500。如图5所示，在502处，第一计算设备310-1可以呈现媒体内容。例如，第一计算设备310-1可以是电视，后者包括用于呈现视频的显示器以及应用于呈现音频的扬声器。虽然流程500结合由电视所呈现的媒体被描述，但是这仅仅是一个示例并且媒体能够由任意适当的一个或多个设备所呈现。
在504处，第二计算设备310-2能够接收查询输入。如以上所描述的，能够使用任意适当的一种或多种技术来接收查询输入。例如，查询能够作为例如使用键盘所输入的文本而被接收，上述键盘可以是物理键盘或虚拟键盘。作为另一个示例，查询能够作为经由麦克风所接收并且使用话音识别技术进行解释的语音数据而被接收。除此之外或替选地，能够使用任意适当的应用来接收查询输入。例如，如结合图2所描述的，该查询能够结合用于形成查询的用户界面而被接收。作为另一个示例，该查询能够由第二计算设备310-2作为针对个人助理应用等(例如，能够基于场境处理各种查询并且能够基于该查询发起处理的应用)的查询而被接收。在更为特定的示例中，这样的查询能够通过用户讲出特定单词或短语而被发起。
在506处，第二计算设备能够基于在504处所接收的查询输入而形成查询。例如，该查询能够被格式化或者以其它方式被准备以便在获得搜索结果时使用。在508处，第二计算设备310-2能够确定该查询是否与当前所呈现的媒体相关。在506处，第二计算设备310-2能够使用任意适当技术来确定该查询是否与当前所呈现(例如，由电视310-1)的媒体内容相关。例如，如以上结合102所描述的，本文中所描述的机制能够基于查询的场境、接收查询输入的应用和/或基于任意其它标准来确定该查询与当前所呈现的媒体内容相关。在一些实施方式中，对查询是否与当前所呈现的媒体内容相关的确定能够由第二计算设备310-2来做出。例如，第二计算设备310-2能够基于被用来形成查询的应用、基于指示该查询被定向到当前所呈现的媒体的用户输入和/或以任意其它适当基础来做出该确定。除此之外或替选地，诸如服务器302的执行本文中所描述的机制的设备能够做出该查询是否与当前所呈现的媒体内容有关的确定。例如，第二计算设备310-2可以将查询发送到服务器302，并且服务器302可以基于查询的场境、基于被用来形成查询的应用和/或以任意其它适当基础而确定该查询与当前所呈现的媒体相关。服务器302随后能够向第二计算设备310-2通知该查询与当前所呈现的媒体内容相关。
如果该查询并不与当前所呈现的媒体内容相关(508处的“否”)，则流程500能够继续进行至514，在514处能够基于在506处所形成的查询而请求搜索。否则，如果查询与当前所呈现的媒体内容相关(508处的“是”)，则流程500能够继续进行至510。
在510处，响应于确定该查询与当前所呈现的媒体相关，第二计算设备310-2能够记录媒体数据以便要在识别当前所呈现的媒体时使用。如以上所描述的，该媒体数据能够是在识别当前所呈现的媒体时所使用的任意适当媒体数据。如图5中的虚线所示，与第一计算设备310-1当前所呈现的媒体相对应的媒体数据能够被送至第二计算设备310-2。能够使用任意适当技术来将媒体数据送至第二计算设备310-2。例如，第二计算设备310-2的麦克风能够被用来记录所呈现媒体内容的音频数据。作为另一个示例，第二计算设备310-2的图像传感器能够被用来记录所呈现媒体内容的图像数据和/或视频数据。作为又另一个示例，第二计算设备310-2能够使用诸如短距离无线通信(例如，蓝牙、无线USB等)、利用IEEE802.11无线通信标准群组中的一种或多种进行编译的无线通信技术和/或任意其它适当无线通信技术从计算设备310-1接收媒体数据。作为又另一个示例，包括第一计算设备310-1当前所呈现的媒体内容的一个或多个信号也能够被提供至第二计算设备310-2，后者能够记录来自该信号的任意适当信息。在更为特定的示例中，包括第一计算设备310-1当前所呈现的媒体内容的一个或多个信号能够由第一计算设备310-1通过有线或无线通信链路输出至第二计算设备310-2。除此之外或替选地，包括第一计算设备310-1当前所呈现的媒体内容的一个或多个信号能够从当前所呈现媒体内容的源被输入至第二计算设备310-2。特别地，如果媒体内容由电视(例如，第一计算设备310-1)基于机顶盒所输出的信号被呈现，则该信号还能够被路由至第二计算设备310-2(例如，其可以是游戏机)。该信号能够使用任意适当路径而被路由至第二计算设备310-2，例如经由第二计算设备310-2而被输入值第一计算设备310-1，或者经由第一计算设备310-1的音频和/或视频输出而被传递至第二计算设备310-2。
在512处，第二计算设备310-2能够基于在504处所接收和/或在506处所形成的查询以及在510处所记录的媒体数据而请求搜索结果。例如，对搜索结果的请求能够被提交至服务器302。
在516处，服务器302能够接收第二计算设备310-2在512处和/或514处所提交的查询和/或媒体数据。在一些实施方式中，例如，在516处所执行的动作能够与以上结合图1所描述的过程100的102和104相对应。
在518处，服务器302能够确定是否已经接收到与当前所呈现的媒体内容相关的媒体数据。如果没有接收到媒体数据(518处的“否”)，则服务器302能够继续进行至526并且能够基于在516处所接收的查询而获得搜索结果。否则，如果已经接收到媒体数据(518处的“是”)，则服务器302能够继续进行至520。
在520处，服务器302能够识别与在516处所接收的媒体数据相对应的节目(例如，如以上结合106所描述的)，并且能够识别与和该媒体数据相对应的节目和/或特定节目部分相关联的关键词(例如，如以上结合108所描述的)。在522处，服务器302能够从所识别的关键词确定场境上相关的关键词(例如，如以上结合522处所描述的)。在524处，服务器302能够基于该查询以及场境上相关的关键词而获得搜索结果(例如，如以上结合112所描述的)。
在528处，服务器302能够将在524处所获得的搜索结果返回至524处或526处所获得的第二计算设备310-2。在一些实施方式中，如果接收到媒体数据但是并未接收到查询，则服务器302能够识别与该媒体数据相对应的节目并且在并不基于查询获得搜索结果的情况下返回该结果。
在530处，第二计算设备310-2能够接收搜索结果并且能够使得至少一个搜索结果得以被呈现。在一些实施方式中，该结果能够使用第二计算设备310-2的显示器进行呈现(例如，如以上结合图2所描述的)。除此之外或替选地，该结果能够随当前所呈现的媒体内容一起使用第一计算设备310-1的显示器被呈现。
在一些实施方式中，单个计算设备能够呈现媒体内容以及形成查询并呈现搜索结果。例如，个人计算机、智能电视、智能电话、平板计算机等能够呈现媒体内容、形成与该媒体内容相关的查询、将媒体内容传送至服务器302，并且呈现基于媒体数据和查询所获得的搜索结果。作为另一个示例，计算设备所执行的第一应用能够使得内容得以被呈现，并且计算设备所执行的第二应用能够接收和/或形成与由第一应用当前所呈现的媒体内容相关的查询。例如，第二应用能够使用计算设备当前所呈现的音频数据和/或图像数据来识别当前所呈现的媒体。这样的音频数据和/或图像数据能够使用任意适当技术或技术的组合来捕捉，诸如通过接收当前由计算设备所生成的音频输出信号、通过接收使用与计算设备相关联的麦克风所捕捉的音频数据、通过接收当前由计算设备所呈现的图像数据(例如，截屏)、和/或任意其它适当技术或技术的组合。
在一些实施方式中，本文中所描述的机制能够包括客户端侧软件、服务器侧软件、硬件、固件和/或它们的任意适当组合。例如，本文中所描述的机制能够包含使得一个或多个处理器执行本文中所描述的机制的计算机程序。作为另一个示例，本文中所描述的机制能够包含以被用来访问和/或执行本文中所描述的机制的计算设备310和/或服务器302能够识别的编程语言进行编写的计算机程序(例如，以诸如Java、C、Objective-C、C++、C#、JavaScript、Visual Basic、HTML、XML、ColdFusion，任意其它适当方法和/或其任意适当组合的编程语言所编写的程序)。
在一些实施方式中，本文中所描述的机制能够包含一个或多个网页或网页部分(例如，经由任意适当编码，诸如超文本标记语言(“HTML”)、动态超文本标记语言(“DHTML”)、可扩展标记语言(“XML”)、JavaServer页面(“JSP”)、活动服务器页面(“ASP”)、ColdFusion，任意其它适当途径和/或其任意适当组合)。
在一些实施方式中，能够使用任意适当的计算机可读介质来存储用于执行本文中所描述的功能和/或过程的指令。例如，在一些实施方式中，计算机可读介质能够是暂时性或非暂时性的。例如，非暂时性计算机可读介质能够包括诸如磁性介质(诸如硬盘、软盘等)、光学介质(诸如紧凑盘、数字视频盘、蓝光盘等)、半导体介质(诸如闪速存储器、电可擦除只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)等)之类的介质，在传输期间不是短暂的或缺乏任`何永久的外貌的任意适当介质和/或任意适当有形介质。作为另一个示例，暂时性计算机可读介质可以包括网络上的信号，线路、导体、光纤、电路中的信号，在传输期间是短暂的或缺乏任何永久的外貌的任意适当介质，和/或任意适当非有形介质。
应当理解的是，图1和5中的以上所描述的过程的步骤能够以任意顺序或次序执行或实现而并不局限于图中所示出并描述的顺序和次序。而且，图1和5中的上述过程的步骤中的一些在适当情况下能够基本上同时被执行或实践或者被并行执行或实践以便减少延时和处理时间。
还应当注意的是，如本文中所使用的，术语机制能够包含硬件、软件、固件或者其任意适当组合。
因此，提供了用于基于场境信息生成搜索结果的方法、系统和介质。
虽然已经在以上说明性实施方式中描述并图示了本发明，但是所要理解的是，本公开仅是通过示例的形式而进行，并且能够对本发明的实施方式的细节进行很多改变而并不背离仅由下面的权利要求所限定的本发明的精神和范围。所公开实施方式的特征能够以各种方式进行组合和重新排列。

Claims (21)

1.一种用于呈现搜索结果的方法，所述方法包括：
使用与计算设备相对应的硬件处理器接收用户生成的查询输入；
使用所述硬件处理器基于所述用户生成的查询输入来形成包括多个查询词项的查询，其中所述多个查询词项包括问题词项；
使用所述硬件处理器基于所述多个查询词项、与所述查询相关联的场境信息和接收所述用户生成的查询输入的应用来确定所述查询是否是与由通过通信网络连接到所述计算设备的媒体播放设备当前呈现的节目相对应的时间敏感查询类型；
响应于确定所述查询是与由所述媒体播放设备当前呈现的节目相对应的时间敏感查询类型：
使用所述硬件处理器捕捉与由所述媒体播放设备当前呈现的节目相对应的媒体数据；
响应于确定所述查询是所述时间敏感查询类型，使用所述硬件处理器基于所接收的媒体数据来识别由所述媒体播放设备当前呈现的节目的部分，其中所述部分是在与所述计算设备接收所述用户生成的查询输入的时间相对应的时间由所述媒体播放设备呈现的节目段；
使用所述硬件处理器识别与所述节目的所识别的部分相关联的多个关键词；
使用所述硬件处理器基于与来自所述多个关键词中的至少一个关键词相关联的实体类型是响应于在所述用户生成的查询输入中包括的所述问题词项来确定所述至少一个关键词是场境上相关的；以及
响应于所述查询以及被确定为与在所述用户生成的查询输入中包括的所述问题词项场境上相关的所述至少一个关键词，使用所述硬件处理器获得多个搜索结果；以及
使用所述硬件处理器使得所述多个搜索结果中的至少一个在所述计算设备的显示器上被呈现给所述用户。
2.根据权利要求1所述的方法，进一步包括：
接收音频数据；
使得所接收的音频数据的第一音频指纹被与和多个节目相对应的音频指纹进行比较；以及
基于所述比较来接收所述多个节目中的第一节目的标识，所述第一音频指纹与所述第一节目相对应；
其中，当前所呈现的所述节目基于所接收的所述第一节目的标识来识别。
3.根据权利要求2所述的方法，进一步包括：基于所述第一音频指纹与和所述第一节目相关联的多个音频指纹的比较来接收当前所呈现的所述第一节目的部分，其中与所述第一节目相关联的所述多个音频指纹中的每一个都与所述第一节目的特定部分相对应。
4.根据权利要求3所述的方法，其中，确定与所述查询场境上相关的所述多个关键词中的一个或多个包括确定所述多个关键词中的所述一个或多个与当前所呈现的所述第一节目的所述部分相关联。
5.根据权利要求1所述的方法，其中，识别所述多个关键词包括：
对与多个节目相关联的关键词数据库查询与所述节目相关联的关键词；以及
响应于数据库查询而从所述关键词数据库接收与所述节目相关联的关键词。
6.根据权利要求1所述的方法，其中，确定与所述查询场境上相关的所述多个关键词中的一个或多个包括使用自然语言处理来确定所述多个关键词中的所述一个或多个是响应于所述查询的至少一部分的类型。
7.根据权利要求1所述的方法，其中，所述关键词与在所述节目中出现的感兴趣对象相对应。
8.一种用于呈现搜索结果的系统，所述系统包括：
硬件处理器，所述硬件处理器被编程为：
从计算设备接收用户生成的查询输入；
基于所述用户生成的查询输入来形成包括多个查询词项的查询，其中所述多个查询词项包括问题词项；
基于所述多个查询词项、与所述查询相关联的场境信息和接收所述用户生成的查询输入的应用来确定所述查询是否是与由通过通信网络连接到所述计算设备的媒体播放设备当前呈现的节目相对应的时间敏感查询类型；
响应于确定所述查询是与由所述媒体播放设备当前呈现的节目相对应的时间敏感查询类型：
捕捉与由所述媒体播放设备当前呈现的节目相对应的媒体数据；
响应于确定所述查询是所述时间敏感查询类型，基于所接收的媒体数据来识别由所述媒体播放设备当前呈现的节目的部分，其中所述部分是在与所述计算设备接收所述用户生成的查询输入的时间相对应的时间由所述媒体播放设备呈现的节目段；
识别与所述节目的所识别的部分相关联的多个关键词；
基于与来自所述多个关键词中的至少一个关键词相关联的实体类型是响应于在所述用户生成的查询输入中包括的所述问题词项来确定所述至少一个关键词是场境上相关的；以及
响应于所述查询以及被确定为与在所述用户生成的查询输入中包括的所述问题词项场境上相关的所述至少一个关键词，获得多个搜索结果；以及
使得所述多个搜索结果中的至少一个在所述计算设备的显示器上被呈现给所述用户。
9.根据权利要求8所述的系统，其中，所述硬件处理器进一步被配置为：
接收音频数据；
使得所接收的音频数据的第一音频指纹被与和多个节目相对应的音频指纹进行比较；以及
基于所述比较来接收所述多个节目中第一节目的标识，所述第一音频指纹与所述第一节目相对应；
其中，当前所呈现的所述节目基于所接收的所述第一节目的标识来识别。
10.根据权利要求9所述的系统，其中，所述硬件处理器进一步被配置为：基于所述第一音频指纹与和所述第一节目相关联的多个音频指纹的比较来接收当前所呈现的所述第一节目的部分，其中与所述第一节目相关联的所述多个音频指纹中的每一个都与所述第一节目的特定部分相对应。
11.根据权利要求10所述的系统，其中，所述硬件处理器进一步被配置为确定所述多个关键词中的所述一个或多个与当前所呈现的所述第一节目的所述部分相关联。
12.根据权利要求8所述的系统，其中，所述硬件处理器进一步被配置为：
对与多个节目相关联的关键词数据库查询与所述节目相关联的关键词；以及
响应于数据库查询而从所述关键词数据库接收与所述节目相关联的关键词。
13.根据权利要求8所述的系统，其中，所述硬件处理器进一步被配置为使用自然语言处理来确定所述多个关键词中的所述一个或多个是响应于所述查询的至少一部分的类型。
14.根据权利要求8所述的系统，其中，所述关键词与在所述节目中出现的感兴趣对象相对应。
15.一种包含计算机可执行指令的非暂时性计算机可读介质，所述指令在被处理器执行时使得所述处理器执行一种用于呈现搜索结果的方法，所述方法包括：
接收用户生成的查询输入；
基于所述用户生成的查询输入来形成包括多个查询词项的查询，其中所述多个查询词项包括问题词项；
基于所述多个查询词项、与所述查询相关联的场境信息和接收所述用户生成的查询输入的应用来确定所述查询是否是与由通过通信网络连接到计算设备的媒体播放设备当前呈现的节目相对应的时间敏感查询类型；
响应于确定所述查询是与由所述媒体播放设备当前呈现的节目相对应的时间敏感查询类型：
捕捉与由所述媒体播放设备当前呈现的节目相对应的媒体数据；
响应于确定所述查询是所述时间敏感查询类型，基于所接收的媒体数据来识别由所述媒体播放设备当前呈现的节目的部分，其中所述部分是在与所述计算设备接收所述用户生成的查询输入的时间相对应的时间由所述媒体播放设备呈现的节目段；
识别与所述节目的所识别的部分相关联的多个关键词；
基于与来自所述多个关键词中的至少一个关键词相关联的实体类型是响应于在所述用户生成的查询输入中包括的所述问题词项来确定所述至少一个关键词是场境上相关的；以及
响应于所述查询以及被确定为与在所述用户生成的查询输入中包括的所述问题词项场境上相关的所述至少一个关键词，获得多个搜索结果；以及
使得所述多个搜索结果中的至少一个在所述计算设备的显示器上被呈现给所述用户。
16.根据权利要求15所述的非暂时性计算机可读介质，其中，所述方法进一步包括：
接收音频数据；
使得所接收的音频数据的第一音频指纹被与和多个节目相对应的音频指纹进行比较；以及
基于所述比较来接收所述多个节目中的第一节目的标识，所述第一音频指纹与所述第一节目相对应；
其中，当前所呈现的所述节目基于所接收的所述第一节目的标识来识别。
17.根据权利要求16所述的非暂时性计算机可读介质，其中，所述方法进一步包括基于所述第一音频指纹与和所述第一节目相关联的多个音频指纹的比较来接收当前所呈现的所述第一节目的部分，其中与所述第一节目相关联的所述多个音频指纹中的每一个都与所述第一节目的特定部分相对应。
18.根据权利要求17所述的非暂时性计算机可读介质，其中，确定与所述查询场境上相关的所述多个关键词中的一个或多个包括确定所述多个关键词中的所述一个或多个与当前被呈现的所述第一节目的所述部分相关联。
19.根据权利要求15所述的非暂时性计算机可读介质，其中，识别所述多个关键词包括：
对与多个节目相关联的关键词数据库查询与所述节目相关联的关键词；以及
响应于数据库查询而从所述关键词数据库接收与所述节目相关联的关键词。
20.根据权利要求15所述的非暂时性计算机可读介质，其中，确定与所述查询场境上相关的所述多个关键词中的一个或多个包括使用自然语言处理来确定所述多个关键词中的所述一个或多个是响应于所述查询的至少一部分的类型。
21.根据权利要求15所述的非暂时性计算机可读介质，其中，所述关键词与在所述节目中出现的感兴趣对象相对应。
CN201480071926.8A 2013-12-31 2014-12-23 用于基于场境信息生成搜索结果的方法、系统和介质 Active CN105874454B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361922218P 2013-12-31 2013-12-31
US61/922,218 2013-12-31
US14/191,034 2014-02-26
US14/191,034 US10002191B2 (en) 2013-12-31 2014-02-26 Methods, systems, and media for generating search results based on contextual information
PCT/US2014/072258 WO2015103053A1 (en) 2013-12-31 2014-12-23 Methods, systems, and media for generating search results based on contextual information

Publications (2)

Publication Number Publication Date
CN105874454A CN105874454A (zh) 2016-08-17
CN105874454B true CN105874454B (zh) 2022-09-13

Family

ID=53482045

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480071926.8A Active CN105874454B (zh) 2013-12-31 2014-12-23 用于基于场境信息生成搜索结果的方法、系统和介质

Country Status (8)

Country Link
US (3) US10002191B2 (zh)
EP (1) EP3090362A1 (zh)
JP (1) JP6668245B2 (zh)
KR (1) KR102310980B1 (zh)
CN (1) CN105874454B (zh)
AU (1) AU2014374036B2 (zh)
CA (1) CA2935568C (zh)
WO (1) WO2015103053A1 (zh)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150302819A1 (en) * 2014-04-22 2015-10-22 Lenovo (Singapore) Pte. Ltd. Updating an attribute used for displaying video content based on video content type
US9396354B1 (en) 2014-05-28 2016-07-19 Snapchat, Inc. Apparatus and method for automated privacy protection in distributed images
US9665241B2 (en) * 2014-06-30 2017-05-30 Verizon Patent And Licensing Inc. Media content search systems and methods
EP3179370A4 (en) * 2014-09-03 2017-09-13 Huawei Technologies Co. Ltd. Webpage automatic test method and apparatus
US9385983B1 (en) 2014-12-19 2016-07-05 Snapchat, Inc. Gallery of messages from individuals with a shared interest
US10311916B2 (en) 2014-12-19 2019-06-04 Snap Inc. Gallery of videos set to an audio time line
KR102371138B1 (ko) 2015-03-18 2022-03-10 스냅 인코포레이티드 지오-펜스 인가 프로비저닝
US10204104B2 (en) * 2015-04-14 2019-02-12 Google Llc Methods, systems, and media for processing queries relating to presented media content
US9654891B2 (en) * 2015-09-15 2017-05-16 D&M Holdings, Inc. System and method for determining proximity of a controller to a media rendering device
US10354425B2 (en) 2015-12-18 2019-07-16 Snap Inc. Method and system for providing context relevant media augmentation
KR102102453B1 (ko) * 2016-01-08 2020-04-20 주식회사 아이플래테아 시청률 산출 서버, 시청률 산출 방법, 및 시청률 산출 리모트 장치
US10957321B2 (en) 2016-07-21 2021-03-23 Samsung Electronics Co., Ltd. Electronic device and control method thereof
WO2018174849A1 (en) * 2017-03-20 2018-09-27 Google Llc Contextually disambiguating queries
US10565256B2 (en) 2017-03-20 2020-02-18 Google Llc Contextually disambiguating queries
US10582277B2 (en) 2017-03-27 2020-03-03 Snap Inc. Generating a stitched data stream
CN108696760A (zh) * 2017-04-07 2018-10-23 京东方科技集团股份有限公司 一种信息获取、提供方法及装置
US10679068B2 (en) 2017-06-13 2020-06-09 Google Llc Media contextual information from buffered media data
CN108322770B (zh) * 2017-11-22 2020-02-18 腾讯科技（深圳）有限公司 视频节目识别方法、相关装置、设备和系统
CN107948876B (zh) * 2017-12-13 2020-10-09 北京小米移动软件有限公司 控制音箱设备的方法、装置及介质
US20190266282A1 (en) * 2018-02-28 2019-08-29 Ent. Services Development Corporation Lp Systems and methods for constrained directed media searches
CN112534422A (zh) * 2018-08-22 2021-03-19 深圳市欢太科技有限公司 一种图像处理方法、装置以及计算机存储介质
CN109933788B (zh) * 2019-02-14 2023-05-23 北京百度网讯科技有限公司 类型确定方法、装置、设备和介质
CN110196675B (zh) * 2019-04-17 2022-07-15 华为技术有限公司 一种添加批注的方法及电子设备
CN110825289A (zh) * 2019-10-31 2020-02-21 北京字节跳动网络技术有限公司 操作用户界面的方法、装置、电子设备及存储介质
KR20240012973A (ko) * 2022-07-21 2024-01-30 삼성전자주식회사 영상 기반 질문에 대한 답변을 제공하는 디스플레이 장치 및 그 제어 방법

Family Cites Families (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6240555B1 (en) 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US6901366B1 (en) 1999-08-26 2005-05-31 Matsushita Electric Industrial Co., Ltd. System and method for assessing TV-related information over the internet
US8205223B2 (en) 2000-04-12 2012-06-19 Lg Electronics Inc. Method and video device for accessing information
KR20040041082A (ko) 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
MXPA03003494A (es) 2000-10-24 2005-01-25 Thomson Licensing Sa Metodo para diseminar anuncios utilizando una pagina de reproduccion de medios embebida.
US20020147984A1 (en) 2000-11-07 2002-10-10 Tomsen Mai-Lan System and method for pre-caching supplemental content related to a television broadcast using unprompted, context-sensitive querying
US20020144293A1 (en) * 2001-03-27 2002-10-03 Koninklijke Philips Electronics N.V. Automatic video retriever genie
US7421376B1 (en) 2001-04-24 2008-09-02 Auditude, Inc. Comparison of data signals using characteristic electronic thumbprints
US7519685B2 (en) 2003-04-04 2009-04-14 Panasonic Corporation Contents linkage information delivery system
JP4064902B2 (ja) * 2003-09-12 2008-03-19 株式会社東芝 メタ情報生成方法、メタ情報生成装置、検索方法および検索装置
CN1735162A (zh) 2004-08-12 2006-02-15 上海乐金广电电子有限公司 电视节目指南信息的osd生成器及其生成方法
US7840980B2 (en) 2004-11-04 2010-11-23 Koninklijke Philips Electronics N.V. Incorporation of lead actor information for TV recommenders
US8185543B1 (en) 2004-11-10 2012-05-22 Google Inc. Video image-based querying for video content
KR20060077988A (ko) 2004-12-30 2006-07-05 삼성전자주식회사 멀티미디어 통신 시스템에서 컨텍스트 추출 및 이를 통한정보 제공 시스템 및 방법
US8949893B2 (en) 2005-01-14 2015-02-03 Koninklijke Philips N.V. Method and a system for constructing virtual video channel
JP2006270869A (ja) 2005-03-25 2006-10-05 Dainippon Printing Co Ltd 関連情報取得システム、管理装置、関連情報取得方法、関連情報送信プログラム。
EP1986145A1 (en) 2005-11-29 2008-10-29 Google Inc. Social and interactive applications for mass media
CN1804829A (zh) * 2006-01-10 2006-07-19 西安交通大学 一种中文问题的语义分类方法
US8296808B2 (en) 2006-10-23 2012-10-23 Sony Corporation Metadata from image recognition
US8861898B2 (en) 2007-03-16 2014-10-14 Sony Corporation Content image search
WO2009036435A1 (en) 2007-09-14 2009-03-19 Auditude.Com, Inc. Restoring program information for clips of broadcast programs shared online
US8301618B2 (en) 2008-02-26 2012-10-30 Microsoft Corporation Techniques to consume content and metadata
JP5204893B2 (ja) * 2008-03-31 2013-06-05 ドルビー ラボラトリーズ ライセンシング コーポレイション 分散型媒体フィンガープリントリポジトリ
CN101566990A (zh) * 2008-04-25 2009-10-28 李奕 一种嵌入于视频的搜索方法及其系统
WO2009137368A2 (en) 2008-05-03 2009-11-12 Mobile Media Now, Inc. Method and system for generation and playback of supplemented videos
US8285702B2 (en) 2008-08-07 2012-10-09 International Business Machines Corporation Content analysis simulator for improving site findability in information retrieval systems
KR101380783B1 (ko) 2008-08-22 2014-04-02 정태우 영상에 포함된 객체를 식별하여 부가 서비스를 제공하는 시스템
US8239359B2 (en) 2008-09-23 2012-08-07 Disney Enterprises, Inc. System and method for visual search in a video media player
US20120311623A1 (en) 2008-11-14 2012-12-06 Digimarc Corp. Methods and systems for obtaining still images corresponding to video
US9355554B2 (en) 2008-11-21 2016-05-31 Lenovo (Singapore) Pte. Ltd. System and method for identifying media and providing additional media content
JP5189481B2 (ja) 2008-12-26 2013-04-24 Ｋｄｄｉ株式会社 映像関連情報提示装置、映像関連情報提示システムおよび映像関連情報提示装置の制御プログラム
CN101557464B (zh) 2009-04-01 2013-06-05 深圳市融创天下科技股份有限公司 一种在视频节目播放中动态嵌入其他媒体片段的方法
US20130097632A1 (en) 2009-05-27 2013-04-18 Ajay Shah Synchronization to broadcast media
US20100332967A1 (en) 2009-06-25 2010-12-30 Yahoo! Inc. System and method for automatically generating web page augmentation
JP2011035628A (ja) * 2009-07-31 2011-02-17 Toshiba Corp キーワード検索システム、デジタル放送受信機及びキーワード検索方法
US9135277B2 (en) 2009-08-07 2015-09-15 Google Inc. Architecture for responding to a visual query
US8463100B2 (en) 2009-11-05 2013-06-11 Cosmo Research Company Limited System and method for identifying, providing, and presenting content on a mobile device
US8682728B2 (en) 2010-01-22 2014-03-25 Vincent KONKOL Network advertising methods and apparatus
KR101562588B1 (ko) 2010-01-26 2015-10-23 엘지전자 주식회사 정보 제공 장치 및 그 방법
US9264785B2 (en) * 2010-04-01 2016-02-16 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
US8560583B2 (en) 2010-04-01 2013-10-15 Sony Computer Entertainment Inc. Media fingerprinting for social networking
US9443147B2 (en) 2010-04-26 2016-09-13 Microsoft Technology Licensing, Llc Enriching online videos by content detection, searching, and information aggregation
US20110271208A1 (en) 2010-04-30 2011-11-03 American Teleconferencing Services Ltd. Location-Aware Conferencing With Entertainment Options
US9015139B2 (en) 2010-05-14 2015-04-21 Rovi Guides, Inc. Systems and methods for performing a search based on a media content snapshot image
KR101123370B1 (ko) 2010-05-14 2012-03-23 주식회사 코리아퍼스텍 휴대단말용 객체기반 콘텐츠 제공방법 및 장치
US8694533B2 (en) 2010-05-19 2014-04-08 Google Inc. Presenting mobile content based on programming context
CN101883230A (zh) 2010-05-31 2010-11-10 中山大学 一种数字电视演员检索方法及系统
US8424037B2 (en) 2010-06-29 2013-04-16 Echostar Technologies L.L.C. Apparatus, systems and methods for accessing and synchronizing presentation of media content and supplemental media rich content in response to selection of a presented object
CA3011865C (en) 2010-07-21 2022-04-26 D-Box Technologies Inc. Media recognition and synchronisation to a motion signal
WO2012014130A1 (en) 2010-07-26 2012-02-02 Koninklijke Philips Electronics N.V. Obtaining keywords for searching
US20120047156A1 (en) 2010-08-18 2012-02-23 Nokia Corporation Method and Apparatus for Identifying and Mapping Content
CN103229120A (zh) * 2010-09-28 2013-07-31 国际商业机器公司 使用假设剪枝提供问题答案
US20120096499A1 (en) 2010-10-19 2012-04-19 Charles Dasher Apparatus and method for facilitating video-on-demand catalog search and content distribution
US9241195B2 (en) 2010-11-05 2016-01-19 Verizon Patent And Licensing Inc. Searching recorded or viewed content
JP5491372B2 (ja) * 2010-12-03 2014-05-14 日本電信電話株式会社 情報検索システム、情報検索方法、情報検索プログラム
EP2656622A1 (en) 2010-12-22 2013-10-30 Thomson Licensing Associating information with electronic program guide entries
US10070201B2 (en) 2010-12-23 2018-09-04 DISH Technologies L.L.C. Recognition of images within a video based on a stored representation
US9424471B2 (en) 2011-03-01 2016-08-23 Sony Corporation Enhanced information for viewer-selected video object
US20120240177A1 (en) 2011-03-17 2012-09-20 Anthony Rose Content provision
GB201117512D0 (en) * 2011-03-17 2011-11-23 Zeebox Ltd Content provision
US20120240144A1 (en) * 2011-03-17 2012-09-20 Anthony Rose Content provision
CN107092619B (zh) 2011-04-11 2021-08-03 英特尔公司 具有内容转移和交互选择能力的下一代电视机
US8621548B2 (en) 2011-05-12 2013-12-31 At&T Intellectual Property I, L.P. Method and apparatus for augmenting media services
US8839303B2 (en) 2011-05-13 2014-09-16 Google Inc. System and method for enhancing user search results by determining a television program currently being displayed in proximity to an electronic device
JP2013016030A (ja) 2011-07-04 2013-01-24 Mitsubishi Electric Corp 番組再生装置および番組再生方法
US20130036442A1 (en) 2011-08-05 2013-02-07 Qualcomm Incorporated System and method for visual selection of elements in video content
KR101995425B1 (ko) 2011-08-21 2019-07-02 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
US8805827B2 (en) * 2011-08-23 2014-08-12 Dialogic (Us) Inc. Content identification using fingerprint matching
US9317571B2 (en) 2011-08-26 2016-04-19 Google Inc. Third party content provider integrations
WO2013039473A1 (en) 2011-09-12 2013-03-21 Intel Corporation Methods and apparatus for keyword-based, non-linear navigation of video streams and other content
US20130111514A1 (en) 2011-09-16 2013-05-02 Umami Co. Second screen interactive platform
US9098533B2 (en) 2011-10-03 2015-08-04 Microsoft Technology Licensing, Llc Voice directed context sensitive visual search
KR101952170B1 (ko) 2011-10-24 2019-02-26 엘지전자 주식회사 검색 방법을 채용한 휴대 전자 기기
US9866915B2 (en) 2011-11-28 2018-01-09 Excalibur Ip, Llc Context relevant interactive television
US8949872B2 (en) 2011-12-20 2015-02-03 Yahoo! Inc. Audio fingerprint for content identification
KR20130081595A (ko) 2012-01-09 2013-07-17 삼성전자주식회사 디스플레이 장치, 원격 제어 장치 및 그 검색 방법
CN102868934B (zh) 2012-08-01 2016-06-29 青岛海信传媒网络技术有限公司 基于智能电视的视频对象信息检索方法及装置
US8484017B1 (en) 2012-09-10 2013-07-09 Google Inc. Identifying media content
CN102833617B (zh) 2012-09-20 2016-03-23 北京酷云互动科技有限公司 一种同步显示多媒体节目附属信息的方法、系统及终端
US20140089423A1 (en) 2012-09-27 2014-03-27 United Video Properties, Inc. Systems and methods for identifying objects displayed in a media asset
US20140250116A1 (en) * 2013-03-01 2014-09-04 Yahoo! Inc. Identifying time sensitive ambiguous queries
US20140255003A1 (en) 2013-03-05 2014-09-11 Google Inc. Surfacing information about items mentioned or presented in a film in association with viewing the film
US9384217B2 (en) 2013-03-11 2016-07-05 Arris Enterprises, Inc. Telestration system for command processing
US9524509B2 (en) 2013-03-28 2016-12-20 Yahoo! Inc. Client side browser notification
US20140344670A1 (en) 2013-05-14 2014-11-20 Pandaworks Inc. Dba Contentpanda Method and system for on-demand delivery of predefined in-context web content

Also Published As

Publication number Publication date
AU2014374036A1 (en) 2016-06-16
KR20160104635A (ko) 2016-09-05
EP3090362A1 (en) 2016-11-09
KR102310980B1 (ko) 2021-10-08
US10002191B2 (en) 2018-06-19
WO2015103053A1 (en) 2015-07-09
CA2935568A1 (en) 2015-07-09
CN105874454A (zh) 2016-08-17
US11941046B2 (en) 2024-03-26
US20210256055A1 (en) 2021-08-19
US20180307752A1 (en) 2018-10-25
AU2014374036B2 (en) 2020-01-23
US20150186511A1 (en) 2015-07-02
JP2017503273A (ja) 2017-01-26
US10997235B2 (en) 2021-05-04
JP6668245B2 (ja) 2020-03-18
CA2935568C (en) 2022-04-26

Similar Documents

Publication Publication Date Title
US11941046B2 (en) Methods, systems, and media for generating search results based on contextual information
US10311101B2 (en) Methods, systems, and media for searching for video content
US10333767B2 (en) Methods, systems, and media for media transmission and management
US9609391B2 (en) Methods, systems, and media for presenting mobile content corresponding to media content
CN105874451B (zh) 用于呈现对应于点播媒体内容的补充信息的方法、系统和介质
US10984038B2 (en) Methods, systems, and media for processing queries relating to presented media content
US11941041B2 (en) Methods, systems, and media for presenting news items corresponding to media content
US9110988B1 (en) Methods, systems, and media for aggregating and presenting multiple videos of an event
WO2015157711A1 (en) Methods, systems, and media for searching for video content

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: California, USA

Applicant after: Google Inc.

Address before: California, USA

Applicant before: Google Inc.

GR01 Patent grant
GR01 Patent grant