CN108628922A - 确定用于在事件的用户体验期间获得信息的搜索查询 - Google Patents

Abstract

本申请公开了确定用于在事件的用户体验期间获得信息的搜索查询。描述了一种计算系统，该计算系统确定用于事件期间的后续搜索的多个搜索查询，并且针对多个搜索查询中的每一个调度事件期间用于搜索对应搜索查询的相应时间。响应于确定在事件期间多个搜索查询中的特定搜索查询被调度用于搜索时的相应时间处，计算设备的用户正在体验事件，计算系统搜索特定搜索查询，并且在事件期间自动地将从所述特定搜索查询的搜索返回的信息的指示发送给计算设备以用于后续显示。

Description

确定用于在事件的用户体验期间获得信息的搜索查询

技术领域

本申请涉及确定用于在事件的用户体验期间获得信息的搜索查询。

背景技术

当体验事件时(例如，观看和/或收听内容呈现)，用户可能希望获得与事件有关的辅助信息，并且因此可以在体验事件的同时与计算设备交互来手动地搜索这种信息。在事件期间手动地搜索信息可能会导致用户错过事件的一部分或关于该事件的其他相关且有趣的信息。

一些计算设备可以自动地输出已经被预先产生以增强事件的用户体验的辅助信息作为“第二屏幕体验”的一部分。例如，一些这种计算设备可以输出已经被预先确定并且被缓存在存储器中的特定信息，以用于稍后在事件的用户体验期间的特定时间处的呈现。预先产生第二屏幕体验可能是需要在事件的呈现发生之前需要手动发生的耗时且占用大量资源的任务。随着时间的推移，已经被缓存以用于后续输出的、作为预先产生的第二屏幕体验的一部分的辅助信息可能会变得陈旧，或者可能并不总是在事件的未来呈现期间可以输出的最有趣、最新或最相关的信息。

发明内容

一般来说，本公开的技术可以使系统能够在计算设备的用户正在体验事件的同时动态地获得并且使计算设备呈现与事件相关的当前信息。如本文所使用的术语“事件”指任何现场表演、广播、回放或其他类型的现场或预先记录的内容(例如，会议报告、集会、学术会议、音乐或戏剧表演、电影、电视节目、歌曲、音乐会、体育赛事或用户可以体验的任何其他类型的现场或预先记录的内容)的呈现。术语“现场事件”或“现场表演”可以指用户实际参加的任何事件。广播内容可以在没有明显延迟的情况下，在事件时被广播，并且有时可以被称为“现场”，但是对此，我们使用术语“现场广播”。还可以对内容进行记录，或者在后面的时间回放。

当查看、收听或以其他方式“体验”事件时，用户可能希望在事件期间在精确时间戳处或者响应于特定“子事件”发生而获得关于事件的辅助信息。例如，当观看体育赛事时，用户可能有兴趣获得刚刚完成了重要比赛的知名度较低的运动员的履历信息，或者可能有兴趣看到重要比赛的重播。或者，当观看电影时，用户可能有兴趣看到关于作为特定场景的背景的异域地理位置的度假计划或其他信息。或者，当观看电影或TV呈现时，当演员出现在屏幕上时，用户可能希望获得关于该演员的履历信息和其他表演信息。

系统可以预先确定并存储(例如，在高速缓存或其他存储器中)一个或多个搜索查询，以便当计算设备的用户正在体验事件时进行后续搜索。在接收明确许可以分析关于一组计算设备的用户的搜索历史或其他信息之后，系统可以通过识别在一组计算设备的用户正在体验相同或类似事件时所搜索的一组计算设备的查询来确定对后续搜索的一个或多个搜索查询。系统可以识别一组计算设备何时(例如，事件的特定时间戳或子事件)搜索了每个预先确定的查询，并且为事件的特定时间戳或子事件处的后续搜索指派每个预先确定的查询。

在接收对分析关于计算设备的用户的信息以确定其是否正在体验事件的明确许可之后，并且响应于确定计算设备的用户正在体验事件的特定子事件或时间戳，系统可以搜索被指派给事件的特定时间戳或子事件的特定搜索查询，并且使计算设备在该计算设备的用户正在体验事件的特定时间戳或子事件时呈现从搜索获得的辅助信息。以该方式，系统可以使得计算设备能够在事件期间，在辅助信息与事件的特定时间戳或子事件最相关时的时间时自动地呈现最新的辅助信息，而不是要求用户来手动地提供对计算设备的输入以搜索辅助信息或者与可能依赖于陈旧信息的预先产生的第二屏幕体验互动。通过自动地提供辅助信息，用户不会错过事件的一部分，诸如常规来说在输入搜索查询期间用户可能会错过所述事件的一部分。另外，由于通过预定义的搜索查询的使用而自动提供辅助信息，减少了对计算和网络资源的使用。例如，常规来说，用户可以输入多个查询，直到他找到其所需要的与事件有关的信息，而本公开的各方面提供直接关联于事件的信息，由此减少产生不相关信息或用户不期望的信息的搜索数量。

在一个示例中，本公开涉及方法，该方法包括：确定在事件期间对后续搜索的多个搜索查询，以及针对多个搜索查询中的每一个来调度事件期间用于搜索对应搜索查询的相应时间。该方法进一步包括：响应于确定在事件期间在多个搜索查询中的特定搜索查询被调度用于被搜索时的相应时间处计算设备的用户正在体验事件：搜索特定搜索查询，以及在事件期间由计算设备输出从特定搜索查询的搜索返回的信息的指示。

在另一示例中，本公开涉及计算系统，该计算系统包括至少一个处理器和包括指令的存储器，当指令被执行时使至少一个处理器：确定在事件期间对后续搜索的多个搜索查询，以及针对多个搜索查询中的每一个来调度事件期间用于搜索对应搜索查询的相应时间。当指令被执行时进一步使至少一个处理器响应于确定在事件期间在多个搜索查询中的特定搜索查询被调度用于被搜索时的相应时间处计算设备的用户正在体验事件：搜索特定搜索查询，在事件期间向计算设备自动发送从特定搜索查询的搜索返回的信息的指示以供后续显示。

在另一示例中，本公开涉及包括指令的计算机可读存储介质，当所述指令被执行时使计算系统的至少一个处理器：确定在事件期间对后续搜索的多个搜索查询，以及针对多个搜索查询中的每一个来调度事件期间用于搜索对应搜索查询的相应时间。当指令被执行时进一步使至少一个处理器响应于确定在事件期间在多个搜索查询中的特定搜索查询被调度用于被搜索时的相应时间处计算设备的用户正在体验事件：搜索特定搜索查询，在事件期间向计算设备自动发送从特定搜索查询的搜索返回的信息的指示以供后续显示。

在另一示例中，本公开涉及系统，该系统包括用于下述的装置：确定在事件期间对后续搜索的多个搜索查询，以及针对多个搜索查询中的每一个来调度事件期间用于搜索对应搜索查询的相应时间。该系统进一步包括用于下述的装置：响应于确定在事件期间在多个搜索查询中的特定搜索查询被调度用于被搜索时的相应时间处计算设备的用户正在体验事件：用于搜索特定搜索查询的装置，以及用于在事件期间输出从特定搜索查询的搜索返回的信息的指示的装置。

附图和下面的描述中阐述了一个或多个示例的细节。根据描述和附图并且根据权利要求，本公开的其他特征、目标和优点将是显而易见的。

附图说明

图1是图示根据本公开的一个或多个方面的用于当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例性系统的概念图。

图2是图示根据本公开的一个或多个方面的被配置成当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例性计算设备的框图。

图3是图示根据本公开的一个或多个技术的呈现用于在远程设备处显示的图形内容的示例性计算设备的框图。

图4和图5是图示根据本公开的一个或多个方面的由配置成当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例性计算系统所执行的示例性操作的流程图。

具体实施方式

图1是图示根据本公开的一个或多个方面的用于当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例系统的概念图。系统100包括经由网络130与媒体输出设备120和计算设备110通信的一个或多个远程服务器系统(“RSS”)160。RSS 160包括媒体服务模块162、搜索模块164和第二屏幕服务(“SSS”)模块166。媒体输出设备120包括输出组件122和媒体输出模块124。计算设备110包括用户界面组件(“UIC”)112和第二屏幕客户端(“SSC”)模块114。

网络130表示用于在计算系统、服务器与计算设备之间传输数据的任何公共或私人通信网络，例如，蜂窝网、Wi-Fi和/或其他类型的网络。网络130可以包括操作地互联由此提供RSS 160、媒体输出设备120与计算设备110之间的信息交换的一个或多个网络集线器、网络交换机、网络路由器或任何其他网络设备。RSS 160、媒体输出设备120和计算设备110可以使用任何合适的通信技术来通过网络130传输和接收数据。

可以使用相应的网络链路使RSS 160、媒体输出设备120和计算设备110中的每一个操作地耦合至网络130。将RSS 160、媒体输出设备120和计算设备110耦合至网络130的链路可以是以太网、ATM或其他类型的网络连接，并且这种连接可以是无线和/或有线连接。

媒体输出设备120表示用于作为用户界面126来呈现从诸如RSS160等媒体服务提供商接收的媒体内容的任何合适的输出设备。媒体输出模块124被配置成从媒体服务提供商(例如，电视提供商、有线服务提供商、在线流送服务提供商等)接收媒体内容，并且经由输出组件122来输出媒体内容。例如，媒体输出设备120可以是电视，并且输出组件122可以是电视屏幕和/或扬声器。媒体输出设备120可以是计算设备，并且输出组件122可以是显示器、投影仪和屏幕、扬声器、虚拟实境(VR)耳机、头戴式耳机或操作地耦合至媒体输出设备120且被配置成输出媒体内容的任何其他类型的显示器和/或扬声器。媒体输出设备120可以是机顶盒或流送设备，并且输出组件122可以是操作地耦合至媒体输出设备120的显示器和/或扬声器系统。媒体输出设备120可以是无线电装置(例如，家庭或汽车娱乐系统)，并且输出组件122可以是操作地耦合至媒体输出设备120的扬声器系统。

媒体输出模块124可以与RSS 160的媒体服务模块162通信，对从RSS 160接收的媒体内容进行处理，并且输出所接收和处理的媒体内容以便在输出计算122处呈现。媒体输出模块124可以使用驻留在媒体服务器系统80中和/或在媒体服务器系统80处执行的软件、硬件、固件或硬件、软件和固件的混合来执行本文所描述的操作。例如，媒体输出模块124可以包括至少一个处理器和存储指令的存储器，当所述指令被执行时使至少一个处理器来执行属于媒体输出模块124的操作。媒体输出模块124可以使用多个处理器来执行操作，作为在媒体输出设备120的底层硬件上执行的一个或多个虚拟机，作为媒体输出设备120的操作系统或计算平台的一个或多个服务，和/或作为媒体输出设备120的计算平台的应用层处的一个或多个可执行程序。

媒体输出模块124可以经由网络130从媒体服务模块162接收流送音频和视频。媒体输出模块124可以将流送音频和视频格式化和优化，以便作为多媒体内容在输出组件122处输出和显示。媒体输出模块124可以将多媒体内容传送到输出组件122，并且输出组件122可以作为用户界面126来在输出组件122的扬声器和屏幕处输出和显示多媒体内容。例如，如图1中所示，用户界面126包括按照从t0-tn的时间顺序所呈现的媒体内容部分128A-128N(统称为“媒体内容部分128”)。媒体内容部分128中的每一个可以是特定帧、章节或事件的其他类型的子事件。

RSS 160表示能够经由网络130来交换信息的任何适当的一个或多个远程计算系统(例如，一个或多个台式计算机、一个或多个膝上型计算机、一个或多个大型主机、一个或多个服务器、一个或多个云计算系统或一个或多个其他类型的远程计算系统)。模块162、164和166可以使用驻留在RSS 160中和/或在RSS 160处执行的软件、硬件、固件或硬件、软件和固件的混合来执行本文所描述的操作。RSS 160可以使用多个处理器或多个设备来执行模块162、164和166，作为在底层硬件上执行的虚拟机，作为操作系统或计算平台的一个或多个服务，和/或作为RSS 160的计算平台的应用层处的一个或多个可执行程序。

媒体服务模块162执行用于托管媒体服务的功能，该媒体服务经由网络130提供多媒体广播或事件数据流送到与媒体服务的订户相关联的计算设备(例如，媒体输出设备120、计算设备110等)。事件的示例包括：电影、音乐表演(例如，演播室的音频和/或视频，或现场音乐表演)、电视节目、体育赛事、节日事件(例如，游行、新年庆祝事件)、科学或技术事件(例如，月球/火星着陆)、政治事件(会议、选举、就职典礼)、戏剧或表演艺术事件、突发新闻事件或个人可以现场体验(例如，亲身经历)或经由诸如媒体输出设备120的媒体输出设备远程体验的任何其他类型的声音或视觉体验。

例如，媒体服务模块162可以托管流送视频点播服务，媒体输出设备120的用户可以从流送视频点播服务接入点播电影、电视节目、音乐和其他类型的媒体内容。媒体服务模块162可以托管电视广播服务(例如，一个或多个电视频道)，媒体输出组件122的用户可以从其接入基于现场或点播电视广播的媒体内容。媒体服务模块162可以传输其提供给网络130的与媒体服务相关联的媒体内容。媒体输出设备120和/或计算设备110可以接收由媒体服务模块162通过网络130所传输的媒体内容，并且输出(例如，在媒体输出设备120的显示组件122或计算设备110的用户界面组件112处)从所传输的媒体内容得到的图形和/或声音信息。

搜索模块164执行用于托管搜索服务的功能，该搜索服务提供从通过搜索模块164经由互联网、经由网络130和/或经由RSS 160处的本地存储访问的各种信息源(例如，网页、web服务、应用或其他信息源)所进行的搜索返回的信息。搜索模块164可以搜索与搜索模块164从SSS模块166和/或计算设备110接收的搜索查询相关的信息。在执行搜索之后，搜索模块164可以将从搜索返回的信息(例如，搜索结果)输出到查询的发起者(例如，第二屏幕服务模块166和/或计算设备110)或输出给经由网络130通信的某个其他设备。

一般来说，SSS模块166托管自动地提供与现场或预先记录的事件有关的最新辅助信息的第二屏幕服务。SSS模块166从搜索获得辅助信息，SSS模块166引起使搜索在现场或预先记录的事件的用户体验期间的预先确定的时间处被执行。SSS模块166在搜索的执行之后在预确定时间处提供辅助信息来补充或以其他方式增强在预先确定的时间处所呈现的事件的主要内容的用户体验。换句话说，SSS模块166动态地获得并且在辅助信息被呈现时使计算设备来呈现正在体验事件的计算设备用户可能想要搜索的辅助信息。

例如，在计算设备110的用户正在观看或收听事件的主要内容(例如，由媒体输出设备120输出的电视节目广播、在计算设备110的位置附近发生的现场体育赛事等)时，SSS模块166可以确定用户是否正在体验或将要体验事件的特定子事件(例如，时间戳或子事件的发生)。响应于确定用户将体验或正在体验特定子事件，SSS模块166可以将与子事件相关联的搜索查询发送给搜索模块164，请求关于搜索查询和子事件的辅助内容(例如，场境背景、参考、对进一步探究的链接、图像和地图以及其他事件相关信息)。SSS模块166可以响应于请求来从搜索模块164获得辅助内容。

SSS模块166可以在明确地接收来自用户中的每一个的同意这样做之后仅使用、分析或存储关于计算设备的用户的信息。另外，可以对SSS模块166保存的任何信息进行处理或加密，以去除或以其他方式保护各个用户的身份。SSS模块166允许用户撤回同意，由此使SSS模块166停止对其信息进行使用、分析或存储。

SSS模块166可以利用用于计算设备110将如何以及何时输出辅助内容的指令来将其从搜索模块164接收的辅助内容封装并输出到计算设备110。该指令可以使计算设备110与子事件同步地(例如，当用户体验子事件时)输出辅助内容。换句话说，指令可以使计算设备110来在当其呈现内容将与用户所体验的主要内容最相关时的时间呈现辅助内容。因为SSS模块166从在用户的事件体验期间执行的搜索获得辅助内容，所以辅助内容更有可能包含关于子事件的当前(例如，最新且不陈旧)信息。

SSS模块166可以确定用于事件期间的后续搜索的搜索查询。当多个计算设备的用户正在体验相同或类似的事件时，SSS模块166可以确定将是由多个计算设备搜索的热门搜索查询的搜索查询。SSS模块166可以依赖由搜索模块164和媒体服务模块162所收集的数据来确定当媒体服务模块162正在输出各种类型的多媒体广播或事件流时搜索模块164执行了哪些搜索。

通过使用模型(例如，深入学习模型、长期或短期记忆模型、贝叶斯网络、人工神经网络或任何其他机器学习模型、人工智能模型和其他类型的模型)，SSS模块166可以分析关于当媒体服务模块162输出特定类型的多媒体广播或事件流时搜索模块164执行了什么类型的搜索的信息。SSS模块166的模型可以生成规则，该规则响应于被输入特定类型的多媒体广播或事件流，可以输出正在体验事件的用户在事件期间可能会想要进行搜索的一个或多个特定搜索查询。

SSS模块166可以基于SSS模块166获得的关于特定事件的补充信息来增强或修改搜索查询。补充信息可以包括与事件相关联的话题或关键词(例如，来自与事件相关联的语义文本、关于事件的元信息、事件的知识图、在线百科全书以及RSS 160和SSS模块166可访问的其他资料)。SSS模块166可以识别与事件相关联的话题或关键词，并且使用所述识别的话题或关键词的文本来生成与事件有关的搜索查询。例如，如果事件是特定电影，那么SSS模块166可以使用搜索模块164来使用电影的名称作为搜索查询而执行搜索，以便识别演员、年代、流派、背景和与该特定电影有关的其他话题。SSS模块166可以使用获得的有关事件的补充信息来缩小搜索查询(例如，通过创建指定下述的搜索查询：使用其名字的电影的具体演员的姓名、所处年代的时间段、设定的位置以及与事件有关的其他话题)，而不是创建一般的搜索查询(例如，一般意义上指定“演员”的搜索查询)。

SSS模块166可以基于由模型的规则所确定的查询来创建搜索查询，并且缩小或提炼与事件的话题有关的查询。SSS可以将搜索查询存储在SSS模块166的存储器中，并且利用事件的标识符来标记所存储的搜索查询。在未来，如果SSS模块166确定计算设备110的用户正在体验事件，那么SSS模块166可以检索所存储的查询，使搜索模块164搜索该搜索查询以获得关于事件的辅助信息，并且将辅助信息发送到计算设备110以供在用户正在体验事件时进行呈现。

SSS模块166可以针对被确定用于事件期间的后续搜索的多个搜索查询中的每一个来调度事件期间用于搜索对应搜索查询的相应时间或子事件。如本文所使用的“相应时间”可以指时序子事件(例如，时间戳、章节、一天中的某个时间或某个其他时间子事件)或非时序子事件(例如，与事件相关的不一定限于任何特定时间的事情的发生，诸如动作的发生、特定主题的出现等)。

SSS模块166以及其模型可以创建指定响应于哪一个子事件来搜索哪一个查询的规则。例如，SSS模块166的模型可以依赖于指示下述的规则：在体育比赛的休息时间期间发送到搜索模块164的热门搜索查询是对该时间发生的其他比赛的分数的搜索。在两个球队之间的曲棍球比赛的广播期间，SSS模块166的一个规则可以使搜索模块164在曲棍球比赛的休息时间段期间搜索在相同时间发生的其他曲棍球比赛的分数。SSS模块166的模型可以依赖于指示下述的规则：响应于体育比赛过程中的比赛得分而发送给搜索模块164的热门搜索查询是对得分的运动员的统计数据的搜索。因此，SSS模块166的不同规则可以使搜索模块164响应于曲棍球比赛期间的比赛得分而搜索得分的运动员和在比赛期间予以协助的运动员的统计数据。

SSS模块166可以使用子事件的标识符来标记预先确定的搜索查询，使得如果SSS模块166确定子事件将发生或已经发生，那么SSS模块166可以快速地检索与该子事件相关联的预先确定的搜索查询。例如，如果子事件是时序子事件，那么子事件的标识符可以是事件期间的特定时间标记。如果子事件是非时序子事件，那么子事件的标识符可以是需要被满足以识别与特定子事件有关的特定查询的条件。如果SSS模块166确定计算设备110的用户正在体验事件的特定子事件，那么SSS模块166可以检索已经使用与该子事件相关联的标识符进行标记的所存储的查询，使搜索模块164搜索检索到的搜索查询以获得关于该子事件的辅助信息，并且将辅助信息发送给计算设备110以便在用户体验该子事件之前、期间或之后进行呈现。

在SSS模块166从客户端设备(例如，计算设备110)的订阅其第二屏幕信息服务的用户接收对使用、分析和存储关于用户和客户端设备的信息的明确同意之后，SSS模块166可以确定客户端设备的用户是否正在体验事件，并且响应于确定客户端设备的用户正在体验事件，SSS模块166可以在事件期间执行与事件有关的搜索查询的搜索，并且将从该搜索返回的信息输出给客户端设备。例如，SSS模块166可以在算设备110的用户持有计算设备110的情况下，从计算设备110接收指示计算设备110的用户正在参加曲棍球比赛的数据。SSS模块166可以确定与曲棍球比赛相关联的一个或多个搜索查询，并且响应于从计算设备110接收指示特定子事件何时已经发生或何时将发生的附加数据，SSS模块166可以使搜索模块164执行被标记有特定子事件的一个或多个搜索查询的搜索。SSS模块166可以接收搜索模块164从搜索的执行所获得的信息，并且使用关于在事件期间何时向用户显示或以其他方式呈现信息的指令来将所述信息输出给计算设备110。

计算设备110表示独立移动或非移动计算设备。计算设备110的示例包括被配置成经由网络130来执行或第二屏幕信息服务的移动电话、平板计算机、膝上型计算机、台式计算机、服务器、大型主机、机顶盒、电视、可穿戴设备(例如，计算机化手表、计算机化眼镜、计算机化手套等)、家庭自动化设备或系统(例如，智能恒温器或家庭扶助设备)、个人数字助理(PDA)、游戏系统、媒体播放器、电子书阅读器、移动电视平台、汽车导航或信息娱乐系统或任何其他类型的移动、非移动、可穿戴和非可穿戴计算设备。

计算设备110的UIC 112可以用作用于计算设备110的输入和/或输出设备。可以使用各种技术来实现UIC 112。例如，UIC 112可以用作使用用于接收用户输入的存在敏感型输入屏幕、麦克风技术、红外传感器技术或其他输入设备技术的输入设备。UIC 112可以用作输出设备，输出设备被配置成使用在向用户输出信息的过程中使用的任何一个或多个显示设备、扬声器技术、触觉反馈技术或其他输出设备技术来向用户呈现输出。

一般来说，SSC模块114是由RSS 160的SSS模块166所提供的第二屏幕信息服务的客户端。SSC模块114提供正在体验主要内容的用户可能想要搜索的辅助内容。也就是说，SSC模块114使计算设备110能够访问SSS模块166的第二屏幕信息服务，以自动地获得最近从由RSS 160在现场或预先记录的事件的主要内容的用户体验期间的预先确定的时间处执行的搜索所获得的当前辅助信息。由SSC模块114从SSS模块166获得的辅助信息意在补充或以其他方式提高事件的主要内容的用户体验。SSC模块114确定计算设备110的用户何时体验事件，并且呈现(例如，显示或以其他方式输出)已经针对用户的事件当前体验而生成的并且为用户个性化的辅助内容(例如，作为前瞻性搜索数据流)。

模块114可以使用驻留在计算设备110中和/或在计算设备110处执行的软件、硬件、固件或硬件、软件和固件的混合来执行本文所描述的操作。计算设备110可以使用多个处理器或多个设备来执行模块114，作为在底层硬件上执行的虚拟机，作为操作系统或计算平台的一个或多个服务，和/或作为计算设备110的计算平台的应用层处的一个或多个可执行程序。

当计算设备110的用户正在观看或收听事件的主要内容(例如，由媒体输出设备120输出的电影、在计算设备110的位置附近发生的现场演讲事件或音乐表演等)时，SSC模块114可以向SSS模块116发送指示计算设备110的用户正在观看或收听事件的主要内容和/或事件的特定子事件的信息消息。作为响应，SSC模块114可以经由网络130从SSS模块166接收辅助内容以及用于SSC模块114何时将使计算设备110输出辅助内容的指令。SSC模块114可以对从SSS模块166接收的指令进行解释，并且使UIC 112来根据指令来呈现辅助内容，使得与用户体验的主要内容同步地输出辅助内容。

例如，如图1中所示，SSC模块114可以使UIC 112来呈现用户界面128，用户界面128包括按照从时间t0-tn的时间顺序所显示的搜索内容部分118A-118N(统称为“搜索内容部分118”)。搜索内容部分118可以是包含与媒体内容部分128中的对应一个相关的附加信息(即，辅助内容)的信息卡。UIC 112可以在与输出组件122呈现媒体内容部分128中的对应一个的大约相同时间或之前或之后不久呈现搜索内容部分118中的每一个。在一些示例中，搜索内容部分118可以用时间标记以及诸如乐曲、场景等其他时间分隔符或其他逻辑标记来进行注释，以便提供SSC模块114正在使UIC 112呈现与当前用户体验的特定媒体内容部分128相关的搜索内容部分118的清楚指示。

以此方式，SSC模块114可以通过访问第二屏幕信息服务使得计算设备110来在计算设备的用户正在体验事件的同时动态地获得和呈现与事件相关的当前(即，最新)辅助内容。SSC模块114可以使计算设备110在事件期间当辅助内容与事件最相关时的时间呈现辅助内容。

以此方式，诸如系统100的系统可以使计算设备能够在事件期间当辅助信息与事件的特定时间戳或子事件最相关时的时间自动地呈现最新辅助信息，而不是要求用户来手动地提供对计算设备的输入以搜索辅助信息，或者与可能依赖于陈旧信息的预先产生的第二屏幕体验互动。通过呈现最近获得的当前或最新信息，系统可以使得计算设备呈现在辅助信息随着时间改变时不需要手动更新的更期望的第二屏幕体验。

图2是图示根据本公开的一个或多个方面的被配置成当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例性计算设备的框图。下面将图2的计算设备210描述为图1的计算设备110的示例。图2仅图示了计算设备210的一个特定示例，并且计算设备210的许多其他示例可以在其他实例中使用，并且可以包括在示例性计算设备210中包括的组件的子集，或者可以包括图2中未示出的附加组件。

如图2的示例中所示，计算设备210包括用户界面组件(UIC)212、一个或多个处理器240、一个或多个通信单元242、一个或多个输入组件244、一个或多个输出组件246以及一个或多个存储组件248。UIC212包括输出组件202和输入组件204。计算设备210的存储组件248包括第二屏幕模块270以及查询数据存储272和事件指纹数据存储273。第二屏幕模块270还包括查询调度模块274、事件和子事件检测(ESD)模块276和场境模块278。

通信信道250可以将组件212、240、242、244、246和248中的每一个互连以用于组件间通信(物理地、通信地和/或操作地)。在一些示例中，通信信道250可以包括系统总线、网络连接、进程间通信数据结构或用于通信数据的任何其他方法。

计算设备210的一个或多个通信单元242可以经由一个或多个有线和/或无线网络通过在一个或多个网络上传输和/或接收网络信号来与外部设备通信。通信单元242的示例包括网络接口卡(例如，以太网卡)、光学收发器、射频收发器、GPS接收器或可以发送和/或接收信息的任何其他类型的设备。通信单元242的其他示例可以包括短波无线电装置、蜂窝数据无线电装置、无线网络无线电装置以及通用串行总线(USB)控制器。

计算设备210的一个或多个输入组件244可以接收输入。输入的示例是触觉输入、音频输入和视频输入。在一个示例中，计算设备210的输入组件242包括存在敏感型输入设备(例如，触敏屏幕、PSD)、鼠标、键盘、语音响应系统、摄像机、麦克风或用于检测来自人或机器的输入的任何其他类型的设备。在一些示例中，输入组件242可以包括一个或多个传感器组件、一个或多个位置传感器(GPS组件、Wi-Fi组件、蜂窝组件)、一个或多个温度传感器、一个或多个移动传感器(例如，加速度计、陀螺仪)、一个或多个压力传感器(例如，气压计)、一个或多个环境光传感器以及一个或多个其他传感器(例如，麦克风、相机、红外接近传感器、湿度计等)。举一些其他非限制性示例来说，其他传感器可以包括心率传感器、磁力计、血糖传感器、湿度计传感器、嗅觉传感器、方位传感器、计步器传感器。

计算设备110的一个或多个输出组件246可以生成输出。输出的示例是触觉输出、音频输出和视频输出。在一个示例中，计算设备210的输出组件246包括PSD、声卡、视频图形适配器卡、扬声器、阴极射线管(CRT)监视器、液晶显示器(LCD)或用于生成对人或机器的输出的任何其他类型的设备。

计算设备210的UIC 212可以与计算设备110的UIC 112类似，并且包括输出组件202和输入组件204。输出组件202可以是显示组件，诸如由UIC 212显示信息的屏幕，并且输入组件204可以是对位于和/或靠近显示组件202处的物体进行检测的存在敏感输入组件。输出组件202和输入组件204可以是扬声器和麦克风对，或者是诸如输入组件244和输出组件244的一个或多个输入和输出组件的任何其他组合。在图2的示例中，UIC 212可以呈现用户界面(诸如图1的用户界面116)。

虽然被图示为计算设备210的内部组件，但是UIC 212也可以表示与计算设备210共享用于传输和/或接收输入和输出的数据路径的外部组件。例如，在一个示例中，UIC 212表示计算设备210的内置组件，内置组件位于计算设备210的外部封装(例如，移动电话上的屏幕)内且物理地连接至外部封装。在另一示例中，UIC 212表示计算设备210的外部组件，外部组件位于计算设备210的封装或外壳外部且与所述包装或外壳物理地分离(例如，与计算设备210共享有线和/或无线数据路径的监视器、投影仪等)。

计算设备210内的一个或多个存储组件248可以存储用于在计算设备210的操作期间进行处理的信息(例如，在计算设备210处的执行期间，计算设备210可以存储由模块270、274、276和278以及数据存储272和273所访问的数据)。在一些示例中，存储组件248是临时存储器，意味着存储组件248的主要目的并非长期存储。计算设备210上的存储组件248可以被配置为易失性存储器用于信息的短期存储，并且因此如果关闭电源则不保留所存储的内容。易失性存储器的示例包括随机存储器存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)和本领域已知的其他形式的易失性存储器。

在一些示例中，存储组件248还包括一个或多个计算机可读存储媒体。在一些示例中，存储组件248包括一个或多个非瞬时计算机可读存储媒体。存储组件248可以被配置成存储比易失性存储器通常所存储的信息量更大的信息量。存储组件248还可以被配置为非易失性存储空间用于信息的长期存储，并且在电源开/关后保留信息。非易失性存储器的示例包括硬磁盘、光盘、软盘、快闪存储器或各种形式的电可编程存储器(EPROM)或电可擦可编程存储器(EEPROM)。存储组件248可以存储与模块270、274、276和278以及数据存储272和273相关联的程序指令和/或信息(例如，数据)。存储组件248可以包括被配置成存储与模块270、274、276和278以及数据存储器272和273相关联的数据或其他信息的存储器。

一个或多个处理器240可以实现功能性和/或执行与计算设备210相关联的指令。处理器240的示例包括应用处理器、显示控制器、辅助处理器、一个或多个传感器集线器以及被配置成用作处理器、处理单元或处理设备的任何其他硬件。模块270、274、276和278可以由处理器240操作以执行计算设备210的各种动作、操作或功能。例如，计算设备210的处理器240可以检索并执行由存储组件248存储的使处理器240执行模块270、274、276和278的操作的指令。该指令在由处理器240执行时可以使计算设备210将信息存储在存储组件248内。

第二屏幕模块270可以包括图1的RSS 160的SSS模块162和图1的计算设备110的SSC模块114的所有功能，并且可以执行与SSS模块162和SSC模块114的操作类似的操作以便提供第二屏幕体验，该第二屏幕体验自动地提供与在计算设备210存在的情况下发生的现场或预先记录的事件有关的最新辅助信息。也就是说，当用户正在体验事件时，第二屏幕模块270可以收集并向计算设备210的用户输出将经由UIC 212呈现的与事件有关的信息。

在从用户接收到对存储和利用个人信息的明确同意之后，场境模块278可以处理和分析与计算设备210相关联的场境信息，以定义计算设备210的场境或计算设备210的用户的场境。场境模块278可以对所分析和/或存储的信息进行加密或以其他方式进行处理，以在存储或利用个人信息之前去除用户的实际身份。例如，信息可以由场境模块278进行处理，使得当存储信息或将信息发送给远程计算设备(例如，RSS 160)进行处理时将任何个人身份信息去除。

计算设备210的场境可以指定与计算设备210和/或计算设备210的用户以及其在各种位置和时间处的物理和/或虚拟环境相关联的一个或多个特征。例如，场境模块278可以基于从特定时间开始与计算设备210相关联的场境信息来将特定时间处与计算设备210相关联的物理位置确定为计算设备210的场境的一部分。当场境信息改变(例如，基于指示随着时间移动的传感器信息)时，场境模块278可以更新所确定的计算设备210的场境中的物理位置。

针对特定位置和/或时间定义计算设备的场境的信息的类型过多而无法列出。举一些示例来说，计算设备的场境可以指定：声音指纹、视频指纹、位置、移动轨迹、方向、速度、企业名称、街道地址、地点类型、建筑物、各种位置和时间处的天气状况和交通状况。计算设备的场境还可以包括定义与各种位置和时间相关联的会议或事件的日历信息、在各种位置和时间处查看的网页地址、在各种位置和时间处查看的网页的数据字段中完成的文本输入(例如，搜索或浏览历史)以及与各种位置和时间相关联的其他应用使用数据。计算设备的场境还可以包括关于在计算设备存在的情况下在各种位置和时间处被访问或广播的音频流和/或视频流、在计算设备存在的情况下在各种位置和时间处被访问或广播的电视或有线电视/卫星广播的信息，以及关于由计算设备在各种位置和时间处访问的其他服务的信息。

场境模块278可以与ESD模块276共享计算设备210的场境，ESD模块276可以根据所述场境来确定计算设备210的用户是否正在体验(例如，查看、收听或以其他方式出席事件)。场境模块278可以通过将指定用户的当前状态或场境的数据输出给ESD模块278来对来自ESD模块276的对与计算设备210的当前场境或当前状态的请求进行响应。

查询数据存储器272被配置成存储用于事件期间的后续搜索的搜索查询。存储在查询数据存储器272处的搜索查询中的每一个可以使用一个或多个事件标识符和/或一个或多个子事件标识符进行标记。ESD模块276可以执行事件标识符或子事件标识符的查找，并且作为响应，对标记有标识符的一个或多个搜索查询进行检索。

事件指纹数据存储273被配置成存储对应于事件的特定子事件的指纹。指纹可以是声音指纹、视频指纹、无线电指纹或从由计算设备在事件存在时采样的场境信息生成的任何其他类型的唯一代码。存储在查询数据存储273处的指纹中的每一个可能是可搜索的。例如，ESD模块276可以执行场境信息的特定部分(例如，声音样本、视频样本、图像等)的查找，并且作为响应，对一个或多个事件标识符或子事件标识符进行检索。

查询调度模块274被配置成确定用于事件期间的后续执行的一个或多个搜索查询，并且对用于在事件的相应时间或相应子事件发生时进行后续执行的一个或多个搜索查询进行映射或调度。用于执行特定搜索查询的搜索的相应时间可以对应于事件的时序时间线的时序部分，或者可以对应于预期在事件期间发生的特定动作。换句话说，查询调度模块274可以在初始时间识别其他计算设备的多个用户在后续时间可能会体验的事件，缓存(例如，在查询数据存储器272处)多个搜索查询以用于在后续时间进行搜索。

查询调度模块274可以生成用于在事件期间执行的搜索查询的“策划的流程”。策划的流程可以是动态的或预先创建的。

查询调度模块274可以自动地针对多个搜索查询中的至少一个调度事件期间用于搜索所述对应搜索查询的相应时间。例如，对于诸如体育、游行和政治事件等现场事件，查询调度模块274可以动态地创建策划的流程。因为可能有许多人同时体验同一事件，所以查询调度模块274可以创建一次策划的流程，并视需要与尽可能多的其他计算设备共享所述策划的流程，以便在每个相应设备处同时执行。尽管可以共享策划的流程，但是可能仍然会出现一定程度的个性化，例如避免基于用户的个人偏好执行对特定搜索查询的搜索。

查询调度模块274可以基于用户输入来手动地针对多个搜索查询中的至少一个来调度事件期间用于搜索对应搜索查询的相应时间。例如，对于诸如电影、记录的音乐、现场剧本表演的预先记录的媒体，查询调度模块274可以基于经由至查询调度模块274的用户界面用户输入来预先生成策划的流程。可以随后由编辑器或内容监视器来手动地对预先生成的策划的流程进行更新和策划以改善后面的体验。

查询调度模块274可以使能对搜索查询的混合自动和手动调度。例如，对于诸如体育、游行和政治事件的现场事件，查询调度模块274可以动态地创建所策划的流程。然而，可以在事件期间经由控制面板来对策划的流程进行更新，其中，人员(人类策划员)能够使查询调度模块274将搜索查询注入到“实况馈送”中。

另外，为了依赖查询调度模块274，第二屏幕模块270可以使能设置有工具和能力的第三方策划人员(例如，电影制片人、音乐制作方、企业客户、雇主、政府等)来为其内容创建定制的策划流程。该第三方可以决定更加详细地为电影或TV节目的场景进行注释，调出其需要的信息，或者甚至是以特殊的方式来宣传某些演员。这可以为内容制作人提供创建真正功能全面的数据流(媒体体验过程中的特定时间处的特定卡片)以增强其媒体的激励。对于企业来说，该概念可以用于为公司介绍或公告创建辅助信息源。

查询调度模块274可以依赖模型来识别与事件相关联的话题或关键词，并且基于话题或关键词来生成多个搜索查询。查询调度模块274可以将搜索查询存储在查询数据存储272处，并且利用事件的标识符来标记所存储的搜索查询。查询调度模块274可以利用事件的子事件的标识符来标记存储在查询数据存储272处的预先确定的搜索查询，以便如果ESD模块276检测出子事件的发生则进行更快的检索。

查询调度模块274可以基于针对不同但类似的事件确定的多个查询来确定用于在事件期间的后续执行的多个查询。换句话说，查询调度模块274可以确定对第一事件的多个搜索查询，该多个搜索查询包括在前面的时间发生的第二事件期间搜索的一个或多个先前搜索查询。所述第二事件可以与第一事件不同，然而第二事件可以与第一事件的话题或关键词相关联。例如，查询搜索模块274可以确定用于在周六的球队A与球队B之间的篮球比赛期间执行的一个或多个第一查询。第二天(周日)，查询调度模块274可以确定用于在球队C与球队D之间的篮球比赛期间执行的第二组查询。第二组查询可以包括其周六为球队A与球队B之间的比赛确定的一个或多个第一查询中的一些或全部，因为两个事件都是篮球比赛。

ESD模块276被配置成确定计算设备210的用户是否正在体验事件的特定子事件，并且如果正在体验事件的特定子事件，则使第二屏幕模块270执行预先调度至或映射至特定子事件的搜索查询的搜索。ESD模块276可以使第二屏幕模块270在继续确定计算设备的用户正在体验事件的同时搜索特定搜索查询。

ESD模块276可以响应于确定由计算设备210捕获的环境音频或视频包括与事件期间的相应时间相关联的声音或图像的指示来确定计算设备210的用户正在体验事件，在所述相应时间处多个搜索查询中的特定搜索查询的搜索被调度以用于搜索。例如，ESD模块276可以从场境模块278接收包括由输入组件244的麦克风或相机所捕获的环境音频或视频的一部分的场境信息。ESC模块276可以将场境信息与存储在数据存储273处的事件指纹进行比较，以确定环境音频或视频是否匹配特定事件和/或特定事件的子事件。响应于识别事件或子事件，ESD模块276可以在查询数据存储272处执行对标记有识别的事件或子事件的标识符的一个或多个搜索查询的查找。ESD模块276可以获得已经标记有从场境信息识别的事件或子事件的标识符的搜索查询，并且使第二屏幕模块270调用RSS 160的搜索模块164以使用搜索查询执行搜索。第二屏幕模块270可以使UIC 212例如作为用户界面116显示从搜索返回的信息的一部分118A。

当计算设备210的场境改变时，ESD模块276可以连续地获得标记有检测的子事件的标识符的搜索查询，并且使第二屏幕模块270调用RSS 160的搜索模块164以使用更最近获得的搜索查询来执行后续搜索。第二屏幕模块270可以使UIC 212更新其用户界面116的显示，并且显示从后续搜索返回的信息的额外部分118B至118N。

ESD模块276可以使得第二屏幕模块270能够与事件的体验保持同步，即使事件被暂停或重新开始。例如，对于预先记录的媒体(电影、音乐等)，ESD模块276可以连续地监视从场境模块278获得的场境信息，以便了解何时使第二屏幕模块270开始搜索以便示出特定信息(例如，118A)、以及何时使该信息滚动离开并示出新的信息(例如，118B-118N)。当事件被暂停时，ESD模块276可以使第二屏幕模块270避免滚动用户界面116，并且当事件继续时，继续滚动用户界面116以示出附加部分118。并且，因为ESD模块276在事件期间连续收听，所以ESD模块276可以使第二屏幕模块270总是显示与特定子事件相关的搜索信息(例如，即使事件被快进或倒退)。

第二屏幕模块270可以将由UIC 212显示的信息封装到被显示为用户界面116的基于卡的界面中。可以在特定子事件正在发生、将发生或最近已发生时显示每个卡。

对于电影事件来说，卡中所包含的作为搜索内容部分118中的一个的信息类型包括：演员履历、该演员参演的其他电影、地点信息-特定场景在哪里发生、地图、情节、历史、有关历史题材电影的背景、重要历史背景信息的快速总结。例如，如果是著名或重要电影，那么提及事件、人物以及地点、关于电影的元信息时，可以显示卡片来解释为什么获得学院奖、为什么是开创性的电影，某些重要的原因，并且在电影结束时可以显示相关或类似的电影来鼓励进一步探究或观看。而且，在电影期间，可以建议用户观看有关联的或帮助解释剧情的额外电影。在电影结束时，可以展示并建议相关或类似的内容。

对于音乐事件，卡片中所包含的作为搜索内容部分118中的一个的信息类型包括：该歌手以及乐队中人员的其他唱片、客串歌手何时出现在唱片中、关于该人首度开唱时的演出信息、音乐影响、相关艺术家、相同歌曲的视频、相同艺术家以及你所在地区即将到来的歌迷见面会。而且，在音乐事件期间，可以建议用户收听有关联的或帮助解释音乐内容的额外音乐。在音乐事件结束时，可以展示并建议相关或类似的内容。

对于电视事件，卡片中所包含的作为搜索内容部分118中的一个的信息类型包括：与电影的信息类似的信息，但是还包括对之前的剧集的更新和总结、当客串演员出现时关于特别或意想不到的客串演员的卡片等。

对于体育赛事，卡片中所包含的作为搜索内容部分118中的一个的信息类型包括：统计数据、分数，当前对手球队的过往历史，紧接重要的精彩瞬间发生之后对该精彩瞬间的重播，运动员履历，历史，故事，未来比赛，季后赛争夺中的排名，与当前比赛有关或相关的其他进行中的比赛-分数更新，以及你所在地区即将到来的比赛。

对于其他事件，卡片中所包含的作为搜索内容部分118中的一个的信息类型包括：关于事件的背景、发生时的历史、所涉及的人员的履历、事件所在地区发生的新闻、靠近事件地点的天气情况、事件所在地的旅游计划或关于事件的任何及全部其他信息。

在一些示例中，第二屏幕模块270可以使用户界面116具有两种类型的体验。第一类型的体验可以是用于事件的新体验——也就是当计算设备210的用户第一次体验事件时，并且第二类型的体验可以是当用户再次体验事件时，例如第二次、第三次等。当观看或收听新体验时，第二屏幕模块270可以使用户界面116使用包含内容的卡片以看起来像前瞻性搜索数据流。在观看或收听数据流之后，用户可能够重新访问所述数据流。第二屏幕模块270可以引起每个内容部分118被维持在列表中，展示成列表或具有图标的网格。内容部分118可以含有名称、最后一次查看的日期以及每个数据流的时长。然后用户可以随时回顾所述数据流。在通过乐曲、场景或其他分隔符对群集予以注释的情况下，在有相关卡片存在的地方，用户可能够理解所述媒体而同时无需实际地消耗媒体。

在一些示例中，第二屏幕模块270可以使按照对事件而言适当且补充性的方式对用户界面116进行装饰和“主题化”。例如，当观看电影时，标题或背景可以使用与该电影相关联的图形、字体或颜色。

在一些示例中，第二屏幕模块270可以使能共享或者邀请其他计算设备的其他用户来查看用户界面116的能力。举例来说，在具有自动同步的情况下，内容可以同时流传给多人。例如，当观看时欲邀请某人加入，第二屏幕模块270可以引起将共享图标被作为部分118中邀请被邀请者来体验计算设备210的用户正在体验的相同内容的一个的一部分示出。

图3是图示根据本公开的一个或多个技术的呈现用于在远程设备处显示的图形内容的示例性计算设备的框图。一般来说，图形内容可以包括可以被输出进行显示的任何视觉信息，仅举几个示例来说，诸如文本、图像、一组移动图像等。图3中示出的示例包括计算设备310、PSD 312、通信单元342、移动设备386和视觉显示组件390。在一些示例中，PSD 312可以是如图1-2中所描述的存在敏感型显示器。虽然在图1和图2中出于示例的目的被示出为独立的计算设备110，但诸如计算设备310等计算设备一般可以是任何组件或系统，所述任何组件或系统包括用于执行软件指令且例如不需要包括存在敏感型显示器的处理器或其他合适的计算环境。

如图3的示例中所示，计算设备310可以是包括如相关于图2中的处理器240所描述的功能性的处理器。在此类示例中，计算设备310可以通过通信信道362A操作地耦合至PSD312，通信信道362A可以是系统总线或其他适当的连接。计算设备310还可以如下面进一步描述通过通信信道362B操作地耦合至通信单元342，所述通信信道362B还可以是系统总线或其他合适的连接。虽然图3中作为示例单独地示出，但是计算设备310可以通过任何数量的一个或多个通信信道操作地耦合至PSD 312和通信单元342。

在其他示例中，诸如前面通过图1至图2中的计算设备110所说明，计算设备可以表示诸如移动电话(包括智能电话)、膝上型计算机等便携式或移动设备。在一些示例中，计算设备可以是台式计算机、平板计算机、智能电视平台、相机、个人数字助理(PDA)、服务器或大型主机。

PSD 312可以包括显示组件320和存在敏感型输入组件304。显示组件302可以例如从计算设备310接收数据，并且显示图形内容。在一些示例中，存在敏感型输入组件304可以使用利用电容、电感和/或光学识别技术来确定PSD 312处的一个或多个用户输入(例如，连续手势、多点触摸手势、单触摸手势)，并且使用通信信道362A将所述用户输入的指示发送给计算设备310。在一些示例中，存在敏感型输入组件304可以物理地定位在显示组件302之上，以使得当用户将输入单元定位在由显示组件302所显示的图形要素上方时，存在敏感型输入组件304所处的位置对应于显示有图形要素的显示组件302的位置。

如图3中所示，计算设备310还可以包括和/或与通信单元342操作地耦合。通信单元342可以包括如图2中所描述的通信单元242的功能性。通信单元342的示例可以包括网络接口卡、以太网卡、光学收发器、射频收发器或可以发送和接收信息的任何其他类型的设备。此类通信单元的其他示例可以包括蓝牙、3G和WiFi收音机、通用串行总线(USB)接口等。计算设备310还可以包括和/或与图3中出于简洁和说明的目的未示出的一个或多个其他设备(例如，输入设备、输出组件、存储器、存储设备)耦合。

图3还图示移动设备386和视觉显示组件390。移动设备386和视觉显示组件390中的每一个可以包括计算和连接能力。移动设备386的示例可以包括电子阅读器设备、可转换笔记本设备、混合板岩设备等。视觉显示组件390的示例可以包括诸如电视、计算机监视器等其他设备。在一些示例中，视觉显示组件390可以是车辆驾驶舱显示器或导航显示器(例如，汽车、飞机或某种其他车辆中)。在一些示例中，视觉显示器组件390可以是家庭自动化显示器或与计算设备310分开的某种其他类型的显示器。

如图3中所示，移动设备386可以包括存在敏感型显示器388。视觉显示器组件390可以包括存在敏感型显示器392。存在敏感型显示器388、392可以包括如本公开中所描述的存在敏感型显示器112、212和/或312的功能性的子集或所有功能性。在一些示例中，存在敏感型显示器388、392可以包括额外功能性。在任何情况下，存在敏感型显示器392例如可以从计算设备310接收数据，并且显示图形内容。在一些示例中，存在敏感型显示器392可以使用电容、电感和/或光学识别技术来确定投影仪屏幕处的一个或多个用户输入(例如，连续手势、多点触摸手势、单触摸手势)，并且使用一个或多个通信单元来将所述用户输入的指示发送给计算设备310。

如上面所描述，在一些示例中，计算设备310可以输出图形内容以便在通过系统总线或其他合适的通信信道耦合至计算设备310的PSD 312处显示。计算设备310还可以输出图形内容以便在诸如移动设备386和视觉显示组件390等一个或多个远程设备处显示。举例来说，计算设备310可以执行一个或多个指令来根据本公开的技术生成和/或修改图形内容。计算设备310可以将包括图形内容的数据输出给计算设备310的通信单元，诸如通信单元342。通信单元342可以将数据发送给远程设备中的一个或多个，诸如移动设备386和/或视觉显示组件390等。以此方式，计算设备310可以输出图形内容以便在远程设备的一个或多个处显示。在一些示例中，远程设备中的一个或多个可以在存在敏感型显示器处输出图形内容，所述存在敏感型显示器包括在相应远程设备中和/或操作地耦合至所述相应远程设备。

在一些示例中，计算设备310可能不会在操作地耦合至计算设备310的PSD 312处输出图形内容。在其他示例中，计算设备310可以输出图形内容以便在通过通信信道362A耦合至计算设备310的PSD 312处以及一个或多个远程设备处显示。在所述示例中，可以大致上同时地在每个相应设备处显示所述图形内容。在一些示例中，由计算设备310生成并且被输出以便在PSD 312处显示的图形内容可以与被输出以便在一个或多个远程设备处显示的图形内容显示不同。

计算设备310可以使用任何合适的通信技术来发送和接收数据。例如，计算设备310可以使用网络链路373A操作地耦合至外部网络374。图3中所图示的远程设备中的每个可以通过相应网络链路373B或373C中的一个操作地耦合至外部网络374。外部网络374可以包括操作地互联由此提供计算设备310与图3中所图示的远程设备之间的信息交换的网络集线器、网络交换机、网络路由器等。在一些示例中，网络链路373A至373C可以是以太网、ATM或其他网络连接。所述连接可以是无线连接和/或有线连接。

在一些示例中，计算设备310可以使用直接设备通信378操作地耦合至包括在图3中的远程设备中的一个或多个。直接设备通信378可以包括被计算设备310利用来使用有线通信或无线通信直接与远程设备发送和接收数据的通信。也就是说，在直接设备通信378的一些示例中，在远程设备处接收由计算设备310发送的数据之前，一个或多个额外设备可能不会转发所述数据，且反之亦然。直接设备通信378的示例可以包括蓝牙、近场通信、通用串行总线、WiFi、红外线等。图3中所图示的远程设备中的一个或多个可以通过通信链路376A至376C与计算设备310操作地耦合。在一些示例中，通信链路376A至376C可以是使用蓝牙、近场通信、通用串行总线、WiFi、红外线等的连接。所述连接可以是无线连接和/或有线连接。

根据本公开的技术，计算设备310可以使用外部网络374操作地耦合至视觉显示组件390。计算设备310可以确定用于事件期间的后续搜索的多个搜索查询，并且为所述多个搜索查询中的每个调度事件期间用来搜索所述对应搜索查询的相应时间。

响应于确定在事件期间当来自多个搜索查询的特定搜索查询被调度用于搜索时的相应时间处计算设备310的用户正在体验事件，计算设备310可以在事件期间由计算设备搜索所述特定搜索查询，并且输出从所述特定搜索查询的执行返回的信息的指示。举例来说，计算设备310可以使用外部网络374将包括从搜索查询的搜索返回的信息的图形表示的数据发送给视觉显示器组件390。响应于使用外部网络374接收所述数据，视觉显示组件390可以引起PSD 392来输出所述图形表示以便正好在计算设备310的用户体验事件之前、之后或之时进行显示。

图4和图5是图示根据本公开的一个或多个方面的由被配置成当计算设备的用户正在体验事件时呈现已经从在预先确定的时间处执行的搜索返回的与事件有关的信息的示例计算系统所执行的示例操作的流程图。操作400至操作440以及操作500至操作550可以由诸如计算设备210等计算设备、诸如RSS 160等计算系统或诸如系统100等计算设备和计算系统的组合来执行。为了易于描述，在图2的计算设备210的场境中描述了图4和图5。

如图4中所示，在操作中，计算设备210可以确定用于事件期间的后续搜索的多个搜索查询(400)。例如，查询调度模块274的模型可能已经在查询数据存储器272处确定并存储了一个或多个搜索查询，在与计算设备210的用户将体验的事件类似的事件期间，其他计算设备的其他用户已经搜索了该一个或多个搜索查询。

计算设备210可以针对多个搜索查询中的每一个调度事件期间用于搜索对应搜索查询的相应时间(410)。例如，在将搜索查询存储在数据存储器272处时，调度模块274可以使用时间戳标识符或指示在相关联的事件期间在什么条件下将会对搜索查询进行搜索的子事件标识符来对每个查询进行标记。

计算设备210可以从用户获得对利用和分析关于用户和计算设备210的信息的清楚且不含糊的同意(415)。例如，计算设备210可以向用户提供对同意或去除计算设备210收集场境信息和/或关于用户的其他信息的时机。在不同意的情况下，计算设备210可以避免执行步骤420至步骤440。

计算设备210可以确定在事件期间当多个搜索查询中的特定搜索查询被调度用于搜索时的相应时间处计算设备的用户是否正在体验事件(420)。例如，ESD模块276可以从场境模块278接收指示由输入组件244在当前时间捕获的环境声音或视频的场境信息。ESD模块276可以将场境信息与存储在数据存储273处的指纹进行比较，以获得与环境声音或视频相关联的一个或多个事件或子事件标识符。

如果在事件期间当来自多个搜索查询的特定搜索查询被调度用于搜索时的相应时间处用户没有体验事件(420，路径否)，那么计算设备210继续确定在事件期间当来自多个搜索查询的特定搜索查询被调度用于搜索时的相应时间处计算设备210的用户是否正在体验事件(420)。例如，如果数据存储273处没有指纹与由场境模块278捕获的环境音频或视频匹配，那么ESD模块276可以避免检测事件或子事件的发生。

如果在事件期间当来自多个搜索查询的特定搜索查询被调度用于搜索时的相应时间处用户正在体验事件(420，路径是)，那么计算设备210可以搜索特定搜索查询(430)，并且在事件期间输出从特定搜索查询的搜索返回的信息的指示(440)。例如，响应于确定数据存储273处的指纹与由场境模块278所捕获的环境音频或视频匹配，ESD模块276可以在数据存储器272中搜索已经标记有与匹配的指纹相关联的子事件标识符的任何搜索查询。

ESD模块276可以使第二屏幕模块270调用RSS的搜索模块164，以使得搜索模块164返回与标记有匹配的子事件标识符的查询有关的搜索信息。第二屏幕模块270可以使UIC210显示图形指示，和/或输出搜索信息的声音指示以补充用户事件体验。

如图5中所示，在操作中，当计算设备210的用户正在查看或收听事件时，计算设备210可以确定与事件有关的多个搜索查询以用于后续搜索(500)。例如，查询调度模块274的模型可能已经在查询数据存储器272处确定并存储了一个或多个搜索查询，在与计算设备210的用户将体验或者可能在未来的某一时间体验的事件类似的事件期间，其他计算设备的其他用户已经搜索了一个或多个搜索查询。

计算设备210可以使多个搜索查询中的每一个与事件期间的相应子事件或事件的相应经过的时间相关(510)。例如，在将搜索查询存储在数据存储器272处时，调度模块274可以利用时间戳标识符或指示在相关联的事件期间在什么条件下将对搜索查询进行搜索的子事件标识符来对每个查询进行标记。

计算设备210可以从用户获得对利用和分析关于用户和计算设备210的信息的清楚且不含糊的同意(515)。例如，计算设备210可以向用户提供同意或去除计算设备210收集场境信息和/或关于用户的其他信息的时机。在不同意的情况下，计算设备210可以避免执行步骤520-550。

计算设备210可以确定计算设备210的用户是否正在查看或收听事件(520)。例如，ESD模块276可以从场境模块278接收指示由输入组件244在当前时间捕获的环境声音或视频的场境信息。ESD模块276可以将场境信息与存储在数据存储器273处的指纹进行比较，以获得与环境声音或视频相关联的一个或多个事件或子事件标识符。

如果用户没有查看或收听事件(520，路径否)，那么计算设备210继续确定计算设备210的用户是否正在查看或收听事件(520)。例如，如果数据存储器273处没有指纹与由场境模块278捕获的环境音频或视频匹配，那么ESD模块276可以避免检测事件或子事件的发生。

如果用户没有查看或收听事件(520，路径是)，那么计算设备210可以确定与多个搜索查询中的一个有关的相应子事件或相应过去的时间是否正在发生(530)。例如，响应于确定数据存储器273处的指纹与由场境模块278所捕获的环境音频或视频匹配，ESD模块276可以在数据存储器272中搜索已经标记有与匹配的指纹相关联的事件标识符的任何搜索查询。

如果没有搜索查询标记与匹配的指纹的标识符匹配，那么计算设备210可以继续确定与多个搜索查询中的一个有关的相应子事件或相应过去的时间是否正在发生(530，路径否)。然而，如果来自数据存储器272的搜索查询的搜索查询标记与匹配的指纹的标识符匹配，那么计算设备210可以搜索与正在发生的相应子事件或相应过去的时间有关的搜索查询(540，路径否)。例如，ESD模块276可以引起第二屏幕模块270来调用RSS的搜索模块164引起搜索模块164来返回与标记有匹配的子事件标识符的查询有关的搜索信息。

计算设备210可以发送从搜索返回的信息以便向用户显示(550)。例如，第二屏幕模块270可以引起UIC 210来显示图形指示，和/或输出搜索信息的声音指示以补充用户事件体验。举例来说，图形指示可以显示为图1的用户界面116。在显示图形指示或输出声音指示之后，计算设备210可以返回至步骤(520)。

条款1.一种方法，包括：确定用于事件期间的后续搜索的多个搜索查询；针对所述多个搜索查询中的每一个调度事件期间用于搜索所述对应搜索查询的相应时间；以及响应于确定在事件期间当多个搜索查询中的特定搜索查询被调度用于搜索时的相应时间处计算设备的用户正在体验事件：搜索特定搜索查询；以及在事件期间由计算设备输出从特定搜索查询的执行返回的信息的指示。

条款2.根据条款1所述的方法，其中在继续确定计算设备的用户正在体验事件的同时，搜索特定搜索查询。

条款3.根据条款1-2中任一项所述的方法，其中，用于多个搜索查询中的至少一个的相应时间对应于事件的时序时间线的时序部分。

条款4.根据条款1-3中任一项所述的方法，其中用于多个搜索查询中的至少一个的相应时间对应于预期在事件期间发生的特定动作。

条款5.根据条款1-4中任一项所述的方法，其中计算设备针对多个搜索查询中的至少一个来自动地调度事件期间用于搜索对应搜索查询的相应时间。

条款6.根据条款1-5中任一项所述的方法，其中计算设备基于用户输入来针对多个搜索查询中的至少一个调度事件期间用于搜索对应搜索查询的相应时间。

条款7.根据条款1-6中任一项所述的方法，进一步包括：在初始时间响应于确定其他计算设备的多个用户在后续时间可能会体验所述事件来识别所述事件；以及通过计算设备缓存所述多个搜索查询以用于在所述后续时间进行搜索。

条款8.根据条款1-7中任一项所述的方法，其中确定用于事件期间的后续搜索的所述多个搜索查询包括：识别与事件相关联的话题或关键词；以及基于所述话题或关键词生成多个搜索查询。

条款9.根据条款8所述的方法，其中事件是第一事件，并且多个搜索查询包括在第二事件期间搜索的一个或多个先前搜索查询，所述第二事件与所述第一事件不同，所述第二事件与关联于所述第一事件的所述话题或关键词相关联。

条款10.根据条款1至9中任一项所述的方法，进一步包括：响应于确定由计算设备捕获的环境音频或视频包括与所述事件期间当来自所述多个搜索查询的所述特定搜索查询的搜索被调度用于搜索时的所述相应时间相关联的声音或图像的指示，而确定所述计算设备的所述用户正在体验所述事件。

条款11.一种计算系统，包括至少一个处理器和包括指令的存储器，当所述指令被执行时引起所述至少一个处理器来：确定用于事件期间的后续搜索的多个搜索查询，针对所述多个搜索查询中的每一个调度所述事件期间用于搜索所述对应搜索查询的相应时间；以及响应于确定在所述事件期间当多个搜索查询中的特定搜索查询被调度用于搜索时的所述相应时间处计算设备的用户正在体验所述事件：搜索所述特定搜索查询；以及在所述事件期间自动地将从所述特定搜索查询的所述搜索返回的信息的指示发送给所述计算设备以用于后续显示。

条款12.根据条款11所述的计算系统，其中当所述指令被执行时使得所述至少一个处理器在继续确定所述计算设备的所述用户正在体验所述事件的同时搜索所述特定搜索查询。

条款13.根据条款11-12中任一项所述的计算系统，其中用于所述多个搜索查询中的至少一个的所述相应时间对应于所述事件的时序时间线的时序部分。

条款14.根据条款11-13中任一项所述的计算系统，其中用于所述多个搜索查询中的至少一个的所述相应时间对应于预期在所述事件期间发生的特定动作。

条款15.根据条款11-14中任一项所述的计算系统，其中从所述特定搜索查询的所述搜索返回的信息的所述指示包括指令，所述指令用于使计算设备在所述事件期间在所述事件期间的所述相应时间之后发生的特定时间显示所述信息，在所述特定时间处来自所述多个搜索查询的所述特定搜索查询被调度用于搜索。

条款16.一种包括指令的计算机可读存储媒体，当所述指令被执行时引起计算系统的至少一个处理器来：当所述指令被执行时引起计算系统的至少一个处理器来：确定用于事件期间的后续搜索的多个搜索查询，针对所述多个搜索查询中的每一个调度所述事件期间用于搜索所述对应搜索查询的相应时间；以及响应于确定在所述事件期间当多个搜索查询中的特定搜索查询被调度用于搜索时的所述相应时间处计算设备的用户正在体验所述事件：搜索所述特定搜索查询；以及在所述事件期间自动地将从所述特定搜索查询的所述搜索返回的信息的指示发送给所述计算设备以用于后续显示。

条款17.根据条款16所述的计算机可读存储媒体，其中当所述指令被执行时引起所述至少一个处理器来在继续确定所述计算设备的所述用户正在体验所述事件的同时搜索所述特定搜索查询。

条款18.根据条款16-17中任一项所述的计算机可读存储媒体，其中用于多个搜索查询中的至少一个的所述相应时间对应于所述事件的时序时间线的时序部分。

条款19.根据条款16-18中任一项所述的计算机可读存储媒体，其中用于多个搜索查询中的至少一个的相应时间对应于期望在事件期间发生的特定动作。

条款20.根据条款16-19中任一项所述的计算机可读存储媒体，其中当所述指令被执行时引起所述至少一个处理器来：自动地针对所述多个搜索查询中的至少一个调度所述事件期间用来搜索所述对应搜索查询的所述相应相应时间；或者基于由所述计算系统从所述事件的人类产生者接收的用户输入来为所述多个搜索查询中的至少一个调度所述事件期间用来搜索所述对应搜索查询的所述相应时间。

条款21.根据条款11所述的计算系统，所述计算系统包括用于执行根据条款1至10所述的方法中的任一个的设备。

条款22.根据条款16所述的计算机可读存储媒体，所述计算机可读存储媒体还包括指令，当所述指令被执行时配置根据条款11所述的计算系统的所述至少一个或多个处理器来执行条款1-10所述的方法中的任一个。

条款23.一种包括用于执行条款1-10所述的方法中的任一个的设备的计算设备。

条款24.一种包括指令的计算机可读存储媒体，当所述指令被执行时引起计算设备的至少一个处理器来执行根据条款1-10所述的方法中的任一个。

在一个或者多个实例中，可以在硬件、软件、固件或者其任何组合中实施描述的功能。如果在软件中实施，则可以将功能作为一个或多个指令或者代码存储在计算机可读介质上或者通过计算机可读介质来传输，并且可以由基于硬件的处理单元来执行。计算机可读介质可以包括一种或者多种计算机可读存储介质，该一种或者多种计算机可读存储介质与有形介质对应，诸如，数据存储介质或者通信介质，包括促进将计算机程序从一个地方传送至另一地方(例如，根据通信协议通信介质)的任何介质。按照这种方式，计算机可读介质通常可以与(1)非瞬时的有形计算机可读存储介质或者(2)通信介质(诸如，信号或者载波)对应。数据存储介质可以是可以通过一个或者多个计算机或者一个或者多个处理器访问以检索用于实施本公开中描述的技术的指令、代码和/或数据结构的任何可用介质。计算机程序产品可以包括计算机可读存储介质。

通过示例而非限制的方式，这种计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或者其他光盘存储设备、磁盘存储设备或者其他磁存储设备、闪速存储器或者可以用于以指令或者数据结构的形式存储期望的程序代码并且可通过计算机来进行访问的任何其他介质。同样，任何连接被恰当地称为计算机可读介质。例如，如果指令是通过使用同轴电缆、光缆、双绞线、数字用户线(DSL)或者无线技术(诸如，红外、无线电和微波)来从网站、服务器或者其他远程源传输，那么同轴电缆、光缆、双绞线、DSL或者无线技术(诸如，红外、无线电和微波)被包括在介质的定义中。然而，应该明白，一种或者多种计算机可读存储介质和数据存储介质不包括连接、载波、信号或者其他瞬时介质，而是涉及非瞬时有形存储介质。本文所使用的磁盘和光盘包括：压缩式光盘(CD)、激光视盘、光盘、数字多功能光盘(DVD)、软盘和蓝光光盘，其中，磁盘通常磁性地复制数据，而光盘利用激光光学地复制数据。上面的组合还应该被包括在计算机可读介质的范围内。

可以通过一个或者多个处理器来执行指令，诸如一个或者多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或者其他等效的集成或者离散逻辑电路系统。因此，本文所使用的术语“处理器”可以指任何前述的结构或者适用于实施本文描述的技术的任何其他结构。另外，在一些方面中，可以将本文描述的功能提供在专用的硬件模块和/或软件模块内。同样，可以将该技术充分地实施在一个或者多个电路或者逻辑元件中。

可以在各种设备或者设备中实施本公开的技术，包括：无线设备、集成电路(IC)或者一组IC(例如，芯片集)。在本公开中，将各种部件、模块或者单元描述为用于强化配置为执行所公开的技术的设备的功能方面，但并不一定需要通过不同的硬件单元实现。相反，如上所述，结合合适的软件和/或固件，可以将各种单元组合在硬件单元中或者可以通过交互操作的硬件单元的集合(包括上文描述的一个或者多个处理器)来提供。

已经对各种示例进行了描述。这些和其他实施例在以下权利要求书的范围内。

Claims (13)

1.一种方法，包括：

确定用于事件期间的后续搜索的多个搜索查询；

针对所述多个搜索查询中的每一个搜索查询调度在所述事件期间用于对所述搜索查询进行搜索的相应时间；以及

响应于确定计算设备的用户在所述事件期间的特定时间处正在体验所述事件，其中所述多个搜索查询中的特定搜索查询被调度在所述特定时间处用于搜索：

搜索所述特定搜索查询；以及

在所述事件期间由所述计算设备输出从所述特定搜索查询的执行返回的信息的指示。

2.根据权利要求1所述的方法，其中，在继续确定所述计算设备的所述用户正在体验所述事件的同时，搜索所述特定搜索查询。

3.根据权利要求1所述的方法，其中，所述事件期间的用于所述多个搜索查询中的至少一个的相应时间对应于所述事件的时序时间线的时序部分。

4.根据权利要求1所述的方法，其中，所述事件期间的用于所述多个搜索查询中的至少一个的相应时间对应于预期在所述事件期间发生的特定动作。

5.根据权利要求1所述的方法，其中，所述计算设备针对所述多个搜索查询中的搜索查询来自动地调度所述事件期间的用于搜索所述搜索查询的相应时间。

6.根据权利要求1所述的方法，其中，所述计算设备基于用户输入，针对所述多个搜索查询中的搜索查询来调度所述事件期间的用于搜索所述搜索查询的相应时间。

7.根据权利要求1所述的方法，进一步包括：

在初始时间响应于确定其他计算设备的多个用户在后续时间可能体验所述事件来识别所述事件；以及

通过所述计算设备缓存所述多个搜索查询以用于在所述后续时间进行搜索。

8.根据权利要求1所述的方法，进一步包括：

响应于确定由所述计算设备捕获的环境音频或视频包括与所述事件期间的所述特定时间相关联的声音或图像的指示，确定所述计算设备的所述用户正在体验所述事件。

9.根据权利要求1所述的方法，其中，确定用于所述事件期间的后续搜索的所述多个搜索查询包括：

识别与所述事件相关联的话题或关键词；以及

基于所述话题或关键词生成所述多个搜索查询。

10.根据权利要求9所述的方法，其中，所述事件是第一事件，并且所述多个搜索查询包括在第二事件期间搜索的一个或多个先前搜索查询，所述第二事件与所述第一事件不同，所述第二事件与关联于所述第一事件的所述话题或关键词相关联。

11.一种计算系统，包括：

至少一个处理器；以及

包括指令的存储器，当所述指令在由所述至少一个处理器执行时，使所述至少一个处理器执行根据权利要求1-10中任一项所述的方法。

12.一种包括指令的计算机可读存储介质，当所述指令由计算系统的至少一个处理器执行时，使所述至少一个处理器执行根据权利要求1-10中任一项所述的方法。

13.一种系统，包括用于执行执行根据权利要求1-10中任一项所述的方法的装置。