CN107391524B - 增强消息交换话题 - Google Patents

Abstract

本发明涉及一种增强消息交换话题，提供用于增强消息交换话题的方法、装置、系统和计算机可读介质。在各种实现方式中，可以检查在操作两个或多个消息交换客户端的两个或多个参与方之间正在进行的消息交换话题。基于检查，可以识别用于形成搜索查询的一个或多个项目。在各种实现方式中，可以在作为正在进行的消息交换话题的一部分由两个或多个参与方中的一个参与方指向两个或多个参与方中的另一参与方所的一个或多个消息中识别一个或多个项目，参与方不将一个或多个项目具体地识别为搜索查询。然后可以利用一个或多个识别的项目形成搜索查询，并且可以获得响应于搜索查询的内容。与响应内容相关联的一个或多个图形元素可以并入到消息交换话题中。

Description

增强消息交换话题

技术领域

本公开涉及增强消息交换话题(thread)。

背景技术

多个参与方可以经由可以使用各种技术(诸如文本消息交换、在线聊天(例如，即时通讯、因特网中继聊天等)、社交网络消息发送话题等)来实现的消息交换话题来文本地彼此进行通信。诸如文本消息发送应用、在线聊天应用、社交网络应用等的一些客户端消息交换应用可以显示作为图形用户界面的一部分的正在进行的消息交换话题的记录本(transcript)的至少一部分(例如，当参与方会话时实时更新的文本和/或图像的实况或近期实况记录)，使得参与方可以跟随该会话。正在进行的消息交换话题以及因此所显示的记录本通常限于文本或其他数据，例如参与方故意地和明确地并入消息交换话题中的图片。因此，寻求与会话有关的外部信息的参与方必须切换到诸如web浏览器的不同应用以获得期望的信息。切换应用，特别是使用通常一次只显示单个应用的移动设备，可能分散注意力和累赘，并且可能中断会话的流动。

发明内容

本公开一般涉及用于检查两个或多个参与方之间的消息交换话题以用基于搜索的建议和其他内容来增强消息交换话题的方法、装置和计算机可读介质(暂时的和非暂时的)。这可以产生各种技术优点。例如，一个技术优点是本文描述的技术可以减少参与方离开讨论以从其他数据源获得数据的需要。另一个相关的技术优点是可能需要在客户端设备上执行较少的应用，节省诸如处理器周期和存储器的客户端设备的计算资源以及电池电力。通常，用基于搜索的建议和其他内容，包括与该内容相关联的图形元素，来增强消息交换话题，可以减少用户为了访问建议和内容而必须对设备进行的用户输入的数量。对于具有低熟练度的用户或者否则对设备进行用户输入有困难的用户，这会尤其有益。对于至少这些用户，例如通过使用户避免由于他或她相对低的熟练度而引起出错，用建议和/或其他内容增强消息交换话题可以增加设备使用的可靠性和速度。

在一些实现方式中，中央“消息交换引擎”可以促进参与方之间的消息交换话题。消息交换引擎可以监视在参与方之间指引的消息以确定何时满足一个或多个标准(例如，语义或语法)。基于满足标准的交换的消息中的一个或多个项目(例如，句子、单词、短语、图像、声音)，消息交换引擎可形成搜索查询。响应于搜索查询的内容(其可以由消息交换引擎通过向知识系统的一个或多个组件提交搜索查询而获得)然后可以并入消息交换话题中，例如作为与响应内容相关联的一个或多个图形元素。

“图形元素”可以包括文本、图像和可以是或可以不是交互式的任何其他可视元素，例如小应用程序(例如，计算器、翻译器等)。图形元素可以响应于上述搜索查询来传达或者可以选择传达关于内容的信息。在一些实现方式中，图形元素可以是到电子文档的链接(例如，超链接)或到安装在客户端设备上的一个或多个应用的链接。

在一些实现方式中，图形元素可以包括传达关于在两个或多个参与方之间交换的一个或多个消息中提及的已知实体(例如，人、地点、事物)的信息的文本和/或图片。假设一个参与方向另一参与方提出问题，“谁是在Herbert Hoover之前的总统”，并假设其他参与方不知道答案。不是该其他参与方必须切换出消息交换客户端以使用诸如web浏览器的另一应用来查询搜索引擎，消息交换引擎可以(自动地或响应于参与方命令)将该问题作为搜索查询提交到后台的搜索引擎。然后，消息交换引擎可以将答案(Calvin Coolidge)并入在至少一个消息交换客户端的图形用户界面中显示的正在进行的消息交换的记录本中。

在一些实现方式中，结合到消息交换话题中的图形元素可以由参与方选择，以代表参与方自动向消息交换话题添加文本。例如，所生成的搜索查询可以寻找对由第一参与方添加到消息交换话题的消息的最流行的响应。表示最流行响应的图形元素可以在第二参与方的图形界面中呈现。然后，第二参与方可以选择包括最适合的响应的图形元素，并且可以将响应自动添加到记录本。在一些实现方式中，第一参与方可能不能辨别添加到记录本的文本不是由第二参与方手动写成的。应当理解，对于具有低熟练度的用户，或者否则发现难以对设备进行输入，例如将文本添加到消息交换话题或者操作设备中正在运行的其他应用的用户，用信息和/或上述种类的可选元素来增强消息交换话题，会尤其有益。该可选元素和信息直接并入到话题中，还可以减少向设备进行错误输入的数量，否则这会导致具有相对低的熟练度的用户为了访问信息而不得不进行相对大量的用户输入。错误的用户输入的减少，以及相应的错误操作的减少，可以具有减少对设备中的计算机资源的负担的总效果。还可以减少对设备外部的资源的负担，例如与该设备通信的数据网络和其他联网的计算装置。

在一些实现方式中，可以提供一种计算机实现的方法，其包括以下操作：检查在操作两个或多个消息交换客户端的两个或多个参与方之间的正在进行的消息交换话题；基于所述检查识别用于形成搜索查询的一个或多个项目，其中在作为正在进行的消息交换话题的一部分由所述两个或多个参与方中的一个指向所述两个或多个参与方中的另一个的一个或多个消息中识别所述一个或多个项目，而参与方不将所述一个或多个项目具体地识别为搜索查询；利用所述一个或多个识别的项目形成所述搜索查询；获得响应于所述搜索查询的内容；以及，将与所述响应内容相关联的一个或多个图形元素并入到所述消息交换话题中。

本文公开的技术的这种方法和其他实现方式可以各自可选地包括以下特征中的一个或多个。

在各种实现方式中，并入可以包括请求所述消息交换客户端中的至少一个将所述一个或多个图形元素插入到在所述消息交换客户端的所述至少一个的图形用户界面中显示的、所述正在进行的消息交换话题的记录本中。在各种实现方式中，所述一个或多个图形元素包括传达所述响应内容的文本或一个或多个图像。在各种实现方式中，所述一个或多个图形元素包括所述一个或多个项目的翻译。在各种实现方式中，所述一个或多个图形元素可由参与方选择，以代表所述参与方自动地将预定文本添加到所述记录本。

在各种实现方式中，所述一个或多个图形元素可以链接到响应于所述搜索查询的一个或多个电子文档。在各种实现方式中，所述一个或多个图形元素可以链接到安装在操作所述消息交换客户端中的至少一个的计算设备上的应用，其中所述应用响应于所述搜索查询。在各种实现方式中，所述一个或多个图形元素可以包括可由参与方操作以执行一个或多个操作的小应用程序。在各种实现方式中，小应用程序可以包括计算器、翻译器和/或游戏。

在各种实现方式中，该方法可以还包括从包含已知实体和其间的关系的记录的知识库中识别与所述一个或多个项目相关联地描述的第一实体。在各种实现方式中，所述响应内容包括与所述第一实体相关联的信息。在各种实现方式中，该方法还可以包括由所述处理器中的一个或多个从所述知识库识别与所述第一实体相关的第二实体。在各种实现方式中，所述一个或多个图形元素传达与所述第二实体相关联的信息。在各种实现方式中，所述一个或多个图形元素传达关于所述第一实体的一个或多个属性的信息。在各种实现方式中，从由消息交换话题的参与方操作的客户端计算设备获得响应于搜索查询的内容。

其他实现方式可以包括存储可由处理器执行以执行诸如上述一个或多个方法的方法的指令的非暂时性计算机可读存储介质。又一实现方式可以包括一种系统，其包括存储器和一个或多个处理器，其可操作以执行存储在存储器中的指令，以实现单独或共同地执行诸如所描述的方法中的一个或多个的方法的一个或多个模块或引擎。

应当理解，本文更详细描述的前述概念和附加概念的所有组合被认为是本文所公开的主题的一部分。例如，出现在本公开内容结尾处的所要求保护的主题的所有组合被认为是本文所公开的主题的一部分。

附图说明

图1示出了根据各种实现方式的其中一个或多个图形元素可以被并入消息交换话题的环境。

图2、图3、图4、图5、图6、图7、图8和图9描绘根据各种实现方式的客户端装置可如何呈现用于消息交换客户端的图形用户界面的示例。

图10描绘了示出根据各种实现方式的利用图形元素增强正在进行的消息交换的记录本的示例方法的流程图。

图11示意性地描绘了计算机系统的示例架构。

具体实施方式

图1示出了可以将一个或多个图形元素并入到消息交换话题中的环境。示例环境包括多个客户端设备106_1-N和知识系统102。知识系统102可以在例如通过网络进行通信的一个或多个计算机中实现。知识系统102是信息检索系统的示例，其中可以实现本文描述的系统、组件和技术和/或本文描述的系统、组件和技术可以与之接口连接。

用户可以经由客户端设备106与知识系统102交互。每个客户端设备106可以是通过一个或多个网络110(诸如局域网(LAN)或广域网(WAN)，例如因特网)耦合到知识系统102的计算机。每个客户端设备106可以是例如台式计算设备、膝上型计算设备、平板计算设备、移动电话计算设备、参与方的车辆的计算设备(例如，车载通信系统、车载娱乐系统、车载导航系统)或包括计算设备的参与方的可穿戴装置(例如，具有计算设备的参与方的手表、具有计算设备的参与方的眼镜)。可以提供附加和/或替代的客户端设备。参与方可能将操作多个计算设备，这些计算设备共同形成由参与方操作和/或由参与方拥有的计算设备的协作“生态系统”。然而，为了简洁起见，本公开中描述的示例将专注于操作单个客户端设备106的参与方。

每个客户端设备106可以操作各种不同的应用，诸如消息交换客户端107。消息交换客户端107可以具有各种形式。在一些实现方式中，消息交换客户端107可以为短消息服务(“SMS”)和/或多媒体消息服务(“MMS”)客户端、在线聊天客户端(例如，即时消息器、因特网中继聊天或“IRC”等)和与社交网络相关联的消息发送应用等的形式。在一些实现方式中，消息交换客户端107可以在由web浏览器(未示出)呈现的网页内实现。

客户端设备106和知识系统102中的每一个可以包括用于存储数据和软件应用的一个或多个存储器、用于访问数据和执行应用的一个或多个处理器以及有助于通过网络进行通信的其他组件。由客户端设备106和/或知识系统102执行的操作可以分布在多个计算机系统上。知识系统102可以被实现为例如在通过网络彼此耦合的一个或多个位置中的一个或多个计算机上运行的计算机程序。

在各种实现方式中，知识系统102可以包括消息交换引擎120、索引引擎124、信息引擎128、排名引擎134和替代查询建议引擎136。在一些实现方式中，一个或多个引擎120、124、128、134和/或136可以被省略。在一些实现方式中，可以组合引擎120、124、128、134和/或136中的一个或多个的全部或方面。在一些实现方式中，引擎120、124、128、134和/或136中的一个或多个可以在与知识系统102分离的组件中实现。在一些实现方式中，引擎120、124、128、134和/或136中的一个或多个或其任何操作部分可以在由客户端设备106执行的组件中实现。

索引引擎124可以保持索引126以供知识系统102使用。索引引擎124例如使用常规和/或其它索引技术来处理文档并更新索引126中的索引条目。例如，索引引擎124可以爬取诸如万维网的一个或多个资源以及索引经由这种爬取访问的文档。作为另一示例，索引引擎124可以从诸如控制这样的文档的网络管理员的一个或多个资源接收与一个或多个文档相关的信息，并基于这样的信息对文档进行索引。文档是与文档地址相关联的任何数据。文档包括网页、文字处理文档、便携式文档格式(PDF)文档、图像、电子邮件、日历条目、视频和网络订阅源，此处仅仅列出几个。每个文档可以包括：内容，例如，文本、图像、视频、声音、嵌入信息(例如、元信息和/或超链接)；和/或嵌入指令(例如、诸如JavaScript的ECMAScript实现)。

信息引擎128可以保持包括或促进访问非文档特定信息以供知识系统102使用的另一索引130。例如，知识系统102可以被配置为响应于出现以寻求具体信息的搜索查询返回信息。如果参与方搜索“Ronald Reagan’s birthday”，则知识系统102可以例如从信息引擎128接收日期“February 6,1911”。该信息可以作为与从索引引擎124接收的文档分离的搜索结果的一部分返回给参与方，在各种实现方式中，索引130本身可以包含信息，或者它可以链接到一个或多个其他信息源，诸如在线百科全书和历书等等。在各种实现方式中，索引126或索引130可以包括查询(或查询项)与文档和/或信息之间的映射。

在本说明书中，术语“数据库”和“索引”将广义地用于指代任何数据集合。数据库和/或索引的数据不需要以任何特定方式被结构化，并且它可以被存储在一个或多个地理位置中的存储设备上。因此，例如，索引126和130可以包括多个数据集合，其中每一个可以被不同地加以组织和访问。

排名引擎134可以使用索引126和/或130来例如使用常规和/或其他信息检索技术来响应于搜索查询来识别文档和其他信息。排名引擎134可以例如使用一个或多个排名信号来计算被识别为响应于搜索查询的文档和其他信息的得分。每个排序信号可以提供关于文档或信息本身、文档或信息与搜索查询之间的关系和/或文档或信息与执行搜索的参与方之间的关系的信息。

替代查询建议引擎136可以使用一个或多个信号和/或其他信息，诸如替换查询建议(未示出)的数据库和/或关于客户端设备106的用户的信息(例如，搜索历史、GPS位置、用户属性)，以生成替代的查询建议，以与任何搜索结果一起提供给客户端设备106。当用户键入搜索查询的连续字符时，替代查询建议引擎136可以识别可能产生对用户有用的结果的替代查询。例如，假设客户端设备106位于Chicago，并且已经键入字符“restaur”。替代查询建议引擎136可以基于指示客户端设备106在Chicago的位置信号和指示用户对具有现场音乐的餐馆的偏好的搜索历史信号建议查询“restaurants in Chicago with livemusic.”。作为另一示例，对于已经键入“Ronald Reagan’s birt”的用户，替代查询建议引擎136可以例如使用诸如前缀匹配的技术确定和建议替代查询，例如“Ronald Reagan’sbirthday”、“Ronald Reagan’s birthplace”和“Ronald Reagan’s birth controlposition”等。替代查询建议引擎136也可以提供其他建议，诸如部分形成的搜索查询的拼写校正版本。

在各种实现方式中，消息交换引擎120可以被配置为检查在操作两个或多个消息交换客户端107的两个或多个用户之间正在进行的消息交换话题。基于该检查，消息交换引擎120可以识别用于形成搜索查询的一个或多个项目。在各种实现方式中，可以在作为正在进行的消息交换话题的一部分的由两个或多个参与方中的一个参与方指向两个或多个参与方中的另一参与方的一个或多个消息中，识别一个或多个项目，例如，参与方不具体识别作为搜索查询的一个或多个项目。例如，如果一个参与方提到诸如人、地点或事物的实体，其可以触发消息交换引擎120将所提及的实体并入搜索查询中。

消息交换引擎120然后可以例如从索引引擎124、信息引擎128和/或客户端设备106本地的数据(诸如SMS/MMS历史、日历条目和媒体内容(例如，照片、视频、游戏)等)获得响应于搜索查询的诸如文档和信息的内容。在各种实现方式中，响应于搜索查询的内容还可以包括从替代查询建议引擎136返回的替换查询建议。在一些实现方式中，响应于搜索查询的内容可以在其被提供给消息交换引擎120之前被排名引擎134排名。

基于响应于搜索查询的内容，消息交换引擎120可以将与响应内容相关联的各种项目(诸如图形元素(单词、图像、动画、小应用程序)、声音等)并入到在操作两个或多个消息交换客户端107的两个或多个参与方之间的消息交换话题。所并入的项目可以是消息交换话题中的一个或多个参与方例如在与描绘正在进行的消息交换话题的记录本的消息交换客户端107相关联的图形用户界面上可见的。如本文所使用的，“记录本”可以指由消息交换话题的一个或多个参与方交换和/或查看的文本、图像、声音和/或小应用程序的实况记录。在一些实现方式中，当参与方交谈时，消息交换话题的记录本可以被实时地或接近实时地更新。

消息交换引擎120可以以各种方式将一个或多个项目并入到多个消息交换客户端107之间的消息交换话题中。在一些实现方式中，消息交换引擎120可以请求参与消息交换话题的至少一个消息交换客户端107将与响应内容相关联的一个或多个图形元素插入到在至少一个消息交换客户端107的图形用户界面中显示的正在进行的消息交换话题的记录本中。在一些情况下，图形元素可以被并入到由多于一个的消息交换客户端107呈现的记录本中，例如在由参与消息交换话题的所有消息交换客户端107呈现的记录本中。在一些实现方式中，消息交换引擎120可以简单地向消息交换客户端107提供响应内容，消息交换客户端107然后可以选择将什么内容并入消息交换话题。

可以将各种类型的图形元素并入到消息交换话题中(并且因此并入到由至少一个消息交换客户端107显示的话题的记录本中)。在一些实现方式中，一个或多个图形元素可以包括传达响应于由消息交换引擎120形成的搜索查询的信息的文本。假设第一参与方操作她的消息交换客户端107向另一参与方提出问题“What was the first state admittedinto the union？”。消息交换引擎120可以根据参与方的请求或自发地将问题(或其变体)作为搜索查询提交给索引引擎124和/或信息引擎128。索引引擎124和/或信息引擎128可以响应于搜索查询而提供消息交换引擎信息，诸如Delaware(特拉华)是被纳入美利坚合众国的第一个州的指示。还可以包括附加的响应信息，诸如Delaware被接纳的日期、之后接纳什么州等。然后，消息交换引擎120可以将该信息中的一些或全部并入消息交换话题，使得它被并入在例如由提出问题的参与方操作的消息交换客户端107的图形用户界面中显示的记录本内。

除了文本之外或代替文本，在各种实现方式中，并入消息交换话题中的一个或多个图形元素可以包括响应于搜索查询传达内容的一个或多个图像。在上述场景中，例如，除了关于特拉华的文本之外或替代关于特拉华的文本，可以将特拉华州的图像和/或特拉华州旗并入到消息交换话题中。

在许多情况下，响应于搜索查询的信息可能太笨拙(例如，太长、太多的细节等)而不能可行地并入消息交换话题而不中断会话的流。在这种情况下，可以选择总响应信息的子集(即，可以剔除总响应信息)以并入到话题中。该子集可以包括例如从一个或多个响应文档(例如，N个排名最高的文档)提取的文本/图像的片段和/或由信息引擎128提供的信息。

在一些实现方式中，消息交换引擎120可以选择子集(或剔除响应信息)以并入到消息交换话题中。在其他实现方式中，消息交换引擎120可以向消息交换客户端107提供综合响应信息，并且客户端107可以执行剔除。例如，在一些实现方式中，消息交换客户端107可以基于主机客户端设备106的屏幕大小来剔除信息。在其他实现方式中，消息交换引擎120和消息交换客户端107都可以执行剔除。在一些实现方式中，可以选择前N个搜索结果以并入消息交换话题。N可以基于例如屏幕尺寸、参与方偏好等来选择，或者可以被手动选择(例如，N可以被设置为五、十、二、一等等)。

无论文本还是图像被并入到消息交换话题中，在各种实现方式中，图形元素可以链接到响应于搜索查询的一个或多个电子文档，使得参与方仅需要选择要被指向到新资源(例如，显示信息的web浏览器)的图形元素。在一些实现方式中，一个或多个图形元素可以链接到响应于搜索查询的应用(安装在操作消息交换客户端107中的至少一个的客户端设备106上)。例如，如果参与方向消息交换话题输入“boy,I could sure go for dinner atFrank’s(男孩，我可以肯定去弗兰克的晚餐)”。与位置Frank’s相关的一个或多个图形元素可以被例如消息交换引擎120并入到消息交换话题中。一个或多个图形元素可以可选择以打开客户端设备106上的一个应用，该应用可具体地操作以在位置Frank’s处建立预订，和/或，一个或多个图形元素可以可选择以打开可操作以显示地图和/或到Frank’s的方向的另一应用。

在一些实现方式中，除链接到应用之外或者代替链接到应用，一个或多个图形元素本身可以是应用。具体地，并入到消息交换话题中的图形元素可以是所谓的“小应用程序”的形式，其可以由参与方操作而无需切换应用(这在移动设备上可能是优选的，移动设备仅一次显示一个应用)以执行一个或多个操作。各种类型的小应用程序可以并入消息交换话题中(并且因此可以出现于在消息交换客户端107中显示的其记录本中)，包括但不限于游戏、计算器和翻译器等。

在一些实现方式中，一个或多个图形元素可以包括由消息交换引擎120识别的一个或多个项目的翻译以形成搜索查询。假设一个参与方提出问题“what is German for‘airplane’？(什么是'飞机'的德语？)”。消息交换引擎120可以将这个问题(或其变体)提交给索引引擎124和/或信息引擎128，并且可以作为响应接收翻译(“Flugzeug”)。消息交换引擎120然后可以将该信息并入消息交换话题中，其中它可以在记录本中显示为例如对参与方的问题的响应。

除传送响应于搜索查询的信息之外或者代替传送响应于搜索查询的信息，在一些实现方式中，并入到消息交换话题中的一个或多个图形元素可以由参与方选择，以代表参与方自动地将预定文本添加到记录本。例如，当参与方向另一参与方提出问题时，可以例如通过消息交换引擎120将该问题作为搜索查询提交给索引引擎124和/或信息引擎128。在一些实现方式中，响应于搜索查询返回的信息可以是对该问题的N个最流行或可能的响应。这些答案可以并入到在由问题所提出到的参与方操作的消息交换客户端107的图形用户界面中呈现的可选择图形元素(例如，在触摸屏上呈现的按钮)。被询问的参与方然后可以致动与她选择的响应相对应的按钮，并且所选择的响应可以被并入到消息交换话题中。在一些实现方式中，可以利用不建议生成自动响应的方式的响应向提出该问题的参与方呈现。例如，自动响应可以在记录本中被描绘为来自被询问的参与方的答案。

在一些实现方式中，可以将一个或多个图形元素并入到消息交换话题中，该消息交换话题响应于从消息交换话题的内容提取的查询，基于从替代查询建议引擎136接收的信息而生成。例如，假设参与方开始操作她的消息交换客户端107来提出问题“Who was theeighteenth president of the United States？”。在参与方完成问题之前，例如，在键入以下字符“who was the eight”之后，她部分键入的问题可以被提交给知识系统102。知识系统102可以从替代查询建议引擎136获得一个或多个替代查询建议，其是参与方当前正键入内容的可能的完成的版本。响应于接收到这些完成的版本，作为消息交换客户端107的图形用户界面的一部分，客户端设备106可以呈现参与方可以选择以完成她的查询的一个或多个图形元素，例如按钮。例如，参与方可以看到以下两个按钮：“Who was the eighthpresident of the United States？”和“Who was the eighteenth president of theUnited States？”。在参与方选择替代查询建议和所选择的自动文本显示在话题中之后，在一些实现方式中，可以例如通过替代查询建议引擎136来提供一个或多个后续问题，例如“In what years did that President serve？”或“What was that President’s mostnotable accomplishment？”。例如，在参与方在历史上对其他人进行测验(例如，作为研究会话的一部分)的情况下，则可以向参与方提供可选择的图形元素，例如与这些后续问题相对应的按钮。

在一些实现方式中，知识系统102可以具有例如作为信息引擎128和/或另一组件的一部分的所谓的知识库，其包含已知实体(例如，人、地点、事物)和已知实体之间的关系的记录。在一些实现方式中，这样的知识库可以例如在索引130中实现为其中节点表示实体并且边表示实体之间的关系的图，尽管这不是必需的。在一些这样的实现方式中，可以使得关于来自这样的知识库的实体的信息例如响应于如上所述由消息交换引擎120形成和提交的搜索查询而对消息交换引擎120可用。

在一些实现方式中，作为消息交换话题的一部分，例如消息交换引擎120和/或信息引擎128可以使用知识库来识别在两个或多个参与方之间交换的一个或多个消息中提及的第一实体。响应于与实体相关的搜索查询的信息然后可以被并入消息交换话题中。例如，假设参与方向消息交换话题提交诸如“Babe Ruth was the greatest！”的消息。“BabeRuth”可以例如由信息引擎128基于存储在索引130中的知识库以及Babe Ruth和/或一个或多个相关实体的一个或多个属性(例如他所服役的一个或多个球队(例如，纽约洋基队)、他的家庭成员、他的队友、服役的年龄和活着的年龄等等)来加以识别。然后例如通过消息交换引擎120或通过消息交换客户端107可以选择该信息中的一个或多个并且将其自动并入消息交换话题(例如，作为一个或多个图形元素)。例如，当Babe Ruth由消息交换话题中的参与方提及时，关于Babe Ruth和/或其他棒球运动员的信息也可以被并入到话题中，使得其可以由至少一个参与方经由她的消息交换客户端107的图形用户界面看到。

图2描绘由名为Sven的参与方操作的示例客户端设备206₁。客户端设备206₁包括与在客户端设备206₁上操作的消息交换客户端(在图2中未具体示出)相关联的图形用户界面250。图形用户界面250显示Sven和两个其他参与方Sven和Dennis之间的消息交换话题的记录本252。图形用户界面250还包括文本输入域254，Sven可以使用文本输入域254例如响应于其他两个的先前语句来将文本或其他内容输入到消息交换话题。在这个例子中，Sven要求Sven证明他是多么聪明。Sven(图2中的“You”，因为这是Sven的客户端设备206₁)声称他可以比大多数人给出更多的美国总统的姓名。Dennis通过问“Who was President of theUnited States of America before Herbert Hoover？(在Herbert Hoover之前谁是美利坚合众国的总统？)”来挑战Sven。

在对话中的这一点上，由Dennis提出的问题已经作为搜索查询提交给例如索引引擎124和/或信息引擎128。这些引擎中的一个或两个可以例如使用上述实体知识库确定在Herbert Hoover之前的一个或多个美国总统的身份，并且可以将该信息发送回客户端设备206₁。因此，已经在由Sven操作的客户端设备206₁上的图形用户界面250呈现的记录本252的版本中呈现了多个图形元素(其中三个在图2中可见)，列出了Calvin Coolidge、WarrenHarding和Woodrow Wilson。在各种实现方式中，这些可选元素可以在其他参与方的消息交换客户端的图形用户界面上可见或不可见。Sven可以选择这些图形元素中的一个来代表他使得自动响应被并入到消息交换话题中。在图3中描述了这可能看起来如何的示例，其中，在Sven选择“Calvin Coolidge”(也许是因为Sven假定Dennis寻找Herbert Hoover的最接近的前任)之后，Sven的回答已经替换了可选择的图标。

图4描述了与图2和图3中描绘的相同的消息交换话题，除了从Dennis的客户端设备206₂的视点来看之外。在此，Sven已经使用图2中描绘的图形元素选择的答案“CalvinCoolidge”看起来好像是由Sven写成的。然而，这不意味着限制，并且在其他实现方式中，答案Calvin Coolidge可以被描绘为由某些第三方实体(诸如个人助理模块)插入到会话中。

图5描绘了由名为Sven的参与方操作的另一示例客户端设备506。在该示例中，Sven正在参与与另一个名为Sven的参与方的消息交换话题。响应于Sven的声明他饿了，并且他的问题是关于吃的，Sven询问Sven对特定的餐厅XYZ的感觉。餐馆XYZ已经作为搜索查询提交到例如索引引擎124和/或信息引擎128，并且已经接收到响应内容。基于这种响应内容，在Sven的图形用户界面550中显示的记录本552已经用Sven可以选择的图形元素“SHOWHOURS(显示时间)”和“SHOW MENU(显示菜单)”来增强，以便显示例如作为图形用户界面550内的记录本552的一部分的与餐馆相关联的时间或菜单。如果Sven选择“SHOW MENU”，则图形用户界面550可以转换到图6所示的，其中示出了用于XYZ的菜单的图像556。

类似于图5和图6中出现的消息交换话题的记录本可以在其他类似的情况下呈现。假设不是谈论特定餐馆，参与方讨论度假的特定地理位置。参与方的一个或多个语句可以用于制定关于地理位置的搜索查询，其可以被提交到索引引擎124和/或信息引擎128。响应于搜索查询的信息可以用于例如呈现按钮，其允许参与方选择要显示的地理位置的一个或多个属性。例如，一个按钮可以可选择以显示关于位置的天气数据。另一个按钮可以可选择以显示关于到该位置的航班的信息。另一个按钮可以可选择以显示与该位置相关联的事件日历。等等。

图7描绘了呈现消息交换客户端(未示出)的图形用户界面750的另一示例客户端设备706。类似于之前，描绘了参与方和名为Sven的另一参与方之间的消息交换话题的记录本752，包括用于操作客户端设备706输入文本或其他内容的参与方的文本输入域754。在该示例中，Sven已经说明“We received$456,908.34in donations(我们收到了$456,908.34的捐赠)”。作为响应，操作客户端设备706的参与方提出了问题“what does that come toper donor？(每个捐赠者是多少？)”。这个问题，例如通过包括语言提示“每”使得呈现按钮形式的图形元素以向参与方提供打开计算器小应用程序的选项。图8描绘了当在图形用户界面750中操作时，这样的小应用程序758可能看起来如何的一个示例。小应用程序758可以是由操作客户端设备706的参与方可见和可操作的。在各种实现方式中，小应用程序758可以是或可以不是由Sven或其他参与方在消息交换话题中可见的和/或可操作的。

图9描绘了呈现消息交换客户端(未示出)的图形用户界面950的另一示例客户端设备906。类似于之前，描绘了参与方和名为Sven的另一参与方之间的消息交换话题的记录本952，包括用于操作客户端设备906输入文本或其他内容的参与方的文本输入域954。在该示例中，Sven已经说明“Hilda asked me to take a picture of the“flugzeug”on theway home(Hilda要我在回家的路上拍摄“flugzeug”的照片)”。操作客户端设备906的参与方询问“What does that mean？(这是什么意思？)”。这个问题可能导致一个或多个图形元素出现。在左边是可由参与方操作以打开参与者可以键入她希望翻译的文本的“翻译器”小应用程序(未示出)的图形元素。右边是示出通过将参与方的问题作为搜索查询提交给知识系统102而获得的词“flugzeug”的翻译的图形元素。从该示例可以看出，不仅是参与方的问题作为搜索查询被提交-参与方的问题孤立看过于模糊不能获得正确的翻译，因为它不包含要翻译的单词。相反，必须从参与方的问题和Sven的先前语句中获得信息，以便形成可获得对其的响应翻译的完整搜索查询(例如，“what is the English translation of‘flugzeug’(什么是'flugzeug'的英语翻译')”)。这展示了本公开的一个方面，其中可以基于来自形成消息交换话题的一部分的多个参与方的多个语句的部分来构建搜索查询。搜索查询不仅限于来自单个参与方的语句。

虽然本文所描述的实现方式已经示出了如何利用涉及多个人类参与方的消息交换话题来使用公开的技术，但这并不意味着是限制性的。在各种实现方式中，本文描述的技术可以在参与方和自动化实体之间的所谓的“单个参与方”对话中采用。例如，个人助理模块可以在形成与参与者相关联的和由参与者操作的计算设备的协调的“生态系统”的一个或多个计算设备(例如，智能电话、平板电脑、膝上型计算机、智能手表、车辆导航系统、机顶盒等)。个人助理模块可以监视(例如，响应于参与方提供某种激活码字)由参与方通常但不总是使用语音输入提供的自然语言问题/语句。个人助理模块然后可以执行各种动作，诸如搜索对参与方而言个人的信息或公共可用的数据(例如，从索引引擎124和/或信息引擎128)，并且向参与方提供响应，其例如以可听形式和/或作为在显示器上呈现的文本。在个人助理模块和参与方之间的对话在图形用户界面上呈现(例如作为正在进行的记录本)的情况下，可以采用本文所描述的技术来增强参与方的体验。

另外，在本文描述的示例中，响应于基于消息交换话题内容形成的搜索查询的数据已经从图1所示的各种源获得。然而，这并不意味着限制。响应数据也可以从其他源提取。例如，可以响应于满足一个或多个语义或语法标准和/或满足一个或多个启发的消息交换中的语句，使诸如“是”和“否”的脚本化自动响应可用。并且虽然索引引擎124和信息引擎128可以访问对于特定参与方不是个人的全局信息，但是这并不意味着是限制性的。在一些情况下，搜索查询可以用于搜索对参与方而言个人的信息(假设参与方首先提供许可)。例如，参与方自己的电子邮件、文本、日历条目和社交网络状态更新等等可以用作搜索查询可以用于搜索的潜在可搜索的源，。

现在参考图10，描述了增强具有多个参与方的消息交换话题的一种示例方法1000。为了方便起见，参考执行操作的系统来描述流程图的操作。该系统可以包括各种计算机系统的各种组件，包括本文所述的各种引擎。此外，尽管以特定顺序示出了方法1000的操作，但这并不意味着限制。一个或多个操作可以被重新排序、省略或添加。

在框1002，系统可以检查在操作多个消息交换客户端的多个参与方之间的正在进行的消息交换话题。例如，如果消息交换话题由消息交换引擎120托管或否则促进，则消息交换引擎120可以监视话题的内容以确定一个或多个参与方提供的一个或多个语句是否应当用于生成搜索查询以供提交给例如索引引擎124和/或信息引擎128。除或替代地，每个消息交换客户端107可以监视由其自己的参与方提供的内容。在这个意义上，参与方可以更直接地控制他或她的语句是否被并入为提交到知识系统102的搜索查询。

在框1004，系统可以基于框1002处的检查来识别用于形成搜索查询的一个或多个项目。在一些实现方式中，提出问题的参与方可以构成触发搜索查询的形成的事件。在其他实现方式中，其他事件可以引起用于形成搜索查询的一个或多个参与方语句，诸如提及一个或多个实体(例如，人、地点、事物等)的一个或多个参与方和由一个或多个参与方的显式请求等等。在一些实现方式中，形成消息交换话题的一部分的大多数参与方语句可以以一种形式或另一种形式作为搜索查询提交给知识系统102的各种组件。可以由例如消息交换引擎120和/或消息交换客户端107，例如基于由例如排名引擎134提供的相关性得分或其他排名数据来剔除响应内容。

在框1006，可以利用在框1004处识别的一个或多个项目来形成搜索查询。如上所述，参与方的语句不一定必须作为搜索查询逐字地提交。而是，例如，消息交换引擎120和/或一个或多个消息交换客户端107可以一起使用一个或多个参与方语句内的一个或多个项目，以构建一致的搜索查询。

在框1008，可以例如通过消息交换引擎120和/或通过一个或多个消息交换客户端107将制定的搜索查询提交到知识系统102的一个或多个组件，并且可以获得响应内容。在框1010，与响应内容相关联的一个或多个图形元素(例如，文本、图片、视频、动画、小应用程序等)可以并入消息交换话题中，例如以出现在呈现在由话题中的一个或多个参与方操作的消息交换客户端的图形用户界面中的记录本中。如上所述，在各种实现方式中，响应内容可能太笨拙而不能完全并入消息交换话题。因此，在各种实现方式中，诸如消息交换引擎120和/或消息交换客户端107的组件可以将响应内容“修剪”或“剔除”为更适合于作为消息交换记录本的一部分来呈现的子集。

图11是示例计算机系统1110的框图。计算机系统1110通常包括至少一个处理器1114，其经由总线子系统1112与多个外围设备通信。这些外围设备可以包括存储子系统1124，包括例如存储器子系统1125和文件存储子系统1126、用户界面输出设备1120、用户界面输入设备1122和网络接口1116。输入和输出设备允许用户与计算机系统1110交互。网络接口1116提供到外部网络的接口并耦合到其它计算机系统中的相应接口设备。

用户界面输入设备1122可以包括键盘、诸如鼠标、轨迹球、触摸板或图形输入板的指示设备、扫描仪、结合到显示器中的触摸屏、诸如语音识别系统的音频输入设备、麦克风以及/或其他类型的输入设备。一般来说，术语“输入设备”的使用旨在包括将信息输入到计算机系统1110或通信网络上的所有可能类型的设备和方式。

用户界面输出设备1120可以包括显示子系统、打印机、传真机或诸如音频输出设备的非可视显示器。显示子系统可以包括阴极射线管(CRT)，诸如液晶显示器(LCD)的平板设备、投影设备或用于产生可见图像的一些其他机制。显示子系统还可以例如经由音频输出设备提供非视觉显示。通常，术语“输出设备”的使用旨在包括将信息从计算机系统1110输出到用户或另一机器或计算机系统的所有可能类型的设备和方式。

存储子系统1124存储提供本文所描述的一些或全部模块的功能的编程和数据结构。例如，存储子系统1124可以包括执行方法1000的所选方面和/或实现消息交换客户端107、消息交换引擎120、索引引擎124、信息引擎128、排名引擎134和/或替代查询建议引擎136的一个或多个的逻辑，。

这些软件模块通常由处理器1114单独地或与其它处理器组合地执行。存储子系统1124中使用的存储器子系统1125可以包括多个存储器，包括用于在程序执行期间存储指令和数据的主随机存取存储器(RAM)1130和其中存储固定指令的只读存储器(ROM)1132。文件存储子系统1126可以为程序和数据文件提供持久存储，并且可以包括硬盘驱动器、软盘驱动器以及相关联的可移动介质、CD-ROM驱动器、光驱动器或可移动介质盒。实现某些实现方式的功能的模块可以由文件存储子系统1126存储在存储子系统1124中，或者存储在由一个或多个处理器1114可访问的其他机器中。

总线子系统1112提供用于使计算机系统1110的各种组件和子系统按照意图彼此进行通信的机制。虽然总线子系统1112被示意性地示出为单条总线，但是总线子系统的替代实现方式可以使用多条总线。

计算机系统1110可以是不同的类型，包括工作站、服务器、计算集群、刀片服务器、服务器群或任何其他数据处理系统或计算设备。由于计算机和网络的不断变化的性质，图11中描述的计算机系统1110的描述意欲仅出于说明一些实现方式的目的作为具体实例。计算机系统1110的许多其它配置可能具有比图1所示的计算机系统更多或更少的组件。

在其中本文所描述的系统收集关于用户(或者在本文中经常被称为“参与方”)的个人信息或者可以利用个人信息的情况下，可以向用户提供下述机会：控制程序或特征是否收集用户信息(例如，关于用户的社交网络、社交动作或活动、职业、用户的偏好或用户的当前地理位置的信息)，或者控制是否和/或如何从与用户可能更相关的内容服务器接收内容。此外，可以在存储或使用某些数据之前以一种或多种方式来处理这些数据，从而移除个人可识别信息。例如，可以对用户的身份进行处理，使得不能对于用户确定个人可识别信息，或者可以在获得地理位置信息的地方(例如城市、邮政编码或州级别)对用户的地理位置进行一般化，使得不能确定用户的具体地理位置。因此，用户可以具有对如何收集和/或使用关于用户的信息的控制。

虽然本文已经描述和示出了若干实现方式，但是可以使用用于执行功能和/或获得结果和/或本文所述的一个或多个优点的各种其它手段和/或结构，这样的变化和/或修改被认为在本文所描述的实现方式的范围内。更一般地，本文所述的所有参数、尺寸、材料和配置意在是示例性的，并且实际参数、尺寸、材料和/或配置将取决于具体应用或使用本教导的应用。本领域技术人员将认识到或者能够仅使用常规实验来确定本文所述的具体实现方式的许多等同物。因此，应当理解，前述实现方式仅以示例的方式给出，并且在所附权利要求及其等同物的范围内，可以以与具体描述和要求保护的方式不同的方式实践实现方式。本公开的实现方式涉及本文所述的每个单独的特征、系统、物品、材料、套件和/或方法。此外，如果这些特征、系统、制品、材料、套件和/或方法不相互矛盾，则两个或多个此类特征、系统、制品、材料、套件和/或方法的任何组合包括在本公开的范围内。

Claims (15)

1.一种用于增强消息交换话题的计算机实现的方法，包括：

由一个或多个处理器，检查在操作两个或多个消息交换客户端的两个或多个参与方之间的正在进行的消息交换话题；

由所述一个或多个处理器，基于所述检查，识别用于形成搜索查询的一个或多个项目，其中在作为所述正在进行的消息交换话题的一部分的由所述两个或多个参与方中的一个指向所述两个或多个参与方中的另一个的一个或多个消息中，识别所述一个或多个项目，而参与方不将所述一个或多个项目具体地识别为搜索查询；

由所述一个或多个处理器，利用所述一个或多个识别的项目形成所述搜索查询；

由所述一个或多个处理器，获得响应于所述搜索查询的内容；以及

由所述一个或多个处理器，将与所获得的内容相关联的一个或多个图形元素并入到在所述消息交换客户端中的至少一个的图形用户界面上显示的所述正在进行的消息交换话题的记录本中，其中所述一个或多个图形元素包括：

小应用程序，所述小应用程序是由参与方可见并且可操作的而无需切换应用以在所述图形用户界面上执行一个或多个操作。

2.根据权利要求1所述的计算机实现的方法，其中所述一个或多个图形元素还包括传达所获得的内容的文本。

3.根据权利要求1所述的计算机实现的方法，其中所述一个或多个图形元素还包括传达所获得的内容的一个或多个图像。

4.根据权利要求1所述的计算机实现的方法，其中所述一个或多个图形元素还包括可由参与方选择以代表所述参与方自动地将预定文本添加到所述记录本的图形元素。

5.根据权利要求1所述的计算机实现的方法，其中所述一个或多个图形元素还包括链接到响应于所述搜索查询的一个或多个电子文档的图形元素。

6.根据权利要求1所述的计算机实现的方法，其中所述一个或多个图形元素还包括链接到安装在操作所述消息交换客户端中的至少一个的计算设备上的应用的图形元素，其中所述应用响应于所述搜索查询。

7.根据权利要求1所述的计算机实现的方法，其中，所述小应用程序包括计算器、翻译器和/或游戏。

8.根据权利要求1所述的计算机实现的方法，还包括：

由所述一个或多个处理器，基于包含已知实体和其间的关系的记录的知识库，从所述一个或多个消息识别第一实体，用于包含到所述一个或多个项目中；

其中所获得的内容包括与所述第一实体相关联的信息。

9.根据权利要求8所述的计算机实现的方法，还包括由所述一个或多个处理器，从所述知识库，识别与所述第一实体相关的第二实体；

其中所述一个或多个图形元素传达与所述第二实体相关联的信息。

10.根据权利要求8所述的计算机实现的方法，其中所述一个或多个图形元素传达关于所述第一实体的一个或多个属性的信息。

11.一种包括存储器和一个或多个处理器的系统，所述存储器存储指令，当由所述一个或多个处理器执行时，所述指令使得所述一个或多个处理器：

检查在操作两个或多个消息交换客户端的两个或多个参与方之间的正在进行的消息交换话题；

基于所述检查，识别用于形成搜索查询的一个或多个项目，其中在作为所述正在进行的消息交换话题的一部分的由所述两个或多个参与方中的一个指向所述两个或多个参与方中的另一个的一个或多个消息中，识别所述一个或多个项目，而参与方不将所述一个或多个项目具体地识别为搜索查询；

利用所识别的一个或多个项目，形成所述搜索查询；

获得响应于所述搜索查询的内容；以及

将与所获得的内容相关联的一个或多个图形元素并入到在所述消息交换客户端中的至少一个的图形用户界面上显示的所述正在进行的消息交换话题的记录本中，其中所述一个或多个图形元素包括：

小应用程序，所述小应用程序是由参与方可见并且可操作的而无需切换应用以在所述图形用户界面上执行一个或多个操作。

12.根据权利要求11所述的系统，其中所述一个或多个图形元素还包括传达所获得的内容的文本。

13.根据权利要求11所述的系统，其中所述一个或多个图形元素还包括传达所获得的内容的一个或多个图像。

14.根据权利要求11所述的系统，其中所述一个或多个图形元素还包括可由参与方选择以代表所述参与方自动地将预定文本添加到所述记录本的图形元素。

15.包括指令的至少一个非暂时性计算机可读介质，响应于由一个或多个处理器执行所述指令，所述指令使得所述一个或多个处理器执行以下操作：

检查在操作两个或多个消息交换客户端的两个或多个参与方之间的正在进行的消息交换话题；

基于所述检查，识别用于形成搜索查询的一个或多个项目，其中在作为所述正在进行的消息交换话题的一部分的由所述两个或多个参与方中的一个指向所述两个或多个参与方中的另一个的一个或多个消息中，识别所述一个或多个项目，而参与方不将所述一个或多个项目具体地识别为搜索查询；

利用所识别的一个或多个的项目，形成所述搜索查询；

获得响应于所述搜索查询的内容；以及

将与所获得的内容相关联的一个或多个图形元素并入到在所述消息交换客户端中的至少一个的图形用户界面上显示的所述正在进行的消息交换话题的记录本中，其中所述一个或多个图形元素包括：

小应用程序，所述小应用程序是由参与方可见并且可操作的而无需切换应用以在所述图形用户界面上执行一个或多个操作。

Images