CN112136127B - 用于搜索操作输出元素的动作指示符 - Google Patents

用于搜索操作输出元素的动作指示符 Download PDF

Info

Publication number
CN112136127B
CN112136127B CN201980033480.2A CN201980033480A CN112136127B CN 112136127 B CN112136127 B CN 112136127B CN 201980033480 A CN201980033480 A CN 201980033480A CN 112136127 B CN112136127 B CN 112136127B
Authority
CN
China
Prior art keywords
user
action
operation output
search operation
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980033480.2A
Other languages
English (en)
Other versions
CN112136127A (zh
Inventor
B.J.基维特-凯拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN112136127A publication Critical patent/CN112136127A/zh
Application granted granted Critical
Publication of CN112136127B publication Critical patent/CN112136127B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/9038—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/9032—Query formulation
    • G06F16/90324—Query formulation using system suggestions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9532—Query formulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9536—Search customisation based on social or collaborative filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9538—Presentation of query results
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/535—Tracking the activity of the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种方法、系统和装置，包括编码在计算机存储介质上的计算机程序，用于：响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；确定是否对于每个搜索操作输出元素提供动作指示符；以及向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个动作指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的动作指示符数据。

Description

用于搜索操作输出元素的动作指示符
背景技术
用户设备提供对各种信息的访问。例如，数字图像文件、视频和/或音频文件以及用于特定主题或特定新闻文章的资源可通过互联网访问。可以在用户设备上运行的web浏览器和用户设备上运行的本原应用中查看此信息。搜索引擎对这些资源进行抓取并编索引，以促进对资源的搜索。因此，对于用户可能感兴趣的几乎任何主题，都有大量信息可供用户使用。
用户可能需要与用户正在用户设备上查看的内容有关的信息。例如，对于搜索操作，此类内容可以是搜索结果(文本或图像)和查询建议。这样的信息可以以图标或一些其他注释特征的形式提供，其指示搜索系统确定的信息可能对用户有用。
发明内容
本说明书描述了与基于过去聚合行为在搜索结果环境中搜索操作输出元素的动作指示符有关的技术。
通常，本说明书中描述的主题的一个创新方面可以体现在方法中，所述方法包括以下动作：响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中被显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；确定是否对于每个搜索操作输出元素提供动作指示符；以及向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个动作指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的动作指示符数据。
这些和其他实施例可以各自可选地包括一个或多个以下特征。
在一些示例中，所述方法包括通过以下方式确定是否提供用于每个搜索操作输出元素的动作指示符：获得数据，所述数据对于彼此不同的多个用户动作中的每个用户动作，描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否超过预定阈值。在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否是离群值。在一些示例中，确定执行用户动作的用户百分比是否是离群值进一步包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
在一些示例中，多个用户动作包括浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量中的至少一个。
在一些示例中，搜索操作输出元素是搜索结果。
在一些示例中，搜索操作输出元素是搜索查询建议。
通常，本说明书中描述的主题的另一个创新方面可以体现在系统中，所述系统包括：数据处理装置；以及非暂时性计算机可读存储介质，与数据处理装置进行数据通信并存储可由数据处理装置执行的指令，并在执行时使数据处理装置执行操作。所述操作包括：响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；确定是否对于每个搜索操作输出元素提供动作指示符；以及向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个动作指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的动作指示符数据。
在一些示例中，确定是否对于每个搜索操作输出元素提供动作指示符的操作包括：获得数据，所述数据对于彼此不同的多个用户动作中的每个用户动作，描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符的操作包括：确定执行用户动作的用户百分比是否超过预定阈值。在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符的操作可以包括：确定执行用户动作的用户百分比是否是离群值。在一些示例中，确定执行用户动作的用户百分比是否是离群值的操作可以包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
在一些示例中，多个用户动作包括浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量中的至少一个。在一些示例中，搜索操作输出元素是搜索结果。在一些示例中，搜索操作输出元素是搜索查询建议。
通常，本说明书中描述的主题的另一个创新方面可以体现在用计算机程序编码的非暂时性计算机存储介质中，计算机程序包括指令，该指令在由数据处理装置执行时使数据处理装置执行操作。所述操作包括：响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；确定是否对于每个搜索操作输出元素提供动作指示符；以及向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个动作指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的动作指示符数据。
在一些示例中，确定是否对于每个搜索操作输出元素提供动作指示符的操作包括：获得数据，所述数据对于彼此不同的多个用户动作中的每个用户动作，描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符的操作包括：确定执行用户动作的用户百分比是否超过预定阈值。在一些示例中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符的操作可以包括：确定执行用户动作的用户百分比是否是离群值。在一些示例中，确定执行用户动作的用户百分比是否是离群值的操作可以包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
在一些示例中，多个用户动作包括浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量中的至少一个。在一些示例中，搜索操作输出元素是搜索结果。在一些示例中，搜索操作输出元素是搜索查询建议。
该方面的其他实施例包括被配置为执行编码在计算机存储设备上的方法的动作的对应系统、装置和计算机程序。
可以实现本说明书中描述的主题的特定实施例，以实现以下优点中的一个或多个。对于机器学习，确定用户可能从搜索结果中采取什么动作是一个非常困难的过程。训练系统以准确预测这样的结果可能会非常耗时且会占用大量资源。此外，对于特定搜索操作输出元素，确定由动作指示符最好地促进的动作(例如，搜索结果、搜索查询建议等)可能非常困难并且容易出错。
在一些实现方式中，动作指示符(有时在这里被称为“标记”)向用户标识用户在消耗搜索操作输出元素之后执行的跟进动作。跟进动作可以在消耗搜索操作元素之后立即执行，或者在消耗搜索操作元素之后用户采取一个或多个中间步骤之后执行。这使用户能够接收关于响应于消耗搜索操作元素而可能采取的动作的附加信息。关于响应于选择搜索输出元素而可能被执行的动作的这样的信息包括进行购买、保存照片/视频、在社交媒体中标记照片/视频等。
在一些实现方式中，用户数据的众包信息(crowd sourcing information)用于确定应为给定查询提供哪个或哪些动作指示符。可以使用来自用户日志的新兴数据，这些数据具有最好的描述性，并且不易受到噪声的影响。换句话说，这种改进与特征无关，并且比将需要重新训练的学习型系统更鲁棒。此外，基于用户数据的众包消除了机器学习过程或基于资源源代码检查单个网页的需求。
另外，通过向用户提供响应于搜索操作输出元素的选择而频繁执行的动作的指示，动作指示符向用户提供帮助用户确定是否选择特定搜索操作输出元素的信息。这样可以使用户更快地获得结果，并且在一些情况下，可以使用户获得原本无法达到的结果。此外，动作指示符可以用于教导用户关于用户原本不会知道的新功能的信息(例如，通过可保存动作指示符了解保存动作)。
此外，使用动作指示符减少查询处理周期的数量，因为用户可以更好地了解向他们提供的信息。这减少了所需的处理资源并减少了整个系统的带宽要求(或者，可以在不相应增加处理资源的情况下为更多的用户提供服务)。因此，搜索处理技术领域的这种改进是通过以下所述的系统和方法实现的另一个明显的优点。
本说明书中描述的主题的一个或多个实施例的细节在附图和以下描述中阐述。根据说明书、附图和权利要求书，本主题的其他特征、方面和优点将变得显而易见。
附图说明
图1是可以实现搜索查询评估和动作指示符系统的示例环境的框图。
图2是根据搜索查询呈现具有动作指示符的搜索操作输出元素的示例用户界面的屏幕截图。
图3是用于使用搜索查询评估和动作指示符系统的示例处理的流程图。
图4是用于使用搜索查询评估和动作指示符系统的示例处理的流程图。
图5是用于使用搜索查询评估和动作指示符系统的示例处理的流程图。
图6是可用于实现本公开中描述的方法、系统和处理的示例计算机系统的框图。
在各个附图中，相同的附图标记和标记表示相同的元件。
具体实施方式
描述了用于基于搜索操作来接收搜索操作输出元素的系统、方法和计算机程序产品，并且对每个搜索操作输出元素，基于搜索操作输出元素的下游交互的过去聚合使用情况来提供动作指示符。如本说明书中所使用的，搜索操作输出元素是被提供用于响应于搜索结果而在用户设备上显示的可选元素，并且当被选择时，引起另一搜索操作的调用或者使用户设备接收资源。搜索操作输出元素的示例是查询建议、文本搜索结果、图像搜索请求等。
动作指示符是可以与搜索操作输出元素一起显示的与搜索操作输出元素分开的元素。用于特定搜索操作输出元素的动作指示符指示用户响应于搜索操作输出元素的选择而采取的动作。例如，可以获得每个用户动作的数据，以确定在选择搜索操作输出元素之后执行用户动作的用户百分比。基于执行用户动作的用户百分比，系统确定是否为搜索操作输出元素提供动作指示符并显示。
在一些实现方式中，本说明书中描述的主题使用众包向用户指示响应于通过使用动作指示符选择搜索操作输出元素而最常执行哪些动作。在一些实现方式中，该技术可用于标记来自图像搜索的引导“碎片优化”(查询建议)，指示用户可以执行以获取更具体查询的细化查询。标记是动作指示符，指示先前用户在选择给定引导碎片之后执行的动作类型。在一些实现方式中，该技术可用于标记来自图像搜索的每个图像，或标记来自文本搜索的每个文本结果，其中每个标记是动作指示符。
在一些实现方式中，可以由标记指示的一些示例动作包括：保存媒体内容、共享媒体内容、浏览多个图像或相关媒体内容、点击到主机站点(例如具有产品的主机站点)、购买、花费一定时间查看媒体内容、创建额外查询优化等。
在一些实现方式中，用于创建动作指示符的处理可以包括：接收指示用户百分比的数据，该用户执行的动作对每个动作指示符被分类为不同的潜在结果。当存在可以选择来显示的多个动作指示符时，系统可以确定显示所有动作指示符。在其他实现方式中，系统可以基于一个或多个性能度量来选择特定动作指示符。对每个动作指示符确定的一个这样的性能度量是基于实际执行该动作指示符所指示的动作的特定用户百分比。该百分比可以与预定阈值进行比较。该阈值可以是固定阈值，或者可以是基于动作统计来的离群值阈值，例如，大于与执行动作的用户的均值百分比的一个标准偏差。
这些功能和其他功能将在下面更详细地描述。
图1是示例环境100的框图，其中可以在搜索处理系统中实现动作指示符系统。诸如局域网(LAN)、广域网(WAN)、互联网或其组合的计算机网络102连接发布者网站104、用户设备106和搜索引擎110。在线环境100可能包括数千个发布者网站104和用户设备106。
发布者网站104包括与域名相关联并且由一个或多个服务器托管的一个或多个资源105。示例网站是用超文本标记语言(HTML)格式化的网页的集合，其中可以包含文本、图像、多媒体内容和编程元素(诸如脚本)。每个发布者网站104由内容发布者维护，该内容发布者是控制，管理和/或拥有发布者网站104的实体。
资源是发布者网站104可以通过网络102提供的与资源地址相关联的任何数据。资源包括HTML页面、文字处理文档和可移植文档格式(PDF)文档、图像、视频和订阅源，仅举几例。资源可以包括诸如单词、短语、图片等的内容，并且可以包括嵌入式信息(诸如元信息和超链接)和/或嵌入式指令(诸如脚本)。
用户设备106是能够通过网络102请求和接收资源的电子设备。示例用户设备106包括个人计算机、移动通信设备以及可以通过网络102发送和接收数据的其他设备。用户设备106通常包括诸如web浏览器或某些其他应用的用户应用，以促进通过网络102发送和接收数据。用户设备106可以使用应用来呈现媒体。媒体是用户使用在用户设备106上运行的应用所消费的图像、视频、音频、文本或类似的某种组合。web浏览器可以使用户能够显示文本、图像、视频、音乐和通常位于万维网或局域网上的网站上的网页上的其他信息，并且与之交互。
为了便于搜索这些资源105，搜索引擎110通过对发布者网站104进行抓取并对由发布者网站104提供的资源编索引来识别资源。被编索引和可选地缓存的资源副本被存储在索引112。
用户设备106向搜索引擎110提交搜索查询109。以包括该搜索请求的搜索请求的形式提交搜索查询109。响应于搜索请求，搜索引擎110使用索引112来识别与查询有关的资源。搜索引擎110以搜索结果111的形式识别资源，并将搜索结果以搜索结果页面资源的形式返回给用户设备106。搜索结果是由搜索引擎110生成的数据，识别满足特定搜索查询的资源，并且包括该资源的资源定位符。搜索结果的示例可以包括网页标题、从网页中提取的文本片段以及网页的URL。
基于与搜索结果识别的资源相关的分数——诸如信息检索(IR)分数——对搜索结果进行排名，以及可选地将每个资源相对于其他资源的单独排名(例如，权限分数)。根据这些分数对搜索结果进行排序，并根据该顺序将搜索结果提供给用户设备。
用户设备106接收搜索结果页面并渲染页面以呈现给用户。响应于用户在用户设备106处选择搜索结果，用户设备106请求由包括在所选择的搜索结果中的资源定位符识别的资源。托管资源的发布者网站104的发布者从用户设备106接收对资源的请求，并将资源提供给发出请求的用户设备106。
在一些实现方式中，从用户设备106提交的查询109被存储在查询日志114中。查询的点击数据和由搜索结果引用的网页被存储在选择日志116中。查询日志114和选择日志116定义搜索历史数据117，包括来自与唯一标识符相关联的先前搜索请求并与之相关的数据。点击日志定义了响应于由搜索引擎110提供的搜索输出元素(例如，搜索结果、搜索查询建议和搜索查询优化)而采取的动作。查询日志114和选择日志116可以用于将由用户设备提交的查询映射到它们引用的这些搜索输出元素和资源(例如，对搜索结果被识别的网页)以及用户采取的动作。因此，搜索引擎可以使用选择日志116和查询日志114来确定用户设备提交的查询的顺序，响应于查询和搜索操作输出元素而采取的动作以及提交查询的频率。
为用户增强搜索操作输出元素的一种方法是提供动作指示符，指示先前用户对他们可用的不同动作执行了哪些动作。然后可以基于搜索历史数据117通知特定用户关于通过选择搜索操作输出元素而看起来最好地促进或诱发的动作。动作指示符子系统130可以用于以用于搜索操作输出元素的“标记”的形式创建动作指示符，以基于先前用户的下游交互的过去聚合使用情况来提供视觉指示。
例如，如图1所示，用户设备106可以使用应用120来呈现查询结果122。查询结果122可以包括搜索操作输出元素124A-124N(以下通常称为搜索操作输出元素124)。每个搜索操作输出元素124可以具有对应的动作指示符(AI)126A和126B-126N(以下通常称为动作指示符126)。在图2中描绘了在对用户设备的搜索应用中的对“lasagna”的通用搜索的示例屏幕截图。
图2描绘了根据搜索查询呈现具有动作指示符的搜索操作输出元素的示例用户界面的屏幕截图200。在示例屏幕截图200中，用户设备106的用户界面210使用户能够在搜索应用中执行搜索操作。特别地，用户界面210使用户能够在搜索栏202中输入查询(即“lasagna”)并通过选择搜索按钮204来激活搜索操作。在该示例中，用户通过选择图像按钮206选择仅搜索图像，然后搜索操作显示搜索操作输出元素，诸如搜索操作输出元素212A和212B，来自搜索“lasagna”的lasagna的图像。在该示例中，对搜索应用的搜索操作还显示其他搜索操作输出元素208A和208B，如图2所示作为搜索查询建议(例如，指导碎片优化)。用户可以选择搜索操作输出元素208A和208B以进一步优化搜索参数。
在该示例中，动作指示符子系统130创建动作指示符220A、220B、222A和222B，以显示为重叠在搜索操作输出元素208A和208B上的可视指示符/图标。特别地，动作指示符220A用交叉的叉子和勺子的图标覆盖在搜索操作输出元件208A上，以向用户表示选择搜索查询建议“white sauce”的先前用户有很大百分比更有可能在餐厅预订。动作指示符220B用美元符号图标覆盖在搜索操作输出元素208B上，以向用户表明选择搜索查询建议“meat”的先前用户有很大百分比更有可能购买商品。类似地，动作指示符222A用向下箭头的文件夹图标覆盖在搜索操作输出元素212A(图像)上，以向用户表明选择该图像的先前用户有很大百分比更有可能下载和/或保存作为最终用户动作的图像(例如，食谱)，而动作指示符222B用美元符号的图标覆盖在图像212B上，以向用户表明选择该图像的先前用户有很大百分比更有可能购买产品。根据一些实现方式，不同的图标可以用于表示上述参考的用户动作，并且不同的图标可以用于不同的用户动作。
现在参照下面的图3-图5描述用于与搜索操作输出元件一起显示的动作指示符的选择。
图3是用于使用搜索查询评估和动作指示符系统的示例处理300的流程图。处理300可以例如由图1的动作指示符子系统130实现。
处理300从用户设备接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素(302)。例如，图1的动作指示符子系统130可以从搜索引擎110接收响应于查询109的搜索结果111。
处理300确定是否对于每个搜索操作输出元素提供动作指示符(304)。例如，图1的动作指示符子系统130基于先前用户行为识别可以被用于满足特定条件的特定搜索结果的一个或多个动作指示符。下面参照图4描述用于确定和选择动作指示符的示例处理。
处理300将搜索操作输出元素提供给用户设备以在搜索结果环境中显示，并且对于要被提供一个或多个动作指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的动作指示符数据(306)。例如，图1的动作指示符子系统130可以对于被确定为提供动作指示符的每个搜索操作输出元素，显示覆盖在每个特定搜索操作输出元素上的动作指示符。例如，如图2所示，动作指示符222A覆盖在搜索操作输出元件212A上，动作指示符220B覆盖在搜索操作输出元件208B上。在一些实现方式中，动作指示符可以覆盖在每个搜索操作输出元素上。
图4是用于使用搜索查询评估和动作指示符系统的示例处理400的流程图。处理400可以例如由图1的动作指示符子系统130实现。处理400是用于确定是否为搜索操作输出元素提供动作指示符的一个示例处理。
处理400获得描述在用户会话期间选择搜索操作输出元素之后执行该用户动作的用户百分比的数据，在该用户会话中，用户对彼此不同的多个用户动作中的每个用户动作选择搜索操作输出元素(402)。例如，图1的动作指示符子系统130可以从搜索引擎110获得用户动作数据，搜索引擎110可以从搜索历史数据117的查询日志114和/或选择日志116中挖掘用户动作数据。用户动作数据可以包括指示在先前用户选择搜索操作输出元素之后执行的结果动作的数据。例如，对于资源，可以将描述用户在引用资源的搜索结果之后采取的动作的数据存储在查询日志114和选择日志116中。
可以对资源的所有查询来聚合所采取的动作，或者可替换地，可以基于对资源的不同查询对所采取的动作进行分区。例如，对于特定资源，已经选择了参考响应于所有查询而提供的资源的搜索结果10,000次，在10,000次选择之中，在将资源提供给用户设备之后进行了4,000次购买。该动作数据因此可以指示该资源的4,000次购买。或者，假设已使用三个查询来识别资源-查询A、查询B和查询C。在10,000个选择和4,000个购买中，有5,000个选择和3500个购买是对查询A的响应；有3,000次选择和400次购买是对查询B的响应；有2,000个选择和100个购买项是查询C的结果。因此，可以对操作数据进行分区，以指示查询/资源对上的聚合值。
对于搜索建议，可以基于搜索建议来聚合用户动作数据，并且可以包括响应于搜索建议而提供的所有资源。这样的用户动作数据可以包括例如保存媒体内容、共享媒体内容、浏览多个图像或相关媒体内容、点击到主机站点(例如，具有产品的主机站点)、进行购买、观看媒体内容花费的一定时间量、创建其他查询优化等。根据一些实现方式，图1的动作指示符子系统130包括数据存储系统，动作指示符存储器132，其可以存储从搜索引擎110获得的用户动作数据。因此，图1的动作指示符子系统130可以从动作指示符存储132获得用户动作数据。
每个用户会话都是被分组在一起进行分析的特定用户的用户交互集合。用户会话可以包括在阈值时间段内(例如，在1小时、1天或1个月内)发生的用户交互，或使用指定动作来描述的用户交互。例如，用户搜索会话可以包括用户搜索查询和在1小时内发生的和/或在会话结束事件(例如，关闭搜索浏览器)之前发生的后续动作。因为对会话数据确定了动作，所以即使在提供了响应搜索操作输出元素的数据之后没有执行该动作，也可以将动作归因于搜索操作输出元素。例如，搜索结果可以链接到第一资源，该第一资源进而链接到可以进行预订的第二资源。因此，搜索结果的选择以及从第一资源选择第二资源和做出预订可以导致将预订动作归因于第一资源。
处理400在获得描述执行用户动作的用户百分比的数据之后，基于该用户百分比，对于每个用户动作，确定是否向搜索操作输出元素提供动作指示符(404)。例如，图1的动作指示符子系统130可以评估获得的数据以确定动作指示符是否超过特定阈值，该数据描述执行用户动作的用户百分比。下面参照图5的处理500进一步描述动作指示符子系统130确定是否向搜索操作输出元件提供动作指示符的示例处理。
处理400提供动作指示符数据，对确定要被提供动作指示符的每个用户动作，使动作指示符与搜索操作元素一起显示(406)。例如，图1的动作指示符子系统130可以将动作指示符220A显示为覆盖在搜索操作输出元件208A上，如图2所示。
图5是用于使用搜索查询评估和动作指示符系统的示例处理500的流程图。处理500可以例如由图1的动作指示符子系统130实现。
处理500获得描述在用户会话期间选择搜索操作输出元素之后执行用户动作的用户百分比的数据(502)。例如，图1的动作指示符子系统130可以从搜索引擎110获得用户动作数据，搜索引擎110可以从查询日志114和/或选择日志116挖掘用户动作数据，或者图1的动作指示子系统130可以从动作指示符存储器132获得用户动作数据。
处理500将用户动作数据存储在动作指示符数据存储器中(504)。例如，图1的动作指示符子系统130可以在从搜索引擎110获得用户动作数据之后，存储来自动作指示符存储器132的用户动作数据。
确定用户动作数据是否超过预定阈值(506)。如果用户动作数据未超过预定阈值，则处理500返回到阶段502，获得描述在用户会话期间选择搜索操作输出元素之后执行用户动作的用户百分比的附加数据。如果用户动作数据确实超过预定阈值，则处理500进行到阶段508。例如，图1的动作指示符子系统130可以获得用户动作数据并将其与系统设置的阈值进行比较。
在一些实现方式中，阈值可以是静态的并且由动作指示符子系统130预先确定。在一些实现方式中，可以基于特定用户动作来建立不同的阈值。在一些实现方式中，动作指示符子系统130可以基于对特定搜索结果显示太多动作指示符的指示来动态地更新阈值。例如，如果动作指示符子系统130确定一定百分比的搜索操作输出元素将达到或超过阈值(例如，大于80％)，则动作指示符子系统130可以提高阈值以减少用于搜索操作输出元素的动作指示符的数量。然而，如果对于搜索操作输出元素没有动作指示符或要显示的动作指示符的数量非常少(例如，少于两个)，则动作指示符子系统130可以降低阈值以增加满足阈值的动作指示符的数量。
计算对最终得到描述其他多个用户动作的数据的结果的用户的均值百分比，以确定执行用户动作的用户百分比是否为离群值(508)。例如，动作指示符子系统130计算多个搜索操作输出元素中针对特定用户动作的平均数据百分比。如果在下面参考表1和表2进一步描述该实现方式的示例。
处理500确定用户动作数据是否比计算的均值百分比大一个标准偏差(510)。如果用户动作数据不比均值百分比大一个标准偏差，则处理500返回到阶段502，该阶段获得附加数据，该附加数据描述在用户会话期间选择搜索操作输出元素之后执行用户动作的用户百分比。如果用户动作数据比均值百分比大一个标准偏差，则处理500进行到阶段512。根据一些实现方式，动作指示符子系统130可以示出符合不同参数的动作指示符。例如，用户动作数据必须比均值百分比大两个标准偏差，以便在相应的搜索操作输出元素上显示动作指示符。
根据示例性实现方式，如果存在三个搜索操作输出元素，即A、B和C，并且存在三个可能的用户动作，即X、Y和Z，则下表呈现了可以通过动作指示符子系统130评估的用户动作数据的可能示例：
表1
在用户动作数据的该示例中，假设动作指示符子系统130使用阈值10％来确定用户动作数据是否满足或超过该阈值。根据一些实现方式，如本文所讨论，可以使用阈值的其他值。返回参考上面的示例，动作指示符子系统130将首先处理用户动作数据，并确定输出元素和用户动作的哪种组合超过了阈值10％。在此示例中，用于用户动作X的搜索操作输出元素A和用于用户动作Z的搜索操作输出元素B将继续进行到该处理的下一个阶段。
接下来，动作指示符子系统130将对于表中每个数据点计算超过阈值的用户动作数据的均值百分比，并且如果百分比比均值大一个标准偏差，则确定是否将动作指示符放置在搜索操作输出元素上。例如，用户动作X的行分别对搜索操作输出元素A、B和C具有20％、0％和5％。用户动作X的均值约为8.3％，标准偏差约为10.4％。因此，对于用户动作X的搜索操作输出元素A所获得的百分比20％，与平均值相比有一个标准偏差以上，并且对于用户动作X的搜索操作输出元素A可以显示动作指示符(如上阴影所示)。
根据用户动作数据的另一示例，假设用户动作X的行分别对搜索操作输出元素A、B和C具有20％、20％和10％。用户动作X的均值将约为16.7％，标准偏差约为5.8％。在该示例中，则对用户动作X的搜索操作输出元素A所获得的百分比为20％，相对于均值不超过一个标准偏差，并且不会示出动作指示符。根据一些实现方式，动作指示符子系统130可以基于相同参数使用不同的方法来确定何时放置动作指示符，或者可以从搜索引擎获得不同的数据来评估用户动作。
处理500提供动作指示符数据，对每个用户动作，使动作指示符与搜索操作元素一起显示(512)。例如，如图2所示，图1的动作指示符子系统130可以将动作指示符220A显示为覆盖在搜索操作输出元件208A上，以通告用户设备106的用户，搜索操作输出元件208A(建议的碎片优化查询)，先前选择该元素的其他用户中有很大比例的用户已经执行了指定的用户操作。
图6是示例计算设备600、650的框图，该示例计算设备600、650可用于将本文档中描述的系统和方法实现为客户端或服务器或多个服务器。计算设备600旨在代表各种形式的数字计算机，诸如膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片服务器、大型机和其他适当的计算机。计算设备600还旨在表示任何其他典型的非移动设备，诸如其中嵌入或附接有一个或多个处理器的电视或其他电子设备。计算设备650旨在代表各种形式的移动设备，诸如个人数字助理、蜂窝电话、智能电话和其他计算设备。此处所示的组件，它们的连接和关系以及它们的功能仅是示例，并不意味着限制本文档中描述和/或要求保护的发明的实现方式。
计算设备600包括处理器602、存储器604、存储设备606、连接到存储器604和高速扩展端口610的高速控制器608以及连接到低速总线614和存储设备606的低速控制器612。组件602、604、606、608、610和612中的每个组件均使用各种总线相互连接，并且可以安装在通用主板上或视情况采用其他方式安装。处理器602可以处理用于在计算设备600内执行的指令，包括存储在存储器604或存储设备606中的指令，以在外部输入/输出设备上显示GUI的图形信息，诸如耦合到高速控制器608的显示器616。在其他实现方式中，可以适当地使用多个处理器和/或多个总线，以及多个存储器和存储器类型。此外，可以连接多个计算设备600，每个设备提供必要操作的部分(例如，作为服务器组、一组刀片服务器或多处理器系统)。
存储器604将信息存储在计算设备600内。在一种实现方式中，存储器604是计算机可读介质。在一个实现方式中，存储器604是一个或多个易失性存储单元。在另一实现方式中，存储器604是一个或多个非易失性存储单元。
存储设备606能够为计算设备600提供大容量存储。在一种实现方式中，存储设备606是计算机可读介质。在各种不同的实现方式中，存储设备606可以是软盘设备、硬盘设备、光盘设备或磁带设备、闪存或其他类似的固态存储设备，或在存储区域网络中包括设备的设备阵列或其他配置。在一个实现方式中，计算机程序产品有形地体现在信息载体中。计算机程序产品包含在执行时执行一种或多种方法的指令，诸如上述方法。信息载体是计算机或机器可读介质，诸如存储器604、存储设备606或处理器602上的存储器。
高速控制器608管理计算设备600的带宽密集型操作，而低速控制器612管理较低带宽密集型操作。这种职责分配仅仅是一个示例。在一种实现方式中，高速控制器608(例如，通过图形处理器或加速器)耦合到存储器604、显示器616，并且耦合到可以接受各种扩展卡(未示出)的高速扩展端口610。在实现方式中，低速控制器612耦合到存储设备606和低速总线614。低速总线614(例如，低速扩展端口)，可以包括各种通信端口(例如，USB、 以太网、无线以太网)，可以例如通过网络适配器耦合到一个或多个输入/输出设备，诸如键盘、定点设备、扫描仪或网络设备，诸如交换机或路由器。
如图所示，计算设备600可以以多种不同的形式实现。例如，它可以被实现为标准服务器620，或者被实现为一组这样的服务器中的多次。它也可以实现为机架服务器系统624的一部分。此外，它还可以实现在诸如膝上型计算机622的个人计算机中。可选地，来自计算设备600的组件可以与移动设备中的其他组件组合(未示出)，诸如计算设备650.每个这样的设备可以包含一个或多个计算设备600、650，并且整个系统可以由彼此通信的多个计算设备600、650组成。
计算设备650包括处理器652、存储器664、诸如显示器654的输入/输出设备、通信接口666和收发器668等。计算设备650还可以配备有存储设备，诸如微驱动器或其他设备，以提供附加存储。组件650、652、664、654、666和668中的每一个都使用各种总线互连，并且一些组件可以安装在通用主板上或视情况以其他方式安装。
处理器652可以处理用于在计算设备650内执行的指令，包括存储在存储器664中的指令。处理器还可以包括单独的模拟和数字处理器。处理器可以提供例如用于计算设备650的其他组件的协调，诸如对用户界面的控制，由计算设备650运行的应用以及由计算设备650进行的无线通信。
处理器652可以通过控制接口658和耦合到显示器654的显示接口656与用户通信。显示器654可以是例如TFT LCD显示器或OLED显示器或其他适当的显示技术。显示接口656可以包括用于驱动显示器654以向用户呈现图形和其他信息的适当电路。控制接口658可以从用户接收命令并且将其转换以提交给处理器652。另外，可以提供与处理器652通信的外部接口662，以使得计算设备650能够与其他设备进行近距离通信。外部接口662可以提供例如有线通信(例如，通过对接程序)或无线通信(例如，通过或其他这样的技术)。
存储器664将信息存储在计算设备650内。在一种实现方式中，存储器664是计算机可读介质。在一个实现方式中，存储器664是一个或多个易失性存储器单元。在另一实现方式中，存储器664是一个或多个非易失性存储单元。还可以提供扩展存储器674，并通过扩展接口672将其连接到计算设备650，扩展接口672可以包括例如订户识别模块(SIM)卡接口。这样的扩展存储器674可以为计算设备650提供额外的存储空间，或者还可以为计算设备650存储应用或其他信息。具体地，扩展存储器674可以包括用于执行或补充上述处理的指令，并且也可以包括安全信息。因此，例如，扩展存储器674可以被提供为用于计算设备650的安全模块，并且可以用允许安全地使用计算设备650的指令来编程。此外，可以经由SIM卡以及附加信息提供安全应用，诸如以不可入侵的方式在SIM卡上放置标识信息。
存储器可以包括例如闪存和/或MRAM存储器，如下所述。在一个实现方式中，计算机程序产品有形地体现在信息载体中。计算机程序产品包含在执行时执行一种或多种方法的指令，诸如上述方法。信息载体是计算机或机器可读介质，诸如存储器664、扩展存储器674或处理器652上的存储器。
计算设备650可以通过通信接口666无线通信，通信接口666在必要时可以包括数字信号处理电路。通信接口666可以提供各种模式或协议下的通信，诸如GSM语音呼叫、SMS、EMS或MMS消息收发、CDMA、TDMA、PDC、WCDMA、CDMA2000或GPRS等。这样的通信可以例如通过收发器668(例如，射频收发器)发生。另外，可以发生短距离通信，诸如使用 WiFi或其他此类收发器(未示出)。另外，GPS接收器模块670可以向计算设备650提供附加无线数据，其可以适当地由在计算设备650上运行的应用使用。
计算设备650还可以使用音频编解码器660以听觉方式通信，音频编解码器660可以从用户接收语音信息并将其转换为可用的数字信息。音频编解码器660同样可以例如通过扬声器在计算设备650的耳机中为用户生成可听见的声音。这种声音可以包括来自语音电话呼叫的声音，可以包括记录的声音(例如，语音消息、音乐文件等)，并且还可以包括由在计算设备650上运行的应用生成的声音。
如图所示，计算设备650可以以多种不同的形式实现。例如，它可以被实现为蜂窝电话680。它也可以被实现为智能电话682、个人数字助理或其他移动设备的一部分。
在此处讨论的系统收集有关用户的个人信息或可以利用个人信息的情况下，可以为用户提供控制应用或功能是否收集用户信息(例如，有关用户的社交网络、社交动作或活动、专业、用户的偏好或用户的当前位置的信息)的机会，或控制是否和/或如何接收可能与用户更相关的内容。另外，在存储或使用特定数据之前，可能会以一种或多种方式处理特定数据，以便删除个人身份信息。例如，可以处理用户的身份，以便无法为用户确定任何个人可识别信息，或者可以在获得位置信息的情况下概括用户的地理位置(例如城市、ZIP码或州级别)，使得无法确定用户的特定位置。因此，用户可以控制如何收集有关用户的信息以及如何由内容服务器使用。
本说明书中描述的主题和操作的实施例可以在数字电子电路中或在计算机软件、固件或硬件中实现，包括本说明书中公开的结构及其等同结构，或以其一种或多种的组合来实现。本说明书中描述的主题的实施例可以被实现为一种或多种计算机程序，即，计算机程序指令的一个或多个模块，其被编码在计算机存储介质上以由数据处理装置执行或控制数据处理装置的操作。
计算机存储介质可以是或包括在计算机可读存储设备、计算机可读存储基板、随机或串行访问存储器阵列或设备或它们中的一个或多个的组合中。此外，虽然计算机存储介质不是传播信号，但是计算机存储介质可以是以人工生成的传播信号编码的计算机程序指令的源或目的地。计算机存储介质还可以是一个或多个单独的物理组件或介质(例如，多个CD、磁盘或其他存储设备)或包括在其中。
本说明书中描述的操作可以被实现为由数据处理设备对存储在一个或多个计算机可读存储设备上或从其他源接收的数据执行的操作。
术语“数据处理设备”涵盖用于处理数据的所有种类的装置、设备和机器，例如包括可编程处理器、计算机、片上系统、或前述的多个或组合。装置可以包括专用逻辑电路，例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。除了硬件之外，装置还可以包括为所讨论的计算机程序创建执行环境的代码，例如，构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时环境、虚拟机或其中一个或多个的组合的代码。装置和执行环境可以实现各种不同的计算模型基础结构，诸如网络服务、分布式计算和网格计算架构。
计算机程序(也称为程序、软件、软件应用、脚本或代码)可以用任何形式的编程语言编写，包括编译或解释语言，声明性或程序性语言，并且可以以任何形式进行部署，包括作为独立程序或作为模块、组件、子例程、对象或其他适合在计算环境中使用的单元。计算机程序可以但不必对应于文件系统中的文件。程序可以存储在保存其他程序或数据的文件的一部分中(例如，存储在标记语言文档中的一个或多个脚本)、专用于所讨论程序的单个文件中或多个协调文件(例如，存储一个或多个模块、子程序或部分代码的文件)。可以将计算机程序部署为在一个计算机上执行，或者在位于一个站点上或分布在多个站点上并通过数据通信网络互连的多个计算机上执行。
本说明书中描述的处理和逻辑流程可以由执行一个或多个计算机程序以通过对输入数据进行操作并生成输出来执行功能的一个或多个可编程计算机来执行。处理和逻辑流程也可以由专用逻辑电路执行，并且装置也可以实现为专用逻辑电路，例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。
例如，适合于执行计算机程序的处理器包括通用微处理器和专用微处理器，以及任何种类的数字计算机的任何一个或多个处理器。通常，处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于根据指令执行动作的处理器和用于存储指令和数据的一个或多个存储设备。通常，计算机还将包括或可操作地耦合以从一个或多个用于存储数据的大容量存储设备(例如，磁、磁光盘或光盘)接收数据或将数据传输到一个或多个大容量存储设备或两者。然而，计算机不必具有此类设备。此外，计算机可以嵌入到另一设备中，例如，移动电话、个人数字助理(PDA)、移动音频或视频播放器、游戏机、全球定位系统(GPS)接收器或便携式存储设备(例如通用串行总线(USB)闪存驱动器)，仅举几例。适用于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储设备，包括例如半导体存储设备，例如，EPROM、EEPROM和闪存设备；磁盘，例如，内部硬盘或可移动磁盘；磁光盘；以及CD-ROM和DVD-ROM磁盘。处理器和存储器可以由专用逻辑电路补充或并入专用逻辑电路中。
为了提供与用户的交互，可以在具有用于向用户显示信息的显示设备(例如，CRT(阴极射线管)或LCD(液晶显示器)监视器)以及键盘和指示设备(例如，鼠标或轨迹球，用户可通过其向计算机提供输入)的计算机上实现本说明书中描述的主题的实施例。其他种类的设备也可以用于提供与用户的交互，例如，提供给用户的反馈可以是任何形式的感觉反馈，例如，视觉反馈、听觉反馈或触觉反馈；并且可以以任何形式接收来自用户的输入，包括声音、语音或触觉输入。另外，计算机可以通过向用户使用的设备发送文档和从用户使用的设备接收文档来与用户进行交互，例如，通过响应从网络浏览器收的请求，将网页发送到用户设备上的网络浏览器。
本说明书中描述的主题的实施例可以实现在包括后端组件(例如，作为数据服务器)或包括中间件组件(例如，应用服务器)或包括前端组件(例如，具有图形用户界面或网络浏览器的客户端计算机，用户可以通过图形用户界面或网络浏览器与本说明书中描述的主题的实现进行交互)或者包括一个或多个这种后端组件，中间件组件或前端组件的任意组合的计算系统中。系统的组件可以通过数字数据通信的任何形式或介质(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、网际网络(例如互联网)和对等网络(例如ad hoc对等网络)。
计算系统可以包括用户和服务器。用户和服务器通常彼此远离，并且通常通过通信网络进行交互。用户和服务器之间的关系通过在各自计算机上运行并彼此具有用户-服务器关系的计算机程序产生。在一些实施例中，服务器向用户设备发送数据(例如HTML页面)(例如为了向与用户设备交互的用户显示数据并从中接收用户输入的目的)。可以在服务器上从用户设备接收在用户设备处生成的数据(例如用户交互的结果)。
尽管本说明书包含许多特定实现细节，但是这些细节不应被解释为对任何特征或所要求保护的范围的限制，而应解释为对特定发明的特定实施例而言特定的特征的描述。在单独的实施例的上下文中在本说明书中描述的特定特征也可以在单个实施例中组合实现。相反，在单个实施例的上下文中描述的各种特征也可以分别在多个实施例中或以任何合适的子组合来实现。此外，尽管上面可以将特征描述为以特定组合起作用并且甚至最初如此宣称，但是在一些情况下，可以从组合中删除所要求保护的组合中的一个或多个特征，并且可以将所要求保护的组合用于子组合或子组合的变型。
类似地，尽管在附图中以特定顺序描绘了操作，但是这不应理解为要求以所示的特定顺序或以连续的顺序执行这样的操作，或者执行所有示出的操作以实现期望的结果。在特定情况下，多任务和并行处理可能是有利的。此外，上述实施例中的各种系统组件的分离不应被理解为在所有实施例中都需要这种分离，并且应当理解，所描述的程序组件和系统通常可以一起集成在单个软件产品或打包成多个软件产品。
因此，已经描述了主题的特定实施例。其他实施例在所附权利要求的范围内。例如，权利要求中记载的动作可以以不同的顺序执行并且仍然实现期望的结果。另外，附图中描绘的处理不一定需要所示的特定顺序或连续顺序来实现期望的结果。在特定情况下，多任务和并行处理可能是有利的。

Claims (24)

1.一种用于提供搜索操作输出元素的指示符的计算机实现的方法，包括：
响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；
确定是否对于每个搜索操作输出元素提供指示符，所述指示符基于描述用户响应于搜索操作输出元素的选择而采取的交互的使用数据，其中指示符被配置为与搜索操作输出元素的显示同时显示，其中指示符指示用户可执行的用户动作或者搜索操作输出元素的一个或多个方面中的至少一个；以及
向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的指示符数据；
其中，确定是否对于每个搜索操作输出元素提供动作指示符包括：
获得数据，对于彼此不同的、用户可执行的多个用户动作中的每个用户动作，所述数据描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；
对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及
对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
2.根据权利要求1所述的计算机实现的方法，其中，指示符是指示用户可执行的用户动作的动作指示符，并且指示符数据是动作指示符数据。
3.根据权利要求1所述的计算机实现的方法，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否超过预定阈值。
4.根据权利要求1所述的计算机实现的方法，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否是离群值。
5.根据权利要求4所述的计算机实现的方法，其中，确定执行用户动作的用户百分比是否是离群值进一步包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
6.根据权利要求1所述的计算机实现的方法，其中，多个用户动作包括以下中的至少一个：浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量。
7.根据权利要求2所述的计算机实现的方法，其中，搜索操作输出元素是搜索结果。
8.根据权利要求2所述的计算机实现的方法，其中，搜索操作输出元素是搜索查询建议。
9.一种用于提供搜索操作输出元素的指示符的系统，包括：
数据处理装置；以及
非暂时性计算机可读存储介质，与数据处理装置进行数据通信并存储可由数据处理装置执行的指令，并在执行时使数据处理装置执行以下操作：
响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；
确定是否对于每个搜索操作输出元素提供指示符，所述指示符基于描述用户响应于搜索操作输出元素的选择而采取的交互的使用数据，其中指示符被配置为与搜索操作输出元素的显示同时显示，其中指示符指示用户可执行的用户动作或者搜索操作输出元素的一个或多个方面中的至少一个；和
向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的指示符数据；
其中，确定是否对于每个搜索操作输出元素提供动作指示符包括：
获得数据，对于彼此不同的、用户可执行的多个用户动作中的每个用户动作，所述数据描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；
对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及
对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
10.根据权利要求9所述的系统，其中，指示符是指示用户可执行的用户动作的动作指示符，并且指示符数据是动作指示符数据。
11.根据权利要求9所述的系统，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否超过预定阈值。
12.根据权利要求9所述的系统，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否是离群值。
13.根据权利要求12所述的系统，其中，确定执行用户动作的用户百分比是否是离群值进一步包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
14.根据权利要求9所述的系统，其中，多个用户动作包括以下中的至少一个：浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量。
15.根据权利要求10所述的系统，其中，搜索操作输出元素是搜索结果。
16.根据权利要求10所述的系统，其中，搜索操作输出元素是搜索查询建议。
17.一种用计算机程序编码的非暂时性计算机存储介质，所述计算机程序包括指令，当指令由数据处理装置执行时，使数据处理装置执行以下操作：
响应于来自用户设备的搜索查询，接收基于响应于搜索查询而执行的搜索操作的搜索操作输出元素，其中，每个搜索操作输出元素是能够在搜索结果环境中显示的元素，在搜索结果环境中，向用户设备的用户显示响应于搜索查询的搜索操作输出元素，并且每个搜索操作输出元素是用户可单独选择的；
确定是否对于每个搜索操作输出元素提供指示符，所述指示符基于描述用户响应于搜索操作输出元素的选择而采取的交互的使用数据，其中指示符被配置为与搜索操作输出元素的显示同时显示，其中指示符指示用户可执行的用户动作或者搜索操作输出元素的一个或多个方面中的至少一个；以及
向用户设备提供用于在搜索结果环境中显示的搜索操作输出元素，并且对于要被提供一个或多个指示符的每个搜索操作输出元素，提供用于搜索操作输出元素的指示符数据；
其中，确定是否对于每个搜索操作输出元素提供动作指示符包括：
获得数据，对于彼此不同的、用户可执行的多个用户动作中的每个用户动作，所述数据描述在由用户选择搜索操作输出元素的用户会话期间在选择搜索操作输出元素之后执行用户动作的用户百分比；
对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符，其中，所述动作指示符指示用户动作，并且不同于多个用户动作中的其他用户动作的动作指示符；以及
对于确定要提供动作指示符的每个用户动作，提供使动作指示符与搜索操作输出元素一起显示的动作指示符数据。
18.根据权利要求17所述的非暂时性计算机存储介质，其中，指示符是指示用户可执行的用户动作的动作指示符，并且指示符数据是动作指示符数据。
19.根据权利要求17所述的非暂时性计算机存储介质，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否超过预定阈值。
20.根据权利要求17所述的非暂时性计算机存储介质，其中，对于每个用户动作，基于执行用户动作的用户百分比来确定是否向搜索操作输出元素提供动作指示符进一步包括：确定执行用户动作的用户百分比是否是离群值。
21.根据权利要求20所述的非暂时性计算机存储介质，其中，确定执行用户动作的用户百分比是否是离群值进一步包括：确定执行用户动作的用户百分比是否比最终得到描述其他多个用户动作的数据的结果的用户的均值百分比大一个标准偏差。
22.根据权利要求17所述的非暂时性计算机存储介质，其中，多个用户动作包括以下中的至少一个：浏览相关搜索结果、保存特定搜索结果、共享特定搜索结果、点击与特定搜索结果相关的主机站点以及花费在一个特定搜索结果上的时间量。
23.根据权利要求18所述的非暂时性计算机存储介质，其中，搜索操作输出元素是搜索结果。
24.根据权利要求18所述的非暂时性计算机存储介质，其中，搜索操作输出元素是搜索查询建议。
CN201980033480.2A 2018-05-18 2019-05-13 用于搜索操作输出元素的动作指示符 Active CN112136127B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/983,466 US11132406B2 (en) 2018-05-18 2018-05-18 Action indicators for search operation output elements
US15/983,466 2018-05-18
PCT/US2019/031985 WO2019222083A1 (en) 2018-05-18 2019-05-13 Action indicators for search operation output elements

Publications (2)

Publication Number Publication Date
CN112136127A CN112136127A (zh) 2020-12-25
CN112136127B true CN112136127B (zh) 2024-08-16

Family

ID=66669111

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980033480.2A Active CN112136127B (zh) 2018-05-18 2019-05-13 用于搜索操作输出元素的动作指示符

Country Status (6)

Country Link
US (1) US11132406B2 (zh)
EP (1) EP3782048A1 (zh)
JP (1) JP7119124B2 (zh)
KR (1) KR102454954B1 (zh)
CN (1) CN112136127B (zh)
WO (1) WO2019222083A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11132406B2 (en) * 2018-05-18 2021-09-28 Google Llc Action indicators for search operation output elements
US11232163B2 (en) 2018-08-23 2022-01-25 Walmart Apollo, Llc Method and apparatus for ecommerce search ranking
US11127064B2 (en) * 2018-08-23 2021-09-21 Walmart Apollo, Llc Method and apparatus for ecommerce search ranking
US11436273B2 (en) * 2018-11-14 2022-09-06 Gurunavi, Inc. Image search apparatus, image search method, non-transitory recording medium
US11769190B2 (en) * 2018-11-14 2023-09-26 Gurunavi, Inc. Image search apparatus, image search method, non-transitory recording medium
CN111125548A (zh) * 2019-12-31 2020-05-08 北京金堤科技有限公司 舆论监督方法和装置、电子设备和存储介质
CN113886723B (zh) * 2021-09-09 2024-04-12 盐城天眼察微科技有限公司 确定排序稳定性的方法和装置、以及存储介质和电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102770859A (zh) * 2009-11-20 2012-11-07 谷歌公司 跨语言搜索选项
CN102395965B (zh) * 2009-04-17 2015-07-15 弗兰霍菲尔运输应用研究公司 用于在数据库中搜索对象的方法

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1227392A2 (en) * 2001-01-29 2002-07-31 Hewlett-Packard Company Audio user interface
US7831548B1 (en) * 2001-10-24 2010-11-09 Amazon Technologies, Inc. Systems and methods that use search queries to identify related lists
US7966334B1 (en) * 2001-10-24 2011-06-21 Amazon Technologies, Inc. Information retrieval systems and methods that use user-defined lists to identify related offerings
US20050251444A1 (en) * 2004-05-10 2005-11-10 Hal Varian Facilitating the serving of ads having different treatments and/or characteristics, such as text ads and image ads
US8275764B2 (en) * 2007-08-24 2012-09-25 Google Inc. Recommending media programs based on media program popularity
US8886637B2 (en) * 2008-05-12 2014-11-11 Enpulz, L.L.C. Web browser accessible search engine which adapts based on user interaction
US8122021B2 (en) * 2008-10-06 2012-02-21 Microsoft Corporation Domain expertise determination
US20130276024A1 (en) * 2009-03-20 2013-10-17 Ad-Vantage Networks, Inc. Methods and systems for processing and displaying video content
JP2011039625A (ja) * 2009-08-07 2011-02-24 Kyoto Sangyo Univ 情報検索システム及び情報検索方法
US20110212430A1 (en) * 2009-09-02 2011-09-01 Smithmier Donald E Teaching and learning system
US9104737B2 (en) * 2009-10-08 2015-08-11 Microsoft Technology Licensing, Llc Social distance based search result order adjustment
JP5134639B2 (ja) * 2010-03-17 2013-01-30 ヤフー株式会社 クライアント装置、表示方法、プログラム、情報処理装置、及び情報処理システム
US9436764B2 (en) * 2010-06-29 2016-09-06 Microsoft Technology Licensing, Llc Navigation to popular search results
US9208230B2 (en) 2010-10-29 2015-12-08 Google Inc. Enriching search results
US9069942B2 (en) * 2010-11-29 2015-06-30 Avi Turgeman Method and device for confirming computer end-user identity
US10839431B1 (en) * 2010-12-06 2020-11-17 Metarail, Inc. Systems, methods and computer program products for cross-marketing related products and services based on machine learning algorithms involving field identifier level adjacencies
US10839430B1 (en) * 2010-12-06 2020-11-17 Metarail, Inc. Systems, methods and computer program products for populating field identifiers from telephonic or electronic automated conversation, generating or modifying elements of telephonic or electronic automated conversation based on values from field identifiers
US20120197732A1 (en) * 2011-01-31 2012-08-02 Microsoft Corporation Action-aware intent-based behavior targeting
US20140365466A1 (en) * 2011-09-09 2014-12-11 Google Inc. Search result claiming
US20140019447A1 (en) * 2011-12-18 2014-01-16 Yuly Goryavskiy Multi-attribute search system and method for ranking objects according to their attractiveness
US20140067837A1 (en) * 2012-08-28 2014-03-06 Microsoft Corporation Identifying user-specific services that are associated with user-presented entities
US10671165B2 (en) * 2012-09-25 2020-06-02 Nokia Technologies Oy Method and display device with tactile feedback
US9483518B2 (en) * 2012-12-18 2016-11-01 Microsoft Technology Licensing, Llc Queryless search based on context
US20140201237A1 (en) * 2013-01-14 2014-07-17 International Business Machines Corporation Gathering search queries from external devices for collaborative searching
US20150046259A1 (en) * 2013-08-09 2015-02-12 Yp Intellectual Property Llc Systems and methods for personalized orchestration of business information
US20170116284A1 (en) 2013-11-19 2017-04-27 Google Inc. Surfacing Inferred Actions in Search
US20150317319A1 (en) * 2014-04-30 2015-11-05 Yahoo! Inc. Enhanced search results associated with a modular search object framework
US20150356180A1 (en) * 2014-06-04 2015-12-10 Facebook, Inc. Inferring relationship statuses of users of a social networking system
CN115700434A (zh) * 2014-09-02 2023-02-07 苹果公司 用于可变触觉输出的语义框架
CN106471497B (zh) * 2014-10-14 2020-04-21 谷歌有限责任公司 使用上下文的辅助浏览
US9852136B2 (en) * 2014-12-23 2017-12-26 Rovi Guides, Inc. Systems and methods for determining whether a negation statement applies to a current or past query
US10387505B2 (en) * 2014-12-29 2019-08-20 Samsung Electronics Co., Ltd. Generating advertisements using functional clusters
US9542037B2 (en) * 2015-03-08 2017-01-10 Apple Inc. Device, method, and user interface for processing intensity of touch contacts
WO2016166558A1 (en) * 2015-04-16 2016-10-20 Google, Inc. Native application search result adjustment based on user specific affinity
US10033702B2 (en) * 2015-08-05 2018-07-24 Intralinks, Inc. Systems and methods of secure data exchange
US10579687B2 (en) * 2015-09-01 2020-03-03 Google Llc Providing native application search results with web search results
CN107491283B (zh) * 2016-06-12 2020-03-27 苹果公司 用于动态地调整音频输出的呈现的设备、方法和图形用户界面
WO2017216629A1 (en) * 2016-06-14 2017-12-21 Orcam Technologies Ltd. Systems and methods for directing audio output of a wearable apparatus
US9986104B2 (en) * 2016-08-30 2018-05-29 Verizon Patent And Licensing Inc. Routing of diameter protocol messages based on a subscriber policy
US20190340281A1 (en) * 2018-05-03 2019-11-07 Nutanix, Inc. System and method for dynamic search
US11132406B2 (en) * 2018-05-18 2021-09-28 Google Llc Action indicators for search operation output elements

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102395965B (zh) * 2009-04-17 2015-07-15 弗兰霍菲尔运输应用研究公司 用于在数据库中搜索对象的方法
CN102770859A (zh) * 2009-11-20 2012-11-07 谷歌公司 跨语言搜索选项

Also Published As

Publication number Publication date
JP7119124B2 (ja) 2022-08-16
US20190354638A1 (en) 2019-11-21
WO2019222083A1 (en) 2019-11-21
JP2021523492A (ja) 2021-09-02
KR102454954B1 (ko) 2022-10-14
CN112136127A (zh) 2020-12-25
EP3782048A1 (en) 2021-02-24
US11132406B2 (en) 2021-09-28
KR20210008862A (ko) 2021-01-25

Similar Documents

Publication Publication Date Title
CN112136127B (zh) 用于搜索操作输出元素的动作指示符
US10885076B2 (en) Computerized system and method for search query auto-completion
US9672540B2 (en) Web page ad slot identification
US10664484B2 (en) Computerized system and method for optimizing the display of electronic content card information when providing users digital content
US20170147156A1 (en) Selectively replacing displayed content items based on user interaction
JP6334696B2 (ja) ハッシュタグおよびコンテンツ提示
KR101908099B1 (ko) 콘텐츠 성능 최적화를 위한 자동화된 클릭 타입 선택
US8700621B1 (en) Generating query suggestions from user generated content
US20150269488A1 (en) Provisioning personalized content recommendations
KR102281186B1 (ko) 검색 결과에 대한 애니메이션 스니핏
US20110288931A1 (en) Microsite models
US12124457B2 (en) Triggering local extensions based on inferred intent
US11500953B2 (en) Indexing native application data
JP2019522852A (ja) 文脈情報を提供するためのシステムおよび方法
US20160042050A1 (en) In-Application Recommendation of Deep States of Native Applications
CN112243517A (zh) 资源上单个样式定义标识符的条件解释
JP5481289B2 (ja) ユーザにアプリケーションを推薦するサーバ及び方法
JP2014182289A (ja) 広告情報提供装置
CN111222918B (zh) 关键词挖掘方法、装置、电子设备及存储介质
KR101618314B1 (ko) 랜덤 검색 엔진을 포함한 검색 서버
US20210406333A1 (en) Causal selection preferences
KR20150144420A (ko) 광고 제공 서버 및 이를 이용한 광고 제공 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant