CN113614715A - 基于末端用户输入定制重新排名器的系统 - Google Patents

基于末端用户输入定制重新排名器的系统 Download PDF

Info

Publication number
CN113614715A
CN113614715A CN202080015613.6A CN202080015613A CN113614715A CN 113614715 A CN113614715 A CN 113614715A CN 202080015613 A CN202080015613 A CN 202080015613A CN 113614715 A CN113614715 A CN 113614715A
Authority
CN
China
Prior art keywords
computing device
query
ranker
search results
ranked list
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080015613.6A
Other languages
English (en)
Inventor
K·比玛尼
A·M·帕塔萨拉蒂
陆钰茆
V·H·O·阿科斯塔
T·D·金
T·Y·刘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN113614715A publication Critical patent/CN113614715A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9537Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9038Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/904Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/907Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/909Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9536Search customisation based on social or collaborative filtering

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Library & Information Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本文描述了一种搜索系统。搜索系统被配置为对若干个不同的目录进行搜索,其中每个目录包括表示由公司供应以供获取的商品和/或服务的条目。搜索系统接收查询,并且基于查询从目录输出搜索结果。搜索系统包括通用排名器,其被配置为接收搜索结果并且对搜索结果进行排名,从而生成搜索结果的排名列表。通用排名器用于对搜索结果进行排名,而忽视搜索结果从其被取回的目录。搜索系统还包括针对目录而被定制的重新排名器,其中重新排名器接收搜索结果的排名列表并且对这样的搜索结果进行重新排名,从而生成搜索结果的第二排名列表。

Description

基于末端用户输入定制重新排名器的系统
背景技术
计算机实现的搜索引擎被配置为:响应于从客户端计算设备接收到查询,将搜索结果的排名列表返回给客户端计算设备。为了提供相关的搜索结果,计算机实现的搜索引擎推断提交查询的用户的信息取回意图。推断末端用户的信息取回意图已经被证明是一项困难的任务,至少部分是因为末端用户经常向计算机实现的搜索引擎提交模糊的查询。例如,用户可能对获取关于电视的信息感兴趣并且可能向计算机实现的搜索引擎提出查询“电视”。然而,查询“电视”并没有指定用户感兴趣的电视尺寸,也没有指定用户感兴趣的电视技术特征(例如,LED、OLED、LCD等)。此外,没有附加上下文的查询“电视”对于查询的发布者是对获取关于电视机的信息还是对获取电视节目感兴趣是模糊的。流行的计算机实现的搜索引擎经过几年的发展,通过考虑用户的历史查询、查询的特征、潜在搜索结果的特征等等信息,来推断向搜索引擎发出查询的用户的信息取回意图。
这些计算机实现的搜索引擎是相对少数相对大的公司在几十年的过程中进行大量研究和分配大量资源的结果。常规地,除了那些花费数年时间开发搜索引擎并且希望在某些目录上供应搜索服务的公司之外,其他公司无法供应稳健的计算机实现的搜索引擎,因为这些公司中的许多公司没有这样做的资源。例如,专门向公众销售电子设备的零售商可能没有资源来开发和维护非常适于推断正在搜索特定类型电子设备的用户的意图的搜索引擎。常规地,零售商有两种选择:1)资源来开发定制的搜索引擎,但对于尝试使用这种搜索引擎进行搜索的用户而言,这可能导致次优的末端用户体验;或2)采用由另一公司供应的通用搜索引擎,其中该通用搜索引擎未针对零售商的业务定制,并且因此可能向提出查询的零售商的客户提供次优搜索结果。
在这些方法中的任一种方法中,公司采用的搜索引擎都有些不灵活。例如,公司可能希望推广一种新产品,以便当用户发出包括术语“电视”的查询时,该产品在搜索结果的排名列表中相对较高。在该示例中,公司必须分配资源来更新其搜索引擎以满足上述目标,这通常是不切实际的。如果公司采用通用搜索引擎,则没有合适的机制允许公司更新搜索引擎如何包含特定于公司的逻辑。
发明内容
以下是本文更详细描述的主题的简要概述。该发明内容不旨在限制权利要求的范围。
本文描述的是与计算机实现的搜索系统有关的各种技术,该搜索系统被配置为向第一公司提供通用搜索引擎的稳健性,同时还允许第一公司相对容易地定制搜索系统的操作。该搜索系统包括通用排名器,在一个示例中,该通用排名器由第二公司开发和维护,该第二公司在几年内将资源专门用于搜索引擎技术。搜索系统接收查询,基于查询来搜索第一公司的目录,并且基于搜索从目录输出一组搜索结果。通用排名器被配置为接收搜索结果并且对搜索结果进行排名,从而创建搜索结果的第一排名列表。通用排名器未被定制为对目录进行搜索。
搜索系统附加地包括针对第一公司定制的重新排名器。例如,重新排名器基于第一公司提出的逻辑,其中该逻辑指示将如何重新排名搜索结果。继续上述示例,第一公司可以是专门从事电子设备的销售的零售商,并且可以在库存中具有第一公司希望促销的电视机(例如,相对于库存中的其他电视机来促销)。重新排名器可以被配置为:当从末端用户接收到包括术语“电视”的查询时,提升表示该电视的搜索结果。重新排名器从通用排名器接收搜索结果的第一排名列表,并且对这样的搜索结果进行重新排名,从而输出搜索结果的第二排名列表。同样,基于由第一公司提供的逻辑,重新排名器针对第一公司被定制。因此,搜索系统包括由具有推断用户意图的专业知识的第二公司开发和维护的通用排名器,并且还包括针对第一公司定制的重新排名器。
上面引用的搜索系统非常适于允许多个不同的公司利用上面引用的优点。因此,通用排名器可以被多个不同行业中的如下多个公司使用:供应商品和/或服务以供获取的多个公司,以便这些公司中的每个公司可以利用开发和维护通用排名器的第二公司的专业知识。此外,公司中的每个公司可以生成其自己的一个或多个定制重新排名器,使得可以根据由公司提出的逻辑,来对由通用排名器输出的搜索结果的排名列表进行重新排名。
上述方法具有多种优点。首先,公司能够利用由第二公司开发和维护的通用排名器。与当公司(其无法分配足够的资源来生成稳健的排名器)尝试实现他们自己的搜索和排名系统时提供的搜索结果相比,这使得向查询的发布者提供更相关的搜索结果。此外,公司能够定义定制的重新排名器,该定制的重新排名器基于由公司提出的逻辑。这向公司提供了更大的灵活性,因为公司可以相对容易地生成新的重新排名器或更新现有的重新排名器。此外,公司可以定义采用重新排名器的情况(诸如,当在某个时间窗口内接收到查询时,当从某个地理位置接收到查询时等)。
以上发明内容呈现了简化的概述,以便提供对本文讨论的系统和/或方法的一些方面的基本理解。该发明内容不是本文讨论的系统和/或方法的广泛概述。它不旨在标识关键/重要要素或描述这样的系统和/或方法的范围。它的唯一目的是以简化的形式呈现一些概念,作为稍后呈现的具体实施方式的序言。
附图说明
图1是一个示例性系统的功能框图,其支持基于所接收的查询来生成搜索结果的排名列表。
图2是图示客户端计算设备、主机服务器系统和搜索系统之间的通信的通信图,该搜索系统与基于由客户端计算设备的末端用户提出的查询而向客户端计算设备提供搜索结果的排名列表有关。
图3图示了一个示例性查询。
图4是支持重新排名器的创建的一个示例性系统的功能框图,该重新排名器被配置为对由通用排名器输出的搜索结果的排名列表进行重新排名。
图5描绘了示例性图形用户界面,其被配置为接收可用于创建重新排名器的输入。
图6是图示一个示例性方法的流程图,该方法用于基于从主机计算系统接收到的查询,将搜索结果的排名列表传输给主机计算系统。
图7是图示用于创建和/或更新重新排名器的一个示例性方法的流程图。
图8是图示用于生成重新排名器的一个示例性方法的流程图。
图9是一个示例性计算系统。
具体实施方式
现在参考附图描述与搜索系统相关的各种技术,该搜索系统非常适于基于由公司提出的逻辑来输出搜索结果的排名列表,其中贯穿始终,相同的附图标记用于指代相同的元素。在以下描述中,出于解释的目的,阐述了许多具体细节以便提供对一个或多个方面的透彻理解。然而,明显的是,可以在没有这些具体细节的情况下实践这样的(多个)方面。在其他情况下,公知的结构和设备以框图形式被示出以便于描述一个或多个方面。此外,应当理解,被描述为由某些系统组件实施的功能可以由多个组件执行。类似地,例如,组件可以被配置为执行被描述为由多个组件执行的功能。
此外,术语“或”旨在表示包含性“或”而不是排他性“或”。即,除非另外指定或从上下文中清楚地看出,短语“X采用A或B”旨在表示任何自然包括性排列。即,短语“X采用A或B”由以下任一情况满足:X采用A;X采用B;或X采用A和B。此外,除非另外指定或从上下文中清楚地看出涉及单数形式,否则本申请和所附权利要求中使用的冠词“一”和“一个”通常应当被解释为表示“一个或多个”。
此外,如本文使用的,术语“组件”、“系统”和“模块”旨在涵盖配置有计算机可执行指令的计算机可读数据存储,该计算机可执行指令在由处理器执行时使得某些功能被执行。计算机可执行指令可以包括例程、函数等。还应当理解,组件、系统或模块可以位于单个设备上或跨多个设备分布。此外,如本文所使用的,术语“示例性”旨在意指用作某事物的说明或示例,而不旨在指示偏好。
本文描述了与搜索系统有关的各种技术,搜索系统包括:1)通用排名器,其基于查询来输出搜索结果的排名列表;2)重新排名器,其接收搜索结果的排名列表,并且对这样的搜索结果进行重新排名以生成搜索结果的第二排名列表。本文描述的技术对于供应商品和/或服务以供获取的公司特别有利,其中这样的公司未装配良好来分配资源来开发和维护针对公司的需要定制的搜索系统。
现在参考图1,图示了便于向提出查询的用户提供搜索结果的排名列表的示例性系统100。系统100包括由用户104操作的客户端计算设备102。客户端计算设备102可以是任何合适的计算设备,包括但不限于台式计算设备、膝上型计算设备、平板计算设备、移动电话、可穿戴计算设备等。系统100附加地包括通过网络105与客户端计算设备104通信的主机服务器系统106。主机服务器系统106被配置为托管公司的应用或web站点,其中该公司通过应用和/或web站点向用户104供应商品和/或服务以供获取。主机系统106包括处理器108、存储器110和数据存储112。存储器110包括由处理器108执行的指令。在图1中图示的示例性系统100中,存储器110包括托管系统114,托管系统114被配置为:在从客户端计算设备102接收到对这样的web页面和/或应用内容的请求时,向客户端计算设备102提供web页面和/或应用内容。当托管系统114托管应用时,数据存储112包括应用的应用页面116。当托管系统114托管web站点时,数据存储112包括web站点的web页面118。
系统100还包括通过网络105与主机系统106通信的搜索系统120。搜索系统120可以包括服务器计算设备、数据中心、数据中心的一部分、服务器计算设备的机架等。搜索系统120通常被配置为:1)接收查询;2)基于查询搜索目录,其中目录包括表示可从公司获得的商品和/或服务的条目;和3)以及基于查询来输出搜索结果的排名列表。
搜索系统120包括处理器122、存储器124和数据存储126。数据存储126包括多个目录128-130,其中目录128-130中的每个目录可以是可用于获取的商品和/或服务的电子目录,并且进一步地,其中目录中的每个目录针对不同的公司。因此,第一目录128是可从第一公司获取的商品和/或服务的电子目录,并且第M目录130是可从第M公司获取的商品和/或服务的电子目录。存储器124包括搜索模块132,其中搜索模块132被配置为从主机系统(其为不同公司托管web站点和/或应用)接收查询,并且基于所接收的查询将搜索结果的排名列表提供回主机系统。
搜索模块132包括通用排名器134(在下文中被称为排名器134)。排名器134可以由具有信息取回专业知识的实体开发和维护,诸如已经开发用于信息取回的通用搜索引擎的实体。存储器132还可以具有加载在其中的多个定制重新排名器136-138。利用搜索系统120来向末端用户提供搜索结果的排名列表的公司可以在重新排名器136-138中定义一个或多个定制的重新排名器,其中每个重新排名器针对定义重新排名器的公司定制。此外,公司可以定义数个不同的重新排名器。例如,公司可以定义第一重新排名器,当从第一地理位置提交查询时,该第一重新排名器将被搜索模块132采用,并且公司可以定义第二重新排名器,当从第二地理位置提交查询时,该第二重新排名器将被搜索模块134采用。重新排名器136-138中的每个定制的重新排名器被配置为:接收由排名器134输出的搜索结果的排名列表,并且对搜索结果的这样的排名列表进行重新排名以生成搜索结果的第二排名列表。搜索模块132然后被配置为将搜索结果的第二排名列表返回到从其接收查询的主机系统。
现在描述系统100的操作。客户端计算设备102接收来自用户104的加载公司的web页面的请求和/或客户端计算设备102接收来自用户104的加载应用(诸如可以从移动应用商店下载和安装的移动应用)的内容的请求。客户端计算设备102将请求传输给托管所请求的web页面和/或所请求的应用内容的主机系统106。响应于接收到这样的请求,主机系统106通过网络105将所请求的web页面和/或应用内容传输给客户端计算设备102。
客户端计算设备102后续接收由用户104提出的查询,其中将基于该查询,来搜索由公司供应以供获取的商品和/或服务的目录。客户端计算设备102通过网络105将查询传输给主机系统106。由客户端计算设备102传输给主机系统106的查询可以包括由用户104提出的自然语言、指示客户端计算设备102将查询传输给主机系统106的时间的时间戳、指示客户端计算设备102的地理位置的位置数据等。查询可以可选地包括与客户端计算设备102有关的其他信息,诸如客户端计算设备102的IP地址、存储在客户端计算设备102上的cookies中的信息等。
主机系统106接收查询,然后该查询被提供给托管系统114。托管系统114更新该查询以包括公司的标识符(该标识符可以是由主机系统106托管的公司的web站点的URL)、由主机系统106托管的公司的应用的标识符等。主机系统106将更新的查询传输给搜索系统120。
搜索系统120接收(更新的)查询,然后该查询被供提到搜索模块132。搜索模块132基于查询中包括的公司的标识符从目录128-130之中标识目录。在一个示例中,基于公司的标识符,搜索模块132可以基于查询来确定第一目录128要被搜索。响应于标识第一目录128,搜索模块132利用任何合适的搜索技术来生成与查询相关的搜索结果。如前所述,第一目录128可以包括指示可从公司获取的商品和/或服务的属性的值,其中这样的属性可以包括商品或服务的名称、商品或服务的品牌、商品或服务的价格、在公司的商品的库存水平等。在更具体的示例中,如果公司供应电子产品以供购买,则第一目录128可以包括电子产品的名称、电子产品的制造商以及电子设备的属性,诸如处理器速度、存储器的量、用户评论等。
响应于搜索模块132搜索第一目录128并且基于查询生成搜索结果,排名器134对搜索结果进行排名以生成搜索结果的第一排名列表。排名器可以基于查询的特征(例如,查询中的关键字、提交查询的时间、提交查询的地理位置)和搜索结果的特征(其中每个搜索结果表示在第一目录128中表示的商品或服务),来对搜索结果进行排名。如前所述,排名器134是通用排名器,使得排名器134被搜索模块132采用来对搜索结果进行排名,而不管搜索模块132从中返回搜索结果的目录128-目录130之中的目录如何。
此外,基于所接收的查询中的公司的标识符,搜索模块132从定制的重新排名器136-138之中选择重新排名器,其中重新排名器被选择来对由排名器134输出的搜索结果的第一排名列表进行重新排名。附加地,搜索模块132可以基于其他特征来选择重新排名器,诸如(但不限于)被指派给查询的时间戳(其指示客户端计算设备102将查询传输给主机系统106的时间)、被指派给查询的地理位置(其指示当用户向客户端计算设备102提出查询时,用户104的地理位置)、查询中的关键字、当接收到查询时在客户端计算设备102处呈现的web页面等。例如,公司可能已经定义了数个定制的重新排名器,其中公司可能希望基于一天中的时间(例如,公司可能对特定项目或项目集进行限时促销,并且可能希望在排名中提升这样的项目)、地理位置(公司可能希望在一个地理位置中促销第一项目,同时希望在第二地理位置中促销第二项目)等,来使用特定的重新排名器来对搜索结果进行重新排名。在另一个示例性实施例中,搜索模块132可以基于第一目录128的内容,从定制的重新排名器136-138之中选择重新排名器。例如,当搜索模块132返回的搜索结果包括被指示为具有非常低库存的项目时,公司可能期望选择被配置为提升低库存项目(从而清除公司的具有相对较低库存的项目)的重新排名器。
在一个示例中,基于公司的标识符、查询的特征和/或第一目录128的特征,搜索模块132可以从多个定制的重新排名器136-138之中选择第一定制的重新排名器136。第一定制重新排名器被提供有由排名器134输出的搜索结果的排名列表。响应于接收到由排名器134输出的搜索结果的排名列表,第一定制重新排名器136生成搜索结果的第二排名列表,其中搜索结果的第二排名列表是搜索结果的排名列表的重新排名。响应于第一定制重新排名器136输出搜索结果的第二排名列表(其表示由公司供应以供获取的产品和/或服务的排名列表),搜索模块132使得搜索系统122通过网络105将搜索结果的第二排名列表传输给主机系统106。主机系统106向托管系统114提供搜索结果的第二排名列表,并且托管系统114将搜索结果的第二排名列表并入到应用页面或web页面中。主机系统106然后将应用页面或web页面(其中包含搜索结果的第二排名列表)传输给客户端计算设备102以供用户104察看。
从用户104的角度来看,当从电子公司目录中搜索商品或服务时,用户104的工作流程是不变的-用户在客户端计算设备102处发起对公司的web页面的应用或请求并且提交查询,该查询被传输给主机系统106。主机系统106不是搜索目录本身并且将搜索结果的排名列表返回到客户端计算设备102,而是将查询传输给搜索系统120(因此,主机系统106已经将对公司的目录的搜索卸载到搜索系统120)。如上所述,搜索系统120采用排名器134,排名器134用于生成搜索结果的排名列表,不管从其接收查询的托管系统114的身份如何,并且进一步不管由搜索模块132搜索的目录如何。定制的重新排名器136-138允许将特定于公司的逻辑并入到搜索管线中;例如,如果两个不同的公司具有完全相同的目录,则这两个不同的公司可以定义不同的定制重新排名器,从而可能向两个末端用户呈现不同的搜索结果的排名列表,该两个末端用户提交相同的查询以供在搜索目录时使用。
虽然图1图示了搜索模块132和搜索系统120的一个示例性架构,但是其他架构可以被预期。例如,系统100已经被描述为使得搜索模块132能够根据所接收的查询中包括的公司的身份,来对目录128-130进行搜索。在另一个示例性架构中,数据中心可以包括多个设备,并且可以跨设备执行搜索模块132的多个实例,其中搜索模块的每个实例只能访问单个公司的(多个)目录。在这样的实施例中,数据中心可以基于查询中的公司的标识符,将传入的查询路由到搜索模块132的适当实例。在另一个示例性实施例中,主机系统106可以包括定制的重新排名器。在这样的示例性实施例中,主机系统106可以将查询传输给搜索系统120,然后通用排名器134基于查询来输出搜索结果的排名列表。搜索系统120可以将搜索结果的排名列表传输给主机系统106,主机系统106可以采用定制的重新排名器来对搜索结果的这样的排名列表进行重新排名。其他示例性架构也被预期。
与用于向末端用户提供搜索结果的常规方法相比,系统100展现出各种优点。具体地,公司能够将搜索和初始排名卸载到搜索系统120,搜索系统120在基于所接收的查询推断用户意图方面具有专业知识。因此,与公司开发和维护其自己的搜索和排名技术的常规方法相比,更多相关的搜索结果被提供给末端用户。此外,系统100在搜索管线中并入了针对公司定制的重新排名器。这些定制的重新排名器允许公司提出定制逻辑,定制逻辑用于对由通用排名器134输出的搜索结果进行重新排名。
现在参考图2,图示在客户端计算设备102、主机系统106和搜索系统120之间进行的通信的一个通信图被图示。在202处,客户端计算设备102向主机系统106传输对内容的请求。对内容的请求可以是对公司的web站点的web页面的请求、对来自公司的应用的应用内容的请求等。在204处,主机系统106将所请求的内容传输给客户端计算设备102,然后所请求的内容被呈现给用户104。然后,客户端计算设备102从用户104接收关于由与主机系统106相关联的公司供应的商品和/或服务的查询。客户端计算设备102可以更新查询以包括一个或多个特征,诸如时间戳、地理位置等,并且在206处,客户端计算设备102将更新的查询传输给主机系统106。
在接收到查询时,主机系统106可以进一步更新查询,以包括标识公司的数据(例如,诸如由主机系统106托管的web站点的URL)。在208处,更新的查询被传输给搜索系统120。在210处,基于标识公司的数据,搜索系统120标识将使用查询来搜索的目录。在212处,基于查询的特征和/或目录的特征,搜索系统120标识在将搜索结果提供回客户端计算设备102时要被采用的定制重新排名器。在214处,搜索系统120基于查询来搜索所标识的目录以生成搜索结果,使用通用排名器134对搜索结果进行排名(从而生成搜索结果的排名列表),然后采用所标识的定制重新排名器来对搜索结果的排名列表进行重新排名,以生成搜索结果的第二排名列表。
在216处,搜索结果的第二排名列表被传输给主机系统106,并且在218处,搜索结果的第二排名列表被传输给客户端计算设备102。然后,客户端计算设备102可以将搜索结果的第二排名列表显示给用户104。
参考图3,可以从主机系统106提供给搜索系统120的一个示例性查询300被图示。查询300可以包括第一域302,其包括查询文本(例如,由用户104提出的自然语言)。查询300可以包括第二域304,其包括指示向主机系统106提交查询的客户端计算设备102的位置的数据。
查询300还可以包括第三域306,其包括指示客户端计算设备102将查询传输给主机系统106的时间的时间戳。查询300还可以包括第四域308,其包括客户端计算设备102的IP地址。第五域310可以包括历史信息,通用排名器134和/或标识的定制重新排名器在对搜索结果进行排名时可以使用该历史信息。历史信息可以包括用户104之前察看的web页面、用户104之前购买的商品和/或服务的标识、之前从客户端计算设备102接收的自然语言查询等。查询300还可以包括第六域312,其包括主机系统106的标识符(例如,URL)。
现在参考图4,示例性系统400被图示,其中系统400被配置为基于从客户端计算设备接收的输入来构建定制的重新排名器。系统400包括由公司的代表404操作的客户端计算设备402。系统400附加地包括重新排名器系统406,其中客户端计算设备402通过网络408与重新排名器系统406通信。重新排名器系统406包括处理器410、存储器412和数据存储414。数据存储414包括公司的电子目录416,其中目录416包括表示由公司供应以供获取的商品和/或服务的特征的值。
存储器412包括重新排名器构建器系统418,其被配置为基于从客户端计算设备402接收的输入,来构建和/或更新针对公司的定制重新排名器。在一个示例性实施例中,重新排名器构建器系统418包括用户体验(UX)模块420。UX模块420被配置为:在接收到来自客户端计算设备402的请求时,使得客户端计算设备402呈现图形用户界面(GUI)或GUI的序列,以用于在客户端计算设备402的显示器上显示。GUI或GUI的序列被配置为接收来自公司的代表404的输入,其中这样的输入可用于定义将要在被设计的重新排名器中实现的逻辑。例如,GUI或GUI的序列可以包括允许代表404定义要指派给目录416中的商品和/或服务的特征的权重的界面元素。GUI或GUI的序列还可以包括允许代表404定义位置(仅当从在该位置处的客户端计算设备提交查询时,才使用重新排名器对搜索结果进行重新排名)的(多个)界面元素。在又一个示例中,GUI或GUI的序列可以包括允许该代表定义时间窗口(仅当在时间窗口内提交查询时,才使用重新排名器来对搜索结果进行重新排名)的(多个)界面元素。
UX模块420可以访问目录416,以及标识由目录416中的条目表示的产品和/或服务的特征,以及提供允许代表404提出关于这样的特征如何被正被构建的重新排名器加权的输入的(多个)界面元素。例如,由UX模块420构建的GUI可以允许代表404标识商品的品牌,以及进一步指示表示该品牌的产品的搜索结果将被提升。在另一个示例中,目录416中的特征可以是“库存”,并且UX模块420可以使得GUI被构建,该GUI允许代表404指示库存低于阈值的产品将被提升。基于通过UX模块420构建的GUI或GUI的序列接收的输入,UX模块420可以构建针对公司定制的重新排名器422,并且可以进一步使得重新排名器422被存储在数据存储414中。然后,重新排名器422可以被提供给搜索系统124,以用于与对搜索结果进行重新排名相关的后续利用。
重新排名器构建器系统418还可以包括暴露器模块424,其被配置为暴露搜索模块132的应用编程接口(API)。在这样的实施例中,代表404可以以脚本语言构建逻辑,并且通过暴露器模块424将这样的逻辑呈现给重新排名器系统406。暴露器模块424接收该逻辑,并且基于这样的逻辑构造重新排名器422。由于暴露器模块424直接暴露搜索模块132的API,所以能够相对快速地构建和部署重新排名器422。UX模块420非常适于公司的作为新手编程者的代表,而暴露器模块424被配置为供公司的更高级编程者的代表使用。
现在参考图5,示例性图形用户界面500被图示,其可以由UX模块420构建并且被呈现在客户端计算设备402的显示器上。GUI 500包括多个可选择的界面元素。例如,GUI 500可以包括第一界面元素502,其被配置为允许代表404定义时间窗口的开始,其中当查询具有被指派给其的在时间窗口内的时间戳时,通过使用GUI 500生成的定制重新排名器被用来对搜索结果进行重新排名。第二界面元素504被配置为接收定义前述时间窗口的结束的输入。
第三界面元素506可以接收关于地理区域的输入,该地理区域要与重新排名器相关联。因此,代表404可以提出关于国家、州、城市等的输入,其中通过GUI 500创建的重新排名器仅在向主机系统提交查询的客户端计算设备在地理区域内时,才被采用来对搜索结果进行重新排名。GUI 500还包括多个下拉元素508-518和分别对应于下拉元素508-518的滑块520-530。响应于代表404选择下拉元素(例如,下拉元素508),可选择的特征列表(从公司的电子目录中取回)可以被呈现,其中代表404可以从特征的列表选择特征。示例性特征包括但不限于品牌、库存水平、价格等。一旦从可选特征的列表中选择了特征,就可以采用滑块520来定义重新排名器在对搜索结果重新排名时如何权衡这样的特征。滑块520的默认位置可以是中心位置,这指示重新排名器不会基于特征对搜索结果的排名列表中的搜索结果进行提升或递减。滑块520向右的移动导致更大的权重被指派给该特征(使得具有针对该特征的某个值的搜索结果被提升),而滑块520向左的移动导致较少的权重被指派给该特征(使得具有针对该特征的某个值的搜索结果递减)。在图5中图示的示例性GUI 500中,代表404已经选择了在目录416中表示的商品和/或服务的六个特征,并且标识了重新排名器将如何考虑这些特征。GUI 500还包括按钮532,当其被代表404选择时,使得另一个下拉元素被呈现,以便代表404可以提出关于另一个特征的输入。
GUI 500还包括查询域534和搜索结果域536。查询域534被配置为接收来自代表404的查询,并且代表404可以向查询域534输入查询,该查询可以是典型的由期望搜索目录416的末端用户提出的查询。搜索结果域536描述了当搜索模块132基于查询返回搜索结果时,将被返回到末端用户的搜索结果,并且进一步地,其中搜索模块132包括基于代表404通过GUI 500提出的输入来被定义的重新排名器。基于在查询域534中提出的查询,搜索结果域536可以被实时更新,来描述(多个)滑块520-530的移动将如何改变搜索结果的顺序。因此,当滑块520-530的位置改变时,代表404可以确定经由GUI 500构建的重新排名器的影响。例如,代表404可能希望确保某个商品在基于查询的搜索结果的排名列表中处于最顶端。代表404可以在查询域534中提出查询,并且察看搜索结果域536中描绘的搜索结果。如果产品不在搜索结果的顶部,则代表404可以改变一个或多个滑块520-530的位置,改变正被考虑的特征(例如,添加或移除对应于滑块520-530的特征)等,直到代表404被提供期望的结果为止。
图6至图8图示了与使用定制重新排名器对通用排名器返回的搜索结果的排名列表进行重新排名相关的示例性方法。虽然方法被示为和描述为按顺序执行的一系列动作,但是应当理解和领会这些方法不受该顺序的次序限制。例如,一些动作可以以与本文描述的顺序不同的顺序出现。此外,一个动作可以与另一个动作同时出现。此外,在一些情况下,可能不需要所有动作来实现本文描述的方法。
此外,本文描述的动作可以是计算机可执行指令,该计算机可执行指令可以由一个或多个处理器实现和/或被存储在一个或多个计算机可读介质上。计算机可执行指令可以包括例程、子例程、程序、执行线程等。更进一步地,方法的动作的结果可以被存储在计算机可读介质中、在显示设备上显示等。
现在参考图6,图示用于创建搜索结果的排名列表的示例性方法600的流程图被图示。方法600在602处开始,并且在604处从主机系统接收查询。主机系统托管针对供应商品和/或服务以供获取的公司的内容。虽然在方法600中未被图示,但主机系统先前从客户端计算设备接收查询,该客户端计算设备由向客户端计算设备提供查询的用户操作(例如,用户希望获得关于从公司可获取的一个或多个商品和/或服务的信息)。
在606处,响应于接收到查询,要基于查询而被搜索的目录被标识,其中目录是从特定公司被供应以供获取的商品和/或服务的电子目录。例如,查询可以具有标识主机系统的URL,从而标识公司,并且因此标识将基于查询被搜索的目录。
在608处,要被用来对搜索结果进行重新排名的定制重新排名器基于URL而被标识。此外,可以基于其他因素来标识定制重新排名器,包括查询的特征(例如,提交查询的时间)、目录中表示的产品或服务的特征(例如,目录中产品的库存的量)。在610处,公司目录被搜索以生成搜索结果,其中搜索结果中的每个搜索结果被标识为至少在某种程度上与查询相关。在612处,通用排名器被用来生成搜索结果的第一排名列表。换句话说,使用通用排名器对在610处生成的搜索结果进行排名,其中通用排名器被采用而忽视被搜索的目录。
在614处,在612处生成的搜索结果的第一排名列表被提供给在608处标识的定制的重新排名器。在616处,使用所标识的重新排名器对搜索结果的第一排名列表进行重新排名,以生成搜索结果的第二排名列表。在618处,搜索结果的第二排名列表被传输给主机系统,然后主机系统可以将搜索结果的第二排名列表并入到应用页面或web页面中,并且进一步地,然后主机系统可以将其中并入了搜索结果的第二排名列表的应用页面或web页面传输给客户端计算设备,主机系统从该客户端计算设备接收查询。方法600在620处完成。
现在参考图7,用于生成定制的重新排名器的示例性方法700被图示。方法700在702处开始,并且在704处,从公司的客户端计算设备接收请求,其中该请求是生成或更新针对公司的定制的重新排名器,并且进一步地,其中公司的客户端计算设备由公司的代表操作。在706处,使得图形用户界面被呈现在客户端计算设备的显示器上,并且在708处,通过图形用户界面的域从客户端计算设备接收输入。可以在图形用户界面处接收的示例性输入已经相对于图5被图示和描述。在710处,基于在708处接收的输入来生成和/或更新定制的重新排名器,然后定制的重新排名器可以用于对由通用排名器输出的搜索结果的排名列表进行重新排名。方法700在712处完成。
现在参考图8,图示用于生成和/或更新定制的重新排名器的另一个示例性方法800的流程图被图示。方法800在802处开始,并且在804处,通过搜索模块132的暴露API接收以脚本语言编写的文件。在806处,基于在804处接收的文件来生成和/或更新定制的重新排名器。方法800在808处完成。
现在参考图9,图示了示例性计算设备900的高级图示,其可以根据本文公开的系统和方法来被使用。例如,计算设备900可以被用在支持对目录进行搜索和通过使用定制的重新排名器来对搜索结果进行排名的系统中。作为另一示例,计算设备900可以被用在支持构建和/或更新定制的重新排名器的系统中。计算设备900包括至少一个处理器902,其执行存储在存储器904中的指令。例如,指令可以是用于实现被描述为由上述一个或多个组件实施的功能的指令或用于实现一个或多个上述方法的指令。处理器902可以通过系统总线906访问存储器904。除了存储可执行指令之外,存储器904还可以存储电子目录、重新排名器等。
计算设备900附加地包括可由处理器902通过系统总线906访问的数据存储908。数据存储908可以包括可执行指令、电子目录等。计算设备900还包括输入接口910,其允许外部设备与计算设备900通信。例如,输入接口910可以用于从外部计算机设备、从用户等接收指令。计算设备900还包括输出接口912,其将设备900与一个或多个外部设备对接。例如,计算设备900可以通过输出接口912显示文本、图像等。
预期,经由输入接口910和输出接口912与计算设备900通信的外部设备,可以被包括在提供用户可以与之交互的基本上任何类型的用户接口的环境中。用户接口类型的示例包括图形用户界面、自然用户接口等。例如,图形用户界面可以接受来自采用诸如键盘、鼠标、遥控器等(多个)输入设备的用户的输入,并且在诸如显示器的输出设备上提供输出。此外,自然用户接口可以使用户能够以不受诸如键盘、鼠标、遥控器等输入设备强加的约束的方式与计算设备900交互。相反,自然用户接口可以依赖于语音识别、触摸和手写笔识别、屏幕上和屏幕附近的手势识别、空中手势、头部和眼睛跟踪、声音和语音、视觉、触摸、手势、机器智能等等。
此外,虽然被示为单个系统,但应当理解,计算设备900可以是分布式系统。因此,例如,数个设备可以通过网络连接的方式进行通信,并且可以共同执行被描述为由计算设备900执行的任务。
本文描述的各种功能可以以硬件、软件或其任何组合来被实现。如果以软件实现,则这些功能可以作为一个或多个指令或代码存储在计算机可读介质上或通过其传输。计算机可读介质包括计算机可读存储介质。计算机可读存储介质可以是计算机可以访问的任何可用存储介质。作为示例而非限制,这样的计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁存储设备,或可以用于携带或存储指令或数据结构的形式的所需程序代码,并且可以由计算机访问的任何其他介质。如本文使用的磁盘和盘包括压缩盘(CD)、激光盘、光盘、数字多功能盘(DVD)、软盘和蓝光盘(BD),其中磁盘通常磁性地再现数据,并且盘通常利用激光光学地再现数据。此外,传播信号不被包括在计算机可读存储介质的范围内。计算机可读介质还包括通信介质,包括有助于将计算机程序从一个地方传送到另一个地方的任何介质。例如,连接可以是通信介质。例如,如果软件是使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或无线技术(诸如红外、无线电和微波)从web站点、服务器或其他远程源传输的,则同轴电缆、光缆、双绞线、DSL或无线技术(诸如红外、无线电和微波)都被包括在通信介质的定义中。上述的组合也应当被包括在计算机可读介质的范围内。
备选地或附加地,本文中描述的功能可以至少部分地由一个或多个硬件逻辑组件来执行。例如但不限于,可以使用的硬件逻辑组件的说明性类型包括现场可编程门阵列(FPGA)、程序专用集成电路(ASIC)、程序专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑器件(CPLD)等。
以上描述的内容包括一个或多个实施例的示例。当然,出于描述上述方面的目的,不可能描述上述设备或方法的每一种可能的修改和变更,但是本领域普通技术人员可以认识到,各个方面的许多另外的修改和排列是可能的。因此,所描述的方面旨在包括落入所附权利要求的精神和范围内的所有这样的改变、修改和变化。此外,就在具体实施方式或权利要求中使用术语“包括”而言,这样的术语旨在以类似于术语“包括”的方式是包括性的,如“包括”在权利要求中被用作过渡词时解释的那样。

Claims (15)

1.一种搜索系统,包括:
至少一个处理器;以及
存储器,所述存储器存储指令,所述指令在由所述至少一个处理器执行时,使所述至少一个处理器执行动作,所述动作包括:
从服务器计算设备接收查询,所述服务器计算设备托管针对供应商品以供获取的公司的内容,其中所述查询由所述服务器计算设备从客户端计算设备接收,所述客户端计算设备由向所述客户端计算设备提供所述查询的用户操作;
响应于接收到所述查询,访问被指派给所述公司的目录,其中所述目录从多个目录之中被访问,并且进一步地,其中所述目录包括表示所述商品的特征的值;
基于所述查询和表示所述商品的所述特征的所述值,生成搜索结果的排名列表,其中所述搜索结果的排名列表表示所述商品的子集,并且进一步地,其中所述搜索结果的排名列表由计算机实现的排名器生成,所述计算机实现的排名器被用于生成针对多个公司的搜索结果的排名列表,而不管所述多个目录中的哪一个目录被搜索;
响应于生成所述搜索结果的排名列表,对所述搜索结果的排名列表进行重新排名以生成搜索结果的第二排名列表,其中所述搜索结果的排名列表使用针对所述公司定制的重新排名器而被重新排名;以及
将所述搜索结果的第二排名列表传输给所述服务器计算设备,其中所述服务器计算设备响应于接收到所述搜索结果的第二排名列表,将所述搜索结果的第二排名列表传输给所述客户端计算设备以用于呈现给所述用户。
2.根据权利要求1所述的搜索系统,还包括:
在从所述服务器计算设备接收所述查询之前,从由所述公司的用户操作的第二客户端计算设备接收输入,其中所述输入被配置为定制所述重新排名器;以及
基于所述输入,定制所述重新排名器。
3.根据权利要求2所述的搜索系统,所述动作还包括:
在接收所述输入之前,从所述第二客户端计算设备接收向所述搜索系统提供所述输入的请求;
响应于接收到所述请求,使图形用户界面被呈现在所述第二客户端计算设备的显示器上,所述图形用户界面包括被配置为接收所述输入的域;以及
基于在所述图形用户界面的所述域中所提供的所述输入,从所述第二客户端计算设备接收所述输入。
4.根据权利要求1所述的搜索系统,其中所述重新排名器具有被指派给其的地理区域,其中所述查询具有被指派给其的位置数据,所述位置数据指示所述客户端计算设备在所述地理区域内,所述动作还包括:
响应于接收到所述查询,基于被指派给所述查询的所述位置数据,来确定所述客户端计算设备在被指派给所述重新排名器的所述地理区域内;以及
响应于确定所述客户端计算设备在被指派给所述重新排名器的所述地理区域内,从多个重新排名器之中选择所述重新排名器。
5.根据权利要求1所述的搜索系统,其中所述重新排名器具有被指派给其的时间窗口,其中所述查询具有被指派给其的时间戳,所述时间戳指示所述客户端计算设备在被指派给所述重新排名器的所述时间窗口内接收到所述查询,所述动作还包括:
响应于接收到所述查询,基于被指派给所述查询的所述时间戳,确定所述查询在被指派给所述重新排名器的所述时间窗口内被接收;以及
响应于确定所述查询在被指派给所述重新排名器的所述时间窗口内被接收,从多个重新排名器之中选择所述重新排名器。
6.根据权利要求1所述的搜索系统,其中所述查询具有特征,所述动作还包括:
响应于接收到所述查询,基于所述查询的所述特征,从针对所述公司定制的多个重新排名器之中选择所述重新排名器。
7.一种由搜索系统执行的方法,所述方法包括:
基于从与所述搜索系统网络通信的服务器计算设备接收的查询,来生成搜索结果的排名列表,其中所述搜索系统搜索被指派给所述公司的目录,以生成所述搜索结果的排名列表,其中所述目录包括表示从所述公司可获取的商品的条目,并且进一步地,其中所述服务器计算设备从客户端计算设备接收所述查询,所述客户端计算设备由向所述客户端计算设备提供所述查询的用户操作;
将所述搜索结果的排名列表提供给计算机实现的重新排名器,其中基于由所述搜索系统从由所述公司的代表操作的第二客户端计算设备接收的输入,所述计算机实现的重新排名器针对所述公司而被定制;
使用所述计算机实现的重新排名器,对所述搜索结果的排名列表进行重新排名,以生成搜索结果的第二排名列表,其中所述搜索结果的排名列表和所述搜索结果的第二排名列表包括所述目录中所表示的商品的子集;以及
将所述搜索结果的第二排名列表传输给所述服务器计算设备,其中所述服务器计算设备使所述搜索结果的第二排名列表被呈现在所述查询从其被接收的所述客户端计算设备的显示器上。
8.根据权利要求7所述的方法,其中所述服务器计算设备是托管所述公司的web站点的web服务器。
9.根据权利要求7所述的方法,其中所述服务器计算设备是应用服务器,所述应用服务器托管针对所述公司的应用,其中所述应用是移动应用,并且进一步地,其中所述客户端计算设备是移动电话。
10.根据权利要求7所述的方法,还包括:
在生成所述搜索结果的排名列表之前,从由所述公司的所述代表操作的所述第二客户端计算设备接收所述输入;以及
响应于接收到所述输入并且基于所述输入,构建所述重新排名器。
11.根据权利要求10所述的方法,其中所述输入包括以脚本语言编写的文件。
12.根据权利要求10所述的方法,还包括:
在接收所述输入之前,从所述第二客户端计算设备接收向所述搜索系统提供所述输入的请求;
响应于接收到所述请求,使图形用户界面被呈现在所述第二客户端计算设备的显示器上,所述图形用户界面包括被配置为接收所述输入的域;以及
基于在所述图形用户界面的所述域中所提供的所述输入,从所述第二客户端计算设备接收所述输入。
13.根据权利要求7所述的方法,其中所述重新排名器具有被指派给其的地理区域,其中所述查询具有被指派给其的位置数据,所述位置数据指示所述客户端计算设备在所述地理区域内,所述方法还包括:
基于被指派给所述查询的所述位置数据,来确定所述客户端计算设备在被指派给所述重新排名器的所述地理区域内;以及
响应于确定所述客户端计算设备在被指派给所述重新排名器的所述地理区域内,使所述重新排名器重新排名所述搜索结果的排名列表,以生成所述搜索结果的第二排名列表。
14.根据权利要求7所述的方法,其中所述重新排名器具有被指派给其的时间窗口,其中所述查询具有被指派给其的时间戳,所述时间戳指示所述客户端计算设备在被指派给所述重新排名器的所述时间窗口内接收到所述查询,所述动作还包括:
基于被指派给所述查询的所述时间戳,确定所述查询在被指派给所述重新排名器的所述时间窗口内被接收;以及
响应于确定所述查询在被指派给所述重新排名器的所述时间窗口内被接收,使所述重新排名器重新排名所述搜索结果的排名列表,以生成所述搜索结果的第二排名列表。
15.一种搜索系统的计算机可读存储介质,所述计算机可读存储介质包括指令,所述指令在由处理器执行时,使所述处理器执行动作,所述动作包括:
基于从与所述搜索系统网络通信的服务器计算设备接收的查询,来生成搜索结果的排名列表,其中所述搜索系统搜索被指派给所述公司的目录,以生成所述搜索结果的排名列表,其中所述目录包括表示从所述公司可获取的商品的条目,并且进一步地,其中所述服务器计算设备从客户端计算设备接收所述查询,所述客户端计算设备由向所述客户端计算设备提供所述查询的用户操作;
将所述搜索结果的排名列表提供给计算机实现的重新排名器,其中基于由所述搜索系统从由所述公司的代表操作的第二客户端计算设备接收的输入,所述计算机实现的重新排名器针对所述公司而被定制;
使用所述计算机实现的重新排名器,对所述搜索结果的排名列表进行重新排名,以生成搜索结果的第二排名列表,其中所述搜索结果的排名列表和所述搜索结果的第二排名列表包括来自所述目录的搜索结果的子集;以及
将所述搜索结果的第二排名列表传输给所述服务器计算设备,其中所述服务器计算设备使所述搜索结果的第二排名列表被呈现在所述查询从其被接收的所述客户端计算设备的显示器上。
CN202080015613.6A 2019-02-20 2020-02-12 基于末端用户输入定制重新排名器的系统 Pending CN113614715A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/281,060 US20200265095A1 (en) 2019-02-20 2019-02-20 System that customizes a re-ranker based upon end user input
US16/281,060 2019-02-20
PCT/US2020/017812 WO2020172009A1 (en) 2019-02-20 2020-02-12 System that customizes a re-ranker based upon end user input

Publications (1)

Publication Number Publication Date
CN113614715A true CN113614715A (zh) 2021-11-05

Family

ID=69954106

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080015613.6A Pending CN113614715A (zh) 2019-02-20 2020-02-12 基于末端用户输入定制重新排名器的系统

Country Status (4)

Country Link
US (1) US20200265095A1 (zh)
EP (1) EP3912059A1 (zh)
CN (1) CN113614715A (zh)
WO (1) WO2020172009A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11645692B2 (en) * 2019-11-20 2023-05-09 Microsoft Technology Licensing, Llc Generating training data for a computer-implemented ranker
CN113744015A (zh) * 2020-10-20 2021-12-03 北京沃东天骏信息技术有限公司 一种排序方法、装置、设备及计算机存储介质
US20230394047A1 (en) * 2021-10-29 2023-12-07 Meta Platforms, Inc. Client-side ranking of social media feed content

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140250115A1 (en) * 2011-11-21 2014-09-04 Microsoft Corporation Prototype-Based Re-Ranking of Search Results
US20150317400A1 (en) * 2014-05-01 2015-11-05 Airbnb, Inc. Re-ranking search results for location refining and diversity

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090049018A1 (en) * 2007-08-14 2009-02-19 John Nicholas Gross Temporal Document Sorter and Method Using Semantic Decoding and Prediction
US9489461B2 (en) * 2014-03-03 2016-11-08 Ebay Inc. Search ranking diversity based on aspect affinity

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140250115A1 (en) * 2011-11-21 2014-09-04 Microsoft Corporation Prototype-Based Re-Ranking of Search Results
US20150317400A1 (en) * 2014-05-01 2015-11-05 Airbnb, Inc. Re-ranking search results for location refining and diversity

Also Published As

Publication number Publication date
EP3912059A1 (en) 2021-11-24
WO2020172009A1 (en) 2020-08-27
US20200265095A1 (en) 2020-08-20

Similar Documents

Publication Publication Date Title
US10175860B2 (en) Search intent preview, disambiguation, and refinement
AU2017264388B2 (en) Searching structured and unstructured data sets
US9607055B2 (en) System and method for dynamically retrieving data specific to a region of a layer
US9760541B2 (en) Systems and methods for delivery techniques of contextualized services on mobile devices
KR101872547B1 (ko) 엔티티와 연관된 액션 및 제공자의 제시 기법
US9613132B2 (en) Method of and system for displaying a plurality of user-selectable refinements to a search query
CN101884042B (zh) 使用声誉度量来提高搜索相关度
US8515809B2 (en) Dynamic modification of advertisements displayed in response to a search engine query
US20070198741A1 (en) Accessing information
US20120290441A1 (en) Using Application Market Log Data To Identify Applications Of Interest
US20120166276A1 (en) Framework that facilitates third party integration of applications into a search engine
CN113614715A (zh) 基于末端用户输入定制重新排名器的系统
US20210279297A1 (en) Linking to a search result
US20190108235A1 (en) Alternative query suggestion in electronic searching
US10643142B2 (en) Search term prediction
WO2018201280A1 (en) Method and apparatus for query auto-completion
US10235679B2 (en) Learning a ranker to rank entities with automatically derived domain-specific preferences
US10990601B1 (en) Dynamic optimization of variant recommendations
CN112100522A (zh) 用于检索兴趣点的方法、装置、设备及介质
US11341565B2 (en) Search system that provides personalized results
JP7492994B2 (ja) 検索結果提供方法、システム、およびコンピュータプログラム
WO2022251130A1 (en) Linking to a search result
WO2023069176A1 (en) Knowledge attributes and passage information based interactive next query recommendation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination