CN101268464A - 使用文档使用统计量的排位函数 - Google Patents

使用文档使用统计量的排位函数 Download PDF

Info

Publication number
CN101268464A
CN101268464A CNA2006800345316A CN200680034531A CN101268464A CN 101268464 A CN101268464 A CN 101268464A CN A2006800345316 A CNA2006800345316 A CN A2006800345316A CN 200680034531 A CN200680034531 A CN 200680034531A CN 101268464 A CN101268464 A CN 101268464A
Authority
CN
China
Prior art keywords
document
use value
network
actual use
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800345316A
Other languages
English (en)
Other versions
CN101268464B (zh
Inventor
D·梅耶泽
H·扎拉格扎
K·佩顿纳
A·德伯鲁纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN101268464A publication Critical patent/CN101268464A/zh
Application granted granted Critical
Publication of CN101268464B publication Critical patent/CN101268464B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G06F16/24578—Query processing with adaptation to user needs using ranking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/334—Query execution
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99932—Access augmentation or optimizing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99933—Query processing, i.e. searching
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99937—Sorting
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99931—Database or file accessing
    • Y10S707/99938—Concurrency, e.g. lock management in shared database

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Document Processing Apparatus (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

揭示了向网络上文档提供文档相关性分数的方法。还揭示了具有计算机可执行指令存储在其上以执行向网络上文档提供文档相关性分数的方法的计算机可读介质。此外还揭示了包含至少一个应用程序模块的计算系统，其中该至少一个应用程序模块包括用于执行向网络上文档提供文档相关性分数的方法的应用程序代码。

Description

使用文档使用统计量的排位函数
背景技术
按照文档与给定搜索查询的相关性排列文档的排位函数是已知的。在本领域中仍在努力开发针对给定搜索查询提供优于由使用已知排位函数的搜索引擎产生的搜索结果的搜索结果的排位函数。
发明内容
在此主要描述用于在网络上确定给定文档的文档相关性分数的各种技术。文档相关性分数是通过排位函数产生的，该排位函数包括一或多个查询无关分量，其中至少一个查询无关分量包括使用参数，该参数考虑在web服务器上维护与存储的、用于网络上一或多个文档的实际文档使用数据。排位函数可由搜索引擎使用，以基于多个文档的文档相关性分数按序(通常按降序)排列多个文档。
提供本发明内容，它以简化的形式向读者一般地介绍在下面“具体实施方式”中描述的一或多个选择的概念。本发明内容不是要标识要求保护主题的关键和/或必要特征。
附图说明
图1表示示出一方法的示例性步骤的示例性逻辑流程图，该方法响应于用户输入的搜索查询产生经排列的搜索结果；
图2是一些用于实现在此揭示的方法和过程的示例性操作环境的主要组件的框图；
图3表示示出一示例性方法的示例性步骤的逻辑流程图，该方法用于确定网络上文档的文档相关性分数；以及
图4表示示出一方法的示例性步骤的逻辑流程图，该方法使用包含文档使用参数的排位函数排列生成的搜索结果。
具体实施方式
为加强对在此揭示的方法和过程的原理的理解，使用下面的特定实施例的描述和特定语言来描述这些特定实施例。然而将会理解，使用特定语言不是要限制所揭示方法和过程的范围。对所讨论的揭示方法和过程的原理的改变、进一步修改以及这类进一步应用，对于被揭示方法和过程所属领域的技术人员而言，都是在正常的预期范围内的。
揭示了确定网络上文档的文档相关性分数的方法。每一文档相关性分数是使用排位函数计算的，希望该排位函数包含一或多个查询无关分量(例如，不依赖于给定搜索查询或搜索查询项的函数分量)，一或多个查询相关分量(例如，依赖于给定搜索查询或搜索查询项的细节的函数分量)，或者两者的组合。由排位函数确定的文档相关性分数可用于按照每一文档相关性分数排列网络空间(例如公司内联网空间)内的文档。可使用揭示方法的示例性搜索过程示出作为在图1中的示例性过程10。
图1描绘示例性搜索过程10，它从过程步骤80开始，其中用户输入搜索查询。从步骤80，示例性搜索过程10进行至步骤200，其中搜索引擎为一或多个搜索查询项搜索网络空间内的所有文档。从步骤200，示例性搜索过程10进行至步骤300，其中搜索引擎的排位函数基于每一文档的相关性分数排列网络空间内的文档，而文档相关性分数则基于一或多个查询无关分量、一或多个查询相关分量或两者的组合。从步骤300，示例性搜索过程10进行至步骤400，其中向用户呈现经排列的搜索结果，这一呈现通常按照降序以标识网络空间内与搜索查询最相关的文档。
如下面更详细地讨论的，在确定文档相关性分数的一些示例性方法中，用于确定文档相关性分数的排位函数的至少一个查询无关分量考虑与网络空间内一或多个用户对一或多个文档实际使用相关的“文档使用数据”或“文档使用统计量”。文档使用数据和/或统计量是由独立于给定搜索引擎的web服务器上的应用程序代码生成和存储的。例如，文档使用数据可由网站维护，使得每当用户请求URL时，服务器就更新使用计数。使用计数器可以维护在给定时间间隔获得的文档相关数据，这一给定时间间隔诸如可以是上个星期内、上个月、去年一年内、或者给定文档或文档集合的生存期内。应用程序代码可用于通过(i)特殊的应用编程接口(API)，(ii)web服务请求，或者(iii)请求返回网站上每一URL的使用数据的管理网页来从网站获得使用数据。
特定的网站可用于生成和维护网络空间内的使用数据，并且在本地或远程存储系统中存储使用数据。用于生成、维护和存储网络空间内文档的使用数据的合适网站包括但不限于
Figure A20068003453100091
Figure A20068003453100092
Services(服务)站点。
所揭示的用以确定文档相关性分数的方法还可使用包括一或多个附加查询无关分量的排位函数。合适的附加查询无关分量包括但不限于在2004年8月30日提交的题为“SYSTEM AND METHOD FOR RANKINGSEARCH RESULTS USING CLICK DISTANCE(使用点击距离排位搜索结果的系统和方法)”的美国专利申请序列号10/955,983中描述的、考虑网络空间内每一文档的点击距离的查询无关分量，在2005年8月15日提交的题为“RANKING FUNCTIONS USING A BIASED CLICK DISTANCE OF ADOCUMENT ON A NETWORK(使用网络上文档的经偏移的点击距离的排位函数)”的美国专利申请序列号11/206,286中描述的、考虑网络空间内每一文档的经偏移的点击距离的查询无关分量，以及在2004年8月30日提交的标题为“SYSTEM AND METHOD FOR RANKING SEARCH RESULTSUSING CLICK DISTANCE(使用点击距离排位搜索结果的系统和方法)”的美国专利申请序列号10/955,983中描述的、考虑网络空间内每一文档的URL的查询无关分量。上述美国专利申请的每一主题都已转让给本发明专利申请的受让人，通过引用将它们完整地包括于此。
在又一示例性实施例中，所揭示的用以确定文档相关性分数的方法使用包括至少一个查询无关分量的排位函数，该至少一个查询无关分量既包括上述文档使用参数，也包括一或多个上述附加查询无关分量。
文档相关性分数可用于排列网络空间内的文档。例如，一种排列网络上文档的方法包括以下步骤：使用上述方法确定网络上每一文档的文档相关性分数；以及基于每一文档的文档相关性分数按所需顺序(一般按降序)排列这些文档。
文档相关性分数还可用于排列搜索查询的搜索结果。例如，一种排列搜索查询的搜索结果的方法可包括以下步骤：使用上述方法确定搜索查询的搜索结果中每一文档的文档相关性分数，以及基于每一文档的文档相关性分数按所需顺序(一般按降序)排列这些文档。
使用在此揭示方法的应用程序可在包括各种硬件组件的计算机系统上加载并执行。下面描述用于实践在此揭示的方法的示例性计算机系统和示例性操作环境。
示例性操作环境
图2示出了可在其上实现在此公开各方法的合适的计算系统环境100的示例。计算系统环境100仅为合适的计算环境的一个示例，并非对在此公开各方法的使用范围或功能性提出任何局限。计算环境100也不应解释成对于在示例性操作环境100中所示出的任一组件或其组合有任何依赖或要求。
在此公开的方法可运行于多种其它通用或专用计算系统环境或配置。适合在此处公开的方法中使用的公知的计算系统、环境和/或配置的示例包括，但不限于，个人计算机、服务器计算机、手持式或膝上型设备、多处理器系统、基于微处理器的系统、机顶盒、可编程消费者电子产品、网络PC、小型机、大型机、包括上述系统或设备中的任一个的分布式计算机环境等。
在此公开的方法和过程可在诸如由计算机执行的程序模块等计算机可执行指令的通用上下文中描述。一般而言，程序模块包括例程、程序、对象、组件、数据结构等，它们执行特定任务或实现特定抽象数据类型。在此公开的方法和过程也可以在分布式计算环境中实现，其中任务由通过通信网络连接的远程处理设备来执行。在分布式计算环境中，程序模块可以位于包括存储器存储设备在内的本地和远程计算机存储介质中。
参考图2，用于实现在此公开的方法和过程的一个示例性系统包括计算机110形式的通用计算设备。计算机110的组件可以包括但不限于，处理单元120、系统存储器130和将包括系统存储器130在内的各种系统组件耦合至处理单元120的系统总线121。系统总线121可以是若干类型的总线结构中的任一种，包括存储器总线或存储器控制器、外围总线和使用各种总线体系结构中的任一种的局部总线。作为示例，而非限制，这样的体系结构包括工业标准体系结构(ISA)总线、微通道体系结构(MCA)总线、增强型ISA(EISA)总线、视频电子技术标准协会(VESA)局部总线和外围部件互连(PCI)总线(也称为Mezzanine总线)。
计算机110通常包括各种计算机可读介质。计算机可读介质可以是能由计算机110访问的任何可用介质，而且包含易失性/非易失性介质以及可移动/不可移动介质。作为示例，而非限制，计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括易失性和非易失性、可移动和不可移动介质，它们以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据这样的信息的任意方法或技术来实现。计算机存储介质包括，但不限于，RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光盘存储、磁带盒、磁带、磁盘存储或其它磁性存储设备、或能用于存储所需信息且可以由计算机100访问的任何其它介质。通信介质通常具体化为诸如载波或其它传输机制等已调制数据信号中的计算机可读指令、数据结构、程序模块或其它数据，且包含任何信息传递介质。术语已调制数据信号摂指的其一个或多个特征以在信号中编码信息的方式被设定或更改的信号。作为示例，而非限制，通信介质包括有线介质，诸如有线网络或直接线连接，以及无线介质，诸如声学、RF、红外线和其它无线介质。上述中的任意组合也应包括在此处使用的计算机可读介质的范围之内。
系统存储器130包括计算机存储介质，其形式为易失性和/或非易失性存储器，譬如只读存储器(ROM)131和随机存取存储器(RAM)132。基本输入/输出系统133(BIOS)包含有助于诸如启动时在计算机110中元件之间传递信息的基本例程，它通常存储在ROM 131中。RAM 132通常包含处理单元120可以立即访问和/或目前正在操作的数据和/或程序模块。作为示例而非局限，图2示出了操作系统134、应用程序135、其它程序模块136和程序数据137。
计算机110也可包括其它可移动/不可移动、易失性/非易失性计算机存储介质。仅作为示例，图2示出了从不可移动、非易失性磁介质中读取或向其写入的硬盘驱动器140，从可移动、非易失性磁盘152中读取或向其写入的磁盘驱动器151，以及从诸如CD ROM或其它光学介质等可移动、非易失性光盘156中读取或向其写入的光盘驱动器155。可以在示例性操作环境中使用的其它可移动/不可移动、易失性/非易失性计算机存储介质包括但不限于，磁带盒、闪存卡、数字多功能盘、数字录像带、固态RAM、固态ROM等等。硬盘驱动器141通常由不可移动存储器接口，诸如接口140连接至系统总线121，磁盘驱动器151和光盘驱动器155通常由可移动存储器接口，诸如接口150连接至系统总线121。
以上讨论并在图2中示出的驱动器及其相关联的计算机存储介质为计算机110提供了对计算机可读指令、数据结构、程序模块和其它数据的存储。例如，在图2中，硬盘驱动器141被示为存储操作系统144、应用程序145、其它程序模块146和程序数据147。注意，这些组件可以与操作系统134、应用程序135、其它程序模块136和程序数据137相同或不同。操作系统144、应用程序145、其它程序模块146和程序数据147在这里被标注了不同的标号是为了说明至少它们是不同的副本。
用户可以通过输入设备如键盘162和定点设备161(通常指鼠标、跟踪球或触摸板)向计算机110输入命令和信息。其它输入设备(未示出)可以包括麦克风、操纵杆、游戏垫、圆盘式卫星天线、扫描仪等。这些和其它输入设备通常由耦合至系统总线的用户输入接口160连接至处理单元120，但也可以由其它接口或总线结构，诸如并行端口、游戏端口或通用串行总线(USB)连接。监示器191或其它类型的显示设备也经由接口如视频接口190连接到系统总线121。除监视器191以外，计算机110也可以包括其它外围输出设备，诸如扬声器197和打印机196，它们可以通过输出外围接口195连接。
计算机110可在使用至一个或多个远程计算机如远程计算机180的逻辑连接的网络化环境下操作。远程计算机180可以是个人计算机、服务器、路由器、网络PC、对等设备或其它常见网络节点，且通常包括上文相对于计算机110描述的许多或所有元件，尽管在图2中只示出存储器存储设备181。图2中所示的逻辑连接包括局域网(LAN)171和广域网(WAN)173，但也可以包括其它网络。这样的网络环境常见于办公室、企业范围计算机网络、内联网和因特网。
当在LAN网络环境中使用时，计算机110通过网络接口或适配器170连接至局域网171。当在WAN网络环境中使用时，计算机110通常包括调制解调器172，或用于通过WAN 173，如因特网建立通信的其它装置。调制解调器172可以是内置或外置的，它可以通过用户输入接口160或其它合适的机制连接至系统总线121。在网络化环境中，相对于计算机110所描述的程序模块或其部分可以存储在远程存储器存储设备中。作为示例而非局限，图2示出远程应用程序185驻留在存储器设备181上。将会理解：所示的这些网络连接起示例性的作用，也可以使用在计算机之间建立通信链路的其他手段。
在此揭示的方法和过程可使用一或多个应用程序来实现，这包括但不限于，服务器系统软件应用程序(例如，WINDOWS SERVER SYSTEMTM软件应用程序)，搜索排位应用程序，以及用于生成、维护和存储网络空间内的文档的使用数据的应用程序(例如，
Figure A20068003453100131
Figure A20068003453100132
Services应用程序)，被指定为示例性系统100中的应用程序135、应用程序145和远程应用程序185的众多应用程序之一的任一个应用程序。
如上所述，本领域技术人员将了解，所揭示的为给定文档生成文档相关性分数的方法可在其它计算机系统配置中实现，这包括手持设备、多处理器系统、基于微处理器或可编程电子消费品、联网的个人计算机、小型机、大型机等等。所揭示的为给定文档生成文档相关性分数的方法也可在分布式计算环境中实践，其中任务由通过通信网络链接的远程处理设备来完成。在分布式计算环境中，程序模块可位于本地和远程两者的存储器存储设备中。
示例性实施例的实现
如上所述，提供确定网络上文档的文档相关性分数的方法。所揭示的方法可使用考虑网络上每一文档的文档使用值的排位函数来排列网络上文档。
所揭示的确定网络上文档的文档相关性分数的方法可包括多个步骤。在一个示例性实施例中，确定网络上文档的文档相关性分数的方法包括以下步骤：向包括N个文档的网络上的一或多个文档指派实际使用值(UA)，其中该实际使用值(UA)基于在服务器上维护和存储的实际使用数据；如果少于N个文档被指派了实际使用值(UA)，则向没有与其相关联的实际使用数据的文档指派默认使用值(UD)；以及使用每一文档的使用值(即UA或UD)来确定网络上给定文档的文档相关性分数。
如在此使用的，术语“实际使用数据”表示与一或多个用户对文档的“使用”相关联的一或多种类型的数据。给定文档或文档集合的实际使用数据类型可包括但不限于，在给定时间段内所有用户的文档查看数量、在给定时间段内每用户文档查看的平均数量、在给定时间段内在特定文档上花费的总时间、在给定时间段内在特定文档上花费的平均时间等等。给定时间段可以是例如上个星期内、上个月、去年一年内、文档的生存期或者任何其它所需的时间段。
生成、维护和存储网络空间内文档的文档使用数据或统计量的步骤可由通常存在于计算系统上的应用程序代码来执行。文档使用数据是独立于给定搜索查询或搜索引擎来生成、维护和存储的，并且通常由维护文档(或页面)并使得文档(或页面)对用户可用的服务器上的应用程序代码来生成、维护和存储的。用于生成、维护和存储文档使用数据或统计量的合适应用程序包括但不限于
Figure A20068003453100141
Figure A20068003453100142
Services和其它类似的应用程序。
在这些服务站点以及执行类似功能的其它网站上存储和维护的文档使用数据，并如上所述可由应用程序代码来访问。例如，文档使用数据可通过(i)特殊的应用编程接口(API)，(ii)web服务请求，或(iii)请求返回网站上每一URL的使用数据的管理网页而从给定的网站(例如，
Figure A20068003453100144
Services站点)访问。
所揭示的确定网络上文档的文档相关性分数的方法可包括多个附加步骤，包括但不限于：监控网络空间内一或多个文档的实际文档使用；在本地或远程数据存储文件中存储一或多个文档的实际文档使用数据；基于文档或包含该文档的文件夹的实际使用数据，计算文档的实际使用值(UA)；在本地或远程数据存储文件中存储实际使用值(UA)；向本地或远程数据存储文件请求存储的文档使用数据或实际使用值(UA)(例如，在用户的特定搜索查询之后向搜索引擎请求这类数据)；从本地或远程数据存储文件检索一或多个文档的实际文档使用数据或实际使用值(UA)；以及可选地，将文档使用值(即，实际或默认的)与一或多个附加文档属性合并以确定文档的文档相关性分数。
图3表示示出示例性方法的示例性步骤的逻辑流程图，该方法提供网络上文档的实际或默认使用值，之后跟随着由系统管理员进行的可任选降低/提升过程。如图3所示，示例性方法401开始于框402并进行至步骤403。在步骤403，爬行(crawl)网络上的第一文档以获得实际使用数据。
爬行第一文档以获得实际使用数据的步骤(步骤403)可使用爬行应用程序来执行，该应用程序能够确定第一文档是否具有与其相关联的任何实际使用数据，并且如果第一文档具有与其相关联的实际使用数据，则检索该实际使用数据。适于在所揭示的提供网络上文档的实际或默认使用值的方法中使用的爬行应用程序包括但不限于在美国专利号6,463,455和6,631,369中描述的爬行应用程序，通过引用将这两个主题整体包括在此。
如上所述，实际使用数据可从存储网络上一或多个文档的实际使用数据的一或多个文件获得。实际使用数据可作为文档分量与文档存储在一起，或者可与实际文档分开地存储在数据存储文件中。合适的远程存储系统包括但不限于，可从微软公司(华盛顿，雷德蒙德)购得的
Figure A20068003453100152
Services(WSS)产品，以及任何其它类似的远程存储系统。例如，WSS远程存储系统记录包括例如所有用户对给定网络上每一文档的请求数量的实际使用数据，并且生成上个星期内、上个月、去年一年内、或文档的整个生存期或者任何其它时间段内每文档的点击数量统计。而且，如上所述，应当理解，在此揭示的方法不限于WSS远程存储系统，而可在所揭示方法中使用WSS远程存储系统或任何其它类似的文档数据系统。
一旦爬行了文档，示例性方法401进行到判定框404。在判定框404，应用程序代码作出文档是否具有与其相关联的实际使用数据的判定。如果作出文档具有与其相关联的实际使用数据的判定，则示例性方法401进行到步骤405，其中将基于实际使用的使用值(UA)指派给文档。实际使用值(UA)可使用关联于文档的实际使用数据的一或多个分量来确定。例如在一些实施例中，指派给文档的实际使用值(UA)可仅与查看文档的用户数量相关。在其它实施例中，指派给文档的实际使用值(UA)可与以下各项相关：在给定时间段内所有用户的文档查看数量、在给定时间段内每用户的文档查看平均数量、在给定时间段内在特定文档上花费的总时间，在给定时间段内在特定文档上花费的平均时间、或者任何上述标准的组合，其中给定时间段包括上个星期内、上个月、去年一年内、文档的生存期或者任何其它所需的时间段。
在某些情况下，关联于给定文档的实际使用数据表示在给定时间段内未使用或未查看的文档。在这一情况下，文档可被指派使用值(UA)等于零以表示在该时间段内没有使用；然而，通常是为基于实际使用或者未实际使用的使用值(UA)指派一个非零的数。
而且，在某些情况下，实际使用数据可与文档集合而非单个文档相关联。例如，文件夹可包含文档集合，并且相关联的服务器可仅跟踪与访问(即，使用)该文件夹相关的使用数据，而不跟踪该文件夹内的单个文档。在此实施例中，如果存在关联于文件夹的实际使用数据，则可基于文件夹的实际使用数据为文件夹内的每一文档提供使用值(UA)。通常，每一使用值(UA)对于文件夹内的每一文档是相同的；然而若有需要，则可向文件夹内不同文档指派不同的使用值(UA)。
从步骤405，示例性方法401进行至下述判定框406。
现在返回到判定框404，如果作出文档不具有与其相关联的实际使用数据的判定，则示例性方法401进行至步骤407，其中将默认使用值(UD)指派给文档。例如，可将默认使用值(UD)指派给作为不维护文档使用数据的网站一部分的文档。指派给文档的默认使用值(UD)可用于提供文档相对于具有实际使用数据的文档的初始重要性。例如，如果给定文档的较高使用值指示网络内文档的相对重要性，那么向文档指派较低默认使用值(UD)就会使文档的重要性相对于网络上其它文档而有所降低。
在一个其中给定文档的较高使用值指示网络内文档的相对重要性的示例性实施例中，指派给文档的默认使用值(UD)可与指派给网络上其它文档的实际使用数据(UA)相关。例如，为了降低文档的相对重要性，可向文档指派默认使用值(UD)，其中该默认使用值(UD)小于如上所述指派给网络上其它文档的任何实际使用值(UA)。如果需要增加文档的相对重要性，可向文档指派一个默认使用值(UD)，其中该默认使用值(UD)大于指派给网络上其它文档的任何实际使用值(UA)或者大于指派给网络上部分其它文档的部分实际使用值(UA)。
在其它实施例中，可向没有实际使用数据的文档指派默认使用值(UD)，使得向该文档给出与具有已指派的实际使用值(UA)的文档相比为平均的相对重要性。例如，在此实施例中，没有实际使用数据的文档的默认使用值(UD)范围可从最小已指派实际使用值(UAmin)至最大已指派实际使用值(UAmax)，或者在最小已指派实际使用值(UAmin)与最大已指派实际使用值(UAmax)之间的特定范围内。在此实施例中，为没有实际使用数据的文档提供平均的相对重要性，表示与具有与其相关联的实际使用数据的文档相比为中度的使用。
从步骤407，示例性方法401进行至判定框406。在判定框406，应用程序代码作出网络上的所有文档是否具有实际(UA)或默认(UD)使用值的判定。如果作出网络上的所有文档不具有实际(UA)或默认(UD)使用值的判断，则示例性方法401进行至步骤408，其中爬行下一文档以获得实际使用数据。从步骤408，示例性方法401返回至判定框404并且如上所述地进行。
返回至判定框406，如果应用程序代码作出网络上的所有文档具有实际(UA)或默认(UD)使用值的判定，则示例性方法401进行至判定框409。在判定框409，系统管理员作出是否要降低任何实际(UA)或默认(UD)使用值以便更确切地表示网络空间内给定文档的重要性的判定。如果作出降低一或多个实际(UA)或默认(UD)使用值以便更确切地表示网络空间内一或多个文档的重要性的判定，则示例性方法401进行至步骤410，其中或负或正地调整一或多个文档(或URL)的实际(UA)或默认(UD)使用值。从步骤410，示例性方法401进行至下述步骤411。
返回至判定框409，如果作出了不降低(或不提升)一或多个实际(UA)或默认(UD)使用值的判定，则示例性方法401直接进行至步骤411。在步骤411，在排位函数中使用实际(UA)和默认(UD)使用值来确定网络空间内每一文档的总文档相关性分数。从步骤411，示例性方法401进行至结束框412。
一旦所有实际(UA)和默认(UD)使用值已经确定并且可任选地被降低(或可选地被提升)，则若有需要，就可使用每一文档的实际(UA)或默认(UD)使用值作为排位函数中的参数以提供每一文档的文档相关性分数。这一文档相关性分数可用于排列搜索查询的搜索结果。使用包含默认使用值参数的排位函数排列生成的搜索结果的示例性方法在图4中示出。
图4提供示出示例性方法20的示例性步骤的逻辑流程图，其中示例性方法20包括使用包含使用值参数的排位函数排列生成的搜索结果的方法。如图4所示，示例性方法20开始于框201并且进行至步骤202。在步骤202，用户通过输入搜索查询来请求搜索。在步骤202之前，网络上每一文档的实际或默认使用值已经在先前计算过。从步骤202，示例性方法20进行至步骤203。
在步骤203，将网络上每一文档的实际或默认使用值与存储在索引中的每一文档的任何其它文档统计量(例如，其它查询无关统计量)合并。将实际或默认使用值与其它文档统计量合并，这允许较快的查询响应时间，因为与排位相关的所有信息被群集在一起。因此，在索引内列出的每一文档在合并之后具有相关联的实际或默认使用值。一旦合并完成，示例性方法20就进行至步骤204。
在步骤204，为给定文档提供包括使用参数的查询无关文档统计量作为排位函数的一分量。也为给定文档提供查询相关数据，一般作为排位函数的独立分量。排位函数的查询相关数据或者内容相关部分依赖于实际的搜索项和给定文档的内容。
在一个实施例中，排位函数包括至少一个查询无关(QID)分量，该分量包括使用参数。在一个实施例，该查询无关(QID)分量可由下式表示：
QID ( doc ) = w u k u U k u + U - - - ( 1 )
其中：
U表示表示实际使用值或默认使用值；以及
wu和ku表示使用值的调整参数。在另一实施例中，查询无关(QID)分量可由下式表示：
QID(doc)＝wuU+ku    (2)
其中：
U表示实际使用值或默认使用值；以及
wu和ku表示使用值的调整参数。在又一实施例中，查询无关(QID)分量可由下式表示：
QID(doc)＝wu[1+exp(-kuU-B)]+C    (3)
其中：
U表示实际使用值或默认使用值；以及
wu、ku、B和C表示使用值的调整参数(即，比例常数)。
在另一实施例中，排位函数包括上述查询无关(QID)分量与至少一个查询相关(QD)分量之和，诸如
Score＝QD(doc，query)+QID(doc).
QD分量可以是任何文档记分函数。在一个实施例中，QD分量对应于在2004年3月18日提交的题为“FIELD WEIGHTING IN TEXT DOCUMENTSEARCHING(在文本文档搜索中的域加权)”的美国专利申请序列号10/804,326中描述的域加权记分函数，其主题通过引用整体包含在此。如在美国专利申请序列号10/824,326中提供的，可用作域加权记分函数的表示的一个公式如下：
QD ( doc , query ) = Σ wt f ′ ( k 1 + 1 ) k 1 + wt f ′ × log ( N ) n
其中：
wtf′表示加权的项频率或者在搜索查询中的给定项乘以在所有域(例如，文档的标题、主体等)上的权重的项频率之和，并且按照每一域的长度和相应的平均长度来归一化，
N表示网络上文档的数量，
n表示包含查询项的文档数量，以及
kl是可调的常数。
上述各项和公式在美国专利申请序列号10/804,326中进一步详细地描述，其主题通过引用整体包含于此。
在一些实施例中，排位函数还可包括一QID分量，该QID分量考虑(i)由在2004年8月30日提交的标题为“SYSTEM AND METHOD FORRANKING SEARCH RESULTS USING CLICK DISTANCE”的美国专利申请序列号10/955,983中揭示的方法确定的点击距离值，(ii)由在2005年8月15日提交的标题为“RANKING FUNCTIONS USING A BIASED CLICKDISTANCE OF A DOCUMENT ON A NETWORK”的美国专利申请序列号11/206,286所揭示的方法确定的经偏移的点击距离值(上述两者的主题通过引用整体包括于此)，(iii)文档的URL深度，或者(iv)上述(i)或(ii)和(iii)的组合。例如，这一可任选的附加QID分量可包括如下的函数：
QID ( doc ) = w cd k cd k cd + b cd CD k ew + b ud UD b cd + b ud
其中：
wcd表示查询无关分量诸如包含点击距离或经偏移的点击距离参数的分量的权重，
bcd表示点击距离或经偏移的点击距离相对于URL深度的权重，
bud表示URL深度的权重，
CD表示文档的经计算或指派的点击距离或经偏移的点击距离，
kew表示通过优化排位函数的精度确定的调整常数，它与其它调整参数相类似(即，kew可在所有边界具有相同的边界加权值时表示边界加权值，或者kew可在边界加权值互相不同时表示平均或中间边界值)，
UD表示URL深度，以及
kcd是点击距离饱和常数。
经加权的项(wcd，bcd和bud)协助定义其相关各项中每一项(即，分别为包含点击距离或经偏移的点击距离参数的分量、给定文档的点击距离或经偏移的点击距离值、以及给定文档的URL深度)的重要性以及记分函数的最后结果。
URL深度(UD)可任选地附加到以上引用的查询无关分量，以平滑点击距离或经偏移的点击距离值在记分函数上具有的影响。例如，在某些情况下，不是很重要的文档(即，具有较大URL深度)可能具有短点击距离或经偏移的点击距离值。URL深度由文档的URL中斜杠的数量来表示。例如，www.example.com\d1\d2\d3\d4.htm包括四个斜杠，因此具有为4的URL深度。然而，该文档可具有从主页www.example.com的直接链接，这给它相对较短的点击距离或经偏移的点击距离。在上述引用的函数中包括URL深度项并且针对点击距离或经偏移的点击距离值加权URL深度项，这补偿了相对较长的点击距离或经偏移的点击距离以更准确地反映文档在网络中的重要性。依赖于网络，URL深度为3或更大被视为深链接。
在一个实施例中，用于确定给定文档的文档相关性分数的排位函数包括如下的函数：
Score = Σ wt f ′ ( k 1 + 1 ) k 1 + wt f ′ × log ( N n ) + w cd k cd k cd + b cd CD k ew + b ud UD b cd + b ud + w u k u U k u + U
其中各项如上所述。
在其它实施例中，URL深度可从排位函数中移除或者可添加其它分量到排位函数以提高查询相关分量、查询无关分量或两者的精度。而且，上述包含使用参数的查询无关分量可结合到其它排位函数(未示出)以改善对搜索结果的排位。
一旦在步骤204将给定文档的文档统计量提供给排位函数，示例性方法20就进行至步骤205。在步骤205，针对给定文档确定文档相关性分数，将其存储在存储器中，并且与给定文档相关联。从步骤205，示例性方法20进行至判定框206。
在判定框206，应用程序代码作出是否已经为网络内每一文档计算了文档相关性分数的判定。如果作出尚未为网络内每一文档计算文档相关性分数的判定，则示例性方法20返回至步骤204并且如上所述地继续。如果作出已经为网络内每一文档计算了文档相关性分数的判定，则示例性方法20进行至步骤207。
在步骤207，查询的搜索结果包括按照众多文档的文档相关性分数排列这些文档。所得的文档相关性分数考虑网络内每一文档的实际或默认使用值。一旦排列了搜索结果，示例性方法20就进行至步骤208，其中向用户显示经排列的结果。从步骤208，示例性方法20进行至步骤209，其中由用户选择和查看具有最高的排位结果。从步骤209，示例性方法20进行至步骤210并在此示例性方法20结束。
除了生成网络内文档的文档相关性分数并且使用文档相关性分数来排列搜索查询的搜索结果的上述方法之外，在此还揭示了具有存储在其上的用于执行上述方法的计算机可执行指令的计算机可读介质。
在此还揭示了计算系统。示例性计算系统包含至少一个能在计算系统上使用的应用程序模块，其中该至少一个应用程序模块包括在该计算系统上加载的应用程序代码，其中该应用程序代码执行生成网络内文档的文档相关性分数的方法。应用程序代码可使用任何上述计算机可读介质来加载到计算系统上，其中存储在计算系统上的上述计算机可读介质具有用于如上所述地生成网络内文档的文档相关性分数并且使用文档相关性分数来排列搜索查询的搜索结果的计算机可执行指令。
尽管已经详细地参考本说明书的特定实施例描述了本说明书，但是应该认识到，本领域的技术人员在理解了上述内容之后，可以容易地想到这些实施例的改变、变体或等价方案。因此，所揭示方法、计算机可读介质以及计算系统的范围应当由所附权利要求书及其任何等价方案来确定。

Claims (20)

1.一种具有计算机可执行指令存储在其上用以排列网络上文档的计算机可读介质，所述计算机可执行指令使用包括一或多个查询无关分量的排位函数，其中至少一个查询无关分量包括考虑到网络上一或多个文档的、服务器生成的、服务器存储的使用数据。
2.如权利要求1所述的计算机可读介质，其特征在于，所述使用值包括(i)基于服务器维护的实际使用数据的实际使用值或者(ii)不是基于实际使用数据的默认使用值。
3.如权利要求2所述的计算机可读介质，其特征在于，所述实际使用值依赖于文档或包含文档集合的文件夹的一或多个使用相关性质，所述一或多个使用相关性质包括在给定时间段内用户的文档或文件夹查看总数、在给定时间段内每用户的文档或文件夹查看平均数、在给定时间段内在特定文档或文件夹上花费的总时间、在给定时间段内在特定文档或文件夹上花费的平均时间，其中所述给定时间段包括上个星期内、上个月、去年一年内、所述文档或文件夹的生存期内或者任何其它时间段。
4.如权利要求1所述的计算机可读介质，其特征在于，所述至少一个查询无关分量由下列公式表示：
QID ( doc ) = w u k u U k u + U
其中：
U表示实际使用值或默认使用值；以及
wu和ku表示所述使用值的调整参数。
5.如权利要求1所述的计算机可读介质，其特征在于，所述至少一个查询无关分量包括以下两者：(i)所述使用参数以及(ii)点击距离或者经偏移的点击距离参数。
6.如权利要求1所述的计算机可读介质，其特征在于，所述至少一个查询无关分量包括所述使用参数和URL深度参数两者。
7.如权利要求1所述的计算机可读介质，其特征在于，还包括用于将由所述排位函数生成的分数指派给所述网络上的每一文档的计算机可执行指令，所述分数用于按顺序排列文档。
8.如权利要求7所述的计算机可读介质，其特征在于，所述每一文档的分数是使用以下公式生成的：
Score = Σ wt f ′ ( k 1 + 1 ) k 1 + wt f ′ × log ( N n ) + w cd k cd k cd + b cd CD k ew + b ud UD b cd + b ud + w u k u U k u + U
其中：
wtf′表示加权的项频率，
N表示所述网络上文档的数量，
n表示包含查询项的文档数量，
wcd表示查询无关分量的权重，
bcd表示点击距离的权重，
bud表示URL深度的权重，
CD表示文档的计算出的点击距离或者被指派的经偏移的点击距离，
kew表示与边界权重相关的调整常数，
UD表示URL深度，
U表示实际使用值或默认使用值，
wu和ku表示所述使用值的调整常数，以及
kcd和kl是常数。
9.如权利要求1所述的计算机可读介质，其特征在于，还包括计算机可执行指令，所述计算机可执行指令用于接受用户输入的搜索询问、进行对所述网络上的文档的搜索以生成包括多个文档的搜索结果、使用所述排位函数排列所述搜索结果以生成经排列的搜索结果以及向所述用户显示所述经排列的搜索结果。
10.如权利要求1所述的计算机可读介质，其特征在于，还包括用于使管理员能够手动调整由所述排位函数生成的排位结果的计算机可执行指令。
11.一种计算系统，包含能在所述计算系统上使用的至少一个应用程序模块，其中所述至少一个应用模块包括从如权利要求1所述的计算机可读介质加载的应用程序代码。
12.一种确定网络上文档的文档相关性分数的方法，所述方法包括下列步骤：
将实际使用值(UA)指派给包括N个文档的网络上的一或多个文档，其中所述实际使用值(UA)基于在服务器上维护和存储的实际使用数据；
如果少于N个文档被指派实际使用值(UA)，则向没有与其相关联的实际使用数据的文档指派默认使用值(UD)；以及
使用所述每一文档的使用值来确定所述网络上给定文档的文档相关性分数。
13.如权利要求12所述的方法，其特征在于，还包括以下步骤：
从所述服务器上的数据存储文件检索实际使用数据或实际使用值(UA)。
14.如权利要求12所述的方法，其特征在于，还包括以下步骤：
在数据存储文件中存储文档的实际使用数据或实际使用值(UA)。
15.如权利要求12所述的方法，其特征在于，所述网络上每一文档的文档相关性分数是使用以下公式生成的：
Score = Σ wt f ′ ( k 1 + 1 ) k 1 + wt f ′ × log ( N n ) + w cd k cd k cd + b cd CD k ew + b ud UD b cd + b ud + w u k u U k u + U
其中：
wtf′表示加权的项频率，
N表示所述网络上文档的数量，
n表示包含查询项的文档数量，
wcd表示查询无关分量的权重，
bcd表示点击距离的权重，
bud表示URL深度的权重，
CD表示文档的计算出的点击距离或者被指派的经偏移的点击距离，
kew表示与边界权重相关的调整常数，
UD表示URL深度，
U表示实际使用值或默认使用值，
wu和ku表示所述使用值的调整参数，以及
kcd和kl是常数。
16.一种排列网络上文档的方法，所述方法包括下列步骤：
使用如权利要求12所述的方法确定所述网络上每一文档的文档相关性分数；以及
基于所述每一文档的文档相关性分数按降序排列所述文档。
17.一种排列搜索查询的搜索结果的方法，所述方法包括下列步骤：
使用如权利要求12所述的方法确定搜索查询的搜索结果中每一文档的文档相关性分数；以及
基于每一文档的所述文档相关性分数按降序排列所述文档。
18.一种其上具有计算机可执行指令用以执行如权利要求12所述的方法的计算机可读介质。
19.一种计算系统，包含能在所述计算系统上使用的至少一个应用程序模块，其中所述至少一个应用程序模块包括用于执行确定网络上文档的文档相关性分数的方法的应用程序代码，所述方法包括下列步骤：
将实际使用值(UA)指派给包括N个文档的网络上的一或多个文档，其中所述实际使用值(UA)基于在服务器上维护和存储的实际使用数据；
如果少于N个文档被指派实际使用值(UA)，则将默认使用值(UD)指派给没有与其相关联的实际使用数据的文档；以及
使用所述每一文档的使用值来确定所述网络上给定文档的文档相关性分数。
20.如权利要求19所述的计算系统，其特征在于，所述实际使用值依赖于文档或包含文档集合的文件夹的一或多个使用相关的性质，所述一或多个使用相关的性质包括在给定时间段内用户的文档或文件夹查看总数、在给定时间段内每用户的文档或文件夹查看平均数、在给定时间段内在特定文档或文件夹上花费的总时间、在给定时间段内在特定文档或文件夹上花费的平均时间，其中所述给定时间段包括上个星期内、上个月、去年一年内、所述文档或文件夹的生存期内或者任何其它时间段。
CN2006800345316A 2005-09-21 2006-09-20 使用文档使用统计量的排位函数 Active CN101268464B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/231,955 2005-09-21
US11/231,955 US7499919B2 (en) 2005-09-21 2005-09-21 Ranking functions using document usage statistics
PCT/US2006/037206 WO2007035919A1 (en) 2005-09-21 2006-09-20 Ranking functions using document usage statistics

Publications (2)

Publication Number Publication Date
CN101268464A true CN101268464A (zh) 2008-09-17
CN101268464B CN101268464B (zh) 2011-03-09

Family

ID=37885403

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800345316A Active CN101268464B (zh) 2005-09-21 2006-09-20 使用文档使用统计量的排位函数

Country Status (15)

Country Link
US (2) US7499919B2 (zh)
EP (1) EP1952277B1 (zh)
JP (2) JP4698737B2 (zh)
KR (1) KR101311050B1 (zh)
CN (1) CN101268464B (zh)
AU (1) AU2006292103A1 (zh)
BR (1) BRPI0616233A2 (zh)
CA (1) CA2620045A1 (zh)
IL (1) IL189495A (zh)
MY (1) MY149197A (zh)
NO (1) NO20080934L (zh)
NZ (1) NZ566532A (zh)
RU (1) RU2419861C2 (zh)
WO (1) WO2007035919A1 (zh)
ZA (1) ZA200802250B (zh)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006036781A2 (en) * 2004-09-22 2006-04-06 Perfect Market Technologies, Inc. Search engine using user intent
US7606793B2 (en) * 2004-09-27 2009-10-20 Microsoft Corporation System and method for scoping searches using index keys
US7499919B2 (en) * 2005-09-21 2009-03-03 Microsoft Corporation Ranking functions using document usage statistics
US8661029B1 (en) 2006-11-02 2014-02-25 Google Inc. Modifying search result ranking based on implicit user feedback
US9092510B1 (en) 2007-04-30 2015-07-28 Google Inc. Modifying search result ranking based on a temporal element of user feedback
JP2008299655A (ja) * 2007-05-31 2008-12-11 Ntt Resonant Inc 情報検索装置
US20090106221A1 (en) * 2007-10-18 2009-04-23 Microsoft Corporation Ranking and Providing Search Results Based In Part On A Number Of Click-Through Features
US9348912B2 (en) * 2007-10-18 2016-05-24 Microsoft Technology Licensing, Llc Document length as a static relevance feature for ranking search results
US8510299B2 (en) * 2007-10-23 2013-08-13 At&T Intellectual Property I, L.P. Method and apparatus for providing a user traffic weighted search
US7958136B1 (en) * 2008-03-18 2011-06-07 Google Inc. Systems and methods for identifying similar documents
US8812493B2 (en) * 2008-04-11 2014-08-19 Microsoft Corporation Search results ranking using editing distance and document information
JP5384884B2 (ja) * 2008-09-03 2014-01-08 日本電信電話株式会社 情報検索装置および情報検索プログラム
KR101065091B1 (ko) * 2009-02-17 2011-09-16 엔에이치엔(주) 기여 점수에 기초한 문서 순위 결정 시스템 및 방법
US9009146B1 (en) 2009-04-08 2015-04-14 Google Inc. Ranking search results based on similar queries
US8447760B1 (en) * 2009-07-20 2013-05-21 Google Inc. Generating a related set of documents for an initial set of documents
US8498974B1 (en) 2009-08-31 2013-07-30 Google Inc. Refining search results
US8972391B1 (en) 2009-10-02 2015-03-03 Google Inc. Recent interest based relevance scoring
JP2011091522A (ja) * 2009-10-21 2011-05-06 Fujifilm Corp ドキュメント画像生成サーバ及びプログラム、並びにドキュメント閲覧システム
US20110282869A1 (en) * 2010-05-11 2011-11-17 Maxim Zhilyaev Access to information by quantitative analysis of enterprise web access traffic
US8434134B2 (en) 2010-05-26 2013-04-30 Google Inc. Providing an electronic document collection
US8738635B2 (en) 2010-06-01 2014-05-27 Microsoft Corporation Detection of junk in search result ranking
US8375061B2 (en) * 2010-06-08 2013-02-12 International Business Machines Corporation Graphical models for representing text documents for computer analysis
US9623119B1 (en) 2010-06-29 2017-04-18 Google Inc. Accentuating search results
US9002867B1 (en) 2010-12-30 2015-04-07 Google Inc. Modifying ranking data based on document changes
US8468164B1 (en) 2011-03-09 2013-06-18 Amazon Technologies, Inc. Personalized recommendations based on related users
US8452797B1 (en) * 2011-03-09 2013-05-28 Amazon Technologies, Inc. Personalized recommendations based on item usage
US9110992B2 (en) 2011-06-03 2015-08-18 Facebook, Inc. Context-based selection of calls-to-action associated with search results
US9268857B2 (en) 2011-06-03 2016-02-23 Facebook, Inc. Suggesting search results to users before receiving any search query from the users
US8909637B2 (en) * 2011-06-03 2014-12-09 Facebook, Inc. Context-based ranking of search results
US8856640B1 (en) 2012-01-20 2014-10-07 Google Inc. Method and apparatus for applying revision specific electronic signatures to an electronically stored document
US9495462B2 (en) 2012-01-27 2016-11-15 Microsoft Technology Licensing, Llc Re-ranking search results
CN103577413B (zh) * 2012-07-20 2017-11-17 阿里巴巴集团控股有限公司 搜索结果排序方法及系统、搜索结果排序优化方法及系统
US9529916B1 (en) 2012-10-30 2016-12-27 Google Inc. Managing documents based on access context
US11308037B2 (en) 2012-10-30 2022-04-19 Google Llc Automatic collaboration
US9779140B2 (en) * 2012-11-16 2017-10-03 Google Inc. Ranking signals for sparse corpora
US9384285B1 (en) 2012-12-18 2016-07-05 Google Inc. Methods for identifying related documents
US9495341B1 (en) 2012-12-18 2016-11-15 Google Inc. Fact correction and completion during document drafting
US9514113B1 (en) 2013-07-29 2016-12-06 Google Inc. Methods for automatic footnote generation
US9201929B1 (en) * 2013-08-09 2015-12-01 Google, Inc. Ranking a search result document based on data usage to load the search result document
US9842113B1 (en) 2013-08-27 2017-12-12 Google Inc. Context-based file selection
PL406196A1 (pl) * 2013-11-22 2015-05-25 Eo Networks Spółka Akcyjna Sposób dostarczania użytkownikowi wyników wyszukiwania dokumentów w postaci strony internetowej
US9529791B1 (en) 2013-12-12 2016-12-27 Google Inc. Template and content aware document and template editing
US9830392B1 (en) * 2013-12-18 2017-11-28 BloomReach Inc. Query-dependent and content-class based ranking
US9703763B1 (en) 2014-08-14 2017-07-11 Google Inc. Automatic document citations by utilizing copied content for candidate sources
US10127240B2 (en) 2014-10-17 2018-11-13 Zestfinance, Inc. API for implementing scoring functions
WO2017003747A1 (en) 2015-07-01 2017-01-05 Zest Finance, Inc. Systems and methods for type coercion
US10061817B1 (en) 2015-07-29 2018-08-28 Google Llc Social ranking for apps
US11106705B2 (en) 2016-04-20 2021-08-31 Zestfinance, Inc. Systems and methods for parsing opaque data
US11941650B2 (en) 2017-08-02 2024-03-26 Zestfinance, Inc. Explainable machine learning financial credit approval model for protected classes of borrowers
WO2019173734A1 (en) 2018-03-09 2019-09-12 Zestfinance, Inc. Systems and methods for providing machine learning model evaluation by using decomposition
EP3788560A4 (en) 2018-05-04 2022-07-13 Zestfinance, Inc. SYSTEMS AND METHODS FOR ENRICHING MODELING TOOLS AND MODELING INFRASTRUCTURE WITH SEMANTIC ELEMENTS
US11816541B2 (en) 2019-02-15 2023-11-14 Zestfinance, Inc. Systems and methods for decomposition of differentiable and non-differentiable models
BR112021018532A2 (pt) 2019-03-18 2021-12-14 Zestfinance Inc Sistemas e métodos para fidedignidade de modelo
KR102245386B1 (ko) 2019-07-16 2021-04-27 서울과학기술대학교 산학협력단 사회연결망과 자료포락을 이용한 소프트웨어 함수 분석 시스템 및 그 방법
US11720962B2 (en) 2020-11-24 2023-08-08 Zestfinance, Inc. Systems and methods for generating gradient-boosted models with improved fairness

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4025379B2 (ja) * 1996-09-17 2007-12-19 株式会社ニューズウオッチ 検索システム
US6272507B1 (en) * 1997-04-09 2001-08-07 Xerox Corporation System for ranking search results from a collection of documents using spreading activation techniques
AUPO710597A0 (en) * 1997-06-02 1997-06-26 Knowledge Horizons Pty. Ltd. Methods and systems for knowledge management
WO2002017212A1 (en) * 2000-08-25 2002-02-28 Jonas Ulenas Method and apparatus for obtaining consumer product preferences through product selection and evaluation
NO313399B1 (no) * 2000-09-14 2002-09-23 Fast Search & Transfer Asa Fremgangsmate til soking og analyse av informasjon i datanettverk
JP2002157271A (ja) * 2000-11-20 2002-05-31 Yozan Inc ブラウザ装置、サーバ装置、記録媒体、検索システムおよび検索方法
JP2002202992A (ja) * 2000-12-28 2002-07-19 Speed System:Kk ホームページ検索システム
US8001118B2 (en) * 2001-03-02 2011-08-16 Google Inc. Methods and apparatus for employing usage statistics in document retrieval
US6947920B2 (en) * 2001-06-20 2005-09-20 Oracle International Corporation Method and system for response time optimization of data query rankings and retrieval
KR100509276B1 (ko) * 2001-08-20 2005-08-22 엔에이치엔(주) 웹페이지별 방문인기도에 기반한 웹페이지 검색방법 및 그장치
US20030046389A1 (en) * 2001-09-04 2003-03-06 Thieme Laura M. Method for monitoring a web site's keyword visibility in search engines and directories and resulting traffic from such keyword visibility
US7565367B2 (en) * 2002-01-15 2009-07-21 Iac Search & Media, Inc. Enhanced popularity ranking
US7340466B2 (en) * 2002-02-26 2008-03-04 Kang Jo Mgmt. Limited Liability Company Topic identification and use thereof in information retrieval systems
JP3922693B2 (ja) * 2002-06-17 2007-05-30 Ｎｅｃシステムテクノロジー株式会社 インターネット情報検索システム
US8239380B2 (en) * 2003-06-20 2012-08-07 Microsoft Corporation Systems and methods to tune a general-purpose search engine for a search entry point
US7346839B2 (en) * 2003-09-30 2008-03-18 Google Inc. Information retrieval based on historical data
US7293005B2 (en) * 2004-01-26 2007-11-06 International Business Machines Corporation Pipelined architecture for global analysis and index building
US9104689B2 (en) * 2004-03-17 2015-08-11 International Business Machines Corporation Method for synchronizing documents for disconnected operation
US7260573B1 (en) * 2004-05-17 2007-08-21 Google Inc. Personalizing anchor text scores in a search engine
JP2008513881A (ja) * 2004-09-16 2008-05-01 テレノール アーアスアー パーソナルウェブのドキュメントを検索し、ドキュメント間でナビゲートし、ドキュメントをランク付けするための方法、システムおよびコンピュータプログラムプロダクト
US7499919B2 (en) * 2005-09-21 2009-03-03 Microsoft Corporation Ranking functions using document usage statistics
US7716226B2 (en) * 2005-09-27 2010-05-11 Patentratings, Llc Method and system for probabilistically quantifying and visualizing relevance between two or more citationally or contextually related data objects

Also Published As

Publication number Publication date
AU2006292103A1 (en) 2007-03-29
JP5174931B2 (ja) 2013-04-03
MY149197A (en) 2013-07-31
EP1952277A1 (en) 2008-08-06
NO20080934L (no) 2008-03-14
US20070067284A1 (en) 2007-03-22
IL189495A0 (en) 2008-06-05
RU2419861C2 (ru) 2011-05-27
US20100191744A1 (en) 2010-07-29
RU2008110731A (ru) 2009-09-27
BRPI0616233A2 (pt) 2011-06-14
JP2011108268A (ja) 2011-06-02
JP2009509275A (ja) 2009-03-05
EP1952277A4 (en) 2012-01-18
IL189495A (en) 2012-05-31
EP1952277B1 (en) 2018-05-16
NZ566532A (en) 2010-03-26
US20120041960A9 (en) 2012-02-16
CN101268464B (zh) 2011-03-09
KR20080046670A (ko) 2008-05-27
KR101311050B1 (ko) 2013-09-24
JP4698737B2 (ja) 2011-06-08
WO2007035919A1 (en) 2007-03-29
US7499919B2 (en) 2009-03-03
ZA200802250B (en) 2009-10-28
CA2620045A1 (en) 2007-03-29

Similar Documents

Publication Publication Date Title
CN101268464B (zh) 使用文档使用统计量的排位函数
US7516118B1 (en) Methods and systems for assisted network browsing
US8346763B2 (en) Ranking method using hyperlinks in blogs
CN101496010A (zh) 使用可增量式更新的、经修改的朴素贝叶斯查询分类器的排序功能
US20210365984A1 (en) Image recognition based content item selection
CN100520775C (zh) 将最佳实施集成进数据库设计
US20210406685A1 (en) Artificial intelligence for keyword recommendation
CN102687137A (zh) 搜索日志中的概念发现
CN101180650A (zh) 用于软件产品的自适应客户辅助系统
CN1716257A (zh) 基于跟踪到的用户偏好对搜索结果进行分级的系统和方法
CN1745376A (zh) 用于网络服务的信誉系统
US20120143677A1 (en) Discoverability Using Behavioral Data
US20190361691A1 (en) Latency reduction in feedback-based system performance determination
CN102982109A (zh) 所供给的广告的数量的动态确定
US20170357987A1 (en) Online platform for predicting consumer interest level
US20180039610A1 (en) Suggestions for digital forms
KR20140045414A (ko) 자동-제안된 콘텐트 아이템 요청들
US20170075899A1 (en) Utilizing keystroke logging to determine items for presentation
US20180247032A1 (en) Dynamic network construction
CN110869925A (zh) 搜索中的多个实体感知的预输入
US9356845B1 (en) System and method for audience segment profiling and targeting
RU2377641C2 (ru) Система регистрационной информации для использования в вычислительной среде
US11126520B2 (en) Skew detector for data storage system
US9141589B2 (en) Method and an apparatus to provide a personalized page
US8099678B2 (en) Dynamic determination of actions on selected items on a report

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150429

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150429

Address after: Washington State

Patentee after: Micro soft technique license Co., Ltd

Address before: Washington State

Patentee before: Microsoft Corp.