CN101517512A - 用于信息搜索系统中的网络广播和视频培训的方法、系统和计算机可读存储器 - Google Patents

Abstract

一种用于增强信息搜索系统中的引导者的搜索技能的方法和系统。该方法允许当引导人员不特别忙于回复来自信息探索者的搜索查询时接受培训。该方法可包括确定引导者是否空闲并向引导者提供用于培训引导人员的至少一个视频或音频源。视频培训可包括展示用于提供信息搜索查询的搜索结果的最有效的方法，从而使引导者能够学会用于进行信息搜索的有效策略和技能。培训可促进引导者提升到更有经验的引导者的水平的可能性，从而允许在回复信息探索者的搜索查询中的较大的效率。

Description

用于信息搜索系统中的网络广播和视频培训的方法、系统和计算机可读存储器

相关申请的交叉引用

本申请涉及并要求下列申请的优先权利益：在美国专利商标局中的2006年7月24日由Scott A.Jones提交的题目为“METHOD，SYSTEM，AND COMPUTER READABLE STORAGE FOR PODCASTING ANDVIDEO TRANING IN AN INFORMATION SEARCH SYSTEM”、律师签号为1918.1009P的美国临时申请序列号60/820,181、2006年8月3日由ScottA.Jones提交的题目为“METHOD，SYSTEM，AND COMPUTERREADABLE MEDIUM USEFUL IN MANAGING A COMPUTER-BASEDSYSTEM FOR SERVICING USER-INITIATED TASKS”、律师签号为1918.1020P的美国临时申请序列号60/821,335、以及2006年9月1日由Scott A.Jones提交的题目为“METHOD，SYSTEM，AND COMPUTERREADABLE MEDIUM USEFUL IN MANAGING A COMPUTER-B ASEDSYSTEM FOR SERVICING USER-INITIATED TASKS”、律师签号为1918.1020P2的美国临时申请序列号60/824,407，所有上面指出的申请的内容在这里通过引用被并入。

背景

在用于为用户发起的任务提供服务的基于计算机的系统中，维持发起任务的用户的数量和可用于处理用户发起的任务的工作人员的数量之间的平衡以便维持系统的效率和/或效用很重要。

如果不能维持用户和工作人员之间的平衡，则在这样的系统中可能出现一些问题。例如，如果在系统中有太多的工作人员，则他们将不会足够忙，且将挣不到相当的收入。此外，工作人员可能变得无聊，且对其工作不感兴趣。相反，例如，如果在系统中有太少的工作人员，则用户发起的任务将不能以及时的方式被处理，或被在特定的任务领域并不擅长的工作人员处理。结果将是劣质的服务和不满意的用户。

除了其它潜在的问题以外，处理用户发起的任务还常常不会使工作人员知道可用来对这样的任务提高表现的方法和策略。虽然工作人员的表现可经过尝试和错误通过处理很多用户发起的任务来增加，这样的过程可能不会使工作人员按所期望的那么快地增加他或她的技能。进一步地，处理用户发起的任务不一定会给工作人员显示可使工作人员认识到如何提供“最佳”服务的技术。

根据前述内容，将理解在例如用于为用户发起的任务提供服务的基于计算机的系统中用来管理工作人员的次级活动的系统、方法和计算机系统。此外，将理解例如在例如用于为用户发起的任务提供服务的基于计算机的系统中可培训工作人员改进其表现的系统、方法和计算机可读介质。

在包括支薪金的搜索者(paid human searcher)或引导者的付费搜索系统中，如果没有足够的引导者，则信息探索者(information seeker)(或用户)获得搜索结果的时间的长度将是不可接受的，因为信息探索者可能变得泄气。如果有太多的引导者，则在引导者所完成的工作及其对这样的工作的报酬方面系统将没有成本效益(和/或工作人员可能变得无聊和/或注意力分散)。虽然两种资源，即，引导者(提供者)和信息探索者(用户或请求者)之间的适当平衡对系统的总效率很重要，然而，引导者不可避免地经历“非工作状态时间(down time)”。

非工作状态时间或引导者未在回复来自信息探索者的信息搜索查询的时间可能导致引导者变得无聊。进一步地，当引导者不忙于回答查询时，引导者并未在空闲时间期间提高他或她的信息搜索技能。

除了上面潜在的问题以外，提供对信息搜索查询的搜索结果还常常不会使引导者知道可用来在回答搜索查询时增加其表现的准确性的特定方法和策略。虽然引导者的表现可经过试验和错误通过提供对搜索查询的搜索结果来增加，但这样的方法可能不会使引导者按所期望的那么快地增加他或她的技能。进一步地，提供对查询的搜索结果并不显示出理想的表现，以便允许引导者认识到“最佳”搜索结果如何被提供。因此，这样的系统的最重要的目标之一，即，提供对信息搜索查询的准确回答，可能受损。

最近，很多在线社会网络系统，例如和

已变得流行，因为它们允许用户形成可用于共享信息和共同兴趣的自组(ad-hoc)网络。用户可对这样的站点添加用户产生的或其它内容。在搜索系统中，如果兴趣领域中的引导者可能不可用，搜索者(或引导者)可能希望创建类似的兴趣社区，并与引导者和/或用户共享信息和/或用于获得信息的技术。然而，当需要工作人员随叫随到以满足来自信息探索者的实时请求时，当前的社会网络站点是不能满足要求的。这样的系统的用户必须在付费的和休闲活动之间选择。

当前的“基于社区”的搜索系统，例如

Co-op已被创建来试图实现对由社区用户所贡献的专门资源的搜索。但这样的系统不允许可能有相似兴趣的贡献者匿名地(或以灵活的匿名水平)识别彼此，或共享关于搜索技术的信息和/或可能可以利用的资源。增加这样的搜索资源的广度和深度的合作常常很难，且基于算法的搜索可能不能有效地找出和利用这样的资源。

根据上面被确认的问题，需要的是一种方法、系统和计算机可读介质，其中引导者可在空闲或可用的时间期间通过任何可用来增加引导技能的可用资源被培训，这些资源例如为视频、音频、图像、文本、交互式媒体或计算机程序、计算机系统和/或其任何组合。

发明内容

这里描述的实施方式涉及用于增强在信息搜索系统中的引导人员的搜索技能的方法和系统。这些实施方式允许在引导者不特别忙于回复来自信息探索者的搜索查询时培训该引导者。该方法可包括确定引导者是否空闲，以及向引导者提供用于培训引导者的至少一个视频和/或音频源。视频培训可包括展示用于提供对信息搜索查询的搜索结果的最有效的方法，从而使引导者能够学会用于进行信息搜索的有效策略和技能。培训可促进引导者晋升到更有经验的引导者的水平的可能性，从而在回复信息探索者的搜索查询时允许更大的有效性。

这里公开的系统和方法使搜索者或用户能够识别用于培训的媒体资源。媒体培训资源可与可储存在系统中的任何类型的信息相关，例如关键字、子类别、类别、标记、能力水平、用户评分值、或培训项目的内容的其它指示符、主题、专业化程度、内容的类型。培训项目可以不是系统本身的内部资源。例如，受版权保护的项目如音乐、视频、软件程序等可能需要每次使用、每次复制等的版税和/或许可费。搜索者或用户可使对这样的资源的访问信息与可在所公开的系统中被编入索引的其它数据相关。以这种方式，可给系统中寻找基于媒体的培训的搜索者和/或用户提供被认为与主题相关的培训材料。搜索者或用户可自愿地(例如通过请求)或基于系统数据库中的信息通过对一条件的自动检测来被指引到培训材料。

当搜索者就一主题进行学习、通过评估被评分、观看培训材料等时，与搜索者/工作人员相关的信息被连续监控和/或更新。可提供适合于与搜索者相关的信息的培训材料。此外，搜索者在前进到与该搜索者所关联的类别、子类别、标记、关键字等相关的下一水平的过程中，可获得关于他或她的进步的信息。因为搜索者的能力水平可能基于与搜索者相关的信息，所以系统和方法允许搜索者有适合于请求的主题的不同的能力水平和对进步的不同的要求。

因为搜索者可能是支薪金的搜索者，本系统和方法允许搜索者的报酬基于与该搜索者相关的能力水平和/或其它可能涉及搜索者接收的关于主题等的评分值的信息。培训材料可提高这些评分值。因为他或她的报酬可能被影响，所以搜索者可寻找培训来提高他或她的报酬。搜索者可根据他或她的能力在社区内被认可为引导者，来制作相关的培训资料，以及被付报酬。

附图的简要说明

结合附图理解，从实施方式的下面描述中本公开的方面和优点将变得明显并被更容易理解，其中：

图1示出系统体系结构实施方式。

图2是用于审查先前查询的流程图。

图3是用于找到或选择搜索者的流程图。

图3A是示出可如何选择搜索者的图示。

图4是用于搜索结果处理的流程图。

图5是用于查询说明操作的流程图。

图6是示例性用户或请求者图形用户界面(GUI)。

图7是示例性搜索者或提供者GUI。

图8是示出数据库关系的图示。

图9A-9C示出示例性用户GUI在搜索会话期间的不同阶段。

图10A-10E示出在搜索会话期间的示例性用户GUI。

图11是系统体系结构的实施方式的图示。

图12是系统所管理的活动的图示。

图13是搜索人员或引导人员的不同类别的图示。

图14A-14D示出活动引擎的操作。

图15A-15B示出数据库。

图16是对培训者的示例性图形用户界面(GUI)的图示。

图17是培训者和受训者的示例性GUI的图示。

图18是示出培训文件和关键字以及类别之间的关联的图示。

图19是用于上传多媒体文件的GUI的例子。

图20是用于对引导者通知多媒体文件的GUI的例子。

图21是用于多媒体培训文件选择的GUI的例子。

图22是引导者的等级的图形表示。

图23是用于管理引导者的目标性多媒体培训的流程图。

图24是搜索者数据库的图示。

图25是视频数据库的图示。

图26是用于目标性多媒体搜索培训的系统图。

图27是用于管理引导者的目标性人工辅助的培训的流程图。

图28是选择用于被培训的引导者的培训练习(查询)的流程图。

图29是搜索者数据库的图示。

图30是查询数据库的图示。

图31是用于引导者的人工辅助的搜索培训的系统图。

图32是对次级活动(被指导的任务)的不同示例性优先级水平的图示。

图33是用于管理次级活动的操作的方法的流程图。

图34是用于管理引导者的次级活动的系统图。

详细描述

现在对本公开的实施方式详细地进行参考，其例子在附图中示出，其中相似的参考数字始终表示相似的组成部分。

本公开的实施方式包括系统100(图1)，其允许按照用户、请求者或信息探索者(InfoSeekers^TM)例如雇员、家庭主妇和/或孩子的查询被搜索者、提供者、引导者或工作人员搜索，这些搜索者、提供者、引导者或工作人员可以是职业的支薪金的搜索者(PaidSearchers^TM)以及业余和/或志愿的搜索者等。例如，查询(其在整个说明书中可能需要完整的问题/句子或关键字或关键字列表或搜索短语，如前面讨论的)可请求例如特定饭店的关闭时间、1960年世界职业棒球锦标赛的优胜者或关于医疗疾病的信息(或任何其它类型的查询)。如图1所示，查询可起源于用户计算机系统102、104、106，并通过通信系统107或从电话送受话器110、112被接收。用户计算机系统可为一般桌上型或膝上型系统、手持式计算机例如个人数字助理(PDA)、简单的便携式电话、启用文本或启用视频的便携式电话、专业化查询终端、或允许用户通过文本、图像或语音输入来输入查询的任何其它源。(注意：在本讨论中可互换地使用词“语音”和“声音”。)电话送受话器可为一般按键式电话、便携式电话、双向无线电设备、或允许用户讲话或以另外的方式在一段距离内通信的任何其它通信设备。通信系统107(图1)可包括分组交换设施如互联网、电路交换设施如公共交换电话网和DSL/ADSL、基于无线电的设施例如无线网络，等等。

在一个实施方式中，通过电话送受话器110、112的口头语音查询被储存在系统数据库中，并通过语音转换服务器(speech translation server)转换成数字文本查询。(可选地，用户的计算机系统102、104、106或电话送受话器110、112可执行该处理。)语音转换服务器114可能通过与其它系统的交互来处理将语音转换成文本的任务，或它可在本地执行该任务。它可通过借助于使用转录(transcription)人员、和/或使用也被称为自动语音识别(ASR)的传统语音到文本处理而使用语音转录(speechtranscription)来执行语音到文本转换。语音查询可起源于用户的电话且最初可通过自动话务员语音提示类型的处理(或可选地，通过交互式语音应答或IVR系统)被处理，以获得用户的查询。

语音转换服务器114记录呼叫所起源的端口，并对特定的会话给该端口上的电话送受话器110、112的用户分配用户标识符。语音转换服务器114可提示用户说出查询。语音查询也可不是直接起源于用户，而是起源于称为“语音查询服务请求器”(SQSR)的另一源116，例如私人或公共信息提供者。例如，语音查询可最初由公共库电话系统(public librarytelephone system)处理并切换到语音转换系统114。语音查询可通过各种输入装置物理地到达系统，包括时分多路复用线、来自互联网连接的IP语音(VoIP)信息包、以及其它源。语音查询可作为流、信息包或信息包序列到达。

类似地，商业站点，例如用户可订购食物并查问特别的正餐后甜点的食谱的食品店订购系统最初可处理语音查询并将其传递到语音转换服务器114。

SQSR116可通过各种机制包括基于IP的套接字地址或通过NET服务与语音转换服务器114通信，使语音转换服务器114的转换服务通过互联网可广泛用于希望使用其的任何应用。

信息包可接着在语音转换服务器114处得到本地处理，以从数字语音转换成文本，或可选地，它可由远程系统处理。如果数字语音被转录人员转录，则这可通过将数字语音发送到一个或多个转录系统(transcribersystem，TS)130、132(图1)来实现，在转录系统(TS)130、132处，转录人员可听见语音，例如通过耳机或扬声器，并通过将文本键入其系统来转录信息，以便接着将文本发送回语音转换服务器114(或可选地，直接发送到服务器118或SQSR116)，这些都在大约数秒内(在至少一个实施方式中，在用户说完查询之后，优选地少于10秒)。为了加速处理，当用户说语音查询时，语音查询可分解成信息包流，并且没有中断地传递到转录员，从而允许系统中等待时间(latency)减少。在至少一个实施方式中，在系统中可用的转录员比即时查询多得多，使得延迟不被引入系统中。在查询溢出的情况下，可通过告诉一些呼叫者他们必须别挂电话以等待可用的转录员(可将此向呼叫者描述为，请稍候操作人员或代理人)来利用流量控制的形式。优选地，语音转换服务器114维护关于当前登录的并可用于使用转录系统130、132上的转录软件应用程序来执行转录服务的所有转录员的数据库。可选地，跟踪转录员的可用性的此功能可位于远程系统上和/或可使用转录系统130、132中间的分布式机制来实现(例如，使用对等机制)。

语音转换服务器114可将连续的顺序语音短语从各种和不同的源(例如用户)馈送到任何给定的转录系统130、132。因此，转录员可迅速地按顺序转录来自不同说话者的语音消息并创建与每个语音消息相关的分离的文本信息包。

一旦查询处于数字文本形式，就将它提供给服务器118。便携式电话的文本输入特征也可用于输入数字文本形式的查询，允许用户从电话文本地提交查询。

来自用户计算机系统102、104、106的图形用户界面(GUI)的查询可直接起源于用户，或类似于语音查询，间接通过“文本查询服务请求器”(TQSR)120，其例如可为通过互联网连接的任何软件应用程序或设备。如在语音查询例子中的，用户可在食品店网站上订购用于交付的食物，并可查问特别甜点的食谱。该食谱查询可接着被转发到服务器118。任何网站、软件应用程序、消费类电子设备或其它设备可变成用于执行搜索的TQSR或SQSR。例如，由卫星电视或有线电视提供商提供的机顶盒可提供输入查询字符串的能力并充当TQSR或SQSR。在PC上运行的任何软件应用程序，例如

Office Word或

也可用作TQSR或SQSR。

适当的界面，例如计算机系统102的图形用户界面(GUI)或语音转录服务器114中的语音提示系统可从用户提取查询，并将该查询发送到服务器118。起源于有图像能力的源(例如启用视频的便携式电话、具有文档扫描仪的PC，等等)的查询可包含图像作为查询的部分。

当接收到例如在本例中来自用户计算机102的查询时，服务器118可向用户提供信息(例如广告)，以当搜索被处理时供用户观看和/或收听。该信息可与查询(或查询的关键字)有关，并可包括对用户设备和对查询源来说适当的视觉和音频信息，例如在食谱例子中的食品店广告。该信息可不仅包括广告，而且还包括当搜索被执行时可与用户交互和/或显示给用户的信息，例如视频、音频、音乐、游戏、网站链接等。所提供的信息可用作收入的源，例如通过做广告。如果用户在等待搜索结果的同时观看广告，或在链接上点击，或购买与广告有关的产品(有时称为“转换”)，则可更新数据库以反映额外的广告收入，并在适当时给予搜索者信用点和/或报酬。数字文本、图形、音频或视频广告可在用户计算机102上或在用户电话110上显示(或播放)。所选择的特定广告可基于与广告相关的权重(weight)，此权重依据单一或组合的因素，例如广告客户合同承诺、广告客户的投标价、在用户中的普及性、映射到广告的关键字、统计使用(例如最近最少出现的)、用户人口统计数据、地理数据、广告的搜索者选择等。

服务器118(图1)通过根据例如登录的搜索者、与关键字或类别相关的搜索者、或搜索者的基于先前表现的等级评定等因素确定哪个搜索者可用于搜索被请求的信息来处理到达的查询。

服务器118还可确定特定的查询以前是否被查询过，并可用以前获得的搜索结果向用户发送响应，而不必调用搜索人员。

当没有令人满意的或可满足查询的先前查询结果可利用时，服务器118通过通信系统107将查询发送到一个或多个可用的搜索者。如果查询是语音查询，则除了发送查询的文本版本和关键字以外，还可发送查询的语音记录和请求的任何其它相关的数据。搜索人员可位于基于计算机的搜索者工具系统122、124上和/或启用语音的基于计算机的搜索者工具系统126、128或用于接收请求的任何其它适当的设备上。

服务器选择的搜索者(或多个搜索者)可审查查询，包括关键字和任何语音记录或其它数据，并决定是否接受搜索任务。如果搜索者接受搜索任务，则该接受可通过服务器118传送回发起查询的用户。这可自动或人工发生。因为一些搜索可能要求额外的信息或说明，搜索者可向用户发送对额外信息的请求。这可通过服务器118或借助于通信系统107经由与用户的直接链接被发送。用户可回复说明、额外的信息和/或修正的查询。搜索者接着使用搜索者工具系统122、124、126、128来执行对公共或私人可用信息的搜索，以产生搜索结果。例如，搜索者可使用传统工具例如浏览器，以通过在万维网上的搜索来访问公共数据库或只有搜索者可以访问的私人数据库，例如搜索者以前收集的信息的数据库、储存在服务器118上的来自其他搜索者的结果、需要付款来访问的数据库或搜索者可以非电子形式利用的信息，例如在搜索者书架上的书、来自个人实验的测试结果，等等。搜索者还可将搜索查询或其某种形式提交给自动搜索工具，例如

或系统。

搜索结果，例如答案、搜索者的评论、网页、网站链接和其它查询相关的信息等由搜索者在搜索期间收集。搜索结果，例如用户可审查或使用来获得所期望的信息的网页和网站链接、对问题的答案以及支持答案的网页或对网页的链接等通过服务器118(图1)被发送回用户，或通过通信系统107直接发送回用户。所返回的信息一般是搜索者认为将满足用户的请求的信息。该信息可包括可满足用户请求的任何东西，包括文档、视频、歌曲、配置文件、图片、链接等。

可实时地给用户显示结果，这与选择搜索者和完成搜索所花费的时间的量相关。在一个实施方式中，一个或多个可用的搜索者优选地在15秒内被识别，且搜索者优选地在15秒内开始执行搜索的工作。在其它实施方式中，搜索者选择和工作时间开始的限制可能比上面描述的限制长或短。根据搜索，相关结果的积累可能通常花费几秒到几分钟的时间。服务器或搜索者工具可通过聊天会话(或通过VoIP连接)优选地每6秒与用户自动进行交互，以便向用户确认正在进行处理。这可与在用户屏幕上键入的点一样简单，或为更详细的自动文本消息。在一个实施方式中，当通话时，用户可听到和/或观看广告，但在不说话时间期间，用户交互可通过语音出现，例如使搜索者或自动语音系统说“请在您的搜索被执行时继续保持在线”。搜索者可自愿地与用户进行交互，或搜索者工具可提示(remind)搜索者向用户提供状态。搜索者还可向用户发送部分结果，以便用户可开始预览结果。服务器118可储存查询短语和搜索结果以与未来的查询匹配。

当用户使用电话送受话器110时，有几种方法可将结果从搜索者返回到用户。结果可通过实时VoIP或用户和搜索者之间的电路交换连接传送。其它结果可连同这些语音结果一起通过文本消息系统例如SMS被发送到电话。这些其它结果可以为文本、URL、音频和/或视频的形式。结果可为由搜索者记录并播放给用户的音频消息。可选地，搜索者的消息可使用户求助于用户可获得答案的源。搜索结果可以可选地为被转换成音频并播放给用户的数字文本。结果可为关于可在哪里找到用户可访问的数字结果或某种其它类型的结果的音频消息。使用语音合成或语音朗读可给用户播放文本结果，如有声读物所完成的。文本可被用于将语音转录成文本的相同(或不同)的资源(例如上述转录员)实时地大声朗读。可能利用搜索者工具系统122、124、126、128(图1)的网络来执行语音到文本的转录或将文本转换成语音的相反过程。数据库可记录哪个搜索者资源能够提供这些服务中的任一个，可能有对所述服务的报酬。在可选实施方式中，在需要和/或期望的情况下，结果可通过邮政业务或其他送信者提供。

在计算机系统102或电话送受话器110的用户审查搜索结果，并接着接受或不接受这些结果。接受可以为用户继续前进到某个其它事务(例如，退出搜索站点或让系统闲置)的形式，用户通过触发(“点击”)用户GUI上的接受按钮来实际上提供接受，用户响应于由服务器118发送到用户计算机系统102或电话送受话器110的对用户应答的请求，例如弹出窗口(pop-up)或语音提示，用户输入被修正的不同或后继的查询，或指示用户满足或否则发现结果有用的一些其它行为。用户可通过请求另一搜索者再次执行搜索(一般使用确切相同的搜索项或查询)来表达对搜索结果的不满，例如通过触发用户GUI上的“使用相同的搜索项再试一次”按钮或拒绝按钮，通过响应于来自服务器118的请求，通过响应于语音提示，或通过来自指示不满或对“获得第二观点”的期望的用户的某个其它行为。如果用户请求再次执行搜索或表达不满，则服务器118可向新的搜索者(或多个搜索者)提供用户查询。

当搜索结果被接受或拒绝时，可更新搜索表来反映搜索者的成功率。每个搜索者的成功搜索(被用户接受或未被拒绝)的数量和每个搜索者的成功搜索与总搜索的比率可在适当的时间用来付给搜索者报酬。报酬可依赖于其它因素，例如将查询转移到另一搜索者，给用户发送广告，将额外的时间花费在搜索上，将语音转录为文本，将文本口述成语音，和/或用特定的类别、关键字等工作。

当服务器118接收到可为自然语言查询(例如充分陈述的问题)或一组关键字的查询时，在服务器118(图1)上运行的过程150(图2)在151(图2)更新数据库156的查询和源IP地址。还可能储存关于用户的其它“被动”信息，例如地址、名字、GPS或其它地理信息等，以在需要或期望时说明查询或与搜索者的对话。服务器118(图1)在152分析查询并产生可在数据库156(图2)的关键字表184(图8)中查找的一组关键字。为了以后与用户关联，查询和关键字也可被链接在数据库156中。在数据库156(图2)的关键字表184(图8)中，权重可附到任何关键字上，该权重确定在确定选择一组搜索者时该关键字的影响力如何。在收到查询时，服务器还可将信息例如广告发送到用户计算机系统102(图1)，用于在其上显示。广告可链接到查询的一个或多个关键字。广告可以可选地从数据库156(图2)的广告表188(图8)中随机选择。发送给用户的信息还可指示系统“正找搜索者”。也可能延迟广告的发送，直到选择了适当的搜索者(或多个搜索者)。搜索者(或多个搜索者)可以有选择被发送给用户的广告的选择权，这可基于查询和/或关键字和/或搜索者发送哪个广告的评估。预先确定应给用户显示和/或播放哪个广告的搜索者可完成广告选择，该广告被发送给与特定关键字相关的搜索者。

为了使相同的搜索者处理来自用户的后继查询的目的，过程150(图2)的分析操作还可检验查询以查看它是否是以前由特定的用户在特定的会话期间提交的查询的后继查询。这可通过以下方式来完成：检查用户是否以前在该会话中接收到搜索结果并比较以前查询的关键字与当前查询，或如果用户选择提升特定搜索者的状态(例如，通过点击表达“如果可能，当我在此主题领域中搜索时再次给我这个搜索者”的按钮)则通过检查用户浏览器或搜索应用程序所设定的后继查询标记。假定服务器可能不知道用户的身份，点心文件(cookie)可用于在用户计算机或设备上储存关键字和搜索者信息。如果是这样，可更新数据库156(图2)以将查询链接到处理以前查询的搜索者，或可选地暂时为用户和对给定的关键字将该搜索者的等级设置为最高值。如果用户对于在搜索时对他们进行识别感到舒服自在，则在用户和/或搜索者建立这种对连接的请求的情况下，服务器118(图1)可执行链接用户和搜索者的功能。作为对用户提供识别信息例如名字、用户ID、电子邮件地址等的鼓励，从搜索者获得重复的服务的选择可作为选项提供给用户。

接着在154(图2)将查询与储存在数据库156中的以前的查询进行匹配。数据库156其中可储存以前的查询(或以前查询的子集，例如仍然被认为相关的查询，其中所述相关可涉及时间、地点或主题等)，来自以前查询的相应的关键字以及与相应的关键字和查询相关的被接受的“相关”结果。为了确切的、部分的或模糊(高度相似)的匹配，在154的匹配可比较当前查询的关键字与以前查询的关键字。这可导致与当前查询匹配的一些以前的查询。如果没有出现匹配，则过程190继续，其与找到或选择搜索者(或多个搜索者)相关以执行搜索(见图3)。

如果在154(图2)出现确切的匹配，则系统在162继续进行检索并在164将相应的搜索结果发送给用户且可能递送新的广告，或可选地在传送搜索结果给用户的同时递送广告。

如果在154发现在当前查询和以前查询之间的模糊或部分匹配，则一定数量的最接近匹配的以前查询短语，例如最顶部的3个可在158被发送给用户并显示给用户和/或说出。系统还可向用户发送新的广告和/或等待来自用户的答复，该答复是关于这些查询短语中的任何一个是否是对当前查询的可接受的响应。如果在160用户的选择(所传送的，例如通过点击GUI按钮或便携式电话键来指示用户希望以查询的原始表达法继续进行)指示“匹配”查询中没有一个是对原始查询的可接受的响应，则过程190(图3)在192继续，过程190与找到或选择搜索者(或多个搜索者)相关，以执行搜索。

如果在160(图2)用户选择模糊或部分匹配查询之一作为对查询的答复，则系统在162检索来自数据库156的结果，并在164将结果发送给用户。系统可配置成连同结果一起显示广告或其它信息。如果结果被当前用户接受(即，被再次认为是相关的)，则可给响应于原始查询而产生结果的搜索者额外的报酬，该额外的报酬存在数据库156(图2)的搜索者表182(图8)中。如果用户发现结果相关，则查询结果可保存在数据库156中。在至少一个实施方式中，如果一定限度的(可配置在系统级)用户认为结果不相关或不令人满意，则可不再给未来的用户提供该结果(且可从数据库删除该结果)。

如果在154(图2)在当前查询和以前查询之间没有找到匹配，或如果查询没有导致对以前搜索结果的使用，则图3的过程190开始，且当前查询的关键字用于在192在数据库156(图2)中搜索匹配查询的关键字和/或短语。此时，关键字也可被发送到传统搜索引擎例如

以执行搜索，其结果可传递到接受搜索的搜索者。为了选择搜索者，关键字，相应的数据库输入项，例如搜索者标识符、搜索者成功率、可用性等在194(图3)被检索。在数据库156(图2)中找到的关键字可根据它们在搜索查询中可具有的重要性或根据任何其它适当的等级评定方法来评级。

在至少一个实施方式中，在搜索数据库156时找到的关键字可根据它们在搜索查询短语中可具有的重要性来评级。在该评级中，关键字例如“Reggie Miller”210(图3A)可被评定为比关键字例如“basketball”212高，因为“Reggie Miller”更具体。因此，通常，本公开的目的是，如果搜索者与更具体的关键字相关，则使更有针对性的搜索者来响应用户的请求。因此，在查询例如“Reggie Miller basketball”214中，搜索者将根据查询的较高等级的关键字216被选择，该搜索者是与关键字“ReggieMiller”相关的搜索者，因此应比对关键字“basketball”所登记的搜索者具有更有针对性的关于Reggie Miller的特定领域的知识。(下面描述用于给关键字评级的自动机制。)在关键字的搜索者库(searcher pool)218中，服务器118(图1)将选择具有最高等级219的搜索者来接收查询。可给词例如″a″、″an″、″the″、″is″、″what″、″why″、″how″低关键字重要性评分值。

如果在表示对查询的最高等级的关键字216(图3A)的库中有多个搜索者，则可首先选择搜索者库218的最高等级的搜索者219。在196(图3)根据与搜索者的相应关键字匹配的查询的多个关键字中的一个或多个、关键字等级、搜索者等级、搜索者的成功率等来给可用搜索者的列表分类或评级。

如果搜索者对查询中的多个关键字进行了登记，(例如，搜索者可对″baseball″和″world series″登记，)则该搜索者可获得优于对搜索查询短语中较少的匹配关键字登记了的搜索者(例如，对″baseball″或″world series″但不是两者登记的搜索者)的优先级。

如果查询是后继查询(且用户表示出希望让先前的搜索者帮助未来与特定关键字或类别有关的搜索)，则“继有(legacy)搜索者”可排列在列表中的最高级。对于最高等级的搜索者，查询，包括关键字等在198(图3)被发送给他或她的搜索者工具系统，例如计算机系统122(图1)。可选的实现可例如将查询同时发送给在系统122、124、126、128的多个搜索者，以确定哪个可用的搜索者最快地响应该查询。在这样的可选实现中，类似于游戏节目，第一个人点击“我将处理搜索”或接受按钮“赢得”该搜索。可选地，多个搜索者可搜索查询，且聚集的结果可返回给用户(可能使用用户和搜索者之间的多个聊天会话来实现说明，等等)。如果在数据库156(图2)中没有找到查询的一个或多个关键字，则可更新数据库以包括该关键字，且该关键字可链接到查询。搜索者可在将来对新的关键字登记。

如果对查询没有识别出搜索者，则服务器118(图1)可将查询转发给可能试图回答在任何类别中的查询的“通才搜索者”。可选地，服务器可将查询传送到搜索引擎和/或元搜索引擎，以力图给用户提供不比最佳可用的搜索引擎更糟的基本级别的功能。结果可传递回用户。查询可传递到在网站例如

Answers or

Answers上回答问题的专家系统，且可给用户查询的位置的指针，可在将来回答该查询。这些系统可不给出实时反馈，但用户可在将来回来检查。

如果系统储存了新的关键字，搜索者可选择对该关键字登记。搜索者可检查数据库156(图2)的关键字表184(图8)，以确定与关键字有关的评级、业务量和/或搜索者，这可进一步通知(并可能启发)待与不同关键字相关的搜索者。

如果在200(图3)搜索被一个(或多个)搜索者所接受，则数据库可在202被更新以将搜索者链接到该查询、关键字等，并可指示处理查询的搜索者，等等。在查询被发送到多个搜索者的情况下，可将系统配置为，除了接受该查询的第一个搜索者以外，通知所联系的搜索者中的任一个：查询已另一搜索者接受并指示他们可选择中断其搜索。可更新数据库，以便搜索者可变得“可用”来接受其他用户的查询。系统还可能允许接受查询的搜索者继续搜索。如果至少一个搜索者接受了搜索，则可在204发送消息给用户，以指示搜索在“进行中”。该消息可伴随有其它信息，例如广告。广告可由服务器118(图1)选择和/或由搜索者根据所接受的查询(和/或关键字)选择。如果搜索者所建议的广告被发送给用户，则可更新数据库156(图2)来指示搜索者对被发送给用户的广告而被付报酬。

在搜索被连续通知且当前选择的搜索者不接受搜索(通过按压按钮来“拒绝”，通过不在可配置的、优选地短时间段例如6-18秒内回答，等等)的情况下，在206(图3)从列表中获得下一最高等级的搜索者，且在198将查询发送到给该搜索者。因为在这种情况下，这与用户期望找到搜索者相比可能花费更多的时间，服务器118(图1)可将额外的信息发送给用户，例如游戏、视频和/或其它广告如交互式广告。用户被，或可被周期性地告知搜索过程的状态。

如果搜索者感到没有资格来进行被发送给他或她的搜索，则通常搜索者最好进行“转移到另一搜索者”来迅速从另一搜索者获得更好的结果。这优选地产生更好的用户体验。搜索者可因选择将请求转移到另一搜索者而以某种方式被付报酬。在一些情况下，对原始搜索者的报酬可视下一搜索者的成功而定。然而，如果搜索被转移超过预定数量的次数(例如3次)，则在一个实施方式中，服务器118可返回至少一个顶级查询引擎对此查询字符串的“默认”答案。这确保用户接收的结果不比其它顶级搜索引擎的结果糟。用户、提供者或系统能够选择哪个搜索引擎被用作“默认”的。此信息可储存在用户的本地系统上(例如作为点心文件)，或如果用户“登录”到服务器，则用户个人资料文件(profile)信息可保存在那里。在这种情况下可奖励礼卷或奖品，以便鼓励用户即使在搜索者不容易可用于进行特定的搜索时，继续使用人工辅助的搜索引擎。查询还可传递到问题/答案站点，例如Answers or

Answers，以从那些站点的“专家”得到对查询的最终答案。可给用户到其它站点的查询的链接。

如果到达潜在搜索者的列表的末尾，系统可在206(图3)获得自从查询被接收到以来变得可用的额外的搜索者并就该查询通知该搜索者，或可将查询发送到为通用搜索注册的可用的搜索者。可选地，系统可使用各种机制，例如使用词之间的辞典式关系来将查询发送到被认为最接近于查询的关键字的关键字库所登记的搜索者。系统可配置成设置用户输入的关键字与类似的关键字相关的搜索库的接近度的阈值。如上所述，还可提供来自搜索引擎的结果。

当从搜索者接收到搜索结果时，数据库156(图2)在232(图4)被更新，以储存链接到关键字、查询、搜索者的资源，完成搜索所需要的时间和结果等。如果系统配置成允许基于查询的多个同时搜索，并且如果在233有第一组搜索结果，则结果在234被发送给用户(这是当查询仅发送给一个搜索者的情况)。对于基于电话的用户，这可能包括将结果转换成音频信息或将信息通过文本消息(或邮件)发送给用户，或两者。所发送的文本、视频、音频、文件或邮件还可包括链接到关键字或由搜索者选择的广告。如果结果不是第一组搜索结果，则它是第二组搜索结果；搜索结果可在235暂时储存，例如储存在下推式结果队列中，且回复的搜索者可被通知该结果在结果等待队列中。

如果在234发送任何结果，则系统接着在236等待答复。如果该答复是用户希望执行全新的查询，则在238(图4)更新数据库156(图2)以反映搜索结果，且对新查询分别执行图2和3的过程150和190。更新在238(图4)更新查询、关键字、结果、用户、搜索者输入项等。

如果答复是明确的接受，例如用户点击用户GUI的接受按钮或用户退出搜索系统，则系统在240(图4)更新数据库，可删除队列的内容，等等。可给用户发送链接到搜索结果的消息和/或广告。可通知搜索人员用户接受结果。

如果答复时间在242(图4)超时，则表示用户继续前进，则系统在240更新数据库156(图2)以反映成功的搜索。在241(图4)关于成功搜索更新搜索者的数据库条目。也就是说，更新数据库156(图2)以反映由搜索人员完成的成功搜索(允许给搜索者付报酬)，将所储存的成功搜索结果与搜索者和查询、关键字等链接起来。可通知搜索人员用户已默认接受结果。

在236，如果答复指示用户正请求以相同的查询重新进行搜索，则在244更新数据库以反映不成功的搜索，搜索结果可在246被丢弃(或可使之不可用于将来的搜索，虽然可为了审核的目的可以保存该结果)，且在247更新搜索者的数据库条目以反映用户对搜索不满意。可通知搜索者结果是不可接受的。在248，如果队列为空，则可选择新的搜索者来使用过程190(见图3)执行对查询的搜索。这个重新进行的答复也可导致系统给用户发送指示系统正重复搜索的消息，以及使用户感兴趣和/或吸引用户的信息，例如流行喜剧的视频片段或包括折扣优惠券的广告。在244的数据库更新(图4)更新该搜索者的搜索的总数而不更新成功搜索的数量，删除(或将它们标为将不再使用)该搜索的搜索结果，等等。如果搜索结果队列在248不是空的，则在250从队列取得下一条目并在234发送给用户。

如果答复为被拒绝，则在252更新数据库以反映不成功的搜索，在254丢弃或删除结果，并在255关于被拒绝的搜索更新搜索者的数据库条目。也就是说，更新该搜索者的搜索的总数而不更新成功搜索总数；用户所提供的任何评论可链接到搜索者，等等。还可通知搜索者。系统可给用户发送就不成功道歉的消息，和某种奖励以再次使用系统，例如免费流行视频、歌曲、游戏、折扣优惠券等。可将从至少一个顶级搜索引擎使用用户原始查询的一组结果发送到用户。用户能够指定在这样的情况下将使用什么“默认搜索引擎”。

当服务器118(图1)接收到说明请求时，过程280(图5)在说明请求在282被发送给用户例如计算机系统102(图1)时开始。可向已接受查询的其他搜索者发送说明请求。说明请求可以数字消息的形式，例如使用语音IP(VoIP)连接的即时消息(IM)、音频消息等，和/或用户计算机或电话可播放的语音消息信息包。系统可检查请求和数据库156(图2)，以在284(图5)确定搜索者是否指示希望保持匿名。如果系统在284确定搜索者没有指示希望保持匿名，则搜索者身份(电子邮件地址、名字等)在286被从数据库156(图2)检索出来，并在286(图5)被发送给用户。

系统接着在288等待来自用户的答复。如果答复是新构造的查询，则可更新系统，调用搜索者选择过程150和190(见图2和3)。系统监控以查看用户所提交的重新表述的查询是否可使服务器118(图1)将查询发送到同一搜索者。

用户答复在288(图5)可为向搜索者提供额外的解释的消息。该说明消息在290被发送给搜索者。如果多个搜索者接受了查询，则系统可向所有搜索者提供说明。系统可向所有的参与者(即，用户和一个或多个搜索者)提供整个聊天交互过程。系统接着在292检查原始查询和数据库156(图2)，以查看用户是否希望保持匿名，且如果不是，用户的ID信息被从数据库156检索出来并在294(图5)被发送给选定的搜索者。系统接着等待搜索的结果或另一说明请求。系统可允许用户和搜索者在不保持匿名时为了进一步的说明而独立地通信，或所有请求可通过服务器118(图1)被匿名地或完全识别或部分识别地按规定路线发送。

一旦得到说明，搜索者就可能认识到，查询在搜索者的搜索专门技能的范围之外，且搜索者可选择在296(图5)转移，被说明的查询应被转移到另一搜索者。作为转移的部分，搜索者可为下一搜索者(以及为用户)说明查询。当在296接收到这样的转移请求时，系统在298检查以查看该转移是否包括搜索者所建议的查询。如果是这样，它在300被发送给用户，并作为修正的查询显示在查询框中或作为修正的查询显示在用户GUI的说明请求/答案框中。该查询用于更新数据库，这包括除去查询和搜索者之间的链接。可选地，可允许用户在以更改的查询调用新搜索之前在302批准更改的查询。允许搜索者转移查询，而不招致对搜索者统计资料进行指示搜索者没有产生成功的搜索结果的更新。也就是说，搜索者不为意识到他们不能处理该查询而受处罚。搜索者在他或她感到没有资格执行给定的搜索时有传递查询的动机。如果用户不接受修正的查询或搜索者未产生修正的查询，则在304更新数据库以将查询标为被转移的查询，除去到搜索者的链接并在206访问搜索者的列表，以使用前述过程找到另一搜索者或另一组搜索者。在这种情况下，搜索者也不受处罚。当搜索被转移时，第一搜索者的所有“即时消息”或“聊天”交互过程被转移到随后的搜索者，使得历史和上下文不必在用户和随后的搜索者之间重复。

当“老”搜索者决定转移到新搜索者时，老搜索者点击搜索者工具屏幕550(见图10B)上的“转移”按钮554。搜索者可通过选择看起来最可能具有知道用户查询的答案的搜索者的关键字，来将搜索转移到另一搜索者。换句话说，搜索人员可确定在搜索查询中看起来是最相关的关键字。当搜索者点击“转移”按钮554时，新显示650(见图10D)允许搜索者执行转移操作。在至少一个实施方式中，查询字符串例如在查询字符串文本框652中被显示给搜索者。在该实施方式中，查询字符串中所有的相关关键字显示在相关关键字框653中，说明性地显示在查询字符串文本框652下。对于该例子，当查询字符串″world series winner 1960″显示在查询字符串文本框652中时，相关关键字框653可显示搜索者可能已登记的关键字″world″、″series″、″winner″、″1960″、″world series″和″world serieswinner″。在相关关键字框653中，搜索者已注册来对其执行搜索的关键字可显示在可点击的图标或按钮上，该图标或按钮允许当前的搜索者选择被认为是最适当的关键字，以向被转移的查询提供可接受的结果。在所示实施方式中，显示在相关关键字框653中的、已注册来对各个关键字执行搜索的当前可用的搜索者的数量，即，可用的搜索者库显示在每个关键字的图标或按钮下。在所示实施方式中，只有对″world series winner″关键字注册的可用的搜索者的″world series winner″图标656和搜索者库654由参考数字标示。通过选择与关键字″world series winner″相关的图标或按钮656，搜索人员可能将从两个当前登录的″world series winner″搜索者的库654中选择一看起来也许最有资格找到关于世界职业棒球大赛优胜者的相关结果的搜索者。通过选择按钮656，搜索者产生到这个新搜索者库的转移。通过选择最可能能够给出相关结果的搜索者，如果用户认为随后的搜索是成功的，则还可给原始搜索者付报酬。可在206从库获得搜索者，且查询在198被发送给搜索者，例如在图3中示出的。

在296的转移可为在给关键字评级时利用的一个因素(见上面关于对关键字有等级评定的重要性，以便在查询最初按规定路线发送到适当的搜索者期间选择从哪个搜索者库选择)。如果最初的搜索者(与被服务器选择为查询中的最高等级的关键字的初始关键字相关的)挑选不同的关键字来与查询一起发送，则初始关键字的权重减少和新关键字的重要性增加。因此，随着时间的过去，当这两个关键字在同一查询短语中显现时，较高权重的关键字被选择用于将获得初始通知以执行搜索的搜索者库。关键字的权重可在全局的基础上保存，使权重递减或递增，而不管关键字配对如何。可能需要更多资源但可提供更好的结果的可选方法是储存关键字对并监控特定配对内的权重。其中一个例子可以是″How many police helicopterpilots are there in the NYC area？″，其可最初触发由已对关键字″police″登记的搜索者执行的搜索。然而，随着时间的过去，可能那些搜索者感到没有能力来交付答案，所以他们将这样的查询转移给链接到关键字″helicopter″或″helicopter pilot″的搜索者。随着时间的过去，后面的词可能变成较高权重的，使得这样的搜索将首先转到″helicopter pilot″搜索者列表，而不是″police″搜索者。可根据在网络文档中关键字或词的出现频率、来自其它搜索引擎的搜索查询等来指定初始关键字权重。

当查询的转移出现时，系统可向用户发送寻找另一搜索者来处理查询以便给用户更好的服务的消息。也可发送使用户感兴趣和/或吸引用户的信息，例如广告或其它信息。

使系统通过这些操作来帮助搜索者和用户之间的对话可允许用户得到更高的质量和更值得的搜索经验。该对话允许用户引导搜索者，以便可产生更好的搜索结果。对话可通过服务器118(图1)进行，或可选地通过例如直接在两个计算机、电话或设备之间的即时消息(或使用与本服务提供的服务器不同的服务器)等机制进行。对话还可通过例如VoIP、电路交换语音网络或语音分组网络等机制进行。

当到达结算期的末尾时，服务器访问数据库156(图2)以获得与搜索者的成功(例如结果与最终用户的相关性)、广告的数量、由搜索者选择的广告、响应的速度等相关的信息，并应用可考虑这些因素的公式以便计算对搜索者的报酬。服务器还可应用计算广告的做广告成本(由广告客户支付)的公式，该公式可考虑广告被显示的次数、用户观看广告的时间的长度，用户是否“点击通过(clicked through)”广告，用户是否从广告客户的网站买产品或服务(该信息可从广告客户传送回服务器)，等等。可接着发送对搜索者的适当报酬和对广告客户的帐单。搜索者可通过系统上的“账号”接收其报酬，该系统继续产生信用、点数、美元等，直到搜索者请求可通过报酬的任何形式进行的支出，或搜索者可选择将其信用、点数和/或美元等花费在通过搜索工具系统提供的产品上。

用户系统，例如计算机系统102(图1)，可给用户显示图形用户界面(GUI)330。用户GUI 330的基本组成部分在图6中示出。图9A-9C示出用户GUI 330的其它组成部分的可能布局及其使用的例子。GUI 330(图6)的组成部分可包括查询332的框(或域/窗口)和开始搜索的控制或按钮334。用户还可触发按钮336来表示他们不想对搜索者保持匿名，这提示用户登录或建立账号(注册)，使得登录是可能的。可显示进程框338来给用户显示搜索的进程信息，且后继框331可设置成发送和接收关于延迟或对结果待决的搜索的数据。结果框340可显示搜索的结果，且按钮设置成在342接受、在344拒绝并在346重新进行搜索。重新进行按钮346的文本可表示“如果你不满意并想以新搜索者重复你的搜索就点击这里”，且按钮342和344可被删除。用户可利用的接受、拒绝和重新进行输入指示可在各种动作按钮中实现，而不更改基本功能。信息框341也可被设置用于在搜索阶段期间提供给用户的例如广告等信息，和/或结果框340可用于显示信息(例如广告)。还可设置可导致退出搜索系统的退出按钮350。如果搜索者请求说明，则该请求可显示在说明请求框352中，且用户可在说明请求框354中输入说明。用户可通过触发发送按钮356或通过仅仅敲击PC键盘上的“enter”来发送说明，如使用聊天会话完成的。搜索者身份也可出现在搜索者ID框358中。可选地，用户和搜索者的评价都可出现在同一框中，类似于很多聊天服务所建立的方法，通过可以是其真实身份、用户ID或临时ID等的标记指出每人的评价。

GUI 300具有可储存每个按钮和框或域的内容的相关的GUI数据结构或数据库(未示出)。例如，该数据结构可储存指示用户是否是匿名的、搜索是否被请求的标志、说明请求框的内容、结果框的内容等。该GUI数据结构被反映在服务器118(图1)的数据库156(图2)中，且当更新服务器中的数据库时，也可更新GUI数据结构和GUI的内容。GUI数据结构的全部内容或任何子集可在用户触发按钮且服务器以对GUI数据结构(和GUI)的更新进行响应的任何时间被发送到服务器118。GUI数据结构的全部内容也可在事件出现在服务器时更新，例如当显示广告时。可选地且优选地，为了保持用户GUI简单，系统可只在需要时提供框和按钮。例如，直到做出说明请求之前，GUI不需要显示框352、354和/或按钮356。为了最小化由GUI显示的任何视觉负载并将用户第一次到达网站时保持对用户的显示的简单，最初只有搜索查询框332和“搜索”按钮334连同最小量的文本例如公司的头衔可显示给用户(见图9A)。一旦用户输入了查询，其它框就可出现在显示器上，例如广告341、进程指示338和聊天或说明元素352、358、354、356(见图9B)。当结果被发送回时，结果框340可打开并共享显示器上的空间或占用广告的位置。按钮例如342、344、346可连同结果一起出现(见图9C)。退出按钮350和识别(或登录或“匿名”)按钮336可显示给用户，取决于服务实现。

搜索者工具系统(例如搜索者工具系统122(图1))可包括更复杂的搜索者GUI 380和相关的数据结构。搜索者GUI的组成部分在图7中示出，同时所示基本组成部分的可能布局和屏幕中的其它部分在图10A-10E中示出。搜索者GUI 380允许搜索者审查查询框382中的查询，通过“接受”按钮386接受查询，通过显示器的“聊天”区域388以及“说明”按钮390请求说明，以发送消息来从用户得到说明。搜索者还可将具有文本、页面、链接等的搜索结果拖动/放置/粘贴到搜索结果区域392中，通过“发送”按钮394发送结果，并从广告列表396为查询选择或指定适当的广告，广告列表396可相互关联到在框392中显示的关键字或结果。搜索者还可通过“可用性”按钮398指示可用性(“登录并接受查询”与否)，并接收“系统消息”框400中的信息。这样的系统消息可包括其他搜索者已接受查询的指示、来自查询被传递到的其它搜索引擎或网站的结果的状态、搜索者的统计资料例如成功率、与数据库156(图2)中的搜索者相关的关键字，等。搜索者GUI 380(图7)还可在框402中显示传统搜索引擎搜索的结果。其它按钮或显示框可包括请求转移查询的或说明的或搜索者重写的查询按钮554，例如在图10B中所示的，所接收的查询已被转移的指示，触发启用语音的搜索能力，以便便携式电话用户(和系统的其它语音导向的用户)可访问启用语音的搜索者，并使用适当的框和按钮控制向用户发送语音消息，等等。每当搜索者触发按钮时且每当服务器118(图1)更新与搜索者GUI 380(图1)相关的数据库156(图2)条目时，也可更新该GUI。服务器118(图1)或客户端系统例如搜索者工具系统122、124、126、128可使用包括

Flex^TM，XML，AJAX，Ruby等的各种实现平台来控制GUI 380。GUI 380还可具有对搜索者喜爱的工具、数据库、经常使用的结果等的书签680等。GUI 380可提供屏幕的区域，其自动填充有被传递到其它搜索引擎或网站的查询的结果，并将结果返回在那些框(或分离的窗口)中，而搜索者不需要复制和重新输入查询。搜索者可与任何搜索引擎或网站独立地交互，直到搜索者找到高度相关的信息，该信息可接着被选择、复制和粘贴到结果窗口392中。一旦数据的集合在结果窗口392中聚集，它就可被发送到用户的“结果”窗口或框。这可通过将数据通过网络从搜索者的结果框(或窗口)392复制到用户的结果框(或窗口)340(图6)中来完成，可能需要打开结果框340(同时可关闭广告框或窗口)。

可选地，被搜索的信息的选定区域可通过一种机制被拖动和放置到结果窗口，该机制类似于选择

Internet

中的列表(或其它搜索引擎的列表)并将列表段拖动到另一应用程序例如

Word以及将它放置在那里使它被插入。类似的机制可用于从搜索引擎结果框402拖动选定的列表段，并将选定的信息放置在结果框392(图7)中。

可选地，可实现HTML和/或XML源解释程序(interpreter)，其解释被访问的网站或信息的源并将显示器的选定区域当作由标记子对象组成的对象，该子对象可更智能地被其它应用程序访问。每个不同的搜索引擎、网站或信息源可能需要其自己的转换形式，以便识别将通过搜索者的结果框392发送到用户的结果框340的信息的子组成部分。标记信息可包括元素例如标题、描述、URL等。

一般，搜索者和用户的结果框392(图7)、340(图6)可分别填充有看起来与当前搜索引擎的链接类似的链接。可选地，实际文本、图形、音频、视频或其它信息文件可通过拖动和放置到结果框而返回，类似于使用操作系统例如可通过拖动和放置到另一位置来复制文件的

所实现的。

在一个实施方式中，系统的面向用户的部分优选地通过设备上的个人计算机例如用户计算机系统102(图1)上的浏览器作为网络应用程序操作，或通过交互式语音应答系统作为语音应用程序操作。一般，这是通过网页服务器获得大部分或全部数据的瘦客户机，该网页服务器可为服务器118的组件。服务器可为一个单片计算机，或它可为网页服务、广告服务、查询和结果搜索、数据库访问等的处理进行切片(slice up)的分布式计算机网络。可选地，系统的面向用户的部分可为独立应用程序或为独立应用程序的一部分(例如，通过SDK实现)。

系统的面向搜索者的部分也可实现为基于浏览器的瘦客户机，其允许所有重要的处理、数据流、各种信息源连接和数据操作出现在服务器118。为了处理缩放问题(scaling issue)(即，处理非常大量的用户，每个用户都可能需要搜索者来检查每个用户的很多源)，优选地通过本地动态应用程序来实现系统的面向搜索者的部分，该动态应用程序可独立运行或可运行在浏览器的上下文中。有很多在客户端(在这种情况下为搜索者端例如系统122、126、128)上进行重要的处理同时依赖于在服务器(在这种情况下为容纳数据库156的服务器118)上存在的数据结构的本地动态应用程序的例子。本地动态应用程序的一些例子包括使用AJAX(与XML结合的异步Java))实现的

Earth(基于互联网的地图软件)和使用″Ruby on Rails^TM″实现的

(基于互联网的项目管理软件)。

系统的面向用户和搜索者的部分可使用这些不同的机制来实现，但系统的中心在其数据库156中，在一个实施方式中，数据库156存在于查询服务器118(图1)中，查询服务器118本身可为协调地工作以实现各种数据结构的一个或很多计算机。图8示出数据结构类型的关系。所示主要数据结构类型包括用户数据结构180、搜索者数据结构182、关键字数据结构184、查询数据结构186、广告数据结构188、类别数据结构185和聊天会话数据结构187。在这些主要结构中，有对其它类型的指针关系。在该系统中，数据结构由单个实例和/或这些数据类型的列表组成。例如，每个用户与用户数据结构180相关，用户数据结构180具有局部数据，例如IP地址、开始时间、个人信息和人口统计数据，同时也有对下列结构的指针：查询数据结构186，其包含关于用户所做出的查询的信息；广告数据结构188，其包含用户看到的或计划看到的广告的列表；聊天会话数据结构，其包含关于用户和搜索者(或多个搜索者)之间的聊天会话的数据；以及搜索者数据结构182，其包括对当前搜索者的链接和可能在将来用户优先考虑的喜爱的搜索者的列表。

类似地，查询数据结构186具有局部数据，例如查询文本和结果，以及对与查询相关的关键字的指针和与查询相关的聊天会话的指针。

其它关系连接显示在图8中，示出了数据库156的不同数据类型。

可用于实现功能的框架的一个例子包括使系统100的面向搜索者的部分122-128实现为使用利用了C#的.NET框架2.0的WinForm应用程序，并具有嵌入式

8.0元素以获得诸如界面的聊天会话部分等能力。数据库可使用SQL Server^TM2000、2005或具有类似特征的另一服务器来实现。数据库也可使用例如定制应用程序中的指针的数据结构或使用数据库应用程序例如

等来实现。系统的面向用户的分可为在具有

8插件的PC上运行的

Internet

可选地，系统的面向搜索者和/或面向用户的部分可结合浏览器例如

Safari^TM、

等实现为应用程序或ASP应用程序等。

本公开的优选特征是，可例如使用由

提供的自动桌面搜索引擎或其它引擎和/或通过在硬盘的目录中或局域网上手工搜索，可搜索位于搜索者的硬盘、内部网(intranet)或本地环境上的信息。当使用这种方法找到相关的信息时，搜索者可选择、拖动和放置来自此“本地”源的信息，但所引用的文档首先复制到可公开利用的网站，这些网站容易通过公司例如GoDaddy.

或其它公司得到。在这样的实施方式中，当搜索者建立其配置时，一公共网站(和登录证书)可被指明给搜索者工具，以便本地数据可被搜索、复制到公共网站并在具有到该可公开利用的网站的链接的结果中被引用。可选地，搜索系统本身可代表搜索者使文件在服务器118(图1)、在搜索者工具系统122或其它地方成为可公开利用的。

使用文件传输协议(FTP)通过搜索者工具系统122可将文件自动传输到公共站点，不管公共站点位于哪里。通过结果484、486(图9C)提供给用户的引用指针(即，URL)将是被复制到公共网站的材料，该搜索者在该公共网站中有储存(任何形式例如文本、图像、音频、视频等的)文档的许可。

通过允许与关键字相关的搜索者的宽基础有包括不容易通过传统搜索引擎(例如

或其它)进行索引的材料的能力来实现访问“深网(Deep Web)”(即，通常不可通过今天最流行的搜索引擎得到的非常大量的文档和信息)的此功能。

优选地激发对特定的关键字登记的搜索者来收集极好的资源，以便向用户快速提供相关的答案。这可包括增加搜索者的点数和/或等级或评分值，以便可以较高的比率付给他们报酬。其它搜索者可自我激发来提供极好的结果，因为他们自己有医学经验并愿意帮助需要关于相同问题的及时信息的其他人。搜索者可有对一种爱好的激情，该激情激发他们使其可关于该爱好实时地帮助其他人。

数据库156(图2)可包括如图8所示的条目和基于指针的结构。该数据结构或数据库156包括对查询186、关键字184、搜索者182、用户180、广告188、类别185和聊天会话192的交叉链接的条目。在这些结构中，包括对搜索者的登录状态(可用性)、搜索者的等级(或权重)、关键字的等级(或权重)、搜索者统计资料例如搜索的数量、被(用户)接受的搜索的数量、用户标识(和/或用户的IP地址)、名字、地址、关于用户和搜索者的人口统计数据、搜索结果、广告(游戏、视频、文本、音频等)、广告统计资料、会计信息、用户和搜索者的匿名标志、搜索者可用性、查询说明和请求(和/或聊天会话记录)、以及关于搜索者是否可用于进行通用搜索的指示、后继查询等的条目。对搜索者的统计资料可包括搜索的总数量、成功搜索的数量、搜索者的平均速度、搜索者在开始和结束搜索之前的等待时间、被搜索者返回的结果的平均数量、搜索者的可用时间等。

在如图9A-9C中示出的搜索序列中，当用户首次访问搜索系统网站时，在浏览器窗口461中给用户显示查询GUI460(图9A)。该GUI460包括框462，其中用户可输入自然语言查询、关键字等(其可类似于可在

或

网站输入的东西)。GUI460还包括当用户准备对查询执行搜索时触发的搜索按钮464。查询GUI460还可包括控制466和468，其可在鼠标经过它们时加亮且在被触发(“点击”)时将用户连接到分别提供关于成为广告客户和成为支薪金的搜索者的信息的页面。

在用户使用按钮464开始搜索之后，浏览器窗口被加载有搜索GUI470(图9B)。GUI470包括框472，其中给用户显示指示搜索者状态的消息。还在广告框479中给用户显示广告。可有各种广告格式。页面上可有多个广告。当搜索者接受查询时，消息474指示搜索者被指定，且当搜索者不是匿名的时候，搜索者的名字可显示在聊天框476中，也许搜索者问说明的问题。由用户在聊天文本框477中键入的项显现在聊天框476中。当搜索的状态和进程变化时，以该状态和进程更新状态框478。当结果变得可用时，即使它们可能是初步的，结果也可显示在框480中。

当搜索完成时，给用户显示搜索结果GUI482(图9C)，其可包括可包含文本描述、URL等的一个或多个搜索结果484和486。如果用户对搜索不满意，则用户可通过触发“通过新搜索者进行相同的搜索”按钮488来请求新的搜索。还允许用户通过在框490中输入新查询并触发新搜索按钮492来开始新搜索。

图10A示出搜索者登录屏幕500的例子，搜索者在调用应用程序之后但在从事实际搜索会话之前看到该屏幕500。屏幕500包括自从以前查询以来流逝的时间的框502。还包括框504，其给搜索者显示关键字的列表，搜索者对该关键字登记或注册，以接受搜索。(在该应用程序的第一次调用期间，可给搜索者提供在线指导，其教导如何使用该应用程序对关键字登记以及关于什么关键字可能是更好的选择的技巧。)优选地，搜索者最初对关键字的短列表(例如3个)登记，直到搜索者证明他或她提供及时和相关的结果(其将导致搜索者的更高的等级)。搜索者可通过登录并按压“登记”按钮508以对更多的关键字登记。一旦搜索者对至少一个关键字注册，关键字就接着在框504中列出，框504不仅显示关键字而且显示搜索者对该特定的关键字的等级评定(例如，“5/7”意味着登录了并对该相同的关键字登记了的搜索者有7个。在这7搜索者个中，该搜索者被列为第五)。删除按钮506允许搜索者从搜索者关键字列表504删除任何加亮的关键字。登记按钮508允许搜索者例如通过打开新屏幕对额外的关键字登记(见图10E以及下面的描述)。搜索者可使用复选框510对基于语音的搜索登记，且测试按钮512允许语音查询所需的语音组件(扬声器、麦克风等)的测试。配置按钮514允许用户获得用于配置搜索者工具的屏幕(见图10C)。

图10B示出查询接收屏幕550，其中关于以前提到的世界职业棒球大赛的示例性查询被搜索者在框382中收到。对查询的第三方搜索引擎结果显示在框402中。搜索者的优选第三方搜索引擎结果可由搜索者选择(见图10C)。提供了显示与用于选择搜索者的关键字相关的搜索者喜爱的网站的框518(图10B)。搜索者可预先选择这些喜爱的网站(见图10C)。提供了本地搜索框520(图10B)，其允许搜索者检查他或她自己的本地硬盘驱动器或互联网来找到与用户查询有关的相关信息。提供了定制URL的框522，其中搜索者可完整地输入任何URL以访问整个网络，以便代表用户找到相关的结果。搜索者可通过按钮524、526发送部分搜索结果或最终的结果并通过按钮528退出。当搜索者接受查询时，选择按钮552。搜索者可选择使用按钮554将查询转移到另一搜索者(也见图10D)。查询时间可显示在556，其给搜索者显示该查询已“活跃”了多长时间。

图10C示出用于对特定关键字配置搜索者工具的搜索者屏幕600。通过点击搜索者工具屏幕500(见图10A)上的“配置”按钮514到达该屏幕。搜索者可指定在框602中使用哪个搜索引擎以及使用向上/向下顺序按钮606指定框604中广告的先后顺序。用于找到关于关键字的信息的搜索者喜爱的网站可在框608中列出，且列表可通过向上/向下、增加/删除按钮610来更改和排序。

图10D示出用于将查询转移到另一搜索者的屏幕650。查询在框(或查询字符串文本框)652中示出，同时查询的各种组成的关键字显示在相关关键字框653中。在每个组成的关键字下面，示出对查询的关键字和/或短语的库654的活跃搜索者的数量。还提供了允许搜索者改变查询的按钮662、664，这将导致新的组成关键字等。搜索者可通过选择关键字按钮(在图10D中只有与关键字″world series winner″相关的关键字按钮656由参考数字标识)使转移出现，这可能导致为该查询返回的更成功的一组结果。搜索者可由于转移给向用户提供成功结果的搜索者而被付报酬。

图10E示出由搜索者使用来对关键字登记的屏幕700。在框702中列出可用关键字。“可用关键字”可包括所有已知的关键字，或在系统启动阶段期间当搜索者刚刚开始登记时，列表可为被控制的关键字子集。例如，系统可以一般人在搜索中使用的仅仅500个最普遍的关键字开始。或系统可提供特定类别例如医学或运动中的关键字。框702显示关键字、当在搜索查询短语中出现时指示该关键字的“强度”的权重。(即，如果关键字在查询短语中有最大的权重，则该关键字确定从哪个搜索者库找到可用的搜索者。)(见图3A)。也示出对关键字登记以及登录的搜索者的数量。示出在上一小时(或可选地，上一天、上一星期或任何其它时间段)中关于关键字的查询的数量，以及查询与登录的搜索者的比率。该数据允许有经验的搜索者谨慎地选择关键字，这将导致搜索者能够获得更多的搜索机会和可能更高的等级。提供这个水平的细节在系统中产生“效率”，类似于可能在股票市场的交易场地上找到的。虽然用该细节显示，但关键字登记屏幕有或多或少的细节或向搜索者提供或多或少的信息是在本公开的范围内的。关键字以另一方式例如以层次树或显示关键字和类别之间关系的其它方式显示也在本公开的范围内。

当搜索者发现看起来满足用户的请求的信息，例如在用户个人书架上的书中的一段文章时，这段文章和可能周围的上下文材料可被扫描并张贴在搜索者的公共网站上(如早些时候描述的)。系统可包括确保遵守版权法的过程，例如每当被扫描的材料张贴到搜索者的公共网站时提供弹出框，要求搜索者确认作为张贴的结果将不出现版权侵犯，维持提供给搜索者的策略，该策略解释遵守所有版权法或本公开的范围内的其它保护措施的责任。搜索者可接着给用户提供感兴趣的章节和与网站扫描版本的链接、可能对包括书的副本的附近图书馆的链接，和/或可能对可购买书籍的书商网站(例如)的链接。搜索系统可接着将该信息添加到数据库，使其对未来搜索的搜索者和搜索者正为其进行搜索的用户是可访问的。桌面搜索能力可作为搜索者工具安装的部分来安装，其可为在PC上运行的本地应用程序、基于浏览器的应用程序或通过网页浏览器显示信息的基于服务器的应用程序。

桌面搜索是一个这样的例子。

为了帮助在搜索的查询主题中有经验的搜索者执行搜索，当搜索者最初注册为系统中的搜索者时，他们选择指示其搜索专门技能和/或经验的关键字或关键字的类别(见图10E)。随着搜索者获得更宽的经验范围或仅仅变得更习惯于使用该系统时，由搜索者选择的这组关键字可被更新。系统给成功搜索(例如，用户视为相关和有用的搜索)的搜索者以报酬，且作为结果，预期具有各种各样的搜索专门技能的不同搜索者将登录(可用)以一直提供覆盖度。报酬可基于广告收入，从而向搜索者提供动机以提供令人满意的结果，且当被给出选项时选择与搜索查询相关的广告，有希望地最大化广告收入。此外，报酬可基于成功搜索(用户接受的搜索结果)的比例，且这给搜索者提供不接受在其搜索专门技能的范围之外的搜索的动机。或者，如果搜索者确定他或她没有资格来交付令人满意的结果，则搜索者被激发来将查询“转移”给可交付令人满意的结果的另一搜索者。如果查询被转移，则如果下一搜索者向最终用户交付令人满意的结果，搜索者就可接收一些信用，从而激发原始搜索者谨慎地转移请求(见图10D)。信用或报酬的量也可基于搜索者多么快地确定转移是适当的。该系统也为搜索者提供仅对那些他或她可以及时的方式向最终用户提供令人满意的回答的关键字登记的动机。

搜索者不必是查询主题方面的专家，但被预期能够找出与查询相关的信息。当系统在一天24小时有大量的搜索者可用时，本公开将最佳地工作，提供关于从一千(系统启动)到数万(或甚至数百万)关键字的任何地方的覆盖度(发展成有足够的搜索者来覆盖大量关键字的系统)。为了帮助确保这样大量的搜索者登记为支薪金的搜索者，系统可根据公式对搜索者划分广告收入。系统还可根据搜索者的相关性评级向搜索者提供不同或额外的酬劳。相关性评级可包括如下一个或多个因素：平均搜索速度、所执行的被接受的搜索的数量、所执行的搜索的数量、回答关于特定关键字的查询的累积时间的量、他们搜索的关键字的数量等。在各种实施方式中，系统提供一种酬劳方式，其奖赏最佳搜索者、为累进的、奖赏很多人、用非常大的酬劳奖赏少数人、吸引媒体注意、产生在系统的用户和搜索者以其它同事和联系人的讨论、可使很多搜索者竞争来成为“最佳的”、为搜索者提供对他们可能特别成功的关键字登记的动机、以及为搜索者提供尽可能经常地登录(可用)的动机。这样的奖赏系统的一个例子是酬劳金字塔，其给少数搜索者非常多的酬劳，同时很多搜索者接收一些酬劳。该机制可用于说服大量人登记为支薪金的搜索者。这样的金字塔可在一个时期期间向顶级搜索者支付$1,000,000，向下10个最佳搜索者支付$100,000，向下100个最佳搜索者支付$10,000，向下1000个最佳搜索者支付$1,000，向下10,000个最佳搜索者支付$100。以这种方式，此特定的奖金系统涉及11,111个人。酬劳可在每年、每季度、每月、每星期或每天的基础上发放。

可选的实施方式包括有最终用户的“PC anywhere”(远程控制)或

(远程会议)类型的体验，该最终用户不直接控制搜索屏幕，但可观看搜索者正在做什么来完成他或她的任务。这使用户感兴趣、专心于并被内行的搜索者正在做的事情吸引。

用户可在“聊天”框中以允许更协作地完成搜索的方式作评论。例如，在关于1960年世界职业棒球大赛优胜者的搜索期间，用户可通过聊天屏幕说(同时观看搜索者正参考什么)：“我实际上想知道的是，谁为比赛中取胜的队投球”。且搜索者可遵从被说明的请求。

可选的实施方式允许搜索者“看到”未处理的查询。当搜索者登录到系统中时，搜索者可访问当前查询和与查询相关的关键字的列表。搜索者还可看到在预定时期例如10秒之后没有接受到搜索的查询，并接受这样的查询，且可被接受和成功地搜索的这样的查询可提供较高比例的报酬。

不同于一次一个设置的搜索者将搜索结果显示给用户，对查询执行搜索的所有搜索者的搜索结果可显示给用户。这将增加相关的搜索结果显示给用户的概率。在这样的显示中所涉及的搜索者将共享对成功搜索的信用(酬劳)。系统还可允许搜索者形成搜索者组，其促进这样的组结果显示。

用户可付款以订阅搜索服务且不显示有广告。

如果搜索者“相关性评分值”对特定的关键字或对他/她的所有关键字下降到预定的阈值，则搜索者可从系统被暂停(或被永久禁止)。可能存在搜索者被暂停的其它原因。例如，用户可将搜索者报告为在其语言或行为上非常无礼、讨厌或不适宜，这可由服务经理或系统管理员审查。

如果用户无礼、讨厌或不适宜，则也可从服务切断他/她。因为用户的身份经常是未知的，所以通过拒绝来自特定IP地址的信息包来切断用户。如果行为继续，则服务经理或系统管理员可采取诉讼。用户收到对所有查询的响应将解释不适宜行为的后果，包括诉讼。

类似地，当搜索者滥用系统时，搜索者将被切断。例如，如果有人作为搜索者登记并在大部分时间在多个关键字中提供“不相关的”结果，则系统可使搜索者的账户无效。也可监控IP地址。

根据查询的关键字、搜索周期的点、由系统设定的广告客户的优先级、由搜索者设定的广告客户的优先级等，显示给用户的广告可具有不同的长度和主题。数据库156还包括关于对给定用户(被识别的用户或在给定IP地址的用户)显示广告的次数的量、用户链接到在广告中记录的任何网站的时间的量的信息，等等。可通过产品例如″

Media Server 2″或其它产品来管理广告。

数据库的关键字可包括字典的所有字或具有排列次序的字组(短语)。关键字还可被加权以允许它们在等级评定中被较高地分类，用于确定哪个搜索者将收到查询(见与图3B有关的讨论)。因为短语″breast cancer″更具体，因此其可比两个字″breast″和″cancer″排列得高，以便″breast cancer″搜索者的等级评定不包括分别专门搜索字″breast″或″cancer″的搜索者。也就是说，常常用于特定类型的搜索的关键字或短语可排列得更高，以便导致在该特定的搜索领域中选择有较高水平的经验的搜索者。

关键字/关键字数据库还可指示多少查询包括特定的关键字，以及多少搜索者与该关键字相关。查询与相关搜索者的比率给搜索者机会来找到对该搜索者更可能产生业务的关键字，如果搜索者向最终用户提供相关的结果的话，这可增加搜索者的收入。

数据库还指示搜索者多少次搜索特定的关键字，以及搜索者对该特定的关键字成功了多少次。

当认为查询、相关的关键字和相应的回答不再是相关的时，可从数据库移除它们。每当新用户接收“答案”并选择请求另一确切的搜索(指示缺少有用的数据或相关性)时，可执行对相关性的计算。如果用户访问答案且不请求具有相同的搜索项目的另一搜索，则报告答案的原始搜索者可被给予点数。如果用户请求具有相同(或可能类似)的搜索项目的另一搜索，则可以扣除该搜索者的点数。对于认为答案是相关的用户与认为答案是不相关的用户的比率进行跟踪。如果该比率达到阈值，则答案可从系统移除，或可选地它可为了归档而被保存但不报告给进行相同(或相似)查询的未来用户。虽然描述了数据库156的多个例子的数据内容和其间的链接，但数据库156包括所描述的数据内容和/或链接以及其他数据和其间链接的任何组合是在本公开的范围内。

在另一实施方式中，服务器可能持有在ASP类型的环境中装入和搜索多个搜索引擎和网站的所有逻辑，在该环境中在搜索引擎中的大多数搜索计算发生在服务器。在一个特定的实施方式中，通过搜索者的计算机以分布式方法执行许多搜索计算。

在另一实施方式中，搜索者工具界面以“开放式”方法被定义，使得第三方可提供越来越好的工具，其也许制作成适合于特定的关键字、类别或包括医学、旅行、购物的行业等。

在另一实施方式中，在搜索者正进行更广泛的搜索且用户被显示给广告的同时，用户的“默认搜索引擎”可能将结果返回在窗口框中。这让用户与他们从标准顶级搜索引擎之一看到一样快地看到一些结果。

在另一实施方式中，更难的查询可被发送给已对“付费搜索”登记的搜索者。该查询发送给对于给定关键字或关键字组的可用搜索者库，连同着如果在指定的一段时间内回答查询则将被支付多少的出价。第一个“锁定”查询的搜索者可接着花费回答问题所必需的时间并从用户收集付款。这不同于Google回答，因为有与特定关键字相关的一直可用的搜索者库。

有很多应用程序可使用此平台更好地运行，产生更好的用户体验。对于将文本从一种语言到另一种的翻译，你简单地查询“将I love you从英语翻译成西班牙语”。内行的搜索者可使用翻译器服务例如AltaVista来获得答案。在用户使用有VoIP能力的用户系统的实施方式中，除了获得文本翻译以外，用户还能够听到来自说本族语的人的翻译。

使用本公开的某些实施方式，用户可从比当前搜索引擎可编索引的更宽的信息基础来获得明显改进的高度相关的搜索结果。使用本公开的某些实施方式，以针对关键字的搜索者被允许操作可适合于被搜索的领域的强大的搜索者工具；有使搜索者因帮助找到答案而被付报酬的过程，这为在搜索专门技能的各种领域中可用的大库的搜索者提供动机；以及广告客户开始使其(有时凭个人挑选的)广告被高度针对性的观众看到。

在图11中公开了例如本系统的另一实施方式。图11是系统1100的方框图，系统1100允许工作人员为具有多个活动水平的任何类型的用户发起的任务提供服务。如图11所示，用户发起的任务可起源于用户计算机系统1102、1104、1106，并通过通信系统1107或从电话送受话器1110、1112接收。用户计算机系统1102、1104、1106可为一般桌上型或膝上型系统、个人数字助理(PDA)、简单的便携式电话、启用文本或启用视频的便携式电话、专业化用户发起任务的终端、或允许用户通过文本、图像或语音输入来输入用户发起的任务的任何其它源。电话送受话器1110、1112可为一般按键式电话、便携式电话、双向无线电设备、或允许用户讲话或以另外的方式在一段距离内通信的任何其它通信设备。通信系统1107可包括分组交换设施如互联网、电路交换设施如公共交换电话网和DSL/ADSL、基于无线电的设施例如无线网络，等等。

在一个实施方式中，由电话送受话器1110、1112发起的口头语音任务被储存在系统数据库中并通过语音转换服务器1114转换成数字文本任务。(可选地，用户的计算机系统1102、1104、1106或电话送受话器1110、1112可执行该处理。)语音转换服务器1114可能通过与其它系统的交互来处理将语音转换成文本的任务，或它可在本地执行该任务。它可通过使用语音转录、使用转录人员、或使用也被称为自动语音识别(ASR)的传统语音到文本处理来执行语音到文本转换。语音用户发起的任务可起源于用户的电话且最初可通过自动话务员语音提示类型的处理(或可选地，通过交互式语音应答或IVR系统)被处理，以获得用户的用户发起的任务。

语音转换服务器1114记录呼叫所起源的端口，并对于特定的会话给该端口上的电话送受话器1110、1112的用户分配标识符。语音转换服务器1114可提示用户说用户发起的任务。语音用户发起的任务也可起源于称为“语音任务服务请求器”(STSR)的另一源1116，而不是直接起源于用户，例如私人或公共信息提供者。例如，语音用户发起的任务可最初由公共库电话系统处理并切换到服务器1114。语音用户发起的任务可通过各种输入装置物理地到达系统，包括时分多路复用线、来自互联网连接和其它源的IP语音(VoIP)信息包。语音用户发起的任务可作为流、信息包或信息包序列到达。

类似地，商业站点，例如用户可订购食物并查问特别的正餐后甜点的食谱的食品店订购系统最初可处理语音用户发起的任务并将其传递到语音转换服务器1114。

STSR1116(图11)可通过各种机制包括基于IP的套接字地址或通过

.NET服务与语音转换服务器1114通信，使语音转换服务器1114的转换服务通过互联网可广泛用于希望使用其的任何应用。

信息包可接着在语音转换服务器1114在本地被处理以从数字语音转换成文本，或可选地，它可由远程系统处理。如果数字语音被转录人员转录，则这可通过将数字语音发送到转录人员可听见语音(例如通过耳机或扬声器)的一个或多个转录系统(TS)1130、1132来实现，并通过将文本键入其系统来转录信息，以便接着将文本发送回语音转换服务器1114(或可选地，直接发送到用户发起的任务的服务器1118或STSR1116)，这些都在大约数秒内(在用户完成了说用户发起的任务之后，优选地少于10秒)。为了加速处理，当用户说语音用户发起的任务时，语音用户发起的任务可以且一般优选地分解成信息包流，并且没有中断地传递到转录员，从而允许系统中的等待时间减少。优选地，在系统中可用的转录员比即时的用户发起的任务多很多，以便延迟没有被引入系统中。在用户发起的任务溢出的情况下，可通过告诉一些呼叫者他们必须别挂电话以等待可用的转录员(可将此向呼叫者描述为，请稍候操作人员或代理人)来利用流量控制的形式。优选地，语音转换服务器1114维护关于当前登录的并可用于使用转录系统1130、2132上的转录软件应用程序来执行转录服务的所有转录员的数据库。可选地，跟踪转录员的可用性的此功能可位于远程系统上和/或可使用转录系统1130、1132中间的分布式机制来实现(例如，使用对等机制)。

语音转换服务器1114可将连续的顺序语音短语从各种和不同的源(例如用户)馈送到任何给定的转录系统1130、1132。因此，转录员可迅速地按顺序转录来自不同说话者的语音消息并创建与每个语音消息相关的分离的文本信息包。

一旦用户发起的任务处于数字文本形式，就将它提供给用户发起的任务服务器1118。便携式电话的文本输入特征还可用于输入以数字文本形式的用户发起的任务，允许用户从电话文本地提交用户发起的任务。

来自用户计算机系统1102、1104、1106的图形用户界面(GUI)的用户发起的任务可直接起源于用户，或类似于语音用户发起的任务，间接通过“文本语音发起的任务服务请求器”(TTSR)1120，其例如可为通过互联网连接的任何软件应用程序或设备。如在语音用户发起的任务中的，用户可在食品店网站上订购用于交付的食物，并可查问特别甜点的食谱。该食谱用户发起的任务接着被转发到用户发起的任务服务器1118。任何网站、消费类电子设备或其它设备可变成用于执行任务的TTSR或STSR。例如，由卫星电视或有线电视提供商提供的机顶盒可提供输入用户发起的任务字符串的能力并充当TTSR或STSR。在PC上运行的任何软件应用程序，例如

Office Word或也可用作TTSR或STSR。

适当的界面，例如计算机系统1102的图形用户界面(GUI)或语音转录服务器1114中的语音提示系统可从用户提取用户发起的任务，并将该用户发起的任务发送到用户发起的任务服务器1118。

当接收到例如在本例中来自用户计算机1102的用户发起的任务时，用户发起的任务服务器1118可向用户提供信息(例如广告)，以当任务被处理时供用户观看和/或收听。该信息可与用户发起的任务(或用户发起的任务的关键字)有关，并可包括对用户设备和对用户发起的任务源来说适当的视觉和音频信息，例如在食谱例子中的食品店广告。该信息可不仅包括广告，而且还包括信息，例如当任务被处理时可与用户交互和/或显示给用户的视频、音频、音乐、游戏、网站链接等。所提供的信息可用作收入的源，例如通过做广告。如果用户在等待任务结果的同时观看广告，或在链接上点击，或购买与广告有关的产品(有时称为“转换”)，则可更新数据库，以便反映额外的广告收入，并在适当时给予工作人员信用点和/或报酬。数字文本、图形、音频或视频广告可在用户计算机1102上或在用户电话(1112)上显示(或播放)。所选择的特定广告可基于与广告相关的权重，此权重依据单一或组合的因素，例如广告客户合同承诺、广告客户的投标价、在用户中的普及性、映射到广告的关键字、统计使用(例如最近最少出现的)、用户人口统计数据、地理数据、广告的工作人员选择等。

服务器1118通过根据例如登录的工作人员、与关键字或类别相关或对关键字或类别登记的工作人员、或工作人员的基于先前表现的等级等因素来通过确定哪个工作人员适合于信息被请求的任务，来处理到达的用户发起的任务。

服务器1118还可确定此特定的用户发起的任务以前是否被查询过，并可用以前获得的任务结果向用户发送响应，而不必调用工作人员。

当没有令人满意的或可满足用户发起的任务的先前用户发起的任务结果可利用时，服务器1118将用户发起的任务通过通信系统1107发送到一个或多个可用的工作人员。如果用户发起的任务是语音用户发起的任务，则除了发送用户发起的任务文本版本和关键字以外，还可传输用户发起的任务的语音记录。工作人员可位于基于计算机的工作人员工具系统1122、1124上和/或启用语音的基于计算机的工作人员工具系统1126、1128或用于接收任务的任何其它适当的设备上。

服务器选择的工作人员(或多个工作人员)可审查用户发起的任务，包括任何语音记录或其它额外的信息，并决定是否接受任务。当工作人员接受任务时，该接受可通过服务器1118传送回发起用户发起的任务的用户。这可自动或人工发生。因为一些任务可能要求额外的信息或说明，工作人员可向用户发送对额外信息的请求。这可通过服务器1118或借助于通信系统1107经由直接链接发送到用户。用户可回复说明、额外的信息和/或修正的用户发起的任务。工作人员接着使用工作人员工具系统1122、1124、1126、1128来产生任务结果。例如，工作人员在任务期间可收集任务结果，例如答案、工作人员的评论、网页、网站链接和其它与用户发起的任务相关的信息等。任务结果例如用户可审查或使用的网页或链接、对问题的答案和支持答案的网页或网页的链接等通过服务器1118发送回用户或通过通信系统1107直接发送回用户。所返回的信息一般是工作人员认为或打算可满足用户需要的东西。信息可包括可满足用户的任何东西。

可实时地给用户显示结果，这与找到工作人员和完成任务所花费的时间的量相关。一个或多个可用的工作人员优选地在15秒内被识别，且工作人员优选地在15秒内开始执行任务的工作。根据任务，相关结果的积累可通常花费几秒到几分钟或更长的时间。服务器或任务工具可通过聊天会话(或通过VoIP连接)优选地每6秒与用户自动进行交互，以便向用户确认正在进行的处理。这可与在用户屏幕上键入的点一样简单，或为更详细的自动文本消息。当通话时，用户优选地听到和/或观看广告，但在不说话期间，用户交互可通过语音出现，例如使工作人员或自动语音系统说“请在您的任务被执行时继续保持在线”。工作人员可自愿地与用户交互，或工作人员工具可提示工作人员向用户提供状态。工作人员还可向用户发送部分结果，以便用户可开始预览结果。服务器1118可储存用户发起的任务短语和任务结果以与未来的用户发起的任务匹配。

在本公开的至少一个实施方式中，如图12所示，系统1100包括用户2105和工作人员2110。用户2105可包括寻找信息例如对特定答案的搜索结果(例如答案)的互联网网民(internet web surfer)，如在本文其它地方讨论的。工作人员2110可包括被雇用来对信息查询执行搜索的搜索人员，如在本文其它地方讨论的。

在至少一个公开的实施方式中，出现至少两种不同类型的活动。例如，在图12所示的实施方式中，主级活动(primary activity)2115在用户2105和工作人员2110之间进行。主级活动2115包括对由用户2105提交的任务的服务，其可包括对从用户2105发送到工作人员2110的查询做出响应。主级活动2115在系统中是最高优先级的活动。

除了主级活动2115以外，所公开的系统和方法还包括次级活动2120。对次级活动2120的跟踪可出现在系统内部。用户2105一般不知道次级活动2120。

在至少一个实施方式中，为了培训的目的，次级活动2120在工作人员2120中间进行。次级任务2120可由工作人员2110练习，以实践由其他工作人员2110所发起的用户任务提供服务。

例如，在至少一个实施方式中，用户2105可包括寻找关于特定问题的信息的互联网网民，工作人员2110可包括被雇用来对信息查询执行搜索的搜索人员，而次级活动2120(图12)可包括用于在信息搜索系统或被系统管理员要求的其它活动中增强搜索人员的搜索技能的方法。这样的方法可包括，向搜索人员显示其搜索结果以前被提供给请求者(用户)的至少一个信息搜索查询，以及在对信息搜索查询提供搜索结果时监控搜索人员的表现。因此，给被培训的搜索人员显示查询，例如以前回答过的查询，以允许搜索人员提高他或她的搜索技能并允许管理，以监控搜索人员的表现。在至少一个实施方式中，以前回答过的查询是没有利用工作人员回答的查询。

虽然次级活动例如培训、翻译、转录等可在系统内部进行，但其它次级活动可在系统内被跟踪，而在系统外执行。例如，工作人员可拍摄照片、创建视频、绘制图、引用文本、或进行不能在系统内进行的其它类型的活动。

对其表现评级不满意的工作人员2110能够增加其技能和等级。在至少一个公开的实施方式中，工作人员2110可选择或请求参加次级活动2120。可选地，在至少一个公开的实施方式中，根据搜索者的表现评分值、等级和/或其它标准以确定工作人员是否对次级活动可用或空闲或有资格，来自动选择参加次级活动2120的工作人员2110。

如图13所示，在至少一个实施方式中，根据工作人员的技能和/或表现来给工作人员2110分组。例如，如图12所示的工作人员2110可分为学徒(apprentice)2205(图13)、职业人员(pros)2210和专家(master)2215。每个类别可称为“状态”。在使用这里的公开介绍之后，相关领域中的普通技术人员应认识到，可出现其它划分，而不偏离本公开的实质和范围。例如，职业人员2210可分成类，例如类1职业人员、类2职业人员、类3职业人员等。在图13中被识别的每种类型的工作人员2110具有不同的技能或表现水平。在本公开的至少一个实施方式中，可给最高评分值的专家2215，例如顶级的20％不同的状态，例如“精英”。根据其它标准进一步将工作人员分成可能重叠的组是可能的。工作人员可有与特定的组相关的多个“状态”。

在根据本公开的系统的至少一个实施方式中，系统100、1100(见图1和11)包括给工作人员2110(图12)分配任务的状态引擎，工作人员2110向系统100、1100注册。作为开始的步骤，每个工作人员2110向系统100、1100注册，以指示工作人员2110是否可用于为用户发起的任务服务。服务器118、1118(分别地，图1和图11)根据工作人员的组和/或类别或状态来识别工作人员2110(图12)。例如，服务器118、1118可识别出到工作人员2110上一次退出系统时止，该工作人员是职业人员2210(图13)。因此，当工作人员2110(图12)下一次登录系统100、1100(见图1和11)时，工作人员2110(图12)再次是职业人员2210(图13)。

一旦工作人员2110(图12)最初被根据组分类而识别，活动引擎就评估工作人员2110，并可给工作人员2110分配次级活动2120(图12)或在组分类水平或状态之间移动工作人员。图14A-14C示出在本公开的实施方式中的示例性活动引擎1400，其中系统100、1100(见图1和11)是在本文其它地方描述的类型的互联网搜索系统。

参考图14A，引导者(搜索者或工作人员)2110(图12)使用系统第一次注册或可被指定为状态(“首次的”)1410(图14A)，或在缺席或休眠时期之后返回到系统，或可被指定为状态(“非首次的”)1414。在任一情况下，当进入到系统中时，引导者2110(图12)可被显示视频培训并被分类为学徒2205(在图14A中示为边缘(edge)1)。

以图14A继续，一旦被分类为学徒2205，根据本公开的至少一个实施方式的活动引擎1400就根据图14A中作为边缘2-5表示的被连续评估的一组条件对引导者2110(图12)的状态进行分析。在图14A中示出的每个边缘表示条件陈述(condition statement)或可能的状态转换，其由活动引擎1400对每个引导者-关键字组合以连续的顺序被评估。例如，如果与边缘2相关的条件评估为“假”，则活动引擎1400评估与边缘3相关的条件。如果与边缘3相关的条件评估为“假”，则活动引擎评估与边缘4相关的条件。如果与边缘4相关的条件评估为“假”，则活动引擎1400评估与边缘5相关的条件。活动引擎1400根据评估为“真”的第一边缘条件将次级活动2120(图12)分配给引导者2110。

在任何时间，按顺序评估边缘的过程可被主级活动2115例如活跃的搜索和/或培训查询中断。一旦引导者2110处理了查询，活动引擎1400(图14A)就可重新开始顺次评估与边缘相关的条件。在至少一个实施方式中，对于学徒引导者2205(图13)，从其他引导者接收到的培训查询是学徒引导者的主级活动。

根据本公开的至少一个实施方式，可对引导者2110(图12)处理主级活动2115的表现被评分，而不管其状态如何。在一个示例性实施方式中，图14A的边缘2表示获得学徒状态2205(图14A)的引导者2110(图12)按5分制连续三次获得2分或更少分的评分值的条件。如果该条件评估为“真”，则获得学徒状态2205(图14A)的引导者2110(图12)移到休眠状态1416。在本公开的至少一个实施方式中，引导者2110(图12)可仅通过系统操作员的管理行为从休眠状态移除。如果图14A的边缘2所表示的条件评估为“假”，则活动引擎1400评估与图14A的边缘3相关的条件。

在一个示例性实施方式中，图14A的边缘3表示获得学徒状态2205(图14A)的引导者2110(图12)处理了多于10个的查询并具有小于或等于2的评分值的条件。如果该条件评估为“真”，则获得学徒状态2205的引导者2110(图12)被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。当视频培训结束时，引导者2110(图12)保持学徒状态2205(图14A)，且活动引擎1400再次开始过程，即，活动引擎1400对该引导者2110评估与边缘2相关的条件。然而，如果与边缘3相关的条件评估为“假”，则活动引擎1400评估与边缘4相关的条件。

在一个示例性实施方式中，图14A的边缘4表示获得学徒状态2205的引导者2110处理了多于10个的查询并具有至少一个大于3的评分值且平均评分值小于4的条件。如果该条件评估为“真”，则引导者2110(图12)保持学徒状态2205(图14A)，且活动引擎1400回到对照与图14A的边缘2的相关的条件来评估引导者2110。然而，如果该条件评估为“假”，则活动引擎1400评估与边缘5相关的条件。

在一个示例性实施方式中，图14A的边缘5表示引导者2110对至少10个查询做出了响应并具有至少4的平均评分值的条件。如果该条件评估为“真”，则获得学徒状态2205的引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。以前获得学徒状态2205的引导者2110被提升到职业人员2210。然而，如果与图14A的边缘5相关的条件评估为“假”，则活动引擎1400评估与图14A的边缘2相关的条件。

参考图14B，引导者2110(图12)被分类为职业人员2210。活动引擎1400顺次评估图14B的边缘1-5。每个边缘表示被活动引擎1400评估的条件陈述，且活动引擎1400根据评估为“真”的第一边缘条件给获得职业人员状态2210(图14B)的引导者2110分配次级活动2120(图12)。在任何时间，按顺序评估边缘的过程可被主级活动2115(图12)例如查询中断。一旦获得职业人员状态2210(图14B)的引导者2110处理了该查询，活动引擎1400就可重新开始按顺序评估边缘条件。

在一个示例性实施方式中，图14B的边缘1表示以前获得职业人员状态2210(图14B)的引导者2110(图12)按5分制连续三次获得2分或更少分的评分值的条件。如果该条件评估为“真”，则引导者2110移到休眠状态1416。在本公开的至少一个实施方式中，引导者2110可仅通过系统操作员的管理行为从休眠状态1416移除。如果图14B的边缘1所表示的条件评估为“假”，则活动引擎1400评估与图14B的边缘2相关的条件。

在一个示例性实施方式中，图14B的边缘2表示活动引擎1400确定引导者的平均评分值是否小于3的条件。如果该条件评估为“真”，则以前获得职业人员状态2210(图14B)的引导者2110(图12)被降级到学徒状态2205，且活动引擎1400根据例如与学徒状态2205相关的边缘条件评估工作人员2110(图12)，如在图14A中所示的。然而，如果与图14B的边缘2相关的条件评估为“假”，则活动引擎1400评估与图14B的边缘3相关的条件。

在一个示例性实施方式中，边缘3表示确定以前获得职业人员状态2210的引导者2110是否有小于或等于3的单个评分值的条件。如果该条件评估为“真”，则引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。当完成此次级活动时，允许引导者2110(图12)维持职业人员状态2210(图14B)。然而，如果该条件评估为“假”，则活动引擎1400评估与图14B的边缘4相关的条件。

在一个示例性实施方式中，图14B的边缘4表示确定以前获得职业人员状态2210的引导者2110是否响应了至少10个查询并具有至少4的平均评分值的条件。如果该条件评估为“真”，则引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。引导者2110接着被提升到专家状态2215。如果该条件评估为“假”，则活动引擎1400评估与图14B的边缘5相关的条件。

在一个示例性实施方式中，图14B的边缘5表示以前获得职业人员状态2210的引导者2110处理了多于10个的查询或引导者的平均评分值小于4且引导者所处理的查询的数量的模为0的条件。如果该条件评估为“真”，则引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。当完成视频培训时，或如果图14B的边缘5所表示的条件评估为“假”，则允许引导者2110维持职业人员状态2210，且活动引擎评估与图14B的边缘1相关的条件。

参考图14C，工作人员2110现在被分类为专家2215。活动引擎1400顺次评估图14C的边缘1-4。每个边缘表示被活动引擎1400评估的条件陈述，且活动引擎1400根据评估为“真”的第一边缘条件给获得专家状态2215(图14C)的引导者2110分配次级活动2120(图12)。在任何时间，按顺序评估边缘的过程可被主级活动2115(图12)例如查询中断。一旦获得专家状态2215(图14C)的引导者2110处理了该查询，活动引擎1400就可重新开始按顺序评估边缘条件。

在一个示例性实施方式中，图14C的边缘1表示获得专家状态2215的引导者2110按5分制连续三次获得2或更少的评分值的条件。如果该条件评估为“真”，则获得专家状态2215的表现不好的引导者2110移到休眠状态1416。在本公开的至少一个实施方式中，引导者可仅通过系统操作员的管理行为从休眠状态移除。如果该条件评估为“假”，则活动引擎1400评估与图14C的边缘2相关的条件。

在一个示例性实施方式中，图14C的边缘2表示活动引擎1400确定引导者的平均评分值是否小于3的条件。如果该条件评估为“真”，则获得专家状态2215的引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。获得专家状态2215但表现出不能在该水平一致地执行的引导者2110接着被降级到职业人员2210，由此活动引擎1400接着根据例如与职业人员状态2210相关的边缘条件评估工作人员2110，如在图14B中所示的。然而，如果与图14C的边缘2相关的条件评估为“假”，则活动引擎1400评估与图14C的边缘3相关的条件。

在一个示例性实施方式中，图14C的边缘3表示获得专家状态2215的引导者2110不在另一培训会话中并且存在注册到系统的、具有比该专家引导者低的评分值的其他引导者的条件。如果该条件评估为“真”，则获得专家状态2215的引导者2110被指示来发出培训查询。如果该条件评估为“假”，则活动引擎评估与图14C的边缘4相关的条件。

在一个示例性实施方式中，图14C的边缘4表示获得专家状态2215的引导者2110所处理的查询的数量的模为0的条件。如果该条件评估为“真”，则获得专家状态2215的引导者2110被指示来观看视频培训，并可被显示图形用户界面，例如图19和20所示的图形用户界面。在观看视频之后，引导者2210保持其专家状态2215。如果该条件评估为“假”，则活动引擎1400评估与图14C的边缘1相关的条件。

虽然根据涉及引导人员的信息搜索系统100(见图1)讨论了图14A-14C，但活动引擎1400过程不是限制性的。活动引擎1400过程可适用于在处理用户发起的任务的、基于计算机的系统例如上述系统1100(见图11)中涉及工作人员2110的任何情况，且本公开包括这种类型的至少一个实施方式。

图14A-14C和有关的讨论说明了根据本公开的至少一个实施方式的活动引擎1400的操作。然而，图14A-14C和有关的讨论说明了在参与单一类型的任务的个别任务工作人员的背景下根据本公开的至少一个实施方式的活动引擎1400的操作。例如，在涉及例如在本文其它地方描述的类型的互联网搜索系统100(见图1)的本公开的至少一个实施方式中，图14A-14C和有关的讨论说明了在处理对单个关键字的查询或其它任务的个别引导者或工作人员2110(图12)的背景下活动引擎1400的操作。诸如在本文其它地方描述的类型的互联网搜索系统100(见图1)并非限制如此。引导者(图12)可以对多个关键字有资格是在本公开的范围内的。此外，同一引导者可以对一些关键字是专家，对另一些关键字是职业人员，而对其它关键字是学徒，导致引导者有多个评分值。因此，根据本公开的至少一个实施方式的活动引擎1400能够同时协调多个引导者2110的活动，其中每个引导者对一个或多个关键字有资格，且任何给定的引导者对该引导者有资格的一个或多个关键字可为专家、职业人员或学徒。

进一步地，所描述的状态和边缘规则是示例性的。任何状态和/或边缘规则可用于使用这里描述的方法和系统来管理工作人员。

根据至少一个实施方式，根据本公开的系统100(见图1)包括对每个引导者2110(图12)的数据库。数据库可包括如图15A所示的搜索者记录2400，以及如图15B所示的搜索者关键字记录2600。搜索者记录2400(图15A)可包括搜索者UID字段2410、搜索者名字字段2420、搜索者总体熟练程度字段2430、搜索者类别熟练程度字段2440、搜索者子类别熟练程度字段2450、搜索者总评分值字段2460、搜索者类别评分值字段2470、搜索者子类别评分值字段2480和/或搜索者关键字字段2490。下面关于图15A解释字段的内容和功能。

图15A示出根据本发明的至少一个实施方式的搜索者记录2400。搜索者UID字段2410可包括搜索者的唯一标识符UID。搜索者名字字段2420可包括搜索者的标识符。

搜索者总体熟练程度字段2430可包括搜索者的当前总体熟练水平(例如，“学徒”、“职业人员”、“专家”等)的指示符。

搜索者类别熟练程度字段2440可包括与引导者相关的类别和相应类别的引导者熟练水平的信息。

搜索者子类别熟练程度字段2450可包括与引导者相关的子类别和相应子类别的引导者熟练水平的信息。

搜索者总评分值字段2460可包括搜索者的当前总分级水平(例如，1和5之间的数值，1和5也包括在内)的指示符。它可进一步包括基于Infoseeker^TM评分和/或搜索者评分值的评分值水平指示符，如下面进一步解释的。

搜索者类别评分值字段2470可包括与所执行的与一类别有关的搜索相关的搜索者的当前评分值水平(例如，1和5之间的数值，1和5也包括在内)的指示符。它可进一步包括基于Infoseeker^TM评分和/或搜索者评分值的类别评分值水平指示符，如下面进一步解释的。

搜索者子类别评分值字段2480可包括与所执行的与一子类别有关的搜索相关的搜索者的当前评分值水平(例如，1和5之间的数值，1和5也包括在内)的指示符。它可进一步包括基于Infoseeker^TM评分和/或搜索者评分值的子类别评分值水平指示符，如下面进一步解释的。

搜索者关键字字段2490可包括涉及到可能与搜索者相关的关键字的信息。该信息可包括与搜索者的关键字相关的关键字记录的指针。

图15B示出可与搜索者记录2400(图15A)相关的搜索者关键字记录2600。搜索者关键字记录2600(图15B)可包括搜索者UID字段2610、关键字UID字段2620、类别UID字段2630、子类别UID字段2640、搜索者关键字熟练程度字段2650、搜索者关键字计算评分值字段2660、搜索者关键字边缘完成字段2670和/或搜索者关键字评分值字段2680。

搜索者UID字段2610可包括搜索者的唯一标识符(UID)。关键字UID字段2620可包括关键字的UID。类别UID字段2630可包括类别的UID。子类别UID字段2640可包括子类别的UID。

类别UID字段2630数据可用于确定搜索者类别熟练水平，其可储存在搜索者类别熟练程度字段2440(图15A)中。类别UID字段2630数据可用于确定搜索者类别评分值，其可储存在搜索者类别评分值字段2470(图15A)中。

子类别UID字段2640(图15B)数据可用于确定搜索者子类别熟练水平，其可储存在搜索者子类别熟练程度字段2450(图15A)中。子类别UID字段2640(图15B)数据可用于确定搜索者子类别评分值，其可储存在搜索者子类别评分值字段2480(图15A)中。

搜索者关键字熟练程度字段2650(图15B)可包括关于与关键字相关的引导者熟练水平(例如，“学徒”、“职业人员”、“专家”等)的信息。搜索者关键字熟练程度字段2650可进一步包括关于与每个引导者熟练程度的状态相关的边缘的信息。

搜索者关键字计算评分值字段2660(图15B)可包括使用公式和/或包括在搜索者关键字评分值字段2680中的任何信息计算出的信息。多个计算结果可包括在搜索者关键字计算评分值字段2660中。

搜索者关键字边缘完成字段2670可包括关于与关键字关联的状态图的边缘相关的操作的完成的信息。它可进一步包括关于用于评估边缘的方法的信息。

搜索者关键字评分值字段2680(图15B)可包括关于搜索者在执行与关键字相关的搜索时的评分值(例如，1和5之间的数值，1和5也包括在内)的信息。它可进一步包括指示评分值的源(例如，培训者、信息探索者、管理员等)的信息。

根据本公开的至少一个实施方式，当引导者完成任务时，不管它是搜索会话还是有指导的任务，活动引擎1400都可执行一个或多个操作。在图14D中示出用于响应于任务的结果来评估引导者数据的变化的过程。过程3400首先在3410检查以查看与引导者的关键字相关的关键字边缘完成标志(例如，储存在搜索者关键字边缘完成字段2670(图15B)中的指示符)中的任何一个是否指示任务的完成。如果那些标志中没有一个指示完成的任务，则引导者可为新近注册的引导者(即，“首次的”(见图14A))。可选地，通过活动引擎1400或数据库内的过程可设定指示引导者已返回到首次状态的指示符。过程3400(图14D)接着在3420等待任务的完成。任务可包括但不限于搜索任务(例如，培训或用户搜索任务)、有指导的任务(例如，培训引导者、审查搜索结果、转录/翻译任务)、被引导者请求的任务(例如，轮询、调查、自我指导的培训)、或引导者可执行的可能影响与引导者相关的信息的任何其它任务。

过程3400通过在3430对与引导者相关的关键字记录的数据分类而继续。在至少一个实施方式中，关键字根据引导者熟练水平(例如，“学徒”、“职业人员”、“专家”等)以递减次序(即，“专家”、“职业人员”、“学徒”)被排序。选择与第一关键字相关的记录，且过程3400接着在3440检查边缘(如在图14A-14C中对不同的示例性熟练水平示出的)以确定与该边缘相关的条件的状态。

如果在3450(图14D)边缘评估为“假”，则过程3400继续以在3480确定与关键字相关的最后一个边缘是否已被评估。如果在3450边缘没有评估为“假”，则过程3400接着继续进行来在3460检查关键字边缘完成标志(例如，储存在搜索者关键字边缘完成字段2670(图15B)中的指示符)，以确定边缘是否被引发(fire)。如果边缘完成标志指示边缘被引发，则边缘指针被递增，且过程3400(图14D)继续以在3440检查与关键字相关的下一边缘。

如果边缘标志在3460(图14D)的检查指示边缘没有被引发，则过程3400继续以在3470设定边缘引发标志并在3500执行与该边缘相关的动作，该动作可包括更新数据库以反映培训练习和/或测试的结果，指示培训视频已被观看，指导引导者来执行任务，等等。过程接着返回以等待任务在3420完成。

过程3400接着在3480确定与引导者关键字记录相关的最后一个边缘是否已被评估。如果最后一个边缘没有被评估，则过程3400递增边缘指针，并在3440检查与搜索者关键字记录2600(图15B)相关的下一边缘。

如果过程3400(图14D)在3480确定最后一个边缘已被评估，则过程3400接着使边缘指针重置(例如，将指针设定为第一边缘)，并在3490确定是否到达最后一个关键字记录。如果过程在3490确定没有到达最后一个关键字，则过程递增关键字指针并返回以在3440检查与下一关键字相关的下一边缘。如果过程3400确定已到达最后一个关键字记录，则过程3400返回以在3410检查关键字边缘完成标志。

在根据本公开的至少一个实施方式的活动引擎1400中，如果引导者2110在其合格的关键字的50％或更多内处于专家水平或等同的水平，则边缘在3440(图14D)的检查仅针对引导者2110处于专家水平的合格的关键字进行。例如，如果引导者2110对11个关键字注册，且他或她在这些关键字的6个中达到了专家水平，在这些关键字的4个中达到了职业人员水平，以及在这些关键字的1个中达到了学徒水平。活动引擎1400评估引导者熟练水平是“专家”的关键字的边缘。可从列表中省略其它关键字，或可执行等效的过程步骤。例如，如果活动引擎1400到达了递减列表中最后一个专家水平关键字的最后一个边缘，则活动引擎1400返回到第一个专家水平关键字并开始处理该关键字的边缘，而不是处理递减列表中第一个职业人员水平关键字的第一边缘。

如图14D所示，根据本公开的至少一个实施方式的活动引擎1400记录评估为“真”的边缘。因此，如果与边缘相关的任务被执行一次，则该边缘将在下一次被略过，以支持在另一关键字上的同一边缘。结果是，根据本实施方式的活动引擎过程将不允许引导者2110重复任务，直到与引导者相关的所有其它关键字关联的所有其它边缘相关的所有任务被执行一次为止。在根据本公开的活动引擎1400的至少一个实施方式中，记录被保存(例如，布尔变量改变为“真”)以表明边缘任务已执行，如关于图15B所述的。当所有边缘任务被执行一次时，可重置该记录(例如，布尔变量改变为“假”)。例如，如果引导者2110对关键字″gorillas″、″golf″和″spiderman″处于专家水平2215。上面描述的过程3400按顺序给关键字排序。在活动引擎1400中对处于专家水平的每个关键字限定4个边缘。如果活动引擎过程使引导者2110执行与关键字″gorillas″的第一边缘相关的任务，则该任务在完成时被记录。根据活动引擎1400的该实施方式，在活动引擎过程要求引导者2110再次执行与关键字″gorillas″的第一边缘相关的任务之前，活动引擎过程要求引导者执行与关键字″gorillas″的其它边缘以及关键字″golf″和″spiderman″的所有边缘相关的任务。

该技术对培训较低等级的引导者的较高等级的引导者有利。如果引导者2110在整个一组合格的关键字中有广泛分布的一组水平，则他或她一般不执行与引导者有较低等级的关键字相关的任务，这时存在对合格的关键字(QKW)有较低等级的引导者，合格的关键字可用于对引导者的较高等级的关键字培训会话。

根据本公开的至少一个实施方式的活动引擎1400包括状态表，状态表包括各种状态的所有描述和名称。该表还可在状态中提供相对等级评定。例如，“学徒”低于“职业人员”，“职业人员”低于“专家”。状态表可包括多种状态(例如，“审查(vetting)”、“语音”、“短消息”、“活跃”、“专家”、“职业人员”、“学徒”)，这些状态可能与相关于引导者的项目相关。与项目(例如QKW、总体、类别等)相关的引导者可具有与项目相关的多种状态。活动(主级和/或次级)可根据状态被分配给引导者和/或允许引导者完成。例如，对于类别“运动”，引导者可具有等级：针对审查的专家、针对短消息的学徒和针对语音的职业人员。使用这个例子，引导者可被允许审查和表决与运动相关的任何结果，可不被允许回答与运动相关的短消息查询，以及可被允许给与运动相关的语音查询分类。

根据本公开的至少一个实施方式的活动引擎1400包括识别可分配给引导者的次级活动的任务表。

根据本公开的至少一个实施方式的活动引擎1400包括可包含下列数据元素的状态边缘表：

引导者的相关状态的识别(来自数据库或某个其它存储的当前值)，如在搜索者关键字记录2600(图15B)中所示的。

测试条件，包括应按顺序执行以确定条件是否引发“真”或“假”的一组脚本指令。状态过程(如图14A-14C所示)可利用嵌入式脚本语言，例如

TcI，

且优选以Ruby实现。如果脚本被执行，则从状态过程给信息提供脚本所需的句柄(handle)，以便确定条件测试的结果(例如较低评分值的引导者在线的数量、被评定为小于或等于2的评分值的连续查询的数量，等等)，该条件测试与边缘相关，并可记录在搜索者关键字记录2600的搜索者关键字边缘完成字段2670(图15B)中。

根据测试条件的结果对有指导的任务(即，指定引导者来执行特定的任务)或与边缘相关的其它动作的识别。

作为结果的状态(即，对于该引导者的关键字指定的状态)，其指示处理将对任何随后的状态处理请求开始的状态。也就是说，基于来自测试条件的结果；决定是否应更改搜索者的被指定的状态。

如图15A和15B所示，引导者可具有对合格的关键字、子类别、类别和/或总体的等级和评分值。等级是与引导者相关的状态(例如，学徒、职业人员、专家)，如图14A、14B和14C所示。评分值可为用于确定等级的变化的参数值。

合格的关键字(QKW)是与类别和子类别相关的关键字，其例如由关键字UID字段2620(图15B)、类别UID字段2630和子类别UID字段2640中的信息识别。搜索者关键字记录2600(图15B)是与引导者和分类法的最低水平(即，合格的关键字)相关的数据结构。

对于与引导者(或搜索者)相关的任何项目(例如合格的关键字、子类别、类别、总体等)，等级(或状态)可与该项目的引导者相关。关于该状态(例如，“职业人员”)的信息可储存在搜索者熟练程度(例如，搜索者关键字记录2600的搜索者关键字熟练程度字段2650)中。

对于与引导者(或搜索者)相关的合格的关键字，可记录评分值，其可为从个别搜索会话评分信息计算的值(例如，由用户、搜索者、管理员等评分)，和/或搜索会话的类型的信息(例如，用户搜索、培训者搜索、培训搜索等)和/或进行评分(例如专家、职业人员、学徒)的人的评分值和/或等级的信息。对于给定的QKW，可计算搜索者的一个或多个评分值。例如，基于用户评分的评分值，基于其中引导者是培训者的培训会话的评分值，基于其中引导者是受训者的培训会话的评分值，基于所有会话的评分值，等等。关于评分值的信息(例如数值)可储存在搜索者关键字记录2600的搜索者关键字熟练程度字段2650中。

对于引导者针对一项目(包括但不限于总体、QKW、类别、子类别)所相关的等级(状态)，可记录关于与该状态相关的边缘的信息。例如对来自上述边缘状态表的边缘的评估条件的指针，和/或关于边缘是否评估为“真”的指示符，如关于图14D描述的。信息可储存在搜索者关键字记录2600的搜索者关键字边缘完成字段2670(图15B)中。项目(例如子类别、类别、总体)的等级和相关边缘信息可储存在例如搜索者记录2400的搜索者总体熟练程度字段2340、搜索者类别熟练程度字段2440和搜索者子类别熟练程度字段2450中。例如，等级指示符(例如，“专家”、“职业人员”、“学徒”)、与等级相关的边缘条件、边缘指示符等。

引导者对一项目所相关的等级可相互依赖。例如，如果引导者对与子类别相关的3个或更多QKW达到专家等级，则他或她可为对该子类别的专家，作为不同的例子，如果引导者对与引导者相关的70％或更多的QKW达到专家水平或职业人员水平，则他或她可为总体“职业人员”(″pro″overall)。

对于引导者针对一项目(包括但不限于总体、QKW、类别、子类别)所相关的评分值，可记录关于与该项目相关的评分值的信息。例如，从来自其它项目的评分值得到的评分值，如子类别评分值，其为与子类别相关的引导者的关键字的评分值对评分值的数量的平均值；类别评分值，其为与类别相关的引导者的关键字的评分值对评分值的数量的平均值。评分值信息可储存在搜索者关键字记录2600的搜索者关键字计算评分值字段2660(图15)、搜索者记录2400的搜索者子类别评分值字段2480(图15A)、搜索者类别评分值字段2470和/或搜索者总评分值字段2460中。

在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可实现其它等级状态条件和/或评分值公式，而不偏离本公开的实质和范围。

图22示出根据本公开的至少一个实施方式的系统的操作的图形表示。在图22中示出的是示例性引导者A到I。引导者A到I在图22中排列成反映引导者对关键字“superman”的相对平均评分值。例如，引导者A2150可具有4.8的平均评分值，引导者B2152可具有4.5的平均评分值，引导者C2154可具有4.4的平均评分值，引导者D2156可具有4的平均评分值，引导者E2158可具有4.1的平均评分值，引导者F2160可具有3的平均评分值，引导者G2162可具有3.2的平均评分值，引导者H2164可具有3.5的平均评分值，以及引导者I2166可具有2.8的平均评分值。根据本公开的至少一个实施方式的系统的操作将使新的用户查询被传递到对关键字的最高评分的引导者，即，引导者A2150，如在本文其它地方描述的。如果引导者A2150不可用于进行或拒绝查询，则它按规定路线发送给引导者B2152，如在本文其它地方描述的。在至少一个实施方式中，与查询的QKW相关的类别所关联的引导者的等级和/或评分值可用于选择处理查询的引导者。

同时，根据本公开的至少一个实施方式的系统允许系统内的引导者2110向其他对该关键字的较低评分的引导者2110发出培训查询。该活动例如反映图4C的边缘3所表示的条件的评估。例如，如图22所示，引导者B2152在2168查询引导者D2156，引导者C2154在2170查询引导者H2164，以及引导者E2158在2172查询引导者G2162。当引导者2110积累了新的评分值时，评分值可变化，如在本文其它地方描述的。在本公开的至少一个实施方式中，作为在本文其它地方描述的包括在图14A-14D以及图15A和15B中的活动引擎1400的操作的结果，对关键字的最高评分的可用的引导者例如图22中的引导者A2150培训对该关键字的最低评分的可用的引导者例如图22中的引导者I2166。

使用一般分类法例如DMOZ可给关键字和短语分类。所公开的系统可使用这样的分类法或类似的方法来将关键字分类为相关字的较宽的类(例如子类别(关键字的“小”组)、类别(“大”组)和域(“特大”组))，以当没有“专业人员”与给定的关键字相关时，允许“通才搜索者”回复查询。在至少一个实施方式中，与查询的QKW相关的类别所关联的引导者的等级和/或评分值可用于选择处理查询的引导者。

在至少一个实施方式中，如果没有可用的引导者与QKW相关，则系统1100(图11)可选择对与QKW相关的子类别具有最高等级和评分值的引导者。如果没有可用的引导者与相关于QKW的子类别相关，则系统1100可选择对与相关于QKW的子类别相关的类别具有最高等级和评分值的引导者。如果没有可用的引导者与QKW所相关的子类别所相关的类别相关，则系统1100将选择具有最高总体等级和评分值的引导者。使用该方法，用户查询可被指向具有最高水平的与查询有关的专门技能的最熟练的引导者(即，具有最高等级和该等级内的最高评分值的可用的搜索者)。在特定的实施方式中，如果引导者是“专家”并具有3.5的评分值，则他或她将先于为“职业人员”并具有4.0的评分值的引导者而被选择。同样，如果引导者是“专家”并具有4.8的评分值，则他或她将先于为“专家”并具有3.8的评分值的引导者而被选择。

在其它实施方式中，可使用其它选择标准。此外，标准可依赖于评分值和等级评定所关联的项目的类型。例如，在选择与关键字关联的引导者时，只有评分值可用于选择搜索者，而当选择与类别相关的搜索者时，可使用等级和评分值(如上所示)。

在根据本公开的至少一个实施方式的系统中，如果引导者2110被指示来向一关键字的较低等级的引导者发出培训查询，且没有该关键字的较低等级的引导者可用，则系统可指示引导者2110向包括该关键字的子类别的较低级别的引导者发出培训查询。这可包括与搜索者关键字记录2600(图15B)相关的引导者，其中搜索者关键字记录2600的子类别UID2640与较高等级的引导者的搜索者关键字记录2600的子类别UID2640相同。如果引导者2110被指示来向子类别的较低等级的引导者发出培训查询，且没有该子类别的较低等级的引导者可用，则系统可指示引导者2110向包括该子类别的类别的较低级别的引导者发出培训查询。以这种方式，“专家”引导者将给较低等级的引导者提供培训，该较低等级的引导者所关联的关键字相关于与“专家”引导者关键字。虽然在本例中使用类别、子类别、关键字分类法，但该分类法内的或多或少数量的分级在本公开的范围内。在可选的实施方式中，与任何项目相关的搜索者评分值和/或等级可用于选择发出培训查询的引导者和/或接收培训查询的引导者。系统1100(图11)不限于用于确定提供培训的搜索者和/或接收培训的搜索者的任何特定的方法或公式。在至少一个实施方式中，子类别等级和评分值可用于培训选择。

在根据本公开的至少一个实施方式的系统中的工作人员是专家的情况下，可被分配给这样的工作人员的次级活动2120(图12)可包括培训其他工作人员。如在图16的系统8400中示出的，在所公开的系统和方法的至少一个实施方式中，图形用户界面(GUI)8402和8427可出现在专家水平2215(图13)的成员的搜索者计算机系统上。

GUI8402(图16)包括“培训引导者”标题8405。在所公开的系统和方法的至少一个实施方式中，GUI8402还包括取消按钮8410，通过“点击”该取消按钮8410，搜索者可选择不培训其他搜索者。

GUI8402还包括与“输入查询”标题8415相关的文本域框8420。在所公开的系统和方法的至少一个实施方式中，文本域框8420从提供培训的搜索者接受文本。特别是，提供培训的搜索者可将信息查询输入到文本域框8420中，并提交待由被培训的搜索者回答的查询。可选地，提供培训的搜索者可例如从标题为“没有引导者的PAQ(以前回答的查询)的列表”8425的查询列表中选择以前回答过的查询。在所公开的系统和方法的至少一个实施方式中，以前回答的查询被回答，而没有直接的搜索者交互。

如图16所示，GUI8427包括标题为“没有引导者的PAQ”8430的列表，进行培训的搜索者可从该列表选择至少一个信息搜索查询，以提交给被培训的搜索者。例如，信息搜索查询8435可为以前回答过的信息搜索查询，例如“谁赢得1975年的超级碗冠军赛(Super Bowl)”。进行培训的搜索者可选择待提交的信息搜索查询，用于培训。例如可选择分配到类别“足球”的搜索者来接收信息搜索查询并为信息搜索查询提供搜索结果。

如图17所示，例如专家2215(图13)的计算机屏幕包括GUI8402(图16)。在专家2215在文本域框8420中将输入或选定的查询提交给学徒之后，被培训的引导者可与GUI8502(图17)交互。在至少一个实施方式中，GUI8502是信息探索者与系统进行交互的界面。一旦搜索查询被发送给被培训的引导者，“评分值”框就可出现在GUI8402中。

“评分值”框8422(图17)或其它等效的界面例如“单选框”或可选择的评分值按钮(例如“好”、“还可以”、“差”)可由提供培训的引导者使用来输入对被培训的引导者的评分值，该评分值可储存在搜索者记录(例如搜索者关键字记录2600(图15B))中。被培训的引导者可接收对他/她的表现的反馈，或系统可更改评分值和/或等级评定，如上讨论的，等等。

如图17所示，除了搜索结果部分8520以外，GUI8502还包括聊天窗口8505、初步结果部分8510和广告部分8515，并可包括“评分值”框8522。

进行培训的搜索者例如“专家”可利用聊天窗口8505来与接收培训的搜索者例如学徒进行交互。例如，学徒可与专家聊天，以获得关于选定的信息搜索查询的说明。

初步结果部分8510可包括由被培训的学徒响应于专家所提交的信息搜索查询而产生的中间结果。

广告部分8515(图17)可包括例如宣传本公开的系统的广告文本、视频、音频、图像等或与查询有关的广告文本、视频、音频、图像等。下面参考培训引导者以选择对查询的适当广告来描述广告部分8515的可选用法。

搜索结果部分8520可包括由被培训的搜索者响应于提供培训的搜索者所提交的信息搜索查询而产生的最终结果。

“评分值”框8522或其它等效的界面例如“单选框”或可选择的评分值按钮(例如“好”、“还可以”、“差”)可由接收培训的引导者使用，来输入对执行培训的引导者的评分值，该评分值可储存在搜索者记录(例如搜索者关键字记录2600(图15B))中。以这种方式，提供培训的引导者可接收对他/她的表现的反馈，或系统可更改评分值和/或等级评定，如上讨论的，等等。

虽然上面示出的实施方式描述了一个工作人员(专家)培训一个工作人员(学徒)，该方案的其它变形是在这里描述的实施方式的范围内的。例如，在合作环境中，一个工作人员可培训多个较低等级的工作人员，其中会话参加者中的任何一个或全部可观看聊天界面、查询、结果等。参加者可在任何时间加入和退出会话。在该方案中，多个低等级的搜索者可在非工作状态(downtime)期间被培训，但可按需要回答用户请求。这可允许工作人员通过执行次级活动例如培训其他工作人员来挣得他或她的任何或全部报酬。

此外，被培训的引导者和/或提供培训的引导者可向系统提供其它形式的反馈。例如，上面的评分值可适用于不同方面的表现，例如主题领域的知识、提供有效培训的能力、礼貌、打字技能、语言使用、讲话质量(如果使用在本公开中在其它地方描述的基于语音的能力来进行培训)、和/或培训会话的任何其它方面。

如图18所示，在次级活动2120(图12)中利用来进行视频培训的视频培训文件9205可与第一关键字9210、第二关键字9215、第三关键字9220、第一类别9225、第二类别9230和/或第三类别9235关联。

例如，希望对关于Basketball的搜索提供视频培训文件9205的引导者可使视频培训文件与第一类别9225例如“Basketball”和/或与第一关键字9210例如“NCAA Basketball”关联。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可提供各种其它配置，而不偏离本公开的实质和范围。例如，除了与类别“Basketball”和关键字“NCAABasketball”关联以外，视频培训文件9205(图18)还可进一步与第二类别9230例如“NCAA Sports”和/或第二关键字9215例如“NCAA Division1 Basketball”关联。

关联操作允许搜索视频培训文件的系统或引导者能够将该引导者所分配的关键字和/或类别与分配到视频培训文件9205(图18)的关键字和/或类别进行匹配。

虽然为创建文件的提供者示出项目与培训文件之间的关联，搜索者/提供者可产生文件和项目(例如QKW、类别、标记、状态等)之间的关联是在本公开的范围内的。这可允许观看了文件的提供者使培训文件与其它项目相关。例如，搜索者可能觉得培训文件适合于对类别“NCAABasketball”的在职业人员水平的搜索者，但另一搜索者可能发现对类别“Sports”的专家水平的搜索者有用。例如如图21所示的GUI可用于使项目与培训文件关联。

如图19所示，在本公开的至少一个实施方式中，图形用户界面9305允许引导者上传和/或储存视频培训文件，以在将来的培训中使用。在这样的实施方式中，图形用户界面9305可包括关键字文本框9310和浏览框9315。

关键字文本框9310允许视频培训文件的上传者，即，希望上传视频文件的引导者指定将与视频文件关联的关键字或类别。特别是，上传者可将例如与视频文件关联的关键字的名称键入关键字文本框9310中。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可提供各种其它配置，而不偏离本公开的实质和范围。例如，在至少一个实施方式中，关键字文本框9310(图19)可用关键字和/或类别的列表代替，该列表允许上传者能够选择将与视频培训文件关联的关键字和/或类别。

浏览框9315允许上传者选择待上传的培训文件。可使用可适用的任何方法找出培训文件。例如，可在引导者计算机系统的本地存储设备(例如，1122(图11))上找出培训文件。上传者可选择被上传到目标URL或系统1100可访问的其它存储器的文件。在使用这里的公开介绍之后，相关领域的普通技术人员将容易想到找出和存储培训文件的可选方法。

在至少一个实施方式中，根据使用、效力(如由观看文件的引导者的评分值和/或水平度量的)、引导者对文件的评分值、或由系统管理人员确定的其它适当的度量方式，可给上传视频培训文件的引导者付报酬。这样的报酬可帮助激发引导者产生有效的培训工具、选择适当的关键字和类别、以及产生对流行主题的培训。对评分值的跟踪等可进一步用于通过系统1100(图11)选择引导者。视频数据库9685(图25)可单独地或与系统1100(图11)的其它组成部分组合地用于确定对任何领域中的培训文件的要求和/或需要。可请求搜索者产生相关领域中的培训材料，他们可能因此被付报酬。搜索者能够使用例如在图10E中关于关键字示出的GUI来访问系统，以观看相关的信息。

如图20所示，图形用户界面9400可允许考虑视频培训的引导者选择接收培训。在至少一个实施方式中，图形用户界面9400(图20)包括提示9405、接受按钮9410和拒绝按钮9415。如果引导者希望接受视频培训，引导者将触发接受按钮9410。可选地，如果引导者不希望接受视频培训，引导者将触发拒绝按钮9415。

可选地，如果系统1100(图11)确定引导者是空闲的，则浏览菜单9407可出现在GUI9400(图20)中，其允许引导者根据不同的标准选择培训视频。例如，该菜单可提供与引导者相关的类别、子类别和QKW的“树结构”。引导者可使用菜单来选择项目，并根据该选择观看培训文件。根据与引导者相关的因素例如评分值、等级、许可等可确定菜单的顺序和/或内容。

如果引导者接受视频培训，或如果视频培训不是可选的，如图20所示，系统可给引导者显示图形用户界面9500(图21)，其包括例如文件选择提示9503和表示视频培训的图标9505、9510、9515和9520，并可显示视频的缩略图图像。此外，GUI9500可包括可指示视频文件的评分值的评分值域9522。视频文件的评分值可基于例如用法、搜索者评分值等因素。以前被观看过的视频文件可表示在GUI9500中，和/或可不显示。

在本公开的至少一个实施方式中，希望接收视频文件的引导者触发图标中的至少一个，从而使视频文件被执行并显示在他或她的计算机屏幕上。引导者可接着观看选定的视频文件，力图增强他或她的搜索技能并提高他或她的表现等级。

如图23所示，在本发明的至少一个实施方式中，提供了方法9600。在图23和后面图27所示的方法中，搜索者、任务工作人员、引导者被称作已达到学徒/职业人员/专家的状态。虽然这组状态和等级用于说明性的目的，但可在本公开的范围内使用其它组的状态和规则用于选择搜索者来接收和/或提供任何类型的培训。

在图23的方法9600中，在9605监控搜索者的忙碌状态以判断搜索者是否是空闲的。例如，在本方法或公开的至少一个实施方式中，查阅搜索者数据库9682(图23)来判断搜索者是否可用或空闲或有资格来接收或提供培训。如前所述，在所公开的系统中，主级活动2115(图12)之一可以是给信息探索者提供搜索结果。次级活动2120(图12)，例如对搜索者的音频/视频培训、交互式查询培训、搜索结果审查、转录等可出现在搜索者没有在回复搜索查询以提供搜索结果时，即，搜索者空闲或不忙碌时。如果在操作9605(图23)中的忙碌状态监控判断没有导致找出空闲的搜索者，则继续监控忙碌状态以找到空闲搜索者。如果在操作9605中的判断导致找出或找到空闲的搜索者，则控制转移到操作9610，且方法9600继续。

在操作9610中，进行关于搜索者是否有资格参加音频/视频培训的判断。这可基于与可用于进行次级活动的搜索者相关的任何项目(例如等级、评分值等)。这可通过查阅搜索者数据库9682(图23)的任何或全部内容来进行。如果在操作9610中确定了搜索者有资格参加基于音频/视频的培训，则控制转移到操作9615，且方法9600继续。

如果在操作9610中确定了搜索者没有资格参加培训，则控制转移到操作9605，且方法9600继续。

例如，在这里公开的系统的一个实施方式中，对关键字、子类别、类别、总体等达到职业人员等级的引导者可以有资格参加音频/视频培训。对相同的项目达到专家等级的另一引导者可能没有资格接收音频/视频培训。这可能是由于例如对交互式查询培训的高要求，该交互式查询培训只可由高等级搜索者执行。其它因素可用于判断搜索者是否有资格参加作为次级活动的音频视频培训。这些因素可如下面关于图32所述的更改。

搜索者(例如，学徒搜索者，在学徒/职业人员/专家等级中的最低状态)可能只能参加次级活动2120(图12)(例如，培训、查询和结果审查、轮询等)。在这种情况下，可不必确定空闲的搜索者是否有资格参加音频/视频培训。如果只允许搜索者参加次级活动，则在方法9600中提供操作9613。在操作9613中，进行关于只被允许执行次级活动的搜索者是否登录到系统的判断。如果在操作9613中的判断结果为，适合的搜索者(即，只能参加音频/视频培训的搜索者)没有登录到系统，则对适合的搜索者是否登录到系统的判断继续。

如果在操作9613中确定了仅有资格参加次级活动的搜索者登录了，则控制转移到操作9615，且方法9600继续。

在这里公开的系统的至少一个实施方式中，可定义业务规则，其确定搜索者的适合性，以确定参加主级活动的资格。例如，可只允许在学徒水平的搜索者或具有低表现评分值的职业人员水平的搜索者接收音频/视频培训，以便为信息探索者确保高水平的服务质量。

在操作9615(图23)中，给搜索者发送提醒(alert)搜索者参加音频/视频培训的消息。在所公开的方法9600的至少一个实施方式中，消息可包括在电子弹出窗口或框中。然而，在这里公开的系统和方法的范围内，可使用包括电子邮件、即时消息、文本消息、或其它通信方式和界面的可选通知方式。控制转移到操作9617，且方法9600继续。

在操作9617中，判断搜索者是否可选择拒绝参加音频/视频培训。如果操作9617确定了搜索者不可选择拒绝参加音频/视频培训，则控制转移到操作9656，且方法9600继续。

如果在操作9617中确定了搜索者可选择拒绝参加音频/视频培训，则控制转移到操作9620，且方法9600继续。

在操作9620中，判断培训是否被搜索者接受。如果在操作9620中确定了搜索者拒绝接受音频/视频培训，则控制转移到操作9605，且方法9600继续。

在所公开的方法的至少一个实施方式中，当搜索者不接受音频/视频培训时，可设置标志，以便当视频培训被再次提供时，可不给他或她提供拒绝视频培训的选择权。

如果在操作9620中确定了搜索者接受音频/视频培训，则控制转移到操作9656，且方法9600继续。

在操作9656中，发起视频培训会话。在该操作中，可设置标志以指示搜索者不可用于进行活动(如关于图33进一步讨论的)，音频/视频培训会话的开始时间、视频培训会话以前被拒绝的次数的记录等，可被记录在搜索者数据库9682中。控制接着转移到操作9625，且方法9600继续。

在操作9625(图23)中，搜索适合于显示给搜索者的、与相关于该搜索者的项目(例如关键字、类别等)相关的视频培训。例如，对被分配给关键字“NCAA Basketball”的职业人员搜索者可能需要与关键字“NCAA Basketball”有关的视频培训，以便提高他或她的技能，来试图前进到专家水平。因此，在视频数据库9685中进行对这样的视频(即，与关键字“NCAA Basketball”和“职业人员”和/或“学徒”状态相关的视频)的搜索。搜索操作9625可根据任何标准选择视频培训文件，该标准可包括与待培训的搜索者和/或视频培训文件相关的水平、评分值等。在过程9600中的控制接着传递到操作9630。

在操作9630中，通过查阅搜索者数据库9682，进行关于从视频数据库9685选择的视频以前是否被发送过给搜索者的判断。如果在操作9630中确定了视频以前被发送过给搜索者，则控制转移到操作9627，且方法9600继续。

如果在操作9630中确定了视频以前没有被提供给搜索者，则控制转移到操作9635，且方法9600继续。

在操作9627中，进行是否将以前发送给搜索者的视频发送给搜索者的判断。如果在操作9627中确定了以前发送给搜索者的视频可以发送给搜索者，则控制转移到操作9635，且方法9600继续。

如果在操作9627中确定了以前发送给搜索者的视频不可以发送给搜索者，则控制转移到操作9625，且方法9600继续。

在操作9627中的判断可基于不同的标准。例如，如果对搜索者没有其它适合的视频培训文件，则可允许他或她观看可包括交互式技能评估的以前被观看的培训文件。这样的文件的第二次观看可提供对搜索者的提高的表现的指示。在其它情况下，培训文件可能只适合于观看一次，因为其内容可能简短且一旦被看过就意义不大了。相关领域的普通技术人员容易想到用于判断是否将以前被发送和/或观看的培训文件发送给培训者的其它选择，且这里描述的方法不限于任何特定的标准。

在操作9635中，进行关于是否从服务器执行视频的判断。如果确定了从服务器执行视频，则控制转移到操作9645，且方法9600继续。

如果在操作9635中确定了不从服务器执行视频，则控制转移到操作9640(图23)，且方法9600继续。

根据被培训的搜索者的希望或任何其它因素例如培训文件的权利管理、可用的传输方法等，可在操作9635中进行关于视频是否被在线执行或被“网络广播(podcast)”给搜索者的判断。

在操作9640中，视频被下载(或“网络广播”)到视频重放设备。控制转移到操作9650，且方法9600继续。

在操作9645中，视频从服务器(例如，视频数据库服务器)流动或播放给搜索者。控制转移到操作9650，且方法9600继续。

在操作9650中，接受视频培训的搜索者被提示评定视频和/或提供关于培训的评论。在至少一个实施方式中，给视频指定数字评分值或字母等级例如“A”、“B”、“C”、“D”或“F”。可选地，可给视频指定评分值例如“不佳”或“良好”。除了评分值以外，在所公开的方法的至少一个实施方式中，还可请求搜索者提供关于所接收的视频培训的“有益性”的反馈。此外，可向搜索者提出关于视频设计成提高什么技能的建议。在其它实施方式中，例如技能测试的结果、搜索者观看视频所花费的时间的量、来自人工辅助的培训会话的结果等项目可用于确定视频培训的评分值。控制接着转移到操作9655，且方法9600继续。

在操作9655中，搜索者的评论和/或评分值以及关于视频的效果的其它数据可记录在视频数据库9685中。来自搜索培训会话的视频培训文件的评分值可用于选择用于培训的视频，并向系统管理员和/或培训视频文件的生产商提供反馈。进一步地，根据搜索者评分值、用于培训的视频文件的使用、观看培训视频的搜索者的技能水平的变化、观看培训视频所花费的时间间隔、搜索者在培训视频之前、期间或之后观看的广告等，可确定视频培训文件的生产商和/或观看视频文件的搜索者的报酬。控制接着转移到操作9660，且方法9600继续。

在操作9660中，对被培训的搜索者的特定的视频，音频/视频培训被标记为完成的，以允许系统判断视频是否被提供给搜索者。此外，与搜索者相关的其它数据可记录在搜索者数据库中，例如等级、评分值等，其可能由于音频/视频培训而更改。在所公开的方法的一个实施方式中，这个标记操作9660(图23)通过将适当的数据记录在搜索者数据库9862中与接收培训的搜索者有关的字段中来完成。控制接着转移到操作9665，且方法9600继续。

在操作9665中，可更新搜索者的培训日志(储存在搜索者数据库9682中，如这里在下面将描述的)。忙碌/空闲标志可设置成空闲的，以指示搜索者已完成了音频/视频培训，指示培训会话的结束时间的时间戳可被记录，以及搜索者的其它数据可在搜索者数据库中更新。控制接着转移到操作9605，且方法9600继续。

虽然在视频培训方面描述了方法9600，但可提供可提高引导者的技能的任何其它类型的培训材料。培训材料可包括图形、音频信息、文本、URL、交互式媒体显示、量化已获得的技能的一组边缘条件、和/或测试、或这样的材料的任何组合。例如，

页面(或到其的链接)、博客、

关于著名历史人物的简单测验、计算机系统、软件程序、或上传者可指示的(如这里关于图19描述的)的任何资源可以为培训材料。此外，培训材料可与上传者的UID相关，以便利用培训资源的人可匿名地、以有限的匿名程度或不匿名地联系上传者。

如图24所示，搜索者数据库9682可包括与被培训的搜索者有关的字段。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，其它字段可包括在搜索者数据库9682中。还应注意，搜索者数据库9682可为用于帮助实现本发明的任何类型的可行数据库，例如关系数据库。

搜索者数据库9682中的搜索者标识(ID)字段9705可包括用于识别被培训的搜索者的状态例如学徒、职业人员或专家的搜索者标识符字段。可选地，搜索者状态可储存在搜索者数据库9682中分开的字段中，或可作为等级评定字段9720的一部分被包括，如下所述。搜索者标识字段9705还可包括搜索者的网址、搜索者的名字、电话号码等，允许例如视频文件的创建者联系搜索者来提供直接的反馈。搜索者标识字段9705(图24)可包括由随机数字生成器产生的随机数字。搜索者数据库9682和/或视频数据库中的信息可进一步用于提供搜索者和视频培训材料的提供者之间的匿名通信。在发明人Scott A.Jones等人的律师签号为1918.1006、题目为“ANONYMOUS SEARCH SYSTEM USING HUMANSEARCHERS”的有关申请中进一步描述了匿名通信方法，该申请在这里通过引用被全部包括。

忙碌/空闲字段9710可包括一状态来指示相应的搜索者是否忙于主级活动2115(图12)，即，回复来自信息探索者的搜索信息查询。例如，在至少一个实施方式中，忙碌/空闲字段9710是标志字段，其包括指示搜索者空闲的“真”值和指示搜索者不空闲的“假”值。在至少一个实施方式中，忙碌/空闲字段9710可有助于允许系统确定有资格或可用于进行视频或音频培训的搜索者。

类别/关键字字段9715可包括给搜索者分配的关键字、类别等的名称。例如，在所公开的系统和方法的至少一个实施方式中，该字段可包括值“NCAA Basketball”，以指示特定搜索者被分配了关键字“NCAABasketball”。

等级评定字段9720可包括对特定搜索者的等级的指示。在所公开的系统和方法的至少一个实施方式中，为了培训的目的，在确定待显示给搜索者的适当视频时可利用搜索者的等级。例如，等级评定字段9720可包括指示该字段所相应的搜索者的等级评定值的数字。例如，通过将“T1”的值包括在搜索者等级评定字段9720中，可指定被列为系统中最佳学徒搜索者的学徒搜索者。该值将指示，该搜索者是所公开的系统和方法中排列第一(1)的学徒搜索者(T)。类似地，通过将“V3”的值包括在搜索者等级评定字段9720中，可指定被列为系统中排为第三的最佳专家搜索者的专家搜索者。该值将指示搜索者是所公开的系统和方法中排列第三(3)的专家搜索者(V)。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可利用其它评级规定，而不偏离本发明的范围和实质。

例如，所公开的系统和方法可使用如这里进一步描述的全局评级/评分系统。在这样的方案中，等级评定字段9720(图24)可包括指示该字段所相应的特定搜索者的总等级评定。例如，在所公开的系统和方法中，“155”的值指示职业人员搜索者是包括专家、职业人员和学徒的所有搜索者中的第155名最佳搜索者。

提供过的视频字段(videos presented field)9725可包括例如以前为特定的搜索者提供过的视频和/或音频文件的列表。提供过的视频字段9725可有助于确定特定的培训视频以前是否被显示给搜索者，以防止特定的搜索者多次接收相同的培训视频。

在所公开的系统和方法的至少一个实施方式中，搜索者数据库9682包括被确定为对搜索者有益的视频字段9730。字段9730可帮助系统确定搜索者认为有益的视频的类型。例如，如果搜索者碰巧偏爱提供很多细节的视频，则这样的偏好可储存在该字段中，这可帮助系统给搜索者提供该搜索者最可能认为对他或她有益的视频。

可选地，被确定为对搜索者有益的视频字段9730可为被搜索者评定为“良好”的视频的列表。系统可接着提取间接信息，例如对列表中的视频共有的视频的长度、作者、资源或如下所述的其它参数，以便为该搜索者选择类似的培训视频，用于未来的培训会话。

登录的培训小时字段9735可包括搜索者已参加的视频培训的分钟和/或小时的总数量。字段9735可帮助确定是否应提升搜索者。例如，如果搜索者登录了很多小时的视频培训，则当确定是否应提升搜索者时可积极地考虑该因素。

如图25所示，视频数据库9685可包括视频或音频文件9805。视频或音频文件可包括例如由有经验的搜索者、由系统管理员或由视频生产商以前提供的电子文件。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可提供其它类型的文件或资源，而不偏离本发明的实质和范围。例如，在所公开的系统和方法的至少一个实施方式中，文本、视频、音频和/或图像等文件和/或提供对文件的访问的信息(例如URL、口令等)可储存在数据库9685中。

评论/视频评分值字段9810可包括来自搜索者的关于培训视频的评论(例如，搜索者是否认为视频有益)。此外，在所公开的系统和方法的至少一个实施方式中，可提供对视频的评分值或等级，以指示关于视频所提供的培训，搜索者所体验到的满意程度。

适合于视频的搜索者等级评定字段9815包括视频最可能有益于的搜索者的等级类别或技能类别。例如，如果视频提供关于特别复杂的搜索问题的培训，则视频一般不是很适合于新搜索者，例如学徒。类似地，如果视频提供关于特别容易的搜索问题的培训且搜索者被列为系统中的最佳搜索者，则视频一般不是很适合于这样的熟练搜索者。

适合于视频的关键字/类别字段9820可包括视频所适合的关键字和类别。例如，显示如何搜索由“NCAA”提供的网站的特定视频可在适合于视频的关键字/类别字段9820中包括关键字“NCAA Basketball”。如以前在这里所述的各种因素，可确定与视频或其它资源相关的关键字、类别、标记等。

在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可在数据库中提供其它字段，而不偏离本发明的实质和范围。

如图26所示，在本发明的至少一个实施方式中，提供了系统9900。系统9900可包括搜索者计算机系统9905、网络9910例如互联网、搜索系统9920、以及数据库例如搜索者数据库9682和视频数据库9685。

搜索者计算机系统9905可例如由学徒搜索者操作，以接收视频培训。特别是，学徒搜索者可使用搜索者计算机系统9905来通过网络9910例如从搜索系统9920下载视频文件或音频文件。

搜索系统9920由所公开的系统和方法的供应者提供，并用作系统9900的“大脑”。例如，搜索系统9920可控制来自搜索者数据库9682和视频数据库9685的数据库查询，其可包括用于执行根据这里在上面提供的描述所公开的系统和方法的数据。

如图27所示，在所公开的系统和方法的至少一个实施方式中，提供了方法8600。

在方法8600的操作8605中，监控搜索者的忙碌状态以确定搜索者是空闲的。例如，在所公开的方法的至少一个实施方式中，查阅搜索者数据库8682(图29)来确定空闲的搜索者。如前所述，优先权之一是给信息探索者提供搜索结果。搜索者的次级活动2120(图12)和/或培训可出现在搜索者未在回复来自信息探索者的搜索查询以提供搜索结果时，即，搜索者空闲或不忙碌时。如果在操作8605(图27)中的判断未导致找出或找到空闲的搜索者，则监控空闲搜索者的忙碌状态继续。如果在操作8605中的判断导致找出空闲的搜索者，则方法8600中的控制转移到操作8610。

在操作8610中，进行关于搜索者是否有资格接收人工辅助的搜索培训的判断。通过参考搜索者数据库8682来执行该判断。如果空闲的搜索者没有资格接收人工辅助的搜索培训，则控制移到操作8612，且方法8600继续。

如果在操作8610中确定了搜索者有资格接收人工辅助的搜索培训，则控制移到操作8615，且方法8600继续。

在操作8612中，进行搜索者是否有资格提供人工辅助的搜索培训的判断。如果在操作8612中确定了搜索者没有资格提供人工辅助的搜索培训，则控制转移到操作8605，且方法8600继续。

如果在操作8612中确定了搜索者有资格提供人工辅助的搜索培训，则控制转移到操作8615，且方法8600继续。

在至少一个实施方式中，在操作8610中的判断基于搜索者的等级和/或评分值。例如，如果搜索者达到专家的等级，但对他或她与信息探索者进行的最近5个搜索会话的评分值的平均值低于3.2，则可确定他或她需要从另一专家引导者接收进一步的培训。虽然提供了特定的例子，但基于储存在搜索者数据库中的任何或所有数据的任何一套规则可用于确定搜索者是否有资格接收基于查询的人工辅助的培训。

在操作8612(图27)中对提供人工辅助的培训的搜索者的资格性的判断可基于由系统管理员确定为相关的任何因素。如前面讨论的，搜索者等级和/或评分值可用于判断提供人工辅助的培训的搜索者的资格性。在至少一个实施方式中，对提供人工辅助的培训的搜索者的选择可基于依赖于来自前面的人工辅助的搜索培训会话的搜索者评分值的等级和/或评分值。与提供人工辅助的培训有关的等级和/或评分值可不同于用于向信息探索者提供搜索结果的等级和/或评分值。任何或所有等级和/或评分值可用于选择接收培训的引导者或提供培训的引导者。

例如，搜索者(例如搜索者Bill)对于他或她向用户/信息探索者提供搜索结果的能力可具有专家的等级和4.8的评分值。他或她对于他或她向搜索者提供人工辅助的培训的能力可具有学徒的等级和2.5的评分值。不同的搜索者(例如搜索者Sally)对于他或她向用户/信息探索者提供搜索结果的能力可具有专家的等级和2.5的评分值。他或她对于他或她向搜索者提供人工辅助的培训的能力可具有专家的等级和4.8的评分值。在本例中，在具有向信息探索者提供搜索结果的较高等级和/或评分值的搜索者之前，可选择具有较高人工辅助的培训等级和/或评分值的搜索者(即，搜索者Sally)来提供人工辅助的培训。因此根据与培训活动、与搜索活动或与这些参数的任何组合相关的技能，可选择被选择来提供人工辅助的搜索培训的搜索者。

在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，其它公式和方法可实现来选择搜索者，用于根据这里描述的数据库中的信息提供和接收人工辅助的培训，而不偏离本发明的范围和实质。

如前面讨论的，在搜索系统例如系统1100(图11)中注册的一些搜索者可能没有资格参加主级活动。作为结果，不必判断例如这样的搜索者(例如，学徒搜索者)是否忙碌或空闲。在这种情况下，提供了方法8600的操作8613。在操作8613中，进行关于没有资格参加主级活动的工作人员是否登录到系统1100(图1)的判断。如果确定了这样的工作人员没有登录，则操作8613(图27)继续。

如果确定了仅有资格参加次级活动的搜索者登录到系统，则控制转移到操作8615，且方法8600继续。

在操作8615中，提醒被确定为有资格参加人工辅助的搜索培训的搜索者的消息被发送。这可包括有资格接收人工辅助的搜索培训的搜索者和/或有资格提供交互式人工辅助的搜索培训的搜索者。

在操作8617中，进行关于是否可给搜索者提供拒绝交互式人工辅助的搜索培训会话的选择权的判断。如果确定可给搜索者提供该选择权，则控制转移到操作8620，且方法8600继续。

如果在操作8617中确定了可不给搜索者提供拒绝交互式人工辅助的搜索培训会话的选择权，则控制转移到操作8655，且方法8600继续。

在操作8617中对搜索者是否可拒绝培训会话的判断可基于来自搜索者数据库8682的数据。例如，如果搜索者以前拒绝了参加培训会话，如果自从他或她的上次培训以来经过了很长的时间间隔，或如果搜索者的评分值下降且他或她的等级可能需要更改，则搜索者可能没有资格拒绝搜索培训会话。在至少一个实施方式中，没有搜索者被提供拒绝培训会话的选择权。在另一实施方式中，当大量低等级的引导者有资格并可用于进行培训会话时，可不给被选择来提供培训的专家引导者提供拒绝培训会话的选择权。

在操作8620中，进行关于培训会话是否被搜索者接受的判断。如果确定了搜索者不接受培训会话，则控制转移到操作8605，且方法8600继续。

如果在操作8620中确定了搜索者接受培训会话，则控制转移到操作8655，且方法8600继续。

在操作8655中，对基于搜索查询的培训会话的请求被接收。如下所述，可在交互式和非交互式会话中提供基于搜索查询的培训。接收培训的引导者将不可用于进行主级活动。在操作8655(图27)中，忙碌标志可记录在搜索者数据库8682中，以指示接收培训的搜索者不可用于进行其它活动。

在操作8657中，进行关于会话是否是交互式查询培训的判断。如果在操作8657中确定了会话不是交互式查询培训，则控制转移到操作8625，且方法8600继续。

如果在操作8657中确定了会话是交互式查询培训，则控制转移到图28中示出的方法8700的操作8705。

在操作8625中，搜索查询数据库8680以找到将显示给接收基于查询的培训的搜索者的培训查询。搜索操作8625可基于与搜索者和/或查询相关的不同标准选择培训查询，该标准可包括搜索者等级、搜索者评分值、关键字、类别、标记等。选定的搜索查询从查询数据库8680被检索出来。

例如，在本发明的至少一个实施方式中，如果搜索者有低等级，则将对于低等级搜索者从查询数据库8680中检索出需要相对低水平的搜索技能的相对容易的搜索查询。如果给低等级搜索者显示需要相对高水平的搜索技能的搜索查询，则搜索者可能变得气馁。此外，搜索查询数据库8680以找到与关键字或类别有关或适合于显示给被分配给该关键字和/或类别的搜索者的查询。

为了进一步说明，如果被培训的搜索者有等级“学徒”和3.0的平均评分值，并与类别“音乐＞历史”相关，则从搜索查询数据库8680选择的查询可为“谁是Beatles的鼓手？”，因为该查询与类别“音乐”和子类别“历史”相关。根据例如处理查询的搜索者的等级、查询的使用频率、一组引导者和/或用户的投票或其它因素，该查询可与等级“学徒”相关。

在操作8630中，通过查阅搜索者数据库8682(图29)，进行关于搜索查询以前是否被发送给搜索者的判断。如果在操作8630中确定了查询以前被发送给搜索者，则控制转移到操作8627，且方法8600继续。

如果在操作8630(图27)中确定了查询以前没有被发送给搜索者，则控制转移到操作8636，且方法8600继续。

在操作8627中，进行关于是否同意将以前发送给搜索者的查询发送给搜索者的判断。如果在操作8627中确定了不同意发送以前发送给搜索者的查询，则控制转移到操作8625，且方法8600继续。如果在操作8627中确定了同意将以前发送给搜索者的查询发送给搜索者，则控制转移到操作8636，且方法8600继续。

在操作8636中，搜索查询被发送给接收人工辅助的基于查询的培训的搜索者。基于查询的培训可为交互式或非交互式的，如前所述。

在操作8631中，系统1100(图11)接收由接收培训的搜索者产生的搜索结果。控制转移到操作8633，且方法8600继续。在操作8633中，目标性广告可由接收培训的搜索者选择并由系统1100(图11)接收。

在操作8635中，为接收培训的搜索者创建评分值。各种方法可用来为被培训的搜索者创建评分值。例如，由接收培训的搜索者产生的搜索结果可与以前为查询产生的搜索结果比较。在所公开的方法的至少一个实施方式中，例如，所述比较包括分析由被培训的搜索者产生的搜索结果和以前的搜索结果，以及比较产生结果所需的时间间隔。如果由被培训的搜索者产生了与以前的搜索结果相同的结果，且以前的搜索者产生结果所需的时间间隔小于接收培训的搜索者所需的时间间隔，则可做出接收培训的搜索者的评分值应不等于产生以前的搜索结果的搜索者的评分值的判定。作为可选的例子，由接收培训的搜索者产生的结果可在培训会话期间和/或在培训会话结束之后由搜索者评定。如果由接收培训的搜索者产生的结果被评定为高于以前的搜索结果，则接收培训的搜索者可被评分(或评级)为高于产生以前的搜索结果的搜索者。在至少一个实施方式中，由接收培训的搜索者产生的搜索结果可与具有与接收培训的搜索者相同或更低的等级的搜索者所产生的搜索结果比较。

例如，在所公开的方法的至少一个实施方式中，比较可包括分析两组搜索结果(以前提供的搜索结果和由被培训的搜索者产生的搜索结果)，以及比较包括在搜索结果中的资源的数量和/或资源的完全性。从一个或多个权威性资源得到的结果可被评定为高于从其它资源得到的结果。

在使用这里的公开介绍之后，相关领域中的普通技术人员应认识到，在搜索结果的评定中可利用其它因素，而不偏离本公开的实质和范围。

如果基于查询的培训是交互式培训会话，则提供培训的引导者能够观看由接收培训的引导者发送到系统1100(图11)的搜索结果。搜索结果可显示在GUI例如GUI8502(图17)中。提供培训的引导者可使用聊天界面8505来与接收培训的引导者交互。以这种方式，提供培训的搜索者可就找出可能对被搜索的主题有用的最佳搜索结果和资源的方法来交互式地帮助接收培训的搜索者，以及以其他方式帮助接收培训的搜索者提高他/她的能力。

在所公开的方法的至少一个实施方式中，在操作8633(图27)中，接收培训的搜索者可将广告发送到系统和/或提供培训的搜索者，例如以模仿在主级活动期间将广告发送给信息探索者的搜索者，如在本文其它地方描述的。可在搜索者接收到培训查询之后发送广告。当搜索继续进行时，和/或当搜索者以搜索结果回答查询时，广告可用来显示给信息探索者。不管广告可何时被发送，被培训的搜索者都可被显示给广告的库或可从广告的库进行选择，这些广告以前例如由更有经验的搜索者发送给信息探索者。

在被培训的搜索者选择了广告之后，被选择的广告可与“正确”的广告，即，以前由更有经验的搜索者发送给信息探索者的广告比较。

例如，如果查询是“谁赢得2005年的国家篮球协会(NBA)锦标赛比赛”(“who won the National Basketball Association(NBA)championshipgame in 2005”)，则学徒水平的搜索者能够从包括与关键字″tickets for salefor NBA games″、″NBA championship team memorabilia″和″NBA clothing″相关的广告的广告中选择。以前向信息探索者提供广告的专家水平的引导者可响应于查询而选择″NBA championship team memorabilia″，以发送给信息探索者。在所公开的方法的至少一个实施方式中，进行对被培训的引导者的广告选择和以前响应于查询被发送的广告(例如，以前由专家水平的引导者选择的广告)之间的比较。该比较可用于确定被培训的引导者是否选择了与查询相关的适当的广告。

继续上面的例子，如果被培训的引导者选择包括″tickets for sale forNBA games″的广告，则系统可将被培训的引导者选择的广告评定为其相关度小于专家以前进行的广告选择。在这样的例子中，在所公开的方法的至少一个实施方式中，系统可提示被培训的引导者选择另一广告或额外的广告，尝试选择更相关的广告。在所公开的方法的至少一个实施方式中，系统可允许提供培训的引导者发送第二选择的广告，并根据他或她的广告选择评定被培训的引导者。用于评定被培训的引导者的表现的标准可包括选定广告的相关性、选择广告所需的时间间隔等。

如同搜索结果一样，如果查询培训会话是交互式培训会话，则由被培训的搜索者发送的广告可显示在GUI例如GUI8502(图17)中。提供培训的搜索者可使用聊天界面8505来与接收培训的引导者进行交互。提供培训的引导者能够提供建议并提高被培训的引导者选择与搜索查询和/或搜索结果相关的广告的能力。

在操作8635(图27)中，可给被培训的搜索者指定对培训会话的等级或评分值。在至少一个实施方式中，给接收培训的搜索者指定字母等级例如“A”、“B”、“C”、“D”或“F”。可选地，可给搜索者的表现指定例如“生手表现”或“熟练搜索者”的等级。除了等级以外，在所公开的方法的至少一个实施方式中，还可给搜索者提供关于搜索者在培训会话期间的表现的反馈。例如，可向搜索者提出关于为什么他或她接收到他或她所接收的等级和/或搜索者可如何提高他或她的表现的建议。

如果基于查询的培训会话是交互式会话，则提供培训的引导者可提供接收培训的引导者的表现的任何或所有方面的评分值。这可使用GUI8402(图16)或可包括技能的更详细的评估清单的其它界面来执行。在交互式查询会话中接收培训的引导者还能够评定提供培训的搜索者的表现。可使用界面例如GUI8502(图17)，或可提供更复杂的界面来允许接收培训的引导者对提供培训的引导者的不同技能作评论。

在操作8640(图27)中，在搜索者数据库8682(图29)中对于被培训的搜索者和/或提供培训的搜索者将培训查询标记为完成的。例如，在所公开的方法的至少一个实施方式中，一条目被记录在搜索者数据库8682中，以指示搜索者完成了培训查询。操作8640(图27)可包括将评分值、搜索结果、广告、聊天会话历史、以及关于接收培训的搜索者和/或提供培训的搜索者的其它信息记录在搜索者数据库8682和/或查询数据库8680中。控制转移到操作8645，且方法8600继续。

在操作8645中，根据来自基于查询的搜索培训会话的信息，进行关于搜索者的等级是否需要更改的判断。如果确定需要改变等级，则控制转移到操作8650，且方法8600继续。

如果在操作8645中确定了不需要改变等级，则搜索者数据库8682中的忙碌/空闲指示符对培训会话中的搜索者设置为空闲的，以指示搜索者可用于进行主级或次级活动，控制转移到操作8605，且方法8600继续。

在操作8650中，执行等级的改变，如关于图14A-14C所示的。以参加查询培训会话的搜索者的新等级更新搜索者数据库8682。搜索者数据库8682中的忙碌/空闲指示符对培训会话中的搜索者设置为空闲的，以指示搜索者可用于进行主级或次级活动，控制转移到操作8605，且方法8600继续。

在图28所示的实施方式中，提供了方法8700。可选的实施方式提供了基于查询的培训，其包括利用选定的搜索者来提供培训的交互式培训。

如果在方法8600(图27)的操作8657中进行会话被确定为是交互式培训，则提供图28的方法8700。在操作8705(图28)中进行关于有资格提供培训的搜索者是否可用的判断，如以前关于方法8600的操作8612描述的。如果确定了有资格提供培训的搜索者不可用，则控制转移到图27所示的方法8600的操作8625。

在操作8705(图28)中，如果确定了有资格提供培训的搜索者可用，则搜索者数据库8682被更新，以反映提供培训的搜索者不可用于进行活动，且其它数据，例如会话已开始的时间、被培训的搜索者的标识等被记录在搜索者数据库8682中。

提供培训的引导者可审查被选择来接收培训的搜索者的关键字和/或类别。例如，被培训的搜索者可能被分配了关键字″NCAA Basketball″和″amateur basket weaving″。在这样的例子中，提供培训的引导者可确定给被培训的搜索者分配关键字″NCAA Basketball″。在所公开的方法的至少一个实施方式中，提供培训的引导者可确定接收培训的搜索者将被培训的类别和/或关键字。例如，虽然待培训的搜索者(例如学徒)可能被分配了关键字″NCAA Basketball″和″amateur basket weaving″，提供培训的引导者可确定他或她将提供关于关键字″NCAA Hockey″的培训。

在操作8707中，给被培训的引导者提供对提供培训的引导者所选择的关键字、类别等的培训拒绝的选择权。如果被培训的引导者对提供培训的引导者所选择的关键字、类别等拒绝被培训，则控制转移到操作8750，且方法8600继续。

在操作8750中，培训会话终止，更新搜索者数据库8682，以反映提供培训的搜索者和接收培训的搜索者可用于进行活动，且控制转移到图27所示的方法8600的操作8605。

如果在操作8707中，被培训的引导者对提供培训的引导者所选择的关键字、类别或项目等不拒绝被培训，则控制转移到操作8710，且方法8600继续。

在可选的实施方式中，可给接收培训的搜索者关于他或她将接收培训的关键字或类别等的选择权。相应地，可给提供培训的引导者提供拒绝在方法8700的操作8708中提供培训的选择权，且根据提供培训的引导者的选择来转移控制。

在操作8710(图28)中，提供培训的引导者可审查来自查询数据库8680的查询和/或搜索结果，以找出与被培训的搜索者所分配的和/或培训将对其所进行的关键字和/或类别相应的查询和/或搜索结果。例如，在所公开的方法的至少一个实施方式中，如果给被培训的搜索者分配关键字″NCAA Basketball″，则提供培训的搜索者搜索查询数据库8680，以找出适合于培训被分配了关键字″NCAA Basketball″的搜索者的搜索查询。

在操作8715(图28)中，给提供培训的引导者提供关于他或她是否愿意从查询数据库8680选择查询和/或搜索结果的选择权。提供培训的引导者可选择特定的搜索结果，例如，他或她认为在给接收培训的引导者的表现评级或评分中使用起来最正确的结果，或对被培训的搜索者是最有用的培训练习的结果。

如果提供培训的引导者决定从查询数据库8680选择搜索查询和/或搜索结果，则控制移到操作8725，且他或她将选定的搜索查询发送给被培训的搜索者。接着方法8700继续，且控制移到方法8600(图27)的操作8631。

在审查了查询数据库8680中的查询和/或搜索结果之后，提供培训的引导者可决定不从数据库选择查询和/或搜索结果。例如，他或她可能认为数据库中特定的搜索查询太难而不能被具有接受培训的搜索者的技能水平的搜索者回复。在这样的例子中，在方法8700的操作8720中，提供培训的引导者可编写他或她自己的搜索查询，执行搜索，并将查询和/或相应于查询的搜索结果储存在数据库8680中。执行搜索允许系统对可最终由被培训的搜索者产生的搜索结果与由提供培训的搜索者产生的搜索结果进行比较。例如将查询和/或搜索结果储存在数据库8680中可有利地允许查询数据库8680以额外的搜索查询和相应的搜索结果来扩展。方法8700(图28)继续，且控制移到操作8725。

在提供培训的搜索者将搜索查询和/或搜索结果储存在数据库8680中之后，选定的查询在操作8725中被发送给被培训的引导者。方法8700继续且控制移到方法8600(图27)的操作8631。

在图28所示的实施方式中，提供培训的搜索人员能够选择查询、搜索结果、可能与查询和/或搜索结果相关的广告等，并将该信息发送给接收培训的搜索人员。提供培训的搜索者可使用在本文其它地方描述的界面与接收培训的搜索人员进行交互。

提供培训的搜索者在方法8700中进行的任何或所有选择都可被系统1100(图11)可选地执行。在至少一个实施方式中，方法8700中的所有操作由系统1100执行。

如图29所示，根据所公开的方法的至少一个实施方式，搜索者数据库8682可包括与被培训的搜索者有关的字段。在使用这里的公开介绍之后，相关领域中的普通技术人员应认识到，其它字段可包括在数据库中。还应注意，搜索者数据库8682可为用于帮助实现所公开的系统和方法的任何类型的可行数据库，例如关系数据库。

搜索者标识(ID)字段8805可包括用于识别被培训的搜索者例如学徒、职业人员或专家的搜索者标识符字段。可选地，搜索者状态可储存在搜索者数据库8682中分开的字段中，或可作为等级评定字段8820的一部分被包括，如下所述。搜索者标识字段8805还可包括搜索者的网址、搜索者的名字、电话号码等，允许专家联系搜索者来提供直接的反馈。在数据库的至少一个实施方式中，搜索者标识字段8805可包括由随机数字生成器产生的随机数字。

忙碌/空闲字段8810可包括一状态，其指示相应的搜索者是否忙于主级活动2115(图12)，即，回复来自信息探索者的信息搜索查询。例如，在至少一个实施方式中，忙碌/空闲字段8810是标志字段，其包括指示搜索者空闲的“真”值和指示搜索者不空闲的“假”值。在所公开的系统和方法的至少一个实施方式中，忙碌/空闲字段8810可有助于允许系统确定有资格培训的引导者。当搜索者接受了搜索时，可更新该字段8810。

类别/关键字字段8815可包括给搜索者分配的关键字和类别的名称。例如，在所公开的搜索者数据库8682的至少一个实施方式中，该字段可包括值“NCAA Basketball”，以指示特定搜索者被分配了关键字“NCAABasketball”。

等级评定字段8820可包括对特定搜索者的等级例如“职业人员”的指示。作为另一例子，等级评定字段8820可包括指示该字段所相应的搜索者的评分值的数字。例如，通过将“T1”的值包括在搜索者等级评定字段8820中，可指定被列为系统中最佳学徒搜索者的学徒搜索者。该值可指示搜索者是排列第一(1)的学徒搜索者(T)。类似地，通过将“V3”的值包括在搜索者等级评定字段8820中，可指定被列为系统中第三名最佳专家搜索者的专家搜索者。该值将指示搜索者是排列第三(3)的专家(V)。在使用这里的公开介绍之后，相关领域的普通技术人员应认识到，可利用其它评级规定，而不偏离本发明的范围和实质。

例如，所公开的系统和方法可使用全局评级系统。在这样的方案中，等级评定字段8820可包括指示该字段所相应的特定搜索者的总等级评定的数值。例如，“155”的值指示职业人员搜索者是包括专家、职业人员和学徒搜索者的所有搜索者中的第155名最佳搜索者。

提供过的培训查询(TQP)字段8825可包括以前为特定的搜索者提供过的培训查询的列表。字段8825可有助于确定特定的培训搜索查询以前是否被显示给搜索者，以防止搜索者接收相同的培训查询，如上面在相应于图27的文字中描述的。

在所公开的系统和方法的至少一个实施方式中，搜索者数据库8682包括具有合格等级的培训查询字段8830。具有合格等级的培训查询字段8830(图29)包括搜索者接收了被认为是“合格”的等级的培训查询。该字段可帮助例如向学徒搜索者提供培训的专家搜索者确定学徒最需要培训哪些类型的查询来提高他或她的表现。

等级字段8835可包括搜索者所执行的最后一个培训查询的等级。在至少一个实施方式中，等级字段8835相应于以前显示给搜索者的特定的培训查询(例如，如在提供过的培训查询字段8825中指定的)，并为特定的相应表现指定等级。

改进领域/评论字段8840可包括指定特定的搜索者需要改进的领域或关键字/类别的文本，以允许为搜索者记录反馈。在所公开的系统和方法的至少一个实施方式中，包括在搜索者的表现等级评定中的因素被指定为需要改进的领域。例如，如果特定的学徒搜索者需要改进(缩短)用于产生搜索结果的时间的长度，则改进领域/评论字段8840可用关于搜索者可如何改进因素的建议的评论来指定特定的因素。

如图30所示，查询数据库8680包括查询字段8905。查询字段8905包括以前例如由更有经验的搜索者提供了搜索结果的查询。

搜索结果字段8910包括相应于查询字段8905中的以前提供的查询的搜索结果。

适合于查询的搜索者等级评定字段8915包括关于特定查询所适合的等级评定水平的指示。例如，如果查询是相对难的查询，则该字段指示查询最适合于培训优秀搜索者和/或有经验的搜索者。类似地，如果查询是相对容易的查询，则适合于查询的搜索者等级评定字段8915指示查询最适合于培训不佳和/或没有经验的搜索者。在至少一个实施方式中，该字段指示查询最适合的类别和/或关键字。与关于过去几年中大学篮球锦标赛队的信息有关的查询在适合于查询的搜索者等级评定字段8915中可包括“NCAA Basketball”，以指定培训查询是提供给被分配了关键字“NCAABasketball”的搜索者的适当查询。应注意，在所公开的系统和方法的至少一个实施方式中，这样的指示可储存在分开的字段例如适当的类别/关键字字段中。不管怎样，这样的指示可例如帮助专家搜索者从查询数据库8680选择搜索查询。

对查询的可能广告字段8920可包括可能与特定的查询有关的广告，作为培训的一部分，被培训的搜索者可从这些广告中选择。对“正确”答案中的查询的广告字段8925包括实际上与查询结果一起被发送并被认为是“正确”广告的广告，如在相应于图27的文字中描述的。

如所示，例如在图31中，系统81000的一个实施方式包括搜索者计算机系统81005、网络81010例如互联网、学徒计算机系统81015、搜索系统81020和数据库，例如搜索者数据库8682和查询数据库8680。

搜索者计算机系统81005可由例如专家搜索者操作，以向较不熟练的搜索者提供培训。特别是，专家搜索者可使用搜索者计算机系统81005来选择搜索查询或通过网络81010将搜索查询发送到搜索系统81020，以允许学徒计算机系统81015接收培训查询，学徒搜索者将为该培训查询提供搜索结果。

学徒计算机系统81015可由例如学徒搜索者操作，以参加培训。特别是，学徒搜索者可使用学徒计算机系统81015来执行搜索，并通过网络81010将对所接收的搜索查询的结果发送到搜索系统81020。

由于来自搜索者计算机系统81005的发送和来自学徒计算机系统81015的发送都到达搜索系统81020，搜索系统81020允许交互出现在搜索者计算机系统81005和学徒计算机系统81015之间，这两个系统都可在搜索系统81020中检索期望的结果，如在以前在这里确认的有关应用中讨论的。

例如，培训搜索查询从搜索者计算机系统81005发送到搜索系统81020，其中该查询由学徒计算机系统81015访问。类似地，响应于搜索者计算机系统81005所产生的搜索查询而使用学徒计算机系统81015产生的搜索结果被发送到搜索系统81020，其中它们可由搜索者计算机系统81005访问。

在使用这里的公开介绍之后，相关领域中的普通技术人员应容易认识到，计算机系统可为本领域中已知的任何类型的可行计算机系统，例如

计算机系统。

系统81000的至少一个实施方式包括搜索者数据库8682和查询数据库8680，其包括用于执行根据这里在上面提供的描述的且如下文中被要求权利的所公开的系统和方法的信息。

参考图32，优先级配置5200描述了用于管理次级活动(2120(图12))的优先级配置表，这些次级活动包括在根据所公开的系统和方法的至少一个实施方式的系统中。

优先级配置表5200包括次级活动ID字段5205、次级活动优先级字段5210、次级活动百分比字段5215和次级活动目标字段5220。

次级活动ID字段5205可包括识别次级活动的信息。次级活动ID字段的内容可包括次级活动的名称、次级活动的唯一标识符和其它信息。

次级活动优先级字段5210可包括识别次级活动的优先级的信息。次级活动优先级字段的内容可包括指示次级活动的优先级的数字、次级活动的优先级水平的名称等。次级活动优先级字段的内容可用于确定是否将次级活动提供给引导者。

次级活动百分比字段5215可包括记录进行次级活动的引导者所登录的时间的百分比、引导者在次级活动中所花费的时间段、引导者的次级活动会话的数量的计数、和/或引导者的次级活动会话的总数量等的信息。次级活动百分比字段的内容可用于跟踪引导者所进行的次级活动的量。

次级活动目标字段5220可包括识别进行次级活动的引导者所登录的时间的目标百分比、引导者在任何次级活动中所花费的目标时间段、引导者的次级活动会话的数量的目标计数、和/或引导者的次级活动会话的目标总数量等的信息。次级活动目标字段的内容可用于记录引导者所进行的次级活动的目标量。

次级活动是可由未进行主级活动的引导者进行的活动(即，信息探索者搜索查询)。

次级活动可包括但不限于，接收音频/视频培训、接收基于查询的培训、轮询、审查搜索结果、翻译、转录等。

如图32所示，多个次级活动可具有相同的优先级水平。例如，次级活动A5225可为交互式查询培训，而次级活动B5230可为视频培训。在主级活动是搜索的系统中，作为次级活动的视频培训和交互式查询培训可向引导者教导搜索策略。在这样的配置中，虽然次级活动A5225(例如视频培训)和次级活动B5230(例如交互式查询培训)可最初具有相同的次级活动优先级5210(例如，“第一”)，次级活动B(例如视频培训)可仅在由于缺乏有经验的引导者而导致次级活动A(例如交互式查询培训)不可能进行时才发生。

作为结果，在与次级活动A5225相关的次级活动百分比字段5215中所记录的引导者在次级活动A5225中所花费的时间的百分比可能超过在与次级活动A5225相关的次级活动目标字段5220中所记录的次级活动目标(例如“35”)。在本例中，与次级活动A5225相关的优先级水平字段5210可改变为较低的优先级水平(例如“第二”)，使得与次级活动B相关的次级活动的百分比增加。例如，如果查询培训百分比为50％且视频培训为25％时，引导者在被提供交互式查询培训之前可被优先提供视频培训。通过调节优先级水平，优先级水平可随着时间的过去被平衡到目标值。

如上所述，次级活动A5225和次级活动B5230可能由于任何原因而不可利用，即使与这些次级活动相关的优先级水平高于与次级活动C5235相关的优先级水平。为了防止无聊，增加引导者满意，提供可选择的收入等，次级活动C5235可被提供给引导者，即使与次级活动C5235相关的次级活动百分比字段5215高于与次级活动C5235相关的次级活动目标字段5220。作为结果，与次级活动C5235相关的次级活动优先级字段5210可能被降低(例如，从“第二”到“第三”)，以降低为引导者选择次级活动C5235的优先级。如果与次级活动D5240相关的次级活动百分比字段5215低于与次级活动D5240相关的次级活动目标字段5220，则次级活动C5240的优先级可增加(例如，从“第三”到“第二”)。

如关于图33进一步描述的，如果引导者变得可用于进行次级活动，则系统1100(图11)可根据与次级活动相关的次级活动优先级水平字段5210给引导者提供次级活动。次级活动可具有相同的优先级水平(例如，“第一”可能与次级活动A5220和次级活动B5225相关)。如果这两个活动对引导者是可利用的，则它们具有等同的可能性来被提供给可用于进行次级活动的引导者。

因为次级活动可能由于任何原因而对引导者是不可利用的，例如有资格培训的引导者的无空性、有资格提供培训的引导者的无空性、适当的视频培训的不可用性、用于审查的搜索结果的不可用性、轮询请求的不可用性，等等。这里描述的方法和系统可允许系统1100(图11)逐步平衡在次级活动中所花费的百分比时间，以达到目标。

随着时间的过去，系统可根据由优先级配置5200(图32)建立的优先级水平和次级活动时间的目标百分比来优先给引导者提供次级活动。因为引导者所进行的次级活动的时间和/或数量的记录保存在搜索者数据库8682中，所以系统可能通过改变与次级活动相关的优先级水平来平衡次级活动。

关于管理单个引导者的次级活动描述了次级任务优先级配置5200。但本方法不限于这种简单的情况。次级任务优先级配置可与单个引导者、具有等级的一组引导者、与类别相关的一组引导者等关联。在系统中可用的任何次级活动可与次级任务优先级配置相关，相关的次级任务目标可同样如此。

例如，具有高培训者评分值的专家水平的引导者可与次级活动“提供查询培训”关联，且次级活动时间的目标为80％，并与次级活动“审查搜索结果”关联，且次级活动时间的目标为20％。相反，具有高培训评分值的学徒水平的引导者可与次级活动“接收查询培训”、次级活动“音频/视频培训”和次级活动“轮询”相关，且次级活动的目标分别为50％、20％以及30％。以这种方式，可更改和调节引导者、引导者组等的次级活动水平，以便例如根据技能水平最优化引导者的使用，最小化与培训相关的费用，满足对转录服务的要求的突然增加，等等。

例如，如果搜索系统提供对引导者的交互式查询培训、转录服务和轮询服务作为引导者的次级活动，则系统的管理员可最初将交互式查询培训的优先级水平设置为“第一”，将转录服务和轮询服务的优先级水平分别设置为“第二”和“第三”。这将使系统将培训引导者作为第一优先级，以便例如增加对主题可用的熟练引导者的数量。系统可对活动“交互式培训”将优先级配置5200中的次级活动目标字段5220设置为目标“小于来自转录和轮询的总收入加上100美元”。如果没有收入从次级活动产生，且“交互式培训”的费用超过“100美元”，则与交互式培训相关的优先级水平可降低到“第三”，且与产生收入的活动(即，转录和轮询活动)相关的优先级可增加，直到引导者参加产生收入的活动。以这种方式，目标(例如，费用与收入之差)可由系统管理员以自动方式调节，以满足在目标字段中标识的目标，该目标可基于由来自数据库156(图2)的信息而确定的值。系统管理员因此不需要调节次级任务的优先级，而是调节目标，以便产生期望的结果。

作为另一例子，搜索系统可为引导者提供基于视频的培训和语言翻译作为次级活动。在这种情况下，基于视频的培训可能需要每次特许使用费，且语言培训可为产生收入的活动。如果与基于视频的培训相关的费用超过储存在优先级配置5200中的次级活动目标字段5220中的值(例如$100)，则视频培训活动可由系统管理员从优先级配置移除，直到诸如对消费者的转录任务的积累量(backlog)等度量满足储存在与语言翻译次级活动相关的次级活动字段中的目标为止。

相关领域中的普通技术人员容易想到优先级水平的条件和相关性的其它组合。

虽然使用由引导者进行次级活动所花费的时间的百分比说明了次级活动优先级概要、方法和系统，相关领域中的普通技术人员容易想到，可使用其它目标，例如次级活动会话的数量、次级活动会话的百分比等。

如图33所示，提供了管理提供者的次级活动的方法5300。在操作5305中，进行关于提供者是否进行主级活动的判断。如果提供者进行主级活动，则控制保持在操作5305，且方法5300继续，以等待提供者完成进行主级活动，例如回答来自信息探索者的信息搜索查询。

如果在操作5305中确定了提供者未在进行主级活动，则控制转移到操作5310，且方法5300继续。

在操作5310中，进行关于提供者是否可用于进行次级活动的判断。可根据所有提供者的条件进行判断，或基于与提供者相关的信息(例如关键字、水平、评分值等)，条件可能不同。如果主级活动是搜索者回答查询，则例如系统可确定引导者在所规定的时间段内空闲的百分比。例如，如果系统中50％的引导者在至少10分钟内没有回复搜索查询，则在操作5310中可确定提供者可用于进行次级活动。如果在操作5310中确定了提供者不可用于进行次级活动，则控制保持在操作5310，且方法5300继续，以确定提供者是否可用于进行次级活动。

如果在操作5310中确定了提供者可用于进行次级活动，则控制转移到操作5315，且方法5300继续。

在操作5315中，次级活动由可用的提供者进行。根据与提供者相关的优先级配置表来为提供者选择次级活动，如上所述。控制转移到操作5320，且方法5300继续。

在操作5320中，进行关于提供者是否完成次级活动的判断。如果提供者没有完成次级活动，则控制保持在操作5320，且方法5300继续，以判断提供者是否已完成次级活动。

如果在操作5320(图33)中确定了提供者已完成次级活动，则控制转移到操作5305，且方法5300继续。

在操作5320中的判断可基于与搜索者和/或活动相关的任何信息。在至少一个实施方式中，系统1100(图11)可确定搜索者/引导者需要回答来自信息探索者(或用户)的搜索查询(或请求)(即，主级活动)。在这种情况下，次级活动可被确定为完成的，而不考虑其它标准(例如，视频观看的完成、培训搜索的完成等)。同样，可基于与提供者相关的任何信息(例如水平、类别、评分值、QKW、标记等)确定次级活动的完成标准。

可以各种方式使用方法5300。例如，提供“基于交互式查询的培训”的对类别“运动”的专家水平的引导者可根据“完成的指示符”完成标准来结束次级活动(即，作为培训者参加培训会话)。次级活动的完成标准可包括一个或多个标准的组合。例如，培训会话可通过“培训者退出”条件和/或“由受训者评分完成”条件来完成。

如图34所示，在所公开的系统的至少一个实施方式中，提供了系统5400。系统5400包括搜索者计算机系统5405、网络5410例如互联网、搜索系统5420、信息探索者计算机系统5425和用于管理次级活动的引擎5427。

信息探索者计算机系统5425可由信息探索者操作以向搜索系统5420提交信息搜索查询，从而允许例如由操作搜索者计算机系统5405的搜索者返回搜索结果。

搜索者计算机系统5405可由搜索者操作，例如以回答由信息探索者提交的信息搜索查询。特别是，搜索者可响应于搜索查询使用搜索者计算机系统5405通过网络5410将搜索结果提交到搜索系统5420，以允许信息探索者计算机系统5425接收搜索结果。

如这里所述，数据库可用于使各种类型的项目(例如关键字、类别，用户、引导者、广告、文件的标识符等)关联以形成组。例如，可使一个或多个关键字关联以形成类别，可使一个或多个引导者的一个或多个标识符关联以形成引导者的类(例如“学徒”、“职业人员”、“生手”等)。根据关联性可识别组的成员。接着组可与其它信息关联，例如状态表、次级活动列表等，次级活动列表可用于对组的每个成员采取行动。

搜索系统5420(图34)可由本发明的提供者提供并用作系统5400的“大脑”。搜索系统5420还可用作信息探索者计算机系统5425和搜索者计算机系统5405的接口，以允许搜索人员进行信息搜索，如在本文其它地方描述的。搜索系统5420可控制用于管理次级活动的引擎5427。用于管理次级活动的引擎5427使用这里描述的方法确定次级活动是否应发生以及次级活动应发生的顺序和优先级。

应注意，虽然在支薪金的搜索者环境的背景下描述了本发明，但本发明也可在搜索者是无报酬的环境下实现，即，搜索者自愿提供其服务的环境。

在使用这里的公开介绍之后，相关领域中的普通技术人员应认识到，本公开可以用软件、固件和/或其组合实现。使用任何可行的编程语言例如C、C++或任何其它可行的高级编程语言、或这样的高级编程语言和低级编程语言例如汇编程序的组合、或任何前述内容或其等效形式的组合可实现根据本公开的程序代码。本公开的实施方式的某些方面可使用嵌入式脚本语言例如来实现，且优选以Ruby来实现。

本公开还可以为被编码有用于控制计算机根据本公开的实施方式实现这里描述的方法的处理指令的计算机可读介质的形式。

本公开不应限于这里描述的实施方式。在使用这里的公开介绍之后，相关领域中的普通技术人员应认识到，可对所公开的实施方式进行改变，而不偏离本公开的实质和范围。

Claims (21)

1.一种方法，包括：

确定引导者是否空闲；以及

通过培训材料培训空闲的引导者。

2.如权利要求1所述的方法，其中所述培训步骤包括多媒体培训。

3.如权利要求2所述的方法，其中所述多媒体培训包括交互式培训材料，所述交互式培训材料包括脚本和应用程序。

4.如权利要求1所述的方法，其中所述培训材料包括视频和/或音频培训材料。

5.如权利要求1所述的方法，进一步包括，当所述引导者作为学徒引导者登录时，在所述培训步骤之前，通过弹出窗口发送消息以提醒所述引导者参加培训。

6.如权利要求1所述的方法，进一步包括，当所述引导者是职业人员引导者时，在所述培训步骤之前，发送消息，以提醒所述空闲的引导者参加培训。

7.如权利要求6所述的方法，进一步包括，在所述发送步骤之后，确定所述空闲的引导者是否接受所述消息中的培训建议。

8.如权利要求7所述的方法，其中在所述空闲的引导者接受所述培训建议之后，搜索培训材料，所述培训材料与所述空闲的引导者被分配的关键字和/或类别有关，并适合于所述空闲的引导者的等级评定。

9.如权利要求8所述的方法，进一步包括，在所述搜索步骤导致找出视频后，确定所述视频是否以前在根据所述搜索找出所述视频之后被发送给所述空闲的引导者。

10.如权利要求9所述的方法，其中所述培训步骤包括在根据所述搜索找出视频之后，当所述空闲的引导者选择在线执行所述视频时向所述空闲的引导者显示所述视频。

11.如权利要求1所述的方法，其中所述培训步骤包括当所述空闲的引导者希望网络广播时，给所述空闲的引导者提供下载视频的机会。

12.如权利要求1所述的方法，进一步包括，在所述培训步骤之后，提示所述空闲的引导者输入关于所述培训材料的视频评分值和评论。

13.如权利要求1所述的方法，其中所述培训材料由空闲的引导者为其他引导者产生。

14.如权利要求12所述的方法，进一步包括，在所述提示步骤之后，将所述视频评分值和所述评论输入视频数据库中。

15.如权利要求14所述的方法，进一步包括对于所述空闲的引导者将视频培训标记为完成的。

16.如权利要求15所述的方法，进一步包括在所述标记步骤之后更新培训日志。

17.一种计算机可读存储器，其用于控制计算机，所述计算机可读存储器包括引导者数据库，所述引导者数据库包括：

引导者标识字段；

引导者忙碌状态字段；以及

提供过的培训视频字段。

18.一种计算机可读存储器，其用于控制计算机，所述计算机可读存储器包括视频培训数据库，所述视频培训数据库包括：

视频字段；以及

评论/视频评分值字段。

19.一种系统，包括：

引导者计算机系统，其用于通过视频源或音频源提供培训；以及

搜索计算机系统，其用于控制与所述培训有关的操作，所述搜索计算机系统通信地与引导者数据库和视频数据库连接，并通过网络通信地连接到所述引导者计算机系统。

20.一种方法，包括：

查阅引导者数据库来监控引导者的忙碌状态；

当所述引导者空闲时，确定所述引导者是否是职业人员引导者；

确定学徒引导者是否登录；

确定来自专家引导者的培训请求是否被接收到；

用消息提醒待被提供培训的引导者参加视频培训；

搜索视频数据库或视频，以获得适合于引导者等级评定和分配给所述引导者的关键字或类别的视频；

当所述引导者希望参加视频培训或被选择来参加视频培训时，将视频源发送到所述引导者；

提示所述引导者输入关于所述视频的视频评分值和评论；

将评论和评分值输入到视频数据库中；

对所述引导者将视频培训标记为完成的；以及

更新所述引导者的培训日志以反映视频培训时间。

21.一种系统，包括：

引导者计算机系统，其用于通过视频源或音频源提供培训；

搜索计算机系统，其用于控制与所述培训有关的操作，所述搜索计算机系统通信地与引导者数据库和视频数据库连接，并通过网络通信地连接到所述引导者计算机系统，

其中所述搜索计算机系统：

查阅所述引导者数据库来监控引导者的忙碌状态；

确定空闲的引导者是否是职业人员引导者；

确定学徒引导者是否登录；

确定来自专家引导者的培训请求是否被接收到；

用消息提醒待被提供培训的引导者参加视频培训；

搜索视频数据库，以获得适合于引导者等级评定和分配给所述引导者的关键字或类别的视频；

当所述引导者希望参加视频培训或被选择来参加视频培训时，将视频源发送到所述引导者；

提示所述引导者输入关于所述视频的视频评分值和评论；

将评论和评分值输入到视频数据库中；

对所述引导者将视频培训标记为完成的；以及

更新所述引导者的培训日志以反映视频培训时间。

Images