CN111226245A

CN111226245A - 基于计算机的用于分析协定的学习系统

Info

Publication number: CN111226245A
Application number: CN201880067446.2A
Authority: CN
Inventors: A.N.奥布莱恩
Original assignee: ISMS Solutions LLC
Current assignee: ISMS Solutions LLC
Priority date: 2017-08-18
Filing date: 2018-08-17
Publication date: 2020-06-02
Also published as: WO2019036040A1; CA3073199A1; US20210035117A1

Abstract

所描述的系统可以包含一个或多个基于处理器的模块，这些模块试图将验证供应商符合相关要求的过程进行自动化。

Description

基于计算机的用于分析协定的学习系统

相关申请的交叉引用

本申请要求2017年8月18日提交的第62/547,561号美国临时申请的优先权，其公开内容通过引用并入本文。

背景技术

不需要供应商的商业很少存在。供应商和客户之间的关系通常由合同管控。合同通常是具有各种格式的密集文档，并且使用很难理解的法律术语来书写。此外，消费者通常想要确保供应商遵循所要求的协议，所要求的协议通常是由文档支持的。例如，如果消费者想要符合认证组织，则公司使用的供应商也不得不证明符合认证要求。尝试验证供应商遵循所要求的协议或要求是一项重大挑战，因为收集用于验证的文书并实际阅读文书需要大量的时间和精力。

发明内容

以下呈现了本公开的简化的概要，以便提供对本公开的一些方面的基本理解。该概要不是一个广泛的概述。其并不旨在标识本公开的关键或重要元素或描绘本公开的范围。以下概要仅仅以简化的形式呈现一些概念，作为下面提供的更详细描述的序言。

所描述的系统可以包含一个或多个基于处理器的模块，这些模块试图将验证供应商符合相关要求的过程进行自动化。系统可以将自我评估请求传送(communicate)给供应商，并且系统可以从供应商接收自我评估响应。响应于被确定为可接受的自我评估，系统可以确定供应商是否应接受随机审核。响应于随机审核被确定为应接受，随机审核可以开始，其可以需要接收合同、审阅合同、记录异常和更新消费者用户仪表板(dashboard)。响应于随机审核未被确定为应接受，可以更新消费者用户仪表板。自我评估是否被确定为可接受的可以采取各种形式。在一些实施例中，可以使用简单的单词比较。逻辑上，所述确定可以更加复杂，并且系统可以从过去的合同中学习以更好地理解未来的合同是否符合相关要求。

附图说明

当结合附图考虑时，通过参考详细描述，可以更好地理解本发明。附图中的组件不一定是按比例的，相反，重点在于说明本发明的原理。在附图中，相似的附图标记在不同的视图中表示相应的部分。

图1是根据本申请的权利要求的系统流程的高层级图示；

图2是系统的首次用户的样本块的图示；

图2a是消费者的开始页面的图示；

图2b是供应商的授权协定页面的图示；

图2c是消费者的创建账户用户界面的图示；

图2d是添加消费者信息的用户界面的图示；

图2e是添加供应商的用户界面的图示；

图3是系统的回归用户(returning user)的样本块的图示；

图3a是回归消费者的登录页面的图示；

图3b是成功登录之后的回归消费者的仪表板的图示；

图3c是用于查看公司信息的用户界面的图示；

图3d是用于查看供应商信息的用户界面的图示；

图3e是用于为供应商选择评估的用户界面的图示；

图3f是用于添加供应商的用户界面的图示；

图3g是用于查看供应商分配的用户界面的图示；

图3h是为供应商选择目录的图示；

图3i是预览供应商的分配的图示；

图3j是用于为供应商分配添加完成日期的用户界面的图示；

图3k是用于在评估完成之后查看供应商得分的用户界面的图示；

图4是系统的首次供应商的样本块的图示；

图5是系统的回归供应商的样本块的图示；

图6是系统的计算层级的图示；

图7是来自公司、供应商和系统角度的系统的样本流程的图示；并且

图8示出了可以被物理配置为执行本文描述的方法的示例性计算设备。

本领域普通技术人员将理解，附图中的元件是出于简单和清楚起见而示出的，因此不是所有连接和选项都被示出，以避免模糊本发明的方面。例如，在商业上可行的实施例中有用或必要的普通但众所周知的元件不经常被描绘，以便促进对本公开的这些各种实施例的更少阻碍的查看。还应当理解，特定动作和/或步骤可以以特定的发生次序来描述或描绘，而本领域技术人员将理解，实际上并不需要这种关于顺序的特异性。还将理解，本文使用的术语和表达将关于他们相应的各自的查询和研究领域来定义，除非在本文中已经另外阐述了特定含义。

具体实施方式

现在将参考附图更全面地描述本发明，附图形成本发明的一部分，并且通过图示的方式示出可以通过其实践本发明的特定示例性实施例。这些图示和示例性实施例是在理解本公开是一个或多个发明的原理的范例并且不旨在将任何一个发明限制于示出的实施例的情况下呈现的。本发明可以以许多不同的形式体现，并且不应该被解释为限于本文阐述的实施例；相反，提供这些实施例使得使本公开彻底和完整，并且将本发明的范围完全传达给本领域技术人员。除了其他方面，本发明可以体现为方法、系统、计算机可读介质、装置或设备。因此，本发明可以采取完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。因此，以下详细描述不应被理解为限制意义。

不需要供应商的商业很少存在。供应商和客户之间的关系通常由诸如合同的文档来管控。合同通常是具有各种格式的密集文档，并且使用很难理解的法律术语来书写。此外，消费者通常想要确保供应商遵循所要求的协议，所要求的协议是通常由文档支持的。例如，如果消费者想要符合认证组织，则公司使用的供应商也不得不证明符合认证要求。尝试验证供应商遵循所要求的协议或要求是一项重大挑战，因为收集用于验证的文书并实际阅读文书需要大量的时间和精力。

图1所示的所描述的系统100可以包含一个或多个基于处理器的模块，这些模块试图将验证供应商符合相关要求的过程进行自动化。系统可以将自我评估请求传送给供应商，并且系统可以从供应商接收自我评估响应。响应于自我评估被确定为可接受的，系统可以确定供应商是否应接受随机审核。响应于随机审核(audit)被确定为应接受，随机审核可以开始，这可能需要接收合同、审阅(review)合同、记录异常和更新消费者用户仪表板。响应于随机审核未被确定为应接受，可以更新消费者用户仪表板。自我评估是否被确定为可接受的可以采取各种形式。在一些实施例中，可以使用简单的单词比较。逻辑上，所述确定可能更复杂，并且系统可以从过去的合同中学习以更好地理解未来的合同是否符合相关要求。

系统和在系统上操作的方法解决几个技术问题。首先，对于许多企业来说，具有大量的供应商和甚至更多的不得不审阅的合同。如果存在问题，则需要跟进。使用人工来承担此任务需要大量的时间，并且容易出错。系统使用规则来审阅文档，使得错误被最小化。此外，通过对经技术分析的先前文档使用算法并从他们中学习，可以随时间推移而改进规则。最后，区块链存储方法可以用于传送和跟踪文档和结果。

系统100可以通过网络操作。网络可以被不同地描述为通信链路、计算机网络、因特网连接等。如本文所述，系统100可包括存储在有形存储器上的各种软件或计算机可执行指令以及专用硬件组件或模块，该专用硬件组件或模块采用软件和指令来安全地促进对商家的免结账商店内的店内库存和交易过程的管理。

各种模块可以被实施为包含用于由系统100的一个或多个处理器在专用或独特的计算设备中执行的计算机可读指令(即，软件)的计算机可读存储存储器。如本文所述，模块可以执行各种任务、方法、模块等。系统100还可以包括硬件和软件应用两者，以及用于在各种专用和独特的硬件和软件组件之间传送数据的各种数据通信通道。

参考图1，系统100控制针对消费者/用户和针对供应商的流程。在高层级上，消费者可以选择将被邀请使用该系统的供应商，并且可以监控供应商在整个过程中的进展。供应商可以接收邀请以成为系统的一部分，并且可以将相关数据和文档(诸如上传文档)添加到系统中以被分析。供应商可以查看他们在系统中的状态，并且可以能够更新系统中的数据。

在高层级上，系统100可以如下工作：

供应商可以通过直接回答关于他们与每个控件的符合性等级的问题来寻找(address)一组适用控件(control)。

适用控件可以通过供应商调查/问卷中提供的答案来推导。

供应商工作流程可以要求供应商上传符合他们的适用控件的文档(其可以被称为上传文档)。

作为供应商的评分的一部分，上传文档的相关性可以相对于供应商作为目标的控件来评估。

此外，在评分方法方面：

控件作为对象可以被定义为强制性的或可选的；

控件可以具有强制性的文档上传要求；

单个文档可以满足多个控件的上传要求；并且

控件可以与优先级方面的权重或未能满足符合性标准方面的惩罚相关联。

在高层级上，该方法可以使用搜索-推理框架来评估上传文档的相关性，以寻找相关联的控件对象。在这样的搜索场景中：

每个控件可以与标准化搜索查询相关联，该标准化搜索查询可以根据相关的术语、短语、概念来定义，并且在更高级的阶段中，可以根据被捕获为主语-谓语-宾语元组的简单关系来定义。

上传文档与其相关联的控件查询的匹配得分可以是上传文档的相关性的度量。

在相关性得分低于阈值的情况下(首先包括缺少上传的文档)，控件查询上的匹配可以扩展到供应商上传的所有上传文档，然而相关性得分会招致惩罚。

在高层级上，上传文档的匹配可以采取简单化的形式，并且可以变得更复杂。

1.无外部本体的基线搜索：可以匹配精确术语、避免停止词的n元表达式(短语)

2.无外部本体的增强搜索：可以用合并以下项目的查询扩展进行匹配：

□合并词干的搜索；

□合并同义词、首选形式的搜索；和

□合并拼写错误的搜索。

3.有外部本体的增强搜索：可以用合并概念和简单关系(诸如合并术语的广义和狭义意义)的查询进行匹配。此阶段可以要求创建本体并将它们合并到No-SQL数据库中。一些示例包括：

□除了首选术语和同义词之外还合并广义(通用)和狭义(特定)术语的手动同义词库

□具有每个概念的规范术语的受控词汇表

□基于共现统计的自动生成的同义词库

由于大的供应商文档库是在no-sql数据库中获取的以用于高级分析、挖掘和学习，因此可以能够设计更高级的推理功能来支持评分和文档相关性评估，从而超越搜索方法的范围，诸如：

□对每个相关联的控件类型被认为相关的文档的特定术语进行术语出现分析和权重分配；

□概念链接，其超越术语/短语的广义/狭义意义(is-a关系)上的匹配并涉及找到每个控件类型的已知关联(利用nlp技术，即文本内容中的POS标注、实体识别)；

□进行聚类以即时(on the fly)发现相似文档(包括将相关性的评估作为特征)，以及创建可用于度量新文档的相关性的主题(topic)

向量；

□在大数据集中针对关联规则、概念关联性的挖掘；和

□深度学习

首次消费者登入(onboarding)

参考图2，首次使用系统的消费者或用户可以首先需要在系统中设置公司。消费者可以以各种方式找到该系统。在一些情况下，消费者可能已经找到了管理大量合同的技术问题的解决方案。在其他实施例中，消费者可能已经接收到尝试系统的电子邮件邀请205，诸如图2a所示。

一旦消费者接受邀请，就可以进行一次登入(one time on-boarding)过程。可以使用向导或简单的引导设置来简化登入过程。可以向消费者呈现授权(license)协定210，该授权协定210可以被消费者审阅和接受，诸如图2b所示。如果授权没有被接受，则登入过程可以结束。如果授权被接受，则可以请求关于消费者的信息215，以通过添加诸如地址、用户名和密码的信息以及账户来创建账户，如图2c所示。可以出现综合简档220，该综合简档220可以包括收集关于消费者和消费者的需求的附加信息，诸如是否所有协定和合同都包含仲裁条款或赔偿条款，如图2d所示。在块225处，并且如图2e所示，可以添加消费者的供应商，使得消费者可以向供应商传送诸如合同和协定的材料需要被添加到系统中的消息，从而使得消费者可以验证供应商符合消费者设置的相关规则。一旦用户处于应用中，他/她可以跳过此步骤和执行该任务。包括侧栏的用户界面可以使用户熟悉供应商功能。

在一些实施例中，稍后步骤(诸如215、220或225)中的一些可以是可选的，但是这些步骤可以呈现给用户，以教育他们关于应用基本设置。用户可以跳过这些步骤，但是稍后可以向其呈现导航以更新这些信息。

现有消费者

在诸如图3所示的一些场景中，消费者可能已经是系统的用户。因此，回归消费者将通过输入他们在图2中简要描述的登入期间建立的凭证来登录应用305，如图3a所示。一旦进入应用，可以给消费者呈现帮助和引导，以在关键任务中快速开始。也可以给他们呈现非常直观且易于遵循的任务模型(导航等)，如图3b所示。用户可以在应用内部导航以完成设置——在这种情况下，构建公司简档并定义组织(部门等)，如图3c所示。用户也可以如图3d所示手动地或通过导入格式化列表来快速添加供应商。此过程还将帮助在用户开始评估之前教育他们如何管理系统中的供应商简档。

基于对各个消费者的设置，可以向每个消费者提供一组评估问卷(又被称为目录)，如图3e所示。消费者可以查看评估，但最初消费者可能无法修改和创建新目录。

一旦消费者登录到系统，就可以向消费者呈现各种选项。可以呈现仪表板310，该仪表板310可以具有系统中的供应商的当前状态的概要。在块315处，各种报告可用于快速查看。报告可以是标准报告，或者可以是由消费者创建的报告。报告可以总结消费者感兴趣的该系统的任何方面。

在块320处，消费者还能够查看先前已经被输入到系统中的信息。例如，公司信息可用于被查看和编辑，诸如块325处的部门分解和用户以及各种用户可用的许可330。

在块335处，消费者还能够在供应商登陆页面上查看供应商细节，如图3f所示。在块340处，用户还能够在一个地方查看关于该供应商的所有信息，如图3g所示。通过选择姓名，可以给他/她呈现供应商细节页面，该供应商细节页面可以包括供应商、公司、分配(到期&过去的项目)等。假设系统中有一些供应商细节，则消费者可以查看供应商细节。如果供应商不在系统中，则可以在块345处在系统中创建供应商。如果供应商在系统中但没有被要求加入跟踪规则遵守情况的系统部分，则在块350处，向供应商传送邀请的选项可以是可用的。在块355处，可以将创建新供应商的数据请求或加入评估系统的邀请传送给供应商，这可以参考图3g来描述。

评估登陆页面360也可以是可用的。此场景描述用户如何向来自“供应商”标签的供应商发送评估。此场景假设用户已经在系统中建立了供应商，并且她/他的目标是将完成评估的分配发送给供应商并观察进展。在块365处，消费者可以查看每个供应商的评估细节。如图3g所示，消费者可以查看过去的分配、当前正在进行的分配或者是否存在正在进行的分配(但没有被发送给供应商)。如图3h所示，消费者也可以在块370处创建新的分配，并且该分配可以在块375处被传送给供应商。在发送该分配之前，用户可能想要在将评估传送给供应商之前预览分配的细节，如图3i所示。用户可以为该分配分配完成日期，如图3j所示。一旦被发送，将根据此日期跟踪进展和提醒。一旦用户已经完成了发送分配的任务，用户就可以从仪表板以及从供应商的细节页面跟踪此分配，如图3k所示。

用户还可以具有收件箱380来接收来自供应商的消息。此外，在块385处，用户可以具有检查他们的账户(诸如订阅的剩余时间、使用该系统的供应商的数量、供应商响应的即将到来的日期、总体响应等)的能力。

参考图4，从供应商角度来看，如果该供应商对系统来说是新的，则该供应商可以具有单独的逻辑流程。供应商可以在块400处接收电子邮件邀请以使用该系统来跟踪评估的分配。一旦供应商接受邀请，供应商在块405处可能不得不接受授权协定。一旦授权协定已经被接受，供应商可以在块410处输入供应商的个人信息，并且可以在块415处设置供应商的简档。用户界面可以使用向导来辅助供应商设置该系统。

如果供应商是系统100的回归用户，则可以使用图5的流程，并且供应商可以在块500处登录到系统。供应商然后可以在块505处查看仪表板，该仪表板可以包含供应商的状态和更新。供应商还可以看到公司信息510，以及在块515处看到关于用户和用户的许可的信息。在块520处，供应商还可以具有评估登陆页面，该评估登陆页面可以包含关于正在进行的评估525以及评估是否准备好在块530处被提交的信息。供应商还可以具有收件箱535来接收来自系统和来自用户的通知。在块540处，供应商也可以访问他们的账户，在那里他们可以查看他们的状态、任何即将到来的费用、任何截止日期等。

参考图6，可以公开来自公司601、供应商602和系统603的角度的系统100的样本流程的图示。在块605处，用户可以在系统中设置其自身。在块610处，用户随后可以添加供应商。在块615处，用户可以向供应商传送使用系统并向系统提供评估材料的邀请。在块620处，系统可以将自我评估请求传送给供应商。在块625处，供应商可以接收自我评估请求，并在块630处回答问卷。在块635处，供应商可以通过提交所请求的材料来开始自我评估审阅。

在块640处，系统可以从供应商处摄取材料并对其进行评分。在块645处，系统然后可以将自我评估结果传送给用户。在块650处，用户可以从系统接收分析，并且可以在块655处决定评估是否满足最低评估标准。如果在块660处自我评估满足标准，则在块665处，系统可以在系统中创建供应商批准包(package)。在块670处，可以再次审阅供应商包，并且系统可以在块670处确定包是否被批准。如果包被批准，则它可以在块675处被保存在系统中。

如果在块655中自我评估未通过标准，则在块680处可以向消费者传送消息，并且在块685处，系统可以向供应商传送改正请求。评估可以采取各种形式。

在一个实施例中，上传的文档(可以被称为上传文档)的相关性得分可以相对于控件来确定。控件可以是先前已经被审阅过的文档或合同，并且可以被确定为具有期望的元素。控件可以被定义为强制性的或可选的，并且元素可以是强制性的或可选的。对于被认为非常重要的文档，控件可以具有强制性的文档上传要求。换句话说，供应商可能无法对于特定元素进行自我认证，并且可能强制性地上传文档来满足特定元素。单个文档可以用于多个控件。控件可以具有权重，并且符合性可以基于符合性的加权得分来确定。

逻辑上，上传的文档的相关性可以与控件对象进行比较。在一些实施例中，每个控件可以与标准化搜索查询相关联，标准化搜索查询被定义为搜索相关搜索术语、短语或概念。在一些实施例中，可能不需要精确匹配来说明合同/文档中存在元素。例如，标准化搜索查询可以搜索主语-谓语-宾语元组。

可以确定匹配得分，其中匹配得分可以是文档相关性的度量，其中使用精确文本、n元表达式、带有词干的搜索、带有同义词的搜索和带有小错误的搜索中的至少一个将来自文档的术语与期望的文本进行比较。匹配得分还可以包括比较除了首选术语和同义词之外还合并广义/通用和狭义/特定术语的文档手动同义词库。比较可以包括将合同语言与具有合同中每个概念的规范术语的受控词汇表进行比较。在其他实施例中，比较还包括基于共现统计自动生成同义词库。在又一实施例中，文档比较可以包括获取大的供应商文档库，并且使用概念识别算法来分析该文档库。此外，比较可以包括对每个相关联的控件类型被认为相关的文档的特定术语执行术语出现分析算法以及分配权重分配。在又一实施例中，可以执行概念链接算法，以超越术语/短语的广义/狭义意义上的匹配，来找到每个控件类型的已知关联，其中控件类型可以包括诸如文本内容中的POS标注或实体识别的npl技术。比较还可以包括进行聚类以即时发现相似文档(包括将相关性的评估作为特征)以及创建用于度量新文档的相关性的主题向量。

比较可以是学习算法。例如，可以审阅先前分析的合同的大数据集，并且可以挖掘合同的关联规则和概念关联性。例如，文档集可以被分成4个组。一个组可以被用于测试算法，并且其他三个组可以被用于训练算法。一旦训练完成，各组可以轮换位置，并且先前的测试组可以成为训练组，并且训练组中的一个组可以成为测试组。然后，经训练的算法可以被用于评价未来接收的新合同。

再次参考图6，供应商可以在块688处接收改正请求，可以在块689处修正对问卷的响应，并且可以在块690处发起改正审阅。系统可以在块691处接收改正的材料，并且该材料可以在块693处由系统重新评分。然后，在块695处，可以将改正的得分传送给用户。如果得分仍然低于标准，则步骤680-695可以重复，直到供应商得分超过标准阈值。如果供应商不能提供附加的材料，则用户可以决定是否接受供应商的风险。如果风险是不可接受的，则可以在块699处将消息从消费者传送给供应商，并且可以定位新的供应商。如果风险是可接受的，则系统可以在系统中创建供应商批准包，如关于块660-675所描述的。更具体地，在块670处，可以再次审阅供应商包，并且系统可以确定包是否被批准。如果包被批准，则它可以在块675处被保存在系统中。

从如图7所示的另一角度来看该系统，可以考虑多个计算层级。最高层级710可以是用户洞察和动作。从用户界面角度来看，系统可以具有多个应用712。应用可以在单独的服务器上，这些服务器可以专门被构建来执行应用。在其他实施例中，单个服务器可以执行应用的各个方面。在又一实施例中，服务器可以具有多个处理器，其中处理器被分配特定的方面。应用可以包括用于调查、公司-供应商管理、模板维护(诸如维护问卷、目录、控件、映射、风险评估等)的应用。用户洞察可以包括仪表板714、报告应用716和提供警报的应用718。

在另一层级720上，系统可以提供服务接口，诸如应用程序接口(ApplicationProgram Interface，API)。API可以简化向系统高效和可靠地传送数据的能力。可以存在覆盖数据访问722的API，诸如针对结构化和非结构化数据的索引、搜索、查询和预处理接口。还可以存在用于事件通知724、监控726和发送消息728的API。API可以在特定的地方以特定的格式具有特定的字段，使得与应用的通信是已知的。通过设置API，其他应用可以能够容易地与系统和应用一起工作，以为使用系统提供甚至更多的选项。相关地，可以存在数据结构来管控存储和传送数据的方式，使得数据可以被有效地理解和传送。

在另一层级730上，可以提供分析和商业逻辑。分析和商业逻辑可以允许索引和搜索栈操作732，诸如弹性搜索集群。分析和商业逻辑还可以包括文本分析和自然语言处理(Natural Language Processing，NLP)734、描述性和预测性分析736以及商业规则738。

在又一层级740上，系统管理数据。数据管理可以包括数据存储742，诸如结构化数据存储(诸如mySQL)，并且还可以包括人工制品(artifact)数据存储，诸如NoSQL或Hadoop分布式文件系统。数据源744也可以处于这一层级中，具有结构化的用户提供的数据(诸如调查和表格)，以及人工制品(诸如文档和二进制文件)。

在又一层级750上，可以提供基础设施层。基础设施可以辅助系统的云供应虚拟资源和网络部分752。例如，系统的虚拟主机和存储方面可以在这一层级上进行控制。此外，点播(on-demand)应用和服务流(诸如亚马逊网络服务应用流)可以在这一层级上进行控制。

保存数据的方式可以有多种。在一些实施例中，为了便于访问和审阅，数据可以被存储在数据库中。在一些实施例中，为了安全，数据可以被加密。在其他实施例中，数据可以被存储在基于云的存储系统中，使得数据可以被使用来自各种位置的各种计算设备的各种用户容易地访问。

在其他实施例中，数据可以以区块链格式存储。区块链使用分布式数据库或用来维护不断增长的记录(被称为区块)列表的账本。每个区块可以包含时间戳和到前一区块的链接。区块链通常可以由共同遵守用于验证新区块的协议的对等网络来管理。通过设计，区块链可以固有地抵制数据的修改。一旦被记录，任何给定区块中的数据在没有所有后续区块的改变和网络大多数的共谋的情况下都不能被追溯性地改变。在功能上，区块链可以充当能够有效地记录双方之间的交易并以可验证和永久的方式记录的“一个开放的、分布式的账本”。许多用户可以具有账本的副本。当信息被添加到账本时，可以在账本的副本之间比较来自账本的更旧的条目的信息，以确保新信息属于账本中。然后，信息可以被存储在各种账本中，并且区块链增长。区块链的优点可以是安全和不需要中央集权。

在该实施方式中，供应商的数据可以被存储在区块链中。安全性的提高可以有助于阻挠非法操纵数据的企图。数据存储的分布式性质可以为用户和供应商两者提供舒适。用户可以确信数据不会通过攻击中央存储位置而被黑客攻击(hacked)，这可能是用户的责任。供应商可以感到舒适，他们的数据可以是安全的而不会被黑客攻击。

通过使用区块链，可以解决几个技术问题。逻辑上，由于数据被存储在区块链中，数据可以更安全，并且更难黑客攻击。此外，区块链可以比传统数据库更安全。最后，实现区块链的软件在技术上可能是复杂的，并且特别适应系统的需要。

图8是如本文所述的用于在免结账商店中购买和归还物品的系统100和方法的示例计算环境1000的高层级框图。计算设备1001可以包括服务器(例如，支付处理服务器、移动计算设备(例如，用户计算设备)、蜂窝网络电话、平板计算机、支持Wi-Fi的设备或支持无线或有线通信的其他个人计算设备)、瘦客户端或其他已知类型的计算设备。如本领域技术人员将认识到的，根据本文的公开和教导，可以使用具有不同架构的其他类型的计算设备。与本文描述的示例系统和方法相似或相同的处理器系统可以用于实施和执行图1的示例系统以及图3A和图3B的方法。尽管示例系统1000在下面被描述为包括多个外围设备、接口、芯片、存储器等，但是这些元件中的一个或多个可以从用于实施和执行示例系统和方法的其他示例处理器系统中省略。此外，可以添加其他组件。

如图8所示，计算设备1001包括耦合到互连总线的处理器1002。处理器1002包括寄存器组或寄存器空间1004，该寄存器组或寄存器空间1004在图10中被描绘为完全在芯片上，但是可替代地，该寄存器组或寄存器空间1004可以完全或部分位于芯片外，并且经由专用电连接和/或经由互连总线直接耦合到处理器1002。处理器1002可以是任何合适的处理器、处理单元或微处理器。尽管在图8中未示出，但是计算设备1001可以是多处理器设备，并且因此可以包括一个或多个与处理器1002相同或相似并且通信耦合到互连总线的附加处理器。

图8的处理器1002耦合到芯片组1006，芯片组1006包括存储器控制器1008和外围输入/输出(Input/Output，I/O)控制器1010。众所周知，芯片组通常提供I/O和存储器管理功能以及可由耦合到芯片组1006的一个或多个处理器访问或使用的多个通用和/或专用寄存器、定时器等。存储器控制器1008执行使处理器1002(或多个处理器，如果有多个处理器的话)能够访问系统存储器1012和大容量存储存储器1014的功能，系统存储器1012和大容量存储存储器1014可以包括存储器内高速缓存(例如，存储器1012内的高速缓存)或盘上高速缓存(例如，大容量存储存储器1014内的高速缓存)中的一个或两者。

系统存储器1012可以包括任何期望类型的易失性和/或非易失性存储器，诸如，例如静态随机存取存储器(Static Random Access Memory，SRAM)、动态随机存取存储器(Dynamic Random Access Memory，DRAM)、闪存、只读存储器(Read-Only Memory，ROM)等。大容量存储存储器1014可以包括任何期望类型的大容量存储设备。例如，计算设备1001可以用于实施模块1016(例如，本文描述的各种模块)。大容量存储存储器1014可以包括硬盘驱动器、光驱、磁带存储设备、固态存储器(例如，闪存、RAM存储器等)、磁存储器(例如，硬驱动器)或适合大容量存储的任何其他存储器。如本文所使用的，术语模块、块、功能、操作、过程、例程、步骤和方法是指向计算设备1001、系统100和方法300提供指定功能的有形计算机程序逻辑或有形计算机可执行指令。因此，模块、块、功能、操作、过程、例程、步骤和方法可以以硬件、固件和/或软件实施。在一个实施例中，程序模块和例程被存储在大容量存储存储器1014中，被加载到系统存储器1012中，并由处理器1002执行，或者可以从存储在有形计算机可读存储介质(例如，RAM、硬盘、光/磁介质等)中的计算机程序产品提供。

外围I/O控制器1010执行使处理器1002能够经由外围I/O总线与外围输入/输出(I/O)设备1024、网络接口1026、本地网络收发器1028(经由网络接口1026)通信的功能。I/O设备1024可以是任何期望类型的I/O设备，诸如，例如键盘、显示器(例如，液晶显示器(Liquid Crystal Display，LCD)、阴极射线管(Cathode Ray Tube，CRT)显示器等)、导航设备(例如，鼠标、轨迹球、电容式触摸板、操纵杆等)等等。I/O设备1024可以与模块1016等一起使用，以从收发器1028接收数据、将数据发送到系统100的组件、并执行与本文描述的方法相关的任何操作。

本地网络收发器1028可以包括对Wi-Fi网络、蓝牙、红外、蜂窝网络或其他无线数据传输协议的支持。在其他实施例中，一个元件可以同时支持计算设备1001采用的各种无线协议中的每一种。例如，软件定义的无线电可以能够经由可下载的指令来支持多种协议。在操作中，计算设备1001可以能够在周期性基础上定期地轮询可视无线网络发射机(蜂窝网络和本地网络两者)。即使在计算设备1001上支持正常的无线业务时，这种轮询也是可能的。网络接口1026可以是例如以太网设备、异步传输模式(Asynchronous Transfer Mode，ATM)设备、802.11无线接口设备、DSL调制解调器、电缆调制解调器、蜂窝网络调制解调器等，使系统100能够与至少具有关于系统100描述的元件的另一计算机系统通信。

虽然存储器控制器1008和I/O控制器1010在图10中被描绘为芯片组1006内的分开的功能块，但是由这些块执行的功能可以被集成在单个集成电路内，或者可以使用两个或更多个分开的集成电路来实施。计算环境1000还可以在远程计算设备1030上实施模块1016。远程计算设备1030可以通过以太网链路1032与计算设备1001通信。在一些实施例中，模块1016可以由计算设备1001经由因特网1036从云计算服务器1034取得。当使用云计算服务器1034时，所取得的模块1016可以以编程方式与计算设备1001链接。模块1016可以是包括人工智能软件和文档创建软件的各种软件平台的集合，或者也可以是在驻留在计算设备1001或远程计算设备1030中的

虚拟机(

Virtual Machine，JVM)环境中执行的

小程序。模块1016也可以是适于在位于计算设备1001和1030上的网络浏览器中执行的“插件”。在一些实施例中，模块1016可以经由因特网1036与后端组件1038通信。

系统1000可以包括但不限于LAN、MAN、WAN、移动、有线或无线网络、专用网或虚拟专用网的任何组合。此外，尽管在图10中仅示出了一个远程计算设备1030来简化和阐明描述，但是应当理解，任何数量的客户端计算机都被支持并且可以在系统1000内进行通信。

此外，特定实施例在本文被描述为包括逻辑或多个组件、模块或机制。模块可以构成软件模块(例如，体现在机器可读介质或传输信号中的代码或指令，其中代码由处理器执行)或硬件模块。硬件模块是能够执行特定操作的有形单元，并且可以以特定方式配置或布置。在示例实施例中，一个或多个计算机系统(例如，独立的、客户端或服务器计算机系统)或计算机系统的一个或多个硬件模块(例如，处理器或一组处理器)可以由软件(例如，应用或应用部分)配置为操作以执行如本文所述的特定操作的硬件模块。

在各种实施例中，硬件模块可以机械地或电子地实施。例如，硬件模块可以包括被永久配置(例如，作为专用处理器，诸如现场可编程门阵列(FPGA)或专用集成电路(ASIC))以执行特定操作的专用电路或逻辑。硬件模块还可以包括由软件临时配置以执行特定操作的可编程逻辑或电路(例如，包含在通用处理器或其他可编程处理器中)。应当理解，机械地、在专用和永久配置的电路中或者在临时配置的电路(例如，由软件配置)中实施硬件模块的决定可以由成本和时间考虑来驱动。

因此，术语“硬件模块”应被理解为包含有形实体，应当是物理构造的、永久配置的(例如，硬连线的)、或临时配置的(例如，编程的)来以特定方式操作或执行本文描述的特定操作的实体。如本文所使用的，“硬件实施的模块”是指硬件模块。考虑到其中硬件模块是临时配置的(例如，编程的)的实施例，硬件模块中的每一个不需要在任何一个时刻被配置或实例化。例如，在硬件模块包括使用软件配置的通用处理器的情况下，通用处理器可以在不同时间被配置为相应的不同硬件模块。软件可以相应地配置处理器，例如，在一个时刻构成特定的硬件模块，并且在不同的时刻构成不同的硬件模块。

硬件模块可以向其他硬件模块提供信息，以及从其他硬件模块接收信息。因此，所描述的硬件模块可以被视为是通信耦合的。当多个这样的硬件模块同时存在时，可以通过连接硬件模块的信号传输(例如，通过适当的电路和总线)来实现通信。在其中多个硬件模块在不同时间被配置或实例化的实施例中，这些硬件模块之间的通信可以例如通过在多个硬件模块可以访问的存储器结构中存储和取得信息来实现。例如，一个硬件模块可以执行操作，并将该操作的输出存储在与其通信耦合的存储器设备中。然后，另一硬件模块可以在稍后时间访问该存储器设备，以检索和取得所存储的输出。硬件模块也可以发起与输入或输出设备的通信，并且可以对资源(例如，信息集合)进行操作。

本文描述的示例方法的各种操作可以至少部分地由临时配置(例如，通过软件)或永久配置为执行相关操作的一个或多个处理器来执行。无论是临时配置的还是永久配置的，这些处理器都可以构成操作以执行一个或多个操作或功能的处理器实施的模块。在一些示例实施例中，本文提到的模块可以包括处理器实施的模块。

类似地，本文描述的方法或例程可以至少部分是处理器实施的。例如，方法的操作中的至少一些可以由一个或多个处理器或处理器实施的硬件模块来执行。特定操作的执行可以分布在一个或多个处理器当中，不仅驻留在单个机器中，而且跨多个机器部署。在一些示例实施例中，一个或多个处理器可以位于单个位置(例如，在家庭环境、办公室环境内或作为服务器群)，而在其他实施例中，处理器可以跨多个位置分布。

一个或多个处理器还可以在“云计算”环境中或作为“软件即服务”(Software asa Service，SaaS)操作以支持相关操作的执行。例如，操作中的至少一些可以由一组计算机(作为包括处理器的机器的示例)来执行，这些操作可以经由网络(例如，因特网)和经由一个或多个适当的接口(例如，应用程序接口)来访问。

特定操作的执行可以分布在一个或多个处理器当中，不仅驻留在单个机器中，而且跨多个机器部署。在一些示例实施例中，一个或多个处理器或处理器实施的模块可以位于单个地理位置(例如，在家庭环境、办公室环境或服务器群内)。在其他示例实施例中，一个或多个处理器或处理器实施的模块可以跨多个地理位置分布。

本说明书的一些部分是根据对作为比特或二进制数字信号存储在机器存储器(例如，计算机存储器)内的数据的操作的算法或符号表示来呈现的。这些算法或符号表示是数据处理领域的普通技术人员用来向本领域的其他技术人员传达其工作实质的技术的示例。如本文所使用的，“算法”是导致期望结果的自洽操作序列或类似处理。在该上下文下，算法和操作涉及物理量的物理操纵。通常但不是必须的，这些量可以采取能够被机器存储、访问、传输、组合、比较或以其他方式操纵的电、磁或光信号的形式。主要出于常用的原因，有时使用诸如“数据”、“内容”、“比特”、“值”、“元素”、“符号”、“字符”、“术语”、“数字”、“数值”等词语来指代这些信号是方便的。然而，这些词语仅仅是方便的标记，并且与适当的物理量相关联。

除非另有特别声明，否则本文中使用诸如“处理”、“计算(computing)”、“计算(calculating)”、“确定”、“呈现”、“显示”等词语的讨论可以指机器(例如，计算机)的动作或过程，该机器操纵或转换表示为一个或多个存储器(例如，易失性存储器、非易失性存储器或其组合)、寄存器、或接收、存储、传输或显示信息的其他机器组件内的物理(例如，电、磁或光)量的数据。

如本文所使用的，对“一些实施例”或“实施例”或“教导”的任何引用意味着结合该实施例描述的特定元素、特征、结构或特性被包括在至少一个实施例中。说明书中不同地方出现的短语“在一些实施例中”或“教导”不一定都指相同实施例。

一些实施例可以使用表达“耦合”和“连接”以及他们的派生词来描述。例如，可以使用术语“耦合”来描述一些实施例，以指示两个或更多个元件直接物理或电接触。然而，术语“耦合”也可以意味着两个或更多个元件彼此不直接接触，但是仍然彼此协作或相互作用。实施例不限于这种上下文。

此外，附图仅出于说明的目的描绘优选实施例。本领域技术人员将从以下讨论中容易地认识到，在不脱离本文描述的原理的情况下，可以采用本文示出的结构和方法的替代实施例。

通过阅读本公开，通过本文公开的原理，本领域的技术人员将理解本文描述的系统和方法的附加的替代结构和功能设计。因此，虽然已经示出和描述了特定的实施例和应用，但是应当理解，所公开的实施例不限于本文公开的精确结构和组件。在不脱离任何所附权利要求中限定的精神和范围的情况下，可以在本文公开的系统和方法的布置、操作和细节中进行对于本领域技术人员来说显而易见的各种修改、改变和变化。

Claims

1.一种基于计算机的验证方法，包括：

向供应商传送自我评估请求；

从所述供应商接收自我评估响应，所述自我评估响应包括自我评估；

响应于所述自我评估是可接受的，

确定所述供应商是否应接受随机审核；

响应于所述随机审核被确定为应接受，

开始所述随机审核，包括：

接收上传文档；

审阅所述上传文档；

记录异常；

更新用户仪表板；以及

响应于所述随机审核未被确定为应接受，

更新用户仪表板。

2.根据权利要求1所述的基于计算机的验证方法，其中，所述自我评估响应包括回答关于与控件的符合性的问题。

3.根据权利要求2所述的基于计算机的验证方法，其中，所述自我评估还包括上传符合所述控件的上传文档。

4.根据权利要求3所述的基于计算机的验证方法，还包括确定所述上传文档关于所述控件的相关性得分。

5.根据权利要求2所述的基于计算机的验证方法，其中，所述控件可以被定义为强制性的或可选的。

6.根据权利要求2所述的基于计算机的验证方法，其中，所述控件可以具有强制性的文档上传要求。

7.根据权利要求2所述的基于计算机的验证方法，其中，单个上传文档可以用于多个控件。

8.根据权利要求2所述的基于计算机的验证方法，其中，控件可以具有权重，并且符合性可以基于符合性的加权得分来确定。

9.根据权利要求2所述的基于计算机的验证方法，其中，将所述上传文档的相关性与控件对象进行比较。

10.根据权利要求2所述的基于计算机的验证方法，其中，每个控件与标准化搜索查询相关联，所述标准化搜索查询被定义为搜索相关搜索术语、短语或概念。

11.根据权利要求1所述的基于计算机的验证方法，其中，标准化搜索查询搜索主语-谓语-宾语元组。

12.根据权利要求3所述的基于计算机的验证方法，其中，确定匹配得分，其中，所述匹配得分包括所述上传文档的相关性的度量，其中，将来自所述上传文档的术语与期望文本进行比较以创建使用以下中的至少一个的比较：

精确文本；

n元表达式；

带有词干的搜索；

带有同义词的搜索；和

带有小错误的搜索。

13.根据权利要求12所述的基于计算机的验证方法，其中，所述匹配得分包括：

创建所述上传文档与手动同义词库的比较，所述手动同义词库除了首选术语和同义词之外还合并广义/通用和狭义/特定术语。

14.根据权利要求12所述的基于计算机的验证方法，其中，所述比较还包括将上传文档语言与受控词汇表进行比较，所述受控词汇表具有所述上传文档中每个概念的规范术语。

15.根据权利要求12所述的基于计算机的验证方法，其中，所述比较还包括基于共现统计自动生成同义词库。

16.根据权利要求12所述的基于计算机的验证方法，其中，所述上传文档的比较还包括：

获取大的供应商文档库；和

使用概念识别算法来分析所述文档库。

17.根据权利要求1所述的基于计算机的验证方法，还包括对每个相关联的控件类型被认为相关的上传文档的特定术语，执行术语出现分析算法以及分配权重分配。

18.根据权利要求1所述的基于计算机的验证方法，还包括执行概念链接算法，以超越术语/短语的广义/狭义意义上的匹配，来使用nlp技术找到每个控件类型的已知关联，所述nlp技术包括所述上传文档的文本内容中的POS标注或实体识别。

19.根据权利要求1所述的基于计算机的验证方法，还包括：

进行聚类以即时发现相似上传文档，所述聚类包括将相关性评估作为特征，以及

创建用于度量新上传文档的相关性的主题向量。

20.根据权利要求1所述的基于计算机的验证方法，还包括：

审阅先前分析的上传文档的大数据集；以及

挖掘所述先前分析的上传文档的关联规则和概念关联性。