CN110750633B - 用于确定问题的答案的方法及装置 - Google Patents

Abstract

本发明公开一种用于确定问题的答案的方法及装置，该方法包括：获取针对待处理的问句信息的至少一个第一候选答案；确定所述问句信息针对知识图谱的图谱答案查询结果；至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案。由此，在确定针对问句信息的目标答案的过程中还综合考虑到了问句信息是否在知识图谱中有对应的图谱候选答案结果，提高了问答准确率，可以降低或避免出现答非所问的情形。

Description

用于确定问题的答案的方法及装置

技术领域

本发明属于互联网技术领域，尤其涉及一种用于确定问题的答案的方法及装置。

背景技术

随着互联网技术的不断发展，QA系统(question-and-answer，问答系统)在诸如智能客服、机器人领域等方面都取得了很大的进展。

目前，QA系统一般是依据针对问题的答案相关度与预定义的阈值进行比较，从而确定相应的最佳答案，返回至用户。

本申请的发明人在实践本申请的过程中发现：当基于相关度阈值判断方式确定最佳答案时，容易导致向用户输出错误或莫名其妙的答案，让用户啼笑皆非，降低用户体验。

因此，如何避免出现上述答非所问的尴尬情形并提高问答准确率是目前业界亟待解决的难题。

发明内容

本发明实施例提供一种用于确定问题的答案的方法及装置，用于至少解决上述技术问题之一。

第一方面，本发明实施例提供一种用于确定问题的答案的方法，包括：获取针对待处理的问句信息的至少一个第一候选答案；确定所述问句信息针对知识图谱的图谱答案查询结果；至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案。

第二方面，本发明实施例提供一种用于确定问题的答案的装置，包括：候选答案获取单元，被配置为获取针对待处理的问句信息的至少一个第一候选答案；图谱答案确定单元，被配置为确定所述问句信息针对知识图谱的图谱答案查询结果；目标答案确定单元，被配置为至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案。

第三方面，本发明实施例提供一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述方法的步骤。

第四方面，本发明实施例提供一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述方法的步骤。

本发明实施例的有益效果在于：在获取了针对问句信息的第一候选答案之后，确定问句信息针对知识图谱的图谱答案查询结果，并基于第一候选答案和图谱答案查询结果确定目标答案。由此，在确定针对问句信息的目标答案的过程中还综合考虑到了问句信息是否在知识图谱中有对应的图谱候选答案结果，提高了问答准确率，可以降低或避免答非所问的情况。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本发明一实施例的知识图谱的示意图；

图2示出了根据本发明第一实施例的用于确定问题的答案的方法的流程图；

图3示出了根据本发明第一实施例的确定图谱答案查询结果的流程图；

图4示出了根据本发明第二实施例的确定图谱答案查询结果的流程图；

图5示出了根据本发明第二实施例的用于确定问题的答案的方法的流程示意图；

图6示出了根据本发明第三实施例的用于确定问题的答案的方法的流程示意图；

图7示出了根据本发明一实施例的用于确定问题的答案的装置的结构框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元件、数据结构等等。也可以在分布式计算环境中实践本发明，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。

在本发明中，“模块”、“系统”等等指应用于计算机的相关实体，如硬件、硬件和软件的组合、软件或执行中的软件等。详细地说，例如，元件可以、但不限于是运行于处理器的过程、处理器、对象、可执行元件、执行线程、程序和/或计算机。还有，运行于服务器上的应用程序或脚本程序、服务器都可以是元件。一个或多个元件可在执行的过程和/或线程中，并且元件可以在一台计算机上本地化和/或分布在两台或多台计算机之间，并可以由各种计算机可读介质运行。元件还可以根据具有一个或多个数据包的信号，例如，来自一个与本地系统、分布式系统中另一元件交互的，和/或在因特网的网络通过信号与其它系统交互的数据的信号通过本地和/或远程过程来进行通信。

最后，还需要说明的是，在本文中，术语“包括”、“包含”，不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

如图1所示，根据本发明实施例的知识图谱的示意图，在知识图谱中具有多个实体卡片，例如针对实体“李白”和实体“苏东坡”的实体卡片，每一个实体卡片都是由边连接和实体节点组成的。如图1的示例中，各个方形框和圆框表示实体卡片所对应的实体节点(例如诗人、李白等)，各个实体节点之间的连线为边连接，其表示实体之间所存在的关联属性(例如职业、朝代、字号等)。

应理解的是，知识图谱具有多个实体卡片，还可以包括未在图1中所示出的其他的实体卡片，各个实体卡片的实体的类型在此也不应限制，例如知识图谱还可以包括针对公司实体的实体卡片。并且，随着业务的需要和发展，可以对知识图谱补充和完善更多的实体卡片。

如图2所示，本发明第一实施例的用于确定问题的答案的方法的流程，包括：

S210、获取针对待处理的问句信息的至少一个第一候选答案。

这里，可以是通过多种方式来获取第一候选答案，例如通过查询包括多组问答对的问答数据库来确定针对问句信息的第一候选答案，另外还可以是通过问答模型(或QA系统)来确定第一候选答案，并且该问答模型可以是以问答数据库中的数据作为数据样本集进行训练的。

S220、确定问句信息针对知识图谱的图谱答案查询结果。

这里，可以通过将问句信息的文本与知识图谱的图谱内容进行匹配(具体的文本匹配操作将在下文中展开)，从而得到问句信息在图谱中是否存在对应答案的图谱答案查询结果。示例性地，可以判断知识图谱中是否存在与问句信息相匹配的目标实体卡片，如果在知识图谱中不存在目标实体卡片，则确定图谱答案查询结果为不存在图谱查询答案。另外，当在知识图谱中存在目标实体卡片时，可以基于目标实体卡片来确定针对问句信息的图谱查询结果，即卡片中是否存在针对问题的图谱答案(或第二候选答案)。

S230、至少基于至少一个第一候选答案和图谱答案查询结果，确定针对问句信息的目标答案。

在本实施例的一个示例中，当图谱答案查询结果指示在知识图谱中不存在针对问句信息的候选答案时，可以直接确定目标答案为用于指示不存在针对该问句信息的答案的命中盲区答案，例如可以回复“该问题暂时没有找到答案”，从而避免了当直接回复第一候选答案时答非所问的情况。

另外，如上面所描述的，如果利用问答模型来确定至少一个第一候选答案，则各个第一候选答案也可以由问答模型来提供针对问句信息的问题相关度。这样，可以基于图谱答案查询结果，校准针对各个第一候选答案所对应的问题相关度，并基于各个经校准的问题相关度，从至少一个第一候选答案中确定目标答案。示例性地，如果图谱答案查询结果对应于第一候选答案，则可以提高该第一候选答案所对应的问题相关度。而如果图谱答案查询结果与第一候选答案不对应，则可以降低该第一候选答案所对应的问题相关度。最后，可以将对应问题相关度最高的第一候选答案确定为目标答案。

在本实施例的另一示例中，当图谱答案查询结果指示在知识图谱的实体卡片中存在针对问句信息的第二候选答案时，可以从第一候选答案和第二候选答案中确定出目标答案。

如图3所示，根据本发明第一实施例的确定图谱答案查询结果的流程，包括：

S310、基于预定义的问句模板，从问句信息中提取对应的问句关键词。

需说明的是，问句模板可以是根据应用场景需求而进行定义的，例如问题模板可以是“${#people}的？职业是什么？”，或者“${#company}的？CEO是谁？”。示例性地，针对“${#people}的？职业是什么？”的问句关键词为“people”和“职业”，其可以是通过关键词语义理解模型或者通过问句模板的关键词设置格式进行提取的。

S320、将所提取的问句关键词与知识谱图中的各个实体卡片进行匹配，从而确定目标实体卡片。

示例性地，当问句信息是“李白是哪个朝代的人？”，这里通过文本匹配找到含问句关键词“李白”和/或“朝代”的实体卡片，并将这样的实体卡片确定为目标实体卡片。

S330、基于目标实体卡片确定针对问句信息的图谱答案查询结果。

这里，如果找到了含“李白”和“朝代”的目标实体卡片，可以通过确定针对第一实体节点“李白”的边连接“朝代”所对应的第二实体节点是否存在。如图1所示，存在针对“李白”的通过边连接“朝代”所对应的第二实体节点“唐朝”。此时，图谱答案查询结果可以是“存在图谱答案，且答案为唐朝”，其可以作为第二候选答案，以辅助问答装置参考来确定目标答案。

如图4所示，根据本发明第二实施例的确定图谱答案查询结果的流程，包括：

S410、确定知识图谱问答标记库。

这里，知识图谱问答标记库包括针对多组问题分别在知识图谱中的图谱答案查询结果。示例性地，预先准备多个问题，并将每一个问题针对知识图谱进行查询来确定对应的各个问题图谱答案查询结果(具体操作可以参照如图3所示的操作)，从而构建知识图谱问答标记库。

S420、基于知识图谱问答标记库确定针对所获取的问句信息的图谱答案查询结果。

这样，可以直接利用知识图谱问答标记库，并通过查询的方式来确定针对所获取的问句信息的图谱答案查询结果，不需要再次针对知识图谱进行操作，降低了处理资源消耗的同时还提高了问答效率。

如图5所示，根据本发明第二实施例的用于确定问题的答案的方法的流程示意图。首先，用户向QA系统提问。然后，QA系统内部检索相关答案(即第一候选答案)，同时查询KG(Knowledge Graph,知识图谱)系统是否存在针对此问题的相关答案。之后，KG系统匹配此问句，并给出此问题的答案和相关度，若问句精确匹配，此时会存在两种问答场景。在第一问答场景下，若在KG系统没有命中答案，则表明此问题在KG系统内没有正确答案，命中盲区。相应地，QA系统将命中问答盲区作为最佳答案，返回给用户，或考虑其他下一步决策，以降低出现答非所问情形的概率。在第二问答场景下，如果KG系统有答案，则KG系统会将答案发给QA系统，以由QA系统将自己内部的候选答案与KG答案综合考虑(例如调整各个第一候选答案的问题相关度)，从而确定最佳答案，并返回给用户。

如图6所示，根据本发明第三实施例的用于确定问题的答案的方法的流程示意图。首先，QA系统预先向KG系统批量发送预设问题集。然后，KG系统标记各个问题是否命中盲区，并将结果放入问答标记库。这样，当用户向QA系统提问时，QA系统内部检索相关答案(第一候选答案)，同时查询问答标记库。当问答标记库精确匹配此问句时，同样会存在两种问答场景。在第一问答场景下，若问答标记库标记此问题命中盲区，则表明此问题在KG系统内没有正确答案，此时QA系统将命中问答盲区作为最佳答案，返回给用户，或考虑其他下一步决策，以降低出现答非所问情形的概率。在第二问答场景下，如果问答标记库有答案，则QA系统将自己内部的候选答案与该问答标记库中的答案综合考虑(例如调整各个第一候选答案的问题相关度)，从而确定最佳答案，并返回给用户。

如图7所示，根据本发明一实施例的用于确定问题的答案的装置(下文中也被称为问题的答案确定装置)700，包括：候选答案获取单元710，被配置为获取针对待处理的问句信息的至少一个第一候选答案；图谱答案确定单元720，被配置为确定所述问句信息针对知识图谱的图谱答案查询结果；目标答案确定单元730，被配置为至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案。

上述本发明实施例的装置可用于执行本发明中相应的方法实施例，并相应的达到上述本发明方法实施例所达到的技术效果，这里不再赘述。

本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。

另一方面，本发明实施例提供一种存储介质，其上存储有计算机程序，该程序被处理器执行如上的用于确定问题的答案的方法的步骤。

上述产品可执行本申请实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本申请实施例所提供的方法。

本申请实施例的客户端以多种形式存在，包括但不限于:

(1)移动通信设备:这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。

(2)超移动个人计算机设备:这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等，例如iPad。

(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如iPod)，掌上游戏机，电子书，以及智能玩具和便携式车载导航设备。

(4)其他具有数据交互功能的电子装置。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (9)

1.一种用于确定问题的答案的方法，包括：

获取针对待处理的问句信息的至少一个第一候选答案；

确定所述问句信息针对知识图谱的图谱答案查询结果；

至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案；

获取各个所述第一候选答案针对所述问句信息所对应的问题相关度；

其中，所述至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案包括：

基于所述图谱答案查询结果，校准针对各个第一候选答案所对应的问题相关度；

基于各个经校准的问题相关度，从所述至少一个第一候选答案中确定目标答案；

基于所述图谱答案查询结果，校准针对各个第一候选答案所对应的问题相关度，包括：如果图谱答案查询结果对应于第一候选答案，则可以提高该第一候选答案所对应的问题相关度；而如果图谱答案查询结果与第一候选答案不对应，则可以降低该第一候选答案所对应的问题相关度。

2.如权利要求1所述的方法，其中，所述确定所述问句信息针对知识图谱的图谱答案查询结果包括：

判断知识图谱中是否存在与所述问句信息相匹配的目标实体卡片，所述知识图谱包括多个实体卡片，所述实体卡片包括多个实体节点和关于不同实体节点之间的边连接；

当存在所述目标实体卡片时，基于所述目标实体卡片确定针对所述问句信息的图谱答案查询结果。

3.如权利要求2所述的方法，其中，所述判断知识图谱中是否存在与所述问句信息相匹配的目标实体卡片包括：

基于预定义的问句模板，从所述问句信息中提取对应的问句关键词；

将所提取的问句关键词与知识谱图中的各个实体卡片进行匹配，从而确定是否存在所述目标实体卡片。

4.如权利要求1所述的方法，其中，所述确定所述问句信息针对知识图谱的图谱答案查询结果包括：

基于知识图谱问答标记库确定针对所述问句信息的图谱答案查询结果，其中所述知识图谱问答标记库包括针对多组问题分别在知识图谱中的图谱答案查询结果。

5.如权利要求1所述的方法，其中，当所述图谱答案查询结果指示在所述目标实体卡片中不存在针对所述问句信息的第二候选答案时，所述基于所述第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案包括：

确定目标答案为用于指示不存在针对该问句信息的答案的命中盲区答案。

6.如权利要求1所述的方法，其中，当所述图谱答案查询结果指示在所述目标实体卡片中存在针对所述问句信息的第二候选答案时，所述基于所述第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案包括：

从所述第一候选答案和所述第二候选答案中确定出所述目标答案。

7.一种用于确定问题的答案的装置，包括：

候选答案获取单元，被配置为获取针对待处理的问句信息的至少一个第一候选答案；

图谱答案确定单元，被配置为确定所述问句信息针对知识图谱的图谱答案查询结果；

目标答案确定单元，被配置为至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案；

所述装置被配置为：获取各个所述第一候选答案针对所述问句信息所对应的问题相关度；其中，所述至少基于所述至少一个第一候选答案和所述图谱答案查询结果，确定针对所述问句信息的目标答案包括：

基于所述图谱答案查询结果，校准针对各个第一候选答案所对应的问题相关度；

基于各个经校准的问题相关度，从所述至少一个第一候选答案中确定目标答案；

基于所述图谱答案查询结果，校准针对各个第一候选答案所对应的问题相关度，包括：如果图谱答案查询结果对应于第一候选答案，则可以提高该第一候选答案所对应的问题相关度；而如果图谱答案查询结果与第一候选答案不对应，则可以降低该第一候选答案所对应的问题相关度。

8.一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-6中任一项所述方法的步骤。

9.一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-6中任一项所述方法的步骤。

Images