CN111737543A - 一种问答对的提取方法、装置、设备和存储介质 - Google Patents

一种问答对的提取方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN111737543A
CN111737543A CN201910447437.2A CN201910447437A CN111737543A CN 111737543 A CN111737543 A CN 111737543A CN 201910447437 A CN201910447437 A CN 201910447437A CN 111737543 A CN111737543 A CN 111737543A
Authority
CN
China
Prior art keywords
question
candidate
answer
determining
keyword
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910447437.2A
Other languages
English (en)
Inventor
王培英
陈蒙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201910447437.2A priority Critical patent/CN111737543A/zh
Publication of CN111737543A publication Critical patent/CN111737543A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/9032—Query formulation
    • G06F16/90332—Natural language query formulation or dialogue systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Evolutionary Biology (AREA)
  • Game Theory and Decision Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computational Linguistics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种问答对的提取方法、装置、设备和存储介质，该方法包括：根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题；确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对；确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。通过本发明实施例的技术方案，可以提取出较多高质量的问答对，提高提取的准确性。

Description

一种问答对的提取方法、装置、设备和存储介质
技术领域
本发明实施例涉及计算机技术，尤其涉及一种问答对的提取方法、装置、设备和存储介质。
背景技术
在电商等服务行业中，客服需要对用户频繁提出的业务知识类问题进行解答。针对于此，通常可以构建一个问答数据库，基于该问答数据库进行自动解答，从而降低人工客服数量和成本。
在构建问答数据库时，可以是由运营人员根据线上用户的提问总结出高质量的问答对；也可以是从历史对话数据中自动提取出一些高频问答对，以提高提取效率。
现有技术中，提取问答对的过程为：从历史对话数据中提取出比较高频且紧密出现在一起的问答对，并通过检测提取出的问答对中是否包含相同的关键字，来确定将该问答对是否匹配，从而将匹配的问答对添加至问答数据库中，比如：问题Q：“这个免费安装吗”，答案A：“您好安装首次安装免人工费”，可见，问题和答案中均包含关键字“安”、“装”、“免”和“费”，此时可以确定该问答对相匹配，从而可以将该问答对添加至问答数据库中。
然而，在实现本发明过程中，发明人发现现有技术中至少存在如下问题：
由于用户的问题与相应的答案往往是不相邻的，从而利用现有的提取方式无法提取出较多的有效问答对，并且容易混入高频噪声数据，比如欢迎语。而且在真实对话场景中，具有相同语义且匹配的问题和答案并不会总出现相同的关键字，比如问题Q：“明天到货吗”，答案A：“下单会显示送达时间的”。可见，现有的问答对匹配方式无法有效合理提取出高质量的问答对，降低了提取准确性。
发明内容
本发明实施例提供了一种问答对的提取方法、装置、设备和存储介质，以提取出较多高质量的问答对，提高提取的准确性。
第一方面，本发明实施例提供了一种问答对的提取方法，包括：
根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个所述候选答案对应的多个待选问题；
确定每个所述待选问题与相应的候选答案之间的关联度，并基于所述关联度确定每个所述候选答案对应的候选问题，获得各个候选问答对；
确定所述候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
将各所述候选相似度作为预设匹配网络模型的输入，根据所述预设匹配网络模型的输出确定所述候选问答对所对应的匹配结果，并将所述匹配结果为匹配成功的候选问答对确定为目标问答对。
第二方面，本发明实施例还提供了一种问答对的提取装置，包括：
候选答案确定模块，用于根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个所述候选答案对应的多个待选问题；
候选问答对获得模块，用于确定每个所述待选问题与相应的候选答案之间的关联度，并基于所述关联度确定每个所述候选答案对应的候选问题，获得各个候选问答对；
候选相似度确定模块，用于确定所述候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
目标问答对确定模块，用于将各所述候选相似度作为预设匹配网络模型的输入，根据所述预设匹配网络模型的输出确定所述候选问答对所对应的匹配结果，并将所述匹配结果为匹配成功的候选问答对确定为目标问答对。
第三方面，本发明实施例还提供了一种设备，所述设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的问答对的提取方法步骤。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序该程序被处理器执行时实现如本发明任意实施例所提供的问答对的提取方法步骤。
上述发明中的实施例具有如下优点或有益效果：
通过根据历史对话日志中的各个历史答案所对应的第一出现频率，从历史对话日志中先提取出多个候选答案，再提取出每个候选答案对应的多个待选问题，此时提取出的待选问题可以是与候选答案相邻的问题，也可以是非相邻的问题。通过根据每个待选问题与相应的候选答案之间的关联度，从多个待选问题中筛选出每个候选答案对应的候选问题，从而可以获得较多且有效的候选问答对。通过预设匹配网络模型，对每个候选问答对进行深度语义匹配，从而可以提取出较多高质量的问答对，提高提取的准确性。
附图说明
图1是本发明实施例一提供的一种问答对的提取方法的流程图；
图2是本发明实施例一所涉及的一种候选相似度矩阵的示例；
图3是本发明实施例一所涉及的一种MatchPyramid模型的示例；
图4是本发明实施例二提供的一种问答对的提取方法的流程图；
图5是本发明实施例三提供的一种问答对的提取装置的结构示意图；
图6是本发明实施例四所涉及的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种问答对的提取方法的流程图，本实施例可适用于提取高质量的问答对的情况。该方法可以由问答对的提取装置来执行，该装置可以由软件和/或硬件的方式来实现，集成于具有数据处理功能的终端中。该方法具体包括以下步骤：
S110、根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题。
其中，历史对话日志可以是指在预设历史时间段内，用户与客服之间产生的各个对话记录。历史答案可以是指历史对话日志中客服回复的答案。待选问题可以是指历史对话日志中用户提出的问题。第一出现频率可以是指历史答案在历史对话日志中出现的次数。
具体地，通过统计历史对话日志中的每个历史答案的第一出现频率，可以将第一出现频率大于或等于预设频率的历史答案确定为候选答案，或者也可以将各个第一出现频率进行降序排列，将排列后的前预设数量的第一出现频率所对应的历史答案确定为候选答案，从而可以确定出多个高频回复的候选答案。由于候选答案是高频出现的，并且用户的提问是千变万化的，使得候选答案可以对应多个不同的待选问题，从而可以根据每个候选答案在历史对话日志中反向寻找相应的多个待选问题。本实施例中的候选答案和待选问题并不是一起提取的，使得提取出的候选答案与待选问题不一定是紧密相邻的，从而有利于提取出较多的有效问答对。
S120、确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对。
其中，关联度可以是指候选答案与待选问题之间的匹配度，即匹配度越高，关联度越高。候选问答对可以是指由一个候选答案与相应的一个候选问题组成的问答对。
具体地，本实施例可以根据每个待选问题中的关键字与相应的候选答案中的关键字之间的匹配度，确定每个待选问题与相应的候选答案之间的关联度。基于候选答案与每个待选问题之间的关联度，可以将关联度最高的待选问题确定为该候选答案对应的候选问题，生成一个候选问答对，从而可以获得多个有效的候选问答对。
S130、确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度。
其中，答案关键字可以是指候选答案中的一个有效的字或者词。问题关键字可以是指候选问题中的一个有效的字或者词。候选相似度可以是指在一个候选问答对中，每个答案关键字与每个问题关键字之间的相似程度。
示例性地，S130可以包括：确定候选问答对中的每个答案关键字所对应的答案词向量以及每个问题关键字所对应的问题词向量；基于余弦距离公式，根据每个答案词向量和每个问题词向量，确定每个答案关键字与每个问题关键字之间的候选相似度。
其中，词向量可以基于预设词库进行确定。词向量中元素的维度与预设词库中的词汇数量相同，并且词向量中的每位元素均可以按照预定顺序对应于预设词库中的每个词。答案词向量中的每位元素对应的元素值可以用于表征该元素对应的预设词库中的词作为答案关键字的上下文词的概率，从而可以根据预设词库中的每个词作为答案关键字的上下文词的概率来表示答案关键字所对应的答案词向量。同理，问题词向量中的每位元素对应的元素值可以用于表征该元素对应的预设词库中的词作为问题关键字的上下文词的概率，从而可以根据预设词库中的每个词作为问题关键字的上下文词的概率来表示问题关键字所对应的问题词向量。
具体地，本实施例可以对候选问答对中的候选问题和候选答案分别进行分词处理，确定出各个问题关键字和各个答案关键字。分词处理可以包括但不限于中文分词、识别专有名词以及去停用词。通过对候选问题和候选答案进行分词处理，并剔除没有语义的停用词，比如：“啊”、“吧”等，从而可以快速获取各个问题词向量和各个答案词向量，提高了词向量的生成效率。示例性地，本实施例可以基于如下的余弦距离公式，确定每个答案关键字与每个问题关键字之间的候选相似度：
Figure BDA0002074080030000071
其中，Mij是指第i个答案关键字与第j个问题关键字之间的候选相似度；Ai是指第i个答案关键字对应的答案词向量；Qj是第j个问题关键字对应的问题词向量。通过利用答案词向量与问题词向量的方式，确定答案关键字与问题关键字之间的候选相似度，可以衡量词的上下文重要性，避免发生语义偏移，以便提高语义匹配的准确性。
S140、将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。
其中，预设匹配网络模型可以是指用于确定候选问答对是否匹配的神经网络模型。预设匹配网络模型可以为但不限于文本匹配MatchPyramid模型。匹配结果可以包括两种，分别为匹配成功和匹配失败。
具体地，本实施例在使用预设匹配网络模型之前，还包括对预设匹配网络模型的训练过程。将多个匹配的问答对样本所对应的候选相似度以及多个不匹配的问答对样本(可以是指随机产生的问答对)所对应的候选相似度作为训练样本，对预设匹配网络模型进行训练。基于损失函数，根据预设匹配网络模型的训练匹配结果与标准匹配结果，计算每个问答对样本对应的训练误差，当训练误差大于或等于预设误差时，调整预设匹配网络模型的网络参数；当训练误差小于预设误差时，或者迭代次数等于预设次数时，可以确定预设匹配网络模型训练结束。本实施例可以将每个候选问答对对应的各候选相似度输入至训练结束后的预设回归网络模型中，根据预设回归网络模型的输出确定每个候选问答对所对应的匹配结果，从而可以基于预设回归网络模型实现对候选问答对是否匹配的自动判断，提高匹配效率。通过将匹配结果为匹配成功的候选问答对确定为目标问答对，以便可以将高质量的目标问答对添加至问答数据库中。
本实施例的技术方案，通过根据历史对话日志中的各个历史答案所对应的第一出现频率，从历史对话日志中先提取出多个候选答案，再提取出每个候选答案对应的多个待选问题，此时提取出的待选问题可以是与候选答案相邻的问题，也可以是非相邻的问题。通过根据每个待选问题与相应的候选答案之间的关联度，从多个待选问题中筛选出每个候选答案对应的候选问题，从而可以获得较多且有效的候选问答对。通过预设匹配网络模型，对每个候选问答对进行深度语义匹配，从而可以提取出较多高质量的问答对，提高提取的准确性。
在上述技术方案的基础上，S110可以包括：基于预设过滤规则，对历史对话日志中的各个历史答案进行过滤；统计过滤出的历史答案所对应的第一出现频率，将第一出现频率大于或等于预设频率的历史答案作为候选答案，小于预设频率的历史答案作为第一答案；确定每个第一答案与每个候选答案之间的答案相似度，将答案相似度大于或等于预设相似度的第一答案也作为候选答案；根据历史对话日志中的各个对话记录，提取在每个对话记录中位于候选答案之前的用户问题，并根据从各对话记录中提取出的用户问题确定候选答案对应的多个待选问题。
其中，预设过滤规则可以是用于过滤历史答案中的无意义答案的规则。无意义答案可以是指但不限于欢迎语、客套话和活动宣传语。本实施例中的候选答案为高频答案，使得候选答案所在的对话记录可以为一个或多个。
具体地，通过基于预设过滤规则，将历史对话日志中的无意义的历史答案进行过滤，使得过滤后获得的历史答案均为针对于用户问题所回复的答案，从而可以避免混入高频噪声。通过在过滤后获得的所有历史答案中，将第一出现频率大于或等于预设频率的历史答案直接作为候选答案，以便获得高频回复的历史答案。同时将第一出现频率小于预设频率的历史答案作为第一答案，并可以基于编辑距离或者最长公共字串的占比来确定每个第一答案与每个候选答案之间的答案相似度。通过将答案相似度大于或等于预设相似度的第一答案也作为候选答案，从而也可以将第一出现频率较低，但与高频答案相似的第一答案也作为候选答案，从而可以避免长尾问答对的遗漏，并且也可以满足客服的多样性需求，比如某个高频的候选答案为：“包安装”；某个低频且与该候选答案相似的第一答案为：“亲，包安装哦”，通过将该第一答案也作为候选答案使得客服可以选取自身喜好的答案回复用户。在确定出每个候选答案之后，可以从历史对话日志中的各个对话记录中，提取出每个候选答案所在的对话记录，并根据对话记录中的位于候选答案之前的用户问题，确定出每个候选答案对应的多个待选问题，比如可以将对话记录中的位于候选答案之前的用户问题均作为该候选答案对应的待选问题。
示例性地，根据从各对话记录中提取出的用户问题确定候选答案对应的多个待选问题，可以包括：若从对话记录中提取出的用户问题为多个，则获得距离候选答案最近的第一用户问题；检测是否存在与第一用户问题连续提问的第二用户问题；若是，则将第一用户问题和第二用户问题均作为候选答案对应的待选问题；若否，则将第一用户问题作为候选答案对应的待选问题。
具体地，对于每个候选答案所在的每个对话记录而言，若在对话记录中位于该候选答案之前的用户问题仅存在一个，则可以直接将该用户问题确定为该候选答案对应的待选问题。若在对话记录中位于该候选答案之前的用户问题为多个，则将位于该候选答案之前且距离该候选答案最近的用户问题作为第一用户问题，并通过检测在对话记录中是否存在与第一用户问题连续提问的第二用户问题，若存在，则可以将第一用户问题和第二用户问题均作为该候选答案对应的待选问题，其中第二用户问题可以为一个或多个；若不存在，则可以将第一用户问题作为该候选答案对应的待选问题。
示例性地，某个对话记录如下：
问题Q1：你好
答案A1：在的哦
问题Q2：保修多长时间
问题Q3：使用一段时间有问题，我找谁解决呀
答案A4：亲爱哒
答案A5：本产品全国联保，享受三包服务，保修期为：整机一年质保,主要零部件三年质保
在上述的对话记录中，若答案A5为候选答案，则距离候选答案A5最近的第一用户问题为问题Q3，并且存在与问题Q3连续提问的第二用户问题Q2，从而可以将问题Q2和问题Q3均作为候选答案A5的待选问题。
在上述技术方案的基础上，当预设匹配网络模型为文本匹配MatchPyramid模型时，S140中的“将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果”，可以包括：将各候选相似度组成候选问答对所对应的候选相似度矩阵；将候选相似度矩阵作为MatchPyramid模型的输入，根据MatchPyramid模型的输出确定候选问答对所对应的匹配结果。
其中，候选相似度矩阵可以是由候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度组成的矩阵。例如，在候选问答对中的候选问题为：“请问安装收费吗”，候选答案为：“首次安装免人工费”时，图2给出了一种候选相似度矩阵的示例，如图2所示，候选相似度矩阵中的每个行向量表示一个问题关键字与每个答案关键字之间的候选相似度；每个列向量标识一个答案关键字与每个问题关键字之间的候选相似度。
具体地，通过将候选问答对中的各个候选相似度矩阵组成一个候选相似度矩阵后，可以将该候选相似度矩阵作为一个二维的灰度图像，输入至MatchPyramid模型中，从而可以将问答对匹配的问题转换为一个图像分类的问题，并且根据MatchPyramid模型的输出可以确定出候选问答对所对应的匹配结果。图3给出了一种MatchPyramid模型的示例。如图3所示，MatchPyramid模型可以包含一层CNN(Convolutional Neural Network，卷积神经网络)、全连接层和一个输出层，其中CNN网络包含卷积层和池化层；全连接层用于对CNN层输出的低维向量x进行非线性转换，并且通过softmax归一化指数函数获得候选问答对的匹配程度。输出层中的S0和S1可以分别表示正负类得分，其中正类表示候选问答对匹配；负类表示候选问答对不匹配。通过将候选相似度矩阵输入至MatchPyramid模型中，可以根据MatchPyramid模型输出的正类得分确定候选问答对所对应的匹配结果，比如当正类得分大于0.5时，确定候选问答对所对应的匹配结果为匹配成功，否则确定匹配结果为匹配失败，从而可以对候选问答对是否匹配进行自动判断，大大提高了判断效率。
实施例二
图4为本发明实施例二提供的一种问答对的提取方法的流程图，本实施例在上述实施例的基础上，对“确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对”进行优化。其中与上述各实施例相同或相应的术语的解释在此不再赘述。
参见图4，本实施例提供的问答对的提取方法包括以下步骤：
S210、根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题。
S220、对各候选答案进行聚类，确定各个候选答案集合，并根据候选答案与待选问题之间的对应关系，确定每个候选答案集合对应的待选问题集合。
其中，候选答案集合可以由两个或两个以上的相似度大于预设相似度阈值的候选答案组成。待选问题集合可以是由候选答案集合中的每个候选答案对应的多个待选问题组成。
具体地，本实施例可以基于现有的聚类方式，对各候选答案进行聚类，以将相似的候选答案聚类到一起，获得多个候选答案集合，以便后续可以获取较多的问题关键字，提高关联度确定的准确性。针对每个候选答案集合，获得候选答案集合中的每个候选答案所对应的多个待选问题，并将获得的这些待选问题进行组合，确定该候选答案集合对应的待选问题集合。
S230、对待选问题集合中的各个待选问题进行问题关键字提取，确定每个待选问题集合对应的问题关键字集合。
其中，问题关键字可以是待选问题中的一个字或者一个词。
具体地，对于每个待选问题集合而言，可以将待选问题集合中的所有待选问题进行分词处理，获得各个待选问题中的每个问题关键字，便将所有的问题关键字进行组合，确定该待选问题集合对应的问题关键字集合。
S240、根据各问题关键字集合，确定问题关键字集合中的每个问题关键字对应的关键字重要程度，并基于各关键字重要程度确定每个待选问题与相应的候选答案之间关联度。
其中，问题关键字对应的关键字重要程度可以是指问题关键字在问题关键字集合中的重要程度，其可以反映出问题关键字对于候选答案的重要程度。若问题关键字重要程度越高，则表示该问题关键字是候选答案的标准问题中的关键字的可能性也越高。
具体地，本实施例可以基于TF-IDF(Term Frequency–Inverse DocumentFrequency，词频-逆文本频率指数)方式，根据每个问题关键字集合中的各个问题关键字，可以确定出每个问题关键字对应的关键字重要程度。根据每个待选问题中的各个问题关键字对应的关键字重要程度，可以计算出该待选问题对应的问题重要程度，并可以将该问题重要程度作为该待选问题与相应的候选答案之间的关联度。同理，可以确定出每个待选问题与相应的候选答案之间的关联度。
示例性地，S240中的“根据各问题关键字集合，确定问题关键字集合中的每个问题关键字对应的关键字重要程度”，可以包括：根据每个问题关键字对应的第二出现频率、包含有同一问题关键字的问题关键字集合数量，以及问题关键字集合总数量，确定问题关键字集合中的每个问题关键字对应的关键字重要程度。
其中，第二出现频率可以是指出现在同一问题关键字集合中的出现频率。本实施例可以通过统计同一问题关键字集合中的每个问题关键字的出现频率，作为第二出现频率。示例性地，可以根据如下公式，确定问题关键字集合中的每个问题关键字对应的关键字重要程度：
Figure BDA0002074080030000141
其中，Siw是第i个问题关键字集合Di中的问题关键字w对应的关键字重要程度；Fiw是问题关键字w出现在问题关键字集合Di的第二出现频率；N为问题关键字集合总数量；nw为包含有问题关键字w的问题关键字集合数量；m为问题关键字集合Di中的任一问题关键字；Fim为问题关键字m出现在问题关键字集合Di的第二出现频率；nm为包含有问题关键字m的问题关键字集合数量。具体地，本实施例可以对基于上述公式，对每个问题关键字对应的关键字重要程度进行归一化处理，以便可以准确地反映出每个问题关键词对应的关键词重要程度。
示例性地，S240中的“基于各关键字重要程度确定每个待选问题与相应的候选答案之间关联度”，可以包括：将待选问题中的各个问题关键字所对应的关键字重要程度进行相加，并将相加结果确定为待选问题与相应的候选答案之间的关联度。
具体地，对于每个待选问题而言，可以将该待选问题中的各个问题关键字对应的关键字重要程度进行相加，获得的相加结果可以作为该待选问题与相应的候选答案之间的关联度。
S250、将关联度最高的待选问题确定为相应的候选答案所对应的候选问题，获得候选问答对。
具体地，对于每个候选答案对应的多个待选问题，可以基于每个待选问题对应的关联度，将关联度最高的待选问题作为该候选答案对应的候选问题，从而可以获得多个有效的候选问答对。
S260、确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度。
S270、将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。
本实施例的技术方案，通过对候选答案进行聚类确定出各个候选答案集合以及每个候选答案集合对应的待选问题集合，并对待选问题集合中的各个待选问题进行问题关键字提取，确定出每个问题关键字对应的关键字重要程度；基于各关键字重要程度确定每个待选问题与相应的候选答案之间关联度，并将关联度最高的待选问题确定为相应的候选答案所对应的候选问题，从而可以获得更加有效准确的候选问答对，进一步提高问答对提取的准确性。
在上述技术方案的基础上，在S270之后，还包括：获取与历史时间段所对应的当前时间段产生的当前对话日志；根据当前对话日志中的各个当前答案所对应的第三出现频率，确定多个当前候选答案，以及每个当前候选答案对应的多个当前待选问题；根据各当前候选答案、各当前待选问题、以及历史时间段对应的历史候选答案和历史待选问题，从各当前待选问题中确定与当前候选答案对应的当前候选问题，获得各个当前候选问答对；根据预设匹配网络模型，确定每个当前候选问答对所对应的匹配结果，并将匹配结果为匹配成功的当前候选问答对确定为目标问答对。
其中，当前对话日志可以是指当前时间段产生的各个对话记录，比如当天时间段内产生的当前对话日志。第三出现频率可以是指当前对话日志中的每个当前答案在当前对话日志中出现的次数。
具体地，本实施例可以基于预设过滤规则，过滤掉当前对话日志中的无意义的当前答案，比如欢迎语、礼貌性回复等。根据过滤后获得的各个当前答案所对应的第三出现频率，可以将第三出现频率高于预设频率的当前答案作为当前候选答案。并可以基于与提取历史待选问题相似的方式，从当前对话日志中提取出每个当前候选答案对应的多个当前待选问题。本实施例可以对当前候选答案和历史候选答案进行聚类，确定出各个第一候选答案集合，并根据历史候选答案与历史待选问题之间的对应关系以及当前候选答案与当前待选问题之间的对应关系，确定出每个第一候选答案集合对应的第一待选问题集合；对第一待选问题集合中的各个第一待选问题进行问题关键字提取，确定每个第一待选问题集合对应的第一问题关键字集合，其中第一待选问题可以为历史待选问题或者当前待选问题。基于与上述步骤S240的实现方式，可以根据各第一问题关键字集合，确定出第一问题关键字集合中的每个问题关键字对应的关键字重要程度，并可以将第一待选问题为当前待选问题中的各个当前问题关键字对应的关键字重要程度进行相加，获得的相加结果作为当前待选问题与相应的当前候选答案之间的关联度，并将关联度最高的当前待选问题作为相应的当前候选答案对应的当前候选问题，从而可以确定出多个当前候选问答对。通过将每个当前候选问答对中的每个当前答案关键字与每个当前问题关键字之间的候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出可以确定出每个当前候选问答对所对应的匹配结果，并将匹配结果为匹配成功的当前候选问答对确定为目标问答对，从而可以将匹配成功的高质量的当前候选问答对实时添加至问答数据库中，实现了对短时间内的对话日志进行问答对的挖掘，以实时更新问答库，保证了问答对的时效性。
以下是本发明实施例提供的问答对的提取装置的实施例，该装置与上述各实施例的问答对的提取方法属于同一个发明构思，在问答对的提取装置的实施例中未详尽描述的细节内容，可以参考上述问答对的提取方法的实施例。
实施例三
图5为本发明实施例三提供的一种问答对的提取装置的结构示意图，本实施例可适用于提取高质量的问答对的情况，该装置具体包括：候选答案确定模块310、候选问答对获得模块320、候选相似度确定模块330和目标问答对确定模块340。
其中，候选答案确定模块310，用于根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题；候选问答对获得模块320，用于确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对；候选相似度确定模块330，用于确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；目标问答对确定模块340，用于将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。
可选地，候选答案确定模块310，包括：
历史答案过滤单元，用于基于预设过滤规则，对历史对话日志中的各个历史答案进行过滤；
第一候选答案确定单元，用于统计过滤出的历史答案所对应的第一出现频率，将第一出现频率大于或等于预设频率的历史答案作为候选答案，小于预设频率的历史答案作为第一答案；
第二候选答案确定单元，用于确定每个第一答案与每个候选答案之间的答案相似度，将答案相似度大于或等于预设相似度的第一答案也作为候选答案；
待选问题确定单元，用于根据历史对话日志中的各个对话记录，提取在每个对话记录中位于候选答案之前的用户问题，并根据从各对话记录中提取出的用户问题确定候选答案对应的多个待选问题。
可选地，待选问题确定单元，具体用于：若从对话记录中提取出的用户问题为多个，则获得距离候选答案最近的第一用户问题；检测是否存在与第一用户问题连续提问的第二用户问题；若是，则将第一用户问题和第二用户问题均作为候选答案对应的待选问题；若否，则将第一用户问题作为候选答案对应的待选问题。
可选地，候选问答对获得模块320，包括：
待选问题集合确定单元，用于对各候选答案进行聚类，确定各个候选答案集合，并根据候选答案与待选问题之间的对应关系，确定每个候选答案集合对应的待选问题集合；
问题关键字集合确定单元，用于对待选问题集合中的各个待选问题进行问题关键字提取，确定每个待选问题集合对应的问题关键字集合；
关联度确定单元，用于根据各问题关键字集合，确定问题关键字集合中的每个问题关键字对应的关键字重要程度，并基于各关键字重要程度确定每个待选问题与相应的候选答案之间关联度；
候选问答对确定单元，用于将关联度最高的待选问题确定为相应的候选答案所对应的候选问题，获得候选问答对。
可选地，关联度确定单元，包括：关键字重要程度确定子单元，用于根据每个问题关键字对应的第二出现频率、包含有同一问题关键字的问题关键字集合数量，以及问题关键字集合总数量，确定问题关键字集合中的每个问题关键字对应的关键字重要程度，其中，第二出现频率是指出现在同一问题关键字集合的出现频率。
可选地，根据如下公式，确定问题关键字集合中的每个问题关键字对应的关键字重要程度：
Figure BDA0002074080030000191
其中，Siw是第i个问题关键字集合Di中的问题关键字w对应的关键字重要程度；Fiw是问题关键字w出现在问题关键字集合Di的第二出现频率；N为问题关键字集合总数量；nw为包含有问题关键字w的问题关键字集合数量；m为问题关键字集合Di中的任一问题关键字；Fim为问题关键字m出现在问题关键字集合Di的第二出现频率；nm为包含有问题关键字m的问题关键字集合数量。
可选地，关联度确定单元，还包括：关联度确定子单元，用于将待选问题中的各个问题关键字所对应的关键字重要程度进行相加，并将相加结果确定为待选问题与相应的候选答案之间的关联度。
可选地，候选相似度确定模块330，具体用于：确定候选问答对中的每个答案关键字所对应的答案词向量以及每个问题关键字所对应的问题词向量；基于余弦距离公式，根据每个答案词向量和每个问题词向量，确定每个答案关键字与每个问题关键字之间的候选相似度。
可选地，预设匹配网络模型为文本匹配MatchPyramid模型；相应地，目标问答对确定模块340还包括：匹配结果确定单元，用于将各候选相似度组成候选问答对所对应的候选相似度矩阵；将候选相似度矩阵作为MatchPyramid模型的输入，根据MatchPyramid模型的输出确定候选问答对所对应的匹配结果。
可选地，该装置还包括：
当前对话日志获取模块，用于在将匹配结果为匹配成功的候选问答对确定为目标问答对之后，获取与历史时间段所对应的当前时间段产生的当前对话日志；
当前候选答案确定模块，用于根据当前对话日志中的各个当前答案所对应的第三出现频率，确定多个当前候选答案，以及每个当前候选答案对应的多个当前待选问题；
当前候选问答对确定模块，用于根据各当前候选答案、各当前待选问题、以及历史时间段对应的历史候选答案和历史待选问题，从各当前待选问题中确定与当前候选答案对应的当前候选问题，获得各个当前候选问答对；
目标问答对确定模块340，还用于根据预设匹配网络模型，确定每个当前候选问答对所对应的匹配结果，并将匹配结果为匹配成功的当前候选问答对确定为目标问答对。
本发明实施例所提供的问答对的提取装置可执行本发明任意实施例所提供的问答对的提取方法，具备执行问答对的提取方法相应的功能模块和有益效果。
实施例四
图6为本发明实施例四提供的一种设备的结构示意图。图6示出了适于用来实现本发明实施方式的示例性设备12的框图。图6显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图6未显示，通常称为“硬盘驱动器”)。尽管图6中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。系统存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如系统存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发实施例所提供的一种问答对的提取方法步骤，该方法包括：
根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题；
确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对；
确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。
当然，本领域技术人员可以理解，处理器还可以实现本发明任意实施例所提供的问答对的提取方法的技术方案。
实施例五
本实施例五提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所提供的问答对的提取方法步骤，该方法包括：
根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个候选答案对应的多个待选问题；
确定每个待选问题与相应的候选答案之间的关联度，并基于关联度确定每个候选答案对应的候选问题，获得各个候选问答对；
确定候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
将各候选相似度作为预设匹配网络模型的输入，根据预设匹配网络模型的输出确定候选问答对所对应的匹配结果，并将匹配结果为匹配成功的候选问答对确定为目标问答对。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于：电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本领域普通技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个计算装置上，或者分布在多个计算装置所组成的网络上，可选地，他们可以用计算机装置可执行的程序代码来实现，从而可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件的结合。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种问答对的提取方法，其特征在于，包括：
根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个所述候选答案对应的多个待选问题；
确定每个所述待选问题与相应的候选答案之间的关联度，并基于所述关联度确定每个所述候选答案对应的候选问题，获得各个候选问答对；
确定所述候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
将各所述候选相似度作为预设匹配网络模型的输入，根据所述预设匹配网络模型的输出确定所述候选问答对所对应的匹配结果，并将所述匹配结果为匹配成功的候选问答对确定为目标问答对。
2.根据权利要求1所述的方法，其特征在于，根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个所述候选答案对应的多个待选问题，包括：
基于预设过滤规则，对历史对话日志中的各个历史答案进行过滤；
统计过滤出的历史答案所对应的第一出现频率，将所述第一出现频率大于或等于预设频率的历史答案作为候选答案，小于预设频率的历史答案作为第一答案；
确定每个所述第一答案与每个所述候选答案之间的答案相似度，将所述答案相似度大于或等于预设相似度的第一答案也作为候选答案；
根据所述历史对话日志中的各个对话记录，提取在每个所述对话记录中位于所述候选答案之前的用户问题，并根据从各所述对话记录中提取出的用户问题确定所述候选答案对应的多个待选问题。
3.根据权利要求2所述的方法，其特征在于，根据从各所述对话记录中提取出的用户问题确定所述候选答案对应的多个待选问题，包括：
若从所述对话记录中提取出的用户问题为多个，则获得距离所述候选答案最近的第一用户问题；
检测是否存在与所述第一用户问题连续提问的第二用户问题；
若是，则将所述第一用户问题和所述第二用户问题均作为所述候选答案对应的待选问题；
若否，则将所述第一用户问题作为所述候选答案对应的待选问题。
4.根据权利要求1所述的方法，其特征在于，确定每个所述待选问题与相应的候选答案之间的关联度，并基于所述关联度确定每个所述候选答案对应的候选问题，获得各个候选问答对，包括：
对各所述候选答案进行聚类，确定各个候选答案集合，并根据所述候选答案与所述待选问题之间的对应关系，确定每个所述候选答案集合对应的待选问题集合；
对所述待选问题集合中的各个待选问题进行问题关键字提取，确定每个所述待选问题集合对应的问题关键字集合；
根据各所述问题关键字集合，确定所述问题关键字集合中的每个所述问题关键字对应的关键字重要程度，并基于各所述关键字重要程度确定每个待选问题与相应的候选答案之间关联度；
将所述关联度最高的待选问题确定为相应的候选答案所对应的候选问题，获得候选问答对。
5.根据权利要求4所述的方法，其特征在于，根据各所述问题关键字集合，确定所述问题关键字集合中的每个所述问题关键字对应的关键字重要程度，包括：
根据每个所述问题关键字对应的第二出现频率、包含有同一所述问题关键字的问题关键字集合数量，以及问题关键字集合总数量，确定所述问题关键字集合中的每个所述问题关键字对应的关键字重要程度，其中，所述第二出现频率是指出现在同一问题关键字集合的出现频率。
6.根据权利要求5所述的方法，其特征在于，根据如下公式，确定所述问题关键字集合中的每个所述问题关键字对应的关键字重要程度：
Figure FDA0002074080020000031
其中，Siw是第i个问题关键字集合Di中的问题关键字w对应的关键字重要程度；Fiw是问题关键字w出现在问题关键字集合Di的第二出现频率；N为问题关键字集合总数量；nw为包含有问题关键字w的问题关键字集合数量；m为问题关键字集合Di中的任一问题关键字；Fim为问题关键字m出现在问题关键字集合Di的第二出现频率；nm为包含有问题关键字m的问题关键字集合数量。
7.根据权利要求4所述的方法，其特征在于，基于各所述关键字重要程度确定每个待选问题与相应的候选答案之间关联度，包括：
将所述待选问题中的各个问题关键字所对应的关键字重要程度进行相加，并将相加结果确定为所述待选问题与相应的候选答案之间的关联度。
8.根据权利要求1所述的方法，其特征在于，确定所述候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度，包括：
确定所述候选问答对中的每个答案关键字所对应的答案词向量以及每个问题关键字所对应的问题词向量；
基于余弦距离公式，根据每个所述答案词向量和每个所述问题词向量，确定每个所述答案关键字与每个所述问题关键字之间的候选相似度。
9.根据权利要求1所述的方法，其特征在于，所述预设匹配网络模型为文本匹配MatchPyramid模型；
相应地，将各所述候选相似度作为预设匹配网络模型的输入，根据所述预设匹配网络模型的输出确定所述候选问答对所对应的匹配结果，包括：
将各所述候选相似度组成所述候选问答对所对应的候选相似度矩阵；
将所述候选相似度矩阵作为所述MatchPyramid模型的输入，根据所述MatchPyramid模型的输出确定所述候选问答对所对应的匹配结果。
10.根据权利要求1-9任一所述的方法，其特征在于，在将所述匹配结果为匹配成功的候选问答对确定为目标问答对之后，还包括：
获取与历史时间段所对应的当前时间段产生的当前对话日志；
根据所述当前对话日志中的各个当前答案所对应的第三出现频率，确定多个当前候选答案，以及每个所述当前候选答案对应的多个当前待选问题；
根据各所述当前候选答案、各所述当前待选问题、以及所述历史时间段对应的历史候选答案和历史待选问题，从各所述当前待选问题中确定与所述当前候选答案对应的当前候选问题，获得各个当前候选问答对；
根据所述预设匹配网络模型，确定每个所述当前候选问答对所对应的匹配结果，并将所述匹配结果为匹配成功的当前候选问答对确定为目标问答对。
11.一种问答对的提取装置，其特征在于，包括：
候选答案确定模块，用于根据历史对话日志中的各个历史答案所对应的第一出现频率，确定多个候选答案以及每个所述候选答案对应的多个待选问题；
候选问答对获得模块，用于确定每个所述待选问题与相应的候选答案之间的关联度，并基于所述关联度确定每个所述候选答案对应的候选问题，获得各个候选问答对；
候选相似度确定模块，用于确定所述候选问答对中的每个答案关键字与每个问题关键字之间的候选相似度；
目标问答对确定模块，用于将各所述候选相似度作为预设匹配网络模型的输入，根据所述预设匹配网络模型的输出确定所述候选问答对所对应的匹配结果，并将所述匹配结果为匹配成功的候选问答对确定为目标问答对。
12.一种设备，其特征在于，所述设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-10中任一所述的问答对的提取方法步骤。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-11中任一所述的问答对的提取方法步骤。
CN201910447437.2A 2019-05-27 2019-05-27 一种问答对的提取方法、装置、设备和存储介质 Pending CN111737543A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910447437.2A CN111737543A (zh) 2019-05-27 2019-05-27 一种问答对的提取方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910447437.2A CN111737543A (zh) 2019-05-27 2019-05-27 一种问答对的提取方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN111737543A true CN111737543A (zh) 2020-10-02

Family

ID=72645879

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910447437.2A Pending CN111737543A (zh) 2019-05-27 2019-05-27 一种问答对的提取方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN111737543A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112925895A (zh) * 2021-03-29 2021-06-08 中国工商银行股份有限公司 自然语言软件运维方法及装置
CN113420139A (zh) * 2021-08-24 2021-09-21 北京明略软件系统有限公司 一种文本匹配方法、装置、电子设备及存储介质
CN114372122A (zh) * 2021-12-08 2022-04-19 阿里云计算有限公司 信息的获取方法、计算设备及存储介质
CN114429134A (zh) * 2021-11-25 2022-05-03 北京容联易通信息技术有限公司 基于多元语义表示的层次化优质话术挖掘方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103455535A (zh) * 2013-05-08 2013-12-18 深圳市明唐通信有限公司 基于历史咨询数据构建知识库的方法
CN108415980A (zh) * 2018-02-09 2018-08-17 平安科技（深圳）有限公司 问答数据处理方法、电子装置及存储介质
US20180349477A1 (en) * 2017-06-06 2018-12-06 Facebook, Inc. Tensor-Based Deep Relevance Model for Search on Online Social Networks
WO2019052261A1 (zh) * 2017-09-18 2019-03-21 京东方科技集团股份有限公司 用于问答服务的方法、问答服务系统以及存储介质
CN109657038A (zh) * 2018-10-10 2019-04-19 阿里巴巴集团控股有限公司 一种问答对数据的挖掘方法、装置及电子设备
CN109766423A (zh) * 2018-12-29 2019-05-17 上海智臻智能网络科技股份有限公司 基于神经网络的问答方法及装置、存储介质、终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103455535A (zh) * 2013-05-08 2013-12-18 深圳市明唐通信有限公司 基于历史咨询数据构建知识库的方法
US20180349477A1 (en) * 2017-06-06 2018-12-06 Facebook, Inc. Tensor-Based Deep Relevance Model for Search on Online Social Networks
WO2019052261A1 (zh) * 2017-09-18 2019-03-21 京东方科技集团股份有限公司 用于问答服务的方法、问答服务系统以及存储介质
CN108415980A (zh) * 2018-02-09 2018-08-17 平安科技（深圳）有限公司 问答数据处理方法、电子装置及存储介质
CN109657038A (zh) * 2018-10-10 2019-04-19 阿里巴巴集团控股有限公司 一种问答对数据的挖掘方法、装置及电子设备
CN109766423A (zh) * 2018-12-29 2019-05-17 上海智臻智能网络科技股份有限公司 基于神经网络的问答方法及装置、存储介质、终端

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JUNQING HE等: "Applying deep matching networks to Chinese medical question answering: a study and a dataset", 《BMC MEDICAL INFORMATICS AND DECISION MAKING》, 9 April 2019 (2019-04-09), pages 93 - 98 *
陈柯锦;侯俊安;郭智;梁霄;: "基于多尺度相似度特征的答案选择算法", 系统工程与电子技术, no. 06, 11 May 2018 (2018-05-11) *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112925895A (zh) * 2021-03-29 2021-06-08 中国工商银行股份有限公司 自然语言软件运维方法及装置
CN113420139A (zh) * 2021-08-24 2021-09-21 北京明略软件系统有限公司 一种文本匹配方法、装置、电子设备及存储介质
CN114429134A (zh) * 2021-11-25 2022-05-03 北京容联易通信息技术有限公司 基于多元语义表示的层次化优质话术挖掘方法及装置
CN114372122A (zh) * 2021-12-08 2022-04-19 阿里云计算有限公司 信息的获取方法、计算设备及存储介质

Similar Documents

Publication Publication Date Title
US11334635B2 (en) Domain specific natural language understanding of customer intent in self-help
CN108491433B (zh) 聊天应答方法、电子装置及存储介质
US11093854B2 (en) Emoji recommendation method and device thereof
CN113495900B (zh) 基于自然语言的结构化查询语言语句获取方法及装置
CN106897428B (zh) 文本分类特征提取方法、文本分类方法及装置
WO2021051517A1 (zh) 基于卷积神经网络的信息检索方法、及其相关设备
CN111125334B (zh) 一种基于预训练的搜索问答系统
CN111737543A (zh) 一种问答对的提取方法、装置、设备和存储介质
AU2019366858B2 (en) Method and system for decoding user intent from natural language queries
US20170193086A1 (en) Methods, devices, and systems for constructing intelligent knowledge base
US11216618B2 (en) Query processing method, apparatus, server and storage medium
EP3690676A1 (en) Method, apparatus, computer device and storage medium for verifying community question answer data
CN107491436A (zh) 一种标题党识别方法和装置、服务器、存储介质
CN110569289B (zh) 基于大数据的列数据处理方法、设备及介质
CN110276009B (zh) 一种联想词的推荐方法、装置、电子设备及存储介质
CN111767393A (zh) 一种文本核心内容提取方法及装置
CN117609479B (zh) 一种模型处理方法、装置、设备、介质及产品
CN110597844A (zh) 异构数据库数据统一访问方法及相关设备
CN112528703A (zh) 一种识别表格结构的方法、装置及电子设备
Wei et al. Online education recommendation model based on user behavior data analysis
CN111062208A (zh) 一种文件审核的方法、装置、设备及存储介质
CN115905885A (zh) 数据识别方法、设备、存储介质及程序产品
CN113505293B (zh) 信息推送方法、装置、电子设备及存储介质
CN115640378A (zh) 工单检索方法、服务器、介质及产品
CN111382265A (zh) 搜索方法、装置、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination