CN110019715A - 应答确定方法、装置、设备、介质和系统 - Google Patents

应答确定方法、装置、设备、介质和系统 Download PDF

Info

Publication number
CN110019715A
CN110019715A CN201711298502.7A CN201711298502A CN110019715A CN 110019715 A CN110019715 A CN 110019715A CN 201711298502 A CN201711298502 A CN 201711298502A CN 110019715 A CN110019715 A CN 110019715A
Authority
CN
China
Prior art keywords
sentence
answer
user
input
statement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711298502.7A
Other languages
English (en)
Other versions
CN110019715B (zh
Inventor
王成龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201711298502.7A priority Critical patent/CN110019715B/zh
Publication of CN110019715A publication Critical patent/CN110019715A/zh
Application granted granted Critical
Publication of CN110019715B publication Critical patent/CN110019715B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3329Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/334Query execution

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请实施例公开了一种应答确定方法、装置、设备、介质和系统,用以提高对用户输入的语句的响应速度。所述应答确定方法,包括:接收用户输入的语句;计算所述用户输入的语句与知识库中至少一个问题语句的相似度,并计算所述用户输入的语句与所述知识库中至少一个应答语句的匹配度;其中,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在所述知识库中确定针对所述用户输入语句的应答语句。

Description

应答确定方法、装置、设备、介质和系统
技术领域
本申请涉及计算机技术领域,尤其涉及一种应答确定方法、装置、设备、介质和系统。
背景技术
大部分网站或者应用程序中,均提供有咨询问答服务。现有的咨询问答服务大致可分为两类,一类是通用领域或者某一领域的用户咨询服务,例如,知乎、百度知道等;另一类是提供辅助咨询服务以帮助用户更好的了解和使用服务,例如,电子商务网站中的售卖商品咨询等。
目前,在提供咨询问答服务时,多采用人工问答服务的方式进行。具体来说,由用户自主选择目标领域,并输入提问的问题。咨询答复系统根据用户选定的领域,将用户输入的问题发送给相应领域的专家或者客服人员,由专家或者客服人员对用户输入的问题进行作答。在专家或者客服人员作答之后,咨询服务系统将专家或者客服人员的回答反馈给用户。
上述方案中,所有用户提出的问题均需要发送给相应领域的专家或者客服人员予以作答,当提问的用户数量较多时,难以对所有用户均给予快速的反馈。
申请内容
本申请实施例提供了一种应答确定方法、装置、设备、介质和系统,用以提高对用户输入的语句的响应速度。
根据本申请实施例的第一方面,提供一种应答确定方法,包括:
接收用户输入的语句;
计算用户输入的语句与知识库中至少一个问题语句的相似度,并计算用户输入的语句与知识库中至少一个应答语句的匹配度;其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句。
根据本申请实施例的第二方面,提供一种应答确定方法,包括:
将用于表达用户所提问题的语句输入至服务器;
接收服务器返回的应答语句,其中,应答语句是服务器基于输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
根据本申请实施例的第三方面,提供一种应答确定装置,包括:
接收模块,用于接收用户输入的语句;
计算模块,用于计算用户输入的语句与知识库中至少一个问题语句的相似度,并计算用户输入的语句与知识库中至少一个应答语句的匹配度;其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
处理模块,用于基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句。
根据本申请实施例的第四方面,提供一种应答确定装置,包括:
发送模块,用于将用于表达所提问题的语句输入至服务器;
接收模块,用于接收服务器返回的应答语句,其中,应答语句是服务器基于输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
根据本申请实施例的第五方面,提供一种应答确定设备,包括:存储器和处理器;该存储器用于储存有可执行程序代码;该处理器用于读取存储器中存储的可执行程序代码以执行上述第一方面的应答确定方法。
根据本申请实施例的第六方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现上述第一方面的应答确定方法。
根据本申请实施例的第七方面,提供一种应答确定设备,包括:存储器和处理器;该存储器用于储存有可执行程序代码;该处理器用于读取存储器中存储的可执行程序代码以执行上述第二方面的应答确定方法。
根据本申请实施例的第八方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现上述第二方面的应答确定方法。
根据本申请实施例的第九方面,提供一种应答确定系统,包括:至少一个用户客户端和至少一个应答服务器;其中,
用户客户端用于将表达用户所提问题的语句输入至应答服务器;
应答服务器,用于接收用户客户端输入的语句,计算用户客户端输入的语句与知识库中至少一个问题语句的相似度,计算用户客户端输入的语句与知识库中至少一个应答语句的匹配度,并基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句,将确定出的应答语句发送至用户客户端,其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
用户客户端还用于接收应答服务器返回的应答语句。
根据本申请实施例中的应答确定方法、装置、设备、介质和系统,在接收用户输入的语句之后,通过计算用户输入的语句与知识库中至少一个问题语句的相似度,计算用户输入的语句与知识库中至少一个应答语句的匹配度,从而能够基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句,进而使用确定出的应答语句作为对用户输入的语句的应答,无需将用户输入的语句发送给相应领域的专家或者客服人员进行作答,从而能够提高对用户输入的语句的响应速度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据本申请实施例的应答确定方法的应用场景的示意图;
图2示出了根据本申请实施例的一种应答确定方法的流程示意图;
图3示出了根据本申请实施例的另一种应答确定方法的流程示意图;
图4示出了根据本申请实施例的一种应答确定装置的结构示意图;
图5示出了根据本申请实施例的另一种应答确定装置的结构示意图;
图6示出了能够实现根据本申请实施例的应答确定方法和装置的计算设备的示例性硬件架构的结构图。
具体实施方式
下面将详细描述本申请的各个方面的特征和示例性实施例,为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细描述。应理解,此处所描述的具体实施例仅被配置为解释本申请,并不被配置为限定本申请。对于本领域技术人员来说,本申请可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本申请的示例来提供对本申请更好的理解。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
参见图1,图1是本申请实施例提供的应答确定方法的应用场景,可以包括:用户客户端100和应答服务器200,用户客户端100与应答服务器200可通过蓝牙、短距离通信、蜂窝移动网、无线局域网或者其他通信方式进行通信。当然,实际中可以有一个或多个用户客户端100。
在一个实施方式中,用户客户端100可以是可移动设备。例如,可以是手机、平板电脑等。用户客户端100还可以是桌面设备,例如:一体机等。
用户咨询某一领域的问题,或者购买商品进行商品咨询时,可以通过用户客户端100选择相应的领域,并输入所要咨询的问题,也即用户在用户客户端100中通过输入语句的方式描述其所要咨询的问题,然后通过网络将输入的语句发送至应答服务器200。当然,用户在用户客户端100中输入语句时,可以使用文本形式输入,也可以采用语音形式进行输入,本申请对此不做限定。
传统方案中,应答服务器200接收到用户输入的语句时,将用户输入的语句发送至相应领域的专家或者客服人员,由专家或者客服人员对用户输入的语句进行作答。专家或者客服人员对用户输入的语句作答之后,将应答语句发送至应答服务器200。应答服务器200将专家或者客服人员的应答语句转发至用户客户端100,对用户输入的语句进行应答。
上述方案中,应答服务器200接收到用户输入的语句之后,均需要将用户输入的语句发送给相应领域的专家或者客服人员予以作答,当输入语句的用户数量较多时,难以对所有用户输入的语句均给予快速的响应。
为了提高对用户输入的语句的响应速度,本申请实施例在应答服务器200中预先构建并存储包括多个问答对的知识库,每个问答对中包括一个问题语句和一个应答语句。应答服务器200接收用户输入的语句之后,基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在预先存储的知识库中确定针对用户输入语句的应答语句,并使用确定出的应答语句作为对用户输入的语句的应答,从而无需将用户输入的语句发送给相应领域的专家或者客服人员进行作答,提高对用户输入的语句的响应速度。
在一个实施方式中,应答服务器200可以通过网页抓取的方式或者从用户提问日志中提取的方式,采集问题语句和应答语句组成问答对,然后基于采集的多个问答对构建知识库。当然,在基于采集的多个问答对构建知识库之前,还可以对采集到的多个问答对进行清洗,以删除错误或者无效的问答对。
在一个示例中,预先采集的多个问答对可能涉及多个不同的领域,则在知识库中存储多个问答对时,可以按领域进行分类存储。另外,若同一应答语句与多个问题语句相对应,则在知识库中存储多个问答对时,也可将多个问题语句与一个应答语句存储为一个问答对。
在一个实施方式中,应答服务器200接收用户输入的语句之后,计算用户输入的语句与知识库中至少一个问题语句的相似度。
在一个示例中,应答服务器200计算用户输入的语句与知识库中每个问题语句的相似度,可以采用基于词向量的文档相似度(Word Mover’s Distance,WMD)算法,计算用户输入的语句与知识库中每个问题语句的WMD相似度,并将计算得到的WMD相似度作为用户输入的语句与知识库中每个问题语句的相似度。
举例来说,假设用户输入的语句为Q,知识库中的一个问题语句为P,计算用户输入的语句Q与问题语句P的WMD相似度时,先对用户输入的语句Q和问题语句P进行分词处理,得到用户输入的语句Q对应的词语集合Q1和问题语句P对应的词语集合P1。然后删除词语集合Q1和词语集合P1中的停用词和介词,并对删除停用词和介词之后的词语集合Q1和删除停用词和介词之后的词语集合P1进行词向量编码,得到用户输入的语句Q的词向量编码Q={q1,q2,…qi…,qn},其中,qi为用户输入的语句Q中第i个词语的词向量编码,同时得到问题语句P的词向量编码P={p1,p2,…pj,…,pn},其中,pj为问题语句P中第j个词语的词向量编码。
在计算得到用户输入的语句Q的词向量编码和问题语句P的词向量编码之后,基于用户输入的语句Q的词向量编码和问题语句P的词向量编码,采用词频-逆向文件频率(TermFrequency–Inverse Document Frequency,TF-IDF)算法计算每个词在对应语句中的权重。具体可采用如下公式(1)进行计算。
其中,wi为词语i在其所在语句中的权重,ni为词语i在其所在语句中出现的次数,nq为词语i所在语句的总词数,N为知识库中总的语句数量,Nw为知识库中包含词语i的语句数量。
然后计算用户输入的语句Q和问题语句P中任意两个词之间的欧氏距离。具体可采用如下公式(2)进行计算。
dij=||qi-pj||2 (2)
其中,dij为词语qi和pj之间的欧氏距离,qi为用户输入的语句Q中任一词向量编码,pj为问题语句P中任一词向量编码。
最后,建立如公式(3)所示的优化模型。
其中,SIMscore为用户输入的语句Q与问题语句P之间的WMD相似度,dij为词语qi和pj之间的欧氏距离,Tij表示词语i与词语j之间的转换量。
上述公式(3)在满足约束条件(4)和约束条件(5)的情况下,所得到的最优值(或者最小值)即为用户输入的语句Q与问题语句P之间的WMD相似度。其中,约束条件(4)和约束条件(5)如下所示。
其中,Tij表示词语i与词语j之间的转换量,wi为用户输入的语句Q中词语i的权重,wj为问题语句P中词语j的权重。
从上述示例中可以看出,针对每个用户输入的语句,应答服务器200计算用户输入的语句与知识库中每个问题语句的相似度时,均需要对知识库中的每个问题语句进行分词,并进行词向量编码。
在一个实施方式中,为了减小计算量,进一步提高对用户输入的语句的响应速度,应答服务器200还可以预先存储知识库中每个问题语句的词向量编码。应答服务器200计算用户输入的语句与知识库中每个问题语句的相似度时,只需对用户输入的语句进行分词处理以及词向量编码,即可基于用户输入的语句的词向量编码和知识库中每个问题语句的词向量编码。利用WMD算法计算用户输入的语句与知识库中每个问题语句的WMD相似度,并将计算得到的WMD相似度作为用户输入的语句与知识库中每个问题语句的相似度。
在一个实施方式中,应答服务器200接收用户输入的语句之后,计算用户输入的语句与知识库中至少一个应答语句的匹配度。
在一个示例中,应答服务器200计算用户输入的语句与知识库中每个应答语句的匹配度,可以基于用户输入的语句的词向量编码和知识库中每个应答语句的词向量编码,采用卷积神经网络(Convolutional Neural Network,CNN)分别对用户输入的语句和知识库中每个应答语句进行编码,得到用户输入的语句的编码和知识库中每个应答语句的编码,然后根据用户输入的语句的编码和知识库中每个应答语句的编码,计算用户输入的语句与知识库中每个应答语句的匹配度。
举例来说,假设用户输入的语句为Q,知识库中的一个应答语句为A,计算用户输入的语句Q与应答语句A的匹配度时,先对用户输入的语句Q和应答语句A进行分词处理,得到用户输入的语句Q对应的词语集合Q1和应答语句A对应的词语集合A1。然后删除词语集合Q1和词语集合A1中的停用词和介词,并对删除停用词和介词之后的词语集合Q1和词语集合A1进行词向量编码,得到用户输入的语句Q的词向量编码Q={q1,q2,…qi…qn},其中,qi为用户输入的语句Q中第i个词语的词向量编码,同时得到应答语句A的词向量编码A={a1,a2,…aj…an},其中,aj为应答语句A中第j个词语的词向量编码。
在计算得到用户输入的语句Q的词向量编码和应答语句A的词向量编码之后,基于用户输入的语句Q的词向量编码和应答语句A的词向量编码,采用CNN网络分别对用户输入的语句Q和应答语句A进行编码,得到用户输入的语句Q的向量化编码Q2,同时得到应答语句A的向量化编码A2
然后,采用如下公式(6)计算用户输入的语句Q与应答语句A的匹配度。
其中,matchscore为用户输入的语句Q与应答语句A的匹配度,Q2为用户输入的语句Q的向量化编码,为Q2的转置,A2为应答语句A的向量化编码,M为可训练参数,可根据经验值进行设定。
从上述示例中可以看出,针对每个用户输入的语句,应答服务器200计算用户输入的语句与知识库中每个应答语句的匹配度时,均需要对知识库中的每个应答语句进行分词,并进行词向量编码。
在一个实施方式中,为了减小计算量,进一步提高对用户输入的语句的响应速度,应答服务器200还可以预先存储知识库中每个应答语句的词向量编码。应答服务器200计算用户输入的语句与知识库中每个应答语句的相似度时,只需对用户输入的语句进行分词处理以及词向量编码,即可采用CNN网络分别对用户输入的语句和知识库中每个应答语句进行编码,得到用户输入的语句的编码和知识库中每个应答语句的编码,然后根据用户输入的语句的编码和知识库中每个应答语句的编码,计算用户输入的语句与知识库中每个应答语句的匹配度。
在一个实施方式中,为了进一步减小计算量,提高对用户输入的语句的响应速度,应答服务器200还可以预先存储知识库中每个应答语句的编码。应答服务器200计算用户输入的语句与知识库中每个应答语句的匹配度时,只需对用户输入的语句进行分词处理以及词向量编码,并采用CNN网络对用户输入的语句进行编码,得到用户输入的语句的编码,然后根据用户输入的语句的编码和知识库中每个应答语句的编码,计算用户输入的语句与知识库中每个应答语句的匹配度。
在一个实施方式中,应答服务器200计算得到用户输入的语句与知识库中至少一个问题语句的相似度,并计算得到用户输入的语句与知识库中至少一个应答语句的匹配度之后,即可基于用户输入的语句与知识库中每个问题语句的相似度和用户输入的语句与知识库中每个应答语句的匹配度,在知识库中确定针对所述用户输入语句的应答语句。
在一个示例中,在知识库中确定针对所述用户输入语句的应答语句时,可以但不限于按照以下方式之一进行:
方式一、基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算用户输入的语句与知识库中每个问答对的相似值,得到每个问答对对应的相似值,然后确定相似值中最大相似值对应的问答对,并将最大相似值对应的问答对中包括的应答语句确定为针对所述用户输入语句的应答语句。
举例来说,知识库中有三个问答对,分别为问答对1、问答对2、问答对3,其中,问答对1中包括问题语句1和应答语句1,问答对2中包括问题语句2和应答语句2,问答对3中包括问题语句3和应答语句3。
假设通过计算得到用户输入的语句与问答对1的相似值为90,用户输入的语句与问答对2的相似值为60,用户输入的语句与问答对3的相似值为95,则由于问答对3对应的相似值为最大相似值,因此,将问答对3中包括的应答语句3确定为针对所述用户输入语句的应答语句。
方式二、基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算用户输入的语句与知识库中每个问答对的相似值,得到每个问答对对应的相似值;针对知识库中的每一应答语句,对包含每一应答语句的所有问答对对应的相似值进行求和,得到每一应答语句对应的评分值;将评分值中最大评分值对应的应答语句确定为针对所述用户输入语句的应答语句。
举例来说,知识库中有三个问答对,分别为问答对1、问答对2、问答对3,其中,问答对1中包括问题语句1和应答语句1,问答对2中包括问题语句2和应答语句2,问答对3中包括问题语句3和应答语句1。
假设通过计算得到用户输入的语句与问答对1的相似值为15,用户输入的语句与问答对2的相似值为85,用户输入的语句与问答对3的相似值为80。由于问答对1中包括的应答语句和问答对3中包括的应答语句均为应答语句1,因此,为了提高确定出的针对所述用户输入语句的应答语句的准确性,进一步计算应答语句1和应答语句2对应的评分值。
具体来说,对包括应答语句1的所有问答对对应的相似值进行求和,得到应答语句1对应的评分值为95,对包括应答语句2的所有问答对对应的相似值进行求和,得到应答语句2对应的评分值为85。由于应答语句1对应的评分值大于应答语句2对应的评分值,因此,将应答语句1确定为针对所述用户输入语句的应答语句。
在一个示例中,可以根据知识库中是否存在多个问答对包括同一应答语句的情况,灵活选择采用方式一或者方式二在知识库中确定针对所述用户输入语句的应答语句。举例来说,若知识库中不存在多个问答对包括同一应答语句的情况,则采用方式一在知识库中确定针对所述用户输入语句的应答语句;若知识库中存在多个问答对包括同一应答语句的情况,则采用方式二在知识库中确定针对所述用户输入语句的应答语句。
在一个示例中,为了提高确定出的针对所述用户输入语句的应答语句的准确性,以及保证算法的统一,不论知识库中是否存在多个问答对包括同一应答语句,可以均采用方式二在知识库中确定针对所述用户输入语句的应答语句。
在一个示例中,为了提高对用户输入的语句的响应速度,以及保证算法的统一,不论知识库中是否存在多个问答对包括同一应答语句,可以均采用方式一在知识库中确定针对所述用户输入语句的应答语句。
在一个实施方式中,应答服务器200在知识库中确定针对所述用户输入语句的应答语句之后,还可以将确定出的应答语句作为对用户输入的语句的应答。
下面结合具体的系统处理流程对上述应答确定方法的执行过程进行说明,然而,值得注意的是,该具体实施例仅是为了更好地说明本申请,并不构成对本申请的不当限定。
从整体流程而言,在服务器侧,如图2所示,应答确定方法200,可以包括以下步骤:
步骤S201,接收用户输入的语句。
步骤S202,计算用户输入的语句与知识库中至少一个问题语句的相似度,并计算用户输入的语句与知识库中至少一个应答语句的匹配度;其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
步骤S203,基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句。
从整体流程而言,在用户侧,如图3所示,应答确定方法300,可以包括以下步骤:
步骤S301,将用于表达用户所提问题的语句输入至服务器。
步骤S302,接收服务器返回的应答语句,其中,应答语句是服务器基于输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
在本申请实施例中,在接收用户输入的语句之后,通过计算用户输入的语句与知识库中至少一个问题语句的相似度,计算用户输入的语句与知识库中至少一个应答语句的匹配度,从而能够基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句,进而使用确定出的应答语句作为对用户输入的语句的应答,无需将用户输入的语句发送给相应领域的专家或者客服人员进行作答,从而能够提高对用户输入的语句的响应速度。
在服务器侧,实现的时候,上述实施例中的应答确定方法可以通过应答确定装置来实现。如图4所示,应答确定装置400,可以包括:
接收模块401,用于接收用户输入的语句;
计算模块402,用于计算用户输入的语句与知识库中至少一个问题语句的相似度,并计算用户输入的语句与知识库中至少一个应答语句的匹配度;其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
处理模块403,用于基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句。
在一个实施方式中,处理模块403,具体用于:基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算用户输入的语句与预先存储的知识库中每个问答对的相似值,得到每个问答对对应的相似值;确定相似值中最大相似值对应的问答对,并将最大相似值对应的问答对中包括的应答语句确定为针对所述用户输入语句的应答语句。
在一个实施方式中,处理模块403,具体用于:基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算用户输入的语句与预先存储的知识库中每个问答对的相似值,得到每个问答对对应的相似值;针对预先存储的知识库中的每一应答语句,对包含每一应答语句的所有问答对对应的相似值进行求和,得到每一应答语句对应的评分值;将评分值中最大评分值对应的应答语句确定为针对所述用户输入语句的应答语句。
在一个实施方式中,计算模块402,具体用于:对用户输入的语句进行分词处理,得到用户输入的语句对应的词语集合;对词语集合中的每个词语进行词向量编码;基于用户输入的语句的词向量编码和知识库中至少一个问题语句的词向量编码,利用基于词向量的文档相似度WMD算法计算用户输入的语句与知识库中至少一个问题语句的WMD相似度;将WMD相似度作为相似度。
在一个实施方式中,计算模块402,具体用于:对用户输入的语句进行分词处理,得到用户输入的语句对应的词语集合;对词语集合中的每个词语进行词向量编码;基于用户输入的语句的词向量编码和知识库中至少一个应答语句的词向量编码,采用卷积神经网络CNN分别对用户输入的语句和知识库中至少一个应答语句进行编码,得到用户输入的语句的编码和知识库中至少一个应答语句的编码;根据用户输入的语句的编码和知识库中至少一个应答语句的编码,计算用户输入的语句与知识库中至少一个应答语句的匹配度。
在一个实施方式中,计算模块402,具体用于:删除词语集合中的停用词和介词;对删除停用词和介词之后的词语集合中的每个词语进行词向量编码。
在一个实施方式中,接收模块401,具体用于:接收用户以文本形式和/或语音形式输入的语句。
在用户侧,实现的时候,上述实施例中的应答确定方法可以通过应答确定装置来实现。如图5所示,应答确定装置500,可以包括:
发送模块501,用于将用于表达所提问题的语句输入至服务器;
接收模块502,用于接收服务器返回的应答语句,其中,应答语句是服务器基于输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
图6示出了能够实现根据本申请实施例的应答确定方法和装置的计算设备的示例性硬件架构的结构图。如图6所示,计算设备600包括输入设备601、输入接口602、中央处理器603、存储器604、输出接口605、以及输出设备606。其中,输入接口602、中央处理器603、存储器604、以及输出接口605通过总线610相互连接,输入设备601和输出设备606分别通过输入接口602和输出接口605与总线610连接,进而与计算设备600的其他组件连接。
具体地,输入设备601接收来自外部的输入信息,并通过输入接口602将输入信息传送到中央处理器603;中央处理器603基于存储器604中存储的计算机可执行指令对输入信息进行处理以生成输出信息,将输出信息临时或者永久地存储在存储器604中,然后通过输出接口605将输出信息传送到输出设备606;输出设备606将输出信息输出到计算设备600的外部供用户使用。
也就是说,图6所示的计算设备也可以被实现为应答确定设备,该应答确定设备可以包括:存储有计算机可执行指令的存储器;以及处理器,该处理器在执行计算机可执行指令时可以实现结合图1-图5描述的应答确定方法和装置。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品或计算机可读存储介质的形式实现。所述计算机程序产品或计算机可读存储介质包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如,红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘Solid State Disk(SSD))等。
另外,结合上述实施例中的应答确定方法,本申请实施例可提供一种计算机可读存储介质来实现。该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种应答确定方法。
本申请实施例还提供了一种应答确定系统,应答确定系统包括至少一个用户客户端和至少一个应答服务器;其中,
用户客户端用于将表达用户所提问题的语句输入至应答服务器;
应答服务器,用于接收用户客户端输入的语句,计算用户客户端输入的语句与知识库中至少一个问题语句的相似度,计算用户客户端输入的语句与知识库中至少一个应答语句的匹配度,并基于用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在知识库中确定针对用户输入语句的应答语句,将确定出的应答语句发送至用户客户端,其中,知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
用户客户端还用于接收应答服务器返回的应答语句。
需要明确的是,本申请并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本申请的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本申请的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
还需要说明的是,本申请中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或系统。但是,本申请不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
以上所述,仅为本申请的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。

Claims (15)

1.一种应答确定方法,其特征在于,所述方法包括:
接收用户输入的语句;
计算所述用户输入的语句与知识库中至少一个问题语句的相似度,并计算所述用户输入的语句与所述知识库中至少一个应答语句的匹配度;其中,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在所述知识库中确定针对所述用户输入语句的应答语句。
2.根据权利要求1所述的方法,其特征在于,所述在所述知识库中确定针对所述用户输入语句的应答语句,包括:
基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算所述用户输入的语句与所述知识库中每个问答对的相似值,得到每个问答对对应的相似值;
确定所述相似值中最大相似值对应的问答对,并将所述最大相似值对应的问答对中包括的应答语句确定为针对所述用户输入语句的应答语句。
3.根据权利要求1所述的方法,其特征在于,所述在所述知识库中确定针对所述用户输入语句的应答语句,包括:
基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,利用逻辑回归算法计算所述用户输入的语句与所述知识库中每个问答对的相似值,得到每个问答对对应的相似值;
针对所述知识库中的每一应答语句,对包含所述每一应答语句的所有问答对对应的相似值进行求和,得到所述每一应答语句对应的评分值;
将所述评分值中最大评分值对应的应答语句确定为针对所述用户输入语句的应答语句。
4.根据权利要求1所述的方法,其特征在于,所述计算所述用户输入的语句与知识库中至少一个问题语句的相似度,包括:
对所述用户输入的语句进行分词处理,得到所述用户输入的语句对应的词语集合;
对所述词语集合中的每个词语进行词向量编码;
基于所述用户输入的语句的词向量编码和所述知识库中至少一个问题语句的词向量编码,利用基于词向量的文档相似度WMD算法计算所述用户输入的语句与所述知识库中至少一个问题语句的WMD相似度;
将所述WMD相似度作为所述相似度。
5.根据权利要求1所述的方法,其特征在于,所述计算所述用户输入的语句与所述知识库中至少一个应答语句的匹配度,包括:
对所述用户输入的语句进行分词处理,得到所述用户输入的语句对应的词语集合;
对所述词语集合中的每个词语进行词向量编码;
基于所述用户输入的语句的词向量编码和所述知识库中至少一个应答语句的词向量编码,采用卷积神经网络CNN分别对所述用户输入的语句和所述知识库中至少一个应答语句进行编码,得到所述用户输入的语句的编码和所述知识库中至少一个应答语句的编码;
根据所述用户输入的语句的编码和所述知识库中至少一个应答语句的编码,计算所述用户输入的语句与所述知识库中至少一个应答语句的匹配度。
6.根据权利要求4或5所述方法,其特征在于,所述对所述词语集合中的每个词语进行词向量编码,包括:
删除所述词语集合中的停用词和介词;
对删除停用词和介词之后的词语集合中的每个词语进行词向量编码。
7.根据权利要求1所述的方法,其特征在于,所述接收用户输入的语句,包括:
接收用户以文本形式和/或语音形式输入的语句。
8.一种应答确定方法,其特征在于,所述方法包括:
将用于表达用户所提问题的语句输入至服务器;
接收所述服务器返回的应答语句,其中,所述应答语句是所述服务器基于所述输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
9.一种应答确定装置,其特征在于,所述装置包括:
接收模块,用于接收用户输入的语句;
计算模块,用于计算所述用户输入的语句与知识库中至少一个问题语句的相似度,并计算所述用户输入的语句与所述知识库中至少一个应答语句的匹配度;其中,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
处理模块,用于基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在所述知识库中确定针对所述用户输入语句的应答语句。
10.一种应答确定装置,其特征在于,包括:
发送模块,用于将用于表达所提问题的语句输入至服务器;
接收模块,用于接收所述服务器返回的应答语句,其中,所述应答语句是所述服务器基于所述输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度在知识库中确定的,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句。
11.一种应答确定设备,其特征在于,包括存储器和处理器;所述存储器用于储存有可执行程序代码;所述处理器用于读取所述存储器中存储的可执行程序代码以执行权利要求1-7中任意一项所述的方法。
12.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求1-7中任一项所述的方法。
13.一种应答确定设备,其特征在于,包括存储器和处理器;所述存储器用于储存有可执行程序代码;所述处理器用于读取所述存储器中存储的可执行程序代码以执行权利要求8所述的方法。
14.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求8所述的方法。
15.一种应答确定系统,其特征在于,所述应答确定系统包括至少一个用户客户端和至少一个应答服务器;其中,
所述用户客户端用于将表达用户所提问题的语句输入至所述应答服务器;
所述应答服务器,用于接收用户客户端输入的语句,计算所述用户客户端输入的语句与知识库中至少一个问题语句的相似度,计算所述用户客户端输入的语句与所述知识库中至少一个应答语句的匹配度,并基于所述用户输入的语句与每个问答对中问题语句的相似度和应答语句的匹配度,在所述知识库中确定针对所述用户输入语句的应答语句,将确定出的应答语句发送至所述用户客户端,其中,所述知识库中包括多个问答对,每个问答对中包括一个问题语句和一个应答语句;
所述用户客户端还用于接收所述应答服务器返回的应答语句。
CN201711298502.7A 2017-12-08 2017-12-08 应答确定方法、装置、设备、介质和系统 Active CN110019715B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711298502.7A CN110019715B (zh) 2017-12-08 2017-12-08 应答确定方法、装置、设备、介质和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711298502.7A CN110019715B (zh) 2017-12-08 2017-12-08 应答确定方法、装置、设备、介质和系统

Publications (2)

Publication Number Publication Date
CN110019715A true CN110019715A (zh) 2019-07-16
CN110019715B CN110019715B (zh) 2023-07-14

Family

ID=67185965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711298502.7A Active CN110019715B (zh) 2017-12-08 2017-12-08 应答确定方法、装置、设备、介质和系统

Country Status (1)

Country Link
CN (1) CN110019715B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112036906A (zh) * 2020-07-31 2020-12-04 苏宁金融科技(南京)有限公司 一种数据处理方法、装置、设备
CN114490965A (zh) * 2021-12-23 2022-05-13 北京百度网讯科技有限公司 问题处理方法、装置、电子设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105893523A (zh) * 2016-03-31 2016-08-24 华东师范大学 利用答案相关性排序的评估度量来计算问题相似度的方法
CN106649786A (zh) * 2016-12-28 2017-05-10 北京百度网讯科技有限公司 基于深度问答的答案检索方法及装置
CN106980683A (zh) * 2017-03-30 2017-07-25 中国科学技术大学苏州研究院 基于深度学习的博客文本摘要生成方法
CN107305578A (zh) * 2016-04-25 2017-10-31 北京京东尚科信息技术有限公司 人机智能问答方法和装置
CN107315731A (zh) * 2016-04-27 2017-11-03 北京京东尚科信息技术有限公司 文本相似度计算方法
CN107391614A (zh) * 2017-07-04 2017-11-24 重庆智慧思特大数据有限公司 一种基于wmd的中文问答匹配方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105893523A (zh) * 2016-03-31 2016-08-24 华东师范大学 利用答案相关性排序的评估度量来计算问题相似度的方法
CN107305578A (zh) * 2016-04-25 2017-10-31 北京京东尚科信息技术有限公司 人机智能问答方法和装置
CN107315731A (zh) * 2016-04-27 2017-11-03 北京京东尚科信息技术有限公司 文本相似度计算方法
CN106649786A (zh) * 2016-12-28 2017-05-10 北京百度网讯科技有限公司 基于深度问答的答案检索方法及装置
CN106980683A (zh) * 2017-03-30 2017-07-25 中国科学技术大学苏州研究院 基于深度学习的博客文本摘要生成方法
CN107391614A (zh) * 2017-07-04 2017-11-24 重庆智慧思特大数据有限公司 一种基于wmd的中文问答匹配方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王一方: "客服机器人答案排序学习方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112036906A (zh) * 2020-07-31 2020-12-04 苏宁金融科技(南京)有限公司 一种数据处理方法、装置、设备
CN112036906B (zh) * 2020-07-31 2022-08-19 苏宁金融科技(南京)有限公司 一种数据处理方法、装置、设备
CN114490965A (zh) * 2021-12-23 2022-05-13 北京百度网讯科技有限公司 问题处理方法、装置、电子设备和存储介质
CN114490965B (zh) * 2021-12-23 2022-11-08 北京百度网讯科技有限公司 问题处理方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN110019715B (zh) 2023-07-14

Similar Documents

Publication Publication Date Title
RU2745632C1 (ru) Серверное устройство автоматизированного ответа, оконечное устройство, система ответа, способ ответа и программа
JP7002638B2 (ja) ランダム・ドキュメント埋め込みを用いたテキスト・データ表現学習
CN110321413B (zh) 会话框架
CN107346336B (zh) 基于人工智能的信息处理方法和装置
US11636376B2 (en) Active learning for concept disambiguation
WO2014126657A1 (en) Latent semantic analysis for application in a question answer system
US20190163699A1 (en) Method and apparatus for information interaction
US11729286B2 (en) Feature-based network embedding
CN111400504A (zh) 企业关键人的识别方法和装置
US10956816B2 (en) Enhancing rating prediction using reviews
US20150074122A1 (en) Social recommendation across heterogeneous networks
US20200042643A1 (en) Heuristic q&a system
CN111930894A (zh) 长文本匹配方法及装置、存储介质、电子设备
CN111914179A (zh) 基于语义的模糊搜索方法和装置、存储介质及电子设备
CN110309377A (zh) 语义归一化、提问模式的生成、应答确定方法及装置
CN111353103B (zh) 用于确定用户社群信息的方法和装置
US11526801B2 (en) Conversational search in content management systems
US20180349342A1 (en) Relation extraction using q&a
CN110019715A (zh) 应答确定方法、装置、设备、介质和系统
CN117290477A (zh) 一种基于二次检索增强的生成式建筑知识问答方法
CN114119123A (zh) 信息推送的方法和装置
CN104572945B (zh) 一种基于云存储空间的文件搜索方法和装置
CN111382232A (zh) 问答信息处理方法、装置及计算机设备
CN114090789B (zh) 基于知识图谱的中医养生智能多轮交互系统
CN110688470A (zh) 用于发送信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40010854

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant