CN111048075A - 智能客服系统及智能客服机器人 - Google Patents
智能客服系统及智能客服机器人 Download PDFInfo
- Publication number
- CN111048075A CN111048075A CN201811183665.5A CN201811183665A CN111048075A CN 111048075 A CN111048075 A CN 111048075A CN 201811183665 A CN201811183665 A CN 201811183665A CN 111048075 A CN111048075 A CN 111048075A
- Authority
- CN
- China
- Prior art keywords
- emotion
- client
- customer service
- emotion recognition
- response
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008451 emotion Effects 0.000 claims abstract description 122
- 230000004044 response Effects 0.000 claims abstract description 113
- 230000008909 emotion recognition Effects 0.000 claims abstract description 92
- 238000000034 method Methods 0.000 claims abstract description 52
- 230000008569 process Effects 0.000 claims abstract description 49
- 230000003993 interaction Effects 0.000 claims abstract description 40
- 230000002996 emotional effect Effects 0.000 claims description 18
- 230000008859 change Effects 0.000 claims description 16
- 230000006399 behavior Effects 0.000 claims description 12
- 238000011156 evaluation Methods 0.000 claims description 6
- 238000013518 transcription Methods 0.000 claims description 4
- 230000035897 transcription Effects 0.000 claims description 4
- LQIAZOCLNBBZQK-UHFFFAOYSA-N 1-(1,2-Diphosphanylethyl)pyrrolidin-2-one Chemical compound PCC(P)N1CCCC1=O LQIAZOCLNBBZQK-UHFFFAOYSA-N 0.000 claims description 3
- 238000012423 maintenance Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000035945 sensitivity Effects 0.000 description 6
- 230000002452 interceptive effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000036651 mood Effects 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000016571 aggressive behavior Effects 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 206010011469 Crying Diseases 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011158 quantitative evaluation Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000007474 system interaction Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000009278 visceral effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/01—Customer relationship services
- G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
- G06Q30/016—After-sales
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- General Physics & Mathematics (AREA)
- Economics (AREA)
- Accounting & Taxation (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Theoretical Computer Science (AREA)
- Child & Adolescent Psychology (AREA)
- General Health & Medical Sciences (AREA)
- Hospice & Palliative Care (AREA)
- Psychiatry (AREA)
- Signal Processing (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
一种智能客服系统及智能客服机器人，所述智能客服系统包括：情绪识别单元，适于对会话过程中的客户对话进行实时情绪识别；扩展应答选择单元，适于根据实时情绪识别结果选择相应的扩展应答；交互单元，适于将包含扩展应答的应答结果输出至客户。采用上述方法能够对客户情绪进行及时的处理，提高智能客服的服务质量。
Description
技术领域
本发明实施例涉及智能机器人技术领域，尤其涉及智能客服系统及智能客服机器人。
背景技术
智能客服系统是在大规模知识处理基础上发展起来的一项面向行业应用的，适用于大规模知识处理、自然语言理解、知识管理、自动问答系统、推理等等技术行业，智能客服不仅为企业提供了细粒度知识管理技术，还为企业与海量用户之间的沟通建立了一种基于自然语言的快捷有效的技术手段；同时还能为企业提供精细化管理所需的统计分析信息。
目前，智能客服系统的情感识别主要是在与客户交互之后，通过对客户的提问或回复内容进行正负情绪的理解，获知客户对智能客服机器人的回复满意度，进而去优化知识内容。
然而，上述智能客服系统知识内容的优化方式需要大量的运营维护人员进行维护，且对客户的情绪处理存在严重的滞后性，难以消除客户情绪。
发明内容
本发明实施例要解决的是智能客服交互过程中客户的情绪问题，提高智能客服服务质量。
本发明实施例提供了一种智能客服系统，包括：情绪识别单元，适于对会话过程中的客户对话进行实时情绪识别；扩展应答选择单元，适于根据实时情绪识别结果选择相应的扩展应答；交互单元，适于将包含扩展应答的应答结果输出至客户。
可选地，所述交互单元包括以下至少一种：文本交互子单元，适于通过文本方式与客户交互；语音交互子单元，适于通过语音方式与客户交互；视频交互子单元，适于通过视频方式与客户交互。
可选地，所述情绪识别单元包括：语音情绪识别子单元，适于对会话过程客户对话的音频进行语音情绪识别。
可选地，所述情绪识别单元包括：语音转写子单元，适于将会话过程中客户对话的音频转写为文本信息；语义情绪识别子单元，适于对转写后的文本信息进行语义识别。
可选地，所述情绪识别单元包括：行为情绪识别子单元，适于对会话过程中客户的身体语言进行行为情绪识别。
可选地，所述扩展应答选择单元适于在情绪识别结果为预设的情绪类型，或者情绪强烈程度达至预设的负面情绪级别时，选择相应的扩展应答，以安抚客户情绪。
可选地，所述扩展应答选择单元包括以下任意一种：
第一选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中随机选择其中一个作为相应的扩展应答；
第二选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中相同的情绪识别结果对应的扩展应答的重复率最低；
第三选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中任意相邻的相同的情绪识别结果对应不同的扩展应答。
可选地，所述交互单元输出的应答结果中扩展应答置于基本应答之前、之中或之后。
可选地，所述智能客服系统还包括问答日志记录单元，适于在问答日志明细中记录每一客户对话所对应的客户的情绪信息。
可选地，所述智能客服系统还包括：情绪变化趋势识别单元，适于根据对会话过程中的客户对话的情绪识别结果识别出客户在会话过程中的情绪变化趋势。
可选地，所述智能客服系统还包括：服务评价单元，适于根据客户在会话过程中情绪变化趋势，对所述智能客服的服务进行评价。
本发明实施例还提供了一种智能客服机器人，包括上述任一种智能客服系统。
采用本发明实施例，通过实时对会话过程中的客户对话进行情绪识别，根据实时情绪识别结果选择相应的扩展应答，并将包含扩展应答的应答结果输出至客户，由于这一过程中能够对客户对话进行实时的情绪识别，且通过与实时情绪识别结果相应的扩展应答对客户会话过程中的情绪进行及时的回应，因而可以对客户情绪进行及时的处理，故可以提高智能客服的服务质量。并且这一过程由系统自动处理，无需运营维护人员在事后对系统知识内容进行优化即可改善服务质量，故可降低运维成本。
进一步地，智能客服系统根据具体的交互方式，通过语音情绪识别、语义情绪识别、行为情绪识别等其中至少两种方式结合使用，可以兼顾多个方面所传达出的客户的情绪特征，更加全面而准确地识别出客户的情绪，进而可以选择出更为相应地扩展应答，因而可以进一步提高智能客服的服务质量。
进一步地，在情绪识别结果为预设的负面情绪类型，或者情绪强烈程度达至预设的负面情绪级别时，选择相应的扩展应答，以安抚客户情绪，实现了对客户负面情绪的即时安抚，故可以进一步提高智能客服系统的服务质量。
进一步地，从与所述情绪识别结果相应的多个扩展问答中随机选择其中一个作为相应的扩展应答，或者在所述会话过程中相同的情绪识别结果对应的扩展应答的重复率最低，或者所述会话过程中任意相邻的相同情绪识别结果对应不同的扩展应答，从而使得智能客服的应答更加自然亲切，因而可以提高客户的交互体验。
通过将扩展应答置于基本应答的不同位置，可以使得与客户的沟通更加自然。此外，将扩展应答置于应答结果中的基本应答之前，使得客户的情绪先得到疏导安抚，之后客户再接收到基本应答的信息，从而可以减少客户的情绪对后续接收基本应答的信息的壁垒，故可以进一步提高服务质量。
而在问答日志明细中记录每一客户对应所对应的客户的情绪信息，可以方便运营人员了解客户的情绪动态，使得运营人员可以根据需要随时选择人工介入，运营人员也可以根据客户的情绪信息对智能客服的前一个应答结果进行优化。
进一步地，通过表征情绪强烈程度的等级标识或者表征情绪特征的图示在问答日志明细中展示每一客户对话所对应的客户的情绪信息，使得运营人员可以更加直观方便地获取到客户的情绪状态，故可以提高智能客服系统的交互体验。
对会话过程中的客户对话的情绪识别结果按照时序进行处理，得到客户在会话过程中情绪变化趋势，由于客户在会话过程中情绪变化趋势可以更加准确地反映出智能客服对客户情绪的影响，因而可以反映智能客服的服务质量，故在此基础上所得到的对所述智能客服的评价会更加客观，由此进一步所作的优化也可以更加有效。
附图说明
图1示出了本发明实施例中一种智能客服系统的结构示意图；
图2示出了本发明实施例中一种智能客服系统交互界面示意图；
图3示出了本发明实施例中另一种智能客服系统交互界面示意图；
图4示出了本发明实施例中一种表征情绪特征的图示的示意图。
具体实施方式
如前所述，目前的智能客服系统知识内容的优化方式需要大量的运营维护人员进行维护，且对客户的情绪处理存在严重的滞后性，难以消除客户情绪。
对于智能客服交互过程中客户的情绪问题，本发明实施例通过实时对会话过程中的客户对话进行情绪识别，并根据实时情绪识别结果选择相应的扩展应答，并在应答结果中予以体现，从而可以即时发现客户在会话过程中的情绪，并在接下来的应答结果中通过扩展应答予以应对，故可以对会话过程中客户的情绪进行及时有效地处理，提高智能客服的服务质量。
为使本领域技术人员更好地理解和实现本发明实施例，以下参照附图，通过具体实施进行详细介绍。
参照图1所示的智能客服系统，在本发明一实施例中，智能客服系统10可以包括：情绪识别单元11、扩展应答选择单元12和交互单元13，其中：
情绪识别单元11，适于对会话过程中的客户对话进行实时情绪识别；
扩展应答选择单元12，适于根据实时情绪识别结果选择相应的扩展应答；
交互单元13，适于将包包含扩展应答的应答结果输出至客户。
采用上述实施例中的智能客服系统，能够对客户对话进行实时的情绪识别，且通过与实时情绪识别结果相应的扩展应答对客户会话过程中的情绪进行及时的回应，因而可以对客户情绪进行及时的处理，故可以提高智能客服的服务质量。并且这一过程由系统自动处理，无需运营维护人员在事后对系统知识内容进行优化即可改善服务质量，故可降低运维成本。
在具体实施中，智能客服系统可以通过多种方式与客户交互，为客户提供服务。例如，所述交互单元13可以包括以下任意一种或多种：
文本交互子单元131，适于通过文本方式与客户交互；
语音交互子单元132，适于通过语音方式与客户交互；
视频交互子单元133，适于通过视频方式与客户交互。
其中语音方式可以为在线语音交互，也可以为非在线语音交互(电话交互)。双方可以采用同样的交互方式，也可以采用不同的交互方式。例如客户和客服可以均采用文本方式或语音方式进行交互，或者其中一方采用语音方式，另外一方采用文本或视频方式。
在具体实施中，情绪根据不同的情绪模型可以分为不同的类型。例如，可分为四种基本情绪类型：愤怒、高兴、悲伤、惊奇。也可分为八种基本情绪类型：恐惧、惊奇、悲伤、厌恶、愤怒、期望、高兴、接受。也可以简单地分为正面情绪和负面情绪两种情绪类型。
在具体实施中，情绪识别单元11对于文本交互方式，可以通过语义识别的方式，识别出文本信息中传达的客户的语义情绪。
例如，可以将文本信息与预设的包含有负面情绪文本数据库进行匹配，根据匹配结果确定所述客户的语义情绪类型。其中，负面情绪文本数据库可以包括负面情绪关键词，负面情绪语句等负面语言表达信息。
在本发明实施例中，负面情绪文本库中的文本条目可以通过训练得到，也可以考虑不同行业不同领域的具体特点设置，或者二者结合得到。负面情绪关键词举例如下：“破”、“骗子”、“无耻”、“投诉”、“怎么搞的”、“没用”、“不方便”、“乱答”、“糟糕”、“失望”、“垃圾”、“差”、“不爽”、“废物”、“烂”、“不好”、“乱七八糟”、“这么久”、“搞什么鬼”、“无语”、“醉了”、“气死”、“有毛病”、“不对”、“没人”等等。或者为一些脏话。为了更准确反映上述负面情绪关键词的含义，所述负面情绪文本库中的条目中可以设置对应的例句。例如，对于关键词“骗子”，设置对应的例句“骗子公司”。
在具体实施中，在语义情绪识别过程中可以设置多个维度评价客服的负面情绪等级。例如从攻击性、侮辱性、敏感度等；或者从语义情绪的强烈程度上进行设置：如消极情绪的强烈程度小于愤怒情绪。或者结合情绪的强烈性及语义的伤害程度进行判断。语义的伤害程度可以从如攻击性、侮辱性、敏感性等其中一个或多个的严重程度进行判断。
在本发明一实施例中，如图1所示，所述情绪识别单元11可以包括：语音情绪识别子单元111，适于对会话过程客户对话的音频进行语音情绪识别。对于通过音频或视频进行交互的会话，实时对会话过程中客户对话的音频进行语音情绪识别，可以识别出语音特征中传达出的客户的语音情绪。
研究表明，某种特定的情感状态所引起的语音参数变化在不同的人之间是大致相同的，仅有微小差别。因而，情绪的变化能够通过语音特征参数来反映。在具体实施中，可以根据需要选择相应的语音特征参数，或者为了更加准确全面地选择多个维度的语音特征参数。在本发明实施例中，所述语音特征参数可以包括以下任意一种或多种：基频、能量、语速、共振峰频率、单个音节的持续时间、音节之间的停顿时间、线性预测系数、Mel倒谱系数。在本发明另一实施例中，所述情绪识别单元11可以包括：语音转写子单元112，适于将会话过程中客户对话的音频转写为文本信息；语义情绪识别子单元113，适于对转写后的文本信息进行语义识别。
对于通过音频或视频进行交互的会话，也可以实时将会话过程中客户对话的音频转写为文本信息，对转写后的文本信息进行语义识别，以识别出对话内容中传达出的客户的语义情绪。通过语义识别来识别出客户的语义情绪的方式可以参照上述实施例中文本交互方式中的语义情绪识别，在此不再赘述。
在本发明又一实施例中，所述情绪识别单元11可以包括：行为情绪识别子单元114，适于对会话过程中客户的身体语言进行行为情绪识别。在本发明实施例中，对于视频交互方式，还可以通过客户的身体语言识别出客户动作所传达出的行为情绪。在具体实施中，可以通过实时捕捉到的客户的身体动作，根据预设的行为情绪模型识别客户的身体动作所传达出的行为情绪。所述身体动作可以包括脸部的表情动作以及手部、腿部的肢体动作等其中一种或多种。其中，可以预先对行为情绪模型进行训练。
参照图2所示的本发明实施例中的一种智能客服系统交互界面示意图，其中，客户A与智能客服B进行交互对话。部分对话记录如图2所示，客户A发出对话21，为文本信息，文本内容为：“我想自提，请问地址是哪里？”，将其与负面情绪文本库中的负面情绪关键词进行对比，发现其中未包含负面情绪。
参照图3所示的本发明实施例中另一种智能客服系统交互界面示意图，其中，客户C与客户B进行交互对话。部分对话记录如图3所示，客户C发出对话31，为语音形式，表示为语音1，对语音1进行文本转写，得到文本信息，内容为：“你们搞什么呀，货还没到，我自己去取，告诉我地址在哪”，将其与负面情绪文本库进行匹配，发现其中包含负面情绪关键词“搞什么”。
可以理解的是，在具体实施中，上述情绪识别单元11的多个实现方式可以结合使用，例如可以同时进行语音情绪识别和语义情绪识别，或者同时进行语义情绪识别和行为情绪识别，通过兼容多种情绪识别子单元，可以兼顾多个方面所传达出的客户的情绪特征，更加全面而准确地识别出客户的情绪，进而可以选择出更为相应的扩展应答，因而可以进一步提高智能客服的服务质量。
在具体实施中，为进行更精细地确定情绪状态，进行量化评价，可以为各种情绪类型设置相应的情绪等级。例如，可以为所述语音情绪类型和语义情绪类型设置相应的情绪等级。所述负面情绪文本库中的条目也设置有对应的负面情绪等级，例如通过敏感度高、中、低，或者通过量化的数字进行区分。例如上述负面情绪关键词的敏感度优先级中的“不对”和“没人”可以设置为低敏感度，其他负面情绪关键词及脏话可以设置为高敏感度。
在具体实施中，所述扩展应答选择单元12适于在情绪识别结果为预设的情绪类型，或者情绪强烈程度达至预设的负面情绪级别时，选择相应的扩展应答，以安抚客户情绪。
如前所述，对于图2所示的交互界面所对应的交互过程，由于对话21中未识别出负面情绪，故对于智能客服B对应的应答中可以不包含与情绪相关的扩展应答。对于图3所示的交互界面所对应的交互过程，由于对话31中包含负面情绪，故在接下来的智能客服B的应答中需要选择与所述负面情绪相应的扩展应答，如“请您消消气”。
在具体实施中，为了使对话更加自然，对于同样的情绪识别结果可以设置多个对应的扩展应答。例如对于情绪识别结果为失去耐心的情绪类型，可以设置“请您消消气”、“让您久等了”、“不好意思”等多个相应的扩展应答。
在具体实施中，对于如何从与情绪识别结果相应的多个扩展应答中进行选择，可以有多种方式，例如，所述扩展应答选择单元12可以包括以下任意一种：
第一选择子单元121，适于从与所述情绪识别结果相应的多个扩展应答中随机选择其中一个作为相应的扩展应答；
第二选择子单元122，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中相同的情绪识别结果对应不同的扩展应答；
第三选择子单元123，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中任意相邻的相同的情绪识别结果对应不同的扩展应答。
在具体实施中，相同识别结果对应的扩展应答可以是语音情绪对应，也可以是语义情绪对应，或者是行为情绪对应。
上述实施例中的智能客服系统从与所述情绪识别结果相应的多个扩展问答中随机选择其中一个作为相应的扩展应答，或者在所述会话过程中相同的情绪识别结果对应的扩展应答的重复率最低，或者所述会话过程中任意相邻的相同情绪识别结果对应不同的扩展应答，这样智能客服的应答更加自然亲切，因而可以提高客户的交互体验。
在具体实施中，所述交互单元13输出的应答结果中扩展应答可以置于基本应答之前、之中或之后。通过将扩展应答置于基本应答的不同位置，可以使得与客户的沟通更加自然。此外，将扩展应答置于应答结果中的基本应答之前，使得客户的情绪先得到疏导安抚，之后客户再接收到基本应答的信息，从而可以减少客户的情绪对后续接收基本应答的信息的壁垒，故可以进一步提高服务质量。
如图2和图3所示，对于未识别到负面情绪的客户A的对话21，智能客服B输出应答22，应答内容为：“自取操作和服务中心的地址需要您致电查询。您可能关注以下问题：1.快递放假时间安排”，这一回答为不含扩展应答的基本应答。对于识别到负面情绪的客户C的对话31，智能客服B输出应答32，应答内容为“请您消消气，自取操作和服务中心的地址需要您致电查询。您可能关注以下问题：1.快递放假时间安排”，应答32相对于应答22的区别在于，在基本应答之前多了安抚客户情绪的扩展应答：“请您消消气”。
采用上述实施例，实时对会话过程中的客户对话进行情绪识别，根据实时情绪识别结果选择相应的扩展应答，并将包含扩展应答的应答结果输出值客户，由于这一过程中能够对客户对话进行实时的情绪识别，且通过与实时情绪识别结果相应的扩展应答对客户会话过程中的情绪进行及时的回应，因而可以对客户情绪进行及时的处理，故可以提高智能客服的服务质量。并且这一过程由系统自动处理，无需运营维护人员在事后对系统知识内容进行优化即可改善服务质量，故可降低运维成本。
在具体实施中，如图1所示，为便于运营人员了解客户的情绪动态，智能客服系统还可包括问答日志记录单元14，适于在问答日志明细中记录每一客户对话所对应的客户的情绪信息。其中，问答日志明细中每一客户对应所对应的客户的情绪信息可以为情绪类型，如正面情绪、负面情绪；或者为焦躁、生气、愤怒等更加具体的情绪类型。情绪信息还可以为表征情绪强烈程度的等级标识，例如从情绪根据强烈程度及正负面分为-5至+5，-3表示生气，-5表示愤怒。
为更直观生动地表达客户对话对应的情绪，情绪信息还可以表示为表征情绪特征的图示，如图4所示，通过笑脸42表示正面情绪，通过哭脸41表示负面情绪，通过条形块43、44所占比例的不同表示客户对话所流露出的情绪状态，若条形块44占比100％，则表示无负面情绪，若条形块43或44占比超过50％以上，则说明以相应的情绪为主导。在具体实施中，还可以在所述条形块中示出具体的比例，以更直观和准确地传达出客户对话的实际情绪状态。情绪状态除了通过图示状态呈现外，还可以通过其他的图案或颜色或形状区分不同的情绪状态。例如，可以通过饼状图来实现。
智能客服系统10通过在问答日志明细中记录每一客户对应所对应的客户的情绪信息，可以方便运营人员了解客户的情绪动态，使得运营人员可以根据需要随时选择人工介入(如当监控会话中连续多个对话对应的负面情绪均为100％)，运营人员也可以根据客户的情绪信息对智能客服的前一个应答结果进行优化。
在具体实施中，为提供更好的客户服务质量，可以分析得出整个会话过程中客户的情绪变化趋势。如图1所示，智能客服系统10还可包括：情绪变化趋势识别单元15，适于根据对会话过程中的客户对话的情绪识别结果识别出客户在会话过程中的情绪变化趋势。
此外，在具体实施中，基于分析得到的客户在会话过程中的情绪变化趋势，可以对服务质量作进一步的优化。参照图1，智能客服系统10还可包括：服务评价单元16，适于根据客户在会话过程中情绪变化趋势，对所述智能客服的服务进行评价。
通过智能客服系统10自动对会话过程中的客户对话的情绪识别结果按照时序进行处理，得到客户在会话过程中情绪变化趋势，由于客户在会话过程中情绪变化趋势可以更加准确地反映出智能客服对客户情绪的影响，因而可以反映智能客服的服务质量，故在此基础上所得到的对所述智能客服的评价会更加客观，由此进一步所作的优化也可以更加有效。
在具体实施中，所述智能客服系统可以设置于独立的通信设备上，也可以分布设置于网络中，例如可以分为前端及后端，前端可以包括交互单元，具体可以以浏览器、客户端或者应用(APP)的方式实现，后端可以包括其他单元，可以以服务器或者云端的方式实现。
本发明实施例还提供了一种智能客服机器人，所述智能客服机器人可以包括上述任一实施例所述的智能客服系统。具体可参见上述各实施例的介绍，不再赘述。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (12)
1.一种智能客服系统，其特征在于，包括：
情绪识别单元，适于对会话过程中的客户对话进行实时情绪识别；
扩展应答选择单元，适于根据实时情绪识别结果选择相应的扩展应答；
交互单元，适于将包含扩展应答的应答结果输出至客户。
2.根据权利要求1所述的智能客服系统，其特征在于，所述交互单元包括以下至少一种：
文本交互子单元，适于通过文本方式与客户交互；
语音交互子单元，适于通过语音方式与客户交互；
视频交互子单元，适于通过视频方式与客户交互。
3.根据权利要求2所述的智能客服系统，其特征在于，所述情绪识别单元包括：
语音情绪识别子单元，适于对会话过程客户对话的音频进行语音情绪识别。
4.根据权利要求1或2所述的智能客服系统，其特征在于，所述情绪识别单元包括：
语音转写子单元，适于将会话过程中客户对话的音频转写为文本信息；
语义情绪识别子单元，适于对转写后的文本信息进行语义识别。
5.根据权利要求4所述的智能客服系统，其特征在于，所述情绪识别单元包括：行为情绪识别子单元，适于对会话过程中客户的身体语言进行行为情绪识别。
6.根据权利要求1所述的智能客服系统，其特征在于，所述扩展应答选择单元适于在情绪识别结果为预设的情绪类型，或者情绪强烈程度达至预设的负面情绪级别时，选择相应的扩展应答，以安抚客户情绪。
7.根据权利要求1所述的智能客服系统，其特征在于，所述扩展应答选择单元包括以下任意一种：
第一选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中随机选择其中一个作为相应的扩展应答；
第二选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中相同的情绪识别结果对应的扩展应答的重复率最低；
第三选择子单元，适于从与所述情绪识别结果相应的多个扩展应答中选择一个作为相应的扩展应答，且在所述会话过程中任意相邻的相同的情绪识别结果对应不同的扩展应答。
8.根据权利要求1所述的智能客服系统，其特征在于，所述交互单元输出的应答结果中扩展应答置于基本应答之前、之中或之后。
9.根据权利要求1所述的智能客服系统，其特征在于，还包括问答日志记录单元，适于在问答日志明细中记录每一客户对话所对应的客户的情绪信息。
10.根据权利要求9所述的智能客服系统，其特征在于，还包括：情绪变化趋势识别单元，适于根据对会话过程中的客户对话的情绪识别结果识别出客户在会话过程中的情绪变化趋势。
11.根据权利要求10所述的智能客服系统，其特征在于，还包括：服务评价单元，适于根据客户在会话过程中情绪变化趋势，对所述智能客服的服务进行评价。
12.一种智能客服机器人，其特征在于，包括权利要求1-11任一项所述的智能客服系统。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811183665.5A CN111048075A (zh) | 2018-10-11 | 2018-10-11 | 智能客服系统及智能客服机器人 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811183665.5A CN111048075A (zh) | 2018-10-11 | 2018-10-11 | 智能客服系统及智能客服机器人 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111048075A true CN111048075A (zh) | 2020-04-21 |
Family
ID=70229276
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811183665.5A Pending CN111048075A (zh) | 2018-10-11 | 2018-10-11 | 智能客服系统及智能客服机器人 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111048075A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112148850A (zh) * | 2020-09-08 | 2020-12-29 | 北京百度网讯科技有限公司 | 动态交互方法、服务器、电子设备及存储介质 |
| CN112992187A (zh) * | 2021-02-26 | 2021-06-18 | 平安科技（深圳）有限公司 | 基于上下文的语音情感检测方法、装置、设备及存储介质 |
| CN113435999A (zh) * | 2021-06-24 | 2021-09-24 | 中国工商银行股份有限公司 | 业务处理方法、装置和系统 |
| CN115348355A (zh) * | 2022-07-05 | 2022-11-15 | 深圳市仰和镜象技术有限公司 | 基于人工智能技术的心理危机识别通话服务系统 |
| US11954443B1 (en) | 2021-06-03 | 2024-04-09 | Wells Fargo Bank, N.A. | Complaint prioritization using deep learning model |
Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1473324A (zh) * | 2001-07-27 | 2004-02-04 | ���ṫ˾ | 程序、声音交互设备、和声音交互方法 |
| CN102099853A (zh) * | 2009-03-16 | 2011-06-15 | 富士通株式会社 | 用于识别语音情感变化的设备和方法 |
| CN103811009A (zh) * | 2014-03-13 | 2014-05-21 | 华东理工大学 | 一种基于语音分析的智能电话客服系统 |
| CN105206269A (zh) * | 2015-08-14 | 2015-12-30 | 百度在线网络技术（北京）有限公司 | 一种语音处理方法和装置 |
| CN105895101A (zh) * | 2016-06-08 | 2016-08-24 | 国网上海市电力公司 | 用于电力智能辅助服务系统的语音处理设备及处理方法 |
| CN105893344A (zh) * | 2016-03-28 | 2016-08-24 | 北京京东尚科信息技术有限公司 | 基于用户语义情感分析的应答方法和装置 |
| CN106254186A (zh) * | 2016-08-05 | 2016-12-21 | 易晓阳 | 一种语音交互识别控制系统 |
| CN106357942A (zh) * | 2016-10-26 | 2017-01-25 | 广州佰聆数据股份有限公司 | 基于上下文对话语义识别的智能应答方法及系统 |
| CN106448670A (zh) * | 2016-10-21 | 2017-02-22 | 竹间智能科技（上海）有限公司 | 基于深度学习和强化学习的自动回复对话系统 |
| CN106484093A (zh) * | 2015-09-01 | 2017-03-08 | 卡西欧计算机株式会社 | 对话控制装置、对话控制方法 |
| CN106570496A (zh) * | 2016-11-22 | 2017-04-19 | 上海智臻智能网络科技股份有限公司 | 情绪识别方法和装置以及智能交互方法和设备 |
| CN106683672A (zh) * | 2016-12-21 | 2017-05-17 | 竹间智能科技（上海）有限公司 | 一种基于情感和语义的智能对话方法及系统 |
| CN107154257A (zh) * | 2017-04-18 | 2017-09-12 | 苏州工业职业技术学院 | 基于客户语音情感的客服服务质量评价方法及系统 |
| CN107301168A (zh) * | 2017-06-01 | 2017-10-27 | 深圳市朗空亿科科技有限公司 | 智能机器人及其情绪交互方法、系统 |
| CN107645523A (zh) * | 2016-07-21 | 2018-01-30 | 北京快乐智慧科技有限责任公司 | 一种情绪交互的方法和系统 |
| CN108536802A (zh) * | 2018-03-30 | 2018-09-14 | 百度在线网络技术（北京）有限公司 | 基于儿童情绪的交互方法及装置 |
-
2018
- 2018-10-11 CN CN201811183665.5A patent/CN111048075A/zh active Pending
Patent Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1473324A (zh) * | 2001-07-27 | 2004-02-04 | ���ṫ˾ | 程序、声音交互设备、和声音交互方法 |
| CN102099853A (zh) * | 2009-03-16 | 2011-06-15 | 富士通株式会社 | 用于识别语音情感变化的设备和方法 |
| CN103811009A (zh) * | 2014-03-13 | 2014-05-21 | 华东理工大学 | 一种基于语音分析的智能电话客服系统 |
| CN105206269A (zh) * | 2015-08-14 | 2015-12-30 | 百度在线网络技术（北京）有限公司 | 一种语音处理方法和装置 |
| CN106484093A (zh) * | 2015-09-01 | 2017-03-08 | 卡西欧计算机株式会社 | 对话控制装置、对话控制方法 |
| CN105893344A (zh) * | 2016-03-28 | 2016-08-24 | 北京京东尚科信息技术有限公司 | 基于用户语义情感分析的应答方法和装置 |
| CN105895101A (zh) * | 2016-06-08 | 2016-08-24 | 国网上海市电力公司 | 用于电力智能辅助服务系统的语音处理设备及处理方法 |
| CN107645523A (zh) * | 2016-07-21 | 2018-01-30 | 北京快乐智慧科技有限责任公司 | 一种情绪交互的方法和系统 |
| CN106254186A (zh) * | 2016-08-05 | 2016-12-21 | 易晓阳 | 一种语音交互识别控制系统 |
| CN106448670A (zh) * | 2016-10-21 | 2017-02-22 | 竹间智能科技（上海）有限公司 | 基于深度学习和强化学习的自动回复对话系统 |
| CN106357942A (zh) * | 2016-10-26 | 2017-01-25 | 广州佰聆数据股份有限公司 | 基于上下文对话语义识别的智能应答方法及系统 |
| CN106570496A (zh) * | 2016-11-22 | 2017-04-19 | 上海智臻智能网络科技股份有限公司 | 情绪识别方法和装置以及智能交互方法和设备 |
| CN106683672A (zh) * | 2016-12-21 | 2017-05-17 | 竹间智能科技（上海）有限公司 | 一种基于情感和语义的智能对话方法及系统 |
| CN107154257A (zh) * | 2017-04-18 | 2017-09-12 | 苏州工业职业技术学院 | 基于客户语音情感的客服服务质量评价方法及系统 |
| CN107301168A (zh) * | 2017-06-01 | 2017-10-27 | 深圳市朗空亿科科技有限公司 | 智能机器人及其情绪交互方法、系统 |
| CN108536802A (zh) * | 2018-03-30 | 2018-09-14 | 百度在线网络技术（北京）有限公司 | 基于儿童情绪的交互方法及装置 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112148850A (zh) * | 2020-09-08 | 2020-12-29 | 北京百度网讯科技有限公司 | 动态交互方法、服务器、电子设备及存储介质 |
| CN112992187A (zh) * | 2021-02-26 | 2021-06-18 | 平安科技（深圳）有限公司 | 基于上下文的语音情感检测方法、装置、设备及存储介质 |
| US11954443B1 (en) | 2021-06-03 | 2024-04-09 | Wells Fargo Bank, N.A. | Complaint prioritization using deep learning model |
| CN113435999A (zh) * | 2021-06-24 | 2021-09-24 | 中国工商银行股份有限公司 | 业务处理方法、装置和系统 |
| CN115348355A (zh) * | 2022-07-05 | 2022-11-15 | 深圳市仰和镜象技术有限公司 | 基于人工智能技术的心理危机识别通话服务系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111048075A (zh) | 智能客服系统及智能客服机器人 | |
| CN112804400B (zh) | 客服呼叫语音质检方法、装置、电子设备及存储介质 | |
| CN111127031A (zh) | 智能客服系统交互方法及智能客服机器人、存储介质 | |
| US10586539B2 (en) | In-call virtual assistant | |
| US11380327B2 (en) | Speech communication system and method with human-machine coordination | |
| US8798255B2 (en) | Methods and apparatus for deep interaction analysis | |
| US8837687B2 (en) | Computer-implemented system and method for matching agents with callers in an automated call center environment based on user traits | |
| US8370155B2 (en) | System and method for real time support for agents in contact center environments | |
| US8676586B2 (en) | Method and apparatus for interaction or discourse analytics | |
| US8145482B2 (en) | Enhancing analysis of test key phrases from acoustic sources with key phrase training models | |
| CN107818798A (zh) | 客服服务质量评价方法、装置、设备及存储介质 | |
| US10133999B2 (en) | Analyzing conversations to automatically identify deals at risk | |
| US10181326B2 (en) | Analyzing conversations to automatically identify action items | |
| US10110743B2 (en) | Automatic pattern recognition in conversations | |
| US20180181561A1 (en) | Analyzing conversations to automatically identify customer pain points | |
| CN111049998A (zh) | 语音客服质检方法及客服质检设备、存储介质 | |
| CN111241357A (zh) | 对话训练方法、装置、系统及存储介质 | |
| CN110610705A (zh) | 一种基于人工智能的语音交互提示器 | |
| CN110377726B (zh) | 一种人工智能实现自然语言文本情绪识别方法与装置 | |
| US20220116500A1 (en) | Systems and methods for dynamically controlling conversations and workflows based on multi-modal conversation monitoring | |
| CN111276148A (zh) | 基于卷积神经网络的回访方法、系统及存储介质 | |
| US20180183930A1 (en) | Analyzing conversations to automatically identify product feature requests | |
| CN113468296A (zh) | 可配置业务逻辑的模型自迭代式智能客服质检系统与方法 | |
| CN110705309A (zh) | 服务质量评测方法及系统 | |
| CN111049999A (zh) | 语音客服质检系统及客服质检设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200421 |