JP2019047170A - Call center system, call center device, interaction method, and program therefor, comprising customer complaint detection function - Google Patents

Call center system, call center device, interaction method, and program therefor, comprising customer complaint detection function Download PDF

Info

Publication number
JP2019047170A
JP2019047170A JP2017164827A JP2017164827A JP2019047170A JP 2019047170 A JP2019047170 A JP 2019047170A JP 2017164827 A JP2017164827 A JP 2017164827A JP 2017164827 A JP2017164827 A JP 2017164827A JP 2019047170 A JP2019047170 A JP 2019047170A
Authority
JP
Japan
Prior art keywords
dialogue
complaint
customer
switching
call center
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017164827A
Other languages
Japanese (ja)
Other versions
JP6863179B2 (en
Inventor
崇史 梶原
Takashi Kajiwara
崇史 梶原
祐治 小田
Yuji Oda
祐治 小田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2017164827A priority Critical patent/JP6863179B2/en
Publication of JP2019047170A publication Critical patent/JP2019047170A/en
Application granted granted Critical
Publication of JP6863179B2 publication Critical patent/JP6863179B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)

Abstract

To provide a call center system, call center device, interaction method, and program therefor, that prevent a complaint from being caused during an AI interaction.SOLUTION: A call center server includes: an AI interaction processing unit for performing a voice interaction with a customer using an AI; a call content analysis unit for analyzing a call content on the basis of the customer's call voice; a complaint detection processing unit for detecting a complaint state or a preliminary complaint state on the basis of a result of the analysis by the call content analysis unit; an interaction switching unit for performing switching from an AI interaction by the AI interaction processing unit to an operator interaction in which an operator at an operator terminal performs a voice interaction with the customer; and a control unit that controls the AI interaction processing unit, the call content analysis unit, and the complaint detection processing unit, performs switching control on the interaction switching unit in the case that a detection result of the complaint detection processing unit shows the complaint state, and performs the switching control only when information on the customer's switching desire is acquired from a customer terminal in the case that a detection result of the complaint detection processing unit shows the preliminary complaint state.SELECTED DRAWING: Figure 2

Description

本発明は、金融機関などのインバウンドコールセンタシステムにおいて、顧客とバーチャルオペレータまたはオペレータとの会話内容を解析することで、顧客通話中に顧客が苦情状態であることを検知し状況悪化を予防する機能を備えたコールセンタシステムに関する。   In an inbound call center system such as a financial institution, the present invention has a function of detecting a customer in a complaint state during a customer call by analyzing a conversation between a customer and a virtual operator or an operator and preventing a situation from deteriorating. It is related with the provided call center system.

従来のコールセンタシステムにおける苦情対応としては、顧客の感情度合いやオペレータが対応に困惑している状況を自動判断して、オペレータからの要求により又は上級オペレータであるスーパーバイザが監視することにより、スーパーバイザが適切処理を行ったりスーパーバイザへの通話切り替えを行うことで、通話中の苦情状態の状況悪化の予防に繋げている(例えば、特許文献1、特許文献2、特許文献3、特許文献4参照)。   In order to respond to complaints in the conventional call center system, the supervisor is appropriate by automatically judging the degree of customer emotion and the situation in which the operator is confused about the response, and monitoring by a request from the operator or by a supervisor who is a senior operator. By performing the processing and switching the call to the supervisor, it leads to prevention of deterioration of the complaint state during the call (see, for example, Patent Document 1, Patent Document 2, Patent Document 3, and Patent Document 4).

特開2004−37989号公報JP 2004-37989 A 特開2007−4000号公報JP 2007-4000 特開2011−9902号公報JP 2011-9902 A 特開2016−119634公報JP, 2006-119634, A

しかしながら、従来の技術においては、コールセンタシステム側としてAI(Artifical Intelligence)によるバーチャルオペレータ(以降、AIと略称する)が顧客と対話(AI対話)している場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においては、上級のオペレータ対話に切り替えるための判断基準が無いため、AIからの要求で対話切替ができず、AI対話中の苦情化を予防することができないという問題点があった。また、前記状況における対応として上級オペレータが監視することで対話切替の判断が可能であるが、上級オペレータの負担増加に繋がりかつAIによる無人化の意義を失うことにもなっていた。
また、当初の対話がオペレータ対話であっても、上記状況においては、上級のオペレータ対話(スーパーバイザ対話)に切り替える判断が難しいため、オペレータからの要求で対話切替ができず、オペレータ対話中の苦情化を予防することができないという問題点があった。また、前記状況における対応としてスーパーバイザが監視することで対話切替の判断が可能であるが、スーパーバイザの負担増加に繋がっていた。
However, in the prior art, when a call center system side AI (Artificial Intelligence) virtual operator (hereinafter abbreviated as “AI”) is interacting with a customer (AI dialogue), it is clear from the contents of the call that the customer In situations where it is not possible to conclude that a complaint is being expressed, there is no criteria for switching to advanced operator dialogue, so dialogue switching cannot be performed at the request of AI, and complaints during AI dialogue can be prevented. There was a problem that it was not possible. Further, as a response in the situation described above, it is possible to judge dialogue switching by monitoring the senior operator, but this leads to an increase in the burden on the senior operator and also loses the significance of unmanned operation by AI.
Even if the initial dialogue is an operator dialogue, in the above situation, it is difficult to make a decision to switch to an advanced operator dialogue (supervisor dialogue). There was a problem that could not be prevented. Further, as a response in the above situation, the supervisor can determine whether to switch the dialogue by monitoring, but this has led to an increase in the burden on the supervisor.

本発明は、このような問題を解決することを課題とし、AI対話やオペレータ対話中の苦情化を予防することを目的とする。   An object of the present invention is to solve such a problem, and an object thereof is to prevent complaints during an AI dialogue or an operator dialogue.

本発明のコールセンタシステムは、オペレータ作業端末とスーパーバイザ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムであって、前記コールセンタサーバに、顧客との音声対話をAIによって行うAI対話処理部と、顧客の通話音声を元に通話内容を解析する通話内容解析部と、前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、または、前記オペレータ対話から前記スーパーバイザ作業端末のスーパーバイザが顧客との音声対話を行うスーパーバイザ対話への切り替え、を行う対話切替部と、前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、を有することを特徴とする。   The call center system according to the present invention is a call center system that includes an operator work terminal, a supervisor work terminal, and a call center server, and provides a call center service to a customer terminal, wherein the call center server performs AI conversation with a customer by AI. A processing unit, a call content analysis unit that analyzes a call content based on a customer's call voice, a complaint detection processing unit that detects a complaint state or a complaint reserve army state based on an analysis result of the call content analysis unit, and the AI Switching from the AI dialogue by the dialogue processing unit to an operator dialogue in which the operator of the operator work terminal performs voice dialogue with the customer, or from the operator dialogue to a supervisor dialogue in which the supervisor of the supervisor work terminal performs voice dialogue with the customer. Dialog switching unit for switching , Controlling the AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit, and for the dialogue switching unit, if the detection result of the complaint detection processing unit is a complaint state, A control unit that controls switching and controls the switching only when the customer's switching request information is acquired from the customer terminal if the detection result of the complaint detection processing unit is in the complaint reserve army state. Features.

本発明のコールセンタ装置は、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムの前記コールセンタサーバの機能を有するコールセンタ装置であって、顧客との音声対話をAIによって行うAI対話処理部と、顧客の通話音声を元に通話内容を解析する通話内容解析部と、前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、を行う対話切替部と、前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、を有することを特徴とする。   A call center apparatus according to the present invention is a call center apparatus having a function of the call center server of a call center system that includes an operator work terminal and a call center server and provides a call center service to a customer terminal, and performs AI voice conversation with a customer through AI. A dialogue processing unit, a call content analysis unit for analyzing a call content based on a call voice of a customer, a complaint detection processing unit for detecting a complaint state or a complaint reserve army state based on an analysis result of the call content analysis unit, A dialogue switching unit for switching from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer, the AI dialogue processing unit, the call content analysis unit, and the The complaint detection processing unit is controlled, and further, the complaint detection processing is performed for the dialogue switching unit. If the detection result of the part is a complaint state, the switching is controlled, and if the detection result of the complaint detection processing part is a complaint preliminary army state, the switching is performed only when the customer switching request information is acquired from the customer terminal. And a control unit that performs control.

本発明の対話方法は、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムにおけるコールセンタサーバによって実行される対話方法であって、顧客との音声対話をAIによって行うAI対話処理ステップと、顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、を有することを特徴とする。   An interactive method of the present invention is an interactive method executed by a call center server in a call center system that includes an operator work terminal and a call center server and provides a call center service to a customer terminal. A processing step, a call content analysis step for analyzing a call content based on a customer's call voice, a complaint detection processing step for detecting a complaint state or a complaint reserve army state based on an analysis result of the call content analysis step, and the complaint If the detection result of the detection processing step is a complaint state, a step of switching from an AI dialogue in the AI dialogue processing step to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer, and detection of the complaint detection processing step If the result is a complaint reserve Serial to the step of switching from said AI dialogue to the operator interaction only if the customer terminal has acquired the switching request information of the customer, characterized by having a.

本発明のプログラムは、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムにおける前記コールセンタサーバによって実行される対話方法のためのプログラムであって、前記コールセンタサーバのコンピュータに、顧客との音声対話をAIによって行うAI対話処理ステップと、顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、を実行させることを特徴とする。   A program of the present invention is a program for an interactive method executed by the call center server in a call center system that includes an operator work terminal and a call center server and provides a call center service to a customer terminal, the computer of the call center server, AI dialogue processing step for performing voice dialogue with the customer by AI, call content analysis step for analyzing the call content based on the call voice of the customer, and complaint state or complaint reserve army state based on the analysis result of the call content analysis step If the detection result of the complaint detection processing step and the detection result of the complaint detection processing step is a complaint state, from the AI dialogue by the AI dialogue processing step to an operator dialogue in which the operator of the operator work terminal performs a voice dialogue with the customer Step to switch If the detection result of the complaint detection processing step is a complaint reserve army state, the step of switching from the AI dialogue to the operator dialogue is executed only when customer switch request information is acquired from the customer terminal. And

このようにした本発明は、AI対話の場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においても、オペレータ対話に切り替えるための判断基準を提供し、AI対話中の苦情化を予防することができる。また、前記状況における対応としてオペレータが監視する必要性を無くし、オペレータの負担を低減し、AIによる無人化を達成できる。
さらに、当初の対話がオペレータ対話であっても、上記状況において、スーパーバイザ対話に切り替える判断基準を提供し、オペレータ対話中の苦情化を予防することができる。また、前記状況における対応としてスーパーバイザが監視する必要性を無くし、スーパーバイザの負担を低減できる。
In the case of the AI dialogue, the present invention thus provided provides a criterion for switching to the operator dialogue even in a situation in which it is not possible to conclude from the content of the call that the customer expresses a complaint. Can prevent complaints inside. In addition, it is possible to eliminate the need for the operator to monitor as a response in the situation, reduce the burden on the operator, and achieve unmanned operation by AI.
Furthermore, even if the initial dialogue is an operator dialogue, it is possible to provide a criterion for switching to the supervisor dialogue in the above situation and prevent complaints during the operator dialogue. Further, it is possible to eliminate the necessity of monitoring by the supervisor as a countermeasure in the above situation, and to reduce the burden on the supervisor.

第1の実施例におけるコールセンタシステムの全体構成を示すブロック図。The block diagram which shows the whole structure of the call center system in a 1st Example. 第1の実施例におけるコールセンタサーバの機能的構成を示すブロック図。The block diagram which shows the functional structure of the call center server in a 1st Example. 第1の実施例における苦情検知処理のアルゴリズムを示すフローチャート。The flowchart which shows the algorithm of the complaint detection process in a 1st Example. 第1の実施例における言葉間隔計算のアルゴリズムを示すフローチャート。The flowchart which shows the algorithm of the word space | interval calculation in a 1st Example. 第1の実施例における音声認識処理の結果とそれに対するフラグの値を示す説明図。Explanatory drawing which shows the result of the speech recognition process in 1st Example, and the value of the flag with respect to it. 第1の実施例における感情分析処理の結果とそれに対するフラグの値を示す説明図。Explanatory drawing which shows the value of the flag with respect to the result of the emotion analysis process in a 1st Example. 第1の実施例における言葉間隔計算の結果とそれに対するフラグの値を示す説明図。Explanatory drawing which shows the result of the word space | interval calculation in a 1st Example, and the value of the flag with respect to it. 第1の実施例における顧客へ対話切替を問う処理の顧客の応答とそれに対するフラグの値を示す説明図。Explanatory drawing which shows the customer's response of the process which asks the customer about dialog switching in a 1st Example, and the value of the flag with respect to it.

以下、図面を参照して本発明による顧客の苦情検知機能を備えたコールセンタシステムの実施例を説明する。本実施例にはコールセンタサーバの機能を有するコールセンタ装置、切替方法、そのプログラムをも含む。
本発明において、通話とは顧客がインターネットや電話回線を通じてコールセンタに対して行う電話での話、対話とはコールセンタ側が行う対応であって通話に対する応答や顧客に対するアナウンスなどのことと定義する。AI対話とはAIが行う対話、オペレータ対話とはオペレータが行う対話、スーパーバイザ対話とはスーパーバイザが行う対話と定義する。さらに、発話とはコールセンタの対話−対話間における一連の顧客の通話のことと定義する。
テキストデータ、発話検出時間、NGワード、NGワード数とは共に、従来技術である音声認識技術により発話を音声認識した認識結果としての音声認識データであって、テキストデータとは発話をテキスト化したデータと定義する。発話検出時間とは発話の時間的長さのことと定義する。NGワードとは顧客が後述する苦情状態であることを表す発話内における所定のワードのことと定義する。NGワード数とは発話内のNGワードの数のことと定義する。
怒り感情の有無情報とは、感情分析技術により発話を感情分析した分析結果としての感情分析データであって、発話内に怒りの感情があったか否かを示す情報のことと定義する。
さらに、苦情状態とは、通話内容が明らかに顧客が苦情を表している状態と定義する。苦情予備軍状態とは、通話内容からは明らかに顧客が苦情を表している状態とは断定できないが、苦情を表している可能性がある状態と定義する。苦情状態でも苦情予備軍状態でもない状態を苦情無し状態と定義する。苦情検知とは、苦情状態もしくは苦情予備軍状態を検知することと定義する。
Embodiments of a call center system having a customer complaint detection function according to the present invention will be described below with reference to the drawings. The present embodiment also includes a call center device having a call center server function, a switching method, and a program thereof.
In the present invention, a call is a telephone conversation that a customer makes to the call center through the Internet or a telephone line, and a conversation is a response that the call center performs, such as a response to the call or an announcement to the customer. The AI dialog is defined as a dialog performed by the AI, the operator dialog is defined as a dialog performed by the operator, and the supervisor dialog is defined as a dialog performed by the supervisor. Further, an utterance is defined as a series of customer calls between call center dialogs.
The text data, speech detection time, NG word, and number of NG words are all speech recognition data as a recognition result of speech recognition by speech recognition technology, which is a conventional technology, and text data is a utterance text. Define as data. The utterance detection time is defined as the duration of utterance. The NG word is defined as a predetermined word in the utterance indicating that the customer is in a complaint state described later. The number of NG words is defined as the number of NG words in the utterance.
The anger emotion presence / absence information is emotion analysis data as an analysis result obtained by analyzing an utterance by an emotion analysis technique, and is defined as information indicating whether or not there is an anger emotion in the utterance.
Furthermore, a complaint state is defined as a state in which a customer clearly expresses a complaint about the content of a call. The complaint reserve army state is defined as a state in which a customer cannot express a complaint clearly from the content of the call, but may represent a complaint. A state that is neither a complaint state nor a complaint reserve state is defined as a no complaint state. Complaint detection is defined as detecting a complaint state or a preliminary complaint state.

図1は第1の実施例におけるコールセンタシステムの全体構成を示すブロック図である。 FIG. 1 is a block diagram showing the overall configuration of the call center system in the first embodiment.

図1において、コールセンタシステム1は、顧客とオペレータ(AIを含む)間のやり取りを制御するコールセンタサーバ(コールセンタ装置)11、音声を入力しテキストデータと発話検出時間と所定のキーワード(本発明においてはキーワード自体ではなく所定のNGワードに対するNGワード数)を出力する公知技術(例えば特許文献4)により構成された音声認識システム12、音声を入力しその音声の感情を識別する(本発明おいては発話毎の怒り感情の有無情報のみ出力するものとする)公知技術(例えば特許文献3)により構成された感情分析システム13、後述するデータ蓄積部の内容を表示するモニタを有するオペレータ作業端末14(スーパーバイザ作業端末を含む)、インターネットまたは電話回線を介して接続された顧客端末15から構成される。   In FIG. 1, a call center system 1 includes a call center server (call center device) 11 for controlling exchanges between a customer and an operator (including AI), input voice data, text data, utterance detection time, and predetermined keywords (in the present invention). A speech recognition system 12 configured by a known technique (for example, Patent Document 4) that outputs not the keyword itself but the number of NG words for a predetermined NG word), inputs speech and identifies the emotion of the speech (in the present invention) Only an anger emotion presence / absence information for each utterance is output) Emotion analysis system 13 configured by a known technique (for example, Patent Document 3), an operator work terminal 14 having a monitor for displaying the contents of a data storage unit described later ( (Including supervisor work terminal), connected via internet or telephone line Made from the customer terminal 15.

図2は第1の実施例におけるコールセンタサーバの機能的構成を示すブロック図である。   FIG. 2 is a block diagram showing a functional configuration of the call center server in the first embodiment.

図2において、制御部111はプログラムを実行することによりコールセンタサーバ11の各機能ブロックを制御し、プログラムを実行することにより後述するメモリ部112のデータの加工や演算処理を行う機能を有する。このプログラムは後述するメモリ部112に記憶されて提供されるものであっても良く、また、制御部111に内蔵されたメモリに記憶されて提供されるものであっても良い。
メモリ部112はコールセンタサーバ11の各処理部から得られたデータの一時的格納や、制御部111が行うデータの加工や演算処理などに利用するための機能を有する。
データ蓄積部113は発話毎の、音声認識データ(テキストデータ、発話検出時間、NGワード数)と感情分析データ(怒り感情の有無情報)と後述の図4において説明する言葉間隔とテキスト文字数および後述する各フラグの値を蓄積する機能を有する。
AI対話処理部114は顧客の発話を受けてAIから応答を行う機能を有する。AI対話処理部にはAIの顧客へのアナウンスに対する顧客の返答を判定する機能を含む。
音声認識入出力処理部115は、顧客の発話音声を音声認識システム12に渡し、音声認識システム12から音声認識データを受け取る機能を有する。
感情分析入出力処理部116は、顧客の発話音声を感情分析システム13に渡し、感情分析システム13から感情分析データである怒り感情の有無情報を受け取る機能を有する。
苦情検知処理部117は音声認識入出力処理部115、感情分析入出力処理部116、後述する言葉間隔処理部118から受け取った情報を元に、苦情状態もしくは苦情予備軍状態を検知する機能を有する。これら音声認識入出力処理部115と感情分析入出力処理部116と言葉間隔処理部118の機能を有するものが通話内容解析部である。
言葉間隔処理部118は音声認識入出力処理部115から受け取った情報を元に顧客の発する言葉間隔を計算し、得た値を苦情検知処理部117に渡す機能を有する。
対話切替部119はAI対話処理部114の対応を基にAI対話からオペレータ対話への切り替えを行う機能を有する。
In FIG. 2, the control unit 111 has a function of controlling each functional block of the call center server 11 by executing a program and performing data processing and arithmetic processing of the memory unit 112 described later by executing the program. This program may be provided by being stored in the memory unit 112 described later, or may be provided by being stored in a memory built in the control unit 111.
The memory unit 112 has a function for temporarily storing data obtained from each processing unit of the call center server 11 and for processing and arithmetic processing of data performed by the control unit 111.
The data storage unit 113 stores voice recognition data (text data, utterance detection time, number of NG words), emotion analysis data (whether or not anger emotion presence / absence information), word intervals and text characters described later in FIG. It has a function of accumulating the value of each flag.
The AI dialog processing unit 114 has a function of receiving a customer's utterance and responding from the AI. The AI dialog processing unit includes a function of determining a customer's response to an AI customer announcement.
The voice recognition input / output processing unit 115 has a function of passing a customer's speech voice to the voice recognition system 12 and receiving voice recognition data from the voice recognition system 12.
The emotion analysis input / output processing unit 116 has a function of passing the customer's utterance voice to the emotion analysis system 13 and receiving the presence / absence information of anger emotion as emotion analysis data from the emotion analysis system 13.
The complaint detection processing unit 117 has a function of detecting a complaint state or a preliminary complaint state based on information received from the speech recognition input / output processing unit 115, the emotion analysis input / output processing unit 116, and the word interval processing unit 118 described later. . The call content analysis unit has the functions of the voice recognition input / output processing unit 115, the emotion analysis input / output processing unit 116, and the word interval processing unit 118.
The word interval processing unit 118 has a function of calculating a word interval issued by the customer based on the information received from the voice recognition input / output processing unit 115 and passing the obtained value to the complaint detection processing unit 117.
The dialogue switching unit 119 has a function of switching from the AI dialogue to the operator dialogue based on the correspondence of the AI dialogue processing unit 114.

図3は第1の実施例における顧客の苦情検知処理のアルゴリズムを示すフローチャートである。本フローチャートの図中Sで表すステップに従って図1、図2、図5、図6、図7および図8を参照しながら説明する。
なお、AI対話処理部114、通話内容解析部(音声認識入出力処理部115と感情分析入出力処理部116と言葉間隔処理部118)、および、苦情検知処理部117は全て制御部111が、本フローチャートに従い手順制御するものとし、以下の説明では制御部111の制御動作の説明については省略する。
FIG. 3 is a flowchart showing an algorithm for a customer complaint detection process in the first embodiment. Description will be made with reference to FIGS. 1, 2, 5, 6, 7, and 8 according to the step represented by S in the flowchart.
The AI dialog processing unit 114, the call content analysis unit (voice recognition input / output processing unit 115, emotion analysis input / output processing unit 116 and word interval processing unit 118), and the complaint detection processing unit 117 are all controlled by the control unit 111. It is assumed that the procedure is controlled according to this flowchart, and the description of the control operation of the control unit 111 is omitted in the following description.

S100:メモリ部112が持つ顧客の発話回数を示す識別番号iの値を0に設定する。このiの値は顧客が発話するたびに、後述するS101にて1ずつ加算される。     S100: The value of the identification number i indicating the number of customer utterances in the memory unit 112 is set to zero. The value of i is incremented by 1 every time the customer speaks in S101 described later.

S101:メモリ部112が持つ5つのフラグである、苦情状態検出フラグcompt、苦情予備軍状態検出フラグdanger、対話切替フラグchange、同一アナウンス継続フラグcont1、および、会話継続フラグcont2を各発話(すなわち識別番号)の発話の開始毎に初期値0に設定する。また、このステップにおいて識別番号iの値をi+1に設定する。     S101: Each of the five flags of the memory unit 112, that is, the complaint state detection flag compt, the complaint preliminary army state detection flag danger, the dialogue switching flag change, the same announcement continuation flag cont1, and the conversation continuation flag cont2 Number) is set to the initial value 0 each time the utterance is started. In this step, the identification number i is set to i + 1.

S102:このステップは音声認識処理を行うステップである。すなわち、音声認識システム12へ発話毎に音声データが入力され、音声認識入出力処理部115が発話毎に音声認識システム12から受け取るテキストデータと発話検出時間とNGワード数をメモリ部112に格納する。さらにこれらの格納データを識別番号i毎にデータ蓄積部113に蓄積する。所定のNGワードが予め音声認識システム12に設定されており、入力された音声データを基に音声認識システム12がNGワードを検出し、入力された音声データ毎にNGワード数を音声認識入出力処理部115に渡すものとする。   S102: This step is a step of performing voice recognition processing. That is, voice data is input to the voice recognition system 12 for each utterance, and the text data received by the voice recognition input / output processing unit 115 from the voice recognition system 12 for each utterance, the utterance detection time, and the number of NG words are stored in the memory unit 112. . Further, these stored data are stored in the data storage unit 113 for each identification number i. Predetermined NG words are set in the speech recognition system 12 in advance, the speech recognition system 12 detects NG words based on the input speech data, and the number of NG words for each input speech data is speech recognition input / output It is assumed that the data is passed to the processing unit 115.

S103:苦情検知処理部117が、メモリ部112に格納されたNGワード数を受け取って、NGワード数に応じて苦情状態か否かを判断する。判断基準の一例としてはNGワード数が1以上のときに苦情状態と判断し、0のときは苦情状態ではないと判断する。苦情状態と判断されたときは苦情検知処理部117がフラグcomptを1とし、苦情状態でないと判断されたときはフラグcomptを0とする。そして、そのcomptの値を識別番号i毎にデータ蓄積部113に蓄積する。   S103: The complaint detection processing unit 117 receives the number of NG words stored in the memory unit 112, and determines whether or not it is in a complaint state according to the number of NG words. As an example of the criterion, when the number of NG words is 1 or more, it is determined as a complaint state. The complaint detection processing unit 117 sets the flag compt to 1 when it is determined that it is a complaint state, and sets the flag compt to 0 when it is determined that it is not a complaint state. Then, the value of “compt” is stored in the data storage unit 113 for each identification number i.

図5は、音声認識処理の結果とそれに対するフラグの値を示す説明図である。すなわち、S102とS103において識別番号i毎のデータ蓄積部113に蓄積されたデータ(発話検出時間はS103においては判断に用いられないためここでは省略する)の例である。図5の例は、所定のNGワードに「馬鹿」のワードが含まれていた場合であって、識別番号4にてテキストデータ「だから聞こえないって言ってんだろ、馬鹿」から「馬鹿」をNGワードとして検出し識別番号4におけるNGワード数が1となり、この時のフラグcomptが1となった例である。   FIG. 5 is an explanatory diagram showing the result of the speech recognition process and the flag value corresponding thereto. That is, it is an example of data stored in the data storage unit 113 for each identification number i in S102 and S103 (the utterance detection time is omitted here because it is not used for determination in S103). The example of FIG. 5 is a case where the word “idiot” is included in the predetermined NG word, and the text data “I don't hear it because it ’s an idiot” to “idiot” in the identification number 4. In this example, the number of NG words in the identification number 4 detected as NG word is 1, and the flag compt is 1 at this time.

S104:フラグcomptが1の場合はフラグchangeを1にして(S112)からS113の処理へ進み、フラグcomptが0の場合はS105へ進む。   S104: If the flag compt is 1, the flag change is set to 1 (S112) and the process proceeds to S113. If the flag compt is 0, the process proceeds to S105.

S105:このステップは感情分析処理を行うステップである。すなわち、感情分析システム13へ発話毎に音声データが入力され、感情分析入出力処理部116が発話毎に感情分析システム13から受け取る怒り感情の有無情報をメモリ部112に格納する。さらにこの格納データを識別番号i毎にデータ蓄積部113に蓄積する。
感情分析システム13は、入力された音声データを基にその周波数等から怒り感情の有無を検出し、入力された音声データ毎に怒り感情の有無情報を感情分析入出力処理部116に渡すものとする。
S105: This step is a step of performing emotion analysis processing. That is, voice data is input to the emotion analysis system 13 for each utterance, and the emotion analysis input / output processing unit 116 stores the presence / absence information of the anger emotion received from the emotion analysis system 13 for each utterance in the memory unit 112. Further, this stored data is stored in the data storage unit 113 for each identification number i.
The emotion analysis system 13 detects the presence or absence of anger emotion from the frequency or the like based on the input voice data, and passes the presence or absence information of anger emotion to the emotion analysis input / output processing unit 116 for each input voice data. To do.

S106:苦情検知処理部117が、S105におけるメモリ部112の怒り感情の有無情報を受け取って、怒り感情情報が有りのとき、苦情状態と判断し、怒り感情情報が無しの時は苦情状態でないと判断する。苦情状態と判断されたときは苦情検知処理部117がフラグcomptを1とし、苦情状態でないと判断されたときはフラグcomptを0とする。そして、そのcomptの値を識別番号i毎にデータ蓄積部113に蓄積する。   S106: The complaint detection processing unit 117 receives the presence / absence information of the anger emotion in the memory unit 112 in S105, determines that there is anger emotion information, determines that it is a complaint state, and if there is no anger emotion information, it is not a complaint state to decide. The complaint detection processing unit 117 sets the flag compt to 1 when it is determined that it is a complaint state, and sets the flag compt to 0 when it is determined that it is not a complaint state. Then, the value of “compt” is stored in the data storage unit 113 for each identification number i.

図6は、感情分析処理の結果とそれに対するフラグの値を示す説明図である。すなわち、S105とS106において識別番号i毎のデータ蓄積部113に蓄積されたデータの例である。図6の例は、識別番号4にてテキストデータ「だから聞こえないって言ってんだろ、馬鹿」に怒りの感情が含まれていた場合であって、識別番号4における怒り感情の有無情報が「あり」となり、この時のフラグcomptが1となった例である。   FIG. 6 is an explanatory diagram showing a result of the emotion analysis process and a flag value corresponding thereto. That is, it is an example of data stored in the data storage unit 113 for each identification number i in S105 and S106. The example of FIG. 6 is a case where the anger emotion is included in the identification number 4 when the anger emotion is included in the text data “That's why I can't hear you”. In this example, the flag compt is 1 at this time.

S107:フラグcomptが1の場合はフラグchangeを1にして(S112)からS113の処理へ進み、フラグcomptが0の場合はS108へ進む。   S107: If the flag compt is 1, the flag change is set to 1 (S112) and the process proceeds to S113. If the flag compt is 0, the process proceeds to S108.

S108:このステップは言葉間隔計算を行うステップである。メモリ部112に格納された音声認識データを基に言葉間隔処理部118が言葉間隔計算を行い、その結果(後述する言葉間隔SP(i)とテキスト文字数(i)とdangerの値)をメモリ部112に格納し、識別番号i毎にデータ蓄積部113に蓄積する。本ステップについては後述の図4の説明で詳細に説明する。     S108: This step is a step of calculating a word interval. The word interval processing unit 118 calculates the word interval based on the speech recognition data stored in the memory unit 112, and the result (word interval SP (i), number of text characters (i) and value of danger described later) is stored in the memory unit. 112 and stored in the data storage unit 113 for each identification number i. This step will be described in detail with reference to FIG.

図7は、言葉間隔計算の結果とそれに対するフラグの値を示す説明図である。すなわち、S108において(発話検出時間はS102において)識別番号i毎のデータ蓄積部113に蓄積されたデータの例である。図7の例は、識別番号3にてテキストデータ「すみません、さっきから良く聞こえないんですけど」の言葉間隔PH(3)がPH(1)未満の場合であって、この時のフラグdangerが1となった例である。   FIG. 7 is an explanatory diagram showing the result of word interval calculation and the flag value corresponding thereto. That is, it is an example of data stored in the data storage unit 113 for each identification number i in S108 (speech detection time is in S102). The example of FIG. 7 is the case where the word interval PH (3) of the text data “I'm sorry, I can't hear you well” with the identification number 3 is less than PH (1), and the flag danger at this time is This is an example of 1.

S109:S108で設定したフラグdangerが1の場合は苦情予備軍状態と判断して顧客が対話切替を希望するか否かの判断処理(S110)へ進み、フラグdangerが0の場合は苦情無し状態と判断してそのまま対話を継続する処理(S116)へ進む。   S109: If the flag “danger” set in S108 is 1, it is determined that it is in the complaint reserve army state, and the process proceeds to a determination process (S110) as to whether or not the customer desires to switch the dialogue. If the flag “danger” is 0, there is no complaint The process proceeds to the process (S116) to continue the dialogue as it is.

S110:このステップは、顧客へ対話切替を問う処理、すなわち、顧客端末15から顧客の切替希望情報を取得する処理である。具体例としては、AI対話処理部114が顧客に「オペレータ対話に切り替えますか」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答をAI対話処理部114が判定し、取得する。切替希望情報を取得した場合はAI対話処理部がフラグchangeを1としてS111に進む。アナウンスする方法としては音声合成による方法であっても録音済みの定型文(合成音声又は人間の音声)を流す方法であっても良い(以下同様)。切替希望情報が取得されなかった場合は、フラグchangeを0(初期値)としたままS111に進む。顧客の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することによりAI対話処理部114から取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。   S110: This step is a process for inquiring the customer about dialog switching, that is, a process for obtaining customer switching request information from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 announces to the customer “Do you want to switch to operator dialogue” (this is only an example of this announcement), and the AI dialogue processing unit 114 determines and obtains the response. To do. When the switching request information is acquired, the AI dialogue processing unit sets the flag change to 1 and proceeds to S111. The announcement method may be a speech synthesis method or a recorded standard sentence (synthetic speech or human speech) may be played (the same applies hereinafter). If the switching request information is not acquired, the process proceeds to S111 with the flag change set to 0 (initial value). As a method for acquiring the customer switching request information, even if the AI dialogue processing unit 114 obtains the customer's reply from the AI dialogue processing unit 114 by voice recognition, the announcement of the AI dialogue processing unit 114 is the customer. Alternatively, the push button may be pressed and the bush button signal may be received and acquired by the AI dialogue processing unit 114.

図8は顧客へ対話切替を問う処理の顧客の応答とそれに対するフラグの値を示す説明図であって、顧客の返答を音声認識することにより判定した例である。パターン1、2、3が切替希望の場合であって各々changeが1となり、パターン4、5、6が切替希望しない場合であって、各々changeが0となっている。   FIG. 8 is an explanatory diagram showing the customer's response to the process for asking the customer to switch the dialog and the flag value for the response, and is an example in which the customer's response is determined by voice recognition. When the patterns 1, 2, and 3 are desired to be switched and each change is 1, the patterns 4, 5, and 6 are not desired to be switched, and each change is 0.

S111:フラグchangeが1の場合は対話切替処理(S113)へ進み、フラグchangeが0の場合は次のアナウンスの処理(S114)へ進む。   S111: When the flag change is 1, the process proceeds to the dialogue switching process (S113). When the flag change is 0, the process proceeds to the next announcement process (S114).

S113:フラグchangeが1のときは、対話切替部119がAI対話処理部114によるAI対話からオペレータ作業端末14によるオペレータ対話への切り替えを行う。対話切替部119はデータ蓄積部113の蓄積データ(AI対話中のテキストデータなど)をオペレータ作業端末14へと転送し、顧客の苦情検知処理を終了する。   S113: When the flag change is 1, the dialogue switching unit 119 switches from the AI dialogue by the AI dialogue processing unit 114 to the operator dialogue by the operator work terminal 14. The dialogue switching unit 119 transfers the accumulated data (such as text data during the AI dialogue) in the data accumulation unit 113 to the operator work terminal 14 and ends the customer complaint detection process.

S114:このステップは、顧客へAI対話継続を問う処理である。すなわち、顧客端末15から顧客のAI対話の継続希望情報を取得する処理である。具体例としては、AI対話処理部114が顧客に「今後AI対話を継続しますか?」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答を、AI対話処理部114が判定し、取得する。AI対話の継続希望情報を取得した場合はAI対話処理部114がフラグcont1を1とする。AI対話の継続希望情報が取得されなかった場合は、cont1は0(初期値)のままとなる。顧客のAI対話の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することによりAI対話処理部114から取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。   S114: This step is a process for asking the customer to continue the AI dialogue. In other words, it is a process of obtaining information on the continuation of the customer's AI dialogue from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 announces to the customer, “Do you want to continue the AI dialogue in the future?” (This is only an example of this announcement), and the AI dialogue processing unit 114 gives the response. Determine and get. When the AI dialog processing unit 114 acquires the AI dialog continuation request information, the flag cont1 is set to 1. If the AI conversation continuation request information is not acquired, cont1 remains 0 (initial value). As a method for acquiring the customer's AI dialogue switching request information, even if the AI dialogue processing unit 114 obtains the customer's response from the AI dialogue processing unit 114 by voice recognition, A method may be used in which the announcement prompts the customer to push the push button and the AI dialogue processing unit 114 receives and acquires the bush button signal.

S115:フラグcont1が1の場合はS116に進み、フラグcont1が0の場合は、顧客の苦情検知処理を終了する。   S115: If the flag cont1 is 1, the process proceeds to S116. If the flag cont1 is 0, the customer complaint detection process is terminated.

S116:顧客の通話が継続しているかをAI対話処理部114が判定する。継続していると判定した場合は、AI対話処理部がフラグcont2を1とする。   S116: The AI dialog processing unit 114 determines whether the customer's call is continued. If it is determined that the process continues, the AI dialog processing unit sets the flag cont2 to 1.

S117:フラグcont2が1の場合はS101に進み、フラグcont2が0の場合は、顧客の苦情検知処理を終了する。なお、苦情検知処理を終了した後、顧客との通話が続いていれば、再び上記の苦情検知処理を開始してよい。   S117: If the flag cont2 is 1, the process proceeds to S101. If the flag cont2 is 0, the customer complaint detection process is terminated. In addition, if the telephone call with the customer continues after finishing the complaint detection process, the above complaint detection process may be started again.

図4は第1の実施例における言葉間隔計算のアルゴリズムを示すフローチャートである。フローチャートの図中Sで表すステップに従って図1および図2を参照しながら説明する
S201:言葉間隔処理部118が、メモリ部112に格納された識別番号iに対応するテキストデータSP(i)と発話検出時間T(i)を受け取る。
FIG. 4 is a flowchart showing a word interval calculation algorithm in the first embodiment. Explanation will be given with reference to FIG. 1 and FIG. 2 according to the step represented by S in the flowchart S201: The word interval processing unit 118 and the text data SP (i) corresponding to the identification number i stored in the memory unit 112 and the speech The detection time T (i) is received.

S202:言葉間隔処理部118がSP(i)からSP(i)のテキスト文字数N(i)を算出し、言葉間隔PH(i)=T(i)/N(i)を算出する。   S202: The word interval processing unit 118 calculates the number of text characters N (i) from SP (i) to SP (i), and calculates the word interval PH (i) = T (i) / N (i).

S203:言葉間隔処理部118がPH(1)−PH(i)を算出し、0を超える場合をクレーム予備軍、0以下の場合をクレーム予備軍でないと判断する。   S203: The word interval processing unit 118 calculates PH (1) -PH (i), and determines that it is not a claim reserve army when it exceeds 0, and is not a claim reserve army when it is 0 or less.

S204:S203の結果がクレーム予備軍であった場合、フラグdangerを1に設定する。   S204: If the result of S203 is the claim reserve army, the flag danger is set to 1.

S205:S203の結果がクレーム予備軍でない場合、フラグdangerを0に設定する。   S205: If the result of S203 is not the claim reserve army, the flag danger is set to 0.

このような実施例1により、AI対話の場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においても、オペレータ対話に切り替えるための判断基準を提供し、AI対話中の苦情化を予防することができる。また、前記状況における対応としてオペレータが監視する必要性を無くし、オペレータの負担を低減し、AIによる無人化を達成できる。     According to the first embodiment, in the case of the AI dialogue, even if it is not possible to conclude from the contents of the call that the customer clearly expresses a complaint, a criterion for switching to the operator dialogue is provided, and the AI dialogue is provided. Can prevent complaints inside. In addition, it is possible to eliminate the need for the operator to monitor as a response in the situation, reduce the burden on the operator, and achieve unmanned operation by AI.

実施例1の内容は、オペレータ対話からスーパーバイザ対話へ切り替える場合の顧客の苦情検知機能を備えたコールセンタシステムへも対応できる。実施例2においては図1のオペレータ作業端末14にはスーパーバイザ作業端末も含まれるものとする。また、当初の対話はAI対話処理部114によるAI対話ではなく、オペレータ作業端末14によるオペレータ対話であるとする。
以下に実施例1との相違点のみ述べる。
<対話切替部119について>
対話切替部119はAI対話処理部114の対応を基に、またはオペレータの対応を基に、オペレータ対話からスーパーバイザ対話への切り替えを行う機能を有する。
<図3の説明におけるS110、S113乃至S117について>
S110:このステップは、顧客へ対話切替を問う処理、すなわち、顧客端末15から顧客の切替希望情報を取得する処理である。具体例としては、AI対話処理部114またはオペレータが顧客に「スーパーバイザ対話に切り替えますか」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答をAI対話処理部114またはオペレータが判定し、取得する。切替希望情報を取得した場合はAI対話処理部がフラグchangeを1としてS111に進む。AI対話処理部114がアナウンスする方法としては音声合成による方法であっても録音済みの定型文(合成音声又は人間の音声)を流す方法であっても良い(以下同様)。フラグchangeが0の場合はS112に進む。AI対話処理部114が顧客の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することにより取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。
The contents of the first embodiment can be applied to a call center system having a customer complaint detection function when switching from an operator dialogue to a supervisor dialogue. In the second embodiment, the operator work terminal 14 in FIG. 1 includes a supervisor work terminal. The initial dialogue is not an AI dialogue by the AI dialogue processing unit 114 but an operator dialogue by the operator work terminal 14.
Only differences from the first embodiment will be described below.
<About the dialog switching unit 119>
The dialogue switching unit 119 has a function of switching from the operator dialogue to the supervisor dialogue based on the correspondence of the AI dialogue processing unit 114 or based on the correspondence of the operator.
<About S110 and S113 to S117 in the description of FIG. 3>
S110: This step is a process for inquiring the customer about dialog switching, that is, a process for obtaining customer switching request information from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 or the operator makes an announcement to the customer, “Do you want to switch to supervisor dialogue?” (This is only an example of this announcement), and the AI dialogue processing unit 114 or the operator sends the response. Determine and get. When the switching request information is acquired, the AI dialogue processing unit sets the flag change to 1 and proceeds to S111. The method of announcement by the AI dialogue processing unit 114 may be a method using speech synthesis or a method of playing a recorded fixed sentence (synthetic speech or human speech) (the same applies hereinafter). If the flag change is 0, the process proceeds to S112. As a method for the AI dialog processing unit 114 to acquire the customer switching request information, even if the AI dialog processing unit 114 acquires the customer's response by voice recognition, the announcement of the AI dialog processing unit 114 is the customer. Alternatively, the push button may be pressed and the bush button signal may be received and acquired by the AI dialogue processing unit 114.

S113:フラグchangeが1のときは、対話切替部119がオペレータ作業端末14によるオペレータ対話からスーパーバイザ作業端末によるスーパーバイザ対話への切り替えを行う。対話切替部119はデータ蓄積部113の蓄積データ(オペレータ対話中のテキストデータなど)をスーパーバイザ作業端末14へと転送し、顧客の苦情検知処理を終了する。   S113: When the flag change is 1, the dialogue switching unit 119 switches from the operator dialogue by the operator work terminal 14 to the supervisor dialogue by the supervisor work terminal. The dialogue switching unit 119 transfers the accumulated data (such as text data during the operator dialogue) from the data accumulation unit 113 to the supervisor work terminal 14 and ends the customer complaint detection process.

S114乃至S117:実施例2においてはこれらの処理は行わず、S109にてdanger=0、S111にてchange=0であればどちらもS101へ進むものとする。   S114 to S117: In the second embodiment, these processes are not performed. If danger = 0 in S109 and change = 0 in S111, both proceed to S101.

このような実施例2により、当初の対話がオペレータ対話であっても、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況において、スーパーバイザ対話に切り替える判断基準を提供し、オペレータ対話中の苦情化を予防することができる。また、前記状況における対応としてスーパーバイザが監視する必要性を無くし、スーパーバイザの負担を低減できる。     According to the second embodiment, even when the initial dialogue is an operator dialogue, in a situation where it is not possible to conclude from the contents of the call that the customer clearly represents a complaint, a criterion for switching to the supervisor dialogue is provided. Complaints during operator interaction can be prevented. Further, it is possible to eliminate the necessity of monitoring by the supervisor as a countermeasure in the above situation, and to reduce the burden on the supervisor.

1 コールセンタシステム
11 コールセンタサーバ
12 音声認識システム
13 感情分析システム
14 オペレータ作業端末
15 顧客端末
111 制御部
112 メモリ部
113 データ蓄積部
114 AI対話処理部
115 音声認識入出力処理部
116 感情分析入出力処理部
117 苦情検知処理部
118 言葉間隔処理部
119 対話切替部
DESCRIPTION OF SYMBOLS 1 Call center system 11 Call center server 12 Voice recognition system 13 Emotion analysis system 14 Operator work terminal 15 Customer terminal 111 Control part 112 Memory part 113 Data storage part 114 AI dialog processing part 115 Voice recognition input / output processing part 116 Emotion analysis input / output processing part 117 Complaint detection processing unit 118 Word interval processing unit 119 Dialog switching unit

Claims (6)

オペレータ作業端末とスーパーバイザ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムであって、
前記コールセンタサーバは、
顧客との音声対話をAIによって行うAI対話処理部と、
顧客の通話音声を元に通話内容を解析する通話内容解析部と、
前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、
前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、または、前記オペレータ対話から前記スーパーバイザ作業端末のスーパーバイザが顧客との音声対話を行うスーパーバイザ対話への切り替え、を行う対話切替部と、
前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、
を有することを特徴とするコールセンタシステム。
A call center system comprising an operator work terminal, a supervisor work terminal, and a call center server, and providing a call center service to a customer terminal,
The call center server
An AI dialogue processing unit for performing voice dialogue with customers by AI;
A call content analysis unit that analyzes the call content based on the customer's call voice,
A complaint detection processing unit that detects a complaint state or a preliminary complaint state based on the analysis result of the call content analysis unit,
Switching from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer, or a supervisor in which a supervisor of the supervisor work terminal performs a voice dialogue with a customer from the operator dialogue A dialogue switching unit for switching to dialogue,
The AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit are controlled. Further, for the dialogue switching unit, if the detection result of the complaint detection processing unit is a complaint state, the switching is performed. A control unit that controls the switching only when the customer's switching request information is acquired from the customer terminal if the detection result of the complaint detection processing unit is a complaint reserve army state,
A call center system comprising:
請求項1に記載のコールセンタシステムにおいて、
前記対話切替部が、前記AI対話から前記オペレータ対話への切り替えを行う対話切替部の場合であって、
前記制御部は、前記苦情検知処理の検出結果が苦情予備軍状態であって切替希望情報を得られない場合において、さらに前記顧客端末から顧客の前記AI対話の継続希望情報を取得した場合のみAI対話処理部にAI対話を継続させる制御を行うことを特徴とするコールセンタシステム。
In the call center system according to claim 1,
The dialogue switching unit is a dialogue switching unit that switches from the AI dialogue to the operator dialogue,
In the case where the detection result of the complaint detection process is in the complaint reserve army state and the switching request information cannot be obtained, the control unit further acquires the customer's AI conversation continuation request information from the customer terminal. A call center system for controlling a conversation processing unit to continue an AI conversation.
請求項1または請求項2に記載のコールセンタシステムにおいて、
前記対話切替部が、前記AI対話から前記オペレータ対話への切り替えを行う対話切替部の場合であって、
前記切替希望情報もしくは前記継続希望情報は、AI対話処理部により前記顧客端末上の顧客に、前記切替希望情報においては前記切り替え、前記継続希望情報においては前記AI対話の継続、を希望するかをアナウンスし、前記アナウンスに対する顧客の応答音声を前記AI対話処理部が音声認識する、もしくは、前記アナウンスに対する顧客の顧客端末操作によるプッシュボタン信号を前記AI対話処理部が受信することで、前記制御部が取得することを特徴とするコールセンタシステム。
In the call center system according to claim 1 or 2,
The dialogue switching unit is a dialogue switching unit that switches from the AI dialogue to the operator dialogue,
Whether the switching request information or the continuation request information is requested by the AI dialog processing unit to the customer on the customer terminal to switch the information in the switching request information or to continue the AI dialog in the continuation request information. The AI dialogue processing unit recognizes the voice of the customer's response to the announcement and the AI dialogue processing unit receives the push button signal generated by the customer's customer terminal operation for the announcement. Call center system, characterized by
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムの前記コールセンタサーバの機能を有するコールセンタ装置であって、
顧客との音声対話をAIによって行うAI対話処理部と、
顧客の通話音声を元に通話内容を解析する通話内容解析部と、
前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、
前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、を行う対話切替部と、
前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、
を有することを特徴とするコールセンタ装置。
A call center device having a function of the call center server of a call center system comprising an operator work terminal and a call center server and providing a call center service to a customer terminal,
An AI dialogue processing unit for performing voice dialogue with customers by AI;
A call content analysis unit that analyzes the call content based on the customer's call voice,
A complaint detection processing unit that detects a complaint state or a preliminary complaint state based on the analysis result of the call content analysis unit,
A dialogue switching unit for switching from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer;
The AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit are controlled. Further, for the dialogue switching unit, if the detection result of the complaint detection processing unit is a complaint state, the switching is performed. A control unit that controls the switching only when the customer's switching request information is acquired from the customer terminal if the detection result of the complaint detection processing unit is a complaint reserve army state,
A call center device characterized by comprising:
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムにおけるコールセンタサーバによって実行される対話方法であって、
顧客との音声対話をAIによって行うAI対話処理ステップと、
顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、
前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、
前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、
前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、
を有することを特徴とする対話方法。
An interaction method executed by a call center server in a call center system that includes an operator work terminal and a call center server and provides a call center service to a customer terminal,
AI dialogue processing step for performing voice dialogue with the customer by AI;
Call content analysis step for analyzing call content based on customer call voice,
Complaint detection processing step for detecting a complaint state or a complaint reserve army state based on the analysis result of the call content analysis step;
If the detection result of the complaint detection processing step is a complaint state, switching from the AI dialogue by the AI dialogue processing step to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer;
If the detection result of the complaint detection processing step is a complaint reserve army state, the step of switching from the AI dialogue to the operator dialogue only when obtaining customer switching request information from the customer terminal;
A dialogue method characterized by comprising:
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムにおける前記コールセンタサーバによって実行される対話方法のためのプログラムであって、
前記コールセンタサーバのコンピュータに、
顧客との音声対話をAIによって行うAI対話処理ステップと、
顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、
前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、
前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、
前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、
を実行させることを特徴とするプログラム。
A program for an interaction method executed by the call center server in a call center system comprising an operator work terminal and a call center server and providing a call center service to a customer terminal,
In the computer of the call center server,
AI dialogue processing step for performing voice dialogue with the customer by AI;
Call content analysis step for analyzing call content based on customer call voice,
Complaint detection processing step for detecting a complaint state or a complaint reserve army state based on the analysis result of the call content analysis step;
If the detection result of the complaint detection processing step is a complaint state, switching from the AI dialogue by the AI dialogue processing step to an operator dialogue in which an operator of the operator work terminal performs a voice dialogue with a customer;
If the detection result of the complaint detection processing step is a complaint reserve army state, the step of switching from the AI dialogue to the operator dialogue only when obtaining customer switching request information from the customer terminal;
A program characterized by having executed.
JP2017164827A 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function Active JP6863179B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017164827A JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017164827A JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Publications (2)

Publication Number Publication Date
JP2019047170A true JP2019047170A (en) 2019-03-22
JP6863179B2 JP6863179B2 (en) 2021-04-21

Family

ID=65814885

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017164827A Active JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Country Status (1)

Country Link
JP (1) JP6863179B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021012303A (en) * 2019-07-08 2021-02-04 株式会社Tmj Information processing device, information processing method, and information processing program
JP2021166102A (en) * 2019-09-27 2021-10-14 Tradfit株式会社 Information providing method, information providing system, information providing device and computer program
WO2022180854A1 (en) * 2021-02-26 2022-09-01 株式会社I’mbesideyou Video session evaluation terminal, video session evaluation system, and video session evaluation program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6665644B1 (en) * 1999-08-10 2003-12-16 International Business Machines Corporation Conversational data mining
JP2009159558A (en) * 2007-12-28 2009-07-16 Fujitsu Fsas Inc Operator reception monitoring and switching system
US20160036980A1 (en) * 2014-07-29 2016-02-04 Genesys Telecommunications Laboratories, Inc. System and Method for Addressing Hard-To-Understand for Contact Center Service Quality
JP2016103270A (en) * 2014-11-12 2016-06-02 株式会社アドバンスト・メディア Information processing system, receiving server, information processing method, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6665644B1 (en) * 1999-08-10 2003-12-16 International Business Machines Corporation Conversational data mining
JP2009159558A (en) * 2007-12-28 2009-07-16 Fujitsu Fsas Inc Operator reception monitoring and switching system
US20160036980A1 (en) * 2014-07-29 2016-02-04 Genesys Telecommunications Laboratories, Inc. System and Method for Addressing Hard-To-Understand for Contact Center Service Quality
JP2016103270A (en) * 2014-11-12 2016-06-02 株式会社アドバンスト・メディア Information processing system, receiving server, information processing method, and program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021012303A (en) * 2019-07-08 2021-02-04 株式会社Tmj Information processing device, information processing method, and information processing program
JP2021166102A (en) * 2019-09-27 2021-10-14 Tradfit株式会社 Information providing method, information providing system, information providing device and computer program
JP7066235B2 (en) 2019-09-27 2022-05-13 Tradfit株式会社 Information provision method, information provision system, information provision device and computer program
JP2023073412A (en) * 2019-09-27 2023-05-25 Tradfit株式会社 Information provision method, information provision system, information provision device, and computer program
WO2022180854A1 (en) * 2021-02-26 2022-09-01 株式会社I’mbesideyou Video session evaluation terminal, video session evaluation system, and video session evaluation program

Also Published As

Publication number Publication date
JP6863179B2 (en) 2021-04-21

Similar Documents

Publication Publication Date Title
CN110661927B (en) Voice interaction method and device, computer equipment and storage medium
US8654937B2 (en) System and method for call center agent quality assurance using biometric detection technologies
US10229676B2 (en) Phrase spotting systems and methods
US20150213800A1 (en) Methods for adaptive voice interaction
US8666040B2 (en) Analyzing Speech Application Performance
US11363140B2 (en) Systems and methods for operating an interactive voice response system
JP2019047170A (en) Call center system, call center device, interaction method, and program therefor, comprising customer complaint detection function
CA2665055C (en) Treatment processing of a plurality of streaming voice signals for determination of responsive action thereto
US12015736B2 (en) Methods and apparatus for bypassing holds
US8861708B2 (en) System and method for monitoring a voice in real time
US20120101873A1 (en) Method and apparatus for dynamic communication-based agent skill assessment
CN111627432A (en) Active call-out intelligent voice robot multi-language interaction method and device
WO2014140970A2 (en) Voice print tagging of interactive voice response sessions
CA2665009C (en) System for handling a plurality of streaming voice signals for determination of responsive action thereto
CN110602334A (en) Intelligent outbound method and system based on man-machine cooperation
JP5424332B2 (en) Telephone response result prediction apparatus, method, and program thereof
CN114067842B (en) Customer satisfaction degree identification method and device, storage medium and electronic equipment
JP2007336237A (en) Speech-recording control system for call center and its method
US11064072B1 (en) Caller state determination
WO2014069443A1 (en) Complaint call determination device and complaint call determination method
JP7334467B2 (en) Response support device and response support method
US20220223148A1 (en) Method, computer program, device for virtually assisting a user with a digital assistant
JP7140422B1 (en) Call analysis method
CN113763921B (en) Method and device for correcting text
JP7162783B2 (en) Information processing device, estimation method, and estimation program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200513

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210226

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210315

R150 Certificate of patent or registration of utility model

Ref document number: 6863179

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150