JP6863179B2 - Call center system, call center device, dialogue method, and its program with customer complaint detection function - Google Patents

Call center system, call center device, dialogue method, and its program with customer complaint detection function Download PDF

Info

Publication number
JP6863179B2
JP6863179B2 JP2017164827A JP2017164827A JP6863179B2 JP 6863179 B2 JP6863179 B2 JP 6863179B2 JP 2017164827 A JP2017164827 A JP 2017164827A JP 2017164827 A JP2017164827 A JP 2017164827A JP 6863179 B2 JP6863179 B2 JP 6863179B2
Authority
JP
Japan
Prior art keywords
dialogue
complaint
customer
call center
operator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017164827A
Other languages
Japanese (ja)
Other versions
JP2019047170A (en
Inventor
崇史 梶原
崇史 梶原
祐治 小田
祐治 小田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2017164827A priority Critical patent/JP6863179B2/en
Publication of JP2019047170A publication Critical patent/JP2019047170A/en
Application granted granted Critical
Publication of JP6863179B2 publication Critical patent/JP6863179B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)

Description

本発明は、金融機関などのインバウンドコールセンタシステムにおいて、顧客とバーチャルオペレータまたはオペレータとの会話内容を解析することで、顧客通話中に顧客が苦情状態であることを検知し状況悪化を予防する機能を備えたコールセンタシステムに関する。 The present invention provides a function in an inbound call center system such as a financial institution to detect a customer's complaint during a customer call and prevent the situation from deteriorating by analyzing the conversation content between the customer and the virtual operator or the operator. Regarding the equipped call center system.

従来のコールセンタシステムにおける苦情対応としては、顧客の感情度合いやオペレータが対応に困惑している状況を自動判断して、オペレータからの要求により又は上級オペレータであるスーパーバイザが監視することにより、スーパーバイザが適切処理を行ったりスーパーバイザへの通話切り替えを行うことで、通話中の苦情状態の状況悪化の予防に繋げている(例えば、特許文献1、特許文献2、特許文献3、特許文献4参照)。 As for the handling of complaints in the conventional call center system, the supervisor is appropriate by automatically determining the degree of emotion of the customer and the situation where the operator is confused about the response, and by requesting from the operator or monitoring by the supervisor who is a senior operator. By performing processing or switching the call to the supervisor, it is possible to prevent the worsening of the complaint state during the call (see, for example, Patent Document 1, Patent Document 2, Patent Document 3, and Patent Document 4).

特開2004−37989号公報Japanese Unexamined Patent Publication No. 2004-37989 特開2007−4000号公報JP-A-2007-4000 特開2011−9902号公報Japanese Unexamined Patent Publication No. 2011-9902 特開2016−119634公報JP-A-2016-119634

しかしながら、従来の技術においては、コールセンタシステム側としてAI(Artifical Intelligence)によるバーチャルオペレータ(以降、AIと略称する)が顧客と対話(AI対話)している場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においては、上級のオペレータ対話に切り替えるための判断基準が無いため、AIからの要求で対話切替ができず、AI対話中の苦情化を予防することができないという問題点があった。また、前記状況における対応として上級オペレータが監視することで対話切替の判断が可能であるが、上級オペレータの負担増加に繋がりかつAIによる無人化の意義を失うことにもなっていた。
また、当初の対話がオペレータ対話であっても、上記状況においては、上級のオペレータ対話(スーパーバイザ対話)に切り替える判断が難しいため、オペレータからの要求で対話切替ができず、オペレータ対話中の苦情化を予防することができないという問題点があった。また、前記状況における対応としてスーパーバイザが監視することで対話切替の判断が可能であるが、スーパーバイザの負担増加に繋がっていた。
However, in the conventional technique, when a virtual operator (hereinafter abbreviated as AI) by AI (Artificial Intelligence) as the call center system side is interacting with the customer (AI dialogue), the customer is clearly from the conversation content. In situations where it cannot be determined that a complaint is being expressed, there is no criterion for switching to advanced operator dialogue, so dialogue cannot be switched at the request of AI, and it is possible to prevent complaints during AI dialogue. There was a problem that it could not be done. Further, as a response to the above situation, it is possible to determine the dialogue switching by monitoring by the senior operator, but it leads to an increase in the burden on the senior operator and loses the significance of unmanned operation by AI.
In addition, even if the initial dialogue is an operator dialogue, in the above situation, it is difficult to determine to switch to an advanced operator dialogue (supervisor dialogue), so the dialogue cannot be switched at the request of the operator, and complaints are made during the operator dialogue. There was a problem that it could not be prevented. Further, as a response in the above situation, it is possible to determine the dialogue switching by monitoring by the supervisor, but this has led to an increase in the burden on the supervisor.

本発明は、このような問題を解決することを課題とし、AI対話やオペレータ対話中の苦情化を予防することを目的とする。 An object of the present invention is to solve such a problem, and an object of the present invention is to prevent complaints during AI dialogue and operator dialogue.

本発明のコールセンタシステムは、オペレータ作業端末とスーパーバイザ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムであって、前記コールセンタサーバに、顧客との音声対話をAIによって行うAI対話処理部と、顧客の通話音声を元に通話内容を解析する通話内容解析部と、前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、または、前記オペレータ対話から前記スーパーバイザ作業端末のスーパーバイザが顧客との音声対話を行うスーパーバイザ対話への切り替え、を行う対話切替部と、前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、を有することを特徴とする。 The call center system of the present invention is a call center system including an operator work terminal, a supervisor work terminal, and a call center server to provide a call center service to a customer terminal, and an AI dialogue in which a voice dialogue with a customer is performed on the call center server by AI. A processing unit, a call content analysis unit that analyzes the call content based on the customer's call voice, a complaint detection processing unit that detects a complaint state or a complaint reserve army state based on the analysis result of the call content analysis unit, and the AI Switching from the AI dialogue by the dialogue processing unit to the operator dialogue in which the operator of the operator work terminal has a voice dialogue with the customer, or from the operator dialogue to the supervisor dialogue in which the supervisor of the supervisor work terminal has a voice dialogue with the customer. Controls the dialogue switching unit that performs switching, the AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit, and further, for the dialogue switching unit, the complaint detection processing unit If the detection result is in the complaint state, the switching is controlled, and if the detection result of the complaint detection processing unit is in the complaint reserve state, the switching is controlled only when the customer's switching request information is acquired from the customer terminal. It is characterized by having a control unit and a control unit.

本発明のコールセンタ装置は、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムの前記コールセンタサーバの機能を有するコールセンタ装置であって、顧客との音声対話をAIによって行うAI対話処理部と、顧客の通話音声を元に通話内容を解析する通話内容解析部と、前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、を行う対話切替部と、前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、を有することを特徴とする。 The call center device of the present invention is a call center device having an operator work terminal and a call center server and having a function of the call center server of a call center system that provides a call center service to a customer terminal, and is an AI that performs voice dialogue with a customer by AI. The dialogue processing unit, the call content analysis unit that analyzes the call content based on the customer's call voice, the complaint detection processing unit that detects the complaint state or the complaint reserve army state based on the analysis result of the call content analysis unit, and the above. A dialogue switching unit that switches from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which the operator of the operator work terminal performs a voice dialogue with a customer, the AI dialogue processing unit, the call content analysis unit, and the above. The complaint detection processing unit is controlled, and if the detection result of the complaint detection processing unit is in a complaint state, the switching is controlled for the dialogue switching unit, and the detection result of the complaint detection processing unit is a complaint. In the reserve army state, it is characterized by having a control unit that controls the switching only when the customer's switching desired information is acquired from the customer terminal.

本発明の対話方法は、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムにおけるコールセンタサーバによって実行される対話方法であって、顧客との音声対話をAIによって行うAI対話処理ステップと、顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、を有することを特徴とする。 The dialogue method of the present invention is a dialogue method executed by a call center server in a call center system having an operator work terminal and a call center server and providing a call center service to a customer terminal, and is an AI dialogue in which a voice dialogue with a customer is performed by AI. A processing step, a call content analysis step that analyzes the call content based on the customer's call voice, a complaint detection processing step that detects a complaint state or a complaint reserve army state based on the analysis result of the call content analysis step, and the complaint If the detection result of the detection processing step is a complaint state, the step of switching from the AI dialogue by the AI dialogue processing step to the operator dialogue in which the operator of the operator work terminal performs a voice dialogue with the customer, and the detection of the complaint detection processing step. If the result is a complaint reserve state, it is characterized by having a step of switching from the AI dialogue to the operator dialogue only when the customer switching desired information is acquired from the customer terminal.

本発明のプログラムは、オペレータ作業端末とコールセンタサーバとを備え顧客端末にコールセンタサービスを提供するコールセンタシステムにおける前記コールセンタサーバによって実行される対話方法のためのプログラムであって、前記コールセンタサーバのコンピュータに、顧客との音声対話をAIによって行うAI対話処理ステップと、顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、を実行させることを特徴とする。 The program of the present invention is a program for an interaction method executed by the call center server in a call center system having an operator work terminal and a call center server and providing a call center service to a customer terminal, and is a program for a computer of the call center server. AI dialogue processing step in which voice dialogue with the customer is performed by AI, call content analysis step in which the call content is analyzed based on the customer's call voice, and complaint state or complaint reserve army state based on the analysis result of the call content analysis step. If the complaint detection processing step for detecting the above and the detection result of the complaint detection processing step are in a complaint state, the AI dialogue by the AI dialogue processing step is changed to the operator dialogue in which the operator of the operator work terminal has a voice dialogue with the customer. If the detection result of the complaint detection processing step is the complaint reserve army state, the step of switching and the step of switching from the AI dialogue to the operator dialogue are executed only when the customer switching desired information is acquired from the customer terminal. It is characterized by that.

このようにした本発明は、AI対話の場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においても、オペレータ対話に切り替えるための判断基準を提供し、AI対話中の苦情化を予防することができる。また、前記状況における対応としてオペレータが監視する必要性を無くし、オペレータの負担を低減し、AIによる無人化を達成できる。
さらに、当初の対話がオペレータ対話であっても、上記状況において、スーパーバイザ対話に切り替える判断基準を提供し、オペレータ対話中の苦情化を予防することができる。また、前記状況における対応としてスーパーバイザが監視する必要性を無くし、スーパーバイザの負担を低減できる。
In the case of AI dialogue in this way, the present invention provides a criterion for switching to operator dialogue even in a situation where it cannot be clearly determined from the contents of the call that the customer is complaining, and AI dialogue is provided. It is possible to prevent complaints inside. In addition, it is possible to eliminate the need for the operator to monitor as a response to the above situation, reduce the burden on the operator, and achieve unmanned operation by AI.
Further, even if the initial dialogue is an operator dialogue, it is possible to provide a criterion for switching to the supervisor dialogue in the above situation and prevent complaints during the operator dialogue. Further, it is possible to eliminate the need for the supervisor to monitor as a response in the above situation and reduce the burden on the supervisor.

第1の実施例におけるコールセンタシステムの全体構成を示すブロック図。The block diagram which shows the whole structure of the call center system in 1st Example. 第1の実施例におけるコールセンタサーバの機能的構成を示すブロック図。The block diagram which shows the functional configuration of the call center server in 1st Example. 第1の実施例における苦情検知処理のアルゴリズムを示すフローチャート。The flowchart which shows the algorithm of the complaint detection processing in 1st Example. 第1の実施例における言葉間隔計算のアルゴリズムを示すフローチャート。The flowchart which shows the algorithm of the word interval calculation in 1st Example. 第1の実施例における音声認識処理の結果とそれに対するフラグの値を示す説明図。The explanatory view which shows the result of the voice recognition processing in 1st Example, and the value of the flag with respect to it. 第1の実施例における感情分析処理の結果とそれに対するフラグの値を示す説明図。The explanatory view which shows the result of the sentiment analysis process in 1st Example, and the value of the flag for it. 第1の実施例における言葉間隔計算の結果とそれに対するフラグの値を示す説明図。The explanatory view which shows the result of the word interval calculation in 1st Example, and the value of the flag with respect to it. 第1の実施例における顧客へ対話切替を問う処理の顧客の応答とそれに対するフラグの値を示す説明図。The explanatory view which shows the customer's response of the process which asks a customer to switch a dialogue in 1st Embodiment, and the value of a flag to it.

以下、図面を参照して本発明による顧客の苦情検知機能を備えたコールセンタシステムの実施例を説明する。本実施例にはコールセンタサーバの機能を有するコールセンタ装置、切替方法、そのプログラムをも含む。
本発明において、通話とは顧客がインターネットや電話回線を通じてコールセンタに対して行う電話での話、対話とはコールセンタ側が行う対応であって通話に対する応答や顧客に対するアナウンスなどのことと定義する。AI対話とはAIが行う対話、オペレータ対話とはオペレータが行う対話、スーパーバイザ対話とはスーパーバイザが行う対話と定義する。さらに、発話とはコールセンタの対話−対話間における一連の顧客の通話のことと定義する。
テキストデータ、発話検出時間、NGワード、NGワード数とは共に、従来技術である音声認識技術により発話を音声認識した認識結果としての音声認識データであって、テキストデータとは発話をテキスト化したデータと定義する。発話検出時間とは発話の時間的長さのことと定義する。NGワードとは顧客が後述する苦情状態であることを表す発話内における所定のワードのことと定義する。NGワード数とは発話内のNGワードの数のことと定義する。
怒り感情の有無情報とは、感情分析技術により発話を感情分析した分析結果としての感情分析データであって、発話内に怒りの感情があったか否かを示す情報のことと定義する。
さらに、苦情状態とは、通話内容が明らかに顧客が苦情を表している状態と定義する。苦情予備軍状態とは、通話内容からは明らかに顧客が苦情を表している状態とは断定できないが、苦情を表している可能性がある状態と定義する。苦情状態でも苦情予備軍状態でもない状態を苦情無し状態と定義する。苦情検知とは、苦情状態もしくは苦情予備軍状態を検知することと定義する。
Hereinafter, an embodiment of the call center system provided with the customer complaint detection function according to the present invention will be described with reference to the drawings. This embodiment also includes a call center device having a function of a call center server, a switching method, and a program thereof.
In the present invention, a call is defined as a telephone conversation made by a customer to a call center via the Internet or a telephone line, and a dialogue is defined as a response made by the call center side such as a response to a call or an announcement to a customer. The AI dialogue is defined as the dialogue conducted by AI, the operator dialogue is defined as the dialogue conducted by the operator, and the supervisor dialogue is defined as the dialogue conducted by the supervisor. Further, utterance is defined as a series of customer calls between call center dialogues.
The text data, the utterance detection time, the NG word, and the number of NG words are all voice recognition data as a recognition result of voice recognition of the utterance by the conventional voice recognition technology, and the text data is the text of the utterance. Defined as data. The utterance detection time is defined as the time length of the utterance. The NG word is defined as a predetermined word in the utterance indicating that the customer is in a complaint state described later. The number of NG words is defined as the number of NG words in an utterance.
The presence / absence information of angry feelings is defined as sentiment analysis data as an analysis result of sentiment analysis of a utterance by a sentiment analysis technique, and is information indicating whether or not there is an angry feeling in the utterance.
Further, the complaint state is defined as a state in which the content of the call clearly represents the customer's complaint. The complaint reserve state is defined as a state in which the customer cannot clearly conclude from the contents of the call that the customer is complaining, but may be complaining. A state that is neither a complaint state nor a complaint reserve state is defined as a no-complaint state. Complaint detection is defined as detecting a complaint state or a complaint reserve state.

図1は第1の実施例におけるコールセンタシステムの全体構成を示すブロック図である。 FIG. 1 is a block diagram showing an overall configuration of a call center system according to the first embodiment.

図1において、コールセンタシステム1は、顧客とオペレータ(AIを含む)間のやり取りを制御するコールセンタサーバ(コールセンタ装置)11、音声を入力しテキストデータと発話検出時間と所定のキーワード(本発明においてはキーワード自体ではなく所定のNGワードに対するNGワード数)を出力する公知技術(例えば特許文献4)により構成された音声認識システム12、音声を入力しその音声の感情を識別する(本発明おいては発話毎の怒り感情の有無情報のみ出力するものとする)公知技術(例えば特許文献3)により構成された感情分析システム13、後述するデータ蓄積部の内容を表示するモニタを有するオペレータ作業端末14(スーパーバイザ作業端末を含む)、インターネットまたは電話回線を介して接続された顧客端末15から構成される。 In FIG. 1, the call center system 1 is a call center server (call center device) 11 that controls communication between a customer and an operator (including AI), text data by inputting voice, a speech detection time, and a predetermined keyword (in the present invention). A voice recognition system 12 configured by a known technique (for example, Patent Document 4) that outputs (the number of NG words for a predetermined NG word) instead of the keyword itself, inputs voice and identifies the emotion of the voice (in the present invention). An operator work terminal 14 having a monitor for displaying the contents of a data storage unit, which will be described later, and an emotion analysis system 13 composed of known technology (for example, Patent Document 3), which outputs only information on the presence or absence of angry emotions for each speech. It consists of a customer terminal 15 connected via the Internet or a telephone line (including a supervisor work terminal).

図2は第1の実施例におけるコールセンタサーバの機能的構成を示すブロック図である。 FIG. 2 is a block diagram showing a functional configuration of the call center server in the first embodiment.

図2において、制御部111はプログラムを実行することによりコールセンタサーバ11の各機能ブロックを制御し、プログラムを実行することにより後述するメモリ部112のデータの加工や演算処理を行う機能を有する。このプログラムは後述するメモリ部112に記憶されて提供されるものであっても良く、また、制御部111に内蔵されたメモリに記憶されて提供されるものであっても良い。
メモリ部112はコールセンタサーバ11の各処理部から得られたデータの一時的格納や、制御部111が行うデータの加工や演算処理などに利用するための機能を有する。
データ蓄積部113は発話毎の、音声認識データ(テキストデータ、発話検出時間、NGワード数)と感情分析データ(怒り感情の有無情報)と後述の図4において説明する言葉間隔とテキスト文字数および後述する各フラグの値を蓄積する機能を有する。
AI対話処理部114は顧客の発話を受けてAIから応答を行う機能を有する。AI対話処理部にはAIの顧客へのアナウンスに対する顧客の返答を判定する機能を含む。
音声認識入出力処理部115は、顧客の発話音声を音声認識システム12に渡し、音声認識システム12から音声認識データを受け取る機能を有する。
感情分析入出力処理部116は、顧客の発話音声を感情分析システム13に渡し、感情分析システム13から感情分析データである怒り感情の有無情報を受け取る機能を有する。
苦情検知処理部117は音声認識入出力処理部115、感情分析入出力処理部116、後述する言葉間隔処理部118から受け取った情報を元に、苦情状態もしくは苦情予備軍状態を検知する機能を有する。これら音声認識入出力処理部115と感情分析入出力処理部116と言葉間隔処理部118の機能を有するものが通話内容解析部である。
言葉間隔処理部118は音声認識入出力処理部115から受け取った情報を元に顧客の発する言葉間隔を計算し、得た値を苦情検知処理部117に渡す機能を有する。
対話切替部119はAI対話処理部114の対応を基にAI対話からオペレータ対話への切り替えを行う機能を有する。
In FIG. 2, the control unit 111 has a function of controlling each functional block of the call center server 11 by executing a program, and processing data and arithmetic processing of the memory unit 112, which will be described later, by executing the program. This program may be stored and provided in the memory unit 112 described later, or may be stored and provided in the memory built in the control unit 111.
The memory unit 112 has a function for temporarily storing data obtained from each processing unit of the call center server 11 and for using it for data processing and arithmetic processing performed by the control unit 111.
The data storage unit 113 includes voice recognition data (text data, utterance detection time, number of NG words), sentiment analysis data (information on the presence or absence of angry feelings), word intervals and the number of text characters described in FIG. 4 described later, and the number of text characters described later for each utterance. It has a function of accumulating the value of each flag.
The AI dialogue processing unit 114 has a function of receiving a customer's utterance and responding from the AI. The AI dialogue processing unit includes a function of determining a customer's response to an announcement to the customer of AI.
The voice recognition input / output processing unit 115 has a function of passing the customer's uttered voice to the voice recognition system 12 and receiving the voice recognition data from the voice recognition system 12.
The sentiment analysis input / output processing unit 116 has a function of passing the customer's voice to the sentiment analysis system 13 and receiving information on the presence or absence of angry emotions, which is sentiment analysis data, from the sentiment analysis system 13.
The complaint detection processing unit 117 has a function of detecting a complaint state or a complaint reserve state based on the information received from the voice recognition input / output processing unit 115, the emotion analysis input / output processing unit 116, and the word interval processing unit 118 described later. .. The call content analysis unit has the functions of the voice recognition input / output processing unit 115, the emotion analysis input / output processing unit 116, and the word interval processing unit 118.
The word interval processing unit 118 has a function of calculating the word interval issued by the customer based on the information received from the voice recognition input / output processing unit 115 and passing the obtained value to the complaint detection processing unit 117.
The dialogue switching unit 119 has a function of switching from the AI dialogue to the operator dialogue based on the correspondence of the AI dialogue processing unit 114.

図3は第1の実施例における顧客の苦情検知処理のアルゴリズムを示すフローチャートである。本フローチャートの図中Sで表すステップに従って図1、図2、図5、図6、図7および図8を参照しながら説明する。
なお、AI対話処理部114、通話内容解析部(音声認識入出力処理部115と感情分析入出力処理部116と言葉間隔処理部118)、および、苦情検知処理部117は全て制御部111が、本フローチャートに従い手順制御するものとし、以下の説明では制御部111の制御動作の説明については省略する。
FIG. 3 is a flowchart showing an algorithm for customer complaint detection processing in the first embodiment. This will be described with reference to FIGS. 1, 2, 5, 6, 6, 7, and 8 according to the steps represented by S in the flow chart.
The AI dialogue processing unit 114, the call content analysis unit (voice recognition input / output processing unit 115, the sentiment analysis input / output processing unit 116, and the word interval processing unit 118), and the complaint detection processing unit 117 are all controlled by the control unit 111. The procedure is controlled according to this flowchart, and the description of the control operation of the control unit 111 will be omitted in the following description.

S100:メモリ部112が持つ顧客の発話回数を示す識別番号iの値を0に設定する。このiの値は顧客が発話するたびに、後述するS101にて1ずつ加算される。 S100: The value of the identification number i indicating the number of utterances of the customer held by the memory unit 112 is set to 0. This value of i is added by 1 in S101, which will be described later, each time the customer speaks.

S101:メモリ部112が持つ5つのフラグである、苦情状態検出フラグcompt、苦情予備軍状態検出フラグdanger、対話切替フラグchange、同一アナウンス継続フラグcont1、および、会話継続フラグcont2を各発話(すなわち識別番号)の発話の開始毎に初期値0に設定する。また、このステップにおいて識別番号iの値をi+1に設定する。 S101: Each utterance (that is, identification) of the complaint state detection flag complete, the complaint reserve army state detection flag changer, the dialogue switching flag change, the same announcement continuation flag cont1, and the conversation continuation flag cont2, which are five flags of the memory unit 112 The initial value is set to 0 each time the utterance of (number) starts. Also, in this step, the value of the identification number i is set to i + 1.

S102:このステップは音声認識処理を行うステップである。すなわち、音声認識システム12へ発話毎に音声データが入力され、音声認識入出力処理部115が発話毎に音声認識システム12から受け取るテキストデータと発話検出時間とNGワード数をメモリ部112に格納する。さらにこれらの格納データを識別番号i毎にデータ蓄積部113に蓄積する。所定のNGワードが予め音声認識システム12に設定されており、入力された音声データを基に音声認識システム12がNGワードを検出し、入力された音声データ毎にNGワード数を音声認識入出力処理部115に渡すものとする。 S102: This step is a step of performing voice recognition processing. That is, voice data is input to the voice recognition system 12 for each utterance, and the voice recognition input / output processing unit 115 stores the text data received from the voice recognition system 12 for each utterance, the utterance detection time, and the number of NG words in the memory unit 112. .. Further, these stored data are stored in the data storage unit 113 for each identification number i. A predetermined NG word is set in the voice recognition system 12 in advance, the voice recognition system 12 detects the NG word based on the input voice data, and the number of NG words is input / output by voice recognition for each input voice data. It shall be passed to the processing unit 115.

S103:苦情検知処理部117が、メモリ部112に格納されたNGワード数を受け取って、NGワード数に応じて苦情状態か否かを判断する。判断基準の一例としてはNGワード数が1以上のときに苦情状態と判断し、0のときは苦情状態ではないと判断する。苦情状態と判断されたときは苦情検知処理部117がフラグcomptを1とし、苦情状態でないと判断されたときはフラグcomptを0とする。そして、そのcomptの値を識別番号i毎にデータ蓄積部113に蓄積する。 S103: The complaint detection processing unit 117 receives the number of NG words stored in the memory unit 112, and determines whether or not it is in a complaint state according to the number of NG words. As an example of the judgment criteria, when the number of NG words is 1 or more, it is judged to be in a complaint state, and when it is 0, it is judged not to be in a complaint state. When it is determined that the state is a complaint, the complaint detection processing unit 117 sets the flag comp to 1, and when it is determined that the state is not a complaint, the flag complete is set to 0. Then, the value of the comp is stored in the data storage unit 113 for each identification number i.

図5は、音声認識処理の結果とそれに対するフラグの値を示す説明図である。すなわち、S102とS103において識別番号i毎のデータ蓄積部113に蓄積されたデータ(発話検出時間はS103においては判断に用いられないためここでは省略する)の例である。図5の例は、所定のNGワードに「馬鹿」のワードが含まれていた場合であって、識別番号4にてテキストデータ「だから聞こえないって言ってんだろ、馬鹿」から「馬鹿」をNGワードとして検出し識別番号4におけるNGワード数が1となり、この時のフラグcomptが1となった例である。 FIG. 5 is an explanatory diagram showing the result of the voice recognition process and the value of the flag for the result. That is, it is an example of the data accumulated in the data storage unit 113 for each identification number i in S102 and S103 (the utterance detection time is not used for the judgment in S103, so is omitted here). The example of FIG. 5 is a case where the word "stupid" is included in the predetermined NG word, and the text data "So you can't hear me, stupid" is changed to "stupid" with the identification number 4. This is an example in which the number of NG words detected as NG words and the identification number 4 is 1, and the flag compact at this time is 1.

S104:フラグcomptが1の場合はフラグchangeを1にして(S112)からS113の処理へ進み、フラグcomptが0の場合はS105へ進む。 S104: When the flag comp is 1, the flag change is set to 1 and the process proceeds from (S112) to S113, and when the flag comp is 0, the process proceeds to S105.

S105:このステップは感情分析処理を行うステップである。すなわち、感情分析システム13へ発話毎に音声データが入力され、感情分析入出力処理部116が発話毎に感情分析システム13から受け取る怒り感情の有無情報をメモリ部112に格納する。さらにこの格納データを識別番号i毎にデータ蓄積部113に蓄積する。
感情分析システム13は、入力された音声データを基にその周波数等から怒り感情の有無を検出し、入力された音声データ毎に怒り感情の有無情報を感情分析入出力処理部116に渡すものとする。
S105: This step is a step of performing sentiment analysis processing. That is, voice data is input to the sentiment analysis system 13 for each utterance, and the presence / absence information of anger feelings received from the sentiment analysis system 13 by the sentiment analysis input / output processing unit 116 for each utterance is stored in the memory unit 112. Further, this stored data is stored in the data storage unit 113 for each identification number i.
The sentiment analysis system 13 detects the presence or absence of anger emotions from the frequency or the like based on the input voice data, and passes the presence or absence information of anger feelings to the sentiment analysis input / output processing unit 116 for each input voice data. To do.

S106:苦情検知処理部117が、S105におけるメモリ部112の怒り感情の有無情報を受け取って、怒り感情情報が有りのとき、苦情状態と判断し、怒り感情情報が無しの時は苦情状態でないと判断する。苦情状態と判断されたときは苦情検知処理部117がフラグcomptを1とし、苦情状態でないと判断されたときはフラグcomptを0とする。そして、そのcomptの値を識別番号i毎にデータ蓄積部113に蓄積する。 S106: The complaint detection processing unit 117 receives the anger emotion presence / absence information of the memory unit 112 in S105, determines that it is in a complaint state when there is anger emotion information, and determines that it is not in a complaint state when there is no anger emotion information. to decide. When it is determined that the state is a complaint, the complaint detection processing unit 117 sets the flag comp to 1, and when it is determined that the state is not a complaint, the flag complete is set to 0. Then, the value of the comp is stored in the data storage unit 113 for each identification number i.

図6は、感情分析処理の結果とそれに対するフラグの値を示す説明図である。すなわち、S105とS106において識別番号i毎のデータ蓄積部113に蓄積されたデータの例である。図6の例は、識別番号4にてテキストデータ「だから聞こえないって言ってんだろ、馬鹿」に怒りの感情が含まれていた場合であって、識別番号4における怒り感情の有無情報が「あり」となり、この時のフラグcomptが1となった例である。 FIG. 6 is an explanatory diagram showing the result of the sentiment analysis process and the value of the flag for the result. That is, it is an example of the data stored in the data storage unit 113 for each identification number i in S105 and S106. The example of FIG. 6 is a case where the text data "So you can't hear me, stupid" contains the feeling of anger in the identification number 4, and the information on the presence or absence of the feeling of anger in the identification number 4 is ". This is an example in which the flag compt at this time is 1.

S107:フラグcomptが1の場合はフラグchangeを1にして(S112)からS113の処理へ進み、フラグcomptが0の場合はS108へ進む。 S107: When the flag comp is 1, the flag change is set to 1 and the process proceeds from (S112) to S113, and when the flag comp is 0, the process proceeds to S108.

S108:このステップは言葉間隔計算を行うステップである。メモリ部112に格納された音声認識データを基に言葉間隔処理部118が言葉間隔計算を行い、その結果(後述する言葉間隔SP(i)とテキスト文字数(i)とdangerの値)をメモリ部112に格納し、識別番号i毎にデータ蓄積部113に蓄積する。本ステップについては後述の図4の説明で詳細に説明する。 S108: This step is a step of calculating the word interval. The word spacing processing unit 118 calculates the word spacing based on the voice recognition data stored in the memory section 112, and stores the results (word spacing SP (i), the number of text characters (i), and the value of changer described later) in the memory section. It is stored in 112 and is stored in the data storage unit 113 for each identification number i. This step will be described in detail with reference to FIG. 4 described later.

図7は、言葉間隔計算の結果とそれに対するフラグの値を示す説明図である。すなわち、S108において(発話検出時間はS102において)識別番号i毎のデータ蓄積部113に蓄積されたデータの例である。図7の例は、識別番号3にてテキストデータ「すみません、さっきから良く聞こえないんですけど」の言葉間隔PH(3)がPH(1)未満の場合であって、この時のフラグdangerが1となった例である。 FIG. 7 is an explanatory diagram showing the result of the word interval calculation and the value of the flag for the result. That is, it is an example of the data stored in the data storage unit 113 for each identification number i in S108 (the utterance detection time is in S102). The example of FIG. 7 is a case where the word interval PH (3) of the text data "I'm sorry, I can't hear well from a while ago" is less than PH (1) with the identification number 3, and the flag changer at this time is This is an example of 1.

S109:S108で設定したフラグdangerが1の場合は苦情予備軍状態と判断して顧客が対話切替を希望するか否かの判断処理(S110)へ進み、フラグdangerが0の場合は苦情無し状態と判断してそのまま対話を継続する処理(S116)へ進む。 S109: If the flag changer set in S108 is 1, it is determined that the customer is in the reserve army state, and the process proceeds to the determination process (S110) as to whether or not the customer wants to switch the dialogue. It is determined that the process proceeds to the process (S116) of continuing the dialogue as it is.

S110:このステップは、顧客へ対話切替を問う処理、すなわち、顧客端末15から顧客の切替希望情報を取得する処理である。具体例としては、AI対話処理部114が顧客に「オペレータ対話に切り替えますか」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答をAI対話処理部114が判定し、取得する。切替希望情報を取得した場合はAI対話処理部がフラグchangeを1としてS111に進む。アナウンスする方法としては音声合成による方法であっても録音済みの定型文(合成音声又は人間の音声)を流す方法であっても良い(以下同様)。切替希望情報が取得されなかった場合は、フラグchangeを0(初期値)としたままS111に進む。顧客の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することによりAI対話処理部114から取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。 S110: This step is a process of asking the customer to switch the dialogue, that is, a process of acquiring the customer's desired switching information from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 announces to the customer "Do you want to switch to the operator dialogue?" (This is just an example of this announcement), and the AI dialogue processing unit 114 determines and acquires the response. To do. When the switching desired information is acquired, the AI dialogue processing unit sets the flag change to 1 and proceeds to S111. The method of making an announcement may be a method of voice synthesis or a method of playing a recorded fixed phrase (synthetic voice or human voice) (the same applies hereinafter). If the switching desired information is not acquired, the process proceeds to S111 with the flag change set to 0 (initial value). As a method of acquiring the customer's desired switching information, even if the AI dialogue processing unit 114 acquires the customer's response from the AI dialogue processing unit 114 by voice-recognizing the customer's response, the announcement of the AI dialogue processing unit 114 is the customer. The AI dialogue processing unit 114 may receive and acquire the bush button signal by prompting the user to press the push button.

図8は顧客へ対話切替を問う処理の顧客の応答とそれに対するフラグの値を示す説明図であって、顧客の返答を音声認識することにより判定した例である。パターン1、2、3が切替希望の場合であって各々changeが1となり、パターン4、5、6が切替希望しない場合であって、各々changeが0となっている。 FIG. 8 is an explanatory diagram showing the customer's response to the process of asking the customer to switch the dialogue and the value of the flag for the response, and is an example of determining the customer's response by voice recognition. Patterns 1, 2 and 3 are cases where switching is desired and the change is 1, and patterns 4, 5 and 6 are cases where switching is not desired and the change is 0, respectively.

S111:フラグchangeが1の場合は対話切替処理(S113)へ進み、フラグchangeが0の場合は次のアナウンスの処理(S114)へ進む。 S111: When the flag change is 1, the process proceeds to the dialogue switching process (S113), and when the flag change is 0, the process proceeds to the next announcement process (S114).

S113:フラグchangeが1のときは、対話切替部119がAI対話処理部114によるAI対話からオペレータ作業端末14によるオペレータ対話への切り替えを行う。対話切替部119はデータ蓄積部113の蓄積データ(AI対話中のテキストデータなど)をオペレータ作業端末14へと転送し、顧客の苦情検知処理を終了する。 S113: When the flag change is 1, the dialogue switching unit 119 switches from the AI dialogue by the AI dialogue processing unit 114 to the operator dialogue by the operator work terminal 14. The dialogue switching unit 119 transfers the accumulated data (text data during AI dialogue, etc.) of the data storage unit 113 to the operator work terminal 14, and ends the customer complaint detection process.

S114:このステップは、顧客へAI対話継続を問う処理である。すなわち、顧客端末15から顧客のAI対話の継続希望情報を取得する処理である。具体例としては、AI対話処理部114が顧客に「今後AI対話を継続しますか?」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答を、AI対話処理部114が判定し、取得する。AI対話の継続希望情報を取得した場合はAI対話処理部114がフラグcont1を1とする。AI対話の継続希望情報が取得されなかった場合は、cont1は0(初期値)のままとなる。顧客のAI対話の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することによりAI対話処理部114から取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。 S114: This step is a process of asking the customer to continue the AI dialogue. That is, it is a process of acquiring the customer's AI dialogue continuation desired information from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 announces to the customer "Do you want to continue the AI dialogue in the future?" (This is just an example of this announcement), and the AI dialogue processing unit 114 responds to the announcement. Judge and get. When the AI dialogue desired information is acquired, the AI dialogue processing unit 114 sets the flag cont1 to 1. If the information requesting the continuation of the AI dialogue is not acquired, cont1 remains 0 (initial value). As a method of acquiring the customer's AI dialogue switching desired information, even if the AI dialogue processing unit 114 acquires from the AI dialogue processing unit 114 by recognizing the customer's response by voice, the AI dialogue processing unit 114 The announcement may prompt the customer to press the push button, and the AI dialogue processing unit 114 may receive and acquire the bush button signal.

S115:フラグcont1が1の場合はS116に進み、フラグcont1が0の場合は、顧客の苦情検知処理を終了する。 S115: If the flag cont1 is 1, the process proceeds to S116, and if the flag cont1 is 0, the customer complaint detection process is terminated.

S116:顧客の通話が継続しているかをAI対話処理部114が判定する。継続していると判定した場合は、AI対話処理部がフラグcont2を1とする。 S116: The AI dialogue processing unit 114 determines whether the customer's call is continuing. If it is determined that the continuation is continued, the AI dialogue processing unit sets the flag cont2 to 1.

S117:フラグcont2が1の場合はS101に進み、フラグcont2が0の場合は、顧客の苦情検知処理を終了する。なお、苦情検知処理を終了した後、顧客との通話が続いていれば、再び上記の苦情検知処理を開始してよい。 S117: If the flag cont2 is 1, the process proceeds to S101, and if the flag cont2 is 0, the customer complaint detection process is terminated. If the call with the customer continues after the complaint detection process is completed, the above-mentioned complaint detection process may be started again.

図4は第1の実施例における言葉間隔計算のアルゴリズムを示すフローチャートである。フローチャートの図中Sで表すステップに従って図1および図2を参照しながら説明する
S201:言葉間隔処理部118が、メモリ部112に格納された識別番号iに対応するテキストデータSP(i)と発話検出時間T(i)を受け取る。
FIG. 4 is a flowchart showing the algorithm for calculating the word interval in the first embodiment. Described with reference to FIGS. 1 and 2 according to the step represented by S in the flowchart. S201: The word spacing processing unit 118 speaks with the text data SP (i) corresponding to the identification number i stored in the memory unit 112. Receive the detection time T (i).

S202:言葉間隔処理部118がSP(i)からSP(i)のテキスト文字数N(i)を算出し、言葉間隔PH(i)=T(i)/N(i)を算出する。 S202: The word spacing processing unit 118 calculates the number of text characters N (i) of SP (i) from SP (i), and calculates the word spacing PH (i) = T (i) / N (i).

S203:言葉間隔処理部118がPH(1)−PH(i)を算出し、0を超える場合をクレーム予備軍、0以下の場合をクレーム予備軍でないと判断する。 S203: The word interval processing unit 118 calculates PH (1) -PH (i), and determines that if it exceeds 0, it is not a claim reserve force, and if it is 0 or less, it is not a claim reserve force.

S204:S203の結果がクレーム予備軍であった場合、フラグdangerを1に設定する。 S204: If the result of S203 is a claim reserve force, the flag changer is set to 1.

S205:S203の結果がクレーム予備軍でない場合、フラグdangerを0に設定する。 S205: If the result of S203 is not the claim reserve force, the flag changer is set to 0.

このような実施例1により、AI対話の場合において、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況においても、オペレータ対話に切り替えるための判断基準を提供し、AI対話中の苦情化を予防することができる。また、前記状況における対応としてオペレータが監視する必要性を無くし、オペレータの負担を低減し、AIによる無人化を達成できる。 According to the first embodiment, in the case of the AI dialogue, even in a situation where it cannot be clearly determined from the contents of the call that the customer is complaining, the judgment criteria for switching to the operator dialogue is provided, and the AI dialogue is provided. It is possible to prevent complaints inside. In addition, it is possible to eliminate the need for the operator to monitor as a response to the above situation, reduce the burden on the operator, and achieve unmanned operation by AI.

実施例1の内容は、オペレータ対話からスーパーバイザ対話へ切り替える場合の顧客の苦情検知機能を備えたコールセンタシステムへも対応できる。実施例2においては図1のオペレータ作業端末14にはスーパーバイザ作業端末も含まれるものとする。また、当初の対話はAI対話処理部114によるAI対話ではなく、オペレータ作業端末14によるオペレータ対話であるとする。
以下に実施例1との相違点のみ述べる。
<対話切替部119について>
対話切替部119はAI対話処理部114の対応を基に、またはオペレータの対応を基に、オペレータ対話からスーパーバイザ対話への切り替えを行う機能を有する。
<図3の説明におけるS110、S113乃至S117について>
S110:このステップは、顧客へ対話切替を問う処理、すなわち、顧客端末15から顧客の切替希望情報を取得する処理である。具体例としては、AI対話処理部114またはオペレータが顧客に「スーパーバイザ対話に切り替えますか」(これは本アナウンスの一例に過ぎない)とアナウンスを行い、その返答をAI対話処理部114またはオペレータが判定し、取得する。切替希望情報を取得した場合はAI対話処理部がフラグchangeを1としてS111に進む。AI対話処理部114がアナウンスする方法としては音声合成による方法であっても録音済みの定型文(合成音声又は人間の音声)を流す方法であっても良い(以下同様)。フラグchangeが0の場合はS112に進む。AI対話処理部114が顧客の切替希望情報を取得する方法としては、AI対話処理部114が顧客の返答を音声認識することにより取得する方法であっても、AI対話処理部114のアナウンスが顧客にプッシュボタン押下を促してそのブッシュボタン信号をAI対話処理部114が受信して取得する方法であっても良い。
The content of the first embodiment can also correspond to a call center system having a customer complaint detection function when switching from an operator dialogue to a supervisor dialogue. In the second embodiment, it is assumed that the operator work terminal 14 of FIG. 1 also includes a supervisor work terminal. Further, it is assumed that the initial dialogue is not the AI dialogue by the AI dialogue processing unit 114, but the operator dialogue by the operator work terminal 14.
Only the differences from Example 1 will be described below.
<About dialogue switching unit 119>
The dialogue switching unit 119 has a function of switching from the operator dialogue to the supervisor dialogue based on the correspondence of the AI dialogue processing unit 114 or the correspondence of the operator.
<About S110, S113 to S117 in the description of FIG. 3>
S110: This step is a process of asking the customer to switch the dialogue, that is, a process of acquiring the customer's desired switching information from the customer terminal 15. As a specific example, the AI dialogue processing unit 114 or the operator announces to the customer "Do you want to switch to the supervisor dialogue?" (This is just an example of this announcement), and the AI dialogue processing unit 114 or the operator responds. Judge and get. When the switching desired information is acquired, the AI dialogue processing unit sets the flag change to 1 and proceeds to S111. The method of the announcement by the AI dialogue processing unit 114 may be a method of voice synthesis or a method of playing a recorded fixed phrase (synthetic voice or human voice) (the same applies hereinafter). If the flag change is 0, the process proceeds to S112. As a method for the AI dialogue processing unit 114 to acquire the customer's desired switching information, even if the AI dialogue processing unit 114 acquires the customer's response by voice recognition, the announcement of the AI dialogue processing unit 114 is the customer. The AI dialogue processing unit 114 may receive and acquire the bush button signal by prompting the user to press the push button.

S113:フラグchangeが1のときは、対話切替部119がオペレータ作業端末14によるオペレータ対話からスーパーバイザ作業端末によるスーパーバイザ対話への切り替えを行う。対話切替部119はデータ蓄積部113の蓄積データ(オペレータ対話中のテキストデータなど)をスーパーバイザ作業端末14へと転送し、顧客の苦情検知処理を終了する。 S113: When the flag change is 1, the dialogue switching unit 119 switches from the operator dialogue by the operator work terminal 14 to the supervisor dialogue by the supervisor work terminal. The dialogue switching unit 119 transfers the accumulated data (text data during the operator dialogue, etc.) of the data storage unit 113 to the supervisor work terminal 14, and ends the customer complaint detection process.

S114乃至S117:実施例2においてはこれらの処理は行わず、S109にてdanger=0、S111にてchange=0であればどちらもS101へ進むものとする。 S114 to S117: In Example 2, these processes are not performed, and if change = 0 in S109 and change = 0 in S111, both proceed to S101.

このような実施例2により、当初の対話がオペレータ対話であっても、通話内容からは明らかに顧客が苦情を表している状態とは断定できない状況において、スーパーバイザ対話に切り替える判断基準を提供し、オペレータ対話中の苦情化を予防することができる。また、前記状況における対応としてスーパーバイザが監視する必要性を無くし、スーパーバイザの負担を低減できる。 According to the second embodiment, even if the initial dialogue is an operator dialogue, a criterion for switching to the supervisor dialogue is provided in a situation where it cannot be clearly determined from the contents of the call that the customer is complaining. It is possible to prevent complaints during operator dialogue. Further, it is possible to eliminate the need for the supervisor to monitor as a response in the above situation and reduce the burden on the supervisor.

1 コールセンタシステム
11 コールセンタサーバ
12 音声認識システム
13 感情分析システム
14 オペレータ作業端末
15 顧客端末
111 制御部
112 メモリ部
113 データ蓄積部
114 AI対話処理部
115 音声認識入出力処理部
116 感情分析入出力処理部
117 苦情検知処理部
118 言葉間隔処理部
119 対話切替部
1 Call center system 11 Call center server 12 Voice recognition system 13 Sentiment analysis system 14 Operator work terminal 15 Customer terminal 111 Control unit 112 Memory unit 113 Data storage unit 114 AI dialogue processing unit 115 Voice recognition input / output processing unit 116 Sentiment analysis input / output processing unit 117 Complaint detection processing unit 118 Word interval processing unit 119 Dialogue switching unit

Claims (6)

オペレータ作業端末とスーパーバイザ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムであって、
前記コールセンタサーバは、
顧客との音声対話をAIによって行うAI対話処理部と、
顧客の通話音声を元に通話内容を解析する通話内容解析部と、
前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、
前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、または、前記オペレータ対話から前記スーパーバイザ作業端末のスーパーバイザが顧客との音声対話を行うスーパーバイザ対話への切り替え、を行う対話切替部と、
前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、
を有することを特徴とするコールセンタシステム。
A call center system that includes an operator work terminal, a supervisor work terminal, and a call center server to provide call center services to customer terminals.
The call center server
AI dialogue processing unit that conducts voice dialogue with customers by AI,
A call content analysis unit that analyzes the call content based on the customer's call voice,
A complaint detection processing unit that detects a complaint state or a complaint reserve force state based on the analysis result of the call content analysis unit, and
A supervisor that switches from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which the operator of the operator work terminal has a voice dialogue with a customer, or from the operator dialogue to a supervisor in which the supervisor of the supervisor work terminal has a voice dialogue with a customer. A dialogue switching unit that switches to dialogue,
The AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit are controlled, and the dialogue switching unit is switched to the dialogue switching unit if the detection result of the complaint detection processing unit is a complaint state. If the detection result of the complaint detection processing unit is in the complaint reserve state, the control unit that controls the switching only when the customer's switching request information is acquired from the customer terminal.
A call center system characterized by having.
請求項1に記載のコールセンタシステムにおいて、
前記対話切替部が、前記AI対話から前記オペレータ対話への切り替えを行う対話切替部の場合であって、
前記制御部は、前記苦情検知処理の検出結果が苦情予備軍状態であって切替希望情報を得られない場合において、さらに前記顧客端末から顧客の前記AI対話の継続希望情報を取得した場合のみAI対話処理部にAI対話を継続させる制御を行うことを特徴とするコールセンタシステム。
In the call center system according to claim 1,
In the case where the dialogue switching unit is a dialogue switching unit that switches from the AI dialogue to the operator dialogue.
The control unit performs AI only when the detection result of the complaint detection process is in the complaint reserve state and the switching desired information cannot be obtained, and when the customer's AI dialogue continuation desired information is further acquired from the customer terminal. A call center system characterized in that the dialogue processing unit controls the continuation of AI dialogue.
請求項1または請求項2に記載のコールセンタシステムにおいて、
前記対話切替部が、前記AI対話から前記オペレータ対話への切り替えを行う対話切替部の場合であって、
前記切替希望情報もしくは前記継続希望情報は、AI対話処理部により前記顧客端末上の顧客に、前記切替希望情報においては前記切り替え、前記継続希望情報においては前記AI対話の継続、を希望するかをアナウンスし、前記アナウンスに対する顧客の応答音声を前記AI対話処理部が音声認識する、もしくは、前記アナウンスに対する顧客の顧客端末操作によるプッシュボタン信号を前記AI対話処理部が受信することで、前記制御部が取得することを特徴とするコールセンタシステム。
In the call center system according to claim 1 or 2.
In the case where the dialogue switching unit is a dialogue switching unit that switches from the AI dialogue to the operator dialogue.
Whether the switching desired information or the continuation desired information is requested by the AI dialogue processing unit to the customer on the customer terminal, the switching desired information is the switching, and the continuation desired information is the continuation of the AI dialogue. The control unit receives an announcement and the AI dialogue processing unit recognizes the customer's response voice to the announcement, or the AI dialogue processing unit receives a push button signal by the customer's customer terminal operation for the announcement. A call center system characterized by the acquisition of.
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムの前記コールセンタサーバの機能を有するコールセンタ装置であって、
顧客との音声対話をAIによって行うAI対話処理部と、
顧客の通話音声を元に通話内容を解析する通話内容解析部と、
前記通話内容解析部の解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理部と、
前記AI対話処理部によるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話への切り替え、を行う対話切替部と、
前記AI対話処理部、前記通話内容解析部、および、前記苦情検知処理部を制御し、さらに、前記対話切替部に対しては、前記苦情検知処理部の検出結果が苦情状態であれば前記切り替えの制御をし、前記苦情検知処理部の検出結果が苦情予備軍状態であれば前記顧客端末から顧客の切替希望情報を取得した場合のみ前記切り替えの制御をする制御部と、
を有することを特徴とするコールセンタ装置。
A call center device having an operator work terminal and a call center server and having a function of the call center server of a call center system that provides a call center service to a customer terminal.
AI dialogue processing unit that conducts voice dialogue with customers by AI,
A call content analysis unit that analyzes the call content based on the customer's call voice,
A complaint detection processing unit that detects a complaint state or a complaint reserve force state based on the analysis result of the call content analysis unit, and
A dialogue switching unit that switches from an AI dialogue by the AI dialogue processing unit to an operator dialogue in which the operator of the operator work terminal performs a voice dialogue with a customer.
The AI dialogue processing unit, the call content analysis unit, and the complaint detection processing unit are controlled, and the dialogue switching unit is switched to the dialogue switching unit if the detection result of the complaint detection processing unit is a complaint state. If the detection result of the complaint detection processing unit is in the complaint reserve state, the control unit that controls the switching only when the customer's switching request information is acquired from the customer terminal.
A call center device characterized by having.
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムにおけるコールセンタサーバによって実行される対話方法であって、
顧客との音声対話をAIによって行うAI対話処理ステップと、
顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、
前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、
前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、
前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、
を有することを特徴とする対話方法。
A method of interaction executed by a call center server in a call center system that includes an operator work terminal and a call center server and provides call center services to customer terminals.
AI dialogue processing step to perform voice dialogue with customers by AI,
A call content analysis step that analyzes the call content based on the customer's call voice,
A complaint detection processing step that detects a complaint state or a complaint reserve force state based on the analysis result of the call content analysis step, and
If the detection result of the complaint detection processing step is a complaint state, a step of switching from the AI dialogue by the AI dialogue processing step to the operator dialogue in which the operator of the operator work terminal performs a voice dialogue with the customer,
If the detection result of the complaint detection processing step is the complaint reserve army state, the step of switching from the AI dialogue to the operator dialogue only when the customer switching request information is acquired from the customer terminal.
A dialogue method characterized by having.
オペレータ作業端末とコールセンタサーバとを備え、顧客端末にコールセンタサービスを提供するコールセンタシステムにおける前記コールセンタサーバによって実行される対話方法のためのプログラムであって、
前記コールセンタサーバのコンピュータに、
顧客との音声対話をAIによって行うAI対話処理ステップと、
顧客の通話音声を元に通話内容を解析する通話内容解析ステップと、
前記通話内容解析ステップの解析結果に基づき苦情状態もしくは苦情予備軍状態を検知する苦情検知処理ステップと、
前記苦情検知処理ステップの検出結果が苦情状態であれば、前記AI対話処理ステップによるAI対話から前記オペレータ作業端末のオペレータが顧客との音声対話を行うオペレータ対話へ切り替えるステップと、
前記苦情検知処理ステップの検出結果が苦情予備軍状態であれば、前記顧客端末から顧客の切替希望情報を取得した場合のみ前記AI対話から前記オペレータ対話へ切り替えるステップと、
を実行させることを特徴とするプログラム。
A program for an interactive method executed by the call center server in a call center system that includes an operator work terminal and a call center server and provides a call center service to a customer terminal.
To the computer of the call center server
AI dialogue processing step to perform voice dialogue with customers by AI,
A call content analysis step that analyzes the call content based on the customer's call voice,
A complaint detection processing step that detects a complaint state or a complaint reserve force state based on the analysis result of the call content analysis step, and
If the detection result of the complaint detection processing step is a complaint state, a step of switching from the AI dialogue by the AI dialogue processing step to the operator dialogue in which the operator of the operator work terminal performs a voice dialogue with the customer,
If the detection result of the complaint detection processing step is the complaint reserve army state, the step of switching from the AI dialogue to the operator dialogue only when the customer switching request information is acquired from the customer terminal.
A program characterized by executing.
JP2017164827A 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function Active JP6863179B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017164827A JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017164827A JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Publications (2)

Publication Number Publication Date
JP2019047170A JP2019047170A (en) 2019-03-22
JP6863179B2 true JP6863179B2 (en) 2021-04-21

Family

ID=65814885

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017164827A Active JP6863179B2 (en) 2017-08-29 2017-08-29 Call center system, call center device, dialogue method, and its program with customer complaint detection function

Country Status (1)

Country Link
JP (1) JP6863179B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6647722B1 (en) * 2019-07-08 2020-02-14 株式会社Tmj Information processing apparatus, information processing method, information processing program
JP6920773B1 (en) * 2019-09-27 2021-08-18 Tradfit株式会社 Information provision method, information provision system, information provision device and computer program
JPWO2022180854A1 (en) * 2021-02-26 2022-09-01

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6665644B1 (en) * 1999-08-10 2003-12-16 International Business Machines Corporation Conversational data mining
JP5189354B2 (en) * 2007-12-28 2013-04-24 株式会社富士通エフサス Operator reception monitoring and switching system
US20160036980A1 (en) * 2014-07-29 2016-02-04 Genesys Telecommunications Laboratories, Inc. System and Method for Addressing Hard-To-Understand for Contact Center Service Quality
JP6351562B2 (en) * 2014-11-12 2018-07-04 株式会社アドバンスト・メディア Information processing system, reception server, information processing method, and program

Also Published As

Publication number Publication date
JP2019047170A (en) 2019-03-22

Similar Documents

Publication Publication Date Title
US7260537B2 (en) Disambiguating results within a speech based IVR session
CN112037799B (en) Voice interrupt processing method and device, computer equipment and storage medium
US6882973B1 (en) Speech recognition system with barge-in capability
US8654937B2 (en) System and method for call center agent quality assurance using biometric detection technologies
US9721565B2 (en) Method for selecting interactive voice response modes using human voice detection analysis
US6651043B2 (en) User barge-in enablement in large vocabulary speech recognition systems
JP6863179B2 (en) Call center system, call center device, dialogue method, and its program with customer complaint detection function
US11363140B2 (en) Systems and methods for operating an interactive voice response system
CN112995419B (en) Voice conversation processing method and system
WO2014140970A2 (en) Voice print tagging of interactive voice response sessions
CN110602334A (en) Intelligent outbound method and system based on man-machine cooperation
WO2014069075A1 (en) Dissatisfying conversation determination device and dissatisfying conversation determination method
CN112242135A (en) Voice data processing method and intelligent customer service device
CA2665009C (en) System for handling a plurality of streaming voice signals for determination of responsive action thereto
KR20200016636A (en) Electronic device for performing task including call in response to user utterance and method for operation thereof
US20010056345A1 (en) Method and system for speech recognition of the alphabet
JP6365304B2 (en) Conversation analyzer and conversation analysis method
JP5424332B2 (en) Telephone response result prediction apparatus, method, and program thereof
JP3933813B2 (en) Spoken dialogue device
KR101933822B1 (en) Intelligent speaker based on face reconition, method for providing active communication using the speaker, and computer readable medium for performing the method
JP6736225B2 (en) Interactive device, interactive device control method, and program
JP2020149264A (en) Voice guidance system and voice guidance method
JP7172120B2 (en) Speech recognition device and speech recognition method
JP2006113439A (en) Speech automatic responding apparatus and program
WO2014069443A1 (en) Complaint call determination device and complaint call determination method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200513

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210226

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210315

R150 Certificate of patent or registration of utility model

Ref document number: 6863179

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150