JP6594577B1 - 評価システム、評価方法、及びコンピュータプログラム。 - Google Patents
評価システム、評価方法、及びコンピュータプログラム。 Download PDFInfo
- Publication number
- JP6594577B1 JP6594577B1 JP2019061311A JP2019061311A JP6594577B1 JP 6594577 B1 JP6594577 B1 JP 6594577B1 JP 2019061311 A JP2019061311 A JP 2019061311A JP 2019061311 A JP2019061311 A JP 2019061311A JP 6594577 B1 JP6594577 B1 JP 6594577B1
- Authority
- JP
- Japan
- Prior art keywords
- speaker
- voice
- evaluation
- speech
- topic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification
- G10L17/22—Interactive procedures; Man-machine interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
- G09B19/18—Book-keeping or economics
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification
- G10L17/06—Decision making techniques; Pattern matching strategies
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
- G10L21/028—Voice signal separating using properties of sound source
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
Abstract
Description
図1に示す本実施形態の評価システム1は、商談相手に対する対象者の商談行為を評価するためのシステムである。この評価システム1は、商談行為として、商談上での対象者の発話行為を評価するように構成される。
Claims (17)
- 第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得するように構成される取得部と、
前記取得部により取得された前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離するように構成される分離部と、
前記第一の話者の発話行為を、前記分離部により分離された前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価するように構成される評価部と、
を備え、
前記評価部は、前記第一の話者と前記第二の話者との間のトピックに対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1記載の評価システムであって、
前記評価部は、前記第一の話者の音声に基づき前記トピックを判別する評価システム。 - 第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得するように構成される取得部と、
前記取得部により取得された前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離するように構成される分離部と、
前記第一の話者の発話行為を、前記分離部により分離された前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価するように構成される評価部と、
を備え、
前記評価部は、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、前記表示される前記ディジタル資料に対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得するように構成される取得部と、
前記取得部により取得された前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離するように構成される分離部と、
前記第一の話者の発話行為を、前記分離部により分離された前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価するように構成される評価部と、
を備え、
前記評価部は、複数の評価モデルのうち、前記第一の話者と前記第二の話者との間のトピックに対応する評価モデルに、前記第一の話者の音声に関する特徴データを入力して得られる前記対応する評価モデルからの出力に基づき、前記第一の話者の前記発話行為を評価し、
前記複数の評価モデルのそれぞれは、対応するトピックの模範的な発話行為に関する特徴データを教師データとして用いた機械学習により構築される評価システム。 - 第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得するように構成される取得部と、
前記取得部により取得された前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離するように構成される分離部と、
前記第一の話者の発話行為を、前記分離部により分離された前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価するように構成される評価部と、
を備え、
前記評価部は、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、複数の評価モデルのうち、前記表示される前記ディジタル資料に対応する評価モデルを選択し、前記選択した評価モデルに前記第一の話者の音声に関する特徴データを入力して得られる前記選択した評価モデルからの出力に基づき、前記第一の話者の前記発話行為を評価し、
前記複数の評価モデルのそれぞれは、対応するディジタル資料を用いた模範的な発話行為に関する特徴データを教師データとして用いた機械学習により構築される評価システム。 - 請求項1〜請求項5のいずれか一項記載の評価システムであって、
前記第一の話者は、予め音声の特徴が登録された登録者であり、
前記分離部は、登録された前記第一の話者の前記音声の特徴に基づき、前記入力音声を、前記登録者である前記第一の話者の音声と、前記登録者以外の前記第二の話者の音声とに分離する評価システム。 - 請求項1〜請求項6のいずれか一項記載の評価システムであって、
前記評価部は更に、前記第二の話者の話速、音量、及び音高の少なくとも一つに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項7のいずれか一項記載の評価システムであって、
前記評価部は更に、前記第一の話者の音声及び前記第二の話者の音声から判別される前記第一の話者及び前記第二の話者の発話の分布に関する情報に基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項8記載の評価システムであって、
前記評価部は、前記分布に関する情報としての、前記第一の話者と前記第二の話者との間の発話時間及び発話量の少なくとも一方の比率に基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項9のいずれか一項記載の評価システムであって、
前記評価部は更に、前記第二の話者の音声に基づき、前記第二の話者が有する課題を推定し、前記第一の話者の音声に基づき、前記第一の話者が前記第二の話者に対して、推定した前記課題に対応する予め定められた情報を提供しているか否かを判定し、当該判定結果に応じて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項10のいずれか一項記載の評価システムであって、
前記評価部は更に、前記第一の話者の音声及び前記第二の話者の音声に基づき、前記第一の話者が予め定められたシナリオに従って、前記第二の話者の反応に対応した話を前記第二の話者に展開しているか否かを判定し、当該判定結果に応じて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項11のいずれか一項記載の評価システムにおける前記取得部、前記分離部、及び前記評価部としてコンピュータを機能させるためのコンピュータプログラム。
- コンピュータにより実行される評価方法であって、
第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得することと、
前記取得した前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離することと、
前記第一の話者の発話行為を、前記分離した前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価することと、
を含み、
前記評価することは、前記第一の話者と前記第二の話者との間のトピックに対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価することを含む評価方法。 - 請求項13記載の評価方法であって、
前記評価することは、前記第一の話者の音声に基づき前記トピックを判別することを含む評価方法。 - コンピュータにより実行される評価方法であって、
第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得することと、
前記取得した前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離することと、
前記第一の話者の発話行為を、前記分離した前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価することと、
を含み、
前記評価することは、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、前記表示される前記ディジタル資料に対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価することを含む評価方法。 - コンピュータにより実行される評価方法であって、
第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得することと、
前記取得した前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離することと、
前記第一の話者の発話行為を、前記分離した前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価することと、
を含み、
前記評価することは、複数の評価モデルのうち、前記第一の話者と前記第二の話者との間のトピックに対応する評価モデルに、前記第一の話者の音声に関する特徴データを入力して得られる前記対応する評価モデルからの出力に基づき、前記第一の話者の前記発話行為を評価することを含み、
前記評価方法は更に、
前記複数の評価モデルのそれぞれを、対応するトピックの模範的な発話行為に関する特徴データを教師データとして用いた機械学習により構築することを含む評価方法。 - コンピュータにより実行される評価方法であって、
第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得することと、
前記取得した前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離することと、
前記第一の話者の発話行為を、前記分離した前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価することと、
を含み、
前記評価することは、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、複数の評価モデルのうち、前記表示される前記ディジタル資料に対応する評価モデルを選択し、前記選択した評価モデルに前記第一の話者の音声に関する特徴データを入力して得られる前記選択した評価モデルからの出力に基づき、前記第一の話者の前記発話行為を評価することを含み、
前記評価方法は更に、
前記複数の評価モデルのそれぞれを、対応するトピックの模範的な発話行為に関する特徴データを教師データとして用いた機械学習により構築することを含む評価方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019061311A JP6594577B1 (ja) | 2019-03-27 | 2019-03-27 | 評価システム、評価方法、及びコンピュータプログラム。 |
PCT/JP2020/013642 WO2020196743A1 (ja) | 2019-03-27 | 2020-03-26 | 評価システム及び評価方法 |
US17/442,470 US20220165276A1 (en) | 2019-03-27 | 2020-03-26 | Evaluation system and evaluation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019061311A JP6594577B1 (ja) | 2019-03-27 | 2019-03-27 | 評価システム、評価方法、及びコンピュータプログラム。 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019173105A Division JP7160778B2 (ja) | 2019-09-24 | 2019-09-24 | 評価システム、評価方法、及びコンピュータプログラム。 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6594577B1 true JP6594577B1 (ja) | 2019-10-23 |
JP2020160336A JP2020160336A (ja) | 2020-10-01 |
Family
ID=68314123
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019061311A Active JP6594577B1 (ja) | 2019-03-27 | 2019-03-27 | 評価システム、評価方法、及びコンピュータプログラム。 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220165276A1 (ja) |
JP (1) | JP6594577B1 (ja) |
WO (1) | WO2020196743A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7462595B2 (ja) * | 2021-08-11 | 2024-04-05 | アフラック生命保険株式会社 | 人材育成支援システム、連携支援システム、方法及びコンピュータプログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030144900A1 (en) * | 2002-01-28 | 2003-07-31 | Whitmer Michael L. | Method and system for improving enterprise performance |
JP4728868B2 (ja) * | 2006-04-18 | 2011-07-20 | 日本電信電話株式会社 | 応対評価装置、その方法、プログラムおよびその記録媒体 |
JP2010230829A (ja) * | 2009-03-26 | 2010-10-14 | Toshiba Corp | 音声監視装置、その方法、及び、そのプログラム |
JP2011113442A (ja) * | 2009-11-30 | 2011-06-09 | Seiko Epson Corp | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム |
JP2011221683A (ja) * | 2010-04-07 | 2011-11-04 | Seiko Epson Corp | 接客支援装置、接客支援方法およびプログラム |
JP5244945B2 (ja) * | 2011-06-29 | 2013-07-24 | みずほ情報総研株式会社 | 資料表示システム、資料表示方法及び資料表示プログラム |
JP5329610B2 (ja) * | 2011-07-22 | 2013-10-30 | みずほ情報総研株式会社 | 説明支援システム、説明支援方法及び説明支援プログラム |
JP5855290B2 (ja) * | 2014-06-16 | 2016-02-09 | パナソニックIpマネジメント株式会社 | 接客評価装置、接客評価システム及び接客評価方法 |
JP6502685B2 (ja) * | 2015-01-29 | 2019-04-17 | Nttテクノクロス株式会社 | 通話内容分析表示装置、通話内容分析表示方法、及びプログラム |
US10387573B2 (en) * | 2015-06-01 | 2019-08-20 | AffectLayer, Inc. | Analyzing conversations to automatically identify customer pain points |
JP6751305B2 (ja) * | 2016-03-28 | 2020-09-02 | 株式会社富士通エフサス | 分析装置、分析方法および分析プログラム |
JP2018041120A (ja) * | 2016-09-05 | 2018-03-15 | 富士通株式会社 | 業務評価方法、業務評価装置および業務評価プログラム |
JP6733452B2 (ja) * | 2016-09-21 | 2020-07-29 | 富士通株式会社 | 音声分析プログラム、音声分析装置、及び音声分析方法 |
JP6977323B2 (ja) * | 2017-06-14 | 2021-12-08 | ヤマハ株式会社 | 歌唱音声の出力方法、音声応答システム、及びプログラム |
US11223723B2 (en) * | 2017-10-23 | 2022-01-11 | Accenture Global Solutions Limited | Call center system having reduced communication latency |
US10867610B2 (en) * | 2018-05-04 | 2020-12-15 | Microsoft Technology Licensing, Llc | Computerized intelligent assistant for conferences |
-
2019
- 2019-03-27 JP JP2019061311A patent/JP6594577B1/ja active Active
-
2020
- 2020-03-26 US US17/442,470 patent/US20220165276A1/en not_active Abandoned
- 2020-03-26 WO PCT/JP2020/013642 patent/WO2020196743A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JP2020160336A (ja) | 2020-10-01 |
WO2020196743A1 (ja) | 2020-10-01 |
US20220165276A1 (en) | 2022-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6755304B2 (ja) | 情報処理装置 | |
US10592611B2 (en) | System for automatic extraction of structure from spoken conversation using lexical and acoustic features | |
JP7160778B2 (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
JP6084654B2 (ja) | 音声認識装置、音声認識システム、当該音声認識システムで使用される端末、および、話者識別モデルを生成するための方法 | |
CN110990685B (zh) | 基于声纹的语音搜索方法、设备、存储介质及装置 | |
US10652286B1 (en) | Constraint based communication sessions | |
JP2017009826A (ja) | グループ状態判定装置およびグループ状態判定方法 | |
JP7132090B2 (ja) | 対話システム、対話装置、対話方法、及びプログラム | |
JP2017009825A (ja) | 会話状況分析装置および会話状況分析方法 | |
JP2017010309A (ja) | 意思決定支援装置および意思決定支援方法 | |
CN113314119B (zh) | 语音识别智能家居控制方法及装置 | |
JP5045486B2 (ja) | 対話装置及びプログラム | |
CN111429157A (zh) | 投诉工单的评价处理方法、装置、设备及存储介质 | |
JP5309070B2 (ja) | マルチモーダル対話装置 | |
US10699224B2 (en) | Conversation member optimization apparatus, conversation member optimization method, and program | |
JP2021124530A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6594577B1 (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
US11615787B2 (en) | Dialogue system and method of controlling the same | |
JP6365304B2 (ja) | 会話分析装置及び会話分析方法 | |
JP5803617B2 (ja) | 音声情報解析装置および音声情報解析プログラム | |
CN111933107A (zh) | 语音识别方法、装置、存储介质和处理器 | |
CN110765242A (zh) | 一种客服信息的提供方法,装置及系统 | |
CN110099332B (zh) | 一种音频环境展示方法及装置 | |
JP7177348B2 (ja) | 音声認識装置、音声認識方法およびプログラム | |
CN114328867A (zh) | 一种人机对话中智能打断的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190327 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190327 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190515 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190528 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190726 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190827 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190924 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6594577 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |