JP2020160425A - 評価システム、評価方法、及びコンピュータプログラム。 - Google Patents
評価システム、評価方法、及びコンピュータプログラム。 Download PDFInfo
- Publication number
- JP2020160425A JP2020160425A JP2019173105A JP2019173105A JP2020160425A JP 2020160425 A JP2020160425 A JP 2020160425A JP 2019173105 A JP2019173105 A JP 2019173105A JP 2019173105 A JP2019173105 A JP 2019173105A JP 2020160425 A JP2020160425 A JP 2020160425A
- Authority
- JP
- Japan
- Prior art keywords
- speaker
- voice
- evaluation
- evaluation system
- target person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 141
- 238000004590 computer program Methods 0.000 title claims description 11
- 239000000463 material Substances 0.000 claims description 51
- 238000013210 evaluation model Methods 0.000 claims description 35
- 238000000926 separation method Methods 0.000 claims description 11
- 238000009826 distribution Methods 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 7
- 238000000034 method Methods 0.000 abstract description 28
- 238000003860 storage Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 20
- 239000013598 vector Substances 0.000 description 16
- 230000006399 behavior Effects 0.000 description 15
- 230000000694 effects Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 7
- 230000008451 emotion Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 238000012854 evaluation process Methods 0.000 description 5
- 230000002996 emotional effect Effects 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000033764 rhythmic process Effects 0.000 description 2
- 206010021703 Indifference Diseases 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
図1に示す本実施形態の評価システム1は、商談相手に対する対象者の商談行為を評価するためのシステムである。この評価システム1は、商談行為として、商談上での対象者の発話行為を評価するように構成される。
機能する。商談の例には、医薬品製造会社の従業員と医師との間の医薬に関する商談が含まれる。
音声であるか否かを識別するために機械学習された識別モデルのパラメータであってもよい。例えば、識別モデルは、音素パターンがバランスよく配置された文章である音素バランス文を対象者に読み上げさせたときの対象者の音声を教師データとして用いた機械学習により構築される。識別モデルは、入力データの話者が対象者であるか否かを表す値、又は、入力データの話者が対象者である確率を出力するように構成され得る。
。
発話内容に基づき、これらの対象者区間における対象者の発話内容に関する特徴ベクトルを、評価モデルへの入力データとして生成する。処理対象トピックに対応する対象者区間が複数ある場合、プロセッサ31は、これらの複数区間の発話内容をまとめて特徴ベクトルを生成することができる。
コアと表現する。第二スコアは、非対象者の音声による反応に基づき評価した対象者の商談行為に関する評価値である。
価データを作成して、出力する。プロセッサ31は、評価データを対応するユーザIDに関連付けてストレージ33に保存することができる。
Claims (17)
- 第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得するように構成される取得部と、
前記取得部により取得された前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離するように構成される分離部と、
前記第一の話者の発話行為を、前記分離部により分離された前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価するように構成される評価部と、
を備える評価システム。 - 請求項1記載の評価システムであって、
前記第一の話者は、予め音声の特徴が登録された登録者であり、
前記分離部は、登録された前記第一の話者の前記音声の特徴に基づき、前記入力音声を、前記登録者である前記第一の話者の音声と、前記登録者以外の前記第二の話者の音声とに分離する評価システム。 - 請求項1又は請求項2記載の評価システムであって、
前記評価部は、前記第二の話者の音声に基づいて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項3のいずれか一項記載の評価システムであって、
前記評価部は、前記第二の話者の音声に含まれるキーワードに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項4のいずれか一項記載の評価システムであって、
前記評価部は、前記第一の話者と前記第二の話者との間のトピックに対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項5記載の評価システムであって、
前記評価部は、前記第一の話者の音声に基づき前記トピックを判別する評価システム。 - 請求項1〜請求項6のいずれか一項記載の評価システムであって、
前記評価部は、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、前記表示される前記ディジタル資料に対応するキーワードを前記第二の話者の音声から抽出し、前記抽出したキーワードに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項7のいずれか一項記載の評価システムであって、
前記評価部は、前記第二の話者の話速、音量、及び音高の少なくとも一つに基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項8のいずれか一項記載の評価システムであって、
前記評価部は、前記第一の話者の音声に基づいて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項9記載の評価システムであって、
前記評価部は、複数の評価モデルのうち、前記第一の話者と前記第二の話者との間のトピックに対応する評価モデルを用いて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項9記載の評価システムであって、
前記評価部は、前記第一の話者から前記第二の話者に向けてディジタル機器を通じて表示されるディジタル資料の識別情報に基づき、複数の評価モデルのうち、前記表示される前記ディジタル資料に対応する評価モデルを用いて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項11のいずれか一項記載の評価システムであって、
前記評価部は、前記第一の話者の音声及び前記第二の話者の音声から判別される前記第一の話者及び前記第二の話者の発話の分布に関する情報に基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項12記載の評価システムであって、
前記評価部は、前記分布に関する情報としての、前記第一の話者と前記第二の話者との間の発話時間及び発話量の少なくとも一方の比率に基づき、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項13のいずれか一項記載の評価システムであって、
前記評価部は、前記第二の話者の音声に基づき、前記第二の話者が有する課題を推定し、前記第一の話者の音声に基づき、前記第一の話者が前記第二の話者に対して、推定した前記課題に対応する予め定められた情報を提供しているか否かを判定し、当該判定結果に応じて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項14のいずれか一項記載の評価システムであって、
前記評価部は、前記第一の話者の音声及び前記第二の話者の音声に基づき、前記第一の話者が予め定められたシナリオに従って、前記第二の話者の反応に対応した話を前記第二の話者に展開しているか否かを判定し、当該判定結果に応じて、前記第一の話者の前記発話行為を評価する評価システム。 - 請求項1〜請求項15のいずれか一項記載の評価システムにおける前記取得部、前記分離部、及び前記評価部としてコンピュータを機能させるためのコンピュータプログラム。
- コンピュータにより実行される評価方法であって、
第一の話者と第二の話者との間の商談上の音声を集音するマイクロフォンからの入力音声を取得することと、
前記取得した前記入力音声を、前記第一の話者の音声と前記第二の話者の音声とに分離することと、
前記第一の話者の発話行為を、前記分離した前記第一の話者の音声及び前記第二の話者の音声の少なくとも一方に基づいて評価することと、
を含む評価方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019173105A JP7160778B2 (ja) | 2019-09-24 | 2019-09-24 | 評価システム、評価方法、及びコンピュータプログラム。 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019173105A JP7160778B2 (ja) | 2019-09-24 | 2019-09-24 | 評価システム、評価方法、及びコンピュータプログラム。 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019061311A Division JP6594577B1 (ja) | 2019-03-27 | 2019-03-27 | 評価システム、評価方法、及びコンピュータプログラム。 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020160425A true JP2020160425A (ja) | 2020-10-01 |
JP2020160425A5 JP2020160425A5 (ja) | 2022-03-15 |
JP7160778B2 JP7160778B2 (ja) | 2022-10-25 |
Family
ID=72643283
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019173105A Active JP7160778B2 (ja) | 2019-09-24 | 2019-09-24 | 評価システム、評価方法、及びコンピュータプログラム。 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7160778B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113593529A (zh) * | 2021-07-09 | 2021-11-02 | 北京字跳网络技术有限公司 | 说话人分离算法的评估方法、装置、电子设备和存储介质 |
JP7123448B1 (ja) | 2021-11-09 | 2022-08-23 | 株式会社バベル | 情報処理方法、コンピュータプログラム及び情報処理装置 |
WO2024009623A1 (ja) * | 2022-07-04 | 2024-01-11 | パナソニックIpマネジメント株式会社 | 評価システム、評価装置および評価方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07334075A (ja) * | 1994-06-03 | 1995-12-22 | Hitachi Ltd | プレゼンテーション支援装置 |
JP2007219161A (ja) * | 2006-02-16 | 2007-08-30 | Ricoh Co Ltd | プレゼンテーション評価装置及びプレゼンテーション評価方法 |
JP2009069894A (ja) * | 2007-09-10 | 2009-04-02 | Fuji Xerox Co Ltd | 商談支援装置及び商談支援プログラム |
WO2019053958A1 (ja) * | 2017-09-12 | 2019-03-21 | ジャパンモード株式会社 | 評価支援システム及び評価支援装置 |
-
2019
- 2019-09-24 JP JP2019173105A patent/JP7160778B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07334075A (ja) * | 1994-06-03 | 1995-12-22 | Hitachi Ltd | プレゼンテーション支援装置 |
JP2007219161A (ja) * | 2006-02-16 | 2007-08-30 | Ricoh Co Ltd | プレゼンテーション評価装置及びプレゼンテーション評価方法 |
JP2009069894A (ja) * | 2007-09-10 | 2009-04-02 | Fuji Xerox Co Ltd | 商談支援装置及び商談支援プログラム |
WO2019053958A1 (ja) * | 2017-09-12 | 2019-03-21 | ジャパンモード株式会社 | 評価支援システム及び評価支援装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113593529A (zh) * | 2021-07-09 | 2021-11-02 | 北京字跳网络技术有限公司 | 说话人分离算法的评估方法、装置、电子设备和存储介质 |
JP7123448B1 (ja) | 2021-11-09 | 2022-08-23 | 株式会社バベル | 情報処理方法、コンピュータプログラム及び情報処理装置 |
JP2023070466A (ja) * | 2021-11-09 | 2023-05-19 | 株式会社バベル | 情報処理方法、コンピュータプログラム及び情報処理装置 |
WO2024009623A1 (ja) * | 2022-07-04 | 2024-01-11 | パナソニックIpマネジメント株式会社 | 評価システム、評価装置および評価方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7160778B2 (ja) | 2022-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107818798B (zh) | 客服服务质量评价方法、装置、设备及存储介质 | |
JP6210239B2 (ja) | 会話解析装置、会話解析方法及びプログラム | |
JP6755304B2 (ja) | 情報処理装置 | |
US10592611B2 (en) | System for automatic extraction of structure from spoken conversation using lexical and acoustic features | |
US11184412B1 (en) | Modifying constraint-based communication sessions | |
US8515764B2 (en) | Question and answer database expansion based on speech recognition using a specialized and a general language model | |
CN111259132A (zh) | 话术推荐方法、装置、计算机设备和存储介质 | |
JP2017009826A (ja) | グループ状態判定装置およびグループ状態判定方法 | |
CN110990685B (zh) | 基于声纹的语音搜索方法、设备、存储介质及装置 | |
JP7160778B2 (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
US11574637B1 (en) | Spoken language understanding models | |
US11354754B2 (en) | Generating self-support metrics based on paralinguistic information | |
JP2017009825A (ja) | 会話状況分析装置および会話状況分析方法 | |
JP2009237353A (ja) | 関連付け装置、関連付け方法及びコンピュータプログラム | |
JP2017010309A (ja) | 意思決定支援装置および意思決定支援方法 | |
JP5045486B2 (ja) | 対話装置及びプログラム | |
US20180075395A1 (en) | Conversation member optimization apparatus, conversation member optimization method, and program | |
WO2020196743A1 (ja) | 評価システム及び評価方法 | |
JP5258056B2 (ja) | 質問文候補提示装置 | |
JP5803617B2 (ja) | 音声情報解析装置および音声情報解析プログラム | |
CN110099332B (zh) | 一种音频环境展示方法及装置 | |
WO2020189340A1 (ja) | 情報処理装置および情報処理方法、並びにプログラム | |
JP5763573B2 (ja) | 質問相手選択装置、質問相手選択方法および質問相手選択プログラム | |
US11943392B2 (en) | System and method for providing personalized customer experience in interactive communications | |
US11798015B1 (en) | Adjusting product surveys based on paralinguistic information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220304 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220304 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220304 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220531 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220725 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221013 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7160778 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |