JP2023066895A - 発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム - Google Patents
発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム Download PDFInfo
- Publication number
- JP2023066895A JP2023066895A JP2021177749A JP2021177749A JP2023066895A JP 2023066895 A JP2023066895 A JP 2023066895A JP 2021177749 A JP2021177749 A JP 2021177749A JP 2021177749 A JP2021177749 A JP 2021177749A JP 2023066895 A JP2023066895 A JP 2023066895A
- Authority
- JP
- Japan
- Prior art keywords
- utterance
- user
- change
- icon
- vocalization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 27
- 238000004891 communication Methods 0.000 claims abstract description 118
- 230000008859 change Effects 0.000 claims abstract description 84
- 238000001514 detection method Methods 0.000 claims abstract description 47
- 238000010586 diagram Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 208000035473 Communicable disease Diseases 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Landscapes
- Telephonic Communication Services (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
複数の端末にて通信回線を介して通話を行う際の前記複数の端末のユーザーの発声状態を認識する発声状態認識システムであって、
前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる表示制御手段と、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手段と、
前記変化検出手段にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手段とを有する。
複数の端末にて通信回線を介して通話を行う際に、前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる発声状態認識装置であって、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手段と、
前記変化検出手段にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手段とを有する。
複数の端末にて通信回線を介して通話を行う際の前記複数の端末のユーザーの発声状態を認識する発声状態認識方法であって、
前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる表示制御ステップと、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出ステップと、
前記変化検出ステップにて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出ステップとを有する。
複数のコンピュータにて通信回線を介して通話を行う際に、前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させるコンピュータに、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手順と、
前記変化検出手順にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手順と、を実行させるプログラム。
図1は、本発明の発声状態認識システムの実施の一形態を示す図である。
(そのユーザーの発声値/全てのユーザーの発声値の合計)×100%
から、オンラインミーティングに参加している各ユーザー毎の発声の割合を算出する。そして、発声割合表示手段29により、制御部17は、表示部14にて、図6に示したオンラインミーティング画面50の発声割合表示領域53に表示された各ユーザーの発声割合を、発声割合算出手段28が算出した値に更新して表示する(ステップS9)。また、記憶部16に記憶した各ユーザーの発声割合も算出した値に更新する。
(そのユーザーの発声値/検出処理を行った旨を示す検出値)×100%
にて算出され、どのユーザーも発声していない割合は、
100-(全ユーザーの発声値の合計/検出処理を行った旨を示す検出値)×100%
にて算出される。
上述した第1の実施の形態においては、オンラインミーティングに参加しているユーザー毎の発声の割合を百分率で算出して表示するものを示したが、オンラインミーティングに参加しているユーザー毎の発声時間を算出して表示してもよい。なお、発声時間は、発声量の具体例の1種である。また、第1の実施の形態に本実施の形態の変更部分を組み合わせた構成にしてもよい。本実施の形態では、第1の実施の形態と同じ説明は省略し、異なる点を中心に説明する。
第2の実施の形態にて示したようにユーザーの発声時間を発声時間表示領域153に表示するのではなく、発声時間に応じたポイントを算出し、そのポイントを表示してもよい。なお、ポイントは、発声量の具体例の1種である。また、本実施の形態では、第1の実施の形態や第2の実施の形態と同じ説明は省略し、異なる点を中心に説明する。
11,31 通信部
12 撮影部
13 操作部
14 表示部
15 音声入出力部
16,32 記憶部
17,33 制御部
21 コミュニケーション実行手段
22,122,222 発声状態算出手段
23 表示制御手段
24 音声制御手段
26 変化検出手段
27 発声量算出手段
28 発声割合算出手段
29 発声割合表示手段
30 コミュニケーションサービスサーバー
34 Webサーバー手段
35 コミュニケーション制御手段
40 ネットワーク
50,150 オンラインミーティング画面
51a,51b 参加ユーザー表示エリア
52a,52b 発声アイコン
53 発声割合表示領域
128 発声時間算出手段
129 発声時間表示手段
153 発声時間表示領域
229 ポイント付与手段
230 ポイント表示手段
Claims (10)
- 複数の端末にて通信回線を介して通話を行う際の前記複数の端末のユーザーの発声状態を認識する発声状態認識システムであって、
前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる表示制御手段と、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手段と、
前記変化検出手段にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手段とを有する発声状態認識システム。 - 請求項1に記載の発声認識システムにおいて、
前記発声量算出手段にて算出されたユーザー毎の発声量に基づいて、前記ユーザー間の通話における前記ユーザー毎の発声の割合を算出する発声割合算出手段と、
前記発声割合算出手段にて算出された前記ユーザー毎の発声の割合を表示する発声割合表示手段とを有する、発声認識システム。 - 請求項1に記載の発声認識システムにおいて、
前記発声量算出手段は、前記ユーザー毎の発声量として、ユーザー毎の発声時間を算出し、
前記発声量算出手段にて算出された前記ユーザー毎の発声時間を表示する発声時間表示手段を有する、発声認識システム。 - 請求項1に記載の発声認識システムにおいて、
前記発声量算出手段は、前記ユーザー毎の発声量として、ユーザー毎の発声時間を算出し、
前記発声量算出手段にて算出された発声時間に応じて、前記ユーザー毎にポイントを付与するポイント付与手段と、
前記ポイント付与手段にて付与された前記ユーザー毎のポイントを表示するポイント表示手段とを有する、発声認識システム。 - 請求項1乃至4のいずれか1項に記載の発声認識システムにおいて、
前記変化検出手段は、前記通話を表示する画面を表示するためのDOMの所定のノードにおける前記発声アイコンを表示するための値の変化を検出することで前記発声アイコンの変化を検出する、発声認識システム。 - 請求項1乃至4のいずれか1項に記載の発声認識システムにおいて、
前記表示制御手段は、前記通話を表示する画面を表示するためのDOMの所定のノードにおける前記発声アイコンを表示するための値の変化を検出すると、前記変化検出手段に変化を検出したことを通知し、
前記変化検出手段は、前記表示制御手段から変化を検出したことを通知されることで前記発声アイコンの変化を検出する、発声認識システム。 - 請求項1乃至4のいずれか1項に記載の発声認識システムにおいて、
前記変化検出手段は、前記発声アイコンの画像を認識することで前記発声アイコンの変化を検出する、発声認識システム。 - 複数の端末にて通信回線を介して通話を行う際に、前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる発声状態認識装置であって、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手段と、
前記変化検出手段にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手段とを有する発声状態認識装置。 - 複数の端末にて通信回線を介して通話を行う際の前記複数の端末のユーザーの発声状態を認識する発声状態認識方法であって、
前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させる表示制御ステップと、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出ステップと、
前記変化検出ステップにて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出ステップとを有する発声状態認識方法。 - 複数のコンピュータにて通信回線を介して通話を行う際に、前記通話に参加するユーザーが発声した場合に表示が変化する発声アイコンを表示させるコンピュータに、
前記ユーザー毎の前記発声アイコンの変化を検出する変化検出手順と、
前記変化検出手順にて検出された前記発声アイコンの変化に基づいて、前記ユーザー毎の発声量を算出する発声量算出手順と、を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021177749A JP7398416B2 (ja) | 2021-10-29 | 2021-10-29 | 発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021177749A JP7398416B2 (ja) | 2021-10-29 | 2021-10-29 | 発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023066895A true JP2023066895A (ja) | 2023-05-16 |
JP7398416B2 JP7398416B2 (ja) | 2023-12-14 |
Family
ID=86326246
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021177749A Active JP7398416B2 (ja) | 2021-10-29 | 2021-10-29 | 発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7398416B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015019162A (ja) * | 2013-07-09 | 2015-01-29 | 大日本印刷株式会社 | 会議支援システム |
JP2018137723A (ja) * | 2017-02-23 | 2018-08-30 | 富士ゼロックス株式会社 | 遠隔会議の参加者の資質のフィードバックを提供するための方法およびシステム、コンピューティングデバイス、プログラム |
US20190238682A1 (en) * | 2015-12-23 | 2019-08-01 | Shoutpoint, Inc. | Conference call platform capable of generating engagement scores |
JP6817253B2 (ja) * | 2018-06-29 | 2021-01-20 | 日本電信電話株式会社 | 表示制御装置、表示制御方法、および表示制御プログラム |
-
2021
- 2021-10-29 JP JP2021177749A patent/JP7398416B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015019162A (ja) * | 2013-07-09 | 2015-01-29 | 大日本印刷株式会社 | 会議支援システム |
US20190238682A1 (en) * | 2015-12-23 | 2019-08-01 | Shoutpoint, Inc. | Conference call platform capable of generating engagement scores |
JP2018137723A (ja) * | 2017-02-23 | 2018-08-30 | 富士ゼロックス株式会社 | 遠隔会議の参加者の資質のフィードバックを提供するための方法およびシステム、コンピューティングデバイス、プログラム |
JP6817253B2 (ja) * | 2018-06-29 | 2021-01-20 | 日本電信電話株式会社 | 表示制御装置、表示制御方法、および表示制御プログラム |
Non-Patent Citations (2)
Title |
---|
"参加者 / 参加者の管理", ZOOM ACADEMY JAPAN, JPN6023001230, 31 May 2020 (2020-05-31), ISSN: 0005124532 * |
JOSE ADORNO: "‘Read’ is a free Zoom tool that hopes to warn you when your meeting is boring", 9TO5MAC.COM, JPN6023001231, 29 September 2021 (2021-09-29), ISSN: 0005124531 * |
Also Published As
Publication number | Publication date |
---|---|
JP7398416B2 (ja) | 2023-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11636430B2 (en) | Device, system and method for summarizing agreements | |
US11527233B2 (en) | Method, apparatus, device and computer storage medium for generating speech packet | |
US8612230B2 (en) | Automatic speech recognition with a selection list | |
TWI536365B (zh) | 聲紋辨識 | |
EP3998763B1 (en) | Systems and methods for managing, analyzing, and providing visualizations of multi-party dialogs | |
CN107430858A (zh) | 传送标识当前说话者的元数据 | |
EP3291225B1 (en) | Method and device for securely adding connection | |
WO2021031308A1 (zh) | 音频处理方法、装置及存储介质 | |
JP7323098B2 (ja) | 対話支援装置、対話支援システム、及び対話支援プログラム | |
JP2018173752A (ja) | 会議システム、会議システム制御方法、およびプログラム | |
CN113409764B (zh) | 一种语音合成方法、装置和用于语音合成的装置 | |
US20230410815A1 (en) | Transcription generation technique selection | |
JP4250938B2 (ja) | コミュニケーション支援方法およびコミュニケーションサーバ | |
JP2017111643A (ja) | ウェブ会議システム、情報処理方法、プログラム | |
CN106873994A (zh) | 界面显示方法及装置 | |
JP6327252B2 (ja) | 分析対象決定装置及び分析対象決定方法 | |
JP6365304B2 (ja) | 会話分析装置及び会話分析方法 | |
JP7398416B2 (ja) | 発声状態認識システム、発声状態認識装置、発声状態認識方法及びプログラム | |
JP7287006B2 (ja) | 話者決定装置、話者決定方法、および話者決定装置の制御プログラム | |
CN111312241A (zh) | 一种无人导购方法、终端以及存储介质 | |
CN114067842B (zh) | 客户满意度鉴别方法及装置、存储介质及电子设备 | |
JP7213857B2 (ja) | 会議支援装置、会議支援方法および会議支援プログラム | |
DK180951B1 (en) | System with post-conversation representation, electronic device, and related methods | |
JP6596913B2 (ja) | スケジュール作成装置、スケジュール作成方法、プログラム | |
WO2023033033A1 (ja) | コミュニケーション支援システム、情報処理装置、コミュニケーション支援方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220401 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230117 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230310 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230425 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230808 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231003 |
|
RD13 | Notification of appointment of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7433 Effective date: 20231004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20231005 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20231030 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7398416 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |