JP2020035030A - 会議評価装置、会議評価方法及び会議評価プログラム - Google Patents
会議評価装置、会議評価方法及び会議評価プログラム Download PDFInfo
- Publication number
- JP2020035030A JP2020035030A JP2018158817A JP2018158817A JP2020035030A JP 2020035030 A JP2020035030 A JP 2020035030A JP 2018158817 A JP2018158817 A JP 2018158817A JP 2018158817 A JP2018158817 A JP 2018158817A JP 2020035030 A JP2020035030 A JP 2020035030A
- Authority
- JP
- Japan
- Prior art keywords
- conference
- score
- evaluation device
- meeting
- audio waveform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 107
- 238000012545 processing Methods 0.000 claims abstract description 59
- 238000004364 calculation method Methods 0.000 claims abstract description 28
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000002360 preparation method Methods 0.000 claims abstract description 20
- 230000008569 process Effects 0.000 claims description 11
- 230000006870 function Effects 0.000 claims description 6
- 230000004913 activation Effects 0.000 claims description 3
- 238000012217 deletion Methods 0.000 abstract 1
- 230000037430 deletion Effects 0.000 abstract 1
- 239000013598 vector Substances 0.000 description 17
- 238000004891 communication Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000012854 evaluation process Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 238000012804 iterative process Methods 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
そこで、本発明は、会議の質を定量的に評価することを目的とする。
その他の手段については、発明を実施するための形態のなかで説明する。
図1に沿って、本実施形態の会議評価装置が使用される環境を説明する。ある会議室に、円形の会議テーブル43及び室内ディスプレイ41が配置されている。会議テーブル43上には、6台のマイクロフォン44a〜44fが配置されている。会議テーブル43の周りの座席(図示せず)に6名の参加者P01〜P06が腰掛ける。参加者P01〜P06に対して、マイクロフォン44a〜44fが1対1に割り当てられている。
図2に沿って、会議評価装置1の構成を説明する。会議評価装置1は、一般的なコンピュータであり、中央制御装置11、マウス、キーボード等の入力装置12、卓上ディスプレイ等の出力装置13、主記憶装置14、補助記憶装置15及び通信装置16を備える。これらは、バスで相互に接続されている。補助記憶装置15は、会議情報31、音声情報32、処理後音声情報33、スコア情報34及び学習情報35(いずれも詳細後記)を格納している。
図3に沿って、会議情報31を説明する。会議情報31においては、会議ID欄101に記憶された会議IDに関連付けて、議題欄102には議題が、日時欄103には日時が、場所欄104には場所が、議決要否欄105には議決要否フラグが、参加者欄106には参加者ID、氏名及び役割が、入室時刻欄107には入室時刻が、退室時刻欄108には退室時刻が記憶されている。
議題欄102の議題は、会議の議題である。
日時欄103の日時は、会議の予定開始時刻及び予定終了時刻を示す年月日時分である。
場所欄104の場所は、会議が行われる場所である。
参加者欄106の参加者ID(欄106a)は、参加者を一意に特定する識別子である。氏名(欄106b)は、参加者の氏名である。役割(欄106c)は、参加者が果たす役割である。役割のうち、“進行役”は、議事の進行役を示し、“提案者”は、会議を行うことを提案した者(招集者)を示す。当該欄が空欄である場合、その参加者は、進行役でも提案者でもない参加者である。
退室時刻欄108の退室時刻は、参加者が会議を退出した時刻の年月日時分である。
入室時刻及び退室時刻は、例えば、参加者がマイクロフォン44a〜44fのスイッチをオン/オフした時刻であってもよい。会議に参加する予定であったにもかかわらず、参加しなかった者の入室時刻欄107及び入室時刻欄108は、空欄である。“#”は、異なる値を省略的に示している。
図4に沿って、音声情報32を説明する。音声情報32においては、会議ID欄111に記憶された会議IDに関連付けて、参加者ID欄112には参加者IDが、音声データ欄113には音声データが記憶されている。
会議ID欄111の会議IDは、図3の会議IDと同じである。
参加者ID欄112の参加者IDは、図3の参加者IDと同じである。
・会議M01には、6名の参加者P01〜P06が参加した。
・6名の参加者は、時点t1にマイクロフォンのスイッチをオンにし、時点t100にスイッチをオフにした。
・時点t1〜t100の期間において、会議評価装置1は、マイクロフォン44a〜44fを介して、6名分の音声データを取得した。
・6名の参加者のうち誰がどのタイミングで発言したかは不明である。これを知るためには、各参加者について、vnの値がどのタイミングで“0”以外の値になったかを知る必要がある。
図5に沿って、処理後音声情報33を説明する。処理後音声情報33においては、会議ID欄121に記憶された会議IDに関連付けて、参加者ID欄122には参加者IDが、処理後音声データ欄123には処理後音声データが記憶されている。
会議ID欄121の会議IDは、図3の会議IDと同じである。
参加者ID欄122の参加者IDは、図3の参加者IDと同じである。
〈1〉会議評価装置1は、図4の音声データからノイズを除去した。例えば、会議評価装置1は、時系列の音声波形に対して高速フーリエ変換を行い周波数系列の波形を作成する。会議評価装置1は、周波数系列の波形から所定の閾値よりも高い高周波成分を除去した後、高速逆フーリエ変換を行い時系列の音声波形に戻した。
会議の品質を評価する観点は“評価側面”と呼ばれる。評価側面は5つ存在し、これらは、“定時性”、“参加状態”、“活性化状態”、“議決の有無”及び“発言の質”である。それぞれの評価側面について、1又は複数の有効性指標が対応する。個々の有効性指標の値に対して重みを乗算したものは、“スコア”と呼ばれる。スコアは、有効性指標ごとに算出される。個々のスコアの総和は、“合計スコア”と呼ばれる。合計スコアは、会議の品質の全体を評価する値である(詳細後記)。以下に、有効性指標の具体例を、対応する評価側面ごとに説明する。この説明のなかで、有効性指標は、“・・・値”又は“・・・回数”と表現されているものである。
図6に沿って、スコア情報34を説明する。スコア情報34においては、評価側面欄131に記憶された評価側面に関連付けて、有効性指標欄132には有効性指標が、重み欄133には重みが、スコア欄134にはスコアが記憶されている。
評価側面欄131の評価側面は、前記した評価側面である。
有効性指標欄132の有効性指標は、前記した有効性指標である。
例えば、ある企業において、会議が合計スコアによって定量的に評価されることが定着すると、参加者は合計スコアを見かけ上高くするように会議を演出するかも知れない。例えば、参加者は、あまり意味のない“はい”、“いいえ”を多く発言するかもしれない。
図7に沿って、学習情報35を説明する。学習情報35は、前記した教師付き学習データの一例である。学習情報35においては、評価側面欄141に記憶された評価側面に関連付けて、有効性指標欄142には有効性指標が、学習データ欄143には学習データが記憶されている。
評価側面欄141の評価側面は、図6の評価側面と同じである。
有効性指標欄142の有効性指標は、図6の有効性指標と同じである。
説明のわかり易さのため、会議評価装置1が学習情報35を活用する具体的な処理については、次に説明する会議評価処理手順の後で、重み学習処理手順として説明する。
図8に沿って、会議評価処理手順を説明する。
ステップS201において、会議評価装置1の入力処理部21は、会議情報31(図3)を受け付ける。具体的には、第1に、入力処理部21は、ユーザが入力装置12を介して処理対象となる会議を特定する会議IDを入力するのを受け付ける。
第2に、入力処理部21は、補助記憶装置15に既に記憶されている会議情報31から、ステップS201の“第1”において入力された会議IDが特定するレコードを取得する。入力処理部21は、ユーザが入力装置12を介して会議情報31を新たに入力するのを受け付けてもよい。
第2に、音声データ準備処理部23は、新たなレコードの参加者ID欄122及び処理後音声データ欄123に、参加者ID及び処理後音声データ(ノイズを除去した発話部分の音声データ)を記憶する。
第3に、スコア算出部24は、有効性指標ごとのスコアを合計することによって合計スコアを算出する。
第2に、スコア算出部24は、定時性以外の評価側面についてのスコアを算出する。このとき、スコア算出部24は、すべての時間帯に亘って通算でスコアを算出し直してもよいし、算出済の時間帯ごとのスコアの平均値を取得してもよい。
第3に、スコア算出部24は、有効性指標ごとのスコアを合計することによって合計スコアを算出する。
図9に沿って、重み学習処理手順を説明する。
ステップS301において、会議評価装置1の重み学習部26は、学習情報35(図7)を受け付ける。具体的には、重み学習部26は、補助記憶装置15に既に記憶されている学習情報35を取得する。重み学習部26は、ユーザが入力装置12を介して学習情報35を新たに入力するのを受け付けてもよい。ここで取得(入力)された学習情報35には、多数回分の有効性指標の値(#)が既に記憶されているが、終了時の合計スコア(T1等)は未だ記憶されていない。
第2に、ステップS302の“第1”において受け付けた合計スコアTnを学習情報35の最下行に記憶し、学習情報35を完成させる。
第2に、重み学習部26は、ステップS305の“第1”において2乗した値をすべての過去の会議について合計し、合計した値を、ステップS303において生成した重みベクトルの評価値とする。評価値が小さいほど、重みベクトルの評価は高い。
第2に、重み学習部26は、スコア情報34(図6)の重みを、ステップS306の“第1”において特定した重みベクトルの成分で更新する。その後、重み学習処理手順を終了する。
繰り返し処理中のステップS303において、重み学習部26は、重みベクトルを生成する際に、遺伝的アルゴリズムを使用してもよい。すなわち、重み学習部26は、評価が高い2つの重みベクトル(親)を交叉させることによって新たな重みベクトル(子)を生成してもよい。
本実施形態の会議評価装置の効果は以下の通りである。
(1)会議評価装置は、会議の質を定量的に評価することができる。
(2)会議評価装置は、データ量を削減した音声データを分析対象とすることができる。
(3)会議評価装置は、会議の有効性指標を所定の重みで評価することができる。
(4)会議評価装置は、会議中に会議の評価の推移を表示することができる。
(5)会議評価装置は、定時性及び参加状態を含む会議の複数の側面を評価することができる。
(6)会議評価装置は、ユーザが重みを決定することを可能にする。
(7)会議評価装置は、ユーザの評価方針に沿う重みを学習することができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしもすべての制御線や情報線を示しているとは限らない。実際には殆どすべての構成が相互に接続されていると考えてもよい。
11 中央制御装置
12 入力装置
13 出力装置(ディスプレイ)
14 主記憶装置
15 補助記憶装置
16 通信装置
21 入力処理部
22 音声データ取得部
23 音声データ準備処理部
24 スコア算出部
25 表示処理部
26 重み学習部
31 会議情報
32 音声情報
33 処理後音声情報
34 スコア情報
35 学習情報
41 室内ディスプレイ
42 マイクロフォン制御装置
43 会議テーブル
44a〜44f マイクロフォン
その他の手段については、発明を実施するための形態のなかで説明する。
Claims (9)
- 会議の参加者の音声波形を取得する音声データ取得部と、
前記取得した音声波形に基づき、前記会議の有効性を示すスコアを算出するスコア算出部と、
前記算出したスコアをディスプレイに表示する表示処理部と、
を備えることを特徴とする会議評価装置。 - 前記取得した音声波形からノイズを除去し、前記ノイズを除去した後の音声波形から発言のない部分を削除する準備処理を行う音声データ準備処理部を備え、
前記スコア算出部は、
前記準備処理を行った後の音声波形に基づき、前記スコアを算出すること、
を特徴とする請求項1に記載の会議評価装置。 - 前記スコア算出部は、
前記準備処理を行った後の音声波形を解析することによって所定の有効性指標を算出し、
前記算出した有効性指標に対して所定の重みを乗算することによって前記スコアを算出すること、
を特徴とする請求項2に記載の会議評価装置。 - 前記スコア算出部は、
前記会議の時間帯ごとに前記スコアを算出し、
前記表示処理部は、
前記時間帯ごとに前記スコアを前記ディスプレイに表示すること、
を特徴とする請求項1に記載の会議評価装置。 - 前記有効性指標は、
前記会議についての、定時性、参加状態、活性化状態、議決の有無、及び、発言の質のうちのいずれかに属するものであること、
を特徴とする請求項3に記載の会議評価装置。 - ユーザが前記重みを入力するのを受け付ける入力処理部を備えること、
を特徴とする請求項3に記載の会議評価装置。 - 過去の前記会議についての前記有効性指標の値、及び、ユーザから受け付けた当該会議のスコアを学習データとして、前記重みを学習する重み学習部を備えること、
を特徴とする請求項3に記載の会議評価装置。 - 会議評価装置の音声データ取得部は、
会議の参加者の音声波形を取得し、
前記会議評価装置のスコア算出部は、
前記取得した音声波形に基づき、前記会議の有効性を示すスコアを算出し、
前記会議評価装置の表示処理部は、
前記算出したスコアをディスプレイに表示すること、
を特徴とする会議評価装置の会議評価方法。 - 会議評価装置の音声データ取得部に対し、
会議の参加者の音声波形を取得する処理を実行させ、
前記会議評価装置のスコア算出部に対し、
前記取得した音声波形に基づき、前記会議の有効性を示すスコアを算出する処理を実行させ、
前記会議評価装置の表示処理部に対し、
前記算出したスコアをディスプレイに表示するする処理を実行させること、
を特徴とする会議評価装置を機能させるための会議評価プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018158817A JP6634128B1 (ja) | 2018-08-28 | 2018-08-28 | 会議評価装置、会議評価方法及び会議評価プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018158817A JP6634128B1 (ja) | 2018-08-28 | 2018-08-28 | 会議評価装置、会議評価方法及び会議評価プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6634128B1 JP6634128B1 (ja) | 2020-01-22 |
JP2020035030A true JP2020035030A (ja) | 2020-03-05 |
Family
ID=69166713
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018158817A Active JP6634128B1 (ja) | 2018-08-28 | 2018-08-28 | 会議評価装置、会議評価方法及び会議評価プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6634128B1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102345666B1 (ko) * | 2020-09-28 | 2021-12-31 | 주식회사 어반컴플렉스 | Ai를 이용한 무인 회의 영상 제공 시스템 |
JP2023173675A (ja) * | 2022-05-26 | 2023-12-07 | 株式会社日立ソリューションズ東日本 | 会議支援方法および会議支援装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006279111A (ja) * | 2005-03-25 | 2006-10-12 | Fuji Xerox Co Ltd | 情報処理装置、情報処理方法およびプログラム |
JP2008262046A (ja) * | 2007-04-12 | 2008-10-30 | Hitachi Ltd | 会議可視化システム、会議可視化方法、及び集計処理サーバ |
JP2009031766A (ja) * | 2007-07-02 | 2009-02-12 | Canon Inc | 音声認識装置及びその制御方法 |
JP2013031009A (ja) * | 2011-07-28 | 2013-02-07 | Fujitsu Ltd | 情報処理装置、ダイジェスト生成方法、及びダイジェスト生成プログラム |
US20150154291A1 (en) * | 2013-12-04 | 2015-06-04 | Dell Products, L.P. | Managing Behavior in a Virtual Collaboration Session |
JP2016206355A (ja) * | 2015-04-20 | 2016-12-08 | 本田技研工業株式会社 | 会話解析装置、会話解析方法及びプログラム |
JP2017004270A (ja) * | 2015-06-10 | 2017-01-05 | 日本電信電話株式会社 | 会議支援システム、及び会議支援方法 |
JP2018018136A (ja) * | 2016-07-25 | 2018-02-01 | アスクル株式会社 | 電子商取引システム |
-
2018
- 2018-08-28 JP JP2018158817A patent/JP6634128B1/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006279111A (ja) * | 2005-03-25 | 2006-10-12 | Fuji Xerox Co Ltd | 情報処理装置、情報処理方法およびプログラム |
JP2008262046A (ja) * | 2007-04-12 | 2008-10-30 | Hitachi Ltd | 会議可視化システム、会議可視化方法、及び集計処理サーバ |
JP2009031766A (ja) * | 2007-07-02 | 2009-02-12 | Canon Inc | 音声認識装置及びその制御方法 |
JP2013031009A (ja) * | 2011-07-28 | 2013-02-07 | Fujitsu Ltd | 情報処理装置、ダイジェスト生成方法、及びダイジェスト生成プログラム |
US20150154291A1 (en) * | 2013-12-04 | 2015-06-04 | Dell Products, L.P. | Managing Behavior in a Virtual Collaboration Session |
JP2016206355A (ja) * | 2015-04-20 | 2016-12-08 | 本田技研工業株式会社 | 会話解析装置、会話解析方法及びプログラム |
JP2017004270A (ja) * | 2015-06-10 | 2017-01-05 | 日本電信電話株式会社 | 会議支援システム、及び会議支援方法 |
JP2018018136A (ja) * | 2016-07-25 | 2018-02-01 | アスクル株式会社 | 電子商取引システム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102345666B1 (ko) * | 2020-09-28 | 2021-12-31 | 주식회사 어반컴플렉스 | Ai를 이용한 무인 회의 영상 제공 시스템 |
JP2023173675A (ja) * | 2022-05-26 | 2023-12-07 | 株式会社日立ソリューションズ東日本 | 会議支援方法および会議支援装置 |
JP7421597B2 (ja) | 2022-05-26 | 2024-01-24 | 株式会社日立ソリューションズ東日本 | 会議支援方法および会議支援装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6634128B1 (ja) | 2020-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108962282B (zh) | 语音检测分析方法、装置、计算机设备及存储介质 | |
US9070369B2 (en) | Real time generation of audio content summaries | |
JP6210239B2 (ja) | 会話解析装置、会話解析方法及びプログラム | |
US11682401B2 (en) | Matching speakers to meeting audio | |
US9412371B2 (en) | Visualization interface of continuous waveform multi-speaker identification | |
CN110874716A (zh) | 面试测评方法、装置、电子设备及存储介质 | |
Fan et al. | Emo-soundscapes: A dataset for soundscape emotion recognition | |
US10743104B1 (en) | Cognitive volume and speech frequency levels adjustment | |
CN107210034A (zh) | 选择性会议摘要 | |
US11114111B2 (en) | Dialogue analysis | |
US20130246064A1 (en) | System and method for real-time speaker segmentation of audio interactions | |
CN107210036A (zh) | 会议词语云 | |
Alexander et al. | The effect of mismatched recording conditions on human and automatic speaker recognition in forensic applications | |
JP6634128B1 (ja) | 会議評価装置、会議評価方法及び会議評価プログラム | |
US11735208B2 (en) | Systems and methods for classification and rating of calls based on voice and text analysis | |
US20230154457A1 (en) | Communication System And Related Methods | |
JP2020160425A (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
JP5267269B2 (ja) | 会議管理装置及び方法 | |
Zhou et al. | The role of different types of conversations for meeting success | |
WO2019130816A1 (ja) | 情報処理装置及び評価方法 | |
JP2011065403A (ja) | 対話型性格特徴判定装置とその方法と、プログラム | |
JP2020160336A (ja) | 評価システム、評価方法、及びコンピュータプログラム。 | |
JP2023162597A (ja) | オンライン対話の支援方法、当該支援方法をプロセッサーに実行させるプログラム、および、オンライン対話の支援システム | |
TW202109506A (zh) | 語音互動探知使用者行為與屬性特徵之方法 | |
WO2019130818A1 (ja) | 情報処理装置及びグループ再構成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190314 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190314 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190724 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190813 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191015 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6634128 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |