JP2022117756A - タグ付け方法およびタグ付け装置 - Google Patents

Abstract

【課題】予め設定されたタグリストに基づいて、会議の内容に関連する適切なタグを会議に付けるタグ付け方法を提供する。【解決手段】複数の端末装置による会議を提供するサーバのタグ付け方法であって、前記複数の端末装置から前記会議における前記複数の端末装置それぞれの音声データを取得し、前記音声データの音声認識結果および予め設定されたタグ候補を含むタグリストに基づいて、前記会議に付けるタグを決定し、前記会議を識別する会議識別情報と前記決定されたタグとを対応付けて記憶部に記憶させる、処理を備えるタグ付け方法。【選択図】図１３

Description

本発明は、タグ付け方法およびタグ付け装置に関する。

従来、インターネット等のネットワークを用いて、複数の参加者間での会議等を実現するシステムが知られている。そして、このような会議において、音声認識を用いた文字起こしにより議事録の作成が行われている。

テレビ会議などのマルチメディア情報を用いた会議システムにおいて、動画入力装置や音声入力装置等から入力されるマルチメディア情報からキーワードを抽出することにより検索用ファイルを作成し、会議録作成時には、検索用ファイルを参照し、重要な項目の会った場面を検索編集することにより会議録を短時間で簡便に編集できる技術が知られている（例えば、特許文献１参照）。

また、会議中の音声及び／又は画像を入力データとして取得し、入力データから会議中に強調された部分を検索し、強調された部分に基づいて、出力データを形成することで、会議中に強調された部分を明確に示すことができる技術が知られている（例えば、特許文献２参照）。

特開平０７－１８２３６５号公報 特許６５６１９２７号公報

複数の会議を開催していると、後で内容を確認しようとしても、どの会議で何を話していたかが分からなくなる場合がある。また、ある内容に関する会議の議事録を確認したい場合、会議タイトルから当該内容の会議を検索しようとしても、タイトルが適切に設定されていないことが多く、その場合、所望の会議を見つけることができず、適切な情報取得が困難になる。

本発明の一態様は、予め設定されたタグリストに基づいて、会議の内容に関連する適切なタグを会議に付けるタグ付け方法を提供することを目的とする。

本発明の一態様に係るタグ付け方法は、複数の端末装置による会議を提供するサーバのタグ付け方法であって、前記会議における前記複数の端末装置それぞれの音声データを取得し、前記音声データの音声認識結果および予め設定されたタグ候補を含むタグリストに基づいて、前記会議に付けるタグを決定し、前記会議を識別する会議識別情報と前記決定されたタグとを対応付けて記憶部に記憶させる、処理を備える
本発明の一態様に係るタグ付け装置は、複数の端末装置による会議を提供するタグ付け装置であって、前記複数の端末装置から前記会議における前記複数の端末装置それぞれの音声データを取得する取得部と、前記音声データの音声認識結果および予め設定されたタグ候補を含むタグリストに基づいて、前記会議に付けるタグを決定するタグ決定部と、前記会議を識別する会議識別情報と前記決定されたタグとを対応付けて記憶部に記憶させるタグ付け部と、を備える。

実施の形態に係る通信システムの構成の一例を示す図である。 実施の形態に係る端末装置のハードウェア構成図の一例である。 実施の形態に係るサーバのハードウェア構成図の一例である。 実施の形態に係る端末装置の構成の一例を示す図である。 実施の形態に係るサーバの構成の一例を示す図である。 名詞辞書の一例である。 関連語辞書の一例である。 類義語辞書の一例である。 テーマ汎用辞書の一例である。 タグリストの一例である。 会議タグの一例である。 実施の形態に係るタグリストの作成処理のシーケンス図の一例である。 実施の形態に係るタグ付け処理のシーケンス図の一例である。 実施の形態に係るタグ付け処理のシーケンス図の変形例である。 実施の形態に係る会議終了後のタグ付け処理のシーケンス図の一例である。

以下、実施の形態について、図面を参照しつつ説明する。なお、図面については、同一又は同等の要素には同一の符号を付し、重複する説明は省略する。

図１は、実施の形態に係る通信システムの構成の一例を示す図である。

通信システム１００は、複数の端末装置１０１およびサーバ２０１を有する。複数の端末装置１０１およびサーバ２０１は、ＷＡＮ（Wide Area Network）またはＬＡＮ（Local Area Network）等のネットワーク３０１を介して接続され、互いに通信可能である。

通信システム１００は、ネットワーク３０１を介した会議に用いられるシステムである。尚、ここでの会議とは、複数のユーザによるコミュニケーションが必要となる場面を広く表す。即ち、本実施形態における会議とは、複数のユーザが意見交換、審議、意思決定を行う場である狭義の会議に限定されず、セミナーや講演会等の形態を含んでもよい。セミナーは、所定のテーマに沿った勉強会である。講演会は、講師による発表を聴衆が聴く場である。その他、本実施形態の会議は、所与の参加者が発話を行い、他の参加者が当該発話を聞く可能性のある種々の場面を含むことが可能である。

端末装置１０１は、端末装置１０１が有するマイクに入力されたユーザの音声のデータ（音声データ）をサーバ２０１に送信する。

サーバ２０１は、端末装置１０１から受信した音声データに対して音声認識処理を行い、音声認識処理の結果を議事録として記憶する。さらに、サーバ２０１は、音声認識結果と予め用意されたキーワードを含む事前情報とに基づいて、議事録にタグ付けを行う。タグ付けの処理の詳細については後述する。サーバ２０１は、タグ付け装置の一例である。

尚、通信システム１００の構成は図１に限定されず、他の構成を追加する等の変形実施が可能である。例えば、図１では端末装置１０１が２つである例を示したが、端末装置１０１の数は３以上であってもよい。

図２は、実施の形態に係る端末装置のハードウェア構成図の一例である。

端末装置１０１は、プロセッサ１９１、メモリ１９２、ディスプレイ１９３、通信インタフェース１９４、キーボード１９５、ポインティングデバイス１９６、およびマイク１９７を有する。プロセッサ１９１、メモリ１９２、ディスプレイ１９３、通信インタフェース１９４、キーボード１９５、ポインティングデバイス１９６、およびマイク１９７は、バス１９８を介して互いに接続されている。端末装置１０１は、例えば、ＰＣ（パーソナルコンピュータ）、スマートフォン、またはタブレット端末などのコンピュータである。

プロセッサ１９１は、例えば、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＤＳＰ（Digital Signal Processor）等、各種のプロセッサを用いることが可能である。

メモリ１９２は、例えば、ＳＲＡＭ（Static Random Access Memory）、ＤＲＡＭ（Dynamic Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリなどの半導体メモリであってもよいし、レジスタであってもよいし、磁気記憶装置であってもよいし、光学式記憶装置であってもよい。メモリ１９２は、端末装置１０１で利用されるデータやプログラムを記憶し、プロセッサ１９１がプログラムをメモリ１９２から読み出して実行することにより、後述の処理部１１１として動作する。

ディスプレイ１９３は、各種の情報を表示するためのものであり、例えば液晶ディスプレイや有機ＥＬ（Electro Luminescence）ディスプレイなどにより実現できる。

通信インタフェース１９４は、ネットワーク３０１を介した通信を行うためのインタフェースであり、例えばアンテナ、ＲＦ回路、及びベースバンド回路を含む。

キーボード１９５は、複数のキーを有し、当該キーに対する操作が行われることによって、対応する信号を出力する操作インタフェースである。なおキーボードの具体的な形状、キー配置、接続方法等は種々の変形実施が可能である。

ポインティングデバイス１９６は、ディスプレイ１９３に表示されるポインタを移動させるための操作インタフェースである。ポインティングデバイス１９３は、マウス、ペンタブレット、タッチパッド、トラックボール等、種々のデバイスによって実現できる。

マイク１９７には、ユーザの音声が入力され、入力された音声を電気信号に変換して出力するインタフェースである。尚、端末装置１０１は、プロセッサ１９１からの信号に基づいて、各種の音声を出力する不図示のスピーカを含んでもよい。

図３は、実施の形態に係るサーバのハードウェア構成図の一例である。

サーバ２０１は、プロセッサ２９１、メモリ２９２、および通信インタフェース２９３を有する。プロセッサ２９１、メモリ２９２、および通信インタフェース２９３は、バス２９４を介して互いに接続されている。

プロセッサ２９１は、例えば、ＣＰＵ、ＧＰＵ、ＤＳＰ等、各種のプロセッサを用いることが可能である。

メモリ２９２は、例えば、ＳＲＡＭ、ＤＲＡＭ、ＲＯＭ、フラッシュメモリなどの半導体メモリであってもよいし、レジスタであってもよいし、磁気記憶装置であってもよいし、光学式記憶装置であってもよい。メモリ２９２は、サーバ２０１で利用されるデータやプログラム（ソフトウエア）を記憶し、プロセッサ２９１がプログラムをメモリ２９２から読み出して実行することにより、後述の処理部２１１（音声取得／認識部２１２、会議処理部２１３、およびタグ作成部２１４）として動作する。

通信インタフェース２９３は、ネットワーク３０１を介した通信を行うためのインタフェースであり、例えばアンテナ、ＲＦ回路、及びベースバンド回路を含む。

図４は、実施の形態に係る端末装置の構成の一例を示す図である。

端末装置１０１は、処理部１１１、記憶部１２１、通信部１３１、表示部１４１、操作入力部１５１、および音声入力部１６１を有する。

処理部１１１は、図２のプロセッサ１９１に対応する。処理部１１１は、端末装置１０１の制御を行い、例えば、操作入力部１５１に入力された操作に対応する処理、会議への参加する処理、および音声入力部１６１に入力された音声の音声データを含む参加者データ等を通信部１３１を介してサーバ２０１に送信する処理等を行う。

記憶部１２１は、図２のメモリ１９２に対応する。記憶部１２１は、端末装置１０１で利用されるデータやプログラムを記憶する。

通信部１３１は、図２の通信インタフェース１９４に対応する。通信部１３１は、音声データ等を含む参加者データをサーバ２０１に送信する。

表示部１４１は、図２のディスプレイ１９３に対応する。表示部１４１は、会議の資料等の各種情報を表示する。

操作入力部１５１は、図２のキーボード１９５およびポインティングデバイス１９６のうちの少なくとも１つに対応する。操作入力部１５１には、ユーザにより所定の操作が入力され、当該操作に対応する信号を処理部１１１に出力する。

音声入力部１６１は、図２のマイク１９７に対応する。音声入力部１６１には、ユーザの音声が入力され、入力された音声を電気信号に変換して処理部１１１に出力する。

図５は、実施の形態に係るサーバの構成の一例を示す図である。

サーバ２０１は、処理部２１１、記憶部２２１、および通信部２３１を有する。処理部２１１は、図３のプロセッサ２９１に対応する。記憶部２２１は、図３のメモリ２９２に対応する。通信部２３１は、図３の通信インタフェース２９３に対応する。

処理部２１１は、音声取得／認識部２１２、会議処理部２１３、およびタグ処理部２１４を有する。

音声取得／認識部２１２は、会議の音声データを取得し、音声データに対して音声認識を行う。

会議処理部２１３は、会議作成用のデータに基づいて、端末装置１０１に会議を提供する処理を行う。

タグ処理部２１４は、タグリスト作成部２１５、タグ決定部２１６、およびタグ付け部２１７を有する。タグリスト作成部２１５は、会議に付けられるタグの候補のリストを作成する。タグ決定部２１６は、会議に付けるタグを決定する。タグ付け部２１７は、タグ付け処理を行い、具体的には、例えば、タグ決定部２１６で決定されたタグと、会議を識別する会議ＩＤ（会議識別情報）と、を対応付けて記憶部２２１に記憶させる。タグリスト作成部２１５、タグ決定部２１６、およびタグ付け部２１７の処理の詳細は後述する。

記憶部２２１は、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、テーマ汎用辞書２２５、タグリスト２２６、および会議タグ２２７を記憶する。また、記憶部２２１は、端末装置１０１から受信した音声データを含む会議音声情報（不図示）を記憶する。名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５、例えば、端末装置１０１のユーザまたはサーバ２０１の管理者などにより予め設定され、記憶部２２１に記憶されている。

図６は、名詞辞書の一例である。

名詞辞書２２２は、少なくとも１つの名詞を含む名詞のリストである。名詞辞書２２２の名詞は、例えば、コーパス等から得られる。名詞辞書２２２には、ＩＤと語句とが対応付けられて記載されている。ＩＤは、名詞辞書２２２において、対応する語句に割り当てられた識別情報である。語句は、例えば、人、もの、または場所等の物事の名称である名詞である。

例えば、図６の名詞辞書２２２において、ＩＤ＝１と語句＝東京とが対応付けられて記載されている。

図７は、関連語辞書の一例である。

関連語辞書２２３は、関連する名詞（関連語）がグループ化された情報である。関連語は、例えば、インターネット上での検索において関連語句として提示されるような、何らかの実データに基づいて設定された語句である。関連語辞書２２３には、ＩＤと名詞グループとが対応付けられて記載されている。ＩＤは、関連語辞書２２３において、対応する名詞グループに割り当てられた識別情報である。名詞グループは、関連する名詞のグループである。

例えば、図７の関連語辞書２２３において、ＩＤ＝１と名詞グループ＝東京、コロナ、・・・とが対応付けられて記載されている。

図８は、類義語辞書の一例である。

類義語辞書２２４は、名詞の類義語ごとにグループ化された情報である。類義語は、例えば、シソーラス等から得られる。類義語辞書２２４には、ＩＤと名詞グループとが対応付けられて記載されている。ＩＤは、類義語辞書２２４において、対応する名詞グループに割り当てられた識別情報である。名詞グループは、名詞の類義語のグループである。

例えば、図８の類義語辞書２２４において、ＩＤ＝１と名詞グループ＝在り方、状況、・・・とが対応付けられて記載されている。

図９は、テーマ汎用辞書の一例である。

テーマ汎用辞書２２５は、特定のテーマごとに当該テーマに関する名詞がグループ化された情報である。例えば、あるテーマに関する名詞は、そのテーマでよく使用されるような頻出語句である。テーマ汎用辞書２２５には、ＩＤとテーマと名詞グループとが対応付けられて記載されている。ＩＤは、テーマ汎用辞書２２５において、対応する名詞グループに割り当てられた識別情報である。テーマは、テーマ汎用辞書２２５おいて設定されるビジネス、医療、または金融等の特定の分野を示す。名詞グループは、対応するテーマに関する名詞のグループである。

例えば、図９のテーマ汎用辞書２２５において、ＩＤ＝１とテーマ＝ビジネスと名詞グループ＝ビジネス、企業、ライフワーク、働き方、営業、収入、・・・とが対応付けられて記載されている。すなわち、テーマ汎用辞書２２５には、ビジネスというテーマに関する名詞として、ビジネス、企業、ライフワーク、働き方、営業、および収入などがグループ化されて記載されている。

図１０は、タグリストの一例である。

タグリスト２２６は、会議に付けられるタグの候補のリストである。タグリスト２２６には、会議ＩＤとタグ候補とが対応付けられて記載されている。会議ＩＤは、会議を識別する識別情報である。尚、会議ＩＤは、会議を行う場合に端末装置１０１がアクセスする会議に紐づけられたＵＲＬ等の会議の情報と紐づけられている。タグ候補は、対応する会議ＩＤの会議に付けられるタグの候補の集合である。

例えば、図１０のタグリスト２２６において、会議ＩＤ＝１とタグ候補＝コロナ、ニューノーマル、企業、カンパニー、働き方、在り方、状況、在宅、ビジネス、ライフワーク、働き方、営業、収入、・・・とが対応付けられて記載されている。尚、タグリスト２２６の作成処理およびタグリスト２２６に基づくタグ付け処理の詳細は後述する。

図１１は、会議タグの一例である。

会議タグ２２７は、会議に付けられたタグの情報である。会議タグ２２７には、会議ＩＤ（会議識別情報）とタグとが対応付けられて記載されている。会議ＩＤは、会議を識別する識別情報である。尚、会議ＩＤは、会議を行う場合に端末装置１０１がアクセスする会議のＵＲＬ等の会議を示す情報と紐づけられている。また、会議ＩＤは、会議の議事録または会議の音声データを含む会議音声情報と紐づけられていてもよい。タグは、対応する会議ＩＤの会議に付けられたタグである。

例えば、図１１の会議タグ２２７において、会議ＩＤ＝１とタグ＝ニューノーマル、企業、・・・とが対応付けられて記載されている。すなわち、会議ＩＤ＝１に対応する会議には、タグとして、ニューノーマル、企業、・・・がタグ付けされている。

以下、実施の形態に係る通信システム１００の処理の流れについて説明する。先ず、タグリストの作成の処理について説明する。

図１２は、実施の形態に係るタグリストの作成処理のシーケンス図の一例である。

ここで、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５は、端末装置１０１のユーザまたはサーバ２０１の管理者などにより予め設定され、記憶部２２１に記憶されている。

まずユーザは、端末装置１０１を用いて会議を作成する操作を行う。ここでのユーザは、例えば会議の主催者であり、端末装置１０１は当該主催者によって使用される装置である。

ステップＳ５０１において、操作入力部１５１に、例えば主催者により、会議の開始時間、参加者、各参加者に付与される権限等、会議に用いられる設定データを作成する操作が入力される。

ステップＳ５０２において、通信部１３１は、例えば上記設定データを含む会議作成用のデータを、サーバ２０１に送信する。

ステップＳ５０３において、通信部２３１は、会議作成用のデータを端末装置１０１から受信する。

ステップＳ５０４において、会議処理部２１３は、受信した会議作成用のデータに基づいて、端末装置１０１に会議を提供する処理を行う。具体的には、会議処理部２１３は、会議を識別する会議ＩＤ、会議用のＵＲＬ（Uniform Resource Locator）（会議ＵＲＬ）、およびパスワード等を含む会議に参加するためのデータを生成し、会議の参加者（主催者も含む）として指定された端末装置１０１に会議に参加するためのデータを通信部２３１を介して送信する。そして、通信部１３１は、サーバ２０１から会議に参加するためのデータを受信する。尚、会議ＵＲＬは、会議を提供するサーバ２０１を示す情報を含む。

ステップＳ５０５において、操作入力部１５１に、例えば主催者により、会議のタイトルおよび会議資料を設定する操作が入力される。尚、会議資料は、会議の開始後に設定してもよい。また、会議資料には、文章（テキスト）が含まれる。また、会議資料は、例えば、記憶１２１に予め記憶されている。

ステップＳ５０６において、通信部１３１は、設定された会議のタイトルおよび会議資料を、サーバ２０１に送信する。そして、通信部２３１は、会議のタイトルおよび会議資料を端末装置１０１から受信し、会議処理部２１３は会議のタイトルおよび会議資料を会議処理部２１３に送信する。

ステップＳ５０７において、会議処理部２１３は、通信部２３１から会議のタイトルおよび会議資料を受信する。

ステップＳ５０８において、会議処理部２１３は、受信した会議のタイトルおよび会議資料に基づく、タグリスト２２６の作成をタグ処理部２１４に指示する。

ステップＳ５０９～Ｓ５１１において、タグリスト作成部２１５は、タグリスト２２６の作成の指示を受信すると、会議のタイトル、会議資料、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５に基づいて、タグリスト２２６の作成を行う。

具体的には、ステップＳ５０９において、タグリスト作成部２１５は、会議のタイトルおよび会議資料に含まれる文章に対して形態素解析を行い、会議のタイトルおよび会議資料に含まれる文章を複数の単語に分割し、各単語の品詞を判定する。そして、タグリスト作成部２１５は、形態素解析の結果に基づいて、会議のタイトル内の名詞を検索キーとして、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５を検索する。さらに、タグリスト作成部２１５は、会議資料の含まれる文章内の名詞を検索キーとして、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５を検索する。

ステップＳ５１０において、タグリスト作成部２１５は、検索結果として該当キーワードを取得する。具体的には、タグリスト作成部２１５は、名詞辞書２２２において、会議のタイトル内の名詞と一致する語句を該当キーワードとして取得する。さらに、タグリスト作成部２１５は、関連語辞書２２３において、会議のタイトル内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグリスト作成部２１５は、類義語辞書２２４において、会議のタイトル内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグリスト作成部２１５は、テーマ汎用辞書２２５において、会議のタイトル内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。

さらに、タグリスト作成部２１５は、名詞辞書２２２において、会議資料の含まれる文章内の名詞と一致する語句を該当キーワードとして取得する。さらに、タグリスト作成部２１５は、関連語辞書２２３において、会議資料の含まれる文章内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグリスト作成部２１５は、類義語辞書２２４において、会議資料の含まれる文章内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグリスト作成部２１５は、テーマ汎用辞書２２５において、会議資料の含まれる文章内の名詞と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。

ステップＳ５１１において、タグリスト作成部２１５は、ステップＳ５１０で取得した該当キーワードをタグ候補として、ステップＳ５０４で生成した会議ＩＤと対応付けて、タグリスト２２６に登録する。

具体的には、例えば、会議のタイトルが「ニューノーマルにおける企業の在り方」であり、会議ＩＤ＝１である場合、ステップＳ５０９の形態素解析により、「ニューノーマル」、「企業」、および「在り方」が名詞として判定される。そして、タグリスト作成部２１５は、「ニューノーマル」、「企業」、および「在り方」のそれぞれを検索キーとして、図６の名詞辞書２２２を検索し、該当キーワードとして「ニューノーマル」、「企業」、および「在り方」を取得する。

さらに、タグリスト作成部２１５は、「ニューノーマル」を検索キーとして、図７の関連語辞書２２３を検索し、該当キーワードとして「コロナ」、「ニューノーマル」、「働き方」、「在宅」、・・・を取得する。尚、タグリスト作成部２１５は、「企業」および「在り方」のそれぞれを検索キーとして、図７の関連語辞書２２３を検索し、このときの検索結果は無しである（すなわち、該当キーワードは取得されない）。

さらに、タグリスト作成部２１５は、「企業」を検索キーとして、図８の類義語辞書２２４を検索し、該当キーワードとして「企業」、「カンパニー」、・・・を取得する。さらに、タグリスト作成部２１５は、「在り方」を検索キーとして、図８の類義語辞書２２４を検索し、該当キーワードとして「在り方」、「状況」、・・・を取得する。尚、タグリスト作成部２１５は、「ニューノーマル」を検索キーとして、図８の類義語辞書２２４を検索し、このときの検索結果は無しである。

さらに、タグリスト作成部２１５は、「企業」を検索キーとして、図９のテーマ汎用辞書２２５検索し、該当キーワードとして「ビジネス」、「企業」、「ライフワーク」、「働き方」、「営業」、「収入」・・・を取得する。尚、タグリスト作成部２１５は、「ニューノーマル」および「在り方」のそれぞれを検索キーとして、図９のテーマ汎用辞書２２５検索し、このときの検索結果は無しである。

そして、ステップＳ５１１において、タグリスト作成部２１５は、上記取得した該当キーワードを会議ＩＤ＝１と対応付けて、タグリスト２２６に登録し、図１０に示すようなタグリスト２２６が作成される。

次に会議に対するタグ付けの処理について説明する。先ず、会議の最中にリアルタイムでタグ付け処理を行う場合について説明する。

図１３は、実施の形態に係るタグ付け処理のシーケンス図の一例である。

ここで、図１３のタグ付け処理は、図１２のタグリストの作成処理の後に行われるものとする。すなわち、図１２の処理により予めタグリスト２２６が作成されて記憶部２２１に記憶されており、会議の参加者の端末装置１０１は、ステップＳ５０４で生成された会議に参加するためのデータを受信済みである。

ステップＳ６０１において、操作入力部１５１に、会議の開始後に例えば会議の参加者により、会議ＵＲＬにアクセスして会議に参加要求する操作が入力される。

ステップＳ６０２において、通信部１３１は、会議に参加するためのデータを用いて、会議への参加要求を送信する。また、参加要求には、会議ＵＲＬおよびパスワード等が含まれる。そして、通信部２３１は、端末装置１０１から会議への参加要求を受信する。

ステップＳ６０３において、会議処理部２１３は、受信した参加要求に基づいて、会議への参加要求を承認する。会議処理部２１３は、参加要求を承認した場合に、端末装置１０１からの音声データの受信、および、当該端末装置１０１への他の端末装置１０１からの音声データの配信を開始することによって、会議を提供する。

ステップＳ６０４において、会議処理部２１３は、会議を識別する会議ＩＤおよび端末装置１０１を識別する参加者ＩＤを端末装置１０１に通信部２３１を介して送信する。そして通信部１３１は、会議ＩＤおよび参加者ＩＤを受信する。尚、参加者ＩＤは、端末装置１０１ごとに異なる値が割り当てられ、会議の参加者の端末装置１０１に送信される。

上記のステップＳ６０１～Ｓ６０４の処理によって、会議処理部２１３によって会議が提供され、複数の端末装置１０１が、当該会議に参加した状態となる。

会議中は、複数の端末装置１０１は、それぞれ所与のタイミングで参加者データを会議処理部２１３に送信する。参加者データは、参加者の音声の音声データ、会議ＩＤ、および端末装置１０１に割り当てられた参加者ＩＤを含む。会議処理部２１３は、複数の端末装置１０１のそれぞれから受信した参加者データに含まれる音声データを複数の端末装置１０１に配信する。

ステップＳ６０７において、複数の端末装置１０１のうちの所与の端末装置１０１の音声入力部１６１に音声が入力される。

ステップＳ６０８において、通信部１３１は、声入力部１６１入力された音声の音声データ、ステップＳ６０４で受信した会議ＩＤ、および参加者ＩＤを含む参加者データを、会議処理部２１３に送信する。尚、ステップＳ６０７、Ｓ６０８の処理は、例えば会議の中で繰り返し実行されるものである。

ステップＳ６０９において、会議処理部２１３は、通信部１３１を介して受信した参加者データに含まれる音声データを抽出し、音声データおよび音声データに対する音声認識処理の依頼を音声取得／認識部２１２に送信する。さらに、会議処理部２１３は、音声データを会議ＩＤおよび参加者ＩＤと対応付けて記憶部に２２１に記憶させてもよい。

ステップＳ６１０において、音声取得／認識部２１２は、音声データを取得し、音声認識処理の依頼を受信すると、取得した音声データに対して音声認識処理を行い、音声認識結果を会議処理部２１３に送信する。そして、会議処理部２１３は、音声認識結果を受信する。音声認識結果とは、例えば、音声データをテキストに変換した変換結果を表すデータである。また、音声認識処理は、公知の手法を広く適用可能である。さらに、音声取得／認識部２１２は、音声認識結果を会議ＩＤおよび参加者ＩＤと対応付けて、会議の議事録として記憶部２２１に記憶してもよい。

ステップＳ６１１において、会議処理部２１３は、受信した音声認識結果およびタグ付け処理の依頼をタグ処理部２１４に送信する。

ステップＳ６１２において、タグ処理部２１４は、音声認識結果およびタグ付け処理の依頼を受信する。そして、ステップＳ６１２～Ｓ６１６において、タグ処理部２１４は、音声認識結果、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５、およびタグリスト２２６に基づいて、会議へのタグ付け処理を行う。

具体的には、ステップＳ６１２において、タグ決定部２１６は、タグ付け処理の依頼を受信すると、音声認識結果に対して形態素解析を行い、会議のタイトルおよび会議資料に含まれる文章を複数の単語に分割し、各単語の品詞を判定する。そして、タグ決定部２１６は、形態素解析の結果に基づいて、音声認識結果内の名詞を検索キーとして、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５を検索する。

ステップＳ６１３において、タグ決定部２１６は、検索結果として該当キーワードを取得する。具体的には、タグ決定部２１６は、名詞辞書２２２において、音声認識結果内の名詞（検索キー）と一致する語句を該当キーワードとして取得する。さらに、タグ決定部２１６は、関連語辞書２２３において、音声認識結果内の名詞（検索キー）と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグ決定部２１６は、類義語辞書２２４において、音声認識結果内の名詞（検索キー）と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。さらに、タグ決定部２１６は、テーマ汎用辞書２２５において、音声認識結果内の名詞（検索キー）と一致する名詞を含む名詞グループを該当キーワードとして取得してもよい。

具体的には、例えば、音声認識結果が「昨今のニューノーマルにおける企業の課題は」である場合、当該音声認識結果内の名詞は「昨今」、「ニューノーマル」、「企業」、「課題」である。タグ決定部２１６は、「昨今」、「ニューノーマル」、「企業」、「課題」のそれぞれを検索キーとして、名詞辞書２２２を検索すると、検索キーと一致する「昨今」、「ニューノーマル」、「企業」、「課題」を該当キーワードとして取得する。また、例えば、タグ決定部２１６は、「ニューノーマル」を検索キーとして、関連語辞書２２３を検索し、図7において「ニューノーマル」が含まれる名詞グループ＝「コロナ」、「ニューノーマル」、「働き方」、「在宅」等を該当キーワードとしてさらに取得してもよい。また、タグ決定部２１６は、「企業」を検索キーとして、類義語辞書２２４を検索し、図８において「企業」が含まれる名詞グループ＝「企業」、「カンパニー」等を該当キーワードとしてさらに取得してもよい。また、タグ決定部２１６は、「企業」を検索キーとして、テーマ汎用辞書２２５を検索し、図９において「企業」が含まれる名詞グループ＝「ビジネス」、「企業」、「ライフワーク」、「働き方」、「営業」、「収入」等を該当キーワードとしてさらに取得してもよい。

ステップＳ６１４において、タグ決定部２１６は、会議ＩＤとステップＳ６１３で取得した該当キーワードを検索キーとして、タグリスト２２６を検索する。

ステップＳ６１５において、タグ決定部２１６は、タグリスト２２６において、会議ＩＤに対応するタグ候補のうち、検索キー（ステップＳ６１３で取得した該当キーワード）と一致するタグ候補を該当キーワードとして取得する。そして、タグ決定部２１６は、取得した該当キーワードを会議に付けるタグとして決定する。

具体的には、例えば、ステップＳ６１３で取得した該当キーワードがニューノーマル」、「企業」等である場合、タグ決定部２１６は、会議ＩＤ＝１とステップＳ６１３で取得した「ニューノーマル」、「企業」等を検索キーとして、タグリスト２２６を検索し、会議ＩＤ＝１に対応するタグ候補のうち、検索キーと一致する「ニューノーマル」、「企業」等を該当キーワードとして取得する。そして、タグ決定部２１６は、取得した該当キーワード＝「ニューノーマル」、「企業」等を会議ＩＤ＝１に対応する会議に付けるタグとして決定する。

ステップＳ６１６において、タグ付け部２１７は、会議ＩＤとステップＳ６１５で取得した該当キーワードとをタグ付けする。具体的には、例えば、タグ付け部２１７は、会議ＩＤとステップＳ６１５で取得した該当キーワードとを対応付けて会議タグ２２７に登録する。具体的には、例えば、タグ付け部２１７は、図１１に示すように、会議ＩＤ＝１とステップＳ６１５で取得した該当キーワード＝「ニューノーマル」、「企業」等を対応付けて会議タグ２２７に登録する。

タグ付けの処理に関して、複数の端末装置１０１の音声データのうち特定の端末装置１０１の音声データに基づいて、タグ付けを行ってもよい。特定の端末装置１０１は、例えば、会議においてプレゼンターに設定された参加者の端末装置１０１である。プレゼンターは、例えば、会議において会議を主導、会議資料を操作、または発表等を行う会議の参加者である。以下、特定の端末装置１０１の音声データに基づいて、タグ付けを行う場合を説明する。

図１４は、実施の形態に係るタグ付け処理のシーケンス図の変形例である。

ステップＳ７０１～７０４のそれぞれの処理は、ステップＳ６０１～Ｓ６１０４のそれぞれの処理と同様であるため、詳細な説明は省略する。

ステップＳ７０５において、操作入力部１５１に、例えば、会議において会議を主導、会議資料を操作、または発表等を行う会議の参加者により、自身をプレゼンターに設定する操作が入力される。プレゼンターに設定された参加者は、例えば、各参加者の端末装置１０１の表示部１４１に表示される会議資料に対する操作（拡大、縮小、またはページの切替など）を行うことができる。プレゼンターに設定された参加者の端末装置１０１は、指定された端末装置１０１の一例である。

ステップＳ７０６において、通信部１３１は、操作入力部１５１に自身をプレゼンターに設定する操作が入力されると、プレゼンターの設定通知、および操作が入力された端末装置１０１がステップＳ７０４で受信した当該端末装置１０１に割り当てられた参加者ＩＤをサーバ２０１に送信する。そして、会議処理部２１３は、通信部２３１を介して受信した参加者ＩＤをプレゼンターであることを示すプレゼンター情報に紐づける。具体的には、例えば、会議処理部２１３は、プレゼンター情報と参加者ＩＤとを対応付けて、またはプレゼンター情報に参加者ＩＤを付加して記憶部２２１に記憶させる。

ステップＳ７０７において、複数の端末装置１０１のうちの所与の端末装置１０１の音声入力部１６１に音声が入力される。

ステップＳ７０８において、通信部１３１は、声入力部１６１入力された音声の音声データ、ステップＳ７０４で受信した会議ＩＤ、および参加者ＩＤを含む参加者データを、会議処理部２１３に送信する。尚、ステップＳ７０７、Ｓ７０８の処理は、例えば会議の中で繰り返し実行されるものである。会議処理部２１３は、音声データ、会議ＩＤ、および参加者ＩＤを含む参加者データを通信部１３１を介して受信する。

ステップＳ７０９において、会議処理部２１３は、受信した参加者データに含まれる音声データを抽出し、音声データおよび音声データに対する音声認識処理の依頼を音声取得／認識部２１２に送信する。さらに、会議処理部２１３は、音声データを会議ＩＤおよび参加者ＩＤと対応付けて記憶部に２２１に記憶させてもよい。

ステップＳ７１０において、音声取得／認識部２１２は、音声データを取得し、音声認識処理の依頼を受信すると、取得した音声データに対して音声認識処理を行い、音声認識結果を会議処理部２１３に送信する。そして、会議処理部２１３は、音声認識結果を受信する。音声認識結果とは、例えば、音声データをテキストに変換した変換結果を表すデータである。また、音声認識処理は、公知の手法を広く適用可能である。さらに、音声取得／認識部２１２は、音声認識結果を会議ＩＤおよび参加者ＩＤと対応付けて、会議の議事録として記憶部２２１に記憶させてもよい。

ステップＳ７１１において、会議処理部２１３は、ステップＳ７０８で受信した参加者ＩＤを音声認識結果に付加し、参加者ＩＤが付加された音声認識結果、プレゼンター情報、およびタグ付け処理の依頼をタグ処理部２１４に送信する。

ステップＳ７１２において、タグ処理部２１４は、参加者ＩＤが付加された音声認識結果、プレゼンター情報、およびタグ付け処理の依頼を受信する。そして、タグ処理部２１４は、ステップＳ７０６でプレゼンター情報に紐づけられた参加者ＩＤが音声認識結果に付加された参加者ＩＤと同じ場合、ステップＳ７１２～Ｓ７１６において、音声認識結果、名詞辞書２２２、関連語辞書２２３、類義語辞書２２４、およびテーマ汎用辞書２２５、およびタグリスト２２６に基づいて、会議へのタグ付け処理を行う。また、タグ処理部２１４は、プレゼンター情報に紐づけられた参加者ＩＤが音声認識結果に付加された参加者ＩＤと異なる場合、ステップＳ７１２～Ｓ７１６におけるタグ付け処理をスキップする。これにより、複数の端末装置のそれぞれから受信した音声データの音声認識結果うち、プレゼンターに設定された参加者の端末装置１０１からの音声データの音声認識結果のみを用いてタグ付け処理を行うことで、プレゼンターに設定された参加者が発言したキーワードを優先してタグ付けできる。

ステップＳ７１３～Ｓ７１６のそれぞれの処理は、ステップＳ６１３～Ｓ６１６のそれぞれの処理と同様であるため、詳細な説明は省略する。

また、タグ付け処理は、図１３に示すように会議中に実施してもよいが、以下に説明するように会議の終了後に実施してもよい。

図１５は、実施の形態に係る会議終了後のタグ付け処理のシーケンス図の一例である。

ここで、図１５のタグ付け処理は、図１２のタグリストの作成処理の後に行われるものとする。すなわち、図１２の処理により予めタグリスト２２６が作成されて記憶部２２１に記憶されており、会議の参加者の端末装置１０１は、ステップＳ５０４で生成された会議に参加するためのデータを受信済みである。

ステップＳ８０１において、操作入力部１５１に、会議の開始後に例えば会議の参加者により、会議ＵＲＬにアクセスして会議に参加要求する操作が入力される。

ステップＳ８０２において、通信部１３１は、会議に参加するためのデータを用いて、会議への参加要求を送信する。また、参加要求には、会議ＵＲＬおよびパスワード等が含まれる。そして、通信部２３１は、端末装置１０１から会議への参加要求を受信する。

ステップＳ８０３において、会議処理部２１３は、受信した参加要求に基づいて、会議への参加要求を承認する。会議処理部２１３は、参加要求を承認した場合に、端末装置１０１からの音声データの受信、および、当該端末装置１０１への他の端末装置１０１からの音声データの配信を開始することによって、会議を提供する。

ステップＳ８０４において、会議処理部２１３は、会議を識別する会議ＩＤおよび端末装置１０１を識別する参加者ＩＤを端末装置１０１に通信部２３１を介して送信する。そして通信部１３１は、会議ＩＤおよび参加者ＩＤを受信する。尚、参加者ＩＤは、端末装置１０１ごとに異なる値が割り当てられ、会議の参加者の端末装置１０１に送信される。

上記のステップＳ８０１～Ｓ８０４の処理によって、会議処理部２１３によって会議が提供され、複数の端末装置１０１が、当該会議に参加した状態となる。

会議中は、複数の端末装置１０１は、それぞれ所与のタイミングで参加者データを会議処理部２１３に送信する。参加者データは、参加者の音声の音声データ、会議ＩＤ、および端末装置１０１に割り当てられた参加者ＩＤを含む。会議処理部２１３は、複数の端末装置１０１のそれぞれから受信した参加者データに含まれる音声データを複数の端末装置１０１に配信する。

ステップＳ８０５において、複数の端末装置１０１のうちの所与の端末装置１０１の音声入力部１６１に音声が入力される。

ステップＳ８０６において、通信部１３１は、声入力部１６１入力された音声の音声データ、ステップＳ８０４で受信した会議ＩＤ、および参加者ＩＤを含む参加者データを、会議処理部２１３に送信する。

ステップＳ８０７において、会議処理部２１３は、通信部１３１を介して受信した参加者データに含まれる音声データを抽出し、会議ＩＤと対応付けて音声蓄積情報として記憶部２２１に蓄積（記憶）させる。これにより、同一の会議中の各端末装置１０１から受信した音声データは、１つの音声蓄積情報として記憶部２２１に記憶される。また、音声蓄積情報において、参加者ＩＤと音声データと対応付けて記憶し、音声蓄積情報に含まれる音声データがどの端末装置１０１から受信した音声データであるか分かるようにしてもよい。尚、ステップＳ８０５～Ｓ８０７の処理は、例えば会議の中で繰り返し実行されるものである。

ステップＳ８０８において、操作入力部１５１に、例えば、会議の主催者により、会議の終了時に会議を終了する操作が入力される。

ステップＳ８０９において、通信部１３１は、操作入力部１５１に会議を終了する操作が入力されると、会議の終了通知をサーバ２０１に送信する。そして、通信部２３１は、会議の終了通知を端末装置１０１から受信する。

ステップＳ８１０において、会議処理部２１３は、記憶部２２１から会議音声情報を取得する。

ステップＳ８１１において、会議処理部２１３は、会議音声情報の含まれる音声データを抽出し、音声データおよび音声データに対する音声認識処理の依頼を音声取得／認識部２１２に送信する。

ステップＳ８１２において、音声取得／認識部２１２は、音声データを取得し、音声認識処理の依頼を受信すると、取得した音声データに対して音声認識処理を行い、音声認識結果を会議処理部２１３に送信する。そして、会議処理部２１３は、音声認識結果を受信する。音声認識結果とは、例えば、音声データをテキストに変換した変換結果を表すデータである。また、音声認識処理は、公知の手法を広く適用可能である。さらに、会議処理部２１３は、音声データを会議ＩＤおよび参加者ＩＤと対応付けて記憶部に２２１に記憶させてもよい。

ステップＳ８１３～Ｓ８１９のそれぞれの処理は、ステップＳ６１１～Ｓ６１６のそれぞれの処理と同様であるため、詳細な説明は省略する。また、ステップＳ８１９において、タグ付け部２１７は、ステップＳ８１７で取得した該当キーワードのうち、ステップＳ８１７で取得した音声認識結果において出現する頻度が高いキーワードを優先して会議ＩＤにタグ付けしてもよい。具体的には、例えば、タグ付け部２１７は、ステップＳ８１７で取得した該当キーワードのうち、音声認識結果において出現頻度が高い順にＮ個（例えばＮ＝５）のキーワードを会議ＩＤにタグ付けしてもよい。

実施の形態に係る通信システムによれば、予め設定されたタグリストに基づいて、会議に対して会議の内容に関連する適切なタグを付けることができる。それにより、ユーザが、ある内容がどの会議で話されたか知りたい場合に、会議の内容に関する適切なタグが会議に付けられているため、当該内容に関する語句を検索キーとして会議タグを検索することで、当該内容に関する会議を容易に見つけることができる。例えば、端末装置１０１からの要求により、サーバ２０１が図１１の会議タグを「ニューノーマル」を検索キーとして検索すると、「ニューノーマル」含むタグに対応する会議ＩＤ＝１が検出され、会議ＩＤ＝１に対応する会議の情報を端末装置１０１に送信し、端末装置１０１が当該情報を表示することにより、端末装置１０１のユーザは会議ＩＤ＝１に対応する会議が「ニューノーマル」に関する会議であることが分かる。さらに、サーバ２０１は、会議ＩＤ＝１に紐づけられた会議の議事録や会議音声情報を端末装置１０１に送信することで、端末装置１０１のユーザは、「ニューノーマル」に関する会議の内容を確認することができる。また、ある会議に付けられているタグを参照することで、当該会議の内容を把握することが容易になる。

また、実施の形態に係る通信システムによれば、会議のタイトルまたは会議の資料に基づいて、会議に対して付けるタグの候補のリスト（タグリスト）を作成することができる。実施の形態に係る通信システムによれば、タグリストの生成に際して、関連語、類義語、またはテーマ毎の語句がグループ化された辞書を用いることで、会議の内容に関連した多くのタグ候補を含むタグリストを作成することができる。

なお、本発明は、上述した実施の形態に限定されるものではなく変形可能であり、上記の構成は、実質的に同一の構成、同一の作用効果を奏する構成又は同一の目的を達成することができる構成で置き換えることができる。

１００ 通信システム
１０１ 端末装置
１１１ 処理部
１２１ 記憶部
１３１ 通信部
１４１ 表示部
１５１ 操作入力部
１６１ 音声入力部
２０１ サーバ
２１１ 処理部
２１２ 音声取得／認識部
２１３ 会議処理部
２１４ タグ処理部
２１５ タグリスト作成部
２１６ タグ決定部
２１７ タグ付け部
２２１ 記憶部
２２２ 名詞辞書
２２３ 関連語辞書
２２４ 類義語辞書
２２５ テーマ汎用辞書
２２６ タグリスト
２２７ 会議タグ
２３１ 通信部

Claims (7)

1. 複数の端末装置による会議を提供するサーバのタグ付け方法であって、
   前記会議における前記複数の端末装置それぞれの音声データを取得し、
   前記音声データの音声認識結果および予め設定されたタグ候補を含むタグリストに基づいて、前記会議に付けるタグを決定し、
   前記会議を識別する会議識別情報と前記決定されたタグとを対応付けて記憶部に記憶させる、
   処理を備えるタグ付け方法。
2. 前記タグを決定する処理は、前記音声認識結果に含まれる名詞のうち、前記タグリストに含まれる前記タグ候補と一致する名詞を前記会議に付けるタグとして決定する請求項１記載のタグ付け方法。
3. 前記タグを決定する処理は、前記音声認識結果に含まれる名詞のうち前記タグ候補と一致する名詞の前記音声認識結果における出現頻度に基づいて、前記会議に付けるタグを決定する請求項２記載のタグ付け方法。
4. 前記タグを決定する処理は、前記音声認識結果に含まれる名詞に関連する名詞または前記音声認識結果に含まれる名詞の類義語、および前記タグリストに基づいて、前記会議に付けるタグを決定する請求項１記載のタグ付け方法。
5. 前記タグを決定する処理は、前記複数の端末装置それぞれの前記音声データの前記認識結果のうち指定された端末装置の音声データの認識結果、および前記タグリストに基づいて、前記会議に付けるタグを決定する請求項１乃至４のいずれか１項に記載のタグ付け方法。
6. 前記会議のタイトルと前記会議の資料の少なくとも一方を取得し、
   前記取得した前記会議のタイトルと前記会議の資料の少なくとも一方に基づいて、前記タグ候補を前記タグリストに登録する
   処理をさらに備える請求項１乃至５のいずれか１項に記載のタグ付け方法。
7. 複数の端末装置による会議を提供するタグ付け装置であって、
   前記複数の端末装置から前記会議における前記複数の端末装置それぞれの音声データを取得する取得部と、
   前記音声データの音声認識結果および予め設定されたタグ候補を含むタグリストに基づいて、前記会議に付けるタグを決定するタグ決定部と、
   前記会議を識別する会議識別情報と前記決定されたタグとを対応付けて記憶部に記憶させるタグ付け部と、
   を備えるタグ付け装置。

Images