JP2018059961A - Language processing system, language processing device, language processing program and language processing method - Google Patents
Language processing system, language processing device, language processing program and language processing method Download PDFInfo
- Publication number
- JP2018059961A JP2018059961A JP2016195087A JP2016195087A JP2018059961A JP 2018059961 A JP2018059961 A JP 2018059961A JP 2016195087 A JP2016195087 A JP 2016195087A JP 2016195087 A JP2016195087 A JP 2016195087A JP 2018059961 A JP2018059961 A JP 2018059961A
- Authority
- JP
- Japan
- Prior art keywords
- conference
- language processing
- user information
- user
- conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、言語処理システム、言語処理装置、言語処理プログラム及び言語処理方法に関する。 The present invention relates to a language processing system, a language processing apparatus, a language processing program, and a language processing method.
従来から、音声データを分析してテキストデータに変換する技術が知られている。この技術では、例えば、音声認識結果の候補群となる複数のテキスト配列を記述した辞書を参照し、音声に対応したテキストを確定させる手法が知られている。 Conventionally, a technique for analyzing voice data and converting it into text data is known. In this technique, for example, a method is known in which a text corresponding to speech is determined by referring to a dictionary describing a plurality of text arrays that are candidates for speech recognition results.
しかしながら、従来の技術では、例えば、特定の業界や団体において用いられる略語や専門用語等を多く含む音声については、略語や専門用語等を適切なテキストに変換することが困難な場合があり、変換の精度が低下する可能性がある。 However, with conventional technology, for example, for speech that contains many abbreviations and technical terms used in specific industries and organizations, it may be difficult to convert abbreviations and technical terms into appropriate text. Accuracy may be reduced.
開示の技術は、音声からテキストへ変換する際の精度を向上させることを目的としている。 The disclosed technology aims to improve accuracy when converting speech to text.
開示の技術は、複数の装置によって実現される言語処理システムであって、
音声データと、前記音声データを収集する端末装置の利用者のユーザ情報とを対応付けて記憶する記憶部と、端末装置の利用者が所属するグループと、前記グループに所属する利用者のユーザ情報とを対応付けたユーザ情報データベースと、前記グループ毎の辞書データベースと、前記音声データに基づくテキストデータへの変換要求を行う変換要求部と、前記変換要求を受けて、前記音声データと対応付けられたユーザ情報から、前記ユーザ情報データベースを参照して変換に用いる辞書データベースを特定する辞書特定部と、特定された辞書データベースを参照して、前記音声データをテキストデータへ変換する変換処理部と、を有する。
The disclosed technology is a language processing system realized by a plurality of devices,
Storage unit that stores voice data and user information of a user of a terminal device that collects the voice data in association with each other, a group to which a user of the terminal device belongs, and user information of a user who belongs to the group Are associated with the voice data upon receipt of the conversion request, a user information database that associates with each other, a dictionary database for each group, a conversion request unit that performs a conversion request to text data based on the voice data, A dictionary specifying unit for specifying a dictionary database used for conversion with reference to the user information database, a conversion processing unit for converting the voice data into text data with reference to the specified dictionary database, Have
音声からテキストへ変換する際の精度を向上させることができる。 The accuracy when converting from speech to text can be improved.
（第一の実施形態）
以下に図面を参照して第一の実施形態について説明する。図１は、言語処理システムの概要を説明する図である。
(First embodiment)
The first embodiment will be described below with reference to the drawings. FIG. 1 is a diagram illustrating an outline of a language processing system.
本実施形態の言語処理システム１００は、会議支援サービスを提供する企業により機能が実装された会議支援サーバ２００と、言語処理サービスを提供する企業により機能が実装された言語処理装置３００とを有する。
The
本実施形態の言語処理システム１００において、言語処理装置３００は、会議支援サーバ２００から、会議情報に含まれる音声データの変換要求を受け付けると、会議支援サーバ２００から音声データを取得し、テキストデータに変換する。
In the
このとき、本実施形態の言語処理装置３００は、変換要求を受けた音声データを含む会議情報から特定される団体と対応する辞書データベースを参照し、音声データからテキストデータへの変換を行うことで、音声からテキストへの変換の精度を向上させる。
At this time, the
図１では、会議支援サーバ２００は、例えば、企業Ａのオフィスで行われた会議の会議情報と、企業Ｂのオフィスで行われた会議情報と、企業Ｃのオフィスで行われた会議の会議情報と、を蓄積する。本実施形態の会議情報は、会議を識別する会議ＩＤと、会議の参加者毎の音声データと、後述する電子黒板に描画された文字や画像の描画データとが対応付けられた情報である。会議情報の詳細は後述する。
In FIG. 1, the
企業Ａのオフィスでの会議は、例えば、電子黒板４００Ａと、会議の参加者であるユーザＡの端末装置５００−１、ユーザＢの端末装置５００−２、ユーザＣの端末装置５００−３、ユーザＤの端末装置５００−４と、を用いて行われる。 The conference at the office of company A is, for example, an electronic blackboard 400A, a terminal device 500-1 of user A who is a participant in the conference, a terminal device 500-2 of user B, a terminal device 500-3 of user C, a user D terminal device 500-4.
電子黒板４００Ａは、ディスプレイに対して手書き入力を行うことが可能であり、入力された文字や画像を描画データとして記憶する。この会議では、例えば会議の進行役であるユーザＸが、電子黒板４００Ａを用いて会議の進行に応じた事項を電子黒板４００Ａに記述する。 The electronic blackboard 400A can perform handwritten input on the display, and stores input characters and images as drawing data. In this conference, for example, the user X who is the facilitator of the conference describes the matter according to the progress of the conference on the electronic blackboard 400A using the electronic blackboard 400A.
電子黒板４００Ａは、記述された内容を示す描画データを、電子黒板４００Ａを識別する端末ＩＤ及び会議ＩＤと対応付けて、会議情報の一部として会議支援サーバ２００へ送信する。
The electronic blackboard 400A transmits drawing data indicating the described contents to the
また、端末装置５００−１、５００−２、５００−３、５００−４のそれぞれは、音声入力装置であるマイクを有している。各端末装置５００は、マイクから入力された音声データを記憶し、各端末装置を識別する端末ＩＤと対応付けて、会議情報の一部として会議支援サーバ２００へ送信する。言い換えれば、本実施形態において、各端末装置５００は、各端末装置５００を利用する参加者毎の音声データを端末ＩＤ及び会議ＩＤと対応付けて会議支援サーバ２００へ送信する。
Each of the terminal devices 500-1, 500-2, 500-3, and 500-4 has a microphone that is a voice input device. Each
本実施形態では、このようにして、１つの会議における会議情報が会議ＩＤと対応付けられた会議支援サーバ２００に蓄積される。
In the present embodiment, the conference information for one conference is thus stored in the
本実施形態では、例えば企業Ｂや企業Ｃのオフィスにおいても、同様の環境で会議が行われる。例えば、企業Ｂでは、電子黒板４００Ｂと、複数の端末装置５００と、を用いて行われた会議の会議情報が会議支援サーバ２００へ送信される。また、企業Ｃでは、電子黒板４００Ｃと、複数の端末装置５００と、を用いて行われた会議の会議情報が会議支援サーバ２００へ送信される。
In the present embodiment, for example, in the offices of company B and company C, a meeting is performed in the same environment. For example, in the company B, conference information of a conference held using the electronic blackboard 400B and the plurality of
尚、端末装置５００−１、５００−２、５００−３、５００−４のそれぞれを区別しない場合には、端末装置５００と呼ぶ。
In addition, when not distinguishing each of terminal device 500-1, 500-2, 500-3, 500-4, it calls the
本実施形態の会議支援サーバ２００は、例えば企業Ａのオフィスにおいて、電子黒板４００Ａから、音声データからテキストデータへの変換の要求を受け付けると、言語処理装置３００に対し、音声データとテキストデータへの変換要求とを送信する。尚、このとき、音声データは端末ＩＤが対応付けられた状態で言語処理装置３００へ送信される。
For example, in the office of company A, the
本実施形態の言語処理装置３００は、端末情報データベース３１０、企業Ａ用辞書データベース３２０、企業Ｂ用辞書データベース３３０、企業Ｃ用辞書データベース３４０を有する。
The
端末情報データベース３１０は、端末装置５００の端末ＩＤと、端末装置５００の所有者あるいは利用者が所属する団体（企業など）を特定する団体名などの団体識別情報とを対応付けている。
The
企業Ａ用辞書データベース３２０は、企業Ａのために用意された辞書データベースであり、企業Ａで使用される専門用語や業界用語、社内用語、略語等、企業Ａに関係する会話が行われた場合の翻訳精度を上げるための用語の辞書が格納されている。同様に、企業Ｂ用辞書データベース３３０、企業Ｃ用辞書データベース３４０は、それぞれ企業Ｂ、企業Ｃのために用意された辞書データベースである。
The company A
このような辞書データベースは、例えば、言語処理装置を所有し言語処理サービスを提供する提供企業とこれを利用する企業とが契約を結び、提供企業が契約した企業から情報を収集し、分析することで登録されていく、といった運用が考えられる。なお、データベースは、企業などの団体単位で用意されるものに限られない。例えば、医療・教育・建築などといった業界単位で用意される辞書データベースを有していてもよい。契約した企業に言語処理サービスを提供する際には、その企業専用の辞書データベースの他に、その企業が事業展開している業界に対応した辞書データベースを併用して音声翻訳処理を行うようにしてもよい。各データベースの詳細は後述する。 Such a dictionary database, for example, collects and analyzes information from a company that has a contract with a provider that owns a language processing device and provides a language processing service and a company that uses the language processing service. It can be considered that it is registered with The database is not limited to one prepared for each group such as a company. For example, you may have a dictionary database prepared by industry units, such as medical care, education, and construction. When providing language processing services to a contracted company, in addition to a dictionary database dedicated to that company, a dictionary database corresponding to the industry in which the company operates is also used for speech translation processing. Also good. Details of each database will be described later.
言語処理装置３００は、会議支援サーバ２００から、音声データの変換要求を受信すると、音声データと対応付けられた端末ＩＤと、端末情報データベース３１０と、から、端末ＩＤと対応する団体を特定する。そして、言語処理装置３００は、記憶されている複数の辞書データベースの中から、特定した団体に対して適用する辞書データベースを決定し、決定された辞書データベースを参照して音声データをテキストデータへ変換し、変換結果のテキストデータを会議支援サーバ２００へ送信する。
When the
例えば、会議支援サーバ２００は、ユーザＡが所持する端末装置５００−１の端末ＩＤと対応付けられた音声データの変換要求を受け付けたとする。
For example, it is assumed that the
この場合、会議支援サーバ２００は、変換要求と共に、端末装置５００−１の端末ＩＤが対応付けられた音声データを言語処理装置３００へ送信する。
In this case, the
言語処理装置３００は、これを受けて、端末情報データベース３１０を参照し、端末装置５００−１の端末ＩＤと対応する団体である企業Ａを特定する。次に、言語処理装置３００は、企業Ａの団体識別情報に対して適用する辞書データベースとして、企業Ａと対応する企業Ａ用辞書データベース３２０を参照して、音声データをテキストデータへ変換する。
In response to this, the
したがって、本実施形態によれば、例えば、端末装置５００−１の端末ＩＤと対応付けられた音声データに、企業Ａで用いられる社内用語や略語が多く含まれている場合でも、音声データを適切なテキストデータへ変換することができる。よって、本実施形態によれば、変換の精度を向上させることができる。 Therefore, according to the present embodiment, for example, even when the voice data associated with the terminal ID of the terminal device 500-1 includes a lot of internal terms and abbreviations used in the company A, the voice data is appropriately selected. Can be converted into text data. Therefore, according to the present embodiment, the conversion accuracy can be improved.
尚、図１では、各企業において開催される会議に用いられる端末装置５００を４台としているが、これに限定されない。会議に用いられる端末装置５００の台数は任意であって良い。また、図１では、会議支援サーバ２００により会議情報が管理される企業を３つの企業としているが、これに限定されない。会議支援サーバ２００により会議情報が管理される企業の数は、任意であって良い。
In FIG. 1, four
さらに、図１では、会議を行う団体の一例を企業としているが、これに限定されない。会議を行う団体は、教員機関であっても良いし、学生のグループ等であっても良い。つまり、団体とは、複数人のグループであれば良く、会議とは、複数人で議論をすることであれば良い。 Furthermore, although FIG. 1 shows an example of an organization that conducts a meeting, the present invention is not limited to this. The organization that holds the meeting may be a teacher institution or a group of students. That is, the group may be a group of a plurality of people, and the meeting may be a discussion by a plurality of people.
また、会議支援サーバ２００機能と言語処理装置３００とは別々の装置でなくてもよく、会議支援サーバ２００が有する機能と、言語処理装置３００が有する機能とを、一台の情報処理装置により実現してもよい。あるいは、一の企業が有するシステムとして、会議支援サービス及び言語処理サービスを提供する一台以上の情報処理装置により実現してもよい。従って、本実施形態では、各団体の電子黒板４００と、端末装置５００と、会議支援サーバ２００と、により、会議支援システムを構成しても良い。さらに、各団体における会議では、電子黒板４００の代わりに、一般的に端末装置５００が用いられても良い。つまり、会議支援システムは、端末装置５００と、会議支援サーバ２００と、により形成されても良い。さらに、端末装置５００を音声入力装置としても良い。
Further, the
さらに、端末装置５００を音声入力装置としても良い。少なくとも、端末装置５００は録音機能を有していればよく、例えば、時計型やメガネ型の装置であってもよい。但し、端末装置５００自体に言語処理システム１００とネットワークを介して通信する機能が無い場合には、会議室で利用される各端末装置５００により録音された音声データを取得して言語処理システム１００に送信する、ハブとなる中継装置が必要になる。つまり、端末装置５００は、録音した音声データが入力される音声入力装置と、言語処理システム１００にネットワークを介して音声データを送信する音声出力装置と、を有するが、音声入力装置と音声出力装置は、音声データの送受ができるように構成されていれば、一つのデバイスで構成されていても複数のデバイスで構成されていてもよい。
Further, the
以下に、本実施形態の言語処理システム１００の有する各装置について説明する。図２は、言語処理装置のハードウェア構成の一例を示す図である。
Below, each apparatus which the
本実施形態の言語処理装置３００は、一般の情報処理装置であり、それぞれバスＢで相互に接続されている入力装置３１、出力装置３２、ドライブ装置３３、補助記憶装置３４、メモリ装置３５、演算処理装置３６及びインターフェース装置３７を有する。
The
入力装置３１は、例えばマウスやキーボードであり、各種の情報を入力するために用いられる。出力装置３２は、例えばディスプレイ等であり、各種信号の表示（出力）に用いられる。インターフェース装置３７は、モデム，ＬＡＮカード等を含み、ネットワークに接続する為に用いられる。
The
言語処理プログラムは、言語処理装置３００を制御する各種プログラムの少なくとも一部である。言語処理プログラムは例えば記録媒体３８の配布やネットワークからのダウンロードなどによって提供される。言語処理プログラムを記録した記録媒体３８は、ＣＤ−ＲＯＭ、フレキシブルディスク、光磁気ディスク等の様に情報を光学的，電気的或いは磁気的に記録する記録媒体、ＲＯＭ、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記録媒体を用いることができる。
The language processing program is at least a part of various programs that control the
また、言語処理プログラムを記録した記録媒体３８がドライブ装置３３にセットされると、言語処理プログラムは記録媒体３８からドライブ装置３３を介して補助記憶装置３４にインストールされる。ネットワークからダウンロードされた通信プログラムは、インターフェース装置３７を介して補助記憶装置３４にインストールされる。
When the
補助記憶装置３４は、インストールされた言語処理プログラムを格納すると共に、必要なファイル、データ等を格納する。メモリ装置３５は、コンピュータの起動時に補助記憶装置３４から言語処理プログラムを読み出して格納する。そして、演算処理装置３６はメモリ装置３５に格納された各プログラムに従って、後述するような各種処理を実現している。
The
本実施形態の会議支援サーバ２００は、一般のコンピュータであり、そのハードウェア構成は、言語処理装置３００と同様であるから、説明を省略する。
The
次に、図３を参照して、本実施形態の電子黒板４００のハードウェア構成を説明する。図３は、電子黒板のハードウェア構成の一例を示す図である。
Next, a hardware configuration of the
本実施形態に係る電子黒板４００は、入力装置４１と、表示装置４２と、外部Ｉ／Ｆ４３と、通信Ｉ／Ｆ４４と、ＲＯＭ４５（Read Only Memory）とを有する。また、本実施形態に係る電子黒板４００は、ＲＡＭ（Random Access Memory）４６と、ＣＰＵ（Central Processing Unit）４７と、ＨＤＤ（Hard Disk Drive）４８と、集音装置４９とを有する。これらの各ハードウェアは、それぞれがバスＢ１で接続されている。
The
入力装置４１は、タッチパネル等であり、ユーザによる各種操作（例えば、音声テキスト変換（日本語）や音声テキスト変換（英語）等の機能の選択操作）を入力するのに用いられる。表示装置４２は、ディスプレイ等であり、各種情報（例えば、音声テキスト変換（日本語）による変換結果を示すテキスト等）を表示する。
The input device 41 is a touch panel or the like, and is used to input various operations by the user (for example, a selection operation of functions such as speech text conversion (Japanese) and speech text conversion (English)). The
外部Ｉ／Ｆ４３は、外部装置とのインターフェースである。外部装置には、記録媒体４３ａ等がある。これにより、電子黒板４００は、外部Ｉ／Ｆ４３を介して、記録媒体４３ａ等の読み取りや書き込みを行うことができる。なお、記録媒体４３ａには、例えば、ＵＳＢメモリやＣＤ、ＤＶＤ、ＳＤメモリカード等がある。
The external I /
通信Ｉ／Ｆ４４は、電子黒板４００をネットワークＮ１等に接続するためのインターフェースである。これにより、電子黒板４００は、通信Ｉ／Ｆ４４を介して、他の装置（と通信を行うことができる。
The communication I /
ＨＤＤ４８は、プログラムやデータを格納している不揮発性の記憶装置である。ＨＤＤ４８に格納されるプログラムやデータには、電子黒板４００全体を制御する基本ソフトウェアであるＯＳ（Operating System）、ＯＳ上において各種機能を提供するアプリケーションプログラム等がある。
The
また、ＨＤＤ４８は、格納しているプログラムやデータを所定のファイルシステム及び／又はＤＢ（データベース）により管理している。なお、電子黒板４００は、ＨＤＤ４８に代えて、記憶媒体としてフラッシュメモリを用いるドライブ装置（例えばソリッドステートドライブ：ＳＳＤ）を有していても良い。
The
ＲＯＭ４５は、電源を切ってもプログラムやデータを保持することができる不揮発性の半導体メモリである。ＲＯＭ４５には、電子黒板４００の起動時に実行されるＢＩＯＳ（Basic Input/Output System）、ＯＳ設定、及びネットワーク設定等のプログラムやデータが格納されている。ＲＡＭ４６は、プログラムやデータを一時保持する揮発性の半導体メモリである。
The
ＣＰＵ４７は、ＲＯＭ４５やＨＤＤ４８等の記憶装置からプログラムやデータをＲＡＭ４６上に読み出し、処理を実行することで、電子黒板４００全体の制御や機能を実現する演算装置である。
The
集音装置４９は、例えばマイクロフォン（マイク）等であり、電子黒板４００の周囲の音を集音する。
The
本実施形態に係る電子黒板４００は、図３に示すハードウェア構成を有することにより、後述するような各種処理を実現できる。
The
次に、図４を参照して本実施形態の端末装置５００のハードウェア構成について説明する。図４は、端末装置のハードウェア構成の一例を示す図である。
Next, the hardware configuration of the
本実施形態の端末装置５００は、一般の情報処理装置であり、それぞれバスＢ２で相互に接続されている入力装置５１、出力装置５２、ドライブ装置５３、補助記憶装置５４、メモリ装置５５、演算処理装置５６、インターフェース装置５７及び集音装置５８を有する。
The
入力装置５１は、例えばマウスやキーボードであり、各種の情報を入力するために用いられる。出力装置５２は、例えばディスプレイ等であり、各種信号の表示（出力）に用いられる。インターフェース装置５７は、モデム，ＬＡＮカード等を含み、ネットワークに接続する為に用いられる。
The
集音装置５８は、例えばマイクロフォン（マイク）等であり、端末装置５００の周囲の音を集音する。
The
情報処理プログラムは、端末装置５００を制御する各種プログラムの少なくとも一部である。情報処理プログラムは例えば記録媒体５９の配布やネットワークからのダウンロードなどによって提供される。情報処理プログラムを記録した記録媒体５９は、ＣＤ−ＲＯＭ、フレキシブルディスク、光磁気ディスク等の様に情報を光学的，電気的或いは磁気的に記録する記録媒体、ＲＯＭ、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記録媒体を用いることができる。
The information processing program is at least a part of various programs that control the
また、情報処理プログラムを記録した記録媒体５９がドライブ装置５３にセットされると、情報処理プログラムは記録媒体５９からドライブ装置５３を介して補助記憶装置５４にインストールされる。ネットワークからダウンロードされた通信プログラムは、インターフェース装置５７を介して補助記憶装置５４にインストールされる。
When the
補助記憶装置５４は、インストールされた情報処理プログラムを格納すると共に、必要なファイル、データ等を格納する。メモリ装置５５は、コンピュータの起動時に補助記憶装置５４から言語処理プログラムを読み出して格納する。
The
そして、演算処理装置５６はメモリ装置５５に格納された各プログラムに従って、後述するような各種処理を実現している。
The
次に、図５を参照して、言語処理システム１００の有する各装置の機能について説明する。図５は、第一の実施形態の言語処理システムの有する各装置の機能を説明する図である。はじめに、会議支援サーバ２００の機能について説明する。
Next, with reference to FIG. 5, the function of each device included in the
本実施形態の会議支援サーバ２００は、会議管理情報データベース２１０、会議情報データベース２２０、会議登録部２３０、会議管理部２４０、会議情報収集部２５０、変換要求部２６０を有する。
The
会議管理情報データベース２１０は、ユーザにより開催される会議を管理するための会議管理情報が格納される。会議情報データベース２２０は、団体毎の会議情報が格納される。各データベースの詳細は後述する。
The conference
会議登録部２３０は、開催される会議に応じた新規登録の要求をユーザから受け付けると、新たに会議ＩＤを発行し、その会議を管理する会議管理情報を、会議管理情報データベース２１０へ登録する。
When the
会議管理部２４０は、開催される会議及び開催される会議を管理する。具体的には、会議管理部２４０は、例えば会議管理情報データベース２１０に会議管理情報が格納されている会議の開催要求に合わせて、会議情報収集部２５０に会議情報の収集を開始させたりする。
The
会議情報収集部２５０は、会議に参加する装置（電子黒板４００や端末装置５００など）により入力された会議情報を収集する。会議情報の収集の詳細は後述する。
The conference
変換要求部２６０は、言語処理装置３００に対して、会議情報に含まれる音声データのテキストデータへの変換要求を行う。
The
本実施形態の変換要求部２６０は、例えば電子黒板４００や端末装置５００から、会議支援サーバ２００に対して、音声データの変換要求を受け付けたとき、変換要求を行った装置の端末ＩＤと対応付けられた音声データと、変換要求とを言語処理装置３００へ送信しても良い。
When the
また、本実施形態の変換要求部２６０は、例えば会議情報収集部２５０が会議情報として音声データを取得すると、取得した音声データ及び取得元の装置を識別する端末ＩＤを変換要求と共に言語処理装置３００へ送信しても良い。
In addition, for example, when the conference
次に、言語処理装置３００について説明する。
Next, the
本実施形態の言語処理装置３００は、端末情報データベース３１０、企業Ａ用辞書データベース３２０、企業Ｂ用辞書データベース３３０、企業Ｃ用辞書データベース３４０、音声変換部３５０を有する。
The
本実施形態の端末情報データベース３１０は、Ａ社端末リスト３１１、Ｂ社端末リスト３１２、Ｃ社端末リスト３１３を有する。
The
これらの各端末リストは、団体を識別する団体識別情報と、端末ＩＤとを対応付けている。言い換えれば、本実施形態の各端末リストは、ある団体について、その団体に所属する利用者により利用される端末装置５００のリストである。ある端末ＩＤで識別される端末装置５００は、その端末ＩＤに対応づく団体識別情報の団体に所属する利用者によって利用されるような利用形態を想定している。例えば、企業が従業員に端末装置５００を支給し、従業員が支給された端末装置５００を利用して業務を行う場合に、企業が支給する端末装置５００の端末ＩＤをその企業の端末リストに登録する。つまり、端末装置５００の端末ＩＤは、その端末装置５００を利用して会議に参加する利用者が所属する団体を特定するためのユーザ情報とも言える。従って、端末装置５００を使用しながら会議に参加する利用者の所属する団体を特定する情報として、当該端末装置５００が入力できる情報であれば、端末ＩＤ以外の情報を用いても構わない。例えば、言語処理装置において端末ＩＤに代えてユーザを識別するユーザＩＤが登録されても構わない。
Each of these terminal lists associates group identification information for identifying a group with a terminal ID. In other words, each terminal list of the present embodiment is a list of
さらに、本実施形態の各端末リストは、端末ＩＤに対して、団体名以外にも、端末ＩＤで識別される端末装置５００の利用者の名称や所属部署等が対応付けられていても良い。各端末リストの詳細は後述する。
Furthermore, in each terminal list of the present embodiment, in addition to the organization name, the name of the user of the
本実施形態の言語処理装置３００は、例えば人工知能を有している。本実施形態の音声変換部３５０は、各辞書データベースを参照し、音声データをテキスト（文字）データへ変換（翻訳）する。本実施形態の音声変換部３５０は、音声データからテキストデータへの変換を行う度に、入力と出力の関係を学習し、変換の精度を高めて行く機能を有しているものとした。
The
本実施形態の音声変換部３５０の処理の詳細は後述する。
Details of the processing of the
次に、本実施形態の電子黒板４００と端末装置５００について説明する。本実施形態の電子黒板４００は、会議支援処理部４１０、表示制御部４２０、制御部４３０、操作制御部４４０、音声データ取得部４５０を有する。
Next, the
会議支援処理部４１０は、会議を支援するための各種の処理を行う。具体的には、例えば、会議支援サーバ２００にアクセスし、会議管理情報ＤＢに登録されている会議リストを取得し、取得した会議リストからいずれの会議に参加するかをユーザに指定させるための入力画面を表示制御部４２０に表示させる。また、会議支援処理部４１０は、電子黒板４００の画面に対して手入力された内容の画像データを会議支援サーバ２００へ送信したりする。
The conference
表示制御部４２０は、電子黒板４００における画面表示を制御する。制御部４３０は、電子黒板４００の全体的な動作を制御する。操作制御部４４０は、電子黒板４００の有する操作部材に対する操作を受け付ける。音声データ取得部４５０は、電子黒板４００に備え付けられた集音装置４９が収集する音声データを取得し、保持する。
The
本実施形態の端末装置５００は、表示制御部５１０と、操作制御部５２０、音声データ取得部５３０とを有する。表示制御部５１０は、端末装置５００の表示部における表示を制御する。操作制御部５２０は、端末装置５００に対して行われた操作と対応する処理を行う。音声データ取得部５３０は、端末装置５００が有する集音装置５８が収集した音声データを取得し、保持する。
The
次に、本実施形態の会議支援サーバ２００と、言語処理装置３００と、が有する各データベースについて説明する。
Next, each database included in the
図６は、第一の実施形態の会議支援サーバの会議管理情報データベースの一例を示す図である。 FIG. 6 is a diagram illustrating an example of a conference management information database of the conference support server according to the first embodiment.
本実施形態の会議管理情報データベース２１０は、情報の項目として、会議ＩＤを入力する項目と、その会議ＩＤの会議に参加した電子黒板４００や端末装置５００の端末ＩＤを入力する項目とを有し、これらは対応付けられている。以下の説明では、会議管理情報データベース２１０において、項目「会議ＩＤ」の値と、項目「端末ＩＤ」の値とを含む情報を、会議管理情報と呼ぶ。
The conference
項目「会議ＩＤ」の値は、ユーザからの登録要求に応じて登録された会議を識別するための識別子を示す。項目「会議ＩＤ」の値は、例えば会議の進行役となる参加者の端末装置５００により、会議が開催されるより前に入力されて良い。
The value of the item “conference ID” indicates an identifier for identifying a conference registered in response to a registration request from the user. The value of the item “conference ID” may be input before the conference is held by the
項目「端末ＩＤ」の値は、項目「会議ＩＤ」の値により特定される会議に参加している参加者が利用している端末装置５００の端末ＩＤを示す。端末ＩＤは、端末装置５００からインターネット等を利用して会議支援サーバ２００にアクセスし、登録された会議のうち未だ開催されていない会議の会議リストから、ユーザが参加する会議を選択して参加を指示する操作をすることで会議支援サーバ２００により登録される。より詳細には、ユーザによる参加の指示操作に応じて端末装置５００が端末ＩＤと共に会議の参加要求を会議支援サーバ２００に送信し、会議支援サーバ２００の会議登録部２３０が、会議管理情報データベース２１０に、選択された会議の会議ＩＤに対応付けて参加要求と共に送信された端末ＩＤを登録する。
The value of the item “terminal ID” indicates the terminal ID of the
図６の例では、会議ＩＤ「００１」の会議には、端末ＩＤ「Ａ０１」、「Ａ０２」、「Ａ０３」、「Ａ０４」の端末装置５００の利用者が参加していることがわかる。つまり、本実施形態では、端末ＩＤは、端末装置５００を使用しながら会議に参加している利用者を特定する情報となる。
In the example of FIG. 6, it can be seen that the user of the
図７は、第一の実施形態の会議情報データベースの一例を示す図である。本実施形態の会議情報データベース２２０は、情報の項目として、会議ＩＤ、端末ＩＤ、音声データ、描画データ、テキストデータ、日時を含み、項目「会議ＩＤ」と、その他の項目とが対応付けられている。以下の説明では、会議情報データベースにおいて、項目「会議ＩＤ」の値と、その他の項目の値とを含む情報を会議情報と呼ぶ。
FIG. 7 is a diagram illustrating an example of the conference information database according to the first embodiment. The
項目「音声データ」の値は、項目「端末ＩＤ」の値が特定する端末装置５００の集音装置５８等により取得された音声データを示す。項目「描画データ」の値は、例えば、ユーザの入力操作に応じて操作制御部４４０が表示画面に対し描画処理を行ったタイミングで電子黒板４００から送信された、電子黒板４００に描画された内容を記憶した画像データを示す。なお、描画データ（画像データ）は、項目「音声データ」の値である音声データが取得したタイミングにおいて記憶してもよい。
The value of the item “voice data” indicates the voice data acquired by the
項目「テキストデータ」の値は、項目「音声データ」の値である音声データと対応するテキストデータである。項目「テキストデータ」の値は、音声データを言語処理装置３００に送信し、変換結果として言語処理装置３００から受信したテキストデータを示す。
The value of the item “text data” is text data corresponding to the voice data that is the value of the item “voice data”. The value of the item “text data” indicates the text data transmitted from the
項目「日時」の値は、項目「音声データ」の値である音声データを取得した日付と時刻を示す。具体的には、項目「日時」の値は、端末装置５００から音声データを受信した日付と時刻を示しても良い。
The value of the item “date and time” indicates the date and time when the audio data that is the value of the item “audio data” is acquired. Specifically, the value of the item “date and time” may indicate the date and time when the audio data is received from the
尚、図７の例では、会議情報に、音声データの変換結果であるテキストデータが含まれるものとしたが、これに限定されない。会議情報には、テキストデータは含まれなくても良い。その場合、音声データの変換結果であるテキストデータは、会議情報データベース２２０以外の記憶領域に格納されていても良い。
In the example of FIG. 7, it is assumed that the conference information includes text data that is a result of converting the audio data, but the present invention is not limited to this. The meeting information may not include text data. In that case, the text data that is the conversion result of the voice data may be stored in a storage area other than the
図７の例では、会議ＩＤ「００１」の会議において、２０１６／９／２０の１６：５０に、端末ＩＤ「Ａ０１」の端末装置５００から、音声データ「Ａ０１．ｍｐｇ」を受信し、電子黒板４００から画面データＡ０１．ｊｐｇを受信したことがわかる。
In the example of FIG. 7, in the meeting with the meeting ID “001”, the audio data “A01.mpg” is received from the
この会議情報によれば、会議ＩＤ「００１」の会議において、２０１６／９／２０の１６：５０に、端末ＩＤ「Ａ０１」の端末装置５００の利用者が発言した内容と、そのとき電子黒板４００に描画されていた画像と、がわかる。
According to this conference information, in the conference with the conference ID “001”, the content of the user of the
次に、図８を参照して、本実施形態の言語処理装置３００の有する端末情報データベース３１０について説明する。
Next, the
図８は、第一の実施形態の端末情報データベースの一例を示す図である。 FIG. 8 is a diagram illustrating an example of the terminal information database according to the first embodiment.
本実施形態の端末情報データベース３１０は、団体毎、つまり、各団体識別情報に端末ＩＤが対応付けられた端末ＩＤリストを有する。
The
本実施形態では、Ａ社端末リスト３１１、Ｂ社端末リスト３１２、Ｃ社端末リスト３１３を有する。
In the present embodiment, a company A
Ａ社端末リスト３１１は、団体名「Ａ」と、企業Ａに所属する利用者が利用している端末装置５００の端末ＩＤとが対応付けられている。Ｂ社端末リスト３１２は、団体名「Ｂ」と、企業Ｂに所属する利用者が利用している端末装置５００の端末ＩＤとが対応付けられている。Ｃ社端末リスト３１３は、団体名「Ｃ」と、企業Ｃに所属する利用者が利用している端末装置５００の端末ＩＤとが対応付けられている。
In the company A
本実施形態の端末情報データベース３１０の有する各端末リストは、予め言語処理システム１００の管理者が言語処理装置３００に格納しておいても良い。
Each terminal list included in the
また、本実施形態では、例えば、各端末装置５００の利用者が会議に参加する際に、利用者のユーザ情報として、利用者が所属する団体名を端末装置５００に対して入力しても良い。この場合、端末装置５００は、入力された団体名と、自機の端末ＩＤとを会議支援サーバ２００へ送信しても良い。会議支援サーバ２００は、この団体名と端末ＩＤとを対応付けて言語処理装置３００へ送信し、言語処理装置３００は、団体名に対応付いた端末リストに受信した端末ＩＤを追加するようにしても良い。
In the present embodiment, for example, when the user of each
次に、本実施形態の各辞書データベースについて説明する。以下では、各辞書データベースの一例として、企業Ａ用辞書データベース３２０について説明する。
Next, each dictionary database of this embodiment will be described. Hereinafter, the company A
図９は、第一の実施形態の企業Ａ用辞書データベースの一例を示す図である。 FIG. 9 is a diagram illustrating an example of the company A dictionary database according to the first embodiment.
図９に示す企業Ａ用辞書データベース３２０では、企業Ａ内の略語の音声と、文字列とが対応付けられている。
In the company A
図９の例では、例えば企業Ａ内において、「いほ」という単語は、「意見書と補正書」であることがわかる。また、図９の例では、例えば企業Ａ内において、「きょり」という単語は、「拒絶理由通知書」であることがわかる。これにより、音声データをテキストデータに変換したときに「いほ」という単語が得られた場合には、この「いほ」を「意見書と補正書」と訳したテキストデータに書き換えることができる。 In the example of FIG. 9, for example, in the company A, it can be seen that the word “Iho” is “an opinion document and a correction document”. In the example of FIG. 9, for example, in the company A, it can be seen that the word “Kyori” is “notification of reason for rejection”. As a result, when the word “Iho” is obtained when the voice data is converted to text data, this “Iho” can be rewritten into text data translated as “an opinion and amendment”. .
なお、辞書データベース３２０に登録される情報は、上記のような略語と訳語の対応関係を示す情報だけに限らない。例えば、その団体で頻繁に使用され得る単語が企業用語（社内用語）として登録される。例えば、社名である「リコー」を「利口」と訳されることを避けるため、リコーという社名の企業であれば、「リコー」という単語を登録しておくことで、翻訳の精度を上げることができる。
The information registered in the
本実施形態において、企業Ｂ用辞書データベース３３０や企業Ｃ用辞書データベース３４０も、図９に示した企業Ａ用辞書データベース３２０と同様の観点で形成されている。
In this embodiment, the company
次に、図１０を参照して本実施形態の会議支援サーバ２００の会議情報収集部２５０による会議情報の収集について説明する。図１０は、会議情報の収集の仕方を説明する図である。
Next, the collection of conference information by the conference
図１０では、参加者Ａ、Ｂ、Ｃ、Ｄ、Ｘが会議に参加しており、参加者Ａは端末ＩＤ「Ａ０１」の端末装置５００Ａ−１を利用し、参加者Ｂは端末ＩＤ「Ａ０２」の端末装置５００Ａ−２を利用し、参加者Ｃは端末ＩＤ「Ｂ０１」の端末装置５００Ｂ−１を利用し、参加者Ｄは端末ＩＤ「Ｂ０２」の端末装置５００Ｂ−２を利用している。また、図１０の例では、参加者Ｘが会議の進行役を担っており、電子黒板４００を利用している。
In FIG. 10, participants A, B, C, D, and X are participating in the conference. Participant A uses
ここで、本実施形態では、会議を開始する際に、各参加者は、各参加者が利用する装置において、自身がこれから参加する予定の会議の会議ＩＤと、自身の所属する団体名を含むユーザ情報を入力しても良い。 Here, in this embodiment, when starting a conference, each participant includes the conference ID of the conference that he / she intends to participate in and the name of the organization to which he / she belongs in the apparatus used by each participant. User information may be input.
また、本実施形態では、各参加者が利用する装置の端末ＩＤが、各参加者のユーザＩＤと同義の情報として扱われていても良い。この場合には、各参加者は、会議に参加する前に、各参加者が利用する装置において、参加する予定の会議の会議ＩＤと、所属する団体名と、自身の利用する装置の端末ＩＤとを入力しても良い。このとき、団体名と端末ＩＤは、装置の利用者のユーザ情報として入力されても良い。 In the present embodiment, the terminal ID of the device used by each participant may be handled as information having the same meaning as the user ID of each participant. In this case, before each participant participates in the conference, the conference ID of the conference to be joined, the name of the organization to which he / she belongs, and the terminal ID of the device used by the participant are used. May be entered. At this time, the organization name and the terminal ID may be input as user information of the user of the device.
各参加者が利用する装置は、入力された会議ＩＤ、団体名等を会議支援サーバ２００へ送信する。会議支援サーバ２００は、各装置から送信された情報に基づき、会議ＩＤと、各参加者が利用する装置の端末ＩＤとを対応付けた会議管理情報を生成し、会議管理情報データベース２１０に格納する。
The device used by each participant transmits the input conference ID, group name, etc. to the
本実施形態では、この手順により、会議支援サーバ２００において、各参加者の音声データ等を含む会議情報を収集する準備が完了したことになる。
In this embodiment, this procedure completes preparation for collecting conference information including audio data of each participant in the
本実施形態では、音声データは、会議の各参加者が利用している端末装置５００の端末ＩＤと対応付けられて会議支援サーバ２００に送信される。
In the present embodiment, the audio data is transmitted to the
例えば、端末装置５００Ａ−１を利用している参加者Ａの発話は、端末装置５００Ａ−１の集音装置５８によって音声データとして収集され、端末装置５００Ａ−１の端末ＩＤと対応付けられて会議支援サーバ２００に送信される。
For example, the speech of the participant A who uses the
また、例えば、端末装置５００Ｂ−１を利用している参加者Ｃの発話は、端末装置５００Ｂ−１の集音装置５８によって音声データとして収集され、端末装置５００Ｂ−１の端末ＩＤと対応付けられて会議支援サーバ２００に送信される。言い換えれば、端末装置５００Ｂ−１の集音装置５８によって収集された音声データは、端末装置５００Ｂ−１の利用者のユーザ情報と対応付けられて会議支援サーバ２００へ送信される。
Further, for example, the speech of the participant C who uses the
また、本実施形態では、会議の進行役を担っている参加者が電子黒板４００の利用者となる。図１０の例では、電子黒板４００の端末ＩＤは、「０５」であり、電子黒板４００の利用者は、ユーザＸである。よって、ユーザＸの発話は、電子黒板４００の集音装置４９によって、音声データとして収集され、端末ＩＤ「０５」と対応付けられて会議支援サーバ２００へ送信される。言い換えれば、電子黒板４００の集音装置４９によって収集された音声データは、電子黒板４００の利用者のユーザ情報と対応付けられて会議支援サーバ２００へ送信される。
In the present embodiment, the participant who plays the facilitator of the conference becomes the user of the
また、電子黒板４００では、電子黒板４００の有するユーザＸ等によってディスプレイに手書き入力された文字や画像を、描画データとして記憶し、電子黒板４００の端末ＩＤと対応付けて会議支援サーバ２００へ送信する。
In the
会議支援サーバ２００では、端末装置５００や電子黒板４００から送信される音声データや、電子黒板４００から送信される描画データに、各データと対応付いた端末ＩＤと子も付いた会議ＩＤを付与し、会議情報として会議情報データベース２２０へ格納する。
The
本実施形態では、以上のようにして、会議情報を収集する。 In the present embodiment, meeting information is collected as described above.
次に、図１１を参照して本実施形態の言語処理装置３００の音声変換部３５０の機能について説明する。図１１は、第一の実施形態の音声変換部の機能を説明する図である。
Next, the function of the
本実施形態の音声変換部３５０は、要求受付部３５１、音声データ取得部３５２、辞書特定部３５３、変換処理部３５４、出力部３５５を有する。
The
要求受付部３５１は、会議支援サーバ２００から、音声データの変換要求を受け付ける。このとき、要求受付部３５１は、変換要求と共に、変換対象の音声データと端末ＩＤ及び会議ＩＤを会議支援サーバ２００から取得する。
The
音声データ取得部３５２は、変換要求を受け付けると、変換対象となる音声データと、音声データと対応付けられた端末ＩＤ及び会議ＩＤとを取得する。
When receiving the conversion request, the audio
辞書特定部３５３は、音声データ取得部３５２により、音声データと共に取得された端末ＩＤに基づき、参照する辞書データベースを特定する。具体的には、辞書特定部３５３は、端末情報データベース３１０を参照し、取得する端末ＩＤが含まれる端末リストを特定する。そして、辞書特定部３５３は、特定した端末リストにより示される団体名から、参照する辞書データベースを特定する。
The
変換処理部３５４は、辞書特定部３５３により特定された辞書データベースを参照して、音声データ取得部３５２が取得した音声データをテキストデータへ変換する。音声データをテキストデータに変換する処理は、公知の技術により行うことができる。
The
出力部３５５は、変換処理部３５４による変換の結果であるテキストデータを、会議支援サーバ２００へ送信する。このとき出力部３５５は、テキストデータと共に、端末ＩＤ及び会議ＩＤを会議支援サーバ２００へ送信するものとした。
The
尚、会議支援サーバ２００は、言語処理装置３００から変換結果のテキストデータを受信すると、受信したテキストデータと対応付けられた会議ＩＤと端末ＩＤから、テキストデータと対応付けられる会議情報を特定する。そして、会議支援サーバ２００は、受信したテキストデータを会議情報データベース２２０へ格納する。
When the
以下に、図１２を参照して、本実施形態の言語処理装置３００の処理について説明する。図１２は、第一の実施形態の言語処理装置の動作を説明するフローチャートである。
Hereinafter, the processing of the
図１２では、例えば、会議ＩＤ「００１」の会議において、端末ＩＤ「Ａ０１」の端末装置５００Ａ−１から取得した音声データ「Ａ０１．ｍｐｅｇ」の変換要求が行われたものとして説明する。
In FIG. 12, for example, it is assumed that a conversion request for the audio data “A01.mpeg” acquired from the
本実施形態の音声変換部３５０は、要求受付部３５１により、変換要求を受け付けたか否かを判定する（ステップＳ１２０１）。ステップＳ１２０１において、変換要求を受け付けない場合、音声変換部３５０は、要求を受け付けるので待機する。
The
ステップＳ１２０１において、変換要求を受け付けた場合、音声変換部３５０は、音声データ取得部３５２により、変換対象の音声データと、音声データと対応付いた端末ＩＤ「Ａ０１」及び会議ＩＤ「００１」を取得する（ステップＳ１２０２）。
In step S1201, when a conversion request is received, the
続いて、音声変換部３５０は、辞書特定部３５３により、端末情報データベース３１０を参照し、取得した端末ＩＤ「Ａ０１」を含むＡ社端末リスト３１１を特定し、Ａ社端末リスト３１１と対応する団体名「企業Ａ」と対応する企業Ａ用辞書データベース３２０を特定する（ステップＳ１２０３）。
Subsequently, the
続いて、音声変換部３５０は、変換処理部３５４により、企業Ａ用辞書データベース３２０を参照して、音声データ「Ａ０１．ｍｐｅｇ」をテキストデータに変換する。そして、音声変換部３５０は、出力部３５５により、テキストデータに、会議ＩＤ「００１」と端末ＩＤ「Ａ０１」を付与し、会議支援サーバ２００へ出力し（ステップＳ１２０４）、処理を終了する。
Subsequently, the
したがって、本実施形態によれば、端末ＩＤ「Ａ０１」の端末装置５００Ａ−１から取得した音声データ「Ａ０１．ｍｐｅｇ」に多く含まれると推定される企業Ａ特有の単語等も、企業Ａ用辞書データベース３２０を用いることで、適切なテキストデータへ変換される可能性が高くなる。
Therefore, according to the present embodiment, words unique to company A that are presumed to be included in a large amount in the voice data “A01.mpeg” acquired from the
したがって、本実施形態によれば、音声データをテキストデータに変換する際の精度を向上させることができる。 Therefore, according to the present embodiment, it is possible to improve the accuracy when converting voice data into text data.
（第二の実施形態）
以下に図面を参照して、第二の実施形態について説明する。第二の実施形態では、音声変換部の処理において、複数の辞書データベースを参照する場合を考慮した点が、第一の実施形態と相違する。よって、以下の第二の実施形態の説明では、第一の実施形態との相違点についてのみ説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態の説明で用いた符号と同様の符号を付与し、その説明を省略する。
(Second embodiment)
The second embodiment will be described below with reference to the drawings. The second embodiment is different from the first embodiment in that a case where a plurality of dictionary databases are referred to in the processing of the voice conversion unit is considered. Therefore, in the following description of the second embodiment, only differences from the first embodiment will be described, and those having the same functional configuration as the first embodiment will be described for the first embodiment. The same reference numerals as those used in FIG.
図１３は、第二の実施形態の音声変換部の機能を説明する図である。 FIG. 13 is a diagram illustrating the function of the voice conversion unit according to the second embodiment.
本実施形態の音声変換部３５０Ａは、要求受付部３５１、音声データ取得部３５２、辞書特定部３５３Ａ、変換処理部３５４、出力部３５５、会議管理情報取得部３５６、優先順位付与部３５７を有する。
The voice conversion unit 350A of the present embodiment includes a
本実施形態の辞書特定部３５３Ａは、変換要求と共に受け付けた会議ＩＤを含む会議管理情報に含まれる端末ＩＤそれぞれについて、対応する辞書データベースを特定する。 The dictionary specifying unit 353A of this embodiment specifies a corresponding dictionary database for each terminal ID included in the conference management information including the conference ID received together with the conversion request.
会議管理情報取得部３５６は、変換要求と共に受け付けた会議ＩＤを含む会議管理情報を、会議支援サーバ２００から取得する。
The conference management
優先順位付与部３５７は、辞書特定部３５３により、複数の辞書データベースが特定された場合に、各辞書データベースに対して優先順位を付与する。
The priority
以下に、図１４を参照して、本実施形態の音声変換部３５０Ａの処理について説明する。図１４は、第二の実施形態の音声変換部の処理を説明するフローチャートである。
Hereinafter, with reference to FIG. 14, processing of the
図１４では、例えば、会議ＩＤ「００２」の会議において、端末ＩＤ「Ｂ０１」の端末装置５００Ｂ−１から取得した音声データの変換要求が行われたものとして説明する。
In FIG. 14, for example, it is assumed that a conversion request for audio data acquired from the
図１４のステップＳ１４０１とステップＳ１４０２の処理は、図１２のステップＳ１２０１とステップＳ１２０２の処理と同様であるから、説明を省略する。 The processing in steps S1401 and S1402 in FIG. 14 is the same as the processing in steps S1201 and S1202 in FIG.
ステップ１２０２において、音声データと共に端末ＩＤと会議ＩＤとを取得すると、音声変換部３５０Ａは、会議管理情報取得部３５６により、会議支援サーバ２００から、会議ＩＤ「００２」を含む会議管理情報を取得する（ステップＳ１４０３）。
In step 1202, when the terminal ID and the conference ID are acquired together with the audio data, the audio conversion unit 350A acquires the conference management information including the conference ID “002” from the
続いて、音声変換部３５０Ａは、辞書特定部３５３Ａにより、参照する辞書データベースを特定する（ステップＳ１４０４）。 Subsequently, the voice conversion unit 350A specifies a dictionary database to be referred to by the dictionary specifying unit 353A (step S1404).
ここで、本実施形態の辞書特定部３５３Ａによる辞書データベースの特定について説明する。 Here, the specification of the dictionary database by the dictionary specifying unit 353A of the present embodiment will be described.
本実施形態の辞書特定部３５３Ａは、会議管理情報取得部３５６が取得した会議管理情報に含まれる端末ＩＤそれぞれについて、対応する団体を特定する。
The dictionary specifying unit 353A of the present embodiment specifies a corresponding group for each terminal ID included in the conference management information acquired by the conference management
会議ＩＤ「００２」と対応する会議管理情報に含まれる端末ＩＤは、「Ａ０３」、「Ａ０４」、「Ａ０１」、「Ｂ０１」である（図６参照）。 The terminal IDs included in the conference management information corresponding to the conference ID “002” are “A03”, “A04”, “A01”, and “B01” (see FIG. 6).
そこで、辞書特定部３５３Ａは、各端末ＩＤについて、それぞれが含まれる端末ＩＤリストを特定する。端末ＩＤ「Ａ０３」、「Ａ０４」、「Ａ０１」のそれぞれは、Ａ社端末リスト３１１に含まれる。また、端末ＩＤ「Ｂ０１」は、Ｂ社端末リスト３１２に含まれる。
Therefore, dictionary specifying unit 353A specifies a terminal ID list including each terminal ID. Each of the terminal IDs “A03”, “A04”, and “A01” is included in the A
よって、辞書特定部３５３Ａは、Ａ社端末リスト３１１、Ｂ社端末リスト３１２を特定する。そして、辞書特定部３５３Ａは、Ａ社端末リスト３１１が示す団体名「企業Ａ」と、Ｂ社端末リスト３１２が示す団体名「企業Ｂ」を特定する。
Therefore, the dictionary specifying unit 353A specifies the company A
次に、辞書特定部３５３Ａは、「企業Ａ」と対応する企業Ａ用辞書データベース３２０と、「企業Ｂ」と対応する企業Ｂ用辞書データベース３３０を特定する。
Next, the dictionary specifying unit 353A specifies the company A
続いて、音声変換部３５０Ａは、優先順位付与部３５７により、複数の辞書データベースが特定されたか否かを判定する（ステップＳ１４０５）。ステップＳ１４０５で、特定された辞書データベースが１つであった場合、音声変換部３５０Ａは、後述するステップＳ１４０７へ進む。 Subsequently, the voice conversion unit 350A determines whether or not a plurality of dictionary databases have been specified by the priority order assigning unit 357 (step S1405). If there is one identified dictionary database in step S1405, the speech conversion unit 350A proceeds to step S1407 described below.
ステップＳ１４０５において、複数の辞書データベースが特定された場合、音声変換部３５０Ａは、複数の辞書データベースに対して優先順位を付与する（ステップＳ１４０６）。 If a plurality of dictionary databases are specified in step S1405, the speech conversion unit 350A gives priority to the plurality of dictionary databases (step S1406).
以下に、本実施形態の優先順位付与部３５７による優先順位の付与について説明する。本実施形態では、会議管理情報に含まれる端末ＩＤのうち、対応する端末ＩＤの数が多い辞書データベースから順に、優先順位を付与する。
Below, the provision of the priority by the
図１４の例では、取得した会議管理情報に含まれる端末ＩＤでは、企業Ａと対応する端末ＩＤが３つあり、企業Ｂと対応する端末ＩＤが１つである。 In the example of FIG. 14, the terminal ID included in the acquired conference management information includes three terminal IDs corresponding to the company A and one terminal ID corresponding to the company B.
よって、優先順位付与部３５７は、企業Ａと対応する企業Ａ用辞書データベース３２０の優先順位を最も高くし、企業Ｂと対応する企業Ｂ用辞書データベース３３０の優先順位をその次とする。
Therefore, the priority
続いて、音声変換部３５０Ａは、変換処理部３５４により、辞書特定部３５３Ａにより特定された辞書データベースを参照し、変換対象の音声データをテキストデータへ変換し、出力部３５５により変換結果のテキストデータを会議支援サーバ２００へ送信する（ステップＳ１４０７）。
Subsequently, the voice conversion unit 350A refers to the dictionary database specified by the dictionary specifying unit 353A by the
ここで、変換処理部３５４による辞書データベースの参照の仕方について説明する。本実施形態の変換処理部３５４は、例えば複数の辞書データベースが特定されていた場合には、優先順位の高い辞書データベースから順に参照するようにしても良い。
Here, a method of referring to the dictionary database by the
図１４の例では、企業Ａ用辞書データベース３２０の方が、企業Ｂ用辞書データベース３３よりも優先順位が高い。
In the example of FIG. 14, the company A
したがって、変換処理部３５４は、最初に企業Ａ用辞書データベース３２０を参照し、音声と対応するテキスト（文字列）が存在しない場合には、企業Ｂ用辞書データベース３３０を参照するようにしても良い。
Therefore, the
以上のように、本実施形態によれば、１つの会議に、互いに異なる団体に所属している参加者が混在する場合には、各参加者が所属する団体と対応する辞書データベースを特定し、特定した辞書データベースを用いて音声データの変換を行う。 As described above, according to the present embodiment, when participants belonging to different organizations are mixed in one conference, the dictionary database corresponding to the organization to which each participant belongs is specified, The voice data is converted using the specified dictionary database.
例えば、企業Ａに所属する参加者と、企業Ｂに所属する参加者が会議を行った場合には、企業Ａ特有の用語と、企業Ｂ特有の用語とが用いられることが想定される。また、このような場合、企業Ａに所属する参加者が、企業Ｂ特有の用語を用いることや、その逆の場合も想定される。 For example, when a participant who belongs to the company A and a participant who belongs to the company B have a meeting, it is assumed that terms specific to the company A and terms specific to the company B are used. Further, in such a case, it is assumed that the participant belonging to the company A uses a term specific to the company B and vice versa.
本実施形態では、このような場合を想定し、会議に参加している参加者が所属する全ての団体について、対応する辞書データベースを特定し、優先順位を付与している。 In the present embodiment, assuming such a case, the corresponding dictionary database is specified and given priority for all the organizations to which the participants participating in the conference belong.
よって、本実施形態によれば、互いに異なる団体に所属する参加者が混在する場合でも、適切な辞書データベースを参照することができ、音声データからテキストデータへの変換の精度を向上させることができる。 Therefore, according to this embodiment, even when participants belonging to different organizations are mixed, an appropriate dictionary database can be referred to, and the accuracy of conversion from voice data to text data can be improved. .
また、本実施形態では、会議管理情報に含まれる端末ＩＤの数が多い団体から順に、対応する辞書データベースに優先順位を付与するものとしたが、これに限定されない。例えば、優先順位付与部３５７は、同一の会議ＩＤを含む複数の会議情報のうち、音声データと対応付けられた端末ＩＤの数が多い団体から順に、対応する辞書データベースに優先順位を付与しても良い。
In the present embodiment, the priority order is assigned to the corresponding dictionary database in order from the organization having the largest number of terminal IDs included in the conference management information. However, the present invention is not limited to this. For example, the
言い換えれば、会議中に、所属する参加者が発言した回数が多い団体と対応する辞書データベースから順に、優先順位を付与しても良い。優先順位を付与するとは、優先度が高いものが上位となるように順位を付与することである。 In other words, priorities may be given in order from a dictionary database corresponding to an organization with a large number of times that a participant to whom it belongs during a conference. Giving a priority order means assigning a priority order so that a higher priority order is higher.
このようにすれば、会議に参加した人数に関わりなく、参加者の発言回数が多い団体の辞書データベースが優先的に参照されることになる。言い換えれば、団体毎の参加者の人数に関わらず、発言内容と対応した辞書データベースが参照されることになり、音声データをテキストデータに変換する精度を向上させることができる。 In this way, regardless of the number of people who participated in the conference, the dictionary database of a group with a large number of utterances of participants is preferentially referred to. In other words, regardless of the number of participants in each group, the dictionary database corresponding to the content of the utterance is referred to, and the accuracy of converting voice data into text data can be improved.
また、本実施形態では、例えば、音声データの変換要求が言語処理装置３００に送信される際に、変換処理部３５４に参照させる辞書データベースの優先順位が指定されていても良い。
In this embodiment, for example, when a voice data conversion request is transmitted to the
この場合、例えば音声データの変換要求を行う端末装置５００や電子黒板４００の利用者が、参照させる辞書データベースの優先順位を入力しても良い。入力された優先順位を示す情報は、変換要求と共に会議支援サーバ２００へ送信され、会議支援サーバ２００から言語処理装置３００へ送信されても良い。
In this case, for example, a user of the
さらには、音声変換部３５０Ａは、辞書特定部３５３Ａにより複数の辞書データベースが特定された場合に、優先順位を付与しなくても良い。この場合、例えば、音声データにおける１つの用語に対して、複数の辞書データベースそれぞれにおいて対応するテキスト（文字列）が存在する際には、各辞書データベースから対応する文字列を取得し、列挙しても良い。 Furthermore, the voice conversion unit 350A does not have to assign priorities when a plurality of dictionary databases are specified by the dictionary specifying unit 353A. In this case, for example, when there is a corresponding text (character string) in each of a plurality of dictionary databases for one term in the speech data, the corresponding character strings are acquired from each dictionary database and listed. Also good.
具体的には、例えば音声データにおいて、「ＡＡ」という用語があったとする。この用語に対して、ある辞書データベースでは、「ＡＡ」と対応する文字列は「ＡＡＢ」であり、他の辞書データベースでは対応する文字列は「ＡＡＣ」であったとする。 Specifically, for example, it is assumed that there is a term “AA” in audio data. For this term, it is assumed that in one dictionary database, the character string corresponding to “AA” is “AAB”, and in the other dictionary database, the corresponding character string is “AAC”.
この場合、本実施形態の変換処理部３５４は、音声「ＡＡ」に対応する文字列として、「ＡＡＢ／ＡＡＣ」と表記しても良い。
In this case, the
本発明は、具体的に開示された実施形態に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。 The present invention is not limited to the specifically disclosed embodiments, and various modifications and changes can be made without departing from the scope of the claims.
１００ 言語処理システム
２００ 会議支援サーバ
２１０ 会議管理情報データベース
２２０ 会議情報データベース
３００ 言語処理装置
３１０ 端末情報データベース
３２０ 企業Ａ用辞書データベース
３３０ 企業Ｂ用辞書データベース
３４０ 企業Ｃ用辞書データベース
３５０ 音声変換部
４００ 電子黒板
５００ 端末装置
DESCRIPTION OF
Claims (8)
音声データと、前記音声データを収集する端末装置の利用者のユーザ情報とを対応付けて記憶する記憶部と、
端末装置の利用者が所属するグループと、前記グループに所属する利用者のユーザ情報とを対応付けたユーザ情報データベースと、
前記グループ毎の辞書データベースと、
前記音声データに基づくテキストデータへの変換要求を行う変換要求部と、
前記変換要求を受けて、前記音声データと対応付けられたユーザ情報から、前記ユーザ情報データベースを参照して変換に用いる辞書データベースを特定する辞書特定部と、
特定された辞書データベースを参照して、前記音声データをテキストデータへ変換する変換処理部と、を有する言語処理システム。 A language processing system realized by a plurality of devices,
A storage unit that stores voice data and user information of a user of the terminal device that collects the voice data in association with each other;
A user information database in which a group to which a user of a terminal device belongs and user information of a user belonging to the group are associated with each other;
A dictionary database for each group;
A conversion request unit for performing a conversion request to text data based on the voice data;
In response to the conversion request, from user information associated with the voice data, a dictionary specifying unit that specifies a dictionary database used for conversion with reference to the user information database;
A language processing system comprising: a conversion processing unit that converts the voice data into text data with reference to the specified dictionary database.
前記音声データを収集した端末装置の利用者のユーザ情報と、前記利用者との議論に参加した他の利用者のユーザ情報とを、前記変換要求と共に前記辞書特定部へ出力し、
前記辞書特定部は、
前記利用者のユーザ情報と、前記他の利用者のユーザ情報と、に基づき、変換に用いる辞書データベースを特定する、請求項１記載の言語処理システム。 The conversion request unit
The user information of the user of the terminal device that collected the voice data and the user information of other users who participated in the discussion with the user are output to the dictionary specifying unit together with the conversion request,
The dictionary specifying unit
The language processing system according to claim 1, wherein a dictionary database used for conversion is specified based on the user information of the user and the user information of the other user.
前記変換処理部は、
前記優先順位が高い辞書データベースから順に参照して、前記音声データをテキストデータへ変換する、請求項２記載の言語処理システム。 When a plurality of dictionary databases are specified by the dictionary specifying unit, a dictionary corresponding to a group having a large number of users who participated in the discussion among groups to which the user and the other users belong. In order from the database, it has a priority level assigning unit that gives priority levels to the plurality of dictionary databases.
The conversion processing unit
The language processing system according to claim 2, wherein the speech data is converted into text data by sequentially referring to the dictionary database having the highest priority.
前記グループ内で用いられる略語を示す音声と、前記略語が示す文字列とを対応付けている、請求項１乃至３の何れか一項に記載の言語処理システム。 The dictionary database is
The language processing system according to any one of claims 1 to 3, wherein a voice indicating an abbreviation used in the group is associated with a character string indicated by the abbreviation.
前記音声データを収集する端末装置の利用者が所属するグループと、前記グループに所属する利用者のユーザ情報とを対応付けたユーザ情報データベースと、
前記グループ毎の辞書データベースと、
前記変換要求を受けて、前記音声データと、前記音声データと対応付けられたユーザ情報とを取得する音声データ取得部と、
取得した前記ユーザ情報から、前記ユーザ情報データベースを参照して変換に用いる辞書データベースを特定する辞書特定部と、
特定された辞書データベースを参照して、前記音声データをテキストデータへ変換する変換処理部と、を有する言語処理装置。 In response to a request for conversion to text data based on voice data, the language processing apparatus converts the voice data into text data,
A user information database that associates a group to which a user of the terminal device that collects the voice data belongs, and user information of a user who belongs to the group;
A dictionary database for each group;
An audio data acquisition unit that receives the conversion request and acquires the audio data and user information associated with the audio data;
From the acquired user information, a dictionary specifying unit that specifies a dictionary database used for conversion with reference to the user information database;
A language processing apparatus comprising: a conversion processing unit that converts the voice data into text data with reference to the specified dictionary database.
前記言語処理装置に、
前記変換要求を受けて、前記音声データと、前記音声データと対応付けられたユーザ情報とを取得する処理と、
取得した前記ユーザ情報から、前記ユーザ情報データベースを参照して変換に用いる辞書データベースを特定する処理と、
特定された辞書データベースを参照して、前記音声データをテキストデータへ変換する処理と、を実行させる言語処理プログラム。 A user information database in which a group to which a user of a terminal device that collects voice data belongs, user information of users belonging to the group, and a dictionary database for each group; voice data A language processing program that is executed by a language processing device that receives the conversion request to text data based on the voice data and converts the voice data into text data,
In the language processing device,
A process of receiving the conversion request and acquiring the audio data and user information associated with the audio data;
From the acquired user information, a process for identifying a dictionary database used for conversion with reference to the user information database;
A language processing program that executes processing for converting the voice data into text data with reference to the identified dictionary database.
音声データと、前記音声データを収集する端末装置の利用者のユーザ情報とを対応付けて記憶部に記憶する手順と、
前記音声データに基づくテキストデータへの変換要求を行う手順と、
前記変換要求を受けて、前記音声データと対応付けられたユーザ情報から、前記ユーザ情報データベースを参照して、変換に用いる辞書データベースを特定する手順と、
特定された辞書データベースを参照して、前記音声データをテキストデータへ変換する手順と、を有する言語処理方法。 It has a user information database in which a group to which a user of a terminal device belongs, user information of a user who belongs to the group, and a dictionary database for each group, and is realized by a plurality of devices. A language processing method by a language processing system,
A procedure for associating and storing audio data and user information of a user of a terminal device that collects the audio data in a storage unit;
A procedure for requesting conversion to text data based on the voice data;
In response to the conversion request, from the user information associated with the voice data, referring to the user information database, a procedure for specifying a dictionary database used for conversion;
A procedure for converting the voice data into text data with reference to the identified dictionary database.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016195087A JP6772734B2 (en) | 2016-09-30 | 2016-09-30 | Language processing system, language processing device, language processing program and language processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016195087A JP6772734B2 (en) | 2016-09-30 | 2016-09-30 | Language processing system, language processing device, language processing program and language processing method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018059961A true JP2018059961A (en) | 2018-04-12 |
| JP6772734B2 JP6772734B2 (en) | 2020-10-21 |
Family
ID=61908859
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016195087A Active JP6772734B2 (en) | 2016-09-30 | 2016-09-30 | Language processing system, language processing device, language processing program and language processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6772734B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021071658A (en) * | 2019-10-31 | 2021-05-06 | 株式会社リコー | Server device, communication system and information processing method |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007213005A (en) * | 2006-01-10 | 2007-08-23 | Nissan Motor Co Ltd | Recognition dictionary system and recognition dictionary system updating method |
| JP2012155272A (en) * | 2011-01-28 | 2012-08-16 | Nec Corp | Speech recognition dictionary extension device, system, method and program |
| JP2014167517A (en) * | 2013-02-28 | 2014-09-11 | Nippon Telegraph & Telephone East Corp | Conversation providing system, game providing system, conversation providing method, game providing method, and program |
-
2016
- 2016-09-30 JP JP2016195087A patent/JP6772734B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007213005A (en) * | 2006-01-10 | 2007-08-23 | Nissan Motor Co Ltd | Recognition dictionary system and recognition dictionary system updating method |
| JP2012155272A (en) * | 2011-01-28 | 2012-08-16 | Nec Corp | Speech recognition dictionary extension device, system, method and program |
| JP2014167517A (en) * | 2013-02-28 | 2014-09-11 | Nippon Telegraph & Telephone East Corp | Conversation providing system, game providing system, conversation providing method, game providing method, and program |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021071658A (en) * | 2019-10-31 | 2021-05-06 | 株式会社リコー | Server device, communication system and information processing method |
| JP7463690B2 (en) | 2019-10-31 | 2024-04-09 | 株式会社リコー | Server device, communication system, information processing method, program and recording medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6772734B2 (en) | 2020-10-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9858271B2 (en) | System and method for translating content between devices | |
| US20140149384A1 (en) | System and Method for Generating User Profiles for Human Resources | |
| US20210406913A1 (en) | Metric-Driven User Clustering for Online Recommendations | |
| JP5919752B2 (en) | Minutes creation system, minutes creation device, minutes creation program, minutes creation terminal, and minutes creation terminal program | |
| CN111009233A (en) | Voice processing method and device, electronic equipment and storage medium | |
| US20120271817A1 (en) | Information processing apparatus, information processing method, and program | |
| Thieberger | What remains to be done—Exposing invisible collections in the other 7,000 languages and why it is a DH enterprise | |
| CN111223487B (en) | Information processing method and electronic equipment | |
| Hall-Lew et al. | The Lothian Diary Project: sociolinguistic methods during the COVID-19 lockdown | |
| US11757949B2 (en) | Event registration system, user terminal, and storage medium | |
| KR101719926B1 (en) | Transform system and method for heterogeneous data through data collection api | |
| CN110717012A (en) | Method, device, equipment and storage medium for recommending grammar | |
| JP6772734B2 (en) | Language processing system, language processing device, language processing program and language processing method | |
| JP2019121093A (en) | Information generation system, information generation method, information processing device, program, and terminal device | |
| JP6166390B2 (en) | Social network server, screen display method and program | |
| Fume et al. | Implementation of Automatic Captioning System to Enhance the Accessibility of Meetings | |
| US11017073B2 (en) | Information processing apparatus, information processing system, and method of processing information | |
| JP6434363B2 (en) | Voice input device, voice input method, and program | |
| Million | Sharing stories: The Saskatchewan aboriginal storytelling project | |
| KR101896479B1 (en) | System for inputting memo, method thereof, and recordable medium storing the method | |
| Johansson et al. | Representational work and ‘reverse order’essentialism: Digitisation of local information in Thailand and Bhabha’s Third Space | |
| JP4865323B2 (en) | Graphic information processing device | |
| WO2019208211A1 (en) | Server device | |
| George et al. | Harnessing technology to respond to the global demand for learning during the COVID-19 pandemic | |
| Heini et al. | Remote data collection in sociolinguistics: lessons from the COVID-19 pandemic |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190703 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200323 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200331 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200527 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200901 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200914 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6772734 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |