JP2013073323A - Method and device for conference data integrated management - Google Patents

Method and device for conference data integrated management Download PDF

Info

Publication number
JP2013073323A
JP2013073323A JP2011210523A JP2011210523A JP2013073323A JP 2013073323 A JP2013073323 A JP 2013073323A JP 2011210523 A JP2011210523 A JP 2011210523A JP 2011210523 A JP2011210523 A JP 2011210523A JP 2013073323 A JP2013073323 A JP 2013073323A
Authority
JP
Japan
Prior art keywords
data
conference
audio
voice
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011210523A
Other languages
Japanese (ja)
Inventor
Tetsuya Miyajima
徹也 宮島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Communication Systems Ltd
Original Assignee
NEC Communication Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Communication Systems Ltd filed Critical NEC Communication Systems Ltd
Priority to JP2011210523A priority Critical patent/JP2013073323A/en
Publication of JP2013073323A publication Critical patent/JP2013073323A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Telephonic Communication Services (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a method and a device for conference data integrated management which can facilitate management of remarks of respective participants and documented data of the remarks in a conference, and enhance usability of conference data.SOLUTION: A device for conference data integrated management comprises: a channel-based voice data storage unit (207 and 208) which stores respective remarks of a plurality of participants with corresponding time information in individual voice channels associated with respective participants in a conference; and control units (201, 212 and 213) which display a conference data screen in an operable manner that enables a user to select and execute an optional function for each voice channel from a plurality of functions including a reproduction function of voice data and a time series display function of the voice data.

Description

本発明は会議情報や会議での参加者の発言などを含む会議データの管理方法および装置に関する。   The present invention relates to a method and apparatus for managing conference data including conference information and comments of participants in a conference.

一般に、会議の議事録を作成するには参加者一人一人の発言をテキストデータに変換する必要があり非常に大きな労力を要する。この労力を軽減するために、種々の支援システムが提案されている。たとえば、特許文献１には、発言者毎に音声を収集してテキストデータに変換し、それらを時系列に格納することで議事録を作成する会議サポートシステムが開示されている。この会議サポートシステムでは、各参加者のテキストデータをタイムスタンプに従って時系列に配列し、発言が時間的に重なった場合にはタイムスタンプの早い順に並べられる。   Generally, in order to create the minutes of a meeting, it is necessary to convert the speech of each participant into text data, which requires a great deal of labor. In order to reduce this labor, various support systems have been proposed. For example, Patent Document 1 discloses a conference support system that collects speech for each speaker, converts it into text data, and stores them in time series to create minutes. In this conference support system, the text data of each participant is arranged in a time series according to the time stamp, and when the utterances overlap in time, they are arranged in the order of the time stamp.

特開２０００−１１２９３１号公報JP 2000-112931 A

しかしながら、上述した会議サポートシステムは議事録の作成を支援するシステムであり、参加者のそれぞれの発言やそれらをテキスト化したデータを効率的かつ容易に管理することができない。このために会議データを有効に活用することが難しかった。   However, the conference support system described above is a system that supports the creation of minutes, and cannot efficiently and easily manage each participant's utterances and data obtained by converting them into text. For this reason, it was difficult to effectively use the conference data.

本発明は上記課題に鑑みてなされたものであり、その目的は、会議参加者のそれぞれの発言やその文書化データの管理を容易にし、会議データの利便性を向上させることが可能な統合管理方法および装置を提供することにある。   SUMMARY OF THE INVENTION The present invention has been made in view of the above-described problems, and an object of the present invention is to provide integrated management capable of facilitating management of each conference participant's remarks and documented data, and improving the convenience of conference data. It is to provide a method and apparatus.

本発明による会議データ統合管理装置は、操作部および画像表示部を有し、会議データを統合的に管理する装置であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有することを特徴とする。   A conference data integrated management device according to the present invention has an operation unit and an image display unit, and manages conference data in an integrated manner, and a plurality of audio channels associated with each conference participant are assigned to a plurality of conference data. A conference capable of selecting and executing any function from a plurality of functions including a voice data storage unit for each channel that stores participants' utterances together with time information, and a voice data playback function and a voice data time-series display function for each voice channel. And a control means for operably displaying the data screen.

本発明に係る会議データの統合管理方法は、操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、ことを特徴とする。   A conference data integrated management method according to the present invention is a conference data integrated management method in an apparatus that has an operation unit and an image display unit and manages conference data in an integrated manner, and is associated with each conference participant. The speech of a plurality of participants is stored in each individual audio channel together with the time information in the audio data storage means for each channel, and the control means has an audio data reproduction function and an audio data time series display function for each audio channel. A conference data screen on which an arbitrary function can be selected and executed from among a plurality of functions is displayed so as to be operable.

本発明に係る会議データの統合管理システムは、操作部および画像表示部を有し会議データを統合的に管理するシステムであって、会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、前記録音装置に接続された会議データ統合管理装置と、を有し、前記会議データ統合管理装置は、前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、を有する、ことを特徴とする。   An integrated management system for conference data according to the present invention is a system that has an operation unit and an image display unit and manages conference data in an integrated manner, and includes a plurality of audio channels associated with each conference participant. A recording device for recording the utterances of the participants together with time information, and a conference data integrated management device connected to the recording device, the conference data integrated management device for each audio channel from the recording device A conference data screen for selecting and executing an arbitrary function from a plurality of functions including a voice data storage means for each channel for storing recorded voice data and a voice data playback function and a voice data time series display function for each voice channel. And a control means for operably displaying.

本発明によれば、会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認や音声／文書化データの有効利用など会議データの利便性を向上させることができる。   According to the present invention, it becomes easy to manage each participant's utterances and their text data, and improve the convenience of the conference data such as confirmation of each participant's utterances and effective use of voice / document data. it can.

図１は本発明の第１実施形態に係る会議データ統合管理システムにおける録音再生装置のブロック図である。FIG. 1 is a block diagram of a recording / reproducing apparatus in the conference data integrated management system according to the first embodiment of the present invention. 図２（Ａ）は音声データの録音判定条件を説明するための模式的波形図であり、図２（Ｂ）は音声ファイル名の構成を示す図である。FIG. 2A is a schematic waveform diagram for explaining the sound data recording determination condition, and FIG. 2B is a diagram showing the structure of the sound file name. 図３（Ａ）〜（Ｃ）は録音再生装置の音声データ録音動作を説明するための音声データ記録部の模式的構成図である。3A to 3C are schematic configuration diagrams of an audio data recording unit for explaining the audio data recording operation of the recording / reproducing apparatus. 図４は、図１における会議データ統合管理装置の構成を示すブロック図である。FIG. 4 is a block diagram showing the configuration of the conference data integrated management apparatus in FIG. 図５は、本発明の一実施例による会議データ統合管理システムにおける会議データ画面の一例を示す図である。FIG. 5 is a diagram showing an example of a conference data screen in the conference data integrated management system according to an embodiment of the present invention. 図６は、本実施例による会議データ統合管理システムにおける音声データ画面の一例を示す図である。FIG. 6 is a diagram illustrating an example of an audio data screen in the conference data integrated management system according to the present embodiment. 図７（Ａ）は本実施例による会議データ統合管理システムにおける会議データ検索画面の一例を示す図、図７（Ｂ）および図７（Ｃ）はその検索結果の一例をそれぞれ示す図である。FIG. 7A is a diagram illustrating an example of a conference data search screen in the conference data integrated management system according to the present embodiment, and FIGS. 7B and 7C are diagrams illustrating examples of the search results. 図８は、本発明の他の実施例による会議データ統合管理システムにおける音声テキスト表示画面の一例を示す図である。FIG. 8 is a diagram showing an example of a voice text display screen in the conference data integrated management system according to another embodiment of the present invention.

本発明によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。さらに、発言が時間的に重なった場合でも、各参加者の発言やテキストデータを音声チャネルごとに表示することで、議事録データから実際の会議での発言の重なり等の会議状況を知ることが可能となる。以下、本発明の実施形態および実施例について図面を参照しながら詳細に説明する。   According to the present invention, by recording each voice of a plurality of speakers on separate channels, the voice of each speaker can be individually processed while maintaining a time series even when a plurality of participants speak at the same time. Can be managed. This facilitates the management of each conference participant's utterances and their text data, enabling confirmation of each participant's utterances and effective use of the data. In addition, even if the speech overlaps in time, by displaying the speech and text data of each participant for each audio channel, it is possible to know the conference status such as the overlap of speech in the actual conference from the minutes data It becomes possible. Hereinafter, embodiments and examples of the present invention will be described in detail with reference to the drawings.

１．一実施形態
１．１）システム
図１において、本発明の一実施形態による会議データ統合管理システムは、複数の音声入力装置Ｍ１−Ｍｎ、録音再生装置１０および会議データ統合管理装置２０からなり、会議データ統合管理装置２０が公衆網３０を通して議事録文書作成サービスを提供するサーバ４０へ接続可能である。 1. 1. Embodiment 1.1) System In FIG. 1, a conference data integrated management system according to an embodiment of the present invention comprises a plurality of voice input devices M1-Mn, a recording / playback device 10 and a conference data integrated management device 20, and a conference. The data integration management device 20 can be connected to a server 40 that provides a minutes document creation service through the public network 30.

会議の参加者Ｐ１−Ｐｎはそれぞれ音声入力装置Ｍ１−Ｍｎに対応づけられており、各音声入力装置Ｍｉ（ｉ＝１，２，..., or ｎ）は、対応する参加者Ｐｉの発言を集音し、音声信号ＳＳｉを送信する機能を有するマイクロフォンまたはその代替機能を持った装置であり、対応する参加者Ｐｉの音声信号を録音再生装置１０へ送信する。音声入力装置Ｍ１−Ｍｎは録音再生装置１０と有線または無線通信により接続されている。また録音再生装置１０は会議データ統合管理装置２０と有線または無線通信により接続されている。   Each of the conference participants P1-Pn is associated with the voice input device M1-Mn, and each voice input device Mi (i = 1, 2,..., Or n) speaks of the corresponding participant Pi. Is a microphone having a function of collecting the voice signal SSi and transmitting a voice signal SSi, or a device having an alternative function thereof, and transmits a voice signal of the corresponding participant Pi to the recording / reproducing apparatus 10. The voice input devices M1-Mn are connected to the recording / playback device 10 by wired or wireless communication. The recording / reproducing apparatus 10 is connected to the conference data integrated management apparatus 20 by wired or wireless communication.

録音再生装置１０は、後述する録音機能の他に、再生機能、通信機能などを有する。通信部１０１は、音声入力装置Ｍ１−Ｍｎからそれぞれ音声信号ＳＳ１−ＳＳｎを有線あるいは無線で受信し、受信した音声信号ＳＳｉを音声データ記録制御部１０２へ出力する。音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効であれば、音声入力装置Ｍｉの識別番号と受信時間情報とを用いて音声データＳｉを生成し、音声データ記録部１０３に記録する。音声データＳｉの生成方法については後述する（図２）。   The recording / reproducing apparatus 10 has a reproducing function, a communication function, etc. in addition to the recording function described later. The communication unit 101 receives the audio signals SS1-SSn from the audio input devices M1-Mn by wire or wirelessly, and outputs the received audio signals SSi to the audio data recording control unit 102. If the received audio signal SSi is valid, the audio data recording control unit 102 generates the audio data Si using the identification number of the audio input device Mi and the reception time information, and records the audio data Si in the audio data recording unit 103. A method for generating the audio data Si will be described later (FIG. 2).

音声データ記録部１０３は、音声入力装置ごとに音声データを録音する複数の音声チャネルＣＨ１−ＣＨｎを備える。音声データ記録制御部１０２の制御に従って、各音声入力装置Ｍｉから入力した音声データＳｉは当該音声入力装置の識別番号Ｍｉに対応する音声チャネルＣＨｉに録音される。録音された音声データは通信部０４を通して会議データ統合管理装置２０へ送信することができる。録音再生装置１０の録音／再生および送信動作は制御部１０５により制御される。後述するように、会議データ統合管理装置２０上で動作する音声・議事録データ管理プログラムに従って、音声データを入出力する機能も備えている。   The voice data recording unit 103 includes a plurality of voice channels CH1-CHn for recording voice data for each voice input device. Under the control of the voice data recording control unit 102, the voice data Si input from each voice input device Mi is recorded on the voice channel CHi corresponding to the identification number Mi of the voice input device. The recorded voice data can be transmitted to the conference data integrated management apparatus 20 through the communication unit 04. Recording / reproduction and transmission operations of the recording / reproducing apparatus 10 are controlled by the control unit 105. As will be described later, it also has a function of inputting / outputting voice data in accordance with a voice / minutes data management program operating on the conference data integrated management apparatus 20.

また、図示されていないが、録音再生装置１０には、ユーザインタフェースとして、録音スイッチ、再生スイッチ、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンが設けられている。録音スイッチはＯＮ／ＯＦＦ切替え可能でありき、ＯＮにするとすべての音声チャネルを録音待機状態に、ＯＦＦにするとすべての音声チャネルを録音停止状態に切り替える。再生スイッチはＯＮ／ＯＦＦ切替え可能であり、ＯＮにすると音声データを再生する。この時、会議データ指定ボタン、音声チャネル指定ボタン、音声データ指定ボタンで音声データを指定していると、指定されている音声データを再生する。音声データを指定していない場合は直前に録音した会議の音声データを再生する。会議データ指定ボタンは録音した任意の会議データに含まれるすべての音声データを指定する機能を備えている。音声チャネル指定ボタンは録音した会議データの任意の音声チャネルに含まれるすべての音声データを指定する機能を備えている。音声データ指定ボタンは任意の音声データを指定する機能を備えている。   Although not shown, the recording / reproducing apparatus 10 is provided with a recording switch, a reproduction switch, a conference data designation button, a voice channel designation button, and a voice data designation button as user interfaces. The recording switch can be switched ON / OFF. When the recording switch is turned on, all the voice channels are switched to the recording standby state, and when it is turned OFF, all the voice channels are switched to the recording stopped state. The reproduction switch can be switched ON / OFF, and when it is turned on, the audio data is reproduced. At this time, if the audio data is specified by the conference data specifying button, the audio channel specifying button, and the audio data specifying button, the specified audio data is reproduced. If no audio data is specified, the conference audio data recorded immediately before is played back. The conference data designation button has a function of designating all audio data included in any recorded conference data. The voice channel designation button has a function of designating all voice data included in an arbitrary voice channel of the recorded conference data. The voice data designation button has a function of designating arbitrary voice data.

会議データ統合管理装置２０は、パーソナルコンピュータ上で会議データ統合管理プログラムを実行することにより実現することができる。後述するように、会議データ統合管理装置２０は、録音再生装置１０との間で音声データを入出力する機能を有し、録音再生装置１０から入力された音声データは内部のデータベースに保存される。さらに、会議データ統合管理装置２０は、会議データを作成、編集する機能、データベース上にある音声データから所望の条件に該当する音声データを抽出して関連付ける機能、会議全体の音声データを再生する機能、指定した音声チャネルを再生する機能、各音声データを再生する機能、会議データの項目毎に任意の単語で検索する機能を備え、さらに議事録文書作成サービス４０を利用し会議データまたは音声データを文書データに変換するためのインタフェースを備えている。   The conference data integrated management device 20 can be realized by executing a conference data integrated management program on a personal computer. As will be described later, the conference data integrated management apparatus 20 has a function of inputting / outputting audio data to / from the recording / reproducing apparatus 10, and the audio data input from the recording / reproducing apparatus 10 is stored in an internal database. . Furthermore, the conference data integrated management device 20 has a function to create and edit conference data, a function to extract and associate audio data corresponding to a desired condition from audio data on the database, and a function to reproduce audio data of the entire conference , A function of reproducing a designated audio channel, a function of reproducing each audio data, a function of searching for an arbitrary word for each item of conference data, and further using the minutes document creation service 40 to obtain conference data or audio data. An interface for converting to document data is provided.

議事録文書作成サービス４０は、ネットワークを介して入力された会議データまたは音声データを文書に変換するネットワーク上で提供されるサービスである。会議データ統合管理装置２０は、議事録文書作成サービス４０へ会議データまたは音声データの文書化要求を送信することで文書化されたテキストデータを取得することができる。なお、ネットワーク上の議事録文書作成サービス４０ではなく、ユーザ側で音声−テキスト変換機能を有するプログラムを用意することも可能である。   The minutes document creation service 40 is a service provided on the network that converts meeting data or voice data input via the network into a document. The conference data integrated management apparatus 20 can acquire documented text data by transmitting a document data request for conference data or audio data to the minutes document creation service 40. Note that it is possible to prepare a program having a voice-text conversion function on the user side instead of the minutes document creation service 40 on the network.

１．２）録音動作
図２（Ａ）に示すように、音声データ記録制御部１０２は、受信した音声信号ＳＳｉが有効音量（しきい値）以上であるか否かを判定し、有効音量以上であれば参加者が発言したと判断して録音し、有効音量に達しない場合には発言がないあるいは無音時と判断して録音しない。ここでは、音声データＳＳｉ（１）、ＳＳｉ（３）が有効音量に達しているため録音され、それらの間にある音声データＳＳｉ（２）は有効音量に達していないため録音されない。音声データ記録制御部１０２は、録音される音声データＳｉにファイル名を付けられて音声データ記録部１０３に記録する。 1.2) Recording operation As shown in FIG. 2A, the audio data recording control unit 102 determines whether or not the received audio signal SSi is greater than or equal to the effective volume (threshold), and is greater than or equal to the effective volume. If so, it is determined that the participant has made a speech and recording is performed, and if the effective volume is not reached, it is judged that there is no speech or no sound is recorded. Here, the audio data SSi (1) and SSi (3) are recorded because they reach the effective volume, and the audio data SSi (2) between them is not recorded because the effective volume is not reached. The audio data recording control unit 102 adds a file name to the audio data Si to be recorded and records it in the audio data recording unit 103.

図２（Ｂ）にファイル名の一例を示す。ファイル名は音声入力装置Ｍ１−Ｍｎの識別番号と録音日時情報（年月日時分秒）とを埋め込んだ名称を用いる。ファイル名から音声入力装置を特定でき、時間情報から参加者の発言順を特定できる。   FIG. 2B shows an example of the file name. As the file name, a name in which the identification number of the voice input device M1-Mn and recording date / time information (year / month / day / hour / minute / second) are embedded is used. The voice input device can be specified from the file name, and the speech order of the participants can be specified from the time information.

上述したようにファイル化された音声データＳｉは、図３（Ａ）−図３（Ｃ）に示すように、音声データ記録制御部１０２により音声データ記録部１０３の対応する音声チャネルＣＨｉに記録される。すなわち、図３（Ａ）に示すように、参加者Ｐ１の発言により音声入力装置Ｍ１から音声信号ＳＳ１を入力すると、音声データ記録制御部１０２は、音声信号ＳＳ１からファイル化された音声データＳ１を生成し、音声データ記録部１０３の対応する音声チャネルＣＨ１に記録する。同様に、図３（Ｂ）、図３（Ｃ）に示すように、参加者Ｐ２〜Ｐｎの発言により音声入力装置Ｍ２〜Ｍｎから音声信号ＳＳ２〜ＳＳｎをそれぞれ入力すると、音声データ記録制御部１０２は、音声信号ＳＳ２〜ＳＳｎからそれぞれファイル化された音声データＳ２〜Ｓｎを生成し、音声データ記録部１０３の対応する音声チャネルＣＨ２〜ＣＨｎにそれぞれ記録する。ここでは、参加者と音声入力装置とが一対一に対応しているので、音声入力装置の識別番号と音声チャネルも一対一に対応しているが、これに限定されるものではない。１つの音声入力装置に複数の参加者の発言が集音されても、それらを声紋パターンを用いて識別できれば、各参加者の発言を異なる音声チャネルに記録することもできる。   The audio data Si filed as described above is recorded on the corresponding audio channel CHi of the audio data recording unit 103 by the audio data recording control unit 102 as shown in FIGS. 3 (A) to 3 (C). The That is, as shown in FIG. 3A, when the audio signal SS1 is input from the audio input device M1 in response to the speech of the participant P1, the audio data recording control unit 102 receives the audio data S1 filed from the audio signal SS1. It is generated and recorded in the corresponding audio channel CH 1 of the audio data recording unit 103. Similarly, as shown in FIGS. 3B and 3C, when the audio signals SS2 to SSn are respectively input from the audio input devices M2 to Mn by the utterances of the participants P2 to Pn, the audio data recording control unit 102 Generates audio data S2 to Sn filed from the audio signals SS2 to SSn, respectively, and records them in the corresponding audio channels CH2 to CHn of the audio data recording unit 103, respectively. Here, since the participant and the voice input device have a one-to-one correspondence, the voice input device identification number and the voice channel also have a one-to-one correspondence, but the present invention is not limited to this. Even if the speech of a plurality of participants is collected by one voice input device, the speech of each participant can be recorded on a different voice channel as long as they can be identified using a voice print pattern.

１．３）会議データの統合管理
図４において、会議データ統合管理装置２０はコンピュータに実現されたものであり、通常のコンピュータと同様に、プロセッサ２０１、通信部２０２および２０３、キーボードおよびポインティングデバイスあるいはタッチパネル等の操作部２０４、モニタを含む画像表示部２０５およびスピーカ等を含む音声出力部２０６を備えている。ここでは、通信部２０２が録音再生装置１０との接続を、通信部２０３が公衆網３０との接続を、それぞれ提供する。 1.3) Integrated management of conference data In FIG. 4, the conference data integrated management device 20 is realized by a computer, and like a normal computer, a processor 201, communication units 202 and 203, a keyboard and a pointing device or An operation unit 204 such as a touch panel, an image display unit 205 including a monitor, and an audio output unit 206 including a speaker and the like are provided. Here, the communication unit 202 provides a connection with the recording / playback apparatus 10, and the communication unit 203 provides a connection with the public network 30.

さらに会議データ統合管理装置２０はデータベース２０７を備え、データベース２０７には、会議毎に、チャネル別音声データ２０８、チャネル別議事録文書データ２０９、参照資料データ２１０および会議識別データが互いに関連付けられ検索可能に格納されている。   Furthermore, the conference data integrated management apparatus 20 includes a database 207. In the database 207, for each conference, channel-specific audio data 208, channel-specific minutes document data 209, reference material data 210, and conference identification data are associated with each other and can be searched. Stored in

チャネル別音声データ２０８は、録音再生装置１０の音声データ記録部１０３から順次受信したチャネル別の音声データをチャネル別に蓄積したデータであり、上述したように音声入力装置の識別番号と録音日時情報を含むファイル形式で格納される。チャネル別議事録文書データ２０９は、ユーザの指示に従って議事録文書作成サービス４０を利用して得られた音声データの文書化データ（議事録文書）である。参照資料データ２１０は、会議で使用したメモや図面などのデータである。会議識別データとしては、会議の名称、開催日時、開催場所、参加者などがある。   The channel-specific audio data 208 is data in which the channel-specific audio data sequentially received from the audio data recording unit 103 of the recording / reproducing device 10 is accumulated for each channel, and as described above, the identification number of the audio input device and the recording date / time information are stored. Stored in a file format that includes it. The channel-specific minutes document data 209 is voice data documented data (minutes document) obtained by using the minutes document creation service 40 in accordance with a user instruction. The reference material data 210 is data such as a memo or a drawing used in the meeting. The conference identification data includes the name of the conference, the date and time of the conference, the venue, and the participants.

また、会議データ統合管理装置２０はプログラム記憶部２１１を備え、プログラム記憶部２１１には会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３が格納されている。プロセッサ２０１は、会議データ統合管理プログラム２１２およびユーザインタフェースプログラム２１３を実行することで、ユーザインタフェースとして次に説明する表示画面を画像表示部２０５に提供し、ユーザが操作部２０４を操作することで統合的な管理を容易に実現できる。   In addition, the conference data integration management apparatus 20 includes a program storage unit 211, and the program storage unit 211 stores a conference data integration management program 212 and a user interface program 213. The processor 201 executes the conference data integration management program 212 and the user interface program 213 to provide a display screen described below as a user interface to the image display unit 205, and is integrated by the user operating the operation unit 204. Management can be realized easily.

ａ）会議データ画面
図５に示す会議データ画面３０１は、会議データを作成、編集あるいは表示するための画面であり、ユーザインタフェースプログラム２１３に含まれる。会議データ画面３０１では、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書、参考資料が項目として表示される。各項目はユーザが任意に編集することが出来る。会議データが作成された後に、会議データ画面３０１から音声データを選択すれば後述する音声データ画面４０１を、議事録文書を選択すれば文書化された議事録を、それぞれ表示することができる。 a) Conference Data Screen A conference data screen 301 shown in FIG. 5 is a screen for creating, editing, or displaying conference data, and is included in the user interface program 213. On the conference data screen 301, the name of the conference, the date and time (start date and time, end date and time), the location, the participants, the voice data, the minutes document, and the reference material that constitute the conference data are displayed as items. Each item can be arbitrarily edited by the user. After the conference data is created, an audio data screen 401 (to be described later) can be displayed by selecting audio data from the conference data screen 301, and a documented minutes can be displayed by selecting a minutes document.

図５に示す会議データ画面３０１において、たとえばポインティングデバイスやタッチパネルを通して「会議名称」や「開催場所」を選択すると、ユーザが操作部２０４を通してそれらのデータを任意に書き込むことができる。「開催日時」を選択すれば、ユーザが日時情報を入力できるが、会議名称および開催場所のデータから録音再生装置１０により自動登録されたファイル名の日時情報を自動で読み出すこともできる。「参加者」を選択すれば、会議データに関連付けられた音声データの音声入力装置識別番号が仮の名称として登録されるが、これも手動で入力可能である。   In the conference data screen 301 shown in FIG. 5, when “conference name” or “holding place” is selected through a pointing device or a touch panel, for example, the user can arbitrarily write the data through the operation unit 204. If “holding date / time” is selected, the user can input the date / time information, but the date / time information of the file name automatically registered by the recording / reproducing apparatus 10 can also be automatically read from the data of the meeting name and the holding place. If “Participant” is selected, the voice input device identification number of the voice data associated with the conference data is registered as a temporary name, which can also be manually input.

「音声データ」を選択すると、プロセッサ２０１は「開催日時」で特定される音声データをデータベース２０７のチャネル別音声データ２０８から自動で抽出し、会議識別データと関連付ける。「議事録文書」を選択すると、プロセッサ２０１は通信部２０３を通して議事録文書作成サービス４０へ文書化要求を送信し、それによって作成された文書データを登録する。具体的には、ある会議の特定参加者あるいは全参加者をユーザが指定し、その音声データの文書化要求を議事録文書作成サービス４０へ送信すると、議事録文書作成サービス４０から文書化されたデータが返ってくる。この文書化データをチャネル別議事録文書データ２０９としてデータベース２０７に格納する。したがって、会議が特定されれば、その会議の全参加者の音声データあるいは発言の文書化データを検索して表示させることが可能となる。次に、音声データが指定された場合の音声データ画面について説明する。   When “voice data” is selected, the processor 201 automatically extracts the voice data specified by “date and time” from the channel-specific voice data 208 of the database 207 and associates it with the conference identification data. When “Meeting document” is selected, the processor 201 transmits a document request to the minutes document creation service 40 through the communication unit 203, and registers the document data created thereby. Specifically, when a user designates a specific participant or all participants of a certain meeting and transmits a request for documenting the voice data to the minutes document creation service 40, the meeting document creation service 40 documents it. Data is returned. This documented data is stored in the database 207 as channel-specific minutes document data 209. Therefore, if a meeting is specified, it becomes possible to search and display the voice data of all participants of the meeting or the documented data of the speech. Next, an audio data screen when audio data is designated will be described.

ｂ）音声データ画面
図６に示す音声データ画面４０１はチャネルごとに音声データを再生出力するための画面であり、ユーザインタフェースプログラム２１３に含まれる。音声データ画面４０１は音声データ表示部４０２、再生ボタン４０３、出力ボタン４０４で構成される。 b) Audio Data Screen An audio data screen 401 shown in FIG. 6 is a screen for reproducing and outputting audio data for each channel, and is included in the user interface program 213. The audio data screen 401 includes an audio data display unit 402, a playback button 403, and an output button 404.

音声データ表示部４０２には、データベース２０７のチャネル別音声データ２０８から対応する音声データを読み出すことで、会議データに関連付けられた音声データが音声チャネル毎に時系列で表示される。図６では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58が、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言がどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、を一目で読み取ることができる。特許文献１に開示された通常の議事録では、特別なコメントを付加しない限り、このような会議の様子を読み取ることは不可能である。   The audio data display unit 402 reads out the corresponding audio data from the channel-specific audio data 208 of the database 207, thereby displaying the audio data associated with the conference data in time series for each audio channel. In FIG. 6, the audio data files M1_20000101_12_34_56 and M1_20000101_12_35_01 are displayed on the time axis as the audio channel CH1 (ie, the speech of the participant P1 collected by the audio input device M1), and the audio channel CH2 (ie, the audio input device M2). The voice data file M2_20000101_12_34_58 is used as the voice of the collected participant P2), and the voice data files Mn_20000101_12_35_00 and Mn_20000101_12_35_03 are used as the voice channel CHn (ie, the voice of the participant Pn collected by the voice input device Mn). Each is displayed on the axis. Therefore, it is possible to easily know at what timing each participant has made a statement. Here, the fact that the participant P2 has started speaking before the first statement of the participant P1 has ended, and that the participant Pn has started speaking for the second time before the participant P1 has finished speaking, Can be read at a glance. In the ordinary minutes disclosed in Patent Document 1, it is impossible to read the state of such a meeting unless a special comment is added.

再生ボタン４０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン４０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。   When the playback button 403 is selected, the audio data displayed on the screen is played back. At this time, if an audio channel or audio data is designated, the designated audio data is reproduced. If not specified, the audio data of all audio channels included in the conference data is reproduced. When the output button 404 is selected, the audio data displayed on the screen is mixed and output as one audio file. When an arbitrary audio channel or audio data is specified, an audio file in which only the specified audio data is mixed is output. The audio channel and audio data are specified by the user specifying on the GUI.

ｃ）会議データ検索画面
図７（Ａ）に示す会議データ検索画面５０１は会議データを検索するための機能であり、会議データを構成する会議名称、開催日時(開始日時、終了日時)、開催場所、参加者、音声データ、議事録文書および参考資料を指定する項目入力部と検索ボタン５０２とで構成される。各項目に対してユーザが任意のキーワードを指定すると、プロセッサ２０１はデータベース２０７から該当する会議データを抽出し、その検索結果を表示する。キーワードに該当する会議データがあれば図７(Ｂ)で示すように該当件数と会議データを表示する検索結果画面を、キーワードに該当する会議データがなければ、図７(Ｃ)で示すように「該当件数０件」の表示画面を表示する。 c) Conference Data Search Screen The conference data search screen 501 shown in FIG. 7A is a function for searching conference data. The conference name, the date / time (start date / time and end date / time) constituting the conference data, and the venue , An item input unit for designating participants, audio data, minutes documents, and reference materials, and a search button 502. When the user designates an arbitrary keyword for each item, the processor 201 extracts corresponding conference data from the database 207 and displays the search result. If there is meeting data corresponding to the keyword, a search result screen displaying the number of cases and meeting data as shown in FIG. 7B. If there is no meeting data corresponding to the keyword, as shown in FIG. Display the display screen of “Number of hits”.

１．４）効果
上述したように、本実施形態によれば、複数の発言者のそれぞれの音声を個別のチャネルに録音することで、同時に複数の参加者が発言した場合でも時系列を維持しつつ各発言者の音声を個別に処理し管理することができる。これにより会議参加者のそれぞれの発言やそのテキストデータの管理が容易となり、各参加者の発言の確認やデータの有効利用が可能となる。より具体的には、次の効果を奏する。 1.4) Effects As described above, according to the present embodiment, by recording the voices of a plurality of speakers in separate channels, a time series can be maintained even when a plurality of participants speak at the same time. However, each speaker's voice can be individually processed and managed. This facilitates the management of each conference participant's utterances and their text data, enabling confirmation of each participant's utterances and effective use of the data. More specifically, the following effects are achieved.

第一の効果は、録音した音声データを聴取する際に発言内容が明瞭になることにある。その理由は、音声データを参加者毎に個別の音声チャネルに録音することで、複数の参加者が同時に発言した場合でも音声が多重して録音されることを回避できるためである。   The first effect is that the content of a statement becomes clear when listening to recorded audio data. The reason is that by recording the audio data on an individual audio channel for each participant, it is possible to avoid multiple audio recording even when a plurality of participants speak at the same time.

第二の効果は、音声データを元に議事録文書の作成作業が容易になることにある。その理由は、第一の効果であげた発言内容が明瞭になることに加え、全参加者の発言が時系列順に管理され、実際の会議と同じ順番で音声データを再生することが出来るためである。また、会議データ統合管理プログラム２１２から直接議事録作成サービス４０を利用できるためである。   The second effect is that the creation of the minutes document is facilitated based on the audio data. The reason is that, in addition to clarifying the content of the speech raised in the first effect, the speech of all participants is managed in chronological order, and audio data can be reproduced in the same order as the actual conference. is there. This is because the minutes creation service 40 can be used directly from the conference data integrated management program 212.

第三の効果は、音声データの管理が容易になることにある。その理由は、会議毎に会議データが作成され、音声データを会議データに関連付けて管理することで、ユーザは直接音声データの関連付け管理することが不要となるためである。   A third effect is that management of audio data becomes easy. The reason is that conference data is created for each conference, and the audio data is managed in association with the conference data, so that the user does not need to manage the association of the audio data directly.

第四の効果は、議事録文書の管理が容易になることにある。その理由は、会議データに「会議名称」、「開催日時」、「開催場所」、「参加者」、「音声データ」、「議事録文書」、「参考資料」を関連付け、統合的に管理することで、ユーザは音声データや議事録文書など個々のデータを管理することが不要となるためである。また、必要なデータを会議データに集約して管理することで、検索も容易に出来るためである。   A fourth effect is that management of minutes documents becomes easy. The reason is that “conference name”, “date and time”, “location”, “participant”, “voice data”, “minutes document”, “reference material” are associated with the conference data and managed in an integrated manner. This is because the user does not need to manage individual data such as voice data and minutes documents. This is also because search can be easily performed by collecting and managing necessary data in conference data.

さらに、音声データおよび／またはテキストデータを会議データに関連付けることで、音声データが、どの参加者の発言であるかを示す識別情報と時間情報とを付加したファイルとして生成されるので、各音声データが会議において誰がどの時間に発言したものであるかを明確に特定することができる。また、各音声データとテキストデータとを対応付けるとともに議事録データにも関連付けて記憶するので、作成された議事録データに対応する音声データを簡単に再生することができ、議事録の品質および信頼性を向上させることができる。   Further, by associating the voice data and / or text data with the conference data, the voice data is generated as a file to which identification information indicating which participant's utterance is added and time information is added. Can clearly identify who said at what time in the meeting. In addition, since each voice data and text data are associated with each other and stored in association with the minutes data, the voice data corresponding to the created minutes data can be easily reproduced, and the quality and reliability of the minutes. Can be improved.

２．他の実施例
上述した図６の音声データ画面４０１では、チャネルごとに音声データを再生出力するための画面であったが、音声データの代わりに時系列の音声テキストデータを表示することもできる。 2. Other Embodiments The voice data screen 401 of FIG. 6 described above is a screen for reproducing and outputting voice data for each channel. However, time-series voice text data can be displayed instead of voice data.

図８に示す音声データ画面６０１は、チャネルごとに音声テキストデータを表示するための画面であり、音声テキストデータ表示部６０２、再生ボタン６０３、出力ボタン６０４で構成される。   A voice data screen 601 shown in FIG. 8 is a screen for displaying voice text data for each channel, and includes a voice text data display unit 602, a play button 603, and an output button 604.

音声テキストデータ表示部６０２には、データベース２０７のチャネル別議事録文書データ２０９から対応するテキストデータを読み出すことで、会議データに関連付けられた音声テキストデータが音声チャネル毎に時系列で表示される。図８では、音声チャネルＣＨ１（すなわち音声入力装置Ｍ１により集音された参加者Ｐ１の発言）として音声データファイルM1_20000101_12_34_56とM1_20000101_12_35_01とにそれぞれ対応するテキストデータが時間軸上に表示され、音声チャネルＣＨ２（すなわち音声入力装置Ｍ２により集音された参加者Ｐ２の発言）として音声データファイルM2_20000101_12_34_58に対応するテキストデータが、音声チャネルＣＨｎ（すなわち音声入力装置Ｍｎにより集音された参加者Ｐｎの発言）として音声データファイルMn_20000101_12_35_00とMn_20000101_12_35_03とにそれぞれ対応するテキストデータが、共通の時間軸上にそれぞれ表示されている。したがって、各参加者の発言の内容とそれがどのタイミングでなされたかを容易に知ることができる。ここでは、参加者Ｐ１の最初の発言が終わらないうちに参加者Ｐ２が発言を開始したこと、また参加者Ｐ１の発言が終わらないうちに参加者Ｐｎが２度目の発言を開始したこと、をそれらの内容と共に一目で読み取ることができる。上述した図６の音声データ画面４０１を図８に示す音声テキストデータ画面６０１に切り替えることも可能である。   By reading the corresponding text data from the channel-specific minutes document data 209 in the database 207, the voice text data display unit 602 displays the voice text data associated with the conference data in time series for each voice channel. In FIG. 8, text data corresponding to the audio data files M1_20000101_12_34_56 and M1_20000101_12_35_01 are displayed on the time axis as the audio channel CH1 (that is, the speech of the participant P1 collected by the audio input device M1), and the audio channel CH2 ( In other words, the text data corresponding to the voice data file M2_20000101_12_34_58 is voiced as the voice channel CHn (that is, the voice of the participant Pn collected by the voice input device Mn). Text data respectively corresponding to the data files Mn_20000101_12_35_00 and Mn_20000101_12_35_03 are displayed on a common time axis. Therefore, it is possible to easily know the content of each participant's remarks and at what timing. Here, the fact that the participant P2 has started speaking before the first statement of the participant P1 has ended, and that the participant Pn has started speaking for the second time before the participant P1 has finished speaking, It can be read at a glance along with their contents. The voice data screen 401 shown in FIG. 6 can be switched to the voice text data screen 601 shown in FIG.

再生ボタン６０３を選択すると、画面に表示されている音声データを再生する。この時、音声チャネルまたは音声データを指定していると、指定されている音声データを再生する。指定していない場合は会議データに含まれるすべての音声チャネルの音声データを再生する。出力ボタン６０４を選択すると、画面に表示されている音声データをミキシングして１つの音声ファイルとして出力する。任意の音声チャネルまたは音声データを指定すると、指定した音声データのみをミキシングした音声ファイルを出力する。なお、音声チャネルおよび音声データの指定はユーザがＧＵＩ上で指定することで実現される。   When the reproduction button 603 is selected, the audio data displayed on the screen is reproduced. At this time, if an audio channel or audio data is designated, the designated audio data is reproduced. If not specified, the audio data of all audio channels included in the conference data is reproduced. When the output button 604 is selected, the audio data displayed on the screen is mixed and output as one audio file. When an arbitrary audio channel or audio data is specified, an audio file in which only the specified audio data is mixed is output. The audio channel and audio data are specified by the user specifying on the GUI.

このように、ある特定の参加者の発言に着目することができるので、特定の音声入力装置に対応する音声データを時系列的に再生する形態や、会議において発言された全参加者の音声を会議にいる場合と同じように時系列的に再生する形態や、個々の発言に着目して再生する形態をユーザが自由に選択することができる。また、このような形態において、テキストデータを表示して確認することができるので、文書化の音声認識の精度に疑いがあっても、元の音声データを参照することで会議の議事録の品質および信頼性を向上させることができる。   In this way, since it is possible to focus on the speech of a specific participant, the voice data corresponding to the specific voice input device is reproduced in time series, or the voices of all participants who are spoken in the conference are displayed. The user can freely select a time-series playback mode and a playback mode paying attention to individual utterances as in the case of a meeting. In addition, in such a form, text data can be displayed and confirmed, so even if there is doubt about the accuracy of voice recognition in documentation, the quality of meeting minutes can be viewed by referring to the original voice data. And reliability can be improved.

また、議事録データと音声データとが関連付けて記憶されているので、後から議事録を参照する人に対しても、テキスト情報だけでは、よく分からない議論の推移や流れ等があっても生の録音音声データを実際に聞いて、自分の判断でその疑問点を解消できる可能性が高まり、利用しやすい会議データ管理を提供できる。   In addition, since the minutes data and voice data are stored in association with each other, it is possible for people who refer to the minutes later, even if there are changes or flows of discussion that are not well understood only by text information. The possibility of being able to solve the question by actually listening to the recorded audio data is increased and it is possible to provide easy-to-use conference data management.

３．付記
上述した実施形態の一部あるいは全部は、以下の付記のようにも記載されうるが、これらに限定されるものではない。 3. Additional Notes Part or all of the above-described embodiments may be described as the following additional notes, but are not limited thereto.

（付記１）
操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。 (Appendix 1)
An apparatus that has an operation unit and an image display unit and manages conference data in an integrated manner,
Channel-specific audio data storage means for storing the speech of a plurality of participants together with time information in individual audio channels associated with each conference participant;
Control means for operably displaying a conference data screen capable of selecting and executing an arbitrary function from a plurality of functions including an audio data reproduction function and an audio data time-series display function for each audio channel;
A conference data integrated management apparatus comprising:

（付記２）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記１に記載の会議データ統合管理装置。 (Appendix 2)
The conference according to claim 1, wherein when the time series display function of the audio data is selected and executed, the control unit displays an audio data display screen in which the audio data is arranged in time series for each of the audio channels. Integrated data management device.

（付記３）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記１または２に記載の会議データ統合管理装置。 (Appendix 3)
It further comprises channel-specific document data storage means for storing the document data in which the audio data for each audio channel is documented in association with the audio data, and the multiple functions include a time-series display function for the document data. The conference data integrated management device according to appendix 1 or 2, characterized in that:

（付記４）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記３に記載の会議データ統合管理装置。 (Appendix 4)
The meeting according to claim 3, wherein when the time series display function of the document data is selected and executed, the control means displays a document data display screen in which the document data is arranged in time series for each of the audio channels. Integrated data management device.

（付記５）
操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。 (Appendix 5)
A conference data integrated management method in an apparatus that has an operation unit and an image display unit and manages conference data in an integrated manner,
The speech of a plurality of participants is stored in the voice data storage means for each channel together with the time information in an individual audio channel associated with each conference participant,
The control means operably displays a conference data screen on which any function can be selected and executed from a plurality of functions including a sound data reproduction function and a sound data time series display function for each sound channel
The conference data integrated management method characterized by this.

（付記６）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記５に記載の会議データ統合管理方法。 (Appendix 6)
The conference according to claim 5, wherein when the time series display function of the voice data is selected and executed, the control means displays a voice data display screen in which the voice data is arranged in time series for each voice channel. Data integration management method.

（付記７）
前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記５または６に記載の会議データ統合管理方法。 (Appendix 7)
The apparatus further comprises channel-specific document data storage means for storing document data obtained by documenting voice data for each voice channel in association with the voice data, and the time-series display function of the document data is selected as the plurality of functions. The meeting data integrated management method according to appendix 5 or 6, characterized in that it is included in a possible manner.

（付記８）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記７に記載の会議データ統合管理方法。 (Appendix 8)
8. The conference according to appendix 7, wherein when the time series display function of the document data is selected and executed, the control means displays a document data display screen in which the document data is arranged in time series for each audio channel. Data integration management method.

（付記９）
操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。 (Appendix 9)
A system having an operation unit and an image display unit for managing conference data in an integrated manner,
A recording device that records the utterances of multiple participants along with time information on separate audio channels associated with each participant in the conference;
A conference data integrated management device connected to the recording device;
The conference data integrated management device comprises:
Channel-specific audio data storage means for storing audio data recorded for each audio channel from the recording device;
Control means for operably displaying a conference data screen capable of selecting and executing an arbitrary function from a plurality of functions including an audio data reproduction function and an audio data time-series display function for each audio channel;
A conference data integrated management system characterized by comprising:

（付記１０）
前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする付記９に記載の会議データ統合管理システム。 (Appendix 10)
The meeting according to claim 9, wherein when the time series display function of the voice data is selected and executed, the control means displays a voice data display screen in which voice data is arranged in time series for each voice channel. Integrated data management system.

（付記１１）
前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする付記９または１０に記載の会議データ統合管理システム。 (Appendix 11)
It further comprises channel-specific document data storage means for storing the document data in which the audio data for each audio channel is documented in association with the audio data, and the multiple functions include a time-series display function for the document data. The conference data integrated management system according to appendix 9 or 10, characterized in that:

（付記１２）
前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする付記１１に記載の会議データ統合管理システム。 (Appendix 12)
The meeting according to claim 11, wherein when the time series display function of the document data is selected and executed, the control means displays a document data display screen in which the document data is arranged in time series for each of the audio channels. Integrated data management system.

（付記１３）
前記複数機能に前記文書データ変換機能が選択可能に含まれ、前記文書データ変換機能が選択実行されると、公衆網上の文書変換サービスを利用して前記音声データに対応した文書データを取得することを特徴とする付記１１または１２に記載の会議データ統合管理システム。 (Appendix 13)
The document data conversion function is selectably included in the plurality of functions, and when the document data conversion function is selected and executed, document data corresponding to the audio data is acquired using a document conversion service on a public network. The conference data integrated management system according to appendix 11 or 12, characterized in that:

（付記１４）
付記９−１３のいずれか１項に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。 (Appendix 14)
The recording apparatus in the conference data integrated management system according to any one of appendices 9-13,
A plurality of voice input means for inputting voice for each participant;
Audio data recording means having an audio channel associated with each participant;
Voice data recording control means for generating voice data corresponding to the speech of the participant from the voice signal input by the voice input means, and recording the voice data in a voice channel corresponding to each participant;
A recording apparatus comprising:

本発明は、議事録を公文書として公開する必要がある会議の議事録文書作成や、企業、学校、自治体、委員会の様な日常的に会議を行う団体の会議議事録文書の作成および管理に適用できる。また、クラブ、サークル、講演会等の会議や活動記録の作成および管理する用途にも適用可能である。   The present invention creates meeting minutes documents for meetings that require the minutes to be published as public documents, and creates and manages meeting minutes documents for organizations that hold daily meetings such as companies, schools, local governments, and committees. Applicable to. It can also be applied to applications such as creating and managing meetings and activity records such as clubs, circles and lectures.

Ｐ１〜Ｐｎ 参加者
Ｍ１〜Ｍｎ 音声入力装置
１０ 録音再生装置
２０ 会議データ統合管理装置
３０ 公衆網
４０ 議事録文書作成サービス
１０１ 通信部
１０２ 音声データ記録制御部
１０３ 音声データ記録部
１０４ 通信部
１０５ 制御部
１０６ 再生部
２０１ プロセッサ
２０２ 通信部
２０３ 通信部
２０４ 操作部
２０５ 画像表示部
２０６ 音声出力部
２０７ データベース
２０８ チャネル別音声データ
２０９ チャネル別議事録文書データ
２１０ 参考資料データ
２１１ プログラム記憶部
２１２ 会議データ統合管理プログラム
２１３ ユーザインタフェースプログラム２１３ P1 to Pn Participants M1 to Mn Voice input device 10 Recording / playback device 20 Conference data integrated management device 30 Public network 40 Minute document creation service 101 Communication unit 102 Audio data recording control unit 103 Audio data recording unit 104 Communication unit 105 Control unit 106 playback unit 201 processor 202 communication unit 203 communication unit 204 operation unit 205 image display unit 206 audio output unit 207 database 208 audio data by channel 209 minutes document data by channel 210 reference material data 211 program storage unit 212 conference data integrated management program 213 User interface program 213

Claims (10)

操作部および画像表示部を有し、会議データを統合的に管理する装置であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれ格納したチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有することを特徴とする会議データ統合管理装置。 An apparatus that has an operation unit and an image display unit and manages conference data in an integrated manner,
Channel-specific audio data storage means for storing the speech of a plurality of participants together with time information in individual audio channels associated with each conference participant;
Control means for operably displaying a conference data screen capable of selecting and executing an arbitrary function from a plurality of functions including an audio data reproduction function and an audio data time-series display function for each audio channel;
A conference data integrated management apparatus comprising: 前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項１に記載の会議データ統合管理装置。   2. The audio data display screen according to claim 1, wherein when the audio data time series display function is selected and executed, the control means displays an audio data display screen in which audio data is arranged in time series for each audio channel. Conference data integrated management device. 前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項１または２に記載の会議データ統合管理装置。   It further comprises channel-specific document data storage means for storing the document data in which the audio data for each audio channel is documented in association with the audio data, and the multiple functions include a time-series display function for the document data. The conference data integrated management device according to claim 1, wherein the conference data is integrated and managed. 前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項３に記載の会議データ統合管理装置。   4. The document data display screen according to claim 3, wherein when the time series display function of the document data is selected and executed, the control means displays a document data display screen in which the document data is arranged in time series for each audio channel. Conference data integrated management device. 操作部および画像表示部を有し、会議データを統合的に管理する装置における会議データ統合管理方法であって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共にそれぞれチャネル別音声データ格納手段に格納し、
制御手段が、前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する、
ことを特徴とする会議データ統合管理方法。 A conference data integrated management method in an apparatus that has an operation unit and an image display unit and manages conference data in an integrated manner,
The speech of a plurality of participants is stored in the voice data storage means for each channel together with the time information in an individual audio channel associated with each conference participant,
The control means operably displays a conference data screen on which any function can be selected and executed from a plurality of functions including a sound data reproduction function and a sound data time-series display function for each sound channel.
The conference data integrated management method characterized by the above-mentioned. 前記音声データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに音声データを時系列に配置した音声データ表示画面を表示することを特徴とする請求項５に記載の会議データ統合管理方法。   6. The voice data display screen according to claim 5, wherein when the voice data time series display function is selected and executed, the control means displays a voice data display screen in which voice data is arranged in time series for each voice channel. Meeting data integrated management method. 前記装置が前記音声チャネル毎の音声データを文書化した文書データを当該音声データと関連付けて格納するチャネル別文書データ格納手段をさらに有し、前記複数機能に前記文書データの時系列表示機能が選択可能に含まれることを特徴とする請求項５または６に記載の会議データ統合管理方法。   The apparatus further comprises channel-specific document data storage means for storing document data obtained by documenting voice data for each voice channel in association with the voice data, and the time-series display function of the document data is selected as the plurality of functions. 7. The conference data integrated management method according to claim 5, wherein the conference data integrated management method is included. 前記文書データの時系列表示機能が選択実行されると、前記制御手段が前記音声チャネルごとに文書データを時系列に配置した文書データ表示画面を表示することを特徴とする請求項７に記載の会議データ統合管理方法。   8. The document data display screen according to claim 7, wherein when the time series display function of the document data is selected and executed, the control means displays a document data display screen in which the document data is arranged in time series for each audio channel. Meeting data integrated management method. 操作部および画像表示部を有し会議データを統合的に管理するシステムであって、
会議の参加者ごとに対応づけられた個別の音声チャネルに複数の参加者の発言を時間情報と共に記録する録音装置と、
前記録音装置に接続された会議データ統合管理装置と、
を有し、前記会議データ統合管理装置は、
前記録音装置から前記音声チャネルごとに記録された音声データをそれぞれ格納するチャネル別音声データ格納手段と、
前記音声チャネルごとに音声データの再生機能および音声データの時系列表示機能を含む複数機能から任意の機能を選択実行できる会議データ画面を操作可能に表示する制御手段と、
を有する、ことを特徴とする会議データ統合管理システム。 A system having an operation unit and an image display unit for managing conference data in an integrated manner,
A recording device that records the utterances of multiple participants along with time information on separate audio channels associated with each participant in the conference;
A conference data integrated management device connected to the recording device;
The conference data integrated management device comprises:
Channel-specific audio data storage means for storing audio data recorded for each audio channel from the recording device;
Control means for operably displaying a conference data screen capable of selecting and executing an arbitrary function from a plurality of functions including an audio data reproduction function and an audio data time series display function for each audio channel;
A conference data integrated management system characterized by comprising: 請求項９に記載の会議データ統合管理システムにおける前記録音装置であって、
前記参加者ごとの音声を入力する複数の音声入力手段と、
前記参加者ごとに対応づけられた音声チャネルを有する音声データ記録手段と、
前記音声入力手段により入力された音声信号から参加者の発言に対応する音声データを生成し、前記音声データを各参加者に対応する音声チャネルに記録する音声データ記録制御手段と、
を有することを特徴とする録音装置。 The recording apparatus in the conference data integrated management system according to claim 9,
A plurality of voice input means for inputting voice for each participant;
Audio data recording means having an audio channel associated with each participant;
Voice data recording control means for generating voice data corresponding to the speech of the participant from the voice signal input by the voice input means, and recording the voice data in a voice channel corresponding to each participant;
A recording apparatus comprising:
JP2011210523A 2011-09-27 2011-09-27 Method and device for conference data integrated management Pending JP2013073323A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011210523A JP2013073323A (en) 2011-09-27 2011-09-27 Method and device for conference data integrated management

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011210523A JP2013073323A (en) 2011-09-27 2011-09-27 Method and device for conference data integrated management

Publications (1)

Publication Number Publication Date
JP2013073323A true JP2013073323A (en) 2013-04-22

Family

ID=48477806

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011210523A Pending JP2013073323A (en) 2011-09-27 2011-09-27 Method and device for conference data integrated management

Country Status (1)

Country Link
JP (1) JP2013073323A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016129189A1 (en) * 2015-02-10 2016-08-18 Ｎｅｃソリューションイノベータ株式会社 Speech-to-text conversion aid system, server, speech-to-text conversion aid method and program
JP2018106148A (en) * 2016-12-12 2018-07-05 ソリザバ カンパニー リミテッドＳｏｒｉｚａｖａ Ｃｏ．， Ｌｔｄ． Multiplex speaker-speech-recognition correction system
JP2022050309A (en) * 2020-10-22 2022-03-30 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド Information processing method, device, system, electronic device, storage medium, and computer program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05266084A (en) * 1992-03-19 1993-10-15 Oki Electric Ind Co Ltd Minutes preparation system
JP2007318438A (en) * 2006-05-25 2007-12-06 Yamaha Corp Voice state data generating device, voice state visualizing device, voice state data editing device, voice data reproducing device, and voice communication system
US20090177469A1 (en) * 2005-02-22 2009-07-09 Voice Perfect Systems Pty Ltd System for recording and analysing meetings
JP2010238050A (en) * 2009-03-31 2010-10-21 Nec Corp Browsing system and method, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05266084A (en) * 1992-03-19 1993-10-15 Oki Electric Ind Co Ltd Minutes preparation system
US20090177469A1 (en) * 2005-02-22 2009-07-09 Voice Perfect Systems Pty Ltd System for recording and analysing meetings
JP2007318438A (en) * 2006-05-25 2007-12-06 Yamaha Corp Voice state data generating device, voice state visualizing device, voice state data editing device, voice data reproducing device, and voice communication system
JP2010238050A (en) * 2009-03-31 2010-10-21 Nec Corp Browsing system and method, and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
田中 和世 外３名: ""会議音声データの収録とデータファイル化"", 情報処理学会研究報告, vol. 第２００１巻，第６８号, JPN6015012741, 14 July 2001 (2001-07-14), JP, pages 85 - 90, ISSN: 0003042106 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016129189A1 (en) * 2015-02-10 2016-08-18 Ｎｅｃソリューションイノベータ株式会社 Speech-to-text conversion aid system, server, speech-to-text conversion aid method and program
JPWO2016129189A1 (en) * 2015-02-10 2017-11-16 Ｎｅｃソリューションイノベータ株式会社 Phonetic transcription support system, server, phonetic transcription support method and program
JP2018106148A (en) * 2016-12-12 2018-07-05 ソリザバ カンパニー リミテッドＳｏｒｉｚａｖａ Ｃｏ．， Ｌｔｄ． Multiplex speaker-speech-recognition correction system
JP2022050309A (en) * 2020-10-22 2022-03-30 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド Information processing method, device, system, electronic device, storage medium, and computer program
JP7331044B2 (en) 2020-10-22 2023-08-22 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド Information processing method, device, system, electronic device, storage medium and computer program

Similar Documents

Publication Publication Date Title
US11699456B2 (en) Automated transcript generation from multi-channel audio
WO2019148583A1 (en) Intelligent conference management method and system
US9438993B2 (en) Methods and devices to generate multiple-channel audio recordings
US7047192B2 (en) Simultaneous multi-user real-time speech recognition system
JP2013222347A (en) Minute book generation device and minute book generation method
JP5206553B2 (en) Browsing system, method, and program
JP4787328B2 (en) Method and apparatus for capturing audio during a conference call
US20130204618A1 (en) Methods and Systems for Dictation and Transcription
JP2005341015A (en) Video conference system with minute creation support function
TWI590240B (en) Meeting minutes device and method thereof for automatically creating meeting minutes
JP2006301223A (en) System and program for speech recognition
Brutti et al. WOZ acoustic data collection for interactive TV
JP2010060850A (en) Minute preparation support device, minute preparation support method, program for supporting minute preparation and minute preparation support system
JP2004287201A (en) Device and method for preparing conference minutes, and computer program
JP2010054991A (en) Recording device
JP6091690B1 (en) Assembly management support system and assembly management support method
JP2013073323A (en) Method and device for conference data integrated management
US20140278404A1 (en) Audio merge tags
EP2775694B1 (en) Methods and devices to generate multiple-channel audio recordings with location-based registration
US10381046B2 (en) Apparatus and methods for recording audio and video
JP2008011272A (en) Conference system and control method, program, and storage medium
JP5573402B2 (en) CONFERENCE SUPPORT DEVICE, CONFERENCE SUPPORT METHOD, CONFERENCE SUPPORT PROGRAM, AND RECORDING MEDIUM
JP2017033376A (en) Information processing device, information processing method, and control program
Baume Semantic Audio Tools for Radio Production
US20190027161A1 (en) Method and system for facilitating decomposition of sound signals

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140811

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150402

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150528

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20151027