JP2004077966A - Digital stenographic system - Google Patents

Digital stenographic system Download PDF

Info

Publication number
JP2004077966A
JP2004077966A JP2002240434A JP2002240434A JP2004077966A JP 2004077966 A JP2004077966 A JP 2004077966A JP 2002240434 A JP2002240434 A JP 2002240434A JP 2002240434 A JP2002240434 A JP 2002240434A JP 2004077966 A JP2004077966 A JP 2004077966A
Authority
JP
Japan
Prior art keywords
data
recording
translation
shorthand
voice data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002240434A
Other languages
Japanese (ja)
Other versions
JP3668892B2 (en
Inventor
Kenji Tsuda
津田 健司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
YAMATOSOKKI JOHO CENTER CO Ltd
YAMATOSOKKI JOHO CT CO Ltd
Original Assignee
YAMATOSOKKI JOHO CENTER CO Ltd
YAMATOSOKKI JOHO CT CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by YAMATOSOKKI JOHO CENTER CO Ltd, YAMATOSOKKI JOHO CT CO Ltd filed Critical YAMATOSOKKI JOHO CENTER CO Ltd
Priority to JP2002240434A priority Critical patent/JP3668892B2/en
Publication of JP2004077966A publication Critical patent/JP2004077966A/en
Application granted granted Critical
Publication of JP3668892B2 publication Critical patent/JP3668892B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a digital stenographic system which has reduced manufacturing cost and contributes to considerable improvement of productivity by digitizing each process of converting stenographs and speeches to characters. <P>SOLUTION: The stenographic system is provided with a recording stenographing system provided in a site of recording, a server system for managing data by data transmission/reception between the recording stenographing system and a transcribing system, and the transcribing system for performing transcribing work of voice data. The recording stenographing system has a function of recording and storing voices in the site of recording and a function of transmitting recorded voice data to the server system. The server system has a voice data storage means for storing transmitted voice data, an authentication means for authenticating access from the transcribing system, a transcript data storage means for storing transcript data transmitted from the transcribing system, and a transmission/reception control means for controlling data transmission/reception. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、音声データの録音取材現場に備えられる録音速記システムと、録音速記システム及び反訳システムとの間でデータ送受信を行うとともにデータ管理を行うサーバシステムと、録音速記の現場において収録された音声データを、文字データとして入力を行う反訳システムとから構成される、デジタル速記システム。
【0002】
【従来の技術】
従来、速記業界はテープレコーダ及び日本語ワードプロセッサ(ソフト含む)の出現で飛躍的な成長を果たしてきたが、昨今の中央省庁、地方自治体の情報公開、一般企業の情報公開の気運と需要は、それを遥かに上回るスピードで拡大していると想定されている。
取材現場で収録された媒体は、通常の輸送方法によって管理部門に収集され、反訳オペレータへの手配内容に応じて、媒体全体から担当箇所の選択及び複製等を実施した上で、それぞれのオペレータに引き渡されている。これらにかかる時間的、経済的、人的負担は看過できない状況に至っている。
速記業界における文書情報化の市場拡大とともに、新規参入者との価格競争はますます激化の様相を呈することは必至であり、早急に現状を精査し、次世代に向けた対策を講じる必要がある。
【0003】
【発明が解決しようとする課題】
反訳業務では、昨今、会議等の開始から反訳データの完成までを短くし、短納期化が求められ続けている。加えて、パソコンとブロードバンド・インターネットの普及は更に助長することが想定され、その対応を迫られている。
このような通信等を含めた環境の変化に対応して、従来の速記と反訳のあり方を見直し、利用可能な最新のテクノロジーを積極的に採用し、時間、コスト、人的負荷を必要最小限に抑え、今後予想されるであろう速記反訳業務のスピード化や、納期、品質、価格等の競争に対応するシステムが必要とされている。
【0004】
そこで、本発明においては、上記の様々な問題を解決し、取材現場、管理サーバ、反訳作業の各現場間のデータ送信に、標準のネットワークインフラであるブロードバンド・インターネット回線を利用することにより、これまでのテープ等の録音媒体の受け渡しに要する時間的コスト、運搬のコスト等を削減するシステムを提供することを目的とする。
前記のような、短納期の顧客ニーズに対応するために、入力速度の向上はもとより、そのほかインターネット放送のLive配信等で利用されているストリーミング技術を応用することにより、録音取材を開始した直後から、管理サーバ側にデータを送信し、反訳作業現場までの音声データの伝達が、ほぼタイムラグのない運用を行うことにより、短納期化を可能とする技術を導入する。
【0005】
さらに、本発明においては、録音機材は小型軽量化、高圧縮、長時間録音が可能なICレコーダやビデオカメラ、パーソナルコンピュータ、携帯情報端末等を採用し、反訳オペレータとの間はLANまたはブロードバンド接続回線で接続し、効率的な集配信と反訳作業が可能な環境を整えることにより、遠隔地同士の録音取材から反訳作業までを可能にするとともに、サーバ上のデータ管理のためのマンマシンインターフエースはWWWブラウザ等を利用して展開し、操作の容易性、一貫性、同時性、柔軟性を実現することを目的とする。
【0006】
【課題を解決するための手段】
上記課題を解決するため、請求項1に記載の発明においては、
音声データの録音現場に備えられる録音速記システムと、録音速記システム及び反訳システムとの間でデータ送受信を行うとともにデータ管理を行うサーバシステムと、録音現場において収録された音声データを文字化する反訳システムとから構成され、
前記の、録音速記システムは、音声録音装置を備える端末装置を含み構成され、取材現場で録音された音声データを録音し記憶する機能と、録音された音声データをサーバシステムに送信する機能とを備え、
前記の、サーバシステムは、録音速記システムから送信された音声データを記憶する音声データ記憶手段と、1または複数の反訳システムからのアクセスを認証する認証手段と、反訳システムから送信された反訳データを記憶する反訳データ記憶手段と、録音速記システム及び反訳システムとの間でデータ送受信を行う制御を行う送受信制御手段とを少なくとも備えた、デジタル速記システムであることを特徴としている。
【0007】
また、上記課題を解決するため、請求項2に記載の発明においては、
請求項1に記載の発明において、
前記の、サーバシステムが備える認証手段は、反訳システムのユーザー情報を記憶するユーザー情報記憶手段と、録音速記システムで収録された音声データの顧客情報、会議情報等を記憶する現場取材記憶手段とを参照して、該当する音声データについて該当するユーザーのアクセス権の認証を行う、デジタル速記システムであることを特徴としている。
【0008】
また、上記課題を解決するため、請求項3に記載の発明においては、
請求項1または2に記載の発明において、
前記の反訳システムは、イントラネット、インターネットに代表される通信手段を介してサーバシステムの認証処理を経ることにより、現場取材に関する顧客情報、会議情報等のデータと、録音速記システムから送信された音声データとを取得して反訳作業を行う機能を備えた、デジタル速記システムであることを特徴としている。
【0009】
また、上記課題を解決するため、請求項4に記載の発明においては、
請求項1〜3に記載の発明において、
前記の、送受信制御手段で、録音速記システムから反訳システムへの音声データの送信にストリーミング配信形式で送信を行い、音声データの取得から反訳システムによる作業開始までの工程に時間差が発生しないようにする、デジタル速記システムであることを特徴としている。
【0010】
また、上記課題を解決するため、請求項5に記載の発明においては、
請求項1〜4に記載の発明において、
前記の、反訳システムは、音声再生機能を備える端末装置を含み構成され、端末装置あるいはネットワーク上のサーバシステムに記憶された音声データを取得し、再生する機能と、音声データを反訳した文字データを編集し記憶する機能と、反訳された文字データをサーバシステムに送信する機能とを備えた、デジタル速記システムであることを特徴としている。
【0011】
また、上記課題を解決するため、請求項6に記載の発明においては、
請求項5に記載の発明において、
反訳システムが備える前記の音声再生機能は、マウス、キーボード、フットペダルのいずれかを少なくとも含む再生制御手段を用いて音声再生を行う再生ソフトウェアが端末装置に備えられることにより実現される、デジタル速記システムであることを特徴としている。
【0012】
また、上記課題を解決するため、請求項7に記載の発明においては、
請求項5または6に記載の発明において、
複数の反訳システムにおいて、端末装置に、音声データを反訳した文字データを編集し記憶する機能を備えるエディタソフトウェアが備えられ、それぞれの反訳システムにおいてエディタプログラムが処理を行う文字データは、それぞれの反訳システムにおいて共有される、デジタル速記システムであることを特徴としている。
【0013】
また、上記課題を解決するため、請求項8に記載の発明においては、
請求項7に記載の発明において、
複数の反訳システムにおいて共有される文字データは、少なくともいずれかの反訳システムまたはサーバシステムにおいて、最新のデータが更新され記憶される、デジタル速記システムであることを特徴としている。
【0014】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
本発明のデジタル速記システムは、音声データの収録の現場に備えられる録音速記システムと、録音速記システム及び反訳システムとの間でデータの送受信を行うとともにデータ管理を行うサーバシステムと、録音速記システムにおいて収録された音声データを、文字データに反訳作業を行う反訳システムとから構成される。
図1は、本発明の基本的な構成の一例を示すシステム構成図である。
本システムは、音声データの文字化作業である速記業務に関わる音声データ収録現場(収録)、管理サーバ(蓄積・配信)、反訳入力(音声文字化作業)の3つの工程をデジタル化し、時間的、経済的な効率を上げ、コストの削減を図るとともに、デジタルデータのメリットを生かし、顧客のニーズに合った新たなサービスを展開するものである。
【0015】
前記の、録音速記システムは、音声録音装置を備える端末装置を含み構成される。録音の現場で音声を収録し記憶する機能と、収録された音声データをサーバシステムに送信する機能とを備えている。
録音速記システムは、あらゆる会議、講演、対談、インタビュー等の、音声情報の文字による記録が必要な取材現場に備えられるものであり、マイク等の録音装置を備えるICレコーダ、ビデオカメラ、パーソナルコンピュータ、携帯情報端末、その他インターネット、イントラネットに代表される通信手段を介してサーバシステムにアクセス可能な端末装置を含み構成される。
図2は、録音速記システムの基本的な構成を示すブロック図であり、マイク等による録音装置と端末装置とから構成されている。端末装置は、ディスプレイなどの表示手段、ハードディスクやメモリなどの記憶手段、インターネット等の通信手段に接続しデータの送受信を行うためのデータ送受信手段、これらを制御する制御手段などを含み構成されている。
録音を行う端末装置のクライアント機能としては、マイク等から入力される音声をデジタル形式でパソコン等に取り込み、録音したデータをサーバに送信する機能を有する。取材担当者が現地に赴きICレコーダや、ビデオカメラ、パーソナルコンピュータ、携帯情報端末等の機器を利用し、直接デジタル形式で収録した音声データをサーバに送信することもできる。
【0016】
また、録音速記システムは、収録された音声データをサーバシステムに送信する機能を備える。サーバシステムは、速記あるいは録音等による音声の文字化作業を請け負う企業等が備えるものであり、各録音取材現場で収録された音声データを管理し、管理サーバに音声データを送信する。
録音速記システムの端末装置は、収録した音声データのストリーミングによるサーバシステムへのデータ送信機能を備える。また、望ましくは端末装置ローカルにデータを保存する機能を備えることにより、ストリーミング送信機能、ローカルデータ保存機能を同時に使用することが可能にされる。
サーバシステムへの音声データの送信は、音声データをコンパクト型ノートパソコンに取り込み、録音取材現場に用意されているブロードバンド・インターネット回線、またはPHS回線を利用し、管理サーバへの情報伝送を行い、遠隔地での録音取材と反訳作業を限りなく同時に行い、ロスタイムの最小化を図る。
【0017】
次に、サーバシステムについて説明する。
サーバシステムは、一例としては速記あるいは録音媒体等による音声の文字化業務を受託する企業等の本社等に設けられ、望ましくは大容量の音声情報管理サーバを設置し、反訳用の音声データの蓄積及び管理をするとともに反訳オペレータ向けの配信運用機能を持たせる。録音取材現場から送信されてきた音声データあるいは顧客から送信されてきた当該会議等に関するデータ等を蓄積・管理し、アクセス権を持った反訳担当のユーザーにのみ、音声データ、顧客情報、会議情報等にアクセスを許可するものである。
【0018】
図3は、サーバシステムの基本的な構成を示すブロック図である。
サーバシステムは、録音速記システムから送信された音声データを記憶する音声データ記憶手段を備えている。
音声データ記憶手段は、録音速記システムから送信された音声データを記憶する。音声データのデータ形式には様々な形式を採用することができ、リアルタイムまたはそれに近いタイミングで反訳を行うためにストリーミング配信、再生が可能なデータ形式を用いる。また、音声データを含む動画像データ、映画、ビデオカメラ、スライドショウデータ、テレビ電話やテレビ会議等の中継データを含むこともできる。
音声データは、様々な録音現場から送信されたデータを記憶することができるので、会議名や会場名、録音日時、その他の録音現場現場を識別するデータ(例えば現場取材ID)と関連付けて記憶される。
【0019】
サーバシステムは、1または複数の反訳システムからのアクセスを認証する認証手段を備えている。
サーバシステムが備える認証手段は、反訳システムのユーザー情報を記憶するユーザー情報記憶手段と、録音する当該顧客情報、会議に関する情報等を記憶する現場の現場取材記憶手段とを参照して、該当する音声データについて該当するユーザーのアクセス権の認証を行う。
ユーザー情報記憶手段は、反訳業務を行うユーザーに関するデータを記憶するものであり、氏名、年齢、電子メールアドレス等の個人情報や、ID、パスワードなどの認証情報を登録することにより、これらの情報を記憶する。利用者情報は、サーバシステムに記憶されるデータへのアクセス権の認証時に用いられる。
【0020】
次に、サーバシステムは、反訳システムから送信された反訳データを記憶する反訳データ記憶手段を備えている。
反訳データ記憶手段は、反訳システムから送信された、音声データに対応する反訳データを記憶する。反訳データには様々な形式を採用することができるが、通常はテキストファイルであり、その他ワードプロセッサ等のデータ形式を用いることができる。
反訳データ記憶手段は、複数の反訳システムから送信された反訳データを記憶することができるが、後述するように、1単位の仕事に対応する反訳作業を、複数のオペレータが分割して同時に行うことがあるため、この場合、1単位の反訳データは、各反訳システム間では共有可能にすることが望ましい。また、1単位の反訳データは、それに対応した録音取材の現場を識別するデータ(例えば現場取材ID)と関連付けられて記憶される。
【0021】
次に、サーバシステムは、録音速記システム及び反訳システムとの間でデータ送受信を行う制御を行う送受信制御手段を備えている。
録音速記システムから送信される音声データは、音声データ記憶手段に記憶される。
また、サーバシステムにアクセスし、該当する録音取材現場単位に、例えば現場取材ID等により指定して配信要求をした反訳システムに対して、当該音声データを送信する制御を行う。ストリーミング配信形式を採用した場合には、音声データ記憶手段に記憶するとともに、逐次、反訳システムに音声データの送信を行う。
【0022】
また、送受信制御手段は、反訳システムから送信されるテキストデータ等の反訳データを、反訳データ記憶手段に記憶する。
また、サーバシステムにアクセスし、該当する音声データの反訳データ、例えば反訳作業中のデータや、バックアップされたデータ等の配信要求をした反訳システムに対し、反訳データを送信する制御を行う。
さらに、後述するように、1単位の仕事の反訳作業を、複数のオペレータが分割して作業を行うとき、1単位の反訳データを複数の反訳システム間で共有可能にする場合において、共有される最新のデータをサーバシステムで管理するためには、作業中の各反訳システムとサーバシステムとが接続されている状態で、常に最新のデータに更新され、かつ反訳データの整合性を保つように制御される。
なお、1単位の反訳データを、オペレータ間で共有を可能にする場合には、サーバシステムに接続せず、作業中の各反訳システム同士が接続されている状態で、常に最新のデータに更新され、かつ反訳データの整合性を保つように制御することもできる。
【0023】
次に、反訳システムについて説明する。
図4は、反訳システムの基本的な構成を示すブロック図である。
反訳システムは、アクセス権を持った反訳オペレータであるユーザーが、音声データを再生しながら反訳作業を行うためのシステムであり、イントラ・インターネット等の通信手段を介して本社等に設けられたサーバシステムから音声データ、顧客情報、会議情報等を取得し、反訳入力業務を行う。
前記の、反訳システムは音声再生機能を備える端末装置を含み構成され、端末装置、あるいはネットワーク上のサーバシステムに記憶された音声データを取得し再生する機能と、各音声データを文字化した反訳データを編集し記憶する機能と、反訳データをサーバシステムに送信する機能とを備える。
【0024】
サーバシステムの送受信制御手段により送受信されるデータは、録音取材の現場から反訳システムへの送信にストリーミング配信形式で送信を行い、反訳システムにおいて、現場の音声取材開始から反訳作業開始までの作業工程間に、限りなく時間差が発生しないようにすることが望ましい。
昨今、情報公開の進展に比例して、会議等の開始から反訳データの完成までの短時間化が顧客から求められ続けている。音声データの収録現場、管理サーバ、反訳作業までのデータ交換には、標準のネットワークインフラであるブロードバンド・インターネット回線を利用することにより、これまでのデータ等の受け渡しによる時間的コスト、経済的コストを削減する。
【0025】
反訳システムが備える前記の音声再生機能は、端末装置が備える音声再生ソフトウェアにより行われ、ストリーミング再生に対応していることが望ましい。音声再生ソフトウェアは、ストリーミング再生のほか、音声データを端末装置の記憶手段にダウンロードして記憶し、必要に応じ反訳システムにおいて、操作による再生や停止、繰り返し再生、再生スピード、音質や音量の調節、その他の再生制御が可能にされていることが望ましい。これらの再生制御は、端末装置が備えるマウス、キーボードの入力手段によって操作することができるほか、フットペダルによる操作が可能な再生制御手段(再生制御機器)を端末装置に接続して備え、用いることもできる。
スピーディな音声の文字化入力作業においては、フットペダル使用が可能な反訳用再生ソフトソフトウェアや、顧客情報表示システムを利用することにより、作業の効率化を図ることができる。
【0026】
次に、反訳システムは、再生される音声データの反訳を行い、その結果を入力し編集するための反訳データ編集ソフトウェアを備えている。望ましい代表的な形態は、反訳データ編集ソフトウェアは、エディタソフトウェアであり、テキストデータによる入力・編集を行う。
エディタソフトウェアによって編集される反訳データは、反訳システムの端末装置が備えるハードディスク等の記憶手段に記憶される。
【0027】
エディタソフトウェアにより編集される反訳データは、複数の反訳システムにおいて共有することができる。前述したように、このことは、1単位の仕事に対して、複数の反訳システムにおいて分割して作業をするためには必要であり、複数の反訳システムで行われる作業中において、反訳データの編集作業履歴が相互に反映されるようにすれば、全体的な内容の整合性をとることができる。
すなわち、複数の反訳システムにおいて、エディタプログラムが処理を行い、それぞれの反訳システムにおいて入力される反訳データが、複数の反訳システムにおいて共有される。
この場合、複数の反訳システムにおいて共有される反訳データは、少なくともいずれかの反訳システムまたはサーバシステムにおいて、最新のデータが更新され記憶される。反訳データの入力や編集による反訳データファイルの更新は、相互に接続される反訳システム間、またはサーバシステムを含む各システム間において更新を自動検知し、最新のデータに整合性がとられるように自動更新処理、自動バックアップ処理が行われることにより実現できる。
【0028】
以下、本発明の基本的な処理の流れについて説明する。
図5、図6及び図7は、本発明の基本的な処理の流れを示すフローチャートである。なお、ここに示す処理の流れは一例であって、これに限定されるものではない。
また、図8から図12は、反訳システムの端末装置に表示される画面の一例である。
【0029】
初めに、録音速記システムの処理について、図5を参照して説明する。
録音速記システムにおいて、録音データ送信プログラムを起動する(S100)。
録音速記システムの端末装置は、速記のための録音ソフトウェアを備えており、本ソフトウェアは、会議等の取材においてはデジタルデータとして収録を行う。録音した音声をデジタルデータとしてパソコン等に取り込むことにより、後作業である反訳データ作成の段階で様々な経済効果を得ることができる。同時に、ストリーミング技術の応用によって、録音取材現場から反訳作業の現場までのタイムラグを無くし、短納期を求める顧客のニーズに合ったサービスを展開するに必要な要件を満たしたソフトウェアである。
【0030】
録音速記システムの端末においては、サーバシステムにアクセスし、接続を確立し(S101)、マイク等により録音を開始する(S102)。音声をデジタル録音し、録音・送信処理が終了するまで、録音速記システムの端末装置において、録音プログラムによりストリーミング配信可能な音声データ形式にエンコードしつつ(S103)、録音速記システムの端末装置のハードディスク等に音声データを記憶する(S104)。
また、録音速記システムの端末装置においても、記憶された音声データを再生することにより、録音中に音声出力を可能にすることが望ましい。録音時に音質や音量の調節を可能にするため、録音中の音声を2〜3秒程度後に確認できるように、録音しながら同時に再生を可能にすることにより、録音中の収録状況を常にモニターしながら、かつ、録音後の音声を確認することによって録音の確実性と質を高めることができ、次の工程である反訳作業をスムーズにすることができる。
【0031】
録音速記システムから、録音された音声データをサーバシステムに送信する(S105)。前記のとおり、ストリーミング配信可能なデータ形式を使用するため、録音をしながら、録音データをローカルへ保存しつつ、サーバシステムへも同時にストリーミング形式でデータの送信を行う。
録音・送信処理が終了するまで、録音速記システムにおいては、上記の処理を行う。
【0032】
次に、サーバシステムにおける処理の流れについて図6を参照して説明する。
サーバシステムには、音声データ・反訳データ等を管理するためのサーバソフトウェアを備え、送受信されるデータの管理を行う。また録音(取材)現場と反訳現場との間で、データ送受信の処理の制御をする送受信制御手段が起動している(S200)。
初めに、反訳システムとの間での処理について説明すると、反訳システムからアクセスがあるか否かを認証手段が判定し(S201)、アクセスがあった場合、反訳システムから送信されるユーザー情報、パスワード等の認証情報を受信する(S202)。反訳システムからの認証情報に基づき、ユーザー情報記憶手段、現場取材記憶手段を参照し(S203)、認証を行い、認証ができなければアクセス権がないためデータへのアクセスが許可されない。認証処理が正常に行われればデータへのアクセス許可が認められる。
【0033】
次に、収録現場との間での処理について説明する。
録音速記クライアントからの音声データ収集処理は、音声データを受信し(S204)、音声データの録音が行われている、該当する収録現場等を識別する(S205)。
サーバシステムは、受信した音声データを管理する機能を備えており、録音・送信処理が終了するまでの間、収録現場を識別するデータと関連付けて、音声データ記憶手段に音声データを記憶する(S207)。
【0034】
一方、認証処理を経た反訳システムに対しては、反訳に必要な音声データを送信するが、その他にも反訳に必要な資料情報の閲覧機能や、該当する取材現場の録音に関するデータを送信する(S206)。
録音・送信処理が終了するまでの間、反訳システムに対し、音声データを送信する(S208)。録音・送信処理が終了するまで上記の処理を行う。
なお、反訳システムへの音声データの送信は、ストリーミング配信によりリアルタイムまたはそれに近いタイミングで送信することにより、直ちに反訳作業をすることができる。このほか録音済みのデータを、後日、送信したり、サーバシステムにバックアップされたデータを反訳システムからダウンロードしたりすることができるようにしてもよい。
次に、反訳システムから反訳データを受信して(S209)、反訳データ記憶手段に、該当する録音データに関連付けて記憶する(S210)。
【0035】
次に、反訳システムにおける処理の流れについて、図7を参照して説明する。
反訳システムの端末装置には音声再生ソフトウェアを備えており、ソフトウェアには様々な再生ソフトウェアを利用することができるが、音声反訳作業に必要な各機能が実装されていることが望ましい。
【0036】
初めに、反訳システムからサーバシステムにアクセスし(S300)、図10に一例を示すように、ユーザーがユーザーIDとパスワード等の認証情報を、反訳システムから送信する(S301)。反訳システムからの認証情報に基づき、サーバシステムにおいてユーザー情報記憶手段、現場取材の録音速記システムの記憶手段を参照し(S302)、認証処理を行う。
反訳システムから、反訳を行う録音データの送信要求をサーバシステムに送信するが(S303)、好ましい一例としては、ユーザーIDからユーザーの各種情報を取得して、担当する作業情報をユーザーの画面に表するような形態である。該当する音声データ等を反訳システムの端末装置において受信して(S304)、ユーザーの個別画面等により、顧客名、会議名、担当者名等、反訳業務に必要なデータがユーザーに通知される。図8にユーザー個別画面の一例を示す。
【0037】
次に、反訳作業をするために、音声データ再生ソフトウェア、反訳データ入力・編集ソフトウェアを起動する(S305)。
録音・送信処理が終了するまでの間、サーバシステムから音声データを受信し再生する。必要に応じ再生制御操作を行う(S306)。また、受信した音声データはハードディスク等の記憶手段に記憶される(S307)。
音声データの再生と再生制御は、WWWブウラザの画面等に音声データを再生させるリンクが設置され、リンクをクリックすることにより音声の再生ソフトウェアが立ち上がり、音声の再生が開始されるような形態が、簡易な操作のためには好ましい。図9に再生ソフトウェアの画面の一例を示す。
また、各種反訳入力手段や再生制御手段と、再生ソフトウェアによる再生制御は、音質や音量の調整、再生速度調整、一時停止、巻き戻し、スタート等の再生制御である。さらに好ましくは、シリアルポート、USBポート等に接続されたフットペダルによる操作を可能とし、フットペダルによる操作を行うための専用インターフェースを再生ソフトウェアが備え、ネットワーク上にある音声データ及び直接コンピュータ上にある音声データの再生を、これらの機能を用いて行う。
既存の音楽等の配信との相違は、ストリーミングを行いながらディスクにキャッシュすることにより、任意の箇所の再生操作を繰り返しても、サーバシステム及びネットワーク上の資源を必要以上に消費しないよう考慮している点である。
【0038】
次に、反訳システムの端末装置には、反訳データ入力・編集ソフトウェアを備えており、ソフトウェアには様々な編集ソフトウェアを利用することができるが、音声反訳に必要な各機能が実装されているエディタソフトウェアであることが望ましい。
エディタソフトウェアは、peer−to−peer型のネットワーク接続を使用し、各オペレータ同士で通信を行う。ネットワーク上の各エディタと通信を行い、オペレータが接続可能なグループ及び文書の一覧を取得することができる。図11にグループ及び文書一覧の画面の一例を示す。
また、接続可能な文書の一覧は、特定のコンピュータ名を指定し、その上で動作しているエディタから取得することもできる。
【0039】
ネットワーク上に存在する反訳作業グループへのアクセスを行うことにより、各オペレータは、それぞれ任意の箇所を共同で入力・編集の作業を行うことが可能となる。同じグループの同じ反訳データを編集中のオペレータの画面上には同一の反訳データが表示される。図12は編集画面の一例である。各オペレータが行った編集操作は行単位で他のオペレータのエディタへ送信され、データの同期をとる。他のオペレータが編集中の箇所については、行単位で書き込み保護がかかり、複数のオペレータによる同一箇所の更新を回避する。
【0040】
編集中の文書は、各エディタの実行されているパソコン上に随時保存することができる。また編集中の文書はテキストファイルとして書き出すことができる。他のワープロソフトやエディタ等で作成したテキストファイルをカーソル位置に読み込むこともできる。
オペレータが作業を再開するとき本ソフトウェアは、反訳作業グループの他のユーザーのデータと自分の所有しているデータを比較し、それぞれの追加や変更箇所を統合する機能を持つ。各文書間の変更箇所に重複がない場合には、変更箇所を確認の上、最新の変更が反映される。同一箇所を複数のユーザーが変更した等の場合には、手動にて調整を行うことができる。
【0041】
初めに、前記のようにサーバシステムにアクセスし、ログイン画面からユーザーIDとパスワード等を入力し認証処理を行う。ユーザーIDからユーザーの各種情報を取得し、現在の作業情報をユーザーの画面に表示する。
認証が行われた反訳システムのオペレータの画面には、公開されている文書のうち、ユーザーが編集可能な反訳作業グループが表示される。また、他のグループに接続する場合は、接続先を指定してグループの情報を取得する。
グループ内の文書を編集するためには、反訳作業グループをリストから選択し、グループ内の文書一覧の文書名を選択する。選択時に、現在編集を行っているオペレータの一覧が表示される。
接続ボタンを押し、編集画面に文書の内容を表示させる。新規に文書を作成する場合には、新規作成ボタンを押すことにより表示されるダイアログ上でグループ及び文書、接続可能なユーザーの設定を行う。
反訳データを入力し(S308)、反訳データを記憶手段に記憶し、作業に応じて適宜更新される(S309)。文書の編集は、テキストデータの編集に必要な機能(文字入力、削除、コピー、切り取り、貼り付け、検索、置き換え等)を使用することができる。
複数のオペレータが作業している場合は、他のオペレータが編集中の箇所が行単位で書き込み保護がされ、画面上で修飾表示される。
最終的に編集がされた反訳データは、サーバシステムに送信し(S310)、反訳データ記憶手段に記憶される。またサーバシステムへの送信と記憶は、随時または適宜行われるようにしてもよい。
【0042】
会議における話し言葉の音声データの文字化作業や編集作業にあたって、大量の受注、あるいは遠距離地における時間を争うような短期間納品をしなければならない場合等において、複数の反訳オペレータが分割して1単位の仕事を同時に行うことができる。各エディタはネットワーク接続により連係して動作するため、異なる場所の複数のオペレータによる作業も可能である。
従来の手法では、まず、1単位の仕事を必要なオペレータの数に分割し、各オペレータにそれぞれの作業分担を手作業により振り分ける必要があった。また、1単位の仕事を分割する数だけ、各オペレータの処理した反訳データの結合等の煩雑な作業が生じる。しかも、前担当の作業から順に結合しなければならなかった。
反訳用のエディタソフトウェアによって、それら周辺の人手による作業を大幅に排除することができる。
また、第三者の眼による作業内容のチェック(校閲)等を行う場合においても、各オペレータの作業箇所に依ることなく、どの箇所からでも行うことができる。
また、1単位の仕事を複数のオペレータで分割して行う場合、他のオペレータの反訳箇所の内容を参照・参考にしたい場合が往々にしてあるが、これまでは、全体の作業が終了するまで、他のオペレータの反訳内容を参照・参考にすることは困難であった。本エディタソフトウェアでは、1単位の仕事に関わるグループの反訳データを参照しながら、全体を通して整合性のあるクオリティの高いデータの作成することができるように配慮した。
【0043】
生産素材である音声データを再生しながら、本エディタソフトウェアを使用して複数のオペレータが、1単位の仕事の任意の箇所から同時に作業をすることができる。
これにより、1単位の仕事を、複数のオペレータに分割して、反訳作業を柔軟かつ容易にすることができる。また1単位の仕事を複数のオペレータに分割した場合の結合・接続等の作業ロスを排除した。さらに、分割作業中の各オペレータの作業内容を、自分のパソコン画面上で同時に参照することができ、さらに第三者による校閲、校正、修正等の確認作業が、現在、進行中の任意の箇所から行うことができる。
【0044】
作業を分割して、複数のオペレータによる共同作業で作成されている反訳データは、同時に各オペレータが使用している本エディタソフトウェア上にも、同じものが保持される。
反訳入力作業中、OSの異常終了等の障害によりシステムが停止した場合にも、他のオペレータのが作業をしているエディタソフトウェアが稼働している端末装置上に最新の更新状態の文書が保存されているため、障害から復旧した時点で、再度反訳データにアクセスすることにより、他のオペレータが保存している最新の更新状態の文書を読み込み、作業を継続することができる。
【0045】
同一ネットワーク上の同じグループで作成されていた反訳データが、途中でネットワークから離れた環境で更新された場合、更新箇所が重複したり、データに不整合が発生した場合等には、手動にて復旧することを可能にした。
また、ネットワーク上に、前記エディタソフトウェアを搭載したパーソナルコンピュータ等の端末装置を用意することにより、作業中のすべてのデータの複製を常に保存していくことができる。これにより、各ユーザーの作業開始、終了時間のずれ等による不整合等を回避するとともに、データが失われる危険性も低下させることができる。
ネットワークは同一LAN上でも、インターネットを介して接続されたものでも使用することが可能である。そのため、各エディタソフトウェアで反訳データが更新された場合、更新された箇所の情報のみが他のエディタソフトウェアに送信され、少ない情報量でデータの同期をとることができるようにし、接続に使用する回線の帯域が細い場合にもスムーズに作業を行うことができる。
【0046】
【発明の効果】
以上、詳細に説明したように、本発明によれば、取材現場における録音速記システム、管理サーバ、反訳システム間でのデータ交換には、標準のネットワークインフラであるブロードバンド・インターネット回線を利用することにより、これまでの、物品(テープ等)の受け渡しによる経済的コスト、反訳開始までの時間的ロスを削減するシステムを提供することができる。
前記の、スピードアップされた情報公開のニーズに対応するために、入力速度の向上はもとより、インターネット放送のLive配信等で利用されているストリーミング技術を応用することにより、録音等の取材を開始した時点からサーバ側にデータを送信し、反訳作業の現場まで、音声データの伝達にタイムラグのない運用を行うことにより、受注から納品までの短時間化を可能にする。
さらに、本発明によれば、録音機材は小型軽量化、高圧縮、長時間録音が可能なICレコーダーやパーソナルコンピュータ、ビデオカメラ、携帯情報端末等を採用し、反訳入力オペレータ(社内、外部契約)との間は、LANまたはブロードバンド常時接続回線で接続し、効率的な反訳作業と集配信が可能な環境を整えることにより、遠隔地同士での録音取材から反訳までの作業を可能にするとともに、サーバ上のデータ管理のためのマンマシンインターフエースは、WWWブラウザ等を利用して展開し、操作の容易性、一貫性、同時性、柔軟性を実現することができる。
さらに、本発明によれば、大量の受注、あるいは遠距離地における会議を短納期で時間を争うような場合等においても、複数のオペレータが分割して、1単位の仕事の反訳データ作成を同時に行うことができ、異なる場所での複数のオペレータによる作業も可能になる。
【図面の簡単な説明】
【図1】本発明の基本的な構成の一例を示すシステム構成図である。
【図2】録音速記システムの基本的な構成を示すブロック図である。
【図3】管理サーバシステムの基本的な構成を示すブロック図である。
【図4】反訳システムの基本的な構成を示すブロック図である。
【図5】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図6】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図7】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図8】反訳システムの端末装置に表示される画面の一例である。
【図9】反訳システムの端末装置に表示される画面の一例である。
【図10】反訳システムの端末装置に表示される画面の一例である。
【図11】反訳システムの端末装置に表示される画面の一例である。
【図12】反訳システムの端末装置に表示される画面の一例である。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention provides a recording stenographic system provided at a recording site for recording audio data, a server system for transmitting and receiving data between the recording stenographic recording system and the reverse translation system and managing data, and a voice recorded at the recording stenographic recording site. A digital shorthand system comprising a translation system for inputting data as character data.
[0002]
[Prior art]
In the past, the stenographic industry has achieved dramatic growth with the advent of tape recorders and Japanese word processors (including software). However, the momentum and demand for information disclosure by central ministries, local governments, and general companies has It is assumed that it is expanding at a much higher speed.
The media recorded at the interview site is collected by the management department using normal transportation methods, and according to the contents of arrangements to the translator, after selecting and duplicating the responsible place from the entire media, each operator Has been delivered. The time, economic and human burdens on these have not been overlooked.
As the market for document information in the stenographic industry expands, it is inevitable that price competition with new entrants will become increasingly intense, and it will be necessary to scrutinize the current situation immediately and take measures for the next generation .
[0003]
[Problems to be solved by the invention]
In the reciprocal work, recently, there is a continuing demand for shortening the period from the start of a meeting or the like to the completion of the reciprocal data to shorten the delivery time. In addition, the spread of personal computers and the broadband Internet is expected to be further promoted, and it is necessary to respond.
In response to changes in the environment, including communications, etc., review the conventional shorthand and reverse translation, actively adopt the latest available technology, and minimize the time, cost, and human load as necessary. In addition, there is a need for a system that can speed up the shorthand translation work that is expected in the future and that responds to competition in terms of delivery date, quality, price, and the like.
[0004]
Therefore, in the present invention, the above-mentioned various problems are solved, and the data transmission between the news gathering site, the management server, and each site of the translation work is performed by using a broadband Internet line which is a standard network infrastructure. It is an object of the present invention to provide a system that reduces the time cost required for delivering a recording medium such as a tape or the like, the cost of transportation, and the like.
Immediately after the start of recording, by applying the streaming technology used in Live distribution of Internet broadcasting, as well as improving the input speed, in order to respond to customer needs with short delivery times as described above, Then, a technique for transmitting data to the management server and transmitting the voice data to the reverse translation work site with almost no time lag, thereby introducing a technology that enables a short delivery time.
[0005]
Further, in the present invention, the recording equipment employs an IC recorder, a video camera, a personal computer, a portable information terminal, etc. capable of reducing the size and weight, high compression, and long recording time, and a LAN or a broadband connection between the translator and the operator. By establishing an environment that enables efficient collection and distribution and translating work by connecting via a line, it enables recording from remote locations to translating work, and a man-machine interface for managing data on the server. Is developed using a WWW browser or the like, and aims to realize easiness, consistency, concurrency, and flexibility of operation.
[0006]
[Means for Solving the Problems]
In order to solve the above problem, in the invention according to claim 1,
A recording stenographic system provided at the recording site for voice data, a server system for transmitting and receiving data between the recording stenographic recording system and the translating system and managing the data, and a translating system for converting the voice data recorded at the recording site into characters Is composed of
The above-described recording shorthand system includes a terminal device having a voice recording device, and has a function of recording and storing voice data recorded at a news gathering site, and a function of transmitting the recorded voice data to a server system. Prepare,
The server system includes a voice data storage unit that stores voice data transmitted from the recording shorthand system, an authentication unit that authenticates access from one or a plurality of translation systems, and a translation data transmitted from the translation system. The digital shorthand recording system is characterized by including at least a transliteration data storage means for storing and a transmission / reception control means for controlling transmission and reception of data between the recording shorthand system and the reverse translation system.
[0007]
In order to solve the above-mentioned problem, in the invention according to claim 2,
In the invention according to claim 1,
The authentication means provided in the server system includes a user information storage means for storing user information of the reverse translation system, and a customer information storage section for storing customer information of audio data recorded by the recording shorthand recording system, meeting information, and the like. The digital shorthand system is characterized in that it refers to and authenticates the access right of the user for the voice data.
[0008]
In order to solve the above-mentioned problem, in the invention according to claim 3,
In the invention according to claim 1 or 2,
The above-mentioned reverse translation system, through the intranet, the authentication process of the server system through a communication means represented by the Internet, customer information on the site interview, data such as conference information, and voice data transmitted from the recording shorthand system This is a digital shorthand system that has a function of acquiring the above and performing a translation work.
[0009]
Further, in order to solve the above-mentioned problem, in the invention according to claim 4,
In the invention according to claims 1 to 3,
The transmission / reception control means transmits the audio data from the recording shorthand recording system to the translation system in a streaming distribution format so as to prevent a time difference from occurring in the process from the acquisition of the audio data to the start of the work by the translation system. , A digital shorthand system.
[0010]
In order to solve the above-mentioned problem, in the invention according to claim 5,
In the invention according to claims 1 to 4,
The above-mentioned translation system is configured to include a terminal device having an audio reproduction function, acquire audio data stored in the terminal device or a server system on a network, and perform a function of reproducing and character data obtained by translating the audio data. The digital shorthand system is characterized by having a function of editing and storing and a function of transmitting the translated character data to the server system.
[0011]
In order to solve the above-mentioned problem, in the invention according to claim 6,
In the invention according to claim 5,
The above-mentioned voice reproduction function of the reverse translation system is realized by providing a terminal device with reproduction software for performing voice reproduction using reproduction control means including at least one of a mouse, a keyboard, and a foot pedal. It is characterized by being.
[0012]
In order to solve the above-mentioned problem, in the invention according to claim 7,
In the invention according to claim 5 or 6,
In a plurality of translator systems, the terminal device is provided with editor software having a function of editing and storing character data obtained by translating voice data, and the character data processed by the editor program in each of the translator systems is provided by the respective translator system. Is a digital stenographic system shared by.
[0013]
In order to solve the above-mentioned problem, in the invention according to claim 8,
In the invention according to claim 7,
Character data shared by a plurality of translator systems is a digital stenographic system in which the latest data is updated and stored in at least one of the translator systems or server systems.
[0014]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
The digital shorthand recording system of the present invention is a recording shorthand recording system provided at the recording site of voice data, a server system that performs data management while transmitting and receiving data between the recording shorthand recording system and the reverse translation system, and a recording shorthand recording system. It comprises a translating system for translating the recorded voice data into character data.
FIG. 1 is a system configuration diagram showing an example of a basic configuration of the present invention.
This system digitizes the three processes of voice data recording site (recording), management server (accumulation / distribution), and transliteration input (voice transcripting work) related to the stenographic work which is the transcripting of voice data. The aim is to increase economic efficiency and reduce costs, while taking advantage of digital data to develop new services that meet customer needs.
[0015]
The recording shorthand system described above includes a terminal device provided with a voice recording device. It has a function of recording and storing audio at the recording site, and a function of transmitting the recorded audio data to the server system.
The recording stenographic recording system is provided at a news gathering site that needs to record voice information in characters, such as various meetings, lectures, conversations, and interviews, and includes an IC recorder, a video camera, a personal computer, and a recording device such as a microphone. It includes a portable information terminal and a terminal device capable of accessing the server system via communication means represented by the Internet and an intranet.
FIG. 2 is a block diagram showing a basic configuration of the recording shorthand recording system, which comprises a recording device such as a microphone and a terminal device. The terminal device is configured to include display means such as a display, storage means such as a hard disk and a memory, data transmission / reception means for transmitting and receiving data by connecting to communication means such as the Internet, and control means for controlling these. .
The client function of the terminal device that performs recording has a function of capturing audio input from a microphone or the like in a digital format in a personal computer or the like, and transmitting the recorded data to a server. The interviewer can go to the site and use a device such as an IC recorder, a video camera, a personal computer, or a personal digital assistant to directly transmit digitally recorded audio data to the server.
[0016]
In addition, the recording shorthand system has a function of transmitting recorded audio data to a server system. The server system is provided by a company or the like that undertakes a transcripting operation of voice by shorthand or recording, etc., and manages voice data recorded at each recording coverage site and transmits the voice data to the management server.
The terminal device of the recording shorthand recording system has a function of transmitting data to a server system by streaming recorded audio data. Also, preferably, by providing a function of storing data locally in the terminal device, it is possible to simultaneously use the streaming transmission function and the local data storage function.
To transmit audio data to the server system, capture the audio data into a compact laptop computer, use the broadband Internet line or PHS line prepared at the recording site, transmit information to the management server, and The recording and on-the-spot translation work will be performed at the same time as much as possible to minimize loss time.
[0017]
Next, the server system will be described.
The server system is provided, for example, at the headquarters of a company or the like that undertakes transcripting of voices using shorthand or recording media. Preferably, a large-capacity voice information management server is installed to store voice data for reverse translation. And a distribution operation function for the translator operator. It accumulates and manages audio data transmitted from the recording site or data related to the conference, etc. transmitted from the customer, and only the translator user who has access right has audio data, customer information, conference information, etc. Is allowed to access.
[0018]
FIG. 3 is a block diagram showing a basic configuration of the server system.
The server system includes an audio data storage unit that stores the audio data transmitted from the recording shorthand recording system.
The voice data storage means stores voice data transmitted from the recording shorthand recording system. Various formats can be adopted as the data format of the audio data, and a data format that enables streaming distribution and reproduction is used in order to perform reverse translation in real time or near timing. Also, it may include moving image data including audio data, movies, video cameras, slide show data, and relay data such as videophones and video conferences.
Since the voice data can store data transmitted from various recording sites, it is stored in association with a conference name, a site name, a recording date and time, and other data (for example, a site coverage ID) for identifying the recording site. You.
[0019]
The server system includes an authentication unit that authenticates access from one or a plurality of translation systems.
The authentication means provided in the server system refers to the user information storage means for storing the user information of the reverse translation system, and the customer information to be recorded, the on-site interview storage means for storing information on the meeting, etc. Authenticate the user's access rights to the data.
The user information storage means stores data relating to a user who performs a reverse translation job, and stores such information by registering personal information such as a name, an age, an e-mail address, and authentication information such as an ID and a password. Remember. The user information is used when authenticating an access right to data stored in the server system.
[0020]
Next, the server system includes a reverse translation data storage unit that stores the reverse translation data transmitted from the reverse translation system.
The reverse translation data storage unit stores the reverse translation data corresponding to the voice data transmitted from the reverse translation system. Although various forms can be adopted for the reverse translation data, it is usually a text file, and other data formats such as a word processor can be used.
The reverse translation data storage means can store the reverse translation data transmitted from a plurality of reverse translation systems. However, as will be described later, a plurality of operators divide and simultaneously execute the reverse translation work corresponding to one unit of work. Therefore, in this case, it is desirable that one unit of the translation data can be shared between the translation systems. One unit of the reverse translation data is stored in association with data (for example, a field coverage ID) for identifying the site of the recording coverage corresponding to the data.
[0021]
Next, the server system includes transmission / reception control means for controlling data transmission / reception with the recording shorthand system and the reverse translation system.
The voice data transmitted from the recording short-time recording system is stored in voice data storage means.
Further, the server system accesses the server system and performs control to transmit the audio data to the translation system that has requested distribution by specifying the corresponding recording coverage site, for example, by the coverage ID. When the streaming distribution format is adopted, the audio data is stored in the audio data storage means, and the audio data is sequentially transmitted to the reverse translation system.
[0022]
Further, the transmission / reception control means stores the translation data such as text data transmitted from the translation system in the translation data storage means.
In addition, the server system accesses the server system and performs control to transmit the reverse translation data to the reverse translation system that has requested the distribution of the reverse translation data of the corresponding audio data, for example, the data under reverse translation or the backup data.
Further, as will be described later, when a plurality of operators divide a single unit of translation work into a plurality of operators and perform the work, a single unit of translation data can be shared among a plurality of translation systems. In order for the latest data to be managed by the server system, control is performed so that the latest translation data is constantly updated and the consistency of the translation data is maintained while each of the working translation systems and the server system are connected. Is done.
When one unit of reverse translation data can be shared between operators, it is not connected to the server system, but is constantly updated to the latest data while each working reverse translation system is connected. In addition, control can be performed so as to maintain the consistency of the inversion data.
[0023]
Next, the reverse translation system will be described.
FIG. 4 is a block diagram showing the basic configuration of the translation system.
The reverse translation system is a system in which a user who is a reverse translation operator having access right performs a reverse translation operation while reproducing voice data, and is a server system provided at a head office or the like via a communication means such as an intra Internet. To obtain voice data, customer information, meeting information, etc., and perform reverse translation.
The above-mentioned translation system is configured to include a terminal device having an audio reproduction function, and obtains and reproduces audio data stored in the terminal device or a server system on a network, and translates each audio data into characters. And a function of transmitting the translated data to the server system.
[0024]
The data transmitted and received by the transmission / reception control means of the server system is transmitted in a streaming distribution format from the site of the recording coverage to the translator system, and in the translator system, during the work process from the start of the voice interview at the site to the start of the translator operation. In addition, it is desirable that a time difference is not generated as much as possible.
In recent years, in proportion to the progress of information disclosure, customers have been demanding a shorter time from the start of a meeting or the like to the completion of the translated data. For the data exchange from the recording site of voice data, the management server, and the translation work, the broadband Internet line, which is a standard network infrastructure, is used to reduce the time cost and economic cost of passing the data etc. Reduce.
[0025]
It is desirable that the above-mentioned audio reproduction function of the reverse translation system is performed by audio reproduction software of the terminal device and supports streaming reproduction. In addition to streaming playback, the audio playback software downloads and stores audio data in the storage device of the terminal device, and if necessary, in the reverse translation system, operates playback and stop, repeat playback, playback speed, adjustment of sound quality and volume, It is desirable that other reproduction control be enabled. These playback controls can be operated by input means of a mouse and a keyboard provided in the terminal device, and a playback control means (playback control device) operable by a foot pedal is connected to the terminal device and used. You can also.
In the speedy voice transcription input operation, the efficiency of the operation can be improved by using a reproduction software software for translation that can use a foot pedal or a customer information display system.
[0026]
Next, the reverse translation system is provided with reverse translation data editing software for translating the audio data to be reproduced and inputting and editing the result. In a preferable representative form, the reverse translation data editing software is editor software, which performs input / edit using text data.
The translation data edited by the editor software is stored in a storage unit such as a hard disk provided in the terminal device of the translation system.
[0027]
The translation data edited by the editor software can be shared by multiple translation systems. As described above, this is necessary in order to divide a single unit of work in a plurality of translation systems, and to edit the translation data during the work performed in the translation systems. If the work histories are mutually reflected, consistency of the entire contents can be obtained.
In other words, in a plurality of translator systems, the editor program performs processing, and the translator data inputted in each of the translator systems is shared by the plural translator systems.
In this case, the latest data is updated and stored in at least one of the translator systems or the server system as the translator data shared by the plurality of translator systems. Updating of the translation data file by inputting or editing the translation data is automatically detected between interconnected translation systems or between each system including the server system, and automatically updated so that the latest data is consistent. This can be realized by performing an update process and an automatic backup process.
[0028]
Hereinafter, a basic processing flow of the present invention will be described.
FIGS. 5, 6 and 7 are flowcharts showing the flow of the basic processing of the present invention. Note that the processing flow shown here is an example, and the present invention is not limited to this.
FIGS. 8 to 12 show examples of screens displayed on the terminal device of the translation system.
[0029]
First, the processing of the recording shorthand system will be described with reference to FIG.
In the recording shorthand system, a recording data transmission program is started (S100).
The terminal device of the recording stenographic recording system is provided with recording software for stenographic recording, and this software records digital data when interviewing a conference or the like. By taking the recorded voice as digital data into a personal computer or the like, various economic effects can be obtained in the later stage of creating the translated data. At the same time, the application of streaming technology eliminates the time lag from the recording news gathering site to the translation work site, and satisfies the requirements for developing services that meet the needs of customers who require short delivery times.
[0030]
The terminal of the recording shorthand system accesses the server system, establishes a connection (S101), and starts recording with a microphone or the like (S102). Until the sound is digitally recorded and the recording / transmission processing is completed, the terminal device of the recording stenographic system encodes the data into a sound data format that can be streamed and distributed by the recording program (S103), and the hard disk of the terminal device of the recording stenographic system. (S104).
It is also desirable that the terminal device of the recording stenography system reproduces the stored voice data to enable voice output during recording. In order to be able to adjust the sound quality and volume during recording, the sound being recorded can be played back at the same time so that the sound being recorded can be checked after about 2 to 3 seconds. While confirming the sound after the recording, the reliability and quality of the recording can be improved, and the next step, the translation process, can be performed smoothly.
[0031]
The recorded voice data is transmitted from the recording shorthand system to the server system (S105). As described above, in order to use a data format that can be distributed by streaming, while recording, the recorded data is stored locally, and the data is simultaneously transmitted to the server system in a streaming format.
Until the recording / transmission processing ends, the recording shorthand system performs the above processing.
[0032]
Next, the flow of processing in the server system will be described with reference to FIG.
The server system includes server software for managing voice data, reverse translation data, and the like, and manages transmitted and received data. A transmission / reception control means for controlling data transmission / reception processing between a recording (reporting) site and a translation site is activated (S200).
First, the processing with the reverse translation system will be described. The authentication means determines whether or not there is access from the reverse translation system (S201). If there is access, user information and password transmitted from the reverse translation system And the like (S202). Based on the authentication information from the reverse translation system, referring to the user information storage means and the on-site interview storage means (S203), authentication is performed. If authentication is not possible, access to data is not permitted because there is no access right. If the authentication process is performed normally, the data access permission is granted.
[0033]
Next, processing with the recording site will be described.
In the audio data collection process from the recording stenographic client, the audio data is received (S204), and the corresponding recording site or the like where the audio data is being recorded is identified (S205).
The server system has a function of managing the received audio data, and stores the audio data in the audio data storage unit in association with the data identifying the recording site until the recording / transmission processing is completed (S207). ).
[0034]
On the other hand, to the transliteration system that has passed the authentication process, the translator transmits the voice data necessary for the translator, but also transmits the material information browsing function required for the translator and data related to the recording of the corresponding interview site ( S206).
Until the recording / transmission processing is completed, the audio data is transmitted to the reverse translation system (S208). The above processing is performed until the recording / transmission processing ends.
It should be noted that the transmission of the audio data to the reverse translation system can be performed immediately by transmitting the audio data in real time or at a timing close thereto by streaming distribution. In addition, the recorded data may be transmitted at a later date, or the data backed up in the server system may be downloaded from the reverse translation system.
Next, the translation data is received from the translation system (S209), and is stored in the translation data storage unit in association with the corresponding recording data (S210).
[0035]
Next, the flow of processing in the reverse translation system will be described with reference to FIG.
The terminal device of the transliteration system is provided with voice reproduction software, and various reproduction software can be used for the software. However, it is preferable that each function required for the voice transliteration work is implemented.
[0036]
First, the server system is accessed from the reverse translation system (S300), and the user transmits authentication information such as a user ID and a password from the reverse translation system, as shown in an example in FIG. 10 (S301). Based on the authentication information from the reverse translation system, the server system refers to the user information storage means and the storage means of the recording shorthand recording system for the on-site interview (S302), and performs an authentication process.
A request for transmitting the recording data to be translated is transmitted from the retranslation system to the server system (S303). As a preferable example, various information of the user is acquired from the user ID, and the work information in charge is displayed on the user screen. It is a form that does. The corresponding voice data and the like are received by the terminal device of the translation system (S304), and the user is notified of the data necessary for the translation job, such as the customer name, the meeting name, and the name of the person in charge, on the user's individual screen or the like. FIG. 8 shows an example of the user individual screen.
[0037]
Next, in order to perform the reverse translation operation, the audio data reproduction software and the reverse translation data input / edit software are activated (S305).
Until the recording / transmission processing is completed, audio data is received and reproduced from the server system. A reproduction control operation is performed as needed (S306). The received audio data is stored in a storage unit such as a hard disk (S307).
Playback and playback control of audio data is performed in such a form that a link for playing audio data is installed on a WWW browser screen or the like, and clicking on the link launches audio playback software and starts audio playback. It is preferable for simple operation. FIG. 9 shows an example of the screen of the playback software.
The reproduction control by the various inversion input means, the reproduction control means, and the reproduction software is reproduction control such as adjustment of sound quality and volume, reproduction speed adjustment, pause, rewind, and start. More preferably, the operation can be performed by a foot pedal connected to a serial port, a USB port, or the like. The playback software includes a dedicated interface for performing the operation by the foot pedal, and audio data on a network and directly on a computer. Reproduction of audio data is performed using these functions.
The difference from the distribution of existing music etc. is that by caching on the disk while streaming, even if the reproduction operation of an arbitrary part is repeated, the server system and the resources on the network are not consumed more than necessary. It is a point.
[0038]
Next, the terminal device of the reverse translation system is equipped with reverse translation data input / edit software, and various editing software can be used as the software. Desirably software.
The editor software communicates between operators using a peer-to-peer type network connection. By communicating with each editor on the network, a list of groups and documents connectable to the operator can be obtained. FIG. 11 shows an example of a group and document list screen.
Also, a list of connectable documents can be obtained from an editor running on a specific computer name specified.
[0039]
By accessing the reverse translation work group existing on the network, each operator can jointly perform input / edit work at arbitrary locations. The same reverse translation data is displayed on the screen of the operator editing the same reverse translation data of the same group. FIG. 12 shows an example of the editing screen. The editing operation performed by each operator is transmitted line by line to the editors of the other operators to synchronize the data. For a part being edited by another operator, write protection is applied on a line-by-line basis, and updating of the same part by a plurality of operators is avoided.
[0040]
The document being edited can be saved at any time on the personal computer on which each editor is running. The document being edited can be written out as a text file. Text files created by other word processing software or editors can be read at the cursor position.
When the operator resumes the work, this software has the function of comparing the data of other users of the reverse translation work group with his / her own data and integrating each added or changed part. If there is no overlap in the changed portions between the documents, the changed portions are confirmed and the latest changes are reflected. When the same part is changed by a plurality of users, the adjustment can be made manually.
[0041]
First, the user accesses the server system as described above, inputs a user ID and a password from the login screen, and performs an authentication process. It acquires various information of the user from the user ID and displays the current work information on the screen of the user.
The screen of the operator of the authenticated translation system displays a translation work group that can be edited by the user among the published documents. When connecting to another group, the connection destination is specified and the group information is acquired.
To edit a document in a group, select a reverse translation work group from the list and select a document name in the list of documents in the group. At the time of selection, a list of operators who are currently editing is displayed.
Press the connect button to display the contents of the document on the edit screen. When a new document is created, a group, a document, and a connectable user are set on a dialog displayed by pressing a new creation button.
The reverse translation data is input (S308), and the reverse translation data is stored in the storage unit, and is appropriately updated according to the work (S309). For editing the document, functions necessary for editing the text data (character input, deletion, copy, cut, paste, search, replace, etc.) can be used.
When a plurality of operators are working, a portion being edited by another operator is write-protected on a line-by-line basis, and is displayed in a modified manner on the screen.
The final edited transliteration data is transmitted to the server system (S310) and stored in the reverse translation data storage means. Transmission and storage to the server system may be performed at any time or as appropriate.
[0042]
In translating or editing speech data of spoken language in a conference, when a large number of orders are received or a short-term delivery is required to compete for time in a distant place, a plurality of reverse translation operators are divided into one. Unit work can be performed simultaneously. Since each editor operates in cooperation with a network connection, work by a plurality of operators at different places is also possible.
In the conventional method, it is necessary to first divide one unit of work into the number of required operators, and to distribute the work to each operator manually. In addition, as many as the number of divisions of one unit of work, complicated work such as combining the translated data processed by each operator occurs. In addition, they had to be joined in order from the work they were in charge of.
The reverse translation editor software can greatly eliminate the manual work around them.
Also, in the case of checking (reviewing) the work content with the eyes of a third party, the work can be performed from any location without depending on the work location of each operator.
In addition, when one unit of work is divided by a plurality of operators, it is often necessary to refer to and refer to the contents of the transposed parts of other operators, but until now the entire work has been completed. However, it was difficult to refer to and refer to the contents of the other operator's translation. With this editor software, consideration has been given so that consistent high quality data can be created throughout by referring to the reverse translation data of the group related to one unit of work.
[0043]
Using the editor software, a plurality of operators can simultaneously work from any part of one unit of work while playing back audio data as a production material.
Thereby, one unit of work can be divided into a plurality of operators, and the translation work can be made flexible and easy. In addition, work loss such as connection and connection when one unit of work is divided into a plurality of operators is eliminated. Furthermore, the contents of each operator's work during the division work can be referred to simultaneously on his / her personal computer screen. Can be done from
[0044]
The same translation data is created on the editor software used by each operator at the same time as the translation data created by dividing the work and being jointly operated by a plurality of operators.
Even if the system is stopped due to a failure such as an abnormal termination of the OS during the reverse translation operation, the latest updated document is saved on the terminal device running the editor software that another operator is working on Therefore, at the time of recovery from the failure, by accessing the reverse translation data again, the latest updated document stored by another operator can be read, and the operation can be continued.
[0045]
If reverted data created in the same group on the same network is updated in an environment away from the network on the way, if the update location is duplicated or if the data is inconsistent, Made it possible to recover.
In addition, by preparing a terminal device such as a personal computer equipped with the editor software on a network, it is possible to always keep a copy of all data being worked on. Thus, it is possible to avoid inconsistencies due to deviations in the work start and end times of each user, and to reduce the risk of data loss.
The network can be used either on the same LAN or connected via the Internet. Therefore, when the translation data is updated in each editor software, only the information of the updated part is transmitted to other editor software, so that the data can be synchronized with a small amount of information, and the line used for the connection The work can be done smoothly even when the bandwidth of the is narrow.
[0046]
【The invention's effect】
As described above in detail, according to the present invention, the data exchange between the recording shorthand recording system, the management server, and the translation system at the interview site is performed by using a broadband Internet line which is a standard network infrastructure. Thus, it is possible to provide a system that reduces the economic cost due to the delivery of articles (tapes and the like) and the time loss until the start of translation.
In order to respond to the above-mentioned need for speedy information disclosure, we started coverage such as recording by applying streaming technology used in Live distribution of Internet broadcasting as well as improving input speed. From the point of time, data is transmitted to the server side, and the transmission of the voice data is performed without a time lag from the time of the translating work to the time of the reverse translation work, thereby shortening the time from order receipt to delivery.
Further, according to the present invention, the recording equipment employs an IC recorder, a personal computer, a video camera, a portable information terminal, etc., capable of reducing the size and weight, achieving high compression and recording for a long time. The connection between the Internet and the LAN or a broadband connection line is always in place, and by setting up an environment that enables efficient translation and collection / distribution, it is possible to work from recording coverage to translation in remote locations, A man-machine interface for managing data on a server can be developed using a WWW browser or the like, and can achieve operability, consistency, concurrency, and flexibility.
Further, according to the present invention, even when a large number of orders are received or a meeting in a distant place contests for a short delivery time, etc., a plurality of operators divide and simultaneously create reverse translation data for one unit of work. Can be performed, and work by multiple operators at different locations is also possible.
[Brief description of the drawings]
FIG. 1 is a system configuration diagram showing an example of a basic configuration of the present invention.
FIG. 2 is a block diagram showing a basic configuration of a recording shorthand system.
FIG. 3 is a block diagram illustrating a basic configuration of a management server system.
FIG. 4 is a block diagram illustrating a basic configuration of a translation system.
FIG. 5 is a flowchart illustrating an example of a basic processing flow of the present invention.
FIG. 6 is a flowchart illustrating an example of a basic processing flow of the present invention.
FIG. 7 is a flowchart illustrating an example of a basic processing flow of the present invention.
FIG. 8 is an example of a screen displayed on the terminal device of the translation system.
FIG. 9 is an example of a screen displayed on the terminal device of the translation system.
FIG. 10 is an example of a screen displayed on the terminal device of the translation system.
FIG. 11 is an example of a screen displayed on the terminal device of the translation system.
FIG. 12 is an example of a screen displayed on the terminal device of the translation system.

Claims (8)

音声データの録音取材現場に備えられる録音速記システムと、録音速記システム及び音声データを文字化入力する反訳システムとの間でデータ送受信を行うとともにデータ管理を行うサーバシステムと、取材現場において収録された音声データを文字化入力する反訳システムとから構成され、
前記の、録音速記システムは、録音装置を備える端末装置を含み構成され、取材現場で収録された音声データを録音し記憶する機能と、収録された音声データをサーバシステムに送信する機能とを備え、
前記の、サーバシステムは、取材現場の録音速記システムから送信された音声データを記憶する音声データ記憶手段と、1または複数の反訳システムからのアクセスを認証する認証手段と、反訳システムから送信された反訳データを記憶する反訳データ記憶手段と、録音速記システム及び反訳システムとの間でデータ送受信を行う制御を行う送受信制御手段とを少なくとも備えていることを特徴とする、デジタル速記システム。
A recording system for recording and recording voice data, a server system for transmitting and receiving data between a recording stenographic recording system and a translation system for converting voice data into transcripts and managing data, and a recording system for recording data at the reporting site. It consists of a translation system that converts voice data into text,
The above-mentioned recording shorthand system includes a terminal device equipped with a recording device, and has a function of recording and storing voice data recorded at a news gathering site, and a function of transmitting the recorded voice data to a server system. ,
The server system includes a voice data storage unit that stores voice data transmitted from a recording shorthand recording system at a news gathering site, an authentication unit that authenticates access from one or a plurality of translation systems, and a server that is transmitted from the translation system. A digital stenographic system comprising at least: a transliteration data storage means for storing the transliteration data; and a transmission / reception control means for controlling transmission and reception of data between the recording shorthand system and the reverse translation system.
請求項1に記載の発明において、
前記の、サーバシステムが備える認証手段は、反訳システムのユーザー情報を記憶するユーザー情報記憶手段と、音声データを録音する現場の顧客情報・会議情報等を記憶する現場取材記憶手段とを参照して、該当する音声データについて、該当するユーザーのアクセス権の認証を行うことを特徴とする、デジタル速記システム。
In the invention according to claim 1,
The above-mentioned authentication means provided in the server system refers to a user information storage means for storing user information of the reverse translation system, and a field coverage storage means for storing customer information, conference information, etc. of the field where voice data is recorded. A digital shorthand system for performing authentication of an access right of an applicable user for applicable audio data.
請求項1または2に記載の発明において、
前記の、反訳システムは、イントラネット、インターネットに代表される通信手段を介してサーバシステムの認証処理を経ることにより、現場での取材に関する顧客情報や会議情報等のデータと、録音速記システムから送信された音声データとを取得して反訳業務を行う機能を備えたことを特徴とする、デジタル速記システム。
In the invention according to claim 1 or 2,
The above-mentioned translation system, the intranet, through the authentication process of the server system via communication means represented by the Internet, and data such as customer information and conference information regarding coverage at the site, and transmitted from the recording shorthand system A digital shorthand system, which has a function of acquiring the voice data and performing a reverse translation job.
請求項1〜3に記載の発明において、
前記の、送受信制御手段では、録音速記システムから反訳システムへの音声データの送信にストリーミング配信形式で送信を行い、音声データの取得から反訳作業開始までの工程に時間差が発生しないようにしたことを特徴とする、デジタル速記システム。
In the invention according to claims 1 to 3,
In the transmission / reception control means, the transmission of audio data from the recording shorthand system to the reverse translation system is performed in a streaming distribution format so that a time difference does not occur in the process from the acquisition of the audio data to the start of the reverse translation work. Characterized by a digital shorthand system.
請求項1〜4に記載の発明において、
前記の、反訳システムは、音声再生機能を備える端末装置を含み構成され、端末装置あるいはネットワーク上のサーバシステムに記録された音声データを取得し再生する機能と、音声データを反訳した反訳データを編集し記憶する機能と、反訳データをサーバシステムに送信する機能とを備えたことを特徴とする、デジタル速記システム。
In the invention according to claims 1 to 4,
The above-mentioned transliteration system includes a terminal device having an audio reproduction function, and has a function of acquiring and reproducing audio data recorded in the terminal device or a server system on a network, and editing the transliteration data obtained by translating the audio data. A digital shorthand system having a function of storing and storing the translated data to a server system.
請求項5に記載の発明において、
反訳システムが備える前記の音声再生機能は、マウス、キーボード、フットペダルのいずれかを少なくとも含む再生制御手段を用いて音声再生を行う再生ソフトウェアが端末装置に備えられたことにより実現されることを特徴とする、デジタル速記システム。
In the invention according to claim 5,
The above-described sound reproduction function of the reverse translation system is realized by providing the terminal device with reproduction software for performing sound reproduction using reproduction control means including at least one of a mouse, a keyboard, and a foot pedal. Digital shorthand system.
請求項5または6に記載の発明において、
複数の反訳システムにおいて、端末装置に、音声データを反訳した文字入力データを編集し記憶する機能を備えるエディタソフトウェアが備えられ、それぞれの反訳システムにおいてエディタプログラムが処理を行う文字データは、それぞれの反訳システムにより共有されることを特徴とする、デジタル速記システム。
In the invention according to claim 5 or 6,
In a plurality of reverse translation systems, the terminal device is provided with editor software having a function of editing and storing character input data obtained by translating the voice data, and the character data processed by the editor program in each of the reverse translation systems is provided for each reverse translation system. A digital stenographic system, shared by the system.
請求項7に記載の発明において、
複数の反訳システムにおいて共有される反訳データは、いずれかの反訳システムまたはサーバシステムにおいて、最新のデータが更新され記憶されることを特徴とする、デジタル速記システム。
In the invention according to claim 7,
The digital shorthand system is characterized in that the latest data is updated and stored in any one of the translation systems or the server system as the translation data shared by the plurality of translation systems.
JP2002240434A 2002-08-21 2002-08-21 Digital shorthand system Expired - Fee Related JP3668892B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002240434A JP3668892B2 (en) 2002-08-21 2002-08-21 Digital shorthand system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002240434A JP3668892B2 (en) 2002-08-21 2002-08-21 Digital shorthand system

Publications (2)

Publication Number Publication Date
JP2004077966A true JP2004077966A (en) 2004-03-11
JP3668892B2 JP3668892B2 (en) 2005-07-06

Family

ID=32023223

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002240434A Expired - Fee Related JP3668892B2 (en) 2002-08-21 2002-08-21 Digital shorthand system

Country Status (1)

Country Link
JP (1) JP3668892B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100365620C (en) * 2005-03-28 2008-01-30 何宏山 Internet voice stenography method
JP2008107624A (en) * 2006-10-26 2008-05-08 Kddi Corp Transcription system
JP2008532116A (en) * 2005-02-22 2008-08-14 インターナショナル・ビジネス・マシーンズ・コーポレーション User verification using a web-based multi-mode interface
JP5533865B2 (en) * 2009-06-18 2014-06-25 日本電気株式会社 Editing support system, editing support method, and editing support program
CN112786045A (en) * 2021-01-04 2021-05-11 上海明略人工智能(集团)有限公司 Device, server, method and system for conference recording

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008532116A (en) * 2005-02-22 2008-08-14 インターナショナル・ビジネス・マシーンズ・コーポレーション User verification using a web-based multi-mode interface
JP4871885B2 (en) * 2005-02-22 2012-02-08 ニュアンス コミュニケーションズ,インコーポレイテッド User verification using a web-based multi-mode interface
CN100365620C (en) * 2005-03-28 2008-01-30 何宏山 Internet voice stenography method
JP2008107624A (en) * 2006-10-26 2008-05-08 Kddi Corp Transcription system
JP5533865B2 (en) * 2009-06-18 2014-06-25 日本電気株式会社 Editing support system, editing support method, and editing support program
CN112786045A (en) * 2021-01-04 2021-05-11 上海明略人工智能(集团)有限公司 Device, server, method and system for conference recording
CN112786045B (en) * 2021-01-04 2024-03-12 上海明略人工智能(集团)有限公司 Device, server, method and system for conference recording

Also Published As

Publication number Publication date
JP3668892B2 (en) 2005-07-06

Similar Documents

Publication Publication Date Title
US11372913B2 (en) Method and apparatus for remote digital content monitoring and management
JP5140949B2 (en) Method, system and apparatus for processing digital information
US7864352B2 (en) Printer with multimedia server
US7653925B2 (en) Techniques for receiving information during multimedia presentations and communicating the information
US8667401B1 (en) System and method for archiving collaborative electronic meetings
US20050068571A1 (en) Stand alone multimedia printer with user interface for allocating processing
US20020091658A1 (en) Multimedia electronic education system and method
US20050066047A1 (en) Network information processing system and information processing method
JP2006146415A (en) Conference support system
JPH05506346A (en) Digital/voice interactive communication network
JPH08316953A (en) Electronic conference system
WO2007000949A1 (en) Contents reproduction method and device with reproduction starting position control
US20080294649A1 (en) Contents management system, image processing device in contents management system, and link information generating method of image processing device
JP2007180828A (en) Network conference system, network conference method, and program for executing the method
JP2005341015A (en) Video conference system with minute creation support function
US20190199763A1 (en) Systems and methods for previewing content
JP2006339878A (en) Editing terminal and editing method for multimedia content, and program
US20040249945A1 (en) Information processing system, client apparatus and information providing server constituting the same, and information providing server exclusive control method
JPH08297624A (en) Electronic conference system
JPH10285538A (en) Video signal processing unit and video signal processing method
JP2022076617A (en) Morning meeting support apparatus and program
JP3668892B2 (en) Digital shorthand system
US20220377407A1 (en) Distributed network recording system with true audio to video frame synchronization
JP4347006B2 (en) Information processing device as server
JP4244545B2 (en) Information creation method, information creation apparatus, and network information processing system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040629

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041214

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050330

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S202 Request for registration of non-exclusive licence

Free format text: JAPANESE INTERMEDIATE CODE: R315201

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080422

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090422

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090422

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100422

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110422

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130422

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130422

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140422

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees