JP3323519B2 - テキスト−音声変換装置 - Google Patents

テキスト−音声変換装置

Info

Publication number
JP3323519B2
JP3323519B2 JP17898291A JP17898291A JP3323519B2 JP 3323519 B2 JP3323519 B2 JP 3323519B2 JP 17898291 A JP17898291 A JP 17898291A JP 17898291 A JP17898291 A JP 17898291A JP 3323519 B2 JP3323519 B2 JP 3323519B2
Authority
JP
Japan
Prior art keywords
word
words
speech
text
term
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP17898291A
Other languages
English (en)
Other versions
JPH04233598A (ja
Inventor
シィ バチェンコ ジョアン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AT&T Corp
Original Assignee
AT&T Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AT&T Corp filed Critical AT&T Corp
Publication of JPH04233598A publication Critical patent/JPH04233598A/ja
Application granted granted Critical
Publication of JP3323519B2 publication Critical patent/JP3323519B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/08Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/487Arrangements for providing information services, e.g. recorded voice services or time announcements
    • H04M3/493Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals
    • H04M3/4938Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals comprising a voice browser which renders and interprets, e.g. VoiceXML

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は自由形成されたテキスト
の音声合成に係り、特に音声障害(聴覚障害又は言語障
害)を持つ人によって作成された自由形式テキストの音
声合成に関する。
【0002】
【従来の技術】デュアルパーティ中継サービス(Dual P
arty Relay Service)は音声障害者とそのような障害を
持たない人とのコミュニケーションを可能にするサービ
スである。ある番号をダイヤルすることで、音声障害者
はアテンダント(付き添い人)と接続され、アテンダン
トが発呼者を被呼者に接続し、会話を中継する。
【0003】また、音声障害者からの入力呼は、TDD
(Telecommunication Device for the Deaf:聴覚障害
者のための通信装置)又はコンピュータ端末及びモデム
のようなデジタル装置を通して入力される。音声障害者
がTDD(及び同様の装置)を通してテキストを入力
し、そのテキストが受信されアテンダントに表示され
る。別の接続を介して、アテンダントは表示されたテキ
スト語を非障害者側へ発声して伝え、逆に非障害者側の
発声された応答を聞き、文字テキストメッセージで音声
障害者側へ伝達する。その文字テキストメッセージを音
声障害者側は表示装置で受信して読む。
【0004】しかし、上記手順はプライバシーの点で問
題がある。また会話としてのテンポが遅くなり、めんど
うで、いわば高度に労働集約的である。そこでアテンダ
ントの介入を排除するか又は少なくともその介入を軽減
することが利用者にとっても電話会社にとっても非常に
有利となる。
【0005】少なくともテキストから音声への変換は、
アテンダントの助けなしに行うことが可能である。例え
ば、AT&T及びベルオペレーティングカンパニーの
「電話情報(telephone information)」サービスがあ
る。問い合わせに応答して、その電話情報オペレータが
データベースにアクセスし、要望された番号を識別し、
合成器を起動させる。しかしながら、このような既知の
テキスト−音声合成器は、「録音された(canned)」音
声だけを取り扱い、構文及び語彙が予め固定されてい
る。
【0006】TDDユーザによって作成されたテキスト
を音声合成器へ入力し、その音声合成器によって発声語
を生成させ、音声障害を持たない人へ伝送することは原
理的には可能であるが、実際には容易でない。音声合成
器はテキストをそのまま正確に音声へ変換する。従っ
て、そのテキストは正確で、誤りがなく、正しく句読点
が付され、標準的な構文を有することが必要である。し
かしながら、聴覚障害者の文書言語(Written Languag
e)は、望まれる英語(あるいは同様の観点から他の言
語)の構文から逸脱していることが多い。次に示す3つ
文章は、異なる作者によって作成された聴覚障害者の文
書言語(WLD:Written Language of thedeaf)テキ
ストである。 They tend refusing to communicate. Some people have strong based on knowledges. I have many appointment from my childrens.
【0007】WLDの研究において、シャロー(V.
R.Charrow)は、1974年スタンフォード大
学、社会科学数理研究所(Institute for Mathematical
Studies in the Social Science)での聴覚障害者の英
語(Deaf English)テクニカルレポート236で、WL
Dの変化は、体系的であり、規則に支配されていると主
張する。彼女は次のように書いている。「聴覚障害者
は、英語のある規則の内在化されたもの(他のものでは
なく)に基づき、ある場合には英語とは根本的に異なる
規則を有するASLからの影響を受けつつ、種々の異な
る英語を構成している、と私は考える。これが「聴覚障
害者英語(Deaf English)」の仮説である。」
【0008】WLDシンタクス試験はシャローの主張を
支持している。WLDテキストの文章構成上の変化は一
見ランダムに見えるが、詳しくみると、その変化が一貫
していることが分かる。WLDは、特定され記述され得
る非標準的特徴の集合である。この結論を逸話的に証明
する次のような事実がある。即ち、標準的な英語の話者
は、WLDテキストを数多く読むとそのスタイルに通常
順応するという事実である。ひどく理解が困難となるの
は、文章が極端に簡潔であったり、語順が例外的に自由
であったり、語彙的選択が曖昧であったりする場合のみ
である。
【0009】
【発明が解決しようとする課題】要するに、デュアルパ
ーティ中継サービスで必要とされるものは、自由に生成
されたテキストを受容し合成する能力である。そして、
WLDの一貫性はこの言語スタイルのコンピュータによ
る分析が実現可能であることを示唆している。
【0010】
【課題を解決するための手段】デュアルパーティ中継サ
ービスを強化すべく、本発明は自由形成テキストのテキ
スト−音声合成を提供する。特に、本発明は、自由に生
成された連鎖言語テキストを受容し、その連鎖言語を正
しい強勢及び正しいポーズを入れて合成するテキスト−
音声合成器を提供する。他の要素を組み合わせて、本発
明は、アテンダントを介在させることなく音声障害者に
より生成されたテキストを合成する拡張デュアルパーテ
ィ中継サービスを提供する。この合成は、音声障害社宅
内、地域電話中央局又は指定地域において行うことがで
きる。
【0011】更に他の要素を組み合わせて、本発明は音
声−テキスト変換器を設けることで音声障害者との完全
自動双方向コミュニケーションを提供する。
【0012】本発明の原理に従えば、音声障害者により
生成されたテキストをより分かりやすくするには、略語
を解釈し、誤り(スペルミス及び「ノイズ」)を正し、
音声障害者により共通に用いられる特殊用語を翻訳し、
非標準的な言語列又はフレーズを翻訳し、また一般的に
言えばテキストメッセージをより標準的な英語へ変換す
ることが必要である。加えて、ポーズを入れることで更
に分かりやすくなる。
【0013】本発明の一実施例では、テキストはある決
められた数のワードを同時に分析するプロセッサへ入力
される。予め定義されたルールに基づき、信号は通常の
合成器へ印加され音声信号を生成する。
【0014】
【実施例】図1は本発明の一実施例を示すブロック構成
図である。ブロック10はインテリジェント分析器、ブ
ロック20は合成器である。合成器20は通常の合成器
であり、例えば「オリーブ−リーバーマン合成器」(オ
リーブ(J.P.Olive)及びリーバーマン(M.Y.Liberma
n)、1985年、テキスト−音声…米国聴覚学会誌摘
要、補遺178,S6)などである。その入力21は特
殊命令によってときどき注釈されたテキストである。そ
の出力22はアナログ音声信号である。
【0015】インテリジェント分析器10は、ワード検
出器11、ワード格納器(ワードストア)12、13及
び14、ルールベースプロセッサ15から構成されてい
る。テキストはワード検出器11に入力し、そこでワー
ド又はタームが識別される。一般に、ブランクスペー
ス、句読点又は行末が語の終わりを示している。句読点
はそれ自身タームである。検出されたタームは、シフト
レジスタ式に直列接続されたワードストア12、13、
及び14に入力する。図1では説明の都合で3個のワー
ドストアだけが示されているが、勿論任意の個数のワー
ドストアを用いることができる。各ワードストアに格納
されたタームはルールベースプロセッサ15に入力す
る。
【0016】プロセッサ15の機能は、前記入力したタ
ームを分析し、修正し、構文的に正しい位置に強勢及び
ポーズを組込み、そしてその修正されたタームを合成器
20に適切な時点で印加する。プロセッサ15内で実行
されるルールは2つのクラスに分けることができる。即
ち、タームを識別し変化させるルールと関連する文章構
成上の情報を認識するシンタックスルールである。
【0017】タームを識別し変化させるルールが影響を
与えるものは、略語の認識、ユーザの関係するコミュニ
ティによって使用される特殊な用語の認識、ワードスト
アの個数と等しい数(図1ではその数は3)のワードを
含むフレーズの認識、及びスペルミス、ミスタイプ及び
その他「ノイズ」の認識である。例えば“XXXXX”
というノイズは共通のものであり、文字(この場合は5
文字)の削除を一般に表している。このようなワード修
正の他に、タームを識別し変化させるルールには、テキ
ストをより正確により分かりやすくするという明確化機
能がある。この機能には、ワード(例えば前置詞)を付
加してテキストをより標準的な英語構文にすることが含
まれる。
【0018】タームを識別し変化させるルールが適用さ
れた後、シンタックスルールが適用される。このルール
は、部分的シンタックス制約を加えることで、ポーズが
ワードストアに格納されている任意のワードの前にくる
べきか後にくるべきかを決定する。
【0019】ポーズに関連して、入力タイミング及び処
理タイミングの問題を検討する必要がある。発話音声の
タイミングは明瞭性にとって非常に重要である。より正
確には、ワード群の相対タイミングが重要である。タイ
ミングの情報はTDDによって供給されるテキストから
は得られない。テキスト語の到達時間は発話音声の正し
いタイミングとは何等関係ないものである。
【0020】更にプロセッサ15内での処理タイミング
はアプリオリ(事前、先験的)には知られない。したが
って、プロセッサ15の出力信号のタイミングは入力信
号のタイミングに追従しない。また、時間的に密に入力
するテキストは入力バッファを必要とするほどに長い処
理時間を必要とするという状況が生じ得る。また別の状
況では、テキストがスローで入力するためにプロセッサ
15の処理にかなりの中断が生じる場合もある。いずれ
の状況も合成出力のタイミングの正確さに影響を与える
べきではない。
【0021】このために、インテリジェント分析器10
は、ワード検出器11とワードストア12との間にFI
FOメモリ16、プロセッサ15と合成器20との間に
FIFOメモリ17をそれぞれ介在させている。FIF
Oメモリ16はワード検出器11及びプロセッサ15の
制御下で動作する。タームが検出されるとFIFOメモ
リ16に格納され、ワードストア14でタームの処理が
終了するとFIFOメモリ16の最古のタームがワード
ストア12へ入力する。
【0022】FIFOメモリ17もプロセッサ15の制
御下にあるが、若干異なったモードで動作する。ターム
がプロセッサ15によって変更されるとFIFOメモリ
17へ送り込まれる。変更されたタームは、プロセッサ
15が音声におけるポーズが要求されると判断するまで
FIFOメモリ17へ入力され続ける。プロセッサ15
がその判断をした時点で、FIFOメモリ17に整列さ
れた全てのタームは順番に引き出され、合成器20へ送
出される。この方法によって、入力語の完全に任意のタ
イミングは自然発話のリズムと一致したタイミングに置
き換えられる。
【0023】図1に示す構造は、本発明によるインテリ
ジェント分析器−合成器の機能を実行する異なった別個
のハードウエアを意図している。このような分析器−合
成器は、各市内電話中央局や地域局内に設けられ、又は
ある特定サービス(例えば受信者支払の800番サービ
スや発信者支払の900番サービス)と結合されても良
い。
【0024】このようなハードウエアは、1つか又は非
常に少数の集積回路に組込まれた非常に小型の装置で実
現され得る。十分な低価格で実現すれば、図1のインテ
リジェント分析器−合成器は顧客の構内装置に含められ
るであろう。このような装置が図2に図示されており、
電話ネットワークに接続されたサブシステムが顧客の構
内に設けられている。図2のサブシステムは出力パスの
ためのインテリジェント分析器10および合成器20を
有し、入力パスのための音声−テキスト変換器30を有
している。双方のパスとも電話ネットワークに接続さ
れ、そのネットワークを通して加入者(図面左側)は他
の加入者(図面右側)に接続される。
【0025】音声−テキスト変換器30は、任意の話者
による無拘束な発話音声を認識し検出するほどの性能に
は達していないが、話者を特定すれば5000語程度を
認識できるまでトレーニングできるシステムがある。話
者を特定しないシステムもあるが、認識できる語彙は更
に制限される。しかし、このシステムでも有用である。
特定の相手(例えば、配偶者)と電話で「話す」時のよ
うな音声障害者がアテンダントの助けをまったく必要と
しない場合もあるからである。
【0026】インテリジェント分析器−合成器を実施す
るための別のハードウエア形態もある。即ち、図1の構
造が、図1の全ての構成要素、少なくともインテリジェ
ント分析器10内の全ての要素を統括するプログラム制
御プロセッサで実現されても良い。図3は、図1のハー
ドウエア実施例において実行される処理のフローチャー
トを示す。また、図4は、インテリジェント分析器10
の全ての要素を統括するプログラム制御プロセッサで実
行される処理のフローチャートを示す。
【0027】図3におけるステップ100では、ワード
ストア12に入力した各タームをデータ構造へ変換す
る。即ち、そのタームのスペリング、そのタームが属す
る音声部分、そのタームが略語であるかどうか等の関連
する情報アイテムを生成する。なお、ワードストア13
及び14に格納されたタームは既にワードストア12に
格納されていたものであるから、それらのデータ構造は
既にプロセッサ15に格納されている。
【0028】ステップ100で生成されたデータ構造で
もって、次のステップ110はワード調整ルールを適用
する。ワード調整ルールの結果はデータ構造に格納され
る。次に、ステップ120において、シンタックスルー
ルが適用され、ポーズフラグ又は非強勢フラグが設定さ
れるべきか否かが決定される。この分析の結果もデータ
構造に格納される。そして、ステップ130において、
ワードストア14の処理されたタームはFIFOメモリ
17に格納される。
【0029】ステップ140はFIFOメモリ17の出
力を合成器20へ送出することについての判断を実行す
る。FIFOメモリ17に格納されるたが「前ポーズ」
フラグを含むと判断されると、FIFOメモリ17を空
にして(格納情報は合成器20へ送出される)、そのタ
ームがFIFOメモリ17に格納される。「後ポーズ」
フラグを含むと判断されると、そのタームは最初に格納
され、その格納動作の後でFIFOメモリ17は空にさ
れる。いずれのフラグも存在しないときは、そのターム
は単に格納される。いずれにしても、図3に示すよう
に、次のタームがFIFOメモリ16から受信され、即
ちワードストア12にロードされ、処理はステップ10
0から続けられる。
【0030】図4は、本発明によるインテリジェント分
析器がプログラム制御プロセッサによって実現されるプ
ロセスを示す。ステップ200において、入力テキスト
列をメモリに格納し、入力テキスト列である変数*ター
ミナル−ストリング*を設定する。ステップ210にお
いて、*ターミナル−ストリング*の各タームは次に示
すフィールドを有するデータ構造へ変換される。
【0031】スペリング= ワードのスペリング、又は
ワードの印字フォームであって、句読点等(?!,;)
を除いたもの。ただし、ピリオド(.)は句読点には含
めない。いくつかの共通TDD語はピリオドで終わるか
らである。
【0032】カテゴリ= ワードの第1文字が数字
(1234567890)ならばNUMをカテゴリとし
て返す。そうでないならば、そのタームのカテゴリはそ
のタームの辞書的なカテゴリとなる。それは既知の英語
又はTDD方言語の音声要素(part of speech)に対応
する。未知のワードはカテゴリNILに割り当てられ
る。
【0033】特殊カテゴリ= 音声要素に加えて1以上
のワードクラスに属するタームが存在する。このフィー
ルドはこれら特殊カテゴリを識別している(下記参
照)。
【0034】先行= *ターミナル−ストリング
*を構成するリスト内の先行ワード(もし存在すれば)
に対するポインタ、存在しなければNIL。
【0035】後行= もし存在すれば前記リスト
内の次のワードのポインタ、存在しなければNIL。
【0036】前ポーズ= 最初に空にされ(NI
L)、後で合成器により認識される適切な文字列によっ
て埋められる。
【0037】後ポーズ= 最初に合成器により認識さ
れる適切な文字列によって埋められ、後で空にされる
(NIL)。
【0038】非強勢(デストレス)= 最初に空にされ
(NIL)、後でそのワードに対する合成器のデフォー
ルト音声パラメータを変更するために埋められる。
【0039】句読点= ワードを終了させるも
の(;,!又は?)を含む。
【0040】上記構造は単に例示しただけであり、他の
構造も勿論採用できる。
【0041】上記データ構造の第3フィールドの特殊カ
テゴリは以下の事項からなる。
【0042】
【0043】図4において、ステップ220は、ステッ
プ210で生成されたリストの第1のタームを指し示す
変数*ファースト−ターム*を設定する。これは、ター
ムが合成器へ送られる最初のポイントのステージであ
る。この後に、ステップ230は第1のターム(*ファ
ースト−ターム*によってポイントされる)の「前ポー
ズ」フィールドを「真」に設定する。
【0044】ステップ240では、ミススペル及びノイ
ズを識別するためのルールを適用することによって実際
の処理を開始する。ステップ240の処理は、スペルチ
ェックの方法が市販されている「ワードパーフェクト」
等の多くのワードプロセッサの方法から借用されたもの
であるという意味で、従来と異なった処理ではない。こ
れらワードプロセッサには、ワードが辞書に存在するか
否か、存在しない場合にはミススペルのタームに最も似
ている正しいスペルのワードはどれかを決定するメカニ
ズムが備わっている。例えば1990年6月14日出願
の米国特許出願(エラー頻度を用いたスペル訂正方法)
に記載されているような最良マッチング手法を採用する
こともできる。テーブルにおいて正しいスペルのワード
が識別されると、ワードのカテゴリはその特殊カテゴリ
と共にそのテーブルから取り出される。
【0045】続いて、ステップ250はワード変更処理
を行う。3語ウインドウを*ターミナル−ストリング*
のタームリストに沿ってスライドさせることにより、略
語及び通例用いられない短縮語を取り除き、テキストを
明確化しようとする。即ち、短縮された入力テキストを
正しいフルスペルのワードのテキストに置き換えようと
する。
【0046】ステップ250は、少なくともシンタック
ス分析のために、ある2語及び3語表現を1語として機
能させるように短縮化する変換動作も行う。これらのル
ールはワードリストのワード数を変化させることがある
ために、変数*ファースト−ターム*の更新と共に、先
行リスト及び後行リストのスライスがしばしば実行され
る。これらのルールの少数のものは*ファースト−ター
ム*に先行するタームも参照する。以下に示す表は、略
語(表1)、通例用いない短縮語(表2)、2語表現
(表3)および3語表現(表4)の例である。
【0047】
【表1】
【0048】
【表2】
【0049】
【表3】
【0050】
【表4】
【0051】ステップ250において実施されるルール
は、用途によってカスタマイズされ、蓄積された経験に
よって修正されても良い。次に示すのは、このようなル
ールの一例である(適用順に記載される)。
【0052】ルール1− ターム1ターム2ターム3か
らなる3語表現 もし、(ターム1スペリング+ターム2スペリング+タ
ーム3スペリングが*3語表現*テーブル(表)に存在
しない(in found))ならば、ターム3のスペリングを
標準スペリングで置き換え(REPLACE)、その新
しいスペリングに対するカテゴリ及び特殊カテゴリを再
計算し(RECONPUTE)、ターム1及びターム2
をタームリストから削除し(DELETE)、タームリ
ストを更新する(UPDATE)。
【0053】ルール2− 2語表現 ターム1ターム2 もし、(ターム1スペリング+ターム2スペリングが*
2語表現*テーブル(表)に存在しない)ならば、ター
ム2のスペリングを標準スペリングで置き換え(REP
LACE)、その新しいスペリングに対するカテゴリ及
び特殊カテゴリを再計算し(RECONPUTE)、タ
ーム1をタームリストから削除し(DELETE)、タ
ームリストを更新する(UPDATE)。
【0054】ルール3− 1語略語 ターム1 もし、ターム1の特殊カテゴリが略語表に存在すれば、
ターム1のスペリングを標準スペリングで置き換え(R
EPLACE)、その新しいスペリングに対するカテゴ
リ及び特殊カテゴリを再計算し(RECONPUTE)
する。
【0055】ルール4− ターム1ターム2ターム3
(例)の明確化 もし、ターム1のカテゴリが「num」であり、ターム
2のスペリングが「am」であるならば、ターム1のス
ペリングを「AM」で置き換える(REPLACE)。
【0056】ステップ250に続いて、ステップ260
は、選択されたタームの前ポーズ、後ポーズ及びディス
トレスのフィールドに関して韻律の指示を音声合成器へ
付加するフレーズルールを導入することによってその処
理を行う。実行されるルールを次ぎに示す。
【0057】ルール5− ディスコース−キー ターム
1ターム2ターム3 (1)もし、ターム2の特殊カテゴリがinterjection_1
を含み、且つ、もし、ターム1の特殊カテゴリがinterj
ection_modを含むならばターム1の前ポーズを「真」に
セットし(SET)、ターム2の後ポーズを「真」にセ
ットする(SET)。それ以外のときは、ターム2の前
ポーズを「真」にセットし(SET)、ターム2の後ポ
ーズを「真」にセットする(SET)。 (2)もし、ターム2の特殊カテゴリがinterjection_2
を含み、且つ、もし、ターム1の特殊カテゴリがinterj
ection_modを含むならばターム1の前ポーズを「真」に
セットし(SET)、ターム2の後ポーズを「真」にセ
ットする(SET)。 (3)もし、(ターム1の先行フィールドがNULL
で、ターム1の特殊カテゴリがinterjection_1又はinte
rjection_2のいずれかを含む)ならば、ターム1の後ポ
ーズを「真」にセットする(SET)。
【0058】ルール6− 接続詞 ターム1ターム2タ
ーム3 もし、ターム2の特殊カテゴリがoutof_and_or_norを含
み、且つ、もし、ターム1のスペリングがターム3のス
ペリングと一致しないか、又はターム1のカテゴリがタ
ーム3のカテゴリと一致しないならばターム1の後ポー
ズを「真」にセットする(SET)。
【0059】ルール7− 主格代名詞(nominative-pro
noun) ターム1ターム2ターム3 (1)もし、ターム3の特殊カテゴリがnom_pronoun
(主格代名詞)を含み、 且つ、ターム
2の特殊カテゴリがaux_verb.1(助動詞1)を含
み、且つ、もし、ターム1のカテゴリがWH
ならば、ターム1の前ポーズを「真」にセットし(SE
T)、それ以外では、ターム2の前ポーズを「真」にセ
ットする(SET)。 (2)もし、ターム3の特殊カテゴリがnom_pronounを
含み、且つ、(ターム 2の特殊カテゴ
リがpre_np_1を含むか、又はターム2のカテゴ
リ=ADV)ならば、且つ、もし、(ターム1
のカテゴリがCONJ又はPREPと等しくない(DO
ES NOT)、且つ、ターム1スペリングが「that'
s」「thats」「it's」「its」を含まない(DOES
NOT)ならば、ターム2の前ポーズを「真」にセット
する(SET)。 (3)もし、ターム2の特殊カテゴリがnom_pronounを
含み、且つ、もし、ターム1のカテゴリがCONJ又は
PREPと等しくない(DOESNOT)、且つ、ター
ム1の特殊カテゴリが(subord_1又はsubord_2又はpre_
np_1又はaux_verb_1)を含まない(DOES NOT)
ならば、ターム2の前ポーズを「真」にセットする(S
ET)。
【0060】ルール8− there-is ターム1ターム2
ターム3 (1)もし、ターム3のワードスペリングが「there」
であり、且つターム2 の特殊カテゴリ
がaux_verb_1を含むならば、且つ、もし、ターム1のカ
テゴリ=WHならば、ターム1の前ポーズを「真」にセ
ットする(SET)。 (2)もし、ターム2のワードスペリングが「theres」
「there's」「that's」「thats」又は「there」であ
り、且つ、ターム3の特殊カテ ゴリが
aux_verb_1を含むならば、且つ、もし、ターム1のカテ
ゴリがCONJ又はPREPに等しくない(DOES
NOT)、又はターム1の特殊カテゴリがsubord_1、su
bord_2又はpre_np_1を含まない(DOES NOT)な
らば、ターム2の前ポーズを「真」にセットする(SE
T)。
【0061】ルール9− 従属接続詞(Subordinating-
conj) ターム1ターム2ターム3 (1)もし、ターム3の特殊カテゴリがsubord_1を含
み、もし、ターム2のカテゴリがNUMに等しくなく
(DOESNOT)、且つ、ターム3のスペリングが
「till」、「til」又は「until」に等しくなく(DOE
S NOT)もし、ターム2の特殊カテゴリがsubord_m
odを含み、又は(OR)ターム2のカテゴリがCONJ
に等しいならば、ターム1の後ポーズを「真」にセット
し(SET)、それ以外は、ターム2の後ポーズを
「真」にセットする(SET)。 (2)もし、ターム3の特殊カテゴリがsubord_2及びsu
bord_modを含み、又はターム2のカテゴリがCONJ又
はPREPと等しいならばターム1の後ポーズを「真」
にセットする(SET)。
【0062】ルール10− ファイナル−デストレス ターム1ター
ム2 もし、ターム1の特殊カテゴリがdestress_pronouns
(非強勢代名詞)であり (1)もし、ターム2の前ポーズが「真」ならば、ター
ム1のデストレスを「真」にセットし(SET) (2)もし、ターム1の後ポーズが「真」ならば、ター
ム1のデストレスを「真」にセットする(SET)。
【0063】ルール11− ファインド−ga ターム
(1)もし、ターム1の特殊カテゴリがq_go_aheadを含
むならば、(a)ターム1のスペリングを「go ahead」
へ置き換え(REPLACE)、ターム1の特殊カテゴ
リを0にセットし(SET)、(b)もし、ターム1の
前がヌルでない(IS NOT)ならば、ターム1前の
句読点を「?」にセットする(SET)。 (2)もし、ターム1の特殊カテゴリがgo_ahead_2を含
むならば、ターム1のスペリングを「.go ahead」へ置
き換え(REPLACE)、ターム1の特殊カテゴリを
0にセットする(SET)。 (3)もし、ターム1の特殊カテゴリがgo_ahead_1を含
むならば、ターム1のスペリングを「.go ahead to sto
p keying」へ置き換え(REPLACE)、ターム1の
特殊カテゴリを0にセットする(SET)。 (4)もし、ターム1の特殊カテゴリがstop_keyingを
含むならば、ターム1のスペリングを「.stop keying」
へ置き換え(REPLACE)、ターム1の特殊カテゴ
リを0にセットする(SET)。
【0064】最後に、ステップ260は最終発音列の出
力ファイルを生成する。次にようにタームリストが最初
から最後まで処理される。
【0065】もし、前ポーズフィールド=TRUE
(真)ならば、ポーズ制御列を書き込み、且つ、もし、
デストレス=TRUEならば、デストレス制御列を書き
込み、スペリングフィールドの内容を書き込み、もし、
後ポーズ=TRUEならば、ポーズ制御列を書き込み、
句読点フィールドの内容を書き込む。
【0066】
【発明の効果】以上詳細に説明したように、本発明によ
るテキスト−音声変換装置は、自由に生成された言語テ
キストを受容し、その言語を正しい強勢及び正しいポー
ズを入れて合成する。本発明により、例えばアテンダン
トを介在させることなく音声障害者により生成されたテ
キストを合成する拡張デュアルパーティ中継サービスを
提供することができる。
【図面の簡単な説明】
【図1】本発明の一実施例を示すブロック構成図であ
る。
【図2】本発明を電話ネットワークに適用した概略的構
成図である。
【図3】図1のシステムにおける信号処理の一方法を示
すフローチャートである。
【図4】図1のシステムにおける信号処理の他の方法を
示すフローチャートである。
【符号の説明】
10 インテリジェント分析器 11 ワード検出器 12、13、14 ワードストア 15 プロセッサ 20 合成器
フロントページの続き (72)発明者 ジョアン シィ バチェンコ アメリカ合衆国 07030 ニュージャー ジィ、ホボケン、テンス ストリート 66 (56)参考文献 特開 昭59−185395(JP,A) 特開 昭58−40684(JP,A)

Claims (27)

    (57)【特許請求の範囲】
  1. 【請求項1】 音声信号を合成するためのテキスト−音
    声変換装置において、 1つの自由生成テキスト信号に
    応答して、当該テキスト信号中の個々のワードを検出
    し、合成すべきワード列を生成するワード検出器と、 Nを整数として、前記ワード検出器から適切なタイミン
    グで順次供給される前記ワード列中のN個の隣接ワード
    をN個のワード格納器に格納し、前記隣接ワードに関し
    て前記ワード列中の各ワードを分析し、分析された各ワ
    ードが属するカテゴリを決定するカテゴライズ手段と、 前記カテゴライズ手段に応答して、前記ワード列中の各
    ワードを順次考慮し、各ワードを考慮する過程で、考慮
    中のワードのカテゴリに基づいて、必要に応じて当該考
    慮中のワードの前または後にポーズ生成信号を挿入する
    シンタクス増強手段とを有し、前記カテゴリには、言語の音声要素とワードクラスが存
    在し、 前記考慮されたワードを自然発話のリズムと一致したタ
    イミングで合成器に出力して発話音声とする ことを特徴
    とするテキスト−音声変換装置。
  2. 【請求項2】 前記シンタクス増強手段は、考慮中のワ
    ードのカテゴリと、当該考慮中のワードの前後に隣接す
    るワードのうちの一方のワードのカテゴリとに基づい
    て、必要に応じて当該考慮中のワードの前または後にポ
    ーズ生成信号を挿入することを特徴とする請求項1の装
    置。
  3. 【請求項3】 前記シンタクス増強手段は、考慮中のワ
    ードのカテゴリと、当該考慮中のワードの前後に隣接す
    る両方のワードのカテゴリとに基づいて、必要に応じて
    当該考慮中のワードの前または後にポーズ生成信号を挿
    入することを特徴とする請求項1の装置。
  4. 【請求項4】 前記シンタクス増強手段は、考慮中のワ
    ードのカテゴリと、当該考慮中のワードに隣接するワー
    ドのカテゴリとに基づいて、必要に応じて各考慮中のワ
    ードに非強勢信号を関係づけることも行うことを特徴と
    する請求項1の装置。
  5. 【請求項5】 前記ワード検出器によって検出されたワ
    ードと、前記ポーズ生成信号と、前記非強勢信号とに応
    答して、音声信号を生成する音声合成器をさらに有する
    ことを特徴とする請求項4の装置。
  6. 【請求項6】 前記カテゴライズ手段は、前記ワード列
    中のワードを分析するためのNワードスライディングウ
    ィンドウを形成するためにワードを通過させるNワード
    シフトレジスタを有することを特徴とする請求項1の装
    置。
  7. 【請求項7】 前記カテゴライズ手段は、前記ワード列
    のワードの分析を可能とするために当該ワード列を通し
    てスライドするNワードウィンドウを生成するためのワ
    ード格納手段およびワードアクセス手段を有することを
    特徴とする請求項1の装置。
  8. 【請求項8】 前記シンタクス増強手段によってポーズ
    生成信号を挿入されたワード列に応答して、音声信号を
    生成する音声合成器をさらに有することを特徴とする請
    求項1の装置。
  9. 【請求項9】 前記音声合成器と前記シンタクス増強手
    段の間に接続された出力FIFOメモリをさらに有する
    ことを特徴とする請求項8の装置。
  10. 【請求項10】 前記出力FIFOメモリは前記ポーズ
    生成信号の制御下で前記音声合成器へ信号を送出するこ
    とを特徴とする請求項8の装置。
  11. 【請求項11】 前記音声合成器の出力を通信ネットワ
    ークに接続し、音声信号を前記通信ネットワークへ送出
    することを特徴とする請求項8の装置。
  12. 【請求項12】 音声信号を受信し、受信した音声信号
    をテキストへ変換する、前記通信ネットワークに接続さ
    れた音声−テキスト変換器をさらに有することを特徴と
    する請求項11の装置。
  13. 【請求項13】 前記ワード検出器と前記カテゴライズ
    手段の間に、前記ワード検出器によって検出されたワー
    ドを格納するFIFOメモリをさらに有することを特徴
    とする請求項1の装置。
  14. 【請求項14】 前記FIFOメモリは、前記ワード検
    出器の制御下でワードを格納し、前記カテゴライズ手段
    の制御下でワードを出力することを特徴とする請求項1
    3の装置。
  15. 【請求項15】 前記シンタクス増強手段に応答する出
    力FIFOメモリをさらに有することを特徴とする請求
    項1の装置。
  16. 【請求項16】 フルワードの省略形であるワードを認
    識し、省略形を対応するフルワードに置き換えるワード
    変更手段を前記カテゴライズ手段内に有することを特徴
    とする請求項1の装置。
  17. 【請求項17】 ノイズワードであるワードおよびノイ
    ズ部分であるワード部分を認識し削除するワード変更手
    段を前記カテゴライズ手段内に有することを特徴とする
    請求項1の装置。
  18. 【請求項18】 所定の分かりやすさを得るために必要
    なワードの欠落を認識し、欠落しているワードを挿入す
    るワード変更手段を前記カテゴライズ手段内に有するこ
    とを特徴とする請求項1の装置。
  19. 【請求項19】 ワードフレーズを認識し、各ワードフ
    レーズを単一ユニットとしてカテゴリ分類するワード変
    更手段を前記カテゴライズ手段内に有することを特徴と
    する請求項1の装置。
  20. 【請求項20】 誤ったスペルのワードを認識し、当該
    誤ったスペルのワードを正しいスペルのワードに置き換
    えるワード変更手段を前記カテゴライズ手段内に有する
    ことを特徴とする請求項1の装置。
  21. 【請求項21】 所定のワード列を認識し、当該ワード
    列を他のワード列に置き換えるワード変更手段を前記カ
    テゴライズ手段内に有することを特徴とする請求項1の
    装置。
  22. 【請求項22】 前記ワード列中の一ワードを不正な形
    式であると認識し、当該不正な形式を有するワードを正
    しい形式を有する対応するワードに置き換えるワード変
    更手段を前記カテゴライズ手段内に有することを特徴と
    する請求項1の装置。
  23. 【請求項23】 検出された一ワードを複数ワードの組
    合せとして認識し、当該複数ワードの組合せをワードご
    とに分離して複数ワードの句を生成するワード変更手段
    を前記カテゴライズ手段内に有することを特徴とする請
    求項1の装置。
  24. 【請求項24】 特定のユーザ群用にカスタマイズされ
    た文法規則の集合に従ってワード列を変更するワード変
    更手段を前記カテゴライズ手段内に有することを特徴と
    する請求項1の装置。
  25. 【請求項25】 標準的な英語の文法規則の集合に従っ
    てワード列を変更するワード変更手段を前記カテゴライ
    ズ手段内に有することを特徴とする請求項1の装置。
  26. 【請求項26】 音声信号を合成するためのテキスト−
    音声変換装置において、 1つの自由生成テキスト信号に応答して、当該テキスト
    信号中の個々のワードを検出し、合成すべきワード列を
    生成するワード検出器と、 所定の規則に従って、前記ワード列を別のワード列に変
    換するワード変更手段と、 前記別のワード列に応答して、Nを整数として、前記別
    のワード列中のN個の隣接ワードをN個のワード格納器
    に格納し、前記隣接ワードに関して前記別のワード列中
    の各ワードを分析し、分析された各ワードが属するカテ
    ゴリを決定するカテゴライズ手段と、 前記カテゴライズ手段に応答して、前記カテゴリに基づ
    いて、前記別のワード列中のポーズ受容ワードを識別
    し、識別されたワードに対応して、前記別のワード列中
    にポーズ生成信号を挿入するシンタクス増強手段とを有
    し、前記カテゴリには、言語の音声要素および1以上のワー
    ドクラスに属するタームが存在し、 前記別のワードを自然発話のリズムと一致したタイミン
    グで合成器に出力して発話音声とする ことを特徴とする
    テキスト−音声変換装置。
  27. 【請求項27】 前記ワード変更手段は、前記合成すべ
    きワード列においてノイズワードであるワードを認識
    し、当該ノイズワードを前記合成すべきワード列から削
    除することにより前記別のワード列を形成することを特
    徴とする請求項26の装置。
JP17898291A 1990-06-28 1991-06-25 テキスト−音声変換装置 Expired - Lifetime JP3323519B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US546127 1983-10-27
US07/546,127 US5157759A (en) 1990-06-28 1990-06-28 Written language parser system

Publications (2)

Publication Number Publication Date
JPH04233598A JPH04233598A (ja) 1992-08-21
JP3323519B2 true JP3323519B2 (ja) 2002-09-09

Family

ID=24178991

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17898291A Expired - Lifetime JP3323519B2 (ja) 1990-06-28 1991-06-25 テキスト−音声変換装置

Country Status (5)

Country Link
US (1) US5157759A (ja)
EP (1) EP0465058B1 (ja)
JP (1) JP3323519B2 (ja)
CA (1) CA2043667C (ja)
DE (1) DE69131549T2 (ja)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5450470A (en) * 1990-12-13 1995-09-12 Dirad Technologies, Inc. Script generator and process for programming automated TDD telephone system application
EP0527527B1 (en) * 1991-08-09 1999-01-20 Koninklijke Philips Electronics N.V. Method and apparatus for manipulating pitch and duration of a physical audio signal
DE69231266T2 (de) * 1991-08-09 2001-03-15 Koninkl Philips Electronics Nv Verfahren und Gerät zur Manipulation der Dauer eines physikalischen Audiosignals und eine Darstellung eines solchen physikalischen Audiosignals enthaltendes Speichermedium
US5475796A (en) * 1991-12-20 1995-12-12 Nec Corporation Pitch pattern generation apparatus
DE69327774T2 (de) * 1992-11-18 2000-06-21 Canon Information Syst Inc Prozessor zur Umwandlung von Daten in Sprache und Ablaufsteuerung hierzu
US5835690A (en) * 1992-12-15 1998-11-10 Microsoft Corporation Header/footer text string parsing using callback routines for additional processing
US5613038A (en) * 1992-12-18 1997-03-18 International Business Machines Corporation Communications system for multiple individually addressed messages
US5651095A (en) * 1993-10-04 1997-07-22 British Telecommunications Public Limited Company Speech synthesis using word parser with knowledge base having dictionary of morphemes with binding properties and combining rules to identify input word class
US5634084A (en) * 1995-01-20 1997-05-27 Centigram Communications Corporation Abbreviation and acronym/initialism expansion procedures for a text to speech reader
US5787231A (en) * 1995-02-02 1998-07-28 International Business Machines Corporation Method and system for improving pronunciation in a voice control system
US5761640A (en) * 1995-12-18 1998-06-02 Nynex Science & Technology, Inc. Name and address processor
USD385276S (en) * 1996-01-26 1997-10-21 Griggs Robert L Portable language translating machine
US6029508A (en) * 1996-03-25 2000-02-29 Snap-On Technologies, Inc. Remote portable display unit with wireless transceiver and engine analyzing system incorporating same
US6035273A (en) * 1996-06-26 2000-03-07 Lucent Technologies, Inc. Speaker-specific speech-to-text/text-to-speech communication system with hypertext-indicated speech parameter changes
US6411696B1 (en) * 1996-12-31 2002-06-25 Intel Corporation System for finding a user with a preferred communication mechanism
US5987447A (en) * 1997-05-20 1999-11-16 Inventec Corporation Method and apparatus for searching sentences by analyzing words
US6801763B2 (en) * 1997-10-29 2004-10-05 Metro One Telecommunications, Inc. Technique for effectively communicating travel directions
US6098042A (en) * 1998-01-30 2000-08-01 International Business Machines Corporation Homograph filter for speech synthesis system
US6076060A (en) * 1998-05-01 2000-06-13 Compaq Computer Corporation Computer method and apparatus for translating text to sound
US6735286B1 (en) * 1998-05-29 2004-05-11 Nortel Networks Limited Telephone system integrated text based communication processes, apparatus and systems
US6324689B1 (en) * 1998-09-30 2001-11-27 Compaq Computer Corporation Mechanism for re-writing an executable having mixed code and data
US6208968B1 (en) 1998-12-16 2001-03-27 Compaq Computer Corporation Computer method and apparatus for text-to-speech synthesizer dictionary reduction
US6400809B1 (en) * 1999-01-29 2002-06-04 Ameritech Corporation Method and system for text-to-speech conversion of caller information
US6377925B1 (en) 1999-12-16 2002-04-23 Interactive Solutions, Inc. Electronic translator for assisting communications
US7089541B2 (en) * 2001-11-30 2006-08-08 Sun Microsystems, Inc. Modular parser architecture with mini parsers
US8265931B2 (en) 2002-01-22 2012-09-11 At&T Intellectual Property Ii, L.P. Method and device for providing speech-to-text encoding and telephony service
US7027986B2 (en) * 2002-01-22 2006-04-11 At&T Corp. Method and device for providing speech-to-text encoding and telephony service
US7558732B2 (en) * 2002-09-23 2009-07-07 Infineon Technologies Ag Method and system for computer-aided speech synthesis
US7656861B2 (en) 2004-07-09 2010-02-02 Cisco Technology, Inc. Method and apparatus for interleaving text and media in a real-time transport session
TW200614010A (en) * 2004-10-28 2006-05-01 Xcome Technology Co Ltd Instant messenger system with transformation model and implementation method
US7599828B2 (en) * 2005-03-01 2009-10-06 Microsoft Corporation Grammatically correct contraction spelling suggestions for french
US7792143B1 (en) * 2005-03-25 2010-09-07 Cisco Technology, Inc. Method and apparatus for interworking dissimilar text phone protocols over a packet switched network
US20070143410A1 (en) * 2005-12-16 2007-06-21 International Business Machines Corporation System and method for defining and translating chat abbreviations
US8538743B2 (en) * 2007-03-21 2013-09-17 Nuance Communications, Inc. Disambiguating text that is to be converted to speech using configurable lexeme based rules
US20090083035A1 (en) * 2007-09-25 2009-03-26 Ritchie Winson Huang Text pre-processing for text-to-speech generation
US8165881B2 (en) * 2008-08-29 2012-04-24 Honda Motor Co., Ltd. System and method for variable text-to-speech with minimized distraction to operator of an automotive vehicle
US20100057465A1 (en) * 2008-09-03 2010-03-04 David Michael Kirsch Variable text-to-speech for automotive application
US9300796B2 (en) * 2009-02-16 2016-03-29 Microsoft Technology Licensing, Llc Telecommunications device for the deaf (TDD) interface for interactive voice response (IVR) systems
WO2023177145A1 (ko) * 2022-03-16 2023-09-21 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3704345A (en) * 1971-03-19 1972-11-28 Bell Telephone Labor Inc Conversion of printed text into synthetic speech
BG24190A1 (en) * 1976-09-08 1978-01-10 Antonov Method of synthesis of speech and device for effecting same
US4674065A (en) * 1982-04-30 1987-06-16 International Business Machines Corporation System for detecting and correcting contextual errors in a text processing system
JPS59185395A (ja) * 1983-04-06 1984-10-20 日本電気株式会社 音声応答装置
JPS60195596A (ja) * 1984-03-19 1985-10-04 三洋電機株式会社 音声合成装置
US4872202A (en) * 1984-09-14 1989-10-03 Motorola, Inc. ASCII LPC-10 conversion
JPS61252596A (ja) * 1985-05-02 1986-11-10 株式会社日立製作所 文字音声通信方式及び装置
US4831654A (en) * 1985-09-09 1989-05-16 Wang Laboratories, Inc. Apparatus for making and editing dictionary entries in a text to speech conversion system
JPS63198154A (ja) * 1987-02-05 1988-08-16 インタ−ナショナル・ビジネス・マシ−ンズ・コ−ポレ−ション つづり誤り訂正装置
US4873634A (en) * 1987-03-27 1989-10-10 International Business Machines Corporation Spelling assistance method for compound words
US4868750A (en) * 1987-10-07 1989-09-19 Houghton Mifflin Company Collocational grammar system
US5146405A (en) * 1988-02-05 1992-09-08 At&T Bell Laboratories Methods for part-of-speech determination and usage
JPH01231167A (ja) * 1988-03-11 1989-09-14 Fujitsu Ltd 日本語文章処理方式
US4914590A (en) * 1988-05-18 1990-04-03 Emhart Industries, Inc. Natural language understanding system
JP2655703B2 (ja) * 1988-11-09 1997-09-24 富士通株式会社 日本語文推敲処理方法
US5060154A (en) * 1989-01-06 1991-10-22 Smith Corona Corporation Electronic typewriter or word processor with detection and/or correction of selected phrases
US4996707A (en) * 1989-02-09 1991-02-26 Berkeley Speech Technologies, Inc. Text-to-speech converter of a facsimile graphic image
US5258909A (en) * 1989-08-31 1993-11-02 International Business Machines Corporation Method and apparatus for "wrong word" spelling error detection and correction

Also Published As

Publication number Publication date
DE69131549T2 (de) 2000-07-13
JPH04233598A (ja) 1992-08-21
CA2043667A1 (en) 1991-12-29
EP0465058B1 (en) 1999-08-25
US5157759A (en) 1992-10-20
CA2043667C (en) 1996-02-13
EP0465058A2 (en) 1992-01-08
DE69131549D1 (de) 1999-09-30
EP0465058A3 (en) 1995-03-22

Similar Documents

Publication Publication Date Title
JP3323519B2 (ja) テキスト−音声変換装置
US6067514A (en) Method for automatically punctuating a speech utterance in a continuous speech recognition system
US5283833A (en) Method and apparatus for speech processing using morphology and rhyming
US8290775B2 (en) Pronunciation correction of text-to-speech systems between different spoken languages
US8244540B2 (en) System and method for providing a textual representation of an audio message to a mobile device
EP1143415B1 (en) Generation of multiple proper name pronunciations for speech recognition
JP2848458B2 (ja) 言語翻訳システム
EP1089193A2 (en) Translating apparatus and method, and recording medium used therewith
KR20080015935A (ko) 합성 생성된 음성 객체의 발음 정정
JPH10504404A (ja) 音声認識のための方法および装置
JPH07129594A (ja) 自動通訳システム
Ronzhin et al. Russian voice interface
US20040012643A1 (en) Systems and methods for visually communicating the meaning of information to the hearing impaired
JP3059398B2 (ja) 自動通訳装置
JP2758851B2 (ja) 自動翻訳装置及び自動通訳装置
CN111652005B (zh) 汉语与乌尔都语同步互译系统及方法
US6772116B2 (en) Method of decoding telegraphic speech
Nahid et al. Comprehending real numbers: Development of bengali real number speech corpus
JP2003162524A (ja) 言語処理装置
Seneff The use of subword linguistic modeling for multiple tasks in speech recognition
JP2001013992A (ja) 音声理解装置
Spiegel et al. Applying speech synthesis to user interfaces
Chuu LIESHOU: A Mandarin conversational task agent for the Galaxy-II architecture
JP2001051999A (ja) 翻訳装置、翻訳電話システム、翻訳方法、および、情報記録媒体
JP2000310995A (ja) 音声合成方法及び音声合成装置、並びに音声合成装置を備えた電話機

Legal Events

Date Code Title Description
R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080628

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090628

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090628

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100628

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100628

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110628

Year of fee payment: 9

EXPY Cancellation because of completion of term