JPH08314492A

JPH08314492A - 音声入力翻訳装置

Info

Publication number: JPH08314492A
Application number: JP7122683A
Authority: JP
Inventors: Hiroaki Ogawa; 浩明小川; Masao Watari; 雅男渡; Makoto Akaha; 誠赤羽; Tetsuya Kagami; 徹也加賀美; Kazuo Ishii; 和夫石井; Miyuki Tanaka; 幸田中; Yasuhiko Kato; 靖彦加藤; Hiroshi Tsunoda; 弘史角田; Koji Asano; 康治浅野
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1995-05-22
Filing date: 1995-05-22
Publication date: 1996-11-29

Abstract

(57)【要約】【目的】新たに入力すべき音声信号に自己のスピーカ
から放音された翻訳済の音声信号が重畳されないように
し、新たな音声信号の正しい翻訳を可能とする。【構成】マイクロフォン５を含む第一言語の音声入力
手段と、マイクロフォン５からの音声入力を識別する音
声認識手段と、識別音声信号を第二言語に翻訳する翻訳
手段と、翻訳済信号から第二言語の音声を作る音声合成
手段と、音声合成信号を出力するスピーカ１２とからな
る音声入力型の自動翻訳装置であって、このスピーカ１
２から放音される翻訳済の音声が再びマイクロフォン５
より入力して翻訳に誤動作が生じないように、マイクロ
フォン５からの音声を取り込み中はスピーカ１２からの
出力を停止する音声出力停止手段を設けた。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ある言語で入力した音
声信号を、他の言語に変換して文字表示すると共に音声
出力することができる海外旅行地等で、異国語を用いる
人々が対話する時に用いて便利な携帯用の電子翻訳装置
に関するものである。

【０００２】

【従来の技術】従来の翻訳装置には、例えば特公昭６１
−４９７１６号公報で開示される発明の如く、使用者が
発声した原言語の音声をマイクロフォン等の音声情報入
力手段を経て、音声認識手段により原言語文字信号に変
換し、更に翻訳手段において翻訳言語の文字信号に変換
後、音声合成手段により翻訳言語の音声に変換して出力
する構成の電子翻訳装置があった。

【０００３】これら従来の携帯用の電子翻訳装置では、
マイクロフォンとスピーカの配置距離が近いので、スピ
ーカから出力される翻訳化された合成音声が、再びマイ
クロフォンを介し入力され翻訳の誤動作をきたす虞があ
る。このため、開示された発明では、マイクロフォンで
入力された音声情報が電子翻訳手段に入力されるのを阻
止する入力阻止手段と、翻訳開始から翻訳された翻訳言
語に関する音声情報がスピーカから出力されるのに相当
する期間を検出し、その期間中自動的に入力阻止手段を
作動させて入力された音声情報が翻訳されるのを阻止す
ると共に、それに同期して音声入力不可の警告を発する
ように警告手段を作動させる入力制御手段とを設けるこ
とにより、スピーカから出力される翻訳言語の音声情報
がマイクロフォンを介して再び入力され、再翻訳される
といった問題を無くし、翻訳の誤動作を防止している。

【０００４】又、この装置によれば、対話者は、入力阻
止手段に同期して作動する警告手段からの警告に従って
翻訳すべき原言語をマイクロフォンに向かって発音する
ようにされているので、キー、足踏みスイッチなどの操
作を要せず比較的に正確な翻訳をすることができるもの
である。このように、従来の音声翻訳機においては、原
言語の入力音声が翻訳され、翻訳言語の合成音声が出力
中は入力を阻止して、音声入力不可の警告を発し誤動作
等を無くしていた。

【０００５】

【発明が解決しようとする課題】しかし以上のような従
来の装置では、一文章を発声するとその文章の翻訳が終
了し、翻訳言語の合成音声の出力が終了するまで次の音
声の入力ができない構成をとるものであり、複数の文章
を連続に発声する場合、常に音声入力不可の警告を使用
者が監視して、一文発声する毎に、翻訳言語の合成音声
の出力が終了するまで待たされることとなり、常に音声
入力不可の警告を監視しなければならない煩わしさがあ
り、さらに、入力に非常に時間がかかるという欠点があ
った。

【０００６】そこで、本発明では、従来の欠点である煩
わしい音声入力不可の警告の監視の必要がなく、目的の
翻訳したい複数の文章を連続的に音声入力することがで
きると同時に、音声入力中にあっては、翻訳された翻訳
言語の合成音声を出力させない構成を採り、高い認識率
を維持することができる携帯に便利な音声入力型の電子
翻訳装置を提供することを目的とする。

【０００７】

【課題を解決するための手段】従って本発明では、日本
語等の第一の言語を入力するマイクロフォンを含む音声
入力手段と、前記音声入力手段からの音声を音声認識し
て第一の音声情報とする音声認識手段と、前記第一の音
声情報を英語等の第二の言語の音声情報に変換する翻訳
手段と、前記第二の言語の音声情報に基づいて第二の言
語の音声を作成する音声合成手段と、前記第二の言語の
音声を音声出力するスピーカを含む音声出力手段と、前
記第二の言語の文字を表示する液晶パネル等の表示手段
と、前記第二の言語の音声出力中に、前記マイクロフォ
ンからの音声入力があるときには前記スピーカからの放
音を停止するための音声出力阻止手段とを設けてなるこ
とを特徴とした音声入力型の電子翻訳装置により、上述
された従来の翻訳装置の欠点を無くすことを提案する。

【０００８】即ち、本発明の音声入力翻訳装置は、前記
マイクロフォン等を含む音声出力手段中に、前記スピー
カから出力された信号が再びマイクロフォンより入力さ
れて音声翻訳の誤動作要因となることの無いように音声
信号の出力を停止する音声出力停止手段を設け、翻訳の
誤動作を無くするものである。

【０００９】従って、本発明によれば、煩わしい音声入
力不可の警告の監視の必要がなく、目的の翻訳したい複
数の文章を連続的に音声入力することができ、且つ高い
認識率を維持することができる携帯に便利な音声入力型
の翻訳装置を提供することが可能となった。これによ
り、異国人同志間で高速、且つ正確な対話が出来るよう
になった。

【００１０】

【実施例】図１は、本発明による音声入力翻訳装置の一
例の外観斜視図を示す。本発明の音声入力翻訳装置１の
本体は、ベース基体部１ａと蓋体部１ｂとからなり、前
記ベース基体部１ａと蓋体部１ｂにはそれぞれ液晶表示
パネル２、３が設けられ、前記基体部１ａと蓋体部１ｂ
とは機械的及び電気的に結合部材４で結合されている。
ベース基体部１ａには、マイクロフォン５、カーソルキ
ー６ａ〜６ｄ、後述する各種のファンクションキー群
７、電源スイッチ８、意図一致確認キー９、後述するオ
プションのＩＣカード１１を挿入するための収納部１０
等が設けられる。蓋体部１ｂには、液晶表示パネル３の
他に、スピーカ１２、翻訳開始キー１３、翻訳終了キー
１４および意図一致確認キー１５が設けられている。

【００１１】図２は、図１を更に詳しく示した平面図
で、図１と共通部分は省略するも図面を参照して更に説
明する。液晶表示パネル２、３に写し出される表示は互
いに逆方向であり、表示パネルのそれは、操作者と向か
い合った相手から見て正方向とする。ベース基体部１ａ
の各ファンクションキー群７は、例えば、翻訳するため
の会話キー１６、会話の学習を目的とした学習キー１
７、本発明の音声入力を選択する音声入力キー１８、従
来の翻訳機の如くキーワード利用の入力をするためのキ
ーワード入力キー１９、会話の対象言語を選択する言語
キー２０、２１、辞書機能キー２２、計算機能キー２
３、ゲーム選択キー２４、メモキー２５、時計表示キー
２６、住所録選択キー２７等から構成される。更に、フ
ァンクションキー群７には、翻訳すべき文章の取り込み
開始、終了を指示するためのキー２８、２９が設けられ
る。

【００１２】又、表示切り換えキー３０により、液晶表
示パネル２、３の表示内容を切り換えることができる。
又、ベース基体部１ａには、操作者が喋った文章が正し
く音声認識されたかの確認を液晶表示パネル２で行い、
正しいときに確認を行い翻訳を実行させるための意図一
致を入力する意図一致確認キー９が設けられている。

【００１３】例えば、日本人である操作者が、「非常口
はどこですか？」とマイクロフォンに向かって喋ると、
後述する音声認識回路がその文章を認識して液晶表示パ
ネル２に「非常口はどこですか？」と表示する。このと
き、操作者は、自己の喋った文章内容と表示内容が一致
していればこの意図一致確認キー９を押し、若し一致が
取れないときには、何度でも音声入力を繰り返すように
する。

【００１４】蓋体部１ｂには、日本人である操作者と対
話する相手が操作するべき、翻訳開始キー１３、翻訳終
了キー１４、意図一致確認キー１５が設けられている
も、操作に慣れない相手が迷わない為にも必要最小限の
キーのみが備えられる。例えば、対話するアメリカ人で
ある相手は、翻訳機能が実行された後に、スピーカ１２
から放音される内容「Ｗｈｅｒｅｉｓｔｈｅｅｍ
ｅｒｇｅｎｃｙｅｘｉｔ？」と、液晶表示パネル３
に写し出された同様の内容により日本人が日本語で喋っ
た内容を英語で知ることができる。又、その逆にアメリ
カ人が英語で喋った内容も、上記と逆の操作工程で、日
本人は日本語で見、聞きすることができる。尚、各液晶
表示パネル２、３には、翻訳後の英文や翻訳前の日本語
文がそれぞれ小さく表示される便宜が図られている。

【００１５】次に、本発明の具体的な回路構成を第３図
を用いて説明する。マイクロフォン５からの音声はＡ／
Ｄ変換５１でディジタル信号とされた後で音声認識回路
５２に送られる。この回路で認識された内容はコード化
されてコンピュータの中央演算装置５５（以下、単に
「ＣＰＵ」と記す）と翻訳回路７０に送られる。翻訳回
路７０では、コード化された音声データと、予めパター
ン化されＲＯＭ７１に記憶されたデータを比較し、例え
ば日本語の音声データを英語のコードに変換する。この
為に、ＲＯＭ７１には、日本語・英語の単語辞書、標準
文法、標準文型、状況判断機能等のデータが収納されて
いる。又、ＲＡＭ７２は、翻訳データの一時記憶機能や
状況判断の為の学習機能等に供される。

【００１６】ＣＰＵ５５は、ＲＯＭ５６に記憶されたプ
ログラムに従って音声認識回路５２、翻訳回路７０、後
述の音声合成回路５８、文字表示回路７３を動作させ
る。尚、ＲＡＭ５７はＣＰＵ５５の動作処理の為のバッ
ファメモリである。ＣＰＵ５５と翻訳回路７０により、
翻訳された英語のコードは音声合成回路５８により英語
の音声信号に変換される。又、音声合成回路５では、入
力された英語のコードと、予めパターン・コード化され
ＲＯＭ５９に記憶された英語音声データの比較により英
語の音声信号を作成する。ＲＡＭ５７は、音声合成に必
要なデータを一時記憶する為に寄与するものである。こ
の音声合成されたディジタル化英語音の文章は、Ｄ／Ａ
変換回路６１でアナログ音声に変換た後、スピーカー１
２より放音される。

【００１７】一方、ＣＰＵ５５と翻訳回路７０により、
翻訳された英語のコードは文字表示回路７３に供給され
て英語の文章に変換される。文字情報発生回路７６では
入力された英語のコードと、予めパターン・コード化さ
れＲＯＭ７８に記憶された英単語データの比較により英
語の文字信号を作成し文字表示回路７３にその文字情報
を送る。ＲＡＭ７７は、文字作成に必要なデータを一時
記憶する為に寄与するものである。この文字表示回路で
作成されたディジタル化英語の文章は、Ｄ／Ａ変換回路
７４でアナログ文字に変換た後、液晶表示パネル３によ
り英語で表示される。

【００１８】この時、マイクロフォンより入力した日本
語の文章が、音声認識回路５２、ＣＰＵ５５、文字表示
回路７３、Ｄ／Ａ変換回路７４を介して液晶表示パネル
２にも供給され、日本語での文章が表示される。液晶表
示パネル２上の日本語の文章と、液晶表示パネル３上の
英語の文章とは、図２に示されるようにその表示方向が
逆であり、会話の対話者のそれぞれが向かい合って自己
に関係する文章を容易に確認できる。この確認により、
自己の喋った文章が正しく翻訳されたかを、自国語で、
さらに翻訳文で知ることができる。尚、液晶表示パネル
２上と液晶表示パネル３上の各言語の表示は、必要によ
り、反転表示キー３０に関連したスイッチ７５で切り換
えることができることは前述の如くである。

【００１９】ＣＰＵ５５の入力は、各キーよりキー入力
インターフエース回路６２を介しても行われる。例え
ば、従来のキーワード入力式により、必要な会話文章の
入力を行うこともでき、このときには、ファンクション
キー群７の中のキーワード入力キー１９、カーソルキー
６、意図一致確認キー９等の操作により実行するもので
ある。本回路中のＲＯＭ５４、５９、７１、７８の容量
が足りないときには、オプションのＲＯＭカード１１よ
り各種のデータを得ることが出来る。例えば、日本語、
英語の語彙、文法、文型等の追加や、更に各国言語の追
加等が容易にできる。

【００２０】ところで、上述した構成のみの翻訳装置で
は、スピーカ１２より出力された翻訳音声が再びマイク
ロフォン５に入力され、新たに入力されるべき音声信号
と、この翻訳された音声信号が混合され音声翻訳回路５
２の動作が正確に出来なくなる虞がある。

【００２１】そこで本発明の翻訳装置では、音声出力停
止回路２００を音声出力段等に付加するものである。本
実施例では、Ｄ／Ａ変換回路６１とスピーカー１２との
間にスイッチよりなる音声出力停止回路２００を設け、
この回路を取り込み開始キー２８が操作された時（後述
の工程１０３）に、ＣＰＵ５５よりライン９１を介して
停止パルスを受け音声合成信号の出力を停止させるよう
にする。

【００２２】次に図４を参照して本発明の翻訳装置の基
本的翻訳処理フローを説明する。電源スイッチキー８の
ＯＮ状態が工程１００で確認され、会話キー１６の選択
工程１０１、会話言語の選択工程１０２を経た後で、操
作者が文章取り込み開始キー２８を操作すると（工程１
０３）、マイクロフォン５より日本語の文章の取り込み
が音声認識回路５２で実行される（工程１０５）。

【００２３】ここで、文章取り込み開始キー２８が操作
されると、自動的に音声出力停止パルスが出力されて音
声出力停止回路９０がアクティブとなりスピーカ１２か
らの放音が阻止される（工程１０４）。マイクロフォン
５からの入力文章は、文章取り込み終了キー２９が操作
されるまで音声認識回路５２に送られると共に、次々に
認識された単語、文章が日本語で液晶表示パネル２に表
示される。尚、この取り込み終了工程１０６と同時に上
記音声出力停止９０はインアクティブとなる。

【００２４】操作者は、自己の会話文章の区切りで文章
取り込み終了キー２９を操作し（工程１０６）、液晶表
示パネル上の文章が自己の希望する文章と一致していれ
ば意図の一致を意味する意図一致確認キー９を操作す
る。この工程１０７の操作により、翻訳回路７０での翻
訳が開始される（工程１０８）。翻訳が終了すると（工
程１０９）、日本語文章と翻訳された英語の文章がそれ
ぞれ液晶表示パネル２、３に表示され、更に放音がなさ
れると同時に新たに文章取り込み開始キー２８の操作待
ちの状態となる（工程１０３）。

【００２５】前記翻訳回路７０の翻訳は、例えば、次の
ような翻訳アルゴリズムをとり翻訳する方法がある。音
声認識回路５２で認識され、単語キーワード、例えば、
「私」、「予約」、「東京で」、「済」という音声単語
から日本語の「私は東京で予約をしました」という文章
を生成させるとともに「Ｉｍａｄｅａｒｅｓ−ｅ
ｒｖａｔｉｏｎｉｎＴｏｋｙｏ」という英語の文章
を生成させ、この英文をスピーカ１２で放音させるとと
もに、液晶表示パネル３で表示することができる。

【００２６】尚、本発明ではマイク５からの音声入力の
取り込みに同期してスピーカ１２からの放音を停止した
が、対話者はその停止の間は、液晶表示パネル３等で翻
訳内容を確認できるので対話が中断する虞は少ない。
又、本装置では、音声信号の取り込み終了に同期し、上
記放音の停止が解除された後で、音声合成回路５８に蓄
えられた音声信号を即座に出力するようにしても良く、
それによっても対話者が放音停止により不都合を感じる
ことは少ない。この場合には、音声合成回路５８に合成
音声信号の一時記憶メモリ機能をもたせれば良い。

【００２７】変形例本発明の実施例では、液晶表示パネル２、３を２個所に
設けたが、これに限らず、１つのＬＣＤ表示パネルに上
述の機能を持たせても良い。このときには、１つの液晶
表示パネルを上下に分割して各々の表示を行えば良い。

【００２８】又、本発明の実施例では、音声阻止手段と
して、音声出力停止回路９０をスピーカ１２の直前に設
けたが、音声合成回路５８の合成出力を停止させても良
く、要はスピーカ１２からの出力を一時的に阻止する手
段を回路中のいずれかに設ければ良い。更に、本発明の
実施例では、翻訳に必要な主回路をディジタル回路とし
たが、アナログ回路に置き換えても良い。

【００２９】又、本発明の実施例では、音声出力停止回
路９０の動作期間は、文章取り込み開始キー２８の操作
開始より終了キー２９の操作終了までとしたが、これに
限らず、例えば、文章取り込み開始キー２８の操作より
一定の期間としても良い。

【００３０】

【発明の効果】以上説明したように、本発明の音声入力
型の翻訳装置では、日本語等の第一の言語を入力するマ
イクロフォンを含む音声入力手段と、前記音声入力手段
からの音声を音声認識して第一の音声情報とする音声認
識手段と、前記第一の音声情報を英語等の第二の言語の
音声情報に変換する翻訳手段と、前記第二の言語の音声
情報に基づいて第二の言語の音声を作成する音声合成手
段と、前記第二の言語の音声を音声出力するスピーカを
含む音声出力手段と、前記第二の言語の文字を表示する
液晶パネル等の表示手段と共に、前記スピーカからの音
声出力を所定の期間停止する音声出力停止手段とを設け
たので、煩わしい音声入力不可の警告の監視の必要がな
く、目的の翻訳したい複数の文章を連続的に音声入力す
ることができるとともに、誤動作の無い高い認識率を維
持することができ、又、高速での翻訳対話が可能となっ
た。

【図面の簡単な説明】

【図１】本発明の音声入力翻訳装置の外観斜視図。

【図２】図１を更に詳しく示した平面図。

【図３】本発明の音声入力翻訳装置の具体的な回路ブ
ロック図。

【図４】図３の回路ブロックを動作させるフローチャ
ート。

【符号の説明】

１音声入力翻訳装置２、３液晶表示パネル５マイクロフォン６カーソルキー７各種のファンクションキー群９、１５意図一致確認キー１１ＩＣカード１２スピーカ２８文章取り込み開始キー２９文章取り込み終了キー５２音声認識回路５５中央演算装置（ＣＰＵ）５８音声合成回路７０翻訳回路７３文字表示回路７６文字発生回路９０音声出力停止回路

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号庁内整理番号ＦＩ技術表示箇所Ｇ０６Ｆ 3/16 ３４０ 9172−5ＥＧ０６Ｆ 3/16 ３４０Ｑ 17/28 8420−5Ｌ 15/38 Ｖ 8420−5ＬＡ (72)発明者加賀美徹也東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者石井和夫東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者田中幸東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者加藤靖彦東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者角田弘史東京都品川区北品川６丁目７番35号ソニー株式会社内 (72)発明者浅野康治東京都品川区北品川６丁目７番35号ソニー株式会社内

Claims

【特許請求の範囲】

【請求項１】第一の言語を入力するマイクロフォンを
含む音声入力手段と、前記音声入力手段からの音声を音声認識して第一の音声
情報とする音声認識手段と、前記第一の音声情報を第二の言語の音声情報に変換する
翻訳手段と、前記第二の言語の音声情報に基づいて第二の言語の音声
を作成する音声合成手段と、前記第二の言語の音声を音声出力するスピーカを含む音
声出力手段と、前記第二の言語の文字を表示する表示手段と、前記スピーカからの音声出力を所定の期間停止する音声
出力停止手段と、を設けてなることを特徴とする音声入力翻訳装置。
【請求項２】前記音声出力停止手段は、前記マイクロ
フォンから入力される音声信号の前記音声認識手段への
取り込み操作に同期して動作し、前記取り込み期間中は
前記スピーカからの放音を停止するようにしたことを特
徴とする、請求項１に記載の音声入力翻訳装置。
【請求項３】前記音声出力停止手段は、前記マイクロ
フォンから入力される音声信号の前記音声認識手段への
取り込み操作に同期して動作し、前記取り込み期間中は
前記スピーカからの放音を停止するようにすると共に、
前記放音の停止期間に音声合成された音声信号を放音の
停止後に新に放音するようにしたことを特徴とする、請
求項１に記載の音声入力翻訳装置。
【請求項４】前記音声出力停止手段は、前記音声合成
回路と前記スピーカとの間に設けられたスイッチで構成
したことを特徴とする、請求項１に記載の音声入力翻訳
装置。