JP3822990B2 - 翻訳装置、記録媒体 - Google Patents
翻訳装置、記録媒体 Download PDFInfo
- Publication number
- JP3822990B2 JP3822990B2 JP00166999A JP166999A JP3822990B2 JP 3822990 B2 JP3822990 B2 JP 3822990B2 JP 00166999 A JP00166999 A JP 00166999A JP 166999 A JP166999 A JP 166999A JP 3822990 B2 JP3822990 B2 JP 3822990B2
- Authority
- JP
- Japan
- Prior art keywords
- example sentence
- sentence
- translation
- voice
- template
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000013519 translation Methods 0.000 title claims abstract description 110
- 230000014509 gene expression Effects 0.000 abstract description 4
- 230000014616 translation Effects 0.000 description 97
- 238000010586 diagram Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 8
- 235000016496 Panda oleosa Nutrition 0.000 description 3
- 240000000220 Panda oleosa Species 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 235000009508 confectionery Nutrition 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/42—Data-driven translation
- G06F40/47—Machine-assisted translation, e.g. using translation memory
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/10—Speech classification or search using distance or distortion measures between unknown speech and reference templates
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Machine Translation (AREA)
Description
【発明の属する技術分野】
本発明は、音声翻訳装置、及び記録媒体に関し、特に、海外旅行用携帯翻訳機などに好適な発話誘導型の音声翻訳装置、及びこれを実現するための記録媒体に関する。
【0002】
【従来の技術】
従来の翻訳装置には、大きく分けて二種類の翻訳装置がある。1種類目の翻訳装置は任意の入力文を翻訳する装置であり、2種類目の翻訳装置は、あらかじめ用意された対訳例文を場面やキーワードによって検索して翻訳する装置である。
【0003】
第1の任意の入力文を翻訳する翻訳装置として、テキストを対象としたものでは、すでに多くの機械翻訳システムが実用化されている。翻訳方式としては、辞書と文法規則に基づいて翻訳を行うルールベース翻訳が広く採用されている。しかし、文法規則でうまく扱えない文章表現(言語現象)が新たに現れた場合に規則の記述が難しいため、用例を利用した用例ベース翻訳の研究もされている。
【0004】
一方、音声を対象とした翻訳装置の場合は、まず音声認識が正しくなされないと正しい翻訳結果が得られないという問題がある。この問題を解決するため、例えば特開平08-328585では、入力された音声と用例データベース中のすべての用例との言語的類似度を計算することにより、複数の音声認識結果候補の中から正解を選ぶ方法が示されている。
【0005】
第2のあらかじめ用意された対訳例文を検索する方法の翻訳装置として、例えば、特開昭56-88564に、カテゴリーを指定すると例文が表示され、例文の中から文を選択すると選択した例文の翻訳文が音声出力される携帯型の翻訳装置が記載されている。
【0006】
【発明が解決しようとする課題】
海外旅行中は、依頼や質問などの比較的決まりきった内容の、短い会話のやりとりを他人とする場面が多い。しかし、旅行という非日常的な場面であるために、話者の発話意図に対して、具体的に話す内容、表現、あるいは単語が母国語でもすぐに思いつかない場合が少なくない。このため、第1の任意の入力文を翻訳する翻訳装置では、入力する文章をすぐに思いつかないため、旅行中の外国語会話を支援するという目的を充分に達成できない場合がある。例えば、飛行機から降りて機内預かりの手荷物を受け取る場所を尋ねたり、手荷物引き換え証を係員に提示したりする際に、「アメリカン航空121便の手荷物受取所はどこですか。」「私の荷物が出てきません。これが手荷物引換証です。」といった日本文が完全な形ですぐに頭に浮かぶとは限らない。母国語である日本語の通じる相手と直接会話をする場合は、相手の反応を見ながら「乗るときに預けた荷物は...えーと、どこで...便名?アメリカンの121便です。」「荷物が出てこないんですけど...手荷物引換証?ああ、乗るときにもらった控えですか?えーと、これです。」などというやりとりで通じるかもしれないが、機械翻訳で外国語に訳す場合は、「アメリカン航空121便の手荷物受取所はどこですか。」「私の荷物が出てきません。これが手荷物引換証です。」のような完全な文が入力されないとうまく訳すことができない。また、母国語で話す場合と違って、「便名はなんですか」「手荷物引換証を見せてください」などと相手に聞き返されても理解できないので、はじめから十分な情報を含む文を相手に伝える必要がある。
【0007】
一方、第2のあらかじめ用意された対訳例文を検索する翻訳装置は、このような任意文入力の問題点を回避することができる。また、処理が単純であるため、携帯型の翻訳機として実現しやすい。しかし、場面別に分類された例文をメニュー選択によって検索する従来の方法では、例文数が多くなると、何度も選択ボタンを押して場面の絞り込みを繰り返すか、1つの場面に対して数多くある例文をスクロール表示させる必要があるため、使いたい例文を見つけるまでに時間がかかるという問題がある。また、1つの例文について単語の置き換え候補をスクロール等の手段で探す従来の方法では単語の置き換え候補数を多くした場合に操作性が良くないという問題がある。例えば、前述の手荷物受取所の場所を尋ねる例では、「日本航空753便の手荷物受取所はどこですか。」という例文を見つけた後、スクロールしたりボタンを押したりして便名を「アメリカン航空121便」に置き換えるのは面倒である。
【0008】
本発明の目的は、ユーザの発話意図に適した例文テンプレートを表示してユーザの発話を誘導することにより、例文検索型の翻訳装置の利点と任意文入力型の翻訳装置の利点を兼ね備えた翻訳装置を実現することにある。
【0009】
【課題を解決するための手段】
上記課題を解決するため、翻訳装置において、複数の例文テンプレートを記憶する例文ファイルと、入力された音声を認識する音声認識部と、上記音声に類似した例文テンプレート中の語句を上記音声に基づいて置換して翻訳する手段と、翻訳文を音声出力する音声出力部または、翻訳文を表示するディスプレイを有するものとする。また、コンピュータ読みとり可能な記録媒体であって、第1の音声を音声認識手段によって認識するステップと、上記第1の音声と関連づけられた例文テンプレートを検索してディスプレイに表示するステップと、第2の音声を上記音声認識手段によって認識するステップと、上記検索された例文テンプレート中の語句を上記第2の音声に基づいて置換して翻訳するステップと、翻訳結果を痔巣プレイに表示、又は、音声出力するステップとが記録されたものとする。
【0010】
例えば、翻訳装置では、あらかじめ用意された例文を検索する翻訳装置であって、例文ファイルに記憶する例文を、語句の置き換えが可能な部分(以下スロットという)を含む例文テンプレートとして記述しておく。 例文テンプレートにはスロットに関する情報として、そのスロットに現われうる語句の分類コード(例えば場所、日付等の情報)と代表例を記述する。各例文テンプレートにはキーワード(例えば、予約、飛行機、チケット等の情報)を付与する。キーワードには具体的な単語だけでなく、分類コードも記述できるものとする。
【0011】
本発明の翻訳装置の単語辞書には、音声入力されたキーワードで例文テンプレートを検索するための情報として、単語の発音情報と分類コードを記述する。また、テンプレート翻訳を行なうための情報として、見出しの文法情報、訳語、および訳語の文法情報を記述する。
例文テンプレートを検索するための手段としては、音声で入力されたキーワードを認識する単語認識手段と、認識した単語およびその分類コードがキーワード情報に記述されている例文テンプレートを検索する手段と、複数の例文テンプレートを画面に表示する手段とを設ける。
【0012】
テンプレート翻訳を行なうための手段としては、音声で入力された文に対して、複数の例文テンプレートの中から類似度が高い例文テンプレートを選択する文音声認識手段と、単語辞書の音韻情報を参照してスロットに挿入された語句を認識する単語音声認識手段と、単語辞書および翻訳規則を参照してスロットに挿入された語句の訳語および語形を決定する手段と、例文テンプレートの訳文情報とスロットに挿入された語句の訳を組み合わせて訳文を生成する手段とを設ける。
【0013】
ユーザが単語を音声入力すると、単語辞書の音韻情報を参照することによって入力された単語および分類コードを認識する。そしてこれらがキーワード情報に記述されている例文テンプレートを検索し、画面に表示する。例文テンプレートには例文に含まれるスロットに関する情報として、そのスロットに現われうる語句の代表例が記述されている。従って、例文テンプレートを画面に表示する際には、スロットに代表例が挿入された状態で表示する。
【0014】
画面に1つ以上の例文テンプレートが表示されている状態で、例文テンプレートのスロットにユーザの所望の語句を挿入した文を音声入力する。すると、画面に表示されている例文テンプレートのうち、類似度が高い例文テンプレートに基づいて音声入力文の翻訳を実行し、訳文を表示する。例えば、ユーザが「電話」という単語を音声で入力すると、「電話」という単語がキーワード情報に記述されている例文テンプレートを検索する。画面には「[電話]はどこですか」「[市内電話]のかけ方を教えてください」「[日本]に[コレクトコール]をかけたい」などの例文テンプレートが表示される。下線部はスロットを表す。ユーザは画面をスクロールしながら使えそうな例文を探す。使えそうな例文、例えば「[日本]に[コレクトコール]をかけたい」を見つけたら、「カナダに国際電話をかけたい」という文を音声で入力する。すると、翻訳機は、「[日本]に[コレクトコール]をかけたい」という例文テンプレートを使ったことを認識するとともに、「日本」「コレクトコール」が「カナダ」「国際電話」に置換されたことを認識し、テンプレート翻訳を実行する。
【0015】
【発明の実施の形態】
本発明の実施例を図1から図14までを用いて説明する。本実施例は、日本語を母国語とする利用者が英語圏を旅行するための携帯型の音声翻訳装置である。本音声翻訳装置は、ユーザがキーワードを音声入力すると例文テンプレートを検索して表示する。ユーザが例文テンプレートの置き換え可能な単語を別の単語に置き換えてしゃべると、どの例文テンプレートを使って何という単語に置き換えたかを認識し、入力文に対する訳文を表示・発声する。
【0016】
次に、本実施例の翻訳機の外観を説明する。図1は本発明の一実施例である音声翻訳装置の外観および初期画面を示す図である。音声翻訳装置101は、表示画面102、電源スイッチ103、リセットボタン104、訳文を音声出力するためのスピーカー105、例文検索のキーワードを音声入力するためのマイク106、例文検索・翻訳・訳文発声等を指示するための実行ボタン107、前の画面に戻るための「戻る」ボタン108、画面上を前後左右に移動するためのスクロールボタン109〜112を備えている。
【0017】
次に、本実施例の翻訳記のハードウエア構成を説明する。図2は、本音声翻訳装置のハードウエア構成を示す。本音声翻訳装置は、装置の制御と音声認識、翻訳、音声合成処理を行うためのCPU201、音声入力装置202、音声出力装置203、単語辞書204、例文ファイル205、メモリ206によって構成されている。メモリ206には、制御プログラム261、単語音声認識プログラム262、文音声認識プログラム263、テンプレート翻訳プログラム264、音声出力プログラム265、画面表示プログラム266が記憶されている。
【0018】
次に、例文ファイルの内容を説明する。
【0019】
図6に例文ファイルの内容を示す。例文ファイルには、各例文テンプレートについて、例文番号601、基本例文番号602、詳細例文番号603、キーワード604、原文テンプレート605、原文テンプレートの発音を記述した発音情報606、訳文テンプレート607、訳文テンプレートの発音を記述した訳文発音情報608、スロット情報609が記述されている。スロット情報609には、スロット数6091が記述され、各スロットについて、スロットに入る語句の代表例6092、代表例の訳6093、代表例の訳の発音情報6094、スロットにどのような語句が入るかを記述した意味情報6095、訳文におけるスロット部分の文法特徴(冠詞、単複等)を記述した文法情報6096が記述されている。
【0020】
例文には「予約したい」のような基本例文と、「一番早く乗れる便を探してください。」のような詳細例文がある。基本例文に対しては、それに対応する詳細例文の例文番号が詳細例文番号603に記述されている。詳細例文に対しては、それに対応する基本例文の例文番号が基本例文番号602に記述されている。
【0021】
キーワードで例文を検索すると、基本例文が上の方に表示される。ユーザが「予約したい」を選択して詳細例文の表示を指示すると、「一番早く乗れる便を探してください。」などの詳細例文が表示される。原文テンプレート605および訳文テンプレート607において、置き換え可能な語句はスロットになっている。
【0022】
画面に表示する際には、原文テンプレートのスロットに代表例6092の単語を埋め込んで表示する。ユーザが単語の置き換えをせずに訳文の表示や発声を指示した場合は、訳文に代表例の訳6093を埋め込んで表示し、訳文発音情報608に代表例の訳の発音情報6094を埋め込んで発声する。
【0023】
スロットの意味情報6095の記述は、「往復切符;片道切符;切符」のように単語を列挙してもよいし、「<場所>」のように分類コードを使って記述してもよい。どのような単語にも置き換え可能な場合は条件を記述しない。
【0024】
キーワード604に「<場所>」のような分類コードが記述されている例文は、その分類コードを持つすべての単語から検索される。例えば、ユーザが「郵便局」、「バス停」、または「銀行」など、「<場所>」という分類コードを持つ単語をキーワードとして入力すると、例文1356「一番近い<S1>はどこですか」が検索・表示される。
【0025】
次に、単語辞書の内容について説明する。図7に単語辞書の内容を示す。単語辞書には各単語項目について、単語番号701、見出し702、読み703、発音情報704、文法情報705、分類コード706、訳語707、訳語の発音情報708、訳語の文法情報709、例文番号710が記述されている。「<場所>」などの分類コードを見出しとするレコードの例文番号710は、その分類コードをキーワードとする例文の例文番号である。
【0026】
次に、本実施例の音声翻訳装置の動作について説明する。図3は、本音声翻訳装置の動作の概要を示すフローチャートである。電源ボタン103を押すと(301)、メモリ206のプログラムが起動され、表示画面101に初期画面が表示される(302)。初期画面が表示されている状態でマイク106を通して音声が入力されると、キーワード音声認識を行う(303)。
【0027】
次にキーワード音声認識について図4を参照しながら説明する。まず、単語が音声入力されると(402)、単語辞書204を参照し、隠れマルコフモデル(HMM)などの音声認識アルゴリズムにより、単語音声認識を行い(403)、単語候補を画面に表示する(404)。
【0028】
図8を用いて単語候補表示画面の例を説明する。単語候補表示画面では、一行目に第1候補のかな表記、二行目以降に第1候補から第10候補までの単語候補を表示する。初めは第1候補の単語が反転表示されているが、前後左右スクロールキーを使うことにより、反転表示される単語が前後左右に移動する。これにより、ユーザは意図した単語を選択することができる。図8で画面に表示されていない第4候補以下は、下スクロールキーで画面をスクロールさせることによって見ることができる。単語候補は、同音異義語がある場合は同音異義語を1行に表示し、同音異義語がない場合は対訳を表示する。単語候補の先頭に付いている「*」は例文検索のキーワードであることを示す。
ユーザが意図した単語を選択して実行ボタンを押すと(405)、その単語を例文検索のキーワードとして確定し(408)、キーワード認識処理を終了する(409)。ユーザが意図する単語が単語候補にない場合は、かな表記の一行目を選んで実行ボタンを押すことにより、かなレベルで入力単語を修正し(406)、再度単語辞書検索を行うことができる(407)。また、「もどる」ボタンを押すことにより、キーワード音声入力受付の状態に戻ることもできる。
【0029】
なお、単語候補表示画面は、キーワード音声認識結果をユーザが確認するためのものだが、単語候補と共に訳語が表示されるので、対訳辞書として使うこともできる。また、訳語を選択して実行ボタンを押すと発音を発声するようにすることもできる。同音異義語の場合は単語候補表示画面では訳語が表示されないが、同音異義語の中から単語を選択して実行ボタンを押すと、次の画面で訳語と例文が表示されるようにすることもできる。
【0030】
次に、例文検索について説明する。入力単語が確定したら、単語辞書204において、入力単語の例文番号710に記載されている番号の例文を例文ファイル205より取り出し(304)、画面に表示する(305)。単語辞書において分類コード706が記述されている単語については、その分類コードをキーワードとする例文も検索する。例えば、入力単語「銀行」に対して、「銀行」をキーワードとする例文に加えて、<場所><機関>という分類コードをキーワードとする例文も検索する。<場所>という分類コードをキーワードとする例文の番号は、「<場所>」を見出しとする単語辞書レコードの例文番号710に記載されている。
【0031】
図9に「予約」をキーワードとして例文検索した場合の例文表示画面の例を示す。図9において、901は検索された例文である。例文表示画面には、1行目に単語の辞書見出しと訳語が表示され、2行目以降に検索された例文の先頭の3文が表示される。4行目以降の例文は、スクロールキーで画面をスクロールさせることによって見ることができる。文頭に★がついている例文は基本例文であることを示す。例文表示画面では、原文テンプレートのスロットに代表例607を埋め込んだものを表示し、アンダーラインで置き換え可能な語句であることを示す。図10において、「ダラス」「マイアミ」「14日」は置き換え可能な語句である。
【0032】
次に、例文絞り込みについて説明する。検索例文のうち、画面に入りきらない部分は上下左右のスクロールキーを使って見ることができるが、例文数が多い場合は、さらにキーワードを追加して例文を絞り込むことができるようにする。これによって、例文が探しやすくなる。ユーザが例文絞り込みをしたい場合は、スクロールボタンで画面の1行目に表示されているキーワードを選択して(反転表示させて)実行ボタンを押す。次に、追加キーワードを音声入力すると、前述のキーワード音声認識を実行し(307)、例文の絞り込みを行い(308)、絞り込み例文を表示する(309)。図9は「予約」をキーワードとする例文検索結果であり、図10は「フライト」で例文を絞り込んだ結果である。絞り込み結果を見てユーザが「もどる」ボタンを押すと絞り込み前の例文を表示する(311)。
【0033】
なお、置き換え可能な語句のない例文を選択する場合は、スクロールキーによるカーソル移動で例文を選択してもよい(312〜314)。例文を選択して実行キーを押すと、翻訳が実行される(322)。
【0034】
次に、詳細例文表示について説明する。スクロールキーで例文を選択する際に、例文そのものではなく基本例文の文頭についている★を選択して実行キーを押すと、関連する詳細例文が表示される(314)。例えば、図9の例文表示画面において、3行目の「予約したい」を選択して実行キーを押すと翻訳結果が表示され、「予約したい」の左側についている★を選択して実行キーを押すと、図12に示すような「予約したい」の詳細例文が表示される。
【0035】
次に、文音声認識について説明する。例文表示画面を見ながらユーザが文を発声すると(315)、文音声認識を実行する(316)。文音声認識は、例えば「確率モデルによる音声認識」(電子情報通信学会, 1988)pp46-50に記載されているHMMによるオートマトン制御連続単語音声認識アルゴリズムによって行う。
【0036】
図5に、文音声認識処理のフローを示す。まず、画面に表示されている例文テンプレートに対して、図14のような有限状態オートマトンを作成する。図14は、「一番近い<s1>はどこですか」という例文テンプレートに対して作られる有限状態オートマトンである。図14において、1401と1402は「イチバンチカイ」「ワドコデスカ」という発音情報から作成されるHMM(隠れマルコフモデル)である。原文テンプレートの部分のモデルは、例文ファイルに記載されている発音情報606に基づいて作成する(502)。
【0037】
スロット部分のモデルは、スロットに入りうる単語の発音情報に基づいて作成する。これにはまず、例文ファイルのスロット情報609の意味情報6095を参照することにより(504)、単語辞書登録語のうち、どの単語がスロットに入り得るかを認識する。スロットに入りうる単語は、スロットの意味情報6095において単語が列挙されている場合は列挙されている単語(505)、分類コードが指定されている場合は指定された分類コードを持つ単語(506)、何も指定されていない場合は単語辞書登録語(507)、とする。それぞれの単語のモデルは、単語辞書に記載されている単語の発音情報704に基づいて作成する(508)。
【0038】
画面に表示されている例文テンプレートについて有限状態オートマトンを作成したら(509)、 HMMによるオートマトン制御連続単語音声認識アルゴリズムによって入力文の音声認識を行い、各スロットについて、上位10語をスロット候補語として記憶する(510)。
【0039】
なお、例文テンプレートを見ながら発話する際に、スロットの前後やスロットを含む文節の直後にポーズが入る場合があるので、各例文テンプレートに対して、文全体に対する有限状態オートマトンだけでなく、ポーズが入りそうな場所で区切ったフレーズの有限状態オートマトンも作成すると、より高い認識精度を得ることができる。例えば、上記の例では、図14に示した「イチバンチカイバステイワドコデスカ」などの他に、「イチバンチカイ」「バステイ」「ワドコデスカ」「バステイワ」「ドコデスカ」などの有限状態オートマトンも作成し、そのフレーズを含む例文テンプレートに対応付けておく。さらに、ポーズを積極的に取り入れて、「イチバンチカイ」でポーズが入った場合に、「一番近い<s1>はどこですか」の「一番近い」の部分と一致することを表示し、ユーザが確認後、続きを言うように誘導することも考えられる。
【0040】
本実施例では単語辞書登録語の範囲でスロット挿入語を認識しているが、すべての単語をあらかじめ辞書に登録しておくことはできない。特に固有名詞や土地の名物などの名詞は、旅行会話で重要であるにもかかわらず、単語辞書でカバーしきれない。しかしながら、ユーザがそのような語を使いたい場合は、原語でその単語を知っているケースが多く、単語だけなら何とかそれに近い発音ができる場合が多い。そこで、特定のボタンを押しながらスロットの部分の語句を音声入力すると、当該スロット部分についてはユーザが入力したそのままの音を訳文に埋め込んで出力することが考えられる。前述のように、フレーズに対応する有限状態オートマトンを作成してそのフレーズを含む例文テンプレートに対応付けておく方法を採用すれば、特定ボタンを押してしゃべった部分の前後のフレーズから例文テンプレートを特定することができる。これにより、例えば、「[このアトラクション]は何分待ちですか」という例文テンプレートを使って「Back to the futureは何分待ちですか」と発話することが可能となる。また、「私の名前は<s1>です」における<s1>のような特定のスロットに関しては、ユーザが入力したそのままの音を訳文のスロット部分に埋め込むようにすることもできる。
【0041】
本実施例では、音声入力文と比較する対象として、画面に表示されている例文テンプレートに限定しているが、キーワードで検索された例文テンプレート全体としてもよい。また、ユーザがあらかじめ選んだ例文テンプレートや最近使った例文テンプレートを「ユーザ例文ファイル」に記憶しておき、これを比較対象としてもよい。
【0042】
フレーズに対応する有限状態オートマトンを作成して、そのフレーズを含む例文テンプレートに対応付けておく方法を採用した場合には、例文テンプレート表示の際に、音声入力すべき範囲を波線等でマークし、文全体をしゃべらなくてよいことを知らせるようにすることも考えられる。この方法によれば使い勝手がよくなる。例えば、「一番早く乗れる便を探してください」という文であれば、「一番早く乗れる便を探して」あるいは「一番早く乗れる便」など、短く言うようにして、音声入力の手間が省ける。
【0043】
次に、文認識結果表示・訂正について説明する。文音声認識結果は、認識した例文テンプレートにカーソル移動し、スロットの単語を代表例から入力単語に置き換えることによって示す(317)。例えば、図10の例文表示画面が表示されている状態でユーザが「シカゴからシアトルまでの17日の片道切符が欲しい」と音声入力し、正しく文音声認識がされると、図11の画面が表示される。文認識結果を見て、ユーザは「もどる」ボタンを押して文入力をやり直すか(318)、文認識結果を必要に応じて訂正する(319)。例文テンプレートの選択が正しくない場合は、スクロールキーで別の文を選択すると、その例文テンプレートを使ってスロット部の単語認識をやり直す。スロット部の単語認識が正しくない場合は、スクロールキーでスロットを選択して実行ボタンを押すと文認識時に記憶しておいたスロット候補語が表示される。スロット候補語の中に正しいものがあれば、スクロールキーで選択して実行ボタンを押すことによって選択する。
【0044】
次に、翻訳について説明する。音声入力文と一致する文を確定したら実行ボタンを押すことによって翻訳を指示する(320〜321)。基本例文を音声入力で選択し、文頭の★を選択して実行ボタンを押すことで詳細例文を見ることも可能である(321)。テンプレート翻訳は、例文テンプレートの訳文にスロット部の語句の訳を埋め込むことによって行う(322)。例文テンプレートには訳文におけるスロットの文法情報6096が記述されている。これと単語辞書204の訳語の文法情報709を参照することにより、スロット部分の訳語の冠詞や単複などを決定する。例えば、「不定冠詞、単数形」と指定されたスロットに「語頭母音」という文法情報が記述された単語モappleモを埋め込む場合は不定冠詞モanモを付け、「無冠詞、複数形」と指定されたスロットにモcandyモという単語を埋め込む場合は複数形モcandiesモを埋め込む。
【0045】
翻訳結果表示ステップ(323)では、図13に示す翻訳結果表示画面を表示する。ユーザの指示(324)が「もどる」ボタンであれば翻訳実行前に表示した例文を表示し(325)、訳文を選択して実行ボタンであれば訳文を発声し(326)、原文を選択して実行ボタンであれば次の発話用の例文を表示する(327)。次の発話用の例文として表示する例文は、先に翻訳した文が基本例文である場合はその詳細例文であり、先に翻訳した文が詳細例文である場合は翻訳実行前に表示した例文である。これは、同じキーワードで検索された詳細例文のセットは関連する例文であり、これらの例文の中から複数の文を続けて使う可能性があると考えられるからである。代案としては、キーワードの中でも「ホテル」「フロント」「買い物」など、場面に関するものを「場面情報」としてキーワードとは別の情報として各例文テンプレートに付与しておき、場面情報が共通の例文だけを次の発話用の例文として表示することが考えられる。さらに、新たにキーワード検索を行った場合にも場面情報が直前に使った例文と一致するものを優先的に上の方に表示したり、リセットするまで同じ場面が続くことにして場面情報で例文を絞って表示することが考えられる。
【0046】
本実施例では、対訳例文テンプレートを利用してテンプレート翻訳を行っているが、例文テンプレートの真の目的は、ユーザの発話を誘導することにある。したがって、翻訳処理については、辞書と文法規則による機械翻訳で行うことも考えられる。その場合は、例文テンプレートは必ずしも対訳である必要はなく、入力言語の例文テンプレートだけでよい。
【0047】
以上、携帯型の音声翻訳装置としての実施例を述べたが、本発明は、上述のような翻訳装置を実現するための図3,図4,及び図5に記載されたフローが記録された記録媒体であってもかまわない。このような記録媒体としては、音声入力された語句を音声認識手段によって認識するステップと、この語句と関連づけられた例文テンプレートを例文ファイル中から検索するステップと、検索された例文ファイルをディスプレイに表示するステップと、表示された例文テンプレートに基づいて、ユーザが発話した文章を認識するステップと、認識した文章と検索された例文テンプレートを比較して、もっとも似ているものを認識するステップと、似ている例文テンプレート中の語句のうち置換可能な語句をユーザが発話した文章に基づいて置換して翻訳するステップと、翻訳結果をディスプレイに表示又は、音声出力するステップとが記録されたコンピュータ読みとり可能な記録媒体が考えられる。
【0048】
また、他の形の翻訳装置では別のユーザインタフェースが考えうる。例えば、病院・役所・ホテルなどの窓口に備える音声翻訳装置では、画面をタッチパネルとし、スロット部分に指を触れて置き換え単語のみを発声するといったことが考えられる。また、本実施例では、表示画面が小さいことと片手で持って使うことを考慮して、キーワード音声入力で例文テンプレート検索を行うようにしたが、場面や発話意図(質問、依頼、説明等)で例文テンプレートを分類し、メニューの表示・選択で絞っていくことも可能である。
【0049】
本実施例では、日本語から英語への翻訳を行う音声翻訳装置について説明したが、他の言語対にも応用可能である。また、本実施例では、対訳例文テンプレートにおいて、原文テンプレートに対して認識用の情報、訳文テンプレートに対して生成用の情報を記述するようにしているが、両方の言語のテンプレートに対して認識用の情報と生成用の情報を記述するようにすれば、双方向に翻訳を実行するようにすることも可能である。双方向の翻訳を行う場合は、本実施例で基本例文と詳細例文を対応付けたのと同様の方法で、質問文の例文テンプレートに回答の例文テンプレートを対応付けることが有効である。
【0050】
【発明の効果】
本発明によれば、音声入力されたキーワードからユーザの発話意図に適した例文テンプレートをすばやく検索し、ユーザの発話を誘導することができる。ユーザは例文テンプレートを見ながらしゃべるので、言いたいことを完全な文の形で楽に言うことができるし、例文テンプレートのスロットには思った通りの任意の語句を入れてしゃべることができるので、単語置換の煩わしさがない。これにより、例文検索型の翻訳装置の利点と任意文入力型の翻訳装置の利点を兼ね備えた翻訳装置を実現することができる。
【図面の簡単な説明】
【図1】本発明の音声翻訳装置の実施例の外観および初期画面を示す図である。
【図2】本発明の音声翻訳装置の実施例の構成を示すブロック図である。
【図3】本発明の音声翻訳装置の実施例の動作を示すフローチャートである。
【図4】単語音声認識の手順を示すフローチャートである。
【図5】入力文音声認識の手順を示すフローチャートである。
【図6】例文ファイルの内容を示す図である。
【図7】単語辞書の内容を示す図である。
【図8】単語候補表示ステップにおける画面表示例を示す図である。
【図9】例文表示ステップにおける画面表示例を示す図である。
【図10】絞り込み例文表示ステップにおける画面表示例を示す図である。
【図11】文認識結果表示ステップにおける画面表示例を示す図である。
【図12】詳細例文表示ステップにおけるの画面表示例を示す図である。
【図13】翻訳結果表示ステップにおけるの画面表示例を示す図である。
【図14】例文テンプレートに対する有限状態オートマトンの例を示す図である。
【符号の説明】
201:CPU
202:音声入力装置
203:音声出力装置
204:単語辞書
205:例文ファイル
206:メモリ
261:制御プログラム
262:単語音声認識プログラム
263:文音声認識プログラム
264:テンプレート翻訳プログラム
265:音声出力プログラム
266:画面表示プログラム。
Claims (5)
- CPUと、指示入力手段と、入力音声を認識する音声認識手段と、複数の例文テンプレートをその発音情報と対応付けて記憶する記憶手段とを有し、
上記CPUは、
上記記憶されている複数の例文テンプレートのうち、上記指示入力手段からの入力内容と関連づけられた例文テンプレートを検索して表示手段に表示させ、
上記音声認識手段は上記表示手段に例文テンプレートが表示されている状態で入力された音声を上記表示された例文テンプレートのみの発音情報と比較して上記入力された音声に近似した上記例文テンプレートを認識結果とし、
上記認識結果を翻訳し、該翻訳結果を表示手段に表示させることを特徴とする翻訳装置。 - 請求項1に記載の翻訳装置において、上記例文テンプレートの表示は、置き換え可能な語句を網掛け表示、または反転表示させることを特徴とする翻訳装置。
- 請求項1又は2に記載の翻訳装置において、上記指示入力手段は、タッチパネルまたは、翻訳装置主面に取り付けられたボタンであることを特徴とする翻訳装置。
- CPUと、音声認識手段と、複数の例文テンプレートをその発音情報と対応付けて記録する記録手段と、表示手段とを有する翻訳装置であって、
上記CPUは、
上記記憶されている複数の例文テンプレートのうち、上記音声認識手段によって認識された第1の入力音声と関連づけられて記録されている上記例文テンプレートを上記表示手段に表示し、
上記音声認識手段は、第2の入力音声を上記表示された例文テンプレートのみの発音情報と比較して該例文テンプレートのうち類似度の高い例文テンプレートとして認識し、上記認識した例文テンプレート中の語句を上記第2の音声に基づいて置換して翻訳し、
上記表示手段には、上記翻訳結果を表示させることを特徴とする翻訳装置。 - 第1の音声を音声認識手段によって認識するステップと、記録手段にその発音情報と対応付けて記録される例文テンプレートから上記第1の音声と関連づけられる例文テンプレートを検索してディスプレイに表示するステップと、上記表示された例文テンプレートのみの発音情報と入力された第2の音声を比較するステップと、該比較の結果に基づいて該例文テンプレートから該第2の音声に近似する例文テンプレートを該第2の音声として認識するステップと、上記第2の音声と認識された例文テンプレート中の語句を上記第2の音声に基づいて置換して翻訳するステップと、該翻訳結果をディスプレイに表示するステップとを有するプログラムが記録されたコンピュータ読みとり可能な記録媒体。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP00166999A JP3822990B2 (ja) | 1999-01-07 | 1999-01-07 | 翻訳装置、記録媒体 |
US09/478,336 US6917920B1 (en) | 1999-01-07 | 2000-01-06 | Speech translation device and computer readable medium |
US11/042,147 US7047195B2 (en) | 1999-01-07 | 2005-01-26 | Speech translation device and computer readable medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP00166999A JP3822990B2 (ja) | 1999-01-07 | 1999-01-07 | 翻訳装置、記録媒体 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001167615A Division JP3870722B2 (ja) | 2001-06-04 | 2001-06-04 | 翻訳装置、記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000200275A JP2000200275A (ja) | 2000-07-18 |
JP3822990B2 true JP3822990B2 (ja) | 2006-09-20 |
Family
ID=11507938
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP00166999A Expired - Lifetime JP3822990B2 (ja) | 1999-01-07 | 1999-01-07 | 翻訳装置、記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (2) | US6917920B1 (ja) |
JP (1) | JP3822990B2 (ja) |
Families Citing this family (91)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3669869B2 (ja) * | 1999-06-28 | 2005-07-13 | 株式会社サン・フレア | 最適テンプレートパターンを用いた評価方法、評価装置および記録媒体 |
CN1174332C (zh) | 2000-03-10 | 2004-11-03 | 松下电器产业株式会社 | 转换表达方式的方法和装置 |
JP4135307B2 (ja) * | 2000-10-17 | 2008-08-20 | 株式会社日立製作所 | 音声通訳サービス方法および音声通訳サーバ |
JP2002132287A (ja) * | 2000-10-20 | 2002-05-09 | Canon Inc | 音声収録方法および音声収録装置および記憶媒体 |
US7050979B2 (en) | 2001-01-24 | 2006-05-23 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for converting a spoken language to a second language |
JP4495886B2 (ja) * | 2001-08-09 | 2010-07-07 | 株式会社日立製作所 | 音声入力認識文例集の管理方法 |
JP3879929B2 (ja) * | 2001-10-05 | 2007-02-14 | 富士通株式会社 | 翻訳システム |
JP2003178067A (ja) * | 2001-12-10 | 2003-06-27 | Mitsubishi Electric Corp | 携帯端末型画像処理システム、携帯端末およびサーバ |
JP3974419B2 (ja) * | 2002-02-18 | 2007-09-12 | 株式会社日立製作所 | 音声入力を用いた情報取得方法及び情報取得システム |
US7398209B2 (en) | 2002-06-03 | 2008-07-08 | Voicebox Technologies, Inc. | Systems and methods for responding to natural language speech utterance |
JP3814566B2 (ja) * | 2002-06-20 | 2006-08-30 | キヤノン株式会社 | 情報処理装置、情報処理方法、制御プログラム |
US7693720B2 (en) | 2002-07-15 | 2010-04-06 | Voicebox Technologies, Inc. | Mobile systems and methods for responding to natural language speech utterance |
US7360151B1 (en) * | 2003-05-27 | 2008-04-15 | Walt Froloff | System and method for creating custom specific text and emotive content message response templates for textual communications |
JP2005148724A (ja) * | 2003-10-21 | 2005-06-09 | Zenrin Datacom Co Ltd | 音声認識を用いた情報入力を伴う情報処理装置 |
CA2549769A1 (en) * | 2003-12-15 | 2005-06-30 | Laboratory For Language Technology Incorporated | System, method, and program for identifying the corresponding translation |
JP3962763B2 (ja) * | 2004-04-12 | 2007-08-22 | 松下電器産業株式会社 | 対話支援装置 |
JP4520262B2 (ja) * | 2004-09-15 | 2010-08-04 | 株式会社リコー | 画像形成装置、画像形成方法、その方法をコンピュータに実行させるプログラム、画像処理装置、および画像処理システム |
WO2006040971A1 (ja) * | 2004-10-08 | 2006-04-20 | Matsushita Electric Industrial Co., Ltd. | 対話支援装置 |
CN1842788B (zh) * | 2004-10-08 | 2012-04-04 | 松下电器产业株式会社 | 对话支援装置、系统及方法 |
JP2006197041A (ja) * | 2005-01-12 | 2006-07-27 | Nec Corp | PoCシステム、PoC携帯端末及びそれらに用いるポインタ表示方法並びにそのプログラム |
JP4263181B2 (ja) | 2005-03-28 | 2009-05-13 | 株式会社東芝 | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
JP4050755B2 (ja) * | 2005-03-30 | 2008-02-20 | 株式会社東芝 | コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム |
KR20060110787A (ko) * | 2005-04-20 | 2006-10-25 | 가부시키가이샤 소니 컴퓨터 엔터테인먼트 | 회화 지원 장치 |
JP3984642B2 (ja) * | 2005-07-06 | 2007-10-03 | 松下電器産業株式会社 | 対話支援装置 |
US7640160B2 (en) | 2005-08-05 | 2009-12-29 | Voicebox Technologies, Inc. | Systems and methods for responding to natural language speech utterance |
JP4756499B2 (ja) * | 2005-08-19 | 2011-08-24 | 株式会社国際電気通信基礎技術研究所 | 音声認識結果の検査装置及びコンピュータプログラム |
US7949529B2 (en) | 2005-08-29 | 2011-05-24 | Voicebox Technologies, Inc. | Mobile systems and methods of supporting natural language human-machine interactions |
JP4559946B2 (ja) | 2005-09-29 | 2010-10-13 | 株式会社東芝 | 入力装置、入力方法および入力プログラム |
KR100707970B1 (ko) * | 2006-03-10 | 2007-04-16 | (주)인피니티 텔레콤 | 이동통신단말기를 이용한 통역 서비스 방법 |
US7752031B2 (en) * | 2006-03-23 | 2010-07-06 | International Business Machines Corporation | Cadence management of translated multi-speaker conversations using pause marker relationship models |
US20070225973A1 (en) * | 2006-03-23 | 2007-09-27 | Childress Rhonda L | Collective Audio Chunk Processing for Streaming Translated Multi-Speaker Conversations |
JP2007275335A (ja) * | 2006-04-07 | 2007-10-25 | Ge Medical Systems Global Technology Co Llc | 人名表記方法および電子機器 |
US20070282594A1 (en) * | 2006-06-02 | 2007-12-06 | Microsoft Corporation | Machine translation in natural language application development |
JP4393494B2 (ja) * | 2006-09-22 | 2010-01-06 | 株式会社東芝 | 機械翻訳装置、機械翻訳方法および機械翻訳プログラム |
JP4481972B2 (ja) * | 2006-09-28 | 2010-06-16 | 株式会社東芝 | 音声翻訳装置、音声翻訳方法及び音声翻訳プログラム |
US8892423B1 (en) * | 2006-10-10 | 2014-11-18 | Abbyy Infopoisk Llc | Method and system to automatically create content for dictionaries |
US8073681B2 (en) | 2006-10-16 | 2011-12-06 | Voicebox Technologies, Inc. | System and method for a cooperative conversational voice user interface |
US8972268B2 (en) * | 2008-04-15 | 2015-03-03 | Facebook, Inc. | Enhanced speech-to-speech translation system and methods for adding a new word |
US9070363B2 (en) * | 2007-10-26 | 2015-06-30 | Facebook, Inc. | Speech translation with back-channeling cues |
US11222185B2 (en) | 2006-10-26 | 2022-01-11 | Meta Platforms, Inc. | Lexicon development via shared translation database |
KR100859532B1 (ko) * | 2006-11-06 | 2008-09-24 | 한국전자통신연구원 | 대응 문형 패턴 기반 자동통역 방법 및 장치 |
JP4997966B2 (ja) * | 2006-12-28 | 2012-08-15 | 富士通株式会社 | 対訳例文検索プログラム、対訳例文検索装置、および対訳例文検索方法 |
US20080189098A1 (en) * | 2007-02-01 | 2008-08-07 | Peter Joseph Mravetz | Language Translator Communicator (LTC) |
US7818176B2 (en) | 2007-02-06 | 2010-10-19 | Voicebox Technologies, Inc. | System and method for selecting and presenting advertisements based on natural language processing of voice-based input |
JP4791984B2 (ja) * | 2007-02-27 | 2011-10-12 | 株式会社東芝 | 入力された音声を処理する装置、方法およびプログラム |
JP2008305167A (ja) * | 2007-06-07 | 2008-12-18 | Toshiba Corp | 原言語文を目的言語文に機械翻訳する装置、方法およびプログラム |
US20090083026A1 (en) * | 2007-09-24 | 2009-03-26 | Microsoft Corporation | Summarizing document with marked points |
US20090094018A1 (en) * | 2007-10-08 | 2009-04-09 | Nokia Corporation | Flexible Phrasebook |
US8472925B2 (en) * | 2007-10-23 | 2013-06-25 | Real Time Translation, Inc. | On-demand, real-time interpretation system and method |
US8140335B2 (en) | 2007-12-11 | 2012-03-20 | Voicebox Technologies, Inc. | System and method for providing a natural language voice user interface in an integrated voice navigation services environment |
CN101960451A (zh) * | 2008-02-29 | 2011-01-26 | 夏普株式会社 | 信息处理装置、方法、以及程序 |
US8032384B2 (en) * | 2008-03-14 | 2011-10-04 | Jay S Rylander | Hand held language translation and learning device |
US9305548B2 (en) | 2008-05-27 | 2016-04-05 | Voicebox Technologies Corporation | System and method for an integrated, multi-modal, multi-device natural language voice services environment |
KR100998566B1 (ko) * | 2008-08-11 | 2010-12-07 | 엘지전자 주식회사 | 음성인식을 이용한 언어 번역 방법 및 장치 |
US9323854B2 (en) * | 2008-12-19 | 2016-04-26 | Intel Corporation | Method, apparatus and system for location assisted translation |
US20120239377A1 (en) * | 2008-12-31 | 2012-09-20 | Scott Charles C | Interpretor phone service |
JP2010176543A (ja) * | 2009-01-30 | 2010-08-12 | Toshiba Corp | 翻訳装置、方法、及びプログラム |
US8326637B2 (en) | 2009-02-20 | 2012-12-04 | Voicebox Technologies, Inc. | System and method for processing multi-modal device interactions in a natural language voice services environment |
US8515749B2 (en) * | 2009-05-20 | 2013-08-20 | Raytheon Bbn Technologies Corp. | Speech-to-speech translation |
EP2261818A1 (en) * | 2009-06-09 | 2010-12-15 | Dudu Communications FZ-LLC | A method for inter-lingual electronic communication |
TWI383376B (zh) * | 2009-08-14 | 2013-01-21 | Kuo Ping Yang | 語音溝通方法及應用該方法之系統 |
US20110112822A1 (en) * | 2009-11-10 | 2011-05-12 | Charles Caraher | Talking Pen and Paper Translator |
US9171541B2 (en) | 2009-11-10 | 2015-10-27 | Voicebox Technologies Corporation | System and method for hybrid processing in a natural language voice services environment |
US8165878B2 (en) | 2010-04-26 | 2012-04-24 | Cyberpulse L.L.C. | System and methods for matching an utterance to a template hierarchy |
US9043206B2 (en) | 2010-04-26 | 2015-05-26 | Cyberpulse, L.L.C. | System and methods for matching an utterance to a template hierarchy |
TW201137645A (en) * | 2010-04-27 | 2011-11-01 | Inventec Corp | Inquiring and displaying system and method for providing illustrative sentence corresponding to geographic information |
US9552355B2 (en) * | 2010-05-20 | 2017-01-24 | Xerox Corporation | Dynamic bi-phrases for statistical machine translation |
US20110313762A1 (en) * | 2010-06-20 | 2011-12-22 | International Business Machines Corporation | Speech output with confidence indication |
US8775156B2 (en) | 2010-08-05 | 2014-07-08 | Google Inc. | Translating languages in response to device motion |
TW201214155A (en) * | 2010-09-21 | 2012-04-01 | Inventec Corp | Article based paragraphic online translating system and method thereof |
US8635059B2 (en) * | 2010-11-15 | 2014-01-21 | Google Inc. | Providing alternative translations |
US8863256B1 (en) | 2011-01-14 | 2014-10-14 | Cisco Technology, Inc. | System and method for enabling secure transactions using flexible identity management in a vehicular environment |
US20120215520A1 (en) * | 2011-02-23 | 2012-08-23 | Davis Janel R | Translation System |
US8712761B2 (en) * | 2011-11-22 | 2014-04-29 | Google Inc. | Techniques for performing translation of messages |
JP5972578B2 (ja) * | 2012-01-16 | 2016-08-17 | シャープ株式会社 | 画像処理装置、画像形成装置、プログラム、記録媒体 |
US8949107B1 (en) * | 2012-06-04 | 2015-02-03 | Amazon Technologies, Inc. | Adjusting search result user interfaces based upon query language |
JP5962256B2 (ja) * | 2012-06-29 | 2016-08-03 | カシオ計算機株式会社 | 入力支援装置及び入力支援プログラム |
WO2016044321A1 (en) | 2014-09-16 | 2016-03-24 | Min Tang | Integration of domain information into state transitions of a finite state transducer for natural language processing |
US9626703B2 (en) | 2014-09-16 | 2017-04-18 | Voicebox Technologies Corporation | Voice commerce |
WO2016061309A1 (en) | 2014-10-15 | 2016-04-21 | Voicebox Technologies Corporation | System and method for providing follow-up responses to prior natural language inputs of a user |
DE112014007207B4 (de) * | 2014-11-25 | 2019-12-24 | Mitsubishi Electric Corporation | Informations-Präsentationssystem |
US10614799B2 (en) | 2014-11-26 | 2020-04-07 | Voicebox Technologies Corporation | System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance |
US10431214B2 (en) | 2014-11-26 | 2019-10-01 | Voicebox Technologies Corporation | System and method of determining a domain and/or an action related to a natural language input |
US9483465B2 (en) * | 2015-03-06 | 2016-11-01 | Ricoh Company, Ltd. | Language translation for multi-function peripherals |
US10331784B2 (en) | 2016-07-29 | 2019-06-25 | Voicebox Technologies Corporation | System and method of disambiguating natural language processing requests |
CN107870900B (zh) * | 2016-09-27 | 2023-04-18 | 松下知识产权经营株式会社 | 提供翻译文的方法、装置以及记录介质 |
CN108288468B (zh) * | 2017-06-29 | 2019-07-19 | 腾讯科技(深圳)有限公司 | 语音识别方法及装置 |
WO2019016985A1 (ja) * | 2017-07-20 | 2019-01-24 | パナソニックIpマネジメント株式会社 | 翻訳装置、翻訳方法及びプログラム |
CN107515862A (zh) * | 2017-09-01 | 2017-12-26 | 北京百度网讯科技有限公司 | 语音翻译方法、装置及服务器 |
CN108874787A (zh) * | 2018-06-12 | 2018-11-23 | 深圳市合言信息科技有限公司 | 一种分析语音意图并进行深度翻译解说的方法 |
CN111860450A (zh) * | 2020-08-03 | 2020-10-30 | 理光图像技术(上海)有限公司 | 票证识别装置以及票证信息管理系统 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5688564A (en) | 1979-12-19 | 1981-07-18 | Sharp Corp | Electronic translator |
JPH04182870A (ja) | 1990-11-19 | 1992-06-30 | Matsushita Electric Ind Co Ltd | 通訳装置 |
US5477451A (en) * | 1991-07-25 | 1995-12-19 | International Business Machines Corp. | Method and system for natural language translation |
JP3306993B2 (ja) | 1993-05-14 | 2002-07-24 | 富士ゼロックス株式会社 | 電子翻訳機 |
JP3716870B2 (ja) | 1995-05-31 | 2005-11-16 | ソニー株式会社 | 音声認識装置および音声認識方法 |
JP3385146B2 (ja) * | 1995-06-13 | 2003-03-10 | シャープ株式会社 | 会話文翻訳装置 |
JPH09231225A (ja) * | 1996-02-26 | 1997-09-05 | Fuji Xerox Co Ltd | 言語情報処理装置 |
US5727950A (en) * | 1996-05-22 | 1998-03-17 | Netsage Corporation | Agent based instruction system and method |
JP3402100B2 (ja) * | 1996-12-27 | 2003-04-28 | カシオ計算機株式会社 | 音声制御ホスト装置 |
US6216104B1 (en) * | 1998-02-20 | 2001-04-10 | Philips Electronics North America Corporation | Computer-based patient record and message delivery system |
US6275789B1 (en) * | 1998-12-18 | 2001-08-14 | Leo Moser | Method and apparatus for performing full bidirectional translation between a source language and a linked alternative language |
US6721706B1 (en) * | 2000-10-30 | 2004-04-13 | Koninklijke Philips Electronics N.V. | Environment-responsive user interface/entertainment device that simulates personal interaction |
-
1999
- 1999-01-07 JP JP00166999A patent/JP3822990B2/ja not_active Expired - Lifetime
-
2000
- 2000-01-06 US US09/478,336 patent/US6917920B1/en not_active Expired - Lifetime
-
2005
- 2005-01-26 US US11/042,147 patent/US7047195B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
US20050131673A1 (en) | 2005-06-16 |
US6917920B1 (en) | 2005-07-12 |
JP2000200275A (ja) | 2000-07-18 |
US7047195B2 (en) | 2006-05-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3822990B2 (ja) | 翻訳装置、記録媒体 | |
US11972227B2 (en) | Lexicon development via shared translation database | |
US9753918B2 (en) | Lexicon development via shared translation database | |
US8204739B2 (en) | System and methods for maintaining speech-to-speech translation in the field | |
JP3962767B2 (ja) | 対話支援装置 | |
KR101445904B1 (ko) | 현장 음성 번역 유지 시스템 및 방법 | |
JP5121252B2 (ja) | 原言語による音声を目的言語に翻訳する装置、方法およびプログラム | |
JP4135307B2 (ja) | 音声通訳サービス方法および音声通訳サーバ | |
EP2849178A2 (en) | Enhanced speech-to-speech translation system and method | |
US20080133245A1 (en) | Methods for speech-to-speech translation | |
JP2015153108A (ja) | 音声会話支援装置、及び音声会話支援方法及びプログラム | |
JP2010048953A (ja) | 対話文生成装置 | |
BRPI0613699A2 (pt) | busca de dicionário para dispositivos móveis que usa reconhecimento de escrita | |
Fan et al. | Just speak it: Minimize cognitive load for eyes-free text editing with a smart voice assistant | |
JP3870722B2 (ja) | 翻訳装置、記録媒体 | |
Zong et al. | Toward practical spoken language translation | |
JP3411198B2 (ja) | 通訳装置及び方法並びに通訳装置制御プログラムを記憶した媒体 | |
WO2009151868A2 (en) | System and methods for maintaining speech-to-speech translation in the field | |
JP2004170466A (ja) | 音声認識方法と電子装置 | |
JP2003162524A (ja) | 言語処理装置 | |
JPH10162005A (ja) | 記憶媒体、並びに検索装置および検索方法 | |
EP3742301A1 (en) | Information processing device and information processing method | |
JP2004118720A (ja) | 翻訳装置、翻訳方法及び翻訳プログラム | |
KR100777569B1 (ko) | 멀티모달을 이용한 음성 인식 방법 및 그 장치 | |
JP2003288098A (ja) | ディクテーション装置、方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060306 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20060427 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060519 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060626 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090630 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100630 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100630 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110630 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110630 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120630 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120630 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130630 Year of fee payment: 7 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |