JP5366169B2 - 音声認識システム及び音声認識システム用プログラム - Google Patents

音声認識システム及び音声認識システム用プログラム Download PDF

Info

Publication number
JP5366169B2
JP5366169B2 JP2007310695A JP2007310695A JP5366169B2 JP 5366169 B2 JP5366169 B2 JP 5366169B2 JP 2007310695 A JP2007310695 A JP 2007310695A JP 2007310695 A JP2007310695 A JP 2007310695A JP 5366169 B2 JP5366169 B2 JP 5366169B2
Authority
JP
Japan
Prior art keywords
word
speech recognition
corrected
pronunciation
speech
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007310695A
Other languages
English (en)
Other versions
JP2008158510A (ja
Inventor
淳 緒方
真孝 後藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Institute of Advanced Industrial Science and Technology AIST
Original Assignee
National Institute of Advanced Industrial Science and Technology AIST
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Institute of Advanced Industrial Science and Technology AIST filed Critical National Institute of Advanced Industrial Science and Technology AIST
Priority to JP2007310695A priority Critical patent/JP5366169B2/ja
Publication of JP2008158510A publication Critical patent/JP2008158510A/ja
Application granted granted Critical
Publication of JP5366169B2 publication Critical patent/JP5366169B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/04Segmentation; Word boundary detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/065Adaptation

Description

本発明は、音声データをテキストデータに変換する音声認識システム及び音声認識システム用プログラムに関するものである。
音声認識技術では、単語とこの単語に対する1以上の音素からなる1以上の発音とが組みになった単語発音データを、多数集めて構成された音声認識辞書を利用して、音声データをテキストデータに変換する。特開2006−146008号公報に記載の音声認識技術では、音声認識により得られたテキストデータに含まれる単語に対して競合候補を表示して、訂正を容易にする音声認識技術が開示されている。この公知の音声認識技術では、変換されたテキストデータと一緒に競合候補が表示されるため、訂正作業が飛躍的に速くなった。
特開2006−146008号公報
従来の音声認識技術では、音声認識辞書に登録されていない未知語については、音声認識することができないという固有の問題を有している。また競合候補を表示して訂正を容易にする従来の技術では、訂正の結果を音声認識辞書の高精度化に利用することは行われていない。すなわち従来の技術では、音声認識辞書に登録されていない発音で発声された単語については、いくら訂正を行っても、その訂正が学習には利用されていないので、音声認識の精度が上がることはなかった。
本発明の目的は、訂正結果を利用して、未知語を音声認識辞書に追加登録し、また既に音声認識辞書に登録されている単語の新たな発音を音声認識辞書に追加登録することを可能にして、音声認識の精度を高めることができる音声認識システム及び音声認識システム用プログラムを提供することにある。
本発明の音声認識システムは、音声認識手段と、単語訂正手段と、音素列変換手段と、音素列部分抽出手段と、発音決定手段と、追加登録手段とを備えている。また本発明の音声認識システム用プログラムは、コンピュータを音声認識手段と、単語訂正手段と、音素列変換手段と、音素列部分抽出手段と、発音決定手段と、追加登録手段として機能させるプログラムである。
音声認識手段は、単語と該単語に対する1以上の音素からなる1以上の発音とが組みになった単語発音データが、多数集められて構成された音声認識辞書を利用して、音声データをテキストデータに変換する。また音声認識手段は、テキストデータに含まれる各単語に対応する音声データ中の単語区間の開始時刻と終了時刻をテキストデータに付加する機能を有している。
単語訂正手段は、音声認識手段から得たテキストデータ中の各単語に対して競合候補を提示する。そして単語訂正手段は、競合候補中に正しい単語があるときには、競合候補から正しい単語を選択により訂正することを許容し、競合候補中に正しい単語がないときには、訂正対象の単語をマニュアル入力により訂正することを許容する。
また音素列変換手段は、音声データを音素単位で認識して複数の音素から構成される音素列に変換する。そして音素列変換手段は、音素列に含まれる各音素に対応する音声データ中の各音素単位の開始時刻と終了時刻を音素列に付加する機能を有する。音素列変換手段としては、公知の音素タイプライタを用いることができる。
音素列部分抽出手段は、音素列中から、単語訂正手段により訂正された単語の単語区間の開始時刻から終了時刻までに対応する区間内に存在する1以上の音素からなる音素列部分を抽出する。すなわち音素列部分抽出手段は、訂正された単語の発音を示す音素列部分を音素列から抽出する。そこで発音決定手段は、この音素列部分を前記単語訂正手段により訂正された訂正後の単語に対する発音と定める。
そして追加登録手段は、訂正後の単語が、音声認識辞書に登録されていないことを判定すると、訂正後の単語と発音決定手段が決定した発音とを組み合わせて新たな発音単語データとして音声認識辞書に追加登録する。また追加登録手段は、訂正後の単語が、音声認識辞書に既に登録されている既登録単語であることを判定すると、既登録単語の別の発音として、発音決定手段が決定した発音を追加登録する。
本発明によれば、訂正の対象となった単語について、発音を定め、その単語が音声認識辞書に登録されていない未知語であれば、その単語と発音とを音声認識辞書に登録するため、訂正をすればするほど、音声認識辞書への未知語登録が増えて、音声認識精度が上がることになる。また訂正の対象となった単語が既登録の単語である場合には、その単語の新たな発音が音声認識辞書に登録されることになるため、訂正後の新たな音声認識では、再度同じ発音の音声が入力されたときには、正しく音声認識ができるようになる。その結果、本発明によれば、訂正結果を音声認識辞書の高精度化に利用することができ、従来の音声認識技術と比べて、音声認識の精度を上げることができる。
テキストデータの訂正が完了する前であれば、音声認識辞書に新たに追加された未知語や発音を利用して、まだ訂正していない部分を再度音声認識することが好ましい。すなわち音声認識手段を、追加登録手段が新たな追加登録を行うと、テキストデータ中でまだ訂正が行われていない未訂正部分に対応する音声データを再度音声認識するように構成するのが好ましい。このようにすると音声認識辞書に新たな登録がなされると直ぐに音声認識の更新が行われて、新たな登録を音声認識に反映させることができる。その結果、未訂正部分に対する音声認識精度が直ぐに上がって、テキストデータの修正箇所を減らすことができる。
さらに音声認識の精度を高めるためには、音声データから話者のタイプ(話者間の音響的な近さ)を認定する話者認定手段を設ける。そして更に、話者のタイプに合わせて予め用意した複数の音声認識辞書から、話者認定手段により認定した話者のタイプに対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段とを設ければよい。このようにすると話者対応の音声認識辞書を使って音声認識を行うことになるため、更に認識精度を高めることができる。
また、音声データの内容に適した音声認識辞書を用いてもよい。その場合には、音声データから話されている内容の分野を認定する分野認定手段と、複数の分野に合わせて予め用意した複数の音声認識辞書から、分野認定手段により認定した分野に対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段とを更に備えた構成とすればよい。
本発明によれば、訂正の対象となった単語について、発音を定め、その単語が音声認識辞書に登録されていない未知語であれば、その単語と発音とを音声認識辞書に登録するため、訂正をすればするほど、音声認識辞書への未知語登録を増やすことができて、音声認識精度を上げることができる利点が得られる。また訂正の対象となった単語が既登録の単語である場合には、その単語の新たな発音が音声認識辞書に登録されることになるため、訂正後の新たな音声認識では、再度同じ発音の音声が入力されたときには、正しく音声認識ができるようになり、訂正結果を音声認識辞書の高精度化に利用することができて、従来の音声認識技術と比べて、音声認識の精度を上げることができる。
以下図面を参照して本発明の音声認識システム及び音声認識システム用プログラムの実施の形態の一例を詳細に説明する。図1は、音声データ記憶手段1と、音声認識手段2と、音声認識実行手段3と、音声認識辞書5と、テキストデータ記憶手段7と、単語訂正手段9と、認識結果表示手段11と、音素列変換手段13と、音素列部分抽出手段15と、発音決定手段16と、追加登録手段17とを備えた本発明の音声認識システムの実施の形態の構成をブロック図で示している。また図2は、図1の実施の形態の各手段をコンピュータを用いて実現する場合に用いるソフトウェア(プログラム)のアルゴリズムの一例を示すフローチャートである。音声データ記憶手段1は、WEBクローラのような音声データ収集手段が収集した複数の音声データを記憶している。WEBクローラは、全文検索型サーチエンジンの検索データベースを作成するために、世界中のWEBページを回収するプログラムによって実現される音声データ収集手段である。ここで音声データは、一般的にはMP3ファイルであり、インターネットを介してWEB上から入手できるものである。
音声認識手段2は、単語と該単語に対する1以上の音素からなる1以上の発音とが組みになった単語発音データが、多数集められて構成された音声認識辞書5を利用して、音声データをテキストデータに変換する音声認識実行手段3と、音声認識実行手段3によって音声認識された結果得られるテキストデータを記憶するテキストデータ記憶手段7とを備えている。なお音声認識手段2は、テキストデータに含まれる各単語に対応する音声データ中の単語区間の開始時刻と終了時刻をテキストデータに付加する機能を有している。この機能は、音声認識実行手段3で音声認識を実行する際に同時に実行される。音声認識技術としては、種々の公知の音声認識技術を用いることができる。特に、本実施の形態では、音声認識実行手段3として、音声認識により得たテキストデータ中の単語と競合する競合候補を表示するためのデータをテキストデータに付加する機能を有しているものを用いる。
単語訂正手段9は、音声認識手段2から得たテキストデータ中の各単語に対して競合候補を提示する。そして単語訂正手段9は、競合候補中に正しい単語があるときには、競合候補から正しい単語を選択により訂正することを許容し、競合候補中に正しい単語がないときには、訂正対象の単語をマニュアル入力により訂正することを許容する。
具体的に、本実施の形態では、音声認識実行手段3で使用する音声認識技術及び単語訂正手段9で使用する単語訂正技術としては、発明者が2004年に特許出願してすでに特開2006−146008号として公開されている、信頼度付き競合候補(コンフュージョンネットワーク)を生成できる機能を持った、大語彙連続音声認識器を用いている。なおこの音声認識器では、競合候補を提示して訂正を行っている。音声認識器2及び単語訂正手段9の内容は、特開2006−146008号公報に詳細に説明されているので説明は省略する。
図3は、単語訂正手段9で用いるインタフェースの一例を示す図である。図3においては、横一列に並んだ認識結果の各単語区間の下に、それぞれの競合候補のリストが表示される。なおこの表示態様は、特開2006−146008号公報に詳しく説明されている。このように競合候補が常に表示されているため、誤り箇所をクリックして候補を確認する手間が省け、正しい単語を次々と選択するだけで訂正できる。この表示で、競合候補の個数が多い箇所は認識時の曖昧性が高かった(音声認識器にとって自信がなかった)ことを表している。また各区間の競合候補は信頼度の高い順に並んでおり、通常は上から下へ候補を見ていくと、早く正解にたどり着けることが多い。また、競合候補には必ず空白の候補が含まれる。これは「スキップ候補」と呼ばれ、その区間の認識結果をないものとする役割を持つ。つまりこれをクリックするだけで、余分な単語が挿入されている箇所を容易に削除できる。なお競合候補が信頼度の高い順に並ぶこと、及びスキップ候補に関しても、特開2006−146008号公報に詳しく説明されている。
音素列変換手段13は、音声データ記憶手段1から得た音声データを音素単位で認識して複数の音素から構成される音素列に変換する。そして音素列変換手段13は、音素列に含まれる各音素に対応する音声データ中の各音素単位の開始時刻と終了時刻を音素列に付加する機能を有する。音素列変換手段13としては、公知の音素タイプライタを用いることができる。
図4は、後に説明する発音の追加登録の例を説明するための図である。図4中の「funabanotaimuri」の表記が、音素タイプライタで音素データを音素列に変換した結果を示している。そして「funabanotaimuri」の下のt〜t15が、それぞれ各音素単位の開始時刻および/または終了時刻である。すなわち最初の音素単位「f」の開始時刻はtであり、終了時刻はt1である。
音素列部分抽出手段15は、音素列中から、単語訂正手段9により訂正された単語の単語区間の開始時刻から終了時刻までに対応する区間内に存在する1以上の音素からなる音素列部分を抽出する。図4の例で説明すると、訂正された単語は「船田」であり、船田の単語区間の開始時刻は「船田」の文字の上のTであり、終了時刻はTである。そしてこの「船田」の単語区間に存在する音素列部分は「funaba」である。したがって音素列部分抽出手段15は、訂正された単語「船田」の発音を示す音素列部分「funaba」を音素列から抽出する。図4の例では、「船田」が「船橋」に単語訂正手段9によって訂正される。
発音決定手段16は、この音素列部分「funaba」を単語訂正手段9により訂正された訂正後の単語に対する発音と定める。
追加登録手段17は、訂正後の単語が、音声認識辞書5に登録されていないことを判定すると、訂正後の単語と発音決定手段16が決定した発音とを組み合わせて新たな発音単語データとして音声認識辞書5に追加登録する。また追加登録手段17は、訂正後の単語が、音声認識辞書5に既に登録されている既登録単語であることを判定すると、既登録単語の別の発音として、発音決定手段17が決定した発音を追加登録する。
例えば、図5に示すように、「駒大」の文字がマニュアル入力で訂正された未知語の単語であるとすると、訂正の対象となった単語「駒大」について、音素列部分「komadai」がその発音となる。追加登録手段17は、単語「駒大」が音声認識辞書5に登録されていない未知語であれば、その単語「駒大」と発音「komadai」とを音声認識辞書5に登録する。訂正された単語と発音とを対応させるために、単語区間の時刻T〜Tと音素列中の時刻t70〜t77とが利用されている。このように本実施の形態によれば、未知語登録をすることができるので、未知語の訂正をすればするほど、音声認識辞書5への未知語登録が増えて、音声認識精度が上がることになる。また図4に示すように、訂正の対象となった単語「船田」が既登録の単語「船橋」に訂正された場合には、単語「船橋」の新たな発音として「funaba」が音声認識辞書に登録されることになる。すなわち図4に示すように、すでに単語「船橋」の発音として「funabshi」と「funebashi」が音声認識辞書5に登録されている場合に、「funaba」が音声認識辞書に登録される。既登録の単語と新たな発音とを対応させるために、単語区間の時刻T〜Tと音素列中の時刻t〜tとが利用されている。このようにすると、訂正後の新たな音声認識では、再度同じ発音の音声「funaba」が入力されたときに、「船橋」と音声認識ができるようになる。その結果、本発明によれば、音声認識により得たテキストデータの訂正結果を音声認識辞書5の高精度化に利用することができる。よって、従来の音声認識技術と比べて、音声認識の精度を上げることができる。
現在対象としている音声データに対する、テキストデータの訂正が全て完了する前であれば、音声認識辞書5に新たに追加された未知語や発音を利用して、まだ訂正していない部分を再度音声認識することが好ましい。すなわち音声認識手段2を、追加登録手段17が新たな追加登録を行うたびに、テキストデータ中でまだ訂正が行われていない未訂正部分に対応する音声データを再度音声認識するように構成するのが好ましい。このようにすると音声認識辞書5に新たに登録がなされると直ぐに音声認識の更新が行われて、新たな登録を音声認識に即座に反映させることができる。その結果、未訂正部分に対する音声認識精度が直ぐに上がって、テキストデータの修正箇所を減らすことができる。
図2のアルゴリズムは、WEB上から入手した音声データを音声データ記憶手段1に記憶しておき、この音声データを音声認識によりテキストデータに変換したものを、一般のユーザ端末機からの訂正指令に応じて訂正する場合に、本実施の形態を適用する場合を例にして記載してある。したがってこの例では、単語訂正手段9の訂正入力部は、ユーザ端末機となる。なおユーザに訂正させるのではなく、システムの管理者が訂正を行ってもよいのは勿論である。この場合には、訂正入力部を含む単語訂正手段9のすべてがシステム内に存在することになる。図2のアルゴリズムでは、最初に、ステップST1で音声データを入力する。ステップST2では、音声認識を実行する。そして後の訂正のために、競合候補を得るためにコンフュージョンネットワークを生成する。コンフュージョンネットワークについては、特開2006−146008号公報に詳しく説明されているので省略する。ステップST2では、認識結果と競合候補とを保存し、また各単語の単語区間の開始時刻及び終了時刻を保存する。そしてステップST3で、図3に示すような訂正画面(インタフェース)を表示する。次にステップST4で、訂正動作が行われる。ステップST4では、ユーザが端末機から単語区間を訂正する訂正要求を作成する。訂正要求の内容は、(1)競合候補の中から選択する要求と、(2)単語区間に対して、新たな単語を追加入力する要求である。この訂正要求が完了すると、ユーザは端末機から訂正要求を音声認識システムの単語訂正手段9に送信され、単語訂正手段9はこの要求を実行する。
ステップST5では、ステップST2からステップST4までのステップと並行して、音声データを音素タイプライタを用いて音素列に変換する。すなわち「音素単位の音声認識」を行う。このとき同時に、各音素の開始時刻と終了時刻も、音声認識結果と一緒に保存する。そしてステップST6では、全体の音素列から、訂正の対象となる単語の単語区間にあたる時間(単語区間の開始時刻tsから終了時刻teまでの時間)の音素列部分を抽出する。
ステップST7では、抽出した音素列部分を、訂正語の単語の発音とする。そしてステップST8へと進み、訂正後の単語が音声認識辞書5に登録されているか否か(すなわちその単語が未知語であるか否か)の判定が行われる。未知語であると判定した場合には、ステップST9へと進み、訂正後の単語とその発音を、音声認識辞書5に新たな単語として登録する。また未知語ではなく、既登録の単語であると判定した場合には、ステップST10へと進む。ステップST10では、ステップST7で決定した発音を新たな発音のバリエーションとして音声認識辞書5に追加登録される。
そして追加登録が完了したらステップST11で、ユーザによる訂正処理がすべて終了しているか、すなわち未訂正の音声認識区間があるか否かの判定が行われる。未訂正の音声認識区間がなければ、終了する。未訂正の音声認識区間がある場合には、ステップST12へと進んで、未訂正の音声認識区間を再度音声認識する。そして再度訂正ステップST1へと戻る。
図6は、さらに音声認識の精度を高めるための変形例の要部の構成を示すブロック図である。図6に示すように、変形例では、音声データから話者のタイプを認定する話者認定手段19と、音声データから話されている内容の分野を認定する分野認定手段21とを設けている。図6の変形例では、音声認識辞書5´に話者のタイプに合わせて予め用意した複数の音声認識辞書と複数の分野に合わせて予め用意した複数の音声認識辞書とが内蔵されている。そして辞書選択手段23は、話者のタイプに合わせて予め用意した複数の音声認識辞書5´から、話者認定手段19により認定した話者のタイプに対応した音声認識辞書を音声認識実行手段3で使用する音声認識辞書として選択する。なお話者認定手段19を実現する技術については、例えば「M. Nishida and T. Kawahara,``Speaker Model Selection Based on the Bayesian Information Criterion Applied to Unsupervised Speaker Indexing,''IEEE Transactions on Speech and Audio Processing, Vol.13, No.4 , pp.583-592,2005.」に記載されている。また辞書選択手段23は、複数の分野に合わせて予め用意した複数の音声認識辞書から、分野認定手段21により認定した分野に対応した音声認識辞書を音声認識実行手段3で使用する音声認識辞書として選択する。なお分野認定手段21を実現する技術については、例えば「R. Schwartz, T. Imai, F. Kubala, L. Nguyen, J. Makhoul,"A maximum likelihood model for topic classification of broadcastnews." Proc. Eurospeech '97, pp. 1455-1458 (1997).」に記載されている。このようにすると話者対応の音声認識辞書または音声データの内容に適した音声認識辞書を用いて音声認識を行うことになるため、更に認識精度を高めることができる。なお図6のように話者対応の音声認識辞書及び音声データの内容に適した音声認識辞書の両方を選択できるようにしなくても、一方の専門の音声認識辞書を選択できるようにしてもよいのは勿論である。その場合には、図6の話者認定手段19及び分野認定手段21のいずれか一方を設けておけばよい。
本発明の効果を評価するため、小規模ではあるが、WEB上にあるポッドキャストに含まれる音声データを用いた実験を行った。評価データとしては、「日刊工業新聞Podcastビジネスライン[http://www.btoday.net/broadcast/archives/009nikkan/]のポッドキャストのうち、2006年8月23日、24日に公開された2つを用いた。本実験では、2006年8月23日の音声データとそれに対するユーザの訂正結果を利用して、新たな発音の学習(図4に相当)並びに未知語の学習(図5に相当)を行い、もう一方の音声データ(2006年8月24日)を用いて認識性能を調査した。
言語モデルには、CSRCソフトウェア2003年度版[河原、武田、伊藤、李、鹿野、山田:連続音声認識コンソーシアムの活動報告及び最終版ソフトウェアの概要。信学技報、SP2003−169、2003]の中から、1991年から2002年までの新聞記事テキストより学習された60000語のbigramを用いた。実験結果より、下記に示す結果が得られた。
未知語数 認識率
ベースライン 10個 74.1%
本発明実施 3個 77.9%
上記の結果のベースラインは、未知語の追加登録と発音変形追加登録をしない従来の手法を用いた結果である。そして本発明の実施は、未知語の追加登録と新たな発音を追加登録することにより高精度化した音声認識辞書を用いて音声認識を行った場合の結果である。上記結果から、未知語数が削減され、認識率も改善されていることがわかる。また、同一番組のポッドキャストでは、同じ話者が発生することが多く、決まった言い回しや発音パターンが日々繰り返されることもあるため、本発明が特に有効に働くことが判った。
本発明の音声認識システムの実施の形態の構成を示すブロック図である。 図1の実施の形態をコンピュータを用いて実現する場合に用いるソフトウェアのアルゴリズムの一例を示すフローチャートである。 単語訂正手段で用いるインタフェースの一例を示す図である。 発音のバリエーションの追加登録を説明するために用いる図である。 未知語の追加登録を説明するために用いる図である。 変形例の要部の構成を示すブロック図である。
符号の説明
1 音声データ記憶手段
2 音声認識手段
3 音声認識実行手段
5 音声認識辞書
7 テキストデータ記憶手段
9 単語訂正手段
11 認識結果表示手段
13 音素列変換手段
15 音素列部分抽出手段
16 発音決定手段
17 追加登録手段
19 話者認定手段
21 分野認定手段
23 辞書選択手段

Claims (9)

  1. 単語と該単語に対する1以上の音素からなる1以上の発音とが組みになった単語発音データが、多数集められて構成された音声認識辞書を利用して、音声データをテキストデータに変換し且つ、前記テキストデータに含まれる各単語に対応する前記音声データ中の単語区間の開始時刻と終了時刻を前記テキストデータに付加する機能を有する音声認識手段と、
    前記音声認識手段から得た前記テキストデータ中の各単語に対して競合候補を提示して、前記競合候補中に正しい単語があるときには、前記競合候補から前記正しい単語を選択により訂正することを許容する単語訂正手段と、
    前記音声データを音素単位で認識して複数の音素から構成される音素列に変換し且つ、前記音素列に含まれる各音素に対応する前記音声データ中の各音素単位の開始時刻と終了時刻を前記音素列に付加する機能を有する音素列変換手段と、
    前記音素列中から、前記単語訂正手段により訂正された単語の単語区間の前記開始時刻から前記終了時刻までに対応する区間内に存在する1以上の音素からなる音素列部分を抽出する音素列部分抽出手段と、
    前記音素列部分を前記単語訂正手段により訂正された訂正後の単語に対する発音と定める発音決定手段と、
    前記訂正後の単語が、前記音声認識辞書に既に登録されている既登録単語であることを判定すると、前記既登録単語の別の発音として、前記発音決定手段が決定した前記音素列部分からなる発音を追加登録する追加登録手段とを有する音声認識システムであって、
    前記単語訂正手段は、前記競合候補中に正しい単語がないときには、訂正対象の単語をマニュアル入力により訂正することを許容し、
    前記追加登録手段は、前記訂正後の単語が、前記音声認識辞書に登録されていないことを判定すると、前記訂正後の単語と前記発音決定手段が決定した前記音素列部分からなる前記発音とを組み合わせて新たな発音単語データとして前記音声認識辞書に追加登録することを特徴とする音声認識システム。
  2. 前記音声認識手段は、前記追加登録手段が新たな追加登録を行うと、前記テキストデータ中でまだ訂正が行われていない未訂正部分に対応する音声データを再度音声認識することを特徴とする請求項1に記載の音声認識システム。
  3. 前記音声データから話者のタイプを認定する話者認定手段と、
    話者のタイプに合わせて予め用意した複数の音声認識辞書から、前記話者認定手段により認定した話者のタイプに対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段とを更に備えている請求項1または2に記載の音声認識システム。
  4. 前記音声データから話されている内容の分野を認定する分野認定手段と、
    複数の分野に合わせて予め用意した複数の音声認識辞書から、前記分野認定手段により認定した分野に対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段とを更に備えている請求項1または2に記載の音声認識システム。
  5. 前記音素列変換手段は、音素タイプライタである請求項1に記載の音声認識システム。
  6. コンピュータを、
    単語と該単語に対する1以上の音素からなる1以上の発音とが組みになった単語発音データが、多数集められて構成された音声認識辞書を利用して、音声データをテキストデータに変換し且つ、前記テキストデータに含まれる各単語に対応する前記音声データ中の単語区間の開始時刻と終了時刻を前記テキストデータに付加する機能を有する音声認識手段と、
    前記音声認識手段から得た前記テキストデータ中の各単語に対して競合候補を提示して、前記競合候補中に正しい単語があるときには、前記競合候補から前記正しい単語を選択により訂正することを許容し、前記競合候補中に正しい単語がないときには、訂正対象の単語をマニュアル入力により訂正することを許容する単語訂正手段と、
    前記音声データを音素単位で認識して複数の音素から構成される音素列に変換し且つ、前記音素列に含まれる各音素に対応する前記音声データ中の各音素単位の開始時刻と終了時刻を前記音素列に付加する機能を有する音素列変換手段と、
    前記音素列中から、前記単語訂正手段により訂正された単語の単語区間の前記開始時刻から前記終了時刻までに対応する区間内に存在する1以上の音素からなる音素列部分を抽出する音素列部分抽出手段と、
    前記音素列部分を前記単語訂正手段により訂正された訂正後の単語に対する発音と定める発音決定手段と、
    前記訂正後の単語が、前記音声認識辞書に登録されていないことを判定すると、前記訂正後の単語と前記発音決定手段が決定した前記音素列部分からなる前記発音とを組み合わせて新たな発音単語データとして前記音声認識辞書に追加登録し、前記訂正後の単語が、前記音声認識辞書に既に登録されている既登録単語であることを判定すると、前記既登録単語の別の発音として、前記発音決定手段が決定した前記音素列部分からなる前記発音を追加登録する追加登録手段として機能させるための音声認識システム用プログラム。
  7. 前記音声認識手段は、前記追加登録手段が新たな追加登録を行うと、前記テキストデータ中でまだ訂正が行われていない未訂正部分に対応する音声データを再度音声認識することを特徴とする請求項6に記載の音声認識システム用プログラム。
  8. 前記コンピュータを、
    前記音声データから話者のタイプを認定する話者認定手段と、
    話者のタイプに合わせて予め用意した複数の音声認識辞書から、前記話者認定手段により認定した話者のタイプに対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段として機能させるための請求項6または7に記載の音声認識システム用プログラム。
  9. 前記コンピュータを、
    前記音声データから話されている内容の分野を認定する分野認定手段と、
    複数の分野に合わせて予め用意した複数の音声認識辞書から、前記分野認定手段により認定した分野に対応した音声認識辞書を音声認識手段で使用する音声認識辞書として選択する辞書選択手段として機能させるための請求項6または7に記載の音声認識システム用プログラム。
JP2007310695A 2006-11-30 2007-11-30 音声認識システム及び音声認識システム用プログラム Active JP5366169B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007310695A JP5366169B2 (ja) 2006-11-30 2007-11-30 音声認識システム及び音声認識システム用プログラム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006324498 2006-11-30
JP2006324498 2006-11-30
JP2007310695A JP5366169B2 (ja) 2006-11-30 2007-11-30 音声認識システム及び音声認識システム用プログラム

Publications (2)

Publication Number Publication Date
JP2008158510A JP2008158510A (ja) 2008-07-10
JP5366169B2 true JP5366169B2 (ja) 2013-12-11

Family

ID=39492035

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007310695A Active JP5366169B2 (ja) 2006-11-30 2007-11-30 音声認識システム及び音声認識システム用プログラム

Country Status (4)

Country Link
US (1) US8401847B2 (ja)
JP (1) JP5366169B2 (ja)
GB (1) GB2457855B (ja)
WO (1) WO2008069139A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10496745B2 (en) 2016-09-06 2019-12-03 Kabushiki Kaisha Toshiba Dictionary updating apparatus, dictionary updating method and computer program product

Families Citing this family (195)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8954325B1 (en) * 2004-03-22 2015-02-10 Rockstar Consortium Us Lp Speech recognition in automated information services systems
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
WO2009078256A1 (ja) * 2007-12-18 2009-06-25 Nec Corporation 発音変動規則抽出装置、発音変動規則抽出方法、および発音変動規則抽出用プログラム
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
KR100998566B1 (ko) * 2008-08-11 2010-12-07 엘지전자 주식회사 음성인식을 이용한 언어 번역 방법 및 장치
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
GB2468203B (en) * 2009-02-27 2011-07-20 Autonomy Corp Ltd Various apparatus and methods for a speech recognition system
US9646603B2 (en) 2009-02-27 2017-05-09 Longsand Limited Various apparatus and methods for a speech recognition system
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US8229743B2 (en) 2009-06-23 2012-07-24 Autonomy Corporation Ltd. Speech recognition system
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8190420B2 (en) 2009-08-04 2012-05-29 Autonomy Corporation Ltd. Automatic spoken language identification based on phoneme sequence patterns
JP5146429B2 (ja) * 2009-09-18 2013-02-20 コニカミノルタビジネステクノロジーズ株式会社 画像処理装置、音声認識処理装置、音声認識処理装置の制御方法、およびコンピュータプログラム
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9634855B2 (en) 2010-05-13 2017-04-25 Alexander Poltorak Electronic personal interactive device that determines topics of interest using a conversational agent
JP5296029B2 (ja) * 2010-09-15 2013-09-25 株式会社東芝 文章提示装置、文章提示方法及びプログラム
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10672399B2 (en) 2011-06-03 2020-06-02 Apple Inc. Switching between text data and audio data based on a mapping
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US20130073286A1 (en) * 2011-09-20 2013-03-21 Apple Inc. Consolidating Speech Recognition Results
JP5821639B2 (ja) * 2012-01-05 2015-11-24 株式会社デンソー 音声認識装置
JP5787780B2 (ja) * 2012-01-25 2015-09-30 株式会社東芝 書き起こし支援システムおよび書き起こし支援方法
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
CN113470640B (zh) 2013-02-07 2022-04-26 苹果公司 数字助理的语音触发器
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
CN105027197B (zh) 2013-03-15 2018-12-14 苹果公司 训练至少部分语音命令系统
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
AU2014306221B2 (en) 2013-08-06 2017-04-06 Apple Inc. Auto-activating smart responses based on activities from remote devices
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
AU2015266863B2 (en) 2014-05-30 2018-03-15 Apple Inc. Multi-command single utterance input method
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US20160164813A1 (en) * 2014-12-04 2016-06-09 Intel Corporation Conversation agent
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9384188B1 (en) 2015-01-27 2016-07-05 Microsoft Technology Licensing, Llc Transcription correction using multi-token structures
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10152965B2 (en) * 2016-02-03 2018-12-11 Google Llc Learning personalized entity pronunciations
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10013971B1 (en) 2016-12-29 2018-07-03 Google Llc Automated speech pronunciation attribution
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10546580B2 (en) * 2017-12-05 2020-01-28 Toyota Motor Engineering & Manufacuturing North America, Inc. Systems and methods for determining correct pronunciation of dictated words
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
JP2021529338A (ja) * 2018-04-27 2021-10-28 エル ソルー カンパニー, リミテッドLlsollu Co., Ltd. 発音辞書生成方法及びそのための装置
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
CN111883109B (zh) * 2020-07-01 2023-09-26 北京猎户星空科技有限公司 语音信息处理及验证模型训练方法、装置、设备及介质
CN112259100B (zh) * 2020-09-15 2024-04-09 科大讯飞华南人工智能研究院(广州)有限公司 语音识别方法及相关模型的训练方法和相关设备、装置

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2737436A (en) * 1952-12-03 1956-03-06 Dow Chemical Co Making continuous fibers from a normally crystalline polymer latex
US5636325A (en) * 1992-11-13 1997-06-03 International Business Machines Corporation Speech synthesis and analysis of dialects
JP3605682B2 (ja) 1996-05-16 2004-12-22 本田技研工業株式会社 音声入力制御装置
US5857173A (en) * 1997-01-30 1999-01-05 Motorola, Inc. Pronunciation measurement device and method
GB2323693B (en) * 1997-03-27 2001-09-26 Forum Technology Ltd Speech to text conversion
US6243680B1 (en) * 1998-06-15 2001-06-05 Nortel Networks Limited Method and apparatus for obtaining a transcription of phrases through text and spoken utterances
US6233553B1 (en) * 1998-09-04 2001-05-15 Matsushita Electric Industrial Co., Ltd. Method and system for automatically determining phonetic transcriptions associated with spelled words
US6389394B1 (en) * 2000-02-09 2002-05-14 Speechworks International, Inc. Method and apparatus for improved speech recognition by modifying a pronunciation dictionary based on pattern definitions of alternate word pronunciations
JP4296714B2 (ja) * 2000-10-11 2009-07-15 ソニー株式会社 ロボット制御装置およびロボット制御方法、記録媒体、並びにプログラム
US7117144B2 (en) * 2001-03-31 2006-10-03 Microsoft Corporation Spell checking for text input via reduced keypad keys
DE10117875C1 (de) * 2001-04-10 2003-01-30 Generis Gmbh Verfahren, Vorrichtung zum Auftragen von Fluiden sowie Verwendung einer solchen Vorrichtung
JP4655184B2 (ja) 2001-08-01 2011-03-23 ソニー株式会社 音声認識装置および方法、記録媒体、並びにプログラム
JP3859474B2 (ja) * 2001-09-06 2006-12-20 富士ゼロックス株式会社 符号変換装置、符号化装置および画像出力装置ならびにこれらの方法
US6985861B2 (en) * 2001-12-12 2006-01-10 Hewlett-Packard Development Company, L.P. Systems and methods for combining subword recognition and whole word recognition of a spoken input
US20040157919A1 (en) * 2002-01-25 2004-08-12 Yong-Qian Wu Trisubstituted carbocyclic cyclophilin binding compounds and their use
US6697738B2 (en) * 2002-02-22 2004-02-24 Halliburton Energy Services, Inc. Method for selection of cementing composition
JP4115723B2 (ja) 2002-03-18 2008-07-09 独立行政法人産業技術総合研究所 音声入力によるテキスト検索装置
JP3911178B2 (ja) 2002-03-19 2007-05-09 シャープ株式会社 音声認識辞書作成装置および音声認識辞書作成方法、音声認識装置、携帯端末器、音声認識システム、音声認識辞書作成プログラム、並びに、プログラム記録媒体
JP2003280683A (ja) 2002-03-20 2003-10-02 Toshiba Corp 音声認識装置、音声認識装置における音声認識制御方法、音声処理に関する辞書管理装置
US7089188B2 (en) * 2002-03-27 2006-08-08 Hewlett-Packard Development Company, L.P. Method to expand inputs for word or document searching
US20050131559A1 (en) * 2002-05-30 2005-06-16 Jonathan Kahn Method for locating an audio segment within an audio file
JP2004157919A (ja) 2002-11-08 2004-06-03 Nec Corp 入力装置及び音声入力方法と装置並びにプログラム
JP4072718B2 (ja) 2002-11-21 2008-04-09 ソニー株式会社 音声処理装置および方法、記録媒体並びにプログラム
JP2004341293A (ja) 2003-05-16 2004-12-02 Toyota Motor Corp 音声を文字データに変換する装置と方法とそのためのプログラムと対話装置
US7363228B2 (en) * 2003-09-18 2008-04-22 Interactive Intelligence, Inc. Speech recognition system and method
JP2005227510A (ja) * 2004-02-12 2005-08-25 Ntt Docomo Inc 音声認識装置及び音声認識方法
JP4189336B2 (ja) * 2004-02-25 2008-12-03 株式会社東芝 音声情報処理システム、音声情報処理方法及びプログラム
JP2005331882A (ja) 2004-05-21 2005-12-02 Pioneer Electronic Corp 音声認識装置、音声認識方法、および音声認識プログラム
JP4301102B2 (ja) 2004-07-22 2009-07-22 ソニー株式会社 音声処理装置および音声処理方法、プログラム、並びに記録媒体
US7529668B2 (en) * 2004-08-03 2009-05-05 Sony Corporation System and method for implementing a refined dictionary for speech recognition
US20060038895A1 (en) * 2004-08-19 2006-02-23 Nissan Motor, Co., Ltd. Image processing device
US7406408B1 (en) * 2004-08-24 2008-07-29 The United States Of America As Represented By The Director, National Security Agency Method of recognizing phones in speech of any language
US7430503B1 (en) * 2004-08-24 2008-09-30 The United States Of America As Represented By The Director, National Security Agency Method of combining corpora to achieve consistency in phonetic labeling
JP4604178B2 (ja) 2004-11-22 2010-12-22 独立行政法人産業技術総合研究所 音声認識装置及び方法ならびにプログラム
US20060149551A1 (en) * 2004-12-22 2006-07-06 Ganong William F Iii Mobile dictation correction user interface
US7412387B2 (en) * 2005-01-18 2008-08-12 International Business Machines Corporation Automatic improvement of spoken language
JP4736478B2 (ja) 2005-03-07 2011-07-27 日本電気株式会社 音声書き起こし支援装置およびその方法ならびにプログラム
ATE446609T1 (de) * 2005-04-25 2009-11-15 Electrolux Home Prod Corp Bedienungsfeld mit beleuchteten kapazitiven berührungsschaltern
US20070106685A1 (en) * 2005-11-09 2007-05-10 Podzinger Corp. Method and apparatus for updating speech recognition databases and reindexing audio and video content using the same
TWI340330B (en) * 2005-11-14 2011-04-11 Ind Tech Res Inst Method for text-to-pronunciation conversion
US20070118364A1 (en) * 2005-11-23 2007-05-24 Wise Gerald B System for generating closed captions
US8204748B2 (en) * 2006-05-02 2012-06-19 Xerox Corporation System and method for providing a textual representation of an audio message to a mobile device
WO2008066166A1 (fr) * 2006-11-30 2008-06-05 National Institute Of Advanced Industrial Science And Technology Système de site web pour recherche de données vocales
US8620658B2 (en) * 2007-04-16 2013-12-31 Sony Corporation Voice chat system, information processing apparatus, speech recognition method, keyword data electrode detection method, and program for speech recognition

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10496745B2 (en) 2016-09-06 2019-12-03 Kabushiki Kaisha Toshiba Dictionary updating apparatus, dictionary updating method and computer program product

Also Published As

Publication number Publication date
US8401847B2 (en) 2013-03-19
GB2457855A (en) 2009-09-02
WO2008069139A1 (ja) 2008-06-12
GB0911367D0 (en) 2009-08-12
US20100057457A1 (en) 2010-03-04
GB2457855B (en) 2011-01-12
JP2008158510A (ja) 2008-07-10

Similar Documents

Publication Publication Date Title
JP5366169B2 (ja) 音声認識システム及び音声認識システム用プログラム
JP5599662B2 (ja) 統計的な方法を用いて漢字を自国語の発音列に変換するシステムおよび方法
CN108711422B (zh) 语音识别方法、装置、计算机可读存储介质和计算机设备
US7848926B2 (en) System, method, and program for correcting misrecognized spoken words by selecting appropriate correction word from one or more competitive words
JP5207642B2 (ja) 語句として新たに認識するべき文字列を取得するためのシステム、方法及びコンピュータプログラム
JP5440177B2 (ja) 単語カテゴリ推定装置、単語カテゴリ推定方法、音声認識装置、音声認識方法、プログラム、および記録媒体
JP2002258890A (ja) 音声認識装置、コンピュータ・システム、音声認識方法、プログラムおよび記録媒体
JP7266683B2 (ja) 音声対話に基づく情報検証方法、装置、デバイス、コンピュータ記憶媒体、およびコンピュータプログラム
JP2011002656A (ja) 音声認識結果修正候補検出装置、音声書き起こし支援装置、方法及びプログラム
US20180033426A1 (en) Acoustic model training using corrected terms
US20020065653A1 (en) Method and system for the automatic amendment of speech recognition vocabularies
WO2010044123A1 (ja) 検索装置、検索用索引作成装置、および検索システム
Hifny Restoration of Arabic diacritics using dynamic programming
EP4352725A1 (en) Error correction in speech recognition
KR20060067096A (ko) N-gram 네트워크를 이용하는 한국어 연속음성인식의언어모델 적응장치 및 그 방법
Liang et al. Simple gesture-based error correction interface for smartphone speech recognition.
JP2001092494A (ja) 音声認識装置、音声認識方法および音声認識プログラム記録媒体
JP4089861B2 (ja) 音声認識文章入力装置
US7272560B2 (en) Methodology for performing a refinement procedure to implement a speech recognition dictionary
JP5004863B2 (ja) 音声検索装置および音声検索方法
JP2000056795A (ja) 音声認識装置
JP2002140094A (ja) 音声認識装置、音声認識方法および音声認識プログラムを記録したコンピュータ読取可能な記録媒体
JP5252596B2 (ja) 文字認識装置、文字認識方法及びプログラム
JP5124012B2 (ja) 音声認識装置及び音声認識プログラム
JP5238395B2 (ja) 言語モデル作成装置および言語モデル作成方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110621

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110712

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110912

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120822

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20120830

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20121102

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130905

R150 Certificate of patent or registration of utility model

Ref document number: 5366169

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250