JP4810789B2 - 言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム - Google Patents
言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム Download PDFInfo
- Publication number
- JP4810789B2 JP4810789B2 JP2003335977A JP2003335977A JP4810789B2 JP 4810789 B2 JP4810789 B2 JP 4810789B2 JP 2003335977 A JP2003335977 A JP 2003335977A JP 2003335977 A JP2003335977 A JP 2003335977A JP 4810789 B2 JP4810789 B2 JP 4810789B2
- Authority
- JP
- Japan
- Prior art keywords
- word
- corpus
- language model
- class
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
前記各コーパス保持部に保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与する単語ID付与部と、
前記単語ID付与部により単語IDが付与された前記単語を保存する混合コーパス保持部と、前記混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与するクラスID付与部と、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習する言語モデル学習部と、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する言語スコア計算部と
を有する。
コンピュータにより、
言語データであるコーパスを保持する複数のコーパス保持部にそれぞれ保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与し、
前記単語IDが付与された前記単語を保存する混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与し、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習し、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する。
コンピュータに、
言語データであるコーパスを保持する複数のコーパス保持部にそれぞれ保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与する処理と、
前記単語IDが付与された前記単語を保存する混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与する処理と、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習する処理と、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する処理とを実行させる。
図1を参照すると、本発明の第一の実施の形態は、コーパスAを保持するコーパスA保持部101、コーパスBを保持するコーパスB保持部102と、各コーパスのための必要単語選出部103、必要単語選出部104と、各コーパスの単語を識別するための単語IDを付与する単語ID付与部105、単語ID付与部106と、混合コーパス保持部107と、クラスID付与部108と、言語モデル学習部109と、単語言語モデル保持部110と、平滑化情報保持部112と、クラス言語モデル保持部111と、認識用辞書保持部113と、言語スコア計算部114と、音声照合部115と、音声分析部116と、音響モデル保持部117とから構成されている。
言語スコア計算部114は、音声照合部115の要求した単語連鎖に対応する言語スコアを、まず単語言語モデル保持部110に探しに行き、発見すればその値を返す。発見できなければ単語連鎖に対応するクラス言語モデルをクラス言語モデル保持部111から読み出し、対応するバックオフ係数を平滑化情報保持部112から読み出し、両者を掛け算して音声照合部115に返す。音声照合部115は受け取ったスコアを当該単語連鎖に対するスコアとして照合スコアに加える。
第三の実施の形態の構成は本発明の第一の実施の形態と同じで図1のように構成されるので、構成の説明は省略する。ただし、言語モデル学習部109の機能が下記のように第1の実施の形態と異なる。
本発明の第三の実施の形態の動作について説明すると、言語モデル学習部109が混合コーパス保持部107の単語列のうち、コーパスB保持部102の単語からのみ単語言語モデルを推定し、単語言語モデル保持部110に格納し、対応する平滑化情報を平滑化情報保持部112に格納することのみが第一の実施の形態の動作と異なる。
102 コーパスB保持部
103 必要単語選出部
104 必要単語選出部
105 単語ID付与部
106 単語ID付与部
107 混合コーパス保持部
108 クラスID付与部
109 言語モデル学習部
110 単語言語モデル保持部
111 クラス言語モデル保持部
112 平滑化情報保持部
113 認識用辞書保持部
114 言語スコア計算部
115 音声照合部
116 音声分析部
117 音響モデル保持部
201 コーパスA保持部
202 コーパスB保持部
203 共通単語ID付与部
204 単語ID付与部
205 単語ID付与部
206 混合コーパス保持部
207 言語モデル学習部
208 言語モデル保持部
209 認識用辞書保持部
210 言語スコア計算部
211 音声照合部
212 音声分析部
213 音響モデル保持部
Claims (10)
- 言語データであるコーパスを保持する複数のコーパス保持部と、
前記各コーパス保持部に保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与する単語ID付与部と、
前記単語ID付与部により単語IDが付与された前記単語を保存する混合コーパス保持部と、
前記混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与するクラスID付与部と、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習する言語モデル学習部と、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する言語スコア計算部と
を有する言語モデル学習システム。 - 前記単語IDを付与する単語を前記コーパス保持部から選び出す必要単語選出部をさらに有する請求項1記載の言語モデル学習システム。
- 前記必要単語選出部はコーパス毎に決められた出現頻度より多く出現する単語連鎖を抜き出す請求項2記載の言語モデル学習システム。
- 請求項1又は請求項2又は請求項3記載の言語モデル学習システムにより学習した言語モデルを用いて音声認識を行う音声認識システム。
- コンピュータにより、
言語データであるコーパスを保持する複数のコーパス保持部にそれぞれ保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与し、
前記単語IDが付与された前記単語を保存する混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与し、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習し、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する言語モデル学習方法。 - コンピュータにより、
前記単語IDを付与する単語を前記コーパス保持部から選び出し当該選出した単語に前記単語IDを付与する請求項5記載の言語モデル学習方法。 - コンピュータにより、
コーパス毎に決められた出現頻度より多く出現する単語連鎖を抜き出し当該単語連鎖に基づいて前記単語IDを付与する単語を前記コーパス保持部から選び出す請求項6記載の言語モデル学習方法。 - コンピュータに、
言語データであるコーパスを保持する複数のコーパス保持部にそれぞれ保持されているコーパスに含まれている単語に対して、保持されている前記コーパス保持部に固有の単語IDを付与する処理と、
前記単語IDが付与された前記単語を保存する混合コーパス保持部に保存された単語に対して、品詞をクラスとするクラスIDを付与する処理と、
前記混合コーパス保持部に保存されている前記単語に付与されている前記単語IDに基づいて単語言語モデルを学習し、前記混合コーパス保持部に保存されている前記単語に付与されている前記クラスIDに基づいてクラス言語モデルを学習する処理と、
前記クラス言語モデルよりも前記単語言語モデルを優先的に利用して言語スコアを計算する処理とを実行させるプログラム。 - コンピュータに、
前記単語IDを付与する単語を前記コーパス保持部から選び出し当該選出した単語に前記単語IDを付与する処理を実行させる請求項8記載のプログラム。 - コンピュータに、
コーパス毎に決められた出現頻度より多く出現する単語連鎖を抜き出し当該単語連鎖に基づいて前記単語IDを付与する単語を前記コーパス保持部から選び出す処理を実行させる請求項9記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003335977A JP4810789B2 (ja) | 2003-09-26 | 2003-09-26 | 言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003335977A JP4810789B2 (ja) | 2003-09-26 | 2003-09-26 | 言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005106853A JP2005106853A (ja) | 2005-04-21 |
JP4810789B2 true JP4810789B2 (ja) | 2011-11-09 |
Family
ID=34532263
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003335977A Expired - Fee Related JP4810789B2 (ja) | 2003-09-26 | 2003-09-26 | 言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4810789B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5170449B2 (ja) * | 2009-02-17 | 2013-03-27 | 日本電気株式会社 | 検出装置、音声認識装置、検出方法、及びプログラム |
JP5274324B2 (ja) * | 2009-03-19 | 2013-08-28 | 株式会社エヌ・ティ・ティ・ドコモ | 言語モデル特定装置、言語モデル特定方法、音響モデル特定装置、および音響モデル特定方法 |
CN103871404B (zh) * | 2012-12-13 | 2017-04-12 | 北京百度网讯科技有限公司 | 一种语言模型的训练方法、查询方法和对应装置 |
CN115392189B (zh) * | 2022-10-28 | 2023-04-07 | 北京砍石高科技有限公司 | 多语种混合语料的生成方法及装置、训练方法及装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2938866B1 (ja) * | 1998-08-28 | 1999-08-25 | 株式会社エイ・ティ・アール音声翻訳通信研究所 | 統計的言語モデル生成装置及び音声認識装置 |
JP2001034287A (ja) * | 1999-07-15 | 2001-02-09 | Matsushita Electric Ind Co Ltd | 言語モデルにおけるクラス決定方法、音声認識装置及びプログラム記録媒体 |
JP2002229588A (ja) * | 2001-01-29 | 2002-08-16 | Mitsubishi Electric Corp | 統計的言語モデル生成装置、音声認識装置、及び統計的言語モデル生成方法並びに記録媒体 |
JP4067776B2 (ja) * | 2001-03-13 | 2008-03-26 | 三菱電機株式会社 | 言語モデル構成装置及び音声認識装置 |
JP3961780B2 (ja) * | 2001-05-15 | 2007-08-22 | 三菱電機株式会社 | 言語モデル学習装置およびそれを用いた音声認識装置 |
JP2003099087A (ja) * | 2001-09-25 | 2003-04-04 | Canon Inc | 自然言語処理のための解析用辞書作成装置および方法、ならびにプログラム |
-
2003
- 2003-09-26 JP JP2003335977A patent/JP4810789B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005106853A (ja) | 2005-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6493866B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR102447513B1 (ko) | 점증적 대화지식 자가학습 기반 대화장치 및 그 방법 | |
JP4737990B2 (ja) | 語彙強勢予測 | |
JP4849663B2 (ja) | 会話制御装置 | |
US7634406B2 (en) | System and method for identifying semantic intent from acoustic information | |
JP3429184B2 (ja) | テキスト構造解析装置および抄録装置、並びにプログラム記録媒体 | |
JP4267385B2 (ja) | 統計的言語モデル生成装置、音声認識装置、統計的言語モデル生成方法、音声認識方法、およびプログラム | |
JP2004341520A (ja) | 音声認識方法 | |
JP2007115142A (ja) | 会話制御装置 | |
KR101669339B1 (ko) | 채팅 말뭉치 구축 방법 및 채팅 말뭉치 구축 시스템 | |
EP3425629B1 (en) | Speech recognition system, terminal device, and dictionary management method | |
Sang et al. | Applying system combination to base noun phrase identification | |
JP2004094257A (ja) | 音声処理のためのデシジョン・ツリーの質問を生成するための方法および装置 | |
JP4820240B2 (ja) | 単語分類装置及び音声認識装置及び単語分類プログラム | |
KR100895940B1 (ko) | 문법 저작에서의 세그먼테이션 모호성의 자동 해결 | |
JP4810789B2 (ja) | 言語モデル学習システム、音声認識システム、言語モデル学習方法、及びプログラム | |
US10248649B2 (en) | Natural language processing apparatus and a natural language processing method | |
JP4756499B2 (ja) | 音声認識結果の検査装置及びコンピュータプログラム | |
JP4220151B2 (ja) | 音声対話装置 | |
JP4521631B2 (ja) | 木構造辞書を記録した記憶媒体、及び木構造辞書の言語スコアテーブル作成プログラム | |
JP2008293098A (ja) | 応答スコア情報生成装置、対話処理装置 | |
Filisko et al. | Learning decision models in spoken dialogue systems via user simulation | |
JP2000222406A (ja) | 音声認識翻訳装置及び方法 | |
JP2008242059A (ja) | 音声認識辞書作成装置および音声認識装置 | |
JPH11202886A (ja) | 音声認識装置、単語認識装置、単語認識方法、及び単語認識プログラムを記録した記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20050315 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060817 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20070118 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20080611 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20090508 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090825 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090908 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100709 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110215 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110415 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20110705 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110726 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110808 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140902 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |