JP2011039468A - 電子辞書で音声認識を用いた単語探索装置及びその方法 - Google Patents
電子辞書で音声認識を用いた単語探索装置及びその方法 Download PDFInfo
- Publication number
- JP2011039468A JP2011039468A JP2009234214A JP2009234214A JP2011039468A JP 2011039468 A JP2011039468 A JP 2011039468A JP 2009234214 A JP2009234214 A JP 2009234214A JP 2009234214 A JP2009234214 A JP 2009234214A JP 2011039468 A JP2011039468 A JP 2011039468A
- Authority
- JP
- Japan
- Prior art keywords
- word
- pronunciation
- dictionary
- speech
- speech recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000012549 training Methods 0.000 claims description 29
- 238000007781 pre-processing Methods 0.000 claims description 11
- 239000000284 extract Substances 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 3
- 230000005236 sound signal Effects 0.000 claims 5
- 238000005070 sampling Methods 0.000 claims 2
- 238000005516 engineering process Methods 0.000 abstract description 10
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000013179 statistical model Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
- G10L15/187—Phonemic context, e.g. pronunciation rules, phonotactical constraints or phoneme n-grams
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/14—Speech classification or search using statistical models, e.g. Hidden Markov Models [HMMs]
- G10L15/142—Hidden Markov Models [HMMs]
- G10L15/144—Training of HMMs
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
- G10L2015/025—Phonemes, fenemes or fenones being the recognition units
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Probability & Statistics with Applications (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
【解決手段】本発明は電子辞書で音声認識を用いた単語探索技術に関するものであり、音声認識誤りが発生しても多数の音声認識候補(N−best)に対する認識結果を出力してユーザがそのうちの1つを選択できるようにすることで、音声認識誤りの不便さを軽減し、特に英韓辞書の検索において、本来の辞書的単語の発音はもちろん、発音を知らない場合にアルファベットの連続発音の組み合わせをその単語の発音として認識できるように発音の変移を多重で提供してユーザが発音を知らない英文単語でも音声で容易に検索することを特徴とする。本発明によれば、既存の英語アルファベット単位の音声認識方法に比べて高い正確率で英韓辞書の検索を非常に迅速に行うことができ、音声認識誤りが発生してもN−best候補から正解を選択でき、電子辞書のユーザ利便性を大幅に改善できる。
【選択図】図2
Description
図1は、本発明の実施形態による音声認識用電子辞書機器の構造を示すブロック図である。
102 音声入力部
104 音声認識部
106 メモリ
108 ディスプレイ部
300 訓練部
302 スピーチコーパス情報部
304 特徴抽出部
306 HMM訓練部
308 メモリ(多重発音辞書)
310 音響モデル格納部
500 デコード部
502 音響区画検出部
504 特徴パラメータ抽出部
510 前処理部
512 単語ネットワーク構成部
514 単語探索部
516 認識結果出力部
Claims (20)
- 単語の辞書的発音又は単語を構成する文字別連続発音の組み合わせの音声信号から音素列を抽出する前処理部と、
既に格納された多重発音辞書の発音列と前記抽出された音素列をマッチングしてネットワークを構成する単語ネットワーク構成部と、
スピーチコーパスから前記音声信号の特徴を抽出して前記多重発音辞書を参照してトライフォン単位の音響モデルをモデリングする訓練部と、
前記構成されたネットワークと、前記訓練部から伝達された前記トライフォン単位の音響モデルを参照して前記音声信号に該当する単語を探索する単語探索部と
を含む電子辞書で音声認識を用いた単語探索装置。 - 前記単語探索装置は、
前記単語探索部の探索結果、多数の音声認識候補を最上位の認識結果の順に既に設定された個数だけ出力する認識結果出力部を更に含むことを特徴とする請求項1に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記前処理部は、
前記音声信号の標本化及び終点の検出を行う音声区間検出器と、
前記検出された情報に基づいて前記音声信号の特徴を抽出し、音声別区間を検出して前記音素列を形成する特徴パラメータ抽出器と
を含むことを特徴とする請求項1に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記訓練部は、
スピーチコーパスから前記音声信号のパターン及び音素列の特徴を抽出する特徴抽出部と、
前記抽出された特徴と、前記多重発音辞書情報による副単語モデルの結合を通じて隠れマルコフモデル(HMM)を構成し、これをトライフォン単位で学習させて前記トライフォン単位の音響モデルをモデリングするHMM訓練部と、
前記モデリングされたトライフォン単位の音響モデルを格納する音響モデル格納部と
を含むことを特徴とする請求項1に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記多重発音辞書は、
各言語別単語に対する辞書的発音及び該当単語の文字別連続発音を含むことを特徴とする請求項4に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記音声信号は、
英韓辞書の検索のための英単語の辞書的発音又はアルファベットの連続発音の組み合わせであることを特徴とする請求項1に記載の電子辞書で音声認識を用いた単語探索装置。 - 単語の辞書的発音又は単語を構成する文字別連続発音の組み合わせの音声信号の入力を受ける音声入力部と、
前記入力された音声信号から音素列を抽出し、これを既に格納された多重発音辞書の発音列とマッチングした後、トライフォン単位の音響モデルを参照して前記音声信号に該当する単語を探索する音声認識部と
を含む電子辞書で音声認識を用いた単語探索装置。 - 前記音声認識部は、
スピーチコーパスから音声に対する特徴を抽出し、前記多重発音辞書を参照して前記トライフォン単位の音響モデルをモデリングする訓練部と、
前記音声信号から前記音素列を抽出し、前記前記抽出された音素列と前記多重発音辞書をマッチングして単語ネットワークを構成し、前記トライフォン単位の音響モデルを参照して探索された多数の音声認識候補を最上位の認識結果の順に既に設定された個数だけ出力するデコード部と
を含むことを特徴とする請求項7に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記音声信号は、
英韓辞書の検索のための英単語の辞書的発音又はアルファベットの連続発音組み合わせであることを特徴とする請求項7に記載の電子辞書で音声認識を用いた単語探索装置。 - 前記単語探索装置は、
前記探索された単語のうちのいずれか1つの単語が選択された場合、前記選択された単語の辞書情報が提供されることを特徴とする請求項7に記載の電子辞書で音声認識を用いた単語探索装置。 - 単語の辞書的発音又は単語を構成する文字別連続発音の組み合わせの音声信号から音素列を抽出する前処理工程と、
既に格納された多重発音辞書情報から発音列の伝達を受けて前記抽出された音素列とのマッチングを通じて単語ネットワークを構成する工程と、
前記構成された単語ネットワークと、トライフォン単位の音響モデルを参照して前記音声信号に該当する単語を探索する工程と
を含む電子辞書で音声認識を用いた単語探索方法。 - 前記単語探索方法は、
前記探索された多数の音声認識候補を最上位の認識結果の順に既に設定された個数だけ出力する工程を更に含むことを特徴とする請求項11に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記前処理過程は、
前記音声信号の標本化及び終点の検出を行う工程と、
前記検出された情報に基づいて前記音声信号の特徴抽出及び音声別区間を検出して前記音素列を形成する工程と
を含むことを特徴とする請求項11に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記単語探索方法は、
スピーチコーパスから各音声のパターン及び音素列の特徴を抽出する工程と、
前記抽出された特徴と、前記多重発音辞書情報による副単語モデルの結合を通じて隠れマルコフモデル(HMM)を構成し、これをトライフォン単位で学習させて前記トライフォン単位の音響モデルをモデリングする工程と、
前記モデリングされたトライフォン単位の音響モデルを格納する工程と
を更に含むことを特徴とする請求項11に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記多重発音辞書は、
各言語別単語に対する辞書的発音及び該当単語の文字別連続発音を含むことを特徴とする請求項14に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記音声信号は、
英韓辞書の検索のための英単語の辞書的発音又はアルファベットの連続発音の組み合わせで入力されることを特徴とする請求項11に記載の電子辞書で音声認識を用いた単語探索方法。 - 単語の辞書的発音又は単語を構成する文字別連続発音の組み合わせの音声信号の入力を受ける工程と、
前記入力された音声信号から音素列を抽出し、これを既に格納された多重発音辞書情報の発音列とマッチングした後、トライフォン単位の音響モデルを参照して前記音声信号に該当する単語を探索する工程と、
前記探索された単語をディスプレイ部を通じて出力する工程と
を含む電子辞書で音声認識を用いた単語探索方法。 - 前記単語を探索する工程は、
スピーチコーパスから音声の特徴を抽出し、前記多重発音辞書を参照して前記トライフォン単位の音響モデルをモデリングする工程と、
前記音声信号から音素列を抽出し、前記抽出された音素列と前記多重発音辞書をマッチングして単語ネットワークを構成し、前記トライフォン単位の音響モデルを参照して探索された多数の音声認識候補を最上位の認識結果の順に既に設定された個数だけ出力する工程と
を含むことを特徴とする請求項17に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記音声信号は、
英韓辞書の検索のための英単語の辞書的発音又はアルファベットの連続発音組み合わせであることを特徴とする請求項17に記載の電子辞書で音声認識を用いた単語探索方法。 - 前記単語探索方法は、
前記探索された単語のうちのいずれか1つの単語が選択された場合、前記ディスプレイ部を通じて前記選択された単語の辞書情報を提供することを特徴とする請求項17に記載の電子辞書で音声認識を用いた単語探索方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090075145A KR101250897B1 (ko) | 2009-08-14 | 2009-08-14 | 전자사전에서 음성인식을 이용한 단어 탐색 장치 및 그 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011039468A true JP2011039468A (ja) | 2011-02-24 |
Family
ID=43767270
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009234214A Pending JP2011039468A (ja) | 2009-08-14 | 2009-10-08 | 電子辞書で音声認識を用いた単語探索装置及びその方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2011039468A (ja) |
KR (1) | KR101250897B1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105844978A (zh) * | 2016-05-18 | 2016-08-10 | 华中师范大学 | 一种小学语文词语学习辅助语音机器人装置及其工作方法 |
JP2017058545A (ja) * | 2015-09-17 | 2017-03-23 | 本田技研工業株式会社 | 音声処理装置および音声処理方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102117082B1 (ko) * | 2014-12-29 | 2020-05-29 | 삼성전자주식회사 | 음성 인식 방법 및 음성 인식 장치 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08123472A (ja) * | 1994-10-28 | 1996-05-17 | Mitsubishi Electric Corp | 音声認識装置及び該装置の構文制御グラフの生成方法 |
JPH1165590A (ja) * | 1997-08-25 | 1999-03-09 | Nec Corp | 音声認識ダイアル装置 |
JPH11344990A (ja) * | 1998-04-29 | 1999-12-14 | Matsushita Electric Ind Co Ltd | 綴り言葉に対する複数発音を生成し評価する判断ツリ―を利用する方法及び装置 |
JP2000267693A (ja) * | 1999-03-12 | 2000-09-29 | Fuji Xerox Co Ltd | 音声処理装置及び索引作成装置 |
JP2000357167A (ja) * | 1999-06-15 | 2000-12-26 | Ricoh Co Ltd | 音声入出力機能付き翻訳機 |
JP2001343995A (ja) * | 2000-05-31 | 2001-12-14 | Toshiba Corp | 音声入力処理装置、音声入力処理方法及び音声入力処理プログラムを記録した記録媒体 |
JP2002073081A (ja) * | 2000-08-28 | 2002-03-12 | Hitachi Ulsi Systems Co Ltd | 音声認識方法と電子装置 |
JP2004309928A (ja) * | 2003-04-09 | 2004-11-04 | Casio Comput Co Ltd | 音声認識装置、電子辞書装置、音声認識方法、検索方法、及びプログラム |
JP2005227794A (ja) * | 2002-11-21 | 2005-08-25 | Matsushita Electric Ind Co Ltd | 標準モデル作成装置及び標準モデル作成方法 |
JP2006048058A (ja) * | 2004-08-06 | 2006-02-16 | Motorola Inc | 多言語による名称の音声認識のための方法とシステム |
JP2007219286A (ja) * | 2006-02-17 | 2007-08-30 | Tokyo Institute Of Technology | 音声のスタイル検出装置、その方法およびそのプログラム |
WO2008105263A1 (ja) * | 2007-02-28 | 2008-09-04 | Nec Corporation | 重み係数学習システム及び音声認識システム |
JP2008268571A (ja) * | 2007-04-20 | 2008-11-06 | Xanavi Informatics Corp | 音声認識装置、その音声認識方法 |
JP2008275731A (ja) * | 2007-04-26 | 2008-11-13 | Asahi Kasei Corp | テキスト発音記号変換辞書作成装置、認識語彙辞書作成装置、及び音声認識装置 |
JP2009080309A (ja) * | 2007-09-26 | 2009-04-16 | Toshiba Corp | 音声認識装置、音声認識方法、音声認識プログラム、及び音声認識プログラムを記録した記録媒体 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100736496B1 (ko) * | 2001-06-26 | 2007-07-06 | 엘지전자 주식회사 | 연속 음성인식기의 성능 개선 방법 |
KR101424193B1 (ko) * | 2007-12-10 | 2014-07-28 | 광주과학기술원 | 타 언어권 화자음성에 대한 음성인식 시스템의 성능 향상을위한 비직접적 데이터 기반 발음변이 모델링 시스템 및방법 |
-
2009
- 2009-08-14 KR KR1020090075145A patent/KR101250897B1/ko active IP Right Grant
- 2009-10-08 JP JP2009234214A patent/JP2011039468A/ja active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08123472A (ja) * | 1994-10-28 | 1996-05-17 | Mitsubishi Electric Corp | 音声認識装置及び該装置の構文制御グラフの生成方法 |
JPH1165590A (ja) * | 1997-08-25 | 1999-03-09 | Nec Corp | 音声認識ダイアル装置 |
JPH11344990A (ja) * | 1998-04-29 | 1999-12-14 | Matsushita Electric Ind Co Ltd | 綴り言葉に対する複数発音を生成し評価する判断ツリ―を利用する方法及び装置 |
JP2000267693A (ja) * | 1999-03-12 | 2000-09-29 | Fuji Xerox Co Ltd | 音声処理装置及び索引作成装置 |
JP2000357167A (ja) * | 1999-06-15 | 2000-12-26 | Ricoh Co Ltd | 音声入出力機能付き翻訳機 |
JP2001343995A (ja) * | 2000-05-31 | 2001-12-14 | Toshiba Corp | 音声入力処理装置、音声入力処理方法及び音声入力処理プログラムを記録した記録媒体 |
JP2002073081A (ja) * | 2000-08-28 | 2002-03-12 | Hitachi Ulsi Systems Co Ltd | 音声認識方法と電子装置 |
JP2005227794A (ja) * | 2002-11-21 | 2005-08-25 | Matsushita Electric Ind Co Ltd | 標準モデル作成装置及び標準モデル作成方法 |
JP2004309928A (ja) * | 2003-04-09 | 2004-11-04 | Casio Comput Co Ltd | 音声認識装置、電子辞書装置、音声認識方法、検索方法、及びプログラム |
JP2006048058A (ja) * | 2004-08-06 | 2006-02-16 | Motorola Inc | 多言語による名称の音声認識のための方法とシステム |
JP2007219286A (ja) * | 2006-02-17 | 2007-08-30 | Tokyo Institute Of Technology | 音声のスタイル検出装置、その方法およびそのプログラム |
WO2008105263A1 (ja) * | 2007-02-28 | 2008-09-04 | Nec Corporation | 重み係数学習システム及び音声認識システム |
JP2008268571A (ja) * | 2007-04-20 | 2008-11-06 | Xanavi Informatics Corp | 音声認識装置、その音声認識方法 |
JP2008275731A (ja) * | 2007-04-26 | 2008-11-13 | Asahi Kasei Corp | テキスト発音記号変換辞書作成装置、認識語彙辞書作成装置、及び音声認識装置 |
JP2009080309A (ja) * | 2007-09-26 | 2009-04-16 | Toshiba Corp | 音声認識装置、音声認識方法、音声認識プログラム、及び音声認識プログラムを記録した記録媒体 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017058545A (ja) * | 2015-09-17 | 2017-03-23 | 本田技研工業株式会社 | 音声処理装置および音声処理方法 |
CN105844978A (zh) * | 2016-05-18 | 2016-08-10 | 华中师范大学 | 一种小学语文词语学习辅助语音机器人装置及其工作方法 |
Also Published As
Publication number | Publication date |
---|---|
KR101250897B1 (ko) | 2013-04-04 |
KR20110017600A (ko) | 2011-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100679042B1 (ko) | 음성인식 방법 및 장치, 이를 이용한 네비게이션 시스템 | |
US5787230A (en) | System and method of intelligent Mandarin speech input for Chinese computers | |
US6910012B2 (en) | Method and system for speech recognition using phonetically similar word alternatives | |
US9640175B2 (en) | Pronunciation learning from user correction | |
CN106663424B (zh) | 意图理解装置以及方法 | |
KR100769029B1 (ko) | 다언어의 이름들의 음성 인식을 위한 방법 및 시스템 | |
JP4734155B2 (ja) | 音声認識装置、音声認識方法および音声認識プログラム | |
JP6284462B2 (ja) | 音声認識方法、及び音声認識装置 | |
JP6245846B2 (ja) | 音声認識における読み精度を改善するシステム、方法、およびプログラム | |
Kumar et al. | Development of Indian language speech databases for large vocabulary speech recognition systems | |
US20090240499A1 (en) | Large vocabulary quick learning speech recognition system | |
US20070016420A1 (en) | Dictionary lookup for mobile devices using spelling recognition | |
JP2016521383A (ja) | 少なくとも一つの意味論的単位の集合を改善するための方法、装置およびコンピュータ読み取り可能な記録媒体 | |
US20120221335A1 (en) | Method and apparatus for creating voice tag | |
Fellbaum et al. | Principles of electronic speech processing with applications for people with disabilities | |
JP4966324B2 (ja) | 音声翻訳装置、および方法 | |
US20040006469A1 (en) | Apparatus and method for updating lexicon | |
KR102069697B1 (ko) | 자동 통역 장치 및 방법 | |
JP2011039468A (ja) | 電子辞書で音声認識を用いた単語探索装置及びその方法 | |
JP4230142B2 (ja) | 悪環境下でのキーパッド/音声を用いたハイブリッドな東洋文字認識技術 | |
KR100848148B1 (ko) | 음절 단위의 음성 인식 장치, 음절 단위의 음성 인식을이용한 문자 입력 장치, 그 방법 및 기록 매체 | |
JP2016161935A (ja) | 少なくとも一つの意味論的単位の集合を音声を用いて改善するための方法、装置およびコンピュータ読み取り可能な記録媒体 | |
JP2011007862A (ja) | 音声認識装置、音声認識プログラム、および音声認識方法 | |
Goto | Speech Completion: New Speech Interface with On-demand Completion Assistance Masataka Goto, Katunobu Itou, Tomoyosi Akiba, and Satoru Hayamizu National Institute of Advanced Industrial Science and Technology (former Electrotechnical Laboratory) 1-1-1 Umezono, Tsukuba, Ibaraki 305-8568, JAPAN. | |
Syadida et al. | Sphinx4 for indonesian continuous speech recognition system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111125 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120518 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20121012 |