JP6367993B1 - Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program - Google Patents
Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program Download PDFInfo
- Publication number
- JP6367993B1 JP6367993B1 JP2017026705A JP2017026705A JP6367993B1 JP 6367993 B1 JP6367993 B1 JP 6367993B1 JP 2017026705 A JP2017026705 A JP 2017026705A JP 2017026705 A JP2017026705 A JP 2017026705A JP 6367993 B1 JP6367993 B1 JP 6367993B1
- Authority
- JP
- Japan
- Prior art keywords
- noise suppression
- parameter set
- suppression parameter
- speech recognition
- sound collection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
【課題】収音条件に基づいて雑音抑圧パラメータセットを設定することができる学習装置を提供する。【解決手段】音声ファイルと対応する正解文と収音条件とを対応付けて第1のエントリとして記憶する音声データベースを用い、特徴量と収音条件と雑音抑圧パラメータセットと精度情報を対応付けて第2のエントリとして音声認識結果データベースに記憶する音声認識結果データベース作成部と、指定された収音条件に基づいて音声認識結果データベースを検索し、検索された第2のエントリを特徴量に基づくグループ分け基準に従ってグループ分けし、最適雑音抑圧パラメータセットとグループ分け基準と収音条件を対応付けて第3のエントリとして切替規則データベースに記憶する雑音抑圧パラメータセット切替規則学習部を含む。【選択図】図1A learning apparatus capable of setting a noise suppression parameter set based on a sound collection condition is provided. A speech database that stores a correct sentence and sound collection conditions corresponding to a sound file in association with each other and stores them as a first entry, and associates feature amounts, sound collection conditions, noise suppression parameter sets, and accuracy information. A speech recognition result database creating unit for storing the second entry in the speech recognition result database, a search for the speech recognition result database based on the designated sound pickup condition, and a group based on the feature value for the searched second entry It includes a noise suppression parameter set switching rule learning unit that performs grouping according to the grouping criterion and stores the optimum noise suppression parameter set, the grouping criterion, and the sound collection condition in the switching rule database as a third entry in association with each other. [Selection] Figure 1
Description
本発明は、スマートフォン等への発話内容を文字に書き起こす音声認識サービスに関し、音声認識サービスを多様な環境下で提供できるようにするために、事前に各環境に適した雑音抑圧パラメータセットを決定するために用いる学習装置、雑音抑圧パラメータセット切替規則学習装置、音声認識装置、学習方法、雑音抑圧パラメータセット切替規則学習方法、音声認識方法、プログラムに関する。 The present invention relates to a speech recognition service for writing speech contents to a smartphone or the like into characters, and in order to provide the speech recognition service in various environments, a noise suppression parameter set suitable for each environment is determined in advance. learning device used to, noise suppression parameter set changeover rule learning device, a speech recognition apparatus, a learning method, a noise suppression parameter set changeover rule learning process, speech recognition method, and a program.
本技術分野の背景技術として例えば特許文献1がある。特許文献1のパラメータ決定装置は、音声のデータセットに対し、帯域ごとの雑音レベルを特徴量としてグループ分けを実施し、各グループに対して音声認識率が最大となる雑音抑圧パラメータセットを選択する。 For example, Patent Document 1 is a background art in this technical field. The parameter determination device of Patent Literature 1 performs grouping on a speech data set using a noise level for each band as a feature amount, and selects a noise suppression parameter set that maximizes the speech recognition rate for each group. .
最適な雑音抑圧パラメータセットは、音声信号の収音条件によって異なる場合がある。例えば収音した端末の機種が異なる場合は、マイクロホン素子やその構成が異なるため、雑音抑圧処理に最適なパラメータの値が大きく異なる可能性がある。従来技術では収音条件を考慮していなかったため、最適な雑音抑圧パラメータセットが選択されない可能性があった。 The optimal noise suppression parameter set may vary depending on the sound signal collection conditions. For example, if the terminal type that picks up the sound is different, the microphone element and its configuration are different, and therefore the parameter value optimal for the noise suppression processing may be greatly different. Since the conventional technology does not consider the sound collection condition, there is a possibility that the optimum noise suppression parameter set may not be selected.
そこで本発明では、収音条件に基づいて雑音抑圧パラメータセットを設定することができる学習装置を提供することを目的とする。 Therefore, an object of the present invention is to provide a learning device that can set a noise suppression parameter set based on sound collection conditions.
本発明の学習装置は、音声認識結果データベース作成部と、雑音抑圧パラメータセット切替規則学習部を含む。 The learning device of the present invention includes a speech recognition result database creation unit and a noise suppression parameter set switching rule learning unit.
音声認識結果データベース作成部は、音声ファイルと、音声ファイルに対応する正解文と、音声ファイルの収音時の条件を規定するラベルである収音条件とを対応付けて第1のエントリとして記憶する音声データベースを用い、音声ファイルの雑音の特性を規定する特徴量と、収音条件と、雑音抑圧に用いるパラメータのセットである雑音抑圧パラメータセットと、音声認識結果の精度を評価する値である精度情報を対応付けて第2のエントリとして音声認識結果データベースに記憶する処理を、複数の雑音抑圧パラメータセットからなる雑音抑圧パラメータセット群の、それぞれの雑音抑圧パラメータセットに対して実行する。 The speech recognition result database creation unit stores a speech file, a correct sentence corresponding to the speech file, and a sound collection condition that is a label that defines a condition at the time of sound collection of the speech file in association with each other, and stores them as a first entry. Using the speech database, features that define the noise characteristics of speech files, sound collection conditions, a noise suppression parameter set that is a set of parameters used for noise suppression, and accuracy that evaluates the accuracy of speech recognition results The process of associating information and storing it as a second entry in the speech recognition result database is executed for each noise suppression parameter set of the noise suppression parameter set group consisting of a plurality of noise suppression parameter sets.
雑音抑圧パラメータセット切替規則学習部は、指定された収音条件に基づいて音声認識結果データベースを検索し、検索された第2のエントリを特徴量に基づくグループ分け基準に従ってグループ分けし、各グループにおける精度情報が所定の条件を充たすように各グループにおいて選択された雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、グループ分け基準と、検索に用いた収音条件を対応付けて第3のエントリとして切替規則データベースに記憶する。 The noise suppression parameter set switching rule learning unit searches the speech recognition result database based on the specified sound pickup conditions, groups the searched second entries according to the grouping criterion based on the feature amount, As the third entry, the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so that the accuracy information satisfies a predetermined condition, the grouping criterion, and the sound collection condition used for the search are associated with each other. Store in the switching rule database.
本発明の学習装置によれば、収音条件に基づいて雑音抑圧パラメータセットを設定することができる。 According to the learning device of the present invention, it is possible to set a noise suppression parameter set based on sound collection conditions.
以下、本発明の実施の形態について、詳細に説明する。なお、同じ機能を有する構成部には同じ番号を付し、重複説明を省略する。 Hereinafter, embodiments of the present invention will be described in detail. In addition, the same number is attached | subjected to the structure part which has the same function, and duplication description is abbreviate | omitted.
<音声認識システム1>
図1を参照して、実施例1の音声認識システム1の構成を説明する。同図に示すように本実施例の音声認識システム1は、学習装置10と、音声データベース11と、音声認識結果データベース13と、切替規則データベース15と、雑音抑圧・音声認識装置16を含み、学習装置10は、音声認識結果データベース作成部12と、雑音抑圧パラメータセット切替規則学習部14を含む構成である。
<Voice recognition system 1>
With reference to FIG. 1, the structure of the speech recognition system 1 of Example 1 is demonstrated. As shown in the figure, the speech recognition system 1 of the present embodiment includes a
なお、図2に示すように学習装置10を二つの装置に分けて構成することもできる。具体的には、音声認識結果データベース作成部12と同様の機能を有する独立した装置である音声認識結果データベース作成装置12、雑音抑圧パラメータセット切替規則学習部14と同様の機能を有する独立した装置である雑音抑圧パラメータセット切替規則学習装置14を含む、音声認識システム1aとして構成してもよい。
In addition, as shown in FIG. 2, the
なお、図3に示すようにシステム全体を一つの装置として構成してもよい。具体的には、音声データベース11と、音声認識結果データベース作成部12と、音声認識結果データベース13と、雑音抑圧パラメータセット切替規則学習部14と、切替規則データベース15と、雑音抑圧・音声認識装置16と同様の機能を有する雑音抑圧・音声認識部16を含む音声認識装置1bとして構成してもよい。この場合、三つのデータベースは、音声認識装置1bの外部に配置されることとしてもよい。以下では、図1に示した構成に従って説明を進めるものとする。
Note that the entire system may be configured as one apparatus as shown in FIG. Specifically, a
本実施例では、オンライン上で利用される音声認識サービスを想定している。音声認識サービスを提供、運用する者を運用者と呼び、スマートフォン等の端末から音声認識サービスを利用する者を利用者と呼ぶ。運用者は、運用者aとして図示、および呼称される。利用者は、利用者bとして図示、および呼称される。 In this embodiment, a speech recognition service used on-line is assumed. A person who provides and operates a voice recognition service is called an operator, and a person who uses the voice recognition service from a terminal such as a smartphone is called a user. The operator is illustrated and referred to as operator a. The user is illustrated and referred to as user b.
例えば、学習装置10は、運用者aの操作を契機に動作する装置を想定している。雑音抑圧・音声認識装置16は、利用者bの操作を契機に動作する音声認識サービスにおけるオンライン処理装置を想定している。音声認識結果データベース作成部12は、雑音抑圧パラメータセット切替規則学習のために用いる音声認識結果データベース13を用意するための処理部である。雑音抑圧パラメータ切替規則学習部14は、雑音抑圧・音声認識装置16が利用される際に、どのような音声ファイルに対してどのような雑音抑圧パラメータセットを割当てるかの規則を事前に決定するための処理部である。
For example, the
<用語の定義>
下表に本実施例で使用される用語を定義する。
<Definition of terms>
The terms used in this example are defined in the following table.
<学習装置10の動作>
以下、図4を参照して学習装置10の動作であるステップS12、ステップS14を説明する。
<Operation of
Hereinafter, step S12 and step S14 which are operation | movement of the
<音声認識結果データベース作成部12の動作(S12)>
本ステップに先立ち、運用者aは、予め雑音抑圧パラメータセット群を用意し、音声認識結果データベース作成部12に入力する。これに加え、本ステップでは音声データベース11が参照される。音声データベース11には、音声ファイルと、正解文と、収音条件とが対応付けられて第1のエントリとして予め記憶されている。音声認識結果データベース作成部12は、対象となる音声ファイルから特徴量を算出する。音声認識結果データベース作成部12は、対象となる音声ファイルを雑音抑圧パラメータセットに基づいて雑音抑圧する。雑音抑圧の方法および雑音抑圧パラメータセットについては、特許文献1と同様の方法を用いることができる。音声認識結果データベース作成部12は、雑音抑圧後の音声ファイルを音声認識する。音声認識結果データベース作成部12は、音声認識結果と正解文とを比較することにより精度情報を算出する。
<Operation of Speech Recognition Result Database Creation Unit 12 (S12)>
Prior to this step, the operator a prepares a noise suppression parameter set group in advance and inputs it to the speech recognition result
音声認識結果データベース作成部12は、特徴量と、収音条件と、雑音抑圧パラメータセットと精度情報を対応付けて第2のエントリとして音声認識結果データベース13に記憶する処理を、雑音抑圧パラメータセット群の、それぞれの雑音抑圧パラメータセットに対して実行する。
The speech recognition result
すなわち、雑音抑圧は運用者aが予め用意したN個(Nは2以上の整数)の雑音抑圧パラメータセットからなる雑音抑圧パラメータセット群を用いておこなわれる。雑音抑圧により一つの音声ファイルに対してN個の雑音抑圧後音声ファイルが生成され、それぞれに対応する音声認識結果が生成される。生成されたN個の音声認識結果は正解文と比較され、N個の音声認識結果に対してN個の精度情報が算出される。従ってこれらを対応付けたN個の第2のエントリが音声認識結果データベース13に記憶されることになる。以上がステップS12である。ステップS12は、音声データベース11中の各音声ファイルについて実行される。
That is, noise suppression is performed using a noise suppression parameter set group including N (N is an integer of 2 or more) noise suppression parameter sets prepared in advance by the operator a. N noise-suppressed audio files are generated for one audio file by noise suppression, and a corresponding speech recognition result is generated. The generated N speech recognition results are compared with the correct sentence, and N pieces of accuracy information are calculated for the N speech recognition results. Accordingly, N second entries in which these are associated are stored in the speech
特徴量は、例えば以下の値を一つ、または複数含んで構成すればよい。
・帯域ごとの雑音のパワー(特許文献2参照)
・雑音の尖度(非特許文献1参照)
・信号対雑音比(非特許文献2参照)
収音条件については、音声データベース11に音声ファイルと対応付けて記憶されているものが、そのまま音声認識結果データベース13に引き継がれる。収音条件として、たとえば下表に挙げる項目とラベルの例が考えられる。収音条件の項目として端末名を含んでいれば好適である。
The feature amount may be configured to include one or more of the following values, for example.
-Noise power for each band (see Patent Document 2)
-Noise kurtosis (see Non-Patent Document 1)
・ Signal-to-noise ratio (see Non-Patent Document 2)
As for the sound collection conditions, those stored in the
精度情報は、以下の情報から計算することができる。
・正解文の文字数または単語数
・音声認識結果の正解文字数または正解単語数
・音声認識結果の誤り文字数または誤り単語数
The accuracy information can be calculated from the following information.
・ Number of characters or words in correct sentences ・ Number of correct characters or words in speech recognition results ・ Number of erroneous characters or words in speech recognition results
<雑音抑圧パラメータセット切替規則学習部14の動作(S14)>
本ステップに先立ち、運用者aは、切替規則を学習する収音条件を指定して、雑音抑圧パラメータセット切替規則学習部14に入力する。雑音抑圧パラメータセット切替規則学習部14は、運用者aに指定された収音条件に基づいて音声認識結果データベース13を検索する。雑音抑圧パラメータセット切替規則学習部14は、検索された第2のエントリを特徴量に基づくグループ分け基準に従ってグループ分けする。雑音抑圧パラメータセット切替規則学習部14は、各グループにおける精度情報が所定の条件を充たすように各グループにおいて雑音抑圧パラメータセットを選択して、最適雑音抑圧パラメータセットとする。雑音抑圧パラメータセット切替規則学習部14は、最適雑音抑圧パラメータセットと、グループ分け基準と、検索に用いた収音条件を対応付けて第3のエントリとして切替規則データベース15に記憶する。以上がステップS14である。本実施例では、収音条件による検索により、特徴量だけからは区別不能な雑音の特性が区別され、それぞれに適した雑音抑圧パラメータセットが選択されることが特徴である。
<Operation of Noise Suppression Parameter Set Switching Rule Learning Unit 14 (S14)>
Prior to this step, the operator a designates a sound collection condition for learning the switching rule and inputs it to the noise suppression parameter set switching
収音条件の指定方法について説明する。収音条件は運用者aにより指定されるが、作業を軽減するために、収音条件の一項目に対して次のいずれの指定方法をとっても良いものとする。
・単一条件を指定する。
・複数条件をOR条件で指定する。
・条件を指定しない(全条件のOR条件)。
A method for specifying the sound pickup condition will be described. The sound collection condition is designated by the operator a, but in order to reduce the work, any one of the following designation methods may be used for one item of the sound collection condition.
・ Specify a single condition.
・ Specify multiple conditions with OR condition.
-No condition is specified (OR condition for all conditions).
収音条件が複数項目を含む場合、全項目のAND条件が指定される。項目数や項目ごとの条件数が多い場合、収音条件数はその組み合わせであるので、組み合わせ総数は非常に多くなると考えられる。従って、雑音抑圧パラメータセット切替規則を全収音条件に対して学習しても良いし、一部の収音条件に対してのみ学習しても良い。一部の収音条件に対してのみ学習する場合、利用者bが音声認識サービスを利用する時に指定する収音条件が、雑音抑圧パラメータ切替規則学習データベース15に存在しない可能性がある。そのため、学習された雑音抑圧パラメータセット切替規則のうちの一つの規則を、前述の場合に用いられるデフォルトの規則として切替規則データベース15上で指定しておけば好適である。
When the sound collection condition includes a plurality of items, an AND condition for all items is designated. If the number of items and the number of conditions for each item are large, the total number of combinations is considered to be very large because the number of sound collecting conditions is a combination thereof. Therefore, the noise suppression parameter set switching rule may be learned for all sound collection conditions, or may be learned only for some sound collection conditions. When learning only for some sound collection conditions, there is a possibility that the sound collection conditions specified when the user b uses the speech recognition service do not exist in the noise suppression parameter switching
グループ分けと最適雑音抑圧パラメータセットの選択については、特許文献1と同様の方法を用いることができる。渡されたデータ全体の音声認識精度(精度情報)が最大となるように、グループ分け基準とグループごとの最適雑音抑圧パラメータセットが交互に繰り返し決定される。 For grouping and selection of the optimal noise suppression parameter set, the same method as in Patent Document 1 can be used. The grouping criterion and the optimum noise suppression parameter set for each group are repeatedly and alternately determined so that the voice recognition accuracy (accuracy information) of the entire transferred data is maximized.
<雑音抑圧・音声認識装置16の動作>
以下、図5を参照して雑音抑圧・音声認識装置16の動作であるステップS16を説明する。本ステップに先立ち、利用者bは、音声認識対象となる音声ファイルと、当該音声ファイルの収音条件を指定して雑音抑圧・音声認識装置16に入力しているものとする。
<Operation of Noise Suppression /
Hereinafter, step S16, which is the operation of the noise suppression /
収音条件の指定方法として、例えば利用者bが、音声認識サービス利用時に、現在の収音条件を手動で指定してもよい。また、利用者bが利用する端末がソフトウェアなどを通じて現在の収音条件を指定してもよい。収音条件の指定・取得の方法として、収音条件の少なくとも一つの項目が指定・取得される場合と、いずれの項目も指定・取得されない場合が考えられる。収音条件検索指定・取得されない項目に対する検索では、全条件のOR条件がヒットする。 As a method for specifying the sound pickup condition, for example, the user b may manually specify the current sound pickup condition when using the voice recognition service. Further, the terminal used by the user b may specify the current sound pickup conditions through software or the like. As a method of specifying / acquiring the sound collection condition, there are a case where at least one item of the sound collection condition is specified / acquired and a case where none of the items is specified / acquired. In a search for an item that is not designated / acquired for sound pickup condition search, the OR condition of all conditions is hit.
雑音抑圧・音声認識装置16は、利用者bから指定された収音条件に基づいて切替規則データベース15を検索する。雑音抑圧・音声認識装置16は、検索された第3のエントリのグループ分け基準に従って利用者bから取得した音声ファイルをグループ分けする。雑音抑圧・音声認識装置16は、グループ分けされたグループに対応する最適雑音抑圧パラメータセットに基づいて利用者bから取得した音声ファイルを雑音抑圧する。雑音抑圧・音声認識装置16は、雑音抑圧後の音声ファイルを音声認識して音声認識結果を出力する。以上がステップS16である。
The noise suppression /
<音声認識結果データベース作成部12およびステップS12の詳細>
以下、図6、図7を参照して本実施例の音声認識結果データベース作成部12およびステップS12の詳細について説明する。図6に示すように、音声認識結果データベース作成部12は、特徴量算出部121と、雑音抑圧部122と、音声認識部123と、音声認識精度評価部124を含む。特徴量算出部121は、対象となる音声ファイルから特徴量を算出する(S121)。雑音抑圧部122は、対象となる音声ファイルを運用者aが指定した雑音抑圧パラメータセット群の中の任意の雑音抑圧パラメータセットに基づいて雑音抑圧する(S122)。音声認識部123は、雑音抑圧後の音声ファイルを音声認識する(S123)。音声認識精度評価部124は、音声認識結果と正解文とを比較することにより精度情報を算出する(S124)。音声認識結果データベース作成部12は、特徴量と、収音条件と、雑音抑圧パラメータセットと精度情報を対応付けて第2のエントリとして音声認識結果データベース13に記憶する処理を、運用者aが指定した雑音抑圧パラメータセット群の、各雑音抑圧パラメータセットに対して実行する。以上がステップS12の動作の詳細である。
<Details of Speech Recognition Result
The details of the speech recognition result
<雑音抑圧パラメータセット切替規則学習部14およびステップS14の詳細>
以下、図8、図9を参照して本実施例の雑音抑圧パラメータセット切替規則学習部14およびステップS14の詳細について説明する。図8に示すように、雑音抑圧パラメータセット切替規則学習部14は、収音条件検索部141と、グループ分け部142と、最適パラメータセット選択部143と、収束判定部144を含む。収音条件検索部141は、運用者aが指定した収音条件に基づいて音声認識結果データベース13を検索する(S141)。グループ分け部142は、検索された第2のエントリを特徴量に基づくグループ分け基準に従ってグループ分けする(S142a)。最適パラメータセット選択部143は、各グループにおいて、各グループの精度情報が最大となるように各グループの雑音抑圧パラメータセットを選択する(S143a)。収束判定部144は、選択された各グループの雑音抑圧パラメータセットについて収束判定を行い(S144a)、雑音抑圧パラメータセットの最適化が収束していると判定した場合に(S144b−Y)、最適パラメータセット選択部143に出力指令を出力する(S144c)。一方、収束判定部144は、雑音抑圧パラメータセットの最適化が未収束であると判定した場合に(S144b−N)、グループ分け部142にグループ分け指令を出力する(S144d)。出力指令を取得した最適パラメータセット選択部143は、最新の雑音抑圧パラメータセットを最適雑音抑圧パラメータセットとして、グループ分け基準と、検索に用いた収音条件と共に第3のエントリとして切替規則データベース15に記憶する(S143b)。一方、グループ分け指令を取得したグループ分け部142は、グループ分け基準を変更して、再度グループ分けを実行する(142b)。以上がステップS14の動作の詳細である。
<Details of Noise Suppression Parameter Set Switching
The details of the noise suppression parameter set switching
<雑音抑圧・音声認識装置16およびステップS16の詳細>
以下、図10、図11を参照して本実施例の雑音抑圧・音声認識装置16およびステップS16の詳細について説明する。図10に示すように、雑音抑圧・音声認識装置16は、収音条件検索部161と、特徴量算出部162と、雑音抑圧パラメータセット導出部163と、雑音抑圧部164と、音声認識部165を含む。収音条件検索部161は、利用者bから指定された収音条件に基づいて切替規則データベース15を検索する(S161)。特徴量算出部162は、利用者bから取得した音声ファイルから特徴量を算出する(S162)。雑音抑圧パラメータセット導出部163は、検索された第3のエントリのグループ分け基準に従って利用者bから取得した音声ファイルの特徴量をグループ分けし、これに対応する最適雑音抑圧パラメータセットを導出する(S163)。雑音抑圧部164は、導出された最適雑音抑圧パラメータセットに基づいて利用者bから取得した音声ファイルを雑音抑圧する(S164)。音声認識部165は、雑音抑圧後の音声ファイルを音声認識して音声認識結果を出力する(S165)。以上がステップS16の動作の詳細である。
<Details of Noise Suppression /
Details of the noise suppression /
<本実施例の音声認識システム1により生じる効果>
本実施例の音声認識システム1によれば、収音条件が多様な場合にも、それぞれの収音条件に適した雑音抑圧パラメータセットを自動で選択可能になる。
<Effects produced by the speech recognition system 1 of this embodiment>
According to the speech recognition system 1 of the present embodiment, it is possible to automatically select a noise suppression parameter set suitable for each sound collection condition even when the sound collection conditions are various.
<補記>
本発明の装置は、例えば単一のハードウェアエンティティとして、キーボードなどが接続可能な入力部、液晶ディスプレイなどが接続可能な出力部、ハードウェアエンティティの外部に通信可能な通信装置(例えば通信ケーブル)が接続可能な通信部、CPU(Central Processing Unit、キャッシュメモリやレジスタなどを備えていてもよい)、メモリであるRAMやROM、ハードディスクである外部記憶装置並びにこれらの入力部、出力部、通信部、CPU、RAM、ROM、外部記憶装置の間のデータのやり取りが可能なように接続するバスを有している。また必要に応じて、ハードウェアエンティティに、CD−ROMなどの記録媒体を読み書きできる装置(ドライブ)などを設けることとしてもよい。このようなハードウェア資源を備えた物理的実体としては、汎用コンピュータなどがある。
<Supplementary note>
The apparatus of the present invention includes, for example, a single hardware entity as an input unit to which a keyboard or the like can be connected, an output unit to which a liquid crystal display or the like can be connected, and a communication device (for example, a communication cable) capable of communicating outside the hardware entity. Can be connected to a communication unit, a CPU (Central Processing Unit, may include a cache memory or a register), a RAM or ROM that is a memory, an external storage device that is a hard disk, and an input unit, an output unit, or a communication unit thereof , A CPU, a RAM, a ROM, and a bus connected so that data can be exchanged between the external storage devices. If necessary, the hardware entity may be provided with a device (drive) that can read and write a recording medium such as a CD-ROM. A physical entity having such hardware resources includes a general-purpose computer.
ハードウェアエンティティの外部記憶装置には、上述の機能を実現するために必要となるプログラムおよびこのプログラムの処理において必要となるデータなどが記憶されている(外部記憶装置に限らず、例えばプログラムを読み出し専用記憶装置であるROMに記憶させておくこととしてもよい)。また、これらのプログラムの処理によって得られるデータなどは、RAMや外部記憶装置などに適宜に記憶される。 The external storage device of the hardware entity stores a program necessary for realizing the above functions and data necessary for processing the program (not limited to the external storage device, for example, reading a program) It may be stored in a ROM that is a dedicated storage device). Data obtained by the processing of these programs is appropriately stored in a RAM or an external storage device.
ハードウェアエンティティでは、外部記憶装置(あるいはROMなど)に記憶された各プログラムとこの各プログラムの処理に必要なデータが必要に応じてメモリに読み込まれて、適宜にCPUで解釈実行・処理される。その結果、CPUが所定の機能(上記、…部、…手段などと表した各構成要件)を実現する。 In the hardware entity, each program stored in an external storage device (or ROM or the like) and data necessary for processing each program are read into a memory as necessary, and are interpreted and executed by a CPU as appropriate. . As a result, the CPU realizes a predetermined function (respective component requirements expressed as the above-described unit, unit, etc.).
本発明は上述の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更が可能である。また、上記実施形態において説明した処理は、記載の順に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されるとしてもよい。 The present invention is not limited to the above-described embodiment, and can be appropriately changed without departing from the spirit of the present invention. In addition, the processing described in the above embodiment may be executed not only in time series according to the order of description but also in parallel or individually as required by the processing capability of the apparatus that executes the processing. .
既述のように、上記実施形態において説明したハードウェアエンティティ(本発明の装置)における処理機能をコンピュータによって実現する場合、ハードウェアエンティティが有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムをコンピュータで実行することにより、上記ハードウェアエンティティにおける処理機能がコンピュータ上で実現される。 As described above, when the processing functions in the hardware entity (the apparatus of the present invention) described in the above embodiments are realized by a computer, the processing contents of the functions that the hardware entity should have are described by a program. Then, by executing this program on a computer, the processing functions in the hardware entity are realized on the computer.
この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、例えば、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリ等どのようなものでもよい。具体的には、例えば、磁気記録装置として、ハードディスク装置、フレキシブルディスク、磁気テープ等を、光ディスクとして、DVD(Digital Versatile Disc)、DVD−RAM(Random Access Memory)、CD−ROM(Compact Disc Read Only Memory)、CD−R(Recordable)/RW(ReWritable)等を、光磁気記録媒体として、MO(Magneto-Optical disc)等を、半導体メモリとしてEEP−ROM(Electronically Erasable and Programmable-Read Only Memory)等を用いることができる。 The program describing the processing contents can be recorded on a computer-readable recording medium. As the computer-readable recording medium, for example, any recording medium such as a magnetic recording device, an optical disk, a magneto-optical recording medium, and a semiconductor memory may be used. Specifically, for example, as a magnetic recording device, a hard disk device, a flexible disk, a magnetic tape or the like, and as an optical disk, a DVD (Digital Versatile Disc), a DVD-RAM (Random Access Memory), a CD-ROM (Compact Disc Read Only). Memory), CD-R (Recordable) / RW (ReWritable), etc., magneto-optical recording medium, MO (Magneto-Optical disc), etc., semiconductor memory, EEP-ROM (Electronically Erasable and Programmable-Read Only Memory), etc. Can be used.
また、このプログラムの流通は、例えば、そのプログラムを記録したDVD、CD−ROM等の可搬型記録媒体を販売、譲渡、貸与等することによって行う。さらに、このプログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することにより、このプログラムを流通させる構成としてもよい。 The program is distributed by selling, transferring, or lending a portable recording medium such as a DVD or CD-ROM in which the program is recorded. Furthermore, the program may be distributed by storing the program in a storage device of the server computer and transferring the program from the server computer to another computer via a network.
このようなプログラムを実行するコンピュータは、例えば、まず、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、一旦、自己の記憶装置に格納する。そして、処理の実行時、このコンピュータは、自己の記録媒体に格納されたプログラムを読み取り、読み取ったプログラムに従った処理を実行する。また、このプログラムの別の実行形態として、コンピュータが可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することとしてもよく、さらに、このコンピュータにサーバコンピュータからプログラムが転送されるたびに、逐次、受け取ったプログラムに従った処理を実行することとしてもよい。また、サーバコンピュータから、このコンピュータへのプログラムの転送は行わず、その実行指示と結果取得のみによって処理機能を実現する、いわゆるASP(Application Service Provider)型のサービスによって、上述の処理を実行する構成としてもよい。なお、本形態におけるプログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるもの(コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータ等)を含むものとする。 A computer that executes such a program first stores, for example, a program recorded on a portable recording medium or a program transferred from a server computer in its own storage device. When executing the process, the computer reads a program stored in its own recording medium and executes a process according to the read program. As another execution form of the program, the computer may directly read the program from a portable recording medium and execute processing according to the program, and the program is transferred from the server computer to the computer. Each time, the processing according to the received program may be executed sequentially. Also, the program is not transferred from the server computer to the computer, and the above-described processing is executed by a so-called ASP (Application Service Provider) type service that realizes the processing function only by the execution instruction and result acquisition. It is good. Note that the program in this embodiment includes information that is used for processing by an electronic computer and that conforms to the program (data that is not a direct command to the computer but has a property that defines the processing of the computer).
また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、ハードウェアエンティティを構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。
In this embodiment, a hardware entity is configured by executing a predetermined program on a computer. However, at least a part of these processing contents may be realized by hardware.
Claims (7)
指定された前記収音条件に基づいて前記音声認識結果データベースを検索し、検索された前記第2のエントリを前記特徴量に基づくグループ分け基準に従ってグループ分けし、各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けて第3のエントリとして切替規則データベースに記憶する雑音抑圧パラメータセット切替規則学習部
を含む学習装置。 Using a speech database that stores a sound file, a correct sentence corresponding to the sound file, and a sound collection condition that is a label that defines a condition at the time of sound collection of the sound file as a first entry in association with each other, Corresponding the feature quantity that defines the noise characteristics of the audio file, the sound collection condition, the noise suppression parameter set that is a set of parameters used for noise suppression, and accuracy information that is a value for evaluating the accuracy of the speech recognition result A speech recognition result database creation unit that executes processing for storing the second entry in the speech recognition result database for each noise suppression parameter set of the noise suppression parameter set group including the plurality of noise suppression parameter sets; ,
The speech recognition result database is searched based on the specified sound pickup condition, the searched second entries are grouped according to a grouping criterion based on the feature amount, and the accuracy information in each group is a predetermined value. A switching rule as a third entry by associating the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so as to satisfy the condition, the grouping criterion, and the sound collection condition used for the search A learning apparatus including a noise suppression parameter set switching rule learning unit stored in a database.
指定された前記収音条件に基づいて前記音声認識結果データベースを検索する収音条件検索部と、
検索された前記エントリを前記特徴量に基づくグループ分け基準に従ってグループ分けするグループ分け部と、
各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けてエントリとして切替規則データベースに記憶する最適パラメータセット選択部
を含む雑音抑圧パラメータセット切替規則学習装置。 A feature amount that defines noise characteristics of an audio file; a sound collection condition that is a label that defines conditions at the time of sound collection of the audio file; a noise suppression parameter set that is a set of parameters used for noise suppression; and speech recognition A speech recognition result database in which an entry associated with accuracy information, which is a value for evaluating the accuracy of the result, is stored for each noise suppression parameter set of the noise suppression parameter set group including the plurality of noise suppression parameter sets. A noise suppression parameter set switching rule learning device using
A sound collection condition search unit for searching the speech recognition result database based on the specified sound collection condition;
A grouping unit that groups the retrieved entries according to a grouping criterion based on the feature amount;
Corresponding to the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so that the accuracy information in each group satisfies a predetermined condition, the grouping criterion, and the sound collection condition used for the search A noise suppression parameter set switching rule learning device including an optimum parameter set selection unit that stores an entry as an entry in a switching rule database.
前記音声ファイルの雑音の特性を規定する特徴量と、前記収音条件と、雑音抑圧に用いるパラメータのセットである雑音抑圧パラメータセットと、音声認識結果の精度を評価する値である精度情報を対応付けて第2のエントリとする処理を、複数の前記雑音抑圧パラメータセットからなる雑音抑圧パラメータセット群の、それぞれの雑音抑圧パラメータセットに対して実行する音声認識結果データベース作成部と、
前記第2のエントリを記憶する音声認識結果データベースと、
運用者から指定された前記収音条件に基づいて前記音声認識結果データベースを検索し、検索された前記第2のエントリを前記特徴量に基づくグループ分け基準に従ってグループ分けし、各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けて第3のエントリとする雑音抑圧パラメータセット切替規則学習部と、
前記第3のエントリを記憶する切替規則データベースと、
利用者から指定された前記収音条件に基づいて前記切替規則データベースを検索し、検索された前記第3のエントリのグループ分け基準に従って利用者から取得した音声ファイルをグループ分けし、グループ分けされたグループに対応する前記最適雑音抑圧パラメータセットに基づいて前記利用者から取得した音声ファイルを雑音抑圧し、雑音抑圧後の音声ファイルを音声認識して音声認識結果を出力する雑音抑圧・音声認識部
を含む音声認識装置。 An audio database that stores a first entry in association with an audio file, a correct sentence corresponding to the audio file, and a sound collection condition that is a label that defines a condition at the time of sound collection of the audio file;
Corresponds to features that define noise characteristics of the voice file, the sound collection conditions, a noise suppression parameter set that is a set of parameters used for noise suppression, and accuracy information that is a value that evaluates the accuracy of the speech recognition result A speech recognition result database creation unit that executes the process as the second entry for each noise suppression parameter set of the noise suppression parameter set group including the plurality of noise suppression parameter sets;
A speech recognition result database for storing the second entry;
The speech recognition result database is searched based on the sound collection condition specified by the operator, the searched second entries are grouped according to a grouping criterion based on the feature amount, and the accuracy information in each group Is a third entry by associating the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so as to satisfy a predetermined condition, the grouping criterion, and the sound collection condition used for the search. A noise suppression parameter set switching rule learning unit, and
A switching rule database for storing the third entry;
The switching rule database is searched based on the sound pickup conditions specified by the user, and the audio files obtained from the user are grouped according to the grouping criteria of the searched third entry and grouped. A noise suppression / voice recognition unit that suppresses noise of a voice file acquired from the user based on the optimum noise suppression parameter set corresponding to a group, recognizes the voice file after noise suppression, and outputs a voice recognition result; Including speech recognition device.
音声ファイルと、前記音声ファイルに対応する正解文と、前記音声ファイルの収音時の条件を規定するラベルである収音条件とを対応付けて第1のエントリとして記憶する音声データベースを用い、前記音声ファイルの雑音の特性を規定する特徴量と、前記収音条件と、雑音抑圧に用いるパラメータのセットである雑音抑圧パラメータセットと、音声認識結果の精度を評価する値である精度情報を対応付けて第2のエントリとして音声認識結果データベースに記憶する処理を、複数の前記雑音抑圧パラメータセットからなる雑音抑圧パラメータセット群の、それぞれの雑音抑圧パラメータセットに対して実行するステップと、
指定された前記収音条件に基づいて前記音声認識結果データベースを検索し、検索された前記第2のエントリを前記特徴量に基づくグループ分け基準に従ってグループ分けし、各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けて第3のエントリとして切替規則データベースに記憶するステップ
を含む学習方法。 A learning method executed by a learning device,
Using a speech database that stores a sound file, a correct sentence corresponding to the sound file, and a sound collection condition that is a label that defines a condition at the time of sound collection of the sound file as a first entry in association with each other, Corresponding the feature quantity that defines the noise characteristics of the audio file, the sound collection condition, the noise suppression parameter set that is a set of parameters used for noise suppression, and accuracy information that is a value for evaluating the accuracy of the speech recognition result A process of storing in the speech recognition result database as a second entry for each noise suppression parameter set of the noise suppression parameter set group consisting of a plurality of the noise suppression parameter sets;
The speech recognition result database is searched based on the specified sound pickup condition, the searched second entries are grouped according to a grouping criterion based on the feature amount, and the accuracy information in each group is a predetermined value. A switching rule as a third entry by associating the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so as to satisfy the condition, the grouping criterion, and the sound collection condition used for the search A learning method comprising the step of storing in a database.
指定された前記収音条件に基づいて前記音声認識結果データベースを検索するステップと、
検索された前記エントリを前記特徴量に基づくグループ分け基準に従ってグループ分けするステップと、
各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けてエントリとして切替規則データベースに記憶するステップを含む、
雑音抑圧パラメータセット切替規則学習装置が実行する雑音抑圧パラメータセット切替規則学習方法。 A feature amount that defines noise characteristics of an audio file; a sound collection condition that is a label that defines conditions at the time of sound collection of the audio file; a noise suppression parameter set that is a set of parameters used for noise suppression; and speech recognition A speech recognition result database in which an entry associated with accuracy information, which is a value for evaluating the accuracy of the result, is stored for each noise suppression parameter set of the noise suppression parameter set group including the plurality of noise suppression parameter sets. A noise suppression parameter set switching rule learning method using
Searching the speech recognition result database based on the designated sound pickup conditions;
Grouping the retrieved entries according to a grouping criterion based on the features;
Corresponding to the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so that the accuracy information in each group satisfies a predetermined condition, the grouping criterion, and the sound collection condition used for the search And storing it as an entry in the switching rule database.
A noise suppression parameter set switching rule learning method executed by a noise suppression parameter set switching rule learning device.
音声ファイルと、前記音声ファイルに対応する正解文と、前記音声ファイルの収音時の条件を規定するラベルである収音条件とを対応付けて第1のエントリとして記憶する音声データベースを用い、前記音声ファイルの雑音の特性を規定する特徴量と、前記収音条件と、雑音抑圧に用いるパラメータのセットである雑音抑圧パラメータセットと、音声認識結果の精度を評価する値である精度情報を対応付けて第2のエントリとして音声認識結果データベースに記憶する処理を、複数の前記雑音抑圧パラメータセットからなる雑音抑圧パラメータセット群の、それぞれの雑音抑圧パラメータセットに対して実行するステップと、
運用者から指定された前記収音条件に基づいて前記音声認識結果データベースを検索し、検索された前記第2のエントリを前記特徴量に基づくグループ分け基準に従ってグループ分けし、各グループにおける前記精度情報が所定の条件を充たすように各グループにおいて選択された前記雑音抑圧パラメータセットである最適雑音抑圧パラメータセットと、前記グループ分け基準と、検索に用いた前記収音条件を対応付けて第3のエントリとして切替規則データベースに記憶するステップと、
利用者から指定された前記収音条件に基づいて前記切替規則データベースを検索し、検索された前記第3のエントリのグループ分け基準に従って利用者から取得した音声ファイルをグループ分けし、グループ分けされたグループに対応する前記最適雑音抑圧パラメータセットに基づいて前記利用者から取得した音声ファイルを雑音抑圧し、雑音抑圧後の音声ファイルを音声認識して音声認識結果を出力するステップ
を含む音声認識方法。 A speech recognition method executed by a speech recognition apparatus,
Using a speech database that stores a sound file, a correct sentence corresponding to the sound file, and a sound collection condition that is a label that defines a condition at the time of sound collection of the sound file as a first entry in association with each other, Corresponding the feature quantity that defines the noise characteristics of the audio file, the sound collection condition, the noise suppression parameter set that is a set of parameters used for noise suppression, and accuracy information that is a value for evaluating the accuracy of the speech recognition result A process of storing in the speech recognition result database as a second entry for each noise suppression parameter set of the noise suppression parameter set group consisting of a plurality of the noise suppression parameter sets;
The speech recognition result database is searched based on the sound collection condition specified by the operator, the searched second entries are grouped according to a grouping criterion based on the feature amount, and the accuracy information in each group Is a third entry by associating the optimum noise suppression parameter set, which is the noise suppression parameter set selected in each group so as to satisfy a predetermined condition, the grouping criterion, and the sound collection condition used for the search. Storing in the switching rule database as
The switching rule database is searched based on the sound pickup conditions specified by the user, and the audio files obtained from the user are grouped according to the grouping criteria of the searched third entry and grouped. A speech recognition method comprising the steps of: noise-suppressing a speech file acquired from the user based on the optimum noise suppression parameter set corresponding to a group; speech recognition of the speech file after noise suppression; and outputting a speech recognition result.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017026705A JP6367993B1 (en) | 2017-02-16 | 2017-02-16 | Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017026705A JP6367993B1 (en) | 2017-02-16 | 2017-02-16 | Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018110903A Division JP6622856B2 (en) | 2018-06-11 | 2018-06-11 | Data structure, noise suppression device, noise suppression method, program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6367993B1 true JP6367993B1 (en) | 2018-08-01 |
JP2018132683A JP2018132683A (en) | 2018-08-23 |
Family
ID=63036675
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017026705A Active JP6367993B1 (en) | 2017-02-16 | 2017-02-16 | Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6367993B1 (en) |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6067760B2 (en) * | 2015-01-28 | 2017-01-25 | 日本電信電話株式会社 | Parameter determining apparatus, parameter determining method, and program |
-
2017
- 2017-02-16 JP JP2017026705A patent/JP6367993B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018132683A (en) | 2018-08-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2707815A1 (en) | Generating a playlist | |
JP4622808B2 (en) | Music classification device, music classification method, music classification program | |
US20160092596A1 (en) | Database migration method and apparatus | |
JP6812381B2 (en) | Voice recognition accuracy deterioration factor estimation device, voice recognition accuracy deterioration factor estimation method, program | |
US11367424B2 (en) | Method and apparatus for training adaptation quality evaluation model, and method and apparatus for evaluating adaptation quality | |
KR101942459B1 (en) | Method and system for generating playlist using sound source content and meta information | |
JP6873805B2 (en) | Dialogue support system, dialogue support method, and dialogue support program | |
JP6553015B2 (en) | Speaker attribute estimation system, learning device, estimation device, speaker attribute estimation method, and program | |
CN108681564A (en) | The determination method, apparatus and computer readable storage medium of keyword and answer | |
JP2010061176A (en) | Text mining device, text mining method, and text mining program | |
JP5542729B2 (en) | Related word extraction device, related word extraction method, and related word extraction program | |
JP2020149369A (en) | Dialog control system, dialog control method, and program | |
JP5342760B2 (en) | Apparatus, method, and program for creating data for translation learning | |
JP6622856B2 (en) | Data structure, noise suppression device, noise suppression method, program | |
JP6367993B1 (en) | Learning device, noise suppression parameter set switching rule learning device, speech recognition device, learning method, noise suppression parameter set switching rule learning method, speech recognition method, program | |
JP6216809B2 (en) | Parameter adjustment system, parameter adjustment method, program | |
WO2007066704A1 (en) | Text mining device, text mining method, and text mining program | |
JP2014232145A (en) | Pause application model selection apparatus, pause application device, methods thereof, and program | |
JP6486789B2 (en) | Speech recognition apparatus, speech recognition method, and program | |
JP6852167B2 (en) | Confusion network distributed representation generation device, confusion network classification device, confusion network distributed representation generation method, confusion network classification method, program | |
JP2007249050A (en) | Language model generating device, language model generating method, program thereof, and recording medium thereof | |
WO2024069941A1 (en) | Information processing device, search method, and search program | |
KR20190009821A (en) | Method and system for generating playlist using sound source content and meta information | |
US20230281275A1 (en) | Identification method and information processing device | |
JP5610304B2 (en) | Model parameter array device, method and program thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180611 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180703 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180705 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6367993 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |