JP2016540432A - 基本周波数修正を用いた補聴装置 - Google Patents
基本周波数修正を用いた補聴装置 Download PDFInfo
- Publication number
- JP2016540432A JP2016540432A JP2016532612A JP2016532612A JP2016540432A JP 2016540432 A JP2016540432 A JP 2016540432A JP 2016532612 A JP2016532612 A JP 2016532612A JP 2016532612 A JP2016532612 A JP 2016532612A JP 2016540432 A JP2016540432 A JP 2016540432A
- Authority
- JP
- Japan
- Prior art keywords
- fundamental frequency
- frequency value
- speech signal
- hearing aid
- modified
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012937 correction Methods 0.000 title description 6
- 238000004458 analytical method Methods 0.000 claims abstract description 23
- 230000006870 function Effects 0.000 claims abstract description 17
- 238000010972 statistical evaluation Methods 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 40
- 230000008859 change Effects 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 14
- 230000015572 biosynthetic process Effects 0.000 claims description 11
- 238000003786 synthesis reaction Methods 0.000 claims description 11
- 239000003607 modifier Substances 0.000 claims description 9
- 230000002123 temporal effect Effects 0.000 claims description 9
- 230000001360 synchronised effect Effects 0.000 claims description 4
- 238000012886 linear function Methods 0.000 claims description 3
- 239000007943 implant Substances 0.000 description 16
- 230000008447 perception Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 210000000133 brain stem Anatomy 0.000 description 5
- 239000004606 Fillers/Extenders Substances 0.000 description 4
- 230000008451 emotion Effects 0.000 description 4
- 238000007781 pre-processing Methods 0.000 description 4
- 208000016354 hearing loss disease Diseases 0.000 description 3
- 206010011878 Deafness Diseases 0.000 description 2
- 208000032041 Hearing impaired Diseases 0.000 description 2
- 108010076504 Protein Sorting Signals Proteins 0.000 description 2
- 210000003477 cochlea Anatomy 0.000 description 2
- 210000000860 cochlear nerve Anatomy 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 230000010370 hearing loss Effects 0.000 description 2
- 231100000888 hearing loss Toxicity 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000033764 rhythmic process Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000002513 implantation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000000067 inner hair cell Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/35—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using translation techniques
- H04R25/353—Frequency, e.g. frequency shift or compression
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61N—ELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
- A61N1/00—Electrotherapy; Circuits therefor
- A61N1/18—Applying electric currents by contact electrodes
- A61N1/32—Applying electric currents by contact electrodes alternating or intermittent currents
- A61N1/36—Applying electric currents by contact electrodes alternating or intermittent currents for stimulation
- A61N1/36036—Applying electric currents by contact electrodes alternating or intermittent currents for stimulation of the outer, middle or inner ear
- A61N1/36038—Cochlear stimulation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/003—Changing voice quality, e.g. pitch or formants
- G10L21/007—Changing voice quality, e.g. pitch or formants characterised by the process used
- G10L21/013—Adapting to target pitch
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2225/00—Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
- H04R2225/43—Signal processing in hearing aids to enhance the speech intelligibility
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Acoustics & Sound (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Neurosurgery (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Telephonic Communication Services (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Auxiliary Devices For Music (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
Description
本発明の実施形態は、周波数分析デバイス、統計評価デバイス、基本周波数修正器および発話信号生成器を有する補聴装置を提供する。周波数分析デバイスは、発話信号のある時間部分について、発話信号の瞬時基本周波数値を決定するように構成されている。統計評価デバイスは、いくつかの時間部分にわたる発話信号の平均基本周波数値を決定するように構成されている。基本周波数修正器は、特定の関数に従って、平均基本周波数値に対する瞬時基本周波数値の差または商が変更されて、したがって、基本周波数値がその中で変化する周波数範囲が修正されるように、瞬時基本周波数値を修正基本周波数値に修正するように構成されている。発話信号生成器は、修正基本周波数値に基づいて、基本周波数に関して修正された発話信号を生成するように構成されている。
Claims (12)
- 発話信号のある時間部分について、前記発話信号の瞬時基本周波数値を決定するように構成されている周波数分析デバイスと、
いくつかの時間部分にわたる前記発話信号の平均基本周波数値を決定するように構成されている統計評価デバイスと、
特定の関数に従って、前記平均基本周波数値に対する前記瞬時基本周波数値の差または商が変更されて、したがって、前記基本周波数値がその中で変化する周波数範囲が修正されるように、前記瞬時基本周波数値を修正基本周波数値に修正するように構成されている基本周波数修正器と、
前記修正基本周波数値に基づいて、前記基本周波数に関して修正された発話信号を生成するように構成されている発話信号生成器とを含む、補聴装置。 - 前記補聴装置は、有声時間部分および無声時間部分を分類するためのデバイスをさらに含み、前記周波数分析デバイスおよび前記統計評価デバイスは、有声であるとして分類されている前記発話信号の時間部分を用いて前記瞬時基本周波数値および前記平均基本周波数値を決定するように構成されている、請求項1に記載の補聴装置。
- 前記発話信号生成器は、前記発話信号のフォルマント周波数を実質的に変化させないように構成されている、請求項1または2に記載の補聴装置。
- 前記基本周波数修正器は、平均修正基本周波数値を、前記平均基本周波数値と実質的に同一のままにするように構成されている、請求項1〜3のいずれか一項に記載の補聴装置。
- 前記周波数分析デバイスは、線形予測コード化分析(LPC)のためのデバイスの一部分であり、前記発話信号生成器は、線形予測コード化合成のためのデバイスである、請求項1〜4のいずれか一項に記載の補聴装置。
- 前記発話信号生成器は、高速フーリエ変換またはPSOLA(ピッチ同期重畳加算)に基づく、請求項1〜4のいずれか一項に記載の補聴装置。
- それを用いて前記差または前記商が変更される前記特定の関数は、比例係数(PRF)を有する線形関数であり、それによって、前記差または前記商が、前記比例係数を用いてスケーリングされる、請求項1〜6のいずれか一項に記載の補聴装置。
- 前記基本周波数修正器は、前記修正基本周波数値を、下限値および上限値の少なくとも一方において制限するように構成されている、請求項1〜7のいずれか一項に記載の補聴装置。
- 前記統計評価デバイスは、いくつかの時間部分の前記基本周波数値の時間的不変性を決定し、前記時間的不変性が最小値を上回るときにのみ、前記平均基本周波数値を前記基本周波数修正器に送信するように構成されている、請求項1〜8のいずれか一項に記載の補聴装置。
- 前記補聴装置は、前記発話信号内で第1の話者から別の話者への変化が発生した場合を検出するように構成されている話者変化検出器をさらに含み、前記統計評価デバイスおよび前記基本周波数修正器は、前記話者変化検出器が前記第1の話者に戻る変化を検出するまで、前記第1の話者に関するデータ処理を中断するように構成されている、請求項1〜9のいずれか一項に記載の補聴装置。
- 発話信号のある時間部分について、前記発話信号の瞬時基本周波数値を決定することと、
いくつかの時間部分にわたる前記発話信号の平均基本周波数値を決定することと、
特定の関数に従って、前記平均基本周波数値に対する前記瞬時基本周波数値の差または商が変更されて、前記基本周波数値がその中で変化する周波数範囲が修正されるように、前記瞬時基本周波数値を、修正基本周波数値に修正することと、
前記修正基本周波数値に基づいて、前記基本周波数に関して修正された発話信号を生成することとを含む、発話信号を処理するための方法。 - 請求項11に記載の方法を実施するためのプログラムコードを有する、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE201310224417 DE102013224417B3 (de) | 2013-11-28 | 2013-11-28 | Hörhilfevorrichtung mit Grundfrequenzmodifizierung, Verfahren zur Verarbeitung eines Sprachsignals und Computerprogramm mit einem Programmcode zur Durchführung des Verfahrens |
DE102013224417.7 | 2013-11-28 | ||
PCT/EP2014/074258 WO2015078689A1 (de) | 2013-11-28 | 2014-11-11 | Hörhilfevorrichtung mit grundfrequenzmodifizierung |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016540432A true JP2016540432A (ja) | 2016-12-22 |
JP6316425B2 JP6316425B2 (ja) | 2018-04-25 |
Family
ID=51871060
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016532612A Active JP6316425B2 (ja) | 2013-11-28 | 2014-11-11 | 基本周波数修正を用いた補聴装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9936308B2 (ja) |
EP (1) | EP3074974B1 (ja) |
JP (1) | JP6316425B2 (ja) |
CN (1) | CN105765654A (ja) |
DE (1) | DE102013224417B3 (ja) |
WO (1) | WO2015078689A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200114606A (ko) * | 2019-03-29 | 2020-10-07 | 주식회사 엘지유플러스 | 음성을 제공하는 방법 및 장치 |
JP2020535731A (ja) * | 2017-09-27 | 2020-12-03 | ジーエヌ ヒアリング エー/エスGN Hearing A/S | 会話露出評価のための聴覚装置および関連する方法 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102016214745B4 (de) * | 2016-08-09 | 2018-06-14 | Carl Von Ossietzky Universität Oldenburg | Verfahren zur Stimulation einer implantierten Elektrodenanordnung einer Hörprothese |
US11253193B2 (en) * | 2016-11-08 | 2022-02-22 | Cochlear Limited | Utilization of vocal acoustic biomarkers for assistive listening device utilization |
JP6904198B2 (ja) * | 2017-09-25 | 2021-07-14 | 富士通株式会社 | 音声処理プログラム、音声処理方法および音声処理装置 |
EP3641344B1 (en) | 2018-10-16 | 2023-12-06 | Sivantos Pte. Ltd. | A method for operating a hearing instrument and a hearing system comprising a hearing instrument |
EP3961624A1 (de) * | 2020-08-28 | 2022-03-02 | Sivantos Pte. Ltd. | Verfahren zum betrieb einer hörvorrichtung in abhängigkeit eines sprachsignals |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008040431A (ja) * | 2006-08-10 | 2008-02-21 | Yamaha Corp | 音声加工装置 |
JP2008152042A (ja) * | 2006-12-18 | 2008-07-03 | Mitsubishi Electric Corp | 音声合成装置、音声合成方法及び音声合成プログラム |
JP2012037726A (ja) * | 2010-08-06 | 2012-02-23 | Nippon Hoso Kyokai <Nhk> | 音声合成装置およびコンピュータプログラム |
JP2013101212A (ja) * | 2011-11-08 | 2013-05-23 | Panasonic Corp | ピッチ分析装置、音声符号化装置、ピッチ分析方法および音声符号化方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SU1394232A1 (ru) * | 1986-04-02 | 1988-05-07 | Институт Систем Управления Ан Гсср | Способ идентификации говор щего |
US5729694A (en) * | 1996-02-06 | 1998-03-17 | The Regents Of The University Of California | Speech coding, reconstruction and recognition using acoustics and electromagnetic waves |
US7496510B2 (en) * | 2000-11-30 | 2009-02-24 | International Business Machines Corporation | Method and apparatus for the automatic separating and indexing of multi-speaker conversations |
US7219059B2 (en) * | 2002-07-03 | 2007-05-15 | Lucent Technologies Inc. | Automatic pronunciation scoring for language learning |
US7292977B2 (en) * | 2002-10-17 | 2007-11-06 | Bbnt Solutions Llc | Systems and methods for providing online fast speaker adaptation in speech recognition |
AU2003901025A0 (en) * | 2003-02-28 | 2003-03-20 | The University Of Melbourne | Cochlear implant found processing method and system |
CN1269106C (zh) * | 2004-08-31 | 2006-08-09 | 四川微迪数字技术有限公司 | 一种用于数字助听器的中文语音信号处理方法 |
DE602007004943D1 (de) * | 2007-03-23 | 2010-04-08 | Honda Res Inst Europe Gmbh | Tonhöhenextraktion mit Hemmung der Harmonischen und Subharmonischen der Grundfrequenz |
EP2048657B1 (en) * | 2007-10-11 | 2010-06-09 | Koninklijke KPN N.V. | Method and system for speech intelligibility measurement of an audio transmission system |
EP2081405B1 (en) * | 2008-01-21 | 2012-05-16 | Bernafon AG | A hearing aid adapted to a specific type of voice in an acoustical environment, a method and use |
US8280087B1 (en) * | 2008-04-30 | 2012-10-02 | Arizona Board Of Regents For And On Behalf Of Arizona State University | Delivering fundamental frequency and amplitude envelope cues to enhance speech understanding |
TWI372039B (en) * | 2008-11-19 | 2012-09-11 | Univ Nat Yang Ming | Method for detecting hearing impairment and device thereof |
CN103035252B (zh) * | 2011-09-30 | 2015-04-29 | 西门子公司 | 中文语音信号处理方法、装置及助听设备 |
CN103035237B (zh) * | 2011-09-30 | 2015-04-29 | 西门子公司 | 一种中文语音信号处理方法、装置和助听设备 |
JP5830364B2 (ja) * | 2011-12-01 | 2015-12-09 | 日本放送協会 | 韻律変換装置およびそのプログラム |
CN102779526B (zh) * | 2012-08-07 | 2014-04-16 | 无锡成电科大科技发展有限公司 | 语音信号中基音提取及修正方法 |
-
2013
- 2013-11-28 DE DE201310224417 patent/DE102013224417B3/de not_active Expired - Fee Related
-
2014
- 2014-11-11 WO PCT/EP2014/074258 patent/WO2015078689A1/de active Application Filing
- 2014-11-11 CN CN201480064706.2A patent/CN105765654A/zh active Pending
- 2014-11-11 EP EP14796119.7A patent/EP3074974B1/de active Active
- 2014-11-11 JP JP2016532612A patent/JP6316425B2/ja active Active
-
2016
- 2016-05-16 US US15/156,037 patent/US9936308B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008040431A (ja) * | 2006-08-10 | 2008-02-21 | Yamaha Corp | 音声加工装置 |
JP2008152042A (ja) * | 2006-12-18 | 2008-07-03 | Mitsubishi Electric Corp | 音声合成装置、音声合成方法及び音声合成プログラム |
JP2012037726A (ja) * | 2010-08-06 | 2012-02-23 | Nippon Hoso Kyokai <Nhk> | 音声合成装置およびコンピュータプログラム |
JP2013101212A (ja) * | 2011-11-08 | 2013-05-23 | Panasonic Corp | ピッチ分析装置、音声符号化装置、ピッチ分析方法および音声符号化方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020535731A (ja) * | 2017-09-27 | 2020-12-03 | ジーエヌ ヒアリング エー/エスGN Hearing A/S | 会話露出評価のための聴覚装置および関連する方法 |
KR20200114606A (ko) * | 2019-03-29 | 2020-10-07 | 주식회사 엘지유플러스 | 음성을 제공하는 방법 및 장치 |
KR102221236B1 (ko) * | 2019-03-29 | 2021-02-26 | 주식회사 엘지유플러스 | 음성을 제공하는 방법 및 장치 |
Also Published As
Publication number | Publication date |
---|---|
CN105765654A (zh) | 2016-07-13 |
JP6316425B2 (ja) | 2018-04-25 |
EP3074974B1 (de) | 2019-02-06 |
DE102013224417B3 (de) | 2015-05-07 |
US9936308B2 (en) | 2018-04-03 |
EP3074974A1 (de) | 2016-10-05 |
WO2015078689A1 (de) | 2015-06-04 |
US20160261959A1 (en) | 2016-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6316425B2 (ja) | 基本周波数修正を用いた補聴装置 | |
US11878169B2 (en) | Somatic, auditory and cochlear communication system and method | |
US10475467B2 (en) | Systems, methods and devices for intelligent speech recognition and processing | |
Tran et al. | Improvement to a NAM-captured whisper-to-speech system | |
Fogerty et al. | The relative importance of consonant and vowel segments to the recognition of words and sentences: Effects of age and hearing loss | |
JP2002014689A (ja) | デジタルに圧縮されたスピーチの了解度を向上させる方法および装置 | |
Irino et al. | Comparison of performance with voiced and whispered speech in word recognition and mean-formant-frequency discrimination | |
US20160210982A1 (en) | Method and Apparatus to Enhance Speech Understanding | |
Hansen et al. | A speech perturbation strategy based on “Lombard effect” for enhanced intelligibility for cochlear implant listeners | |
Fogerty et al. | Sentence intelligibility during segmental interruption and masking by speech-modulated noise: Effects of age and hearing loss | |
Bhattacharya et al. | Combined spectral and temporal enhancement to improve cochlear-implant speech perception | |
Hazan et al. | Does reading clearly produce the same acoustic-phonetic modifications as spontaneous speech in a clear speaking style? | |
Huang et al. | Combination and comparison of sound coding strategies using cochlear implant simulation with mandarin speech | |
US11783813B1 (en) | Methods and systems for improving word discrimination with phonologically-trained machine learning models | |
Amin et al. | Nine voices, one artist: Linguistic and acoustic analysis | |
Patel et al. | Loudmouth: Modifying text-to-speech synthesis in noise | |
US20230038118A1 (en) | Correction method of synthesized speech set for hearing aid | |
Luo et al. | Importance of pitch and periodicity to Chinese-speaking cochlear implant patients | |
Hagmüller | Speech enhancement for disordered and substitution voices | |
Kupryjanow et al. | Improved method for real-time speech stretching | |
Patel | Prosody conveys information in severely impaired speech | |
Inbanila et al. | Investigation of Speech Synthesis, Speech Processing Techniques and Challenges for Enhancements | |
WO2022229806A1 (en) | Method and device for real-time conversion of a whispered speech into synthetic natural voice | |
Wang et al. | Investigation of the relative perceptual importance of temporal envelope and temporal fine structure between tonal and non-tonal languages | |
Struwe | Evaluating the harmonic quality of pitch adaptation methods for use in cochlear implants |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170424 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170427 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170721 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170926 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170927 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180301 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180327 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6316425 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |