JP6479211B2 - 聴音装置 - Google Patents
聴音装置 Download PDFInfo
- Publication number
- JP6479211B2 JP6479211B2 JP2017551306A JP2017551306A JP6479211B2 JP 6479211 B2 JP6479211 B2 JP 6479211B2 JP 2017551306 A JP2017551306 A JP 2017551306A JP 2017551306 A JP2017551306 A JP 2017551306A JP 6479211 B2 JP6479211 B2 JP 6479211B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- microphone
- microphone signal
- unit
- hearing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 claims description 29
- 230000003044 adaptive effect Effects 0.000 claims description 27
- 230000000694 effects Effects 0.000 claims description 19
- 210000000613 ear canal Anatomy 0.000 claims description 3
- 238000001514 detection method Methods 0.000 claims description 2
- 230000008901 benefit Effects 0.000 description 7
- 230000009467 reduction Effects 0.000 description 7
- 239000013598 vector Substances 0.000 description 7
- 238000000034 method Methods 0.000 description 6
- 230000001364 causal effect Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 230000002194 synthesizing effect Effects 0.000 description 4
- 230000002238 attenuated effect Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000035876 healing Effects 0.000 description 2
- 230000001965 increasing effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/40—Arrangements for obtaining a desired directivity characteristic
- H04R25/407—Circuits for combining signals of a plurality of transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
- H04R25/552—Binaural
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
- H04R25/554—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired using a wireless connection, e.g. between microphone and amplifier or using Tcoils
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Neurosurgery (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
YL,EQ(k,n)=yL(k,n−DtarEQ)
であり、式中、DtarEQは、追加された因果的遅延である。次に、目標信号がyL,EQに合致するように、yRがフィルタリングされる。すなわち、
nBM(k,n)=YL,EQ(k,n)−YR,EQ(k,n)
yL,EQ(k,n)≒yL(k,n)かつyR,EQ(k,n)≒yR(k,n)
d(k,n)=zcalib(k,n−D)
式中、d(k,n)は、NLMSへの一次入力である。
zenh(k,n)=e(k,n)=d(k,n)−hANC(k,n)HnBM(k,n)
また、フィルタ係数ベクトルhANC(k,n)は、以下のようになる。
2 第1の左耳聴音デバイス
3 第2の右耳聴音デバイス
4 第1の左耳マイクロホン
5 第2の右耳マイクロホン
6 両耳聴音デバイス
7 聴音デバイスのユーザ
8 前方の話者
9 干渉話者
10 外部デバイス
11 第3の外部マイクロホン
12 減衰域
14 信号処理部
15 較正部
16 等化部
17 適応型ノイズキャンセラ部
18 ブロッキング行列
19 適応型ノイズキャンセラ
20 目標等化部
21 比較デバイス
Claims (9)
- 聴音装置(1)であって、
第1のマイクロホン信号(yL)および第2のマイクロホン信号(yR)をそれぞれ生成する第1のマイクロホン(4)および第2のマイクロホン(5)であって、第1の聴音デバイス(2)および第2の聴音デバイス(3)のうちの少なくとも1つに配置されている前記第1のマイクロホン(4)および前記第2のマイクロホン(5)のうちの少なくとも1つと、
第3のマイクロホン信号(z)を生成する第3のマイクロホン(11)であって、外部デバイス(10)に配置されている前記第3のマイクロホン(11)と、
信号処理部(14)と
を備え、
前記信号処理部(14)において、前記第3のマイクロホン信号(z)と、前記第1のマイクロホン信号(yL)および前記第2のマイクロホン信号(yR)のうちの少なくとも1つとが一緒に処理されることにより、前記第1のマイクロホン信号(yL)および/または前記第2のマイクロホン信号(yR)と比較して、信号対ノイズ比が向上した出力信号(zenh)を生成し、
前記信号処理部(14)が、適応型ノイズキャンセラ部(17)であって、前記出力信号(z enh )を得るために、前記第3のマイクロホン信号(z)と、前記第1のマイクロホン信号(y L )および前記第2のマイクロホン信号(y R )のうちの少なくとも1つとが供給され、さらに合成される適応型ノイズキャンセラ部(17)を備え、
前記適応型ノイズキャンセラ部(17)が比較デバイス(21)をさらに備え、前記比較デバイス(21)において、目標音声検出のために、前記第1のマイクロホン信号(y L )および前記第2のマイクロホン信号(y R )が比較され、特に、前記適応型ノイズキャンセラ部(17)が、目標音声活動が存在しない間にのみ適応されるように、前記適応型ノイズキャンセラ部(17)を制御するための制御信号(spVAD)を生成する聴音装置(1)。 - 前記外部デバイス(10)が、モバイルデバイス、スマートフォン、音響センサ、および音響センサネットワークの一部である音響センサ素子のうちの1つである、請求項1に記載の聴音装置(1)。
- 音響出力信号を生成するために、前記出力信号(zenh)が、前記第1の聴音デバイス(2)および前記第2の聴音デバイス(3)のうちの少なくとも1つの出力カプラ(16)に結合されている、請求項1または2に記載の聴音装置(1)。
- 前記第1の聴音デバイス(2)および前記第2の聴音デバイス(3)がそれぞれ、挿耳型聴音デバイスとして、特に完全外耳道挿入型聴音デバイスとして具体化されている、請求項1〜3のいずれか一項に記載の聴音装置(1)。
- 前記第1の聴音デバイス(2)が、前記第1のマイクロホン(4)を備え、前記第2の聴音デバイス(3)が、前記第2のマイクロホン(5)を備える、請求項1〜4のいずれか一項に記載の聴音装置(1)。
- 前記適応型ノイズキャンセラ部(17)において、前記第1のマイクロホン信号(yL)および前記第2のマイクロホン信号(yR)のうちの少なくとも1つが前処理されてノイズ参照信号(nEM)を生成し、前記第3のマイクロホン信号(z)が、前記ノイズ参照信号(nEM)と合成されて前記出力信号(zenh)を得る、請求項1に記載の聴音装置(1)。
- 前記適応型ノイズキャンセラ部(17)において、前記第1のマイクロホン信号(yL)および前記第2のマイクロホン信号(yR)が合成されて、前記ノイズ参照信号(nEM)を生成する、請求項6に記載の聴音装置(1)。
- 前記適応型ノイズキャンセラ部(17)が目標等化部(20)をさらに備え、前記目標等化部(20)において、目標位置成分に関して、前記第1のマイクロホン信号(yL)および前記第2のマイクロホン信号(yR)が等化され、前記等化された第1のマイクロホン信号(yL,EQ)、および前記等化された第2のマイクロホン信号(yR,EQ)が合成されて、前記ノイズ参照信号(nEM)を生成する、請求項7に記載の聴音装置(1)。
- 聴音装置(1)であって、
第1のマイクロホン信号(y L )および第2のマイクロホン信号(y R )をそれぞれ生成する第1のマイクロホン(4)および第2のマイクロホン(5)であって、第1の聴音デバイス(2)および第2の聴音デバイス(3)のうちの少なくとも1つに配置されている前記第1のマイクロホン(4)および前記第2のマイクロホン(5)のうちの少なくとも1つと、
第3のマイクロホン信号(z)を生成する第3のマイクロホン(11)であって、外部デバイス(10)に配置されている前記第3のマイクロホン(11)と、
信号処理部(14)と
を備え、
前記信号処理部(14)において、前記第3のマイクロホン信号(z)と、前記第1のマイクロホン信号(y L )および前記第2のマイクロホン信号(y R )のうちの少なくとも1つとが一緒に処理されることにより、前記第1のマイクロホン信号(y L )および/または前記第2のマイクロホン信号(y R )と比較して、信号対ノイズ比が向上した出力信号(z enh )を生成し、
前記信号処理部(14)が、適応型ノイズキャンセラ部(17)であって、前記出力信号(z enh )を得るために、前記第3のマイクロホン信号(z)と、前記第1のマイクロホン信号(y L )および前記第2のマイクロホン信号(y R )のうちの少なくとも1つとが供給され、さらに合成される適応型ノイズキャンセラ部(17)を備え、
前記信号処理部(14)が、較正部(15)および/または等化部(16)をさらに備え、前記第3のマイクロホン信号(z)と、前記第1のマイクロホン信号(yL)および前記第2のマイクロホン信号(yR)のうちの少なくとも1つとが、群遅延を補正するために前記較正部(15)に供給され、かつ/または、レベルおよび位相を補正するために前記等化部(16)に供給され、かつ、前記補正されたマイクロホン信号が、前記適応型ノイズキャンセラ部(17)に供給される聴音装置(1)。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP15162497 | 2015-04-02 | ||
EP15162497.0 | 2015-04-02 | ||
PCT/EP2016/057271 WO2016156595A1 (en) | 2015-04-02 | 2016-04-01 | Hearing apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018521520A JP2018521520A (ja) | 2018-08-02 |
JP6479211B2 true JP6479211B2 (ja) | 2019-03-06 |
Family
ID=52814861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017551306A Active JP6479211B2 (ja) | 2015-04-02 | 2016-04-01 | 聴音装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10798494B2 (ja) |
EP (1) | EP3278575B1 (ja) |
JP (1) | JP6479211B2 (ja) |
CN (1) | CN107431869B (ja) |
DK (1) | DK3278575T3 (ja) |
WO (1) | WO2016156595A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113450819B (zh) * | 2021-05-21 | 2024-06-18 | 音科思(深圳)技术有限公司 | 信号处理方法及相关产品 |
CN113689875B (zh) * | 2021-08-25 | 2024-02-06 | 湖南芯海聆半导体有限公司 | 一种面向数字助听器的双麦克风语音增强方法和装置 |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10294989A (ja) * | 1997-04-18 | 1998-11-04 | Matsushita Electric Ind Co Ltd | 騒音制御ヘッドセット |
DE10045197C1 (de) * | 2000-09-13 | 2002-03-07 | Siemens Audiologische Technik | Verfahren zum Betrieb eines Hörhilfegerätes oder Hörgerätessystems sowie Hörhilfegerät oder Hörgerätesystem |
EP1627552B1 (en) * | 2003-05-09 | 2007-12-26 | Widex A/S | Hearing aid system, a hearing aid and a method for processing audio signals |
DE60325699D1 (de) * | 2003-05-13 | 2009-02-26 | Harman Becker Automotive Sys | Verfahren und System zur adaptiven Kompensation von Mikrofonungleichheiten |
CA2559844C (en) | 2004-03-31 | 2013-05-21 | Swisscom Mobile Ag | Glasses frame comprising an integrated acoustic communication system for communication with a mobile radio appliance, and corresponding method |
WO2007028250A2 (en) * | 2005-09-09 | 2007-03-15 | Mcmaster University | Method and device for binaural signal enhancement |
EP1994788B1 (en) * | 2006-03-10 | 2014-05-07 | MH Acoustics, LLC | Noise-reducing directional microphone array |
US8068619B2 (en) * | 2006-05-09 | 2011-11-29 | Fortemedia, Inc. | Method and apparatus for noise suppression in a small array microphone system |
JP4475468B2 (ja) * | 2006-08-07 | 2010-06-09 | リオン株式会社 | 通信聴取システム |
EP2103175A1 (en) | 2006-12-20 | 2009-09-23 | Phonak AG | Wireless communication system |
US20100195836A1 (en) | 2007-02-14 | 2010-08-05 | Phonak Ag | Wireless communication system and method |
US7817808B2 (en) | 2007-07-19 | 2010-10-19 | Alon Konchitsky | Dual adaptive structure for speech enhancement |
EP2206361A1 (en) | 2007-10-16 | 2010-07-14 | Phonak AG | Method and system for wireless hearing assistance |
KR101449433B1 (ko) * | 2007-11-30 | 2014-10-13 | 삼성전자주식회사 | 마이크로폰을 통해 입력된 사운드 신호로부터 잡음을제거하는 방법 및 장치 |
US8223988B2 (en) * | 2008-01-29 | 2012-07-17 | Qualcomm Incorporated | Enhanced blind source separation algorithm for highly correlated mixtures |
EP2088802B1 (en) | 2008-02-07 | 2013-07-10 | Oticon A/S | Method of estimating weighting function of audio signals in a hearing aid |
DE102008046040B4 (de) | 2008-09-05 | 2012-03-15 | Siemens Medical Instruments Pte. Ltd. | Verfahren zum Betrieb einer Hörvorrichtung mit Richtwirkung und zugehörige Hörvorrichtung |
WO2010084769A1 (ja) * | 2009-01-22 | 2010-07-29 | パナソニック株式会社 | 補聴装置 |
WO2011098142A1 (en) | 2010-02-12 | 2011-08-18 | Phonak Ag | Wireless hearing assistance system and method |
US20110288860A1 (en) * | 2010-05-20 | 2011-11-24 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for processing of speech signals using head-mounted microphone pair |
US9053697B2 (en) * | 2010-06-01 | 2015-06-09 | Qualcomm Incorporated | Systems, methods, devices, apparatus, and computer program products for audio equalization |
US8855341B2 (en) * | 2010-10-25 | 2014-10-07 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for head tracking based on recorded sound signals |
CN102300140B (zh) * | 2011-08-10 | 2013-12-18 | 歌尔声学股份有限公司 | 一种通信耳机的语音增强方法及降噪通信耳机 |
KR101236443B1 (ko) * | 2012-07-27 | 2013-02-25 | (주)알고코리아 | 원격제어기능이 구비된 무선 귓속형 보청시스템 및 그 제어방법 |
US9071900B2 (en) | 2012-08-20 | 2015-06-30 | Nokia Technologies Oy | Multi-channel recording |
US9549253B2 (en) * | 2012-09-26 | 2017-01-17 | Foundation for Research and Technology—Hellas (FORTH) Institute of Computer Science (ICS) | Sound source localization and isolation apparatuses, methods and systems |
US9906874B2 (en) | 2012-10-05 | 2018-02-27 | Cirrus Logic, Inc. | Binaural hearing system and method |
US9148733B2 (en) * | 2012-12-28 | 2015-09-29 | Gn Resound A/S | Hearing aid with improved localization |
EP2984855B1 (en) | 2013-04-09 | 2020-09-30 | Sonova AG | Method and system for providing hearing assistance to a user |
CN103269465B (zh) * | 2013-05-22 | 2016-09-07 | 歌尔股份有限公司 | 一种强噪声环境下的耳机通讯方法和一种耳机 |
US9036845B2 (en) | 2013-05-29 | 2015-05-19 | Gn Resound A/S | External input device for a hearing aid |
EP2840807A1 (en) * | 2013-08-19 | 2015-02-25 | Oticon A/s | External microphone array and hearing aid using it |
DK2849462T3 (en) | 2013-09-17 | 2017-06-26 | Oticon As | Hearing aid device comprising an input transducer system |
CN103686575B (zh) * | 2013-11-28 | 2016-08-17 | 清华大学 | 助听装置 |
-
2016
- 2016-04-01 EP EP16716013.4A patent/EP3278575B1/en not_active Revoked
- 2016-04-01 JP JP2017551306A patent/JP6479211B2/ja active Active
- 2016-04-01 DK DK16716013.4T patent/DK3278575T3/da active
- 2016-04-01 WO PCT/EP2016/057271 patent/WO2016156595A1/en active Application Filing
- 2016-04-01 CN CN201680014387.3A patent/CN107431869B/zh active Active
-
2017
- 2017-10-02 US US15/722,318 patent/US10798494B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20180027340A1 (en) | 2018-01-25 |
EP3278575B1 (en) | 2021-06-02 |
CN107431869B (zh) | 2020-01-14 |
WO2016156595A1 (en) | 2016-10-06 |
JP2018521520A (ja) | 2018-08-02 |
EP3278575A1 (en) | 2018-02-07 |
US10798494B2 (en) | 2020-10-06 |
DK3278575T3 (da) | 2021-08-16 |
CN107431869A (zh) | 2017-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9723422B2 (en) | Multi-microphone method for estimation of target and noise spectral variances for speech degraded by reverberation and optionally additive noise | |
US9905216B2 (en) | Voice sensing using multiple microphones | |
EP3057337B1 (en) | A hearing system comprising a separate microphone unit for picking up a users own voice | |
US9800981B2 (en) | Hearing device comprising a directional system | |
JP2018137735A (ja) | 補聴装置との間のストリーミング通信のための方法および装置 | |
US11134348B2 (en) | Method of operating a hearing aid system and a hearing aid system | |
CN104254029A (zh) | 一种具有麦克风的耳机 | |
WO2019086439A1 (en) | Method of operating a hearing aid system and a hearing aid system | |
JP6479211B2 (ja) | 聴音装置 | |
DK180745B1 (en) | Procedure by a hearing aid | |
EP2916320A1 (en) | Multi-microphone method for estimation of target and noise spectral variances | |
US11533555B1 (en) | Wearable audio device with enhanced voice pick-up | |
US8625826B2 (en) | Apparatus and method for background noise estimation with a binaural hearing device supply | |
WO2024119397A1 (zh) | 开放式可穿戴声学设备及主动降噪方法 | |
WO2024119396A1 (zh) | 开放式可穿戴声学设备及其主动降噪方法 | |
WO2024119394A1 (zh) | 开放式可穿戴声学设备及主动降噪方法 | |
EP3886463A1 (en) | Method at a hearing device | |
CN116405818A (zh) | 包括低复杂性波束形成器的听力装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180904 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181204 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190108 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6479211 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |