CN107086035A - 一种基于车内噪声监测的语音提醒装置 - Google Patents
一种基于车内噪声监测的语音提醒装置 Download PDFInfo
- Publication number
- CN107086035A CN107086035A CN201611187956.2A CN201611187956A CN107086035A CN 107086035 A CN107086035 A CN 107086035A CN 201611187956 A CN201611187956 A CN 201611187956A CN 107086035 A CN107086035 A CN 107086035A
- Authority
- CN
- China
- Prior art keywords
- voice
- noise
- signal
- module
- filtering
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001914 filtration Methods 0.000 claims abstract description 35
- 238000001514 detection method Methods 0.000 claims abstract description 16
- 238000012360 testing method Methods 0.000 claims abstract description 12
- 230000009467 reduction Effects 0.000 claims abstract description 11
- 238000012544 monitoring process Methods 0.000 claims abstract description 7
- 238000012545 processing Methods 0.000 claims description 11
- 238000000354 decomposition reaction Methods 0.000 claims description 3
- 230000004069 differentiation Effects 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000003780 insertion Methods 0.000 claims 1
- 230000037431 insertion Effects 0.000 claims 1
- 238000007689 inspection Methods 0.000 claims 1
- 230000007613 environmental effect Effects 0.000 abstract description 3
- 238000000034 method Methods 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001627 detrimental effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000035484 reaction time Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/60—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for measuring the quality of voice signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02087—Noise filtering the noise being separate speech, e.g. cocktail party
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Abstract
本发明公开了一种基于车内噪声监测的语音提醒装置,包括:噪声检测模块,用于监测车内噪声分贝值,当车内噪声分贝值达到阈值时启动语音过滤模块;还用于检测语音过滤模块发送的人声分贝值;语音过滤模块,用于获得车内噪音过滤后得到的人声;所述语音过滤模块中包含:预处理器、人声检测端、噪声过滤端;语音提醒模块,用于当噪声检测模块检测语音过滤模块发送的人声分贝值超过阈值时,播报信息,提醒车内乘客降低说话音量。本发明实现了对车内噪声的监控,当噪声超过阈值时可自动分析是由于乘客说话引起还是由于环境噪音,并在语音噪音过大时进行播报,提醒乘客降低说话音量,提高驾驶安全性,提升乘客舒适度。
Description
技术领域
本发明涉及音频处理技术领域,尤其涉及一种基于车内噪声监测的语音提醒装置。
背景技术
噪声是一类引起人们烦躁、扰乱人们情绪、或音量过强而危害人体健康的声音。而司机的驾驶维系着道路交通的安全,要求的是无时无刻的专注与谨慎,因此噪声对司机的影响不容忽视。就车辆而言,车行驶时本身就会产生来自发动机、底盘、进排气噪声,司机驾驶时除了受着车内外噪声的影响外,有时还会受到乘话语嘈杂的影响。乘客产生的这些噪声极易引起司机的不满,扰乱司机的情绪,使司机的注意力和反应时间下降,这些都对行驶安全造成影响。此外,车内的语音噪声也会对其他乘客的心情造成影响,但碍于情面,乘客往往不会道出。
授权公告号为CN 201995115 A的《一种车内降噪系统》提出了一种用于汽车内的降噪系统,其在进行降噪时未能分离人声与环境嘈杂,且其使用幅度相等,相位相反的降噪信号进行降噪,如果在进行噪声分析处理时有延迟,那么反而会造成车内噪声增大;申请公布号为CN 103985380 A的《有源噪声控制系统和方法》提出了一种可控制特定来源噪声的方法,然而在现实中,公交或地铁内的行人较多时,将对其侦测位置造成干扰,较难进行定位消除噪音。
发明内容
本发明要解决的技术问题在于针对现有技术中的缺陷,提供一种基于车内噪声监测的语音提醒装置。
本发明解决其技术问题所采用的技术方案是:一种基于车内噪声监测的语音提醒装置,包括:
噪声检测模块,用于监测车内噪声分贝值,当车内噪声分贝值达到阈值时启动语音过滤模块;还用于检测语音过滤模块发送的人声分贝值;
语音过滤模块,用于获得车内噪音过滤后得到的人声;所述语音过滤模块中包含:预处理器、人声检测端、噪声过滤端;
所述预处理器,用于清除频率小于80Hz或频率大于1200Hz的信号,再将处理后的信号送入人声检测端;
所述人声检测端,用于使用小波去噪算法对剩余信号进行分析,去除多余环境噪声;得到人声余留信号;
所述噪声过滤端,将余留的信号进行区分编码,送入噪声检测模块;所述区分编码为对人声分贝值进行阈值区分;
语音提醒模块,用于当噪声检测模块检测语音过滤模块发送的人声分贝值超过阈值时,播报信息,提醒车内乘客降低说话音量。
按上述方案,所述人声检测端去除多余环境噪声;得到人声余留信号的具体步骤如下:
步骤一:对预处理后的信号进行小波变换,得到各个尺度上的小波系数;
步骤二:对各个尺度的小波系数进行软阈值函数处理,得到原始信号小波系数的估计值;
步骤三:利用处理后的小波系数通过小波反变换得到去噪后的信号;
具体如下:
设N点离散含噪信号为
f(t)=s(t)+n(t) (1)
其中s(t)为原始信号,n(t)是方差为σ2的高斯白噪声,服从N(0,σ2);
在每一尺度j上,把信号S分解为
其中J为最佳尺度,hj和gj分别表示h和g中每相邻两系数间插入2j-1个零点构成的新的滤波器;假设原始信号有N个非零采样点,则该算法的时间复杂度和空间复杂度均为O(J·N)。相应地,小波快速重构算法为
对含噪声信号f(t)利用(2)进行小波分解,得到小波系数wj,k;
其次,令λj=σ(2loga N)1/2/ln(j+1),由式(4)定义wj,k,从而得到一组估计小波系数;
最后,对wj,k利用(3)进行重构,便可得到f(t)的估计值。
本发明产生的有益效果是:本发明实现了对车内噪声的监控,当噪声超过阈值时可自动分析是由于乘客说话引起还是由于环境噪音,并在语音噪音过大时进行播报,提醒乘客降低说话音量,提高驾驶安全性,提升乘客舒适度。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明实施例的工作流程图;
图2是本发明实施例的语音过滤模块工作流程图;
图3是本发明实施例的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
如图3所示,一种基于车内噪声监测的语音提醒装置,包括:噪声检测模块、语音过滤模块、语音提醒模块,其实现了对车内噪声的监控,当噪声超过阈值时可自动分析是由于乘客说话引起还是由于环境噪音,并在语音噪音过大时进行播报,提醒乘客降低说话音量,提高驾驶安全性,提升乘客舒适度。
一种基于车内噪声监测的语音提醒装置,包括:
噪声检测模块,用于监测车内噪声分贝值,当车内噪声分贝值达到阈值时启动语音过滤模块;还用于检测语音过滤模块发送的人声分贝值;
语音过滤模块,用于获得车内噪音过滤后得到的人声;所述语音过滤模块中包含:预处理器、人声检测端、噪声过滤端;
所述预处理器,用于清除频率小于80Hz或频率大于1200Hz的信号,再将处理后的信号送入人声检测端;
所述人声检测端,用于使用小波去噪算法对剩余信号进行分析,去除多余环境噪声;得到人声余留信号;
所述噪声过滤端,将余留的信号进行区分编码,送入噪声检测模块;
语音提醒模块,用于当噪声检测模块检测语音过滤模块发送的人声分贝值超过阈值时,播报信息,提醒车内乘客降低说话音量。
本发明中,所述噪声检测模块检测到车内噪声超过阈值(60分贝)时,才会开始进行收集音频,并将收集的音频送入语音过滤模块。
经过噪声过滤后的音频将会有特定的编码,用于与车内源噪声进行区别。
如图1,结合上述特征,进一步阐述系统工作流程:
步骤一,噪声检测模块实时监控车内噪声,当噪声超过60分贝时,开始收集噪声;
步骤二,收集的噪声送入语音过滤模块中,滤去频率小于80Hz,大于1200Hz 的信号;
步骤三,人声检测端根据小波去噪算法对剩余信号进行分析,去除多余部分;
步骤四,将余留的信号进行区分编码,送入噪声检测模块;
步骤五,噪声检测模块读入信号测算分贝,当分贝大于60时,由于信号具有区分编码,故启动语音提醒模块;
步骤六,语音提醒模块播报已经录制的音频:“车内噪声已经达到上限,请您降低说话音量”。
结合图2,阐述本发明的语音过滤模块工作原理:
步骤一:对预处理后的信号进行小波变换,得到各个尺度上的小波系数;
步骤二:对各个尺度的小波系数进行软阈值函数处理,得到原始信号小波系数的估计值;
步骤三:利用处理后的小波系数通过小波反变换得到去噪后的信号。
具体如下:
设N点离散含噪信号为
f(t)=s(t)+n(t) (1)
其中s(t)为原始信号,n(t)是方差为σ2的高斯白噪声,服从N(0,σ2);
在每一尺度j上,把信号S分解为
其中J为最佳尺度,hj和gj分别表示h和g中每相邻两系数间插入2j-1个零点构成的新的滤波器;假设原始信号有N个非零采样点,则该算法的时间复杂度和空间复杂度均为O(J·N)。相应地,小波快速重构算法为
(4)首先,对含噪声信号f(t)利用(2)进行小波分解,得到小波系数wj,k;
其次,令λj=σ(2loga N)1/2ln(j+1),由式(4)定义wj,k,从而得到一组估计小波系数;
最后,对wj,k利用(3)进行重构,便可得到f(t)的估计值。
本发明可应用于公交,地铁,私人轿车等多个交通工具内,具备良好的可拓展性。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (2)
1.一种基于车内噪声监测的语音提醒装置,其特征在于,包括:
噪声检测模块,用于监测车内噪声分贝值,当车内噪声分贝值达到阈值时启动语音过滤模块;还用于检测语音过滤模块发送的人声分贝值;
语音过滤模块,用于获得车内噪音过滤后得到的人声;所述语音过滤模块中包含:预处理器、人声检测端、噪声过滤端;
所述预处理器,用于清除频率小于80Hz或频率大于1200Hz的信号,再将处理后的信号送入人声检测端;
所述人声检测端,用于使用小波去噪算法对剩余信号进行分析,去除多余环境噪声;得到人声余留信号;
所述噪声过滤端,将余留的信号进行区分编码,送入噪声检测模块;所述区分编码为对人声分贝值进行阈值区分;
语音提醒模块,用于当噪声检测模块检测语音过滤模块发送的人声分贝值超过阈值时,播报信息,提醒车内乘客降低说话音量。
2.根据权利要求1所述的基于车内噪声监测的语音提醒装置,其特征在于,所述人声检测端去除多余环境噪声;得到人声余留信号的具体步骤如下:
步骤一:对预处理后的信号进行小波变换,得到各个尺度上的小波系数;
步骤二:对各个尺度的小波系数进行软阈值函数处理,得到原始信号小波系数的估计值;
步骤三:利用处理后的小波系数通过小波反变换得到去噪后的信号;
具体如下:
设N点离散含噪信号为:
f(t)=s(t)+n(t) (1)
其中s(t)为原始信号,n(t)是方差为σ2的高斯白噪声,服从N(0,σ2);
在每一尺度j上,把信号S分解为
其中J为最佳尺度,hj和gj分别表示h和g中每相邻两系数间插入2j-1个零点构成的新的滤波器;假设原始信号有N个非零采样点,则该算法的时间复杂度和空间复杂度均为O(J·N);相应地,小波快速重构算法为
首先,对含噪声信号f(t)利用式(2)进行小波分解,得到小波系数wj,k;
其次,令λj=σ(2logaN)1/2/ln(j+1),由式(4)定义wj,k,从而得到一组估计小波系数;
最后,对wj,k利用式(3)进行重构,便可得到f(t)的估计值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611187956.2A CN107086035A (zh) | 2016-12-20 | 2016-12-20 | 一种基于车内噪声监测的语音提醒装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611187956.2A CN107086035A (zh) | 2016-12-20 | 2016-12-20 | 一种基于车内噪声监测的语音提醒装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107086035A true CN107086035A (zh) | 2017-08-22 |
Family
ID=59614416
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611187956.2A Pending CN107086035A (zh) | 2016-12-20 | 2016-12-20 | 一种基于车内噪声监测的语音提醒装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107086035A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110097884A (zh) * | 2019-06-11 | 2019-08-06 | 大众问问(北京)信息科技有限公司 | 一种语音交互方法和装置 |
CN111742538A (zh) * | 2018-01-23 | 2020-10-02 | 索尼公司 | 提醒方法及装置、电子设备 |
CN113310516A (zh) * | 2021-05-25 | 2021-08-27 | 安徽安凯汽车股份有限公司 | 一种智能网联车远程监控系统 |
CN116721390A (zh) * | 2023-08-09 | 2023-09-08 | 克伦斯(天津)轨道交通技术有限公司 | 基于数据处理的地铁列车乘客状态确定方法和系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102982808A (zh) * | 2012-12-05 | 2013-03-20 | 张雪晶 | 基于小波变换的语音去噪装置及方法 |
KR20140052661A (ko) * | 2012-10-25 | 2014-05-07 | 현대모비스 주식회사 | 신호처리를 이용한 차량용 마이크로 폰 시스템 |
CN105516858A (zh) * | 2015-11-23 | 2016-04-20 | 上海汽车集团股份有限公司 | 车内声音调节方法、装置以及一种汽车 |
CN105931650A (zh) * | 2016-04-20 | 2016-09-07 | 深圳市航盛电子股份有限公司 | 一种基于音频特征提取的自适应降噪方法 |
CN106205593A (zh) * | 2016-06-28 | 2016-12-07 | 广东欧珀移动通信有限公司 | 一种车内声音调整方法及相关设备 |
-
2016
- 2016-12-20 CN CN201611187956.2A patent/CN107086035A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140052661A (ko) * | 2012-10-25 | 2014-05-07 | 현대모비스 주식회사 | 신호처리를 이용한 차량용 마이크로 폰 시스템 |
CN102982808A (zh) * | 2012-12-05 | 2013-03-20 | 张雪晶 | 基于小波变换的语音去噪装置及方法 |
CN105516858A (zh) * | 2015-11-23 | 2016-04-20 | 上海汽车集团股份有限公司 | 车内声音调节方法、装置以及一种汽车 |
CN105931650A (zh) * | 2016-04-20 | 2016-09-07 | 深圳市航盛电子股份有限公司 | 一种基于音频特征提取的自适应降噪方法 |
CN106205593A (zh) * | 2016-06-28 | 2016-12-07 | 广东欧珀移动通信有限公司 | 一种车内声音调整方法及相关设备 |
Non-Patent Citations (1)
Title |
---|
赵瑞珍 等: "一种基于小波变换的白噪声消噪方法的改进", 《西安电子科技大学学报(自然科学版)》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111742538A (zh) * | 2018-01-23 | 2020-10-02 | 索尼公司 | 提醒方法及装置、电子设备 |
CN110097884A (zh) * | 2019-06-11 | 2019-08-06 | 大众问问(北京)信息科技有限公司 | 一种语音交互方法和装置 |
CN113310516A (zh) * | 2021-05-25 | 2021-08-27 | 安徽安凯汽车股份有限公司 | 一种智能网联车远程监控系统 |
CN116721390A (zh) * | 2023-08-09 | 2023-09-08 | 克伦斯(天津)轨道交通技术有限公司 | 基于数据处理的地铁列车乘客状态确定方法和系统 |
CN116721390B (zh) * | 2023-08-09 | 2023-10-27 | 克伦斯(天津)轨道交通技术有限公司 | 基于数据处理的地铁列车乘客状态确定方法和系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107086035A (zh) | 一种基于车内噪声监测的语音提醒装置 | |
US8504362B2 (en) | Noise reduction for speech recognition in a moving vehicle | |
EP0982578A2 (en) | Method and apparatus for identifying sound in a composite sound signal | |
DE102007051261A1 (de) | Verfahren und Vorrichtung zur akustischen Beurteilung eines Kraftfahrzeuges | |
CN108597524B (zh) | 一种汽车人声识别提示装置及方法 | |
CN109002817A (zh) | 基于自动驾驶车辆驾驶疲劳时变规律的接管绩效监测预警系统 | |
CN113066468A (zh) | 一种基于车内环境主动噪音干扰消除优化装置及方法 | |
CN113091875B (zh) | 一种车内异响检测与评价系统及检测方法 | |
CN107424596A (zh) | 一种汽车舱内噪声主动控制方法和系统 | |
CN112863472A (zh) | 交通工具用消音装置及交通工具用消音方法 | |
JP2014232084A (ja) | 異音検知装置及びプログラム | |
Nongpiur | Impulse noise removal in speech using wavelets | |
JP2007011124A (ja) | 雑音除去装置及びそのプログラム | |
CN105667432A (zh) | 一种汽车主动降噪方法及系统 | |
CN107782548B (zh) | 一种基于对轨道交通工具零部件检测系统 | |
CN116645969A (zh) | 一种基于网约车车内场景的声纹识别方法 | |
CN117794452A (zh) | 用于诊断疾病、优选地呼吸道疾病的方法 | |
CN110875051A (zh) | 语音降噪装置和车辆以及语音降噪方法和存储介质 | |
CN112957044A (zh) | 一种基于双层神经网络模型的驾驶员情绪识别系统 | |
CN113611334A (zh) | 一种车外声音感知方法和系统 | |
CN111033609A (zh) | 用于运行车载声学信号生成装置的方法 | |
CN113247730B (zh) | 基于多维特征的电梯乘客尖叫检测方法及系统 | |
CN114212093B (zh) | 一种安全驾驶监控方法、系统及可存储介质 | |
US20230114524A1 (en) | Method for determining a noteworthy sub-sequence of a monitoring image sequence | |
Rank et al. | Noise suppression based onwavelet packet decomposition and quantile noise estimation for robust automatic speech recognition |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170822 |