CN108282230A - 语音信息的获取装置及方法 - Google Patents

语音信息的获取装置及方法 Download PDF

Info

Publication number
CN108282230A
CN108282230A CN201810062431.9A CN201810062431A CN108282230A CN 108282230 A CN108282230 A CN 108282230A CN 201810062431 A CN201810062431 A CN 201810062431A CN 108282230 A CN108282230 A CN 108282230A
Authority
CN
China
Prior art keywords
signal
frequency
signals
aom
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810062431.9A
Other languages
English (en)
Inventor
樊红星
范松涛
周燕
李丽艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Semiconductors of CAS
Original Assignee
Institute of Semiconductors of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Semiconductors of CAS filed Critical Institute of Semiconductors of CAS
Priority to CN201810062431.9A priority Critical patent/CN108282230A/zh
Publication of CN108282230A publication Critical patent/CN108282230A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/50Transmitters
    • H04B10/516Details of coding or modulation
    • H04B10/548Phase or frequency modulation
    • H04B10/556Digital modulation, e.g. differential phase shift keying [DPSK] or frequency shift keying [FSK]
    • H04B10/5561Digital phase modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B11/00Transmission systems employing sonic, ultrasonic or infrasonic waves

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Electrostatic, Electromagnetic, Magneto- Strictive, And Variable-Resistance Transducers (AREA)

Abstract

一种语音信息的获取装置和方法,该装置包括:外差干涉光路,产生载波调制信号和AOM驱动参考信号;信号转换模块,对载波调制信号进行模数转换,确定数字调制信号,及将AOM驱动参考信号离散化,确定离散AOM信号;混频模块,根据离散AOM信号产生两路单位正交信号,并与数字调制信号进行混频,确定两路正交的调制信号;低通滤波模块,滤除混频模块产生的高频信号,确定两路滤波后的正交信号;频率计算模块,对两路滤波后的正交信号进行频率的计算,确定声致振动信号的频率;语音输出模块,输出声致振动信号。本发明通过用声致振动信号调制载波信号,再将载波调制信号与离散AOM信号进行混频和滤波,能够精确地确定声致振动信号。

Description

语音信息的获取装置及方法
技术领域
本发明涉及激光语音信息获取领域,尤其涉及一种语音信息的获取装置及方法。
背景技术
激光语音获取技术具有非接触,隐蔽性好,探测距离远的优点,在现代情报获取技术中占有重要地位,可广泛应用公安,武警,军队等特种部门;
声波能够引起物体的振动,物体的振动与声波同频,因此只要获取声音源附近物体的振动频率信息就能够得到声音源的语音,激光语音获取技术正是基于此原理;
为了提高激光语音获取技术的抗干扰性,通常采用高频载波技术,由于频移器件的特性,常用的频移量为40MHz,由于数字信号抗干扰性强,准确性好的特点,目前信号解调通常在数字域进行,因此需要对模拟载波信号进行采样离散化;根据香浓采样定理,得到不失真的信号采样率至少为80MHz,而在工程应用中,采样率更高,达到几百MSPS甚至上GSPS,如此高的采样率给后续信号处理带来很大的挑战,而且增加设备成本。
发明内容
(一)要解决的技术问题
本发明的目的在于提供一种语音信息的获取装置及方法,以解决上述的至少一项技术问题。
(二)技术方案
本发明的一方面,提供了一种语音信息的获取装置,包括:
外差干涉光路,用于产生经过声致振动信号调制后的载波调制信号;以及产生AOM驱动参考信号;
信号转换模块,用于对所述载波调制信号进行模数转换,确定数字调制信号,以及将所述AOM驱动参考信号离散化,确定离散AOM信号;
混频模块,用于根据所述离散AOM信号产生两路单位正交信号,以及将所述单位正交信号与所述数字调制信号进行混频,确定两路正交的调制信号;
低通滤波模块,用于滤除混频模块产生的高频信号,确定两路滤波后的正交信号;
频率计算模块,用于对所述两路滤波后的正交信号进行频率的计算,确定声致振动信号的频率;以及
语音输出模块,用于输出所述声致振动信号。
在本发明的一些实施例中,所述载波调制信号的公式为S(t)=Acos(2πF0t+φ),其中,A为载波调制信号的幅度,F0为所述载波信号的频率,φ为声致振动引起的载波相位变化,t为时间;
所述数字调制信号S(n)=A(n)cos[2πF1(n)+φ(n)],n为离散序列,F1为数字调制信号的频率和离散AOM信号的频率。
在本发明的一些实施例中,所述两路正交的调制信号为:
其中,I0和Q0分别为两路单位正交信号。
在本发明的一些实施例中,所述信号转换模块以采样频率Fs对所述模拟调制信号进行采样,从而确定数字调制信号,其中,数字调制信号的数据速率为Fs,数字调制信号的频率F1=|Fs-F0|,且2F1≤Fs<2F0
在本发明的一些实施例中,还包括:信号抽取模块,用于对所述两路正交的调制信号进行抽取,确定抽取后的信号,其中,抽取的比例为1/R,抽取后的信号的数据速率为FR=Fs/R;以及用于对抽取后的信号进行滤波,滤除其中的高频信号保留其中的低频信号,所述低频信号为:
在本发明的一些实施例中,所述频率计算模块包括:
微分单元,用于计算HIS的微分H’IS和HQS的微分H’QS
第一乘法单元,用于计算H’IS与HQS的乘积、以及H’QS与HIS的乘积;
减法单元,用于计算H’IS与HQS的乘积、与H’QS与HIS的乘积之差;
第二乘法单元,用于将H’IS×HQS-HIS×H’QS与预定参数相乘,确定所述声致振动信号的频率
在本发明的一些实施例中,语音输出模块还包括一转换滤波单元,用于将所述滤波后的信号进行数模转换,并滤除噪声,确定所述声致振动信号。
在本发明的一些实施例中,所述语音信息的获取装置基于FPGA芯片。
本发明的另一方面,还提供了一种语音信息的获取方法,采用以上任意一种语音信息的获取装置来获取语音信息。
(三)有益效果
本发明的语音信息的获取装置及方法,相较于现有技术至少具有以下优点:
1、通过外差干涉光路经过AOM(声光调制器)产生光学频移信号,此光信号经过光学传感和干涉后,得到载波调制信号,此载波频率大小与AOM的频移量相等,一般来说,载波信号的频率较高,能够提高装置的抗干扰性。
2、将离散AOM信号的两路单位正交信号与数字调制信号进行混频,确定两路正交的调制信号,保证混频时两路信号时钟同源。将载波调制信号和AOM驱动参考信号离散化后,在数字域处理信号进行处理,增强了本发明的装置和方法的抗干扰性,有效地提高了处理精度从而得到更精确的语音信息的频率。
3、为了适应较高频率的载波信号,以采样频率Fs对所述模拟调制信号进行采样,使得数据率降低,能够有效地降低信号后端处理复杂度。
4、本发明可以基于FPGA,能够实现各模块的设计,同时还提高了装置的可移植性和修改性。
5、本发明中的信号经过模/数转换和数/模转换,将信号变化的数字域处理,并且最后将目标信号转换成模拟信号输出,这样做的优点是使得算法的抗干扰性强,准确度高,保证了本发明输出的语音信息的精度。
附图说明
图1为本发明实施例的语音信息的获取装置的结构示意图。
图2为本发明实施例的频率计算模块的具体结构示意图。
具体实施方式
现有技术中,为了提高激光语音获取技术的抗干扰性,高采样率给后续信号处理带来很大的挑战,而且增加设备成本,有鉴于此,本发明提供了一种语音信息的获取装置和方法,通过外差干涉光路产生经过AOM驱动参考信号频移的载波信号,以及接收外界的声致振动信号,声致振动信号调制所述载波信号的相位,确定载波调制信号,一般来说,载波信号的频率较高,能够提高装置的抗干扰性。此外,还将离散AOM信号的两路单位正交信号与数字调制信号进行混频,确定两路正交的调制信号,便于后续的处理,从而得到更精确的语音信息的频率。
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明进一步详细说明。
本发明实施例的一方面,提供了一种语音信息的获取装置,图1为本发明实施例的语音信息的获取装置的结构示意图,如图1所示,该装置包括外差干涉光路1、信号转换模块2、混频模块3、滤波模块4、频率计算模块5和语音输出模块6。
接着,就对各模块进行详细描述。
外差干涉光路1,接收外界的声致振动信号并调制光学信号,经过干涉和光电模块转换产生相位变化的载波调制信号;以及产生AOM驱动参考信号,作为后续信号转换模块2的参考信号。
更详细地,外差干涉光路1向声音源附近的物体发射一束激光,声音引起物体振动,声致振动信号调制入射光波,被调制后的光波在物体表面发生漫反射,漫反射后的信号,经过光电转换和模拟前端处理,转化为载波调制信号:S(t)=Acos(2πF0t+φ),其中,A为载波调制信号的幅度,F0为所述载波信号的频率(例如40MHz),φ为声致振动引起的载波相位变化,t为时间。
信号转换模块2,用于对所述载波调制信号进行模数转换,确定数字调制信号,以及将所述AOM驱动参考信号离散化,确定离散AOM信号。将载波调制信号和AOM驱动参考信号离散化后,在数字域处理信号进行处理,增强了本发明的装置和方法的抗干扰性,有效地提高了处理精度从而利于得到更精确的语音信息的频率。
所述数字调制信号S(n)=A(n)cos[2πF1(n)+φ(n)],n为离散序列,F1为数字调制信号的频率和离散AOM信号的频率。
混频模块3,用于根据所述离散AOM信号产生两路单位正交信号,以及将所述单位正交信号与所述数字调制信号进行混频,将该数字调制信号正交化,确定两路正交的调制信号,这样就能保证混频时两路信号时钟同源。
所述两路正交的调制信号为:
其中,I0和Q0分别为所述两路单位正交信号,大小相等,相位差为90°。
由于载波信号的频率较高,要求后端采样率也越高,这对后续的信号处理及滤波模块的设计带来一定难度,因此,本发明引入一种基于欠采样(带通采样)方法,欠采样的特点就是用低于Nyquist频率以下的采样率进行采样,数据率的降低能够有效地降低信号后端处理复杂度。本发明实施例在图1的基础上增加了信号抽取模块7。
由于信号转换模块2以采样频率Fs对所述模拟调制信号进行采样,从而确定数字调制信号,其中,数字调制信号的数据速率为Fs,数字调制信号的频率F1=|Fs-F0|,且2F1≤Fs<2F0
经过混频后的信号,由于数据速率过高,直接进入低通滤波器会给滤波器的设计带来一定难度,因此需要降低数据速率。在本发明实施例中,还可以包括一信号抽取模块7(包括但不限于CIC滤波器),用于对所述两路正交的调制信号进行抽取,确定抽取后的信号,例如将CIC滤波器抽取率设R,抽取的比例为1/R,抽取后的信号的数据速率为FR=Fs/R;以及用于对抽取后的信号进行滤波,滤除其中的高频信号保留其中的低频信号,所述低频信号为:
由于前述的信号处理中,会引入一些高频信号,且信号抽取模块7的滤波性能有限,不能完全滤除IS,QS信号中的高频成分,滤波模块4(包括但不限于FIR滤波器,即有限长单位冲激响应滤波器),用于根据滤波截止频率对所述低频信号中的高频信号(主要针对频率为2F1的信号)进行进一步滤除和整形,同时还滤除了混频模块产生的高频信号,确定了两路平滑的滤波后的正交信号,保证了信号的准确性。
频率计算模块5,用于对所述两路滤波后的正交信号进行频率的计算,确定声致振动信号的频率。
图2为本发明实施例的频率计算模块的具体结构示意图,如图2所示,该频率计算模块5包括微分单元51、第一乘法单元52、减法单元53和第二乘法单元54。微分单元51用于计算HIS的微分H’IS和HQS的微分H’QS,第一乘法单元52用于计算H’IS与HQS的乘积、以及H’QS与HIS的乘积,减法单元53用于计算H’IS与HQS的乘积、与H’QS与HIS的乘积之差,第二乘法单元54用于将H’IS×HQS-HIS×H’QS与预定参数相乘,得到所述声致振动信号的频率
由于在正交解调方法中,Is和Qs两路信号幅度通常不变,因此可以将预定参数设置为Is和Qs幅度的倒数。由此得到声致振动信号的频率为:在其他实施例中该预定参数也可以根据实际情况选择其他算法。
语音输出模块6,用于输出所述声致振动信号。
由于频率计算模块5输出的是离散的数字信号,并且含有一定的噪声,为了得到没有噪声干扰且连续的语音信息,语音输出模块6还可以包括一转换滤波单元,用于将所述滤波后的信号进行数模转换,并滤除音频带外噪声,确定所述声致振动信号。
在本发明中,信号经过模/数转换和数/模转换,将信号变化的数字域处理,并且最后将目标信号转换成模拟信号输出,这样做的优点是使得算法的抗干扰性强,准确度高,保证了本发明输出的语音信息的精度。
还需说明的是,本发明的语音信息的获取装置,可以基于FPGA(现场可编程门阵列)芯片,能够实现各模块的设计,同时还提高了装置的可移植性和修改性。此外,本发明装置中的各个模块均可采用Verilog语言实现(可以根据实际情况选择其他编程语言,本发明不作限制),操作简单方便。
本发明实施例的另一方面,还提供了一种语音信息的获取方法,采用前述的语音信息的获取装置来获取语音信息。其具体实施与语音信息的获取装置类似,此处不再赘述。
综上,本发明的语音信息的获取装置及方法通过外差光路产生声致振动调制的高频载波调相信号,一般来说,采用高频载波信号能够提高系统的抗干扰性,干涉光路产生AOM驱动参考信号作为后端信号转换模块的参考信号。此外,经过信号转换模块将模拟载波调制信号和AOM驱动参考信号离散化后,在数字域对信号进行处理,在数字域经过一系列的混频,数据抽取,滤波和频率计算,得到数字化的声致振动信号频率,再经过简单的语音输出电路,得到模拟的语音信息;将语音信息的解调到数字域,增强了本发明的装置和方法的抗干扰性,有效地提高了处理精度从而得到更精确的调制信号(声致振动信号)的频率。
除非有所知名为相反之意,本说明书及所附权利要求中的数值参数是近似值,能够根据通过本发明的内容所得的所需特性改变。具体而言,所有使用于说明书及权利要求中表示组成的含量、反应条件等等的数字,应理解为在所有情况中是受到“约”的用语所修饰。一般情况下,其表达的含义是指包含由特定数量在一些实施例中±10%的变化、在一些实施例中±5%的变化、在一些实施例中±1%的变化、在一些实施例中±0.5%的变化。
再者,“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的“一”或“一个”不排除存在多个这样的元件。
说明书与权利要求中所使用的序数例如“第一”、“第二”、“第三”等的用词,以修饰相应的元件,其本身并不意味着该元件有任何的序数,也不代表某一元件与另一元件的顺序、或是制造方法上的顺序,该些序数的使用仅用来使具有某命名的一元件得以和另一具有相同命名的元件能做出清楚区分。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种语音信息的获取装置,包括:
外差干涉光路,用于产生经过声致振动信号调制后的载波调制信号;以及产生AOM驱动参考信号;
信号转换模块,用于对所述载波调制信号进行模数转换,确定数字调制信号,以及将所述AOM驱动参考信号离散化,确定离散AOM信号;
混频模块,用于根据所述离散AOM信号产生两路单位正交信号,以及将所述单位正交信号与所述数字调制信号进行混频,确定两路正交的调制信号;
低通滤波模块,用于滤除混频模块产生的高频信号,确定两路滤波后的正交信号;
频率计算模块,用于对所述两路滤波后的正交信号进行频率的计算,确定声致振动信号的频率;以及
语音输出模块,用于输出所述声致振动信号。
2.根据权利要求1所述的装置,其中,所述载波调制信号的公式为S(t)=Acos(2πF0t+φ),其中,A为载波调制信号的幅度,F0为所述载波信号的频率,φ为声致振动引起的载波相位变化,t为时间;
所述数字调制信号S(n)=A(n)cos[2πF1(n)+φ(n)],n为离散序列,F1为数字调制信号的频率和离散AOM信号的频率。
3.根据权利要求2所述的装置,其中,所述两路正交的调制信号为:
其中,I0和Q0分别为两路单位正交信号。
4.根据权利要求3所述的装置,其中,所述信号转换模块以采样频率Fs对所述模拟调制信号进行采样,从而确定数字调制信号,其中,数字调制信号的数据速率为Fs,数字调制信号的频率F1=|Fs-F0|,且2F1≤Fs<2F0
5.根据权利要求4所述的装置,其中,还包括:信号抽取模块,用于对所述两路正交的调制信号进行抽取,确定抽取后的信号,其中,抽取的比例为1/R,抽取后的信号的数据速率为FR=Fs/R;以及用于对抽取后的信号进行滤波,滤除其中的高频信号保留其中的低频信号,所述低频信号为:
6.根据权利要求5所述的装置,其中,所述频率计算模块包括:
微分单元,用于计算HIS的微分H’IS和HQS的微分H’QS
第一乘法单元,用于计算H’IS与HQS的乘积、以及H’QS与HIS的乘积;
减法单元,用于计算H’IS与HQS的乘积、与H’QS与HIS的乘积之差;
第二乘法单元,用于将H’IS×HQS-HIS×H’QS与预定参数相乘,确定所述声致振动信号的频率
7.根据权利要求6所述的装置,其中,语音输出模块还包括一转换滤波单元,用于将所述滤波后的信号进行数模转换,并滤除噪声,确定所述声致振动信号。
8.根据权利要求1所述的装置,其中,所述语音信息的获取装置基于FPGA芯片。
9.一种语音信息的获取方法,采用如权利要求1至8中任一所述的语音信息的获取装置来获取语音信息。
CN201810062431.9A 2018-01-22 2018-01-22 语音信息的获取装置及方法 Pending CN108282230A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810062431.9A CN108282230A (zh) 2018-01-22 2018-01-22 语音信息的获取装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810062431.9A CN108282230A (zh) 2018-01-22 2018-01-22 语音信息的获取装置及方法

Publications (1)

Publication Number Publication Date
CN108282230A true CN108282230A (zh) 2018-07-13

Family

ID=62804629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810062431.9A Pending CN108282230A (zh) 2018-01-22 2018-01-22 语音信息的获取装置及方法

Country Status (1)

Country Link
CN (1) CN108282230A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005062093A (ja) * 2003-08-19 2005-03-10 Kobayashi Rigaku Kenkyusho 対象音検出方法及びその装置
CN102519574A (zh) * 2011-12-28 2012-06-27 中国科学院半导体研究所 一种用于振动检测的外差调制方法
CN102543064A (zh) * 2011-12-31 2012-07-04 中国科学院半导体研究所 基于激光多普勒干涉的语音检测系统
CN102564563A (zh) * 2011-12-31 2012-07-11 中国科学院半导体研究所 基于激光多普勒干涉的语音检测系统
CN104931126A (zh) * 2015-07-06 2015-09-23 江苏安智光电科技有限公司 一种基于超声波外调制的激光干涉振动检测装置
CN104964735A (zh) * 2015-07-06 2015-10-07 江苏安智光电科技有限公司 一种激光相位载波多普勒振动信号的检测系统及解调方法
CN105043527A (zh) * 2015-07-06 2015-11-11 江苏安智光电科技有限公司 一种脉冲激光外差多普勒振动测量结构

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005062093A (ja) * 2003-08-19 2005-03-10 Kobayashi Rigaku Kenkyusho 対象音検出方法及びその装置
CN102519574A (zh) * 2011-12-28 2012-06-27 中国科学院半导体研究所 一种用于振动检测的外差调制方法
CN102543064A (zh) * 2011-12-31 2012-07-04 中国科学院半导体研究所 基于激光多普勒干涉的语音检测系统
CN102564563A (zh) * 2011-12-31 2012-07-11 中国科学院半导体研究所 基于激光多普勒干涉的语音检测系统
CN104931126A (zh) * 2015-07-06 2015-09-23 江苏安智光电科技有限公司 一种基于超声波外调制的激光干涉振动检测装置
CN104964735A (zh) * 2015-07-06 2015-10-07 江苏安智光电科技有限公司 一种激光相位载波多普勒振动信号的检测系统及解调方法
CN105043527A (zh) * 2015-07-06 2015-11-11 江苏安智光电科技有限公司 一种脉冲激光外差多普勒振动测量结构

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张宇泽等: "目标物材料特性对激光语音获取的影响研究", 《应用光学》 *

Similar Documents

Publication Publication Date Title
CN106405570A (zh) 一种激光测距方法及装置
US20100315061A1 (en) Measurement apparatus and recording medium
CN107219002A (zh) 一种超高分辨率光谱测量方法及系统
CN106169070A (zh) 基于协作表示的通信辐射源个体识别方法及系统
CN103117973A (zh) 基于正交检波的多路并行解调系统
EP0029376B1 (fr) Procédé de démodulation d'un signal modulé en fréquence et démodulateur mettant en oeuvre ce procédé
CN111541484A (zh) 基于延时采样的光纤通信系统光信噪比监测方法
CN106918814A (zh) 基于双平行mzm的超宽带梯状fm/cw激光雷达测距系统
CN207301319U (zh) 一种激光信号处理芯片和激光雷达系统
CN108282230A (zh) 语音信息的获取装置及方法
CN107517174B (zh) 一种基于模拟开关的相移键控解调电路
CN105212964A (zh) 基于rf数据超声成像处理方法及系统
CN104825152B (zh) 生物电与方波调制多路信号的单路采集装置及方法
Cao et al. Correction algorithm of the frequency-modulated continuous-wave LIDAR ranging system
CN108632194B (zh) 用于外差干涉测振系统的信号解调装置和方法
CN106840202A (zh) 一种陀螺振动信号提取与补偿方法
CN104783777B (zh) 生物电与正弦波调制多路信号的单路采集装置及方法
CN108120974B (zh) 一种多时宽线性调频信号的脉冲压缩网络生成方法
CN104783776B (zh) 生物电与正交正弦波调制多路信号的单路采集装置及方法
CN104266739A (zh) 一种目标振动测量系统及方法、解调装置及解调方法
CN104811201A (zh) 多路信号双极性方波调制的单路同步采集装置及方法
JPH0787148A (ja) 同期加算装置
CN104883131A (zh) 生物电与正交三角波调制多路信号的单路采集装置及方法
EP0061377A1 (fr) Démodulateur numérique de signaux et récepteur ou système de télévision en couleurs comportant un tel démodulateur
CN205262475U (zh) 浅海水深多源遥感融合反演系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180713

WD01 Invention patent application deemed withdrawn after publication