CN103871405A - 一种amr音频的鉴定方法 - Google Patents

一种amr音频的鉴定方法 Download PDF

Info

Publication number
CN103871405A
CN103871405A CN201410017066.1A CN201410017066A CN103871405A CN 103871405 A CN103871405 A CN 103871405A CN 201410017066 A CN201410017066 A CN 201410017066A CN 103871405 A CN103871405 A CN 103871405A
Authority
CN
China
Prior art keywords
amr
audio
audio frequency
compression
section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410017066.1A
Other languages
English (en)
Inventor
罗达
杨锐
黄继武
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen University
Sun Yat Sen University
Original Assignee
Shenzhen University
Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen University, Sun Yat Sen University filed Critical Shenzhen University
Priority to CN201410017066.1A priority Critical patent/CN103871405A/zh
Publication of CN103871405A publication Critical patent/CN103871405A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

本发明公开了一种AMR音频的鉴定方法,用于对AMR格式的音频进行压缩的鉴定分析,是首先采用深度学习算法构造一次AMR压缩的分类器模型和二次AMR压缩的分类器模型;并采用多数表决投票机制判断待检测音频属于一次AMR/二次AMR压缩的音频。本方法是一种统计判别方法,属于信息取证领域。本发明方法利用深度学习方法从AMR音频的波形中学习得到模型,该模型可以判别音频小段属于AMR一次压缩还是二次压缩。对于较长的音频片断,采用一组多数表决的投票策略对其进行判别。本发明的技术可为音频/语音的原始性鉴定和音频/语音篡改检测提供一种计算机程序化的辅助手段。

Description

一种AMR音频的鉴定方法
技术领域
本发明涉及信息取证领域,更具体地,涉及一种AMR音频二次压缩的鉴定方法。
背景技术
随着技术的快速发展,如今我们可以很方便地取得数字录音,并且可以很容易地通过各式各样的音频编辑软件对音频进行篡改。在给人们带来便利的同时,不留痕迹地篡改录音变成了可能,由此产生的道德和法律问题也变得越来越多。音频作为法庭证据的数量不断增加,使得音频认证技术变得十分重要,例如鉴定录音的原始性以及录音是否遭受篡改等。
AMR编码器是一种专门为语音录音设计的音频编码器,具有很高的压缩率(4.7kbps-12.2kbps),其标准也在1999年被3GPP认定为语音压缩编码标准,因此被广泛使用。目前,绝大部分的录音设备支持AMR格式,并且很多设备也把它设置成为默认的存储格式。由于AMR格式被广泛使用于手机等设备,对于AMR格式的原始性鉴定及篡改检测成为了重要的课题。
对AMR格式音频的二次压缩进行检测,是一种被动认证技术,它的目标是判断一个AMR音频是否被二次压缩过。如果发现音频是被二次压缩过,则其原始性应该受到质疑。目前,有部分文献进行了二次压缩检测的工作。文献“Rui Yang,Yunqing Shi,Jiwu Huang,Defeating Fake-Quality MP3,in Proceedingsof ACM Workshop on Multimedia and Security,Princeton,New Jersey,USA,2009”中提出采用小数值的MDCT系数作为特征判别假音质的MP3文件,文献“M.Qiao,A.Sung,and Q.Liu.Revealing real quality of double compressed MP3 audio,in Proc.of the international conference on Multimedia,Firenze,Italy,2010,pp.1011-1014”和文献“Q.Liu,A.Sung,and M.Qiao.Detection of double MP3compression,Cognitive Computation,vol.2,pp.291-296,2010.”也公开了利用MDCT系数的统计特征对MP3文件进行重压缩检测。文献“D.Luo,W.Luo,R.Yang,and J.Huang,Compression history identification for digital audio signal,inProc.of the International Conference on Acoustics,Speech and Signal Processing,Kyoto,2012,pp.1733-1736.”、文献“F.Jenner and A.Kwasinski,Highly accuratenon-intrusive speech forensics for codec identifications from observed decodedsignals,in Proc.of the International Conference on Acoustics,Speech and SignalProcessing,Kyoto,2012,pp.1737-1740”和文献“S.Hicsonmez,E.Uzun,and H.T.Sencar,Methods for identifying traces of compression in audio,in Proc.of the1stInternational Conference on Communications,Signal Processing,and theirApplications,Sharjah,2013,pp.1-6”公开了利用针对MP3,WMA,AAC等格式进行重压缩检测,但没有涉及AMR格式二次压缩检测。文献“R.Yang,Z.Qu,andJ.Huang,Detecting digital audio forgeries by checking frame offsets,in Proc.of the10th ACM workshop on Multimedia and security,Oxford,United Kingdom,2008.”和文献“C.Grigoras,Digital audio recording analysis:The electric networkfrequency ENF criterion,The International Journal of Speech Language and the Law,vol.12,no.1,pp.63-76,2005.”分别公开了采用计算帧偏移的方法以及电网频率的方法来检测音频是否遭受篡改。
发明内容
本发明的目的在于提出一种AMR音频二次压缩鉴定方法,用于检测AMR格式的音频是否进行了二次压缩,从而判断该音频或语音是否经过篡改,为音频/语音取证提供一种辅助手段。
为了实现上述目的,本发明的技术方案为:
一种AMR音频的鉴定方法,
采用深度学习算法构造一次AMR压缩的分类器模型和二次AMR压缩的分类器模型;
采用多数表决投票机制判断待检测音频;
其中所述采用深度学习算法构造分类器模型的具体方式为:
将采样率为8000Hz、16bit的录制音频存放在WAV格式中,使用AMR编码器将该音频压缩成一次AMR压缩文件,其中压缩码率为:4.7-12.2kbps;
将一次AMR压缩文件解压缩成为WAV格式的文件,再次使用AMR编码器将其压缩成二次AMR压缩文件,其中压缩码率为:4.7-12.2kbps;
将一次AMR压缩和二次AMR压缩的音频解压缩,得到音频波形信号;将音频波形信号正则化之后切分为音频小段,采用深度学习算法对音频小段进行训练,得到一次AMR压缩的分类器模型和二次AMR压缩的分类器模型;
采用多数表决投票机制判断待检测音频的具体方式为:
将待检测音频切分为若干个音频段,将每个音频段切分为若干个音频小段,采用上述的一次AMR压缩的分类器模型或二次AMR压缩的分类器模型来判断各个音频小段;当音频段中多数音频小段属于一次AMR压缩则该音频段为一次AMR压缩,当音频段中多数音频小段属于二次AMR压缩则该音频段为二次AMR压缩。
在一种优选的方案中,采用SAE或Dropout的方法对音频小段进行训练。
在一种优选的方案中,所述将音频波形信号正则化是将音频波形信号减去均值并除以标准差的波形信号。
在一种优选的方案中,将待检测音频切分为若干个1秒钟的音频段,将各1秒钟的音频段分别切分成20个音频小段,各音频小段含400个样本点。
在一种优选的方案中,将待检测音频切分为若干个2秒钟的音频段,将各2秒钟的音频段分别切分成40个音频小段,各音频小段含400个样本点。
与现有技术相比,本发明的有益效果为:采用本方法识别出来的一次AMR/二次AMR压缩小段的与各自的识别准确率比较接近,虚警和漏检偏差较小。通过检测AMR格式的音频是否进行了二次压缩,从而判断该音频或语音是否经过篡改,为音频/语音取证提供一种辅助手段;采用本方法还能分析得到待检测音频的篡改点。
附图说明
图1是AMR二次压缩检测的分类器构造框架示意图。
图2是隐层节点输出值分布示意图,其中图2(a)为一次AMR压缩10个隐层节点输出值分布示意图,图2(b)为二次AMR压缩10个隐层节点输出值分布示意图。
图3是一秒音频20段音频小段中识别错误的直方图,其中图3(a)为一次压缩识别错误个数的直方图,图3(b)为二次压缩识别错误的个数的直方图。
图4是检测音频篡改示意图。
具体实施方式
下面结合附图对本发明做进一步的描述,但本发明的实施方式并不限于此。
本发明方法通过以下两个步骤对AMR音频二次压缩进行检测:
(1)深度学习分类器模型的构造
a)录制录音,采样率8000Hz,16bit,存放于WAV格式中。使用AMR编码器将它们压缩成一次AMR压缩文件,压缩码率4.7-12.2kbps随机选取。解压缩成为WAV格式的文件,再次使用AMR编码器将它们压缩成二次AMR压缩文件,压缩码率4.7-12.2kbps随机选取。
b)AMR二次压缩检测的分类器构造框架示意图如图1所示。首先要将一次AMR压缩和二次AMR压缩的音频解压缩,得到音频波形信号。然后将波形信号正则化,即减去均值并除以标准差之后切分为音频小段,每小段400个样本点。使用SAE或者Dropout方法进行训练,可以得到区分一次AMR/二次AMR压缩的分类器模型Model。
(2)多数表决投票机制
a)对于1秒钟的音频,首先切分成20小段,每一小段都是使用上一阶段得到的分类器模型Model进行判断属于一次AMR/二次AMR压缩。采用多数表决投票机制,即如果有11小段判断为一次压缩,则认为这一秒钟音频属于一次压缩;如果有11小段判断为二次压缩,则认为这一秒钟音频属于二次压缩。
b)对于更长的音频,就切分成若干个1秒钟的音频段,重复上面步骤a)。
本发明方法的原理如下:
深度学习算法是一种模拟人类神经系统的多层表达的学习机制,每一层能学习到一些特征,它代表着原始数据的另一种抽象表示,网络中低层次的位置学习到低等级的特征,网络中高层次的位置学习到高等级的特征。深度学习的核心思想是,通过学习可以得到一个模型,它可以得到数据的另一种抽象表示(特征),而且它具有对数据进行分类的能力。
在本实施例中采用了两种深度学习算法,分别是SAE(Stack Auto-Encoder)以及Dropout方法。SAE的训练是逐层进行的,一个自动编码器(auto-encoder)包含3个层次,一个输入层,一个隐层,一个输出层。在训练的时候,把输出层的训练目标设置为输入的数据。这样,训练的结果,隐层节点的输出值可以认为是输入数据的另一种抽象表示。SAE就是把若干丢弃了输出层的自动编码器连接到一起组成的一个神经网络,它每一层训练出一组新的数据表示(特征)。Dropout方法是另一个深度学习算法,它在训练阶段随机弃用一部分神经元节点的值,这样的做法是为了避免隐层节点之间过强的相互作用的耦合。另一种角度来看,一部分的神经元节点弃用,则另外一部分神经元节点也必须能训练出合适的特征来处理问题。
下面给出本发明方法的一些实验以证实深度学习算法的可用性以及我们方法的准确率。
首先录制了3600秒的录音作为实验数据,其采样率8000Hz,16bit,存放于WAV格式中。使用AMR编码器将它们压缩成一次AMR压缩文件,压缩码率4.7-12.2kbps随机选取。解压缩成为WAV格式的文件,再次使用AMR编码器将它们压缩成二次AMR压缩文件,压缩码率4.7-12.2kbps随机选取。试验中,8000Hz的一秒音频被分为20个音频小段,每小段400个样本点。3600秒音频,可以得到3600*20=72000个音频小段,每个小段都获得其对应的一次AMR压缩及二次AMR压缩的2类音频小段。对于每一类,其中10000段作为训练样本,使用SAE及Dropout训练,其他62000段左右测试样本。
将一次AMR压缩跟二次AMR压缩的音频解压缩,得到音频波形信号。然后将波形信号正则化(减去均值并除以标准差)之后切分为音频小段,每小段400个样本点。使用SAE或者Dropout方法进行训练,可以得到区分一次AMR/二次AMR压缩的分类器模型。
在图2中,展示了第二个隐层中的10个隐层节点的输出值分布示意图。2(a)、2(b)两个子图分别对应于一次AMR压缩和二次AMR压缩的输出结果,可以明显看出,其输出值有所区别。这也可以从侧面证实,深度学习方法确实可以从数据中学习到另外的抽象表示(特征),而这种表示可以区分不同的压缩音频片断。
表1展示了本实施例使用了不同的深度学习算法的结果。首先需要描述网络的表达方式,在本实施例中采用[i h1h2h3…]这个方式来表达一个网络,它代表这个网络有i个输入节点,第1隐层有h1个节点,第2隐层有h2个节点,第3隐层有h3个节点,以此类推。表中NN的方法代表普通的神经网络算法,可以看出SAE及Dropout方法都可以得到比普通NN更低的错误率。其中使用Dropout网络[400 600 300]可以得到最好的结果。
表1不同算法,不同网络结构在400-600层迭代之后的错误率
Figure BDA0000456770430000061
表2一次/二次AMR压缩小段的识别准确率
Type Number single AMR double AMR
single AMR 62000 74.42% 25.58%
double AMR 62000 24.08% 75.92%
表3不同dropout比率的准确率
Dropout 0.2 0.3 0.4 0.5 0.6 0.7 0.8
Error rate 29.21 27.91 27.53 24.83 25.76 25.90 29.96
表2展示了对于一次AMR/二次AMR压缩小段各自的识别准确率,从表中看出,一次AMR压缩小段中,有74.42%将被判断正确,而有25.58%被错判成二次压缩的小段。而二次压缩的小段中,有75.92%判断正确。这个说明了对于一次AMR/二次AMR压缩小段各自的识别准确率比较接近,虚警和漏检偏差较小。
表3展示了使用dropout方法时,不同dropout比率的准确率情况。Dropout比率是指在训练中随机让一定的比例的节点不起作用。这个比例对结果会有较大影响,从表中看出,dropout比例取0.5时,可以得到最好的实验效果。
上面实验使用2万个音频小段训练得到的模型,能够对12.4万音频小段的测试中得到较好的检测率,较大的规模预示着可能采用多数表决投票机制来判别较长的音频。图3展示的是500个AMR一次压缩及500个AMR二次压缩的“一秒的音频”中20段音频小段中识别错误的直方图。两个子图分别代表一次和二次压缩的情况,横坐标表示的是20段音频中错误判断的个数。图中可见,大部分的错误段数集中在2-8段,说明了大部分的音频片断能够判断准确,因此我们可以采用多数表决的投票机制。
裁减2000段1秒钟的音频片断做实验。每一段都被分为20小段,每一小段是用分类器进行判别之后,每一秒的分类结果使用多数表决投票。得到最终判断结果测试准确率为92.2%。在本实例中还测试了1000段2秒钟的音频,划分为40小段,采用多数表决,判断结果测试准确率95.3%。为了证实本检测算法的稳定性,还使用标准语音库TIMIT进行测试,选取了6000段1秒的音频,实验方法如前所述,结果准确率为91.1%。所有实验结果如表4所示。
表4不同语音库不同长度音频片断的准确率
Dataset Length Number Accuracy
Ours 1second 2000 92.2%
Ours 2second 1000 95.3%
TIMIT 1second 6000 91.1%
最后,展示本鉴定方法一个应用场景。该方法可以作为检测AMR音频原始性的辅助方法,因为原始的音频一般不可能是一个经过二次压缩的音频。另外,使用该方法,还可以分析到音频的篡改点。如图4所示,一段长度为60秒的音频,可以将它切分为2秒长度的音频段,对每段做判断。如果判别为一次压缩,则输出结果为1;如果判别为二次压缩,则输出结果为2。从图4(a)中看出,很难从波形上判断音频是否篡改。但是从图4(b)可以看出,前面与后面2段的音频分别是一次与二次的AMR压缩音频,篡改位置显而易见。
以上所述的本发明的实施方式,并不构成对本发明保护范围的限定。任何在本发明的精神原则之内所作出的修改、等同替换和改进等,均应包含在本发明的权利要求保护范围之内。

Claims (5)

1.一种AMR音频的鉴定方法,其特征在于,
采用深度学习算法构造一次AMR压缩的分类器模型和二次AMR压缩的分类器模型;
采用多数表决投票机制判断待检测音频;
其中所述采用深度学习算法构造分类器模型的具体方式为:
将采样率为8000Hz、16bit的录制音频存放在WAV格式中,使用AMR编码器将该音频压缩成一次AMR压缩文件,其中压缩码率为:4.7-12.2kbps;
将一次AMR压缩文件解压缩成为WAV格式的文件,再次使用AMR编码器将其压缩成二次AMR压缩文件,其中压缩码率为:4.7-12.2kbps;
将一次AMR压缩和二次AMR压缩的音频解压缩,得到音频波形信号;将音频波形信号正则化之后切分为音频小段,采用深度学习算法对音频小段进行训练,得到一次AMR压缩的分类器模型和二次AMR压缩的分类器模型;
采用多数表决投票机制判断待检测音频的具体方式为:
将待检测音频切分为若干个音频段,将每个音频段切分为若干个音频小段,采用上述的一次AMR压缩的分类器模型或二次AMR压缩的分类器模型来判断各个音频小段;当音频段中多数音频小段属于一次AMR压缩则该音频段为一次AMR压缩,当音频段中多数音频小段属于二次AMR压缩则该音频段为二次AMR压缩。
2.根据权利要求1所述的AMR音频的鉴定方法,其特征在于,采用SAE或Dropout的方法对音频小段进行训练,其中采用Dropout方法时,其Dropout比率为0.5。
3.根据权利要求1所述的AMR音频的鉴定方法,其特征在于,所述将音频波形信号正则化是将音频波形信号减去均值并除以标准差的波形信号。
4.根据权利要求1、2或3所述的AMR音频的鉴定方法,其特征在于,将待检测音频切分为若干个1秒钟的音频段,将各1秒钟的音频段分别切分成20个音频小段,各音频小段含400个样本点。
5.根据权利要求1、2或3所述的AMR音频的鉴定方法,其特征在于,将待检测音频切分为若干个2秒钟的音频段,将各2秒钟的音频段分别切分成40个音频小段,各音频小段含400个样本点。
CN201410017066.1A 2014-01-14 2014-01-14 一种amr音频的鉴定方法 Pending CN103871405A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410017066.1A CN103871405A (zh) 2014-01-14 2014-01-14 一种amr音频的鉴定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410017066.1A CN103871405A (zh) 2014-01-14 2014-01-14 一种amr音频的鉴定方法

Publications (1)

Publication Number Publication Date
CN103871405A true CN103871405A (zh) 2014-06-18

Family

ID=50909870

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410017066.1A Pending CN103871405A (zh) 2014-01-14 2014-01-14 一种amr音频的鉴定方法

Country Status (1)

Country Link
CN (1) CN103871405A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104123935A (zh) * 2014-07-16 2014-10-29 武汉大学 一种面向mp3数字音频文件的重压缩检测方法
CN105070293A (zh) * 2015-08-31 2015-11-18 武汉大学 基于深度神经网络的音频带宽扩展编码解码方法及装置
CN105118503A (zh) * 2015-07-13 2015-12-02 中山大学 一种音频翻录检测方法
CN105448299A (zh) * 2015-11-17 2016-03-30 中山大学 一种鉴别数字音频aac格式编解码器的方法
CN108010533A (zh) * 2016-10-27 2018-05-08 北京酷我科技有限公司 音频数据码率的自动识别方法和装置
US11217076B1 (en) * 2018-01-30 2022-01-04 Amazon Technologies, Inc. Camera tampering detection based on audio and video

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102394065A (zh) * 2011-11-04 2012-03-28 中山大学 一种对数字音频假音质wave的分析方法
CN103366753A (zh) * 2013-06-28 2013-10-23 宁波大学 一种相同码率下的mp3音频双压缩检测方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102394065A (zh) * 2011-11-04 2012-03-28 中山大学 一种对数字音频假音质wave的分析方法
CN103366753A (zh) * 2013-06-28 2013-10-23 宁波大学 一种相同码率下的mp3音频双压缩检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
D.LUO,W.LUO,R.YANG,AND J.HUANG: "Compression history identification for digital audio signal", 《IN PROC.OF THE INTERNATIONAL CONFRENCE ON ACOUSTICS, SPEECH AND SIGNAL PROCESSING》, 30 December 2012 (2012-12-30), pages 1733 - 1736 *
YIFENG SHEN, JIA JIA, LIANHONG CAI: "Detecting Double Compressed AMR-format Audio Recordings", 《第十届中国语音学学术会议论文集》 *
刘丽岩: "《硕士论文:基于MFCC与IMFCC的说话人识别研究》", 30 January 2008, article "第3章 支持向量机在说话人识别中的应用", pages: 33 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104123935A (zh) * 2014-07-16 2014-10-29 武汉大学 一种面向mp3数字音频文件的重压缩检测方法
CN104123935B (zh) * 2014-07-16 2017-02-22 武汉大学 一种面向mp3数字音频文件的重压缩检测方法
CN105118503A (zh) * 2015-07-13 2015-12-02 中山大学 一种音频翻录检测方法
CN105070293A (zh) * 2015-08-31 2015-11-18 武汉大学 基于深度神经网络的音频带宽扩展编码解码方法及装置
CN105070293B (zh) * 2015-08-31 2018-08-21 武汉大学 基于深度神经网络的音频带宽扩展编码解码方法及装置
CN105448299A (zh) * 2015-11-17 2016-03-30 中山大学 一种鉴别数字音频aac格式编解码器的方法
CN105448299B (zh) * 2015-11-17 2019-04-05 中山大学 一种鉴别数字音频aac格式编解码器的方法
CN108010533A (zh) * 2016-10-27 2018-05-08 北京酷我科技有限公司 音频数据码率的自动识别方法和装置
US11217076B1 (en) * 2018-01-30 2022-01-04 Amazon Technologies, Inc. Camera tampering detection based on audio and video

Similar Documents

Publication Publication Date Title
CN103871405A (zh) 一种amr音频的鉴定方法
Luo et al. Detection of double compressed AMR audio using stacked autoencoder
CN103177733B (zh) 汉语普通话儿化音发音质量评测方法与系统
Luo et al. Detecting double compressed AMR audio using deep learning
CN105933323B (zh) 声纹注册、认证方法及装置
CN106683687B (zh) 异常声音的分类方法和装置
US9043207B2 (en) Speaker recognition from telephone calls
Algabri et al. Automatic speaker recognition for mobile forensic applications
Kotropoulos Source phone identification using sketches of features
CN104123935B (zh) 一种面向mp3数字音频文件的重压缩检测方法
CN104221079A (zh) 利用频谱特性进行声音分析的改进的梅尔滤波器组结构
CN102915740B (zh) 可实现篡改定位的语音感知哈希内容认证方法
CN105869658A (zh) 一种采用非线性特征的语音端点检测方法
Bie et al. Detection and reconstruction of clipped speech for speaker recognition
Gong et al. Vocalsound: A dataset for improving human vocal sounds recognition
CN105283916B (zh) 电子水印嵌入装置、电子水印嵌入方法及计算机可读记录介质
CN103985389A (zh) 一种针对amr音频文件的隐写分析方法
CN110797032A (zh) 一种声纹数据库建立方法及声纹识别方法
CN102394065B (zh) 一种鉴定wav数字音频信号是否经过压缩以及分析其此前被压缩的码率的方法
CN116705063B (zh) 一种基于流形测度的多模型融合的语音鉴伪识别方法
Alex et al. Variational autoencoder for prosody‐based speaker recognition
CN105070297B (zh) 一种mp3音频压缩历史检测方法
CN104091104B (zh) 多格式音频感知哈希认证的特征值提取及认证方法
Padmanabhan et al. Acoustic feature diversity and speaker verification.
CN103440868B (zh) 一种电子变调音频的鉴定方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140618

RJ01 Rejection of invention patent application after publication