CN1819720A - 一种串音消除装置及其方法 - Google Patents
一种串音消除装置及其方法 Download PDFInfo
- Publication number
- CN1819720A CN1819720A CN 200610011595 CN200610011595A CN1819720A CN 1819720 A CN1819720 A CN 1819720A CN 200610011595 CN200610011595 CN 200610011595 CN 200610011595 A CN200610011595 A CN 200610011595A CN 1819720 A CN1819720 A CN 1819720A
- Authority
- CN
- China
- Prior art keywords
- transfer function
- channel
- sampled signal
- signal sequence
- filters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008030 elimination Effects 0.000 title claims description 3
- 238000003379 elimination reaction Methods 0.000 title claims description 3
- 238000000034 method Methods 0.000 claims abstract description 28
- 108010076504 Protein Sorting Signals Proteins 0.000 claims description 49
- 238000001914 filtration Methods 0.000 claims description 25
- 240000006409 Acacia auriculiformis Species 0.000 claims description 22
- 210000005069 ears Anatomy 0.000 claims description 22
- 238000005070 sampling Methods 0.000 claims description 22
- 230000001934 delay Effects 0.000 claims description 6
- 238000004519 manufacturing process Methods 0.000 claims description 6
- 230000003111 delayed effect Effects 0.000 abstract 4
- 230000000694 effects Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 238000000205 computational method Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Stereophonic System (AREA)
Abstract
本发明公开一种串音消除装置及其方法,用于消除含有3D信息的双声道音频用两个扬声器来播放时产生的串音,其中:用调节单元和滤波器对得到的左声道和右声道的采样信号序列分别进行延迟处理和滤波处理,得到左声道延迟后信号序列、右声道延迟后信号序列、左声道滤波后信号序列和右声道滤波后信号序列;将左声道延迟后信号序列和右声道滤波后信号序列通过加法器进行相加后,从左扬声器输出,同时将左声道滤波后信号序列和右声道延迟后信号序列通过加法器进行相加后,从右扬声器输出。采用本发明,能消除串音并且保证音质。
Description
技术领域
本发明涉及语音处理领域,尤其涉及一种串音消除装置和方法。
背景技术
当含有3D信息的双声道音频用两个扬声器来播放时,因为左耳能听到右扬声器的发声,右耳能听到左扬声器的发声,会给立体声或者3D效果带来很大的损害。
如图1所示,用4个滤波器来表示从扬声器到人耳的信号传播效果。ALL是表示从左扬声器到左耳的传播效应的传输函数,ALR是表示从左扬声器到右耳的传播效应的传输函数,ARR是表示从右扬声器到右耳的传播效应的传输函数,ARL是表示右扬声器到左耳的传播效应的传输函数。用x1和x2表示输入的左声道和右声道的采样信号序列,y1和y2表示听者左右耳分别听到的声音。这样,从扬声器到人耳之间的传播可以用以下方程来表示:
串音消除的数学处理方法是希望找到适当的滤波器,对音频进行滤波之后再用扬声器进行播放,使得左耳只听到左扬声器的发声,右耳只能听到右扬声器的发声。
如图2所示,一种已知的串音消除装置包括4个滤波器h11,h12,h21,h22和两个加法器CX1和CX2。
这样,从扬声器到人耳之间的传播可以用以下方程表示:
要满足:
则有:
针对两个音箱和人头之间成等边三角形的情况,扬声器到人耳的传输矩阵可以表示为:
其反矩阵为:
在已知c1和c2的情况下,可以使用Adaptive Equalization(自适应滤波法)或者De-convolution(快速反卷积法)的方法,通过某些近似得到矩阵H中的滤波器的冲击响应。从而确定串音消除装置中各个滤波器的值。其解决方案可以通过图3来表示,其中,滤波器CS(即h11和h22)和CD(即h12和h21)的系统函数如下:
这种串音消除装置和方法的缺点是通过Adaptive Equalization或者De-convolution方法得到的滤波器组成的串音消除装置,由于滤波器CS会引起信号频谱特征的变化,经常会导致音质的下降,引起音频频谱上的扭曲。
发明内容
本发明要解决的技术问题是提供一种串音消除装置和方法,能消除串音并且保证音质。
为了解决上述技术问题,本发明提供了一种串音消除装置,包括连接到左扬声器的左加法器,连接到右扬声器的右加法器,用于接收左声道采样信号序列并输出到所述左加法器的调节单元H11,用于接收右声道采样信号序列并输出到所述右加法器的调节单元H22,用于接收左声道采样信号序列并输出到所述右加法器的滤波器H12,用于接收右声道采样信号序列并输出到所述左加法器的滤波器H21,其特征在于,所述调节单元H11和H22均为延迟器。
进一步地,上述装置还可具有以下特点:所述调节单元H11为延迟器Z-D1,所述调节单元H11为延迟器Z-D2,其中D1、D2均为采样周期的个数。
进一步地,上述装置还可具有以下特点:根据传递函数H1(Z)选择所述滤波器H12,根据传递函数H2(Z)选择所述滤波器H21,所述传递函数D1(Z)和H2(Z)由下式得到:
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
进一步地,上述装置还可具有以下特点:所述滤波器H12和滤波器H21均为有限冲击响应滤波器。
本发明还提供了一种串音消除方法,用于消除含有3D信息的双声道音频用两个扬声器来播放时产生的串音,包括以下步骤:
(a)对得到的左声道和右声道的采样信号序列分别进行延迟处理和滤波处理,得到左声道延迟后信号序列、右声道延迟后信号序列、左声道滤波后信号序列和右声道滤波后信号序列;
(b)将左声道延迟后信号序列和右声道滤波后信号序列进行相加后,从左扬声器输出,同时将左声道滤波后信号序列和右声道延迟后信号序列进行相加后,从右扬声器输出。
进一步地,上述方法还可具有以下特点:所述步骤(a)是将左声道采样信号序列延迟D1个采样周期,将右声道采样信号序列延迟D2个采样周期。
进一步地,上述方法还可具有以下特点:所述步骤(a)对左声道采样信号序列进行滤波处理时,是将该采样信号序列乘以一个传递函数H1(Z),对右声道采样信号序列进行滤波处理时,是将该采样信号序列乘以一个传递函数H2(Z),且有:
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
进一步地,上述方法还可具有以下特点:所述步骤(a)对左声道和右声道采样信号序列进行滤波处理时,是让各自信号分别经过一个有限冲击响应滤波器。
本发明还提供了一种串音消除装置的制造方法,包括以下步骤:
(a)根据听者与音箱之间的头部相关传输函数,确定从左扬声器到左耳的传输函数ALL,从左扬声器到右耳的传输函数ALR,从右扬声器到右耳的传输函数ARR,从右扬声器到左耳的传输函数ARL;并根据ALL和ARL之间的差异确定对左声道采样信号序列进行延迟所需的采样周期数目D1,根据ARR和ARL之间的差异确定对右声道采样信号序列进行延迟所需的采样周期数目D2;
(b)计算要达到串音消除,需对左声道和右声道采样信号序列进行滤波处理要采用的传递函数H1(Z)和H2(Z);
(c)选择可将采样信号延迟采样周期数目D1的延迟器H11,可延迟采样周期数目D2的延迟器H22,以及用于实现传递函数H1(Z)的滤波器H12,用于实现传递函数H2(Z)的滤波器H21,并提供两个加法器CX1和CX2;
(d)将延迟器H11和滤波器H12的输出端连接到加法器CX1的输入,将延迟器H22和滤波器H21的输出端连接到加法器CX2的输入,且加法器CX1的输出端用于连接到左扬声器,加法器CX2的输出端用于连接到右扬声器,延迟器H11和滤波器H12的输出端用于接收左声道采样信号序列,延迟器H22和滤波器H21的输入端用于接收右声道采样信号序列,得到一个可消除串音的装置。
进一步地,上述制造方法还可具有以下特点:所述步骤(b)中按以下公式计算出传递函数H1(Z)和H2(Z):
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
进一步地,上述方法还可具有以下特点:所述滤波器H12和滤波器H21均选择有限冲击响应滤波器。
综上所述,本发明提供的一种串音消除装置和方法,能够克服现有技术中消除串音时引起音频频谱上的扭曲,导致音质的下降的问题,在消除串音的同时保证音质。
附图说明
图1是从扬声器到人耳的信号传播示意图;
图2是现有技术中串音消除装置的示意图;
图3是现有技术中两个音箱和人头之间成等边三角形的情况下的串音消除装置的示意图;
图4是本发明实施例的串音消除装置的示意图。
具体实施方式
本实施例串音消除装置如图4所示,包括连接到左扬声器的左加法器;连接到右扬声器的右加法器;用于接收左声道采样信号序列并输出到左加法器的延迟器Z-D1;用于接收右声道采样信号序列并输出到右加法器的延迟器Z-D2;用于接收左声道采样信号序列并输出到右加法器的有限冲击响应(FIR)滤波器H1(Z);用于接收右声道采样信号序列并输出到所述左加法器的FIR滤波器H2(Z),其中:
延迟器Z-D1表示令左声道产生D1个采样周期的延迟,延迟器Z-D2的Z-D2令右声道产生D2个采样周期的延迟,D1和D2为自然数,其值可以根据经验得到;
为了进行串音消除,H1(Z)和H2(Z)应该满足以下条件:
Z-D1ALR+H1(Z)ARR=0
H2(Z)ALL+Z-D2ARL=0
(条件1)
即
在ALL,ARR,ALR,ARL已知的情况下,可以使用Adaptive Equalization或者De-convolution等方法来取得H1(Z)和H2(Z)的冲击响应。在得到上述传递函数后,再根据传递函数H1(Z)和H2(Z)选择尽可能接近的滤波器。
这样,将条件(1)代入公式(2),可以算出听者最后听到的声音为:
y1=(Z-D1ALL+H1(Z)ARL)x1
y2=(Z-D2ARR+H2(Z)ALR)x2
上式中,x1和x2表示输入的左声道和右声道的采样信号序列,y1和y2表示听者左右耳分别听到的声音,可见,听者的耳朵听不到异侧声道,另外,由于串音消除装置中,声音从左、右声道传递到同侧人耳的路径上仅仅使用了两个延时器Z-D1和Z-D2,因而避免了使用现有技术滤波器时对音质的改变,尽可能地保留了串音消除处理之前的音质。
相应的,本实施例用于消除含有3D信息的双声道音频用两个扬声器来播放时产生的串音方法,包括以下步骤:
步骤一,将左声道采样信号序列延迟D1个采样周期,得到左声道延迟后信号序列,并将该采样信号序列经过一个传递函数为H1(Z)的有限冲击响应滤波器,得到左声道滤波后信号序列;
同时,将右声道采样信号序列延迟D2个采样周期,得到右声道延迟后信号序列,并将该采样信号序列乘以一个传递函数H2(Z)的有限冲击响应滤波器,得到右声道滤波后信号序列;
步骤二,将左声道延迟后信号序列和右声道滤波后信号序列进行相加后,从左扬声器输出,同时将左声道滤波后信号序列和右声道延迟后信号序列进行相加后,从右扬声器输出。
传递函数H1(Z)和H2(Z)的计算方法上面已经描述,不再重复。
由上所述还可以得到本实施例一种串音消除装置的制造方法,包括以下步骤:
步骤A,根据听者与音箱之间的头部相关传输函数(Head RelativeTransfer Function,HRTF),确定从左扬声器到左耳的传输函数ALL,从左扬声器到右耳的传输函数ALR,从右扬声器到右耳的传输函数ARR,从右扬声器到左耳的传输函数ARL;并根据ALL和ARL之间的差异确定对左声道采样信号序列进行延迟所需的采样周期数目D1,根据ARR和ARL之间的差异确定对右声道采样信号序列进行延迟所需的采样周期数目D2;
步骤B,计算要达到串音消除,需对左声道和右声道采样信号序列进行滤波处理要采用的传递函数H1(Z)和H2(Z);
传递函数H1(Z)和H2(Z)的计算方法上面已经描述,不再重复。
步骤C,选择可将采样信号延迟采样周期数目D1的延迟器H11,可延迟采样周期数目D2的延迟器H22,以及用于实现传递函数H1(Z)的滤波器H12,用于实现传递函数H2(Z)的滤波器H21,并提供两个加法器CX1和CX2;
步骤D,将延迟器H11和滤波器H12的输出端连接到加法器CX1的输入,将延迟器H22和滤波器H21的输出端连接到加法器CX2的输入,且加法器CX1的输出端用于连接到左扬声器,加法器CX2的输出端用于连接到右扬声器,延迟器H11和滤波器H12的输出端用于接收左声道采样信号序列,延迟器H22和滤波器H21的输入端用于接收右声道采样信号序列,这样就得到了一个可消除串音的装置。
Claims (11)
1、一种串音消除装置,包括连接到左扬声器的左加法器,连接到右扬声器的右加法器,用于接收左声道采样信号序列并输出到所述左加法器的调节单元H11,用于接收右声道采样信号序列并输出到所述右加法器的调节单元H22,用于接收左声道采样信号序列并输出到所述右加法器的滤波器H12,用于接收右声道采样信号序列并输出到所述左加法器的滤波器H21,其特征在于,所述调节单元H11和H22均为延迟器。
2、如权利要求1所述的串音消除装置,其特征在于,所述调节单元H11为延迟器Z-D1,所述调节单元H11为延迟器Z-D2,其中D1、D2均为采样周期的个数。
3、如权利要求2所述的串音消除装置,其特征在于,根据传递函数H1(Z)选择所述滤波器H12,根据传递函数H2(Z)选择所述滤波器H21,所述传递函数H1(Z)和H2(Z)由下式得到:
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
4、如权利要求1所述的串音消除装置,其特征在于,所述滤波器H12和滤波器H21均为有限冲击响应滤波器。
5、一种串音消除方法,用于消除含有3D信息的双声道音频用两个扬声器来播放时产生的串音,包括以下步骤:
(a)对得到的左声道和右声道的采样信号序列分别进行延迟处理和滤波处理,得到左声道延迟后信号序列、右声道延迟后信号序列、左声道滤波后信号序列和右声道滤波后信号序列;
(b)将左声道延迟后信号序列和右声道滤波后信号序列进行相加后,从左扬声器输出,同时将左声道滤波后信号序列和右声道延迟后信号序列进行相加后,从右扬声器输出。
6、如权利要求5所述的串音消除方法,其特征在于,所述步骤(a)是将左声道采样信号序列延迟D1个采样周期,将右声道采样信号序列延迟D2个采样周期。
7、如权利要求6所述的串音消除方法,其特征在于,所述步骤(a)对左声道采样信号序列进行滤波处理时,是将该采样信号序列乘以一个传递函数H1(Z),对右声道采样信号序列进行滤波处理时,是将该采样信号序列乘以一个传递函数H2(Z),且有:
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
8、如权利要求5所述的串音消除方法,其特征在于,所述步骤(a)对左声道和右声道采样信号序列进行滤波处理时,是让各自信号分别经过一个有限冲击响应滤波器。
9、一种串音消除装置的制造方法,包括以下步骤:
(a)根据听者与音箱之间的头部相关传输函数,确定从左扬声器到左耳的传输函数ALL,从左扬声器到右耳的传输函数ALR,从右扬声器到右耳的传输函数ARR,从右扬声器到左耳的传输函数ARL;并根据ALL和ARL之间的差异确定对左声道采样信号序列进行延迟所需的采样周期数目D1,根据ARR和ARL之间的差异确定对右声道采样信号序列进行延迟所需的采样周期数目D2;
(b)计算要达到串音消除,需对左声道和右声道采样信号序列进行滤波处理要采用的传递函数H1(Z)和H2(Z);
(c)选择可将采样信号延迟采样周期数目D1的延迟器H11,可延迟采样周期数目D2的延迟器H22,以及用于实现传递函数H1(Z)的滤波器H12,用于实现传递函数H2(Z)的滤波器H21,并提供两个加法器CX1和CX2;
(d)将延迟器H11和滤波器H12的输出端连接到加法器CX1的输入,将延迟器H22和滤波器H21的输出端连接到加法器CX2的输入,且加法器CX1的输出端用于连接到左扬声器,加法器CX2的输出端用于连接到右扬声器,延迟器H11和滤波器H12的输出端用于接收左声道采样信号序列,延迟器H22和滤波器H21的输入端用于接收右声道采样信号序列,得到一个可消除串音的装置。
10、如权利要求9所述的制造方法,其特征在于,所述步骤(b)中按以下公式计算出传递函数H1(Z)和H2(Z):
其中,ALL是表示从左扬声器到左耳的传输函数,ALR是表示从左扬声器到右耳的传输函数,ARR是表示从右扬声器到右耳的传输函数,ARL是表示右扬声器到左耳的传输函数。
11、如权利要求9所述的制造方法,其特征在于,所述滤波器H12和滤波器H21均选择有限冲击响应滤波器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200610011595A CN100589655C (zh) | 2006-03-30 | 2006-03-30 | 一种串音消除装置及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200610011595A CN100589655C (zh) | 2006-03-30 | 2006-03-30 | 一种串音消除装置及其方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1819720A true CN1819720A (zh) | 2006-08-16 |
CN100589655C CN100589655C (zh) | 2010-02-10 |
Family
ID=36919347
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200610011595A Expired - Fee Related CN100589655C (zh) | 2006-03-30 | 2006-03-30 | 一种串音消除装置及其方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100589655C (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105792075A (zh) * | 2014-12-24 | 2016-07-20 | 中国科学院声学研究所 | 一种串声消除滤波器的生成方法及三维声音重放方法 |
CN105979468A (zh) * | 2015-12-04 | 2016-09-28 | 乐视致新电子科技(天津)有限公司 | 一种音频处理方法及装置 |
CN106470373A (zh) * | 2015-08-17 | 2017-03-01 | 李鹏 | 音频处理方法及其系统 |
CN107645699A (zh) * | 2017-08-25 | 2018-01-30 | 西安电子科技大学 | 一种3d音效增强装置及其方法 |
CN107979806A (zh) * | 2017-05-16 | 2018-05-01 | 中山大学花都产业科技研究院 | 一种用于实现车内声场重构的方法 |
CN109121044A (zh) * | 2017-06-26 | 2019-01-01 | 北京小米移动软件有限公司 | 耳机串音处理方法及装置 |
CN112840671A (zh) * | 2018-11-27 | 2021-05-25 | 深圳市欢太科技有限公司 | 立体声播放方法、装置、存储介质及电子设备 |
-
2006
- 2006-03-30 CN CN200610011595A patent/CN100589655C/zh not_active Expired - Fee Related
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105792075A (zh) * | 2014-12-24 | 2016-07-20 | 中国科学院声学研究所 | 一种串声消除滤波器的生成方法及三维声音重放方法 |
CN105792075B (zh) * | 2014-12-24 | 2017-10-03 | 中国科学院声学研究所 | 一种串声消除滤波器的生成方法及三维声音重放方法 |
CN106470373A (zh) * | 2015-08-17 | 2017-03-01 | 李鹏 | 音频处理方法及其系统 |
CN106470373B (zh) * | 2015-08-17 | 2019-10-18 | 英霸声学科技股份有限公司 | 音频处理方法及其系统 |
CN105979468A (zh) * | 2015-12-04 | 2016-09-28 | 乐视致新电子科技(天津)有限公司 | 一种音频处理方法及装置 |
CN107979806A (zh) * | 2017-05-16 | 2018-05-01 | 中山大学花都产业科技研究院 | 一种用于实现车内声场重构的方法 |
CN109121044A (zh) * | 2017-06-26 | 2019-01-01 | 北京小米移动软件有限公司 | 耳机串音处理方法及装置 |
CN109121044B (zh) * | 2017-06-26 | 2021-04-23 | 北京小米移动软件有限公司 | 耳机串音处理方法及装置 |
CN107645699A (zh) * | 2017-08-25 | 2018-01-30 | 西安电子科技大学 | 一种3d音效增强装置及其方法 |
CN112840671A (zh) * | 2018-11-27 | 2021-05-25 | 深圳市欢太科技有限公司 | 立体声播放方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN100589655C (zh) | 2010-02-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1942017A (zh) | 消除串音的装置与方法以及使用它的立体声生成系统 | |
CN1819720A (zh) | 一种串音消除装置及其方法 | |
CN1235443C (zh) | 多声道音频重放装置和方法 | |
CN1023280C (zh) | 利用数字信号分频带编码的数字传输系统 | |
CN1630434A (zh) | 再现虚拟声音的设备和方法 | |
CN101946526B (zh) | 声音再现方法和系统以及立体声扩展方法 | |
KR101325644B1 (ko) | 변환 영역에서의 효율적인 바이노럴 사운드 공간화 방법 및장치 | |
CN1714599A (zh) | 立体声扩展网络中的输出均衡 | |
CN1956606A (zh) | 产生空间立体声的方法和装置 | |
CN100574516C (zh) | 对多声道声音模拟2声道虚拟声音的方法和装置 | |
CN1829393A (zh) | 产生用于双声道头戴耳机的立体声的方法和设备 | |
CN107039029B (zh) | 头盔中具有有源噪声控制的声音再现 | |
CN1717124A (zh) | 声象定位装置 | |
CN101065989A (zh) | 双扬声器的立体声扩展网络 | |
JP2008516539A5 (zh) | ||
CN1135904C (zh) | 音像定位处理装置 | |
CN1901761A (zh) | 宽单声道声音再现方法和设备 | |
EP2285139A3 (en) | Device and method for converting spatial audio signal | |
CN1976546A (zh) | 使用单声道扬声器再现扩展声音的方法和装置 | |
CN1237848C (zh) | 头戴耳机用立体声音响装置及声音信号处理方法 | |
FR2852779A1 (fr) | Procede pour traiter un signal electrique de son | |
US20160212564A1 (en) | Apparatus and Method for Compressing a Set of N Binaural Room Impulse Responses | |
CN1625920A (zh) | 音频装置及其再生用程序 | |
CN101924317B (zh) | 双声道处理装置及其方法与声音播放系统 | |
CN1929698A (zh) | 声音再现设备和增强低频分量的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20100210 Termination date: 20120330 |