CN103091737B - 基于曲面透镜阵列的宽视场对数极坐标映射成像方法 - Google Patents

基于曲面透镜阵列的宽视场对数极坐标映射成像方法 Download PDF

Info

Publication number
CN103091737B
CN103091737B CN201210552055.4A CN201210552055A CN103091737B CN 103091737 B CN103091737 B CN 103091737B CN 201210552055 A CN201210552055 A CN 201210552055A CN 103091737 B CN103091737 B CN 103091737B
Authority
CN
China
Prior art keywords
lens
ring
optical
array
image planes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210552055.4A
Other languages
English (en)
Other versions
CN103091737A (zh
Inventor
郝群
宋勇
樊凡
曹杰
刘韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CN201210552055.4A priority Critical patent/CN103091737B/zh
Publication of CN103091737A publication Critical patent/CN103091737A/zh
Application granted granted Critical
Publication of CN103091737B publication Critical patent/CN103091737B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Lenses (AREA)
  • Image Input (AREA)

Abstract

本发明涉及一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,属于光电图像传感器技术领域。一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,按由上至下的顺序由前置光学系统、曲面非均匀透镜阵列及光电探测阵列构成。本发明的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,由于采用曲面光学透镜阵列结构,扩大了成像系统的视场,从而可实现大视场成像。增加了对数极坐标映射传感器的灵敏度。

Description

基于曲面透镜阵列的宽视场对数极坐标映射成像方法
技术领域
本发明涉及一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,属于光电图像传感器技术领域。
背景技术
对数极坐标映射成像技术模拟了人眼视网膜的非均匀采样机理,可降低信息冗余。同时,基于该技术可获得目标的尺度与旋转不变性,进而消除目标尺度与旋转变化的影响,从而提高光电探测系统对运动目标的探测与跟踪的速度与精度。因此,对数极坐标映射成像技术在航空、航天、机器人、智能监控等领域具有广泛的应用前景。
目前,已有的对数极坐标映射成像方法主要通过基于CMOS或CCD工艺的非均匀像素实现,即:基于CMOS或CCD工艺形成不同尺寸的像素,并通过非均匀像素的几何位置分布获得对数极坐标映射能力。该方法主要存在以下问题:(1)采用常规成像光学系统,难以实现大视场成像。(2)受工艺条件限制,难以获得较大的像素尺寸,导致其灵敏度相对较低。
发明内容
本发明的目的是为了解决现有技术难以实现大视场成像的问题,本发明提出了一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法。通过曲面非均匀透镜阵列结构实现大视场;通过非均匀透镜阵列对前置光学系统像面的分割,实现硬件对数极坐标映射。最终,获得同时具备大视场、目标尺度与旋转不变性两种特性的光电成像能力。
本发明的目的是通过下述技术方案实现的。
一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,按由上至下的顺序由前置光学系统、曲面非均匀透镜阵列及光电探测阵列构成。
所述前置光学系统为会聚系统,主要对入射光进行会聚。
所述曲面非均匀透镜阵列由按曲面分布的非均匀光学透镜构成:以曲面的顶点为中心,设置M(M>2)环光学透镜,每环内均匀设置N(N>3)个光学透镜,N个光学透镜的圆心均匀分布于环内。在同一圆环内,N个光学透镜的口径及其他光学参数相同;相邻圆环内的光学透镜口径及其他光学参数的设置满足对数极坐标映射的要求。
所述光学透镜环数M>2,光学透镜个数N>3;
所述光电探测阵列用于对曲面非均匀透镜阵列的会聚光进行光电转换,光电探测器阵列的整体光敏面垂直于透镜阵列顶点与光电探测器阵列中心之间的连线。光电探测器阵列中的每一光电探测器均对应曲面非均匀透镜阵列中的一个光学透镜。即:在光电探测器阵列中,第i环、第j个探测器与非均匀透镜阵列中的第i环、第j个光学透镜相对应,且光学透镜的光轴通过所对应光电探测器的光敏面中心。
前置光学系统为会聚系统,位于整个系统的最上端,主要实现入射光的会聚。依据对数极坐标映射要求,对前置光学系统后的像面进行区域分割。在本发明中,子区域分割的过程是这样实现的:
在前置光学系统的像面内,以光轴为中心,分割成M(M>2)环区域,每环均匀分割出N(N>3)个半径相同的圆形子区域,则其采样角δ=2π/N。设像面上距离光轴最近的圆环为第1环,第1环内每个子区域的半径为r1,第1环子区域中心距离像面中心的距离为R1,即第1环的半径为R1;则R1=r1/tan(δ/2)。同时,像面内第i环的半径Ri为:
R i = R 1 ( N + π N - π ) i - 1 - - - ( 1 )
在曲面非均匀透镜阵列中,每一透镜的位置和视场角由前置光学系统像面圆形子区域的位置及半径决定;曲面非均匀透镜阵列中每一透镜的位置与像面中圆形子区域的位置是一一对应的;即:在像面中,第i环、第j个圆形子区域与非均匀透镜阵列中的第i环、第j个光学透镜相对应;不同口径的光学透镜构成的环形透镜组沿曲面的经线方向排列,且互相不重合,其相互位置满足对数极坐标映射要求;每一透镜的光轴需落在其对应的圆形子区域中,优选为圆心附近;
曲面的中心轴为OP,半径为R0,第i环内透镜的口径为Di,透镜的视场角为β。距曲面顶点最近的一环为第1环,第1环透镜的光轴与OP之间的夹角为θ,其后每环透镜的光轴与OP之间的夹角由分割后的像面子区域决定;系统的视场由非均匀透镜阵列的规模决定,其视场大于2arctan(Rmax/R0)。Rmax为曲面非均匀透镜阵列中最外环任意透镜中心点距离OP的距离;
设透镜的口径为Di,透镜视场角为βi,透镜主截面与像面之间的夹角为αi,且两者之间沿光轴方向的距离为d,OP=1,透镜所对应像面子区域的半径为ri,因此,有
l = sin ( π / 2 - β i / 2 + α i ) · sin ( π / 2 - β i / 2 - α i ) sin ( π / 2 - β i / 2 + α i ) + sin ( π / 2 - β i / 2 - α i ) · 2 r i sin β i / 2 d = l - D i 2 · tan β i / 2 - - - ( 2 )
则可得到每环光学透镜的口径Di
光电探测器阵列需接收由曲面非均匀透镜阵列所会聚的所有光线。且所有光电探测器的光敏面均在一个平面内。较佳地,光电探测器阵列中各光电探测器具有相同的光敏元尺寸。同时,其空间位置满足曲面非均匀透镜阵列的光学会聚要求。
具体工作过程如下:
第一步:基于前置光学系统实现入射光的会聚。
第二步:基于曲面非均匀光学透镜阵列,对前置光学系统的像面进行分割,使之满足对数极坐标映射要求,并同时获得较大的探测视场。
第三步:基于曲面非均匀光学透镜阵列中的光学透镜,将入射光分别会聚于所对应的光电探测器的光敏面上。
第四步:基于光电探测器阵列中的光电探测器进行光电转换,分别将入射光强转换为相应的电信号,从而实现对数极坐标映射成像。
有益效果
1、大视场
本发明的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,由于采用曲面光学透镜阵列结构,扩大了成像系统的视场,从而可实现大视场成像。
2、高灵敏度
本发明的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,由于采用会聚成像,提高了量子效率,增加了对数极坐标映射传感器的灵敏度。
3、可消除信息冗余
本发明的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,依据对数极坐标映射要求,采用曲面非均匀透镜阵列对前置光学系统像面进行分割。即:视场中心区域的采样率(分辨率)较高。视场边缘区域的采样率随着半径的增大而降低。因此,消除了视场边缘的信息冗余。
4、尺度与旋转不变性
本发明的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,采用曲面非均匀透镜阵列对前置光学系统像面进行分割,进而实现硬件对数极坐标映射,从而使成像系统在具备大视场的前提下,具备了目标的尺度与旋转不变性。即:可将笛卡尔坐标系下的目标尺度与旋转变化分别转换为对数极坐标系下的平移运动,有利于提高目标探测与跟踪的速度与精度。
附图说明
图1为基于曲面透镜阵列的宽视场对数极坐标映射成像方法的示意图;
图2为前置光学系统的一次像面分割图;
图3为曲面光学透镜阵列的结构示意图;
图4为曲面光学透镜阵列的截面图;
图5为单透镜的光路图。
其中:1-前置光学系统、2-前置光学系统的像面、3-曲面非均匀透镜阵列、4-光电探测器面阵、5-像面分割后的子区域、6-用于固定光学透镜的曲面基底结构、7-光学透镜。
具体实施方式
下面结合附图和实施例对本发明进行详细说明。
实施例1
一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,按由上至下的顺序由前置光学系统、曲面非均匀透镜阵列及光电探测阵列构成,如图1所示。
所述前置光学系统为会聚系统,主要对入射光进行会聚。
所述曲面非均匀透镜阵列由按曲面分布的非均匀光学透镜构成,如图3所示:以曲面的顶点为中心,设置M(M>2)环光学透镜,每环内均匀设置N(N>3)个光学透镜,N个光学透镜的圆心均匀分布于环内。在同一圆环内,N个光学透镜的口径及其他光学参数相同;相邻圆环内的光学透镜口径及其他光学参数的设置满足对数极坐标映射的要求。
所述光学透镜环数M>2,光学透镜个数N>3;
所述光电探测阵列用于对曲面非均匀透镜阵列的会聚光进行光电转换,光电探测器阵列的整体光敏面垂直于透镜阵列顶点与光电探测器阵列中心之间的连线。光电探测器阵列中的每一光电探测器均对应曲面非均匀透镜阵列中的一个光学透镜。即:在光电探测器阵列中,第i环、第j个探测器与非均匀透镜阵列中的第i环、第j个光学透镜相对应,且光学透镜的光轴通过所对应光电探测器的光敏面中心。
前置光学系统为会聚系统,位于整个系统的最上端,主要实现入射光的会聚。依据对数极坐标映射要求,对前置光学系统后的像面进行区域分割,如图2所示。在本发明中,子区域分割的过程是这样实现的:
在前置光学系统的像面内,以光轴为中心,分割成M(M>2)环区域,每环均匀分割出N(N>3)个半径相同的圆形子区域,则其采样角δ=2π/N。设像面上距离光轴最近的圆环为第1环,第1环内每个子区域的半径为r1,第1环子区域中心距离像面中心的距离为R1,即第1环的半径为R1;则R1=r1/tan(δ/2)。同时,像面内第i环的半径Ri为:
R i = R 1 ( N + π N - π ) i - 1 - - - ( 1 )
在曲面非均匀透镜阵列中,每一透镜的位置和视场角由前置光学系统像面圆形子区域的位置及半径决定;曲面非均匀透镜阵列中每一透镜的位置与像面中圆形子区域的位置是一一对应的;即:在像面中,第i环、第j个圆形子区域与非均匀透镜阵列中的第i环、第j个光学透镜相对应;不同口径的光学透镜构成的环形透镜组沿曲面的经线方向排列,且互相不重合,其相互位置满足对数极坐标映射要求;每一透镜的光轴需落在其对应的圆形子区域中,优选为圆心附近;
曲面的中心轴为OP,半径为R0,第i环内透镜的口径为Di,透镜的视场角为β。距曲面顶点最近的一环为第1环,第1环透镜的光轴与OP之间的夹角为θ,其后每环透镜的光轴与OP之间的夹角由分割后的像面子区域决定;系统的视场由非均匀透镜阵列的规模决定,其视场大于2arctan(Rmax/R0)。Rmax为曲面非均匀透镜阵列中最外环任意透镜中心点距离OP的距离,如图4所示;
设透镜的口径为Di,透镜视场角为βi,透镜主截面与像面之间的夹角为αi,且两者之间沿光轴方向的距离为d,OP=1,透镜所对应像面子区域的半径为ri,如图5所示,因此,有
l = sin ( π / 2 - β i / 2 + α i ) · sin ( π / 2 - β i / 2 - α i ) sin ( π / 2 - β i / 2 + α i ) + sin ( π / 2 - β i / 2 - α i ) · 2 r i sin β i / 2 d = l - D i 2 · tan β i / 2 - - - ( 2 )
则可得到每环光学透镜的口径Di
光电探测器阵列需接收由曲面非均匀透镜阵列所会聚的所有光线。且所有光电探测器的光敏面均在一个平面内。较佳地,光电探测器阵列中各光电探测器具有相同的光敏元尺寸。同时,其空间位置满足曲面非均匀透镜阵列的光学会聚要求。
具体工作过程如下:
第一步:基于前置光学系统实现入射光的会聚。
第二步:基于曲面非均匀光学透镜阵列,对前置光学系统的像面进行分割,使之满足对数极坐标映射要求,并同时获得较大的探测视场。
第三步:基于曲面非均匀光学透镜阵列中的光学透镜,将入射光分别会聚于所对应的光电探测器的光敏面上。
第四步:基于光电探测器阵列中的光电探测器进行光电转换,分别将入射光强转换为相应的电信号,从而实现对数极坐标映射成像。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:按由上至下的顺序由前置光学系统、曲面非均匀透镜阵列及光电探测阵列构成;
前置光学系统为会聚系统,位于整个系统的最上端,主要实现入射光的会聚;依据对数极坐标映射要求,对前置光学系统后的像面进行区域分割;在本发明中,像面子区域分割的过程是这样实现的:
在前置光学系统的像面内,以光轴为中心,分割成M环区域,每环均匀分割出N个半径相同的像面子区域,则其采样角δ=2π/N;设像面上距离光轴最近的圆环为第1环,第1环内每个像面子区域的半径为r1,第1环像面子区域中心距离像面中心的距离为R1,即第1环的半径为R1;则R1=r1/tan(δ/2);同时,像面内第i环的半径Ri为:
R i = R 1 ( N + π N - π ) i - 1 - - - ( 1 )
在曲面非均匀透镜阵列中,每一透镜的位置和视场角由前置光学系统像面像面子区域的位置及半径决定;曲面非均匀透镜阵列中每一透镜的位置与像面中像面子区域的位置是一一对应的;同一环中的透镜具有同一口径,不同环中的透镜具有不同口径,各环透镜沿曲面的经线方向排列,且互相不重合,其相互位置满足对数极坐标映射要求;每一透镜的光轴需落在其对应的像面子区域中,为圆心附近;
曲面的中心轴为OP,半径为RO,第i环内透镜的口径为Di,透镜的视场角为βi;距曲面顶点最近的一环为第1环,第1环透镜的光轴与OP之间的夹角为θ,其后每环透镜的光轴与OP之间的夹角由分割后的像面子区域决定;系统的视场由非均匀透镜阵列的规模决定,其视场大于2arctan(Rmax/RO);Rmax为曲面非均匀透镜阵列中最外环任意透镜中心点距离OP的距离;
设透镜的口径为Di,透镜视场角为βi,透镜主截面与像面之间的夹角为αi,且两者之间沿光轴方向的距离为d,OP=l,透镜所对应的像面子区域的半径为ri,因此,有
l = sin ( π / 2 - β i / 2 + α i ) · sin ( π / 2 - β i / 2 - α i ) sin ( π / 2 - β i / 2 + α i ) + sin ( π / 2 - β i / 2 - α i ) · 2 r i sin β i / 2 d = l - D i 2 · tan β i / 2 - - - ( 2 )
则可得到每环光学透镜的口径Di
2.如权利要求1所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:所述前置光学系统为会聚系统,主要对入射光进行会聚。
3.如权利要求1所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:所述曲面非均匀透镜阵列,采用透镜按曲面非均匀地分布:以曲面的顶点为中心,设置M环光学透镜,每环内均匀设置N个光学透镜,N个光学透镜的圆心均匀分布于环内;在同一圆环内,N个光学透镜的口径及其他光学参数相同;相邻圆环内的光学透镜口径及其他光学参数的设置满足对数极坐标映射的要求。
4.如权利要求1或3所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:所述光学透镜环数M>2,光学透镜个数N>3。
5.如权利要求1所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:所述光电探测阵列用于对曲面非均匀透镜阵列的会聚光进行光电转换,光电探测器阵列的整体光敏面垂直于透镜阵列顶点与光电探测器阵列中心之间的连线;光电探测器阵列中的每一光电探测器均对应曲面非均匀透镜阵列中的一个光学透镜;且光学透镜的光轴通过所对应光电探测器的光敏面中心。
6.如权利要求1所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:所述光电探测器阵列中各光电探测器具有相同的光敏元尺寸。
7.如权利要求1所述的一种基于曲面透镜阵列的宽视场对数极坐标映射成像方法,其特征在于:具体工作过程如下:
第一步:基于前置光学系统实现入射光的会聚;
第二步:基于曲面非均匀光学透镜阵列,对前置光学系统的像面进行分割,使之满足对数极坐标映射要求,并同时获得较大的探测视场;
第三步:基于曲面非均匀光学透镜阵列中的光学透镜,将入射光分别会聚于所对应的光电探测器的光敏面上;
第四步:基于光电探测器阵列中的光电探测器进行光电转换,分别将入射光强转换为相应的电信号,从而实现对数极坐标映射成像。
CN201210552055.4A 2012-12-18 2012-12-18 基于曲面透镜阵列的宽视场对数极坐标映射成像方法 Expired - Fee Related CN103091737B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210552055.4A CN103091737B (zh) 2012-12-18 2012-12-18 基于曲面透镜阵列的宽视场对数极坐标映射成像方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210552055.4A CN103091737B (zh) 2012-12-18 2012-12-18 基于曲面透镜阵列的宽视场对数极坐标映射成像方法

Publications (2)

Publication Number Publication Date
CN103091737A CN103091737A (zh) 2013-05-08
CN103091737B true CN103091737B (zh) 2015-01-21

Family

ID=48204533

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210552055.4A Expired - Fee Related CN103091737B (zh) 2012-12-18 2012-12-18 基于曲面透镜阵列的宽视场对数极坐标映射成像方法

Country Status (1)

Country Link
CN (1) CN103091737B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103760570B (zh) * 2014-02-18 2016-01-20 北京理工大学 一种基于仿人眼视觉机理的激光三维成像系统
CN103983980B (zh) * 2014-05-28 2016-04-13 北京理工大学 一种变分辨率激光三维成像阵列设计方法
CN105892048A (zh) * 2016-04-29 2016-08-24 西安电子科技大学 基于棱镜-光纤耦合的大视场成像装置
CN108802710A (zh) * 2018-06-06 2018-11-13 复旦大学 基于垂直腔面发射激光器的闪光激光探测与测量系统
CN109633682A (zh) * 2018-12-29 2019-04-16 中国科学院半导体研究所 一种空间全向光探测器及其制作方法
CN113834509A (zh) * 2021-08-27 2021-12-24 中国计量大学 一种基于深度学习的弱反射光纤光栅串解调仪
CN113558551A (zh) * 2021-09-26 2021-10-29 深圳市资福医疗技术有限公司 一种图像获取方法及应用其的胶囊内窥镜
CN114839761A (zh) * 2022-02-15 2022-08-02 北京理工大学 一种基于介电弹性驱动的非均匀变焦曲面复眼阵列

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7664339B2 (en) * 2004-05-03 2010-02-16 Jacek Turski Image processing method for object recognition and dynamic scene understanding
CN102510449A (zh) * 2011-11-18 2012-06-20 北京理工大学 一种基于非均匀透镜阵列的类人眼图像传感器
CN102540705A (zh) * 2012-01-17 2012-07-04 中北大学 一种仿生pdms曲面复眼的制备方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7664339B2 (en) * 2004-05-03 2010-02-16 Jacek Turski Image processing method for object recognition and dynamic scene understanding
CN102510449A (zh) * 2011-11-18 2012-06-20 北京理工大学 一种基于非均匀透镜阵列的类人眼图像传感器
CN102540705A (zh) * 2012-01-17 2012-07-04 中北大学 一种仿生pdms曲面复眼的制备方法

Also Published As

Publication number Publication date
CN103091737A (zh) 2013-05-08

Similar Documents

Publication Publication Date Title
CN103091737B (zh) 基于曲面透镜阵列的宽视场对数极坐标映射成像方法
CN102510449B (zh) 一种基于非均匀透镜阵列的类人眼图像传感器
CN107358216A (zh) 一种指纹采集模组、显示装置及指纹识别方法
CN101750068B (zh) 一种太阳敏感器及其测量方法
CN104317156B (zh) 同心球物镜探测器球面阵列视频采集装置
CN102081296B (zh) 仿复眼视觉动目标快速定位及全景图同步获取装置及方法
Ma et al. Development of an artificial compound eye system for three-dimensional object detection
CN207457496U (zh) 基于多视场合束镜的激光雷达光学装置及激光雷达系统
US11133774B2 (en) Solar tracking sensor based on fiber light guidance
CN103698900A (zh) 用于大规模高分辨率遥感相机的光学成像方法及其系统
CN108873321A (zh) 基于干涉的超薄高分辨率平板成像探测系统
CN108063102A (zh) 一种基于四象限光电探测器的监测微镜的方法
Cheng et al. 3D error calibration of spatial spots based on dual position-sensitive detectors
Cheng et al. Compound eye and retina-like combination sensor with a large field of view based on a space-variant curved micro lens array
US20160301357A1 (en) Solar tracker and solar energy collection system
CN101672641B (zh) 一种基于双四象限探测器的光学精密跟踪探测器
WO2015113447A1 (en) Solar tracker and solar energy collection system
CN208421217U (zh) 一种光学接收系统
CN104316046B (zh) 一种强度关联星敏感器
CN106646840A (zh) 全向点探测器等效光学系统
CN102353453B (zh) 一种光纤束流场重建方法
Li et al. Biomimetic Polarized Light Navigation Sensor: A Review
CN111256649B (zh) 基于锥形透镜的光线入射角度测量系统与方法
Tisse Low-cost miniature wide-angle imaging for self-motion estimation
CN109211223A (zh) 一种集成化接近测量敏感器及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150121

Termination date: 20161218