CN101656826A - 录影系统及其录影方法 - Google Patents

录影系统及其录影方法 Download PDF

Info

Publication number
CN101656826A
CN101656826A CN200810304132A CN200810304132A CN101656826A CN 101656826 A CN101656826 A CN 101656826A CN 200810304132 A CN200810304132 A CN 200810304132A CN 200810304132 A CN200810304132 A CN 200810304132A CN 101656826 A CN101656826 A CN 101656826A
Authority
CN
China
Prior art keywords
operating area
mobile object
dynamic image
module
video recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200810304132A
Other languages
English (en)
Other versions
CN101656826B (zh
Inventor
陈政勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Original Assignee
Hongfujin Precision Industry Shenzhen Co Ltd
Hon Hai Precision Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hongfujin Precision Industry Shenzhen Co Ltd, Hon Hai Precision Industry Co Ltd filed Critical Hongfujin Precision Industry Shenzhen Co Ltd
Priority to CN2008103041328A priority Critical patent/CN101656826B/zh
Priority to US12/392,920 priority patent/US20100045813A1/en
Publication of CN101656826A publication Critical patent/CN101656826A/zh
Application granted granted Critical
Publication of CN101656826B publication Critical patent/CN101656826B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种用于影像撷取装置的录影系统，其包括显示模块、视频录制模块、确定模块、追踪模块及放大模块。显示模块包括显示区域，显示区域包含子显示区域。视频录制模块用于录制至少一个移动物体的动态影像并显示在子显示区域。确定模块用于在动态影像中确定包含至少一移动物体中其中一个移动物体的操作区域。追踪模块在动态影像中追踪位于操作区域内的移动物体使操作区域始终包含此移动物体。放大模块将操作区域以预设的比例值放大并将放大的动态影像显示在显示区域。所述的录影系统追踪位于操作区域内的移动物体使操作区域始终包含该移动物体并放大操作区域，从而无需移动影像撷取装置，就可保证拍摄的放大动态影像稳定。本发明还提供了一种录影方法。

Description

录影系统及其录影方法
技术领域
本发明涉及一种录影技术，尤其涉及一种应用于影像撷取装置的录影系统及录影方法。
背景技术
目前，利用影像撷取装置如数码相机拍摄移动物体的动态影像时，使用者需要将数码相机随着所拍物体的移动进行相应的移动。
然而，使用者在移动数码相机的过程中，由于使用者的操作不稳定，所拍摄的移动物体的放大动态影像会出现晃动或者模糊，从而导致所需拍摄的移动物体的放大动态影像不稳定
发明内容
有鉴于此，有必要提供一种能使拍摄的移动物体的放大动态影像稳定的录影系统及录影方法。
一种用于影像撷取装置的录影系统，其包括一个显示模块、一个视频录制模块、一个确定模块、一个追踪模块及一个放大模块。所述显示模块包括一个显示区域，所述显示区域包含一个子显示区域。所述视频录制模块用于录制至少一个移动物体的动态影像并输出至所述显示模块以显示在所述子显示区域。所述确定模块用于在显示在所述子显示区域的动态影像中确定一个包含所述至少一个移动物体中的其中一个移动物体的操作区域。所述追踪模块用于在所述动态影像中追踪位于所述操作区域内的移动物体以使所述操作区域在所述子显示区域内始终包含所述移动物体。所述放大模块用于将所述操作区域以预设的比例值进行放大并输出至所述显示模块以将放大的动态影像显示在所述显示区域。
一种录影方法，其用于录制至少一个移动物体的动态影像并将该动态影像显示在一个显示区域上，所述显示区域包含一个子显示区域，所述录影方法包括以下步骤：
录制所述动态影像并将所述动态影像显示在所述子显示区域；
在所述动态影像上确定一个包含所述至少一个移动物体中的其中一个移动物体的操作区域；
追踪位于所述操作区域内的移动物体以使所述操作区域在所述子显示区域内始终包含所述移动物体；
将所述操作区域以预设的比例值进行放大并将放大的动态影像显示在所述显示区域。
相较于现有技术，所述的录影系统及录影方法利用所述追踪模块追踪所需拍摄的移动物体以使所述操作区域始终包含所述移动物体，并放大操作区域以获得所需拍摄的移动物体的放大动态影像，从而无需移动影像撷取装置，就可保证所需拍摄的移动物体的放大动态影像稳定。
附图说明
图1为本发明实施方式的录影系统的功能模块图；
图2为图1的录影系统录制动态影像显示在显示区域的示意图；
图3为图1的录影系统的录影方法的流程图。
具体实施方式
下面将结合附图对本发明实施方式作进一步的详细说明。
请参阅图1，为本发明实施方式提供的用于影像撷取装置的录影系统100，其包括一个显示模块10、一个视频录制模块20、一个确定模块40、一个追踪模块60及一个放大模块80。
所述显示模块10包括一个显示区域，所述显示区域包含一个子显示区域。如图2所示，本实施方式中，假设显示区域为A，子显示区域为B。若录影系统100应用于如数码相机的影像撷取装置中，则显示模块10为数码相机的液晶显示屏。
所述视频录制模块20用于录制至少一个移动物体的动态影像并输出至显示模块10以将所述动态影像显示在所述子显示区域B。本实施方式中，视频录制模块20用于录制三个移动物体的动态影像。视频录制模块20为具有录制动态影像功能的元件，若录影系统100应用于数码相机中，则视频录制模块20即为数码相机内置的摄影模块。
所述确定模块40用于将显示在所述子显示区域B中的所述动态影像中确定一个包含所述三个移动物体的其中一个移动物体M的操作区域。确定模块40内预先设定一个操作区域，操作区域的大小可预先设定，也可随使用者的需要更改。操作区域所选择的移动物体M可依使用者需要进行选择。本实施方式中，操作区域以矩形框C的形式显示在子显示区域B上，使用者可依需要移动矩形框C以使所需拍摄的移动物体M包含在矩形框C内。若录影系统100应用于数码相机中，可利用数码相机的导向键进行该矩形框C的移动从而在录影前选择所需拍摄的移动物体M包含在矩形框C内。可以理解，若显示模块10包括一个触控屏时，使用者还可利用触控笔直接在子显示区域B的动态影像中选择所需拍摄的的移动物体M。
所述追踪模块60用于在子显示区域B的动态影像中追踪位于操作区域内的移动物体M以使矩形框C在所述子显示区域B内始终包含该移动物体M。由于该矩形框C选中的物体为移动的物体，从而子显示区域B内的动态影像中所选定的移动物体M的位置会变化。
追踪模块60包括一个画面获取单元62、一个比对单元64及一个计算单元66。
画面获取单元62从子显示区域B显示的动态影像中获得多帧画面、多帧画面中的该移动物体M的坐标及画面中操作区域的坐标。比对单元64比对相邻两帧画面中的移动物体M的坐标以得到移动物体M的坐标差值。计算单元66根据差值将操作区域的坐标位置进行相应变换，从而使操作区域的位置相对于该移动物体M始终不变。
可以理解，所选定的移动物体M的坐标位置可根据轮廓测量法或单位块检测法检测出移动物体M的坐标位置。
所述放大模块80用于将操作区域以预设的比例值进行放大并输出至显示模块10以将放大的操作区域的动态影像显示在显示区域A。
放大模块80包括一个存储单元82、一个画面放大单元84及一个视频处理器86。所述存储单元82内预设一个比例值，所述比例值可根据使用者需要设置或出厂前由厂家进行设置。
由于动态影像内的操作区域也为动态影像，所述画面放大单元84将操作区域随录制时间依次以预设的比例值将动态影像内的操作区域进行放大并获得多帧放大画面。
视频处理器86用于将所获得的多帧放大画面进行处理以生成移动物体M的放大动态影像M’，并输出至显示模块10以显示在显示区域A，以得到子显示区域B中位于操作区域内的移动物体M的放大动态影像M’。视频处理器86为具有将多个画面以一定速率播放如每秒30帧画面生成视频并显示在显示区域A。
为方便使用者操作，还可将录影系统100录影的剩余时间或者已录影的时间显示在显示区域A中。
请参阅图3，为本发明实施方式的录影系统100的录影方法，其用于录制至少一个移动物体的动态影像并显示在一个显示区域上，所述显示区域包含一个子显示区域，所述录影方法包括以下步骤：
S110：录制所述动态影像并显示在所述子显示区域；
S120在所述动态影像上确定一个包含所述至少一个移动物体中的其中一个移动物体的操作区域；
S130追踪位于所述操作区域内的移动物体以使所述操作区域在所述子显示区域中始终包含所述移动物体；
S140将所述操作区域以预设的比例值进行放大并将放大的动态影像显示在显示区域。
在步骤S110中：利用视频录制模块20录制至少一个移动物体的动态影像并输出至显示模块10以将该动态影像显示在所述子显示区域B。本实施方式中，视频录制模块20录制三个移动物体的动态影像。
在步骤S120中：利用确定模块40在显示在显示区域A中的动态影像上确定一个包含所述三个移动物体的其中一个移动物体M的操作区域，即利用矩形框C选中移动物体M。
在步骤S130中：利用画面获取单元62从子显示区域B显示的动态影像中获得多帧画面、多帧画面中的位于操作区域内的移动物体M的坐标及画面中操作区域的坐标。比对单元64比对相邻两帧的画面中该移动物体M的坐标以得到移动物体M的坐标差值。利用计算单元66根据该差值将操作区域的坐标位置进行相应变换，从而使操作区域的位置相对于该移动物体M始终不变。
在步骤S140中：利用画面放大单元84将操作区域随录制时间依次以预设的比例值将动态影像内的操作区域进行放大并获得多帧放大画面。利用视频处理器86用于将所获得的多帧放大画面生成放大视频并输出至显示模块10以显示在显示区域A上。视频处理器86为具有将多个画面以一定速率播放如每秒30帧画面生成放大动态影像M’并显示在显示区域A。
所述的录影系统及其录影方法利用确定模块40在子显示区域B显示的动态影像中依需要确定所需拍摄的移动物体操作区域，并利用追踪模块60追踪所需拍摄的移动物体以使所述操作区域始终包含所述移动物体，从而利用放大模块80放大操作区域以获得所需拍摄的移动物体的放大动态影像显示在显示区域A上，从而无需移动使用该录影系统100的影像撷取装置，就可保证所需拍摄的放大移动物体的动态影像稳定。
另外，本领域技术人员还可以在本发明精神内做其它变化，当然，这些依据本发明精神所做的变化，都应包含在本发明所要求保护的范围之内。

Claims (10)

1.一种用于影像撷取装置的录影系统，其包括一个显示模块、一个视频录制模块、一个确定模块、一个追踪模块及一个放大模块，所述显示模块包含一个显示区域，所述显示区域包括一个子显示区域，所述视频录制模块用于录制至少一个移动物体的动态影像并输出至所述显示模块以将所述动态影像显示在所述子显示区域，所述确定模块用于从显示在所述子显示区域的动态影像中确定一个包含所述至少一个移动物体中的其中一个移动物体的操作区域，所述追踪模块用于在所述动态影像中追踪位于所述操作区域内的移动物体以使所述操作区域在所述子显示区域内始终包含所述移动物体，所述放大模块用于将所述操作区域以预设的比例值进行放大并输出至所述显示模块以将放大的动态影像显示在所述显示区域。
2.如权利要求1所述的录影系统，其特征在于，所述追踪模块包括一个画面获取单元，所述画面获取单元用于从所述子显示区域显示的动态影像中获得多帧画面、多帧画面中所述位于所述操作区域的移动物体的坐标及画面中所述操作区域的坐标。
3.如权利要求2所述的录影系统，其特征在于，所述追踪模块还包括一个比对单元及一个计算单元，所述比对单元比对相邻两帧的画面中所述位于所述操作区域的移动物体的坐标以得到所述操作区域的移动物体的坐标差值，所述计算单元根据所述差值将所述操作区域的坐标位置进行相应变换使所述操作区域的位置相对于该移动物体始终不变。
4.如权利要求1所述的录影系统，其特征在于，所述放大模块包括一个存储单元及一个画面放大单元，所述存储单元内预设一个比例值，所述画面放大单元将所述操作区域以预设的比例值进行放大并获得多帧放大画面。
5.如权利要求4所述的录影系统，其特征在于，所述放大模块还包括一个视频处理器，所述视频处理器用于将所获得的多帧放大画面进行处理以生成所述位于所述操作区域内的移动物体的放大动态影像，并输出至所述显示模块以显示在所述显示区域。
6.一种录影方法，其用于录制至少一个移动物体的动态影像并将所述动态影像显示在一个显示区域上，所述显示区域包括一个子显示区域，所述录影方法包括以下步骤：
录制所述动态影像并显示在所述子显示区域；
在所述动态影像上确定一个包含所述至少一个移动物体中的其中一个移动物体的操作区域；
追踪位于所述操作区域内的移动物体以使所述操作区域在所述子显示区域范围内始终包含所述移动物体；
将所述操作区域以预设的比例值进行放大并将放大的动态影像显示在显示区域。
7.如权利要求6所述的录影方法，其特征在于，所述追踪步骤中包括以下步骤：从所述子显示区域显示的动态影像中获得多帧画面、多帧画面中所述位于所述操作区域内的移动物体的坐标及画面中操作区域的坐标。
8.如权利要求7所述的录影方法，其特征在于，所述追踪步骤中还包括以下步骤：比对相邻两帧的画面中所述位于所述操作区域内的移动物体的坐标以得到差值，并根据所述差值将所述操作区域的坐标位置进行相应变换使所述操作区域的位置相对于所述移动物体始终不变。
9.如权利要求6所述的录影方法，其特征在于，所述放大步骤中包括以下步骤：将所述操作区域以预设的比例值进行放大并获得多帧放大画面。
10.如权利要求9所述的录影方法，其特征在于，所述放大步骤中还包括以下步骤：将所获得的多帧放大画面进行处理并生成所述位于所述操作区域内的移动物体的放大动态影像以显示在所述显示区域。
CN2008103041328A 2008-08-21 2008-08-21 录影系统及其录影方法 Expired - Fee Related CN101656826B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2008103041328A CN101656826B (zh) 2008-08-21 2008-08-21 录影系统及其录影方法
US12/392,920 US20100045813A1 (en) 2008-08-21 2009-02-25 Digital image capture device and video capturing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008103041328A CN101656826B (zh) 2008-08-21 2008-08-21 录影系统及其录影方法

Publications (2)

Publication Number Publication Date
CN101656826A true CN101656826A (zh) 2010-02-24
CN101656826B CN101656826B (zh) 2011-11-09

Family

ID=41696002

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008103041328A Expired - Fee Related CN101656826B (zh) 2008-08-21 2008-08-21 录影系统及其录影方法

Country Status (2)

Country Link
US (1) US20100045813A1 (zh)
CN (1) CN101656826B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111201773A (zh) * 2017-11-10 2020-05-26 深圳市柔宇科技有限公司 拍摄方法及装置、移动终端及计算机可读存储介质
CN111405140A (zh) * 2020-03-18 2020-07-10 浙江工业大学 一种基于目标跟踪的视频防抖方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI426782B (zh) * 2010-05-19 2014-02-11 Hon Hai Prec Ind Co Ltd 手持裝置及利用其動態監控特定區域的方法
KR101999140B1 (ko) * 2013-01-03 2019-07-11 삼성전자주식회사 카메라장치 및 카메라를 구비하는 휴대단말기의 이미지 촬영장치 및 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5471296A (en) * 1990-05-31 1995-11-28 Parkervision, Inc. Camera lens control system and method
CN1220366C (zh) * 2002-08-23 2005-09-21 赖金轮 自动辨识追踪移动物体及清晰影样取得方法
JP2004264458A (ja) * 2003-02-28 2004-09-24 Fuji Photo Optical Co Ltd 超高倍率広角ズームレンズ
CN100515036C (zh) * 2004-10-10 2009-07-15 倚强科技股份有限公司 智能型图像处理闭路电视摄像机装置及其物体追踪方法
JP4719641B2 (ja) * 2006-07-27 2011-07-06 ソニー株式会社 動画像データ提供方法、動画像データ提供方法のプログラム、動画像データ提供方法のプログラムを記録した記録媒体、動画像データ提供装置及び動画像データ提供システム。

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111201773A (zh) * 2017-11-10 2020-05-26 深圳市柔宇科技有限公司 拍摄方法及装置、移动终端及计算机可读存储介质
CN111405140A (zh) * 2020-03-18 2020-07-10 浙江工业大学 一种基于目标跟踪的视频防抖方法
CN111405140B (zh) * 2020-03-18 2022-04-29 浙江工业大学 一种基于目标跟踪的视频防抖方法

Also Published As

Publication number Publication date
CN101656826B (zh) 2011-11-09
US20100045813A1 (en) 2010-02-25

Similar Documents

Publication Publication Date Title
CN103973974B (zh) 摄像装置
CN100545733C (zh) 成像设备、成像设备的控制方法以及计算机程序
EP3384495B1 (en) Processing of multiple media streams
WO2016112704A1 (zh) 调节投影仪焦距的方法和装置、计算机存储介质
JP2011009846A5 (zh)
CN101770342A (zh) 显示控制设备、显示控制方法和程序
CN101739206A (zh) 图像处理设备、图像显示方法、及图像显示程序
US20100272368A1 (en) Image previewing system capable of automatically magnifying face portion in image and magnifying method thereof
CN102004918A (zh) 图像处理设备、图像处理方法、程序以及电子器件
WO2009073364A1 (en) Motion blur detection using metadata fields
CN101656826B (zh) 录影系统及其录影方法
CN102300047A (zh) 摄像装置、图像播放装置以及图像播放方法
US20100246968A1 (en) Image capturing apparatus, image processing method and recording medium
JP2013007836A (ja) 画像表示装置、画像表示方法及びプログラム
US20090115857A1 (en) Image capturing apparatus providing image blur information and method thereof
CN109819188B (zh) 视频的处理方法和终端设备
CN101399917A (zh) 图像显示设备,图像显示方法和图像捕捉设备
US20110241982A1 (en) Electronic device capable of automatically adjusting file displayed on display and method thereof
WO2017071560A1 (zh) 图片处理方法及装置
US8928764B2 (en) Method and device for correcting user's hand tremor in imaging device
US9083871B2 (en) Plant image capture device and image capture method thereof
JP3671415B2 (ja) 画像と波形の同時記憶装置
CN104933677A (zh) 用以在多个讯框中决定多个候选讯框的方法
CN113573157B (zh) 视频录制方法、视频录制装置、电子设备和可读存储介质
KR100265696B1 (ko) 원격 적외선 화상 처리장치 및 그 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20111109

Termination date: 20150821

EXPY Termination of patent right or utility model