CN102012742A - 一种眼睛鼠标的校正方法及其装置 - Google Patents
一种眼睛鼠标的校正方法及其装置 Download PDFInfo
- Publication number
- CN102012742A CN102012742A CN2010105569241A CN201010556924A CN102012742A CN 102012742 A CN102012742 A CN 102012742A CN 2010105569241 A CN2010105569241 A CN 2010105569241A CN 201010556924 A CN201010556924 A CN 201010556924A CN 102012742 A CN102012742 A CN 102012742A
- Authority
- CN
- China
- Prior art keywords
- check point
- characteristic information
- eyeball characteristic
- eyeball
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Eye Examination Apparatus (AREA)
Abstract
本发明提出一种眼睛鼠标的校正方法及其装置，所述装置包括：感光元器件、图像处理系统；所述方法包括步骤：1、获取用户直视显示屏幕上的校正点时对应的眼睛图像；2、分析所述眼睛图像，得到对应的眼球特征信息；3、根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则返回执行步骤1；在眼睛鼠标的实际运用前，实现了对眼睛鼠标进行校正，避免了由于拍摄眼部图像时用户注视不到位或者用户正在注视其他地方导致的误差或错误现象，提高了眼睛鼠标的定位精度。
Description
技术领域
本发明涉及鼠标技术领域，特别涉及一种眼睛鼠标的校正方法及其装置。
背景技术
随着信息技术的发展，电脑已经越来越普及，鼠标作为电脑的一个必备部件，也随着电脑进入了千家万户，但传统鼠标的使用也带来不少难题，首先传统鼠标是基于手的活动设计的，这样显然使得那些无法活动手的人无法有效操作鼠标，从而无法有效操作电脑。另外，医学界也已经证实，长时间使用传统鼠标，会对人的腕部肌肉造成物理性伤害，轻则产生临时性酸痛，重则造成长期难以治愈的肌肉疾病。
这样，一种基于视觉跟踪技术的眼睛鼠标应运而生，公开号为CN 1889016A的中国专利《眼睛对电脑光标自动定位控制方法和系统》，其原理是：以摄像头分别拍摄使用者注视电脑监视器四个角时的眼部图像，将图像变换成灰阶式数组，对数组动态处理，对剩余的值中最大有效区域进行均值处理选取其中心，算出每幅图像的瞳孔中心位置，根据这四个点瞳孔中心位置和系统显示的部分属性建立模型；获取四个点对应的全图坐标后，根据四点算出其中心位置M；以四点建立四边形，再将四边形修整为矩形，算出矩形的长与宽，并与显示器的长宽相除，分别算出比例KW和KH，得到的比例用于确定瞳孔位置与监视器的光标对应位置的关系。
但是在实际应用中，会出现这样的情况——拍摄用户眼部图像时用户注视不到位或者用户正在注视其他地方，也即用户操作不规范时，使得拍下来的眼部图像出现误差或者错误，影响了眼睛鼠标的正常使用，所以在眼睛鼠标的实际应用前需要对其进行校正，避免因为上述情况导致的误差或错误现象，而且可以同时提高光标定位精度。
发明内容
本发明提出一种眼睛鼠标的校正方法及其装置，解决的技术问题是，实现对眼睛鼠标的校正，提高眼睛鼠标的定位精度。
一种眼睛鼠标的校正方法，其特征在于，包括以下步骤：
步骤1、获取用户直视显示屏幕上的校正点时对应的眼睛图像；所述校正点至少4个；
步骤2、分析所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
步骤3、根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则返回执行步骤1；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标。
一种眼睛鼠标的校正装置，其特征在于，所述装置包括：感光元器件、图像处理系统；
所述感光元器件，用于获取用户直视显示屏幕上的校正点时对应的眼睛图像，并将所述眼睛图像发送给所述图像处理系统；
所述图像处理系统包括：图像分析模块、判断模块、校正点模块；
所述校正点模块，用于确定显示屏幕上的校正点以及该校正点对应的校正点位置信息，接收所述判断模块发送的重新校正指令，并根据该指令重新确定显示屏幕上的校正点以及该校正点对应的校正点位置信息；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标；所述校正点至少4个；
所述图像分析模块，用于接收并分析所述感光元器件发送的所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
判断模块，用于根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则向所述校正点模块发送重新校正指令。
本发明提出一种眼睛鼠标的校正方法及其装置，在眼睛鼠标的实际运用前对眼睛鼠标进行校正，避免了由于拍摄眼部图像时用户注视不到位或者用户正在注视其他地方导致的误差或错误现象，提高了眼睛鼠标的定位精度。
附图说明
图1是本发明的一种眼睛鼠标的校正方法的流程示意图；
图2是本发明的一种眼睛鼠标的校正装置的结构示意图。
具体实施方式
一种眼睛鼠标的校正方法，如图1，包括以下步骤：
步骤1、获取用户直视显示屏幕上的校正点时对应的眼睛图像；所述校正点至少4个；
用户直视显示屏幕上的各个不同的校正点时，用户的眼球会处在相应的不同位置，在获取眼球处在这些位置的图像时，在本实施例中，校正点有9个，分别位于显示屏幕的四个角、四条边的中点和显示屏幕中心；
一般情况下，校正点是越多，校正越精确，但实际上随着校正点的增多，用户的校正程序也会越来越繁琐，降低校正效率，而且在获取过程中，用户的操作必须规范，如头部不能移动、用户直视校正点等，以使获取的图像更加精确。
步骤2、分析所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
其中，建立的眼球坐标可以有多种方式，为了使计算方便，在本实施例中，眼球的坐标原点为所述眼睛图像中眼睛的中心；
对所述眼睛图像进行分析，根据图像的灰度，可以很容易地区分眼球区域和眼白区域，再对眼球区域进行计算求取眼球区域的中心，将眼球区域的中心的坐标作为所述眼球的坐标。
步骤3、根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则返回执行步骤1；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标；
其中，建立的显示屏幕坐标可以有多种方式，为了使计算方便，在本实施例中，显示屏幕的坐标的原点为所述显示屏幕的中心；
作为一种优选的实施例，返回执行步骤1具体为：获取用户直视错误的眼球特征信息对应的校正点时对应的眼睛图像；这样，用户就不需要直视正确的眼球特征信息对应的校正点，无需再次获取正确的眼球特征信息对应的眼睛图像，减少了校正步骤，提高了校正效率；
作为一种优选的实施例，还包括以下步骤：当根据所述校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息是正确时，则根据所述校正点位置信息与所述眼球特征信息，建立所述眼球特征信息与显示屏幕上的任一点坐标的对应函数关系；通过已知的校正点坐标和眼球坐标，建立一次方程组，对该方程组进行求解，可以得到显示屏幕任一点的坐标与眼球的坐标的函数关系，眼睛鼠标可以根据该函数关系和获取的眼睛图像对应的眼球特征信息，对显示屏幕上的光标进行精确移动，能够在由于避免了误差或错误而提高定位精度的情况下，再次提高了眼睛鼠标的定位精度。
与上述方法相对应，本发明还提供一种用以实现上述眼睛校正方法的眼睛鼠标的校正装置，该装置包括感光元器件和图像处理系统，如图2，值得指出的是，实现上述眼睛鼠标的方法的装置并不限于此一种结构；一种眼睛鼠标的校正装置，如图2，所述装置包括：感光元器件、图像处理系统；
所述感光元器件，用于获取用户直视显示屏幕上的校正点时对应的眼睛图像，并将所述眼睛图像发送给所述图像处理系统；
所述感光元器件，也可以用具有所述感光元器件的具有相似功能的设备替代，如摄像头等。
所述图像处理系统包括：图像分析模块、判断模块、校正点模块；
所述校正点模块，用于确定显示屏幕上的校正点以及该校正点对应的校正点位置信息，接收所述判断模块发送的重新校正指令，并根据该指令重新确定显示屏幕上的校正点以及该校正点对应的校正点位置信息；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标；所述校正点至少4个；
在本实施例中，校正点有9个，分别位于显示屏幕的四个角、四条边的中点和显示屏幕中心；
其中，建立的显示屏幕坐标可以有多种方式，为了使计算方便，在本实施例中，显示屏幕的坐标的原点为所述显示屏幕的中心；
所述图像分析模块，用于接收并分析所述感光元器件发送的所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
其中，建立的眼球坐标可以有多种方式，为了使计算方便，在本实施例中，眼球的坐标原点为所述眼睛图像中眼睛的中心；
对所述眼睛图像进行分析，根据图像的灰度，可以很容易地区分眼球区域和眼白区域，再对眼球区域进行计算求取眼球区域的中心，而该眼球区域的中心的坐标就是所述眼球的坐标；
判断模块，用于根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则向所述校正点模块发送重新校正指令。
作为一种优选的实施例，所述判断模块，还用于当向所述校正点模块发送所述重新校正指令时，还向所述校正点模块同时发送错误的眼球特征信息对应的校正点位置信息；所述校正点模块，还用于接收所述判断模块发送的错误的眼球特征信息对应的校正点位置信息，并根据该校正点位置信息和所述重新校正指令时，确定所述校正点中需要重新校正的校正点以及该校正点对应的校正点位置信息；这样，不需要用户再次直视正确的眼球特征信息对应的校正点，而是只需要重新获取错误的眼球特征信息对应的眼睛图像，减少了校正步骤，提高了校正效率。
作为一种优选的实施例，所述装置，还包括建立函数模块；
所述建立函数模块，用于当所述判断模块判断对应的所述眼球特征信息正确时，则根据所述校正点位置信息与所述眼球特征信息，建立所述眼球特征信息与显示屏幕上的任一点坐标的对应函数关系；通过已知的校正点坐标和眼球坐标，将两个坐标的点整合在同一个坐标中，建立一次方程组，对该方程组进行求解，可以得到显示屏幕任一点的坐标与眼球的坐标的函数关系，眼睛鼠标可以根据该函数关系和获取的眼睛图像对应的眼球特征信息，对显示屏幕上的光标进行精确移动，能够在由于避免了误差或错误而提高定位精度的情况下，再次提高了眼睛鼠标的定位精度。
以上所述的本发明实施方式，并不构成对本发明保护范围的限定。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明的权利要求保护范围之内。
Claims (6)
1.一种眼睛鼠标的校正方法，其特征在于，包括以下步骤：
步骤1、获取用户直视显示屏幕上的校正点时对应的眼睛图像；所述校正点至少4个；
步骤2、分析所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
步骤3、根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则返回执行步骤1；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标。
2.根据权利要求1所述的眼睛鼠标的校正方法，其特征在于，返回执行步骤1具体为：获取用户直视错误的眼球特征信息对应的校正点时对应的眼睛图像。
3.根据权利要求1所述的眼睛鼠标的校正方法，其特征在于，还包括以下步骤：当判断对应的所述眼球特征信息是正确时，则根据所述校正点位置信息与所述眼球特征信息，建立所述眼球特征信息与显示屏幕上的任一点坐标的对应函数关系。
4.一种眼睛鼠标的校正装置，其特征在于，所述装置包括：感光元器件、图像处理系统；
所述感光元器件，用于获取用户直视显示屏幕上的校正点时对应的眼睛图像，并将所述眼睛图像发送给所述图像处理系统；
所述图像处理系统包括：图像分析模块、判断模块、校正点模块；
所述校正点模块，用于确定显示屏幕上的校正点以及该校正点对应的校正点位置信息，接收所述判断模块发送的重新校正指令，并根据该指令重新确定显示屏幕上的校正点以及该校正点对应的校正点位置信息；所述校正点位置信息，包括所述校正点在显示屏幕上的坐标；所述校正点至少4个；
所述图像分析模块，用于接收并分析所述感光元器件发送的所述眼睛图像，得到对应的眼球特征信息；所述眼球特征信息，包括所述眼睛图像中眼球的坐标；
判断模块，用于根据校正点位置信息和所述眼球特征信息，判断对应的所述眼球特征信息正确与否，若否，则向所述校正点模块发送重新校正指令。
5.根据权利要求4所述的眼睛鼠标的校正装置，其特征在于，所述判断模块，还用于当向所述校正点模块发送所述重新校正指令时，还向所述校正点模块同时发送错误的眼球特征信息对应的校正点位置信息；
所述校正点模块，还用于接收所述判断模块发送的错误的眼球特征信息对应的校正点位置信息，并根据该校正点位置信息和所述重新校正指令时，确定所述校正点中需要重新校正的校正点以及该校正点对应的校正点位置信息。
6.根据权利要求4所述的眼睛鼠标的校正装置，其特征在于，所述装置，还包括建立函数模块；
所述建立函数模块，用于当所述判断模块判断对应的所述眼球特征信息正确时，则根据所述校正点位置信息与所述眼球特征信息，建立所述眼球特征信息与显示屏幕上的任一点坐标的对应函数关系。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010105569241A CN102012742A (zh) | 2010-11-24 | 2010-11-24 | 一种眼睛鼠标的校正方法及其装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010105569241A CN102012742A (zh) | 2010-11-24 | 2010-11-24 | 一种眼睛鼠标的校正方法及其装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102012742A true CN102012742A (zh) | 2011-04-13 |
Family
ID=43842931
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2010105569241A Pending CN102012742A (zh) | 2010-11-24 | 2010-11-24 | 一种眼睛鼠标的校正方法及其装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102012742A (zh) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102819403A (zh) * | 2012-08-28 | 2012-12-12 | 广东欧珀移动通信有限公司 | 一种终端设备的人机交互方法及其终端设备 |
| CN102830797A (zh) * | 2012-07-26 | 2012-12-19 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
| CN102880290A (zh) * | 2012-08-24 | 2013-01-16 | 中兴通讯股份有限公司 | 一种显示控制方法、装置及终端 |
| CN103176607A (zh) * | 2013-04-16 | 2013-06-26 | 重庆市科学技术研究院 | 一种眼控鼠标实现方法及系统 |
| CN103777351A (zh) * | 2012-10-26 | 2014-05-07 | 鸿富锦精密工业（深圳）有限公司 | 多媒体眼镜 |
| CN104980325A (zh) * | 2014-04-01 | 2015-10-14 | 华为技术有限公司 | 一种信息处理方法及客户端 |
| CN105378595A (zh) * | 2013-06-06 | 2016-03-02 | 微软技术许可有限责任公司 | 通过触摸输入校准眼睛跟踪系统 |
| CN107450720A (zh) * | 2016-05-31 | 2017-12-08 | Fove股份有限公司 | 视线检测系统 |
| CN108463787A (zh) * | 2016-01-05 | 2018-08-28 | 瑞尔D斯帕克有限责任公司 | 多视角图像的注视校正 |
| CN110908511A (zh) * | 2019-11-08 | 2020-03-24 | Oppo广东移动通信有限公司 | 触发重新校正的方法及相关装置 |
| CN111240464A (zh) * | 2018-11-28 | 2020-06-05 | 简韶逸 | 眼球追踪的校正方法和其装置 |
| CN112132755A (zh) * | 2019-06-25 | 2020-12-25 | 京东方科技集团股份有限公司 | 校正标定瞳孔位置的方法、装置、系统及计算机可读介质 |
| US11017575B2 (en) | 2018-02-26 | 2021-05-25 | Reald Spark, Llc | Method and system for generating data to provide an animated visual representation |
| US11232647B2 (en) | 2017-08-08 | 2022-01-25 | Reald Spark, Llc | Adjusting a digital representation of a head region |
| US11908241B2 (en) | 2015-03-20 | 2024-02-20 | Skolkovo Institute Of Science And Technology | Method for correction of the eyes image using machine learning and method for machine learning |
-
2010
- 2010-11-24 CN CN2010105569241A patent/CN102012742A/zh active Pending
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102830797A (zh) * | 2012-07-26 | 2012-12-19 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
| CN102830797B (zh) * | 2012-07-26 | 2015-11-25 | 深圳先进技术研究院 | 一种基于视线判断的人机交互方法及系统 |
| CN102880290B (zh) * | 2012-08-24 | 2016-06-22 | 中兴通讯股份有限公司 | 一种显示控制方法、装置及终端 |
| CN102880290A (zh) * | 2012-08-24 | 2013-01-16 | 中兴通讯股份有限公司 | 一种显示控制方法、装置及终端 |
| WO2014029229A1 (zh) * | 2012-08-24 | 2014-02-27 | 中兴通讯股份有限公司 | 一种显示控制方法、装置及终端 |
| CN102819403A (zh) * | 2012-08-28 | 2012-12-12 | 广东欧珀移动通信有限公司 | 一种终端设备的人机交互方法及其终端设备 |
| CN103777351A (zh) * | 2012-10-26 | 2014-05-07 | 鸿富锦精密工业（深圳）有限公司 | 多媒体眼镜 |
| CN103176607A (zh) * | 2013-04-16 | 2013-06-26 | 重庆市科学技术研究院 | 一种眼控鼠标实现方法及系统 |
| CN103176607B (zh) * | 2013-04-16 | 2016-12-28 | 重庆市科学技术研究院 | 一种眼控鼠标实现方法及系统 |
| CN105378595B (zh) * | 2013-06-06 | 2018-12-07 | 微软技术许可有限责任公司 | 通过触摸输入校准眼睛跟踪系统的方法 |
| CN105378595A (zh) * | 2013-06-06 | 2016-03-02 | 微软技术许可有限责任公司 | 通过触摸输入校准眼睛跟踪系统 |
| CN104980325A (zh) * | 2014-04-01 | 2015-10-14 | 华为技术有限公司 | 一种信息处理方法及客户端 |
| CN104980325B (zh) * | 2014-04-01 | 2018-06-15 | 华为技术有限公司 | 一种信息处理方法及客户端 |
| US11908241B2 (en) | 2015-03-20 | 2024-02-20 | Skolkovo Institute Of Science And Technology | Method for correction of the eyes image using machine learning and method for machine learning |
| US11317081B2 (en) | 2016-01-05 | 2022-04-26 | Reald Spark, Llc | Gaze correction of multi-view images |
| CN108463787A (zh) * | 2016-01-05 | 2018-08-28 | 瑞尔D斯帕克有限责任公司 | 多视角图像的注视校正 |
| US11854243B2 (en) | 2016-01-05 | 2023-12-26 | Reald Spark, Llc | Gaze correction of multi-view images |
| CN108463787B (zh) * | 2016-01-05 | 2021-11-30 | 瑞尔D斯帕克有限责任公司 | 多视角图像的注视校正 |
| CN107450720A (zh) * | 2016-05-31 | 2017-12-08 | Fove股份有限公司 | 视线检测系统 |
| US11836880B2 (en) | 2017-08-08 | 2023-12-05 | Reald Spark, Llc | Adjusting a digital representation of a head region |
| US11232647B2 (en) | 2017-08-08 | 2022-01-25 | Reald Spark, Llc | Adjusting a digital representation of a head region |
| US11017575B2 (en) | 2018-02-26 | 2021-05-25 | Reald Spark, Llc | Method and system for generating data to provide an animated visual representation |
| US11657557B2 (en) | 2018-02-26 | 2023-05-23 | Reald Spark, Llc | Method and system for generating data to provide an animated visual representation |
| CN111240464A (zh) * | 2018-11-28 | 2020-06-05 | 简韶逸 | 眼球追踪的校正方法和其装置 |
| CN112132755A (zh) * | 2019-06-25 | 2020-12-25 | 京东方科技集团股份有限公司 | 校正标定瞳孔位置的方法、装置、系统及计算机可读介质 |
| CN112132755B (zh) * | 2019-06-25 | 2024-09-20 | 京东方科技集团股份有限公司 | 校正标定瞳孔位置的方法、装置、系统及计算机可读介质 |
| CN110908511B (zh) * | 2019-11-08 | 2022-03-15 | Oppo广东移动通信有限公司 | 触发重新校正的方法及相关装置 |
| CN110908511A (zh) * | 2019-11-08 | 2020-03-24 | Oppo广东移动通信有限公司 | 触发重新校正的方法及相关装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102012742A (zh) | 一种眼睛鼠标的校正方法及其装置 | |
| US11903644B2 (en) | Measuring eye refraction | |
| US20110109876A1 (en) | Peripheral vision training and/or testing during central vision fixation | |
| CN110544285A (zh) | 一种矫正头部ct图像中头部位置的方法及系统 | |
| CN108309450B (zh) | 用于手术导航的定位配准系统及方法 | |
| US9008442B2 (en) | Information processing apparatus, information processing method, and computer program | |
| CN108921907A (zh) | 一种运动测试评分的方法、装置、设备及存储介质 | |
| CN109919943B (zh) | 婴儿髋关节角度自动检测方法、系统和计算设备 | |
| CN108109170A (zh) | 医学图像扫描方法及医学影像设备 | |
| CN103785158A (zh) | 体感游戏动作指导系统及方法 | |
| CN113345069A (zh) | 三维人体模型的建模方法、装置、系统及存储介质 | |
| CN115240247A (zh) | 一种用于进行动作和姿态检测的识别方法及系统 | |
| CN109814714B (zh) | 运动传感器的安装姿态确定方法、装置以及存储介质 | |
| Brice et al. | The validity of using inertial measurement units to monitor the torso and pelvis sagittal plane motion of elite rowers | |
| CN109646047B (zh) | 一种超声设备操作引导的显示方法 | |
| JP7175718B2 (ja) | 外科用インプラントを選択する方法と関連デバイス | |
| CN104182963A (zh) | 一种图像处理方法及图像处理装置 | |
| CN116236208A (zh) | 一种基于人体体表特征的多导联心电电极贴片定位方法 | |
| US20160249834A1 (en) | Range of motion capture | |
| CN115327480A (zh) | 声源定位方法与系统 | |
| CN102421367B (zh) | 医用图像显示装置及医用图像显示方法 | |
| CN114516048A (zh) | 机器人的零点调试方法、装置、控制器及存储介质 | |
| CN111739015A (zh) | 基于人体胸部ct扫描序列数据的肋骨骨折ai辅助诊断方法及系统 | |
| CN112991854A (zh) | 一种超声教学方法、装置及系统、电子设备 | |
| US20080117229A1 (en) | Linked Data Series Alignment System and Method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20110413 |