CN101615032A - 一种自动调节电视机角度的装置 - Google Patents
一种自动调节电视机角度的装置 Download PDFInfo
- Publication number
- CN101615032A CN101615032A CN200910041138A CN200910041138A CN101615032A CN 101615032 A CN101615032 A CN 101615032A CN 200910041138 A CN200910041138 A CN 200910041138A CN 200910041138 A CN200910041138 A CN 200910041138A CN 101615032 A CN101615032 A CN 101615032A
- Authority
- CN
- China
- Prior art keywords
- user
- angle
- television
- camera head
- coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 26
- 230000003993 interaction Effects 0.000 claims abstract description 6
- 230000006698 induction Effects 0.000 claims description 11
- 238000000034 method Methods 0.000 claims description 10
- 230000003287 optical effect Effects 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000013500 data storage Methods 0.000 claims description 3
- 210000003128 head Anatomy 0.000 description 18
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000001105 regulatory effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000000539 dimer Substances 0.000 description 1
- 235000013350 formula milk Nutrition 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种自动调节电视机角度的装置,该装置通过摄取电视机前一定范围内的景物并根据摄取到的图像识别出所有正在观看电视节目的用户,从而将电视机调节到所有用户都满意的观看角度,属于数字家庭人机信息交互技术领域。该装置包括红外探测装置、摄像装置、内存单元、中央处理单元、控制模块和计时器。利用此发明实现了对电视机角度控制的自动化,避免了手动或遥控调节的麻烦,体现了数字家庭中家电设备的人性化。
Description
技术领域
本发明属于数字家庭人机信息交互技术领域,特别是涉及一种数字家庭设备的自动控制技术。
背景技术
电视机作为现代家庭中最主要的娱乐方式之一,极大地丰富了人们的家庭文化生活。特别是数字电视问世之后,其功能越来越强大,节目内容极大丰富,电视机已成为人们日常生活不可或缺的一部分。目前大部分电视机都是固定在一个台面,不能自由转动。当用户观看电视节目的时候,有时候为了舒适自然,需要用户手动搬动电视机调整其可视角度以获得较好的观赏效果。这样做既费时又费力,使用起来很不方便。
公开号为CN2731871的专利提出了一种遥控电动旋转电视机座的方案,省去了用户搬动电视机的麻烦,但也有其不足之处。首先它没有考虑到当用户相对电视机所在方向与屏幕夹角很小的时候,红外遥控器发射出的红外信号不易被遥控装置接收,因此用户很难用遥控器调节电视机角度;其次,当多个用户同时观看电视节目时,用遥控器难于将电视机调节到每个用户都满意的角度。
发明内容
针对以上情况的不足,本发明提出了一种自动调节电视机角度的装置。使用该装置用户无须使用遥控器就能够在任何方位都收到满意的观看效果,而且电视还能够随着用户的移动自动改变其角度,使得人与电视机之间的交互更加人性化。
本发明通过以下技术方案予以实现:
一种自动调节电视机角度的装置,其特征在于该装置包括红外探测装置、摄像装置、内存单元、中央处理单元、控制模块和计时器。该装置采用存储-控制结构。中央处理单元控制并协调红外探测装置、摄像装置、内存单元和控制模块工作;红外探测装置和摄像装置先将获取的数据存储到内存单元中,中央处理单元与内存单元进行数据交互,指挥控制模块工作;计时器则定时发送一个脉冲信号要求中央处理单元控制相应模块工作。
红外探测装置用于感应电视机前一定范围内所有用户的相对坐标。
摄像装置用于摄取电视机前一定范围内的图像。
内存单元用于存储摄像装置摄取的图像数据、每个用户的信息和对图像进行预处理所需要的数据。
中央处理单元用于协调各模块工作并处理各个模块提供的信息,包括提取所有用户的脸部图像块,计算用户的相对坐标和相对角度,确定哪些用户正在观看电视节目以及确定电视机的最佳角度。
控制模块根据中央处理单元计算的结果将电视机调节到最佳角度。
计时器用于计时,使得该装置每隔一段时间t(t一般取5s-60s之间的值,由用户设定)就摄取一张图像进行处理,并根据计算结果重新调节电视机角度。
所述摄像装置的光轴在水平面上,并能够根据红外探测装置感应得到的用户相对坐标作相应的旋转,使得所有用户都位于摄像范围内。
所述相对坐标是指用户在以摄像装置光心为原点,光轴为Z轴,水平和竖直方向分别为X,Y轴的左手直角坐标系中的坐标。
所述相对角度是指用户相对坐标与摄像装置光心的连线在水平面内的射影与光轴正向的夹角,用户相对坐标的X分量在X轴正半轴时相对角度为正,在X轴负半轴时为负。
红外探测装置测得用户的相对角度后,还需根据摄像装置摄取的图像确定该用户是否正在观看电视节目。
所述自动调节电视机角度的装置的控制过程为:
1)根据红外探测装置感应得到的用户相对坐标旋转摄像装置,使得所有用户都位于摄像范围内,把摄取到的图像和此时电视机屏幕中轴的相对角度θ记录在内存单元中;
2)对所有用户的相对坐标进行坐标变换,得到用户在摄取到的图像中的大致位置;
3)利用肤色检测方法获得用户脸部图像块并逐个写入内存单元中;
4)对其中一个脸部图像块进行一系列的预处理,包括灰度化,二值化和去噪;
5)对于预处理后的脸部图像块,用穷举匹配法判断该用户是否正在观看电视节目,若是则将该用户的相对角度αi记录在内存单元中,否则不处理。然后检查内存单元中是否存在其它的脸部图像块,如果有则对下一个脸部图像块重复步骤4),否则转向步骤6);
6)找出所有正在观看电视节目的用户的最大相对角度αmax和最小相对角度αmin,计算它们的平均值α=(αmax+αmin)/2;
7)控制装置将电视机旋转α-θ角度;
8)计时器经过时间t后向中央处理单元发送一个脉冲信号,重新转向执行步骤1)。
本发明具有如下几个特点:
1)利用人机交互的思想,用户可以在室内自由移动而无须手动或使用遥控器调节电视机角度以获得最佳观看效果,体现了数字家庭中家电设备的人性化。
2)在用红外探测装置感应用户方位的基础上利用数字图像处理技术增加了对用户是否正在观看电视节目的判断,排除在感应范围内但并未观看电视节目的用户的干扰,提高了电视机角度调节的准确率。
附图说明
图1为本发明装置的示意图;
图2为针孔模型下相对坐标和相对角度的示意图;
图3为中央处理单元控制自动调节电视机角度装置的流程图;
图4为本发明中判断用户是否正在观看电视节目的流程图。
具体实施方式
下面结合附图对本装置进行进一步介绍。
本发明的自动调节电视机角度的装置如图1所示,包括红外探测装置、摄像装置、内存单元、中央处理单元、控制模块和计时器。该装置采用存储-控制结构。中央处理单元控制并协调红外探测装置、摄像装置、内存单元和控制模块工作;红外探测装置和摄像装置先将获取的数据存储到内存单元中,中央处理单元与内存单元进行数据交互,指挥控制模块工作;计时器则定时发送一个脉冲信号要求中央处理单元控制相应模块工作。
各模块的功能描述如下:
1)红外探测装置
红外探测装置用于感应电视机前一定范围内所有用户的相对坐标。如图2所示,相对坐标是指用户在以摄像装置光心为原点,光轴为Z轴,水平和竖直方向分别为X,Y轴的左手直角坐标系中的坐标。一般在室内安装若干红外线传感器,当用户进入感应区域时,人体发出的红外线被这些传感器所感应,从而探测装置将得到用户的三维世界坐标(xw,yw,zw)。假设用户的相对坐标是P(x,y,z),则有变换公式
其中R为3×3旋转矩阵,T为3×1平移矩阵。从而可算得用户的相对角度α=arctan(x/z)。
2)摄像装置
摄像装置用于摄取电视机前一定范围内的图像。摄像装置可固定在电视机正上方,摄像范围为角度大小120°的扇形区域,如果存在相对角度大于60°的用户,摄像装置顺时针方向旋转;反之若存在相对角度小于-60°的用户则逆时针方向旋转。当所有用户都位于摄像范围内时,把摄取到的图像和电视屏幕中轴的相对角度θ记录在内存单元中。
为了找到在三维空间中的用户在图像中对应的大致位置,需要确定三维的相对坐标与图像中的二维坐标之间的映射。由于只需要确定大致位置,可采用针孔模型进行分析,如图2所示。设用户相对坐标为P(x,y,z),P′(xf,yf)是对应的图像坐标,以像素为单位,则两者之间的映射关系为
其中f是图像平面与光心的距离,O′(cx,cy)是图像中心坐标,(sx,sy)为图像平面上单位距离的像素个数。
3)内存单元
内存单元用于存储摄像装置摄取的图像数据、每个用户的信息和对图像进行预处理所需要的数据。其中用户的信息包括用户的脸部图像块,相对坐标,相对角度和标记变量(用于标记用户是否正在观看电视节目)。
4)中央处理单元
中央处理单元用于协调各模块工作并处理各个模块提供的信息,包括提取所有用户的脸部图像块,计算用户的相对坐标和相对角度,确定哪些用户正在观看电视节目以及确定电视机的最佳角度。图3所示是中央处理单元控制自动调节电视机角度装置的流程图。
在摄取到的图像中提取用户的脸部图像块,可采用肤色检测方法。由于已经得到用户在图像中的大致位置,可以在以该坐标为中心的一定范围的图像区域内进行肤色检测,获取用户的脸部图像块并写入内存中。
图4所示是判断用户是否正在观看电视节目的流程图。得到用户的脸部图像块后,为了确定用户是否正在观看电视节目,需要对脸部图像块进行一系列的预处理。预处理包括灰度化,二值化和去噪。其中灰度化的目的是为了去除图像块中的下一步处理无关的色度信息;二值化把图像块中的像素根据一定的标准分化成两种颜色,其目的也是为了减少要处理的数据量;由于图像本身有噪声,经过上述步骤处理后图像块中会呈现杂乱散布的黑点或白点,因此需要对图像块进行去噪处理。
经过预处理后,脸部图像块中仅显示双眼、鼻子和嘴四个颜色比较暗淡的图像区域。而正在观看电视节目的用户的脸部在图像中通常都是正面或者近似正面,根据人的左右眼睛对称并且鼻子和嘴都在两只眼睛的中垂线上的特点,对这四个图像区域的排列进行穷举匹配,如果有任一排列符合上述特征,则认为用户正在观看电视节目,如果所有排列都不符合,则忽略该用户进而处理下一个脸部图像块。当然如果上述图像区域数大于或小于四个,可能该用户脸部并未面向电视机屏幕或者利用肤色检测方法检测到的图像块并非人脸,这些情况下均应忽略该图像块。
对这四个图像区域的排列进行穷举匹配的目的是为了确保所有正在观看电视节目的用户都能被检测出。比如躺在沙发上观看电视节目的用户,两只眼睛并不在同一水平线上,因此不能确定哪一个图像区域就是某个器官。用穷举匹配的方法可有效地解决这个问题。
5)控制模块
控制模块根据中央处理单元计算的结果将电视机调节到最佳角度。中央处理单元找出所有正在观看电视节目的用户的最大相对角度αmax和最小相对角度αmin,并计算它们的平均值α=(αmax+αmin)/2,通过控制装置将电视机旋转α-θ角度。
6)计时器
计时器用于计时,每隔时间t就向中央处理单元发送一个脉冲信号,使得该装置每隔一段时间t就摄取一张图像进行处理,并根据计算结果重新调节电视机角度。当红外探测装置在较长时间内都未发现有用户在红外感应区域内,还可通过相关指令将电视机转到待机状态,达到省电的目的。
Claims (7)
1、一种自动调节电视机角度的装置,其特征在于该装置包括红外探测装置、摄像装置、内存单元、中央处理单元、控制模块和计时器:
红外探测装置用于感应电视机前一定范围内所有用户的相对坐标;
摄像装置用于摄取电视机前一定范围内的图像;
内存单元用于存储摄像装置摄取的图像数据、每个用户的信息和对图像进行预处理所需要的数据;
中央处理单元用于协调各模块工作并处理各个模块提供的信息,包括提取所有用户的脸部图像块,计算用户的相对坐标和相对角度,确定哪些用户正在观看电视节目以及确定电视机的最佳角度;
控制模块根据中央处理单元计算的结果将电视机调节到最佳角度;
计时器用于计时,使得该装置每隔一段时间t就摄取一张图像进行处理,并根据计算结果重新调节电视机角度,其中t的取值在5s-60s之间,由用户设定;
在本装置中采用存储-控制结构;中央处理单元控制并协调红外探测装置、摄像装置、内存单元和控制模块工作;红外探测装置和摄像装置先将获取的数据存储到内存单元中,中央处理单元与内存单元进行数据交互,指挥控制模块工作;计时器则定时发送一个脉冲信号要求中央处理单元控制相应模块工作。
2、根据权利要求1所述的自动调节电视机角度的装置,其特征在于所述摄像装置的光轴在水平面上。
3、根据权利要求1所述的自动调节电视机角度的装置,其特征在于所述摄像装置能够根据红外探测装置感应得到的用户相对坐标作相应的旋转,使得所有用户都位于摄像范围内。
4、根据权利要求1所述的自动调节电视机角度的装置,其特征在于所述相对坐标是指用户在以摄像装置光心为原点,光轴为Z轴,水平和竖直方向分别为X,Y轴的左手直角坐标系中的坐标。
5、根据权利要求1所述的自动调节电视机角度的装置,其特征在于所述相对角度是指用户相对坐标与摄像装置光心的连线在水平面内的射影与光轴正向的夹角,用户相对坐标的X分量在X轴正半轴时相对角度为正,在X轴负半轴时为负。
6、根据权利要求1所述的自动调节电视机角度的装置,其特征在于红外探测装置测得用户的相对角度后,还需根据摄像装置摄取的图像确定该用户是否正在观看电视节目。
7、根据权利要求1所述的自动调节电视机角度的装置,其特征在于所述自动调节电视机角度的装置的控制过程为:
1)根据红外探测装置感应得到的用户相对坐标旋转摄像装置,使得所有用户都位于摄像范围内,把摄取到的图像和此时电视机屏幕中轴的相对角度θ记录在内存单元中;
2)对所有用户的相对坐标进行坐标变换,得到用户在摄取到的图像中的大致位置;
3)利用肤色检测方法获得用户脸部图像块并逐个写入内存单元中;
4)对其中一个脸部图像块进行一系列的预处理,包括灰度化,二值化和去噪;
5)对于预处理后的脸部图像块,用穷举匹配法判断该用户是否正在观看电视节目,若是则将该用户的相对角度αi记录在内存单元中,否则不处理,然后检查内存单元中是否存在其它的脸部图像块,如果有则对下一个脸部图像块重复步骤4),否则转向步骤6);
6)找出所有正在观看电视节目的用户的最大相对角度αmax和最小相对角度αmin,计算它们的平均值α=(αmax+αmin)/2;
7)控制装置将电视机旋转α-θ角度;
8)计时器经过时间t后向中央处理单元发送一个脉冲信号,重新转向执行步骤1)。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2009100411385A CN101615032B (zh) | 2009-07-15 | 2009-07-15 | 一种自动调节电视机角度的装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2009100411385A CN101615032B (zh) | 2009-07-15 | 2009-07-15 | 一种自动调节电视机角度的装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101615032A true CN101615032A (zh) | 2009-12-30 |
CN101615032B CN101615032B (zh) | 2011-04-27 |
Family
ID=41494711
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009100411385A Expired - Fee Related CN101615032B (zh) | 2009-07-15 | 2009-07-15 | 一种自动调节电视机角度的装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101615032B (zh) |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101995884A (zh) * | 2010-10-27 | 2011-03-30 | 冠捷显示科技(厦门)有限公司 | 显示器角度自动调节装置 |
CN102323829A (zh) * | 2011-07-29 | 2012-01-18 | 青岛海信电器股份有限公司 | 一种显示屏视角调整方法及显示设备 |
CN102541087A (zh) * | 2011-12-30 | 2012-07-04 | Tcl集团股份有限公司 | 一种显示装置的方位自动调整方法、系统及显示装置 |
CN102563299A (zh) * | 2010-12-23 | 2012-07-11 | 康佳集团股份有限公司 | 电视机电动底座的转动方法及其实现装置 |
CN102117074B (zh) * | 2009-12-31 | 2013-07-31 | 鸿富锦精密工业(深圳)有限公司 | 显示器角度调整系统及其使用方法 |
CN103295494A (zh) * | 2013-05-30 | 2013-09-11 | 卓谨信息科技(常州)有限公司 | 互动广告机器人 |
CN103796056A (zh) * | 2013-12-30 | 2014-05-14 | 天津三星电子有限公司 | 一种电视视角自动调整方法及装置 |
CN104936024A (zh) * | 2015-06-12 | 2015-09-23 | 四川长虹电器股份有限公司 | 滑轨电视 |
CN104948881A (zh) * | 2015-04-29 | 2015-09-30 | 韦道义 | 可自动调节高度的显示器支架 |
CN105225609A (zh) * | 2014-06-05 | 2016-01-06 | 冠捷投资有限公司 | 具有曲面显示功能的显示器 |
CN106499934A (zh) * | 2016-10-26 | 2017-03-15 | 北京小米移动软件有限公司 | 一种电视安装支架及电视 |
CN109445331A (zh) * | 2018-10-24 | 2019-03-08 | 天津津航计算技术研究所 | 一种智能显控系统 |
CN109557951A (zh) * | 2018-12-10 | 2019-04-02 | 深圳Tcl数字技术有限公司 | 电视机角度的调节方法、电视机以及计算机可读存储介质 |
CN111355992A (zh) * | 2020-03-11 | 2020-06-30 | 珠海格力电器股份有限公司 | 空调电视机的控制方法、装置、空调电视机及存储介质 |
-
2009
- 2009-07-15 CN CN2009100411385A patent/CN101615032B/zh not_active Expired - Fee Related
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102117074B (zh) * | 2009-12-31 | 2013-07-31 | 鸿富锦精密工业(深圳)有限公司 | 显示器角度调整系统及其使用方法 |
CN101995884A (zh) * | 2010-10-27 | 2011-03-30 | 冠捷显示科技(厦门)有限公司 | 显示器角度自动调节装置 |
CN102563299A (zh) * | 2010-12-23 | 2012-07-11 | 康佳集团股份有限公司 | 电视机电动底座的转动方法及其实现装置 |
CN102323829A (zh) * | 2011-07-29 | 2012-01-18 | 青岛海信电器股份有限公司 | 一种显示屏视角调整方法及显示设备 |
CN102541087A (zh) * | 2011-12-30 | 2012-07-04 | Tcl集团股份有限公司 | 一种显示装置的方位自动调整方法、系统及显示装置 |
CN103295494A (zh) * | 2013-05-30 | 2013-09-11 | 卓谨信息科技(常州)有限公司 | 互动广告机器人 |
CN103796056A (zh) * | 2013-12-30 | 2014-05-14 | 天津三星电子有限公司 | 一种电视视角自动调整方法及装置 |
CN105225609A (zh) * | 2014-06-05 | 2016-01-06 | 冠捷投资有限公司 | 具有曲面显示功能的显示器 |
CN104948881A (zh) * | 2015-04-29 | 2015-09-30 | 韦道义 | 可自动调节高度的显示器支架 |
CN104936024A (zh) * | 2015-06-12 | 2015-09-23 | 四川长虹电器股份有限公司 | 滑轨电视 |
CN106499934A (zh) * | 2016-10-26 | 2017-03-15 | 北京小米移动软件有限公司 | 一种电视安装支架及电视 |
CN109445331A (zh) * | 2018-10-24 | 2019-03-08 | 天津津航计算技术研究所 | 一种智能显控系统 |
CN109557951A (zh) * | 2018-12-10 | 2019-04-02 | 深圳Tcl数字技术有限公司 | 电视机角度的调节方法、电视机以及计算机可读存储介质 |
CN109557951B (zh) * | 2018-12-10 | 2022-07-29 | 深圳Tcl数字技术有限公司 | 电视机角度的调节方法、电视机以及计算机可读存储介质 |
CN111355992A (zh) * | 2020-03-11 | 2020-06-30 | 珠海格力电器股份有限公司 | 空调电视机的控制方法、装置、空调电视机及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN101615032B (zh) | 2011-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101615032B (zh) | 一种自动调节电视机角度的装置 | |
CN102323829B (zh) | 一种显示屏视角调整方法及显示设备 | |
CN101969539A (zh) | 基于用户视角的电视自动转向方法 | |
US20180048482A1 (en) | Control system and control processing method and apparatus | |
CN102221887B (zh) | 互动投影系统及方法 | |
US8675136B2 (en) | Image display apparatus and detection method | |
CN106658148B (zh) | Vr播放方法、vr播放装置及vr播放系统 | |
US8150102B2 (en) | System and method for interacting with a media device using faces and palms of video display viewers | |
WO2007011314A3 (en) | Methods and systems for mapping a virtual model of an object to the object | |
CN107454373A (zh) | 投影系统及其非平面自动校正方法与自动校正处理装置 | |
CN105444516B (zh) | 智能冰箱 | |
CN203151686U (zh) | 采用手势识别遥控器的智能电视 | |
KR100862352B1 (ko) | 영상 기기의 자동 전원 제어 장치 및 그 방법 | |
CN103279188A (zh) | 一种基于Kinect无接触性操作控制PPT的方法 | |
CN102695011A (zh) | 根据用户观看角度自动调整画面的方法及视频播放器 | |
CN110297508A (zh) | 一种自动调整显示器的方法、系统、设备及存储介质 | |
CN109542219A (zh) | 一种应用于智能教室的手势交互系统及方法 | |
CN205384858U (zh) | 增强现实立式广告机 | |
CN109413465A (zh) | 一种家庭娱乐系统和控制方法 | |
CN103327385B (zh) | 基于单一图像传感器的距离识别方法及装置 | |
CN104216623A (zh) | 家庭式人机交互控制系统 | |
CN105302283B (zh) | 映射投影的控制系统及其控制方法 | |
KR102249123B1 (ko) | 실버 세대를 위한 눈꺼풀 감지 장치, 디스플레이장치 자동 꺼짐 시스템, 그리고 이의 제어 방법 | |
CN209343122U (zh) | 一种新型具有喷雾效果的互动投影地幕装置 | |
KR101072399B1 (ko) | 카메라 영상분석을 통한 오브젝트 인식기반의 지능형 제어장치를 제어하기 위한 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20110427 Termination date: 20140715 |
|
EXPY | Termination of patent right or utility model |