CN102055925A - 支持手势遥控的电视机及其使用方法 - Google Patents

支持手势遥控的电视机及其使用方法 Download PDF

Info

Publication number
CN102055925A
CN102055925A CN2009101101117A CN200910110111A CN102055925A CN 102055925 A CN102055925 A CN 102055925A CN 2009101101117 A CN2009101101117 A CN 2009101101117A CN 200910110111 A CN200910110111 A CN 200910110111A CN 102055925 A CN102055925 A CN 102055925A
Authority
CN
China
Prior art keywords
gesture
television set
infrared
remote control
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009101101117A
Other languages
English (en)
Inventor
陈大炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konka Group Co Ltd
Original Assignee
Konka Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konka Group Co Ltd filed Critical Konka Group Co Ltd
Priority to CN2009101101117A priority Critical patent/CN102055925A/zh
Publication of CN102055925A publication Critical patent/CN102055925A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Details Of Television Systems (AREA)

Abstract

本发明公开了一种支持手势遥控的电视机及其使用方法,该电视机包括安装在电视机上的信号接收处理装置和与电视机分离,用红外敏感材料制成的手势遥控手套,所述的信号接收处理装置包括:CMOS红外传感器、红外发射单元、图像处理单元、手势识别单元和命令转换单元。本发明开创了一种电视机遥控的新思路,操作简单方便,为数字生活发展提出了一种新的选择。

Description

支持手势遥控的电视机及其使用方法
技术领域
本发明涉及电视机领域,尤其涉及一种支持手势遥控的电视机及其使用方法。
背景技术
手势是一种自然而直观的人机交流模式,基于计算机视觉的手势识别技术是新一代人机交互技术中不可缺少的关键技术,也是目前研究和应用较为广泛的人机交互技术之一。手势识别是根据人手的姿态以及变化过程来解释其高层次含义,提取出具有几何不变性的特征是其中的关键步骤,其难点在于手势目标的检测,以及手势特征的提取和识别。
随着数字电视的普及,越来越多的电视机具备了计算能力,而且数字处理能力越来越高,并出现了诸如网络电视等能够直接链接互联网的电视机,以及电视游戏一体机等各种具有超强计算处理能力的电视终端产品。这些电视机不在局限于传统的电视节目的收看,甚至可以直接在电视上浏览互联网信息,分享音视频内容,进行交互娱乐游戏等,传统的按键式遥控方式已经慢慢无法满足越来越多的内容选择和操作方式需求。基于计算机视觉的手势识别用于控制电视,无论是理论上还是实践上都是切实可行的。而现有技术中还没有出现用手势遥控电视机的产品。
因此,需要设计一套面向具备主流数字处理能力的数字电视,能够高效实现且计算成本较低的手势识别实现方法。
发明内容
本发明的目的是提出一种支持手势遥控的电视机及其使用方法。
本发明提出的支持手势遥控的电视机包括安装在电视机上的信号接收处理装置和与电视机分离,用红外敏感材料制成的手势遥控手套,所述的信号接收处理装置包括:
CMOS红外传感器,用于获取由手势遥控手套前端红外敏感材料反射的红外图像数据,并接收特定波长的红外光信号;
红外发射单元,用于向电视机前端遥控区域发射特定波长的红外光;
图像处理单元,用于处理由CMOS红外传感器接收的图像数据,并对该图像数据进行处理,得出图像的特征及分类选择结果;
手势识别单元,其内存储有手势图像数据,用于将图像处理单元处理的红外图像结果与内置在手势识别单元内的手势图像数据对比,识别出用户的手势动作;
命令转换单元,根据手势识别单元判断的手势动作,转换成控制电视机的操作命令。
本发明中的手势遥控手套可以采用二维或三维动作向CMOS红外传感器反射红外光信号。
所述的图像处理单元包括图像预处理模块、特征提取模块、分类器特征选择模块,可以对用户手势输入提取的图像进行去噪处理、图像特征提取和分类处理。
本发明还提出一种使用上述电视机的方法,包括下列步骤:
(1)用户带上手势遥控手套,位于电视机前端进行手势遥控操作;
(2)CMOS红外传感器接收红外发射单元发射的红外光经手势遥控手套的红外敏感材料返回形成的连续图像帧;
(3)图像处理单元对CMOS红外传感器捕捉到的图像进行图像过滤噪音预处理、特征提取和分类选择,然后发送至手势识别单元对用户输入手势进行识别判断;
(4)命令转换单元将手势识别单元的识别结果转换为电视机终端能够识别的控制命令,完成遥控操作过程。
本发明开创了一种电视机遥控的新思路,操作简单方便,为数字生活发展提出了一种新的选择。
附图说明
以下结合附图和实施例对本发明作进一步详细描述,其中:
图1是本发明电视机部分的结构框图;
图2是本发明实施例电视机面板的示意图;
图3a-图3d是本发明手势动作示意图;
图4本发明方法的流程图。
具体实施方式
本发明的核心思想是在电视前面板加装CMOS红外传感器和红外发射单元,配合用户佩戴的由红外敏感材料制成的手套,当用户佩戴手套的手处于CMOS红外传感器的成像可视范围内时,手套上的红外敏感材料反射红外光到CMOS红外传感器上形成红外传感图像,人手覆盖红外敏感材料的图像形成对比度很高的光斑区域,从而极大的降低了手势识别单元对图像进行预处理和特征提取的难度,有效提高手势识别效率和准确度。手势识别单元中预先内置了多个用于控制电视的手势特征模版图像数据,手势识别单元对经过预处理的图像特征进行提取,然后将其与手势特征模版进行匹配,从而判断出当前手势所对应的控制命令。
本发明提出的支持手势遥控的电视机包括安装在电视机上的信号接收处理装置和与电视机分离,用红外敏感材料制成的手势遥控手套,如图1和图2所示,所述的信号接收处理装置包括:
CMOS红外传感器1,负责获取由手势遥控手套前端红外敏感材料反射的红外图像数据,接收且仅接收特定波长红外光信号;
红外发射单元2,负责向电视机壳外发射特定波长的红外光,用于手势遥控手套向CMOS红外传感器反射信号;
图像处理单元,负责处理由CMOS红外传感器接收的图像数据,识别并跟踪带有红外敏感手套的用户手势形成的光斑区域;
手势识别单元,负责根据图像处理单元的红外图像处理结果,与内置在手势识别单元内的手势图像数据经对比,识别用户的手势动作;
命令转换单元,负责根手势识别单元,控制焦点在电视屏幕上的显示和更新绘制。
本发明中,用户手势输入属于原始数据获取阶段,可以采用二维或三维图像的形式由CMOS红外传感器负责采集。
本发明中的图像处理单元包括图像预处理模块、特征提取模块、分类器特征选择模块。图像预处理模块对接收的图像进行预处理,去除噪声并加强有用的信息。本发明中红外传感器只采集特定波长的红外信号,有效降低噪声的影响。特征提取模块对经过预处理的图像进行图像特征提取。分类器特征选择模块在特征空间中用统计方法把被识别手势对象归为特定类别,基本的做法是在样本训练的基础上确定某个判断规则,使得按照这种规则对被识别手势对象进行分类所造成的错误识别率最小。
手势识别单元根据用户手势输入提取的图像特征,与分类器中的特征进行匹配,从而进行识别决策,判断出当前输入手势的识别结果。
本发明提出的使用上述电视机的方法,包括下列步骤:
(1)用户带上手势遥控手套,位于电视机前端进行手势遥控操作;
(2)CMOS红外传感器接收红外发射单元发射的红外光经手势遥控手套的红外敏感材料返回形成的连续图像帧;
(3)图像处理单元对CMOS红外传感器捕捉到的图像进行图像过滤噪音预处理、特征提取和分类选择,然后发送至手势识别单元对用户输入手势进行识别判断;
(4)命令转换单元将手势识别单元的识别结果转换为电视机终端能够识别的控制命令,完成遥控操作过程。
在本发明的较佳实施例中,控制手势命令包括但不限于:
换下一频道:除拇指外的其余四指握拳,拇指水平伸向身体右侧;
换上一频道:除拇指外的其余四指握拳,拇指水平伸向身体左侧;
提高音量:除拇指外的其余四指握拳,拇指竖直伸向上方;
降低音量:除拇指外的其余四指握拳,拇指竖直伸向下方。
现以手势动作控制选择下一频道为例:
1、用户带上用特制红外敏感材料制成的手套并处于电视机CMOS红外传感器可视范围内,并做出换下一频道动作;
2、CMOS红外传感器获得红外发射单元反射的红外光经手套红外敏感材料返回形成的连续图像帧;
3、图像处理单元对捕捉到的图像进行手势识别预处理,过滤图像噪音;
4、手势识别单元对用户输入手势进行识别判断,识别结果对应换下一频道命令;
5、命令转换单元将识别结果转换为电视机终端能够识别的控制命令,从而完成控制过程。
其它控制操作以此类推,不再重复。

Claims (10)

1.一种支持手势遥控的电视机,其特征在于,该电视机包括安装在电视机上的信号接收处理装置和与电视机分离,用红外敏感材料制成的手势遥控手套,所述的信号接收处理装置包括:
CMOS红外传感器,用于获取由手势遥控手套前端红外敏感材料反射的红外图像数据,并接收特定波长的红外光信号;
红外发射单元,用于向电视机前端遥控区域发射特定波长的红外光;
图像处理单元,用于处理由CMOS红外传感器接收的图像数据,并对该图像数据进行处理,得出图像的特征及分类选择;
手势识别单元,其内存储有手势图像数据,用于将图像处理单元处理的红外图像结果与内置在手势识别单元内的手势图像数据对比,识别出用户的手势动作;
命令转换单元,根据手势识别单元判断的手势动作,转换成控制电视机的操作命令。
2.如权利要求1所述的电视机,其特征在于:所述的手势遥控手套可以采用二维或三维动作向CMOS红外传感器反射红外光信号。
3.如权利要求1所述的电视机,其特征在于:所述的图像处理单元包括图像预处理模块、特征提取模块、分类器特征选择模块。
4.如权利要求3所述的电视机,其特征在于:所述的图像预处理包括对用户手势输入提取的图像进行去噪处理。
5.如权利要求1所述的电视机,其特征在于:所述的手势识别单元中设定的手势图像数据包括四指握拳,拇指水平向左、向右、向下、或向上伸出四种动作。
6.如权利要求5所述的电视机,其特征在于:所述的手势识别单元根据用户手势输入提取和分类的图像特征与内置的图像数据进行比较,得出识别结果。
7.一种使用权利要求1所述电视机的方法,其特征在于包括下列步骤:
(1)用户带上手势遥控手套,位于电视机前端进行手势遥控操作;
(2)CMOS红外传感器接收红外发射单元发射的红外光经手势遥控手套的红外敏感材料返回形成的连续图像帧;
(3)图像处理单元对CMOS红外传感器捕捉到的图像进行图像过滤噪音预处理、特征提取和分类选择,然后发送至手势识别单元对用户输入手势进行识别判断;
(4)命令转换单元将手势识别单元的识别结果转换为电视机终端能够识别的控制命令,完成遥控操作过程。
8.如权利要求7所述的方法,其特征在于:所述的用户手势遥控操作包括四指握拳,拇指水平向左、向右、向下、向上伸出四种动作。
9.如权利要球8所述的方法,其特征在于:所述手势遥控包括更换频道和调整音量。
10.如权利要求7所述的方法,其特征在于:所述的用户手势遥控操作包括二维或三维操作。
CN2009101101117A 2009-11-06 2009-11-06 支持手势遥控的电视机及其使用方法 Pending CN102055925A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009101101117A CN102055925A (zh) 2009-11-06 2009-11-06 支持手势遥控的电视机及其使用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009101101117A CN102055925A (zh) 2009-11-06 2009-11-06 支持手势遥控的电视机及其使用方法

Publications (1)

Publication Number Publication Date
CN102055925A true CN102055925A (zh) 2011-05-11

Family

ID=43959800

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101101117A Pending CN102055925A (zh) 2009-11-06 2009-11-06 支持手势遥控的电视机及其使用方法

Country Status (1)

Country Link
CN (1) CN102055925A (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102769802A (zh) * 2012-06-11 2012-11-07 西安交通大学 一种智能电视机的人机交互系统及其交互方法
CN102789176A (zh) * 2012-07-04 2012-11-21 北京捷通华声语音技术有限公司 一种家电终端控制方法和系统
CN103106785A (zh) * 2011-11-10 2013-05-15 深圳市迈乐数码科技股份有限公司 具有3d鼠标功能的遥控器及其遥控方法
CN103152626A (zh) * 2013-03-08 2013-06-12 苏州百纳思光学科技有限公司 一种智能电视的远红外三维手势探测装置
CN103167340A (zh) * 2013-04-03 2013-06-19 青岛歌尔声学科技有限公司 智能电视手势识别系统及其识别方法
CN103472796A (zh) * 2013-09-11 2013-12-25 厦门狄耐克电子科技有限公司 一种基于手势识别的智能家居系统
CN103677273A (zh) * 2013-12-21 2014-03-26 南通芯迎设计服务有限公司 一种基于红外技术的智能家居控制系统
WO2014172815A1 (zh) * 2013-04-24 2014-10-30 Li Min 手势电视机遥控器
CN104363494A (zh) * 2013-12-21 2015-02-18 滁州惠智科技服务有限公司 一种用于智能电视的手势识别系统
CN104486679A (zh) * 2011-08-05 2015-04-01 三星电子株式会社 控制电子设备的方法和应用该方法的电子设备
WO2015196619A1 (zh) * 2014-06-26 2015-12-30 中兴通讯股份有限公司 一种播放器的交互方法和装置、存储介质
CN105929940A (zh) * 2016-04-13 2016-09-07 哈尔滨工业大学深圳研究生院 基于细分特征值法的快速三维动态手势识别方法及系统
CN106022211A (zh) * 2016-05-04 2016-10-12 北京航空航天大学 一种利用手势控制多媒体设备的方法
CN106029455A (zh) * 2014-02-17 2016-10-12 Lg伊诺特有限公司 打开车辆的行李箱的装置和方法以及记录执行方法的程序的记录介质
US9733895B2 (en) 2011-08-05 2017-08-15 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
CN107272902A (zh) * 2017-06-23 2017-10-20 深圳市盛路物联通讯技术有限公司 基于体感交互的智能家居服务端、控制系统及控制方法
CN107958218A (zh) * 2017-11-22 2018-04-24 南京邮电大学 一种实时手势识别的方法
TWI628954B (zh) * 2017-02-16 2018-07-01 小綠草股份有限公司 自拍系統及方法
TWI691908B (zh) * 2017-02-16 2020-04-21 小綠草股份有限公司 自拍系統及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007003712A1 (en) * 2005-06-30 2007-01-11 Nokia Corporation Control device for information display, corresponding system, method and program product
CN101183276A (zh) * 2007-12-13 2008-05-21 上海交通大学 基于摄像头投影仪技术的交互系统
CN101203828A (zh) * 2005-06-16 2008-06-18 新世代株式会社 输入装置、模拟体验方法及娱乐系统
CN101398712A (zh) * 2007-09-26 2009-04-01 达方电子股份有限公司 图像输入控制方法及图像输入控制系统
CN101437124A (zh) * 2008-12-17 2009-05-20 三星电子(中国)研发中心 面向电视控制的动态手势识别信号处理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101203828A (zh) * 2005-06-16 2008-06-18 新世代株式会社 输入装置、模拟体验方法及娱乐系统
WO2007003712A1 (en) * 2005-06-30 2007-01-11 Nokia Corporation Control device for information display, corresponding system, method and program product
CN101398712A (zh) * 2007-09-26 2009-04-01 达方电子股份有限公司 图像输入控制方法及图像输入控制系统
CN101183276A (zh) * 2007-12-13 2008-05-21 上海交通大学 基于摄像头投影仪技术的交互系统
CN101437124A (zh) * 2008-12-17 2009-05-20 三星电子(中国)研发中心 面向电视控制的动态手势识别信号处理方法

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486679A (zh) * 2011-08-05 2015-04-01 三星电子株式会社 控制电子设备的方法和应用该方法的电子设备
US9733895B2 (en) 2011-08-05 2017-08-15 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
CN103106785A (zh) * 2011-11-10 2013-05-15 深圳市迈乐数码科技股份有限公司 具有3d鼠标功能的遥控器及其遥控方法
CN102769802A (zh) * 2012-06-11 2012-11-07 西安交通大学 一种智能电视机的人机交互系统及其交互方法
CN102789176A (zh) * 2012-07-04 2012-11-21 北京捷通华声语音技术有限公司 一种家电终端控制方法和系统
CN102789176B (zh) * 2012-07-04 2015-08-05 北京捷通华声语音技术有限公司 一种家电终端控制方法和系统
CN103152626A (zh) * 2013-03-08 2013-06-12 苏州百纳思光学科技有限公司 一种智能电视的远红外三维手势探测装置
CN103167340A (zh) * 2013-04-03 2013-06-19 青岛歌尔声学科技有限公司 智能电视手势识别系统及其识别方法
CN103167340B (zh) * 2013-04-03 2016-02-03 青岛歌尔声学科技有限公司 智能电视手势识别系统及其识别方法
WO2014172815A1 (zh) * 2013-04-24 2014-10-30 Li Min 手势电视机遥控器
CN103472796B (zh) * 2013-09-11 2014-10-22 厦门狄耐克电子科技有限公司 一种基于手势识别的智能家居系统
CN103472796A (zh) * 2013-09-11 2013-12-25 厦门狄耐克电子科技有限公司 一种基于手势识别的智能家居系统
CN104363494A (zh) * 2013-12-21 2015-02-18 滁州惠智科技服务有限公司 一种用于智能电视的手势识别系统
CN103677273A (zh) * 2013-12-21 2014-03-26 南通芯迎设计服务有限公司 一种基于红外技术的智能家居控制系统
CN106029455B (zh) * 2014-02-17 2020-05-05 Lg伊诺特有限公司 打开车辆的行李箱的装置和方法以及记录执行方法的程序的记录介质
US10227813B2 (en) 2014-02-17 2019-03-12 Lg Innotek Co., Ltd. Device and method for opening trunk of vehicle, and recording medium for recording program for executing method
CN106029455A (zh) * 2014-02-17 2016-10-12 Lg伊诺特有限公司 打开车辆的行李箱的装置和方法以及记录执行方法的程序的记录介质
WO2015196619A1 (zh) * 2014-06-26 2015-12-30 中兴通讯股份有限公司 一种播放器的交互方法和装置、存储介质
CN105929940B (zh) * 2016-04-13 2019-02-26 哈尔滨工业大学深圳研究生院 基于细分特征值法的快速三维动态手势识别方法及系统
CN105929940A (zh) * 2016-04-13 2016-09-07 哈尔滨工业大学深圳研究生院 基于细分特征值法的快速三维动态手势识别方法及系统
CN106022211A (zh) * 2016-05-04 2016-10-12 北京航空航天大学 一种利用手势控制多媒体设备的方法
CN106022211B (zh) * 2016-05-04 2019-06-28 北京航空航天大学 一种利用手势控制多媒体设备的方法
TWI628954B (zh) * 2017-02-16 2018-07-01 小綠草股份有限公司 自拍系統及方法
TWI691908B (zh) * 2017-02-16 2020-04-21 小綠草股份有限公司 自拍系統及方法
CN107272902A (zh) * 2017-06-23 2017-10-20 深圳市盛路物联通讯技术有限公司 基于体感交互的智能家居服务端、控制系统及控制方法
CN107272902B (zh) * 2017-06-23 2019-12-10 深圳市盛路物联通讯技术有限公司 基于体感交互的智能家居服务端、控制系统及控制方法
CN107958218A (zh) * 2017-11-22 2018-04-24 南京邮电大学 一种实时手势识别的方法

Similar Documents

Publication Publication Date Title
CN102055925A (zh) 支持手势遥控的电视机及其使用方法
US8666115B2 (en) Computer vision gesture based control of a device
US8648811B2 (en) Remote control system for electronic device and remote control method thereof
EP2453388A1 (en) Method for user gesture recognition in multimedia device and multimedia device thereof
CN103019431A (zh) 显示设备以及触摸感测设备和方法
EP2365420A2 (en) System and method for hand gesture recognition for remote control of an internet protocol TV
KR20130105725A (ko) 콘텐츠의 양 손 제어에 기반한 컴퓨터 비전
US20150338651A1 (en) Multimodal interation with near-to-eye display
CN106105247B (zh) 显示装置及其控制方法
US20090284469A1 (en) Video based apparatus and method for controlling the cursor
CN103139627A (zh) 智能电视及其手势控制方法
US20160252966A1 (en) Method by which eyeglass-type display device recognizes and inputs movement
CN103092332A (zh) 电视数字图像交互方法及系统
CN102663364A (zh) 仿3d手势识别系统及方法
CN103092334B (zh) 虚拟鼠标驱动装置及虚拟鼠标仿真方法
CN103000054B (zh) 智能厨房烹饪教学机及其控制方法
CN102868925A (zh) 智能电视控制方法
KR101169583B1 (ko) 가상마우스 구동방법
CN109769130B (zh) 基于收视大数据的遥控器个性化设置方法及系统
US8525785B1 (en) Multi-directional remote control system and method with highly accurate tracking
KR100849532B1 (ko) 무접점 마우스 기능을 가지는 장치 및 방법
CN104914985A (zh) 手势控制方法及系统与视频流处理装置
KR20210003515A (ko) 인터렉티브모드를지원하는증강현실구현장치
JP2011242889A (ja) ジェスチャを用いた情報入力装置、方法及びプログラム
WO2001020441A1 (en) Remote control method and apparatus for remote control mouse

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110511