CN105005378A - 一种可以控制远程电器的手势识别系统及控制方法 - Google Patents

一种可以控制远程电器的手势识别系统及控制方法 Download PDF

Info

Publication number
CN105005378A
CN105005378A CN201510214362.5A CN201510214362A CN105005378A CN 105005378 A CN105005378 A CN 105005378A CN 201510214362 A CN201510214362 A CN 201510214362A CN 105005378 A CN105005378 A CN 105005378A
Authority
CN
China
Prior art keywords
recognition
pattern
gesture
control
microprocessor cpu
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510214362.5A
Other languages
English (en)
Other versions
CN105005378B (zh
Inventor
程平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Rongtai Health Technology Corp Ltd
Original Assignee
Hangzhou Miaoyin Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Miaoyin Technology Co Ltd filed Critical Hangzhou Miaoyin Technology Co Ltd
Priority to CN201510214362.5A priority Critical patent/CN105005378B/zh
Publication of CN105005378A publication Critical patent/CN105005378A/zh
Application granted granted Critical
Publication of CN105005378B publication Critical patent/CN105005378B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Selective Calling Equipment (AREA)
  • Navigation (AREA)

Abstract

一种可以控制远程电器的手势识别系统及控制方法,所述系统包括一内置有手势识别远程控制电路的操作手柄,所述的控制电路主要由模式识别微处理器、9轴姿态传感器和蓝牙传输模块组成,9轴姿态传感器和模式识别微处理器采用I2C总线通信,模式识别微处理器与蓝牙传输模块之间采用串口TTL通信;模式识别微处理器通过I2C总线按照一定时间间隔采集9轴姿态传感器的数据,采集的数据使用模式识别函数处理得出手势分类,根据分类结果进行编码后通过串口TTL传输到蓝牙传输模块并发送到转换装置;使用者手势会通过手柄的模式识别微处理器识别成特定的操控命令,通过蓝牙信号转换装置,转换为适合远距离传输的数字信号,并通过通信网络传输信号;在信号接收端通过信号转换装置将信号转换为可以控制实际电器的信号,从而实现远程电器控制。

Description

一种可以控制远程电器的手势识别系统及控制方法
技术领域
本发明涉及的是一种可以控制远程电器的手势识别系统及控制方法,属于智能控制技术领域。
背景技术
国内外研究表明,随着家居智能化的发展,控制电器所使用的方式越来越复杂,能控制的电器也越来越多,复杂度的上升导致了用户体验的下降,用户需要花费更多精力来学习不同的界面和各种不同的控制和设置方式。目前,家居智能化电器控制的创新点主要集中在以下几个方面:从控制设备来说,主要有智能路由器、电视机顶盒和游戏机等;从控制方式来说,主要有通过APP将手机变成万能遥控器、增加控制面板和基于情景模式的控制模式。基本所有的技术手段都不同程度地增加了用户使用的复杂性,采用不通过脑部海马体记忆的手势记忆方式可以相当程度上降低用户的学习难度,减少用户的操作复杂度从而提高用户满意度。
发明内容
本发明的目的在与克服现有技术存在的不足,而提供一种结构组成合理,使用操作方便,能减少用户操作的复杂度,提高用户满意度的可以控制远程电器的手势识别系统及控制方法。
本发明的目的是通过如下技术方案来完成的,一种可以控制远程电器的手势识别系统,它包括一操作手柄,该操作手柄内置有手势识别远程控制电路,所述的控制电路主要由模式识别微处理器CPU、9轴姿态传感器和蓝牙传输模块组成,其中9轴姿态传感器和模式识别微处理器CPU采用I2C总线通信,模式识别微处理器CPU与低功耗的蓝牙传输模块之间采用串口TTL通信;
所述的模式识别微处理器CPU通过I2C总线按照一定时间间隔采集9轴姿态传感器的数据,采集的数据使用模式识别函数处理,得出手势分类,并根据分类结果进行编码后再通过串口TTL传输到蓝牙传输模块发送到转换装置。
本发明所述的模式识别函数的生成是通过超算系统采用BP算法实现,具体包括:
输入层节点1800个,隐含层节点36个,输出层节点2个,以下分析以输入层到隐含层为例:
隐含层第j个节点的输入为:输入层到隐含层第j个节点的权值系数乘以输入层变量
其中激励函数为非线性函数
激励函数的微分
误差函数对于权值矩阵的偏微分方程,其中
又因为:
所以可推导出误差函数的偏微分等于:
θ E θw i j = δ j x i
其中
由此可推出,BP算法后向的权值调整方程为,α为神经网络算法的学习率:
Δw i j = - α δ E δw i j
一种利用所述可以控制远程电器的手势识别系统进行远程电器控制方法,所述的控制方法包括如下步骤:
a)由模式识别微处理器CPU进行手势数据收集,并将加速度计和陀螺仪数据向量化,将地磁数据向量化;
b)由模式识别微处理器CPU生成神经网络训练数据集,并进行BP算法形成识别矩阵其  中加速度和陀螺仪一个,地磁一个共两个;
c)根据识别矩阵形成识别函数写入到模式识别微处理器CPU的存储器ROM内;
d)模式识别微处理器CPU调用识别函数判断手势类型,并根据识别结果生成控制编码;
e)由模式识别微处理器CPU通过低功耗的蓝牙传输模块(3)控制编码发送到转换装置,如手机上,再由转换装置发送控制数据到网络;
f)由接收端的转换装置,如手机发送控制信号到目标电器,实现远程电器控制。
本发明所述手柄的手势识别和姿态判断是由深度神经网络实现,但简单的识别功能如开启和敲击可以用其他相对简单的识别函数实现,从而节省cpu的存储空间;本发明的主要作用是减少用户操作复杂度,从原来的打开设备、输入密码、找到应用、操作应用、控制设备等复杂流程减少到:拿起手柄挥舞、完成控制。远程控制的电器还能用于社交、老年人关怀等应用。
本发明具有结构组成合理,使用操作方便,能减少用户操作的复杂度,提高用户满意度等特点。
附图说明
图1是本发明所述的系统组成示意图。
图2是本发明所述系统控制原理图。
具体实施方式
下面将结合附图对本发明作详细的介绍:图1所示,本发明所述的一种可以控制远程电器的手势识别系统,它包括一操作手柄4,该操作手柄4内置有手势识别远程控制电路,所述的控制电路主要由模式识别微处理器CPU1、9轴姿态传感器2和蓝牙传输模块3组成,其中9轴姿态传感器2和模式识别微处理器CPU1采用I2C总线通信,模式识别微处理器CPU1与低功耗的蓝牙传输模块3之间采用串口TTL通信;
所述的模式识别微处理器CPU1通过I2C总线按照一定时间间隔采集9轴姿态传感器2的数据,采集的数据使用模式识别函数处理,得出手势分类,并根据分类结果进行编码后再通过串口TTL传输到蓝牙传输模块3发送到转换装置。
本发明所述的模式识别函数的生成是通过超算系统采用BP算法实现,具体包括:
输入层节点1800个,隐含层节点36个,输出层节点2个,以下分析以输入层到隐含层为例:
隐含层第j个节点的输入为:输入层到隐含层第j个节点的权值系数乘以输入层变量
其中激励函数为非线性函数
激励函数的微分
误差函数对于权值矩阵的偏微分方程,其中
θnet j θw i j = θ θw i j ( Σ k = 1 n w k j x k ) = x i
又因为:
所以可推导出误差函数的偏微分等于:
θ E θw i j = δ j x i
其中
由此可推出,BP算法后向的权值调整方程为,α为神经网络算法的学习率:
Δw i j = - α δ E δw i j
一种利用所述可以控制远程电器的手势识别系统进行远程电器控制方法,所述的控制方法包括如下步骤:
a)由模式识别微处理器CPU进行手势数据收集,并将加速度计和陀螺仪数据向量化,将地磁数据向量化;
b)由模式识别微处理器CPU生成神经网络训练数据集,并进行BP算法形成识别矩阵其  中加速度和陀螺仪一个,地磁一个共两个;
c)根据识别矩阵形成识别函数写入到模式识别微处理器CPU的存储器ROM内;
d)模式识别微处理器CPU调用识别函数判断手势类型,并根据识别结果生成控制编码;
e)由模式识别微处理器CPU通过低功耗的蓝牙传输模块(3)控制编码发送到转换装置,如手机上,再由转换装置发送控制数据到网络;
f)由接收端的转换装置,如手机发送控制信号到目标电器,实现远程电器控制。
实施例:本发明所述的9轴传感器(加速度、陀螺仪和地磁传感器)采用MPU-9250芯片,16bit数据输出陀螺仪范围±2000°/s,加速度计范围±16g,磁场范围±4800μΤ,模式识别微处理器CPU采用德州仪器公司生产的MSP430F6659超低功耗处理器,蓝牙芯片采用Nordic公司的nRF51822单模低功耗蓝牙芯片;上述芯片(电路)与电池一起安装在手柄内部。
该手势识别的游戏手柄能通过加速度传感器、陀螺仪和地磁传感器判断使用者手势和手柄本身空间姿态。在没有探测到加速度改变的状态手柄会处于低功耗休眠状态。使用者手势会通过手柄的微处理器芯片识别成特定的操控命令,通过低功耗蓝牙信号转换装置(如手机),转换为适合远距离传输的数字信号,并通过通信网络传输信号。在信号接收端通过信号转换装置(如手机)将信号转换为可以控制实际电器的信号,如低功耗蓝牙、Wifi等信号,从而实现远程电器控制。

Claims (3)

1. 一种可以控制远程电器的手势识别系统,它包括一操作手柄,该操作手柄内置有手势识别远程控制电路,其特征在于所述的控制电路主要由模式识别微处理器CPU、9轴姿态传感器和蓝牙传输模块组成,其中9轴姿态传感器(2)和模式识别微处理器CPU(1)采用I2C总线通信,模式识别微处理器CPU(1)与低功耗的蓝牙传输模块(3)之间采用串口TTL通信;
所述的模式识别微处理器CPU(1)通过I2C总线按照一定时间间隔采集9轴姿态传感器的数据,采集的数据使用模式识别函数处理,得出手势分类,并根据分类结果进行编码后再通过串口TTL传输到蓝牙传输模块发送到转换装置。
2.根据权利要求1所述的可以控制远程电器的手势识别系统,其特征在于所述的模式识别函数的生成是通过超算系统采用BP算法实现,具体包括:
输入层节点1800个,隐含层节点36个,输出层节点2个,以下分析以输入层到隐含层为例:
隐含层第j节点的输入为:输入层到隐含层第j节点的权值系数乘以输入层变量
其中激励函数为非线性函数
激励函数的微分
误差函数对于权值矩阵的偏微分方程,其中
又因为:
所以可推导出误差函数的偏微分等于:
其中
由此可推出,BP算法后向的权值调整方程为,α为神经网络算法的学习率:
3.一种利用权利要求1或2所述可以控制远程电器的手势识别系统进行远程电器控制方法,其特征在于所述的控制方法包括如下步骤:
a)由模式识别微处理器CPU进行手势数据收集,并将加速度计和陀螺仪数据向量化,将地磁数据向量化;
b)由模式识别微处理器CPU生成神经网络训练数据集,并进行BP算法形成识别矩阵其中加速度和陀螺仪一个,地磁一个共两个;
c)根据识别矩阵形成识别函数写入到模式识别微处理器CPU的存储器ROM内;
d)模式识别微处理器CPU调用识别函数判断手势类型,并根据识别结果生成控制编码;
e)由模式识别微处理器CPU通过低功耗的蓝牙传输模块(3)控制编码发送到转换装置,如手机上,再由转换装置发送控制数据到网络;
f)由接收端的转换装置,如手机发送控制信号到目标电器,实现远程电器控制。
CN201510214362.5A 2015-04-29 2015-04-29 一种可以控制远程电器的手势识别系统及控制方法 Active CN105005378B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510214362.5A CN105005378B (zh) 2015-04-29 2015-04-29 一种可以控制远程电器的手势识别系统及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510214362.5A CN105005378B (zh) 2015-04-29 2015-04-29 一种可以控制远程电器的手势识别系统及控制方法

Publications (2)

Publication Number Publication Date
CN105005378A true CN105005378A (zh) 2015-10-28
CN105005378B CN105005378B (zh) 2018-04-24

Family

ID=54378074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510214362.5A Active CN105005378B (zh) 2015-04-29 2015-04-29 一种可以控制远程电器的手势识别系统及控制方法

Country Status (1)

Country Link
CN (1) CN105005378B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107991893A (zh) * 2017-11-14 2018-05-04 美的集团股份有限公司 实现通信的方法、手势识别模组、主控模块及家电设备
CN109739371A (zh) * 2018-11-28 2019-05-10 北京永洪商智科技有限公司 一种操作大屏的智能手柄、操作方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101777250A (zh) * 2010-01-25 2010-07-14 中国科学技术大学 家用电器的通用遥控装置及方法
CN102184018A (zh) * 2011-05-13 2011-09-14 天津大学 一种脑机接口系统及其控制方法
US20150054630A1 (en) * 2013-08-23 2015-02-26 Huawei Technologies Co., Ltd. Remote Controller and Information Processing Method and System

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101777250A (zh) * 2010-01-25 2010-07-14 中国科学技术大学 家用电器的通用遥控装置及方法
CN102184018A (zh) * 2011-05-13 2011-09-14 天津大学 一种脑机接口系统及其控制方法
US20150054630A1 (en) * 2013-08-23 2015-02-26 Huawei Technologies Co., Ltd. Remote Controller and Information Processing Method and System

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107991893A (zh) * 2017-11-14 2018-05-04 美的集团股份有限公司 实现通信的方法、手势识别模组、主控模块及家电设备
CN109739371A (zh) * 2018-11-28 2019-05-10 北京永洪商智科技有限公司 一种操作大屏的智能手柄、操作方法和系统

Also Published As

Publication number Publication date
CN105005378B (zh) 2018-04-24

Similar Documents

Publication Publication Date Title
CN103520885B (zh) 一种基于数据监测实现运动指导的骑车健身系统
CN103428552B (zh) 遥控器空中鼠标的实现方法
CN104898826A (zh) 体感控制装置
Salama et al. Wireless Sensor Networks and Green Networking for 6G communication-An Overview
CN106211298A (zh) 一种信息处理方法及移动终端
CN105138133A (zh) 生物信号手势识别设备及方法
CN105005378A (zh) 一种可以控制远程电器的手势识别系统及控制方法
CN203235258U (zh) 一种基于手势识别的遥控模型无线控制系统
CN102819256B (zh) 一种足式机器人状态感知系统
CN202661192U (zh) 一种基于ZigBee技术的物联网无线温度测量系统
CN204031200U (zh) 基于无线传感的网络控制系统
CN102323856A (zh) 基于加速度传感器和ZigBee的数据手套
CN202257468U (zh) 基于加速度传感器和ZigBee的数据手套
CN101799505B (zh) 一种陀螺的电模拟器
CN106165947A (zh) 一种具有万能遥控器功能的智能手环
CN205899377U (zh) 一种新型球形两栖机器人的多机协调控制系统
CN205451459U (zh) 一种微型模块化无线传输的工业采集器
CN204631772U (zh) 体感控制装置
CN206401997U (zh) 一种基于无线供电方式的手势姿态检测装置
CN104516529A (zh) 一种基于磁场、陀螺仪和加速度传感器的遥控设备
CN203801537U (zh) 一种基于ZigBee技术的电子钓鱼竿
CN107370869B (zh) 一种移动终端及手机
CN206115763U (zh) 一种传感器原理及应用实验教学系统
CN202904868U (zh) 一种数据采集器
CN107015492B (zh) 一种智能化电动拉杆箱系统电路

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20190304

Address after: No. 1226 Zhufeng Highway, Qingpu District, Shanghai, 20115

Patentee after: Shanghai Rongtai Health Technology Co., Ltd.

Address before: 310000 Jianhua Cultural and Creative Industrial Park B310, Qigudeng 208, Gongshu District, Hangzhou City, Zhejiang Province

Patentee before: HANGZHOU MIAOYIN TECHNOLOGY CO., LTD.

TR01 Transfer of patent right