CN104484037A - 通过可穿戴设备进行智能控制的方法及该可穿戴设备 - Google Patents

通过可穿戴设备进行智能控制的方法及该可穿戴设备 Download PDF

Info

Publication number
CN104484037A
CN104484037A CN201410769228.7A CN201410769228A CN104484037A CN 104484037 A CN104484037 A CN 104484037A CN 201410769228 A CN201410769228 A CN 201410769228A CN 104484037 A CN104484037 A CN 104484037A
Authority
CN
China
Prior art keywords
module
image
information
instruction
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410769228.7A
Other languages
English (en)
Inventor
杜乐
王雪松
苑颖
薛昉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201410769228.7A priority Critical patent/CN104484037A/zh
Publication of CN104484037A publication Critical patent/CN104484037A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了通过可穿戴设备进行智能控制的方法及该可穿戴设备,其中,该方法在可穿戴设备上设置摄像头,该方法包括:启动摄像头进行图像采集,得到图像信息;对图像信息进行识别,获取图像中的手势信息;根据手势信息从图像特征库中查找对应的控制指令;执行控制指令。本发明方案实现了基于摄像头采集的图像对智能设备进行智能控制,使应用更加灵活、准确。

Description

通过可穿戴设备进行智能控制的方法及该可穿戴设备
技术领域
本发明涉及智能控制技术,尤其涉及通过可穿戴设备进行智能控制的方法及该可穿戴设备。
背景技术
可穿戴式设备,是应用穿戴式技术对日常穿戴、日常使用进行智能化设计、开发出可以穿戴的设备,如智能耳机、项链、头盔、服饰等。
可穿戴式设备的原理是整合各种传感器技术、智能技术、无线传输技术等,将智能设备小型化、实用化,并可穿戴于人体上。并且,可以将可穿戴时设备和无线设备,如手机、平板、PDA、智能电视等,或与PC、云服务器等连接,以扩展智能应用。
以下具体以可穿戴式设备为智能耳机进行说明。
智能耳机与智能设备之间采用无线连接,可通过对智能设备进行触控、对智能耳机上的按键进行操作,以进行智能控制,执行所需的智能应用。
为了简化操作,目前新兴的智能控制方案出现了通过光线感应耳机操控智能设备的方法,包括:光线感应耳机根据接收到的光信号检测近耳侧和耳外侧的光线强度;对比近耳侧和耳外侧的光线强度的大小,并根据对比结果生成智能设备当前模式所对应的电信号;将电信号发送至智能设备,供其根据电信号操控当前模式下相应的功能。
由于光线受环境影响很大,如天气、室内光线、室外光线等,导致基于光线强度产生的对比结果不够准确,进而使智能控制错误,有效性较低。
发明内容
本发明提供了一种通过可穿戴设备进行智能控制的方法,该方法能够实现基于摄像头采集的图像对智能设备进行智能控制,使应用更加灵活、准确。
本发明提供了一种可穿戴设备,该可穿戴设备能够实现基于摄像头采集的图像对智能设备进行智能控制,使应用更加灵活、准确。
一种通过可穿戴设备进行智能控制的方法,该方法在可穿戴设备上设置摄像头,该方法包括:
启动摄像头进行图像采集,得到图像信息;
对图像信息进行识别,获取图像中的手势信息;
根据手势信息从图像特征库中查找对应的控制指令;
执行控制指令。
一种可穿戴设备,该可穿戴设备上设置有摄像头,还包括系统配置模块、图像获取模块、图像识别模块、关键信息存储模块和执行模块;
所述系统配置模块,接收智能开启指令,启动摄像头进行图像采集;
所述图像获取模块,获取摄像头采集的图像信息,发送给所述图像识别模块;
所述图像识别模块,对图像信息进行识别,获取图像中的手势信息;根据手势信息从所述关键信息存储模块存储的图像特征库中查找对应的控制指令;向查找的控制指令发送给执行模块;
所述执行模块,接收来自所述图像识别模块的控制指令,执行控制指令。
从上述方案可以看出,本发明在可穿戴设备上设置摄像头,当需要时,启动摄像头进行图像采集,得到图像信息;对图像信息进行识别,获取图像中的手势信息;根据手势信息从图像特征库中查找对应的控制指令;执行控制指令。从而,实现基于摄像头采集的图像对智能设备进行智能控制;并且,本发明在图像特征库中存储了对应各预定手势信息的控制指令,获取手势信息后便可查询出对应的控制指令,使应用更加灵活、准确。
附图说明
图1为本发明通过可穿戴设备进行智能控制的方法示意性流程图;
图2为本发明通过可穿戴设备进行音量放大的方法流程图实例;
图3为本发明通过可穿戴设备进行音量减小的方法流程图实例;
图4为本发明通过可穿戴设备进行播放音乐/停止的方法流程图实例;
图5为本发明通过可穿戴设备进行电话呼出的方法流程图实例;
图6为本发明通过可穿戴设备进行电话接听的方法流程图实例;
图7为本发明通过可穿戴设备进行社交助手功能的方法流程图实例;
图8为本发明通过可穿戴设备进行智能控制的方法流程图实例;
图9为本发明手势与智能功能之间的对应关系示意图;
图10为本发明可穿戴设备的结构示意图;
图11为本发明可穿戴设备的结构示意图实例;
图12为本发明可穿戴设备为智能耳机时的结构示意图实例。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下面结合实施例和附图,对本发明进一步详细说明。
为了使智能控制更加灵活、提高智能控制的准确性,本发明提供了在可穿戴设备上设置摄像头,并基于摄像头采集的图像对智能设备进行智能控制的方案。
参见图1,为本发明通过可穿戴设备进行智能控制的方法示意性流程图,该方法在可穿戴设备上设置摄像头,摄像头在可穿戴设备上的位置根据需要设置,便于进行图像采集即可。图1的流程包括以下步骤:
步骤101,启动摄像头进行图像采集,得到图像信息。
可穿戴式设备的电源开关启动后,当需要时采用摄像头进行智能控制时,启动智能开关,而后可穿戴设备将启动摄像头。实际应用中,电源开关和智能开关可整合在一个按键上,长按该按键进行开机、关机,短按该按键进行智能功能的开启、关闭。
启动摄像头后,使用者便可在摄像头图像采集范围内进行手势操作。
步骤102,对图像信息进行识别,获取图像中的手势信息。
从图像信息中获取手势信息,可通过现有的图像识别技术实现。
具体实践中,可对获取的图像信息实时进行识别;也可以,周期性地对摄像头采集的图像进行识别。
步骤103,根据手势信息从图像特征库中查找对应的控制指令。
在图像特征库中存储了与控制指令对应的预定手势信息。
步骤104,执行控制指令。
控制指令包含多种,某些情况,可穿戴设备能单独完成控制指令;某些情况,需要结合智能设备完成控制指令,如接打电话。对于结合智能设备完成控制指令的一些情况,还会接收来自智能设备的反馈信息,并进行转换和播放,具体地:
接收智能设备发送的反馈信息;
将反馈信息分解为音素,由音素生成数字音频;
将数字音频传送到扬声器进行播放。
下面针对不同控制指令,对本发明方法进行实例说明。
1、放大音量。
在图1流程中,步骤102获取的手势信息为聆听手势,步骤103查找到的控制指令为音量放大指令;步骤104所述执行控制指令包括:向智能设备发送关于音量放大一格的音量放大指令;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,若识别出图像中不存在手势,则确定控制指令为停止音量放大指令;停止向智能设备发送音量放大指令。
如图2,示出了放大音量的流程图实例。该实例中,智能设备为智能电视;用户举起手,做出聆听的手势,电视声音自动放大。放大到合适的音量后,用户放下手,声音自动定格在该音量。图像特征库中包含手势库,手势库存储了与控制指令对应的预定手势信息。
2、减小音量。
在图1流程中,步骤102所述对图像信息进行识别,获取图像中的手势信息包括:识别出图像整体呈暗色(用户捂住耳朵时,遮挡了摄像头光线,图像呈黑色或灰色等暗色),则获取的手势信息为捂耳朵手势;步骤103查找到的控制指令为音量减小指令;步骤104所述执行控制指令包括:向智能设备发送关于音量减小一格的音量减小指令;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,若识别出图像整体呈亮色,表明不再捂耳朵,则确定控制指令为停止减小音量;停止向智能设备发送减小音指令。
如图3,示出了减小音量的流程图实例。该实例中,智能设备为智能电视;用户举起手,做出捂耳朵的手势,音量自动缩小,直至静音。声音缩小到合适的音量后,用户放下手,声音自动定格在该音量。
3、音乐播放/停止。
在图1流程中,步骤102获取的手势信息为打响指手势,步骤103查找到的控制指令为播放音乐指令;步骤104所述执行控制指令包括:向智能设备发送音乐播放器开启指令,并接收来自智能设备的音频数据,进行播放;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,获取图像中的手势信息为打响指手势,则确定控制指令为停止播放;向智能设备发送音乐播放器关闭指令。
如图4,示出了音乐播放的流程图实例。该实例中,可穿戴设备为挂耳式耳机;用户举起手,在耳边做出“打响指”的手势,同时麦克风捕捉到有响指声音输入(响指声音的捕捉为可选条件)时,音乐自动进行播放。当音乐播放中再次进行该动作,音乐播放结束。音乐的“上一首”和“下一首”等常规音乐播放操作,可通过挂耳式耳机按键完成。
4、电话操作(针对智能设备为可进行电话操作的情形):
在图1流程中,步骤102获取的手势信息为打电话手势,步骤103查找到的控制指令为接打电话指令;若当前有电话进入,则步骤104所述执行控制指令包括:向智能设备发送接通来电指令;若当前没有电话进入,则步骤104所述执行控制指令包括:进行打电话操作,向智能设备发送电话呼叫指令,获取用户输入的音频电话信息,将音频电话信息转换为文本信息,向智能设备发送包含文本信息的电话拨打指令。
如图5,示出了呼出电话的流程图实例,图6示出了接听电话的流程图实例。当连接的智能设备为手机时,用户通过“打电话的动作”,表示准备进行打电话的操作,耳机监测到该手势后,启动语音检测模块,进行音频捕捉。用户可通过说出电话号码或通讯录联系人姓名进行电话拨号的拨打等一般的蓝牙电话功能。当有来电呼入时,接电话手势被识别后,用于接通来电。
5、社交助手功能:
在图1流程中,步骤102获取的手势信息为握手手势,步骤103查找到的控制指令为社交助手指令;步骤104所述执行控制指令包括:
对摄像头采集的图像信息进行识别,获取面部图像;
根据获取的面部图像从面部特征库中提取对应的描述信息,将描述信息通过语音方式进行播放。
如果根据获取的面部图像成功提取对应的描述信息,则执行所述将描述信息通过语音方式进行播放的步骤;如果失败,可进一步向智能设备请求:
从面部图像中提取特征数据,对特征数据进行编码后发送给智能设备;
智能设备根据特征数据获取对应的描述信息,将描述信息反馈给可穿戴设备;
可穿戴设备将描述信息通过语音方式进行播放。
智能设备存储的描述信息较多,若智能设备根据特征数据在本地没有获取到对应的描述信息,可从互联网下载。
如图7,示出了社交助手功能的流程图实例。“社交助手”可通过在可穿戴设备上设置的硬件开关进行启动;启动后,通过与对方握手的姿势识别,触发对面前用户的面部识别;然后,根据面部图像提取描述信息,将对方的基本描述信息通过耳机反馈给用户;此功能适用于大型会议及商务会谈等大型活动中,可有效的避免社交尴尬。
若一个可穿戴式设备具有上述1-5的所有功能,则可根据需要执行所选取的某一项;其流程如图8所示,用户可按照图9所示的手势进行智能控制,该实例中,可穿戴设备具体为耳机。
图8示出了耳机的完整功能结构及操作流程。本实例在耳机上配置高性能的摄像头,从而为耳机与智能设备的交互增加了手势的智能方式。同时,采集到的图像数据可通过智能耳机完成面部识别、手势控制、社交助手等一系列智能功能,将单一功能的蓝牙耳机进行智能化扩展,使其成为更具实用价值的智能可穿戴设备。与其他智能设备相比,除蓝牙耳机的功能外,本设备通过与智能设备的配对和面部识别相互结合,还实现了在某些特定场合(如会议时对参会人员的识别)的特殊应用。
本发明在可穿戴设备上设置摄像头,当需要时,启动摄像头进行图像采集,得到图像信息;对图像信息进行识别,获取图像中的手势信息;根据手势信息从图像特征库中查找对应的控制指令;执行控制指令。从而,实现基于摄像头采集的图像对智能设备进行智能控制;并且,本发明在图像特征库中存储了对应各预定手势信息的控制指令,获取手势信息后便可查询出对应的控制指令,使应用更加灵活、准确。
参见图10,为本发明可穿戴设备的结构示意图,该该可穿戴设备上设置有摄像头,还包括系统配置模块、图像获取模块、图像识别模块、关键信息存储模块和执行模块;
所述系统配置模块,接收智能开启指令,启动摄像头进行图像采集;
所述图像获取模块,获取摄像头采集的图像信息,发送给所述图像识别模块;
所述图像识别模块,对图像信息进行识别,获取图像中的手势信息;根据手势信息从所述关键信息存储模块存储的图像特征库中查找对应的控制指令;向查找的控制指令发送给执行模块;
所述执行模块,接收来自所述图像识别模块的控制指令,执行控制指令。
较佳地,该可穿戴设备还包括信息传输模块和语音合成及播放模块;如图11所示的可穿戴设备结构实例;
所述信息传输模块,接收来自智能设备的反馈信息,发送给所述语音合成及播放模块;
所述语音合成及播放模块,将反馈信息分解为音素,由音素生成数字音频;将数字音频传送到扬声器进行播放。
较佳地,获取的手势信息为聆听手势,查找到的控制指令为音量放大指令,所述执行模块包括音量放大执行子模块,该可穿戴设备还包括信息传输模块;
所述音量放大执行子模块,接收来自所述图像识别模块的控制指令,通过信息传输模块向智能设备发送关于音量放大一格的音量放大指令;
所述图像识别模块,向所述音量放大执行子模块发送音量放大指令后,对采集的图像信息进行识别,若识别出图像中不存在手势,则确定控制指令为停止音量放大指令,向所述音量放大执行子模块发送停止音量放大指令;
所述音量放大执行子模块,接收停止音量放大指令,停止通过信息传输模块向智能设备发送音量放大指令。
较佳地,所述执行模块包括音量减小执行子模块,该可穿戴设备还包括信息传输模块;
所述图像识别模块,对图像信息进行识别,获取图像中的手势信息时,具体地:识别出图像整体呈暗色,则获取的手势信息为捂耳朵手势;查找到的控制指令为音量减小指令,将音量减小指令通过信息传输模块发送给所述音量减小执行子模块;
所述音量减小执行子模块,接收来自所述图像识别模块的音量减小指令,通过信息传输模块向智能设备发送关于音量减小一格的音量减小指令;
所述图像识别模块,向所述音量减小执行子模块发送音量减小指令后,对采集的图像信息进行识别,若识别出图像整体呈亮色,则确定控制指令为停止减小音量,向所述音量放大执行子模块发送停止音量减小指令;
所述音量减小执行子模块,接收停止音量减小指令,停止通过信息传输模块向智能设备发送音量减小指令。
较佳地,获取的手势信息为打响指手势,查找到的控制指令为播放音乐指令,所述执行模块包括播放音乐执行子模块,该可穿戴设备还包括信息传输模块;
所述播放音乐执行子模块,接收来自所述图像识别模块的播放音乐指令,通过信息传输模块向智能设备发送音乐播放器开启指令;
所述信息传输模块,接收来自智能设备的音频数据,发送给音频播放模块进行播放;
所述图像识别模块,向所述播放音乐执行子模块发送播放音乐指令后,对采集的图像信息进行识别,获取图像中的手势信息为打响指手势,则确定控制指令为停止播放指令,向所述播放音乐执行子模块发送停止播放指令;
所述播放音乐执行子模块,接收来自所述图像识别模块的停止播放指令,通过信息传输模块向智能设备发送音乐播放器关闭指令。
较佳地,获取的手势信息为打电话手势,查找到的控制指令为接打电话指令;所述执行模块包括接打电话执行子模块、该可穿戴设备还包括信息传输模块和语音指令识别模块;
所述接打电话执行子模块,接收来自图像识别模块的接打电话指令,若当前有电话进入,则通过信息传输模块向智能设备发送接通来电指令;若当前没有电话进入,则进行打电话操作,通过信息传输模块向智能设备发送电话呼叫指令,并向所述语音指令识别模块发送启动指令;
所述语音指令识别模块,接收启动指令,获取用户输入的音频电话信息,将音频电话信息转换为文本信息,通过信息传输模块向智能设备发送包含文本信息的电话拨打指令。
较佳地,获取的手势信息为握手手势,查找到的控制指令为社交助手指令;所述执行模块包括社交助手执行子模块,该可穿戴设备还包括语音合成及播放模块;
所述社交助手执行子模块,接收来自所述图像识别模块的社交助手指令,向所述图像识别模块发送面部识别指令,接收所述图像识别模块反馈的描述信息,将描述信息通过语音方式进行播放;
所述图像识别模块,接收来自所述社交助手执行子模块的面部识别指令,对摄像头采集的图像信息进行识别,获取面部图像;根据获取的面部图像从关键信息存储模块中存储的面部特征库中提取对应的描述信息,将描述信息反馈给所述社交助手执行子模块。
较佳地,该可穿戴设备还包括图像信息编码模块、语音合成及播放模块和信息传输模块;
所述图像识别模块,如果根据获取的面部图像成功提取对应的描述信息,则将描述信息反馈给所述社交助手执行子模块;如果失败,则将面部图像发送给所述图像信息编码模块;
所述图像信息编码模块,接收来自所述图像识别模块的面部图像,从面部图像中提取特征数据,对特征数据进行编码后通过信息传输模块发送给智能设备;
所述信息传输模块,接收智能设备反馈的与特征数据对应的描述信息,将描述信息发送给所述语音合成及播放模块;
所述语音合成及播放模块,将描述信息分解为音素,由音素生成数字音频;将数字音频传送到扬声器进行播放。
图11所示的可穿戴设备实例中:
系统配置模块:用于配置智能系统启用和停用的功能,并配置与关联智能设备的蓝牙进行连接的配置信息,以及其他设置选项。
关键信息存储模块:用于存储系统配置信息、语音的指令信息以及高关注度的社交对象信息本地化数据(限3人);对于识别过程中,对手势识别后结果的比对特征数据库,也存储于此模块中。
信息传输模块:用于采集到的图像、声音信息及业务流程中的上下文数据,与智能设备之间进行信息交互,采用蓝牙技术完成。
图像获取模块:高速高清摄像头将获取面部的高清图像,以及操作手势的图像信息。
图像信息编码模块:将获取到的图像信息通过编码算法提取特征数据并进行编码,该编码后的数据将通过蓝牙模块与关联的智能设备进行数据交互,进一步通过互联网获取更多的有用信息(例如社交助手中,基于提取的特征数据,智能设备可查询更多的社交网络信息)。
图像识别模块:根据图像获取模块获取到的图像信息,与图像特征库中的数据通过比对算法进行比对,识别出用户的操作手势或社交对象。该模块同时包含对面部特征库和手势特征库的查找和匹配功能。
语音指令识别模块:可通过耳机的麦克风,将用户的语音匹配为电话本联系人或电话号码。该模块同时包含对语音指令的查找和匹配功能。
语音合成及播放模块:通过耳机,将需要反馈的信息通过语音方式告知给用户。
该可穿戴设备包括智能耳机、头盔或项链等,所述摄像头可采用全景3D摄像头;具体实现时,将智能耳机上的系统及硬件置于头盔上、或项链上,便可改造成本发明的可穿戴设备。
该方法在可穿戴设备上设置摄像头,摄像头在可穿戴设备上的位置根据需要设置,便于进行图像采集即可。如图12所示的智能耳机,该智能耳机包括一只独立耳塞和一只挂耳式耳机,摄像头设置在挂耳式耳机底部,为微型全景3D摄像头(即图中的360°mini摄像头);这样,使用者佩戴后,可方便进行图像采集。该智能耳机可通过蓝牙与智能设备进行配对,通过用户手势或语音指令的指挥,完成信息的获取和处理;获取的信息可通过语音播放的方式,反馈给佩戴用户。
本发明方案的优势在于,作为可穿戴设备,摆脱了双手的控制,解放了双手。私密性和灵活性更好,手势的交互方式更加自然高效且无需大量的学习。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (17)

1.一种通过可穿戴设备进行智能控制的方法,其特征在于,在可穿戴设备上设置摄像头,该方法包括:
启动摄像头进行图像采集,得到图像信息;
对图像信息进行识别,获取图像中的手势信息;
根据手势信息从图像特征库中查找对应的控制指令;
执行控制指令。
2.如权利要求1所述的方法,其特征在于,所述执行控制指令之后,该方法还包括:
接收智能设备发送的反馈信息;
将反馈信息分解为音素,由音素生成数字音频;
将数字音频传送到扬声器进行播放。
3.如权利要求1所述的方法,其特征在于,获取的手势信息为聆听手势,查找到的控制指令为音量放大指令;所述执行控制指令包括:向智能设备发送关于音量放大一格的音量放大指令;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,若识别出图像中不存在手势,则确定控制指令为停止音量放大指令;停止向智能设备发送音量放大指令。
4.如权利要求1所述的方法,其特征在于,所述对图像信息进行识别,获取图像中的手势信息包括:识别出图像整体呈暗色,则获取的手势信息为捂耳朵手势;查找到的控制指令为音量减小指令;所述执行控制指令包括:向智能设备发送关于音量减小一格的音量减小指令;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,若识别出图像整体呈亮色,则确定控制指令为停止减小音量;停止向智能设备发送减小音指令。
5.如权利要求1所述的方法,其特征在于,获取的手势信息为打响指手势,查找到的控制指令为播放音乐指令;所述执行控制指令包括:向智能设备发送音乐播放器开启指令,并接收来自智能设备的音频数据,进行播放;所述执行控制指令之后,该方法还包括:
对采集的图像信息进行识别,获取图像中的手势信息为打响指手势,则确定控制指令为停止播放;向智能设备发送音乐播放器关闭指令。
6.如权利要求1所述的方法,其特征在于,获取的手势信息为打电话手势,查找到的控制指令为接打电话指令;
若当前有电话进入,则所述执行控制指令包括:向智能设备发送接通来电指令;
若当前没有电话进入,则所述执行控制指令包括:进行打电话操作,向智能设备发送电话呼叫指令,获取用户输入的音频电话信息,将音频电话信息转换为文本信息,向智能设备发送包含文本信息的电话拨打指令。
7.如权利要求1所述的方法,其特征在于,获取的手势信息为握手手势,查找到的控制指令为社交助手指令;所述执行控制指令包括:
对摄像头采集的图像信息进行识别,获取面部图像;
根据获取的面部图像从面部特征库中提取对应的描述信息,将描述信息通过语音方式进行播放。
8.如权利要求7所述的方法,其特征在于,该方法还包括:如果根据获取的面部图像成功提取对应的描述信息,则执行所述将描述信息通过语音方式进行播放的步骤;如果失败,则:
从面部图像中提取特征数据,对特征数据进行编码后发送给智能设备;
智能设备根据特征数据获取对应的描述信息,将描述信息反馈给可穿戴设备;
可穿戴设备将描述信息通过语音方式进行播放。
9.一种可穿戴设备,其特征在于,该可穿戴设备上设置有摄像头,还包括系统配置模块、图像获取模块、图像识别模块、关键信息存储模块和执行模块;
所述系统配置模块,接收智能开启指令,启动摄像头进行图像采集;
所述图像获取模块,获取摄像头采集的图像信息,发送给所述图像识别模块;
所述图像识别模块,对图像信息进行识别,获取图像中的手势信息;根据手势信息从所述关键信息存储模块存储的图像特征库中查找对应的控制指令;向查找的控制指令发送给执行模块;
所述执行模块,接收来自所述图像识别模块的控制指令,执行控制指令。
10.如权利要求9所述的可穿戴设备,其特征在于,该可穿戴设备还包括信息传输模块和语音合成及播放模块;
所述信息传输模块,接收来自智能设备的反馈信息,发送给所述语音合成及播放模块;
所述语音合成及播放模块,将反馈信息分解为音素,由音素生成数字音频;将数字音频传送到扬声器进行播放。
11.如权利要求9所述的可穿戴设备,其特征在于,获取的手势信息为聆听手势,查找到的控制指令为音量放大指令,所述执行模块包括音量放大执行子模块,该可穿戴设备还包括信息传输模块;
所述音量放大执行子模块,接收来自所述图像识别模块的控制指令,通过信息传输模块向智能设备发送关于音量放大一格的音量放大指令;
所述图像识别模块,向所述音量放大执行子模块发送音量放大指令后,对采集的图像信息进行识别,若识别出图像中不存在手势,则确定控制指令为停止音量放大指令,向所述音量放大执行子模块发送停止音量放大指令;
所述音量放大执行子模块,接收停止音量放大指令,停止通过信息传输模块向智能设备发送音量放大指令。
12.如权利要求9所述的可穿戴设备,其特征在于,所述执行模块包括音量减小执行子模块,该可穿戴设备还包括信息传输模块;
所述图像识别模块,对图像信息进行识别,获取图像中的手势信息时,具体地:识别出图像整体呈暗色,则获取的手势信息为捂耳朵手势;查找到的控制指令为音量减小指令,将音量减小指令通过信息传输模块发送给所述音量减小执行子模块;
所述音量减小执行子模块,接收来自所述图像识别模块的音量减小指令,通过信息传输模块向智能设备发送关于音量减小一格的音量减小指令;
所述图像识别模块,向所述音量减小执行子模块发送音量减小指令后,对采集的图像信息进行识别,若识别出图像整体呈亮色,则确定控制指令为停止减小音量,向所述音量放大执行子模块发送停止音量减小指令;
所述音量减小执行子模块,接收停止音量减小指令,停止通过信息传输模块向智能设备发送音量减小指令。
13.如权利要求9所述的可穿戴设备,其特征在于,获取的手势信息为打响指手势,查找到的控制指令为播放音乐指令,所述执行模块包括播放音乐执行子模块,该可穿戴设备还包括信息传输模块;
所述播放音乐执行子模块,接收来自所述图像识别模块的播放音乐指令,通过信息传输模块向智能设备发送音乐播放器开启指令;
所述信息传输模块,接收来自智能设备的音频数据,发送给音频播放模块进行播放;
所述图像识别模块,向所述播放音乐执行子模块发送播放音乐指令后,对采集的图像信息进行识别,获取图像中的手势信息为打响指手势,则确定控制指令为停止播放指令,向所述播放音乐执行子模块发送停止播放指令;
所述播放音乐执行子模块,接收来自所述图像识别模块的停止播放指令,通过信息传输模块向智能设备发送音乐播放器关闭指令。
14.如权利要求9所述的可穿戴设备,其特征在于,获取的手势信息为打电话手势,查找到的控制指令为接打电话指令;所述执行模块包括接打电话执行子模块、该可穿戴设备还包括信息传输模块和语音指令识别模块;
所述接打电话执行子模块,接收来自图像识别模块的接打电话指令,若当前有电话进入,则通过信息传输模块向智能设备发送接通来电指令;若当前没有电话进入,则进行打电话操作,通过信息传输模块向智能设备发送电话呼叫指令,并向所述语音指令识别模块发送启动指令;
所述语音指令识别模块,接收启动指令,获取用户输入的音频电话信息,将音频电话信息转换为文本信息,通过信息传输模块向智能设备发送包含文本信息的电话拨打指令。
15.如权利要求9所述的可穿戴设备,其特征在于,获取的手势信息为握手手势,查找到的控制指令为社交助手指令;所述执行模块包括社交助手执行子模块,该可穿戴设备还包括语音合成及播放模块;
所述社交助手执行子模块,接收来自所述图像识别模块的社交助手指令,向所述图像识别模块发送面部识别指令,接收所述图像识别模块反馈的描述信息,将描述信息通过语音方式进行播放;
所述图像识别模块,接收来自所述社交助手执行子模块的面部识别指令,对摄像头采集的图像信息进行识别,获取面部图像;根据获取的面部图像从关键信息存储模块中存储的面部特征库中提取对应的描述信息,将描述信息反馈给所述社交助手执行子模块。
16.如权利要求15所述的可穿戴设备,其特征在于,该可穿戴设备还包括图像信息编码模块、语音合成及播放模块和信息传输模块;
所述图像识别模块,如果根据获取的面部图像成功提取对应的描述信息,则将描述信息反馈给所述社交助手执行子模块;如果失败,则将面部图像发送给所述图像信息编码模块;
所述图像信息编码模块,接收来自所述图像识别模块的面部图像,从面部图像中提取特征数据,对特征数据进行编码后通过信息传输模块发送给智能设备;
所述信息传输模块,接收智能设备反馈的与特征数据对应的描述信息,将描述信息发送给所述语音合成及播放模块;
所述语音合成及播放模块,将描述信息分解为音素,由音素生成数字音频;将数字音频传送到扬声器进行播放。
17.如权利要求9至15中任一项所述的可穿戴设备,其特征在于,该可穿戴设备包括智能耳机、头盔或项链,所述摄像头为全景3D摄像头。
CN201410769228.7A 2014-12-12 2014-12-12 通过可穿戴设备进行智能控制的方法及该可穿戴设备 Pending CN104484037A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410769228.7A CN104484037A (zh) 2014-12-12 2014-12-12 通过可穿戴设备进行智能控制的方法及该可穿戴设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410769228.7A CN104484037A (zh) 2014-12-12 2014-12-12 通过可穿戴设备进行智能控制的方法及该可穿戴设备

Publications (1)

Publication Number Publication Date
CN104484037A true CN104484037A (zh) 2015-04-01

Family

ID=52758590

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410769228.7A Pending CN104484037A (zh) 2014-12-12 2014-12-12 通过可穿戴设备进行智能控制的方法及该可穿戴设备

Country Status (1)

Country Link
CN (1) CN104484037A (zh)

Cited By (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105068708A (zh) * 2015-07-15 2015-11-18 深圳前海达闼科技有限公司 一种指令获取、反馈方法及设备和云服务器
CN105204632A (zh) * 2015-09-14 2015-12-30 惠州Tcl移动通信有限公司 一种控制智能移动终端进入静音模式的方法及可穿戴设备
CN105487666A (zh) * 2015-12-04 2016-04-13 小米科技有限责任公司 基于可穿戴设备执行音乐切换的方法和装置
CN105657185A (zh) * 2016-02-29 2016-06-08 宇龙计算机通信科技(深圳)有限公司 控制移动终端的方法及控制移动终端的装置
CN105676656A (zh) * 2015-12-31 2016-06-15 联想(北京)有限公司 处理方法及电子设备
CN105786182A (zh) * 2016-02-26 2016-07-20 深圳还是威健康科技有限公司 一种基于手势控制周围设备的方法及装置
CN105824431A (zh) * 2016-06-12 2016-08-03 齐向前 信息输入装置与方法
CN105894775A (zh) * 2016-04-21 2016-08-24 唐小川 穿戴设备的数据交互方法及系统
CN106297837A (zh) * 2016-08-05 2017-01-04 易晓阳 一种语音控制音乐本地播放方法
CN106371206A (zh) * 2016-08-31 2017-02-01 安徽协创物联网技术有限公司 一种广视角虚拟现实装置
CN106371597A (zh) * 2016-08-31 2017-02-01 安徽协创物联网技术有限公司 一种虚拟现实互换的轻质vr一体机
CN106412384A (zh) * 2015-07-31 2017-02-15 展讯通信(上海)有限公司 一种视频处理系统
CN106527598A (zh) * 2016-12-15 2017-03-22 公安部第三研究所 一种用于公安执法的警用腕式穿戴设备及应用系统
CN106572344A (zh) * 2016-09-29 2017-04-19 宇龙计算机通信科技(深圳)有限公司 虚拟现实直播方法、系统以及云服务器
CN106685459A (zh) * 2016-12-27 2017-05-17 广东小天才科技有限公司 一种可穿戴设备操作的控制方法及可穿戴设备
CN106681476A (zh) * 2016-12-19 2017-05-17 浙江大学 一种低功耗手势交互系统
WO2017096982A1 (zh) * 2015-12-07 2017-06-15 乐视控股(北京)有限公司 可穿戴设备的控制方法、装置及终端
CN106980382A (zh) * 2017-03-31 2017-07-25 维沃移动通信有限公司 一种vr设备播放控制的方法、移动终端和vr设备
CN107708007A (zh) * 2017-09-18 2018-02-16 歌尔股份有限公司 一种无线耳机控制方法、装置和无线耳机
WO2018076371A1 (zh) * 2016-10-31 2018-05-03 深圳市大疆创新科技有限公司 动作识别方法、网络训练方法、装置及设备
CN108170266A (zh) * 2017-12-25 2018-06-15 珠海市君天电子科技有限公司 智能设备控制方法、装置及设备
CN108814572A (zh) * 2018-05-28 2018-11-16 Oppo广东移动通信有限公司 佩戴状态检测方法及相关设备
CN109151172A (zh) * 2018-07-23 2019-01-04 Oppo广东移动通信有限公司 音频输出控制方法及相关设备
CN109255325A (zh) * 2018-09-05 2019-01-22 百度在线网络技术(北京)有限公司 用于可穿戴设备的图像识别方法和装置
CN109511045A (zh) * 2015-12-07 2019-03-22 京东方科技集团股份有限公司 耳机控制装置、耳机、可穿戴设备及耳机控制方法
CN109862274A (zh) * 2019-03-18 2019-06-07 北京字节跳动网络技术有限公司 带摄像功能的耳机、用于输出控制信号的方法和装置
CN109917922A (zh) * 2019-03-28 2019-06-21 更藏多杰 一种交互方法及可穿戴交互设备
CN110098985A (zh) * 2018-01-29 2019-08-06 阿里巴巴集团控股有限公司 声音行为检测的方法和装置
CN110109537A (zh) * 2019-04-01 2019-08-09 努比亚技术有限公司 一种可穿戴设备及其手势识别方法和计算机可读存储介质
CN112233505A (zh) * 2020-09-29 2021-01-15 浩辰科技(深圳)有限公司 一种新型盲童交互学习系统
CN112860169A (zh) * 2021-02-18 2021-05-28 Oppo广东移动通信有限公司 交互方法及装置、计算机可读介质和电子设备
CN112988107A (zh) * 2021-04-25 2021-06-18 歌尔股份有限公司 一种音量调节方法、系统及头戴式设备
CN113052561A (zh) * 2021-04-01 2021-06-29 苏州惟信易量智能科技有限公司 一种基于可穿戴设备的流程控制系统及方法
CN113315871A (zh) * 2021-05-25 2021-08-27 广州三星通信技术研究有限公司 移动终端及其操作方法
CN114115526A (zh) * 2021-10-29 2022-03-01 歌尔科技有限公司 头戴式无线耳机及其控制方法、无线通信系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012079138A (ja) * 2010-10-04 2012-04-19 Olympus Corp ジェスチャ認識装置
US20120287284A1 (en) * 2011-05-10 2012-11-15 Kopin Corporation Headset computer that uses motion and voice commands to control information display and remote devices
CN103257703A (zh) * 2012-02-20 2013-08-21 联想(北京)有限公司 一种增强现实装置及方法
CN203178918U (zh) * 2013-03-21 2013-09-04 联想(北京)有限公司 一种电子设备
US20130229344A1 (en) * 2009-07-31 2013-09-05 Echostar Technologies L.L.C. Systems and methods for hand gesture control of an electronic device
CN203445974U (zh) * 2013-08-30 2014-02-19 北京京东方光电科技有限公司 3d眼镜及3d显示系统
US20140098018A1 (en) * 2012-10-04 2014-04-10 Microsoft Corporation Wearable sensor for tracking articulated body-parts
WO2014081180A1 (en) * 2012-11-20 2014-05-30 Samsung Electronics Co., Ltd. Transition and interaction model for wearable electronic device
CN103841246A (zh) * 2012-11-20 2014-06-04 联想(北京)有限公司 一种信息处理方法、系统及一种移动终端
CN104182051A (zh) * 2014-08-29 2014-12-03 百度在线网络技术(北京)有限公司 头戴式智能设备和具有该头戴式智能设备的交互系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130229344A1 (en) * 2009-07-31 2013-09-05 Echostar Technologies L.L.C. Systems and methods for hand gesture control of an electronic device
JP2012079138A (ja) * 2010-10-04 2012-04-19 Olympus Corp ジェスチャ認識装置
US20120287284A1 (en) * 2011-05-10 2012-11-15 Kopin Corporation Headset computer that uses motion and voice commands to control information display and remote devices
CN103257703A (zh) * 2012-02-20 2013-08-21 联想(北京)有限公司 一种增强现实装置及方法
US20140098018A1 (en) * 2012-10-04 2014-04-10 Microsoft Corporation Wearable sensor for tracking articulated body-parts
WO2014081180A1 (en) * 2012-11-20 2014-05-30 Samsung Electronics Co., Ltd. Transition and interaction model for wearable electronic device
CN103841246A (zh) * 2012-11-20 2014-06-04 联想(北京)有限公司 一种信息处理方法、系统及一种移动终端
CN203178918U (zh) * 2013-03-21 2013-09-04 联想(北京)有限公司 一种电子设备
CN203445974U (zh) * 2013-08-30 2014-02-19 北京京东方光电科技有限公司 3d眼镜及3d显示系统
CN104182051A (zh) * 2014-08-29 2014-12-03 百度在线网络技术(北京)有限公司 头戴式智能设备和具有该头戴式智能设备的交互系统

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105068708A (zh) * 2015-07-15 2015-11-18 深圳前海达闼科技有限公司 一种指令获取、反馈方法及设备和云服务器
CN105068708B (zh) * 2015-07-15 2019-02-19 深圳前海达闼云端智能科技有限公司 一种指令获取、反馈方法及设备和云服务器
CN106412384A (zh) * 2015-07-31 2017-02-15 展讯通信(上海)有限公司 一种视频处理系统
CN105204632A (zh) * 2015-09-14 2015-12-30 惠州Tcl移动通信有限公司 一种控制智能移动终端进入静音模式的方法及可穿戴设备
CN105204632B (zh) * 2015-09-14 2020-12-25 惠州Tcl移动通信有限公司 一种控制智能移动终端进入静音模式的方法及可穿戴设备
CN105487666A (zh) * 2015-12-04 2016-04-13 小米科技有限责任公司 基于可穿戴设备执行音乐切换的方法和装置
WO2017096982A1 (zh) * 2015-12-07 2017-06-15 乐视控股(北京)有限公司 可穿戴设备的控制方法、装置及终端
CN109511045A (zh) * 2015-12-07 2019-03-22 京东方科技集团股份有限公司 耳机控制装置、耳机、可穿戴设备及耳机控制方法
CN105676656A (zh) * 2015-12-31 2016-06-15 联想(北京)有限公司 处理方法及电子设备
CN105786182A (zh) * 2016-02-26 2016-07-20 深圳还是威健康科技有限公司 一种基于手势控制周围设备的方法及装置
CN105786182B (zh) * 2016-02-26 2018-12-07 深圳还是威健康科技有限公司 一种基于手势控制周围设备的方法及装置
CN105657185B (zh) * 2016-02-29 2019-03-08 宇龙计算机通信科技(深圳)有限公司 控制移动终端的方法及控制移动终端的装置
CN105657185A (zh) * 2016-02-29 2016-06-08 宇龙计算机通信科技(深圳)有限公司 控制移动终端的方法及控制移动终端的装置
CN105894775A (zh) * 2016-04-21 2016-08-24 唐小川 穿戴设备的数据交互方法及系统
CN105824431A (zh) * 2016-06-12 2016-08-03 齐向前 信息输入装置与方法
CN105824431B (zh) * 2016-06-12 2018-12-04 齐向前 信息输入装置与方法
CN106297837A (zh) * 2016-08-05 2017-01-04 易晓阳 一种语音控制音乐本地播放方法
CN106371597A (zh) * 2016-08-31 2017-02-01 安徽协创物联网技术有限公司 一种虚拟现实互换的轻质vr一体机
CN106371206A (zh) * 2016-08-31 2017-02-01 安徽协创物联网技术有限公司 一种广视角虚拟现实装置
CN106572344A (zh) * 2016-09-29 2017-04-19 宇龙计算机通信科技(深圳)有限公司 虚拟现实直播方法、系统以及云服务器
WO2018076371A1 (zh) * 2016-10-31 2018-05-03 深圳市大疆创新科技有限公司 动作识别方法、网络训练方法、装置及设备
CN106527598A (zh) * 2016-12-15 2017-03-22 公安部第三研究所 一种用于公安执法的警用腕式穿戴设备及应用系统
CN106681476A (zh) * 2016-12-19 2017-05-17 浙江大学 一种低功耗手势交互系统
CN106685459B (zh) * 2016-12-27 2019-07-30 广东小天才科技有限公司 一种可穿戴设备操作的控制方法及可穿戴设备
CN106685459A (zh) * 2016-12-27 2017-05-17 广东小天才科技有限公司 一种可穿戴设备操作的控制方法及可穿戴设备
CN106980382A (zh) * 2017-03-31 2017-07-25 维沃移动通信有限公司 一种vr设备播放控制的方法、移动终端和vr设备
CN107708007A (zh) * 2017-09-18 2018-02-16 歌尔股份有限公司 一种无线耳机控制方法、装置和无线耳机
CN108170266A (zh) * 2017-12-25 2018-06-15 珠海市君天电子科技有限公司 智能设备控制方法、装置及设备
CN110098985A (zh) * 2018-01-29 2019-08-06 阿里巴巴集团控股有限公司 声音行为检测的方法和装置
CN108814572A (zh) * 2018-05-28 2018-11-16 Oppo广东移动通信有限公司 佩戴状态检测方法及相关设备
CN109151172A (zh) * 2018-07-23 2019-01-04 Oppo广东移动通信有限公司 音频输出控制方法及相关设备
CN109255325A (zh) * 2018-09-05 2019-01-22 百度在线网络技术(北京)有限公司 用于可穿戴设备的图像识别方法和装置
CN109862274A (zh) * 2019-03-18 2019-06-07 北京字节跳动网络技术有限公司 带摄像功能的耳机、用于输出控制信号的方法和装置
CN109917922A (zh) * 2019-03-28 2019-06-21 更藏多杰 一种交互方法及可穿戴交互设备
CN110109537A (zh) * 2019-04-01 2019-08-09 努比亚技术有限公司 一种可穿戴设备及其手势识别方法和计算机可读存储介质
CN112233505A (zh) * 2020-09-29 2021-01-15 浩辰科技(深圳)有限公司 一种新型盲童交互学习系统
CN112860169A (zh) * 2021-02-18 2021-05-28 Oppo广东移动通信有限公司 交互方法及装置、计算机可读介质和电子设备
CN112860169B (zh) * 2021-02-18 2024-01-12 Oppo广东移动通信有限公司 交互方法及装置、计算机可读介质和电子设备
CN113052561A (zh) * 2021-04-01 2021-06-29 苏州惟信易量智能科技有限公司 一种基于可穿戴设备的流程控制系统及方法
CN112988107A (zh) * 2021-04-25 2021-06-18 歌尔股份有限公司 一种音量调节方法、系统及头戴式设备
CN113315871A (zh) * 2021-05-25 2021-08-27 广州三星通信技术研究有限公司 移动终端及其操作方法
CN113315871B (zh) * 2021-05-25 2022-11-22 广州三星通信技术研究有限公司 移动终端及其操作方法
CN114115526A (zh) * 2021-10-29 2022-03-01 歌尔科技有限公司 头戴式无线耳机及其控制方法、无线通信系统

Similar Documents

Publication Publication Date Title
CN104484037A (zh) 通过可穿戴设备进行智能控制的方法及该可穿戴设备
CN208507180U (zh) 一种便携式智能语音交互控制设备
CN104982041B (zh) 用于控制助听器的便携式终端及其方法
US10452349B2 (en) Electronic device and operation control method therefor
CN111476911B (zh) 虚拟影像实现方法、装置、存储介质与终端设备
CN208689384U (zh) 一种带具有语音交互功能耳机的智能手表
KR102102647B1 (ko) 무선 리시버 및 그 제어 방법
CN110784830B (zh) 数据处理方法、蓝牙模块、电子设备与可读存储介质
WO2015066949A1 (zh) 人机交互系统、方法及其装置
CN109831622A (zh) 一种拍摄方法及电子设备
CN110415695A (zh) 一种语音唤醒方法及电子设备
CN105224601B (zh) 一种提取时间信息的方法和装置
CN205490994U (zh) 一种多功能智能音响
CN105532634A (zh) 超声波驱蚊方法、装置及系统
EP4123444A1 (en) Voice information processing method and apparatus, and storage medium and electronic device
CN113727025B (zh) 一种拍摄方法、设备和存储介质
CN112446255A (zh) 一种视频图像处理方法及装置
CN108960158A (zh) 一种智能手语翻译的系统和方法
CN101087151A (zh) 便携式装置的远程控制系统和方法
CN108235753A (zh) 电子设备及用于控制电子设备的操作的方法
CN108595003A (zh) 功能控制方法及相关设备
CN104883503A (zh) 基于语音的个性化拍照技术
CN114115674A (zh) 录音和文档内容的定位方法、电子设备及存储介质
WO2023284591A1 (zh) 视频拍摄方法及装置、电子设备和存储介质
CN114724055A (zh) 视频切换方法、装置、存储介质及设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150401