CN104205015A - 基于手势控制远程装置 - Google Patents

基于手势控制远程装置 Download PDF

Info

Publication number
CN104205015A
CN104205015A CN201380017846.XA CN201380017846A CN104205015A CN 104205015 A CN104205015 A CN 104205015A CN 201380017846 A CN201380017846 A CN 201380017846A CN 104205015 A CN104205015 A CN 104205015A
Authority
CN
China
Prior art keywords
gesture
user
control
hand
pressure data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380017846.XA
Other languages
English (en)
Other versions
CN104205015B (zh
Inventor
巴巴科·福鲁坦保尔
理查德·O·法利
沙瓦库马尔·巴拉苏部拉马尼亚姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN104205015A publication Critical patent/CN104205015A/zh
Application granted granted Critical
Publication of CN104205015B publication Critical patent/CN104205015B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C21/00—Systems for transmitting the position of an object with respect to a predetermined reference system, e.g. tele-autographic system
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/32—Remote control based on movements, attitude of remote control device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明的实施例涉及基于通过检测用户身体的一部分的表面形态检测到的手部手势控制电子装置。举例来说，可检测到指示对应于用户手的特定移动、位置和/或姿势的用户骨骼和组织位置的压力数据。耦接到所述用户的皮肤的肌电(EMG)传感器也可用于确定由所述用户作出的手势。这些传感器可耦接到相机，所述相机可用以基于所辨识手势捕获装置的图像。于是可识别并控制所述装置。

Description

基于手势控制远程装置
背景技术
许多电子装置用于远程地进行控制。常见实例包含电视、机顶盒、DVR、媒体播放器(例如，CD播放器、DVD播放器、蓝光播放器)、平板电脑、桌上型和膝上型计算机和电话会议设备。目前，用户控制此设备的常见方式为使用例如可与电视一起使用的远程控制装置。这种方式可在若干方面不便。首先，其要求用户具有远程控制装置。其次，需要使用的远程控制装置可仅与特定设备零件一起工作，因此对于具有可远程地控制的多个装置的位置，可需要多个远程控制装置。
发明内容
本发明的实施例涉及基于通过检测用户身体的一部分的表面形态检测到的手部手势控制电子装置。举例来说，压力数据可指示对应于用户手的特定移动、位置和/或姿势的用户骨骼和组织的位置。耦接到所述用户皮肤的肌电(EMG)传感器还可用于确定由所述用户作出的手势。这些传感器可耦接到相机，所述相机可用以基于所辨识手势捕获装置的图像。于是可识别并控制所述装置。
根据本发明的一种用于基于手部手势控制装置的实例系统包含经配置以检测用户身体的一部分的表面形态并将压力数据提供到处理模块的压敏传感器，其经配置以基于所述压力数据，识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势。所述系统也包含经配置以基于所述所识别手势将信息发射到所述装置的发射器。
根据描述的一种用于基于手势控制装置的实例方法包含：收集指示用户身体的一部分的表面形态的压力数据；基于所述压力数据识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势，和基于所述所识别手势将信息发射到所述装置。
根据本发明的一种实例非暂时性计算机可读媒体上嵌入有用于基于手势控制装置的指令。所述指令包含用于收集指示用户身体的一部分的表面形态的压力数据，基于所述压力数据识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势，并基于所述所识别手势将信息发射到所述装置的计算机可执行代码。
根据描述的一种用于基于手势控制装置的实例系统包含：用于收集指示用户身体的一部分的表面形态的压力数据的装置，用于基于所述压力数据识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势的装置，和用于基于所述所识别手势将信息发射到所述装置的装置。
本文中所描述的项目和/或技术可提供以下能力中的一或多者以及未提及的其它能力。技术可使用相比于传统远程控制较不可能丢失的具有可穿戴形状因数的系统提供对多种装置中的任一者的选择和控制。此外，所述系统可包含和/或集成有用于额外功能性的单独装置，例如，移动电话、头部安装式显示器和其类似者。结合下文的文字和附图更详细地描述这些和其它实施例连同其许多优势和特征。
附图说明
图1为附着有压力传感器的用户手的实施例的说明。
图2为附着有压力传感器的用户手腕的实施例的说明。
图3为说明用于使用手部手势指定和/或控制装置的系统的实施例的框图。
图4为说明用于使用手部手势指定和/或控制装置的系统的另一实施例的框图。
图5为说明用于基于手部手势控制一或多个远程装置的方法的实施例的流程图。
图6为说明用于指定一或多个远程装置以用于控制的方法的实施例的流程图。
图7说明计算机系统的实施例。
具体实施方式
参考图式提供以下描述，其中类似参考编号始终用以指类似组件。虽然本文中描述一或多个技术的各种细节，但其它技术也是可能的。在一些情况下，以框图形式展示结构和装置以便促进描述各种技术。
由用户执行的手部手势可用于控制多个不同远程装置，例如移动电话、计算机、头部安装式显示器、电视和/或其它电子装置。当用户通过手执行手势时，可检测用户身体的各种特性以便识别手势。当用户执行手部手势(例如，握拳)时，骨骼、韧带、皮肤和/或其它组织的移动和/或位置可特定于手势。换句话说，基于骨骼、韧带、皮肤和/或其它组织的移动和/或位置，可确定用户正握拳。在用户身体上的多个地方处可显而易见所述特性。举例来说，在用于作出手势的用户手的背部上，手的掌骨的移动和/或位置可用于识别手势。作为另一实例，骨骼、韧带、皮肤和/或(用于作出手势的同一手的)用户手腕上的其它组织的位置可用于识别所执行手势。
图1说明附着有压力传感器的用户手的实施例100。压力传感器120可贴附到用户手110的背部。在一些实施例中，传感器120可经配置为包围手的带子或用于横跨手的背部放置的条带，(例如)如图1中所说明。虚线用于表示手的掌骨骨骼的近似位置。压力传感器120可经配置以大体上检测用户手110的背部的表面形态。用户手110的背部的表面形态可受到骨骼(例如，掌骨骨骼)、韧带、皮肤和/或用户手的其它组织的位置的影响。由用户手所执行的手势可导致用户手110的背部呈现可用以识别手势的表面形态。可基于用户手的表面形态识别的手势包含：用户的拇指触摸手指(其中每一手指呈现不同手势)；形成拳头；和形成拳头并将用户手腕向上、向下、向左或向右屈伸(各自为单独手势)。额外手势可是可能的。压力传感器120可收集用户手110的背部上的多个点的压力数据。可将这些压力数据发射至另一装置以用于分析。压力传感器120可经由贴片胶、带子或用于附着的一些其它装置贴附到用户手110的背部。
在其它实施例中，除了或并非使用压力传感器以检测用户手的背部的表面形态，可经由肌电描记术(EMG)检测用户手中的肌肉中存在的电活动。使用所检测电活动确定由用户手所执行的手势可是可能的。因而，EMG传感器可使用一或多个电极以检测用户手的背部上(或一些其它位置中，例如，用户前臂上)存在的电活动。
图2说明附着有压力传感器的用户手腕的实施例200。类似于图1的实施例100，可使用用户手腕的表面形态检测由用户手所执行的各种手势。可检测手腕的整个外周的表面形态或仅检测部分，例如，用户手腕的下表面。实施例200说明压力传感器220正用于确定用户手腕210的下表面的表面形态。用户手腕210的表面形态可受到骨骼、韧带、皮肤和/或用户手腕210的其它组织的位置的影响。正由用户手执行的手势可导致用户手腕210呈现可用以识别手势的表面形态。可基于用户手腕210的表面形态识别的手势包含：用户的拇指触摸手指(其中每一手指呈现不同手势)；形成拳头；和形成拳头并将用户手腕向上、向下、向左或向右屈伸(各自为单独手势)。压力传感器220可经由贴片胶、带子(例如，表带)或用于附着的一些其它装置贴附到用户手腕210。
图1和2中所说明的实施例仅是出于实例目的。实施例可利用多个压力传感器，此情况可包含使用附着到用户手或手腕的多个垫片或条带。举例来说，两个传感器120可贴附到用户手110的背部，且来自两传感器120的数据可用于确定表面形态和/或相关联手势。在一些实施例中，多个传感器使得能够检测较复杂的手势和/或检测具有增加的可信度的手势。还可使用其它形状因数，例如正方形、圆形等。在一些实施例中，代替多个传感器条带，使用至少覆盖多个传感器条带将覆盖的区域量的填补的正方形传感器。
图3说明呈框图形式的系统300的实施例。系统300可经配置以使用手部手势控制一或多个远程装置。系统300可包含：运动传感器310、处理模块320、压力传感器330、扬声器/麦克风模块340、发射器模块350、相机370和远程装置360。压力传感器330可如关于图1和2所描述。在一些实施例中，除了或并非压力传感器，一或多个肌电描记术(EMG)传感器可用于测量用户手的背部和/或用户手腕(或更确切地说，用户手腕的下表面)上的肌肉的电活动。一或多个EMG传感器可另外或替代地用于用户前臂上。压力传感器330可为经配置以测量多个点的压力的基于聚合物或基于电容性传感器。举例来说，压力传感器330可经配置以测量用户身体(例如，手腕、手的背部)上的特定区中的个别点网格。在一些实施例中，压力传感器330包括线性电位计。
运动传感器310是任选的，且可包含加速计和/或陀螺仪。可结合压力测量使用用户身体的部分(例如，用户手和/或手腕)的运动以确定手势。举例来说，手势可包含形成拳头(可基于压力测量检测所述手势)，同时可基于由运动传感器310所收集的运动数据确定拳头的运动(例如，朝向或远离用户身体)。作为一实例，当此手势可有用时，考虑用于远程装置的缩放功能。用户形成拳头可激活缩放功能。将拳头朝向用户身体移动可进行缩小，且将拳头移动远离用户身体可进行放大。作为另一实例，用户拇指触摸手指(例如，食指)的手势可为用以激活光标控制的手势。运动传感器310可接着用于检测用户手是否向左、向右、向上或向下移动。光标的移动可模拟用户手的运动。
另外或替代地，取决于受控的远程装置和/或受控远程装置的状态，可将手的运动与手的位置耦合以对应于各种不同功能。在一些实施例中，用户可将其手腕转动或弯曲一定方向以诱发功能，此手势可与手和/或臂的移动组合以控制所述功能。举例来说，朝上弯曲手腕可诱发“移动光标”功能性，其中手和/或臂的移动对光标进行移动；朝下弯曲手腕可诱发“突出显示文字”功能性，其中手和/或臂的移动可用以选择待突出显示的文字；朝左弯曲手腕可诱发“滚动”功能性，其中手和/或臂的移动可用以控制滚动(例如，在移动方向上滚动)；且朝右弯曲手腕可诱发“缩放”功能性，其中手和/或臂的移动可用以控制缩放(例如，朝前放大、朝后缩小)。其它组合是可能的，如调换上文的手腕弯曲方向和功能。
另外或替代地，可在无需来自运动传感器320的输入的情况下执行光标移动和/或其它功能。在一些实施例中，可由手的位置控制光标移动。举例来说，拇指触摸食指可将光标向上移动，拇指触摸中指可将光标向下移动，拇指触摸无名指可将光标向左移动，且拇指触摸小指可将光标向右移动。其它光标移动是可能的，如调换上文的手位置和功能。另外，可通过拇指触摸所有手指执行其它功能(例如，选择图标)。
处理模块320可分析分别从运动传感器310和压力传感器330所收集的运动数据和/或压力数据。处理模块320可基于运动数据和/或压力数据确定正由用户手所执行的手势。
扬声器/麦克风模块340是任选的，且可用于将信息提供到用户和从用户接收信息。举例来说，如果用户处于多个远程装置可用于控制的位置，那么扬声器可用于向用户告知可用的远程装置，并接收用户希望控制的远程装置选择(经由麦克风)。在一些实施例中，选择可是基于由用户所执行的手势(使用运动传感器310和/或压力传感器330所检测)，而非用户对麦克风说话以指定其希望控制哪个远程装置。响应于所检测手势，这些数据可用于确定应由收发器模块350发射何命令。扬声器/麦克风模块340可将指示应控制哪个远程装置的信息提供到处理模块320。
在其它实施例中，可基于用户手势指向的远程装置选择远程装置。对于所述实施例，可将相机370集成到系统300中，和/或可将其包含于(例如)远程装置或用户身体上。如果用户戴有扩增实境护目镜、抬头显示器或其它头部安装式显示器，那么识别用户正注视或用户正指向的远程装置可是可能的。由用户所执行的手势可用于激活特定于扩增实境护目镜、抬头显示器或其它头部安装式显示器的功能，或手势可导致将命令发射到远程装置。
相机370可使用多种手势中的任一者实现远程装置指定。举例来说，在一个实施例中，系统300的组件中的一些或所有(包含相机370)可集成于用户手、手腕和/或臂上所佩戴的腕带或其它附件中，并与背对用户的相机一起经配置以拍摄用户指向处的图像。可通过手或臂的所辨识手势(例如，指向、弹响指等)触发图像捕获，使得用户可执行针对于待控制装置的手势，且相机可基于手势捕获装置的图像。接着，可处理图像以识别用户想要控制哪个装置，且可将腕带与所识别装置无线耦接。下文关于图6提供关于使用相机370的装置指定的额外细节。可利用用于捕获图像的替代性装置，例如视频和/或静态图像相机、一或多个光传感器和其类似者。
另外或替代地，可利用基于手势的图像捕获以提供其它功能性。实施例可利用基于手势的图像捕获以提供(例如)允许用户捕获对象的图像，并基于所捕获图像进行因特网搜索的基于图像的因特网搜索。取决于所要的功能性，可向用户有声地读出搜索结果，或在以通信方式连接的装置(例如，移动电话、头部安装式显示器等)上有声地再现搜索结果。
收发器模块350可包括经配置以将命令发射到希望控制的远程装置360和/或从远程装置360和/或其它装置接收信息的无线发射器和接收器。收发器模块350可使用红外线、RF、蓝牙、WiFi或一些其它形式的无线通信以与远程装置360进行通信。此通信可包含用于移动光标位置或执行功能(例如，缩放、移动、复制、粘贴、删除、频道调整、音量调整、挂机、启动等)的命令。可由处理模块320基于受控远程装置360和/或所识别手势选择发射到远程装置360的命令。在其它实施例中，收发器模块350可经配置以与远程装置360或有线接口通信。举例来说，手或手腕传感器可布线到头部安装式显示器。
图4说明呈框图形式的系统400的实施例。系统400可经配置以使用手部手势控制一或多个远程装置。系统400可包含：运动传感器310、压力传感器330、收发器模块410、扬声器/麦克风模块340和移动装置435。移动装置435可包含收发器模块420和处理模块430。运动传感器310、压力传感器330和扬声器/麦克风模块340可如关于图1至图3所描述。单独的装置可用于处理分别来自运动传感器310和压力传感器330的运动数据和压力数据，而非与传感器物理连接的处理装置。举例来说，用户移动电话的处理能力可用于使用运动数据和/或压力数据确定所执行的手势。收发器模块410可将原始运动数据和/或原始压力数据转送到移动装置435。
移动装置435的收发器模块420可接收原始运动数据和/或压力数据，并将此数据提供到处理模块430以用于分析。可正执行经配置以处理运动数据和/或压力数据的应用程序的处理模块430可基于来自运动传感器310和压力传感器330的此数据，确定正由用户所执行的手势。基于所确定手势，可识别待发送到远程装置360的命令。收发器模块420可将命令无线地发射到远程装置360。远程装置360与收发器模块420之间的无线通信链路可使用不同收发器模块420与收发器模块410之间的无线通信链路的协议和/或频率。举例来说，蓝牙可用于收发器模块410与收发器模块420之间的通信，而可在收发器模块420与远程装置360之间使用WiFi或红外线。
在一些实施例中，可将所执行手势的指示发射到远程装置360，使得远程装置360确定对应于所识别手势的命令，而非图4的处理模块430或图3的处理模块320基于所确定手势识别远程装置360应执行哪个命令。因而，可由远程装置360执行处理中的一些。在又额外实施例中，可将运动数据和/或压力数据发射到远程装置360，使得远程装置基于原始数据确定用户通过其手所执行的手势。所述实施例可要求降低由处理模块320或处理模块430进行的处理量。
图5说明用于使用手部手势控制一或多个远程装置的方法500的实施例。可使用图1和2的压力传感器配置执行方法500。可使用图3或图4的系统或经配置以准许使用手部手势控制一或多个远程装置的一些其它系统执行方法500。在任选步骤510处，如果存在可进行控制的多个远程装置，那么可选择特定远程装置。这种情况可以若干方式发生。在一个实施例中，扬声器和麦克风(例如，图3和4的扬声器/麦克风模块340)可用以有声地询问用户打算控制哪个远程装置。用户可接着说出希望控制的远程装置的指示。在一些实施例中，用户可呈现有菜单。举例来说，如果用户戴有显示装置(例如，抬头显示器或扩增实境装置)，那么可向用户呈现识别可用远程装置的菜单且可允许用户选择待控制的远程装置。可基于用户正指向或用户面向哪个远程装置选择远程装置。所述实施例可利用观察用户正指向或面向的位置的相机(例如，图3的相机370)。因而，可将此相机安装于用户上、远程装置上、或用户附近内的一些其它位置处。在一些实施例中，用户可执行识别待控制的远程装置的手部手势。可(例如)通过图3和4的压力传感器330、相机370和/或运动传感器330检测手部手势。可将手势关联到远程装置，使得当感测到已执行手势时，激活对那个远程装置的控制。
取决于所要的功能性，可以不同方式中的任一者产生待控制的可用装置的选择。举例来说，来自腕带或其它控制系统(例如，分别为图3和4的系统300和/或400)与一或多个远程装置的配置和/或之前配对的历史数据可用以产生可用装置的选择，可存储、更新并利用所述数据以用于后续装置选择。此外，来自远程装置的无线信标(例如，根据蓝牙、AllJoynTM和/或用于控制远程装置的其它技术)可向腕带或其它控制系统指示哪些远程装置可是可用以进行控制的。
可基于使用、用户喜好和/或其它因素优先排序待控制的可用装置的选择。如先前所指示，用户可通过使用手部手势选择装置。在经优先排序的列表中，(例如)用户使手指中的一者触摸拇指可指示选择哪个编号的列表。在一些配置中，可存在默认装置且某种手势可选择默认而另一手势可选择不同装置。对可用装置的选择可是基于位置的，使得当用户行走到房间中时，腕带或其它控制系统可检测其可在那个房间中控制哪些装置。如果仅存在一个装置，那么腕带或其它控制系统可自动地与那个装置配对。如果发现有多个装置，那么用户可使用(例如)先前所论述技术中的一者(例如，有声选择、手部手势等)从列表进行选择。
一些实施例可允许用户执行抓紧手势，此手势可使得用户能够在一段时间内继续控制所选择远程装置，直至检测到触发事件(例如，松开手势)为止。举例来说，用户可朝向装置作出“抓取”手势(例如，将打开的手握紧成拳头)而非指向待控制的远程装置，从而使得用户能够连续地执行若干手势。当用户完成对装置的控制时，用户可作出“放下”手势(例如，以相反于抓取运动的运动将所有5个手指向外远离手掌伸展)以松开对远程装置的控制。可结束用户对装置的控制的其它触发事件可包含经过一定时间段、一段时期停止使用、用户离开装置所位于的房间，和/或其它事件。取决于装置、用户喜好和/或其它因素，抓紧和/或松开手势可发生变化。
在步骤520处，可使用图1和2中所说明的一或多个压力传感器(例如，图3和4的压力传感器330)从用户收集压力数据。可从用户的手腕(或更确切地说，用户手腕的下表面)和/或用户手的背部收集所述压力数据。压力数据可指示用户手腕和/或手的表面形态。用户手腕和/或用户手的背部的表面形态可受到用户手的位置的影响。因而，如果用户通过其手执行手势，那么(同一手的)用户手腕和/或用户(同一)手的背部的表面形态可对应于所执行的手势。基于用户手腕和/或用户手的背部的表面形态，可确定用户手部手势。
在任选步骤530处，可使用可包含加速计或陀螺仪的运动传感器(例如，图3和4的运动传感器310)收集运动数据。运动数据可指示用户身体的部分(例如，用户手腕或手)的运动。可在用户身体上相同于收集压力数据处的位置处收集运动数据。此运动数据可用于识别手势的基于运动部分。
在步骤540处，可基于步骤520和530处所分别收集的压力数据和/或运动数据识别手势。举例来说，可使用步骤520处所收集的压力数据识别特定手位置，同时可使用步骤530处所收集的运动数据识别用户手的运动。此情况的实例可为光标移动。用户可形成指示希望控制光标的抓握(例如，拳头)；用户可接着向左、向右、向上或向下移动其手同时握拳以控制光标。任选地，手势可重新产生计算机鼠标的功能性。举例来说，手的运动可使光标来回移动，且抓取手势可选择(“点击”)物件。手指至拇指手势可等效于“右击”。另外或替代地，手腕的弯曲可提供对光标的控制。举例来说，在检测到拳头之后，在手正握拳(如由压力数据所指示)时以一定方向弯曲手腕可使得光标来回移动。手腕弯曲还可用于执行其它动作，例如使用文字选择接口(例如，)键入文字。如先前所指示，手势和功能性可发生变化。可由处理模块(例如，分别为图3和4的处理模块320和/或430)执行手势识别。
在步骤550处，响应于所确定手势，可将指示远程装置应执行的动作的命令发射到远程装置。举例来说，参看光标实例，命令可指示光标应向上或向下和/或向左或向右移动。步骤550处所发射的命令可取决于所确定手势和正控制的远程装置。因而，同一手势可导致针对不同远程装置发射不同命令。可分别使用(例如)图3和4的收发器模块350和/或420发射命令。
类似功能性可用以指定用于控制的一或多个远程装置。图6说明根据一个实施例的用于作出此指定的方法600。可使用经配置以准许使用手部手势控制一或多个远程装置的系统(例如，图3或图4的系统)执行图6中的步骤中的一或多者。类似于图5中所说明的步骤，方法600可包含在步骤610处从用户身体收集压力数据，和在步骤620处使用压力数据和/或运动数据确定手势。此外，可从图1和2中所说明的一或多个压力传感器(例如，图3和4的压力传感器330)获得压力数据。
尽管手势可为用户手和/或臂的移动、定位和/或姿势的任何组合，但在这里，可利用使得用户能够朝向待控制的装置引导相机的特定手势。对于具有(例如)向外面向式相机的腕带，所述手势可包含在大体上指向装置时弹响指、指向、握拳和其类似者，使得装置处于相机的视野内。在步骤630处，一旦确定用于图像捕获的手势，相机(例如，图3的相机370)捕获图像。
在步骤640处，处理图像以识别待控制装置。一些实施例可利用一或多个识别符(例如，贴纸、标志、或其它可见标签)以促进装置识别。另外或替代地，处理图像可包含将图像或其特征或关键点与早期校准阶段期间所存储的已知物件的数据库进行比较。早期校准阶段可涉及用户捕获装置的一或多个图像，并输入关于装置的识别信息。可将所捕获图像或所提取特征和/或关键点发射到用以处理的远程装置(例如，发射到视觉搜索提供商)。在装置不可经由图像处理识别的状况下，可使用另一技术(例如，有声确认)确认选择。另外或替代地，可结合关于待控制范围内的装置(例如，可用于蓝牙配对的装置)的信息和/或历史数据(例如，指示用户想要控制特定装置的机率、给定用户的历史)使用图像，确认选择或解析所捕获图像中的不明确性。用于执行步骤640的装置可包含硬件与软件的任何组合，分别包含图3和4的处理模块320和430。
在步骤650处，一旦已识别装置，用户可任选地收到通知，从而向用户指示成功捕获图像。此通知可包含噪音或其它音频指示符(例如，哔哔声、说出装置名称的语音((例如)使用图3和4的扬声器/麦克风模块340)等)、触觉反馈、图像(如果用户具有头部安装式或其它显示器)和其类似者。另外或替代地，一旦装置准备好受到控制，用户可接收通知。
在步骤660处，系统以通信方式与所识别装置连接。可使用无线通信接口(例如，图3和4的收发器模块350)进行连接。取决于所使用的技术类型，用于连接的方法可发生变化。经由(例如)蓝牙进行连接可涉及从可用蓝牙装置连接的列表选择对应于步骤640处所识别装置的连接。系统可接着使用蓝牙配对协议与所识别装置以通信方式连接。其它无线技术可涉及不同的连接方法。可分别使用(例如)图3和4的收发器模块350和/或420进行连接。
任选地，在步骤670处，可接收用于控制装置的命令。举例来说，取决于待控制的所识别装置，可将不同手势映射到不同功能(例如，顺时针旋转手可增加无线电的音量、改变电视的频道、上翻屏所显示列表等)。取决于装置的功能性，装置自身可提供命令，可以使得将手势映射到命令的XML或另一格式提供命令。另外或替代地，可从与所识别装置分离的提供与装置通信和控制装置必需的命令、协议和/或其它信息的数据库检索命令。可分别使用(例如)图3和4的收发器模块350和/或420接收命令。
应了解，图5和6中所说明的特定步骤分别提供基于手部手势控制一或多个远程装置和指定用于控制的一或多个远程装置的实例方法500、600。替代实施例可包含对所展示实施例的更改。取决于特定应用，可添加、移除、同时执行、组合和/或以其它方式更改额外特征。所属领域的一般技术人员将认识到许多变化、修改和替代方案。
图7说明可实施图3和4的系统的组件中的一些或所有的计算机系统700的实施例。另外，计算机系统700可表示本申请案中所论述的远程装置的组件中的至少一些。图7提供可执行由各种其它实施例所提供的方法的部分的计算机系统700的一个实施例的示意性说明。应注意，图7仅意味提供各种组件的一般化说明，可按需要利用所述组件中的任一者或所有。因此，图7大致说明可如何以相对分离或相对较集成方式实施个别系统元件。
计算机系统700展示为包括可经由总线705电耦接的硬件元件(或按需要可以其它方式进行通信)。硬件元件可包含一个或多个处理器710，包含(但不限于)一或多个通用处理器和/或一或多个专用处理器(例如，数字信号处理芯片、图形加速处理器和/或其类似者)；一或多个输入装置715，其可包含(但不限于)鼠标、键盘、压力传感器、EMG传感器、相机、麦克风和/或其类似者；和一或多个输出装置720，其可包含(但不限于)显示装置、打印机、扬声器和/或其类似者。
计算机系统700可进一步包含一或多个非暂时性存储装置725(和/或与之通信)，所述非暂时性存储装置725可包括(但不限于)本地和/或网络可访问存储装置，和/或可包含(但不限于)磁盘驱动器、驱动阵列、光学存储装置、可编程且可快闪更新的固态存储装置(例如随机存取存储器(“RAM”)和/或只读存储器(“ROM”))和/或其类似者。所述存储装置可经配置以实施任何适当的数据存储装置，包含(但不限于)各种文件系统、数据库结构和/或其类似者。
计算机系统700还可包含通信子系统730，其可包含(但不限于)调制解调器、网卡(无线或有线)、红外线通信装置、无线通信装置和/或芯片组(例如，BluetoothTM装置、802.11装置、WiFi装置、WiMax装置、蜂窝式通信设备等)和/或其类似者。通信子系统730可准许与网络(例如，作为一个实例，下文所描述的网络)、其它计算机系统和/或本文中所描述的任何其它装置交换数据。在许多实施例中，计算机系统700将进一步包括工作存储器735，其可包含RAM或ROM装置，如上文所描述。
计算机系统700还可包括展示为当前位于工作存储器735内的软件元件，所述软件元件包含操作系统740、装置驱动程序、可执行库和/或例如一或多个应用程序745的其它代码，所述应用程序745可包括由各种实施例所提供的计算机程序，和/或可经设计以实施由其它实施例所提供的方法和/或配置由其它实施例所提供的系统，如本文中所描述。仅仅作为实例，关于上文所论述的一或多种方法所描述的一或多个程序可实施为可由计算机(和/或计算机内的处理器)执行的代码和/或指令；接着，在一方面中，此代码和/或指令可用以配置和/或调适通用计算机(或其它装置)以根据所描述方法执行一或多个操作。
可将一组这些指令和/或代码存储于非暂时性计算机可读存储媒体上，例如上文所描述的一或多个非暂时性存储装置725上。在一些状况下，存储媒体可并入于计算机系统(例如，计算机系统700)内。在其它实施例中，存储媒体可与计算机系统分离(例如可装卸式媒体，例如光盘)，和/或配置于安装包中，使得存储媒体可用以编程、配置和/或调适其上存储有指令/代码的通用计算机。这些指令可采取可由计算机系统700执行的可执行代码形式，和/或可采取源代码和/或可安装代码的形式，其在于计算机系统700上编译和/或安装(例如，使用多种一般可用的编译程序、安装程序、压缩/解压缩公用程序等中的任一者)之后，接着采取可执行代码的形式。
所属领域的技术人员将显而易见，可根据特定要求作出大量变化。举例来说，还可使用定制硬件，和/或可将特定元件实施于硬件、软件(包含便携式软件，例如小程序等)或两者中。另外，可利用到其它计算装置(例如，网络输入/输出装置)的连接。
如上文所提及，在一个方面中，一些实施例可利用计算机系统(例如，计算机系统700)以执行根据本发明的各种实施例的方法。根据一组实施例，响应于处理器710执行工作存储器735中所含有的一或多个指令的一或多个序列(其可并入于操作系统740和/或其它代码(例如，应用程序745)中)，由计算机系统700执行所述方法的程序中的一些或所有。可将所述指令从另一计算机可读媒体(例如，非暂时性存储装置725中的一或多者)读取到工作存储器735中。仅仅作为实例，执行工作存储器735中所含有的指令序列可使得一或多个处理器710执行本文中所描述方法的一或多个程序。
如本文中所使用，术语“机器可读媒体”和“计算机可读媒体”是指参与到提供导致机器以特定方式进行操作的数据中的任何媒体。在使用计算机系统700所实施的实施例中，各种计算机可读媒体可参与将指令/代码提供到一或多个处理器710以用于执行，和/或可用于存储和/或载运所述指令/代码。在许多实施方案中，计算机可读媒体为物理和/或有形存储媒体。此媒体可采取非易失性媒体或易失性媒体的形式。非易失性媒体包含例如光盘和/或磁盘，诸如一或多个非暂时性存储装置725。易失性媒体包含(但不限于)例如工作存储器735的动态存储器。
常见形式的物理和/或有形计算机可读媒体包含例如软盘、柔性磁盘、硬盘、磁带，或任何其它磁性媒体、CD-ROM、任何其它光学媒体、打孔卡、纸带、具有孔图案的任何其它物理媒体、RAM、PROM、EPROM、快闪EPROM、任何其它存储器芯片或盒带，或可供计算机读取指令和/或代码的任何其它媒体。
在将一或多个指令的一或多个序列载运到一或多个处理器710以用于执行时可涉及各种形式的计算机可读媒体。仅仅作为实例，可将指令初始地载运于远程计算机的磁盘和/或光学光盘上。远程计算机可将指令载入到其动态存储器中，并经由发射媒体将指令作为信号进行发送以由计算机系统700接收和/或执行。
通信子系统730(和/或其组件)大体上将接收信号，且总线705可接着将信号(和/或由信号所载运的数据、指令等)载运到一或多个处理器710从其检索并执行指令的工作存储器735。可在由一或多个处理器710执行之前抑或之后，将由工作存储器735所接收的指令任选地存储于非暂时性存储装置725上。
如先前所指示，计算机系统700的元件可分别反映于图3和4的系统300和系统400内。举例来说，一或多个处理器710可执行图3和4的处理模块320和430的处理功能中的一些或所有。同样地，通信子系统730可包含收发器模块350、410和/或420。具体来说，收发器模块350、410和/或420可包含通信子系统730的一或多个接收器和/或发射器，所述子系统可经配置以使用多种有线和无线技术中的任一者进行通信。类似地，一或多个输入装置715可包含运动传感器310、压力传感器330、扬声器/麦克风模块340和/或相机370。另外或替代地，运动传感器310、压力传感器330、扬声器/麦克风模块340、和/或相机370可经由通信子系统730与计算机系统700通信。
上文所论述的方法、系统和装置为实例。各种配置可按需要省略、替代或添加各种程序或组件。尽管实施例可描述指定和/或控制“远程”装置，但所述装置可接近用户。对于不同情况和情境，用户与装置之间的距离可发生变化。举例来说，在替代配置中，所述方法可以不同于所描述的顺来执行，和/或可添加、省略和/或组合各种阶段。而且，可以各种其它配置组合关于特定配置所描述的特征。可以类似方式组合配置的不同方面和元件。而且，技术发展，且因此元件中的许多为实例且并不限制本发明或权利要求的范围。
在描述中给出特定细节以提供对实例配置(包含实施方案)的透彻理解。然而，可在并无这些特定细节的情况下实践配置。举例来说，已在并无不必要细节的情况下展示熟知电路、过程、算法、结构和技术以便避免混淆配置。这个描述仅提供实例配置，且并不限制权利要求的范围、适用性或配置。实际上，配置的之前描述将向所属领域的技术人员提供授权描述以用于实施所描述的技术。在不脱离本发明的精神或范围的情况下可对元件的功能和配置作出各种改变。
而且，可将配置描述为描绘为流程图或框图的方法。尽管每一流程图或框图可将操作描述为顺序方法，但许多操作可并行地或同时执行。另外，可重新排列操作顺序。方法可具有不包含在图式中的额外步骤。此外，可由硬件、软件、固件、中间件、微码、硬件描述语言或其任何组合实施方法的实例。当以软件、固件、中间件或微码实施时，用以执行必要任务的程序代码或代码段可存储在例如存储媒体的非暂时性计算机可读媒体中。处理器可执行所描述任务。
如本文中所使用，术语“和”以及“或”可包含多种含义，这些含义预期至少部分取决于使用所述术语的上下文。通常，“或”如果用于相关联列表(例如A、B或C)，那么其打算意味A、B和C，这里是在包含性意义上使用，以及A、B或C，这里是在排他性意义上使用。另外，如本文中所使用的术语“一或多个”可用于以单数形式描述任何特征、结构或特性，或可用于描述特征、结构或特性的一些组合。然而，应注意这仅仅为说明性实例，且所主张的主题并不限于这个实例。此外，如果术语“中的至少一者”用以相关联列表(例如A、B或C)，那么可将其解释为意味A、B和/或C中的任何组合，例如A、AB、AA、AAB、AABBCCC等。
已描述若干实例配置，可在不脱离本发明的精神的情况下使用各种修改、替代构造和等效物。举例来说，上文元件可为较大系统的组件，其中其它规则可优先于本发明的应用或以其它方式修改本发明的应用。而且，可在考虑上文元件之前、期间或之后进行数个步骤。因此，上文描述并不约束权利要求的范围。

Claims (42)

1.一种用于基于手部手势控制装置的系统，所述系统包括：
压敏传感器，其经配置以检测用户身体的一部分的表面形态并将压力数据提供到处理模块；
所述处理模块，其经配置以基于所述压力数据识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势；和
发射器，其经配置以基于所述所识别手势将信息发射到所述装置。
2.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中：
所述用户的所述身体的所述部分为所述用户的手的背部；且
所述压敏传感器经配置以检测受到掌骨位置影响的所述手的所述背部的所述表面形态。
3.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中：
所述用户的所述身体的所述部分为所述用户的手腕；且
所述压敏传感器经配置以检测所述手腕的至少一部分的所述表面形态。
4.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其进一步包括：
运动传感器，其经配置以检测所述用户的运动并将运动数据发射到所述处理模块。
5.根据权利要求4所述的用于基于手部手势控制所述装置的系统，其中：
所述处理模块进一步经配置以使用所述运动数据识别所述手势。
6.根据权利要求4所述的用于基于手部手势控制所述装置的系统，其中所述运动传感器包括加速计或陀螺仪中的至少一者。
7.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中所述用户的所述身体的所述部分包括所述用户的前臂。
8.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其进一步包括肌电传感器。
9.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其进一步包括相机，其中所述处理模块经配置以使用由所述相机所捕获的所述装置的图像识别所述装置。
10.根据权利要求9所述的用于基于手部手势控制所述装置的系统，其中所述处理模块经配置以基于使用来自所述压敏传感器的特定压力数据所识别的特定手势致使所述相机捕获所述装置的所述图像。
11.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其进一步包括接收器，其经配置以从所述装置接收指示用于使用手部手势控制所述装置的命令的信息。
12.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其进一步包括第二压敏传感器，所述第二压敏传感器经配置以检测所述用户的所述身体的第二部分的表面形态，并将第二压力数据提供到所述处理模块，其中所述处理模块进一步经配置以使用所述第二压力数据识别所述手势。
13.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中所述所识别手势包括握紧的拳头。
14.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中所述所识别手势包括手指触摸拇指。
15.根据权利要求1所述的用于基于手部手势控制所述装置的系统，其中所述所识别手势包括屈伸手腕使得所述手向上、向下、向左或向右移动。
16.一种用于基于手势控制装置的方法，所述方法包括：
收集指示用户身体的一部分的表面形态的压力数据；
基于所述压力数据，识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势；和
基于所述所识别手势将信息发射到所述装置。
17.根据权利要求16所述的用于基于手势控制所述装置的方法，其中：
所述用户的所述身体的所述部分为所述用户的手的背部；且
所述收集包括使用压敏传感器收集所述压力数据，所述压敏传感器经配置以收集指示受到掌骨位置影响的所述手的所述背部的所述表面形态的所述压力数据。
18.根据权利要求16所述的用于基于手势控制所述装置的方法，其中：
所述用户的所述身体的所述部分为所述用户的手腕；且
所述收集包括使用压敏传感器收集所述压力数据，所述压敏传感器经配置以收集指示所述手腕的至少一部分的所述表面形态的所述压力数据。
19.根据权利要求16所述的用于基于手势控制所述装置的方法，其进一步包括检测所述用户的运动。
20.根据权利要求19所述的用于基于手势控制所述装置的方法，其中对所述手势的识别进一步是基于所述检测到的运动。
21.根据权利要求19所述的用于基于手势控制所述装置的方法，其进一步包括用加速计或陀螺仪中的至少一者检测所述用户的所述运动。
22.根据权利要求16所述的用于基于手势控制所述装置的方法，其中所述用户的所述身体的所述部分包括所述用户的前臂。
23.根据权利要求16所述的用于基于手势控制所述装置的方法，其中对所述手势的识别进一步是基于来自肌电传感器的信息。
24.根据权利要求16所述的用于基于手势控制所述装置的方法，其进一步包括用相机捕获所述装置的图像。
25.根据权利要求24所述的用于基于手势控制所述装置的方法，其中捕获所述装置的所述图像是基于使用特定压力数据所识别的特定手势。
26.根据权利要求16所述的用于基于手势控制所述装置的方法，其进一步包括从所述身体的第二部分收集第二压力数据，其中对所述手势的识别进一步是基于所述第二压力数据。
27.根据权利要求16所述的用于基于手势控制所述装置的方法，其中所述所识别手势包括握紧的拳头。
28.根据权利要求16所述的用于基于手势控制所述装置的方法，其中所述所识别手势包括手指触摸拇指。
29.根据权利要求16所述的用于基于手势控制所述装置的方法，其中所述所识别手势包括屈伸手腕使得所述手向上、向下、向左或向右移动。
30.一种其上嵌入有用于基于手势控制装置的指令的非暂时性计算机可读媒体，所述指令包含用于进行如下操作的计算机可执行代码：
收集指示用户身体的一部分的表面形态的压力数据；
基于所述压力数据，识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势；和
基于所述所识别手势将信息发射到所述装置。
31.一种用于基于手势控制装置的系统，所述系统包括：
用于收集指示用户身体的一部分的表面形态的压力数据的装置；
用于基于所述压力数据识别与所述用户的所述身体的所述部分的所述表面形态相关联的手势的装置；和
用于基于所述所识别手势将信息发射到所述装置的装置。
32.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包含用于识别与所述用户的手的背部的所述表面形态相关联的所述手势的装置。
33.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包含用于识别与所述用户的手腕相关联的所述手势的装置。
34.根据权利要求31所述的用于基于手势控制装置的系统，其进一步包括：
用于检测所述用户的运动的装置；和
用于进一步使对所述手势的所述识别基于所述检测到的运动的装置。
35.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包含用于识别与所述用户的前臂的所述表面形态相关联的所述手势的装置。
36.根据权利要求31所述的用于基于手势控制装置的系统，其包含用于进一步使对所述手势的所述识别基于来自肌电传感器的信息的装置。
37.根据权利要求31所述的用于基于手势控制装置的系统，其进一步包括用于捕获所述装置的图像的装置。
38.根据权利要求37所述的用于基于手势控制装置的系统，其进一步包括用于使对所述装置的所述图像的所述捕获基于使用特定压力数据所识别的特定手势的装置。
39.根据权利要求31所述的用于基于手势控制装置的系统，其进一步包括用于从所述身体的第二部分收集第二压力数据的装置，其中对所述手势的识别进一步是基于所述第二压力数据。
40.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包括用于识别握紧的拳头的装置。
41.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包括用于识别手指触摸拇指的装置。
42.根据权利要求31所述的用于基于手势控制装置的系统，其中所述用于识别所述手势的装置包括用于识别屈伸手腕使得所述手向上、向下、向左或向右移动的装置。
CN201380017846.XA 2012-04-09 2013-04-02 基于手势控制远程装置 Active CN104205015B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261621833P 2012-04-09 2012-04-09
US61/621,833 2012-04-09
US13/827,709 2013-03-14
US13/827,709 US9170674B2 (en) 2012-04-09 2013-03-14 Gesture-based device control using pressure-sensitive sensors
PCT/US2013/034917 WO2013154864A1 (en) 2012-04-09 2013-04-02 Control of remote device based on gestures

Publications (2)

Publication Number Publication Date
CN104205015A true CN104205015A (zh) 2014-12-10
CN104205015B CN104205015B (zh) 2018-02-02

Family

ID=49291887

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380017846.XA Active CN104205015B (zh) 2012-04-09 2013-04-02 基于手势控制远程装置

Country Status (6)

Country Link
US (1) US9170674B2 (zh)
EP (1) EP2836892B1 (zh)
JP (1) JP5977436B2 (zh)
CN (1) CN104205015B (zh)
IN (1) IN2014MN01850A (zh)
WO (1) WO2013154864A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105068658A (zh) * 2015-08-19 2015-11-18 天津先驱领域科技有限公司 一种可虚拟环境控制的人机互动装置
CN105718045A (zh) * 2014-12-19 2016-06-29 意美森公司 用于与对象进行触觉使能的交互的系统和方法
CN106155300A (zh) * 2015-04-23 2016-11-23 宁波市美灵思医疗科技有限公司 一种基于肌电流和多传感器协同作用的人机交互设备及其使用方法
WO2016202079A1 (zh) * 2015-06-16 2016-12-22 中兴通讯股份有限公司 家电设备的控制方法和装置
CN107209582A (zh) * 2014-12-16 2017-09-26 肖泉 高直观性人机界面的方法和装置
CN107728817A (zh) * 2017-11-29 2018-02-23 哈尔滨拓博科技有限公司 基于手势控制的空中鼠标控制系统
CN108983622A (zh) * 2018-07-06 2018-12-11 安徽超清科技股份有限公司 一种基于人体手势的智能家电控制系统
CN110114241A (zh) * 2017-01-26 2019-08-09 大众汽车有限公司 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具
CN110297546A (zh) * 2019-07-08 2019-10-01 合肥工业大学 一种用于采集腕部-手指动作同步信号的装置及其标注方法
CN111052047A (zh) * 2017-09-29 2020-04-21 苹果公司 用于自动手势和手指识别的静脉扫描设备
CN112269471A (zh) * 2020-11-06 2021-01-26 郭书蕾 智能腕带设备及其单手控制方法、装置、系统及存储介质
CN112739254A (zh) * 2018-09-20 2021-04-30 脸谱科技有限责任公司 增强现实系统的神经肌肉控制
US11296942B1 (en) 2021-03-11 2022-04-05 International Business Machines Corporation Relative device placement configuration
US11676311B1 (en) 2021-11-29 2023-06-13 International Business Machines Corporation Augmented reality replica of missing device interface

Families Citing this family (97)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI498771B (zh) * 2012-07-06 2015-09-01 Pixart Imaging Inc 可辨識手勢動作的眼鏡
US10528135B2 (en) 2013-01-14 2020-01-07 Ctrl-Labs Corporation Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
EP2959394B1 (en) * 2013-02-22 2021-05-12 Facebook Technologies, LLC. Methods and devices that combine muscle activity sensor signals and inertial sensor signals for gesture-based control
WO2014186370A1 (en) 2013-05-13 2014-11-20 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices that accommodate different user forms
KR102167384B1 (ko) * 2013-06-24 2020-10-19 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US11426123B2 (en) 2013-08-16 2022-08-30 Meta Platforms Technologies, Llc Systems, articles and methods for signal routing in wearable electronic devices that detect muscle activity of a user using a set of discrete and separately enclosed pod structures
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US10188309B2 (en) 2013-11-27 2019-01-29 North Inc. Systems, articles, and methods for electromyography sensors
US20150124566A1 (en) * 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
CA2921954A1 (en) * 2013-08-23 2015-02-26 Thalmic Labs Inc. Systems, articles, and methods for human-electronics interfaces
US9788789B2 (en) 2013-08-30 2017-10-17 Thalmic Labs Inc. Systems, articles, and methods for stretchable printed circuit boards
KR102136836B1 (ko) * 2013-09-09 2020-08-13 삼성전자주식회사 생체 신호들을 이용하여 사용자 인증을 수행하는 착용형 기기 및 그 착용형 기기의 인증 방법
CN103777752A (zh) * 2013-11-02 2014-05-07 上海威璞电子科技有限公司 基于手臂肌肉电流检测和运动传感器的手势识别设备
US20150145653A1 (en) * 2013-11-25 2015-05-28 Invensense, Inc. Device control using a wearable device
CN104679229A (zh) * 2013-11-27 2015-06-03 中国移动通信集团公司 一种手势识别方法和装置
US20150153854A1 (en) * 2013-12-03 2015-06-04 Lenovo (Singapore) Pte. Ltd. Extension of wearable information handling device user interface
KR20150065336A (ko) * 2013-12-05 2015-06-15 삼성전자주식회사 전자 장치의 제스처 인식 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
US20160313806A1 (en) * 2013-12-06 2016-10-27 Nokia Technologies Oy Apparatus and method for user input
DE102013226682A1 (de) * 2013-12-19 2015-06-25 Zf Friedrichshafen Ag Armbandsensor und Verfahren zum Betreiben eines Armbandsensors
US10585484B2 (en) 2013-12-30 2020-03-10 Samsung Electronics Co., Ltd. Apparatus, system, and method for transferring data from a terminal to an electromyography (EMG) device
CN106102504A (zh) 2014-02-14 2016-11-09 赛尔米克实验室公司 用于弹性电力缆线的系统、制品和方法以及采用弹性电力缆线的可佩戴电子装置
DE102014204889A1 (de) * 2014-03-17 2015-09-17 Zumtobel Lighting Gmbh System zum Ansteuern von Verbrauchern einer Haushaltsleittechnik mittels Muskelimpulsen wenigstens eines Benutzers und entsprechendes Verfahren
CN103853333A (zh) * 2014-03-21 2014-06-11 上海威璞电子科技有限公司 一种手势控制玩具的方案
US10199008B2 (en) * 2014-03-27 2019-02-05 North Inc. Systems, devices, and methods for wearable electronic devices as state machines
US20150279131A1 (en) * 2014-03-28 2015-10-01 Denso International America, Inc. Key fob and smartdevice gestures for vehicle functions
US9542027B2 (en) 2014-04-16 2017-01-10 At&T Intellectual Property I, L.P. Pressure-based input method for user devices
US20150325202A1 (en) * 2014-05-07 2015-11-12 Thalmic Labs Inc. Systems, devices, and methods for wearable computers with heads-up displays
CN105094301A (zh) * 2014-05-16 2015-11-25 中兴通讯股份有限公司 一种控制方法、装置及电子设备
US10782657B2 (en) * 2014-05-27 2020-09-22 Ultrahaptics IP Two Limited Systems and methods of gestural interaction in a pervasive computing environment
US9575560B2 (en) 2014-06-03 2017-02-21 Google Inc. Radar-based gesture-recognition through a wearable device
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
US10362263B2 (en) 2014-07-02 2019-07-23 Amer Sports Digital Services Oy System and method for remote activation of a storage operation of pictorial information
FI20145643A (fi) * 2014-07-02 2016-01-03 Suunto Oy Menetelmä, järjestelmä, kannettava digitaalinen laite ja tallennuslaite kuvainformaation tallentamisen etäaktivointia varten
JP6447917B2 (ja) * 2014-08-06 2019-01-09 パナソニックＩｐマネジメント株式会社 手首装着型の入力装置
US9811164B2 (en) 2014-08-07 2017-11-07 Google Inc. Radar-based gesture sensing and data transmission
US9389733B2 (en) * 2014-08-18 2016-07-12 Sony Corporation Modal body touch using ultrasound
US9778749B2 (en) 2014-08-22 2017-10-03 Google Inc. Occluded gesture recognition
US11169988B2 (en) 2014-08-22 2021-11-09 Google Llc Radar recognition-aided search
US9600080B2 (en) 2014-10-02 2017-03-21 Google Inc. Non-line-of-sight radar-based gesture recognition
US9886084B2 (en) * 2014-11-11 2018-02-06 Intel Corporation User input via elastic deformation of a material
US9807221B2 (en) 2014-11-28 2017-10-31 Thalmic Labs Inc. Systems, devices, and methods effected in response to establishing and/or terminating a physical communications link
US9823764B2 (en) * 2014-12-03 2017-11-21 Microsoft Technology Licensing, Llc Pointer projection for natural user input
CN107003142A (zh) * 2014-12-05 2017-08-01 奥迪股份公司 车辆特别是客运车辆的操作装置及其操作方法
JP6516464B2 (ja) * 2014-12-15 2019-05-22 Kddi株式会社 ウェアラブル検索システム
US9612661B2 (en) 2015-01-02 2017-04-04 Wearable Devices Ltd. Closed loop feedback interface for wearable devices
US9720515B2 (en) * 2015-01-02 2017-08-01 Wearable Devices Ltd. Method and apparatus for a gesture controlled interface for wearable devices
US10362944B2 (en) 2015-01-19 2019-07-30 Samsung Electronics Company, Ltd. Optical detection and analysis of internal body tissues
JP6391486B2 (ja) * 2015-01-30 2018-09-19 アルパイン株式会社 情報処理装置、操作制御システムおよび操作制御方法
US9946395B2 (en) * 2015-02-16 2018-04-17 Samsung Electronics Co., Ltd. User interface method and apparatus
CN104699244B (zh) * 2015-02-26 2018-07-06 小米科技有限责任公司 智能设备的操控方法及装置
JP6558717B2 (ja) * 2015-03-12 2019-08-14 株式会社ニコン 入力機器、入力方法及びコンピュータプログラム
CN106034161A (zh) * 2015-03-20 2016-10-19 杭州萤石网络有限公司 数据采集设备、数据采集设备之间共享数据的方法及系统
US10016162B1 (en) 2015-03-23 2018-07-10 Google Llc In-ear health monitoring
US20160282947A1 (en) * 2015-03-26 2016-09-29 Lenovo (Singapore) Pte. Ltd. Controlling a wearable device using gestures
US10078435B2 (en) 2015-04-24 2018-09-18 Thalmic Labs Inc. Systems, methods, and computer program products for interacting with electronically displayed presentation materials
CN106073126B (zh) * 2015-04-27 2018-05-18 陈明洙 Led安全背包
KR102328589B1 (ko) 2015-04-30 2021-11-17 구글 엘엘씨 제스처 추적 및 인식을 위한 rf―기반 마이크로―모션 추적
US10088908B1 (en) 2015-05-27 2018-10-02 Google Llc Gesture detection and interactions
US10409443B2 (en) * 2015-06-24 2019-09-10 Microsoft Technology Licensing, Llc Contextual cursor display based on hand tracking
CN105182815A (zh) * 2015-08-11 2015-12-23 小米科技有限责任公司 设备控制方法及装置
US10186086B2 (en) 2015-09-02 2019-01-22 Microsoft Technology Licensing, Llc Augmented reality control of computing device
US10817065B1 (en) 2015-10-06 2020-10-27 Google Llc Gesture recognition using multiple antenna
KR102570068B1 (ko) 2015-11-20 2023-08-23 삼성전자주식회사 동작 인식 방법, 동작 인식 장치 및 웨어러블 장치
US10782790B2 (en) 2015-12-22 2020-09-22 Intel Corporation System and method to collect gesture input through wrist tendon and muscle sensing
CN105759975B (zh) * 2016-03-11 2019-04-19 深圳还是威健康科技有限公司 一种智能手环丢失提示方法以及装置
CN105955464A (zh) * 2016-04-26 2016-09-21 苏州冰格智能科技有限公司 一种基于虚拟现实的输入装置
US10492302B2 (en) 2016-05-03 2019-11-26 Google Llc Connecting an electronic component to an interactive textile
US10638316B2 (en) 2016-05-25 2020-04-28 Intel Corporation Wearable computer apparatus with same hand user authentication
DE102016212240A1 (de) * 2016-07-05 2018-01-11 Siemens Aktiengesellschaft Verfahren zur Interaktion eines Bedieners mit einem Modell eines technischen Systems
GB2552219A (en) * 2016-07-15 2018-01-17 Sony Interactive Entertainment Inc Wearable input device
US10296097B2 (en) * 2016-07-15 2019-05-21 International Business Machines Corporation Controlling a computer system using epidermal electronic devices
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
CN110300542A (zh) 2016-07-25 2019-10-01 开创拉布斯公司 使用可穿戴的自动传感器预测肌肉骨骼位置信息的方法和装置
JP6776067B2 (ja) * 2016-09-05 2020-10-28 東芝テック株式会社 操作入力装置及びプログラム
US10070799B2 (en) 2016-12-02 2018-09-11 Pison Technology, Inc. Detecting and using body tissue electrical signals
KR101819158B1 (ko) * 2016-12-19 2018-01-16 강윤 힘줄에 의한 압력 센서의 연속적인 출력 값에 따른 로봇 관절의 동작 제어 시스템
JP2018124651A (ja) 2017-01-30 2018-08-09 セイコーエプソン株式会社 表示システム
EP3697297A4 (en) 2017-10-19 2020-12-16 Facebook Technologies, Inc. SYSTEMS AND METHODS FOR IDENTIFYING BIOLOGICAL STRUCTURES ASSOCIATED WITH NEUROMUSCULAR SOURCE SIGNALS
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
EP3743790A4 (en) * 2018-01-25 2021-03-17 Facebook Technologies, Inc. RECONSTRUCTION OF HAND STATE ON THE BASIS OF MULTIPLE ENTRIES
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
US11907423B2 (en) * 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
JP7462610B2 (ja) * 2018-04-19 2024-04-05 ペイマン、セルバティー 身体の少なくとも二つの部分のトポグラフィを推定する方法およびシステム
US10592001B2 (en) 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
WO2020033110A1 (en) * 2018-08-05 2020-02-13 Pison Technology, Inc. User interface control of responsive devices
US11099647B2 (en) * 2018-08-05 2021-08-24 Pison Technology, Inc. User interface control of responsive devices
US10905350B2 (en) 2018-08-31 2021-02-02 Facebook Technologies, Llc Camera-guided interpretation of neuromuscular signals
WO2020061451A1 (en) 2018-09-20 2020-03-26 Ctrl-Labs Corporation Neuromuscular text entry, writing and drawing in augmented reality systems
CN109460150A (zh) * 2018-11-12 2019-03-12 北京特种机械研究所 一种虚拟现实人机交互系统及方法
US11797087B2 (en) 2018-11-27 2023-10-24 Meta Platforms Technologies, Llc Methods and apparatus for autocalibration of a wearable electrode sensor system
WO2020195172A1 (ja) * 2019-03-27 2020-10-01 ソニー株式会社 ウェアラブル装置、情報処理ユニット及び情報処理方法
JP2019185821A (ja) * 2019-07-19 2019-10-24 株式会社ニコン 入力機器、入力方法及びコンピュータプログラム
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6515669B1 (en) * 1998-10-23 2003-02-04 Olympus Optical Co., Ltd. Operation input device applied to three-dimensional input device
US20050132290A1 (en) * 2003-10-17 2005-06-16 Peter Buchner Transmitting information to a user's body
WO2006054163A2 (en) * 2004-11-18 2006-05-26 Fabio Salsedo Portable haptic interface
US20090231269A1 (en) * 2005-06-16 2009-09-17 Hiromu Ueshima Input device, simulated experience method and entertainment system
WO2011055326A1 (en) * 2009-11-04 2011-05-12 Igal Firsov Universal input/output human user interface

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9610568D0 (en) 1996-05-18 1996-07-31 Univ Sheffield Goniometric glove and system
US6244873B1 (en) * 1998-10-16 2001-06-12 At&T Corp. Wireless myoelectric control apparatus and methods
JP4189709B2 (ja) * 1999-05-13 2008-12-03 ソニー株式会社 モーションキャプチャー装置
JP2002358149A (ja) * 2001-06-01 2002-12-13 Sony Corp ユーザ入力装置
US20020186200A1 (en) * 2001-06-08 2002-12-12 David Green Method and apparatus for human interface with a computer
US20040125076A1 (en) * 2001-06-08 2004-07-01 David Green Method and apparatus for human interface with a computer
US20040063480A1 (en) * 2002-09-30 2004-04-01 Xiaoling Wang Apparatus and a method for more realistic interactive video games on computers or similar devices
KR100680023B1 (ko) 2004-12-06 2007-02-07 한국전자통신연구원 생체신호를 이용한 착용형 휴대폰 입력 장치 및 그 제어방법
US8280503B2 (en) 2008-10-27 2012-10-02 Michael Linderman EMG measured during controlled hand movement for biometric analysis, medical diagnosis and related analysis
US20080136775A1 (en) * 2006-12-08 2008-06-12 Conant Carson V Virtual input device for computing
JP5207513B2 (ja) * 2007-08-02 2013-06-12 公立大学法人首都大学東京 制御機器操作ジェスチャ認識装置、制御機器操作ジェスチャ認識システムおよび制御機器操作ジェスチャ認識プログラム
US20090054067A1 (en) * 2007-08-23 2009-02-26 Telefonaktiebolaget Lm Ericsson (Publ) System and method for gesture-based command and control of targets in wireless network
KR20100072377A (ko) 2007-11-19 2010-06-30 노키아 코포레이션 입력 장치, 시스템 및 방법
US8620146B1 (en) * 2008-03-28 2013-12-31 Theresa Coleman Picture-in-picture video system for virtual exercise, instruction and entertainment
US8132468B2 (en) 2008-05-29 2012-03-13 Zoran Radivojevic Flexural deformation sensing device and a user interface using the same
US8447704B2 (en) 2008-06-26 2013-05-21 Microsoft Corporation Recognizing gestures from forearm EMG signals
US9037530B2 (en) * 2008-06-26 2015-05-19 Microsoft Technology Licensing, Llc Wearable electromyography-based human-computer interface
US8170656B2 (en) 2008-06-26 2012-05-01 Microsoft Corporation Wearable electromyography-based controllers for human-computer interface
US20110107216A1 (en) * 2009-11-03 2011-05-05 Qualcomm Incorporated Gesture-based user interface
KR101694159B1 (ko) * 2010-04-21 2017-01-09 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
JP5743416B2 (ja) * 2010-03-29 2015-07-01 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US9009594B2 (en) * 2010-06-10 2015-04-14 Microsoft Technology Licensing, Llc Content gestures
KR101413539B1 (ko) * 2010-11-22 2014-07-02 한국전자통신연구원 자세인식을 이용하는 제어신호 입력장치 및 제어신호 입력방법
JP5653206B2 (ja) * 2010-12-27 2015-01-14 日立マクセル株式会社 映像処理装置
TWI454966B (zh) * 2012-04-24 2014-10-01 Wistron Corp 手勢控制方法及手勢控制裝置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6515669B1 (en) * 1998-10-23 2003-02-04 Olympus Optical Co., Ltd. Operation input device applied to three-dimensional input device
US20050132290A1 (en) * 2003-10-17 2005-06-16 Peter Buchner Transmitting information to a user's body
WO2006054163A2 (en) * 2004-11-18 2006-05-26 Fabio Salsedo Portable haptic interface
US20090231269A1 (en) * 2005-06-16 2009-09-17 Hiromu Ueshima Input device, simulated experience method and entertainment system
WO2011055326A1 (en) * 2009-11-04 2011-05-12 Igal Firsov Universal input/output human user interface

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107209582A (zh) * 2014-12-16 2017-09-26 肖泉 高直观性人机界面的方法和装置
CN105718045A (zh) * 2014-12-19 2016-06-29 意美森公司 用于与对象进行触觉使能的交互的系统和方法
CN106155300A (zh) * 2015-04-23 2016-11-23 宁波市美灵思医疗科技有限公司 一种基于肌电流和多传感器协同作用的人机交互设备及其使用方法
WO2016202079A1 (zh) * 2015-06-16 2016-12-22 中兴通讯股份有限公司 家电设备的控制方法和装置
CN105068658A (zh) * 2015-08-19 2015-11-18 天津先驱领域科技有限公司 一种可虚拟环境控制的人机互动装置
CN110114241A (zh) * 2017-01-26 2019-08-09 大众汽车有限公司 用于运行操作系统的方法、操作系统和具有操作系统的交通运输工具
CN111052047A (zh) * 2017-09-29 2020-04-21 苹果公司 用于自动手势和手指识别的静脉扫描设备
CN111052047B (zh) * 2017-09-29 2022-04-19 苹果公司 用于自动手势和手指识别的静脉扫描设备
CN107728817A (zh) * 2017-11-29 2018-02-23 哈尔滨拓博科技有限公司 基于手势控制的空中鼠标控制系统
CN108983622A (zh) * 2018-07-06 2018-12-11 安徽超清科技股份有限公司 一种基于人体手势的智能家电控制系统
CN112739254A (zh) * 2018-09-20 2021-04-30 脸谱科技有限责任公司 增强现实系统的神经肌肉控制
CN110297546A (zh) * 2019-07-08 2019-10-01 合肥工业大学 一种用于采集腕部-手指动作同步信号的装置及其标注方法
CN110297546B (zh) * 2019-07-08 2022-05-03 合肥工业大学 一种用于采集腕部-手指动作同步信号的装置及其标注方法
CN112269471A (zh) * 2020-11-06 2021-01-26 郭书蕾 智能腕带设备及其单手控制方法、装置、系统及存储介质
CN112269471B (zh) * 2020-11-06 2022-05-13 朴淳技术(深圳)有限公司 智能腕带设备及其单手控制方法、装置、系统及存储介质
US11296942B1 (en) 2021-03-11 2022-04-05 International Business Machines Corporation Relative device placement configuration
US11676311B1 (en) 2021-11-29 2023-06-13 International Business Machines Corporation Augmented reality replica of missing device interface

Also Published As

Publication number Publication date
US20130265229A1 (en) 2013-10-10
US9170674B2 (en) 2015-10-27
IN2014MN01850A (zh) 2015-07-03
EP2836892A1 (en) 2015-02-18
WO2013154864A1 (en) 2013-10-17
EP2836892B1 (en) 2019-08-21
CN104205015B (zh) 2018-02-02
JP2015512550A (ja) 2015-04-27
JP5977436B2 (ja) 2016-08-24

Similar Documents

Publication Publication Date Title
CN104205015A (zh) 基于手势控制远程装置
US11009951B2 (en) Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
US11771147B2 (en) Apparel with pressure sensor control
KR101793566B1 (ko) 원격 제어기, 정보 처리 방법 및 시스템
KR102170321B1 (ko) 파지된 물체를 이용한 모션을 인식하는 장치 및 방법, 시스템
WO2016076376A1 (ja) ウェアラブル装置
US10952667B2 (en) Device and method of controlling wearable device
US20160299570A1 (en) Wristband device input using wrist movement
US9639164B2 (en) Gesture input method
US20120068925A1 (en) System and method for gesture based control
CN106164808A (zh) 用于戒指计算设备的设备和方法
CA2902045A1 (en) Methods and devices that combine muscle activity sensor signals and inertial sensor signals for gesture-based control
KR20200031133A (ko) 자동 제스처 및 손가락 인식을 위한 정맥 스캐닝 디바이스
KR20150065336A (ko) 전자 장치의 제스처 인식 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
KR101724115B1 (ko) 피드백을 제공하기 위한 방법, 디바이스, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
JP2012123624A (ja) 情報入力装置および情報入力方法
US20190384996A1 (en) Stylus pen, electronic device, and digital copy generating method
AU2013403419A1 (en) Wristband device input using wrist movement

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant