CN103501867B - 经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别 - Google Patents

经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别 Download PDF

Info

Publication number
CN103501867B
CN103501867B CN201280021721.XA CN201280021721A CN103501867B CN 103501867 B CN103501867 B CN 103501867B CN 201280021721 A CN201280021721 A CN 201280021721A CN 103501867 B CN103501867 B CN 103501867B
Authority
CN
China
Prior art keywords
ranging information
sensor
moves
movements
processing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201280021721.XA
Other languages
English (en)
Other versions
CN103501867A (zh
Inventor
A·G·普萨德
M·R·斯托奇
A·J·普伦泰斯
G·约瑟夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN103501867A publication Critical patent/CN103501867A/zh
Application granted granted Critical
Publication of CN103501867B publication Critical patent/CN103501867B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • E02F9/205Remotely operated machines, e.g. unmanned vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/23Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A63F13/235Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/24Constructional details thereof, e.g. game controllers with detachable joystick handles
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66CCRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
    • B66C13/00Other constructional features or details
    • B66C13/18Control systems or devices
    • B66C13/40Applications of devices for transmitting control pulses; Applications of remote control devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1025Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection
    • A63F2300/1031Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection using a wireless connection, e.g. Bluetooth, infrared connections
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1043Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being characterized by constructional details
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • G08C2201/32Remote control based on movements, attitude of remote control device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Cardiology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Biophysics (AREA)
  • Automation & Control Theory (AREA)
  • Structural Engineering (AREA)
  • Civil Engineering (AREA)
  • Mining & Mineral Resources (AREA)
  • User Interface Of Digital Computer (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)

Abstract

一种用于通过第二对象来远程操作第一对象的装置,该装置包括被配置成置于第二对象上并获得测距信息的一个或多个传感器;以及处理系统,该处理系统被配置成根据测距信息确定第二对象的一个或多个移动;并且生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号。

Description

经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别
优先权要求
本申请要求2011年5月4日提交的题为“GESTURE RECOGNITION VIAAN AD-HOC PROXIMITY SENSOR MESH FOR REMOTELY CONTROLLINGOBJECTS(经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别)”的美国临时专利申请序列号61/482,241的权益。上述申请的全体内容通过引用被包括于此。
背景技术
领域
本文中所阐述的公开的某些方面一般涉及运动捕捉,并且更具体地涉及经由自组织邻近度传感器网格的用于对车辆进行远程控制的姿势识别。
背景
身体跟踪系统已在两个不同方向上进行。第一,专业等级的“运动捕捉”系统是可用的,其能以高保真度捕捉行动者、运动员、玩家等的运动以供例如电影或游戏工作室使用。这些系统通常是高成本的,由此不适于消费者级别的应用。第二,消费者级别游戏控制器近来已从基于按钮或机械开关进展到基于玩家的移动检测。由于这些是消费者产品,因此该技术成本低很多,并且一般而言,在性能质量上也低很多。举例而言,在Nintendo系统中,低成本惯性传感器可检测被用来控制玩游戏的手部运动。关于这种类型的游戏控制的准确度的问题已驱使了对基于相机的运动捕捉的使用的增加。例如,Sony移动系统能使用相机来跟踪手持式游戏控制器上的球形特征;该输入可与惯性传感器数据相结合来检测运动。此外,Microsoft系统能够完全移除控制器并且能使用传统相机和深度检测相机的组合来单独利用相机检测身体运动。
存在与当前运动捕捉系统有关的问题的若干领域。第一,这些系统遭受到限制可被检测到的运动类型且限制游戏类型和可能的用户交互的性能问题。例如,相机系统仅对相机视野中、且不被对象或人阻挡的事物工作。第二,相机扩增系统被约束为在可以设置和安装静止相机的环境(在起居室和书房中最常见)中进行操作。此外,用于人体运动捕获的当前相机系统既不是可缩放的,也不能够在室外环境中高效地使用,这是因为若干限制因素,包括但不限于,遮挡、频率干扰、以及天气/照明条件。此外,用于操纵三维(3D)对象或控制车辆的较大二维(2D)触摸显示器的使用在不使用人的姿势识别的情况下并不是高度有效和直观的。因此,期望技术进步以使得身体跟踪性能有所改善并使得这些系统能够移动到用户想要到的任何地方,不论这些系统被用于商业应用还是消费者应用。示例商业应用包括用于各种各样环境中的姿势识别的准确运动捕捉。示例消费者应用包括一个或多个玩家之间的移动游戏,以及运动性能跟踪和训练,不论是在室外还是在体育馆中。此外,存在更多移动身体跟踪的潜在应用,这些应用在此类跟踪技术以合理价格和充分性能等级可用的情况下可能显现出来。
概述
在本公开的一个方面,一种用于通过第二对象来远程操作第一对象的装置包括被配置成置于第二对象上并获得测距信息的一个或多个传感器;以及处理系统。该处理系统被配置成根据测距信息确定第二对象的一个或多个移动,并生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号。
在本公开的另一方面,一种用于通过第二对象来远程操作第一对象的设备包括被配置成置于第二对象上并获得测距信息的一个或多个感测装置;用于根据测距信息确定第二对象的一个或多个移动的装置;以及用于生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号的装置。
在本公开的又一方面,一种用于通过第二对象来远程操作第一对象的方法包括经由被配置成置于第二对象上的一个或多个传感器来获得测距信息;根据测距信息确定第二对象的一个或多个移动;以及生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号。
在本公开的又一方面,公开了一种用于通过第二对象来远程操作第一对象的计算机程序产品,该计算机程序产品包括具有用于以下操作的可执行指令的计算机可读介质:经由被配置成置于第二对象上的一个或多个传感器来获得测距信息;根据测距信息确定第二对象的一个或多个移动;以及生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号。
在本公开的又一方面,一种用于通过第二对象来远程操作第一对象的远程控制系统包括被配置成置于第二对象上并获得测距信息的一个或多个传感器;至少一个天线;以及处理系统。该处理系统被配置成根据测距信息确定第二对象的一个或多个移动;生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号;以及经由该至少一个天线将该一个或多个控制信号发射给第一对象。
附图说明
为了能详细地理解本文中阐述的本公开的上述特征所用的方式,可以参照各方面来对以上简要概述的内容进行更具体的描述,其中一些方面在附图中解说。然而应该注意,附图仅解说了本公开的某些典型方面,故不应被认为限定其范围,因为本描述可以允许有其他等同有效的方面。
图1是根据本文阐述的公开的某些方面的示出了利用邻近度传感器来实现人类姿势识别的自组织邻近度传感器网格的示例的示图。
图2是示出用于通过使用图1的自组织邻近度传感器网格进行人类姿势识别来对对象进行远程管理的系统的示例的示图。
图3是根据本文阐述的公开的某些方面的示出使用图2中的用于对对象进行远程控制的系统来控制起重机的框图。
图4是示出根据本文阐述的公开的某些方面的远程对象管理操作的流程图。
图5是示出根据本文阐述的公开的某些方面的可在BAN的无线设备中使用的各种组件的框图。
图6是示出能够执行图4中所示的操作的示例装置的示图。
图7是示出采用处理系统的装置的硬件实现的示例的示图,该处理系统可被用来经由自组织邻近度传感器网格实现姿势识别以对对象进行远程控制。
具体实施方式
以下参照附图更全面地描述了本公开的各个方面。然而,本公开可用许多不同的形式实施并且不应解释为被限定于本公开通篇所给出的任何特定结构或功能。确切而言,提供这些方面使得本公开将是透彻和完整的,并使得本公开将向本领域技术人员完全传达本公开的范围。基于本文中的教导,本领域的技术人员应领会,本公开的范围旨在覆盖本文中所披露的本公开的任何方面,不论其是与本公开的任何其他方面相独立地还是组合地实现的。例如,可以使用本文所阐述的任何数目的方面来实现装置或实践方法。另外,本公开的范围旨在覆盖使用作为本文中所阐述的本公开的各种方面的补充或者与之不同的其他结构、功能性、或者结构及功能性来实践的此类装置或方法。应当理解,本文中所披露的本公开的任何方面可以由权利要求的一个或更多个元素来实施。
措辞“示例性”在本文中用于表示“用作示例、实例或阐释”。本文中描述为“示例性”的任何方面不必被解释为优于或胜过其他方面。此外,尽管本文中描述了特定方面,但这些方面的众多变体和置换落在本公开的范围之内。尽管提到了优选方面的一些益处和优点,但本公开的范围并非旨在被限定于特定益处、用途或目标。确切而言,本公开的各方面旨在宽泛地适用于不同的无线技术、系统配置、网络、和传输协议,其中一些藉由示例在附图和以下对优选方面的描述中解说。详细描述和附图仅仅解说本公开而非限定本公开,本公开的范围由所附权利要求及其等效技术方案来定义。
在一个方面,本文阐述了一种利用采用邻近度传感器的自组织网格表面来通过3D人类姿势识别实现对车辆和设备的远程管理的方法。该方法包括通过在水平表面上布局多个邻近度传感器来创建便携式邻近度传感器表面。用户在特定肢体上穿戴分开的传感器,地面传感器在一时间段上跟踪这些传感器。在用户用他们的手、脚、以及身体执行不同的姿势时,地面传感器将不同的姿势识别为命令并将它们发送给对应的主控制器。主控制器将这些姿势和命令无线地中继到远程车辆(例如,附图中的建筑起重机),这允许用户协调该车辆的动作(例如,放低/举起起重机、拾取对象,等等)。
所公开的办法不要求使用运动捕捉相机并且不受外部干扰的影响,因为本文描述的邻近度传感器使用Wi-Fi或蜂窝电话不使用的高频带。此外,本文描述的邻近度传感器利用极低的功率,这允许电池系统的更长的外部使用。以1.1Mbps使用5条信道为大多数数据密集的邻近度数据提供了充足的传输率。使用邻近度传感器的网格来创建虚拟矩形柱状区,用户可以在该矩形柱状区中执行可被捕捉作为姿势并理解为命令的无限数量的运动。
本文中所描述的技术可用于各种宽带无线通信系统,包括基于正交复用方案和单载波传输的通信系统。此类通信系统的示例包括正交频分多址(OFDMA)系统、单载波频分多址(SC-FDMA)系统、码分多址(CDMA)等。OFDMA系统利用正交频分复用(OFDM),这是一种将整个系统带宽划分成多个正交副载波的调制技术。这些副载波也可以被称为频调、频槽等。在OFDM下,每个副载波可以用数据独立地调制。SC-FDMA系统可以利用交织式FDMA(IFDMA)在跨系统带宽分布的副载波上传送,利用局部式FDMA(LFDMA)在由毗邻副载波构成的块上传送,或者利用增强式FDMA(EFDMA)在多个由毗邻副载波构成的块上传送。一般而言,调制码元在OFDM下是在频域中发送的,而在SC-FDMA下是在时域中发送的。CDMA系统可利用扩频技术和编码方案,在此每个发射机(即用户)被指派一个代码以允许多个用户在相同的物理信道上被复用。
本文中的教导可被纳入各种有线或无线装置、或节点中,在各种有线或无线装置、或节点中实现或由各种有线或无线装置、或节点执行。在一些方面,根据本文中的教导实现的无线节点可包括安装在身体上的节点、固定估计器节点、接入点、接入终端,等等。本文阐述的公开的某些方面可以支持在体域网(BAN)中实现的方法。BAN表示连续身体监视以进行运动捕捉、医疗诊断目的等的概念。
图1示出了可被用来对对象进行远程控制的自组织邻近度网格系统的示例。该无线系统包括使用无线接收机101接收无线地提供的邻近度数据的接收机控制台100。无线发射机102发射到无线接收机101的邻近度数据是按无线协议103封装的并且由垫子150提供。
垫子150包括多个邻近度传感器105到108,取决于特定实现的需求,它们可以是任何数量的邻近度传感器。这些邻近度传感器中的每一个(也被称为节点)可与另一节点并列。垫子150还包括邻近度传感器104,该邻近度传感器104充当用于协调该多个邻近度传感器105-108之间的通信以及提供给无线发射机102的邻近度数据的中央节点协调器。在本文阐述的公开的另一方面,该多个邻近度传感器105到108中的任何一个可被用作中央节点协调器。另外,由无线发射机102和无线接收机101提供的功能性可由邻近度传感器来提供。
在垫子150的一个方面,该多个邻近度传感器105到108以及邻近度传感器104和无线发射机102被安装到由诸如塑料或泡沫之类的材料制成的基板上。在另一方面,垫子150可以是虚拟垫子——因为该多个传感器没有在机械上彼此耦合而是通过将它们置于地上或任何其他表面上而形成“垫子”或“网格”。因此,例如,该多个邻近度传感器105到108和邻近度传感器104可被用户简单地置于地面上。它们中的每一个随后将使用测距来确定它们相对于彼此的位置。
接收机控制台100将接收来自无线发射机102的数据并处理测距信息。从无线发射机102接收到的数据还可包含经处理的信息,诸如如本文所描述的从身体的移动中检测到的姿势或移动信息。另外,无线发射机102可以基于如本文所描述的那样检测到的姿势和移动信息来生成并发射控制和命令信息信号。
图2示出了对被示为垫子250的垫子150中被用来控制对象的自组织邻近度传感器网格的使用,在该示例中对象是包括无线接收机201的远程车辆200,该无线接收机201用于接收由垫子250的无线发射机202无线地发射的邻近度和姿势数据。在所公开的办法的一方面,用户202穿戴多个邻近度传感器203。在本文阐述的公开的一方面,身体上穿戴的该多个邻近度传感器203可作为BAN的一部分来互相通信。BAN与垫子250上的邻近度传感器204-208通信以提供对用户移动的准确的运动捕捉和姿势检测。BAN和垫子250可被看作无线通信系统,其中各个无线节点使用正交复用方案或单载波传输来进行通信。每一身体节点和安装在垫子上的节点可包括感测(获取)与用户身体的移动相关联的一个或多个信号并将这些信号传达给远程车辆200的无线传感器。对用户202所穿戴的每一邻近度传感器和垫子250上的每一邻近度传感器执行直线距离计算。该计算也可随时间执行。在一个方面,本文所描述的无线节点可根据压缩感测(CS)来操作,其中获取速率可小于正被获取的信号的奈奎斯特速率。
图3示出了对图2中的系统的使用的特定示例,其中用户202穿戴多个邻近度传感器203同时作出被无线地发送到远程车辆213的姿势。在所提供的示例中,远程车辆213是建筑起重机。用户202可以使用各个身体部位的移动来控制远程车辆213的操作。在远程控制的一个方面,用于控制远程车辆213的姿势可包括一个或多个不同的身体运动。
图4示出了远程对象管理过程400,其中第一对象由第二对象来控制。在402,经由位于第二对象上的一个或多个传感器来获得测距信息以供在控制第一对象中使用。在404,根据测距信息来确定第二对象的一个或多个移动。在406,生成与该一个或多个移动相关的用于操纵第一对象的一个或多个控制信号。
图5示出了可在图1的系统内采用的无线设备(无线节点)500中使用的各种组件。无线设备500是可被配置成实现本文中所描述的各种方法的设备的示例。无线设备500可被用来实现垫子150中的邻近度传感器104以及多个邻近度传感器105-108或用户202穿戴的多个邻近度传感器203中的任何一个邻近度传感器。
无线设备500可包括控制无线设备500的操作的处理器504。处理器504也可被称为中央处理单元(CPU)。可包括只读存储器(ROM)和随机存取存储器(RAM)两者的存储器506向处理器504提供指令和数据。存储器506的一部分还可包括非易失性随机存取存储器(NVRAM)。处理器504通常基于存储在存储器506内的程序指令来执行逻辑和算术运算。存储器506中的指令可以是可执行的以实现本文所描述的方法。
无线设备500还可包括外壳508,该外壳508可包括发射机510和接收机512以允许在无线设备500与远程位置之间进行数据的发射和接收。发射机510和接收机512可被组合成收发机514。天线516可被附连至外壳508且电耦合至收发机514。无线设备500还可包括(未示出)多个发射机、多个接收机、多个收发机、和/或多个天线。
无线设备500还可包括可用于力图检测和量化收发机514所接收的信号的电平的信号检测器518。信号检测器518可检测诸如总能量、每副载波每码元能量、功率谱密度之类的信号以及其它信号。无线设备500还可包括供处理信号使用的数字信号处理器(DSP)520。
无线设备500的各种组件可由总线系统522耦合在一起,除数据总线之外,总线系统522还可包括电源总线、控制信号总线和状态信号总线。
在许多当前系统中,移动身体跟踪可采用安装到与BAN相关联的身体的惯性传感器。这些系统可能是受限的,因为它们遭受到惯性传感器常见的有限动态范围和估计器漂移。另外,可接受的身体运动估计可能需要大量传感器节点(例如,最少15个),因为身体的每一关节连接部分可能需要完全定向估计。此外,现有系统可能需要工业级惯性传感器的性能、增加成本,等等。对于许多应用,使用的容易性和成本通常是最重要的。因此,开发用于减少移动身体跟踪所需的节点的数量同时维持所需的精确度的新方法是合乎需要的。
在本文阐述的公开的各个方面,在各个实现中都引用了测距。如本文所使用的,测距是确定两个装备了测距检测的节点(诸如两个邻近度传感器)之间的距离的感测机制。该测距可与来自其他传感器(诸如惯性传感器)的测量组合在一起,以校正误差并提供估计惯性传感器中的漂移分量的能力。根据某些方面,一组安装在身体上的节点可发出能用一个或多个固定地面参考节点检测的传输。参考节点可具有已知的位置,并且可以时间同步到几分之一纳秒内。然而,对于许多应用而言,由于其复杂的设立要求,必须依赖于利用固定地面参考节点的解决方案可能是不实际的。因此,希望进一步的创新。
本文阐述的公开的某些方面支持允许系统克服先前办法的限制并实现具有各种应用所需的特性的产品的各种机制。
应当注意,尽管本文中使用了术语“身体”,但本说明书也可适用于捕捉机器(诸如机器人)的姿态。另外,所给出的技术可适用于捕捉活动中的道具的姿态,诸如剑/盾、滑板、球拍/高尔夫球棒/棒球球棒。
如本文所描述的,本文所描述的惯性传感器包括诸如加速度计、陀螺仪或惯性测量单元(IMU)之类的传感器。IMU是加速度计和陀螺仪两者的组合。本领域普通技术人员熟悉这些传感器的操作和功能。
测距是确定两个已装备节点之间的距离的感测机制。该测距可与惯性传感器测量一起组合成身体运动估计器,以校正误差并提供估计惯性传感器中的漂移分量的能力。根据某些方面,一组安装在身体上的节点可发出能用一个或多个固定地面参考节点检测的传输。参考节点可具有已知的位置,并且可以时间同步到几分之一纳秒内。然而,如上所述,对于消费者级产品而言,该系统可能因其复杂的设立需求而是不实际的。因此,希望进一步的创新。
在所公开的系统的一个方面,可基于信号往返时间而非到达时间来产生与安装在身体上的节点相关联的测距信息。这可从测距估计中消除两个节点之间的任何时钟不确定性,并且由此可移除对同步节点的要求,这可极大地简化设立。此外,所建议的办法使得所有节点基本上相同,因为没有“同步节点”相对于“非同步节点”的概念。
所建议的办法可以利用任何两个节点之间的测距,包括不同的身体穿戴节点之间的测距。这些测距可与惯性传感器数据和由运动学身体模型提供的约束进行组合以估计身体姿态和运动。尽管先前系统只执行从身体节点到固定节点的测距,但消除时间同步要求可使得能够执行任何两个节点之间的测距。因为这些附加测距数据是可用的并且还因为对身体相对位置的直接感测,所以在运动跟踪估计器中,这些附加测距可以非常有价值。不同身体上的节点之间的测距也可用来确定身体之间的相对位置和姿态。
通过使用高精确度的往返时间测距和身体上以及身体外的节点之间的测距,可减少惯性传感器的数量和质量。减少节点数量可使得使用更简单,且降低惯性传感器的所需精确度可降低成本。在生产适用于消费者产品的系统中,这两个改进可以是关键的。
以上所描述的方法的各种操作可由能够执行相应功能的任何合适的装置来执行。这些装置可包括各种硬件和/或软件组件和/或模块,包括但不限于电路、专用集成电路(ASIC)、或处理器。一般而言,在附图中解说了操作的场合,这些操作可具有带有相似编号的相应配对装置加功能组件。例如,图6示出了用于通过第二对象来远程操作第一对象的设备600的示例。设备600包括被配置成置于第二对象上并获得测距信息的一个或多个感测装置602;用于根据测距信息确定第二对象的一个或多个移动的装置604;以及用于生成与该一个或多个移动有关的用于操纵第一对象的一个或多个控制信号的装置606。
此外,一般而言,感测装置可包括一个或多个邻近度传感器,诸如邻近度传感器105、惯性传感器、或其任何组合。发射装置可包括图5中示出的发射机(例如,发射机单元510)和/或天线516。接收装置可包括图5中示出的接收机(例如,接收机单元512)和/或天线516。处理装置、确定装置、或使用装置可构成处理系统,该处理系统包括一个或多个处理器,诸如图5中示出的处理器504。
图7是示出采用处理系统714的控制台100的硬件实现100’的示例的示图。装置100’包括耦合到收发机710的处理系统714。收发机710耦合到一个或多个天线720。收发机710提供用于在传输介质上与各种其他装置通信的手段。例如,收发机710可与多个邻近度传感器708a-708n(诸如由用户穿戴的多个邻近度传感器)进行通信。处理系统714包括耦合到计算机可读介质706的处理器704。处理器704负责一般性处理,包括执行存储在计算机可读介质706上的软件。软件在由处理器704执行时使处理系统714执行上文针对任何特定装置描述的各种功能。计算机可读介质706还可被用于存储由处理器704在执行软件时操纵的数据。
处理系统714包括用于从多个邻近度传感器708a-708b获取测距信息的模块732。测距信息被用来控制对象,诸如远程车辆200。处理系统714还包括用于根据测距信息确定用户的移动的模块734;以及用于生成与该一个或多个移动相关的用于操纵受控对象752的一个或多个控制信号的模块736。在一个方面,控制台100可被集成为远程车辆200(在图7中被示为受控对象752)的一部分。各模块可以是在处理器704中运行的软件模块、驻留/存储在计算机可读介质706中、耦合到处理器704的一个或多个硬件模块、或其某一组合。
如本文中所使用的,术语“确定”涵盖各种各样的动作。例如,“确定”可包括演算、计算、处理、推导、研究、查找(例如,在表、数据库或其他数据结构中查找)、查明、及类似动作。而且,“确定”可包括接收(例如,接收信息)、访问(例如,访问存储器中的数据)、及类似动作。而且,“确定”还可包括解析、选择、选取、建立、及类似动作。
结合本文中所阐述的公开来描述的各种解说性逻辑块、模块和电路可以用通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列信号(FPGA)或其他可编程逻辑器件(PLD)、分立的门或晶体管逻辑、分立的硬件组件、或其设计成执行本文中描述的功能的任何组合来实现或执行。通用处理器可以是微处理器,但在替换方案中,处理器可以是任何市售的处理器、控制器、微控制器、或状态机。处理器还可以被实现为计算设备的组合,例如DSP与微处理器的组合、多个微处理器、与DSP核心协作的一个或多个微处理器、或任何其他此类配置。
本文所公开的方法包括用于达成所描述的方法的一个或多个步骤或动作。这些方法步骤和/或动作可以彼此互换而不会脱离权利要求的范围。换言之,除非指定了步骤或动作的特定次序,否则具体步骤和/或动作的次序和/或使用可以改动而不会脱离权利要求的范围。结合本文所阐述的公开所描述的方法或算法的步骤可直接在硬件中、在由处理器执行的软件模块中、或在这两者的组合中实施。软件模块可驻留在本领域所知的任何形式的存储介质中。可使用的存储介质的一些示例包括随机存取存储器(RAM)、只读存储器(ROM)、闪存、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动盘、CD-ROM等。软件模块可包括单条指令、或许多条指令,且可分布在若干不同的代码段上,分布在不同的程序间、以及跨多个存储介质分布。存储介质可被耦合到处理器以使得该处理器能从/向该存储介质读写信息。在替换方案中,存储介质可以被整合到处理器。
所描述的功能可在硬件、软件、固件或其任何组合中实现。如果以硬件实现,则示例硬件配置可包括无线节点中的处理系统。该处理系统可以用总线结构来实现。取决于该处理系统的具体应用和整体设计约束,总线可包括任何数目的互连总线和桥接器。总线可将包括处理器、机器可读介质、以及总线接口的各种电路链接在一起。总线接口可用于尤其将网络适配器经由总线连接至处理系统。网络适配器可用于实现PHY层的信号处理功能。在用户终端的情形中,用户接口(例如,按键板、显示器、鼠标、游戏操纵杆等)也可被连接至总线。总线还可链接各种其他电路(诸如定时源、外围设备、稳压器、电源管理电路等),这些电路在本领域中是众所周知的,因此将不再赘述。
处理器可负责管理总线和一般处理,包括执行存储在机器可读介质上的软件。处理器可用一个或多个通用和/或专用处理器来实现。示例包括微处理器、微控制器、DSP处理器、以及其他能执行软件的电路系统。软件应当被宽泛地解释成表示指令、数据、及其任何组合,无论是被称作软件、固件、中间件、微代码、硬件描述语言、或其他。作为示例,机器可读介质可以包括RAM(随机存取存储器)、闪存、ROM(只读存储器)、PROM(可编程只读存储器)、EPROM(可擦式可编程只读存储器)、EEPROM(电可擦式可编程只读存储器)、寄存器、磁盘、光盘、硬盘驱动器、或者任何其他合适的存储介质、或其任何组合。机器可读介质可被实施在计算机程序产品中。该计算机程序产品可以包括包装材料。
在硬件实现中,机器可读介质可以是与处理器分开的处理系统的一部分。然而,如本领域的技术人员将容易领会到的,机器可读介质、或其任何部分可外置于处理系统。作为示例,机器可读介质可包括传输线、由数据调制的载波、和/或与无线节点分开的计算机产品,所有这些都可由处理器通过总线接口来访问。作为替换或补充,机器可读介质、或其任何部分可被集成到处理器中,诸如高速缓存和/或通用寄存器文件可能就是这种情形。
处理系统可以被配置为通用处理系统,该通用处理系统具有一个或多个提供处理器功能性的微处理器和提供机器可读介质中的至少一部分的外部存储器,它们都通过外部总线架构与其他支持电路系统链接在一起。替换地,处理系统可以用带有集成在单块芯片中的处理器、总线接口、用户接口(在接入终端情形中)、支持电路系统、和至少一部分机器可读介质的ASIC(专用集成电路)来实现,或者用一个或多个FPGA(现场可编程门阵列)、PLD(可编程逻辑器件)、控制器、状态机、门控逻辑、分立硬件组件、或者任何其他合适的电路系统、或者能执行本公开通篇所描述的各种功能性的电路的任何组合来实现。取决于具体应用和加诸于整体系统上的总设计约束,本领域技术人员将认识到如何最佳地实现关于处理系统所描述的功能。
机器可读介质可包括数个软件模块。这些软件模块包括当由处理器执行时使处理系统执行各种功能的指令。这些软件模块可包括传送模块和接收模块。每个软件模块可以驻留在单个存储设备中或者跨多个存储设备分布。作为示例,当触发事件发生时,可以从硬件驱动器中将软件模块加载到RAM中。在软件模块执行期间,处理器可以将一些指令载入到高速缓存中以提高存取速度。随后可将一个或多个高速缓存行加载到通用寄存器文件中以供处理器执行。在以下谈及软件模块的功能性时,将理解此类功能性是在处理器执行来自该软件模块的指令时由该处理器来实现的。
如果在软件中实现,则各功能可以作为一条或多条指令或代码存储在计算机可读介质上或藉其进行传送。计算机可读介质包括计算机存储介质和通信介质两者,这些介质包括促成计算机程序从一地向另一地转移的任何介质。存储介质可以是能被计算机访问的任何可用介质。作为示例而非限定,这样的计算机可读介质可包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁存储设备、或能被用来携带或存储指令或数据结构形式的期望程序代码且能被计算机访问的任何其他介质。任何连接也被正当地称为计算机可读介质。例如,如果软件是使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)、或无线技术(诸如红外(IR)、无线电、以及微波)从web网站、服务器、或其他远程源传送而来,则该同轴电缆、光纤电缆、双绞线、DSL、或无线技术(诸如红外、无线电、以及微波)就被包括在介质的定义之中。如本文中所使用的盘(disk)和碟(disc)包括压缩碟(CD)、激光碟、光碟、数字多用碟(DVD)、软盘、和碟,其中盘(disk)常常磁性地再现数据,而碟(disc)用激光来光学地再现数据。因此,在一些方面,计算机可读介质可包括非瞬态计算机可读介质(例如,有形介质)。另外,对于其他方面,计算机可读介质可包括瞬态计算机可读介质(例如,信号)。上述的组合也应被包括在计算机可读介质的范围内。
因而,某些方面可包括用于执行本文中介绍的操作的计算机程序产品。例如,此类计算机程序产品可包括其上存储(和/或编码)有指令的计算机可读介质,这些指令能由一个或多个处理器执行以执行本文中所描述的操作。对于某些方面,计算机程序产品可包括包装材料。
此外,应当领会,用于执行本文中所描述的方法和技术的模块和/或其他恰适装置能由用户终端和/或基站在适用的场合下载和/或以其他方式获得。例如,此类设备能被耦合至服务器以促成用于执行本文中所描述的方法的装置的转移。替换地,本文中所描述的各种方法能经由存储装置(例如,RAM、ROM、诸如压缩碟(CD)或软盘之类的物理存储介质等)来提供,以使得一旦将该存储装置耦合到或提供给用户终端和/或基站,该设备就能获得各种方法。此外,能利用适于向设备提供本文中所描述的方法和技术的任何其他合适的技术。
如本文所描述的,本文所阐述的公开中的无线设备/节点可包括基于由该无线设备传送或在该无线设备处接收的信号执行功能的各种组件。无线设备还可指可穿戴无线设备。在一些方面,可穿戴无线设备可包括无线头戴式送受话器或无线手表。例如,无线头戴式送受话器可包括适配成基于经由接收机接收到的数据提供音频输出的换能器。无线手表可包括适配成基于经由接收机接收到的数据提供指示的用户接口。无线感测设备可包括适配成提供要经由发射机发射的数据的传感器。
无线设备可经由一条或更多条无线通信链路通信,这些无线通信链路基于或另行支持任何合适的无线通信技术。例如,在一些方面,无线设备可与网络相关联。在一些方面,网络可包括使用超宽带技术或某种其他合适的技术实现的个域网(例如,支持30米级的无线覆盖区域)或体域网(例如,支持60米级的无线覆盖区域)。在一些方面,网络可包括局域网或广域网。无线设备可支持或以其他方式使用各种无线通信技术、协议、或标准(诸如举例而言CDMA、TDMA、OFDM、OFDMA、WiMAX和Wi-Fi)中的一种或多种。类似地,无线设备可支持或以其他方式使用各种相对应的调制或复用方案中的一种或多种。无线设备由此可包括使用以上或其他无线通信技术建立一条或多条无线通信链路并经由这一条或多条无线通信链路来通信的合适组件(例如,空中接口)。例如,设备可包括具有相关联的发射机和接收机组件(例如,发射机510和接收机512)的无线收发机,这些发射机和接收机组件可包括助益无线介质上的通信的各种组件(例如,信号发生器和信号处理器)。
本文中的教示可被纳入各种装置(例如,设备)中(例如,在装置内实现或由装置执行)。例如,本文教示的一个或更多个方面可被纳入到电话(例如,蜂窝电话)、个人数据助理(“PDA”)或所谓的智能电话、娱乐设备(例如,便携式媒体设备,包括音乐和视频播放器)、头戴式送受话器(例如,头戴式受话器、耳机等)、话筒、医疗感测设备(例如,生物测定传感器、心率监视器、计步器、EKG设备、智能绷带等)、用户I/O设备(例如,手表、遥控器、照明开关、键盘、鼠标等)、环境感测设备(例如,轮胎气压监视器)、可接收来自医疗或环境感测设备的数据的监视设备(例如,台式计算机、移动计算机等)、照护点设备、助听器、机顶盒、或任何其他合适设备中。监视设备还可经由与网络的连接来访问来自不同感测设备的数据。这些设备可具有不同功率和数据需求。在一些方面中,本文中的教示可适配成用在低功率应用中(例如,通过使用基于脉冲的信令方案和低占空比模式),并且可支持各种数据率,包括相对高的数据率(例如,通过使用高带宽脉冲)。
在一些方面,无线设备可包括通信系统的接入设备(例如,接入点)。此类接入设备可提供例如经由有线或无线通信链路至另一网络(例如广域网,诸如因特网或蜂窝网络)的连通性。因此,接入设备可使得另一设备(例如,无线站)能接入该另一网络或某些其他功能性。此外应领会,这两个设备中的一者或两者可以是便携式的,或者在一些情形中为相对非便携式的。另外,应当明白,无线设备还可以有能力按非无线的方式(例如,经由有线连接)经由适当的通信接口传送和/或接收信息。
提供之前的描述是为了使本领域中的任何技术人员均能够实践本文中所描述的各种方面。对这些方面的各种改动将容易为本领域技术人员所明白,并且在本文中所定义的普适原理可被应用于其他方面。因此,权利要求并非旨在被限定于本文中所示出的各方面,而是应被授予与权利要求的语言相一致的全部范围,其中对要素的单数形式的引述并非旨在表示“有且仅有一个”(除非特别如此声明)而是“一个或更多个”。除非特别另外声明,否则术语“一些/某个”指的是一个或更多个。引述一列项目中的“至少一个”的短语是指这些项目的任何组合,包括单个成员。作为示例,“a、b或c中的至少一个”旨在涵盖:a;b;c;a和b;a和c;b和c;以及a、b和c。本公开通篇描述的各种方面的要素为本领域普通技术人员当前或今后所知的所有结构上和功能上的等效方案通过引述被明确纳入于此,且旨在被权利要求所涵盖。此外,本文中所公开的任何内容都并非旨在贡献给公众——无论这样的公开是否在权利要求书中被显式地叙述。权利要求的任何要素都不应当在35U.S.C.112第六款的规定下来解释——除非该要素是使用措辞“用于……的装置”来明确叙述的或者在方法权利要求情形中该要素是使用措辞“用于……的步骤”来叙述的。

Claims (16)

1.一种用于通过第二对象来远程操作第一对象的装置,包括:
被配置成置于所述第二对象上并获得测距信息的多个传感器,其中所述多个传感器被进一步配置成作为体域网(BAN)的一部分来互相通信,其中所述测距信息是基于信号往返时间产生的,其中所述测距信息包括所述多个传感器中不同的传感器之间的测距;以及
处理系统,配置成:
根据所述测距信息确定所述第二对象的一个或多个移动;以及
生成与所述一个或多个移动相关的用于操纵所述第一对象的一个或多个控制信号;
其中所述第一对象是车辆,并且其中所述第二对象包括人体的一部分。
2.如权利要求1所述的装置,其特征在于,还包括包含另外的一个或多个传感器的表面,所述表面被配置成与所述第二对象上的所述多个传感器通信以获得附加测距信息,其中所述处理系统还被配置成根据所述测距信息和所述附加测距信息确定所述一个或多个移动。
3.如权利要求1所述的装置,其特征在于,由所述处理系统生成的所述一个或多个控制信号被配置成使得所述第一对象的至少一个移动模仿所述第二对象的所述一个或多个移动。
4.如权利要求1所述的装置,其特征在于,所述一个或多个移动包括一个或多个姿势。
5.如权利要求1所述的装置,其特征在于,还包括被配置成将所述一个或多个控制信号发射到所述第一对象的发射机。
6.一种用于通过第二对象来远程操作第一对象的设备,包括:
被配置成置于所述第二对象上并获得测距信息的多个感测装置,其中所述多个感测装置被进一步配置成作为体域网(BAN)的一部分来互相通信,其中所述测距信息是基于信号往返时间产生的,其中所述测距信息包括所述多个感测装置中不同的感测装置之间的测距;
用于根据所述测距信息确定所述第二对象的一个或多个移动的装置;以及
用于生成与所述一个或多个移动相关的用于操纵所述第一对象的一个或多个控制信号的装置;
其中所述第一对象是车辆,并且其中所述第二对象包括人体的一部分。
7.如权利要求6所述的设备,其特征在于,还包括包含另外的一个或多个传感器装置的表面,所述表面被配置成与所述第二对象上的所述多个传感器装置通信以获得附加测距信息,其中所述用于根据所述测距信息确定所述第二对象的一个或多个移动的装置还被配置成根据所述测距信息和所述附加测距信息确定所述一个或多个移动。
8.如权利要求6所述的设备,其特征在于,所述用于生成一个或多个控制信号的装置被配置成使得所述第一对象的至少一个移动模仿所述第二对象的所述一个或多个移动。
9.如权利要求6所述的设备,其特征在于,所述一个或多个移动包括一个或多个姿势。
10.如权利要求6所述的设备,其特征在于,还包括被配置成将所述一个或多个控制信号发射到所述第一对象的发射机装置。
11.一种用于通过第二对象来远程操作第一对象的方法,包括:
经由被配置成置于所述第二对象上的多个传感器来获得测距信息,其中所述多个传感器被进一步配置成作为体域网(BAN)的一部分来互相通信,其中所述测距信息是基于信号往返时间产生的,其中所述测距信息包括所述多个传感器中不同的传感器之间的测距;
根据所述测距信息确定所述第二对象的一个或多个移动;以及
生成与所述一个或多个移动相关的用于操纵所述第一对象的一个或多个控制信号;
其中所述第一对象是车辆,并且其中所述第二对象包括人体的一部分。
12.如权利要求11所述的方法,其特征在于,还包括经由包含另外的一个或多个传感器的表面来与所述第二对象上的所述多个传感器通信以获得附加测距信息,其中根据所述测距信息确定所述第二对象的所述一个或多个移动包括根据所述测距信息和所述附加测距信息来确定所述一个或多个移动。
13.如权利要求11所述的方法,其特征在于,还包括经由所生成的所述一个或多个控制信号来使得所述第一对象的至少一个移动模仿所述第二对象的所述一个或多个移动。
14.如权利要求11所述的方法,其特征在于,所述一个或多个移动包括一个或多个姿势。
15.如权利要求11所述的方法,其特征在于,还包括经由发射机将所述一个或多个控制信号发射到所述第一对象。
16.一种用于通过第二对象来远程操作第一对象的远程控制系统,包括:
被配置成置于所述第二对象上并获得测距信息的多个传感器,其中所述多个传感器被进一步配置成作为体域网(BAN)的一部分来互相通信,其中所述测距信息是基于信号往返时间产生的,其中所述测距信息包括所述多个传感器中不同的传感器之间的测距;
至少一个天线;以及
处理系统,配置成:
根据所述测距信息确定所述第二对象的一个或多个移动;
生成与所述一个或多个移动相关的用于操纵所述第一对象的一个或多个控制信号,其中所述第一对象是车辆,并且其中所述第二对象包括人体的一部分;以及
经由所述至少一个天线将所述一个或多个控制信号发射到所述第一对像。
CN201280021721.XA 2011-05-04 2012-03-02 经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别 Expired - Fee Related CN103501867B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161482241P 2011-05-04 2011-05-04
US61/482,241 2011-05-04
US13/274,526 2011-10-17
US13/274,526 US8831794B2 (en) 2011-05-04 2011-10-17 Gesture recognition via an ad-hoc proximity sensor mesh for remotely controlling objects
PCT/US2012/027585 WO2012150996A1 (en) 2011-05-04 2012-03-02 Gesture recognition via an ad-hoc proximity sensor mesh for remotely controlling objects

Publications (2)

Publication Number Publication Date
CN103501867A CN103501867A (zh) 2014-01-08
CN103501867B true CN103501867B (zh) 2016-08-17

Family

ID=47090794

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280021721.XA Expired - Fee Related CN103501867B (zh) 2011-05-04 2012-03-02 经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别

Country Status (6)

Country Link
US (1) US8831794B2 (zh)
EP (1) EP2704807A1 (zh)
JP (1) JP5746423B2 (zh)
KR (1) KR101528545B1 (zh)
CN (1) CN103501867B (zh)
WO (1) WO2012150996A1 (zh)

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8443202B2 (en) 2009-08-05 2013-05-14 Daon Holdings Limited Methods and systems for authenticating users
US9094813B2 (en) * 2011-04-02 2015-07-28 Open Invention Network, Llc System and method for redirecting content based on gestures
US9285481B2 (en) * 2012-08-20 2016-03-15 Macdonald, Dettwiler And Associates Inc. Wearable object locator and imaging system
DE102012216193B4 (de) * 2012-09-12 2020-07-30 Continental Automotive Gmbh Verfahren und Vorrichtung zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten
KR102330889B1 (ko) * 2013-02-22 2021-11-26 페이스북 테크놀로지스, 엘엘씨 제스처-기반 제어를 위해 근활성도 센서 신호와 관성 센서 신호를 결합하는 방법 및 기기
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
DE102013220305A1 (de) * 2013-10-08 2015-04-09 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Methode zur Erkennung von Anweisungen von autorisierten Personen im Straßenverkehr
WO2015081113A1 (en) 2013-11-27 2015-06-04 Cezar Morun Systems, articles, and methods for electromyography sensors
EP2957158B1 (de) * 2014-06-18 2017-10-18 Deere & Company Anordnung zur kontrolle einer geräteschnittstelle eines landwirtschaftlichen arbeitsfahrzeugs
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
JP6594439B2 (ja) * 2015-03-02 2019-10-23 プレイフュージョン リミテッド ゲーム体験を向上させるための方法および装置
DE202016002296U1 (de) 2016-04-08 2017-07-12 Liebherr-Components Biberach Gmbh Baumaschine
US20190121306A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation Systems and methods for identifying biological structures associated with neuromuscular source signals
CN106966300B (zh) * 2017-05-24 2018-07-06 成都跟驰科技有限公司 用于塔吊的感应控制系统
GB2569774A (en) * 2017-10-20 2019-07-03 Kompetenzzentrum Das Virtuelle Fahrzeug Method for virtual testing of real environments with pedestrian interaction and drones
US10852411B2 (en) 2017-12-06 2020-12-01 Cognitive Systems Corp. Motion detection and localization based on bi-directional channel sounding
US10477355B1 (en) 2017-12-13 2019-11-12 Amazon Technologies, Inc. System for locating users
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US11579703B2 (en) * 2018-06-18 2023-02-14 Cognitive Systems Corp. Recognizing gestures based on wireless signals
WO2020032267A1 (ja) * 2018-08-10 2020-02-13 住友建機株式会社 ショベル
CN113423341A (zh) 2018-11-27 2021-09-21 脸谱科技有限责任公司 用于可穿戴电极传感器系统的自动校准的方法和装置
US11087604B2 (en) 2019-04-30 2021-08-10 Cognitive Systems Corp. Controlling device participation in wireless sensing systems
US10743143B1 (en) 2019-05-15 2020-08-11 Cognitive Systems Corp. Determining a motion zone for a location of motion detected by wireless signals
CA3147946A1 (en) 2019-08-06 2021-02-11 Boxine Gmbh Server for providing media files for download by a user, and system and method
US11006245B2 (en) 2019-09-30 2021-05-11 Cognitive Systems Corp. Detecting a location of motion using wireless signals and topologies of wireless connectivity
US11570712B2 (en) 2019-10-31 2023-01-31 Cognitive Systems Corp. Varying a rate of eliciting MIMO transmissions from wireless communication devices
CA3152905A1 (en) 2019-10-31 2021-05-06 Christopher Beg Using mimo training fields for motion detection
CN114599991A (zh) 2019-10-31 2022-06-07 认知系统公司 引发来自无线通信装置的mimo传输
US11175730B2 (en) 2019-12-06 2021-11-16 Facebook Technologies, Llc Posture-based virtual space configurations
US10928503B1 (en) 2020-03-03 2021-02-23 Cognitive Systems Corp. Using over-the-air signals for passive motion detection
CN111537988B (zh) * 2020-03-31 2023-04-18 北京小米移动软件有限公司 角色控制方法、角色控制装置及计算机可读存储介质
US11257280B1 (en) 2020-05-28 2022-02-22 Facebook Technologies, Llc Element-based switching of ray casting rules
US11256336B2 (en) 2020-06-29 2022-02-22 Facebook Technologies, Llc Integration of artificial reality interaction modes
CN116058071A (zh) 2020-08-31 2023-05-02 认知系统公司 控制标准化无线通信网络中的运动拓扑结构
US11178376B1 (en) 2020-09-04 2021-11-16 Facebook Technologies, Llc Metering for display modes in artificial reality
US11070399B1 (en) 2020-11-30 2021-07-20 Cognitive Systems Corp. Filtering channel responses for motion detection
US11294475B1 (en) 2021-02-08 2022-04-05 Facebook Technologies, Llc Artificial reality multi-modal input switching model
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1784612A (zh) * 2003-03-11 2006-06-07 梅纳谢有限公司 射频运动跟踪系统和方法
JP2009540773A (ja) * 2006-06-13 2009-11-19 マグネットー・イナーシャル・センシング・テクノロジー・インコーポレイテッド 無線rfネットワークにおける動き感知
EP2141632A2 (en) * 2008-06-30 2010-01-06 Samsung Electronics Co., Ltd. Motion capture apparatus and method

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5341459A (en) * 1991-05-09 1994-08-23 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Generalized compliant motion primitive
JP3862348B2 (ja) * 1997-03-19 2006-12-27 東京電力株式会社 モーションキャプチャシステム
US6176837B1 (en) 1998-04-17 2001-01-23 Massachusetts Institute Of Technology Motion tracking system
US6413190B1 (en) 1999-07-27 2002-07-02 Enhanced Mobility Technologies Rehabilitation apparatus and method
US6888362B2 (en) 2000-11-09 2005-05-03 Formfactor, Inc. Test head assembly for electronic components with plurality of contoured microelectronic spring contacts
US6675130B2 (en) 2000-12-21 2004-01-06 Ibm Corporation System and method of using a plurality of sensors for determining an individual's level of productivity
JP2002361576A (ja) * 2001-06-05 2002-12-18 Toshiba Corp 3次元空間内サービス提供システム
JP3837479B2 (ja) * 2001-09-17 2006-10-25 独立行政法人産業技術総合研究所 動作体の動作信号生成方法、その装置及び動作信号生成プログラム
KR100974200B1 (ko) * 2002-03-08 2010-08-06 레베래이션즈 인 디자인, 엘피 전기 디바이스 제어 장치
US7009561B2 (en) 2003-03-11 2006-03-07 Menache, Llp Radio frequency motion tracking system and method
US7565295B1 (en) * 2003-08-28 2009-07-21 The George Washington University Method and apparatus for translating hand gestures
US7445138B2 (en) * 2004-05-19 2008-11-04 Conrad Chu Passive exoskeleton
EP1779344A4 (en) 2004-07-29 2009-08-19 Motiva Llc SYSTEM FOR MEASURING HUMAN MOVEMENT
US20060207409A1 (en) * 2005-03-17 2006-09-21 K Group Industries (Far East) Ltd. Control of functions and sounds using electronic hand glove
US20080191864A1 (en) 2005-03-31 2008-08-14 Ronen Wolfson Interactive Surface and Display System
US20080214305A1 (en) 2005-05-13 2008-09-04 David Ralph Addington System and method for interfacing a simulation device with a gaming device
US20070109324A1 (en) * 2005-11-16 2007-05-17 Qian Lin Interactive viewing of video
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8849457B2 (en) * 2006-07-17 2014-09-30 Raytheon Company Contact displacement actuator system
US7706896B2 (en) * 2006-09-29 2010-04-27 Nellcor Puritan Bennett Llc User interface and identification in a medical device system and method
US20080136775A1 (en) * 2006-12-08 2008-06-12 Conant Carson V Virtual input device for computing
US20080228045A1 (en) * 2007-02-23 2008-09-18 Tia Gao Multiprotocol Wireless Medical Monitors and Systems
KR20090002072A (ko) * 2007-06-04 2009-01-09 이민화 생리적 신호를 이용한 차량의 전자 디바이스들의 제어
US20090029754A1 (en) 2007-07-23 2009-01-29 Cybersports, Inc Tracking and Interactive Simulation of Real Sports Equipment
US20090098519A1 (en) * 2007-10-10 2009-04-16 Jennifer Byerly Device and method for employment of video games to provide physical and occupational therapy and measuring and monitoring motor movements and cognitive stimulation and rehabilitation
US8214098B2 (en) 2008-02-28 2012-07-03 The Boeing Company System and method for controlling swarm of remote unmanned vehicles through human gestures
US20090221372A1 (en) 2008-02-29 2009-09-03 Molly Casey Footpad-based game and gaming system
US8427304B2 (en) * 2008-05-05 2013-04-23 Andy Wike Proximity system for portable electronic devices and associated methods for operating the same
US20090280901A1 (en) 2008-05-09 2009-11-12 Dell Products, Lp Game controller device and methods thereof
JP5163291B2 (ja) * 2008-06-02 2013-03-13 ソニー株式会社 入力装置、制御装置、制御システム及び制御方法
CN102112945B (zh) * 2008-06-18 2016-08-10 奥布隆工业有限公司 用于交通工具接口的基于姿态的控制系统
US8187182B2 (en) * 2008-08-29 2012-05-29 Dp Technologies, Inc. Sensor fusion for activity identification
KR20100026334A (ko) 2008-08-29 2010-03-10 김진우 모델 주위를 비행하는 비행체의 비행 시스템과 비행 제어방법 및 그 비행시스템의 관제시스템
US8516561B2 (en) * 2008-09-29 2013-08-20 At&T Intellectual Property I, L.P. Methods and apparatus for determining user authorization from motion of a gesture-based control unit
WO2010049848A1 (en) * 2008-10-29 2010-05-06 Koninklijke Philips Electronics N.V. Control unit for a system and method for providing feedback to a user
US8172722B2 (en) 2008-12-05 2012-05-08 Nike, Inc. Athletic performance monitoring systems and methods in a team sports environment
USRE46790E1 (en) * 2009-02-26 2018-04-17 Koninklijke Philips N.V. Exercise system and a method for communication
US9067097B2 (en) * 2009-04-10 2015-06-30 Sovoz, Inc. Virtual locomotion controller apparatus and methods
US20100304931A1 (en) 2009-05-27 2010-12-02 Stumpf John F Motion capture system
US8803889B2 (en) * 2009-05-29 2014-08-12 Microsoft Corporation Systems and methods for applying animations or motions to a character
WO2010143361A1 (ja) * 2009-06-08 2010-12-16 パナソニック株式会社 作業認識システム、作業認識装置および作業認識方法
US20110010024A1 (en) 2009-07-01 2011-01-13 Curt Salisbury System and method for accompanying a user with an automated vehicle
KR20110016521A (ko) * 2009-08-12 2011-02-18 삼성전자주식회사 인간형 로봇의 전신 동작 제어 장치 및 그 방법
US8482678B2 (en) * 2009-09-10 2013-07-09 AFA Micro Co. Remote control and gesture-based input device
US9575561B2 (en) * 2010-12-23 2017-02-21 Intel Corporation Method, apparatus and system for interacting with content on web browsers
US20120226981A1 (en) * 2011-03-02 2012-09-06 Microsoft Corporation Controlling electronic devices in a multimedia system through a natural user interface
US20120229509A1 (en) * 2011-03-07 2012-09-13 Liu Guangsong System and method for user interaction
US20120280902A1 (en) 2011-05-05 2012-11-08 Qualcomm Incorporated Proximity sensor mesh for motion capture
EP2650754A3 (en) * 2012-03-15 2014-09-24 Omron Corporation Gesture recognition apparatus, electronic device, gesture recognition method, control program, and recording medium

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1784612A (zh) * 2003-03-11 2006-06-07 梅纳谢有限公司 射频运动跟踪系统和方法
JP2009540773A (ja) * 2006-06-13 2009-11-19 マグネットー・イナーシャル・センシング・テクノロジー・インコーポレイテッド 無線rfネットワークにおける動き感知
EP2141632A2 (en) * 2008-06-30 2010-01-06 Samsung Electronics Co., Ltd. Motion capture apparatus and method

Also Published As

Publication number Publication date
EP2704807A1 (en) 2014-03-12
JP5746423B2 (ja) 2015-07-08
WO2012150996A1 (en) 2012-11-08
CN103501867A (zh) 2014-01-08
KR101528545B1 (ko) 2015-06-12
US8831794B2 (en) 2014-09-09
JP2014517384A (ja) 2014-07-17
KR20140014267A (ko) 2014-02-05
US20120283896A1 (en) 2012-11-08

Similar Documents

Publication Publication Date Title
CN103501867B (zh) 经由自组织邻近度传感器网格的用于对对象进行远程控制的姿势识别
CN103501866B (zh) 用于室外游戏的邻近度和特技记录的方法和装置
US10314536B2 (en) Method and system for delivering biomechanical feedback to human and object motion
CN103717278B (zh) 用于使用邻近度传感器进行多相机运动捕捉增强的方法和装置
CN103517741B (zh) 用于运动捕捉的邻近度传感器网格
CN103370672B (zh) 用于跟踪用户方位的方法和装置
CN104181875B (zh) 基于物联模式的运动健身系统
US20170192496A1 (en) Methods and systems of a motion-capture body suit with wearable body-position sensors
CN108028902A (zh) 集成传感器和视频运动分析方法
CN107667359A (zh) 可穿戴usb设备组件
US10661148B2 (en) Dual motion sensor bands for real time gesture tracking and interactive gaming
CN103135765A (zh) 一种基于微机械传感器的人体动作信息捕捉系统
CN108744516A (zh) 获取定位信息的方法和装置、存储介质及电子装置
CN106716294A (zh) 主动和被动链订阅
Garcia et al. A wireless sensor network for soccer team monitoring
CN106575232B (zh) 图形用户界面的远程管理
US10748320B2 (en) Animation simulation of biomechanics
CN107995590A (zh) 一种信息记录方法和移动终端
WO2018057044A1 (en) Dual motion sensor bands for real time gesture tracking and interactive gaming
Chen et al. Human motion tracking with wireless wearable sensor network: experience and lessons.
Veijalainen et al. Feasibility of Bluetooth Low Energy for motion capturing with Inertial Measurement Units
Huang et al. Ambulatory real-time micro-sensor motion capture
WO2021015348A1 (ko) 가상 현실 및 증강 현실을 이용한 혼합 렌더링 콘텐츠 제공을 위한 카메라 트래킹 방법 및 이를 이용한 시스템
Carvalho Movement Tracking using Bluetooth Low Energy
Nan et al. A real-time micro-sensor motion capture system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160817

CF01 Termination of patent right due to non-payment of annual fee