CN1168057C - 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统 - Google Patents

追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统 Download PDF

Info

Publication number
CN1168057C
CN1168057C CNB971982147A CN97198214A CN1168057C CN 1168057 C CN1168057 C CN 1168057C CN B971982147 A CNB971982147 A CN B971982147A CN 97198214 A CN97198214 A CN 97198214A CN 1168057 C CN1168057 C CN 1168057C
Authority
CN
China
Prior art keywords
user
link
reference direction
orientation
arbitrary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB971982147A
Other languages
English (en)
Other versions
CN1231753A (zh
Inventor
挪拉赫梅特・挪利斯拉莫维奇・拉都包夫
挪拉赫梅特·挪利斯拉莫维奇·拉都包夫
・挪利斯拉莫维奇・拉都包夫
努鲁拉·挪利斯拉莫维奇·拉都包夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NURAKHMED NURISLAMOVICH LATYPO
Original Assignee
NURAKHMED NURISLAMOVICH LATYPO
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from RU96116414A external-priority patent/RU2107328C1/ru
Priority claimed from RU96116415A external-priority patent/RU2106695C1/ru
Application filed by NURAKHMED NURISLAMOVICH LATYPO filed Critical NURAKHMED NURISLAMOVICH LATYPO
Publication of CN1231753A publication Critical patent/CN1231753A/zh
Application granted granted Critical
Publication of CN1168057C publication Critical patent/CN1168057C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0247Determining attitude
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/28Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/64Methods for processing data by generating or executing the game program for computing dynamical parameters of game objects, e.g. motion determination or computation of frictional forces for a virtual car
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/66Methods for processing data by generating or executing the game program for rendering three dimensional images
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8005Athletics
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computational Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Medical Informatics (AREA)
  • Medicinal Chemistry (AREA)
  • Algebra (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Health & Medical Sciences (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Nitrogen And Oxygen Or Sulfur-Condensed Heterocyclic Ring Systems (AREA)

Abstract

本发明涉及用于确定使用者在空间的位置与取向并显示虚拟环境的方法及系统,并且可应用于交互式计算机游戏,具有体育、增进健康或军事目的的训练系统中。本发明可提高追踪使用者在空间的位置与取向的精度与速度,用于使用者方便自然的运动,并给出响应于使用者在实际环境中运动的虚拟环境。用于追踪使用者运动系统的环节2角位置的传感器4紧靠环节2之间连接点3设置,并且也设置在某些环节2上。主参考方向确定装置5设置在至少一个环节2上以确定该环节相对于参考方向的取向。对从传感器4、参考方向确定装置5以及,如果适当的话,从用于使用者与虚拟环境目标交互作用的装置8所获得的信息进行处理,用以根据各环节之间的角度值以及其上设有参考方向确定装置的主环节相对于参考方向的取向,一般地确定使用者在空间的位置与取向。利用所取得的数据,实时地显示使用者的运动或者响应于实际环境中的运动,根据他或她视野的改变向使用者给出虚拟环境。

Description

追踪并显示使用者在空间的位置 与取向的方法,向使用者展示虚拟 环境的方法以及实现这些方法的系统
发明领域
本发明涉及确定使用者在空间的位置与取向的系统并可适用于交互式计算机游戏和运动或军事目的的训练系统。本发明可应用于教导和锻练儿童和成人正确地完成运动游戏与舞蹈的练习和方法中以增进健康。
用于追踪和显示运动过程中人体位置的传统系统,采用称作测角器的机械装置对头部和身体部位的位置进行跟踪,用以测量关节的旋转角度并确定最终位置,例如手相对于身体或手指尖相对于手掌的位置。
传统系统存在的问题在于,由于测角器旋转中心与关节旋转中心不重合,使测角器相对于关节,尤其是相对于那些具有多个自由度的关节,如像手关节,难于进行定位。人体关节并非是理想的枢纽关节:关节的旋转角度改变时旋转轴产生位移。为提高精确度,必须进行精确的对准。
参照Virtual Reality Technology,1994,John Wiley & Sons,Inc.,pp.17-25,由Burdea G.,Coiffer P.描述了追踪并显示使用者空间位置与取向的磁系统。该系统包括Polhemius公司的motion Capture Server和Ascention Technology公司的Flock of Birds,它们包括:多个用于处理被测运动参数的电路板、控制器、外部定时电路板、通信电路板、键盘与监视器、包含有三个电磁线圈的发送器以及接收器,每个接收器还具有一小型三合一电磁线圈,用以检测由发送器发射的磁场。
这种系统的作用范围小,且其精度随发送器与接收器之间的距离而改变。在具有交流磁场的系统中,外来金属物体的存在由于感应涡流而损害精度。具有直流磁场的系统对外来金属物体的存在不太敏感,然而,磁阻效应会干扰由发送器产生的磁场。
这种系统的缺点还有由建立模拟信号中的延时引起的不够高的速率以及会增大图象在屏幕上摇摆的高噪声电平。
另一种传统的系统为一追踪使用者在空间的位置与取向的超声系统,包括有:包含固定于支承框架上的三件一套电声发送换能器的发送器;包含有固定于支承框架上的三件一套的数套传声器的接收器,而该支承框架是设置于使用者身上,例如设置于带有显示装置的头盔上的;处理所测信息的系统以及显示使用者合成图象的系统(上文的pp 25-28)。利用三角测量原理使用者得以定位,需要9个距离的测量值以确定使用者的位置与取向。该系统要求发送器与接收器之间能直接看得见。当需要追踪许多个接收器时,询检频率下降,即,为提供运动物体或其部分的实时再现所需要的测量速率下降。
上面讨论的传统的系统与包含有绝对运动参量传感器的系统有关,这些传感器对可运动物体相对于与发送器相连接的固定座标系统的绝对位置与取向进行测量。
还存在有包括相对运动参量传感器的系统。这些系统的优点在于它们的简单与紧凑。作为这种系统描述的举例可由“手套”构成,它们被使用在包含有用于测量手指关节的某些或全部旋转角度的传感器的虚拟现实浸没系统中。这种系统可进一步包括一用于追踪使用者腕关节运动的绝对三维运动与方向传感器(3D传感器)。例如,带有VPL公司的光学传感器的Data Glove装置(上文的pp.33-37)具有设在重量轻的弹性手套上的光学纤维和一3D传感器。标准的构造包括一对附加于每个手指外部的传感器用以探测基本关节的弯曲。光纤与光电接口相联接。该传感器应如此设计,使得关节在零度弯曲情况下通过纤维传导的光不产生衰减,反之,弯曲能改变其衰减量,这就使得能够对关节的旋转角进行间接测量。使用修正系数与适当的近似公式,将测量数据转化成角度值。这种系统存在的缺点在于在运动链开放状态下累积的误差所引起的较低精度,以及高成本。
在1996年2月13日公布的No5490784美国专利(US Cl.434-55,Int.Cl.G09B 9/00)中描述了一种向使用者提供虚拟现实的系统,它包括:一个具有六个自由度的球壳状的可移动平台组件,使用者即位于该平台组件的内部;球形平台位置的感测装置和配置在所述壳体内部中的计算机。发送器将平台位置信息发送给接收器,接收器又将接收的球形平台角位置数据提供给位于该平台外部的主计算机。提供给主计算机的是旋转平台线位移的信息。安装在头盔上的显示器根据接收的平台位移信息对虚拟现实图象进行调整。
然而,该传统系统不仅结构复杂,同时也不能提供充分的虚拟环境模拟。
于1992年10月14日公布的No 5349517美国专利(Cl.395-129,Int.Cl.G06F 15/20)描述了一种向使用者提供真实与虚拟环境的复合图象的系统,该系统包括:向使用者提供复合图象的虚拟显示装置;产生指示使用者视野方向的方向信号的方向探测装置;产生序列视频信号的视频摄像装置,这些视频信号综合起来表示其视野;安装所述视频摄像装置的摄像机安装装置,足以使该视频摄像装置的视野基本上与使用者视野相重合并追随使用者视野的移动;响应于所述方向信号的图像产生装置,用于产生该复合图像的相对应的适当计算机生成部分;对每个视频信号进行分析并选择视频信号或计算机生成信号的图象选择与合成装置,用以产生复合图象信号并将所述复合图象信号提供给所述可视显示装置。
然而,该系统不能根据使用者在空间真实位置与取向的变化向使用者提供虚拟环境图象。
发明概述
本发明的目的在于提供一种追踪并显示使用者在空间的位置与取向的方法和系统,它保证能降低制造与操作的成本,并且同时提高精度与速率以满足使用者运动的充分实时显示的需要。
本发明的另一目的在于为使用者提供在空间自然地无限制地运动以及在追踪使用者运动的过程中与虚拟环境目标交互作用的可能性。
本发明的另一目的在于提高精度并在他或她在实际环境中的运动过程中完全依照使用者位置与取向的改变向使用者提供满意的虚拟环境。
前述的目的在追踪并显示使用者在空间的位置与取向的方法中得以实现,所述方法包括如下步骤:
a)将确定与各自连接点相邻的各环节之间的至少一个角度的装置最接近地附着在使用者运动系统环节的每个基本连接点上;
b)在至少一个使用者运动系统环节上设置参考方向确定装置;
c)确定至少一个环节的取向,所述参考方向确定装置相对于所述参考方向设置在该环节上;
d)确定与所述基本连接点相邻的环节之间的角度;
e)根据所确定的角度值与至少一个环节的取向,一般地确定使用者在空间的位置与取向,所述参考方向确定装置即设置在该环节上。为了获得响应于他或她的实际运动确定使用者空间位置与取向在时间上变化的相关序列数据,以预定的时间间隔重复步骤(c)至步骤(e),记录所获得的使用者在空间的位置与取向的数据以便随后使用。
此外,应用使用者运动系统环节的线性尺寸值完成步骤(e),以及进一步包括的步骤有:
(f)确定使用者运动系统的支承环节;
(g)相对于被显示环境中的支承点对所述支承环节进行定位。
为了获得并记录使用者在被显示环境中位置与取向的数据序列并根据获得的数据显示使用者的运动,在预定的时间间隔内重复从步骤(d)至步骤(g)。
根据所记录的数据按照需要实时地或稍后显示出使用者的运动。
使用者的运动最好根据需要的观测方位或者在对获得的使用者运动的图象进行附加编辑之后予以显示。参考方向为地磁场传感器的南-北方向及本地垂直传感器的方向,或者是由陀螺稳定参考方向传感器确定的方向,或者是南-北方向与东-西方向,或者是由外部参考方向源确定的方向。
另外,所述参考方向确定装置最好是至少一对间隔开的绝对座标传感器,所述的一对传感器配置在至少一个使用者的运动系统环节上。
最好还要应用使用者的身高数据在人体的公知比例的基础上确定使用者运动系统环节的线性尺寸,为了适当改变使用者相对于被显示环境的尺寸,使用者运动系统环节的线性尺寸可按比例进行调节。
另外,在使用操作器以提供使用者与虚拟环境的目标互相作用的情况下,操作器的位置最好根据持有该操作器的使用者手的位置予以确定,同时使用位于其上的辅助参考方向确定装置确定操作器的精确取向。
使用者运动系统诸环节之间的基本连接点最好从髋关节、膝关节、踝关节、肩关节、肘关节、胸部与腰部脊柱之间的连接点以及,足关节和指关节中进行选择。
前述目的还可通过这样一种追踪使用者在空间的位置与取向的系统中达到,它包括有:多个配置在使用者身体各部分上的运动参数传感器,将传感器信号变换成所需表现形式的变换装置,具有与变换装置的输出端相连接的输入端的测量数据处理单元,与测量数据处理单元相连接的使用者位置与空间取向显示装置,根据本发明所述系统进一步包括:配置在至少一个使用者运动系统环节上的参考方向确定装置,具有与运动参数传感器及参考方向确定装置相连接的询检通道的询检单元,询检单元的输出端与变换装置的输入端相连,运动参数传感器为配置在紧靠使用者运动系统环节之间的基本连接点或在各环节本身之上的相对旋转角度传感器。
位置与取向追踪系统包括至少一个用于使用者与虚拟环境目标互相作用的装置,通过询检通道与询检单元相连接的辅助参考方向确定装置即配置在该装置上面。
相对旋转角度传感器最好是纤维光学传感器或应变仪。
另外,参考方向确定装置建立在地磁场传感器及本地垂直传感器,例如,重力传感器或陀螺稳定参考方向传感器,或人工外部参考方向信号源传感器的基础上。
最后,位置与取向的追踪系统最好包括存储经变换的测试数据的存储装置,用于随后显示使用者在空间的位置与取向,所述存储装置通过数据通信总线与测试数据处理单元相连接;用于构建三维环境的数学模拟以及位于其中的使用者的数学模拟的附加数据输入装置,它与测试数据处理单元相连接;以所需要的视角产生图象并编辑图象的图象产生单元,它连接在测试数据处理单元的输出端与使用者空间位置与取向显示单元的输入端之间。
本发明的前述目的还可通过响应于他或她在实际环境中的运动向使用者给出虚拟环境的方法来达到,所述方法包括如下步骤:
a)将确定与各自连接点相邻的各环节之间至少一个角度的装置最接近地附着在使用者运动系统环节的每个基本连接点上;
b)确定使用者运动系统环节的线性尺寸;
c)将参考方向确定装置设置在至少一个使用者运动系统环节上;
d)相对于所述参考方向确定至少一个环节的取向,所述参考方向确定装置即设置在该环节上;
e)确定与所述基本连接点相邻的各环节之间的角度;
f)根据获取的角度值及至少一个环节取向,一般地确定使用者在空间的位置与取向,所述参考方向确定装置即设置在该环节上;
g)确定使用者运动系统的支承环节;
h)相对于被显示的虚拟环境中的支承点将所述支承环节定位;
i)确定使用者头部在虚拟环境中的位置与取向,用以确定使用者在虚拟环境中的视野;
j)产生并向使用者提供与使用者视野相对应的虚拟环境区域。
响应于使用者的运动以及与虚拟环境目标的交互作用,重复步骤d)至j),以便实时显示虚拟环境的变化。
可以记录使用者的位置与取向数据序列以便随后使用。
参考方向最好取地磁场传感器的南-北方向与垂直传感器的方向,或南-北与东-西方向,或由陀螺稳定参考方向传感器确定的方向,或由外部参考方向源确定的方向,或由至少一对间隔开的绝对座标传感器产生的方向,所述的一对传感器配置在至少一个使用者的运动系统环节上。
最好在人体公知的比例基础上应用使用者的身高数据确定使用者运动系统环节的线性尺寸,使用者运动系统环节的线性尺寸可按比例进行调节,用以适当地改变使用者相对于被显示环境的尺寸。
另外,在利用操作器以提供使用者与被显示的虚拟环境目标的互相作用的情况下,操作器的位置最好根据持有该操作器的使用者手的位置加以确定,同时该操作器的精确取向利用配置于其上的辅助参考方向确定装置来确定。
使用者运动系统环节之间的基本连接点最好由髋关节、膝关节、踝关节、肩关节、肘关节、腕关节、头部与肩部之间以及胸椎与腰椎之间的连接点以及,足关节与指关节中进行选择。
本发明的前述目的还可通过对运动于实际环境中的使用者给出虚拟环境的系统加以实现,该系统包括:虚拟环境图象显示装置;产生指示使用者视野方向信号的装置;产生与使用者的视野相符合的虚拟环境图象信号的装置,它具有与产生指示使用者视野方向信号装置的输出端相连接的输入端,以及与虚拟环境图象显示装置的输入端相连接的输出端;其中根据本发明,所述产生指示使用者视野方向信号的装置进一步包括:确定与所述环节适当连接点相邻的使用者运动系统各环节之间的至少一个角度的装置;配置在至少一个使用者运动系统环节上的参考方向确定装置;模数变换装置,其输入端与所述确定使用者运动系统各环节之间角度的装置及所述参考方向确定装置的输出端相连接;用于建立模拟的三维环境及其中使用者的单元,其输入端与所述模数变换装置的输出端相连;以及使用者视野确定单元,其输入端与所述建立三雏环境及使用者数学模拟的单元的输出端相连接,其输出端与产生符合于使用者视野的虚拟环境图象信号的所述装置的输入端相连接;产生符合于使用者视野的虚拟环境图象信号的所述装置的第二输入端与建立三维环境及其中使用者数学模拟的单元的输出端相连接。
相对旋转角度传感器最好采用应变仪或纤维光学传感器。
更进一步地,参考方向确定装置最好用地磁场传感器与本地垂直传感器,或陀螺稳定参考方向传感器,或外部参考方向信号源传感器。
在为使用者与被显示的实际或虚拟环境的目标交互作用而使用操作器的情况下,最好采用配置在该操作器上的辅助参考方向确定装置,所述辅助参考方向确定装置的输出端与所述模-数变换装置的输入端相连。
最后,最好采用与所述模-数变换装置的输出端相耦合的长期记忆单元。
附图简述
下面结合附图对实施例的描述将使本发明更加清楚。附图中:
图1表示在根据本发明的系统中用于确定使用者运动系统各环节之间角度的装置与参考方向确定装置的配置的使用者通常视图;
图2为根据本发明的追踪并显示使用者位置与取向的系统的总体框图;
图3为根据本发明的为在实际环境中运动的使用者提供虚拟环境的系统的总体框图。
对实施例的详述
在图1中示意地描绘了一个具有一运动系统的使用者,该运动系统包括带有连接点3的环节2。环节2的连接点3类似于骨骼与关节的连接。如同人或动物的关节,连接点具有不同的自由度。例如,前臂与肩部、小腿与大腿的连接可作为具有一个自由度的简单枢纽关节进行模拟,而肩关节中肩部与肩胛骨的连接、以及髋关节的模拟则需要具有大量自由度的枢纽关节。
确定各环节2之间角度的装置为传感器4,它们追踪各环节及其彼此相对部分的位置,传感器设置在环节2的连接点3上及环节2本身之上。传感器4用作精确地追踪使用者的运动,包括对某些环节相对于其轴线的旋转角度的测量,例如,肘环节的一端相对于其另一端旋转角度的测量。肘环节包括两个彼此相对运动的半径,它能使一个环节的端部相对于另一端在其轴线内旋转。有若干个环节能够围绕其轴线旋转而不改变该环节与相邻环节之间的角度。它们是:头与颈一起相对于肩部的旋转;身体的胸部相对于骨盆部位的旋转。传感器4可以采用纤维光学传感器或应变仪。在本发明的一个实施例中,传感器4可以是角位移和线位移测量传感器,由发送部件与接收部件组成,响应于接收电路中感生电动势的变化,而该电动势随着各环节之间角度的变化而改变。
参考方向确定装置5设置在一个环节2上用以确定相对于参考方向的环节取向。装置5可方便地设置在那些当使用者进行规范的运动,如步行与跑步时保持最为稳定的部位上。该装置最好设置在骨盆部位。当使用者处于虚拟现实中时,采用紧固在头上的辅助参考方向确定装置能更快和更准确地追踪头部的取向。在一个实施例中,该参考方向确定装置可设置在相邻的各环节上,并且根据它们相对于参考方向的取向来确定其角位置。
向使用者显示虚拟环境的装置,设置在使用者头上眼睛的前面。
如图2所示,追踪并显示使用者位置与取向的系统的实施例包括询检单元7,该询检单元包括一主时钟,确定传感器4的询检频率n、参考方向确定装置5的询检频率m、用作与虚拟环境目标(操作器、操纵杆、武器模拟器等)交互作用的附加装置8的询检频率k。询检单元7的输出端与模-数变换装置(ADC)9相连接,该模-数变换装置用于将从传感器4、附加装置8以及参考方向确定装置5接收的模拟数据变换成例如具有8比特值的数字数据。ADC9的输出端与具有存储元件数量不少于(n+m+k)的存储单元10的输入端相连接。存储单元10通过询检单元11与长期记忆单元12及数据准备单元13相连接。该长期记忆单元12存储响应于使用者动作的随时间变化的使用者位置与取向数据,用于不同目的的进一步用途。在这种情况下长期记忆单元12的输出端可与数据准备单元13的输入端相连接,该数据准备单元修平所获得的数据,排除偶然的误差并通过构建使用者数学模拟所需的形式表示这些数据。在一个实施例中,如果相应地采用了ADC,则长期记忆单元的输入端可与ADC的输入端相连接。考虑两个实施例,元件7、9、10和11一起可称为模-数变换装置。
数据准备单元13的输出端与单元14的输入端相连接,单元14用以构建使用者显示于其中(或向使用者显示)的三维环境数学模拟以及其中使用者的数学模拟。单元13与14一起可称为测试与变换数字数据处理装置。与单元14相连接的是附加数据输入单元15,它确定使用者的附加信息、被显示的环境、使用者的运动与被显示环境中动力学变化之间的时间关系。该信息可包括使用者如下的附加信息,如他或她的身高、体重、性别、年龄等。当附加信息缺少或不需要时,使用者的数学模拟按照具有标准比例的标准人计算。单元14包括用于确定在其上相对于参考方向设有参考方向确定装置5的基本环节的取向的单元16、一般地构建使用者模拟的单元17、确定使用者支承环节的单元18、用于在由计算机产生的模拟环境中相对于支点对使用者定位的单元19。单元14的输出端与以所需要的视角产生图象的单元20的输入端相连接。单元20的输出端与用于显示相对于支点定位的被模拟使用者在被显示环境中的位置与取向的单元21的输入端相连接。
参照图3,向实际环境中运动的使用者给出虚拟环境的系统包括图2中相同的那些元件4、5、7至19,而与图2中描绘的系统相比的区别在于:单元14的输出端与使用者视野确定单元22的输入端和产生与使用者视野相符合的虚拟环境图象信号的单元23的输入端相连接。单元22的输出端还与虚拟环境图象信号产生单元23的输入端相连接。单元23的输出端与根据使用者在其中的位置与取向为使用者提供他或她处于其中的虚拟环境的单元24的输入端相连接。
在图2中说明的追踪并显示使用者位置与取向的系统以如下方式进行操作。
在优选的实施例中,传感器4及参考方向确定装置5附加在如同工装裤那样的特殊人体服上,或直接地附加在使用者的各环节2之间的连接点3的位置上以及各环节2本身之上。带有一套传感器4与装置5的人体服应该重量轻、易戴上与取下以及不妨碍使用者运动。传感器4附加在人体服上,因此当使用者运动时,即各环节2之间的角度发生变化或环节的一端相对于另一端沿该环节轴线产生旋转时,传感器中的一些物理参数发生变化。这些物理参数应在预定的范围之内响应于相邻环节2之间角度从一个极端位置到另一个极端位置的变化而发生改变。
该系统可以具有主要及辅助参考方向确定装置5,以确定适当装置5设在其上的环节与参考方向之间的角度。主要参考方向确定装置5设置在被作为基本环节的环节上。最好选择比较接近使用者几何中心的及在人的典型运动、如步行与跑步中最稳定的环节为基本环节。骨盆环节能最好地满足这些要求。当使用者处于虚拟现实中时,可采用附加在头部的辅助参考方向确定装置5以更精确与更快地追踪头部的倾斜与转动。
来自传感器4、参考方向确定装置5及用于与虚拟环境目标交互作用的附加装置8的信息,被加至ADC并根据由询检单元7的时钟发生器产生的询检信号进行修正。从ADC9获得的信息被加至存储单元10中的相应记忆元件上。
询检单元11对存储单元10中的记忆元件进行询检并产生用以确定使用者位置与取向的数据序列,包括有相对于特定(当前)时刻从附加装置8获得的数据,以及向长期记忆单元12提供用于长期存储的数据。这些数据可在任何时刻被利用,为此只需将该数据提供给数据准备单元13以便随后处理。当用于实时状态时,从询检单元11获取的数据直接提供给数据准备单元13。单元13修平获取的数据,消除偶然误差,产生所需的数据序列并向单元14给出所需形式的数据,用以构建使用者的数学模拟。
单元14构建使用者在其中被显示的三维环境的数学模拟以及其中使用者的数学模拟。通过附加数据输入单元15,使用者的附加数据、被显示的环境、使用者的运动与被显示环境中的动力学变化之间的时间关系被送入单元14。该信息可包含使用者如下的附加信息,如他或她的身高、体重、性别、年龄等。当附加信息缺少或不需要时,该数学模拟以具有标准比例的标准人进行计算。如果希望在被显示的环境中用人造的大或小的目标产生“Gulliver”效应,则需要对环境及其中目标的线性尺寸与使用者线性尺寸之间比例的输入数据进行修正。以同样方式,当从长期记忆单元12送入数据时,通过改变使用者运动的动态特性可使快或慢时间标度引入至被显示环境中。如果使用者的运动数据实时地提供给单元13,在被显示环境中的程序流的动态特性可被加速或减慢。
根据所接收的数据,主要环节构成与取向单元16计算并构建在其上面相对于参考方向设有主要参考方向确定装置的基本环节的位置与取向。该参考方向最好是与地球的地磁场相关的方向,南-北、东-西方向或在地球重力场与南-北方向的基础上确定的本地垂直方向。这些场一般到处存在且与使用者无关。使用专门的装置如电磁罗盘及水平或垂直重力传感器,使用者的取向可被确定,尤其是在其上面紧固这些装置的那些使用者运动系统的环节的取向可被确定。在对地球磁场具有强烈干扰或屏蔽的地方可用专门的装置产生参考方向的人造场。需要指出,在这种情况下只需确定使用者在该场当中的取向而不需要使用要求繁重计算的三角测量算法用于确定至该装置的绝对距离。
一般地构建使用者模拟的单元17利用其间角度的修正数据,向已经建立的基本环节添加其相邻环节,并且进一步向已经建立的相邻环节添加其后的相邻环节,依此类推直至最后环节。
单元18确定使用者的支承环节。作为举例,如果使用者沿着水平的平面运动,支承环节相对于本地垂直方向来说将是最低的一个,而支承点将是该环节的最低部分。
单元19相对于计算机生成环境中的支承点将使用者定位。为此,在最简单的情况下,定位之后的使用者的模拟与模拟环境中使用者的支承点相对准,以便记录使用者支承环节的支承部分及模拟环境的一部分,这一部分是当前时刻使用者的支承点。在使用者运动,例如跳跃,即一度“飞行”的情况下,利用使用者动态特性的最近信息使他或她相对于支承点定位。应该指出,具有了动态特性的各环节之间角度变化的完整信息,甚至使用者心率及在他或她被从该支点推开时的受力也可进行计算。这就允许对被显示环境中使用者的运动进行几乎逼真的模拟。在这种情况下,根据使用者环节变化的位置与取向,可以基本上跟踪使用者在空间的位置(座标)与取向的动态变化。这即是说,从被显示的使用者运动的图象中可以看出,例如,使用者朝北方走了十步,转过来朝东南跑,等等。
从单元14的输出端,在模拟环境中所构建的使用者模拟的信息被加至按所需视角产生图象的单元20的输入端,在其中观察者视角受到选择,所需视角产生的使用者图象被解算,以及如果需要,该图象被编辑用于随后的显示。从单元20的输出端将该信息提供给单元21的输入端,单元21对相对于被显示环境中的支承点定位的被模拟使用者的位置与取向进行显示。利用单元20,使用者自身或旁观者可以确定用于观察使用者运动动力学的形态。如果愿意,使用者的运动可自上、自下、自侧面或自变化的视点进行观察。在显示已事先写入长期记忆单元的使用者运动时,该运动在显示前可根据某项任务进行编辑。举例来说,可同期显示同一使用者在不同时间写入记忆单元的运动,或者为了比较而显示不同使用者的运动。取决于任务设定,使用者的运动可用简化的仿效模拟或更接近于带有“反映”衣服、皮肤、周围环境复杂结构的逼真图象的任何其它形式进行显示。在前一种情况下,基本上任何计算机都能完成任务,而在后一种情况下则需要具有优良图解能力的功能强大的计算机。
当向使用者给出虚拟环境时,根据本发明的系统的运行大体上与参考图2描述的相同。区别性特征在于单元14构建被显示给使用者的环境的三维模拟,以及其中使用者的数学模拟。从单元14的输出端,模拟环境中所构建的使用者模拟的信息被加至确定使用者视野的单元22的输入端及产生虚拟环境图象的单元23的输入端。利用从单元14接收的信息,单元22确定虚拟环境中使用者的视野,即使用者在当前时刻能看见的虚拟环境的那部分。从单元22的输出端,使用者的视角信息被加至产生虚拟环境图象的单元23。根据使用者的视野和虚拟环境模拟,单元23产生使用者根据实际环境中的运动而计算出的虚拟环境中他或她的位置与取向能看见的那部分虚拟环境的图象。响应于他或她在虚拟环境中的位置与取向,从单元23的输出端,该信号被加至向使用者给出他或她处于其中的虚拟环境的单元24的输入端。单元24可以是任何虚拟环境显示装置:监视器,虚拟头盔或护目镜,包括装置6(见图1)。
正如前面在现有技术状态的描述中所提到的,大多数传统系统使用由设置在使用者身上的传感器确定的绝对座标来产生使用者的模拟。因此,使用者在空间的位置通常被自动检测。在动态时,该绝对座标将给出使用者运动的路线。然而,该环境通常受到设置于使用者动作活动范围周边之上的外在传感器或发送器限制的约束。比较起来,本发明对使用者运动的活动范围基本上不产生约束,因为对于确定使用者的位置与取向所需的一切都设置在使用者自身之上。重要之处仅在于提供参考方向确定装置的操作范围,且同时根据各环节之间角度变化的信息与使用者相对于参考方向的取向的信息用计算机计算使用者在空间的运动。环境的变化可以根据使用者步伐的数目、尺寸及方向进行计算。为了确定步伐的尺寸,在完成该步的瞬间使用者各支承环节之间的角度及各支承环节的线性尺寸应为已知数。更详细地说,为确定人的步伐需要知道左、右腿大腿骨之间的角度,每条腿的大腿骨与小腿之间的角度,以及小腿与大腿的线性尺寸。在某些情况下测量脚与小腿之间的角度以及脚与脚趾之间的角度也是有用的。
为了简化通过环节相对平面的取向确定支承环节的判据,可以使用安装在使用者底部的传感器。例如,在某时刻如果一条腿为支承腿,则传感器中的触点闭合;相反,如果该腿抬起并悬垂,该触点则断开。该传感器还能提供每条腿携带的载荷信息。根据动态时由腿携带的载荷及使用者的重量,即使在跳跃时也可计算使用者的冲力以及使用者的运动路线。对于计算使用者运动的运动路线及体格特性所需要的数据也可根据各环节之间角度变化的动态特性加以计算。
工业应用性
根据本发明的方法与系统提供各种迄今不能实现的全新的可能性,尤其是,进行包括各种运动比如体育与舞蹈的测试与竞赛,用于评价对于设定情况的反应充分程度以及用于博击。这些竞赛能够在时间上进行区分,例如,通过从同一使用者在不同时间取得数据。然后,为了进行对比,在观察到这些运动之后既可由计算机也可由人对这些数据进行评估和比较。竞赛可在许多使用者中同时地进行。为此,可以从数个使用者实时地取得数据,并将其用于比较运动的执行及环境响应的正确性,响应速度以及运动的初始情况。这样的竞赛可在与国际互联网络或专用网络相联结的本发明系统的使用者之间进行,而这些使用者可以相距很远的距离。
写入记忆单元的使用者位置与取向数据可进一步存档。可以建立人类或任何脊椎动物的典型运动与由著名运动员及舞蹈家写入的独特运动的数据库。
本发明的一个基本优点在于全部传感器设在使用者身上。不需要确定到由现有技术的系统中外部传感器位置限定的参考点的绝对距离。本发明确保使用者在基本上无边界的环境中确定其位置与取向,该无边界环境只具有使用者可与之相对地被定向的参考方向场。参考方向的确定,如上所述,要提前确定一个环节的取向,在该环节上参考方向确定装置相对于该参考方向进行设置。最合适的参考方向为与我们无关而基本上到处存在的地球天然场的矢量方向。建议的两个参考方向(第三个方向与前两个方向正交而构成)为地球磁场的南-北与东-西方向,或者例如南-北方向与由地球重力场确定的本地垂直方向。如果使用者处在与外部场屏蔽的房间内,可以使用人工参考方向场发生器。在此情况下,同前面一样,需要确定使用者在参考方向场中的取向,而不是至外部发生器的绝对距离。在此情况下需要确定的是在其上设置参考方向确定装置的环节矢量与该参考方向之间的角度。
根据本发明通过追踪使用者的位置与取向以及向使用者给出虚拟环境,当处于虚拟现实中时,在被记录的使用者活动的历史范围之内“时间机器”的几乎所有的特征都可以实现。使用者可在他或她的被记录行为或其它英雄行为的任意瞬间返回至他或她的历史中的任意时刻。这可被用于计算机游戏,以便游戏者为了更大的效益能够恢复与改变他或她的状态。考虑到可写入数条平行的状态线,使用者可选择他或她认为最有效的任意一条状态线以继续他或她的行为。通过使用被记录的使用者位置与取向的动态变化,可以实现由三个空间维度与时间维度所限定的四维环境。与现实生活中运动仅沿时间向未来单一方向完成不同,通过采用存储的数据,本发明可使连续的或不连续的运动能够在写入存储单元的数据范围之内朝着时间的不同方面完成,如同在空间中一样容易。
由于本发明对使用者的运动进行追踪并提供虚拟环境而不用借助于复杂的外部装置,现有计算机系统的能力可得到扩展并可找到新的应用领域。可产生所跟踪的使用者运动的标准描述以便不同系统中采用。这样的使用者运动的标准描述在动画制作中及用于产生专用程序库时可被用作,例如VRML(虚拟现实模拟语言)部分。考虑到利用由根据本发明的方法追踪的使用者的自然运动对程序进行控制的可能性,大多数未来计算机应用程序能够利用这些标准模型。为了提供利用其中使用者运动由键盘、鼠标或操作杆及根据本发明的系统实现的当前计算机应用程序的全部材料库的可能性,必须提供接口装置,即能识别使用者的运动并将其变换成游戏控制信号与类似运动模拟信号的程序。
本发明的一个最重要的应用涉及训练使用者如何完成某些典型运动,比如跳舞、体育或职业运动或用于增进健康的运动。为此,将典型运动向使用者显示。为达到最好的结果,应向受训者提供重试、选择任意状态、动态完成,以及逐步完成的可能性。然后使用者应尽可能正确地尽力重复这些运动。为了随后的控制,他或她的运动应进行存储、记录,以便将其与典型运动进行比较。可通过不同的方法来完成典型运动与使用者运动的比较。使用者自己可观察同期显示的典型运动与事先存储的使用者运动。更有意义与更有前途的可能性在于利用计算机或熟练的专业人员评价使用者运动的正确性。根据装入的程序,对通过使用者的位置与取向跟踪的使用者运动进行比较之后,计算机能提供评价与建议。使用者将修正他或她的运动直至达到所需的熟练与准确程度。这个过程类似于由教练进行训练,然而它不包括相应的开支以及教练对进程的认可。由最好的教练建立的反馈程序可以复制成上百万件复制品,每个人在任何方便的时间都能使用它。
本发明还可用于监测使用者的被测身体紧张程度。举例来说,根据医生或教练员的建议确定特定人员的紧张程度。在没有这样的单个建议或一般的相反指示时,计算机可计算出并建议一定时期的紧张度体系。为限定紧张度,可以利用过去慢性疾病、体重、身高、性别、年龄、训练目的、训练等级与一天中的精神压力等数据。可进行包括对身体反应,例如一定压力下心率的变化程度,进行监视的专门初步测试。
紧张度确定之后,计算机可产生对于限定时间的最佳建议。使用最完全追踪使用者运动的传感器系统,使用者开始他或她的训练,因而身体各单独部分上的紧张度数据在运动信息的基础上可容易地计算出。在这种训练中,利用从使用者心率传感器取得的数据以及,如果适宜的话,其它生理特征参数是有益的。
如果使用者处于虚拟环境中并使用允许无约束地完成运动的训练系统,使用者的锻练与精神压力可以通过改变故事、动态特性及围绕使用者的环境由下载程序得到控制。在游戏当中可通过投入许多表面的敌人、情节的紧张程度、以足够的速度追击敌人或从危险地区逃脱的必要性等完成控制。这种控制使得,例如,心率在规定的时间周期内能够保持在预定的范围内,对于使用者这是不引人注意的。在希望的强度达到以后,使用者应处于执行任务与完成情节的状态。这将允许他或她在因取得的结果而情绪激动的精神状态中结束训练。很遗憾,通常现有的游戏不能满足这些原则。选手通常是静止的,即高度精神压力下的零位锻练强度,这可导致情绪紧张与低落。以可控的锻练强度与情绪压力完成的游戏与锻练可成为防止体能减弱和神经过度紧张的好方法,并促进个人全面谐调的发展。
具有预定身体紧张度的,并伴随提供知识的或内容丰富的信息的锻练可通过处于特殊的、使用者选择的虚拟环境中来实现。例如,计算机程序可模拟具有导游的在著名地区的跑步旅游,该导游可说出有趣场所并设置以预定的速度或需要时以可变的速度步行或跑步旅游的进度。在预定的紧张度达到之后这个旅游即可结束。因为锻练是独立的,以前的锻练与紧张度数据可写入计算机记忆单元用于以后使紧张度从初级水平向稳定的推荐水平的改进。标准恒定的或逐日改变的强度可以加入感情色彩并伴随以新的有用信息。为了添加更好的感情色彩,可以提供选择导游的性别或年龄,或模拟著名的演员或政治家图像的可能性。
如果采用该传感器系统的使用者达到一定紧张度而不处在虚拟现实中,其紧张度可用处理器控制,通过经由听觉通道的耳机提供反馈。该处理器可通报改变身体各单独部位紧张度的一般进度的必要性。此判断可以根据紧张度计算程序,在追踪使用者位置与取向的系统所接收信息的基础上做出。

Claims (52)

1.一种追踪并显示使用者在空间的位置与取向的方法,包括有:确定使用者身体各部分位移的参数,将获得的测试数据变换成所需的表现形式以及处理一组变换数据以产生用于确定使用者在空间的位置与取向的数据,所述方法的特征在于包括以下的步骤:
a)靠近使用者运动系统各环节的每个基本连接点附着上用于确定至少一个与相应连接点相邻的各环节之间角度的装置;
b)在至少一个使用者运动系统环节之上设置参考方向确定装置;
c)确定至少一个环节相对于所述参考方向的取向,在该环节之上设置有所述参考方向确定装置;
d)确定与所述基本连接点相邻的各环节之间的角度;
e)根据所确定的角度值与至少一个在其上设置有参考方向确定装置的环节取向,一般地确定使用者在空间的位置与取向。
2.如权利要求1所述的方法,其中以预定间隔重复所述步骤(c)至步骤(e),以取得用于确定响应于使用者实际运动的使用者在空间的位置与取向的瞬时变化的相关序列数据。
3.如权利要求2所述的方法,其中对所取得的使用者在空间的位置与取向的数据加以记录以便随后使用。
4.如权利要求1所述的方法,其中所述步骤(e)利用使用者运动系统各环节的线性尺寸值来完成,并进一步包括以下步骤:
f)确定使用者运动系统的支承环节;
g)相对于被显示的环境中的支承点将所述支承环节定位。
5.如权利要求4所述的方法,其中以预定的间隔重复所述步骤(d)至步骤(g)以取得并记录在被显示的环境中使用者的位置与取向的数据序列,以及根据所取得的数据显示使用者的运动。
6.如权利要求5所述的方法,其中使用者的运动以实时方式进行显示。
7.如权利要求5所述的方法,其中使用者的运动按需要在稍后根据记录的数据进行显示。
8.如权利要求6或7所述的方法,其中使用者的运动根据所需观察角度进行显示。
9.如权利要求6或7所述的方法,进一步包括编辑使用者运动的生成图象并显示使用者运动的该编辑图象。
10.如前述任一权利要求所述的方法,其中所述参考方向为地磁场传感器的南—北方向和本地垂直传感器的方向。
11.如权利要求1至9中任一权利要求所述的方法,其中所述参考方向为地磁场传感器的南—北或东—西方向。
12.如权利要求1至9中任一权利要求所述的方法,其中所述参考方向为由陀螺稳定参考方向传感器确定的方向。
13.如权利要求1至9中任一权利要求所述的方法,其中所述参考方向为由外部参考方向源确定的方向。
14.如权利要求1至9中任一权利要求所述的方法,其中所述参考方向确定装置为至少一对相隔开的绝对座标传感器,所述的传感器对设置在至少一个使用者运动系统的环节之上。
15.如权利要求4至14中任一权利要求所述的方法,其中所述使用者运动系统各环节的线性尺寸在人体公知比例的基础上利用使用者身高数据加以确定。
16.如权利要求4至15中任一权利要求所述的方法,其中改变所述使用者运动系统环节线性尺寸的比例以便适当修改使用者相对于被显示环境的尺寸。
17.如权利要求4至16中任一权利要求所述的方法,其中在利用操作器以便提供使用者与虚拟环境目标交互作用的情况下,该操作器的位置根据持有该操作器的使用者手的位置加以确定,而操作器的精确取向通过利用设置在该操作器上的辅助参考方向确定装置进行确定。
18.如前述任一权利要求所述的方法,其中所述使用者运动系统各环节之间的基本连接点最好从髋关节、膝关节、踝关节、肩关节、肘关节、腕关节以及脊柱连接点中选择。
19.如权利要求18所述的方法,其中所述基本连接点还有足关节与指关节。
20.一种追踪使用者在空间的位置与取向的设备,包括有:配置在使用者身体各部分上的许多运动参数传感器,将传感器信号变换成所需表现形式的变换装置,具有与变换装置的输出端相连接的输入端的测试数据处理单元,以及与测试数据处理单元相连接的使用者空间位置与取向显示单元,其特征在于所述设备进一步包括:
配置在至少一个使用者运动系统的环节之上的参考方向确定装置;
具有与运动参数传感器及参考方向确定装置相连接的询检通道的询检单元,该询检单元的输出端与变换装置的输入端相连接,该运动参数传感器为配置在使用者运动系统各环节之间邻近的基本连接点或在各环节本身之上的相对旋转角度传感器。
21.如权利要求20所述的设备,进一步包括至少一个用于使用者与虚拟环境目标交互作用的装置,通过询检通道与询检单元相连接的辅助参考方向确定装置配置在该装置之上。
22.如权利要求20或21所述的设备,其中所述相对旋转角度传感器为应变仪。
23.如权利要求20或21所述的设备,其中所述相对旋转角度传感器为纤维光学传感器。
24.如权利要求20至23中任一权利要求所述的设备,其中所术参考方向确定装置包括地磁场传感器。
25.如权利要求24所述的设备,其中所述参考方向确定装置进一步包括本地垂直传感器。
26.如权利要求25所述的设备,其中所述本地垂直传感器为重力传感器。
27.如权利要求20至23中任一权利要求所述的设备,其中所述参考方向确定装置包括人工外部参考方向信号源传感器。
28.如权利要求20至27中任一权利要求所述的设备,进一步包括存储装置,该装置用于存储进一步再现使用者空间位置与取向的变换后的测试数据,所述存储装置通过数据通信总线与测试数据处理单元相连接。
29.如权利要求20至28中任一权利要求所述的设备,进一步包括构建三维环境数学模拟及显示于其中的使用者数学模拟的附加数据输入装置,所述附加装置输入装置与测试数据处理单元相连接。
30.如权利要求20至29中任一权利要求所述的设备,进一步包括用于产生所需视角的图象并编辑该图象的图象产生单元,输入端与测试数据处理单元的输出端相连接并且其输出端与使用者空间位置与取向显示单元的输入端相连。
31.一种响应于使用者在实际环境中的运动向使用者给出虚拟环境的方法,包括确定使用者身体各部分的位移参数,将取得的数据变换成所需表现形式,并且处理一组该变换数据以确定呼应于使用者的位置与取向,并考虑到使用者与虚拟环境目标的交互作用,而向使用者显示的虚拟环境范围,所述方法的特征在于包括以下步骤:
a)将用于确定与各自连接点相邻的各环节之间至少一个角度的装置附着在使用者运动系统环节的每个基本连接点上;
b)确定使用者运动系统各环节的线性尺寸;
c)在至少一个使用者运动系统的环节上设置参考方向确定装置;
d)确定至少一个环节相对于所述参考方向的取向,在该环节上设有所述参考方向确定装置;
e)确定与所述基本连接点相邻的各环节之间的角度;
f)根据所得角度值与至少一个环节的取向,一般地确定使用者在空间的位置与取向,所述参考方向确定装置即配置在该环节上;
g)确定使用者运动系统的支承环节;
h)相对于被显示的虚拟环境中的支承点将所述支承环节定位;
i)确定使用者头部在虚拟环境中的位置与取向,以确定使用者在虚拟环境中的视野;
j)产生并向使用者给出与使用者视野相对应的虚拟环境区域。
32.如权利要求31所述的方法,其中重复所述步骤d)至步骤j)以便响应于使用者的运动与虚拟环境目标的交互作用实时显示虚拟环境的变化。
33.如权利要求31所述的方法,其中对使用者位置与取向数据序列加以记录以便随后使用。
34.如权利要求31至33中任一权利要求所述的方法,其中所述参考方向为地磁场传感器的南—北方向与本地垂直传感器的方向。
35.如权利要求31至33中任一权利要求所述的方法,其中所述参考方向为地磁场传感器的南—北或东—西方向。
36.如权利要求31至33中任一权利要求所述的方法,其中所述参考方向为由陀螺稳定参考方向传感器确定的方向。
37.如权利要求31至33中任一权利要求所述的方法,其中所述参考方向为由外部参考方向源确定的方向。
38.如权利要求31至33中任一权利要求所述的方法,其中所述参考方向确定装置为至少一对间隔开的绝对座标传感器,所述的传感器对配置在至少一个使用者运动系统的环节之上。
39.如权利要求31至38中任一权利要求所述的方法,其中所述使用者运动系统各环节的线性尺寸在公知的人体比例的基础上利用使用者身高数据加以确定。
40.如权利要求31至39中任一权利要求所述的方法,其中改变所述使用者运动系统各环节线性尺寸的比例,以便适当地变更使用者相对于被显示环境的尺寸。
41.如权利要求31至40中任一权利要求所述的方法,其中在使用操作器以提供使用者与虚拟环境目标交互作用的情况下,操作器的位置根据使用者持有该操作器的手的位置加以确定,而操作器的精确取向通过利用配置在该操作器上的辅助参考方向确定装置加以确定。
42.如权利要求31至41中任一权利要求所述的方法,其中所述使用者运动系统各环节之间的基本连接点从髋关节、膝关节、踝关节、肩关节、肘关节、腕关节、及头与肩之间的连接点、以及胸椎与腰椎之间的连接点中选择。
43.如权利要求42所述的方法,其中所述基本连接点还有足关节与指关节。
44.一种向在实际环境中运动的使用者给出虚拟环境的系统,包括有:虚拟环境图象显示装置,产生指示使用者视野方向信号的装置,产生符合于使用者视野的虚拟环境图象信号的装置,它具有与所述产生指示使用者视野方向信号装置的输出端相连接的输入端,以及与虚拟环境图象显示装置的输入端相连接的输出端,所述系统的特征在于所述使用者视野方向指示信号产生装置进一步包括:
用于确定与所述各环节的适当连接点相邻的使用者运动系统各环节之间至少一个角度的装置;
配置在至少一个使用者运动系统环节之上的参考方向确定装置;
具有与所述使用者运动系统环节之间角度确定装置及所述参考方向确定装置的输出端相连接的输入端的模—数变换装置;
用于构建三维环境及其中使用者模拟的单元,它具有与所述模—数变换装置的输出端相连接的输入端,以及
使用者视野确定单元,具有与所述三维环境及使用者数学模拟构建单元的输出端相连接的输入端,以及与所述虚拟环境图象信号产生单元的输入端相连接的输出端。
45.如权利要求44所述的系统,其中所述相对旋转角度传感器为应变仪。
46.如权利要求44所述的系统,其中所述相对旋转角度传感器为纤维光学传感器。
47.如权利要求44至46中任一权利要求所述的系统,其中所述参考方向确定装置为地磁场传感器与本地垂直传感器。
48.如权利要求47所述的系统,其中所述本地垂直传感器为重力传感器。
49.如权利要求44至46中任一权利要求所述的系统,其中所述参考方向确定装置为陀螺稳定参考方向传感器。
50.如权利要求44至46中任一权利要求所述的系统,其中所述参考方向确定装置包括外部参考方向信号源传感器。
51.如权利要求44至50中任一权利要求所述的系统,其中在使用操作器用于使用者与被显示的实际或虚拟环境目标交互作用的情况下,采用配置在该操作器上的辅助参考方向确定装置,所述辅助参考方向确定装置的输出端与所述模—数变换装置的相应输入端相连接。
52.如权利要求44至51中任一权利要求所述的系统,进一步包括具有与所述模—数变换装置的输出端相连接之输入端的长期记忆单元。
CNB971982147A 1996-08-14 1997-08-07 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统 Expired - Fee Related CN1168057C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
RU96116414A RU2107328C1 (ru) 1996-08-14 1996-08-14 Способ отслеживания и отображения положения и ориентации пользователя в пространстве и система для осуществления способа
RU96116415 1996-08-14
RU96116414 1996-08-14
RU96116415A RU2106695C1 (ru) 1996-08-14 1996-08-14 Способ представления виртуального пространства пользователю и система для осуществления способа

Publications (2)

Publication Number Publication Date
CN1231753A CN1231753A (zh) 1999-10-13
CN1168057C true CN1168057C (zh) 2004-09-22

Family

ID=26653888

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB971982147A Expired - Fee Related CN1168057C (zh) 1996-08-14 1997-08-07 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统

Country Status (6)

Country Link
US (1) US6005548A (zh)
EP (1) EP0959444A4 (zh)
JP (1) JP2001504605A (zh)
CN (1) CN1168057C (zh)
AU (1) AU3954997A (zh)
WO (1) WO1998007129A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1991691B (zh) * 2005-12-30 2012-07-04 财团法人工业技术研究院 交互式控制平台系统
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法

Families Citing this family (462)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US6722888B1 (en) * 1995-01-20 2004-04-20 Vincent J. Macri Method and apparatus for tutorial, self and assisted instruction directed to simulated preparation, training and competitive play and entertainment
US6430997B1 (en) 1995-11-06 2002-08-13 Trazer Technologies, Inc. System and method for tracking and assessing movement skills in multidimensional space
US6747632B2 (en) * 1997-03-06 2004-06-08 Harmonic Research, Inc. Wireless control device
US6720949B1 (en) * 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US20020036617A1 (en) 1998-08-21 2002-03-28 Timothy R. Pryor Novel man machine interfaces and applications
US6750848B1 (en) * 1998-11-09 2004-06-15 Timothy R. Pryor More useful man machine interfaces and applications
US6243106B1 (en) * 1998-04-13 2001-06-05 Compaq Computer Corporation Method for figure tracking using 2-D registration and 3-D reconstruction
IL127569A0 (en) * 1998-09-16 1999-10-28 Comsense Technologies Ltd Interactive toys
US6369794B1 (en) * 1998-09-09 2002-04-09 Matsushita Electric Industrial Co., Ltd. Operation indication outputting device for giving operation indication according to type of user's action
US6215498B1 (en) * 1998-09-10 2001-04-10 Lionhearth Technologies, Inc. Virtual command post
US6607136B1 (en) 1998-09-16 2003-08-19 Beepcard Inc. Physical presence digital authentication system
AU5997299A (en) 1998-10-02 2000-04-26 Comsense Technologies Ltd. Card for interaction with a computer
US6567116B1 (en) 1998-11-20 2003-05-20 James A. Aman Multiple object tracking system
US6707487B1 (en) 1998-11-20 2004-03-16 In The Play, Inc. Method for representing real-time motion
US7483049B2 (en) 1998-11-20 2009-01-27 Aman James A Optimizations for live event, real-time, 3D object tracking
US7966078B2 (en) 1999-02-01 2011-06-21 Steven Hoffberg Network media appliance system and method
JP4006873B2 (ja) * 1999-03-11 2007-11-14 ソニー株式会社 情報処理システム、情報処理方法及び装置、並びに情報提供媒体
US7015950B1 (en) 1999-05-11 2006-03-21 Pryor Timothy R Picture taking method and apparatus
US7113918B1 (en) * 1999-08-01 2006-09-26 Electric Planet, Inc. Method for video enabled electronic commerce
JP2001070640A (ja) 1999-09-07 2001-03-21 Konami Co Ltd ゲーム機
JP3179769B2 (ja) 1999-09-07 2001-06-25 コナミ株式会社 信号発生装置
US8019609B2 (en) 1999-10-04 2011-09-13 Dialware Inc. Sonic/ultrasonic authentication method
US6749432B2 (en) 1999-10-20 2004-06-15 Impulse Technology Ltd Education system challenging a subject's physiologic and kinesthetic systems to synergistically enhance cognitive function
WO2001029799A2 (en) * 1999-10-20 2001-04-26 Impulse Technology Ltd. Education system challenging a subject's physiologic and kinesthetic systems to synergistically enhance cognitive function
US6757068B2 (en) * 2000-01-28 2004-06-29 Intersense, Inc. Self-referenced tracking
FR2805057B1 (fr) * 2000-02-10 2002-05-03 Renault Procede et dispositif de presentation visuelle d'un espace virtuel a trois dimensions simulant un vehicule automobile
US7262778B1 (en) 2000-02-11 2007-08-28 Sony Corporation Automatic color adjustment of a template design
US6734834B1 (en) * 2000-02-11 2004-05-11 Yoram Baram Closed-loop augmented reality apparatus
US8407595B1 (en) 2000-02-11 2013-03-26 Sony Corporation Imaging service for automating the display of images
US7810037B1 (en) 2000-02-11 2010-10-05 Sony Corporation Online story collaboration
US7328119B1 (en) * 2000-03-07 2008-02-05 Pryor Timothy R Diet and exercise planning and motivation including apparel purchases based on future appearance
US6778866B1 (en) * 2000-03-16 2004-08-17 Ted S. Bettwy Method and apparatus for learning specific body motion
KR100355815B1 (ko) * 2000-04-11 2002-10-19 이지로보틱스 주식회사 다중 이동 로봇을 이용한 모션캡쳐 및 동작 애니메이션 장치
IL136373A0 (en) * 2000-05-25 2001-06-14 Itpen Ltd Partnership Israel Representation of three-dimensional bodies on computer screens and games involving such representations
US7330806B2 (en) * 2000-08-08 2008-02-12 Reohr Iii John Virtualized network
US7117136B1 (en) * 2000-08-18 2006-10-03 Linden Research, Inc. Input and feedback system
WO2002021451A1 (en) * 2000-09-07 2002-03-14 Neochi Llc Method and system for simultaneously creating and using multiple virtual reality programs
WO2002032035A2 (en) * 2000-10-10 2002-04-18 University Of Utah Research Foundation Method and apparatus for monitoring dynamic systems using an integrated graphic display for the n-dimensional representations of critical functions
US6746247B2 (en) 2000-12-27 2004-06-08 Michael P. Barton Choreographed athletic movement to music
US6646643B2 (en) 2001-01-05 2003-11-11 The United States Of America As Represented By The Secretary Of The Navy User control of simulated locomotion
US8306635B2 (en) 2001-03-07 2012-11-06 Motion Games, Llc Motivation and enhancement of physical and mental exercise, rehabilitation, health and social interaction
JP4708590B2 (ja) * 2001-03-13 2011-06-22 キヤノン株式会社 複合現実感システム、ヘッドマウントディスプレイ装置、複合現実感実現方法及びプログラム
US9219708B2 (en) 2001-03-22 2015-12-22 DialwareInc. Method and system for remotely authenticating identification devices
US6798429B2 (en) * 2001-03-29 2004-09-28 Intel Corporation Intuitive mobile device interface to virtual spaces
KR100393350B1 (ko) * 2001-04-23 2003-08-02 (주)가시오페아 가상경기 시스템 및 방법
EP1417008A1 (en) * 2001-06-19 2004-05-12 Jan G. Fäger A device and a method for creating an environment for a creature
SE523098C2 (sv) * 2001-06-19 2004-03-30 Jan G Faeger Anordning och förfarande för att i en reell omgivning skapa en virtuell företeelse
US6569019B2 (en) * 2001-07-10 2003-05-27 William Cochran Weapon shaped virtual reality character controller
US6758678B2 (en) 2001-08-14 2004-07-06 Disney Enterprises, Inc. Computer enhanced play set and method
KR20030038883A (ko) * 2001-11-07 2003-05-17 최창구 피에스디 센서를 이용한 모션 검출 장치
US6990639B2 (en) 2002-02-07 2006-01-24 Microsoft Corporation System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration
JP4054585B2 (ja) * 2002-02-18 2008-02-27 キヤノン株式会社 情報処理装置および方法
CA2477553A1 (en) 2002-03-12 2003-09-25 Menache, Llc Motion tracking system and method
US8260593B2 (en) * 2002-09-18 2012-09-04 Siemens Product Lifecycle Management Software Inc. System and method for simulating human movement
CN100428218C (zh) * 2002-11-13 2008-10-22 北京航空航天大学 一种实现通用虚拟环境漫游引擎的方法
WO2004070577A2 (en) * 2003-02-04 2004-08-19 Z-Kat, Inc. Interactive computer-assisted surgery system and method
WO2004070573A2 (en) * 2003-02-04 2004-08-19 Z-Kat, Inc. Computer-assisted external fixation apparatus and method
US20050267354A1 (en) * 2003-02-04 2005-12-01 Joel Marquart System and method for providing computer assistance with spinal fixation procedures
ES2234384B1 (es) * 2003-02-05 2006-10-16 Jesus Ciudad Colado Equipo informatizado para simular virtualmente el toreo de salon.
US7009561B2 (en) * 2003-03-11 2006-03-07 Menache, Llp Radio frequency motion tracking system and method
US8745541B2 (en) 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
US7665041B2 (en) 2003-03-25 2010-02-16 Microsoft Corporation Architecture for controlling a computer using hand gestures
WO2005002677A2 (de) * 2003-07-02 2005-01-13 Gonzalez De Mendoza Y Kaeding Simulations- und trainingskugel zur aufnahme von personen
US20050130108A1 (en) * 2003-12-12 2005-06-16 Kurzweil Raymond C. Virtual encounters
US8600550B2 (en) * 2003-12-12 2013-12-03 Kurzweil Technologies, Inc. Virtual encounters
US9948885B2 (en) * 2003-12-12 2018-04-17 Kurzweil Technologies, Inc. Virtual encounters
US9971398B2 (en) * 2003-12-12 2018-05-15 Beyond Imagination Inc. Virtual encounters
US9841809B2 (en) * 2003-12-12 2017-12-12 Kurzweil Technologies, Inc. Virtual encounters
JP2005234217A (ja) * 2004-02-19 2005-09-02 Nisshin Flour Milling Inc 小麦粉加工品製造技術を教授する小麦粉加工品製造技術教授装置及びプログラム
US7747409B2 (en) * 2004-03-12 2010-06-29 Vectronix Ag Pedestrian navigation apparatus and method
FR2868281B1 (fr) * 2004-03-30 2023-06-23 Commissariat Energie Atomique Procede de determination des mouvements d'une personne.
US20050278157A1 (en) * 2004-06-15 2005-12-15 Electronic Data Systems Corporation System and method for simulating human movement using profile paths
US9129077B2 (en) * 2004-09-03 2015-09-08 Siemen Product Lifecycle Management Software Inc. System and method for predicting human posture using a rules-based sequential approach
JP2008512166A (ja) * 2004-09-09 2008-04-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 可動関節の三次元撮像に対するシステム
US7433760B2 (en) * 2004-10-28 2008-10-07 Accelerated Pictures, Inc. Camera and animation controller, systems and methods
US20060281061A1 (en) * 2005-06-13 2006-12-14 Tgds, Inc. Sports Training Simulation System and Associated Methods
WO2007013833A1 (en) * 2005-09-15 2007-02-01 Oleg Stanilasvovich Rurin Method and system for visualising virtual three-dimensional objects
US20070142177A1 (en) * 2005-09-26 2007-06-21 Crucial Innovation, Inc. Computerized method and system for fitting a bicycle to a cyclist
US20070078535A1 (en) * 2005-09-30 2007-04-05 Rockwell Automation Technologies, Inc. System and method for identifying particularized equipment information of interest to varied users in an industrial automation environment
US7433741B2 (en) * 2005-09-30 2008-10-07 Rockwell Automation Technologies, Inc. Hybrid user interface having base presentation information with variably prominent supplemental information
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US9082319B2 (en) 2006-01-24 2015-07-14 Carnegie Mellon University Method, apparatus, and system for computer-aided tracking, navigation and motion teaching
CN102058976A (zh) * 2006-05-04 2011-05-18 美国索尼电脑娱乐公司 用于跟踪环境中的用户操纵的系统
WO2008014486A2 (en) * 2006-07-28 2008-01-31 Accelerated Pictures, Inc. Improved camera control
US20080028312A1 (en) * 2006-07-28 2008-01-31 Accelerated Pictures, Inc. Scene organization in computer-assisted filmmaking
US8005238B2 (en) 2007-03-22 2011-08-23 Microsoft Corporation Robust adaptive beamforming with enhanced noise suppression
TW200842692A (en) * 2007-04-17 2008-11-01 Benq Corp An electrical device and a display method
US8088017B2 (en) * 2007-05-15 2012-01-03 United States Bowling Congress, Inc. System and method for analyzing bowling ball motion
US8005237B2 (en) 2007-05-17 2011-08-23 Microsoft Corp. Sensor array beamformer post-processor
RU2364436C2 (ru) * 2007-06-18 2009-08-20 Максим Алексеевич Васин Способ тренировки и устройство для его осуществления
US7980141B2 (en) 2007-07-27 2011-07-19 Robert Connor Wearable position or motion sensing systems or methods
US20100027839A1 (en) * 2007-07-31 2010-02-04 Think/Thing System and method for tracking movement of joints
WO2009042896A1 (en) 2007-09-26 2009-04-02 Aq Media, Inc. Audio-visual navigation and communication dynamic memory architectures
US8629976B2 (en) * 2007-10-02 2014-01-14 Microsoft Corporation Methods and systems for hierarchical de-aliasing time-of-flight (TOF) systems
TWI372645B (en) * 2007-10-17 2012-09-21 Cywee Group Ltd An electronic game controller with motion-sensing capability
EP2203896B1 (en) * 2007-10-26 2019-04-24 Koninklijke Philips N.V. Method and system for selecting the viewing configuration of a rendered figure
US20090166684A1 (en) * 2007-12-26 2009-07-02 3Dv Systems Ltd. Photogate cmos pixel for 3d cameras having reduced intra-pixel cross talk
US8933876B2 (en) 2010-12-13 2015-01-13 Apple Inc. Three dimensional user interface session control
US9035876B2 (en) 2008-01-14 2015-05-19 Apple Inc. Three-dimensional user interface session control
US8571637B2 (en) 2008-01-21 2013-10-29 Biomet Manufacturing, Llc Patella tracking method and apparatus for use in surgical navigation
EP3352107A1 (en) 2008-03-03 2018-07-25 NIKE Innovate C.V. Interactive athletic equipment system
US20090270193A1 (en) * 2008-04-24 2009-10-29 United States Bowling Congress Analyzing a motion of a bowler
DE102008027103A1 (de) * 2008-06-06 2009-12-10 Cairos Technologies Ag System und Verfahren zur automatisierten Analyse eines Wettkampfverlaufes
US8385557B2 (en) 2008-06-19 2013-02-26 Microsoft Corporation Multichannel acoustic echo reduction
US8325909B2 (en) 2008-06-25 2012-12-04 Microsoft Corporation Acoustic echo suppression
US8203699B2 (en) 2008-06-30 2012-06-19 Microsoft Corporation System architecture design for time-of-flight system having reduced differential pixel size, and time-of-flight systems so designed
US8172722B2 (en) * 2008-12-05 2012-05-08 Nike, Inc. Athletic performance monitoring systems and methods in a team sports environment
US8628453B2 (en) 2008-12-05 2014-01-14 Nike, Inc. Athletic performance monitoring systems and methods in a team sports environment
US8231506B2 (en) 2008-12-05 2012-07-31 Nike, Inc. Athletic performance monitoring systems and methods in a team sports environment
US8681321B2 (en) * 2009-01-04 2014-03-25 Microsoft International Holdings B.V. Gated 3D camera
CN102341767A (zh) * 2009-01-21 2012-02-01 佐治亚技术研究公司 使用运动捕获的角色动画控制接口
US8565477B2 (en) 2009-01-30 2013-10-22 Microsoft Corporation Visual target tracking
US7996793B2 (en) 2009-01-30 2011-08-09 Microsoft Corporation Gesture recognizer system architecture
US20100199228A1 (en) * 2009-01-30 2010-08-05 Microsoft Corporation Gesture Keyboarding
US8565476B2 (en) 2009-01-30 2013-10-22 Microsoft Corporation Visual target tracking
US8294767B2 (en) 2009-01-30 2012-10-23 Microsoft Corporation Body scan
US8577084B2 (en) * 2009-01-30 2013-11-05 Microsoft Corporation Visual target tracking
US8267781B2 (en) * 2009-01-30 2012-09-18 Microsoft Corporation Visual target tracking
US8295546B2 (en) 2009-01-30 2012-10-23 Microsoft Corporation Pose tracking pipeline
US20100199231A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Predictive determination
US8577085B2 (en) * 2009-01-30 2013-11-05 Microsoft Corporation Visual target tracking
US8448094B2 (en) 2009-01-30 2013-05-21 Microsoft Corporation Mapping a natural input device to a legacy system
US8682028B2 (en) * 2009-01-30 2014-03-25 Microsoft Corporation Visual target tracking
US8487938B2 (en) * 2009-01-30 2013-07-16 Microsoft Corporation Standard Gestures
US8588465B2 (en) * 2009-01-30 2013-11-19 Microsoft Corporation Visual target tracking
US20100235786A1 (en) * 2009-03-13 2010-09-16 Primesense Ltd. Enhanced 3d interfacing for remote devices
US8773355B2 (en) 2009-03-16 2014-07-08 Microsoft Corporation Adaptive cursor sizing
US9256282B2 (en) 2009-03-20 2016-02-09 Microsoft Technology Licensing, Llc Virtual object manipulation
US8988437B2 (en) 2009-03-20 2015-03-24 Microsoft Technology Licensing, Llc Chaining animations
US9313376B1 (en) 2009-04-01 2016-04-12 Microsoft Technology Licensing, Llc Dynamic depth power equalization
US8942428B2 (en) * 2009-05-01 2015-01-27 Microsoft Corporation Isolate extraneous motions
US8503720B2 (en) 2009-05-01 2013-08-06 Microsoft Corporation Human body pose estimation
US8253746B2 (en) 2009-05-01 2012-08-28 Microsoft Corporation Determine intended motions
US8181123B2 (en) 2009-05-01 2012-05-15 Microsoft Corporation Managing virtual port associations to users in a gesture-based computing environment
US9898675B2 (en) * 2009-05-01 2018-02-20 Microsoft Technology Licensing, Llc User movement tracking feedback to improve tracking
US8660303B2 (en) * 2009-05-01 2014-02-25 Microsoft Corporation Detection of body and props
US9377857B2 (en) 2009-05-01 2016-06-28 Microsoft Technology Licensing, Llc Show body position
US8340432B2 (en) 2009-05-01 2012-12-25 Microsoft Corporation Systems and methods for detecting a tilt angle from a depth image
US9498718B2 (en) 2009-05-01 2016-11-22 Microsoft Technology Licensing, Llc Altering a view perspective within a display environment
US9015638B2 (en) 2009-05-01 2015-04-21 Microsoft Technology Licensing, Llc Binding users to a gesture based system and providing feedback to the users
US8638985B2 (en) 2009-05-01 2014-01-28 Microsoft Corporation Human body pose estimation
US8649554B2 (en) 2009-05-01 2014-02-11 Microsoft Corporation Method to control perspective for a camera-controlled computer
US20100295771A1 (en) * 2009-05-20 2010-11-25 Microsoft Corporation Control of display objects
US9182814B2 (en) 2009-05-29 2015-11-10 Microsoft Technology Licensing, Llc Systems and methods for estimating a non-visible or occluded body part
US8693724B2 (en) 2009-05-29 2014-04-08 Microsoft Corporation Method and system implementing user-centric gesture control
US9400559B2 (en) * 2009-05-29 2016-07-26 Microsoft Technology Licensing, Llc Gesture shortcuts
US8509479B2 (en) * 2009-05-29 2013-08-13 Microsoft Corporation Virtual object
US8625837B2 (en) 2009-05-29 2014-01-07 Microsoft Corporation Protocol and format for communicating an image from a camera to a computing environment
US8744121B2 (en) 2009-05-29 2014-06-03 Microsoft Corporation Device for identifying and tracking multiple humans over time
US8542252B2 (en) 2009-05-29 2013-09-24 Microsoft Corporation Target digitization, extraction, and tracking
US8856691B2 (en) 2009-05-29 2014-10-07 Microsoft Corporation Gesture tool
US9383823B2 (en) 2009-05-29 2016-07-05 Microsoft Technology Licensing, Llc Combining gestures beyond skeletal
US8379101B2 (en) 2009-05-29 2013-02-19 Microsoft Corporation Environment and/or target segmentation
US20100302138A1 (en) * 2009-05-29 2010-12-02 Microsoft Corporation Methods and systems for defining or modifying a visual representation
US8320619B2 (en) 2009-05-29 2012-11-27 Microsoft Corporation Systems and methods for tracking a model
US8418085B2 (en) 2009-05-29 2013-04-09 Microsoft Corporation Gesture coach
US8487871B2 (en) 2009-06-01 2013-07-16 Microsoft Corporation Virtual desktop coordinate transformation
US20100311512A1 (en) * 2009-06-04 2010-12-09 Timothy James Lock Simulator with enhanced depth perception
US8390680B2 (en) 2009-07-09 2013-03-05 Microsoft Corporation Visual representation expression based on player expression
US9159151B2 (en) 2009-07-13 2015-10-13 Microsoft Technology Licensing, Llc Bringing a visual representation to life via learned input from the user
GB2471905B (en) * 2009-07-17 2011-08-31 Sony Comp Entertainment Europe User interface and method of user interaction
US8264536B2 (en) * 2009-08-25 2012-09-11 Microsoft Corporation Depth-sensitive imaging via polarization-state mapping
US9141193B2 (en) 2009-08-31 2015-09-22 Microsoft Technology Licensing, Llc Techniques for using human gestures to control gesture unaware programs
US8508919B2 (en) * 2009-09-14 2013-08-13 Microsoft Corporation Separation of electrical and optical components
US8330134B2 (en) * 2009-09-14 2012-12-11 Microsoft Corporation Optical fault monitoring
US8976986B2 (en) * 2009-09-21 2015-03-10 Microsoft Technology Licensing, Llc Volume adjustment based on listener position
US8428340B2 (en) * 2009-09-21 2013-04-23 Microsoft Corporation Screen space plane identification
US8760571B2 (en) 2009-09-21 2014-06-24 Microsoft Corporation Alignment of lens and image sensor
US9014546B2 (en) 2009-09-23 2015-04-21 Rovi Guides, Inc. Systems and methods for automatically detecting users within detection regions of media devices
US8452087B2 (en) 2009-09-30 2013-05-28 Microsoft Corporation Image selection techniques
US8723118B2 (en) * 2009-10-01 2014-05-13 Microsoft Corporation Imager for constructing color and depth images
US20110083108A1 (en) * 2009-10-05 2011-04-07 Microsoft Corporation Providing user interface feedback regarding cursor position on a display screen
US8564534B2 (en) 2009-10-07 2013-10-22 Microsoft Corporation Human tracking system
US8963829B2 (en) 2009-10-07 2015-02-24 Microsoft Corporation Methods and systems for determining and tracking extremities of a target
US7961910B2 (en) 2009-10-07 2011-06-14 Microsoft Corporation Systems and methods for tracking a model
US8867820B2 (en) 2009-10-07 2014-10-21 Microsoft Corporation Systems and methods for removing a background of an image
US9400548B2 (en) * 2009-10-19 2016-07-26 Microsoft Technology Licensing, Llc Gesture personalization and profile roaming
US20110099476A1 (en) * 2009-10-23 2011-04-28 Microsoft Corporation Decorating a display environment
US8988432B2 (en) * 2009-11-05 2015-03-24 Microsoft Technology Licensing, Llc Systems and methods for processing an image for target tracking
US8843857B2 (en) 2009-11-19 2014-09-23 Microsoft Corporation Distance scalable no touch computing
US9244533B2 (en) 2009-12-17 2016-01-26 Microsoft Technology Licensing, Llc Camera navigation for presentations
US20110150271A1 (en) 2009-12-18 2011-06-23 Microsoft Corporation Motion detection using depth images
US20110151974A1 (en) * 2009-12-18 2011-06-23 Microsoft Corporation Gesture style recognition and reward
US8320621B2 (en) 2009-12-21 2012-11-27 Microsoft Corporation Depth projector system with integrated VCSEL array
US20110164032A1 (en) * 2010-01-07 2011-07-07 Prime Sense Ltd. Three-Dimensional User Interface
US8631355B2 (en) 2010-01-08 2014-01-14 Microsoft Corporation Assigning gesture dictionaries
US9268404B2 (en) * 2010-01-08 2016-02-23 Microsoft Technology Licensing, Llc Application gesture interpretation
US9019201B2 (en) * 2010-01-08 2015-04-28 Microsoft Technology Licensing, Llc Evolving universal gesture sets
US8334842B2 (en) 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
US8933884B2 (en) * 2010-01-15 2015-01-13 Microsoft Corporation Tracking groups of users in motion capture system
US20110175918A1 (en) * 2010-01-21 2011-07-21 Cheng-Yun Karen Liu Character animation control interface using motion capure
US8676581B2 (en) 2010-01-22 2014-03-18 Microsoft Corporation Speech recognition analysis via identification information
US8265341B2 (en) * 2010-01-25 2012-09-11 Microsoft Corporation Voice-body identity correlation
US8864581B2 (en) 2010-01-29 2014-10-21 Microsoft Corporation Visual based identitiy tracking
US8891067B2 (en) 2010-02-01 2014-11-18 Microsoft Corporation Multiple synchronized optical sources for time-of-flight range finding systems
US8687044B2 (en) * 2010-02-02 2014-04-01 Microsoft Corporation Depth camera compatibility
US8619122B2 (en) * 2010-02-02 2013-12-31 Microsoft Corporation Depth camera compatibility
US8717469B2 (en) * 2010-02-03 2014-05-06 Microsoft Corporation Fast gating photosurface
US8659658B2 (en) * 2010-02-09 2014-02-25 Microsoft Corporation Physical interaction zone for gesture-based user interfaces
US8499257B2 (en) * 2010-02-09 2013-07-30 Microsoft Corporation Handles interactions for human—computer interface
US8633890B2 (en) * 2010-02-16 2014-01-21 Microsoft Corporation Gesture detection based on joint skipping
US8928579B2 (en) * 2010-02-22 2015-01-06 Andrew David Wilson Interacting with an omni-directionally projected display
JP5499762B2 (ja) * 2010-02-24 2014-05-21 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び画像処理システム
US8411948B2 (en) 2010-03-05 2013-04-02 Microsoft Corporation Up-sampling binary images for segmentation
US9237294B2 (en) 2010-03-05 2016-01-12 Sony Corporation Apparatus and method for replacing a broadcasted advertisement based on both heuristic information and attempts in altering the playback of the advertisement
US8655069B2 (en) 2010-03-05 2014-02-18 Microsoft Corporation Updating image segmentation following user input
US8422769B2 (en) 2010-03-05 2013-04-16 Microsoft Corporation Image segmentation using reduced foreground training data
US20110223995A1 (en) 2010-03-12 2011-09-15 Kevin Geisner Interacting with a computer based application
US20110221755A1 (en) * 2010-03-12 2011-09-15 Kevin Geisner Bionic motion
US8279418B2 (en) 2010-03-17 2012-10-02 Microsoft Corporation Raster scanning for depth detection
US8213680B2 (en) * 2010-03-19 2012-07-03 Microsoft Corporation Proxy training data for human body tracking
US8514269B2 (en) * 2010-03-26 2013-08-20 Microsoft Corporation De-aliasing depth images
US20110234481A1 (en) * 2010-03-26 2011-09-29 Sagi Katz Enhancing presentations using depth sensing cameras
US8523667B2 (en) * 2010-03-29 2013-09-03 Microsoft Corporation Parental control settings based on body dimensions
US9901828B2 (en) * 2010-03-30 2018-02-27 Sony Interactive Entertainment America Llc Method for an augmented reality character to maintain and exhibit awareness of an observer
US8605763B2 (en) 2010-03-31 2013-12-10 Microsoft Corporation Temperature measurement and control for laser and light-emitting diodes
US8540571B2 (en) 2010-03-31 2013-09-24 Immersion Corporation System and method for providing haptic stimulus based on position
US9646340B2 (en) 2010-04-01 2017-05-09 Microsoft Technology Licensing, Llc Avatar-based virtual dressing room
US9098873B2 (en) 2010-04-01 2015-08-04 Microsoft Technology Licensing, Llc Motion-based interactive shopping environment
US8351651B2 (en) 2010-04-26 2013-01-08 Microsoft Corporation Hand-location post-process refinement in a tracking system
US8379919B2 (en) 2010-04-29 2013-02-19 Microsoft Corporation Multiple centroid condensation of probability distribution clouds
US8284847B2 (en) 2010-05-03 2012-10-09 Microsoft Corporation Detecting motion for a multifunction sensor device
US8498481B2 (en) 2010-05-07 2013-07-30 Microsoft Corporation Image segmentation using star-convexity constraints
US8885890B2 (en) 2010-05-07 2014-11-11 Microsoft Corporation Depth map confidence filtering
US8457353B2 (en) 2010-05-18 2013-06-04 Microsoft Corporation Gestures and gesture modifiers for manipulating a user-interface
US8803888B2 (en) 2010-06-02 2014-08-12 Microsoft Corporation Recognition system for sharing information
US8751215B2 (en) 2010-06-04 2014-06-10 Microsoft Corporation Machine based sign language interpreter
US9008355B2 (en) 2010-06-04 2015-04-14 Microsoft Technology Licensing, Llc Automatic depth camera aiming
US9557574B2 (en) 2010-06-08 2017-01-31 Microsoft Technology Licensing, Llc Depth illumination and detection optics
US8330822B2 (en) 2010-06-09 2012-12-11 Microsoft Corporation Thermally-tuned depth camera light source
US8749557B2 (en) 2010-06-11 2014-06-10 Microsoft Corporation Interacting with user interface via avatar
US8675981B2 (en) 2010-06-11 2014-03-18 Microsoft Corporation Multi-modal gender recognition including depth data
US9384329B2 (en) 2010-06-11 2016-07-05 Microsoft Technology Licensing, Llc Caloric burn determination from body movement
US8982151B2 (en) 2010-06-14 2015-03-17 Microsoft Technology Licensing, Llc Independently processing planes of display data
US8558873B2 (en) 2010-06-16 2013-10-15 Microsoft Corporation Use of wavefront coding to create a depth image
US8670029B2 (en) 2010-06-16 2014-03-11 Microsoft Corporation Depth camera illuminator with superluminescent light-emitting diode
US8296151B2 (en) 2010-06-18 2012-10-23 Microsoft Corporation Compound gesture-speech commands
US8381108B2 (en) 2010-06-21 2013-02-19 Microsoft Corporation Natural user input for driving interactive stories
US8416187B2 (en) 2010-06-22 2013-04-09 Microsoft Corporation Item navigation using motion-capture data
US9075434B2 (en) 2010-08-20 2015-07-07 Microsoft Technology Licensing, Llc Translating user motion into multiple object responses
US8613666B2 (en) 2010-08-31 2013-12-24 Microsoft Corporation User selection and navigation based on looped motions
US20120058824A1 (en) * 2010-09-07 2012-03-08 Microsoft Corporation Scalable real-time motion recognition
US8437506B2 (en) 2010-09-07 2013-05-07 Microsoft Corporation System for fast, probabilistic skeletal tracking
US8988508B2 (en) 2010-09-24 2015-03-24 Microsoft Technology Licensing, Llc. Wide angle field of view active illumination imaging system
US8681255B2 (en) 2010-09-28 2014-03-25 Microsoft Corporation Integrated low power depth camera and projection device
US8548270B2 (en) 2010-10-04 2013-10-01 Microsoft Corporation Time-of-flight depth imaging
US9628755B2 (en) * 2010-10-14 2017-04-18 Microsoft Technology Licensing, Llc Automatically tracking user movement in a video chat application
US9484065B2 (en) 2010-10-15 2016-11-01 Microsoft Technology Licensing, Llc Intelligent determination of replays based on event identification
US9832528B2 (en) 2010-10-21 2017-11-28 Sony Corporation System and method for merging network-based content with broadcasted programming content
US8592739B2 (en) 2010-11-02 2013-11-26 Microsoft Corporation Detection of configuration changes of an optical element in an illumination system
US8866889B2 (en) 2010-11-03 2014-10-21 Microsoft Corporation In-home depth camera calibration
KR101818092B1 (ko) 2010-11-10 2018-01-12 나이키 이노베이트 씨.브이. 시간 기반 체육 활동 측정 및 표시를 위한 시스템 및 방법
US8667519B2 (en) 2010-11-12 2014-03-04 Microsoft Corporation Automatic passive and anonymous feedback system
US10726861B2 (en) 2010-11-15 2020-07-28 Microsoft Technology Licensing, Llc Semi-private communication in open environments
US9349040B2 (en) 2010-11-19 2016-05-24 Microsoft Technology Licensing, Llc Bi-modal depth-image analysis
US10234545B2 (en) 2010-12-01 2019-03-19 Microsoft Technology Licensing, Llc Light source module
DE102010053582A1 (de) * 2010-12-06 2012-06-06 Northrop Grumman Litef Gmbh System und Verfahren zur Überwachung von mechanisch gekoppelten Strukturen
US8872762B2 (en) * 2010-12-08 2014-10-28 Primesense Ltd. Three dimensional user interface cursor control
US8553934B2 (en) 2010-12-08 2013-10-08 Microsoft Corporation Orienting the position of a sensor
US8618405B2 (en) 2010-12-09 2013-12-31 Microsoft Corp. Free-space gesture musical instrument digital interface (MIDI) controller
US8408706B2 (en) 2010-12-13 2013-04-02 Microsoft Corporation 3D gaze tracker
US8920241B2 (en) 2010-12-15 2014-12-30 Microsoft Corporation Gesture controlled persistent handles for interface guides
US9171264B2 (en) 2010-12-15 2015-10-27 Microsoft Technology Licensing, Llc Parallel processing machine learning decision tree training
US8884968B2 (en) 2010-12-15 2014-11-11 Microsoft Corporation Modeling an object from image data
US8448056B2 (en) 2010-12-17 2013-05-21 Microsoft Corporation Validation analysis of human target
US8803952B2 (en) 2010-12-20 2014-08-12 Microsoft Corporation Plural detector time-of-flight depth mapping
US9821224B2 (en) 2010-12-21 2017-11-21 Microsoft Technology Licensing, Llc Driving simulator control with virtual skeleton
US9848106B2 (en) 2010-12-21 2017-12-19 Microsoft Technology Licensing, Llc Intelligent gameplay photo capture
US8994718B2 (en) 2010-12-21 2015-03-31 Microsoft Technology Licensing, Llc Skeletal control of three-dimensional virtual world
US8385596B2 (en) 2010-12-21 2013-02-26 Microsoft Corporation First person shooter control with virtual skeleton
US9823339B2 (en) 2010-12-21 2017-11-21 Microsoft Technology Licensing, Llc Plural anode time-of-flight sensor
US9123316B2 (en) * 2010-12-27 2015-09-01 Microsoft Technology Licensing, Llc Interactive content creation
US8488888B2 (en) 2010-12-28 2013-07-16 Microsoft Corporation Classification of posture states
US9436286B2 (en) 2011-01-05 2016-09-06 Qualcomm Incorporated Method and apparatus for tracking orientation of a user
US8401225B2 (en) 2011-01-31 2013-03-19 Microsoft Corporation Moving object segmentation using depth images
US8401242B2 (en) 2011-01-31 2013-03-19 Microsoft Corporation Real-time camera tracking using depth maps
US8587583B2 (en) 2011-01-31 2013-11-19 Microsoft Corporation Three-dimensional environment reconstruction
US9247238B2 (en) 2011-01-31 2016-01-26 Microsoft Technology Licensing, Llc Reducing interference between multiple infra-red depth cameras
US8724887B2 (en) 2011-02-03 2014-05-13 Microsoft Corporation Environmental modifications to mitigate environmental factors
CN106984041B (zh) 2011-02-11 2021-07-06 漳州市舟锋电子科技有限公司 一种人机互动控制系统
US8942917B2 (en) 2011-02-14 2015-01-27 Microsoft Corporation Change invariant scene recognition by an agent
US8497838B2 (en) 2011-02-16 2013-07-30 Microsoft Corporation Push actuation of interface controls
JP5813787B2 (ja) 2011-02-17 2015-11-17 ナイキ イノベイト シーブイ ワークアウトセッション中のユーザーパフォーマンス指標の追跡
US9551914B2 (en) 2011-03-07 2017-01-24 Microsoft Technology Licensing, Llc Illuminator with refractive optical element
US9067136B2 (en) 2011-03-10 2015-06-30 Microsoft Technology Licensing, Llc Push personalization of interface controls
US8571263B2 (en) * 2011-03-17 2013-10-29 Microsoft Corporation Predicting joint positions
US8542112B2 (en) 2011-03-25 2013-09-24 Telenav, Inc. Navigation system with physical activity safety mechanism and method of operation thereof
US9470778B2 (en) 2011-03-29 2016-10-18 Microsoft Technology Licensing, Llc Learning from high quality depth measurements
US9760566B2 (en) 2011-03-31 2017-09-12 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
US10642934B2 (en) 2011-03-31 2020-05-05 Microsoft Technology Licensing, Llc Augmented conversational understanding architecture
US9298287B2 (en) 2011-03-31 2016-03-29 Microsoft Technology Licensing, Llc Combined activation for natural user interface systems
US9842168B2 (en) 2011-03-31 2017-12-12 Microsoft Technology Licensing, Llc Task driven user intents
US20130029681A1 (en) * 2011-03-31 2013-01-31 Qualcomm Incorporated Devices, methods, and apparatuses for inferring a position of a mobile device
US8503494B2 (en) 2011-04-05 2013-08-06 Microsoft Corporation Thermal management system
US8824749B2 (en) 2011-04-05 2014-09-02 Microsoft Corporation Biometric recognition
US8620113B2 (en) 2011-04-25 2013-12-31 Microsoft Corporation Laser diode modes
US8702507B2 (en) 2011-04-28 2014-04-22 Microsoft Corporation Manual and camera-based avatar control
US9259643B2 (en) 2011-04-28 2016-02-16 Microsoft Technology Licensing, Llc Control of separate computer game elements
US10671841B2 (en) 2011-05-02 2020-06-02 Microsoft Technology Licensing, Llc Attribute state classification
US8888331B2 (en) 2011-05-09 2014-11-18 Microsoft Corporation Low inductance light source module
US9064006B2 (en) 2012-08-23 2015-06-23 Microsoft Technology Licensing, Llc Translating natural language utterances to keyword search queries
US9137463B2 (en) 2011-05-12 2015-09-15 Microsoft Technology Licensing, Llc Adaptive high dynamic range camera
US8788973B2 (en) 2011-05-23 2014-07-22 Microsoft Corporation Three-dimensional gesture controlled avatar configuration interface
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US8526734B2 (en) 2011-06-01 2013-09-03 Microsoft Corporation Three-dimensional background removal for vision system
US9594430B2 (en) 2011-06-01 2017-03-14 Microsoft Technology Licensing, Llc Three-dimensional foreground selection for vision system
US9013489B2 (en) 2011-06-06 2015-04-21 Microsoft Technology Licensing, Llc Generation of avatar reflecting player appearance
US8929612B2 (en) 2011-06-06 2015-01-06 Microsoft Corporation System for recognizing an open or closed hand
US8597142B2 (en) 2011-06-06 2013-12-03 Microsoft Corporation Dynamic camera based practice mode
US9208571B2 (en) 2011-06-06 2015-12-08 Microsoft Technology Licensing, Llc Object digitization
US9098110B2 (en) 2011-06-06 2015-08-04 Microsoft Technology Licensing, Llc Head rotation tracking from depth-based center of mass
US8897491B2 (en) * 2011-06-06 2014-11-25 Microsoft Corporation System for finger recognition and tracking
US10796494B2 (en) 2011-06-06 2020-10-06 Microsoft Technology Licensing, Llc Adding attributes to virtual representations of real-world objects
US9724600B2 (en) 2011-06-06 2017-08-08 Microsoft Technology Licensing, Llc Controlling objects in a virtual environment
US9597587B2 (en) 2011-06-08 2017-03-21 Microsoft Technology Licensing, Llc Locational node device
US9459758B2 (en) 2011-07-05 2016-10-04 Apple Inc. Gesture-based interface with enhanced features
US9377865B2 (en) 2011-07-05 2016-06-28 Apple Inc. Zoom-based gesture user interface
US8881051B2 (en) 2011-07-05 2014-11-04 Primesense Ltd Zoom-based gesture user interface
US9030498B2 (en) 2011-08-15 2015-05-12 Apple Inc. Combining explicit select gestures and timeclick in a non-tactile three dimensional user interface
US8786730B2 (en) 2011-08-18 2014-07-22 Microsoft Corporation Image exposure using exclusion regions
US9218063B2 (en) 2011-08-24 2015-12-22 Apple Inc. Sessionless pointing user interface
US9557836B2 (en) 2011-11-01 2017-01-31 Microsoft Technology Licensing, Llc Depth image compression
US9117281B2 (en) 2011-11-02 2015-08-25 Microsoft Corporation Surface segmentation from RGB and depth images
US8854426B2 (en) 2011-11-07 2014-10-07 Microsoft Corporation Time-of-flight camera with guided light
US8724906B2 (en) 2011-11-18 2014-05-13 Microsoft Corporation Computing pose and/or shape of modifiable entities
US8509545B2 (en) 2011-11-29 2013-08-13 Microsoft Corporation Foreground subject detection
US8803800B2 (en) 2011-12-02 2014-08-12 Microsoft Corporation User interface control based on head orientation
US8635637B2 (en) 2011-12-02 2014-01-21 Microsoft Corporation User interface presenting an animated avatar performing a media reaction
US9100685B2 (en) 2011-12-09 2015-08-04 Microsoft Technology Licensing, Llc Determining audience state or interest using passive sensor data
US8630457B2 (en) 2011-12-15 2014-01-14 Microsoft Corporation Problem states for pose tracking pipeline
US8971612B2 (en) 2011-12-15 2015-03-03 Microsoft Corporation Learning image processing tasks from scene reconstructions
US8879831B2 (en) 2011-12-15 2014-11-04 Microsoft Corporation Using high-level attributes to guide image processing
US8811938B2 (en) 2011-12-16 2014-08-19 Microsoft Corporation Providing a user interface experience based on inferred vehicle state
US9342139B2 (en) 2011-12-19 2016-05-17 Microsoft Technology Licensing, Llc Pairing a computing device to a user
US9720089B2 (en) 2012-01-23 2017-08-01 Microsoft Technology Licensing, Llc 3D zoom imager
US9229534B2 (en) 2012-02-28 2016-01-05 Apple Inc. Asymmetric mapping for tactile and non-tactile user interfaces
US8898687B2 (en) 2012-04-04 2014-11-25 Microsoft Corporation Controlling a media program based on a media reaction
US9210401B2 (en) 2012-05-03 2015-12-08 Microsoft Technology Licensing, Llc Projected visual cues for guiding physical movement
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
US10321873B2 (en) 2013-09-17 2019-06-18 Medibotics Llc Smart clothing for ambulatory human motion capture
US10716510B2 (en) 2013-09-17 2020-07-21 Medibotics Smart clothing with converging/diverging bend or stretch sensors for measuring body motion or configuration
US9582072B2 (en) 2013-09-17 2017-02-28 Medibotics Llc Motion recognition clothing [TM] with flexible electromagnetic, light, or sonic energy pathways
US9588582B2 (en) 2013-09-17 2017-03-07 Medibotics Llc Motion recognition clothing (TM) with two different sets of tubes spanning a body joint
US10602965B2 (en) 2013-09-17 2020-03-31 Medibotics Wearable deformable conductive sensors for human motion capture including trans-joint pitch, yaw, and roll
EP2864961A4 (en) 2012-06-21 2016-03-23 Microsoft Technology Licensing Llc AVATAR CONSTRUCTION USING A DEPTH CAMERA
US9836590B2 (en) 2012-06-22 2017-12-05 Microsoft Technology Licensing, Llc Enhanced accuracy of user presence status determination
CN102755745A (zh) * 2012-07-31 2012-10-31 曾珠峰 一种全身式仿真游戏设备
US9696427B2 (en) 2012-08-14 2017-07-04 Microsoft Technology Licensing, Llc Wide angle depth detection
CN109799900B (zh) 2012-11-01 2023-02-28 艾卡姆有限公司 手腕可安装计算通信和控制设备及其执行的方法
US20140142442A1 (en) * 2012-11-19 2014-05-22 Judy Sibille SNOW Audio Feedback for Medical Conditions
CN102921158A (zh) * 2012-12-07 2013-02-13 宋艳霞 一种太极拳训练装置
US8882310B2 (en) 2012-12-10 2014-11-11 Microsoft Corporation Laser die light source module with low inductance
US9857470B2 (en) 2012-12-28 2018-01-02 Microsoft Technology Licensing, Llc Using photometric stereo for 3D environment modeling
US9251590B2 (en) 2013-01-24 2016-02-02 Microsoft Technology Licensing, Llc Camera pose estimation for 3D reconstruction
CN103970258B (zh) * 2013-01-28 2018-08-07 联想(北京)有限公司 穿戴式电子设备以及显示方法
US9052746B2 (en) 2013-02-15 2015-06-09 Microsoft Technology Licensing, Llc User center-of-mass and mass distribution extraction using depth images
US9940553B2 (en) 2013-02-22 2018-04-10 Microsoft Technology Licensing, Llc Camera/object pose from predicted coordinates
US9253606B2 (en) 2013-03-04 2016-02-02 Here Global B.V. Structure access characteristics determined from mobile unit data
US9135516B2 (en) 2013-03-08 2015-09-15 Microsoft Technology Licensing, Llc User body angle, curvature and average extremity positions extraction using depth images
US9092657B2 (en) 2013-03-13 2015-07-28 Microsoft Technology Licensing, Llc Depth image processing
US9274606B2 (en) 2013-03-14 2016-03-01 Microsoft Technology Licensing, Llc NUI video conference controls
US9953213B2 (en) 2013-03-27 2018-04-24 Microsoft Technology Licensing, Llc Self discovery of autonomous NUI devices
US9442186B2 (en) 2013-05-13 2016-09-13 Microsoft Technology Licensing, Llc Interference reduction for TOF systems
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
US10188309B2 (en) 2013-11-27 2019-01-29 North Inc. Systems, articles, and methods for electromyography sensors
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US9462253B2 (en) 2013-09-23 2016-10-04 Microsoft Technology Licensing, Llc Optical modules that reduce speckle contrast and diffraction artifacts
JP2015069895A (ja) * 2013-09-30 2015-04-13 パナソニックIpマネジメント株式会社 照明制御装置及び照明制御システム
US9443310B2 (en) 2013-10-09 2016-09-13 Microsoft Technology Licensing, Llc Illumination modules that emit structured light
US20160258778A1 (en) * 2013-10-11 2016-09-08 Imsi Design, Llc Method for calibrating the physical position and orientation of an electronic device using device sensors only
US9674563B2 (en) 2013-11-04 2017-06-06 Rovi Guides, Inc. Systems and methods for recommending content
US9769459B2 (en) 2013-11-12 2017-09-19 Microsoft Technology Licensing, Llc Power efficient laser diode driver circuit and method
US9508385B2 (en) 2013-11-21 2016-11-29 Microsoft Technology Licensing, Llc Audio-visual project generator
CN104463947A (zh) * 2013-11-25 2015-03-25 安徽寰智信息科技股份有限公司 一种人体骨骼建模方法
US9135347B2 (en) * 2013-12-18 2015-09-15 Assess2Perform, LLC Exercise tracking and analysis systems and related methods of use
US9971491B2 (en) 2014-01-09 2018-05-15 Microsoft Technology Licensing, Llc Gesture library for natural user input
US9996975B2 (en) * 2014-03-18 2018-06-12 Dreamworks Animation L.L.C. Interactive multi-rider virtual reality ride system
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
EP2988288A1 (en) * 2014-08-22 2016-02-24 Moog B.V. Medical simulator handpiece
US10959666B2 (en) 2015-01-12 2021-03-30 Enbiomedic Wearable hip joint-action detectors
JP5981591B1 (ja) * 2015-03-17 2016-08-31 株式会社コロプラ 没入型仮想空間でオブジェクト操作を制御するためのコンピュータ・プログラムおよびコンピュータ・システム
DE102015003881A1 (de) * 2015-03-26 2016-09-29 Audi Ag Verfahren zum Bereitstellen einer Simulation einer virtuellen Umgebung mit zumindest einem Teil eines Kraftfahrzeugs und Kraftfahrzeugsimulationsanordnung
US10095306B2 (en) * 2015-06-15 2018-10-09 Harman International Industries, Incorporated Passive magnetic head tracker
WO2016205182A1 (en) * 2015-06-15 2016-12-22 Survios, Inc. Systems and methods for immersive physical interaction with a virtual environment
US10261985B2 (en) 2015-07-02 2019-04-16 Microsoft Technology Licensing, Llc Output rendering in dynamic redefining application
US9860145B2 (en) 2015-07-02 2018-01-02 Microsoft Technology Licensing, Llc Recording of inter-application data flow
US10198252B2 (en) 2015-07-02 2019-02-05 Microsoft Technology Licensing, Llc Transformation chain application splitting
US9658836B2 (en) 2015-07-02 2017-05-23 Microsoft Technology Licensing, Llc Automated generation of transformation chain compatible class
US9733915B2 (en) 2015-07-02 2017-08-15 Microsoft Technology Licensing, Llc Building of compound application chain applications
US9733993B2 (en) 2015-07-02 2017-08-15 Microsoft Technology Licensing, Llc Application sharing using endpoint interface entities
US9712472B2 (en) 2015-07-02 2017-07-18 Microsoft Technology Licensing, Llc Application spawning responsive to communication
US9785484B2 (en) 2015-07-02 2017-10-10 Microsoft Technology Licensing, Llc Distributed application interfacing across different hardware
US10031724B2 (en) 2015-07-08 2018-07-24 Microsoft Technology Licensing, Llc Application operation responsive to object spatial status
US10198405B2 (en) 2015-07-08 2019-02-05 Microsoft Technology Licensing, Llc Rule-based layout of changing information
US10277582B2 (en) 2015-08-27 2019-04-30 Microsoft Technology Licensing, Llc Application service architecture
US11562502B2 (en) 2015-11-09 2023-01-24 Cognex Corporation System and method for calibrating a plurality of 3D sensors with respect to a motion conveyance
US10757394B1 (en) 2015-11-09 2020-08-25 Cognex Corporation System and method for calibrating a plurality of 3D sensors with respect to a motion conveyance
US10812778B1 (en) * 2015-11-09 2020-10-20 Cognex Corporation System and method for calibrating one or more 3D sensors mounted on a moving manipulator
US10055948B2 (en) 2015-11-30 2018-08-21 Nike, Inc. Apparel with ultrasonic position sensing and haptic feedback for activities
JP6952713B2 (ja) 2016-01-19 2021-10-20 マジック リープ, インコーポレイテッドMagic Leap,Inc. 反射を利用する拡張現実システムおよび方法
US10412280B2 (en) 2016-02-10 2019-09-10 Microsoft Technology Licensing, Llc Camera with light valve over sensor array
US10257932B2 (en) 2016-02-16 2019-04-09 Microsoft Technology Licensing, Llc. Laser diode chip on printed circuit board
US10462452B2 (en) 2016-03-16 2019-10-29 Microsoft Technology Licensing, Llc Synchronizing active illumination cameras
CA3021964A1 (en) 2016-04-26 2017-11-02 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems
US10242505B2 (en) 2016-05-12 2019-03-26 Google Llc System and method relating to movement in a virtual reality environment
FR3052949B1 (fr) * 2016-06-17 2019-11-08 Alexandre Courtes Procede et systeme de prise de vues a l'aide d'un capteur virtuel
US10037626B2 (en) * 2016-06-30 2018-07-31 Microsoft Technology Licensing, Llc Interaction with virtual objects based on determined restrictions
US11000211B2 (en) 2016-07-25 2021-05-11 Facebook Technologies, Llc Adaptive system for deriving control signals from measurements of neuromuscular activity
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
CN110300542A (zh) 2016-07-25 2019-10-01 开创拉布斯公司 使用可穿戴的自动传感器预测肌肉骨骼位置信息的方法和装置
US10409371B2 (en) 2016-07-25 2019-09-10 Ctrl-Labs Corporation Methods and apparatus for inferring user intent based on neuromuscular signals
US11331045B1 (en) 2018-01-25 2022-05-17 Facebook Technologies, Llc Systems and methods for mitigating neuromuscular signal artifacts
US20190121306A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation Systems and methods for identifying biological structures associated with neuromuscular source signals
WO2020112986A1 (en) 2018-11-27 2020-06-04 Facebook Technologies, Inc. Methods and apparatus for autocalibration of a wearable electrode sensor system
US11179066B2 (en) 2018-08-13 2021-11-23 Facebook Technologies, Llc Real-time spike detection and identification
US10489986B2 (en) 2018-01-25 2019-11-26 Ctrl-Labs Corporation User-controlled tuning of handstate representation model parameters
WO2018022657A1 (en) * 2016-07-25 2018-02-01 Ctrl-Labs Corporation System and method for measuring the movements of articulated rigid bodies
CN107223271B (zh) * 2016-12-28 2021-10-15 达闼机器人有限公司 一种显示数据处理方法及装置
US10388077B2 (en) 2017-04-25 2019-08-20 Microsoft Technology Licensing, Llc Three-dimensional environment authoring and generation
KR101880701B1 (ko) * 2017-06-27 2018-07-20 이형준 가상현실 실시간 모션 시뮬레이터
CN109419604A (zh) * 2017-08-29 2019-03-05 深圳市掌网科技股份有限公司 基于虚拟现实的下肢康复训练方法和系统
US11314399B2 (en) 2017-10-21 2022-04-26 Eyecam, Inc. Adaptive graphic user interfacing system
US10999733B2 (en) 2017-11-14 2021-05-04 Thomas STACHURA Information security/privacy via a decoupled security accessory to an always listening device
US10867623B2 (en) 2017-11-14 2020-12-15 Thomas STACHURA Secure and private processing of gestures via video input
US10867054B2 (en) 2017-11-14 2020-12-15 Thomas STACHURA Information security/privacy via a decoupled security accessory to an always listening assistant device
US10872607B2 (en) 2017-11-14 2020-12-22 Thomas STACHURA Information choice and security via a decoupled router with an always listening assistant device
US11100913B2 (en) 2017-11-14 2021-08-24 Thomas STACHURA Information security/privacy via a decoupled security cap to an always listening assistant device
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
EP3743892A4 (en) 2018-01-25 2021-03-24 Facebook Technologies, Inc. VISUALIZATION OF INFORMATION ON THE STATE OF A RECONSTRUCTED HAND
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US10817795B2 (en) 2018-01-25 2020-10-27 Facebook Technologies, Llc Handstate reconstruction based on multiple inputs
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
EP3743901A4 (en) 2018-01-25 2021-03-31 Facebook Technologies, Inc. REAL-TIME PROCESSING OF HAND REPRESENTATION MODEL ESTIMATES
WO2019147996A1 (en) 2018-01-25 2019-08-01 Ctrl-Labs Corporation Calibration techniques for handstate representation modeling using neuromuscular signals
WO2019148002A1 (en) 2018-01-25 2019-08-01 Ctrl-Labs Corporation Techniques for anonymizing neuromuscular signal data
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US10592001B2 (en) 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
EP3801743A4 (en) 2018-05-25 2021-08-04 Facebook Technologies, LLC PROCESSES AND APPARATUS FOR OBTAINING A SUB-MUSCULAR COMMAND
EP3801216A4 (en) 2018-05-29 2021-04-14 Facebook Technologies, LLC. SHIELDING TECHNIQUES FOR NOISE REDUCTION IN SURFACE ELECTROMYOGRAPHY SIGNAL MEASUREMENT AND RELATED SYSTEMS AND METHODS
CN112585600A (zh) 2018-06-14 2021-03-30 脸谱科技有限责任公司 使用神经肌肉标记进行用户识别和认证
US11045137B2 (en) 2018-07-19 2021-06-29 Facebook Technologies, Llc Methods and apparatus for improved signal robustness for a wearable neuromuscular recording device
EP4241661A1 (en) 2018-08-31 2023-09-13 Facebook Technologies, LLC Camera-guided interpretation of neuromuscular signals
CN109118910B (zh) * 2018-09-07 2020-12-15 华南理工大学广州学院 一种直流电流方向检测装置
WO2020061451A1 (en) 2018-09-20 2020-03-26 Ctrl-Labs Corporation Neuromuscular text entry, writing and drawing in augmented reality systems
US10921764B2 (en) 2018-09-26 2021-02-16 Facebook Technologies, Llc Neuromuscular control of physical objects in an environment
WO2020072915A1 (en) 2018-10-05 2020-04-09 Ctrl-Labs Corporation Use of neuromuscular signals to provide enhanced interactions with physical objects in an augmented reality environment
CN111249691B (zh) * 2018-11-30 2021-11-23 百度在线网络技术(北京)有限公司 一种基于形体识别的运动员训练方法和系统
CN109817031B (zh) * 2019-01-15 2021-02-05 张赛 一种基于vr技术的肢体运动教学方法
WO2020160683A1 (en) 2019-02-07 2020-08-13 Thomas Stachura Privacy device for smart speakers
US10905383B2 (en) 2019-02-28 2021-02-02 Facebook Technologies, Llc Methods and apparatus for unsupervised one-shot machine learning for classification of human gestures and estimation of applied forces
US11287505B2 (en) 2019-05-13 2022-03-29 Cast Group Of Companies Inc. Electronic tracking device and related system
US11145102B2 (en) 2019-11-04 2021-10-12 Volvo Car Corporation Using a handheld device to recreate a human pose or align an object in an augmented reality or virtual reality environment
US11599257B2 (en) * 2019-11-12 2023-03-07 Cast Group Of Companies Inc. Electronic tracking device and charging apparatus
EP3832435A1 (en) * 2019-12-06 2021-06-09 XRSpace CO., LTD. Motion tracking system and method
CN112957726B (zh) * 2021-02-01 2024-05-03 北京海天维景科技有限公司 一种虚拟运动场景的交互控制方法和装置
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof
CN113750529B (zh) * 2021-09-13 2024-05-28 网易(杭州)网络有限公司 游戏中的方向指示方法、装置、电子设备及可读存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BE793543A (fr) * 1971-12-30 1973-04-16 Ibm Methodes de codage de position de mecanismes
US4600919A (en) * 1982-08-03 1986-07-15 New York Institute Of Technology Three dimensional animation
US4937444A (en) * 1982-09-29 1990-06-26 Vpl Research, Inc. Optical flex sensor
US4988981B1 (en) * 1987-03-17 1999-05-18 Vpl Newco Inc Computer data entry and manipulation apparatus and method
SE8801043D0 (sv) * 1988-03-22 1988-03-22 Orjan Strandberg Genimator
US4856996A (en) * 1988-06-24 1989-08-15 Henson Jerry H Cycling pedal stroke monitoring system
US5229756A (en) * 1989-02-07 1993-07-20 Yamaha Corporation Image control apparatus
US5349533A (en) * 1992-05-08 1994-09-20 Lockheed Missiles & Space Company, Inc. System and method for collision checking between solid objects and vectors
US5323174A (en) * 1992-12-02 1994-06-21 Matthew H. Klapman Device for determining an orientation of at least a portion of a living body
CA2172548A1 (en) * 1993-09-29 1995-04-06 Jaron Z. Lanier Method and apparatus for displaying a virtual world
US5490784A (en) * 1993-10-29 1996-02-13 Carmein; David E. E. Virtual reality system with enhanced sensory apparatus
JP2552427B2 (ja) * 1993-12-28 1996-11-13 コナミ株式会社 テレビ遊戯システム
US5580249A (en) * 1994-02-14 1996-12-03 Sarcos Group Apparatus for simulating mobility of a human
AU5019896A (en) * 1995-01-11 1996-07-31 Christopher D Shaw Tactile interface system
RU2109336C1 (ru) * 1995-07-14 1998-04-20 Нурахмед Нурисламович Латыпов Способ погружения пользователя в виртуальную реальность и устройство для его реализации

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1991691B (zh) * 2005-12-30 2012-07-04 财团法人工业技术研究院 交互式控制平台系统
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法

Also Published As

Publication number Publication date
EP0959444A1 (en) 1999-11-24
WO1998007129A1 (fr) 1998-02-19
CN1231753A (zh) 1999-10-13
JP2001504605A (ja) 2001-04-03
AU3954997A (en) 1998-03-06
EP0959444A4 (en) 2005-12-07
US6005548A (en) 1999-12-21

Similar Documents

Publication Publication Date Title
CN1168057C (zh) 追踪并显示使用者在空间的位置与取向的方法,向使用者展示虚拟环境的方法以及实现这些方法的系统
US11586276B2 (en) Systems and methods for generating complementary data for visual display
RU2107328C1 (ru) Способ отслеживания и отображения положения и ориентации пользователя в пространстве и система для осуществления способа
US20180374383A1 (en) Coaching feedback system and method
CN107330967B (zh) 基于惯性传感技术的骑师运动姿态捕捉及三维重建系统
KR101979750B1 (ko) 댄스 트레이닝 콘텐츠 저작 시스템
US20210349529A1 (en) Avatar tracking and rendering in virtual reality
CN106648116A (zh) 一种基于动作捕捉的虚拟现实综合系统
CN206497423U (zh) 一种具有惯性动作捕捉装置的虚拟现实综合系统
CN1211198A (zh) 虚拟环境中的人为轨迹学习系统
CN105228709A (zh) 用于重复检测和分析的信号分析
CN105209136A (zh) 用于分析3d图像中的用户动作的质心状态矢量
JP4351808B2 (ja) 人間の機能的行動をダイナミックに登録・評価・修正するためのシステム
Ying et al. Augmented reality based upper limb rehabilitation system
Pengyu et al. Image detection and basketball training performance simulation based on improved machine learning
Wu et al. Research on college gymnastics teaching model based on multimedia image and image texture feature analysis
CN117148977B (zh) 一种基于虚拟现实的运动康复训练方法
Templeman et al. Immersive Simulation of Coordinated Motion in Virtual Environments: Application to Training Small unit Military Tacti Techniques, and Procedures
Corbí et al. MyShikko: Modelling knee walking in Aikido practice
RU2106695C1 (ru) Способ представления виртуального пространства пользователю и система для осуществления способа
JP7442368B2 (ja) 運動用の衣服の設計を支援する装置、方法及びプログラム
Yi Design and implementation of virtual simulation system based on basketball teaching and training
CN113017615A (zh) 基于惯性动作捕捉设备的虚拟交互运动辅助系统及方法
JP2021099666A (ja) 学習モデルの生成方法
Volkova et al. Markerless motion capture method application for investigation of joint profiles in the workplace under simulated hypogravity

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee