CN101689304A - 对象动作捕捉系统和方法 - Google Patents

对象动作捕捉系统和方法 Download PDF

Info

Publication number
CN101689304A
CN101689304A CN200880024268A CN200880024268A CN101689304A CN 101689304 A CN101689304 A CN 101689304A CN 200880024268 A CN200880024268 A CN 200880024268A CN 200880024268 A CN200880024268 A CN 200880024268A CN 101689304 A CN101689304 A CN 101689304A
Authority
CN
China
Prior art keywords
action
data
tracking equipment
video data
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200880024268A
Other languages
English (en)
Inventor
W·F·帕斯维尔
V·M·G·范阿克特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Philips Intellectual Property and Standards GmbH
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN101689304A publication Critical patent/CN101689304A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1127Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using markers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/806Video cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Abstract

在一种捕捉对象的移动的系统和方法中,使用具有光学标记和动作传感器的跟踪设备,该动作传感器提供表示跟踪设备的位置和方向的动作数据。跟踪设备被连接至对象,通过摄像机记录光学标记的动作以由此提供表示跟踪设备的位置的视频数据。动作数据和视频数据被结合地处理以随时随地确定跟踪设备的位置和方向。

Description

对象动作捕捉系统和方法
发明领域
本发明涉及捕捉对象的动作的系统和方法。
发明背景
在许多领域,诸如运动领域、保健领域、电影和动画领域和康复领域,捕捉运动对象的动作扮演了至关重要的角色。一旦动作被捕捉到,能够确定不同的动作特性,诸如实时位置、速度、加速度、距离、经过的时间、旋转速率等等。该对象可以是人、动物、植物或任何无生命的设备。该动作可以是对象作为整体的动作或对象的部分的动作或这些动作的组合,其中对象的不同部分可以同时执行不同的动作。
相当多的技术发展已经实现以捕捉与运动相关的动作,例如男子运动员和女子运动员(如运动选手)的动作、运动或比赛对象的动作,如足球、棒球、高尔夫球棒等等。
在第一种类型的已知系统中,使用一个或多个摄像机以捕捉移动对象的图像。在预定位置为对象提供一个或多个光学标记,一个或多个摄像机实时地记录标记的位置。该记录进而又被用于图像的处理以实时地重建对象的动作。一个例子是捕捉高尔夫球棒的移动,例如在US-A-4163941中公开的。另一个例子是捕捉在(一个或多个)摄像机前移动的人的移动,其中标记已经与不同身体部位相附着或相连,诸如头、身体、臂和腿。通过所记录的不同标记的坐标移动,数据处理装置可以提取数据以提供移动的特性,或提供对象或相关对象的渲染图像,模拟原始的移动。
在第二种类型的已知系统中,动作传感器附着或连接至对象,或嵌入其中。动作传感器可以提供表示不同方向(诸如三个互相垂直的方向X、Y和Z)加速度的信号,提供表示不同方向(诸如三个互相垂直的方向X、Y和Z)磁场的信号的磁力计,和计时信号。使用这种动作传感器的例子还是捕捉高尔夫球棒的移动,例如在WO-A-2006/010934中公开的。动作传感器可以进一步包含X、Y和Z方向上的陀螺仪,其测量动作传感器围绕X、Y和Z轴的旋转速度。
在上述使用一个或多个光学标记以捕捉对象动作的第一类型的系统中,当光学标记移动出试图记录光学标记动作的摄像机的视场时,或者仍然在摄像机的视场内但是隐藏(在视线外)在另一个光学标记、对象的一部分或其它对象的后面时,则出现了问题。在这种情况中,摄像机不能够跟踪光学标记,相应的动作捕捉也变得不能完成或至少不可靠。对于这个问题,可能的解决方案是使用多个摄像机,然而,这将不能完全解决问题,其非常昂贵并且增加了动作捕捉系统的复杂度。
在上述使用动作传感器以捕捉对象动作的第二类型的系统中,当经过持久的时期动作传感器的位置由于缺少参考或校准位置而不能被精确确定时,则出现了问题。即使动作传感器的初始位置被校准,在动作传感器实时移动期间,位置和方向将很快产生较大误差,从而动作传感器的动作数据变得不可靠。
发明目标
需要提供一种动作捕捉系统和方法,其能够精确和可靠地测量动作特性,像位置、方向、速度、随时的加速度,在对象移动出摄像机视线时也同样。
发明概述
在本发明的一个实施例中,提供了一种捕捉对象的移动的系统,该系统包括跟踪设备,其被配置为连接至对象。该跟踪设备包括至少一个光学标记和至少一个动作传感器,该动作传感器提供表示跟踪设备位置和方向的动作数据。该系统进一步包括至少一个摄像机以记录光学标记的动作,由此提供表示跟踪设备位置的视频数据,还包括链接数据处理器,其被配置用于结合地处理视频数据和动作数据以随时随地(in space over time)确定跟踪设备的位置和方向。
在本发明实施例中的系统允许基于从视频数据确定的位置校正从动作数据确定的位置,因此随时提供更精确的对象(的一部分)的位置估计。即使当视频数据暂时不可得,对象(的一部分)的位置仍然可以被估计。进一步地,在本发明实施例中的系统允许基于从动作数据确定的位置校正从视频数据确定的位置。
在本发明另一个实施例中,提供了一种捕捉对象的移动的方法,使用包括至少一个光学标记的跟踪设备和提供表示跟踪设备位置和方向的动作数据的至少一个动作传感器。在该方法中,跟踪设备连接至对象,光学标记的动作由摄像机记录,由此提供表示跟踪设备位置的视频数据;动作数据和视频数据被结合地处理以随时随地确定跟踪设备的位置和方向。
通过参考随后的详细描述并结合附图考虑,权利要求和优势将更加容易被领会并同样变得更好理解。在附图中相同的参考符号指示相同的部分。
附图简述
图1示意性图解了本发明系统的实施例。
实施例详述
图1示出了指示捕捉对象100的动作的系统的组件的图。在图1的例子中,对象100表示一个人。然而,对象100还可以是动物、植物或设备。对象可以作为整体移动,诸如执行平移和/或旋转移动,和/或者对象可以具有相对于彼此移动的不同部分。随后的描述将集中于人的移动,但应当清楚的是所描述的系统不限于捕捉人的动作。
如图1中所示,对象100具有可相对于彼此移动的不同部分,诸如头、身体、臂和腿。如示意性地指明的,通过示例,对象100的头和身体每个都被提供有一个跟踪设备110,而每条臂和腿被提供有两个跟踪设备110。
跟踪设备110包括动作传感器。动作传感器可以包括至少一个加速度计,其提供表示跟踪设备加速度的加速度信号,或包括多个加速度计(例如三个加速度计),其在互相垂直的方向上测量加速度并提供表示各个加速度计的加速度的加速度信号。动作传感器进一步可以包括至少一个磁力计,其测量在预定方向上的地球磁场并提供表示跟踪设备方向的方向信号,或包括多个磁力计(例如三个磁力计),其在互相垂直的方向上测量地球磁场并提供表示跟踪设备方向的方向信号。动作传感器进一步可以包括至少一个陀螺仪,其提供表示跟踪设备围绕预定轴的旋转速度的旋转信号,或包括多个陀螺仪(例如三个陀螺仪),其在互相垂直的方向上测量旋转速度并提供表示跟踪设备围绕在各自垂直的方向的轴旋转的速度的旋转信号。跟踪设备110进一步包括提供计时信号的计时器。
实际上,跟踪设备110的动作传感器不需要从三个(正交方向的)加速度计和三个(正交方向的)磁力计生成信号以通过所述信号在三个维度中确定跟踪设备110的位置和方向。使用本领域技术人员公知的假设,跟踪设备110的位置和方向还可以通过来自三个加速度计和两个磁力计的信号,或通过来自两个加速度计和三个磁力计的信号,或通过来自两个加速度计和两个磁力计的信号,或通过来自两个加速度计和一个磁力计的信号,或通过来自三个陀螺仪的信号,或通过来自加速度计、磁力计和陀螺仪的其它组合的信号而确定。
跟踪设备110被配置为提供携带动作数据的动作信号,所述动作数据表示跟踪设备110的标识(在下文中:动作标识)、位置和方向,该动作信号包括由一个或多个加速度计、一个或多个磁力计和/或一个或多个陀螺仪在计时器确定的特定时间输出的信号。动作数据可以无线通信方式被发射,而有线通信也是可能的。
由接收器300接收动作数据,并输出至数据处理器310并由它处理以确定跟踪设备110的位置和方向。
跟踪设备110携带光学标记,诸如反射涂层或预定的颜色区以对于摄像机200,201具有较好的可视性。摄像机可以被配置以检测可见光和/或红外线光。摄像机200,201检测跟踪设备110的光学标记的移动,并耦合至用于处理由摄像机200,201输出的视频数据的视频处理系统210。在视频处理系统210中,每个跟踪没备110具有分配给它的标识(在下文中:视频标识),该标识与由跟踪设备110生成的动作信号中包含的动作标识相同或相对应。因此,通过检测视频数据中的光学标记,视频处理系统210实时地提供跟踪设备110的位置。
通过将由视频处理系统210输出的和在特定时间获取的特定跟踪设备(通过它的视频标识而识别)的视频数据链接到由数据处理器310输出的并在相同时间获取的同一跟踪设备(通过动作标识而识别)的动作数据,摄像机200,201和视频处理系统210被用于动作传感器110的位置坐标的精确初始化和更新。该链接在链接数据处理器400中被执行,该链接数据处理器400为了特定目的而将位置数据和方向数据提供给一个或多个进一步的处理设备。
位置坐标的初始化包括将跟踪设备110的动作传感器的瞬时位置坐标首先设置为同时从相同动作传感器的光学标记的视频数据中确定的位置坐标。然后跟踪设备110的动作传感器的新位置坐标将相对于首先设置的位置坐标从动作数据中计算得到,由于由跟踪设备110的动作传感器的一个或多个加速度计、磁力计和/或陀螺仪进行的计算和测量的不精确,经过一段时间该新位置坐标将含有误差。
位置坐标的更新包括将跟踪设备110的动作传感器的瞬时位置坐标进一步重新设置为同时从相同动作传感器的光学标记的视频数据中确定的位置坐标。因此,在计算跟踪设备110的动作传感器的新位置坐标中出现的误差在更新中被校正,并且由此保持在低水平。位置坐标的更新可以特定的时间间隔来进行,如果在那个时间光学标记对于摄像机200,201中的至少一个是可见的的话。如果在更新时间光学标记是不可见的,则只有动作数据被用于确定跟踪设备110的位置和方向,即使特定标记的视频数据是不可得的,由此保持持续捕捉对象100的动作,并且使得能够实时地重建对象(的一部分)100的位置和方向。
在通过动作数据实时重建跟踪设备110的位置和方向中,使用以下算法:
(a)确定由一个或多个相应的加速度计所测量的一个或多个加速度的方向和幅度;和/或
(b)确定由一个或多个相应的磁力计所测量的一个或多个方向;和/或
(c)确定由一个或多个相应的陀螺仪所测量的一个或多个旋转速度;
(d)如果陀螺仪数据可用,则使用陀螺仪数据根据从前的方向估计计算跟踪设备的新的方向估计;
(e)如果没有陀螺仪数据可用,则使用加速度计数据和/或磁力计数据根据从前的方向估计计算跟踪设备的新的方向估计;
(f)如果可用,则从加速度计数据减去重力;
(g)可选地,使用对象100的机械计算机模型,并且如果可用,则从加速度计数据中减去离心力。
作为执行上述步骤的结果,可以获得跟踪设备的平移加速度,考虑了可能的坐标框架转化为不同的坐标框架。
在步骤(d)中,结合一个或多个加速度计和/或一个或多个磁力计的测量数据,可以在新的方向估计上应用软低通反馈环路以补偿陀螺仪的漂移。
在步骤(d)或(e)后,位置信息是可得到的,如果在跟踪没备之间的关系已知,则该位置信息能够被极好地利用。例如,如果跟踪设备附着于人身体的一部分,例如上臂,并且已知臂是向上指的,臂的长度也是已知的,则臂上手的位置能够相对精确地被计算出来。
对于相对高的频率,即对象(的一部分)的位置相对快速地改变,从动作传感器获得的位置信息是相对可靠的。另一方面,由于在视频摄像机中使用相对低的帧速率,对于相对低的频率,从视频摄像机获得的位置信息是相对可靠的。链接数据处理器400可以这样运行,以使得根据位置改变的速度在位置和方向的计算中做出相应的区别。
视频处理系统210、数据处理器310和链接数据处理器400每个都被适当地编程,包含一个或多个包括计算机指令的计算机程序以执行所要求的任务。
根据本发明,即使连接至对象的光学标记暂时不可见,来自被提供了光学标记的跟踪设备的动作传感器的动作数据使得能够持续地测量跟踪设备的位置和方向。
本发明的应用包括动作和步态分析,其结果被用于康复研究和治疗。在游戏和电影工业中可以发现进一步的应用。在运动员成绩监视和建议中可以发现其它的应用。在医学机器人中可以认识到更进一步的应用。
根据需要,本发明的详细实施方式在此处公开;然而,应当理解所公开的实施方式仅仅是本发明的示例,其能够以多种形式具体实现。因此,此处公开的具体结构和功能细节不应被解释为限制,而仅仅作为权利要求的基础,和作为用于教导本领域技术人员以几乎任何适当的详细结构来多样地使用本发明的代表性基础。此外,此处使用的术语和短语并不意图限制,而是为了提供本发明可理解的描述。
如此处使用的,术语“一”或“一个”被定义为一个或多于一个。如此处使用的,术语多个被定义为两个或多于两个。如此处使用,术语另一个被定义为至少第二个或多个。如此处使用的,术语包括和/或具有被定义为包含(即开放式语言)。如此处使用的,术语耦合被定义为连接,虽然不是必须直接地和不是必须机械地。如此处使用的,术语程序、软件应用等被定义为设计用于在计算机系统上执行的指令序列。程序、计算机程序或软件应用可以包括子程序、函数、过程、对象方法(object method)、对象实现(object implementation)、可执行应用(executable application)、小应用程序(applet)、小伺服程序(servlet)、源代码、对象代码、共享库/动态加载库和/或其它设计用于在计算机系统上执行的指令序列。

Claims (12)

1.一种捕捉对象的移动的系统,该系统包含:
跟踪设备,被配置为连接至对象,该跟踪设备包含:
至少一个光学标记;和
至少一个动作传感器,其提供表示跟踪设备的位置和方向的动作数据;
至少一个摄像机,记录光学标记的动作,由此提供表示跟踪设备的位置的视频数据;和
链接数据处理器,被配置用于结合地处理视频数据和动作数据以随时随地确定跟踪设备的位置和方向。
2.根据权利要求1的系统,其中,链接数据处理器被配置为基于从视频数据中确定的位置校正从动作数据中确定的位置。
3.根据权利要求1的系统,其中,链接数据处理器被配置为基于从动作数据中确定的位置校正从视频数据中确定的位置。
4.根据权利要求1-3中任意一个的系统,其中,光学标记由跟踪设备上的反射涂层构成。
5.根据权利要求1-4中任意一个的系统,其中,跟踪设备进一步包括计时器。
6.根据权利要求1-5中任意一个的系统,其中,动作传感器包含至少一个加速度计。
7.根据权利要求1-6中任意一个的系统,其中,动作传感器包含至少一个磁力计。
8.根据权利要求1-7中任意一个的系统,其中,动作传感器包含至少一个陀螺仪。
9.根据权利要求1-8中任意一个的系统,进一步包含无线通信链路以将动作信号从动作传感器传输至数据处理器。
10.一种捕捉对象的移动的方法,该方法包括:
提供跟踪设备,其包含:
至少一个光学标记;和
至少一个动作传感器,提供表示跟踪设备的位置和方向的动作数据;
将跟踪设备连接至对象;
通过摄像机记录光学标记的动作以由此提供表示跟踪设备的位置的视频数据;和
结合地处理动作数据和视频数据以随时随地确定跟踪设备的位置和方向。
11.根据权利要求10的方法,其中,结合地处理动作数据和视频数据包含基于从视频数据中确定的位置校正从动作数据中确定的位置。
12.根据权利要求10的方法,其中,结合地处理动作数据和视频数据包含基于从动作数据中确定的位置校正从视频数据中确定的位置。
CN200880024268A 2007-07-10 2008-07-09 对象动作捕捉系统和方法 Pending CN101689304A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP07112188.3 2007-07-10
EP07112188 2007-07-10
PCT/IB2008/052751 WO2009007917A2 (en) 2007-07-10 2008-07-09 Object motion capturing system and method

Publications (1)

Publication Number Publication Date
CN101689304A true CN101689304A (zh) 2010-03-31

Family

ID=40229184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200880024268A Pending CN101689304A (zh) 2007-07-10 2008-07-09 对象动作捕捉系统和方法

Country Status (5)

Country Link
US (1) US20100194879A1 (zh)
EP (1) EP2171688A2 (zh)
JP (1) JP2010534316A (zh)
CN (1) CN101689304A (zh)
WO (1) WO2009007917A2 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102462953A (zh) * 2010-11-12 2012-05-23 深圳泰山在线科技有限公司 一种基于计算机的跳跃运动实现方法及系统
CN103150016A (zh) * 2013-02-20 2013-06-12 兰州交通大学 一种融合超宽带定位与惯性传感技术的多人动作捕捉系统
CN103170119A (zh) * 2011-12-22 2013-06-26 阿迪达斯股份公司 健身活动的监测系统和方法
CN103297692A (zh) * 2013-05-14 2013-09-11 温州市凯能电子科技有限公司 网络摄像机快速定位系统以及其快速定位方法
CN103785158A (zh) * 2012-10-31 2014-05-14 鸿富锦精密工业(深圳)有限公司 体感游戏动作指导系统及方法
CN104887238A (zh) * 2015-06-10 2015-09-09 上海大学 基于动作捕捉的手康复训练评估系统和方法
CN106489104A (zh) * 2014-11-26 2017-03-08 艾罗伯特公司 用于移动机器人中的光学量程传感器的使用的系统和方法
CN107016686A (zh) * 2017-04-05 2017-08-04 江苏德长医疗科技有限公司 三维步态与运动分析系统
CN110286248A (zh) * 2019-06-26 2019-09-27 贵州警察学院 一种基于视频图像的车辆车速测定方法
CN110456902A (zh) * 2018-05-07 2019-11-15 芬奇科技有限公司 跟踪用户移动以控制计算机系统中的骨架模型
US10596417B2 (en) 2011-12-22 2020-03-24 Adidas Ag Fitness activity monitoring systems and methods
CN112955930A (zh) * 2018-10-30 2021-06-11 Alt有限责任公司 用于对移动对象进行反向光学跟踪的系统和方法

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2006225115B2 (en) 2005-03-16 2011-10-06 Lucasfilm Entertainment Company Ltd. Three- dimensional motion capture
US8121361B2 (en) 2006-05-19 2012-02-21 The Queen's Medical Center Motion tracking system for real time adaptive imaging and spectroscopy
US8576169B2 (en) * 2008-10-20 2013-11-05 Sensor Platforms, Inc. System and method for determining an attitude of a device undergoing dynamic acceleration
US8622795B2 (en) * 2008-12-04 2014-01-07 Home Box Office, Inc. System and method for gathering and analyzing objective motion data
US9142024B2 (en) 2008-12-31 2015-09-22 Lucasfilm Entertainment Company Ltd. Visual and physical motion sensing for three-dimensional motion capture
GB2466714B (en) * 2008-12-31 2015-02-11 Lucasfilm Entertainment Co Ltd Visual and physical motion sensing for three-dimentional motion capture
US8587519B2 (en) * 2009-01-07 2013-11-19 Sensor Platforms, Inc. Rolling gesture detection using a multi-dimensional pointing device
US8515707B2 (en) * 2009-01-07 2013-08-20 Sensor Platforms, Inc. System and method for determining an attitude of a device undergoing dynamic acceleration using a Kalman filter
US8983124B2 (en) 2009-12-03 2015-03-17 National Institute Of Advanced Industrial Science And Technology Moving body positioning device
DE102010012340B4 (de) * 2010-02-27 2023-10-19 Volkswagen Ag Verfahren zum Erfassen der Bewegung eines Menschen in einem Fertigungsprozess, insbesondere in einem Fertigungsprozess für ein Kraftfahrzeug
US8957909B2 (en) 2010-10-07 2015-02-17 Sensor Platforms, Inc. System and method for compensating for drift in a display of a user interface state
EP2725984B1 (en) 2011-07-01 2018-10-17 Koninklijke Philips N.V. Object-pose-based initialization of an ultrasound beamformer
EP2747641A4 (en) 2011-08-26 2015-04-01 Kineticor Inc METHOD, SYSTEMS AND DEVICES FOR SCAN INTERNAL MOTION CORRECTION
US9508176B2 (en) 2011-11-18 2016-11-29 Lucasfilm Entertainment Company Ltd. Path and speed based character control
US9459276B2 (en) 2012-01-06 2016-10-04 Sensor Platforms, Inc. System and method for device self-calibration
US9316513B2 (en) 2012-01-08 2016-04-19 Sensor Platforms, Inc. System and method for calibrating sensors for different operating environments
US9228842B2 (en) 2012-03-25 2016-01-05 Sensor Platforms, Inc. System and method for determining a uniform external magnetic field
US9726498B2 (en) 2012-11-29 2017-08-08 Sensor Platforms, Inc. Combining monitoring sensor measurements and system signals to determine device context
US9717461B2 (en) 2013-01-24 2017-08-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US10327708B2 (en) 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9305365B2 (en) 2013-01-24 2016-04-05 Kineticor, Inc. Systems, devices, and methods for tracking moving targets
CN109008972A (zh) 2013-02-01 2018-12-18 凯内蒂科尔股份有限公司 生物医学成像中的实时适应性运动补偿的运动追踪系统
JP6268196B2 (ja) 2013-03-05 2018-01-24 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 頭蓋内モニタリングのための一貫性のある連続的な超音波取得
WO2014161092A1 (en) 2013-04-05 2014-10-09 Cinema Control Laboratories Inc. System and method for controlling an equipment related to image capture
TWI493334B (zh) * 2013-11-29 2015-07-21 Pegatron Corp 降低耗電之方法及執行該方法之感測器管理系統
WO2015102658A1 (en) * 2014-01-03 2015-07-09 Intel Corporation Systems and techniques for user interface control
WO2015148391A1 (en) 2014-03-24 2015-10-01 Thomas Michael Ernst Systems, methods, and devices for removing prospective motion correction from medical imaging scans
CN106714681A (zh) 2014-07-23 2017-05-24 凯内蒂科尔股份有限公司 用于在医学成像扫描期间追踪和补偿患者运动的系统、设备和方法
KR101645392B1 (ko) * 2014-08-13 2016-08-02 주식회사 고영테크놀러지 트랙킹 시스템 및 이를 이용한 트랙킹 방법
US10124210B2 (en) * 2015-03-13 2018-11-13 KO Luxembourg SARL Systems and methods for qualitative assessment of sports performance
WO2016183812A1 (zh) * 2015-05-20 2016-11-24 北京诺亦腾科技有限公司 一种混合运动捕捉系统及方法
US9943247B2 (en) 2015-07-28 2018-04-17 The University Of Hawai'i Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan
US10716515B2 (en) 2015-11-23 2020-07-21 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
CN105631901A (zh) * 2016-02-22 2016-06-01 上海乐相科技有限公司 一种确定待测对象的运动信息的方法及装置
JP2018094248A (ja) * 2016-12-15 2018-06-21 カシオ計算機株式会社 運動解析装置、運動解析方法及びプログラム
GB2559809B (en) * 2017-02-21 2020-07-08 Sony Interactive Entertainment Europe Ltd Motion tracking apparatus and system
US11348255B2 (en) * 2017-06-05 2022-05-31 Track160, Ltd. Techniques for object tracking
WO2019107150A1 (ja) * 2017-11-30 2019-06-06 株式会社ニコン 検出装置、処理装置、装着物、検出方法、及び検出プログラム
JP7191104B2 (ja) * 2017-12-11 2022-12-16 フラウンホーファー-ゲゼルシャフト ツール フエルデルング デア アンゲヴァンテン フォルシュング エー.ファオ. 対象物の現在位置を決定するための方法、位置決定システム、トラッカーおよびコンピュータプログラム
US10416755B1 (en) 2018-06-01 2019-09-17 Finch Technologies Ltd. Motion predictions of overlapping kinematic chains of a skeleton model used to control a computer system
US11474593B2 (en) * 2018-05-07 2022-10-18 Finch Technologies Ltd. Tracking user movements to control a skeleton model in a computer system
US11009941B2 (en) 2018-07-25 2021-05-18 Finch Technologies Ltd. Calibration of measurement units in alignment with a skeleton model to control a computer system
CN109711302B (zh) * 2018-12-18 2019-10-18 北京诺亦腾科技有限公司 模型参数校准方法、装置、计算机设备和存储介质
CN109787740B (zh) * 2018-12-24 2020-10-27 北京诺亦腾科技有限公司 传感器数据的同步方法、装置、终端设备及存储介质
US11175729B2 (en) 2019-09-19 2021-11-16 Finch Technologies Ltd. Orientation determination based on both images and inertial measurement units
US10976863B1 (en) 2019-09-19 2021-04-13 Finch Technologies Ltd. Calibration of inertial measurement units in alignment with a skeleton model to control a computer system based on determination of orientation of an inertial measurement unit from an image of a portion of a user
FI20196022A1 (en) * 2019-11-27 2021-05-28 Novatron Oy Method and positioning system for determining the position and orientation of a machine

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4163941A (en) * 1977-10-31 1979-08-07 Linn Roy N Jr Video speed analyzer of golf club swing or the like
US5111410A (en) * 1989-06-23 1992-05-05 Kabushiki Kaisha Oh-Yoh Keisoku Kenkyusho Motion analyzing/advising system
JPH08178615A (ja) * 1994-12-21 1996-07-12 Nosakubutsu Seiiku Kanri Syst Kenkyusho:Kk 移動体の位置検出装置及び誘導装置
JPH112521A (ja) * 1997-06-13 1999-01-06 Fuji Photo Optical Co Ltd 傾斜センサを備えた位置計測作図装置
US6148271A (en) * 1998-01-14 2000-11-14 Silicon Pie, Inc. Speed, spin rate, and curve measuring device
US6441745B1 (en) * 1999-03-22 2002-08-27 Cassen L. Gates Golf club swing path, speed and grip pressure monitor
US6288785B1 (en) * 1999-10-28 2001-09-11 Northern Digital, Inc. System for determining spatial position and/or orientation of one or more objects
JP2002073749A (ja) * 2000-08-28 2002-03-12 Matsushita Electric Works Ltd 作業工程分析支援システム
JP2003106812A (ja) * 2001-06-21 2003-04-09 Sega Corp 画像情報処理方法、その方法を利用したシステム及びプログラム
JP3754402B2 (ja) * 2002-07-19 2006-03-15 川崎重工業株式会社 産業用ロボットの制御方法および制御装置
AU2003297389A1 (en) * 2002-12-19 2004-07-14 Fortescue Corporation Method and apparatus for determining orientation and position of a moveable object
US7432879B2 (en) * 2003-02-10 2008-10-07 Schonlau William J Personal viewer
FI117308B (fi) * 2004-02-06 2006-08-31 Nokia Corp Eleohjausjärjestelmä
US7720259B2 (en) * 2005-08-26 2010-05-18 Sony Corporation Motion capture using primary and secondary markers

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102462953A (zh) * 2010-11-12 2012-05-23 深圳泰山在线科技有限公司 一种基于计算机的跳跃运动实现方法及系统
US11385354B2 (en) 2011-12-22 2022-07-12 Adidas Ag Fitness activity monitoring systems and methods
US10625118B2 (en) 2011-12-22 2020-04-21 Adidas Ag Fitness activity monitoring systems and methods
CN103170119A (zh) * 2011-12-22 2013-06-26 阿迪达斯股份公司 健身活动的监测系统和方法
US10252107B2 (en) 2011-12-22 2019-04-09 Adidas Ag Fitness activity monitoring systems and methods
US11636939B2 (en) 2011-12-22 2023-04-25 Adidas Ag Fitness activity monitoring systems and methods
US10596417B2 (en) 2011-12-22 2020-03-24 Adidas Ag Fitness activity monitoring systems and methods
CN103170119B (zh) * 2011-12-22 2016-12-28 阿迪达斯股份公司 健身活动的监测系统和方法
US9643050B2 (en) 2011-12-22 2017-05-09 Adidas Ag Fitness activity monitoring systems and methods
CN103785158A (zh) * 2012-10-31 2014-05-14 鸿富锦精密工业(深圳)有限公司 体感游戏动作指导系统及方法
CN103150016B (zh) * 2013-02-20 2016-03-09 兰州交通大学 一种融合超宽带定位与惯性传感技术的多人动作捕捉系统
CN103150016A (zh) * 2013-02-20 2013-06-12 兰州交通大学 一种融合超宽带定位与惯性传感技术的多人动作捕捉系统
CN103297692A (zh) * 2013-05-14 2013-09-11 温州市凯能电子科技有限公司 网络摄像机快速定位系统以及其快速定位方法
CN106489104A (zh) * 2014-11-26 2017-03-08 艾罗伯特公司 用于移动机器人中的光学量程传感器的使用的系统和方法
CN104887238A (zh) * 2015-06-10 2015-09-09 上海大学 基于动作捕捉的手康复训练评估系统和方法
CN107016686A (zh) * 2017-04-05 2017-08-04 江苏德长医疗科技有限公司 三维步态与运动分析系统
CN110456902A (zh) * 2018-05-07 2019-11-15 芬奇科技有限公司 跟踪用户移动以控制计算机系统中的骨架模型
CN112955930A (zh) * 2018-10-30 2021-06-11 Alt有限责任公司 用于对移动对象进行反向光学跟踪的系统和方法
CN110286248A (zh) * 2019-06-26 2019-09-27 贵州警察学院 一种基于视频图像的车辆车速测定方法

Also Published As

Publication number Publication date
JP2010534316A (ja) 2010-11-04
WO2009007917A3 (en) 2009-05-07
EP2171688A2 (en) 2010-04-07
US20100194879A1 (en) 2010-08-05
WO2009007917A2 (en) 2009-01-15

Similar Documents

Publication Publication Date Title
CN101689304A (zh) 对象动作捕捉系统和方法
Shen et al. Closing the gaps in inertial motion tracking
US9401025B2 (en) Visual and physical motion sensing for three-dimensional motion capture
CN102323854B (zh) 人体运动捕获装置
CN108939512A (zh) 一种基于穿戴式传感器的游泳姿态测量方法
Ong et al. Development of an economic wireless human motion analysis device for quantitative assessment of human body joint
CN104870941A (zh) 分离的基于计算机视觉的姿势与基于惯性传感器的姿势的显示
CN105659107A (zh) 光学追踪
JP6852673B2 (ja) センサ装置、センサシステム及び情報処理装置
JPH09229667A (ja) 回転関節構造物の動作計測装置および方法
CN109284006B (zh) 一种人体运动捕获装置和方法
CN110609621B (zh) 姿态标定方法及基于微传感器的人体运动捕获系统
Gowda et al. Iot platform for sports analytics
CN111097155B (zh) 用于测定球的旋转的方法、系统及存储介质
Yahya et al. Accurate shoulder joint angle estimation using single RGB camera for rehabilitation
GB2466714A (en) Hybrid visual and physical object tracking for virtual (VR) system
US20110166821A1 (en) System and method for analysis of ice skating motion
Damgrave et al. The drift of the xsens moven motion capturing suit during common movements in a working environment
Li et al. Visual-Inertial Fusion-Based Human Pose Estimation: A Review
Petrič et al. Real-time 3D marker tracking with a WIIMOTE stereo vision system: Application to robotic throwing
CN112114660A (zh) 一种利用人体足部在小空间范围内的运动来实现虚拟世界人物大范围移动的方法
Jatesiktat et al. Recovery of forearm occluded trajectory in kinect using a wrist-mounted inertial measurement unit
CN111095168A (zh) 视觉和惯性运动跟踪
WO2023236353A1 (zh) 人体全身姿态的确定方法、其确定装置以及智能鞋
JP2018005474A (ja) 移動体識別装置、移動体識別システム、移動体識別方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100331