CN109805937A - 基于永磁定位技术的三维腿部运动检测系统及方法 - Google Patents
基于永磁定位技术的三维腿部运动检测系统及方法 Download PDFInfo
- Publication number
- CN109805937A CN109805937A CN201910178585.9A CN201910178585A CN109805937A CN 109805937 A CN109805937 A CN 109805937A CN 201910178585 A CN201910178585 A CN 201910178585A CN 109805937 A CN109805937 A CN 109805937A
- Authority
- CN
- China
- Prior art keywords
- module
- permanent magnetism
- image
- joint
- ankle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 88
- 230000005389 magnetism Effects 0.000 title claims abstract description 46
- 238000005516 engineering process Methods 0.000 title claims abstract description 36
- 238000000034 method Methods 0.000 title claims abstract description 36
- 210000002414 leg Anatomy 0.000 claims abstract description 72
- 230000033001 locomotion Effects 0.000 claims abstract description 50
- 210000000629 knee joint Anatomy 0.000 claims abstract description 46
- 238000003384 imaging method Methods 0.000 claims abstract description 29
- 210000004394 hip joint Anatomy 0.000 claims abstract description 22
- 210000003423 ankle Anatomy 0.000 claims abstract description 20
- 210000000544 articulatio talocruralis Anatomy 0.000 claims description 26
- 238000012545 processing Methods 0.000 claims description 19
- 238000007781 pre-processing Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 10
- 238000001914 filtration Methods 0.000 claims description 9
- 238000012805 post-processing Methods 0.000 claims description 8
- 238000010586 diagram Methods 0.000 claims description 6
- 238000011017 operating method Methods 0.000 claims description 3
- 230000010354 integration Effects 0.000 claims description 2
- 238000000605 extraction Methods 0.000 claims 1
- 238000009434 installation Methods 0.000 claims 1
- 238000012360 testing method Methods 0.000 abstract description 3
- 238000004891 communication Methods 0.000 abstract description 2
- 238000012549 training Methods 0.000 abstract description 2
- 238000004458 analytical method Methods 0.000 description 6
- 230000005021 gait Effects 0.000 description 6
- 210000003414 extremity Anatomy 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 206010017577 Gait disturbance Diseases 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000000877 morphologic effect Effects 0.000 description 3
- 210000003169 central nervous system Anatomy 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- UJKWLAZYSLJTKA-UHFFFAOYSA-N edma Chemical group O1CCOC2=CC(CC(C)NC)=CC=C21 UJKWLAZYSLJTKA-UHFFFAOYSA-N 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 208000012659 Joint disease Diseases 0.000 description 1
- 206010033799 Paralysis Diseases 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 208000035475 disorder Diseases 0.000 description 1
- 238000010494 dissociation reaction Methods 0.000 description 1
- 230000005593 dissociations Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 210000001428 peripheral nervous system Anatomy 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- 239000011505 plaster Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明涉及三维运动检测技术领域，尤其为基于永磁定位技术的三维腿部运动检测系统及方法，包括永磁定位系统、无线传输模块、运动检测系统、三维呈像系统以及用于检测的腿部夹具，该基于永磁定位技术的三维腿部运动检测系统及方法，通过设置无线传输模块，采用无线通信技术，使被测者的运动更自由，也便于在康复训练中的系统推广，通过绑带，绑在腿部夹具的外侧，能够将腿部夹具稳定的固定在测试者的髋关节、膝关节和踝关节处，进而提高测试数据的稳定性，通过调节螺栓在螺纹杆上螺动，使得调节螺栓卡在滑套底部，能够对小磁体进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标。
Description
技术领域
本发明涉及三维运动检测技术领域，具体为基于永磁定位技术的三维腿部运动检测系统及方法。
背景技术
行走是中枢神经系统的终极目标，步态是其在生物力学水平上的体现。正常步态需要中枢神经系统、周围神经系统及骨骼肌肉系统协调工作，肢体残疾、关节疾病和小儿脑瘫等都会导致行走障碍和步态异常，发现步态异常的关键点、指导有行走障碍的人群正确行走对患者康复治疗意义重大，步态分析现已发展出许多分支，步态运动学分析是其中的重要部分，它以步长、步频、步速、步行周期时相、步行中关节角度等为分析参数，量化步态分析结果。步态运动学分析的关键技术在于高精度的三维人体运动检测。
但现有的基于永磁定位技术的三维腿部运动检测检测设备，佩戴于人体的磁传感器与处理电路之间为有线连接，这在一定程度上限制了系统的使用，也对被测者的运动造成一定束缚，同时磁传感器固定不稳定，在运动检测时，磁传感器容易发生偏移，导致定位误差较大，定位精度不够，数据不准确。鉴于此，我们提出基于永磁定位技术的三维腿部运动检测系统及方法。
发明内容
本发明的目的在于提供基于永磁定位技术的三维腿部运动检测系统及方法，以解决上述背景技术中提出的佩戴于人体的磁传感器与处理电路之间为有线连接，这在一定程度上限制了系统的使用，也对被测者的运动造成一定束缚，同时磁传感器固定不稳定，在运动检测时，磁传感器容易发生偏移，导致定位误差较大，定位精度不够，数据不准确的问题。
为实现上述目的，本发明提供如下技术方案：
基于永磁定位技术的三维腿部运动检测系统，包括永磁定位系统、无线传输模块、运动检测系统、三维呈像系统以及用于检测的腿部夹具，所述腿部夹具的外表面设置有开口，所述开口的一端安装有多个绑带，所述开口的另一端设置有安装板，所述安装板的内部开设有多个放置槽，所述安装板外表面靠近所述放置槽一侧设置有锁紧螺栓，所述安装板的外表面另一侧安装有测量装置，所述测量装置包括夹板，所述夹板的上下两端分别安装有卡脚，两个所述卡脚之间设置有三轴磁传感器，位于底端的所述卡脚底部安装有螺纹杆，所述螺纹杆上套设有调节螺栓，所述螺纹杆上还套设有滑套，所述滑套的一端设置有夹环，所述夹环的内部设置有小磁体。
作为优选，所述三轴磁传感器和所述卡脚卡接配合。
作为优选，所述滑套和所述螺纹杆滑动配合。
作为优选，所述调节螺栓和所述螺纹杆螺纹连接。
作为优选，所述小磁体和所述夹环卡接配合。
作为优选，所述永磁定位系统包括所述三轴磁传感器、坐标定位模块、磁场定位模块、连续定位模块以及数据处理模块；
所述坐标定位模块用于定位膝关节、踝关节以及脚尖的坐标和方向；
所述磁场定位模块用于确定永磁体的空间位置和磁矩矢量；
所述连续定位模块用于在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；
所述数据处理模块用于对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出。
作为优选，所述运动检测系统包括图像获取模块、预处理模块、背景差分检测模块、差分图像检测模块以及数据导出模块；
所述图像获取模块用于对采集到的视频流转化成数字YUV视频流；
所述预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；
所述背景差分检测模块用于在视频图像经过预处理后，采用背景差分法检测出运动图像；
所述差分图像检测模块用于对没有物体运动时的图像进行处理；
所述数据导出模块用于对物体的运动检测数据进行输出。
作为优选，三维呈像模块包括立体图像获取模块、呈像模型模块、特征提取模块、立体匹配模块、深度信息确定模块以及后处理模块；
所述立体图像获取模块用于获取立体视觉的立体图像；
所述呈像模型模块用于建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；
所述特征提取模块用于选择合适的图像特征并进行匹配；
所述立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；
所述深度信息确定模块用于确定深度图像并恢复场景3-D信息了；
所述后处理模块用于恢复景物可视表面的完整信息。
另一方面，本发明还提供基于永磁定位技术的三维腿部运动检测方法，包括上述任一所述的基于永磁定位技术的三维腿部运动检测系统，且操作步骤如下：
S1：将腿部夹具分别套在髋关节、膝关节和踝关节处，并将腿部夹具上的三轴磁传感器分别对准在髋关节、膝关节和踝关节处；
S2：将绑带穿过放置槽，通过锁紧螺栓螺入到放置槽内，使得锁紧螺栓抵至在绑带上，此时绑带呈绷紧状态，并绑在腿部夹具的外侧；
S3：通过调整滑套在螺纹杆的位置，能够调节小磁体和三轴磁传感器之间的距离，通过调节螺栓在螺纹杆上螺动，使得调节螺栓卡在滑套底部，能够对小磁体进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标；
S4：通过坐标定位模块定位膝关节、踝关节以及脚尖的坐标和方向；通过磁场定位模块确定永磁体的空间位置和磁矩矢量；通过连续定位模块在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；通过数据处理模块对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出；
S5：通过图像获取模块对采集到的视频流转化成数字YUV视频流；通过预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；通过背景差分检测模块用于在视频图像经过预处理后；通过采用背景差分法检测出运动图像；通过差分图像检测模块用于对没有物体运动时的图像进行处理；通过数据导出模块用于对物体的运动检测数据进行输出；
S6：通过立体图像获取模块获取立体视觉的立体图像；通过呈像模型模块建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；通过特征提取模块用于选择合适的图像特征并进行匹配；通过立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；通过深度信息确定模块用于确定深度图像并恢复场景3-D信息了；通过后处理模块用于恢复景物可视表面的完整信息。
与现有技术相比，本发明的有益效果：
1、该基于永磁定位技术的三维腿部运动检测系统及方法，通过设置无线传输模块，采用无线通信技术，使被测者的运动更自由，也便于在康复训练中的系统推广。
2、该基于永磁定位技术的三维腿部运动检测系统及方法，通过绑带，绑在腿部夹具的外侧，能够将腿部夹具稳定的固定在测试者的髋关节、膝关节和踝关节处，进而提高测试数据的稳定性。
3、该基于永磁定位技术的三维腿部运动检测系统及方法，通过调节螺栓在螺纹杆上螺动，使得调节螺栓卡在滑套底部，能够对小磁体进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标。
4、该基于永磁定位技术的三维腿部运动检测系统及方法，通过设置永磁定位系统，能欧连续对膝关节、踝关节以及脚尖进行定位，并对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出。
5、该基于永磁定位技术的三维腿部运动检测系统及方法，通过设置运动检测系统，对所得到的YUV视频信息进行高斯滤波处理，并对没有物体运动时的图像进行处理，最终将物体的运动检测数据进行输出。
6、该基于永磁定位技术的三维腿部运动检测系统及方法，通过设置三维呈像模块，根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并恢复景物可视表面的完整信息。
附图说明
图1为本发明的腿部夹具结构示意图；
图2为本发明的测量装置结构示意图；
图3为本发明的整体结构模块图；
图4为本发明的无线传输模块电路图；
图5为本发明的永磁定位系统模块图；
图6为本发明的磁场定位模型图；
图7为本发明的LM算法流程图；
图8为本发明的运动检测系统模块图；
图9为本发明的运动检测系统硬件架图；
图10为本发明的三维呈像模块图；
图11位本发明的实施例5使用状态图。
图中：1、腿部夹具；11、开口；12、绑带；13、安装板；14、放置槽；15、锁紧螺栓；16、测量装置；161、夹板；162、卡脚；163、三轴磁传感器；164、螺纹杆；165、调节螺栓；166、滑套；167、夹环；168、小磁体；2绑带。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的设备或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
实施例1
基于永磁定位技术的三维腿部运动检测系统，如图1至图3所示，包括基于永磁定位技术的三维腿部运动检测系统及方法，包括永磁定位系统、无线传输模块、运动检测系统、三维呈像系统以及用于检测的腿部夹具1，腿部夹具1的外表面设置有开口11，开口11的一端安装有多个绑带12，开口11的另一端设置有安装板13，安装板13的内部开设有多个放置槽14，安装板13外表面靠近放置槽14一侧设置有锁紧螺栓15，安装板13的外表面另一侧安装有测量装置16，测量装置16包括夹板161，夹板161的上下两端分别安装有卡脚162，两个卡脚162之间设置有三轴磁传感器163，位于底端的卡脚162底部安装有螺纹杆164，螺纹杆164上套设有调节螺栓165，螺纹杆164上还套设有滑套166，滑套166的一端设置有夹环167，夹环167的内部设置有小磁体168，三轴磁传感器163和卡脚162卡接配合，滑套166和螺纹杆164滑动配合，调节螺栓165和螺纹杆164螺纹连接，小磁体168和夹环167卡接配合。
本实施例中，绑带12采用弹性布材质制成，其材质具有良好的韧性，便于对腿部夹具1进行绑紧固定。
进一步的，绑带12的尺寸和放置槽14的尺寸相适配，能够将绑带12从放置槽14处穿过，并对腿部夹具1进行绑紧。
具体的，小磁体168呈圆柱形，且直径为5mm，厚度为10mm，使得小磁体168的磁矩最大，磁感应强度变化范围广。
进一步的，如图4所示，无线传输模块由STC12C5A60S2单片机与nRF24L01无线收发芯片构成的发送端和接收端组成，发送端通过单片机进行A/D变换和无线传输，接收端通过nRF24L01接收数据，再送至STC12C5A60S2单片机进行显示与分析，无线模块nRF24L01所有配置工作都是通过SPI完成，共有30B的配置字，一般采用EnhancedShockBurstTM收发模式，这种工作模式下，系统的程序编制会更加简单，并且稳定性也会更高，EnhancedShockBurstTM的配置字使nRF24L01能够处理射频协议，配置完成后，在nRF24L01工作的过程中，只需改变其最低一个字节中的内容就可以实现接收模式和发送模式之间的切换。
本实施例的基于永磁定位技术的三维腿部运动检测系统中的腿部夹具在使用时，将腿部夹具分别套在髋关节、膝关节和踝关节处，并将腿部夹具上的三轴磁传感器163分别对准在髋关节、膝关节和踝关节处，将绑带12穿过放置槽14，通过锁紧螺栓15螺入到放置槽14内，使得锁紧螺栓15抵至在绑带12上，此时绑带12呈绷紧状态，并绑在腿部夹具1的外侧，能够将腿部夹具1稳定的固定在测试者的髋关节、膝关节和踝关节处，进而提高测试数据的稳定性，通过调整滑套166在螺纹杆164的位置，能够调节小磁体168和三轴磁传感器163之间的距离，通过调节螺栓165在螺纹杆164上螺动，使得调节螺栓165卡在滑套166底部，能够对小磁体168进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标。
实施例2
作为本发明的第二种实施例，为了便于对膝关节、踝关节以及脚尖的坐标和方向进行定位，本发明人员设置永磁定位系统，作为一种优选实施例，如图5所示，永磁定位系统包括三轴磁传感器163、坐标定位模块、磁场定位模块、连续定位模块以及数据处理模块，坐标定位模块用于定位膝关节、踝关节以及脚尖的坐标和方向，磁场定位模块用于确定永磁体的空间位置和磁矩矢量，连续定位模块用于在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位，数据处理模块用于对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出。
本实施例中，坐标定位模块中，设三个三轴磁传感器163为S、U、V，且分别放置在髋关节、膝关节和踝关节处，分别对小磁体168A、B、C进行空间定位，已知A小磁体168与膝关节处三轴磁传感器163U之间距离为h0，B小磁体168与踝关节处的三轴磁传感器163V之间距离为h1，C小磁体与足尖之间距离为h2，以S为坐标原点，求解出膝关节U、踝关节V、脚尖P点的坐标和方向即可重构出三维腿部运动姿态，三轴磁传感器163S、U、V分别定位小磁体168A、B、C的坐标和方向为：
小磁体A的坐标为(a0,b0,c0)，方向为(a0,b0,c0)。
小磁体B的坐标为(a1,b1,c1)，方向为(α1,β1,γ1)。
小磁体C的坐标为(a2,b2,c2)，方向为(α2,β2,γ2)。
A与S距离为
B与U距离为
C与V距离为
膝关节相对于髋关节的坐标为：方向为(α0,β0,γ0)。
α0、β0、γ0分别为膝关节与x轴、y轴、z轴的夹角。
同理，通过坐标变换得，踝关节相对于髋关节的坐标为：
踝关节相对于髋关节的方向为三轴磁传感器163U检测的小磁体168B的方向(α1,β1,γ1)与三轴磁传感器163U坐标系旋转的角度(α0,β0,γ0)之和：(α0+α1,β0+β1,γ0+γ1)
脚尖相对于髋关节的坐标为：
方向为：
(α0+α1+α2,β0+β1+β2,γ0+γ1+γ2)
进一步的，磁场定位模块如图6所示，为永磁体的位置，为永磁体磁矩。根据磁偶极子模型，空间中观测点A(x,y,z)处的磁感应强度为：
式中，
具体的，连续定位模块采用LM算法，代码如下设定：
进一步的，LM算法流程如图7所示，步骤如下：
(1)、定义函数给定初始值x(0)，设定误差限ε，迭代参数μ，缩放因子β，最大迭代次数kmax，当前迭代次数k＝1。
(2)、计算步长h，计算x(k+1)＝x(k)+h，计算
(3)、更新μ。若F(x(k+1))>F(x(k))，则表明最近的一个解离最优解较远，这时增大μ值，μ＝μβ，使算法更接近最快速下降法，保证全局收敛性；若F(x(k+1))<F(x(k))，则表明最近的一个解距离最优解较近，这时减小μ值，使算法更接近Gauss-Newton法，加快收敛速度。
(4)、当k＝kmax或时，算法终止；否则，k＝k+1，返回步骤2。
本实施例的基于永磁定位技术的三维腿部运动检测系统中的永磁定位系统使用时，通过坐标定位模块定位膝关节、踝关节以及脚尖的坐标和方向；通过磁场定位模块确定永磁体的空间位置和磁矩矢量；通过连续定位模块在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；通过数据处理模块对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出。
实施例3
作为本发明的第三种实施例，为了便于对腿部运动进行运动检测，本发明人员设置运动检测系统，作为一种优选实施例，如图8所示，作为一种优选实施例，运动检测系统包括图像获取模块、预处理模块、背景差分检测模块、差分图像检测模块以及数据导出模块，图像获取模块用于对采集到的视频流转化成数字YUV视频流，预处理模块用于对所得到的YUV视频信息进行高斯滤波处理，背景差分检测模块用于在视频图像经过预处理后，采用背景差分法检测出运动图像，差分图像检测模块用于对没有物体运动时的图像进行处理，数据导出模块用于对物体的运动检测数据进行输出。
本实施例中，如图9所示，运动检测系统硬件平台采用TMS320DM642作为CPU，该芯片主频600MHz，视频编解码芯片采用SAA7115H和SAA7105H，另外采用了两片SDRAM(共4M×64bi-t)芯片作为存储介质，用于图像的暂时存储，同时还采用一片FLASH用于实现自启动，此硬件平台从数据接收模块获取模拟图像，经过SAA7115解码得到标准的BT.656格式的YUV4：2：2数字图像码流，然后通过DM642的EDMA功能将码流暂存到SDRAM，再用算法进行处理后，然后通过DM642的EDMA功能送入到SAA7105进行解码，经过CVBS引脚输出，这样系统的处理结果就可以在显示器上实时地显示。
进一步的，运动检测系统的软件在TI提供的集成开发环境CCS完成，编程用C语言和汇编语言实现，软件采用TI推荐的RF-5架构，采用了三个线程tsk_inpu-t、tsk_process、tsk_output，软件的执行流程如下：
(1)、TMS320DM642的初始化。包括初始化BIOS、CSL、设置CACKE；
(2)、初始化RF-5模块。用CHAN_init，ICC_init，SCOM_init分别初始化CHAN模块、ICC模块、SCOM模块；
(3)、DSP/BIOS根据操作系统的调度规则环调度执行tsk_input、tsk_process、tsk_output三个线程。其中tsk_inpufi通过按照顺序调用FVID_create、FVID_control、FVID_aUoc函数实现对FVID驱动的调用，打开输入通道，实现得到SAA7ll5获取的BT.656格式的YUV422数字视频码流。tsk_process负责对tsk_input线程获取的数字图像进行运动图像检测算法的处理，其中要调用到上一节所述的算法函数，经过处理，运动目标被分割出来。tsk-output负责调用FVID_create、FVID_control、FVID_alloc函数，打开输出通道实现对已经分割处理的数字视频流通过SAA7105输出，在显示器上予以显示。这三个线程在DSP/BIOS的调度下循环并行运行，三个线程之间的数据交换通过SCOM模块实现。
上述程序中，核心程序为tsk_process线程，其主要代码如下：
While(1)
{……
Background()：//获取背景并根据条件更新
Diff_picture()：//背景与当前图像差分
Otsu_binary()：//由改进的大津法进行阀值分割并二值化
Filter_obitct()：//对二值化图像进行滤波得到运动的物体，即为检测的结果。
……
}
具体的，背景差分检测模块步骤如下：
(1)、获取一帧图像作为初始的背景Bg(x,y,tk)；
(2)、间隔4帧再次获取下一幅图像，作为当前图像Curr(x,y,tk)；
(3)、按照背景差分法得到差分图像Sub(x,y,tk)＝|Curr(x,y,tk,)-Bg(x,y,tk)；
(4)统计所有和值
公式为：∑x,ySub(x、y、tk)
与设定的阀值FF相比较，如果小于阀值FF，按下式进行背景更新Bg(x,y,tk)＝α*Curr(x,y,tk)+(1-α)*Bg(x,y,tk-1)；
(5)重复前面(2)到(3)的步骤。
此外，差分图像检测模块按照下式二值化：
式中的阀值TR采用大津法获取，在实际测试时发现，直接采用大津法获取的阀值TR对差分图像二值化进行处理时，如果没有物体运动，那么二值化得到的图像为噪声的二值化图像，这样直接处理得到的二值化噪声图像在后续的形态学滤波中很难完全消除，通过分析差分图像的直方图，发现当没有物体运动时，差分图像的直方图主要分布在0～10间，此时大津法获取的阀值为1～6之间；当有物体运动时，差分图像的直方图分布在0～255之间，此时大津法获取的阀值为20以上。
基于以上的分析，本文采用改进的方法，如果大津法获取的阀值小于10，则说明没有物体运动，否则说明有物体运动，当阀值小于10时，按照下式进行二值化处理
f(x，y，tk)＝0当TR<10
即当没有物体运动时，获取的二值化图像应为全黑，这样后续的形态学处理只需对有物体运动时的二值化图像进行处理即可。图2分别为无物体运动时直接二值化和采用改进方法二值化后的结果。其中a)为直接采用大津法获取的阀值分割没有物体运动时的差分图像的结果，可以看出图中布满噪声；b)为对大津法获取的阀值进行判断后，没有物体运动时的差分图像分割的结果，可以看出此时图像为全黑，也即没有运动物体，这与实际情况相符，简化了后续的形态学处理。
本实施例的基于永磁定位技术的三维腿部运动检测系统中的运动检测系统在使用时，通过图像获取模块对采集到的视频流转化成数字YUV视频流；通过预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；通过背景差分检测模块用于在视频图像经过预处理后；通过采用背景差分法检测出运动图像；通过差分图像检测模块用于对没有物体运动时的图像进行处理；通过数据导出模块用于对物体的运动检测数据进行输出。
实施例4
作为本发明的第四种实施例，为了对检测到的腿部运动进行三维呈像，本发明人员设置三维呈像模块，作为一种优选实施例，如图10所示，三维呈像模块包括立体图像获取模块、呈像模型模块、特征提取模块、立体匹配模块、深度信息确定模块以及后处理模块，立体图像获取模块用于获取立体视觉的立体图像，呈像模型模块用于建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系，特征提取模块用于选择合适的图像特征并进行匹配，立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像，深度信息确定模块用于确定深度图像并恢复场景3-D信息了，后处理模块用于恢复景物可视表面的完整信息。
本实施例中，三维呈像模块基于开放源代码的计算机视觉类库OpenCV设计，OpenCV中的摄像机标定模块为用户提供了良好的接口，同时支持Windows、Linux平台，有效地提高了开发效率，并且执行速度快，具有良好的跨平台移植性。
进一步的，呈像模型模块的定标过程中将用到的三个坐标系：图像坐标系，摄像机坐标系和世界坐标系，通过坐标系之间的变换可以通过下面的公式把图像坐标系的点和世界坐标系，公式如下：
本实施例的基于永磁定位技术的三维腿部运动检测系统中的三维呈像模块使用时，通过立体图像获取模块获取立体视觉的立体图像；通过呈像模型模块建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；通过特征提取模块用于选择合适的图像特征并进行匹配；通过立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；通过深度信息确定模块用于确定深度图像并恢复场景3-D信息了；通过后处理模块用于恢复景物可视表面的完整信息。
实施例5
作为本发明的第五种实施例，为了便于小磁体168随着肢体的运动进行运动，本发明人员对三轴磁传感器163的固定方式进行改进，作为一种优选实施例，如图11所示，三轴磁传感器163通过胶水紧密粘接在绑带2外壁，且将绑带2套在关节处，此时将小磁体168固定在肢体上，且小磁体168和三轴磁传感器163的距离为10cm。
本实施例中，绑带2采用弹力布材质制成，且两端设置有魔术贴，其材质具有良好的弹性，便于绑在关节处，透气效果好。
进一步的，小磁体168和肢体的固定可采用现有技术中各种缠绕固定的方式，例如采用胶布将小磁体168缠绕固定在肢体上，也可以通过绑带2将小磁体168固定在肢体上。
本发明还提供基于永磁定位技术的三维腿部运动检测方法，其操作步骤如下：
S1：将腿部夹具分别套在髋关节、膝关节和踝关节处，并将腿部夹具上的三轴磁传感器分别对准在髋关节、膝关节和踝关节处；
S2：将绑带穿过放置槽，通过锁紧螺栓螺入到放置槽内，使得锁紧螺栓抵至在绑带上，此时绑带呈绷紧状态，并绑在腿部夹具的外侧；
S3：通过调整滑套在螺纹杆的位置，能够调节小磁体和三轴磁传感器之间的距离，通过调节螺栓在螺纹杆上螺动，使得调节螺栓卡在滑套底部，能够对小磁体进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标；
S4：通过坐标定位模块定位膝关节、踝关节以及脚尖的坐标和方向；通过磁场定位模块确定永磁体的空间位置和磁矩矢量；通过连续定位模块在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；通过数据处理模块对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出；
S5：通过图像获取模块对采集到的视频流转化成数字YUV视频流；通过预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；通过背景差分检测模块用于在视频图像经过预处理后；通过采用背景差分法检测出运动图像；通过差分图像检测模块用于对没有物体运动时的图像进行处理；通过数据导出模块用于对物体的运动检测数据进行输出；
S6：通过立体图像获取模块获取立体视觉的立体图像；通过呈像模型模块建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；通过特征提取模块用于选择合适的图像特征并进行匹配；通过立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；通过深度信息确定模块用于确定深度图像并恢复场景3-D信息了；通过后处理模块用于恢复景物可视表面的完整信息。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的仅为本发明的优选例，并不用来限制本发明，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。
Claims (9)
1.基于永磁定位技术的三维腿部运动检测系统，包括永磁定位系统、无线传输模块、运动检测系统、三维呈像系统以及用于检测的腿部夹具(1)，其特征在于：所述腿部夹具(1)的外表面设置有开口(11)，所述开口(11)的一端安装有多个绑带(12)，所述开口(11)的另一端设置有安装板(13)，所述安装板(13)的内部开设有多个放置槽(14)，所述安装板(13)外表面靠近所述放置槽(14)一侧设置有锁紧螺栓(15)，所述安装板(13)的外表面另一侧安装有测量装置(16)，所述测量装置(16)包括夹板(161)，所述夹板(161)的上下两端分别安装有卡脚(162)，两个所述卡脚(162)之间设置有三轴磁传感器(163)，位于底端的所述卡脚(162)底部安装有螺纹杆(164)，所述螺纹杆(164)上套设有调节螺栓(165)，所述螺纹杆(164)上还套设有滑套(166)，所述滑套(166)的一端设置有夹环(167)，所述夹环(167)的内部设置有小磁体(168)。
2.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述三轴磁传感器(163)和所述卡脚(162)卡接配合。
3.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述滑套(166)和所述螺纹杆(164)滑动配合。
4.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述调节螺栓(165)和所述螺纹杆(164)螺纹连接。
5.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述小磁体(168)和所述夹环(167)卡接配合。
6.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述永磁定位系统包括所述三轴磁传感器(163)、坐标定位模块、磁场定位模块、连续定位模块以及数据处理模块；
所述坐标定位模块用于定位膝关节、踝关节以及脚尖的坐标和方向；
所述磁场定位模块用于确定永磁体的空间位置和磁矩矢量；
所述连续定位模块用于在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；
所述数据处理模块用于对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出。
7.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述运动检测系统包括图像获取模块、预处理模块、背景差分检测模块、差分图像检测模块以及数据导出模块；
所述图像获取模块用于对采集到的视频流转化成数字YUV视频流；
所述预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；
所述背景差分检测模块用于在视频图像经过预处理后，采用背景差分法检测出运动图像；
所述差分图像检测模块用于对没有物体运动时的图像进行处理；
所述数据导出模块用于对物体的运动检测数据进行输出。
8.根据权利要求1所述的基于永磁定位技术的三维腿部运动检测系统，其特征在于：所述三维呈像模块包括立体图像获取模块、呈像模型模块、特征提取模块、立体匹配模块、深度信息确定模块以及后处理模块；
所述立体图像获取模块用于获取立体视觉的立体图像；
所述呈像模型模块用于建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；
所述特征提取模块用于选择合适的图像特征并进行匹配；
所述立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；
所述深度信息确定模块用于确定深度图像并恢复场景3-D信息了；
所述后处理模块用于恢复景物可视表面的完整信息。
9.基于永磁定位技术的三维腿部运动检测方法，其特征在于，包括权利要求1-8任一所述的基于永磁定位技术的三维腿部运动检测系统，且操作步骤如下：
S1：将腿部夹具分别套在髋关节、膝关节和踝关节处，并将腿部夹具上的三轴磁传感器(163)分别对准在髋关节、膝关节和踝关节处；
S2：将绑带(12)穿过放置槽(14)，通过锁紧螺栓(15)螺入到放置槽(14)内，使得锁紧螺栓(15)抵至在绑带(12)上，此时绑带(12)呈绷紧状态，并绑在腿部夹具(1)的外侧；
S3：通过调整滑套(166)在螺纹杆(164)的位置，能够调节小磁体(168)和三轴磁传感器(163)之间的距离，通过调节螺栓(165)在螺纹杆(164)上螺动，使得调节螺栓(165)卡在滑套(166)底部，能够对小磁体(168)进行限位，便于定位髋关节、膝关节和踝关节处的方向和坐标；
S4：通过坐标定位模块定位膝关节、踝关节以及脚尖的坐标和方向；通过磁场定位模块确定永磁体的空间位置和磁矩矢量；通过连续定位模块在腿部运动过程中，连续对膝关节、踝关节以及脚尖进行定位；通过数据处理模块对膝关节、踝关节以及脚尖的坐标和方向的数据进行整合和输出；
S5：通过图像获取模块对采集到的视频流转化成数字YUV视频流；通过预处理模块用于对所得到的YUV视频信息进行高斯滤波处理；通过背景差分检测模块用于在视频图像经过预处理后；通过采用背景差分法检测出运动图像；通过差分图像检测模块用于对没有物体运动时的图像进行处理；通过数据导出模块用于对物体的运动检测数据进行输出；
S6：通过立体图像获取模块获取立体视觉的立体图像；通过呈像模型模块建立成像模型、确定位置和属性参数，以确定空间坐标系中物体点同它的像点之间的对应关系；通过特征提取模块用于选择合适的图像特征并进行匹配；通过立体匹配模块用于根据对所选特征的计算，建立特征间的对应关系，将同一个空间点在不同图像中的映像点对应起来，并由此得到相应的视差图像；通过深度信息确定模块用于确定深度图像并恢复场景3-D信息了；通过后处理模块用于恢复景物可视表面的完整信息。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2018114917673 | 2018-12-07 | ||
| CN201811491767 | 2018-12-07 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109805937A true CN109805937A (zh) | 2019-05-28 |
Family
ID=66608603
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910178585.9A Pending CN109805937A (zh) | 2018-12-07 | 2019-03-11 | 基于永磁定位技术的三维腿部运动检测系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109805937A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112043550A (zh) * | 2020-09-29 | 2020-12-08 | 深圳睿瀚医疗科技有限公司 | 一种基于磁标记的舌控手部康复机器人系统及其操作方法 |
| CN116509380A (zh) * | 2023-04-14 | 2023-08-01 | 江苏泰科博曼医疗器械有限公司 | 一种膝关节坐标建立装置、方法及系统 |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007159971A (ja) * | 2005-12-16 | 2007-06-28 | Univ Of Electro-Communications | 歩行補助装置 |
| CN101719216A (zh) * | 2009-12-21 | 2010-06-02 | 西安电子科技大学 | 基于模板匹配的运动人体异常行为识别方法 |
| CN103177454A (zh) * | 2011-12-24 | 2013-06-26 | 南京理工大学常熟研究院有限公司 | 一种动态图像运动目标检测方法 |
| CN103957961A (zh) * | 2011-10-07 | 2014-07-30 | 诺沃—诺迪斯克有限公司 | 用于基于三轴磁性传感器确定元件位置的系统 |
| CN105849788A (zh) * | 2013-10-09 | 2016-08-10 | Mc10股份有限公司 | 包括共形传感器的实用可穿戴设备 |
| CN105919599A (zh) * | 2016-05-31 | 2016-09-07 | 南京医科大学 | 基于磁传感器的手指运动检测识别系统及方法 |
| CN206214099U (zh) * | 2016-06-12 | 2017-06-06 | 南京医科大学 | 基于磁传感器检测异常步态的疾病诊断系统 |
| CN106846359A (zh) * | 2017-01-17 | 2017-06-13 | 湖南优象科技有限公司 | 基于视频序列的运动目标快速检测方法 |
| JP2017113367A (ja) * | 2015-12-25 | 2017-06-29 | 日立マクセル株式会社 | 運動機能測定用センサ及び運動機能測定システム |
| CN107115197A (zh) * | 2017-05-26 | 2017-09-01 | 王淑霞 | 一种新型医用神经病诊断治疗装置 |
| CN107595290A (zh) * | 2017-08-08 | 2018-01-19 | 刘超军 | 一种关节角度测量方法及系统 |
| US20180055417A1 (en) * | 2016-08-30 | 2018-03-01 | Huami Inc. | Biomechanical Motion Measurement |
| CN108852364A (zh) * | 2018-07-09 | 2018-11-23 | 深圳德创健康科技有限责任公司 | 监测膝关节运动信息的穿戴装置 |
| CN108852360A (zh) * | 2018-03-16 | 2018-11-23 | 北京工业大学 | 一种人体下肢髋膝关节角度检测系统及方法 |
| CN211883800U (zh) * | 2018-12-07 | 2020-11-10 | 南京医科大学 | 基于永磁定位技术的三维腿部运动检测系统 |
-
2019
- 2019-03-11 CN CN201910178585.9A patent/CN109805937A/zh active Pending
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007159971A (ja) * | 2005-12-16 | 2007-06-28 | Univ Of Electro-Communications | 歩行補助装置 |
| CN101719216A (zh) * | 2009-12-21 | 2010-06-02 | 西安电子科技大学 | 基于模板匹配的运动人体异常行为识别方法 |
| CN103957961A (zh) * | 2011-10-07 | 2014-07-30 | 诺沃—诺迪斯克有限公司 | 用于基于三轴磁性传感器确定元件位置的系统 |
| CN103177454A (zh) * | 2011-12-24 | 2013-06-26 | 南京理工大学常熟研究院有限公司 | 一种动态图像运动目标检测方法 |
| CN105849788A (zh) * | 2013-10-09 | 2016-08-10 | Mc10股份有限公司 | 包括共形传感器的实用可穿戴设备 |
| JP2017113367A (ja) * | 2015-12-25 | 2017-06-29 | 日立マクセル株式会社 | 運動機能測定用センサ及び運動機能測定システム |
| CN105919599A (zh) * | 2016-05-31 | 2016-09-07 | 南京医科大学 | 基于磁传感器的手指运动检测识别系统及方法 |
| CN206214099U (zh) * | 2016-06-12 | 2017-06-06 | 南京医科大学 | 基于磁传感器检测异常步态的疾病诊断系统 |
| US20180055417A1 (en) * | 2016-08-30 | 2018-03-01 | Huami Inc. | Biomechanical Motion Measurement |
| CN106846359A (zh) * | 2017-01-17 | 2017-06-13 | 湖南优象科技有限公司 | 基于视频序列的运动目标快速检测方法 |
| CN107115197A (zh) * | 2017-05-26 | 2017-09-01 | 王淑霞 | 一种新型医用神经病诊断治疗装置 |
| CN107595290A (zh) * | 2017-08-08 | 2018-01-19 | 刘超军 | 一种关节角度测量方法及系统 |
| CN108852360A (zh) * | 2018-03-16 | 2018-11-23 | 北京工业大学 | 一种人体下肢髋膝关节角度检测系统及方法 |
| CN108852364A (zh) * | 2018-07-09 | 2018-11-23 | 深圳德创健康科技有限责任公司 | 监测膝关节运动信息的穿戴装置 |
| CN211883800U (zh) * | 2018-12-07 | 2020-11-10 | 南京医科大学 | 基于永磁定位技术的三维腿部运动检测系统 |
Non-Patent Citations (1)
| Title |
|---|
| 张可 等: "基于永磁定位技术的三维腿部运动检测系统设计", 中国医疗设备, vol. 32, no. 09, pages 34 - 39 * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112043550A (zh) * | 2020-09-29 | 2020-12-08 | 深圳睿瀚医疗科技有限公司 | 一种基于磁标记的舌控手部康复机器人系统及其操作方法 |
| CN112043550B (zh) * | 2020-09-29 | 2023-08-18 | 深圳睿瀚医疗科技有限公司 | 一种基于磁标记的舌控手部康复机器人系统及其操作方法 |
| CN116509380A (zh) * | 2023-04-14 | 2023-08-01 | 江苏泰科博曼医疗器械有限公司 | 一种膝关节坐标建立装置、方法及系统 |
| CN116509380B (zh) * | 2023-04-14 | 2023-12-29 | 江苏泰科博曼医疗器械有限公司 | 一种膝关节坐标建立装置、方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Viswakumar et al. | Human gait analysis using OpenPose | |
| JP5594975B2 (ja) | 歩行分析装置 | |
| Dalla Bernardina et al. | Are action sport cameras accurate enough for 3D motion analysis? A comparison with a commercial motion capture system | |
| US20170000389A1 (en) | Biomechanical information determination | |
| Kolahi et al. | Design of a marker-based human motion tracking system | |
| CN208677399U (zh) | 智能关节角度测量装置及系统 | |
| CN107578019B (zh) | 一种视觉触觉融合的步态识别系统及识别方法 | |
| CN109805937A (zh) | 基于永磁定位技术的三维腿部运动检测系统及方法 | |
| CN104159644A (zh) | 分析高尔夫挥杆的装置和方法 | |
| Harsted et al. | Concurrent validity of lower extremity kinematics and jump characteristics captured in pre-school children by a markerless 3D motion capture system | |
| Slembrouck et al. | Multiview 3D markerless human pose estimation from openpose skeletons | |
| CN109284006B (zh) | 一种人体运动捕获装置和方法 | |
| US20180333079A1 (en) | Device for digitizing and evaluating movement | |
| CN113856186A (zh) | 一种引体向上动作判定与计数的方法、系统及装置 | |
| CN211883800U (zh) | 基于永磁定位技术的三维腿部运动检测系统 | |
| Cai et al. | A binocular-camera-assisted sensor-to-segment alignment method for inertial sensor-based human gait analysis | |
| CN106773050A (zh) | 一种基于二维图像虚拟整合的智能ar眼镜 | |
| Mahyuddin et al. | Gait parameters determination by 2D optical motion analyzer system | |
| CN109820486A (zh) | 基于永磁定位技术的三维上肢运动检测系统及方法 | |
| Lin et al. | Using hybrid sensoring method for motion capture in volleyball techniques training | |
| Kanko et al. | Comparison of Concurrent and Asynchronous Running Kinematics and Kinetics From Marker-Based and Markerless Motion Capture Under Varying Clothing Conditions | |
| Biasi et al. | Garment-based motion capture (GaMoCap): high-density capture of human shape in motion | |
| Schoenemann et al. | Matching non-rigidly deformable shapes across images: A globally optimal solution | |
| CN209951229U (zh) | 基于永磁定位技术的三维上肢运动检测系统 | |
| Abd Shattar et al. | Experimental Setup for Markerless Motion Capture and Landmarks Detection using OpenPose During Dynamic Gait Index Measurement |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |