CN106843486B - 虚拟现实手势控制方法 - Google Patents

虚拟现实手势控制方法 Download PDF

Info

Publication number
CN106843486B
CN106843486B CN201710054391.9A CN201710054391A CN106843486B CN 106843486 B CN106843486 B CN 106843486B CN 201710054391 A CN201710054391 A CN 201710054391A CN 106843486 B CN106843486 B CN 106843486B
Authority
CN
China
Prior art keywords
data
sensor
freedom
degree
forearm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710054391.9A
Other languages
English (en)
Other versions
CN106843486A (zh
Inventor
韦科华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liuzhou Huishi Technology Co., Ltd.
Original Assignee
Liuzhou Huishi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Liuzhou Huishi Technology Co Ltd filed Critical Liuzhou Huishi Technology Co Ltd
Priority to CN201710054391.9A priority Critical patent/CN106843486B/zh
Publication of CN106843486A publication Critical patent/CN106843486A/zh
Application granted granted Critical
Publication of CN106843486B publication Critical patent/CN106843486B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明公开了一种虚拟现实手势控制方法，包括使用一种虚拟现实手势控制装置以控制虚拟手势；所述虚拟现实手势控制装置包括微型处理器、控制单元、带有传感器的数据采集件、信息终端，数据采集件设有三个MPU6050加速度传感器；控制虚拟手势步骤包括数据初始化、虚拟环境中传感器分别获得各自重复的两个自由度的数据，实现姿态模拟，纠正姿态错误累积到手掌。本发明可以解决现有虚拟现实手势控制方法用多个传感器产生采集数据失真的问题。

Description

虚拟现实手势控制方法
技术领域
本发明涉及虚拟现实技术领域，尤其是一种在虚拟现实中用于控制手势交互的方法。
背景技术
在移动端VR技术即虚拟现实模拟技术中，用手与VR内容进行交互可以让人们感受到更为真实更为方便的体验。而现有的虚拟现实手势控制一般采用佩戴在手上的传感器对手掌手臂等动作进行传输数据的采集，为了达到更高的仿真程度，常用多个传感器对多个关节一一对应采集信息，这样既浪费传感器，造成设备复杂成本高，而且会出现另一个问题，即一个传感器采集得到3个自由度的信息，而整个手势的自由度少于所有关节数量的3倍，这样就造成部分自由度的重复取值，如果手臂和手指全是理想圆柱体，重复取的值会相同，但实际上手臂及手指并不是理想圆柱体，因而在控制过程中出现位置错误、角度错误或移动速度与现实不符，导致反馈到信息终端的手势动作失真，影响使用效果。
发明内容
本发明所要解决的问题是提供一种虚拟现实手势控制方法，以解决现有虚拟现实手势控制方法用多个传感器产生采集数据失真的问题。
为了解决上述问题，本发明的技术方案是：本虚拟现实手势控制方法包括使用一种虚拟现实手势控制装置以控制虚拟手势；所述虚拟现实手势控制装置包括微型处理器和通过所述微型处理器内部的控制单元连接的带有传感器的数据采集件，所述微型处理器通过无线连接的信息终端，所述数据采集件设有分别贴于人体上臂和前臂及手掌处的三个传感器，所述传感器为MPU6050加速度传感器或MPU6500加速度传感器，所述MPU6050加速度传感器或MPU6500加速度传感器输出的数据为四元数形式的动态数据；
控制虚拟手势步骤包括：A、分别在人体的上臂和前臂及手掌上各贴一个所述传感器，姿态初始化，前臂垂直向下，3个所述传感器的6轴运动处理组件对人体手的上臂和前臂及手掌的姿态进行追踪，获得9个自由度的动态数据，并以四元数形式输出；
B、微处理器的控制单元接收到贴于上臂和前臂及手掌的传感器四元数形式的数据后，将四元数形式的数据转换成欧拉角度数据，此时的数据为初始数据，将这些数据传送到信息终端；贴有传感器的手势开始变化，控制单元进行如下操作：
C、控制单元接收到贴于上臂的传感器的其中一个自由度的数据和贴于前臂的传感器的自由度的数据存在差异，将上臂的传感器的该自由度数据设定为初始默认值；
D、取上臂的传感器的该自由度数据在时间T内的变化值S1，取前臂的传感器的该自由度数据在时间T内的变化值S2；比较S1和S2，当S1大于S2，上臂的传感器的该自由度数据变化过快，失真，停止记录上臂的传感器的该自由度的动态数据，停止时上臂的传感器的该自由度数据为K1，停止时的前臂的传感器的该自由度数据为K2；
E、设置时间T2，使K1的值以T2为时间间隔向K2的值变化，取K1与K2的差值除以时间T，得到在时间上的一元函数，以时间T2的周期按照此函数取值，并将取得的值赋给K1，此时K2的值一直在变化，直到K1变化的值等于K2时，停止；
F、继续取上臂的传感器的该自由度数据，重复步骤D和步骤E；
G、控制单元接收到贴于前臂的传感器的其中一个自由度数据和贴于手掌的传感器的自由度的数据存在差异，将前臂的传感器的该自由度数据设定为初始默认值；将步骤C、步骤D和步骤E中的上臂的传感器替换为前臂的传感器，前臂的传感器替换为手掌的传感器，依次按步骤C、步骤D和步骤E进行重复操作，将这些数据传送到信息终端。
在上述技术方案中，更为具体的技术方案是：步骤E和步骤G中的T2在0.05秒至0.1秒的范围内取值。
进一步的：步骤E和步骤G中的T2=0.1秒。
由于采用了上述技术方案，本发明与现有技术相比具有如下有益效果：
本虚拟现实手势控制方法所使用的装置，采用MPU6000系列加速度传感器代替普通的传感器采集数据，可以通过该传感器四元数形式的动态数据，大大提高了仿真程度和灵敏度，而且可以将工作中数据更新速度从60hz提高到100hz；控制单元中的控制步骤，解决了人体手臂不是理想圆柱体的缺陷，避免了姿态错误累积到手掌上出现的较大误差，结合三个特定位置的传感器设置，将9个自由度中重复的2个自由度经过数据平滑算法得到该自由度上变化更平稳且姿态更接近下级可动部分手臂的姿态数据，使整个模拟体验更逼真，而且本方法只用了3个传感器，控制装置的结构简单,制造成本不高，既节约了传感器资源，又可以使模拟体验更逼真，且使用轻便灵活。
附图说明
图1是本发明的结构示意图。
具体实施方式
下面结合附图对本发明实施例作进一步详述：
本虚拟现实手势控制包括使用一种虚拟现实手势控制装置以控制虚拟手势。如图1所示的虚拟现实手势控制装置，它包括微型处理器1，通过微型处理器1内部的控制单元2连接的带有传感器5的数据采集件4，这里的微型处理器1通过有线连接数据采集件4，微型处理器1通过无线连接的信息终端3，数据采集件4设有分别贴于人体上臂和前臂及手掌处的三个传感器5，传感器5为MPU6050加速度传感器，这里的MPU6050加速度传感器在有些文献中也称为MPU6000加速度传感器，MPU6050加速度传感器输出的数据为四元数形式的动态数据；可以通过该传感器四元数形式的动态数据，大大提高了仿真程度和灵敏度，而且可以将工作中数据更新速度从60hz提高到100hz。
控制虚拟手势步骤包括：
A、分别在人体的上臂和前臂及手掌上各贴一个MPU6050加速度传感器，姿态初始化，前臂垂直向下，3个MPU6050加速度传感器的6轴运动处理组件对人体手的上臂和前臂及手掌的姿态进行追踪，获得9个自由度的动态数据，并以四元数形式输出。
B、微处理器的控制单元接收到贴于上臂和前臂及手掌的传感器四元数形式的数据后，将四元数形式的数据转换成欧拉角度数据，此时的数据为初始数据，将这些数据传送到信息终端；贴有传感器的手势开始变化，控制单元进行如下操作：
C、控制单元接收到贴于上臂的传感器的其中一个自由度的数据和贴于前臂的传感器的自由度的数据存在差异，将上臂的传感器的该自由度数据设定为初始默认值。
D、取上臂的传感器的该自由度数据在时间T内的变化值S1，取前臂的传感器的该自由度数据在时间T内的变化值S2；比较S1和S2，当S1大于S2，上臂的传感器的该自由度数据变化过快，失真，停止记录上臂的传感器的该自由度的动态数据，停止时上臂的传感器的该自由度数据为K1，停止时的前臂的传感器的该自由度数据为K2。
E、设置时间T1=0.5秒，使K1的值以T2为时间间隔向K2的值变化，取K1与K2的差值除以时间T，得到在时间上的一元函数，以T2=0.1秒的周期按照此函数取值，并将取得的值赋给K1，此时K2的值一直在变化，直到K1变化的值等于K2时，停止；该步骤相当于上臂传感器的数据停下来根据函数去追赶前臂传感器的数据。
F、继续取上臂的传感器的该自由度数据，重复步骤D和步骤E。
G、控制单元接收到贴于前臂的传感器的其中一个自由度数据和贴于手掌的传感器的自由度的数据存在差异，将前臂的传感器的该自由度数据设定为初始默认值；将步骤C、步骤D和步骤E中的上臂的传感器替换为前臂的传感器，前臂的传感器替换为手掌的传感器，依次按步骤C、步骤D和步骤E进行重复操作，将这些数据传送到信息终端。
上述步骤该操作在unity3D环境下运行，它解决了人体手臂不是理想圆柱体的缺陷，避免了姿态错误累积到手掌上出现的较大误差，结合三个特定位置的传感器设置，将9个自由度中重复的2个自由度经过数据平滑算法得到该自由度上变化更平稳且姿态更接近下级可动部分手臂的姿态数据，使整个模拟体验更逼真；本装置只用了3个传感器，整个装置结构不复杂，制造成本不高，使用轻便灵活。
在其他实施例中，传感器还可以是可输出四元数动态数据的MPU6500加速度传感器，步骤E和步骤G中的时间T2还可以是0.05秒至0.1秒范围中的任何一个时间数值。

Claims (3)

1.一种虚拟现实手势控制方法，其特征在于：包括使用一种虚拟现实手势控制装置以控制虚拟手势；
所述虚拟现实手势控制装置包括微型处理器和通过所述微型处理器内部的控制单元连接的带有传感器的数据采集件，所述微型处理器通过无线连接的信息终端，所述数据采集件设有分别贴于人体上臂和前臂及手掌处的三个传感器，所述传感器为MPU6050加速度传感器或MPU6500加速度传感器，所述MPU6050加速度传感器或MPU6500加速度传感器输出的数据为四元数形式的动态数据；
控制虚拟手势步骤包括：
A、分别在人体的上臂和前臂及手掌上各贴一个所述传感器，姿态初始化，前臂垂直向下，3个所述传感器的6轴运动处理组件对人体手的上臂和前臂及手掌的姿态进行追踪，获得9个自由度的动态数据，并以四元数形式输出；
B、微处理器的控制单元接收到贴于上臂和前臂及手掌的传感器四元数形式的数据后，将四元数形式的数据转换成欧拉角度数据，此时的数据为初始数据，将这些数据传送到信息终端；贴有传感器的手势开始变化，控制单元进行如下操作：
C、控制单元接收到贴于上臂的传感器的其中一个自由度的数据和贴于前臂的传感器的自由度的数据存在差异，将上臂的传感器的该自由度数据设定为初始默认值；
D、取上臂的传感器的该自由度数据在时间T内的变化值S1，取前臂的传感器的该自由度数据在时间T内的变化值S2；比较S1和S2，当S1大于S2，上臂的传感器的该自由度数据变化过快，失真，停止记录上臂的传感器的该自由度的动态数据，停止时上臂的传感器的该自由度数据为K1，停止时的前臂的传感器的该自由度数据为K2；
E、设置时间T2，使K1的值以T2为时间间隔向K2的值变化，取K1与K2的差值除以时间T，得到在时间上的一元函数，以时间T2的周期按照此函数取值，并将取得的值赋给K1，此时K2的值一直在变化，直到K1变化的值等于K2时，停止；
F、继续取上臂的传感器的该自由度数据，重复步骤D和步骤E；
G、控制单元接收到贴于前臂的传感器的其中一个自由度数据和贴于手掌的传感器的自由度的数据存在差异，将前臂的传感器的该自由度数据设定为初始默认值；将步骤C、步骤D和步骤E中的上臂的传感器替换为前臂的传感器，前臂的传感器替换为手掌的传感器，依次按步骤C、步骤D和步骤E进行重复操作，将这些数据传送到信息终端。
2.根据权利要求1所述的虚拟现实手势控制方法，其特征在于：步骤E和步骤G中的T2在0.05秒至0.1秒的范围内取值。
3.根据权利要求2所述的虚拟现实手势控制方法，其特征在于：步骤E和步骤G中的T2=0.1秒。
CN201710054391.9A 2017-01-24 2017-01-24 虚拟现实手势控制方法 Active CN106843486B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710054391.9A CN106843486B (zh) 2017-01-24 2017-01-24 虚拟现实手势控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710054391.9A CN106843486B (zh) 2017-01-24 2017-01-24 虚拟现实手势控制方法

Publications (2)

Publication Number Publication Date
CN106843486A CN106843486A (zh) 2017-06-13
CN106843486B true CN106843486B (zh) 2020-04-07

Family

ID=59120479

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710054391.9A Active CN106843486B (zh) 2017-01-24 2017-01-24 虚拟现实手势控制方法

Country Status (1)

Country Link
CN (1) CN106843486B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107463256A (zh) * 2017-08-01 2017-12-12 网易（杭州）网络有限公司 基于虚拟现实的用户朝向控制方法与装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102360502A (zh) * 2011-09-07 2012-02-22 中国科学院武汉物理与数学研究所 一种自动基线校正方法
CN102707799A (zh) * 2011-09-12 2012-10-03 北京盈胜泰科技术有限公司 一种手势识别方法及手势识别装置
CN103472751A (zh) * 2013-09-16 2013-12-25 重庆长安汽车股份有限公司 纯电动汽车用ad采样电路

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102360502A (zh) * 2011-09-07 2012-02-22 中国科学院武汉物理与数学研究所 一种自动基线校正方法
CN102707799A (zh) * 2011-09-12 2012-10-03 北京盈胜泰科技术有限公司 一种手势识别方法及手势识别装置
CN103472751A (zh) * 2013-09-16 2013-12-25 重庆长安汽车股份有限公司 纯电动汽车用ad采样电路

Also Published As

Publication number Publication date
CN106843486A (zh) 2017-06-13

Similar Documents

Publication Publication Date Title
US10649549B2 (en) Device, method, and system to recognize motion using gripped object
US10210202B2 (en) Recognition of free-form gestures from orientation tracking of a handheld or wearable device
CN102824176B (zh) 一种基于Kinect传感器的上肢关节活动度测量方法
US20180101231A1 (en) Wearable wireless hmi device
TWI487505B (zh) 肌動訊號輸入裝置、人機操作系統及其辨識方法
CN105931272B (zh) 一种运动对象追踪方法及系统
CN108564643B (zh) 基于ue引擎的表演捕捉系统
US10976863B1 (en) Calibration of inertial measurement units in alignment with a skeleton model to control a computer system based on determination of orientation of an inertial measurement unit from an image of a portion of a user
CN106326881B (zh) 用于实现人机交互的手势识别方法和手势识别设备
CN105808009B (zh) 一种压感传感器、触觉反馈装置及相关装置
CN107272908B (zh) 一种手势识别装置、系统及手势识别方法
US10372223B2 (en) Method for providing user commands to an electronic processor and related processor program and electronic circuit
CN112223242B (zh) 一种基于皮肤刺激的用于遥操作系统的力反馈装置
CN109710082A (zh) 一种数据手套
CN105094440A (zh) 一种基于移动终端的触摸屏防抖方法、系统及移动终端
CN105856242A (zh) 一种基于手臂动作控制机械臂的方法
Devi et al. Low cost tangible glove for translating sign gestures to speech and text in Hindi language
CN107748619A (zh) 一种基于动作捕捉技术的运动分析系统及方法
CN108020223B (zh) 一种基于惯性测量装置的力反馈设备手柄的姿态测量方法
CN106843486B (zh) 虚拟现实手势控制方法
US20150320575A1 (en) Intuitive prosthetic interface
CN106843485B (zh) 虚拟现实手势控制装置
Saggio et al. Electronic Interface and Signal Conditioning Circuitry for Data Glove Systems Useful as 3D HMI Tools for Disabled Persons.
Saggio et al. Wireless data glove system developed for HMI
CN110209270B (zh) 一种数据手套、数据手套系统、校正方法及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190329

Address after: 545006 705, No. 2, R & D center, 10 Ren Ren Road, 10, Liu Dong New District, Liuzhou, the Guangxi Zhuang Autonomous Region.

Applicant after: Liuzhou Huishi Technology Co., Ltd.

Address before: 545006 No. 510, 5th floor, Guantang Pioneer Park R&D Center, Liudong New District, Liuzhou City, Guangxi Zhuang Autonomous Region

Applicant before: LIUZHOU DONGHOU BIOLOGY ENERGY TECHNOLOGY CO., LTD.

GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20170613

Assignee: LIUZHOU CHAOQUN AUTO PARTS Co.,Ltd.

Assignor: Liuzhou Huishi Technology Co.,Ltd.

Contract record no.: X2020450000050

Denomination of invention: Virtual reality gesture control method

Granted publication date: 20200407

License type: Common License

Record date: 20201118