CN105068658A - 一种可虚拟环境控制的人机互动装置 - Google Patents

一种可虚拟环境控制的人机互动装置 Download PDF

Info

Publication number
CN105068658A
CN105068658A CN201510512823.7A CN201510512823A CN105068658A CN 105068658 A CN105068658 A CN 105068658A CN 201510512823 A CN201510512823 A CN 201510512823A CN 105068658 A CN105068658 A CN 105068658A
Authority
CN
China
Prior art keywords
central controller
virtual environment
environment control
human
computer interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510512823.7A
Other languages
English (en)
Inventor
王心雨
陈诺
桑弘毅
谷明城
张晓晗
翟韬
张馨予
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Pioneer's Field Technology Co Ltd
Original Assignee
Tianjin Pioneer's Field Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Pioneer's Field Technology Co Ltd filed Critical Tianjin Pioneer's Field Technology Co Ltd
Priority to CN201510512823.7A priority Critical patent/CN105068658A/zh
Publication of CN105068658A publication Critical patent/CN105068658A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了一种可虚拟环境控制的人机互动装置,包括中心控制装置、手势识别装置、肌肉动作识别装置、视觉模拟装置、力反馈装置和触觉反馈装置,手势识别装置连接到中心控制装置的USB接口,肌肉动作识别装置通过蓝牙无线连接到中心控制装置,视觉模拟装置连接到中心控制装置的HDM1接口,力反馈装置连接到中心控制装置的USB接口,触觉反馈装置连接到中心控制装置的音频接口。本发明的有益效果是能够在视觉、听觉和触觉等方面实现了以人体的自然行为语言来进行虚拟环境控制,有效提升人机交互体验,简化操作,提高效率。

Description

一种可虚拟环境控制的人机互动装置
技术领域
本发明属于应用电子信息技术的人机互动设备领域,尤其是涉及一种可虚拟环境控制的人机互动装置。
背景技术
以计算机为基本载体的利用体感结合的人机互动装置,是在视觉、听觉和触觉等方面实现了以人体的自然行为语言来进行虚拟环境控制,现有的设备往往仅仅是增强视觉、听觉或是触觉其中一种的沉浸感,不能将多种模拟体感的装置进行有机地结合,存在沉浸感不强,作用渠道单一的问题,而且运用这些增强体感的设备,适配器的门槛高,操作复杂,人机交流的专业性强,不容易操作实现,造成人机交流体验差,尤其是视觉方面,佩戴虚拟可视设备后容易出现晕眩的现象。
发明内容
有鉴于此,本发明旨在提出一种可虚拟环境控制的人机互动装置,能够在视觉、听觉和触觉等方面实现了以人体的自然行为语言来进行虚拟环境控制,有效提升人机交互体验,简化操作,提高效率。
为达到上述目的,本发明的技术方案是这样实现的:
一种可虚拟环境控制的人机互动装置,包括中心控制装置、手势识别装置、肌肉动作识别装置、视觉模拟装置、力反馈装置和触觉反馈装置,所述手势识别装置连接到所述中心控制装置的USB接口,所述肌肉动作识别装置通过蓝牙无线连接到所述中心控制装置,所述视觉模拟装置连接到所述中心控制装置的HDM1接口,所述力反馈装置连接到所述中心控制装置的USB接口,所述触觉反馈装置连接到所述中心控制装置的音频接口。
进一步的,所述中心控制装置为配置包括2.5GHZ以上的CPU、4G以上的内存、支持DX10或OPENGL3的独立显卡和WIN7以上操作系统的个人计算机。
进一步的,所述手势识别装置为Leapmotion手势识别器。
进一步的,所述肌肉动作识别装置为MYO手势识别臂环。
进一步的,所述视觉模拟装置为oculus虚拟现实眼镜。
进一步的,所述力反馈装置为NovintFaclon力反馈装置。
进一步的,所述触觉反馈装置为力反馈输出振动器。
相对于现有技术,本发明所述的可虚拟环境控制的人机互动装置具有以下优势:
本发明以中心控制装置为基础整合平台,将手势识别装置、肌肉动作识别装置、视觉模拟装置、力反馈装置和触觉反馈装置分别连接到中心控制装置上,并且都能通过中心控制装置运行,手势识别装置为Leapmotion手势识别器,采用红外光线,在120度的范围角度内对双手的物理特征进行探测识别,并通过中心控制装置上的USB接口传入相关信号;肌肉动作识别装置为MYO手势识别臂环,能够测量肌肉电流,并通过与中心控制装置蓝牙无线连接传输信号;视觉模拟装置为oculus虚拟现实眼镜,为头戴型设备,可对外进行图像信号的展示,该装置带有多轴螺旋仪及Z轴位置追踪器,可捕捉人体自然动作行为,并通过与中心控制装置的HDM1接口连接,为佩戴者提供高清虚拟视觉感受;力反馈装置为NovintFaclon力反馈装置,内部带有每秒钟作用最高达1000次的电机,可通过三轴控制器向中心控制装置输入方位信号,同时该装置可由中心控制装置控制进行360度全范围力学反馈;触觉反馈装置为力反馈输出振动器,通过与中心控制装置的音频接口连接,接受中心控制装置传出的音频信号,并进行低频过滤,过滤背景声音和中频人声,并以力反馈输出震动的方式,以低频信号为主进行震动反馈。中心控制装置这个整合平台有助于提升各个单独装置运行时的效率,提高了工作参数,降低能耗,在视觉、听觉和触觉等方面实现了以人体的自然行为语言来进行虚拟环境控制,有效提升人机交互体验。
附图说明
构成本发明的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明实施例的结构示意图。
附图标记说明:
1-中心控制装置,2-手势识别装置,3-肌肉动作识别装置,4-视觉模拟装置,5-力反馈装置,6-触觉反馈装置。
具体实施方式
需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
下面将参考附图并结合实施例来详细说明本发明。
如图1所示,本发明供一种可虚拟环境控制的人机互动装置,包括中心控制装置1、手势识别装置2、肌肉动作识别装置3、视觉模拟装置4、力反馈装置5和触觉反馈装置6,所述手势识别装置2连接到所述中心控制装置1的USB接口,所述肌肉动作识别装置3通过蓝牙无线连接到所述中心控制装置1,所述视觉模拟装置4连接到所述中心控制装置1的HDM1接口,所述力反馈装置5连接到所述中心控制装置1的USB接口,所述触觉反馈装置6连接到所述中心控制装置1的音频接口。
所述中心控制装置1为配置包括2.5GHZ以上的CPU、4G以上的内存、支持DX10或OPENGL3的独立显卡和WIN7以上操作系统的个人计算机。
所述手势识别装置2为Leapmotion手势识别器,采用红外光线,在120度的范围角度内对双手的物理特征进行探测识别,并通过所述中心控制装置1上的USB接口传入相关信号。
所述肌肉动作识别装置3为MYO手势识别臂环,测量肌肉电流,并通过与所述中心控制装置1蓝牙无线连接传输信号。
所述视觉模拟装置4为oculus虚拟现实眼镜,为头戴型设备,可对外进行图像信号的展示,该装置带有多轴螺旋仪及Z轴位置追踪器,可捕捉人体自然动作行为,并通过与所述中心控制装置1的HDM1接口连接,为佩戴者提供高清虚拟视觉感受。
所述力反馈装置5为NovintFaclon力反馈装置,内部带有每秒钟作用最高达1000次的电机,可通过三轴控制器向所述中心控制装置1输入方位信号,同时该装置可由所述中心控制装置1控制进行360度全范围力学反馈。
所述触觉反馈装置6为力反馈输出振动器,通过与所述中心控制装置1的音频接口连接,接受所述中心控制装置1传出的音频信号,并进行低频过滤,过滤背景声音和中频人声,并以力反馈输出震动的方式,以低频信号为主进行震动反馈。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种可虚拟环境控制的人机互动装置,其特征在于:包括中心控制装置、手势识别装置、肌肉动作识别装置、视觉模拟装置、力反馈装置和触觉反馈装置,所述手势识别装置连接到所述中心控制装置的USB接口,所述肌肉动作识别装置通过蓝牙无线连接到所述中心控制装置,所述视觉模拟装置连接到所述中心控制装置的HDM1接口,所述力反馈装置连接到所述中心控制装置的USB接口,所述触觉反馈装置连接到所述中心控制装置的音频接口。
2.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述中心控制装置为配置包括2.5GHZ以上的CPU、4G以上的内存、支持DX10或OPENGL3的独立显卡和WIN7以上操作系统的个人计算机。
3.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述手势识别装置为Leapmotion手势识别器。
4.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述肌肉动作识别装置为MYO手势识别臂环。
5.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述视觉模拟装置为oculus虚拟现实眼镜。
6.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述力反馈装置为NovintFaclon力反馈装置。
7.根据权利要求1所述的可虚拟环境控制的人机互动装置,其特征在于:所述触觉反馈装置为力反馈输出振动器。
CN201510512823.7A 2015-08-19 2015-08-19 一种可虚拟环境控制的人机互动装置 Pending CN105068658A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510512823.7A CN105068658A (zh) 2015-08-19 2015-08-19 一种可虚拟环境控制的人机互动装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510512823.7A CN105068658A (zh) 2015-08-19 2015-08-19 一种可虚拟环境控制的人机互动装置

Publications (1)

Publication Number Publication Date
CN105068658A true CN105068658A (zh) 2015-11-18

Family

ID=54498044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510512823.7A Pending CN105068658A (zh) 2015-08-19 2015-08-19 一种可虚拟环境控制的人机互动装置

Country Status (1)

Country Link
CN (1) CN105068658A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105487230A (zh) * 2015-12-18 2016-04-13 济南中景电子科技有限公司 虚拟现实眼镜
CN106227339A (zh) * 2016-08-16 2016-12-14 西安中科比奇创新科技有限责任公司 可穿戴设备、虚拟现实人机交互系统及方法
WO2017107445A1 (zh) * 2015-12-25 2017-06-29 乐视控股(北京)有限公司 在虚拟现实系统中获得沉浸感的方法、系统及智能手套
CN108837502A (zh) * 2018-05-28 2018-11-20 徐州昇科源信息技术有限公司 一种vr一体机嵌入系统
CN109199712A (zh) * 2018-10-15 2019-01-15 郑州大学 一种智能手部运动功能评测及康复训练轮椅
CN109213318A (zh) * 2018-08-02 2019-01-15 顾雨彤 一种可虚拟环境控制的人机互动装置
CN110362190A (zh) * 2018-04-09 2019-10-22 中国科学院沈阳自动化研究所 基于myo的文本输入系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101524267A (zh) * 2008-03-04 2009-09-09 黄林 用于检查个人身心健康的综合评测系统及方案
CN101989086A (zh) * 2010-09-10 2011-03-23 李隆 一种基于互联网的音乐色光环境控制中心
CN102614066A (zh) * 2010-12-14 2012-08-01 雷哈博泰克有限责任公司 一种提供主动辅助和被动拉伸的患肢训练装置及其控制方法
CN104205015A (zh) * 2012-04-09 2014-12-10 高通股份有限公司 基于手势控制远程装置
WO2015034149A1 (en) * 2013-09-09 2015-03-12 Samsung Electronics Co., Ltd. Wearable device performing user authentication using bio-signals and authentication method of the same
CN104603673A (zh) * 2012-09-03 2015-05-06 Smi创新传感技术有限公司 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101524267A (zh) * 2008-03-04 2009-09-09 黄林 用于检查个人身心健康的综合评测系统及方案
CN101989086A (zh) * 2010-09-10 2011-03-23 李隆 一种基于互联网的音乐色光环境控制中心
CN102614066A (zh) * 2010-12-14 2012-08-01 雷哈博泰克有限责任公司 一种提供主动辅助和被动拉伸的患肢训练装置及其控制方法
CN104205015A (zh) * 2012-04-09 2014-12-10 高通股份有限公司 基于手势控制远程装置
CN104603673A (zh) * 2012-09-03 2015-05-06 Smi创新传感技术有限公司 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法
WO2015034149A1 (en) * 2013-09-09 2015-03-12 Samsung Electronics Co., Ltd. Wearable device performing user authentication using bio-signals and authentication method of the same

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105487230A (zh) * 2015-12-18 2016-04-13 济南中景电子科技有限公司 虚拟现实眼镜
WO2017107445A1 (zh) * 2015-12-25 2017-06-29 乐视控股(北京)有限公司 在虚拟现实系统中获得沉浸感的方法、系统及智能手套
CN106227339A (zh) * 2016-08-16 2016-12-14 西安中科比奇创新科技有限责任公司 可穿戴设备、虚拟现实人机交互系统及方法
CN110362190A (zh) * 2018-04-09 2019-10-22 中国科学院沈阳自动化研究所 基于myo的文本输入系统及方法
CN108837502A (zh) * 2018-05-28 2018-11-20 徐州昇科源信息技术有限公司 一种vr一体机嵌入系统
CN109213318A (zh) * 2018-08-02 2019-01-15 顾雨彤 一种可虚拟环境控制的人机互动装置
CN109199712A (zh) * 2018-10-15 2019-01-15 郑州大学 一种智能手部运动功能评测及康复训练轮椅

Similar Documents

Publication Publication Date Title
CN105068658A (zh) 一种可虚拟环境控制的人机互动装置
CN102779000B (zh) 一种用户交互系统和方法
US10664011B2 (en) Wearable apparatus and method for controlling VR apparatus
WO2012134583A3 (en) Continued virtual links between gestures and user interface elements
MX353242B (es) Método para controlar la exhibición de múltiples objetos dependiendo de una entrada relacionada con la operación de una terminal móvil y una terminal móvil para el mismo.
MX2015012025A (es) Diseño de interfase de usuario multimodal.
Kawala-Janik et al. Game controller based on biomedical signals
WO2008001202A3 (en) Touchless gesture based input
GB2512549A (en) Simulating touch texture on the display of a mobile device using vibration
KR20130060145A (ko) 수기 입력의 처리 방법 및 장치
EP2708984A3 (en) Display Apparatus for Multiuser and Method Thereof
CN104951056B (zh) 一种信息处理方法及电子设备
CN106462255A (zh) 一种机器人交互内容的生成方法、系统及机器人
CN110069101A (zh) 一种穿戴式计算设备和一种人机交互方法
EP2728448A3 (en) Input apparatus and input controlling method thereof
CN204883589U (zh) 一种多重体感的人机互动装置
CN103995585B (zh) 显示大墙的手势控制设备与方法
CN204883058U (zh) 一种虚拟头盔显示器
CN103809909A (zh) 一种信息处理方法及电子设备
CN202795239U (zh) 汉语拼音虚拟键盘
CN104657066A (zh) 一种背控装置的使用方法
CN104965666B (zh) 基于触点连线增加控制指令的人机交互方法及应用该方法的智能贴膜
CN106406742A (zh) 移动终端屏幕亮度调节方法、装置及移动终端
Shin et al. Background display for visually impaired people in mobile touch devices
GB2505589A (en) A system, method and computer program for interacting with data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20151118