CN216719062U - 一种环境空间定位装置 - Google Patents

一种环境空间定位装置 Download PDF

Info

Publication number
CN216719062U
CN216719062U CN202121490741.4U CN202121490741U CN216719062U CN 216719062 U CN216719062 U CN 216719062U CN 202121490741 U CN202121490741 U CN 202121490741U CN 216719062 U CN216719062 U CN 216719062U
Authority
CN
China
Prior art keywords
gyroscope
main body
acceleration sensor
control center
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202121490741.4U
Other languages
English (en)
Inventor
厉传艺
夏厦
王震
聂立深
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Linyun Zhida Intelligent Technology Co ltd
Nantong Sixth Peoples Hospital
Original Assignee
Shanghai Linyun Zhida Intelligent Technology Co ltd
Nantong Sixth Peoples Hospital
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Linyun Zhida Intelligent Technology Co ltd, Nantong Sixth Peoples Hospital filed Critical Shanghai Linyun Zhida Intelligent Technology Co ltd
Priority to CN202121490741.4U priority Critical patent/CN216719062U/zh
Application granted granted Critical
Publication of CN216719062U publication Critical patent/CN216719062U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本实用新型公开了一种环境空间定位装置,所述环境空间定位装置包括头部穿戴设备和手部穿戴设备,头部穿戴设备和手部穿戴设备电连接,头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,第一加速度传感器、第一陀螺仪和控制中心均固定安装在设备主体内部,显示装置安装在头部穿戴设备主体靠近使用者眼部的表面,第一深度感知摄像头固定安装在头部穿戴设备主体远离使用者眼部的表面,第一加速度传感器、第一陀螺仪、第一深度感知摄像头和显示装置同时与控制中心电连接;具有互动性强等优点。

Description

一种环境空间定位装置
技术领域
本发明涉及MR(Mediated Reality)领域,尤其涉及一种环境空间定位装置。
背景技术
在现有的MR技术领域中,通过手机或具备摄像以及数据处理功能的设备对现实场景进行图像采集,并利用数据处理部件将现实场景与虚拟场景进行融合,最终借助显示部件进行展示;
但传统的MR设备采集显示质量差,互动性差,不能满足大部分使用者的需求。
本发明提供一种环境空间定位装置,解决上述问题。
发明内容
本发明所要解决的技术问题在于现有的MR设备采集显示质量差,互动性差,不能满足大部分使用者需求;
提供一种环境空间定位装置,所述环境空间定位装置包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心。
实施本发明,具有如下有益效果:
本发明能够深度感知摄像头、陀螺仪、加速度传感器等装置的设置,采集高精度的信息,生成高精度的画面,同时通过手部设备的增加能够增强互动性。
附图说明
图1是本发明的结构简图;
图2是本发明实施例一的流程图;
图3是本发明实施例二的流程图;
图4是本发明实施例三的流程图;
图5是本发明实施例四的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述。
实施例一
本实施例中,参考说明书附图1和2,本实施例所要解决的技术问题在于现有的MR设备采集显示质量差,互动性差,不能满足大部分使用者需求;
提供一种环境空间定位装置,所述环境空间定位装置包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心。
本实施例的使用方法,用于如上所述的环境空间定位装置,包括:
通过第一深度感知摄像头采集周围环境信息,将环境信息发送至控制中心,通过第一陀螺仪和第一加速度传感器采集空间位置信息,将空间位置信息发送至控制中心;
通过控制中心接收环境信息和空间位置信息,通过控制中心进行mesh处理生成虚拟物体显示信息,将虚拟物体显示信息发送至显示装置;
通过显示装置显示虚拟物体显示信息。
实施本发明,具有如下有益效果:
本发明能够深度感知摄像头、陀螺仪、加速度传感器等装置的设置,采集高精度的信息,生成高精度的画面,同时通过手部设备的增加能够增强互动性。
实施例二
本实施例中参考说明书附图1和说明书附图3,本实施例所要解决的技术问题在于现有的MR设备采集显示质量差,互动性差,不能满足大部分使用者需求;
提供一种环境空间定位装置,所述环境空间定位装置包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心。
本实施例的使用方法,用于如上所述的环境空间定位装置,包括:
通过第二陀螺仪、第二加速度传感器、第三陀螺仪和第三加速度传感器采集手部信息,将手部信息发送至所述控制中心;
通过控制中心接收手部信息,对手部信息进行建模获得手势信息,将手势信息与预设的手势信息进行比对得到手势命令信息,根据手势命令信息导入外部数据信息并实时生成虚拟物体显示信息,将虚拟物体显示信息发送至所述显示装置;
通过显示装置显示虚拟物体显示信息。
实施本发明,具有如下有益效果:
本发明能够深度感知摄像头、陀螺仪、加速度传感器等装置的设置,采集高精度的信息,生成高精度的画面,同时通过手部设备的增加能够增强互动性。
实施例三
本实施例中参考说明书附图1和说明书附图4,本实施例所要解决的技术问题在于现有的MR设备采集显示质量差,互动性差,不能满足大部分使用者需求;
提供一种环境空间定位装置,所述环境空间定位装置包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心。
本实施例的使用方法,用于如上所述的环境空间定位装置,包括:
通过第一深度感知摄像头采集周围环境信息,将环境信息发送至控制中心,通过第一陀螺仪和第一加速度传感器采集空间位置信息,将空间位置信息发送至控制中心;
通过第二陀螺仪、第二加速度传感器、第三陀螺仪和第三加速度传感器采集手部信息,将手部信息发送至所述控制中心;
通过控制中心接收手部信息、环境信息和空间位置信息,通过控制中心进行mesh处理生成虚拟物体显示信息,对手部信息进行建模获得手势信息,将手势信息与预设的手势信息进行比对得到手势命令信息,根据手势命令信息生成实时虚拟物体显示信息,将实时虚拟物体显示信息发送至所述显示装置;
通过显示装置显示实时虚拟物体显示信息。
所述手势命令信息包括调高亮度、调低亮度、调高透明度、调低透明度、调大虚拟物体显示大小和调小虚拟物体显示大小。
实施本发明,具有如下有益效果:
本发明能够深度感知摄像头、陀螺仪、加速度传感器等装置的设置,采集高精度的信息,生成高精度的画面,同时通过手部设备的增加能够增强互动性。
实施例四
本实施例中参考说明书附图1和说明书附图5,本实施例所要解决的技术问题在于现有的MR设备采集显示质量差,互动性差,不能满足大部分使用者需求;
提供一种环境空间定位装置,所述环境空间定位装置包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心。
本实施例的使用方法,用于如上所述的环境空间定位装置,包括:
通过控制中心导入三维模型,通过第一深度感知摄像头采集周围环境信息,将环境信息发送至控制中心,通过第一陀螺仪和第一加速度传感器采集空间位置信息,将空间位置信息发送至控制中心;
同时通过第一深度感知摄像头采集手部环境动作信息,将手部环境动作信息发送至控制中心;
通过控制中心接收环境信息、空间位置信息和手部环境动作信息,通过控制中心进行mesh处理生成虚拟物体显示信息和虚拟手部显示信息,将虚拟物体显示信息和虚拟手部显示信息发送至显示装置;
通过显示装置显示虚拟物体显示信息和虚拟手部显示信息。
通过控制中心导入三维模型实际操作过程包括:
医生将操作路径标定在CT文件上;
将经过标示的CT文件进行三维数据重建成三维模型;
通过控制中心导入三维模型,上述导入数据可以为多条,本实施例可通过控制中心进行切换观察或者单个观察。
本实施例还可实现模型锁定与解锁功能:通过点击模型锁定和模型解锁按钮进行调节,当模型处于解锁状态时,可以通过手部手势抓取模型进行移动旋转位置放置,当模型处于锁定状态时,则不能使用手势进行旋转位置变换,可通过模型调整功能进行调节;
本实施例还可实现菜单锁定功能:通过点击菜单锁定和菜单解锁按钮进行选择,当菜单处于解锁状态时,菜单栏将会根据头部的移动进行实时位置更新,菜单将会移动到眼前最佳位置处,当菜单处于锁定状态时,菜单栏将会被固定在点击菜单锁定的这个位置处;
实施本发明,具有如下有益效果:
本发明能够深度感知摄像头、陀螺仪、加速度传感器等装置的设置,采集高精度的信息,生成高精度的画面,同时通过手部设备的增加能够增强互动性。
上所揭露的仅为本发明的几个较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (2)

1.一种环境空间定位装置,其特征在于,包括:头部穿戴设备和手部穿戴设备,所述头部穿戴设备包括头部穿戴设备主体、第一加速度传感器、第一陀螺仪、第一深度感知摄像头、显示装置和控制中心,所述第一加速度传感器、所述第一陀螺仪和所述控制中心均固定安装在所述设备主体内部,所述显示装置安装在所述头部穿戴设备主体靠近使用者眼部的表面,所述第一深度感知摄像头固定安装在所述头部穿戴设备主体远离使用者眼部的表面,所述第一加速度传感器、所述第一陀螺仪、所述第一深度感知摄像头和所述显示装置同时与所述控制中心电连接;
所述手部穿戴设备为手套式设备主体,所述手套式设备主体的每个指节处和手掌处均设置有传感设备,所述传感设备与所述控制中心电连接;所述手套式设备的每个指尖处均设置有感知设备,所述感知设备与所述控制中心电连接。
2.根据权利要求1所述的环境空间定位装置,其特征在于所述手套式设备主体的每个指节处均设置有第二加速度传感器和第二陀螺仪,所述手套式设备主体的手掌处同时设置有第三加速度传感器和第三陀螺仪,所述手套式设备主体的每个指尖处均设置有第二深度感知摄像头,所述第二深度感知摄像头、所述第二加速度传感器、所述第二陀螺仪、所述第三加速度传感器和所述第三陀螺仪同时与所述控制中心电连接。
CN202121490741.4U 2021-07-01 2021-07-01 一种环境空间定位装置 Active CN216719062U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202121490741.4U CN216719062U (zh) 2021-07-01 2021-07-01 一种环境空间定位装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202121490741.4U CN216719062U (zh) 2021-07-01 2021-07-01 一种环境空间定位装置

Publications (1)

Publication Number Publication Date
CN216719062U true CN216719062U (zh) 2022-06-10

Family

ID=81872501

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202121490741.4U Active CN216719062U (zh) 2021-07-01 2021-07-01 一种环境空间定位装置

Country Status (1)

Country Link
CN (1) CN216719062U (zh)

Similar Documents

Publication Publication Date Title
US20220084279A1 (en) Methods for manipulating objects in an environment
CN105190477B (zh) 用于在增强现实环境中的用户交互的头戴式显示装置
Kim et al. Touch and hand gesture-based interactions for directly manipulating 3D virtual objects in mobile augmented reality
JP5167523B2 (ja) 操作入力装置および操作判定方法並びにプログラム
US9651782B2 (en) Wearable tracking device
US20160203359A1 (en) Wink Gesture Based Control System
EP3262505B1 (en) Interactive system control apparatus and method
US20130154913A1 (en) Systems and methods for a gaze and gesture interface
CN107615214A (zh) 界面控制系统、界面控制装置、界面控制方法及程序
CN108519817A (zh) 基于增强现实的交互方法、装置、存储介质及电子设备
JP6165485B2 (ja) 携帯端末向けarジェスチャユーザインタフェースシステム
US20140015831A1 (en) Apparatus and method for processing manipulation of 3d virtual object
KR20140130675A (ko) 화상 처리 디바이스, 및 컴퓨터 프로그램 제품
CN110968187B (zh) 由外围设备启用的远程触摸检测
KR102147430B1 (ko) 가상 공간 멀티 터치 인터랙션 장치 및 방법
JPWO2014016992A1 (ja) 3次元ユーザインタフェース装置及び3次元操作方法
CN104656893A (zh) 一种信息物理空间的远程交互式操控系统及方法
CN108027655A (zh) 信息处理系统、信息处理设备、控制方法和程序
CN113672099A (zh) 一种电子设备及其交互方法
Shajideen et al. Hand gestures-virtual mouse for human computer interaction
CN106909219B (zh) 基于三维空间的交互控制方法和装置、智能终端
CN113961107B (zh) 面向屏幕的增强现实交互方法、装置及存储介质
US8938131B1 (en) Apparatus and method for registration of flat panel display device and imaging sensor, and electronic device having flat panel display device and imaging sensor which are registered using the method
Qian et al. ARnnotate: An augmented reality interface for collecting custom dataset of 3D hand-object interaction pose estimation
CN104820584B (zh) 一种面向层次化信息自然操控的3d手势界面的构建方法及系统

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant