CN108012140A - 基于3d交互的虚拟现实系统 - Google Patents

基于3d交互的虚拟现实系统 Download PDF

Info

Publication number
CN108012140A
CN108012140A CN201711274280.5A CN201711274280A CN108012140A CN 108012140 A CN108012140 A CN 108012140A CN 201711274280 A CN201711274280 A CN 201711274280A CN 108012140 A CN108012140 A CN 108012140A
Authority
CN
China
Prior art keywords
point touch
touch screen
display screen
projection display
curtain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711274280.5A
Other languages
English (en)
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changsha Yuanda Mdt Infotech Ltd
Changsha Yuandahua Information Technology Co Ltd
Original Assignee
Changsha Yuanda Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changsha Yuanda Mdt Infotech Ltd filed Critical Changsha Yuanda Mdt Infotech Ltd
Priority to CN201711274280.5A priority Critical patent/CN108012140A/zh
Publication of CN108012140A publication Critical patent/CN108012140A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种基于3D交互的虚拟现实系统。它包括数据头盔、光线跟踪摄像头组、多点触控屏幕、背投显示屏幕、背部投影仪、前端投影仪、总控单元、微机组、HDMI线，所述光线跟踪摄像头组放置于房间上部，且相邻摄像头之间距离相等；所述背投显示屏幕垂直于地面放于多点触控屏幕上方，所述多点触控屏幕水平放置，此二屏幕等大、长边相接且互相垂直；所述数据头盔佩戴于观察者头部，面对着背投显示屏幕；所述背部投影仪正对背投显示屏幕放置于背投显示屏幕背面合适距离，所述前端投影仪正对多点触控屏幕放置于距多点触控屏幕的合适距离处；所述微机组分别通过HDMI线连接背投显示屏幕和多点触控屏幕，所述总控单元与光线跟踪摄像头组通过无线联系。本发明系统线路连接简单，所得影像分辨率高、交互性强。

Description

基于3D交互的虚拟现实系统
技术领域
本发明涉及一种基于3D交互的虚拟现实系统，属于立体显示技术与虚拟现实技术的领域。
背景技术
立体显示系统提供的不仅仅是平面影像，它能为观众带来赋有深度信息的三维影像，加深观众的临场感；目前发展较久且较成熟的立体显示系统是通过辅助设备观看的。在另一方面，虚拟现实系统利用多种不同种类的传感器使观众融入进入计算机创建的场景中并能实现交互，虚拟现实的最终目的是通过计算机与传感器组成的系统尽可能满足观众的需要。
传统的立体显示系统主要部件包括立体显示器，红蓝立体眼镜、偏振眼镜或数据头盔。传统的虚拟现实交互系统主要部件包括记录装置、微机、控制单元、显示设备、多种类型的传感器等。其中记录装置(键盘、鼠标或有线手套等)记录真实环境中的用户动作并通过传感器传给控制单元，控制单元命令显示设备中的场景或物体产生相应的反映，观察者通过显示设备观察到交互的后结果。
上述方案虽然实现了交互显示，但存在不足。目前大部分交互技术都局限于二维影像，而对于空间关系较复杂的三维环境的交互效果都比较简略，并且明显的交互标记很大程度上影响了最终影像美观。
发明内容
鉴于以上所述现有技术存在的问题和不足，本发明提供一种基于3D交互的虚拟现实系统。该系统使观察者通过数据头盔获得高清三维图像，并且根据观察者观看的角度与观察者的手势实时改变场景角度与主体状态从而实现三维交互显示。
为达到上述目的，本发明采用以下技术方案：
一种基于3D交互的虚拟现实系统，包括数据头盔、光线跟踪摄像头组、多点触控屏幕、背投显示屏幕、背部投影仪、前端投影仪、总控单元、微机组、HDMI线，其特征在于：
(1)所述光线跟踪摄像头组放置于房间上部，且相邻摄像头之间距离相等；
(2)所述背投显示屏幕垂直于地面放于多点触控屏幕上方，所述多点触控屏幕水平放置，此二屏幕等大、长边相接且互相垂直；
(3)所述数据头盔佩戴于观察者头部，面对着背投显示屏幕；
(4)所述背部投影仪正对背投显示屏幕放置于背投显示屏幕背面合适距离，所述前端投影仪正对多点触控屏幕放置于距多点触控屏幕的合适距离处；
(5)所述微机组分别通过HDMI线连接背投显示屏幕和多点触控屏幕，所述总控单元与光线跟踪摄像头组通过无线联系。
总控单元由89C52单片机、CC2530F64芯片、电源等模块组成。光线跟踪摄像头组采集到的图像无线传输给总控单元，多点触控屏幕将触控信息传给总控单元，总控单元接收并处理信号随后无线发送给微机；微机组无线接收指令后对预存的场景与主体进行相应调整，同时将信息通过HDMI线传给投影机组和数据头盔。
本发明与现有技术相比较，具有如下显而易见的实质性特点和技术进步：
本发明与传统的交互显示系统相比，使用光线跟踪摄像头记录人头的动作，从而实现虚拟场景根据人头方向变换视角响应，观众通过数据头盔观察到三维虚拟现实影像，并能够与系统交互。
本发明系统线路连接简单，所得影像分辨率高、交互性强。
附图说明
图1一种基于3D交互的虚拟现实系统的结构示意图。
图2总控单元框图。
具体实施方式
本发明的一个优选实施例结合附图详述如下：
实施例一：
参见图1和图2，本基于3D交互的虚拟现实系统，包括数据头盔1、光线跟踪摄像头组2、多点触控屏幕3、背投显示屏幕4、背部投影仪5、前端投影仪6、总控单元7、微机组8、HDMI线9，其特征在于：
(1)所述光线跟踪摄像头组2放置于房间上部，且相邻摄像头之间距离相等；
(2)所述背投显示屏幕4垂直于地面放于多点触控屏幕3的上方，所述多点触控屏幕3水平放置，此二屏幕(4.3)等大、长边相接且互相垂直；
(3)所述数据头盔1佩戴于观察者头部，面对着背投显示屏幕4；
(4)所述背部投影仪5正对背投显示屏幕4放置于背投显示屏幕4背面后方，所述前端投影仪6正对多点触控屏幕3放置于距多点触控屏幕3的上方；
(5)所述微机组8分别通过HDMI线9连接背投显示屏幕4、多点触控屏幕3、背部投影仪5、前端投影仪6和数据头盔1，所述总控单元7与光线跟踪摄像头组2通过无线联系。
实施例二：
本实施例与实施例一基本相同，特别之处是：所述多点触控屏幕3以及背投显示屏幕4的分辨率达到1920*1080像素，多点触控屏幕3是基于FTIR红外光谱分析的多点触控屏；微机组8由三台维微机组成，光线跟踪摄像机组2由三维摄像机组成；微机中预存场景与主体影像信息。
实施例三：
本实施例结合附图说明如下：参见图1，本基于3D交互的虚拟现实系统包括数据头盔1、光线跟踪摄像头组2、多点触控屏幕3、背投显示屏幕4、背部投影仪5、前端投影仪6、总控单元7、微机组8、HDMI线9：所述光线跟踪摄像头组2放置于房间上部，且相邻摄像头之间距离相等；所述背投显示屏幕4垂直于地面放于某平面，所述多点触控屏幕3水平放置于某平面，此二屏幕等大、长边相接且互相垂直；所述数据头盔1佩戴于观察者头部，面对着背投显示屏幕4；所述背部投影仪5正对背投显示屏幕4放置于屏幕背面合适距离，所述前端投影仪6正对多点触控屏幕3放置于距屏幕合适距离处；所述微机组8分别通过HDMI线9连接背投显示屏幕4和多点触控屏幕3，所述总控单元7与光线跟踪摄像头组2通过无线联系。
多点触控屏幕以及背投显示屏幕的分辨率达到1920*1080像素，多点触控屏幕是基于FTIR红外光谱分析的多点触控屏；微机组由三台维微机组成，光线跟踪摄像机组由三维摄像机组成；微机中预存场景与主体影像信息，根据观众的头部与手部动作对预存影像进行调整并实时渲染输出，此虚拟现实系统依赖于数据头盔且基于WIM(windows inminiature)缩略图技术。
图2示出总控单元7的结构。该总控单元由89C52单片机、CC2530F64芯片、电源等模块组成。光线跟踪摄像头组采集到的图像无线传输给总控单元，多点触控屏幕将触控信息传给总控单元，总控单元接收并处理所有信号随后无线发送给微机组并实时控制微机组；微机组无线接收指令后对预存的场景与主体进行相应调整，同时将信息通过HDMI线传给投影机组和数据头盔。

Claims (2)

1.基于3D交互的虚拟现实系统，包括数据头盔(1)、光线跟踪摄像头组(2)、多点触控屏幕(3)、背投显示屏幕(4)、背部投影仪(5)、前端投影仪(6)、总控单元(7)、微机组(8)、HDMI线(9)，其特征在于：
(1)所述光线跟踪摄像头组(2)放置于房间上部，且相邻摄像头之间距离相等；
(2)所述背投显示屏幕(4)垂直于地面放于多点触控屏幕(3)的上方，所述多点触控屏幕(3)水平放置，此二屏幕(4.3)等大、长边相接且互相垂直；
(3)所述数据头盔(1)佩戴于观察者头部，面对着背投显示屏幕(4)；
(4)所述背部投影仪(5)正对背投显示屏幕(4)放置于背投显示屏幕(4)背面后方，所述前端投影仪(6)正对多点触控屏幕(3)放置于距多点触控屏幕(3)的上方；
(5)所述微机组(8)分别通过HDMI线(9)连接背投显示屏幕(4)、多点触控屏幕(3)、背部投影仪(5)、前端投影仪(6)和数据头盔(1)，所述总控单元(7)与光线跟踪摄像头组(2)通过无线联系。
2.根据权利要求1所述的基于3D交互的虚拟现实系统，其特征在于：所述多点触控屏幕(3)以及背投显示屏幕(4)的分辨率达到1920*1080像素，多点触控屏幕(3)是基于FTIR红外光谱分析的多点触控屏；微机组(8)由三台维微机组成，光线跟踪摄像机组(2)由三维摄像机组成；微机中预存场景与主体影像信息。
CN201711274280.5A 2017-12-06 2017-12-06 基于3d交互的虚拟现实系统 Pending CN108012140A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711274280.5A CN108012140A (zh) 2017-12-06 2017-12-06 基于3d交互的虚拟现实系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711274280.5A CN108012140A (zh) 2017-12-06 2017-12-06 基于3d交互的虚拟现实系统

Publications (1)

Publication Number Publication Date
CN108012140A true CN108012140A (zh) 2018-05-08

Family

ID=62056910

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711274280.5A Pending CN108012140A (zh) 2017-12-06 2017-12-06 基于3d交互的虚拟现实系统

Country Status (1)

Country Link
CN (1) CN108012140A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101593022A (zh) * 2009-06-30 2009-12-02 华南理工大学 一种基于指端跟踪的快速人机交互方法
CN102457732A (zh) * 2010-10-26 2012-05-16 机械科学研究总院先进制造技术研究中心 基于单机图形工作站的单通道背投立体显示系统
CN203773476U (zh) * 2014-03-24 2014-08-13 上海大学 基于3d交互的虚拟现实系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101593022A (zh) * 2009-06-30 2009-12-02 华南理工大学 一种基于指端跟踪的快速人机交互方法
CN102457732A (zh) * 2010-10-26 2012-05-16 机械科学研究总院先进制造技术研究中心 基于单机图形工作站的单通道背投立体显示系统
CN203773476U (zh) * 2014-03-24 2014-08-13 上海大学 基于3d交互的虚拟现实系统

Similar Documents

Publication Publication Date Title
US7843470B2 (en) System, image processing apparatus, and information processing method
CN106464854B (zh) 图像编码和显示
CN107976811B (zh) 一种基于虚拟现实混合的仿真实验室及其仿真方法
CN104219584B (zh) 基于增强现实的全景视频交互方法和系统
CN104782122B (zh) 受控三维通信端点系统和方法
US20180367787A1 (en) Information processing device, information processing system, control method of an information processing device, and parameter setting method
CN203773476U (zh) 基于3d交互的虚拟现实系统
CN106131536A (zh) 一种裸眼3d增强现实互动展示系统及其展示方法
KR101126110B1 (ko) 3차원 입체 영상 표시 시스템 및 이를 이용한 3차원 입체 영상 표시 방법
CN205987184U (zh) 一种基于虚拟现实的实训系统
CN104516492A (zh) 一种基于3d全息投影的人机交互技术
CN106210856B (zh) 在网络视频直播平台上观看3d全景视频的方法及系统
JP6512575B2 (ja) 三次元形状情報の配信または放送の方法
US20130201099A1 (en) Method and system for providing a modified display image augmented for various viewing angles
CN103543827A (zh) 基于单个摄像机的沉浸式户外活动交互平台的实现方法
WO2017173890A1 (zh) 一种具有双摄像头的头盔
CN106980369A (zh) 虚拟现实项目的第三视角视频的合成和输出系统及方法
CN108492633A (zh) 一种利用ar实现儿童辅助教育的方法
CN105468154B (zh) 电力系统运营互动全景展示系统
CN204559792U (zh) 用于显示屏显示立体图像或视频的装置及显示设备
CN108052205A (zh) 基于3d交互的虚拟现实系统
Minatani et al. Face-to-face tabletop remote collaboration in mixed reality
KR101752691B1 (ko) 시점 선택이 가능한 3차원 가상 콘텐츠 동영상을 제공하는 장치 및 그 방법
CN108012140A (zh) 基于3d交互的虚拟现实系统
CN113891063B (zh) 一种全息展示方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180508

WD01 Invention patent application deemed withdrawn after publication