CN105892643A - 基于虚拟现实的多界面统一显示系统及方法 - Google Patents

基于虚拟现实的多界面统一显示系统及方法 Download PDF

Info

Publication number
CN105892643A
CN105892643A CN201511034715.XA CN201511034715A CN105892643A CN 105892643 A CN105892643 A CN 105892643A CN 201511034715 A CN201511034715 A CN 201511034715A CN 105892643 A CN105892643 A CN 105892643A
Authority
CN
China
Prior art keywords
virtual reality
intelligent electronic
electronic device
remote desktop
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201511034715.XA
Other languages
English (en)
Inventor
聂林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leshi Zhixin Electronic Technology Tianjin Co Ltd
Original Assignee
Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Leshi Zhixin Electronic Technology Tianjin Co Ltd filed Critical Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority to CN201511034715.XA priority Critical patent/CN105892643A/zh
Priority to PCT/CN2016/089237 priority patent/WO2017113718A1/zh
Priority to US15/242,204 priority patent/US20170192734A1/en
Publication of CN105892643A publication Critical patent/CN105892643A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/2876—Pairs of inter-processing entities at each side of the network, e.g. split proxies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/32—Image data format
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/12—Frame memory handling
    • G09G2360/127—Updating a frame memory using a transfer of data from a source area to a destination area
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Geometry (AREA)
  • Information Transfer Between Computers (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明公开一种基于虚拟现实的多界面统一显示系统及方法，所述系统包括：多个远程桌面代理服务器端，分别内置于多个智能电子装置中以获得智能电子装置当前屏幕画面；以及虚拟现实一体机，又包括：多个远程桌面代理客户端，与远程桌面代理服务器端对应连接以获取智能电子装置当前屏幕画面；虚拟现实3D引擎，把智能电子装置当前屏幕画面转化为图形程序接口可识别的贴图，再将贴图绑定到虚拟场景当中对应窗口的表面，还分别渲染左右眼对应的画面到一对缓冲区中，并对缓冲区中的内容进行反畸变处理；以及显示服务模块，用以显示缓冲区中经处理过的画面。本发明在虚拟现实场景中集中集中显现多个智能电子装置用户界面，更有利于用户查看和管理。

Description

基于虚拟现实的多界面统一显示系统及方法
技术领域
本发明涉及虚拟现实技术领域，尤其是指基于虚拟现实的多界面统一显示系统及方法。
背景技术
在日常工作和生活中，人们时常会用到诸如智能手机、电脑等各种具有用户界面（UI）的智能电子装置。在使用时，人们只能分别查看这些智能产品的用户界面，相当繁琐。如能在一个界面中同时查看多个智能电子装置的用户界面，将会极大地方便用户使用这些智能电子装置。
发明内容
本发明所要解决的技术问题在于，提供一种基于虚拟现实的多界面统一显示系统，以便于统一显示多个智能电子装置的用户界面。
本发明另一个所要解决的技术问题在于，提供一种基于虚拟现实的多界面统一显示方法，以便于统一显示多个智能电子装置的用户界面。
为解决上述技术问题，本发明提供如下技术方案：一种基于虚拟现实的多界面统一显示系统，包括：
多个远程桌面代理服务器端，分别内置于对应的多个智能电子装置中以获得对应的智能电子装置当前屏幕画面并对外传送；以及
虚拟现实一体机，所述虚拟现实一体机又包括：
多个远程桌面代理客户端，与所述远程桌面代理服务器端一一对应连接以获取对应的智能电子装置当前屏幕画面；
虚拟现实3D引擎，用于把不同的远程桌面代理客户端传来的智能电子装置当前屏幕画面转化为图形程序接口可以识别的贴图，再将贴图绑定到虚拟场景当中对应窗口的表面，并且还通过图形程序接口分别渲染左右眼对应的画面到一对制定的缓冲区中，并且对缓冲区中的内容进行反畸变处理；以及
显示服务模块，用以显示缓冲区中经处理过的画面。
进一步地，所述智能电子装置是个人电脑和智能手机两者中的至少一种。
进一步地，所述虚拟现实一体机是虚拟现实头盔。
另一方面，本发明还提供一种基于虚拟现实的多界面统一显示方法，包括如下步骤：
步骤S1，远程桌面代理服务器端截取当前屏幕画面并通过网络传输给VR一体机的远程桌面代理客户端；
步骤S2，VR一体机的远程桌面代理客户端收到智能电子装置当前屏幕画面并传递给VR 3D引擎；
步骤S3，3D引擎把不同代理客户端传来的智能电子装置当前屏幕画面转化为图形程序接口可识别的贴图格式；
步骤S4，3D引擎把贴图绑定到虚拟场景当中的对应窗口的表面上，并通过图形程序接口分别渲染左右眼对应的画面到一对制定的缓冲区中；
步骤S5，为配合头盔的光学透镜造成的图像畸变，3D引擎对缓冲区中的内容进行反畸变处理；
步骤S6，把缓冲区中的处理过的画面提交给显示服务模块进行显示。
进一步地，所述图形程序接口为OpenGL。
进一步地，所述方法还包括以下步骤：
步骤S7，通过虚拟现实一体机模拟实现对显示的画面中的鼠标指针进行位移控制。
进一步地，所述步骤S7具体又包括：
步骤S71，虚拟现实一体机陀螺仪获取用户头部延x,y,z轴的转动角速度；
步骤S72，根据当前转动角速度和当前距离上次取样时的时间间隔计算获得对应的旋转角度；
步骤S73，将鼠标指针固定在屏幕坐标的中心，由3D引擎将当前场景反向转动上面的角度并重新计算鼠标指针坐标；
步骤S74，将新的鼠标指针坐标通过远程桌面代理客户端传递给服务器端。
进一步地，步骤S22中，采用数据融合算法计算获得对应的旋转角度。
进一步地，步骤S6中，通过EGL的应用程序编程接口把缓冲区中的处理过的画面提交给显示服务模块。
采用上述技术方案后，本发明至少具有如下有益效果：本发明利用VR一体机虚拟360×180度全方位视野功能，通过多个远程桌面代理客户端与对应的智能电子装置中内置的远程桌面代理服务器端一一对应连接以获取对应的智能电子装置当前屏幕画面，经过3D引擎32的处理后，在虚拟现实场景中予以集中呈现，从而方便用户在虚拟现实场景这样单一的界面中同时查看多个智能电子装置的用户界面，更有利于集中高效地查看和管理这些用户界面。此外，结合虚拟现实一体机的控制功能实现对智能电子装置的简单操作，例如：鼠标指针位移控制。
附图说明
图1是本发明基于虚拟现实的多界面统一显示系统的系统构成方框图。
图2是本发明基于虚拟现实的多界面统一显示方法的流程示意图。
图3是本发明基于虚拟现实的多界面统一显示方法的实现鼠标指标控制的流程示意图。
具体实施方式
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互结合，下面结合附图和具体实施例对本发明作进一步详细说明。
如图1所示，本发明提供一种基于虚拟现实的多界面统一显示系统，其包括：
多个远程桌面代理服务器端1，分别内置于对应的多个智能电子装置中以获得对应的智能电子装置当前屏幕画面并对外传送；以及
虚拟现实一体机（VR一体机）3，所述虚拟现实一体机3又包括：
多个远程桌面代理客户端30，与所述远程桌面代理服务器端1一一对应连接以获取对应的智能电子装置当前屏幕画面；
虚拟现实3D引擎32，用于把不同的远程桌面代理客户端30传来的图片转化为图片渲染程序可识别的贴图，再将贴图绑定到虚拟场景当中对应窗口的表面，并且还通过图片渲染程序的应用程序编程接口分别渲染左右眼对应的画面到一对制定的缓冲区中，并且对缓冲区中的内容进行反畸变处理；以及
显示服务模块34，用以显示缓冲区中经处理过的画面。
可用于本发明的智能电子装置可以是个人电脑（Personal Computer，缩写为PC）和智能手机两者中的至少一种，在如图1所示的实施例中，即同时采用了个人电脑（PC）20和智能手机22。可以理解的是，可以与虚拟现实一体机3建立连接的智能电子装置可以为多台，例如：3台、4台，甚至更多，而不局限于图1中所示的2台。
所述虚拟现实一体机优选为虚拟现实头盔。
结合图2所示，本发明还提供一种基于虚拟现实的多界面统一显示方法，包括如下流程步骤：
步骤S1，远程桌面代理服务器端截取当前屏幕画面并通过网络传输画面给VR一体机的远程桌面代理客户端；
步骤S2，VR一体机的远程桌面代理客户端收到图片并传递给VR 3D引擎；
步骤S3，3D引擎把不同代理客户端传来的图片转化为图片渲染程序可以识别的贴图格式；
步骤S4，3D引擎把贴图绑定到虚拟场景当中的对应窗口的表面上。并通过图片渲染程序的API（Application Programming Interface，应用程序编程接口）分别渲染左右眼对应的画面到一对制定的缓冲区中，在如图2所示的实施例中，优选地采用了OpenGL作为图片渲染程序；
步骤S5，为配合头盔的光学透镜造成的图像畸变，3D引擎对缓冲区中的内容进行反畸变处理；
步骤S6，把缓冲区中的处理过的画面通过EGL的API提交给显示服务模块进行显示。
基于以上虚拟现实的多界面统一显示多界面的，本发明还可以进一步包括以下步骤：
步骤S7，通过虚拟现实一体机模拟实现对显示的画面中的鼠标指针进行位移控制。
结合图3所示，所述步骤S7具体又包括如下步骤：
步骤S71，虚拟现实一体机陀螺仪获取用户头部延x,y,z轴的转动角速度；
步骤S72，将当前速度乘以当前距离上次取样时的时间间隔得到对应的旋转角度；
步骤S73，将鼠标指针固定在屏幕坐标的中心，由3D引擎将当前场景反向转动上面的角度并重新计算鼠标指针坐标；
步骤S74，新的鼠标指针坐标通过远程桌面代理客户端传递给服务器端。
在具体实施步骤S22时，还可以采用数据融合算法来获得对应的旋转角度。
本发明利用VR一体机虚拟360×180度全方位视野功能，通过多个远程桌面代理客户端30与对应的智能电子装置中内置的远程桌面代理服务器端1一一对应连接以获取对应的智能电子装置当前屏幕画面，经过3D引擎32的处理后，在虚拟现实场景中予以集中呈现，从而方便用户在虚拟现实场景这样单一的界面中同时查看多个智能电子装置的用户界面，而且还可以结合虚拟现实一体机的控制功能实现对智能电子装置的简单操作，例如：鼠标指针位移控制。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同范围限定。

Claims (9)

1.一种基于虚拟现实的多界面统一显示系统，其特征在于，包括：
多个远程桌面代理服务器端，分别内置于对应的多个智能电子装置中以获得对应的智能电子装置当前屏幕画面并对外传送；以及
虚拟现实一体机，所述虚拟现实一体机又包括：
多个远程桌面代理客户端，与所述远程桌面代理服务器端一一对应连接以获取对应的智能电子装置当前屏幕画面；
虚拟现实3D引擎，用于把不同的远程桌面代理客户端传来的智能电子装置当前屏幕画面转化为图形程序接口可以识别的贴图，再将贴图绑定到虚拟场景当中对应窗口的表面，并且还通过图形程序接口分别渲染左右眼对应的画面到一对制定的缓冲区中，并且对缓冲区中的内容进行反畸变处理；以及
显示服务模块，用以显示缓冲区中经处理过的画面。
2.如权利要求1所述的基于虚拟现实的多界面统一显示系统，其特征在于，所述智能电子装置是个人电脑和智能手机两者中的至少一种。
3.如权利要求1所述的基于虚拟现实的多界面统一显示系统，其特征在于，所述虚拟现实一体机是虚拟现实头盔。
4.一种基于虚拟现实的多界面统一显示方法，其特征在于，包括如下步骤：
步骤S1，远程桌面代理服务器端截取当前屏幕画面并通过网络传输给VR一体机的远程桌面代理客户端；
步骤S2，VR一体机的远程桌面代理客户端收到智能电子装置当前屏幕画面并传递给VR 3D引擎；
步骤S3，3D引擎把不同代理客户端传来的智能电子装置当前屏幕画面转化为图形程序接口可识别的贴图格式；
步骤S4，3D引擎把贴图绑定到虚拟场景当中的对应窗口的表面上，并通过图形程序接口分别渲染左右眼对应的画面到一对制定的缓冲区中；
步骤S5，为配合头盔的光学透镜造成的图像畸变，3D引擎对缓冲区中的内容进行反畸变处理；
步骤S6，把缓冲区中的处理过的画面提交给显示服务模块进行显示。
5.如权利要求4所述的基于虚拟现实的多界面统一显示方法，其特征在于，所述图形程序接口为OpenGL。
6.如权利要求4所述的基于虚拟现实的多界面统一显示方法，其特征在于，所述方法还包括以下步骤：
步骤S7，通过虚拟现实一体机模拟实现对显示的画面中的鼠标指针进行位移控制。
7.如权利要求6所述的基于虚拟现实的多界面统一显示方法，其特征在于，所述步骤S7具体又包括：
步骤S71，虚拟现实一体机陀螺仪获取用户头部延x,y,z轴的转动角速度；
步骤S72，根据当前转动角速度和当前距离上次取样时的时间间隔计算获得对应的旋转角度；
步骤S73，将鼠标指针固定在屏幕坐标的中心，由3D引擎将当前场景反向转动上面的角度并重新计算鼠标指针坐标；
步骤S74，将新的鼠标指针坐标通过远程桌面代理客户端传递给服务器端。
8.如权利要求7所述的基于虚拟现实的多界面统一显示方法，其特征在于，步骤S22中，采用数据融合算法计算获得对应的旋转角度。
9.如权利要求4所述的基于虚拟现实的多界面统一显示方法，其特征在于，步骤S6中，通过EGL的应用程序编程接口把缓冲区中的处理过的画面提交给显示服务模块。
CN201511034715.XA 2015-12-31 2015-12-31 基于虚拟现实的多界面统一显示系统及方法 Pending CN105892643A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201511034715.XA CN105892643A (zh) 2015-12-31 2015-12-31 基于虚拟现实的多界面统一显示系统及方法
PCT/CN2016/089237 WO2017113718A1 (zh) 2015-12-31 2016-07-07 基于虚拟现实的多界面统一显示系统及方法
US15/242,204 US20170192734A1 (en) 2015-12-31 2016-08-19 Multi-interface unified displaying system and method based on virtual reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511034715.XA CN105892643A (zh) 2015-12-31 2015-12-31 基于虚拟现实的多界面统一显示系统及方法

Publications (1)

Publication Number Publication Date
CN105892643A true CN105892643A (zh) 2016-08-24

Family

ID=57002287

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511034715.XA Pending CN105892643A (zh) 2015-12-31 2015-12-31 基于虚拟现实的多界面统一显示系统及方法

Country Status (3)

Country Link
US (1) US20170192734A1 (zh)
CN (1) CN105892643A (zh)
WO (1) WO2017113718A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106354256A (zh) * 2016-08-28 2017-01-25 杭州勺子网络科技有限公司 一种虚拟现实的移动控制方法
CN106502641A (zh) * 2016-09-18 2017-03-15 北京小鸟看看科技有限公司 Vr设备的开机画面的显示方法和头戴式3d显示器
CN106851240A (zh) * 2016-12-26 2017-06-13 网易（杭州）网络有限公司 图像数据处理的方法及装置
CN107358659A (zh) * 2017-07-21 2017-11-17 福建星网视易信息系统有限公司 基于3d技术的多画面融合显示方法及存储设备
WO2018090911A1 (zh) * 2016-11-16 2018-05-24 腾讯科技（深圳）有限公司 一种文件处理方法、终端及服务器、计算机存储介质
CN108090946A (zh) * 2017-12-14 2018-05-29 苏州蜗牛数字科技股份有限公司 一种材质球的构建方法及装置
CN110321187A (zh) * 2018-03-30 2019-10-11 合肥杰发科技有限公司 基于代理模式的多媒体显示方法、装置及设备
CN111176451A (zh) * 2019-12-30 2020-05-19 上海曼恒数字技术股份有限公司 一种虚拟现实多通道沉浸式环境的控制方法及系统
CN114706936A (zh) * 2022-05-13 2022-07-05 高德软件有限公司 地图数据处理方法及基于位置的服务提供方法
CN118037923A (zh) * 2024-04-09 2024-05-14 北京趋动智能科技有限公司 图像渲染方法、装置、存储介质及电子设备

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10652303B2 (en) * 2016-04-28 2020-05-12 Rabbit Asset Purchase Corp. Screencast orchestration
CN107220925B (zh) * 2017-05-05 2018-10-30 珠海全志科技股份有限公司 一种实时虚拟现实加速方法及装置
CN115225883A (zh) * 2021-04-21 2022-10-21 宏碁股份有限公司 3d显示系统与3d显示方法
TWI775397B (zh) * 2021-04-21 2022-08-21 宏碁股份有限公司 3d顯示系統與3d顯示方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102129361A (zh) * 2010-01-13 2011-07-20 宏正自动科技股份有限公司 多分割画面的集中显示系统与方法
US20110246950A1 (en) * 2010-03-30 2011-10-06 Michael Luna 3d mobile user interface with configurable workspace management
US8108791B2 (en) * 2009-02-27 2012-01-31 Microsoft Corporation Multi-screen user interface
CN102426829A (zh) * 2011-09-30 2012-04-25 冠捷显示科技（厦门）有限公司 双画面显示装置及实现方法
CN104216533A (zh) * 2014-08-28 2014-12-17 东华大学 一种基于DirectX9的头戴式虚拟现实显示器
CN104915979A (zh) * 2014-03-10 2015-09-16 苏州天魂网络科技有限公司 跨移动平台实现沉浸式虚拟现实的系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160098095A1 (en) * 2004-01-30 2016-04-07 Electronic Scripting Products, Inc. Deriving Input from Six Degrees of Freedom Interfaces
CN103577163A (zh) * 2012-07-19 2014-02-12 中兴通讯股份有限公司 移动终端多用户界面的实现方法及装置
CN104035760A (zh) * 2014-03-04 2014-09-10 苏州天魂网络科技有限公司 跨移动平台实现沉浸式虚拟现实的系统
US9898864B2 (en) * 2015-05-28 2018-02-20 Microsoft Technology Licensing, Llc Shared tactile interaction and user safety in shared space multi-person immersive virtual reality

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8108791B2 (en) * 2009-02-27 2012-01-31 Microsoft Corporation Multi-screen user interface
CN102129361A (zh) * 2010-01-13 2011-07-20 宏正自动科技股份有限公司 多分割画面的集中显示系统与方法
US20110246950A1 (en) * 2010-03-30 2011-10-06 Michael Luna 3d mobile user interface with configurable workspace management
CN102426829A (zh) * 2011-09-30 2012-04-25 冠捷显示科技（厦门）有限公司 双画面显示装置及实现方法
CN104915979A (zh) * 2014-03-10 2015-09-16 苏州天魂网络科技有限公司 跨移动平台实现沉浸式虚拟现实的系统
CN104216533A (zh) * 2014-08-28 2014-12-17 东华大学 一种基于DirectX9的头戴式虚拟现实显示器

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106354256B (zh) * 2016-08-28 2019-05-17 杭州勺子网络科技有限公司 一种虚拟现实的移动控制方法
CN106354256A (zh) * 2016-08-28 2017-01-25 杭州勺子网络科技有限公司 一种虚拟现实的移动控制方法
CN106502641A (zh) * 2016-09-18 2017-03-15 北京小鸟看看科技有限公司 Vr设备的开机画面的显示方法和头戴式3d显示器
US10855969B2 (en) 2016-11-16 2020-12-01 Tencent Technology (Shenzhen) Company Limited File processing method, terminal, server, and computer storage medium
WO2018090911A1 (zh) * 2016-11-16 2018-05-24 腾讯科技（深圳）有限公司 一种文件处理方法、终端及服务器、计算机存储介质
CN106851240A (zh) * 2016-12-26 2017-06-13 网易（杭州）网络有限公司 图像数据处理的方法及装置
CN107358659A (zh) * 2017-07-21 2017-11-17 福建星网视易信息系统有限公司 基于3d技术的多画面融合显示方法及存储设备
CN107358659B (zh) * 2017-07-21 2021-06-22 福建星网视易信息系统有限公司 基于3d技术的多画面融合显示方法及存储设备
CN108090946A (zh) * 2017-12-14 2018-05-29 苏州蜗牛数字科技股份有限公司 一种材质球的构建方法及装置
CN110321187A (zh) * 2018-03-30 2019-10-11 合肥杰发科技有限公司 基于代理模式的多媒体显示方法、装置及设备
CN110321187B (zh) * 2018-03-30 2022-08-30 合肥杰发科技有限公司 基于代理模式的多媒体显示方法、装置及设备
CN111176451A (zh) * 2019-12-30 2020-05-19 上海曼恒数字技术股份有限公司 一种虚拟现实多通道沉浸式环境的控制方法及系统
CN111176451B (zh) * 2019-12-30 2023-06-02 上海曼恒数字技术股份有限公司 一种虚拟现实多通道沉浸式环境的控制方法及系统
CN114706936A (zh) * 2022-05-13 2022-07-05 高德软件有限公司 地图数据处理方法及基于位置的服务提供方法
CN118037923A (zh) * 2024-04-09 2024-05-14 北京趋动智能科技有限公司 图像渲染方法、装置、存储介质及电子设备

Also Published As

Publication number Publication date
WO2017113718A1 (zh) 2017-07-06
US20170192734A1 (en) 2017-07-06

Similar Documents

Publication Publication Date Title
CN105892643A (zh) 基于虚拟现实的多界面统一显示系统及方法
CN109829981B (zh) 三维场景呈现方法、装置、设备及存储介质
US10567449B2 (en) Apparatuses, methods and systems for sharing virtual elements
CN113643412B (zh) 虚拟形象的生成方法、装置、电子设备及存储介质
US8379057B2 (en) Dynamic perspective video window
US10726625B2 (en) Method and system for improving the transmission and processing of data regarding a multi-user virtual environment
CN106846497B (zh) 应用于终端的呈现三维地图的方法和装置
WO2021067044A1 (en) Systems and methods for video communication using a virtual camera
CN105916060A (zh) 数据传输的方法、装置及系统
WO2016114930A2 (en) Systems and methods for augmented reality art creation
US20190130599A1 (en) Systems and methods for determining when to provide eye contact from an avatar to a user viewing a virtual environment
WO2023179346A1 (zh) 特效图像处理方法、装置、电子设备及存储介质
US11663736B2 (en) Marker-based shared augmented reality session creation
CN110568923A (zh) 基于Unity3D的虚拟现实交互方法、装置、设备及存储介质
CN111984114A (zh) 基于虚拟空间的多人交互系统及其多人交互方法
WO2023207001A1 (zh) 图像渲染方法、装置、电子设备及存储介质
CN114842120B (zh) 一种图像渲染处理方法、装置、设备及介质
CN113870439A (zh) 用于处理图像的方法、装置、设备以及存储介质
JP2024527519A (ja) データ処理方法、装置、電子機器及び記憶媒体
CN114428573B (zh) 特效图像处理方法、装置、电子设备及存储介质
CN106990838B (zh) 一种虚拟现实模式下锁定显示内容的方法及系统
CN109062413A (zh) 一种ar交互系统及方法
CN103646427A (zh) 一种采集图像数据的方法及装置
KR102683669B1 (ko) 메타버스 환경에서 전시 서비스를 제공하는 서버 및 그 동작 방법
CN114820908B (zh) 虚拟形象生成方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160824

WD01 Invention patent application deemed withdrawn after publication