CN106896920A - 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法 - Google Patents

虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法 Download PDF

Info

Publication number
CN106896920A
CN106896920A CN201710118077.2A CN201710118077A CN106896920A CN 106896920 A CN106896920 A CN 106896920A CN 201710118077 A CN201710118077 A CN 201710118077A CN 106896920 A CN106896920 A CN 106896920A
Authority
CN
China
Prior art keywords
virtual reality
mobile terminal
intelligent mobile
virtual
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710118077.2A
Other languages
English (en)
Other versions
CN106896920B (zh
Inventor
万金
林健
向先松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Hangzhou Network Co Ltd
Original Assignee
Netease Hangzhou Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netease Hangzhou Network Co Ltd filed Critical Netease Hangzhou Network Co Ltd
Priority to CN201710118077.2A priority Critical patent/CN106896920B/zh
Publication of CN106896920A publication Critical patent/CN106896920A/zh
Application granted granted Critical
Publication of CN106896920B publication Critical patent/CN106896920B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Abstract

本公开提供了一种虚拟现实控制装置、方法、虚拟现实设备及虚拟现实系统,其中,该装置包括一具备触控屏幕的智能移动终端;所述智能移动终端还包括:事件侦测模块,用于侦测作用于所述智能移动终端的输入事件;信息处理模块,用于将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;通信建立模块,用于建立所述智能移动终端与所述虚拟现实设备之间的通信链路;信息传输模块,用于将所述数字信息通过所述通信链路传输至所述虚拟现实设备。本公开大大降低了虚拟现实控制装置的复用难度,且安装简单、操作方便,用户体验较好。

Description

虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法
技术领域
本公开涉及虚拟现实技术领域,尤其涉及一种虚拟现实控制装置、虚拟现实设备、虚拟现实控制方法以及包括该虚拟现实控制装置的虚拟现实系统。
背景技术
虚拟现实(Virtual Reality,VR)技术是一种新兴的、数字化的人机接口技术。在虚拟现实技术中,可以通过光学结构、显示系统以及虚拟现实引擎等部分共同为用户提供一个以视觉感受为主,包括听觉、触觉等综合感知的虚拟现实场景。而且,用户不但可以通过视觉、听觉、触觉和加速度等多种感觉通道感知虚拟现实场景,还可以通过手柄、遥控器、语音、动作、表情、手势以及视线等方式和虚拟现实场景进行交互,从而产生身临其境的体验。目前,虚拟现实技术已经在游戏、医疗、教育、工程训练等领域得到的广泛应用。
目前,在虚拟现实环境中实现人机交互的常用方式包括:方式一,通过将常规的手柄作为控制装置来实现与虚拟对象的交互;方式二,通过虚拟现实头盔上的物理按键并结合用户头部的运动实现与虚拟对象的交互;方式三,通过虚拟现实头盔、手持控制器并结合空间定位系统实现与虚拟对象的交互。
显然在上述方式中,一方面,由于同一个手柄或虚拟现实头盔在不同的虚拟现实设备中应用时,存在兼容性的差异,以致手柄以及虚拟现实头盔的复用难度较大;另一方面,上述方式三中通过空间定位系统检测虚拟现实头盔以及手柄的位置,并根据检测到的虚拟现实头盔以及手柄的位置完成与虚拟对象的交互,但上述空间定位系统的安装较为复杂,且对安装环境的要求较高;再一方面,通过上述三种方式处理多流程或者对精度要求较高的操作时,操作较为不便,影响用户体验;又一方面,在用户通过上述三种方式完成与虚拟对象的交互时,需要重现学习及熟悉操作步骤,增加了学习成本。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种虚拟现实控制装置、虚拟现实设备、虚拟现实控制方法以及包括该虚拟现实控制装置的虚拟现实系统,进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。
根据本公开的一个方面,提供一种虚拟现实控制装置,包括一具备触控屏幕的智能移动终端;所述智能移动终端还包括:
事件侦测模块,用于侦测作用于所述智能移动终端的输入事件;
信息处理模块,用于将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
通信建立模块,用于建立所述智能移动终端与所述虚拟现实设备之间的通信链路;
信息传输模块,用于将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
在本公开的一种示例性实施例中,所述智能移动终端还包括:
信息接收模块,用于接收所述虚拟现实设备反馈的数字信息并将所述反馈的数字信息转化为与所述智能移动终端对应的操作信息显示在所述触控屏幕上。
在本公开的一种示例性实施例中,所述智能移动终端还包括:
显示控制模块,用于确定所述智能移动终端在真实空间中的位置以使所述虚拟现实设备根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。
在本公开的一种示例性实施例中:所述智能移动终端还包括:
通信模块,用于将所述智能移动终端与基站进行连接,以使所述虚拟现实设备通过所述智能移动终端与远程终端进行通信。
在本公开的一种示例性实施例中:所述智能移动终端还包括:
应用模块,用于执行视频通话、语音通话、收发邮件以及收发信息中的一个或多个功能;
共享模块,用于通过所述通信链路将所述智能移动终端中的所述应用模块的界面共享到虚拟现实设备的界面中。
在本公开的一种示例性实施例中:所述通信链路包括有线通信链路和无线通信链路中的一个或多个。
在本公开的一种示例性实施例中:所述输入事件为作用于所述触控屏幕上的点击、双击、滑动、缩放以及抓取中的一个或多个操作。
在本公开的一种示例性实施例中:所述输入事件为所述智能移动终端的移动操作或转动操作。
根据本公开的一个方面,提供一种基于上述任意一项所述的虚拟现实控制装置的虚拟现实设备,包括:
通信建立模块,用于建立所述虚拟现实设备与智能移动终端之间的通信链路;
信息接收模块,用于接收所述智能移动终端传输给所述虚拟现实设备的数字信息;
信息处理模块,用于将接收到的所述数字信息转译为交互命令;
控制模块,用于根据所述交互命令控制所述虚拟现实设备完成与所述交互命令对应的操作。
在本公开的一种示例性实施例中,还包括:
信息发送模块,用于将所述虚拟现实设备反馈的数字信息通过通信链路发送给所述智能移动终端。
在本公开的一种示例性实施例中,还包括:
显示模块,用于根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。
在本公开的一种示例性实施例中,还包括:
共享模块,用于将所述智能移动终端的界面共享到虚拟现实设备的界面中。
根据本公开的一个方面,提供一种虚拟现实控制方法,应用于具有触控屏幕的智能移动终端,所述方法包括:
侦测作用于所述智能移动终端的输入事件;
将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
建立所述智能移动终端与所述虚拟现实设备之间的通信链路;
将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
根据本公开的一个方面,提供一种虚拟现实系统,所述系统包括上述任意一项所述的虚拟现实控制装置及/或根据上述任意一项所述的虚拟现实设备。
本示例性实施例的一种虚拟现实控制装置中,首先,将智能移动终端作为虚拟现实控制装置;然后,智能移动终端中的事件侦测模块侦测输入事件,并通过信息处理模块将侦测到的输入事件转化为能够作用于一虚拟现实设备的数字信息;再然后,信息传输模块将数字信息通过通信建立模块建立的通信链路传输至虚拟现实设备。一方面,通过将智能移动终端作为虚拟现实控制装置,安装简单且对安装环境没有特殊要求,同时也为用户提供了一种新的虚拟现实控制装置;另一方面,由于作用于所述智能移动终端的输入事件均为用户平时使用智能移动终端的常用操作,操作简单、方便、不需要学习,节约了学习升本,并提高了用户体验。再一方面,仅通过对智能移动终端的常规操作即可处理多流程或对精度要求较高的操作使得操作的便捷性体现的更为突出,进而给用户带来更好的体验;又一方面,由于智能移动终端本身的特性,使得智能移动终端可以兼容不同的虚拟现实设备,进而使得虚拟现实控制装置复用难度大大降低。
附图说明
通过参照附图来详细描述其示例性实施例,本公开的上述和其它特征及优点将变得更加明显。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本公开一种智能移动终端的框图。
图2为本公开一示例性实施例通过显示控制模块在虚拟现实界面中现实虚拟控件的示意图。
图3为本公开一示例性实施例中在虚拟控件中显示操作信息的示意图。
图4为本公开另一示例性实施例中在虚拟控件中显示操作信息的示意图。
图5为本公开一示例性实施例中将智能移动终端中的应用模块的界面共享到虚拟现实设备的界面中的示意图。
图6为本公开一种虚拟现实设备的框图。
图7为本公开一种虚拟现实控制方法的流程图。
具体实施方式
现在将参考附图更全面地描述示例实施例。然而,示例实施例能够以多种形式实施,且不应被理解为限于在此阐述的实施例;相反,提供这些实施例使得本公开将全面和完整,并将示例实施例的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本公开的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而没有所述特定细节中的一个或更多,或者可以采用其它的方法、组元、材料、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免模糊本公开的各方面。
此外,附图仅为本公开的示意性图解,并非一定是按照比例绘制。图中相同的附图标记标识相同或相似的部分,因而将省略对它们的重复描述。
本示例性实施例中首先公开了一种虚拟现实控制装置。可以应用于虚拟现实系统,该虚拟现实系统可以由光学结构和显示系统组成,其中显示系统与外部虚拟现实引擎连接,以接收外部虚拟现实引擎处理后的显示内容,再通过光学结构为用户呈现出一个虚拟现实场景,但本示例实施方式中对于虚拟现实控制装置所应用的虚拟现实系统并不进行特殊限定。该虚拟现实控制装置可以包括:一具备触控屏幕的智能移动终端;参照图1所示,所述智能移动终端100还可以包括:事件侦测模块101、信息处理模块102、通信建立模块103、信息传输模块104。其中:
事件侦测模块101可以用于侦测作用于所述智能移动终端100的输入事件;
信息处理模块102可以用于将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
通信建立模块103可以用于建立所述智能移动终端100与所述虚拟现实设备之间的通信链路;
信息传输模块104可以用于将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
本示例性实施例提供的虚拟现实控制装置,一方面,通过将智能移动终端作为虚拟现实控制装置,安装简单且对安装环境没有特殊要求,同时也为用户提供了一种新的虚拟现实控制装置;另一方面,由于作用于所述智能移动终端的输入事件均为用户平时使用智能移动终端的常用操作,操作简单、方便、不需要学习,节约了学习升本,并提高了用户体验。再一方面,仅通过对智能移动终端的常规操作即可处理多流程或对精度要求较高的操作使得操作的便捷性体现的更为突出,进而给用户带来更好的体验;又一方面,由于智能移动终端本身的特性,使得智能移动终端可以兼容不同的虚拟现实设备,进而使得虚拟现实控制装置复用难度大大降低。
下面,参照图1对本示例性实施例中的虚拟现实控制装置中的各部分作进一步的说明。
虚拟现实控制装置包括一具备触控屏幕的智能移动终端,在本示例性实施例中,所述具备触控屏幕的智能移动终端可以为具有触控屏幕的智能手机,也可以为具有触控屏幕的平板电脑,本示例性实施例对此不做特殊限定。用户可以通过作用于智能移动终端的输入事件来实现与虚拟现实设备中的虚拟对象的交互。此外,通过将智能移动终端作为虚拟现实控制装置,安装简单且对安装环境没有特殊要求,同时也为用户提供了一种新的虚拟现实控制装置。所述智能移动终端100还可以包括:
事件侦测模块101可以用于侦测作用于所述智能移动终端100的输入事件。
在本示例性实施例中,所述事件侦测模块101可以通过检测是否存在作用于智能移动终端的输入事件的触发信号,在检测到存在作用于智能移动终端的输入事件的触发信号时,确定侦测到输入事件。所述输入事件指用户作用于智能移动终端的操作。在本公开的一个示例性实施例中,所述输入事件可以为作用于所述触控屏幕上的点击、双击、滑动、快速滑动、缩放以及抓取中的一个或多个操作。例如,点击操作可以代表选中虚拟对象、聚焦等功能;双击操作可以代表激活虚拟对象、缩放等功能;滑动操作可以代表转换虚拟现实界面的角度、移动虚拟对象在虚拟现实界面中的位置等功能;快速滑动可以代表砍、挥舞、发射投掷等功能,抓取操作可以代表抓取虚拟对象的功能。
在本公开的另一个示例性实施例中,所述输入事件可以为所述智能移动终端的移动操作或转动操作。具体而言,可以通过智能移动终端中特有的重力感应器或陀螺仪传感器检测智能移动终端移动或者转动的操作。例如,用户可以通过移动智能移动终端控制虚拟对象前进或者后退,也可以通过转动智能移动终端控制虚拟对象上升、下降或者转弯,还可以通过移动以及转动智能移动终端来完成驾驶、飞行、跳跃等操作。本示例性实施例中的智能移动终端转动或移动的操作对应的功能不限于此。例如,开发商还可以根据具体的场景并结合用户的习惯设定智能移动终端转动或移动的操作对应的功能。由上可知,由于作用于所述智能移动终端的输入事件均为用户平时使用智能移动终端的常用操作,操作简单、方便、不需要学习,节约了学习升本,并提高了用户体验。另外,仅通过对智能移动终端的常规操作即可处理多流程或对精度要求较高的操作使得操作的便捷性体现的更为突出,进而给用户带来更好的体验。
信息处理模块102可以用于将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息。
在本示例性实施例中,所述信息处理模块将侦测到的输入事件转化为可以被智能移动终端传输给虚拟现实设备的数字信息。在虚拟现实设备接收到智能移动终端设备传输的数字信息时,根据系统预先设定的规则将该数字信息转译为对虚拟对象的交互命令。在与虚拟对象进行交互时,事件侦测模块会不断的侦测输入事件,因此,信息处理模块也需要不断的将侦测到的输入事件转化为数字信息。举例说明,首先,在用户的手指在智能移动终端的触控屏幕上滑动时,此时事件侦测模块侦测到该滑动操作;然后信息处理模块可以将该滑动操作转化为能被智能移动终端传输给虚拟现实设备的数字信息;最后,虚拟现实设备根据系统预设的规则(例如,滑动操作转译为移动虚拟对象位置的命令)将该数字信息转译为移动虚拟对象位置的交互命令。
通信建立模块103可以用于建立所述智能移动终端100与所述虚拟现实设备之间的通信链路。
在本示例性实施例中,通过通信建立模块建立的通信链路将智能移动终端与虚拟现实设备连接起来,进而实现智能移动终端与虚拟现实设备之间的数据传输。在本公开的一个示例性实施例中,所述通信链路可以包括有线通信链路和无线通信链路中的一个或多个。举例说明,通信链路可为有线通信链路,例如可以通过数据线将智能移动终端与虚拟现实设备进行连接,使智能移动终端可以通过该数据线将数字信息传输给虚拟现实设备。通信链路也可以为无线通信链路,例如,可以通过WiFi(一种允许电子设备连接到一个无线局域网(WLAN)的技术)、蓝牙或ZigBee(基于IEEE802.15.4标准的低功耗局域网协议)等无线通信链路将智能移动终端与虚拟现实设备进行连接,使智能移动终端可以通过WiFi、蓝牙或ZigBee等无线通信链路将数字信息传输给虚拟现实设备。通信链路还可以为无线通信链路与有线通信链路的结合,用户可以根据自己的喜好自行决定使用无线通信链路或有线通信链路。
信息传输模块104可以用于将所述数字信息通过所述通信链路传输至所述虚拟现实设备。在本示例性实施例中,在事件侦测模块侦测到用户作用于智能移动终端的输入事件后,信息处理模块将输入事件转化为数字信息,信息传输模块将该数字信息通过有线通信链路或无线通信链路传输给虚拟现实设备。虚拟现实设备在接受到数字信息时,将该数字信息转译为对虚拟对象的交互命令,并根据该交互命令,完成与虚拟对象的交互。由上可知,由于智能移动终端本身的特性,使得智能移动终端可以兼容不同的虚拟现实设备,进而使得虚拟现实控制装置复用难度大大降低。
进一步的,所述智能移动终端还可以包括信息接收模块,所述信息接收模块可以用于接收所述虚拟现实设备反馈的数字信息并将所述反馈的数字信息转化为与所述智能移动终端对应的操作信息显示在所述触控屏幕上。在本示例性实施例中,在虚拟现实设备根据接收到的数字信息完成与虚拟对象的交互时,会将下一步的交互命令的数字信息通过通信链路传输给智能移动终端。智能移动终端会根据接收到的数字信息将该数字信息转化为相应的操作信息,并将该操作信息显示在智能移动终端的触控屏幕的某一区域内。
例如,在用户通过在智能移动终端的触控屏幕上执行点击操作在虚拟现实界面中的多个虚拟对象中确定要进行交互的虚拟对象后,接下来,若要执行移动虚拟对象位置的操作时,虚拟现实设备可以将移动虚拟对象位置的数字信息通过通信链路传输给智能移动设备,再接下来,智能移动终端会将接收到的数字信息转译为与移动虚拟对象位置对应的操作信息(例如,滑动操作信息)显示在智能移动终端的触控屏幕上,即在智能移动终端的触控屏幕的特定区域内显示该滑动操作的示意图。在用户的手指在特定区域滑动时,虚拟现实设备执行移动虚拟对象位置的命令。由上可知,通过将操作信息显示在触控屏幕的特定区域,在智能移动终端上提供了执行与虚拟对象进行交互操作的界面。用户通过在规定的区域内执行规定的操作来完成与虚拟对象的各种交互。
为了使用户更直观的看到与虚拟对象进行下一步交互时可以对智能移动终端执行的具体操作信息。所述智能移动终端还可以包括显示控制模块,所述显示控制模块可以用于确定所述智能移动终端在真实空间中的位置以使所述虚拟现实设备根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。
在本示例性实施例中,可以根据智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。例如,在智能终端与用户距离较远时可以在虚拟现实界面的上方显示虚拟控件。如图2所示,在智能移动终端与用户距离较近时,在虚拟现实界面的下方显示虚拟控件,本示例性实施例对此不作特殊限定。
所述虚拟控件的大小与智能移动终端的大小成比例,且在该虚拟控件中显示完成下一步交互的操作信息,该操作信息包括作用于智能移动终端的操作以及执行该操作的区域。例如,如图2所示,在虚拟现实界面的下方显示虚拟控件,该虚拟控件的左半部分表示取消与虚拟对象的交互操作右半部分表示确认与虚拟对象的交互操作,此时,用户可以在智能移动终端的左半部分的触控屏幕上执行点击操作来完成取消与虚拟对象的交互的操作,也可以在智能移动终端的右半部分的触控屏幕上执行点击操作来完成确认与虚拟对象的交互的操作。再例如,如图3所示,在虚拟现实界面的下方显示虚拟控件,在该虚拟控件的中间显示缩放操作,此时,用户可以在智能移动终端的触控屏幕的中间执行缩放操作即可完成交互。又例如,如图4所示,在虚拟现实界面的下方显示虚拟控件,在该虚拟控件的周围显示转动智能移动终端的操作,此时,用户执行转动智能移动终端的操作即可完成交互。综上所述,用户在执行交互命令时,通过余光识别虚拟控件中的操作信息,并在智能移动终端中执行与该操作信息对应的操作即可完成与虚拟对象的交互。
为了实现多个用户共同执行与虚拟对象的交互命令,所述智能移动终端还可以包括通信模块,所述通信模块可以用于将所述智能移动终端与基站进行连接,以使所述虚拟现实设备通过所述智能移动终端与远程终端进行通信。在本示例性实施例中,所述远程终端可以为智能手机或平板电脑等,本示例性实施例对此不作特殊限定。举例说明,用户可以通过通信模块邀请智能移动终端中存储的对象共同完成与虚拟对象的交互。在被邀请的对象接收邀请后,用户与被邀请的对象会在与各自对应的虚拟现实设备中完成与该虚拟对象的交互。在本公开的另一示例性实施例中,还可以通过该通信模块将虚拟现实设备中的资料共享给智能移动终端中存储的对象。
进一步的,所述智能移动终端还可以包括应用模块以及共享模块,所述应用模块可以用于执行视频通话、语音通话、收发邮件以及收发信息中的一个或多个功能。所述共享模块可以用于通过所述通信链路将所述智能移动终端中的所述应用模块的界面共享到虚拟现实设备的界面中。在本示例性实施例中,用户可以通过该应用模块与智能移动终端中存储的对象视频通话或语音通话,也可以向智能移动终端中存储的对象发送邮件或信息,还可以从智能移动终端中存储的对象处接收邮件或信息。在本公开的另一示例性实施例中,所述应用模块还可以用于执行浏览新闻、观看视频以及购物等功能。
如图5所示,通过共享模块可以将智能移动终端中的应用模块的界面共享到虚拟现实设备的界面中,使用户可以在虚拟现实界面上处理智能移动终端中的应用模块的任务。例如,在用户正在执行与虚拟对象的交互操作时,智能移动终端接收到视频通话邀请,此时,用户可以在不退出虚拟现实界面的前提下,将视频通话邀请的界面共享到虚拟现实界面中,使用户在虚拟现实界面中完成视频通话。由上可知,在用户使用智能移动终端与虚拟对象进行交互的过程中,通过将智能移动终端的应用模块的界面共享在虚拟现实设备的界面中,使用户在不退出虚拟现实界面的前提下,在虚拟现实界面中直接执行智能移动终端本身的交互操作,给用户带来更好的体验。
在本公开的示例实施例中,还公开了一种虚拟现实设备,参考图6所示,该虚拟现实设备200可以包括:通信建立模块201、信息接收模块202、信息处理模块203、控制模块204。其中:
通信建立模块201可以用于建立所述虚拟现实设备与智能移动终端之间的通信链路。在本示例性实施例中,通过通信建立模块建立的通信链路将虚拟现实设备与智能移动终端连接起来,进而实现虚拟现实设备与智能移动终端之间的数据传输。所述通信链路可以包括有线通信链路和无线通信链路中的一个或多个。举例说明,通信链路可为有线通信链路(例如,数据线),通信链路也可以为无线通信链路,例如,WiFi(一种允许电子设备连接到一个无线局域网(WLAN)的技术)、蓝牙或ZigBee(基于IEEE802.15.4标准的低功耗局域网协议)等无线通信链路。通信链路还可以为无线通信链路与有线通信链路的结合,用户可以根据自己的喜好自行决定使用无线通信链路或有线通信链路。
信息接收模块202可以用于接收所述智能移动终端传输给所述虚拟现实设备的数字信息。在本示例性实施例中,所述数字信息为用户在智能移动终端上进行的操作经过智能移动终端转化后的数字信息。通过信息接收模块可以使虚拟现实设备接收用户在智能移动终端上进行的操作的数字信息,进而实现用户与虚拟对象的交互。
信息处理模块203可以用于将接收到的所述数字信息转译为交互命令。在本示例性实施例中,在信息接收模块接收到数字信息时,信息处理模块根据系统预先设定的规则将该数字信息转译为对虚拟对象的交互命令。举例说明,可以将数字信息转译为移动虚拟对象位置的交互命令,也可以将数字信息转译为抓取虚拟对象的交互命令,本示例性实施例对此不作特殊限定。
控制模块204可以用于根据所述交互命令控制所述虚拟现实设备完成与所述交互命令对应的操作。在本示例性实施例中,控制模块根据交互命令完成与虚拟对象的交互操作,进而实现用户与虚拟对象的交互。
进一步的,所述虚拟现实设备还可以包括信息发送模块,所述信息发送模块可以用于将所述虚拟现实设备反馈的数字信息通过通信链路发送给所述智能移动终端。在虚拟现实设备根据交互命令完成与虚拟对象的交互时,会将下一步的交互命令的数字信息通过通信链路传输给智能移动终端。智能移动终端会根据接收到的数字信息将该数字信息转化为相应的操作信息,并将该操作信息显示在智能移动终端的触控屏幕的某一区域内。
为了使用户更直观的看到与虚拟对象进行下一步交互时可以对智能移动终端执行的具体操作信息。所述虚拟现实设备还可以包括显示模块,所述显示模块可以用于根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。例如,在智能终端与用户距离较远时可以在虚拟现实界面的上方显示虚拟控件。在智能移动终端与用户距离较近时,在虚拟现实界面的下方显示虚拟控件,本示例性实施例对此不作特殊限定。
所述虚拟控件的大小与智能移动终端的大小成比例,且在该虚拟控件中显示完成下一步交互的操作信息,该操作信息包括作用于智能移动终端的操作以及执行该操作的区域。例如,该虚拟控件的左半部分表示取消与虚拟对象的交互操作右半部分表示确认与虚拟对象的交互操作,此时,用户可以在智能移动终端的左半部分的触控屏幕上执行点击操作来完成取消与虚拟对象的交互的操作,也可以在智能移动终端的右半部分的触控屏幕上执行点击操作来完成确认与虚拟对象的交互的操作。再例如,在虚拟现实界面的下方显示虚拟控件,在该虚拟控件的中间显示缩放操作,此时,用户可以在智能移动终端的触控屏幕的中间执行缩放操作即可完成交互。综上所述,用户在执行交互命令时,通过余光识别虚拟控件中的操作信息,并在智能移动终端中执行与该操作信息对应的操作即可完成与虚拟对象的交互。
进一步的,所述虚拟现实设备还可以包括共享模块,所述共享模块可以用于将所述智能移动终端的界面共享到虚拟现实设备的界面中。
在本示例性实施例中,通过共享模块可以将智能移动终端的界面共享到虚拟现实设备的界面中,使用户可以在虚拟现实界面上处理智能移动终端中的任务。例如,在用户正在执行与虚拟对象的交互操作时,智能移动终端接收到视频通话邀请,此时,用户可以在不退出虚拟现实界面的前提下,将视频通话邀请的界面共享到虚拟现实界面中,使用户在虚拟现实界面中完成视频通话。由上可知,在用户使用智能移动终端与虚拟对象进行交互的过程中时,通过将智能移动终端的界面共享在虚拟现实设备的界面中,使用户在不退出虚拟现实界面的前提下,在虚拟现实界面中直接完成智能移动终端本身的交互操作,给用户带来更好的体验。
在本公开的示例实施例中,还公开了一种虚拟现实控制方法,应用于具有触控屏幕的智能移动终端,参考图7所示,该方法可以包括:
步骤S110.侦测作用于所述智能移动终端的输入事件;
步骤S120.将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
步骤S130.建立所述智能移动终端与所述虚拟现实设备之间的通信链路;
步骤S140.将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
在本公开的示例实施例中,还公开了一种虚拟现实系统,该系统可以包括上述任意一项所述的虚拟现实控制装置及/或根据上述任意一项所述的虚拟现实设备。
本公开的权利要求书中,用语“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等;用语“包含”和“包括”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (14)

1.一种虚拟现实控制装置,其特征在于,包括一具备触控屏幕的智能移动终端;所述智能移动终端还包括:
事件侦测模块,用于侦测作用于所述智能移动终端的输入事件;
信息处理模块,用于将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
通信建立模块,用于建立所述智能移动终端与所述虚拟现实设备之间的通信链路;
信息传输模块,用于将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
2.根据权利要求1所述的虚拟现实控制装置,其特征在于,所述智能移动终端还包括:
信息接收模块,用于接收所述虚拟现实设备反馈的数字信息并将所述反馈的数字信息转化为与所述智能移动终端对应的操作信息显示在所述触控屏幕上。
3.根据权利要求1所述的虚拟现实控制装置,其特征在于,所述智能移动终端还包括:
显示控制模块,用于确定所述智能移动终端在真实空间中的位置以使所述虚拟现实设备根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。
4.根据权利要求1所述的虚拟现实控制装置,其特征在于:所述智能移动终端还包括:
通信模块,用于将所述智能移动终端与基站进行连接,以使所述虚拟现实设备通过所述智能移动终端与远程终端进行通信。
5.根据权利要求1所述的虚拟现实控制装置,其特征在于:所述智能移动终端还包括:
应用模块,用于执行视频通话、语音通话、收发邮件以及收发信息中的一个或多个功能;
共享模块,用于通过所述通信链路将所述智能移动终端中的所述应用模块的界面共享到虚拟现实设备的界面中。
6.根据权利要求1所述的虚拟现实控制装置,其特征在于:所述通信链路包括有线通信链路和无线通信链路中的一个或多个。
7.根据权利要求1所述的虚拟现实控制装置,其特征在于:所述输入事件为作用于所述触控屏幕上的点击、双击、滑动、缩放以及抓取中的一个或多个操作。
8.根据权利要求1所述的虚拟现实控制装置,其特征在于:所述输入事件为所述智能移动终端的移动操作或转动操作。
9.一种基于权利要求1~8任一项所述的虚拟现实控制装置的虚拟现实设备,其特征在于,包括:
通信建立模块,用于建立所述虚拟现实设备与智能移动终端之间的通信链路;
信息接收模块,用于接收所述智能移动终端传输给所述虚拟现实设备的数字信息;
信息处理模块,用于将接收到的所述数字信息转译为交互命令;
控制模块,用于根据所述交互命令控制所述虚拟现实设备完成与所述交互命令对应的操作。
10.根据权利要求9所述的虚拟现实设备,其特征在于,还包括:
信息发送模块,用于将所述虚拟现实设备反馈的数字信息通过通信链路发送给所述智能移动终端。
11.根据权利要求9所述的虚拟现实设备,其特征在于,还包括:
显示模块,用于根据所述智能移动终端在真实空间中的位置在虚拟现实界面中显示与所述智能移动终端对应的虚拟控件。
12.根据权利要求9所述的虚拟现实设备,其特征在于,还包括:
共享模块,用于将所述智能移动终端的界面共享到虚拟现实设备的界面中。
13.一种虚拟现实控制方法,其特征在于,应用于具有触控屏幕的智能移动终端,所述方法包括:
侦测作用于所述智能移动终端的输入事件;
将侦测到的所述输入事件转化为能够作用于一虚拟现实设备的数字信息;
建立所述智能移动终端与所述虚拟现实设备之间的通信链路;
将所述数字信息通过所述通信链路传输至所述虚拟现实设备。
14.一种虚拟现实系统,其特征在于,包括权利要求1~8任一项所述的虚拟现实控制装置及/或根据权利要求9~12任一项所述的虚拟现实设备。
CN201710118077.2A 2017-03-01 2017-03-01 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法 Active CN106896920B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710118077.2A CN106896920B (zh) 2017-03-01 2017-03-01 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710118077.2A CN106896920B (zh) 2017-03-01 2017-03-01 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法

Publications (2)

Publication Number Publication Date
CN106896920A true CN106896920A (zh) 2017-06-27
CN106896920B CN106896920B (zh) 2020-09-25

Family

ID=59185266

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710118077.2A Active CN106896920B (zh) 2017-03-01 2017-03-01 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法

Country Status (1)

Country Link
CN (1) CN106896920B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108170275A (zh) * 2017-12-29 2018-06-15 青岛小鸟看看科技有限公司 虚拟现实设备外接设备的输入信息的处理方法及装置
CN108170506A (zh) * 2017-11-27 2018-06-15 北京硬壳科技有限公司 app的控制方法、装置以及控制系统
CN108268185A (zh) * 2017-11-27 2018-07-10 北京硬壳科技有限公司 控制方法、控制装置以及控制系统
CN112527174A (zh) * 2019-09-19 2021-03-19 华为技术有限公司 一种信息处理方法及电子设备
WO2021052488A1 (zh) * 2019-09-19 2021-03-25 华为技术有限公司 一种信息处理方法及电子设备
WO2021164711A1 (zh) * 2020-02-19 2021-08-26 Oppo广东移动通信有限公司 移动设备、用于视觉增强系统的交互方法以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104808800A (zh) * 2015-05-21 2015-07-29 上海斐讯数据通信技术有限公司 智能眼镜设备、移动终端及移动终端操作方法
CN105550934A (zh) * 2015-12-03 2016-05-04 郭小虎 虚拟现实中微信软文的推送系统及方法
CN105700688A (zh) * 2016-03-17 2016-06-22 京东方科技集团股份有限公司 虚拟现实/增强现实装置
CN105900051A (zh) * 2014-01-06 2016-08-24 三星电子株式会社 电子装置以及在虚拟现实模式下的事件显示方法
CN106095235A (zh) * 2016-06-07 2016-11-09 腾讯科技(深圳)有限公司 基于虚拟现实的控制方法和装置
CN106200892A (zh) * 2014-10-30 2016-12-07 联发科技股份有限公司 虚拟现实系统、移动装置、穿戴式装置及进入事件的处理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105900051A (zh) * 2014-01-06 2016-08-24 三星电子株式会社 电子装置以及在虚拟现实模式下的事件显示方法
CN106200892A (zh) * 2014-10-30 2016-12-07 联发科技股份有限公司 虚拟现实系统、移动装置、穿戴式装置及进入事件的处理方法
CN104808800A (zh) * 2015-05-21 2015-07-29 上海斐讯数据通信技术有限公司 智能眼镜设备、移动终端及移动终端操作方法
CN105550934A (zh) * 2015-12-03 2016-05-04 郭小虎 虚拟现实中微信软文的推送系统及方法
CN105700688A (zh) * 2016-03-17 2016-06-22 京东方科技集团股份有限公司 虚拟现实/增强现实装置
CN106095235A (zh) * 2016-06-07 2016-11-09 腾讯科技(深圳)有限公司 基于虚拟现实的控制方法和装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108170506A (zh) * 2017-11-27 2018-06-15 北京硬壳科技有限公司 app的控制方法、装置以及控制系统
CN108268185A (zh) * 2017-11-27 2018-07-10 北京硬壳科技有限公司 控制方法、控制装置以及控制系统
CN108170506B (zh) * 2017-11-27 2021-09-17 北京硬壳科技有限公司 app的控制方法、装置以及控制系统
CN108170275A (zh) * 2017-12-29 2018-06-15 青岛小鸟看看科技有限公司 虚拟现实设备外接设备的输入信息的处理方法及装置
CN108170275B (zh) * 2017-12-29 2022-03-18 青岛小鸟看看科技有限公司 虚拟现实设备外接设备的输入信息的处理方法及装置
CN112527174A (zh) * 2019-09-19 2021-03-19 华为技术有限公司 一种信息处理方法及电子设备
WO2021052488A1 (zh) * 2019-09-19 2021-03-25 华为技术有限公司 一种信息处理方法及电子设备
WO2021164711A1 (zh) * 2020-02-19 2021-08-26 Oppo广东移动通信有限公司 移动设备、用于视觉增强系统的交互方法以及存储介质

Also Published As

Publication number Publication date
CN106896920B (zh) 2020-09-25

Similar Documents

Publication Publication Date Title
CN106896920A (zh) 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法
CN103577108B (zh) 视频文件传输方法及视频文件传输系统
CN108211349A (zh) 游戏中的信息处理方法、电子设备及存储介质
CN105611215A (zh) 一种视频通话方法及装置
CN106774872A (zh) 虚拟现实系统、虚拟现实交互方法及装置
CN107452119A (zh) 虚拟现实实时导览方法及系统
CN104076988B (zh) 一种显示方法、显示控制方法及电子设备
CN107071035B (zh) 移动终端远程控制方法、装置及相应的移动终端
CN107071551A (zh) 应用于智能电视系统中的多屏互动屏幕响应方法
CN111176764B (zh) 显示控制方法和终端设备
CN109254657A (zh) 交互智能设备的旋转方法和装置
CN104765550B (zh) 一种跨终端应用控制方法、用户终端及系统
KR20110035038A (ko) 휴대 단말기 및 그 동작 제어방법
CN106598277B (zh) 虚拟现实交互系统
CN110007822A (zh) 一种界面显示方法及终端设备
CN106462373A (zh) 视频通信数据的动态显示
CN108055388A (zh) 一种虚拟红包的展示方法、装置及移动终端
CN108595401A (zh) 批注同步系统、方法、装置、设备和存储介质
CN107277450A (zh) 一种利用ar实现远程指挥现场救灾的方法及设备
CN105578313B (zh) 远程控制方法,系统,远控执行方法,系统及移动终端
CN104102334B (zh) 远端装置的控制方法与远端控制系统
CN111131540B (zh) 一种名称设置方法及电子设备
CN106774833A (zh) 虚拟现实交互方法及装置
CN105955488A (zh) 一种操控终端的方法和装置
CN206805464U (zh) Vr环境与现实环境实现真实交互的触感手套

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant