CN114167986A - 包括手柄的头戴式显示设备组件和虚拟图像控制方法 - Google Patents

包括手柄的头戴式显示设备组件和虚拟图像控制方法 Download PDF

Info

Publication number
CN114167986A
CN114167986A CN202111469728.5A CN202111469728A CN114167986A CN 114167986 A CN114167986 A CN 114167986A CN 202111469728 A CN202111469728 A CN 202111469728A CN 114167986 A CN114167986 A CN 114167986A
Authority
CN
China
Prior art keywords
handle
mobile terminal
mounted display
head
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111469728.5A
Other languages
English (en)
Inventor
唐铖涛
郑振宇
曾滔
王佳辉
王文博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Companion Technology Co ltd
Original Assignee
Hangzhou Companion Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Companion Technology Co ltd filed Critical Hangzhou Companion Technology Co ltd
Priority to CN202111469728.5A priority Critical patent/CN114167986A/zh
Publication of CN114167986A publication Critical patent/CN114167986A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开的实施例公开了包括手柄的头戴式显示设备组件和虚拟图像控制方法。该包括手柄的头戴式显示设备组件包括头戴式显示设备、手柄和移动终端设备。其中，头戴式显示设备被配置成接收移动终端设备发送的虚拟图像以进行显示。手柄与移动终端设备连接。手柄上设置有按键装置。按键装置被配置成接收用户操作，以及向移动终端设备发送用于控制头戴式显示设备中显示的虚拟图像的控制信号。移动终端设备与头戴式显示设备连接，被配置成接收按键装置发送的控制信号，以及根据所接收的控制信号控制头戴式显示设备中显示的虚拟图像。该头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。

Description

包括手柄的头戴式显示设备组件和虚拟图像控制方法
技术领域
本公开的实施例涉及计算机技术领域，具体涉及包括手柄的头戴式显示设备组件和虚拟图像控制方法。
背景技术
目前，头戴式显示设备领域技术发展迅速，越来越多的用户开始使用头戴式显示设备，而现有的控制头戴式显示设备显示的虚拟图像的方式为通过单独的移动终端设备控制。
然而，当采用上述方式控制头戴式显示设备显示的虚拟图像时，经常会存在如下技术问题：用户使用单独的移动终端设备控制头戴式显示设备显示的虚拟图像时，移动终端设备上的控制键为屏幕按键，用户无法感应到是否点击到移动终端设备上显示的控制键，当需要较多控制虚拟图像的控制键时，用户无法掌握每个控制键的位置，造成用户操作不便。
发明内容
本公开的内容部分用于以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了包括手柄的头戴式显示设备组件和虚拟图像控制方法，来解决以上背景技术部分提到的技术问题。
第一方面，本公开的一些实施例提供了一种包括手柄的头戴式显示设备组件，上述头戴式显示设备组件包括：头戴式显示设备、手柄和移动终端设备，其中，上述头戴式显示设备被配置成接收上述移动终端设备发送的虚拟图像以进行显示；上述手柄与上述移动终端设备连接，上述手柄上设置有按键装置，上述按键装置被配置成接收用户操作，以及向上述移动终端设备发送用于控制上述头戴式显示设备中显示的虚拟图像的控制信号；上述移动终端设备与上述头戴式显示设备连接，被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备中显示的虚拟图像。
可选地，上述手柄设置在上述移动终端设备的一端，其中，上述移动终端设备还被配置成接收用户操作，以控制上述头戴式显示设备中显示的虚拟图像。
可选地，上述手柄与上述移动终端设备的连接方式为卡扣连接。
可选地，上述手柄与上述移动终端设备以无线连接的方式通信连接，上述移动终端设备与上述头戴式显示设备以有线连接的方式通信连接。
可选地，上述手柄包括第一手柄和第二手柄，上述第一手柄设置在上述移动终端设备的一端，上述第二手柄设置在上述移动终端设备的另一端，上述第一手柄与上述第二手柄通信连接。
可选地，上述第一手柄上设置有插槽和插头接口，上述移动终端设备上设置有插槽，上述第一手柄与上述移动终端设备设置有插槽的一端连接，在上述第一手柄与上述移动终端设备连接时，上述第一手柄上的插头接口插合在上述移动终端设备上的插槽内。
可选地，上述第一手柄和上述第二手柄与上述移动终端设备连接的方式均为卡扣连接。
可选地，上述按键装置包括第一按键装置和第二按键装置，上述第一按键装置设置在上述第一手柄上，上述第二按键装置设置在上述第二手柄上。
可选地，上述手柄的中间开设有凹槽，上述凹槽用于承载上述移动终端设备。
可选地，上述手柄上设置有插槽和插头接口，上述移动终端设备上设置有插槽，在上述手柄与上述移动终端设备连接时，上述手柄上的插头接口插合在上述移动终端设备上的插槽内。
第二方面，本公开的一些实施例提供了一种用于移动终端设备的虚拟图像控制方法，上述虚拟图像控制方法包括：响应于接收到应用启动信息，确定上述应用启动信息对应的应用是否满足外接显示条件；响应于上述应用满足上述外接显示条件，将对应上述应用的虚拟图像发送至上述头戴式显示设备以进行显示；响应于接收到设置于上述手柄上的按键装置发送的控制信号，根据上述控制信号控制上述头戴式显示设备中显示的虚拟图像。
可选地，在上述响应于接收到设置于上述手柄上的按键装置发送的控制信号，根据上述控制信号控制上述头戴式显示设备中显示的虚拟图像之前，上述方法还包括：确定上述应用是否满足屏幕按键交互条件；响应于上述应用满足上述屏幕按键交互条件，将对应上述应用的屏幕按键在上述移动终端设备的显示屏幕上显示；响应于检测到用户作用于上述屏幕按键的按键操作，根据上述按键操作控制上述头戴式显示设备中显示的虚拟图像。
本公开的上述各个实施例具有如下有益效果：通过本公开的一些实施例的头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。具体来说，造成相关的控制方式不能使用户更方便的控制头戴式显示设备显示的虚拟图像的原因在于：用户使用单独的移动终端设备控制头戴式显示设备显示的虚拟图像时，移动终端设备上的控制键为屏幕按键，用户无法感触到是否点击到移动终端设备上显示的控制键，当需要较多控制虚拟图像的控制键时，用户无法掌握每个控制键的位置，造成用户操作不便。基于此，本公开的一些实施例的头戴式显示设备组件包括头戴式显示设备、手柄和移动终端设备。其中，上述头戴式显示设备被配置成接收上述移动终端设备发送的虚拟图像以进行显示。上述手柄与上述移动终端设备连接。上述手柄上设置有按键装置。上述按键装置被配置成接收用户操作，以及向上述移动终端设备发送用于控制上述头戴式显示设备中显示的虚拟图像的控制信号。上述移动终端设备与上述头戴式显示设备连接，被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备中显示的虚拟图像。因为上述手柄上设置有按键装置，且上述按键装置为实体按键，从而可以使用户感触到是否触摸到上述按键装置。也因为上述按键装置被配置成接收用户操作，以及向上述移动终端设备发送用于控制上述头戴式显示设备中显示的虚拟图像的控制信号，且上述移动终端设备与上述头戴式显示设备连接，被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备中显示的虚拟图像，进而可以通过按压上述按键装置控制上述头戴式显示设备中显示的虚拟图像。由此，该头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。
附图说明
结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，元件和元素不一定按照比例绘制。
图1是根据本公开的包括手柄的头戴式显示设备组件的一些实施例的结构示意图；
图2是根据本公开的包括手柄的头戴式显示设备组件的另一些实施例的结构示意图；
图3是根据本公开的包括手柄的头戴式显示设备组件的又一些实施例的结构示意图；
图4是根据本公开的包括手柄的头戴式显示设备组件的再一些实施例的结构示意图；
图5是根据本公开的用于移动终端设备的虚拟图像控制方法的一些实施例的一个应用场景的示意图；
图6是根据本公开的用于移动终端设备的虚拟图像控制方法的一些实施例的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例。相反，提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1是根据本公开的头戴式显示设备组件的一些实施例的结构示意图。图1包括头戴式显示设备1、手柄2和移动终端设备3。
在一些实施例中，上述头戴式显示设备组件可以包括头戴式显示设备1、手柄2和移动终端设备3。其中，上述头戴式显示设备1被配置成接收上述移动终端设备3发送的虚拟图像以进行显示。上述头戴式显示设备1可以为头戴式显示器。例如，上述头戴式显示设备1可以为AR(Augmented Reality，增强现实)眼镜。上述头戴式显示设备1也可以为MR(Mediated Reality，介导现实)眼镜。上述移动终端设备3可以为移动终端。例如，上述移动终端设备3可以为智能手机。上述移动终端设备3也可以为平板电脑。上述显示组件可以为上述头戴式显示设备1上用于显示虚拟图像的组件，例如，上述显示组件可以为显示屏。上述虚拟图像可以为上述头戴式显示设备的显示屏中显示的三维图像。例如，上述虚拟图像可以为游戏界面或游戏对象的三维图像。
在一些实施例中，上述手柄2可以与上述移动终端设备3连接。上述手柄2上可以设置有按键装置。上述按键装置可以被配置成接收用户操作，以及向上述移动终端设备3发送用于控制上述头戴式显示设备1中显示的虚拟图像的控制信号。上述按键装置可以为设置有至少一个按键的装置。例如，上述按键装置可以为设置有至少一个按键的电路板。上述按键装置接收的用户操作可以为用户按压按键的操作。上述控制信号可以为表征对上述头戴式显示设备的显示屏中显示的虚拟图像进行更新的信号。例如，在上述虚拟图像为游戏界面的三维图像时，上述控制信号可以为使得上述虚拟图像中的游戏对象移动的信号。例如，上述控制信号可以为电信号。实践中，当用户按压按键时，上述按键装置可以通过无线连接或有线连接的方式向上述移动终端设备3发送用于控制上述头戴式显示设备1中显示的虚拟图像的控制信号。例如，在上述虚拟图像为游戏界面的三维图像时，当用户按压表征向右的按键且按压时长为10秒时，上述按键装置可以向上述移动终端设备3发送表征虚拟图像中的游戏对象需向右移动10秒的信号。需要指出的是，上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultra wideband)连接、以及其他现在已知或将来开发的无线连接方式。
在一些实施例中，上述移动终端设备3可以与上述头戴式显示设备1连接，可以被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备1中显示的虚拟图像。实践中，在上述移动终端设备3接收上述按键装置发送的控制信号后，可以根据所接收的控制信号通过无线连接或有线连接的方式控制上述头戴式显示设备1中显示的虚拟图像。例如，在上述虚拟图像为游戏界面的三维图像时，当上述控制信号表征游戏界面中的游戏对象需向右移动10秒，上述移动终端设备3可以控制上述头戴式显示设备1中显示的虚拟图像中的游戏对象向右移动10秒。上述游戏对象移动的速度可以由开发人员设定。
本公开的上述各个实施例具有如下有益效果：通过本公开的一些实施例的头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。具体来说，造成相关的控制方式不能使用户更方便的控制头戴式显示设备显示的虚拟图像的原因在于：用户使用单独的移动终端设备控制头戴式显示设备显示的虚拟图像时，用户无法看见移动终端设备上的控制键，且移动终端设备上的控制键为屏幕按键，用户无法感触到是否触摸到移动终端设备上的控制键，当需要较多控制虚拟图像的控制键时，用户无法掌握每个控制键的位置，造成用户操作不便。基于此，本公开的一些实施例的头戴式显示设备组件包括头戴式显示设备、手柄和移动终端设备。其中，上述头戴式显示设备被配置成接收上述移动终端设备发送的虚拟图像以进行显示。上述手柄与上述移动终端设备连接。上述手柄上设置有按键装置。上述按键装置被配置成接收用户操作，以及向上述移动终端设备发送用于控制上述头戴式显示设备中显示的虚拟图像的控制信号。上述移动终端设备与上述头戴式显示设备连接，被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备中显示的虚拟图像。因为上述手柄上设置有按键装置，且上述按键装置为实体按键，从而可以使用户感触到是否触摸到上述按键装置。也因为上述按键装置被配置成接收用户操作，以及向上述移动终端设备发送用于控制上述头戴式显示设备中显示的虚拟图像的控制信号，且上述移动终端设备与上述头戴式显示设备连接，被配置成接收上述按键装置发送的控制信号，以及根据所接收的控制信号控制上述头戴式显示设备中显示的虚拟图像，进而可以通过按压上述按键装置控制上述头戴式显示设备中显示的虚拟图像。由此，该头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。
图2是根据本公开的头戴式显示设备组件的另一些实施例的结构示意图。图2包括头戴式显示设备1、手柄2和移动终端设备3。
在一些实施例中，上述手柄2可以设置在上述移动终端设备3的一端。其中，上述移动终端设备3还可以被配置成接收用户操作，以控制上述头戴式显示设备1中显示的虚拟图像。实践中，在上述手柄2可以设置在上述移动终端设备3的一端时，上述移动终端设备3可以用于显示屏幕按键。上述屏幕按键可以为显示在上述移动终端设备3的屏幕上且形状为按键形状的图标。上述屏幕按键可以显示在上述移动终端设备3的屏幕中的任意位置。作为示例，如图2所示，上述屏幕按键可以显示在上述移动终端设备3的屏幕右侧。上述移动终端设备3接收的用户操作可以为接收用户触摸上述屏幕按键的操作。在上述移动终端设备3接收到用户操作后，上述移动终端设备3可以根据上述移动终端设备3接收的用户操作通过无线连接或有线连接的方式控制上述头戴式显示设备1中显示的虚拟图像。例如，在上述虚拟图像为游戏界面的三维图像时，当用户触摸上述移动终端设备3显示的表征向右的屏幕按键且触摸时长为10秒时，上述移动终端设备3可以控制上述头戴式显示设备1中显示的虚拟图像中的游戏对象向右移动10秒。当用户触摸上述手柄2上的表征向上的按键且按压时长为10秒时，上述按键装置可以向上述移动终端设备3发送表征虚拟图像中的游戏对象需向上移动10秒的信号。然后，上述移动终端设备3可以控制上述头戴式显示设备1中显示的虚拟图像中的游戏对象向上移动10秒。上述手柄2与上述移动终端设备3的连接方式可以为阻尼连接。可以理解为，上述手柄2与上述移动终端设备3的连接的一端的材料为具有弹性的材料。在上述手柄2与上述移动终端设备3连接时，上述手柄2的一端包裹吸附在上述移动终端设备3的一端。例如，上述具有弹性的材料可以为硅胶材料。由此，移动终端设备显示的屏幕按键可以弥补手柄上未设置的按键，从而可以全面地控制上述头戴式显示设备中显示的虚拟图像。
可选地，上述手柄2与上述移动终端设备3的连接方式可以为卡扣连接。例如，上述手柄2与上述移动终端设备3连接的一端可以包括弹簧夹具。在上述手柄2与上述移动终端设备3连接时，上述弹簧夹具可以夹紧上述移动终端设备3的一端。因为弹簧夹具可以伸缩，由此，通过卡扣连接的方式连接上述手柄与上述移动终端设备，上述手柄可以承载宽度不同的移动终端设备。
可选地，上述手柄2与上述移动终端设备3可以以无线连接的方式通信连接。上述移动终端设备3与上述头戴式显示设备1可以以有线连接的方式通信连接。由此，通过将上述移动终端设备与上述头戴式显示设备以有线连接的方式通信连接，可以增强上述移动终端设备与上述头戴式显示设备连接的稳定性。
从图2中可以看出，与图1对应的一些实施例的描述相比，图2对应的一些实施例中的头戴式显示设备组件中的手柄设置在上述移动终端设备的一端。此时，上述移动终端设备还可以用于显示屏幕按键。由此，移动终端设备显示的屏幕按键可以弥补手柄上未设置的按键，从而可以全面地控制上述头戴式显示设备中显示的虚拟图像。
图3是根据本公开的头戴式显示设备组件的又一些实施例的结构示意图。图3包括头戴式显示设备1、手柄2和移动终端设备3。其中，上述手柄2包括第一手柄21和第二手柄22。
在一些实施例中，上述手柄2可以包括第一手柄21和第二手柄22。上述第一手柄21可以设置在上述移动终端设备3的一端。上述第二手柄22可以设置在上述移动终端设备3的另一端。上述第一手柄21可以与上述第二手柄22通信连接。上述第一手柄21可以为设置在上述移动终端设备3的左端的手柄。上述第二手柄22可以为设置在上述移动终端设备3的右端的手柄。其中，上述第一手柄21可以通过以下方式与上述第二手柄22通信连接：上述第一手柄21和上述第二手柄22之间设置有弹簧卡扣。上述第一手柄21与上述弹簧卡扣的一端固定连接。上述第二手柄22与上述弹簧卡扣的另一端可拆卸地连接。上述弹簧卡扣与上述第二手柄22连接的一端设置有插槽。上述第二手柄22上设置有插头接口。在上述第二手柄22与上述弹簧卡扣连接时，上述第二手柄22上的插头接口插合在上述弹簧卡扣的插槽内。上述插槽可以为连接外围设备的接口。上述插头接口可以为与上述插槽连接的接口，例如，上述插槽和上述插头接口可以为USB(Universal Serial Bus，通用串行总线)接口。上述插槽和上述插头接口也可以为Lightning(闪电)接口。
可选地，上述第一手柄21上设置有插槽和插头接口，上述移动终端设备3上设置有插槽，上述第一手柄21与上述移动终端设备3设置有插槽的一端连接，在上述第一手柄21与上述移动终端设备3连接时，上述移动终端设备3上的插槽用于承载上述第一手柄21上的插头接口。实践中，在上述第一手柄21上的插头接口插合在上述移动终端设备3上的插槽内，且通过数据线连接上述第一手柄21上的插槽与上述头戴式显示设备1时，上述移动终端设备3可以通过上述数据线与上述头戴式显示设备1通信连接。在上述第一手柄21上的插头接口插合在上述移动终端设备3上的插槽内，且上述第一手柄21的插槽连接电源线时，上述电源线可以对上述移动终端设备3进行充电。此时，上述移动终端设备3与上述头戴式显示设备1可以以无线连接的方式通信连接。
可选地，上述第一手柄21和上述第二手柄22与上述移动终端设备3连接的方式均可以为卡扣连接。由此，通过卡扣连接的方式将上述第一手柄和上述第二手柄与上述移动终端设备连接，上述第一手柄和上述第二手柄可以承载宽度不同的移动终端设备。
在一些实施例中，上述按键装置可以包括第一按键装置和第二按键装置。上述第一按键装置可以设置在上述第一手柄21上。上述第二按键装置可以设置在上述第二手柄22上。上述第一按键装置可以为设置在上述第一手柄21上的按键装置。上述第二按键装置可以为设置在上述第二手柄22上的按键装置。由此，通过将手柄上的按键装置分为两部分，从而可以更方便用户在使用头戴式显示设备时找到按键的位置。
从图3中可以看出，与图1对应的一些实施例的描述相比，图3对应的一些实施例中的头戴式显示设备组件中的手柄包括第一手柄和第二手柄。由此，在按键较多时，通过将手柄分为两部分可以将手柄上的按键装置分为两部分。从而更方便用户在使用头戴式显示设备时找到按键的位置。
图4是根据本公开的头戴式显示设备组件的再一些实施例的结构示意图。图4包括头戴式显示设备1、手柄2和移动终端设备3。
在一些实施例中，上述手柄2的中间可以开设有凹槽。上述凹槽用于承载上述移动终端设备3。
在一些实施例中，上述手柄2上设置有插槽和插头接口，上述移动终端设备3上设置有插槽，在上述手柄2与上述移动终端设备3连接时，上述手柄2上的插头接口插合在上述移动终端设备3上的插槽内。实践中，在上述手柄2上的插头接口插合在上述移动终端设备3上的插槽内，且通过数据线连接上述手柄2上的插槽与上述头戴式显示设备1时，上述移动终端设备3可以通过上述数据线与上述头戴式显示设备1通信连接。在上述手柄2上的插头接口插合在上述移动终端设备3上的插槽内，且上述手柄2的插槽连接电源线时，上述电源线可以对上述移动终端设备3进行充电。此时，上述移动终端设备3与上述头戴式显示设备1可以以无线连接的方式通信连接。由此，将上述移动终端设备放置在上述手柄的凹槽内可以使上述手柄与上述移动终端设备通过上述手柄的外设接口与上述移动终端设备的外设接口通信连接。从而可以更方便地实现手柄与移动终端设备的连接。
从图4中可以看出，与图1对应的一些实施例的描述相比，图4对应的一些实施例中的头戴式显示设备组件中的手柄设置有凹槽，且移动终端设备放置在上述手柄的凹槽内。由此，将上述移动终端设备放置在上述手柄的凹槽内可以使上述手柄与上述移动终端设备通过上述手柄的外设接口与上述移动终端设备的外设接口通信连接。从而可以更方便地实现手柄与移动终端设备的连接。
继续参考图5，图5是根据本公开的一些实施例的用于移动终端设备的虚拟图像控制方法的一个应用场景的示意图。
首先，计算设备501可以响应于接收到应用启动信息502，确定上述应用启动信息502对应的应用是否满足外接显示条件。然后，上述计算设备501可以响应于上述应用满足上述外接显示条件，将对应上述应用的虚拟图像503发送至上述头戴式显示设备504以进行显示。最后，上述计算设备501可以响应于接收到设置于上述手柄上的按键装置发送的控制信号505，根据上述控制信号505控制上述头戴式显示设备504中显示的虚拟图像503。
需要说明的是，上述计算设备501可以是硬件，也可以是软件。当计算设备为硬件时，可以实现成多个服务器或终端设备组成的分布式集群，也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时，可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块，也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解，图5中的计算设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的计算设备。
继续参考图6，图6是根据本公开的用于移动终端设备的虚拟图像控制方法的一些实施例的流程600。该用于移动终端设备的虚拟图像控制方法，包括以下步骤：
步骤601，响应于接收到应用启动信息，确定应用启动信息对应的应用是否满足外接显示条件。
在一些实施例中，用于移动终端设备的虚拟图像控制方法的执行主体(例如图5所示的计算设备501)可以响应于接收到应用启动信息，确定应用启动信息对应的应用是否满足外接显示条件。其中，上述应用启动信息可以为表征启动应用的信息。例如，上述应用启动信息可以为表征用户启动应用的按键操作的信息。上述应用启动信息也可以为表征用户启动应用的口令操作的信息。上述按键操作可以为用户点击表征开启应用的按键的操作。上述口令操作可以为用户发出表征开启应用的口令的操作。例如，上述按键操作可以为用户点击表征应用的图标的操作。上述口令操作可以为用户发出“打开游戏”的口令的操作。上述外接显示条件可以为上述应用启动信息对应的应用的显示画面支持在头戴式显示设备中显示。例如，当上述应用启动信息对应的应用为三维游戏应用时，上述应用启动信息对应的应用满足外接显示条件。
步骤602，响应于应用满足外接显示条件，将对应应用的虚拟图像发送至头戴式显示设备以进行显示。
在一些实施例中，上述执行主体可以响应于应用满足外接显示条件，将对应应用的虚拟图像发送至头戴式显示设备以进行显示。其中，上述虚拟图像可以为上述头戴式显示设备显示的三维图像。实践中，上述执行主体可以响应于应用满足外接显示条件，通过有线连接或无线连接的方式将对应应用的虚拟图像发送至头戴式显示设备以进行显示。需要指出的是，上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultra wideband)连接、以及其他现在已知或将来开发的无线连接方式。由此，当应用满足外接显示条件时，对应上述应用的虚拟图像可以在头戴式显示设备上进行显示，且用户可以通过头戴式显示设备观看对应上述应用的虚拟图像。
步骤603，响应于接收到设置于手柄上的按键装置发送的控制信号，根据控制信号控制头戴式显示设备中显示的虚拟图像。
在一些实施例中，上述执行主体可以响应于接收到设置于手柄上的按键装置发送的控制信号，根据控制信号控制头戴式显示设备中显示的虚拟图像。其中，上述控制信号可以为表征对上述头戴式显示设备的显示屏中显示的虚拟图像进行更新的信号。实践中，上述执行主体可以响应于到设置于手柄上的按键装置发送的控制信号，根据上述控制信号通过无线连接或有线连接的方式控制上述头戴式显示设备中显示的虚拟图像。例如，在上述虚拟图像为游戏界面的三维图像且上述控制信号表征游戏界面中的游戏对象需向左移动5秒时，上述移动终端设备可以控制上述头戴式显示设备中显示的虚拟图像中的游戏对象向左移动5秒。上述游戏对象移动的速度可以由开发人员设定。由此，通过手柄可以使用户更方便地控制头戴式显示设备显示的虚拟图像。
可选地，在响应于接收到设置于手柄上的按键装置发送的控制信号，根据控制信号控制头戴式显示设备中显示的虚拟图像之前，首先，上述执行主体可以确定应用是否满足屏幕按键交互条件。
实践中，上述执行主体可以确定应用是否满足屏幕按键交互条件。其中，上述屏幕按键交互条件可以为上述应用支持通过移动终端设备上显示的屏幕按键控制。上述屏幕按键可以为显示在上述移动终端设备的显示屏上的且形状为按键形状的图标。
然后，可以响应于应用满足屏幕按键交互条件，将对应应用的屏幕按键在移动终端设备的显示屏幕上显示。
实践中，上述执行主体可以响应于应用满足屏幕按键交互条件，将对应应用的屏幕按键在移动终端设备的显示屏幕上显示。由此，当应用满足屏幕按键交互条件时，对应应用的屏幕按键可以在移动终端设备的显示屏幕上显示，且用户可以对上述移动终端设备上显示的屏幕按键进行操作。
最后，可以响应于检测到用户作用于屏幕按键的按键操作，根据按键操作控制头戴式显示设备中显示的虚拟图像。
实践中，上述执行主体可以响应于检测到用户作用于屏幕按键的按键操作，根据按键操作控制头戴式显示设备中显示的虚拟图像。其中，上述按键操作可以为点击上述屏幕按键的操作。实践中，上述执行主体可以响应于检测到用户作用于屏幕按键的按键操作，根据按键操作通过无线连接或有线连接的方式控制头戴式显示设备中显示的虚拟图像。例如，在上述虚拟图像为游戏界面的三维图像且用户触摸上述移动终端设备显示的表征向左的屏幕按键且触摸时长为5秒时，上述移动终端设备可以控制上述头戴式显示设备中显示的虚拟图像中的游戏对象向左移动5秒。由此，上述移动终端设备显示的屏幕按键可以弥补手柄上未设置的按键，从而可以全面地控制上述头戴式显示设备中显示的虚拟图像。
本公开的上述各个实施例具有如下有益效果：通过本公开的一些实施例的用于移动终端设备的虚拟图像控制方法可以使用户更方便地控制头戴式显示设备显示的虚拟图像。具体来说，造成相关的控制方式不能使用户更方便的控制头戴式显示设备显示的虚拟图像的原因在于：用户使用单独的移动终端设备控制头戴式显示设备显示的虚拟图像时，移动终端设备上的控制键为屏幕按键，用户无法感触到是否点击到移动终端设备上显示的控制键，当需要较多控制虚拟图像的控制键时，用户无法掌握每个控制键的位置，造成用户操作不便。基于此，本公开的一些实施例的用于移动终端设备的虚拟图像控制方法，首先，响应于接收到应用启动信息，确定上述应用启动信息对应的应用是否满足外接显示条件。然后，响应于上述应用满足上述外接显示条件，将对应上述应用的虚拟图像发送至上述头戴式显示设备以进行显示。最后，响应于接收到设置于上述手柄上的按键装置发送的控制信号，根据上述控制信号控制上述头戴式显示设备中显示的虚拟图像。因为上述移动终端设备可以响应于上述应用满足上述外接显示条件，将对应上述应用的虚拟图像发送至上述头戴式显示设备以进行显示，从而可以使用户通过头戴式显示设备观看对应上述应用的虚拟图像。也因为上述移动终端设备可以响应于接收到设置于上述手柄上的按键装置发送的控制信号，根据上述控制信号控制上述头戴式显示设备中显示的虚拟图像，且上述手柄上的按键为实体按键，进而可以使用户感触到是否触摸到手柄上的按键。由此，该头戴式显示设备组件可以使用户更方便地控制头戴式显示设备显示的虚拟图像。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开的实施例中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (12)

1.一种包括手柄的头戴式显示设备组件，包括头戴式显示设备、手柄和移动终端设备，其中，
所述头戴式显示设备被配置成接收所述移动终端设备发送的虚拟图像以进行显示；
所述手柄与所述移动终端设备连接，所述手柄上设置有按键装置，所述按键装置被配置成接收用户操作，以及向所述移动终端设备发送用于控制所述头戴式显示设备中显示的虚拟图像的控制信号；
所述移动终端设备与所述头戴式显示设备连接，被配置成接收所述按键装置发送的控制信号，以及根据所接收的控制信号控制所述头戴式显示设备中显示的虚拟图像。
2.根据权利要求1所述的头戴式显示设备组件，其中，所述手柄设置在所述移动终端设备的一端，其中，所述移动终端设备还被配置成接收用户操作，以控制所述头戴式显示设备中显示的虚拟图像。
3.根据权利要求2所述的头戴式显示设备组件，其中，所述手柄与所述移动终端设备的连接方式为卡扣连接。
4.根据权利要求2所述的头戴式显示设备组件，其中，所述手柄与所述移动终端设备以无线连接的方式通信连接，所述移动终端设备与所述头戴式显示设备以有线连接的方式通信连接。
5.根据权利要求1所述的头戴式显示设备组件，其中，所述手柄包括第一手柄和第二手柄，所述第一手柄设置在所述移动终端设备的一端，所述第二手柄设置在所述移动终端设备的另一端，所述第一手柄与所述第二手柄通信连接。
6.根据权利要求5所述的头戴式显示设备组件，其中，所述第一手柄上设置有插槽和插头接口，所述移动终端设备上设置有插槽，所述第一手柄与所述移动终端设备设置有插槽的一端连接，在所述第一手柄与所述移动终端设备连接时，所述第一手柄上的插头接口插合在所述移动终端设备上的插槽内。
7.根据权利要求5所述的头戴式显示设备组件，其中，所述第一手柄和所述第二手柄与所述移动终端设备连接的方式均为卡扣连接。
8.根据权利要求5所述的头戴式显示设备组件，其中，所述按键装置包括第一按键装置和第二按键装置，所述第一按键装置设置在所述第一手柄上，所述第二按键装置设置在所述第二手柄上。
9.根据权利要求1所述的头戴式显示设备组件，其中，所述手柄的中间开设有凹槽，所述凹槽用于承载所述移动终端设备。
10.根据权利要求9所述的头戴式显示设备组件，其中，所述手柄上设置有插槽和插头接口，所述移动终端设备上设置有插槽，在所述手柄与所述移动终端设备连接时，所述手柄上的插头接口插合在所述移动终端设备上的插槽内。
11.一种虚拟图像控制方法，用于权利要求1-10之一所述的移动终端设备，包括：
响应于接收到应用启动信息，确定所述应用启动信息对应的应用是否满足外接显示条件；
响应于所述应用满足所述外接显示条件，将对应所述应用的虚拟图像发送至所述头戴式显示设备以进行显示；
响应于接收到设置于所述手柄上的按键装置发送的控制信号，根据所述控制信号控制所述头戴式显示设备中显示的虚拟图像。
12.根据权利要求11所述的方法，其中，在所述响应于接收到设置于所述手柄上的按键装置发送的控制信号，根据所述控制信号控制所述头戴式显示设备中显示的虚拟图像之前，所述方法还包括：
确定所述应用是否满足屏幕按键交互条件；
响应于所述应用满足所述屏幕按键交互条件，将对应所述应用的屏幕按键在所述移动终端设备的显示屏幕上显示；
响应于检测到用户作用于所述屏幕按键的按键操作，根据所述按键操作控制所述头戴式显示设备中显示的虚拟图像。
CN202111469728.5A 2021-12-03 2021-12-03 包括手柄的头戴式显示设备组件和虚拟图像控制方法 Pending CN114167986A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111469728.5A CN114167986A (zh) 2021-12-03 2021-12-03 包括手柄的头戴式显示设备组件和虚拟图像控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111469728.5A CN114167986A (zh) 2021-12-03 2021-12-03 包括手柄的头戴式显示设备组件和虚拟图像控制方法

Publications (1)

Publication Number Publication Date
CN114167986A true CN114167986A (zh) 2022-03-11

Family

ID=80482928

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111469728.5A Pending CN114167986A (zh) 2021-12-03 2021-12-03 包括手柄的头戴式显示设备组件和虚拟图像控制方法

Country Status (1)

Country Link
CN (1) CN114167986A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150182856A1 (en) * 2013-12-31 2015-07-02 Microsoft Corporation Touch screen game controller
CN207654683U (zh) * 2017-12-20 2018-07-27 深圳市美图工业抄数设计有限公司 一种蓝牙连接无线游戏手柄
CN110347305A (zh) * 2019-05-30 2019-10-18 华为技术有限公司 一种vr多屏显示方法及电子设备
WO2020140905A1 (zh) * 2019-01-03 2020-07-09 广东虚拟现实科技有限公司 虚拟内容交互系统及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150182856A1 (en) * 2013-12-31 2015-07-02 Microsoft Corporation Touch screen game controller
CN207654683U (zh) * 2017-12-20 2018-07-27 深圳市美图工业抄数设计有限公司 一种蓝牙连接无线游戏手柄
WO2020140905A1 (zh) * 2019-01-03 2020-07-09 广东虚拟现实科技有限公司 虚拟内容交互系统及方法
CN110347305A (zh) * 2019-05-30 2019-10-18 华为技术有限公司 一种vr多屏显示方法及电子设备

Similar Documents

Publication Publication Date Title
EP2671148B1 (en) Apparatus, systems and methods for presenting displayed image information of a mobile media device on a large display and control of the mobile media device therefrom
CN107329717B (zh) 一种屏幕显示信息的处理方法、显示方法和显示系统
CN104049887A (zh) 数据传输方法及其电子装置及其手写数据的输入装置
US20140013257A1 (en) Method and Terminal Device for File Processing Based on User Interface
CN110069423A (zh) 具有多主机切换的输入方法
CN103973889A (zh) 将智能手持设备作为无线usbhid设备的装置及方法
CN105518634B (zh) 与外部终端交互的方法、装置和记录介质
CN108595220A (zh) 应用组件的处理方法、设备及计算机可读存储介质
CN113396378A (zh) 针对用于二维和三维环境的多用途输入装置的系统和方法
CN111078104A (zh) 一种云桌面上的多点触控设备的重定向方法及计算机设备
CN110018978B (zh) 数据传输方法及系统
CN207473575U (zh) 触感信号处理系统
Lai et al. A RF4CE-based remote controller with interactive graphical user interface applied to home automation system
CN114167986A (zh) 包括手柄的头戴式显示设备组件和虚拟图像控制方法
CN109976605B (zh) 班牌内容显示方法、装置及存储介质
CN216561746U (zh) 头戴式显示设备组件
WO2019203591A1 (en) High efficiency input apparatus and method for virtual reality and augmented reality
EP2990929A1 (en) Electronic device and method for setting block
CN105900075A (zh) 程序、信息处理装置和图像处理系统
US9778776B2 (en) Method and system for processing data
CN210270819U (zh) 手写投影装置
EP4270203A1 (en) Determining device state using a state-detection circuit
CN105207916B (zh) 一种路由装置及关联经该路由装置连接的设备的方法
KR20160093877A (ko) 가상 클라이언트와 클라우드 스트리밍 서버, 그를 포함하는 클라우드 스트리밍 서버 테스트 시스템, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN110677704B (zh) 无线音视频传输装置、方法及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination