CN106201724A - 一种虚拟现实vr设备及其用户界面ui事件的处理方法 - Google Patents

一种虚拟现实vr设备及其用户界面ui事件的处理方法 Download PDF

Info

Publication number
CN106201724A
CN106201724A CN201610556128.5A CN201610556128A CN106201724A CN 106201724 A CN106201724 A CN 106201724A CN 201610556128 A CN201610556128 A CN 201610556128A CN 106201724 A CN106201724 A CN 106201724A
Authority
CN
China
Prior art keywords
event
equipment
main thread
sub
line journey
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610556128.5A
Other languages
English (en)
Inventor
郑金光
王子涵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Original Assignee
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Leshi Zhixin Electronic Technology Tianjin Co Ltd, LeTV Holding Beijing Co Ltd filed Critical Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority to CN201610556128.5A priority Critical patent/CN106201724A/zh
Publication of CN106201724A publication Critical patent/CN106201724A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种虚拟现实VR设备及其UI事件的处理方法,解决了现有VR设备中如何处理用户触发的UI事件,目前还没有解决方案的问题。方法包括:VR设备在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;所述VR设备通过所述VR应用中的VR子线程处理所述UI事件。由于在VR应用中定义了VR主线程,以使VR应用启动后,VR设备可以通过所述VR主线程直接接收用户触发的UI事件;由于在VR应用中定义了VR子线程,以使VR设备在通过所述VR主线程接收到UI事件后,可以通过所述VR子线程处理该UI事件,从而实现了在VR设备中处理UI事件。

Description

一种虚拟现实VR设备及其用户界面UI事件的处理方法
技术领域
本发明涉及视频技术领域,特别涉及一种虚拟现实VR设备及其用户界面(UserInterface,简称UI)事件的处理方法。
背景技术
虚拟现实(Virtual Reality,简称VR)技术是仿真技术的一个重要方向,是仿真技术与计算机图形学人机接口技术、多媒体技术、传感技术、网络技术等多种技术的集合,是一门富有挑战性的交叉技术前沿学科和研究领域。虚拟现实技术主要包括模拟环境、感知、自然技能和传感设备等方面。
随着虚拟现实技术的不断发展,虚拟现实头戴显示器设备得到了极大的应用,虚拟现实头戴显示器设备简称VR设备或VR头显或VR眼镜,利用VR设备将用户对外界的视觉封闭,引导用户产生一种身在虚拟环境中的感觉,能够提供给用户立体真实的视觉效果。
目前,VR设备可分为三类:外接式头戴设备、一体式头戴设备、以及移动端头显设备。其中,外接式头戴设备具备独立屏幕,产品结构复杂;一体式头戴设备,也叫VR一体机,无需借助任何输入输出设备就可以呈现虚拟现实的视觉效果;移动端头显设备,需要借助外接设备(如手机),将外接设备中的虚拟现实的视觉效果呈现给用户,结构简单。
VR设备中如何处理用户触发的UI事件,目前还没有解决方案。
发明内容
本发明实施例提供了一种虚拟现实VR设备及其UI事件的处理方法,解决了现有VR设备中如何处理用户触发的UI事件,目前还没有解决方案的问题。
针对现有技术存在的问题,本发明实施例提供了一种虚拟现实VR设备中UI事件的处理方法,包括:
VR设备在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;
所述VR设备通过所述VR应用中的VR子线程处理所述UI事件。
针对现有技术存在的问题,本发明实施例提供了一种计算机可读存储介质,其中存储有可执行的程序代码,该程序代码用以实现上述的方法。
针对现有技术存在的问题,本发明实施例提供了虚拟现实VR设备,所述设备包括:
第一处理模块,用于在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;
第二处理模块,用于通过所述VR应用中的VR子线程处理所述UI事件。
本发明实施例提供一种虚拟现实VR设备及其UI事件的处理方法中,由于在VR应用中定义了VR主线程,以使VR应用启动后,VR设备可以通过所述VR主线程直接接收用户触发的UI事件;由于在VR应用中定义了VR子线程,以使VR设备在通过所述VR主线程接收到UI事件后,可以通过所述VR子线程处理该UI事件,从而实现了在VR设备中处理UI事件。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种虚拟现实VR设备中UI事件的处理方法的流程示意图;
图2为本发明实施例提供的一种虚拟现实VR设备的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
下面结合说明书附图对本发明实施例作进一步详细描述。应当理解,此处所描述的实施例仅用于说明和解释本发明,并不用于限定本发明。
图1所示的实施例中,提供了一种虚拟现实VR设备中用户界面UI事件的处理方法该方法包括:
步骤11、VR设备在VR应用启动后,通过所述VR应用的VR主线程接收UI事件。
其中,所述UI事件包括但不限于以下事件中的至少一种:
按键事件(KeyEvent)、触摸事件(MotionEvent)。
举例说明,用户可以通过按动VR设备提供的按键,触发UI事件;还可以通过触摸VR设备提供的触控区域,触发UI事件。
步骤12、所述VR设备通过所述VR应用中的VR子线程处理所述UI事件。
本发明实施例中,由于在VR应用中定义了VR主线程,以使VR应用启动后,VR设备可以通过所述VR主线程直接接收用户触发的UI事件;由于在VR应用中定义了VR子线程,以使VR设备在通过所述VR主线程接收到UI事件后,可以通过所述VR子线程处理该UI事件,从而实现了在VR设备中处理UI事件。
本发明实施例中,VR应用中定义一个VR主线程。
本发明实施例中,VR应用中定义至少一个VR子线程,用于处理VR应用运行过程中生成的不同UI事件。例如,对于VR应用中的界面显示,由用于负责显示的VR子线程来处于界面显示过程中生成的UI事件。又如,对于VR应用中的视频播放,则由用于负责视频播放的VR子线程来处于视频播放过程中生成的UI事件。
基于上述任一实施例,一种可能的实施方式中,S11中所述VR设备通过所述VR应用的VR主线程接收UI事件之后,所述方法还包括:
所述VR设备将所述UI事件,缓存在所述VR主线程中;
所述VR设备通过所述VR主线程,将所述UI事件透传给所述VR子线程,其中,所述UI事件按照先入先出(First Input First Output)的方式透传。
该方式中,所述VR设备通过所述VR主线程,将所述UI事件透传给所述VR子线程。相应的,所述VR子线程在接收到所述VR设备通过所述VR主线程发送的UI事件后,对所述UI事件进行相应的处理。其中,所述VR主线程不对接收到的UI事件进行解析或处理,只需缓存接收到的UI事件并按照先入先出的方式透传给VR子线程。
其中,先入先出的方式是指先缓存到所述VR主线程中的UI事件,先透传给所述VR子线程。
举例说明,在VR应用启动后,VR设备将通过所述VR应用的VR主线程接收到的第一个事件(记为事件1)缓存至所述VR主线程的队列中的第一个位置,将通过所述VR应用的VR主线程接收到的第二个事件(记为事件2)缓存至所述VR主线程的队列中的第二个位置,依此类推。所述VR设备通过所述VR主线程先将事件1透传给所述VR应用的VR子线程,此时,事件2移至所述队列中的第一个位置,事件3移至所述队列中的第二个位置,依此类推;再将事件2透传给所述VR应用的VR子线程,此时,事件3移至所述队列中的第一个位置,事件4移至所述队列中的第二个位置,依此类推。
需要说明的是,在所述VR主线程中缓存UI事件和通过所述VR主线程透传已缓存的UI事件是并行进行的。
该方式中,若所述VR应用中包括至少两个VR子线程,所述VR设备通过所述VR主线程,将所述UI事件透传给所述VR子线程时,可以采用以下方式实现:
方式1、所述VR设备从所述至少两个VR子线程中,确定能够处理所述UI事件的VR子线程;以及所述VR设备通过所述VR主线程,将所述UI事件透传给所确定的VR子线程。
方式1中在通过所述VR主线程透传UI事件之前,所述VR设备先确定能够处理该UI事件的VR子线程,通过所述VR主线程将该UI事件仅透传给能够处理该UI事件的VR子线程,降低了VR主线程与VR子线程之间的信令开销。
基于上述实施例,一种可能的实施方式中,S11中所述VR设备通过所述VR应用的VR主线程接收UI事件之后,所述方法还包括:
所述VR设备将所述UI事件,缓存在所述VR主线程中;
所述VR设备通过所述VR子线程,按照先入先出的方式,读取所述VR主线程缓存的UI事件。
该方式中,所述VR设备在所述VR主线程的队列中缓存UI事件,由所述VR子线程从所述VR主线程的队列中按照先入先出的方式,读取UI事件,并进行相应的处理。
该方式中,所述VR子线程每读取一个UI事件,先判断是否需要处理该UI事件;若是,则处理该UI事件;若否,则忽略该UI事件。
该方式中,可选的,若VR子线程的数量为多个,则所述VR设备通过当前运行的VR子线程,按照先入先出的方式,读取所述VR主线程缓存的UI事件。
本发明实施例中涉及的VR设备可以为外接式头戴设备、一体式头戴设备、或者移动端头显设备。本发明实施例不对VR设备的具体结构进行限定。
上述方法处理流程可以用软件程序实现,该软件程序可以存储在存储介质中,当存储的软件程序被调用时,执行上述方法步骤。
基于同一发明构思,图2所示的实施例中,提供了一种虚拟现实VR设备,由于该设备解决问题的原理与图1所示的方法实施例相似,因此该设备的实施可以参见方法的实施,重复之处不再赘述。图2所示的VR设备,包括:
第一处理模块21,用于在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;
第二处理模块22,用于通过所述VR应用中的VR子线程处理所述UI事件。
一种可能的实施方式中,所述第一处理模块还用于:
将所述UI事件,缓存在所述VR主线程中;
通过所述VR主线程,将所述UI事件透传给所述VR子线程,其中,所述UI事件按照先入先出的方式透传。
一种可能的实施方式中,若所述VR应用中包括至少两个VR子线程,所述第一处理模块具体用于:
从所述至少两个VR子线程中,确定能够处理所述UI事件的VR子线程;以及所述VR设备通过所述VR主线程,将所述UI事件透传给所确定的VR子线程。
一种可能的实施方式中,所述第一处理模块还用于:
将所述UI事件,缓存在所述VR主线程中;
通过所述VR子线程,按照先入先出的方式,读取所述VR主线程缓存的UI事件。
一种可能的实施方式中,所述UI事件包括按键事件和/或触摸事件
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
以上所描述的装置实施例中,第一处理模块21和第二处理模块22是以功能模块的形式来呈现。这里的“模块”可以指特定应用集成电路(application-specific integratedcircuit,ASIC),电路,执行一个或多个软件或固件程序的处理器和存储器,集成逻辑电路,和/或其他可以提供上述功能的器件。在一个简单的实施例中,本领域的技术人员可以想到第一处理模块21可以通过具有计算和逻辑处理功能的处理器、存储器和输入/输出接口来实现,第二处理模块22可以通过具有计算和逻辑处理功能的处理器、存储器和输入/输出接口来实现。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种虚拟现实VR设备中用户界面UI事件的处理方法,其特征在于,所述方法包括:
VR设备在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;
所述VR设备通过所述VR应用中的VR子线程处理所述UI事件。
2.根据权利要求1所述的方法,其特征在于,所述VR设备通过所述VR应用的VR主线程接收UI事件之后,所述方法还包括:
所述VR设备将所述UI事件,缓存在所述VR主线程中;
所述VR设备通过所述VR主线程,将所述UI事件透传给所述VR子线程,其中,所述UI事件按照先入先出的方式透传。
3.根据权利要求2所述的方法,其特征在于,若所述VR应用中包括至少两个VR子线程,所述VR设备通过所述VR主线程,确定能够处理所述UI事件的VR子线程,将所述UI事件透传给所确定的VR子线程。
4.根据权利要求1所述的方法,其特征在于,所述VR设备通过所述VR应用的VR主线程接收UI事件之后,所述方法还包括:
所述VR设备将所述UI事件,缓存在所述VR主线程中;
所述VR设备通过所述VR子线程,按照先入先出的方式,读取所述VR主线程缓存的UI事件。
5.根据权利要求1~4任一项所述的方法,其特征在于,所述UI事件包括按键事件和/或触摸事件。
6.一种虚拟现实VR设备,其特征在于,所述设备包括:
第一处理模块,用于在VR应用启动后,通过所述VR应用的VR主线程接收UI事件;
第二处理模块,用于通过所述VR应用中的VR子线程处理所述UI事件。
7.根据权利要求6所述的设备,其特征在于,所述第一处理模块还用于:
将所述UI事件,缓存在所述VR主线程中;
通过所述VR主线程,将所述UI事件透传给所述VR子线程,其中,所述UI事件按照先入先出的方式透传。
8.根据权利要求7所述的设备,其特征在于,若所述VR应用中包括至少两个VR子线程,所述第一处理模块具体用于:
通过所述VR主线程,从所述至少两个VR子线程中,确定能够处理所述UI事件的VR子线程;以及所述VR设备通过所述VR主线程,将所述UI事件透传给所确定的VR子线程。
9.根据权利要求6所述的设备,其特征在于,所述第一处理模块还用于:
将所述UI事件,缓存在所述VR主线程中;
通过所述VR子线程,按照先入先出的方式,读取所述VR主线程缓存的UI事件。
10.根据权利要求6~9任一项所述的设备,其特征在于,所述UI事件包括按键事件和/或触摸事件。
CN201610556128.5A 2016-07-14 2016-07-14 一种虚拟现实vr设备及其用户界面ui事件的处理方法 Pending CN106201724A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610556128.5A CN106201724A (zh) 2016-07-14 2016-07-14 一种虚拟现实vr设备及其用户界面ui事件的处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610556128.5A CN106201724A (zh) 2016-07-14 2016-07-14 一种虚拟现实vr设备及其用户界面ui事件的处理方法

Publications (1)

Publication Number Publication Date
CN106201724A true CN106201724A (zh) 2016-12-07

Family

ID=57474295

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610556128.5A Pending CN106201724A (zh) 2016-07-14 2016-07-14 一种虚拟现实vr设备及其用户界面ui事件的处理方法

Country Status (1)

Country Link
CN (1) CN106201724A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102999386A (zh) * 2012-11-08 2013-03-27 山东大学 一种通过在单进程中实现多消息队列机制提升性能的方法
CN103593231A (zh) * 2012-08-14 2014-02-19 腾讯科技(深圳)有限公司 一种数据处理方法、装置及移动终端
CN204203554U (zh) * 2014-11-05 2015-03-11 昆山优力电能运动科技有限公司 头戴式显示设备
CN104834544A (zh) * 2015-05-04 2015-08-12 广州杰赛科技股份有限公司 数据加载方法及装置
CN105447898A (zh) * 2015-12-31 2016-03-30 北京小鸟看看科技有限公司 一种虚拟现实设备中显示2d应用界面的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593231A (zh) * 2012-08-14 2014-02-19 腾讯科技(深圳)有限公司 一种数据处理方法、装置及移动终端
CN102999386A (zh) * 2012-11-08 2013-03-27 山东大学 一种通过在单进程中实现多消息队列机制提升性能的方法
CN204203554U (zh) * 2014-11-05 2015-03-11 昆山优力电能运动科技有限公司 头戴式显示设备
CN104834544A (zh) * 2015-05-04 2015-08-12 广州杰赛科技股份有限公司 数据加载方法及装置
CN105447898A (zh) * 2015-12-31 2016-03-30 北京小鸟看看科技有限公司 一种虚拟现实设备中显示2d应用界面的方法和装置

Similar Documents

Publication Publication Date Title
KR101947140B1 (ko) 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US20220335697A1 (en) Systems, Methods, and Graphical User Interfaces for Adding Effects in Augmented Reality Environments
CN109144382A (zh) 基于双系统的笔迹显示方法、装置、终端设备及存储介质
EP2637084A2 (en) Touch screen folder control
US20180108334A1 (en) Methods and apparatus to use predicted actions in virtual reality environments
US20230306694A1 (en) Ranking list information display method and apparatus, and electronic device and storage medium
CN106131539A (zh) 一种虚拟现实vr设备及其视频播放方法
EP4351149A1 (en) Display control method and apparatus, and device and storage medium
JP2023550334A (ja) ライブ配信画面の表示方法及び機器
CN113359995B (zh) 人机交互方法、装置、设备以及存储介质
CN113728301A (zh) 用于在2d屏幕上操纵3d对象的设备、方法和图形用户界面
US10705621B1 (en) Using a three-dimensional sensor panel in determining a direction of a gesture cycle
CN113220118B (zh) 虚拟界面展示方法、头戴式显示设备和计算机可读介质
WO2019056902A1 (zh) 分享信息的处理方法、设备及计算机可读存储介质
CN107341015A (zh) 终端间数据同步方法、装置、终端及存储介质
CN115185408A (zh) 一种车载娱乐信息显示方法、装置、设备和介质
CN105159540A (zh) 一种屏幕状态的控制方法及终端
CN114237482A (zh) 书写笔迹显示处理方法、装置、系统、设备和存储介质
CN106201724A (zh) 一种虚拟现实vr设备及其用户界面ui事件的处理方法
CN110377253B (zh) 一种多媒体资源共享方法、装置、系统、设备及介质
US20230298267A1 (en) Event routing in 3d graphical environments
EP3455697A1 (en) Methods and apparatus to use predicted actions in virtual reality environments
CN107479692B (zh) 虚拟现实场景的控制方法、设备及虚拟现实设备
US20230083831A1 (en) Method and apparatus for adjusting virtual face model, electronic device and storage medium
CN110908568A (zh) 一种虚拟对象的控制方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161207