CN109460149B - 系统管理工具、显示方法、vr设备和计算机可读介质 - Google Patents

系统管理工具、显示方法、vr设备和计算机可读介质 Download PDF

Info

Publication number
CN109460149B
CN109460149B CN201811288583.7A CN201811288583A CN109460149B CN 109460149 B CN109460149 B CN 109460149B CN 201811288583 A CN201811288583 A CN 201811288583A CN 109460149 B CN109460149 B CN 109460149B
Authority
CN
China
Prior art keywords
display
menu
global menu
global
body state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811288583.7A
Other languages
English (en)
Other versions
CN109460149A (zh
Inventor
戴俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201811288583.7A priority Critical patent/CN109460149B/zh
Publication of CN109460149A publication Critical patent/CN109460149A/zh
Application granted granted Critical
Publication of CN109460149B publication Critical patent/CN109460149B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供了一种系统管理工具,包括接收部件、控制部件和显示部件,其中,所述接收部件设置为接收响应于用户的第一体态操作而发出的第一指令,所述控制部件设置为响应于所述接收部件接收到所述第一指令向所述显示部件发出执行第一显示操作的指令,并且所述显示部件设置为响应于接收到所述控制部件发出的执行所述第一显示操作的指令显示所述系统管理工具的操作界面。本公开还提供了一种虚拟现实设备的全局菜单的显示方法、一种虚拟现实设备和一种计算机可读介质。

Description

系统管理工具、显示方法、VR设备和计算机可读介质
技术领域
本公开涉及计算机技术领域,具体地,涉及系统管理工具、虚拟现实设备的全局菜单的显示方法、显示全局菜单的虚拟现实设备和计算机可读介质。
背景技术
虚拟现实(Virtual Reality,VR)设备能够为使用者提供一种虚拟的三维(3D)场景。VR应用程序可以直接运行在VR设备上,或者VR应用程序可以运行在诸如智能手机或个人计算机的用户终端上,并且由用户终端将显示画面传输至VR头戴式显示设备(HeadMounted Display,HMD)。能够直接运行VR应用程序的VR设备被称作VR一体机。
在智能设备的操作方式中,需要使用到对系统全局操作。例如,在安卓(Android)设备中提供了一种全局菜单,通过用户在触摸显示屏幕上的手势操作(例如,手指从上至下的滑动操作),可以调用全局菜单,并且用户可以通过全局菜单提供的控件对整个系统进行设置,例如,无线保真(WiFi)模块的开启或关闭、蓝牙模块的开启或关闭、亮度调节、音量调节等。但是在现有的VR设备所提供的VR操作环境中,没有为用户提供这种能够通过手势操作调用的全局菜单。
发明内容
本公开提供了一种系统管理工具、一种虚拟现实设备的全局菜单的显示方法、一种显示全局菜单的虚拟现实设备和一种计算机可读介质。
根据本公开的一个方面,提供了一种系统管理工具,包括接收部件、控制部件和显示部件,其中,所述接收部件设置为接收响应于用户的第一体态操作而发出的第一指令,所述控制部件设置为响应于所述接收部件接收到所述第一指令向所述显示部件发出执行第一显示操作的指令,并且所述显示部件设置为响应于接收到所述控制部件发出的执行所述第一显示操作的指令显示所述系统管理工具的操作界面。
在一些实施例中,所述接收部件还可以设置为接收响应于用户的第二体态操作而发出的第二指令,所述控制部件还可以设置为响应于所述接收部件接收到所述第二指令向所述显示部件发出执行第二显示操作的指令,并且所述显示部件还可以设置为响应于接收到所述控制部件发出的执行所述第二显示操作的指令隐藏所述系统管理工具的操作界面。
在一些实施例中,所述接收部件还可以设置为接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令,并且所述控制部件还可以设置为响应于所述接收部件接收到所述设置指令检测用户的体态操作,并且根据所述设置指令将检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述接收部件还可以设置为接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令,所述控制部件还可以设置为响应于所述接收部件接收到所述设置指令向所述显示部件发出执行第三显示操作的指令,所述显示部件还可以设置为响应于接收到所述控制部件发出的执行所述第三显示操作的指令以静态图或动态图的方式显示预置的各个体态操作,所述接收部件还可以设置为接收对于所展示的体态操作的选择,并且所述控制部件还可以设置为根据所述接收部件接收到的对于所展示的体态操作的选择和所述设置指令,将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述第一体态操作可以包括下列至少之一:用户头部上扬的角度大于或等于第一角度阈值;用户头部摆动的角度大于或等于第二角度阈值;以及用户闭眼再睁眼的时间间隔大于或等于时间阈值。
根据本公开的另一个方面,提供了一种虚拟现实设备的全局菜单的显示方法,包括:检测佩戴所述虚拟现实设备的用户的体态操作;以及响应于检测到的体态操作与用于调用所述全局菜单的第一体态操作一致,在当前所显示的内容上以叠加的方式显示所述全局菜单。
在一些实施例中,所述全局菜单的显示方法还可以包括:在显示了所述全局菜单的情况下,检测佩戴所述虚拟现实设备的用户的体态操作;以及响应于检测到的体态操作与用于隐藏所述全局菜单的第二体态操作一致,取消所述全局菜单的显示。
在一些实施例中,所述全局菜单的显示方法还可以包括:接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令;响应于接收到所述设置指令,检测佩戴所述虚拟现实设备的用户的体态操作;以及根据所述设置指令将检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述全局菜单的显示方法还可以包括:接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令;响应于接收到所述设置指令,以静态图或动态图的方式向佩戴所述虚拟现实设备的用户展示预置的各个体态操作;接收对于所展示的体态操作的选择;以及根据所述设置指令将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述全局菜单可以通过应用程序的方式实现,并且在所述虚拟现实设备启动时可以自动在后台运行所述应用程序。
在一些实施例中,可以以二维平面的方式或三维立体的方式在当前所显示的内容上叠加地显示所述全局菜单。
在一些实施例中,所述第一体态操作可以包括下列至少之一:用户头部上扬的角度大于或等于第一角度阈值;用户头部摆动的角度大于或等于第二角度阈值;以及用户闭眼再睁眼的时间间隔大于或等于时间阈值。
根据本公开的另一个方面,提供了一种虚拟现实设备,包括显示器和传感器,其中,所述传感器检测佩戴所述虚拟现实设备的用户的体态操作,并且响应于所述传感器检测到的体态操作与用于调用全局菜单的第一体态操作一致,所述显示器在当前所显示的内容上以叠加的方式显示所述全局菜单。
在一些实施例中,在所述显示器显示所述全局菜单的情况下,所述传感器可以检测佩戴所述虚拟现实设备的用户的体态操作,并且响应于所述传感器检测到的体态操作与用于隐藏所述全局菜单的第二体态操作一致,所述显示器可以取消所述全局菜单的显示。
在一些实施例中,所述虚拟现实设备还可以包括处理器,其中,响应于所述处理器接收到指示用于设置所述第一体态操作或所述第二体态操作的设置指令,所述传感器可以检测佩戴所述虚拟现实设备的用户的体态操作,并且所述处理器可以根据所述设置指令将所述传感器检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述虚拟现实设备还可以包括处理器,其中,响应于所述处理器接收到指示用于设置所述第一体态操作或所述第二体态操作的设置指令,所述显示器可以以静态图或动态图的方式向佩戴所述虚拟现实设备的用户展示预置的各个体态操作,并且所述处理器可以接收对于所展示的体态操作的选择,并根据所述设置指令将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
在一些实施例中,所述全局菜单可以通过应用程序的方式实现,并且在所述虚拟现实设备启动时可以自动在后台运行所述应用程序。
在一些实施例中,所述显示器可以以二维平面的方式或三维立体的方式在当前所显示的内容上叠加地显示所述全局菜单。
在一些实施例中,所述第一体态操作可以包括下列至少之一:用户头部上扬的角度大于或等于第一角度阈值;用户头部摆动的角度大于或等于第二角度阈值;以及用户闭眼再睁眼的时间间隔大于或等于时间阈值。
在一些实施例中,所述虚拟现实设备可以是虚拟现实一体机。
根据本公开的又一个方面,提供了一种虚拟现实设备,包括一个或多个处理器以及存储装置,其中,所述存储装置存储有一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现根据本公开的全局菜单的显示方法。
根据本公开的再一个方面,提供了一种计算机可读介质,其上存储有计算机程序,其中,所述程序被执行时实现根据本公开的全局菜单的显示方法。
根据本公开的系统管理工具、虚拟现实设备的全局菜单的显示方法和虚拟现实设备,可以为用户提供调用全局菜单的操作方式,使得用户对于整个系统的设置操作更加便捷,改进了用户体验。
附图说明
附图用来提供对本公开的实施例的进一步理解,并且构成说明书的一部分,与本公开的实施例一起用于解释本公开,并不构成对本公开的限制。通过参考附图对详细示例实施例进行描述,以上和其他特征和优点对本领域技术人员将变得更加显而易见,在附图中:
图1是根据本公开的实施例的系统管理工具的示意性框图;
图2是根据本公开的实施例的虚拟现实设备的全局菜单的显示方法的流程图;
图3是根据本公开的实施例的用于实现全局菜单的应用程序的结构框图;
图4至图6是根据本公开的其他实施例的虚拟现实设备的全局菜单的显示方法的流程图;以及
图7是根据本公开的实施例的虚拟现实设备的结构框图。
具体实施方式
为使本领域的技术人员更好地理解本公开的技术方案,下面结合附图对本公开提供的示例实施例进行详细描述。
在下文中将参考附图更充分地描述示例实施例,但是所述示例实施例可以以不同形式来体现且不应当被解释为限于本文阐述的实施例。反之,提供这些实施例的目的在于使本公开透彻和完整,并将使本领域技术人员充分理解本公开的范围。
如本文所使用的,术语“和/或”包括一个或多个相关列举条目的任何和所有组合。
本文所使用的术语仅用于描述特定实施例,且不意欲限制本公开。应当理解的是,当本说明书中使用术语“包括”和/或“包含”时,意指存在所述特征、整体、步骤、操作、元件和/或组件,但不排除存在或添加一个或多个其他特征、整体、步骤、操作、元件、组件和/或其群组。
除非另外限定,否则本文所用的所有术语(包括技术和科学术语)的含义与本领域普通技术人员通常理解的含义相同。还将理解,诸如那些在常用字典中限定的那些术语应当被解释为具有与其在相关技术以及本公开的背景下的含义一致的含义,且将不解释为具有理想化或过度形式上的含义,除非本文明确如此限定。
图1是根据本公开的实施例的系统管理工具的示意性框图。
如图1所示,根据本公开的实施例的系统管理工具10可以包括接收部件11、控制部件12和显示部件13。接收部件11可以设置为接收响应于用户的第一体态操作而发出的第一指令。控制部件12可以设置为响应于接收部件11接收到第一指令向显示部件13发出执行第一显示操作的指令。显示部件13可以设置为响应于接收到控制部件12发出的执行第一显示操作的指令显示系统管理工具10的操作界面。
根据本公开的实施例,系统管理工具10可以应用于虚拟现实(VR)设备,例如,VR一体机,但是本公开不限于此。根据本公开的系统管理工具可以应用于用户不方便用手直接进行操作的各种设备、装置和系统。
在本公开的上下文中,“体态操作”是指用户在不能够用手直接对设备进行操作的情况下,通过用户身体的各个部位(包括但不限于头部、面部、四肢、躯干、声音、手势等)所能够提供的各种操作。
在一些实施例中,接收部件11还可以设置为接收响应于用户的第二体态操作而发出的第二指令。控制部件12还可以设置为响应于接收部件11接收到第二指令向显示部件13发出执行第二显示操作的指令。显示部件13还可以设置为响应于接收到控制部件12发出的执行第二显示操作的指令隐藏系统管理工具10的操作界面。
在一些实施例中,接收部件11还可以设置为接收指示用于设置第一体态操作或第二体态操作的设置指令。控制部件12还可以设置为响应于接收部件接收到设置指令检测用户的体态操作,并且根据设置指令将检测到的体态操作设置为第一体态操作或第二体态操作。
在一些实施例中,接收部件11还可以设置为接收指示用于设置第一体态操作或第二体态操作的设置指令。控制部件12还可以设置为响应于接收部件11接收到设置指令向显示部件13发出执行第三显示操作的指令。显示部件13还可以设置为响应于接收到控制部件12发出的执行第三显示操作的指令以静态图或动态图的方式显示预置的各个体态操作。接收部件11还可以设置为接收对于所展示的体态操作的选择,并且控制部件12还可以设置为根据接收部件11接收到的对于所展示的体态操作的选择和设置指令,将所选择的体态操作设置为第一体态操作或第二体态操作。
下面将结合图2对根据本公开的实施例的系统管理工具作为应用VR设备的全局菜单的示例进行详细描述。然而,应当认识到,本公开的实施例不限于此。根据本公开的系统管理工具可以应用于用户不方便用手直接进行操作的各种设备、装置和系统。
图2是根据本公开的实施例的虚拟现实设备的全局菜单的显示方法的流程图。
相对于各个应用程序提供的应用程序菜单,本文所述的“全局菜单”是指,用户在使用VR设备的整个过程中,随时可以通过体态操作调用的菜单。
如图2所示,根据本公开的实施例的虚拟现实设备的全局菜单的显示方法可以包括步骤100至200。
在步骤100,检测佩戴虚拟现实设备的用户的体态操作。
根据本公开的实施例,VR设备可以检测其佩戴者(即,用户)的体态操作。例如,VR设备可以检测到用户的头部上扬了45°或更大,或者用户闭眼再睁眼的时间间隔大于0.5秒。通常,正常人平均每分钟要眨眼十几次,并且每2至6秒就要眨眼一次,每次眨眼用时为0.2至0.4秒。为了避免将用户的正常眨眼误判为用户的体态操作,可以将时间阈值设置为大于或等于0.5秒。
在步骤200,响应于检测到的体态操作与用于调用全局菜单的第一体态操作一致,在当前所显示的内容上以叠加的方式显示全局菜单。
在一些实施例中,第一体态操作可以包括(但需限于)下列各种体态操作中的至少之一:用户头部上扬的角度大于或等于第一角度阈值;用户头部摆动的角度大于或等于第二角度阈值;以及用户闭眼再睁眼的时间间隔大于或等于时间阈值。
在一些实施例中,可以提供与VR显示设备(例如,HMD)通信地连接的手持输入设备。手持输入设备可以包括(但不限于)遥控器、手柄、触控板、体感设备等。用户可以通过手持输入设备来提供各种手势操作以在VR操作环境下调用全局菜单,或者可以通过手持设备上的按键来调用全局菜单。
在一些实施例中,用于判定是否调用全局菜单的体态操作可以是单一的体态操作。可替换地,用于判定是否调用全局菜单的体态操作可以是两种或者更多种体态操作的组合。例如,当检测到用户的头部上扬了45°或更大并且用户闭眼再睁眼的时间间隔大于0.5秒时,可以调用全局菜单。又例如,当检测到用户的头部上扬了45°或更大并且检测到用户通过遥控器提供了向下滑动的手势时,可以调用全局菜单。也就是说,用户可以通过抬头并且闭眼再睁眼的方式在VR操作环境下调用全局菜单,也可以通过抬头并且手指下滑的方式在VR操作环境下调用全局菜单,但本公开不限于此。
根据本实施例的全局菜单的显示方法,在VR操作环境下,为用户提供了调用全局菜单的操作方式,使得用户对于整个系统的设置操作更加便捷,改进了用户体验。
根据本公开的实施例,VR操作环境下的全局菜单可以通过应用程序的方式实现,并且在VR设备启动时可以自动在后台运行所述应用程序。
图3是根据本公开的实施例的用于实现全局菜单的应用程序的示例结构框图。应当认识到,图3仅仅示出了用于实现全局菜单的应用程序的示例,本公开的实施例不限于图3所示的示例。
如图3所示,实现全局菜单的应用程序的基础是VR全局菜单组件。VR全局菜单组件可以包括(但不限于)菜单显示构件、基础菜单构件、扩展菜单构件、外部服务接口、全局菜单容器、呼出事件监听器、广播发送器和全局菜单守护线程等。然而,本公开不限于此。VR全局菜单组件可以包括比所示结构更多或更少的构件。
菜单显示构件可以用于实现全局菜单在VR操作环境中的显示方式。在一些实施例中,全局菜单可以以二维(2D)平面的方式叠加地显示在当前所显示的内容上。VR设备可以为用户提供一种基于三维(3D)立体图像的模拟环境或3D空间。全局菜单可以被显示在3D空间中的某个2D平面。例如,VR设备当前正在运行某个游戏,此时检测到用户的用于调用全局菜单的体态操作,在此情况下,可以在游戏的3D空间中以2D的方式叠加显示全局菜单。可替换地,在一些实施例中,全局菜单可以以3D的方式叠加地显示在当前所显示的内容上。例如,检测到用户的用于调用全局菜单的体态操作时,可以在当前的3D空间中,利用3D空间提供的景深效果来叠加地显示全局菜单。
基础菜单构件可以用于实现全局菜单的默认菜单选项。默认菜单选项可以包括(但不限于)硬件参数信息(例如,显示分辨率、处理器主频)、系统资源信息(例如,内存使用情况、存储器使用情况、处理器占用情况)、系统版本信息(例如,固件版本)等,但本公开不限于此。扩展菜单构件可以用于实现用户在全局菜单中自定义的菜单选项。自定义菜单可以包括例如各个应用程序的快捷方式。外部服务接口用于实现通过全局菜单对于外部服务的调用。外部服务可以包括(但不限于)时间控件、天气预报、音量、亮度、电量、蓝牙、WiFi等。外部服务接口可以显示为与各个外部服务相应的功能图标,或者可直接操作的控件,例如,可以显示用于调节音量或亮度的滑块、用于开启/关闭WiFi模块的图标或者显示了天气信息和/或时间信息的文本框。全局菜单容器用于实现全局菜单的定位和渲染。
呼出事件监听器可以监听用户对于全局菜单的操作,并且当用户的操作涉及向外发送广播时,呼出事件监听器可以通知广播发送器向指定的应用程序发送广播消息。系统框架的广播接收器收到全局菜单的广播发送器发出的广播消息后,可以进一步将接收到的广播消息发送至指定的应用程序,或者根据接收到的广播消息对指定的应用程序执行相应的操作。例如,呼出事件监听器根据用户对于全局菜单的操作监听到“退出当前应用程序”的操作时,广播发送器可以将“返回”的广播消息发送给系统框架的广播接收器。系统框架响应于接收到的广播消息,向当前正在运行的应用程序发送返回指令。
全局菜单守护线程可以随着全局菜单应用程序的启动一直在后台运行,可用于防止系统为了释放内存而关闭全局菜单应用程序,还可用于全局菜单应用程序的调度和优先级管理。
在一些实施例中,可以实现多种不同的全局菜单,并且可以根据不同的体态操作来调用不同的全局菜单。例如,可以通过多个不同的应用程序分别实现基础菜单构件、扩展菜单构件和外部服务接口,并且在VR设备启动时,自动在后台运行这些应用程序。可以设置多种不同的体态操作分别用于调用各个全局菜单,并且可以设置相同或不同的体态操作用于取消个各个全局菜单的显示。
将全局菜单实现为应用程序,可以使得全局菜单实现不受硬件条件的约束,提供了更灵活的跨平台的实现方式,并且便于全局菜单在多种不同VR设备上的移植和扩展。
图4是根据本公开的另一实施例的虚拟现实设备的全局菜单的显示方法的流程图。
与图2所示实施例相比,根据本实施例的虚拟现实设备的全局菜单显示方法还可以包括步骤300至400。
在步骤300,在显示了全局菜单的情况下,检测佩戴虚拟现实设备的用户的体态操作。
在步骤400,响应于检测到的体态操作与用于隐藏全局菜单的第二体态操作一致,取消全局菜单的显示。
步骤300的执行过程可以与步骤100的执行过程实质上相同。在一些实施例中,当用户通过体态操作调用并显示了全局菜单之后,并没有对全局菜单提供的控件和选项进行操作或选择。在此情况下,用户可以通过用于隐藏全局菜单的第二体态操作来取消全局菜单的显示,即,隐藏全局菜单。
在一些实施例中,用于隐藏全局菜单的第二体态操作可以与用于调用全局菜单的第一体态操作不同。例如,当检测到用户的头部上扬了45°或更大时,可以调用并显示全局菜单,并且当检测到用户的头部下低了30°或更大时,可以隐藏全局菜单。然而,本公开不限于此。
在一些实施例中,用于隐藏全局菜单的第二体态操作可以与用于调用全局菜单的第一体态操作相同。例如,当检测到用户闭眼再睁眼的时间间隔大于0.5秒时,可以调用并显示全局菜单,并且当再次检测到用户闭眼再睁眼的时间间隔大于0.5秒时,可以隐藏全局菜单。
图5是根据本公开的另一实施例的虚拟现实设备的全局菜单的显示方法的流程图。
与图4所示实施例相比,根据本实施例的虚拟现实设备的全局菜单显示方法还可以包括步骤500至700。
在步骤500,接收指示用于设置第一体态操作或第二体态操作的设置指令。
在步骤600,响应于接收到设置指令,检测佩戴虚拟现实设备的用户的体态操作。
在步骤700,根据设置指令将检测到的体态操作设置为第一体态操作或第二体态操作,即,在设置指令指示设置第一体态操作时,将检测到的体态操作设置为第一体态操作,在设置指令指示设置第二体态操作时,将检测到的体态操作设置为第二体态操作。
在一些实施例中,用户可以发出设置用于调用全局菜单的第一体态操作的设置指令,或者设置用于隐藏全局菜单的第二体态操作的设置指令。响应于接收到设置指令,可以检测用户做出的体态操作。步骤600的执行过程可以与步骤100的执行过程实质上相同。随后,可以根据设置指令,将检测到的体态操作设置为第一体态操作或第二体态操作。
根据本实施例,提供了对于体态操作的设置方式,使得用户可以根据自身使用习惯来设置用于调用全局菜单的体态操作和用于隐藏全局菜单的体态操作。
图6是根据本公开的另一实施例的虚拟现实设备的全局菜单的显示方法的流程图。
与图5所示实施例相比,本实施例提供了一种不同的设置体态操作的方式。如图6所示,根据本实施例的虚拟现实设备的全局菜单显示方法还可以包括步骤600'至700'。
在步骤600',响应于接收到设置指令,以静态图或动态图的方式向佩戴虚拟现实设备的用户展示预置的各个体态操作。
在步骤650',接收对于所展示的体态操作的选择。
在步骤700',根据设置指令将所选择的体态操作设置为第一体态操作或第二体态操作,即,在设置指令指示设置第一体态操作时,将所选择的体态操作设置为第一体态操作,在设置指令指示设置第二体态操作时,将所选择的体态操作设置为第二体态操作。
在一些实施例中,用户可以发出设置用于调用全局菜单的第一体态操作的设置指令,或者设置用于隐藏全局菜单的第二体态操作的设置指令。响应于接收到设置指令,可以向佩戴VR设备的用户展示各种预置的体态操作。可以以动态图的方式向用户展示预置的体态操作,使得用户可以直观地了解到所示体态操作的具体操作方式。可替换地,可以以静态图的方式向用户展示预置的体态操作,在提供静态图的同时,还可以配合相应的文字说明。随后,用户可以对所示出的各种体态操作进行选择,并且根据用户的选择来设置第一体态操作或第二体态操作。
根据本实施例,直观地向用户提供了一种对于体态操作的设置方式,便于用户操作。
图7是根据本公开的实施例的虚拟现实设备的结构框图。
如图7所示,根据本公开的实施例的VR设备1000可以包括处理器1100、显示器1200和传感器1300。处理器1100、显示器1200和传感器1300可以通过总线彼此通信地连接。
传感器1300检测佩戴VR设备1000的用户的体态操作,并且当传感器1300检测到的体态操作与用于调用全局菜单的第一体态操作一致时,显示器1200在当前所显示的内容上以叠加的方式显示全局菜单。
在一些实施例中,处理器1100可以包括(但不限于)中央处理器、数字信号处理器、微处理器和专用集成电路中的至少之一。显示器1200可以向佩戴VR设备1000的用户显示3D场景,以提供模拟环境或3D空间。例如,显示器1200可以包括头戴式显示设备(HeadMounted Display,HMD)。传感器1300可以包括用于检测用户体态操作的各种传感器,例如,传感器1300可以包括(但不限于)面部识别装置、重力加速度传感器、体感传感器、触控传感器等。传感器1300可以与显示器1200集成在同一实体设备中,可替换地,传感器1300可以与显示器1200实现为分离的实体设备。在一些实施例中,VR设备1000可以是VR一体机。虽然未在图中示出,本领域普通技术人员应当理解的是,VR设备1000还可以包括各种其他组件,例如,扬声器、WiFi模块、蓝牙模块、遥控器等,但本公开不限于此。
在一些实施例中,在显示器1200显示全局菜单的情况下,传感器1300可以检测佩戴VR设备1000的用户的体态操作,并且当传感器检1300测到的体态操作与用于隐藏全局菜单的第二体态操作一致时,显示器1200可以取消全局菜单的显示。
在一些实施例中,当处理器1100接收到指示用于设置第一体态操作或第二体态操作的设置指令时,传感器1300可以检测佩戴VR设备1000的用户的体态操作,并且处理器1100可以根据设置指令将传感器检测1300到的体态操作设置为第一体态操作或第二体态操作。
在一些实施例中,当处理器1100接收到指示用于设置第一体态操作或第二体态操作的设置指令时,显示器1200可以以静态图或动态图的方式向佩戴VR设备1000的用户展示预置的各个体态操作,并且处理器1100可以接收对于所展示的体态操作的选择,并将所选择的体态操作设置为第一体态操作或第二体态操作。
在一些实施例中,显示器1200可以以二维平面的方式或三维立体的方式在当前所显示的内容上叠加地显示全局菜单。
根据本实施例的虚拟现实设备,在VR操作环境下,为用户提供了调用全局菜单的操作方式,使得用户对于整个系统的设置操作更加便捷,改进了用户体验。
根据本公开的实施例,提供了一种虚拟现实设备,包括一个或多个处理器以及存储装置。存储装置存储有一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器可以实现根据本公开的各实施例的全局菜单的显示方法。
根据本公开的实施例,提供了一种计算机可读介质,其上存储有计算机程序,其中,所述程序被执行时可以实现根据本公开的各实施例的全局菜单的显示方法。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
本文已经公开了示例实施例,并且虽然采用了具体术语,但它们仅用于并仅应当被解释为一般说明性含义,并且不用于限制的目的。在一些实例中,对本领域技术人员显而易见的是,除非另外明确指出,否则可单独使用与特定实施例相结合描述的特征、特性和/或元素,或可与其他实施例相结合描述的特征、特性和/或元件组合使用。因此,本领域技术人员将理解,在不脱离由所附的权利要求阐明的本公开的范围的情况下,可进行各种形式和细节上的改变。

Claims (22)

1.一种系统管理工具,包括接收部件、控制部件和显示部件,其中,
所述接收部件设置为接收响应于用户的第一体态操作而发出的第一指令,
所述控制部件设置为响应于所述接收部件接收到所述第一指令向所述显示部件发出执行第一显示操作的指令,并且
所述显示部件设置为响应于接收到所述控制部件发出的执行所述第一显示操作的指令显示所述系统管理工具的操作界面;其中,
所述系统管理工具被配置作为应用于虚拟现实VR设备的全局菜单,所述全局菜单用于对VR设备的VR操作系统进行设置,并基于VR全局菜单组件实现;所述VR全局菜单组件用于:在监听到用户对所述全局菜单的操作涉及发送广播的情况下,向指定应用对应的系统框架发送广播消息,以对所述指定应用执行相应的操作;所述全局菜单在VR设备提供的三维空间中叠加地显示在当前所显示的内容上;所述全局菜单通过全局菜单应用程序实现,所述VR全局菜单组件包括全局菜单守护线程、基础菜单构件、扩展菜单构件和外部服务接口,所述全局菜单守护线程随所述全局菜单应用程序的启动在后台运行,用于防止系统为释放内存而关闭所述全局菜单应用程序;
所述全局菜单包括多种不同的全局菜单,不同的全局菜单通过不同的体态操作进行调用,以及通过不同的体态操作进行取消显示;所述基础菜单构件、所述扩展菜单构件和所述外部服务接口通过多个不同的应用程序分别实现,在所述VR设备启动时,所述多个不同的应用程序自动在后台运行;
所述接收部件还设置为接收指示用于设置所述第一体态操作或第二体态操作的设置指令,第二体态操作用于取消所述全局菜单的显示;所述控制部件还设置为响应于所述接收部件接收到所述设置指令向所述显示部件发出执行第三显示操作的指令,所述显示部件还设置为响应于接收到所述控制部件发出的执行所述第三显示操作的指令以动态图的方式显示预置的各个体态操作,所述接收部件还设置为接收对于所展示的体态操作的选择,并且所述控制部件还设置为根据所述接收部件接收到的对于所展示的体态操作的选择和所述设置指令,将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
2.根据权利要求1所述的系统管理工具,其中,
所述接收部件还设置为接收响应于用户的第二体态操作而发出的第二指令,
所述控制部件还设置为响应于所述接收部件接收到所述第二指令向所述显示部件发出执行第二显示操作的指令,并且
所述显示部件还设置为响应于接收到所述控制部件发出的执行所述第二显示操作的指令隐藏所述系统管理工具的操作界面。
3.根据权利要求2所述的系统管理工具,其中,
所述接收部件还设置为接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令,并且
所述控制部件还设置为响应于所述接收部件接收到所述设置指令检测用户的体态操作,并且根据所述设置指令将检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
4.根据权利要求2所述的系统管理工具,其中,
所述显示部件还设置为响应于接收到所述控制部件发出的执行所述第三显示操作的指令以静态图的方式显示预置的各个体态操作。
5.根据权利要求1所述的系统管理工具,其中,所述第一体态操作包括下列至少之一:
用户头部上扬的角度大于或等于第一角度阈值;
用户头部摆动的角度大于或等于第二角度阈值;以及
用户闭眼再睁眼的时间间隔大于或等于时间阈值。
6.一种虚拟现实设备的全局菜单的显示方法,包括:
检测佩戴所述虚拟现实设备的用户的体态操作;以及
响应于检测到的体态操作与用于调用所述全局菜单的第一体态操作一致,在当前所显示的内容上以叠加的方式显示所述全局菜单;
其中,所述全局菜单用于对所述虚拟现实设备的虚拟现实操作系统进行设置,并基于虚拟现实全局菜单组件实现;所述虚拟现实全局菜单组件用于:在监听到用户对所述全局菜单的操作涉及发送广播的情况下,向指定应用对应的系统框架发送广播消息,以对所述指定应用执行相应的操作;所述全局菜单属于虚拟现实设备的系统管理工具,所述系统管理工具,包括接收部件、控制部件和显示部件;
全局菜单在VR设备提供的三维空间中叠加地显示在当前所显示的内容上;所述全局菜单通过全局菜单应用程序实现,所述VR全局菜单组件包括全局菜单守护线程、基础菜单构件、扩展菜单构件和外部服务接口,所述全局菜单守护线程随所述全局菜单应用程序的启动在后台运行,用于防止系统为释放内存而关闭所述全局菜单应用程序;
所述全局菜单包括多种不同的全局菜单,不同的全局菜单通过不同的体态操作进行调用,以及通过不同的体态操作进行取消显示;所述基础菜单构件、所述扩展菜单构件和所述外部服务接口通过多个不同的应用程序分别实现,在所述VR设备启动时,所述多个不同的应用程序自动在后台运行;
所述接收部件设置为接收指示用于设置所述第一体态操作或第二体态操作的设置指令,第二体态操作用于取消所述全局菜单的显示;所述控制部件还设置为响应于所述接收部件接收到所述设置指令向所述显示部件发出执行第三显示操作的指令,所述显示部件还设置为响应于接收到所述控制部件发出的执行所述第三显示操作的指令以动态图的方式显示预置的各个体态操作,所述接收部件还设置为接收对于所展示的体态操作的选择,并且所述控制部件还设置为根据所述接收部件接收到的对于所展示的体态操作的选择和所述设置指令,将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
7.根据权利要求6所述的全局菜单的显示方法,还包括:
在显示了所述全局菜单的情况下,检测佩戴所述虚拟现实设备的用户的体态操作;以及
响应于检测到的体态操作与用于隐藏所述全局菜单的第二体态操作一致,取消所述全局菜单的显示。
8.根据权利要求7所述的全局菜单的显示方法,还包括:
接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令;
响应于接收到所述设置指令,检测佩戴所述虚拟现实设备的用户的体态操作;以及
根据所述设置指令将检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
9.根据权利要求7所述的全局菜单的显示方法,还包括:
接收指示用于设置所述第一体态操作或所述第二体态操作的设置指令;
响应于接收到所述设置指令,以静态图或动态图的方式向佩戴所述虚拟现实设备的用户展示预置的各个体态操作;
接收对于所展示的体态操作的选择;以及
根据所述设置指令将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
10.根据权利要求6所述的全局菜单的显示方法,其中,所述全局菜单通过应用程序的方式实现,并且在所述虚拟现实设备启动时自动在后台运行所述应用程序。
11.根据权利要求6所述的全局菜单的显示方法,其中,以二维平面的方式或三维立体的方式在当前所显示的内容上叠加地显示所述全局菜单。
12.根据权利要求6所述的全局菜单的显示方法,其中,所述第一体态操作包括下列至少之一:
用户头部上扬的角度大于或等于第一角度阈值;
用户头部摆动的角度大于或等于第二角度阈值;以及
用户闭眼再睁眼的时间间隔大于或等于时间阈值。
13.一种虚拟现实设备,包括显示器和传感器,其中,
所述传感器检测佩戴所述虚拟现实设备的用户的体态操作,并且
响应于所述传感器检测到的体态操作与用于调用全局菜单的第一体态操作一致,所述显示器在当前所显示的内容上以叠加的方式显示所述全局菜单;
其中,所述全局菜单用于对所述虚拟现实设备的虚拟现实操作系统进行设置,并基于虚拟现实全局菜单组件实现;所述虚拟现实全局菜单组件用于:在监听到用户对所述全局菜单的操作涉及发送广播的情况下,向指定应用对应的系统框架发送广播消息,以对所述指定应用执行相应的操作;所述全局菜单属于虚拟现实设备的系统管理工具,所述系统管理工具,包括接收部件、控制部件和显示部件;
全局菜单在VR设备提供的三维空间中叠加地显示在当前所显示的内容上;所述全局菜单通过全局菜单应用程序实现,所述VR全局菜单组件包括全局菜单守护线程、基础菜单构件、扩展菜单构件和外部服务接口,所述全局菜单守护线程随所述全局菜单应用程序的启动在后台运行,用于防止系统为释放内存而关闭所述全局菜单应用程序;
所述全局菜单包括多种不同的全局菜单,不同的全局菜单通过不同的体态操作进行调用,以及通过不同的体态操作进行取消显示;所述基础菜单构件、所述扩展菜单构件和所述外部服务接口通过多个不同的应用程序分别实现,在所述VR设备启动时,所述多个不同的应用程序自动在后台运行;
所述接收部件还设置为接收指示用于设置所述第一体态操作或第二体态操作的设置指令,第二体态操作用于取消所述全局菜单的显示;所述控制部件还设置为响应于所述接收部件接收到所述设置指令向所述显示部件发出执行第三显示操作的指令,所述显示部件还设置为响应于接收到所述控制部件发出的执行第三显示操作的指令以动态图的方式显示预置的各个体态操作,所述接收部件还设置为接收对于所展示的体态操作的选择,并且所述控制部件还设置为根据所述接收部件接收到的对于所展示的体态操作的选择和所述设置指令,将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
14.根据权利要求13所述的虚拟现实设备,其中,
在所述显示器显示所述全局菜单的情况下,所述传感器检测佩戴所述虚拟现实设备的用户的体态操作,并且
响应于所述传感器检测到的体态操作与用于隐藏所述全局菜单的第二体态操作一致,所述显示器取消所述全局菜单的显示。
15.根据权利要求14所述的虚拟现实设备,还包括处理器,其中,
响应于所述处理器接收到指示用于设置所述第一体态操作或所述第二体态操作的设置指令,所述传感器检测佩戴所述虚拟现实设备的用户的体态操作,并且
所述处理器根据所述设置指令将所述传感器检测到的体态操作设置为所述第一体态操作或所述第二体态操作。
16.根据权利要求14所述的虚拟现实设备,还包括处理器,其中,
响应于所述处理器接收到指示用于设置所述第一体态操作或所述第二体态操作的设置指令,所述显示器以静态图或动态图的方式向佩戴所述虚拟现实设备的用户展示预置的各个体态操作,并且
所述处理器接收对于所展示的体态操作的选择,并根据所述设置指令将所选择的体态操作设置为所述第一体态操作或所述第二体态操作。
17.根据权利要求13所述的虚拟现实设备,其中,所述全局菜单通过应用程序的方式实现,并且在所述虚拟现实设备启动时自动在后台运行所述应用程序。
18.根据权利要求13所述的虚拟现实设备,其中,所述显示器以二维平面的方式或三维立体的方式在当前所显示的内容上叠加地显示所述全局菜单。
19.根据权利要求13所述的虚拟现实设备,其中,所述第一体态操作包括下列至少之一:
用户头部上扬的角度大于或等于第一角度阈值;
用户头部摆动的角度大于或等于第二角度阈值;以及
用户闭眼再睁眼的时间间隔大于或等于时间阈值。
20.根据权利要求13所述的虚拟现实设备,其中,所述虚拟现实设备是虚拟现实一体机。
21.一种虚拟现实设备,包括一个或多个处理器以及存储装置,其中,
所述存储装置存储有一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现根据权利要求6至12中任一项所述的全局菜单的显示方法。
22.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被执行时实现根据权利要求6至12中任一项所述的全局菜单的显示方法。
CN201811288583.7A 2018-10-31 2018-10-31 系统管理工具、显示方法、vr设备和计算机可读介质 Active CN109460149B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811288583.7A CN109460149B (zh) 2018-10-31 2018-10-31 系统管理工具、显示方法、vr设备和计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811288583.7A CN109460149B (zh) 2018-10-31 2018-10-31 系统管理工具、显示方法、vr设备和计算机可读介质

Publications (2)

Publication Number Publication Date
CN109460149A CN109460149A (zh) 2019-03-12
CN109460149B true CN109460149B (zh) 2022-10-11

Family

ID=65609098

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811288583.7A Active CN109460149B (zh) 2018-10-31 2018-10-31 系统管理工具、显示方法、vr设备和计算机可读介质

Country Status (1)

Country Link
CN (1) CN109460149B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140001167A (ko) * 2012-06-26 2014-01-06 한국과학기술원 웨어러블 증강현실 환경에서 증강현실 서비스 제공 방법 및 장치
CN103634682A (zh) * 2013-11-29 2014-03-12 乐视致新电子科技(天津)有限公司 智能电视中的全局设置实现方法及装置
KR101528485B1 (ko) * 2014-06-16 2015-06-12 한국과학기술정보연구원 스마트 디바이스 기반 가상현실 서비스 시스템 및 방법
CN106569588A (zh) * 2015-09-30 2017-04-19 韩相善 搭载所显示内容的使用功能的产品增强现实应用程序系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6222465B1 (en) * 1998-12-09 2001-04-24 Lucent Technologies Inc. Gesture-based computer interface
EP2090970A1 (de) * 2008-02-14 2009-08-19 Siemens Aktiengesellschaft Verfahren zum Betrieb eines elektronischen Gerätes, insbesondere Programmiergerätes, Computerprogramm zur Implementierung des Verfahrens und Programmiergerät mit einem solchen Computerprogramm
US20130019175A1 (en) * 2011-07-14 2013-01-17 Microsoft Corporation Submenus for context based menu system
US20130176202A1 (en) * 2012-01-11 2013-07-11 Qualcomm Incorporated Menu selection using tangible interaction with mobile devices
US9606647B1 (en) * 2012-07-24 2017-03-28 Palantir Technologies, Inc. Gesture management system
US20150187357A1 (en) * 2013-12-30 2015-07-02 Samsung Electronics Co., Ltd. Natural input based virtual ui system for mobile devices
US10409456B2 (en) * 2015-06-09 2019-09-10 Disney Enterprises, Inc. Dynamically changing a 3D object into an interactive 3D menu
CN105867599A (zh) * 2015-08-17 2016-08-17 乐视致新电子科技(天津)有限公司 一种手势操控方法及装置
CN106095068A (zh) * 2016-04-26 2016-11-09 乐视控股(北京)有限公司 虚拟图像的控制方法及装置
CN106200898A (zh) * 2016-06-24 2016-12-07 张睿卿 虚拟现实软件平台系统
CN107272890A (zh) * 2017-05-26 2017-10-20 歌尔科技有限公司 一种基于手势识别的人机交互方法和装置
CN107544733A (zh) * 2017-09-07 2018-01-05 广州视源电子科技股份有限公司 菜单管理方法、装置、多媒体触控设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140001167A (ko) * 2012-06-26 2014-01-06 한국과학기술원 웨어러블 증강현실 환경에서 증강현실 서비스 제공 방법 및 장치
CN103634682A (zh) * 2013-11-29 2014-03-12 乐视致新电子科技(天津)有限公司 智能电视中的全局设置实现方法及装置
KR101528485B1 (ko) * 2014-06-16 2015-06-12 한국과학기술정보연구원 스마트 디바이스 기반 가상현실 서비스 시스템 및 방법
CN106569588A (zh) * 2015-09-30 2017-04-19 韩相善 搭载所显示内容的使用功能的产品增强现实应用程序系统

Also Published As

Publication number Publication date
CN109460149A (zh) 2019-03-12

Similar Documents

Publication Publication Date Title
EP2883103B1 (en) Head mounted display for adjusting audio output and video output in relation to each other and method for controlling the same
CN107005739B (zh) 用于基于语音的设备的外部视觉交互
EP3211509B1 (en) Mobile device comprising stylus pen and operation method therefor
CN106133646B (zh) 基于生理参数确定用户对通知的响应
EP3586316B1 (en) Method and apparatus for providing augmented reality function in electronic device
EP3910962B1 (en) Method of controlling the sharing of videos and electronic device adapted thereto
EP3719623A1 (en) Application icon display method, terminal, and computer readable storage medium
CN109407921B (zh) 一种应用程序的处理方法及终端设备
KR20160039948A (ko) 이동단말기 및 그 제어방법
US20160342302A1 (en) Method and device for interacting with button
KR20140132232A (ko) 스마트 워치 및 제어 방법
KR20150092964A (ko) 지문 처리 방법 및 그 전자 장치
KR20160066951A (ko) 이동 단말기 및 그 제어 방법
KR20170081391A (ko) 이동단말기 및 그 제어방법
CN103677711A (zh) 连接移动终端和外部显示器的方法和实现该方法的装置
KR20150108216A (ko) 입력 처리 방법 및 그 전자 장치
CN108170361B (zh) 一种应用运行状态控制方法及移动终端
JP2017538240A (ja) インターフェース表示方法、装置、プログラム及び記録媒体
EP2947556B1 (en) Method and apparatus for processing input using display
US9128598B2 (en) Device and method for processing user input
CN109800003B (zh) 应用下载方法、装置、终端及存储介质
KR20180005055A (ko) 전자 장치의 화면 표시 방법 및 그 장치
WO2022134691A1 (zh) 一种终端设备中啸叫处理方法及装置、终端
CN109845251B (zh) 用于显示图像的电子设备和方法
KR20170125655A (ko) 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant