CN106354412A - 基于虚拟现实设备的输入方法及装置 - Google Patents

基于虚拟现实设备的输入方法及装置 Download PDF

Info

Publication number
CN106354412A
CN106354412A CN201610786304.4A CN201610786304A CN106354412A CN 106354412 A CN106354412 A CN 106354412A CN 201610786304 A CN201610786304 A CN 201610786304A CN 106354412 A CN106354412 A CN 106354412A
Authority
CN
China
Prior art keywords
information
user
input
finger
dummy keyboard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610786304.4A
Other languages
English (en)
Inventor
杨星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Original Assignee
Leshi Zhixin Electronic Technology Tianjin Co Ltd
LeTV Holding Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Leshi Zhixin Electronic Technology Tianjin Co Ltd, LeTV Holding Beijing Co Ltd filed Critical Leshi Zhixin Electronic Technology Tianjin Co Ltd
Priority to CN201610786304.4A priority Critical patent/CN106354412A/zh
Publication of CN106354412A publication Critical patent/CN106354412A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供的一种基于虚拟现实设备的输入方法及装置,涉及虚拟现实技术领域,在用户使用虚拟现实设备的过程中,可以提高信息输入的效率。所述方法包括:当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;根据所述按键信息,确定所述用户输入的信息。

Description

基于虚拟现实设备的输入方法及装置
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种基于虚拟现实设备的输入方法及装置。
背景技术
随着科技的进步,虚拟现实技术越来越成熟。虚拟现实技术是仿真技术的一种,可以通过其专用软件,整合图像、声音、动画等,模拟产生一个三维空间的虚拟世界,提供用户关于视觉、听觉、触觉等感官的模拟,当用户通过虚拟现实设备观看视频时,可以使用户感受到如同身临其境一般,并且用户可以选择任一角度,观看任一范围内的场景或选择观看物体的任一角度。
在用户通过虚拟现实设备观看视频的过程中,当用户需要输入信息时,目前通常需要结合虚拟现实设备上配置的触摸板进行输入,例如,由用户的头控焦点定位,定位当前需要输入的字母,再点击虚拟现实设备上配置的触摸板,确定输入该字母。
然而,发明人在实现发明的过程中发现了上述结合虚拟现实设备上配置的触摸板进行输入的方式,步骤繁琐,当用户需要输入大量信息时,会造成信息输入的效率较低,影响了用户的体验。
发明内容
有鉴于此,本发明实施例提供了一种基于虚拟现实设备的输入方法及装置,用以解决现有技术中用户结合虚拟现实设备上配置的触摸板进行输入的方式,当用户需要输入大量信息时,会造成信息输入的效率较低的问题。
针对现有技术存在的问题,本发明实施例提供了一种基于虚拟现实设备的输入方法,包括:
当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;
当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;
根据所述按键信息,确定所述用户输入的信息。
本发明实施例提供了一种基于虚拟现实设备的输入装置,包括:
触发单元,用于当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;
获取单元,用于当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;
确定单元,用于根据所述按键信息,确定所述用户输入的信息。
本发明实施例提供的一种基于虚拟现实设备的输入方法及装置,当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像,以便用户通过该虚拟键盘进行输入,当检测到所述用户对所述虚拟图像存在操作动作时,首先获取在所述虚拟键盘中与所述操作动作对应的按键信息;然后根据所述按键信息,确定所述用户输入的信息。与目前用户结合虚拟现实设备上配置的触摸板进行输入的方式相比,本发明实施例在用户使用虚拟现实设备的过程中,当用户需要输入信息时,为用户提供虚拟键盘,根据在该虚拟键盘中与用户操作动作对应的按键信息,确定用户输入的信息,进而识别出用户对该虚拟键盘的按键操作,从而完成信息的输入,步骤简单,提高了信息输入的效率,增强了用户的体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种基于虚拟现实设备的输入方法流程示意图;
图2为本发明实施例提供的另一种基于虚拟现实设备的输入方法流程示意图;
图3为本发明实施例提供的一种基于虚拟现实设备的输入装置结构示意图;
图4为本发明实施例提供的一种基于虚拟现实设备的输入装置的实体结构示意图;
图5为本发明实施例提供的另一种基于虚拟现实设备的输入装置结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在用户通过虚拟现实设备观看视频的过程中,当用户需要输入信息时,目前通常需要结合虚拟现实设备上配置的触摸板进行输入,然而,这种方式步骤繁琐,当用户需要输入大量信息时,会造成信息输入的效率较低。
为了解决上述问题,本发明实施例提供了一种基于虚拟现实设备的输入方法,可以使用户通过虚拟键盘进行信息输入,如图1所示,所述方法包括:
101、当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像。
其中,所述预设识别区域可以根据实际需求进行配置,具体可以根据用户使用虚拟现实设备过程中的视角位置进行配置,并且可以结合外置摄像机进行配置,以便该外置摄像机可以拍摄该区域内的影像信息。例如,预设识别区域可以配置为用户视角位置的最下方,外置摄像机的摄像头对准该区域。
所述输入操作特征信息可以为代表用户需要进行信息输入的特征信息,例如,输入操作特征信息可以为用户的手部特征信息,当通过外置摄像机检测到预设识别区域内存在用户的手部特征信息时,说明用户需要进行信息输入;输入操作特征信息也可以为用于信息输入的道具的特征信息,当通过外置摄像机检测到预设识别区域内存在该道具的特征信息时,代表用户需要进行信息输入。
需要说明的是,对于本发明实施例的执行主体可以为配置在虚拟现实设备中用于控制虚拟键盘输入的装置,当该装置检测到预设识别区域内存在用户的输入操作特征信息时,说明用户此刻需要进行信息输入,触发控制指令,进而实现虚拟现实设备播放虚拟键盘的虚拟图像。
具体地,可以通过外置摄像机获取用户自身图像数据,再将该图像数据与虚拟键盘的虚拟图像相结合,使用户感觉到自己身前摆放着如同真实的键盘,并且使用户对该虚拟键盘进行操作的区域为预设识别区域。
102、当检测到用户对虚拟图像存在操作动作时,获取在虚拟键盘中与操作动作对应的按键信息。
其中,所述虚拟键盘中的按键信息可以根据实际需求进行配置,例如,虚拟键盘中的按键信息可以包含A-Z的26个英文字母按键、回车按键、删除按键等。
例如,在播放虚拟键盘的虚拟图像后,通过外置摄像机检测预设识别区域内用户手指的位移变化,当通过外置摄像机检测到预设识别区域内用户手指在某一位置出现弯曲时,确定检测到用户对虚拟键盘的虚拟图像存在操作动作,根据该位置获取在虚拟键盘中相对应的按键信息。
103、根据按键信息,确定用户输入的信息。
例如,若按键信息对应字母A按键,确定用户输入了字母A,进行字母A的信息录入;若按键信息对应删除按键,确定用户输入了删除指令,进行相应的信息删除操作。
进一步地,在确定用户输入的信息后,若接下来的预定时间段内没有再检测到用户对虚拟图像存在操作动作,其中预定时间段的时长可以为10分钟、15分钟等,说明用户暂时不需要输入信息,可以停止播放虚拟键盘的虚拟图像,以便节省资源。
本发明实施例提供的一种基于虚拟现实设备的输入方法,当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像,以便用户通过该虚拟键盘进行输入,当检测到所述用户对所述虚拟图像存在操作动作时,首先获取在所述虚拟键盘中与所述操作动作对应的按键信息;然后根据所述按键信息,确定所述用户输入的信息。与目前用户结合虚拟现实设备上配置的触摸板进行输入的方式相比,本发明实施例在用户使用虚拟现实设备的过程中,当用户需要输入信息时,为用户提供虚拟键盘,根据在该虚拟键盘中与用户操作动作对应的按键信息,确定用户输入的信息,进而识别出用户对该虚拟键盘的按键操作,从而完成信息的输入,步骤简单,提高了信息输入的效率,增强了用户的体验。
为了更好的对上述图1所示的方法进行理解,作为对上述实施方式的细化和扩展,本发明实施例提供了另一种基于虚拟现实设备的输入方法,如图2所示,所述方法包括:
201、当检测到预设识别区域内存在用户的手部特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像。
其中,所述预设识别区域的概念解释可以参考步骤101中相应描述,在此不再赘述。进一步地,在用户使用虚拟现实设备的过程中,当用户的视角位置发生变化时,可以对预设识别区域进行相应调整,以便满足用户的需求。
例如,系统会根据用户视角位置,限定一个区域作为识别区域,当通过外置摄像机检测到用户的手部处于这个识别区域时,说明用户此刻需要进行信息输入,触发虚拟现实设备播放虚拟键盘的虚拟图像。
202、触发播放虚拟键盘的使用向导图像。
对于本发明实施例,用户确定好视角时,通过触发播放虚拟键盘的使用向导图像,使用向导图像中会指示用户进行虚拟键盘使用的相关操作,进而开始进行手势匹配识别。例如,可以指示用户弯曲左右手的食指,进而确定左右手食指的位置,然后再根据确定的左右手食指的位置,调整虚拟键盘的键位布局;还可以指示用户将食指停留在虚拟键盘的预定键位上,使用户左手食指停留在虚拟键盘的F键位处,使用户右手食指停留在虚拟键盘的J键位处,进而可以实现标准化打字习惯,提高用户输入信息的效率。
203、记录用户根据使用向导图像确定的手指位置信息。
对于本发明实施例,可以通过使用向导图像依次指示用户弯曲每个手指,进而记录用户每个手指位置信息;还可以通过使用向导图像指示用户弯曲特定手指,首先记录用户特定手指的手指位置信息,如只识别记录左右手食指即可,然后在根据用户手指间的距离,推算出用户其余手指的手指位置信息。在此场景下,所述步骤203具体可以包括:记录所述用户根据所述使用向导图像确定的与预设手指标识对应的手指位置信息,其中,所述预设手指标识可以根据实际需求进行预先配置,例如,预设手指标识可以为左手食指、右手小拇指等;然后通过外置摄像机获取所述用户的手指间的距离信息;根据所述手指位置信息以及所述手指间的距离信息,确定用户的每个手指位置信息。
需要说明的是,通过使用向导图像指示用户弯曲特定手指,首先记录用户特定手指的手指位置信息,然后在根据用户手指间的距离,推算出用户其余手指的手指位置信息,这种深度学习得到其余手指位置信息的方式,可以减少使用向导图像播放时间,可以使用户尽快开始使用虚拟键盘进行信息输入,进而可以提高用户输入信息的效率。
204、当检测到用户对虚拟图像存在操作动作时,根据记录的用户的手指位置信息,获取在虚拟键盘中与操作动作对应的按键信息。
对于本发明实施例,记录的所述用户的一个手指位置信息对应所述虚拟键盘中的一个原始按键位置信息。所述步骤204具体可以包括:当检测到所述用户对所述虚拟图像存在操作动作时,获取与所述操作动作对应的手指水平位移信息以及手指弯曲位移信息;根据记录的所述用户的手指位置信息以及与所述手指位置信息对应的原始按键位置信息,确定在所述虚拟键盘中与所述手指水平位移信息对应的目标按键位置信息;根据所述目标按键位置信息以及所述手指弯曲位移信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
例如,用户左手食指停留在F键位处,即记录的用户左手食指位置信息对应的原始按键位置信息,当通过外置摄像机检测到用户左手食指存在位移变化时,确定检测到用户对虚拟键盘的虚拟图像存在操作动作,获取用户左手食指对应的手指水平位移信息以及手指弯曲位移信息,根据该手指水平位移信息以及F键位,确定目标按键位置信息为R键位,并且根据该手指弯曲位移信息,确定用户左手食指在R键位处弯曲,进而可以确定用户需要输入字母R,获取在虚拟键盘中的R键位信息。
205、根据按键信息,确定用户输入的信息。
进一步地,在步骤205之后,所述方法还可以包括:对确定的所述用户输入的信息进行显示,例如,当确定的用户输入的信息为字母M,在虚拟现实设备中可以显示字母M,并且进一步地可以进行高亮显示,以便用户校对输入的信息是否正确。
进一步地,当接收到所述用户输入的重置指令时,根据所述用户输入的信息,调整所述虚拟键盘的布局。对于本发明实施例,当用户发现信息输入错误时,可以按预先配置的重置按钮,输入重置指令,在机器侧,当接收到该重置指令时,根据用户之前输入的错误信息,调整虚拟键盘的布局,以便减少误击的出现,提高用户的输入速度和准确性。进而可以实现装置的自动学习,不断地进化调整,从而可以实现根据用户的使用习惯,合理化地进行信息输入。
本发明实施例提供的另一种基于虚拟现实设备的输入方法,当检测到预设识别区域内存在用户的手部特征信息时,首先触发虚拟现实设备播放虚拟键盘的虚拟图像,以便用户通过该虚拟键盘进行输入;再触发播放虚拟键盘的使用向导图像以及记录用户相关的手指位置信息,具体可以通过深度学习的方式,得到特定手指的位置信息后,再根据手指间的距离,推算出用户其余手指的位置信息,可以使用户尽快开始使用虚拟键盘进行信息输入,进而可以提高用户输入信息的效率;当检测到用户对虚拟图像存在操作动作时,根据记录的用户的手指位置信息,获取在虚拟键盘中与操作动作对应的按键信息,根据按键信息,确定用户输入的信息,与目前用户结合虚拟现实设备上配置的触摸板进行输入的方式相比,步骤简单,可以提高信息输入的效率;当接收到用户输入的重置指令时,根据用户输入的信息,调整虚拟键盘的布局,以便减少输入时的误击出现,提高用户的输入速度和准确性。
进一步地,作为图1所述方法的具体实现,本发明实施例提供了一种基于虚拟现实设备的输入装置,如图3所示,所述装置包括:触发单元31、获取单元32、确定单元33。
所述触发单元31,可以用于当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像。所述触发单元31为本装置中控制虚拟键盘显示的主要功能模块,具体可以配合外置摄像机进行工作。
所述获取单元32,可以用于当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息。所述获取单元32为本装置中获取用户按键信息的主要功能模块,具体可以配合外置摄像机进行工作,并触发确定单元33进行相关工作。
所述确定单元33,可以用于根据所述按键信息,确定所述用户输入的信息。所述确定单元33为本装置中根据获取单元32获取的按键信息确定用户输入信息的主要功能模块。
需要说明的是,本发明实施例提供的一种基于虚拟现实设备的输入装置所涉及各功能单元的其他相应描述,可以参考图1中的对应描述,在此不再赘述。本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
示例性的,如图4所示,图4示出了本发明实施例提供的一种基于虚拟现实设备的输入装置的实体结构示意图,该基于虚拟现实设备的输入装置可以包括:处理器(processor)41、通信接口(Communications Interface)42、存储器(memory)43和总线44,其中,处理器41、通信接口42、存储器43通过总线44完成相互间的通信。通信接口42可以用于服务器与客户端之间的信息传输。处理器41可以调用存储器43中的逻辑指令,以执行如下方法:当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;根据所述按键信息,确定所述用户输入的信息。
此外,上述的存储器43中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本发明实施例提供的一种基于虚拟现实设备的输入装置,可以配置在虚拟现实设备中,具体包括触发单元、获取单元、确定单元,当检测到预设识别区域内存在用户的输入操作特征信息时,通过触发单元触发虚拟现实设备播放虚拟键盘的虚拟图像;当检测到用户对虚拟键盘的虚拟图像存在操作动作时,通过获取单元获取在所述虚拟键盘中与所述操作动作对应的按键信息;然后通过确定单元根据获取单元获取的按键信息,确定用户输入的信息。与目前用户结合虚拟现实设备上配置的触摸板进行输入的方式相比,本发明实施例在用户使用虚拟现实设备的过程中,当用户需要输入信息时,为用户提供虚拟键盘,根据在该虚拟键盘中与用户操作动作对应的按键信息,确定用户输入的信息,进而识别出用户对该虚拟键盘的按键操作,从而完成信息的输入,步骤简单,提高了信息输入的效率,增强了用户的体验。
进一步地,作为图2所述方法的具体实现,本发明实施例提供了另一种基于虚拟现实设备的输入装置,如图5所示,所述装置包括:触发单元51、获取单元52、确定单元53。
所述触发单元51,可以用于当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像。所述触发单元51为本装置中控制虚拟键盘显示的主要功能模块,具体可以配合外置摄像机进行工作。
所述获取单元52,可以用于当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息。所述获取单元52为本装置中获取用户按键信息的主要功能模块,具体可以配合外置摄像机进行工作,并触发确定单元53进行相关工作。
所述确定单元53,可以用于根据所述按键信息,确定所述用户输入的信息。所述确定单元53为本装置中根据获取单元52获取的按键信息确定用户输入信息的主要功能模块。
可选地,所述输入操作特征信息可以为用户的手部特征信息。
进一步地,所述装置还包括:记录单元54。
所述触发单元51,还可以用于触发播放所述虚拟键盘的使用向导图像。
所述记录单元54,可以用于记录所述用户根据所述使用向导图像确定的手指位置信息。
所述获取单元52,具体可以用于当检测到所述用户对所述虚拟图像存在操作动作时,根据记录的所述用户的手指位置信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
可选地,记录的所述用户的一个手指位置信息可以对应所述虚拟键盘中的一个原始按键位置信息。
具体地,所述获取单元52包括:获取模块521、确定模块522。
所述获取模块521,可以用于当检测到所述用户对所述虚拟图像存在操作动作时,获取与所述操作动作对应的手指水平位移信息以及手指弯曲位移信息。
所述确定模块522,可以用于根据记录的所述用户的手指位置信息以及与所述手指位置信息对应的原始按键位置信息,确定在所述虚拟键盘中与所述手指水平位移信息对应的目标按键位置信息。
所述获取模块521,还可以用于根据所述目标按键位置信息以及所述手指弯曲位移信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
具体地,所述记录单元54包括:记录模块541、获取模块542、确定模块543。
所述记录模块541,可以用于记录所述用户根据所述使用向导图像确定的与预设手指标识对应的手指位置信息。
所述获取模块542,可以用于通过外置摄像机获取所述用户的手指间的距离信息。
所述确定模块543,可以用于根据所述手指位置信息以及所述手指间的距离信息,确定用户的每个手指位置信息。
进一步地,所述装置还包括:显示单元55、调整单元56。
所述显示单元55,可以用于对确定的所述用户输入的信息进行显示。
所述调整单元56,可以用于当接收到所述用户输入的重置指令时,根据所述用户输入的信息,调整所述虚拟键盘的布局。
所述调整单元56,还可以用于在用户使用所述虚拟现实设备的过程中,当所述用户的视角位置发生变化时,对所述预设识别区域进行相应调整。
需要说明的是,本发明实施例提供的另一种基于虚拟现实设备的输入装置所涉及各功能单元的其他相应描述,可以参考图2中的对应描述,在此不再赘述。本发明实施例中可以通过硬件处理器来实现相关功能模块。
本发明实施例提供的另一种基于虚拟现实设备的输入装置,可以配置在虚拟现实设备中,具体包括触发单元、获取单元、确定单元、记录单元、显示单元、调整单元等。当检测到预设识别区域内存在用户的手部特征信息时,通过触发单元触发虚拟现实设备播放虚拟键盘的虚拟图像,以便用户通过该虚拟键盘进行输入;再触发播放虚拟键盘的使用向导图像以及通过记录单元记录用户相关的手指位置信息,具体可以通过深度学习的方式,得到特定手指的位置信息后,再根据手指间的距离,推算出用户其余手指的位置信息,可以使用户尽快开始使用虚拟键盘进行信息输入,进而可以提高用户输入信息的效率;当检测到用户对虚拟图像存在操作动作时,根据记录单元记录的用户的手指位置信息,通过获取单元获取在虚拟键盘中与操作动作对应的按键信息,然后通过确定单元根据获取单元获取的按键信息,确定用户输入的信息,与目前用户结合虚拟现实设备上配置的触摸板进行输入的方式相比,步骤简单,可以提高信息输入的效率;当接收到用户输入的重置指令时,根据用户输入的信息,通过调整单元调整虚拟键盘的布局,以便减少输入时的误击出现,提高用户的输入速度和准确性。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序代码:当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;根据所述按键信息,确定所述用户输入的信息。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (12)

1.一种基于虚拟现实设备的输入方法,其特征在于,包括:
当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;
当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;
根据所述按键信息,确定所述用户输入的信息。
2.根据权利要求1所述的基于虚拟现实设备的输入方法,其特征在于,所述输入操作特征信息为用户的手部特征信息,所述当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息之前,所述方法还包括:
触发播放所述虚拟键盘的使用向导图像;
记录所述用户根据所述使用向导图像确定的手指位置信息;
所述当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息,具体包括:
当检测到所述用户对所述虚拟图像存在操作动作时,根据记录的所述用户的手指位置信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
3.根据权利要求2所述的基于虚拟现实设备的输入方法,其特征在于,记录的所述用户的一个手指位置信息对应所述虚拟键盘中的一个原始按键位置信息,所述当检测到所述用户对所述虚拟图像存在操作动作时,根据记录的所述用户的手指位置信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息,具体包括:
当检测到所述用户对所述虚拟图像存在操作动作时,获取与所述操作动作对应的手指水平位移信息以及手指弯曲位移信息;
根据记录的所述用户的手指位置信息以及与所述手指位置信息对应的原始按键位置信息,确定在所述虚拟键盘中与所述手指水平位移信息对应的目标按键位置信息;
根据所述目标按键位置信息以及所述手指弯曲位移信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
4.根据权利要求2所述的基于虚拟现实设备的输入方法,其特征在于,所述记录所述用户根据所述使用向导图像确定的手指位置信息,具体包括:
记录所述用户根据所述使用向导图像确定的与预设手指标识对应的手指位置信息;
通过外置摄像机获取所述用户的手指间的距离信息;
根据所述手指位置信息以及所述手指间的距离信息,确定用户的每个手指位置信息。
5.根据权利要求1所述的基于虚拟现实设备的输入方法,其特征在于,所述根据所述按键信息,确定所述用户输入的信息之后,所述方法还包括:
对确定的所述用户输入的信息进行显示;
当接收到所述用户输入的重置指令时,根据所述用户输入的信息,调整所述虚拟键盘的布局。
6.根据权利要求1所述的基于虚拟现实设备的输入方法,其特征在于,所述方法还包括:
在用户使用所述虚拟现实设备的过程中,当所述用户的视角位置发生变化时,对所述预设识别区域进行相应调整。
7.一种基于虚拟现实设备的输入装置,其特征在于,包括:
触发单元,用于当检测到预设识别区域内存在用户的输入操作特征信息时,触发虚拟现实设备播放虚拟键盘的虚拟图像;
获取单元,用于当检测到所述用户对所述虚拟图像存在操作动作时,获取在所述虚拟键盘中与所述操作动作对应的按键信息;
确定单元,用于根据所述按键信息,确定所述用户输入的信息。
8.根据权利要求7所述的基于虚拟现实设备的输入装置,其特征在于,所述输入操作特征信息为用户的手部特征信息,所述装置还包括:记录单元;
所述触发单元,还用于触发播放所述虚拟键盘的使用向导图像;
所述记录单元,用于记录所述用户根据所述使用向导图像确定的手指位置信息;
所述获取单元,具体用于当检测到所述用户对所述虚拟图像存在操作动作时,根据记录的所述用户的手指位置信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
9.根据权利要求8所述的基于虚拟现实设备的输入装置,其特征在于,记录的所述用户的一个手指位置信息对应所述虚拟键盘中的一个原始按键位置信息,所述获取单元包括:
获取模块,用于当检测到所述用户对所述虚拟图像存在操作动作时,获取与所述操作动作对应的手指水平位移信息以及手指弯曲位移信息;
确定模块,用于根据记录的所述用户的手指位置信息以及与所述手指位置信息对应的原始按键位置信息,确定在所述虚拟键盘中与所述手指水平位移信息对应的目标按键位置信息;
获取模块,还用于根据所述目标按键位置信息以及所述手指弯曲位移信息,获取在所述虚拟键盘中与所述操作动作对应的按键信息。
10.根据权利要求8所述的基于虚拟现实设备的输入装置,其特征在于,所述记录单元包括:
记录模块,用于记录所述用户根据所述使用向导图像确定的与预设手指标识对应的手指位置信息;
获取模块,用于通过外置摄像机获取所述用户的手指间的距离信息;
确定模块,用于根据所述手指位置信息以及所述手指间的距离信息,确定用户的每个手指位置信息。
11.根据权利要求7所述的基于虚拟现实设备的输入装置,其特征在于,所述装置还包括:
显示单元,用于对确定的所述用户输入的信息进行显示;
调整单元,用于当接收到所述用户输入的重置指令时,根据所述用户输入的信息,调整所述虚拟键盘的布局。
12.根据权利要求7所述的基于虚拟现实设备的输入装置,其特征在于,所述装置还包括:
调整单元,用于在用户使用所述虚拟现实设备的过程中,当所述用户的视角位置发生变化时,对所述预设识别区域进行相应调整。
CN201610786304.4A 2016-08-30 2016-08-30 基于虚拟现实设备的输入方法及装置 Pending CN106354412A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610786304.4A CN106354412A (zh) 2016-08-30 2016-08-30 基于虚拟现实设备的输入方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610786304.4A CN106354412A (zh) 2016-08-30 2016-08-30 基于虚拟现实设备的输入方法及装置

Publications (1)

Publication Number Publication Date
CN106354412A true CN106354412A (zh) 2017-01-25

Family

ID=57856210

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610786304.4A Pending CN106354412A (zh) 2016-08-30 2016-08-30 基于虚拟现实设备的输入方法及装置

Country Status (1)

Country Link
CN (1) CN106354412A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107168541A (zh) * 2017-04-07 2017-09-15 北京小鸟看看科技有限公司 一种输入的实现方法和装置
CN107340962A (zh) * 2017-04-13 2017-11-10 北京安云世纪科技有限公司 基于虚拟现实设备的输入方法、装置及虚拟现实设备
CN108537410A (zh) * 2018-03-16 2018-09-14 厦门攸信信息技术有限公司 一种提高产线工人操作效率的方法和系统
CN110888529A (zh) * 2019-11-18 2020-03-17 珠海全志科技股份有限公司 虚拟现实场景控制方法、虚拟现实设备及其控制装置
CN111860239A (zh) * 2020-07-07 2020-10-30 佛山长光智能制造研究院有限公司 按键识别方法、装置、终端设备及计算机可读存储介质
CN113031847A (zh) * 2021-04-29 2021-06-25 中国工商银行股份有限公司 基于vr技术的数据输入方法及装置、电子设备及存储介质
CN113282168A (zh) * 2021-05-08 2021-08-20 青岛小鸟看看科技有限公司 头戴式显示设备的信息输入方法、装置及头戴式显示设备
CN114579034A (zh) * 2022-03-02 2022-06-03 北京字节跳动网络技术有限公司 一种信息交互方法、装置、显示设备及存储介质
CN115113795A (zh) * 2022-05-25 2022-09-27 海信视像科技股份有限公司 虚拟键盘校准方法、装置、电子设备和介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016010797A1 (en) * 2014-07-15 2016-01-21 Microsoft Technology Licensing, Llc Holographic keyboard display

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016010797A1 (en) * 2014-07-15 2016-01-21 Microsoft Technology Licensing, Llc Holographic keyboard display

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107168541A (zh) * 2017-04-07 2017-09-15 北京小鸟看看科技有限公司 一种输入的实现方法和装置
CN107340962A (zh) * 2017-04-13 2017-11-10 北京安云世纪科技有限公司 基于虚拟现实设备的输入方法、装置及虚拟现实设备
CN108537410A (zh) * 2018-03-16 2018-09-14 厦门攸信信息技术有限公司 一种提高产线工人操作效率的方法和系统
CN108537410B (zh) * 2018-03-16 2022-03-22 厦门攸信信息技术有限公司 一种提高产线工人操作效率的方法和系统
CN110888529A (zh) * 2019-11-18 2020-03-17 珠海全志科技股份有限公司 虚拟现实场景控制方法、虚拟现实设备及其控制装置
CN110888529B (zh) * 2019-11-18 2023-11-21 珠海全志科技股份有限公司 虚拟现实场景控制方法、虚拟现实设备及其控制装置
CN111860239A (zh) * 2020-07-07 2020-10-30 佛山长光智能制造研究院有限公司 按键识别方法、装置、终端设备及计算机可读存储介质
CN113031847A (zh) * 2021-04-29 2021-06-25 中国工商银行股份有限公司 基于vr技术的数据输入方法及装置、电子设备及存储介质
CN113282168A (zh) * 2021-05-08 2021-08-20 青岛小鸟看看科技有限公司 头戴式显示设备的信息输入方法、装置及头戴式显示设备
CN114579034A (zh) * 2022-03-02 2022-06-03 北京字节跳动网络技术有限公司 一种信息交互方法、装置、显示设备及存储介质
CN115113795A (zh) * 2022-05-25 2022-09-27 海信视像科技股份有限公司 虚拟键盘校准方法、装置、电子设备和介质

Similar Documents

Publication Publication Date Title
CN106354412A (zh) 基于虚拟现实设备的输入方法及装置
JP7026267B2 (ja) アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム
CN110738211B (zh) 一种对象检测的方法、相关装置以及设备
WO2019120032A1 (zh) 模型构建方法、拍照方法、装置、存储介质及终端
CN109885245B (zh) 应用控制方法、装置、终端设备及计算机可读取存储介质
US20170192500A1 (en) Method and electronic device for controlling terminal according to eye action
CN112684970B (zh) 虚拟场景的适配显示方法、装置、电子设备及存储介质
US20140329593A1 (en) Text entry using game controller
CN105431813A (zh) 基于生物计量身份归属用户动作
CN111672109B (zh) 一种游戏地图生成的方法、游戏测试的方法以及相关装置
CN105094538B (zh) 一种信息处理方法及电子设备
US11308694B2 (en) Image processing apparatus and image processing method
CN106474738A (zh) 一种基于指纹识别的虚拟电子琴弹奏方法及装置
CN103106388B (zh) 图像识别方法和系统
CN105607851A (zh) 用于触摸终端的场景控制方法及设备
CN113350779A (zh) 游戏虚拟角色动作控制方法及装置、存储介质及电子设备
CN112402971B (zh) 虚拟对象控制方法、装置、计算机设备及存储介质
EP4307096A1 (en) Key function execution method, apparatus and device, and storage medium
CN108153475B (zh) 一种对象位置切换方法以及移动终端
CN108307044A (zh) 一种终端操作方法及设备
CN113680054A (zh) 基于计算机视觉库的游戏交互方法及装置
CN108543308A (zh) 虚拟场景中的虚拟对象的选择方法和装置
CN111818390A (zh) 视频截取方法、装置及电子设备
WO2021128414A1 (zh) 一种可穿戴设备及其输入方法
CN108829329B (zh) 一种操作对象展示方法、装置和可读介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170125

WD01 Invention patent application deemed withdrawn after publication