CN114706490A - 一种鼠标的模型映射方法、装置、设备和存储介质 - Google Patents

一种鼠标的模型映射方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN114706490A
CN114706490A CN202210187245.4A CN202210187245A CN114706490A CN 114706490 A CN114706490 A CN 114706490A CN 202210187245 A CN202210187245 A CN 202210187245A CN 114706490 A CN114706490 A CN 114706490A
Authority
CN
China
Prior art keywords
mouse
virtual reality
mouse model
reality system
target information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210187245.4A
Other languages
English (en)
Inventor
罗子雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sosi Information Technology Co ltd
Original Assignee
Beijing Sosi Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sosi Information Technology Co ltd filed Critical Beijing Sosi Information Technology Co ltd
Priority to CN202210187245.4A priority Critical patent/CN114706490A/zh
Publication of CN114706490A publication Critical patent/CN114706490A/zh
Priority to PCT/CN2023/078398 priority patent/WO2023160697A1/zh
Priority to US18/176,249 priority patent/US11995254B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及一种鼠标的模型映射方法、装置、设备和存储介质。方法具体包括:确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,将该目标信息作为初始目标信息,同时实时接收鼠标设备的移动数据,移动数据包括鼠标设备移动的距离和方向,再根据鼠标设备的移动数据,更新鼠标模型在虚拟现实系统中的目标信息,并在虚拟现实场景中、更新后的目标信息处显示鼠标模型。本公开提供的鼠标的模型的映射方法,能够将现实空间中的鼠标设备对应的鼠标模型快速、准确的映射到虚拟现实场景中,便于后续用户根据虚拟现实场景中的鼠标模型,高效的使用鼠标设备进行交互。

Description

一种鼠标的模型映射方法、装置、设备和存储介质
技术领域
本公开涉及数据技术领域,尤其涉及一种鼠标的模型映射方法、装置、设备和存储介质。
背景技术
目前,虚拟场景应用广泛,可以将实体设备虚拟到虚拟场景中,现有方法通常使用摄像头拍摄鼠标的彩色或灰度等各类图像,再通过图像识别确定鼠标的型号和定位鼠标的位置,但是,当出现摄像头和鼠标之间被遮挡的情况时,识别结果极易被影响,甚至出现识别失效的情况。或者,通常还可以在鼠标上加装定位装置,但是该种方法需要先安装定位装置在鼠标上,无法方便快速的使用鼠标。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种鼠标的模型映射方法、装置、设备和存储介质,能够将现实空间中的鼠标设备准确的映射到虚拟现实场景中,便于后续根据虚拟现实场景中的鼠标模型,使用鼠标设备进行交互操作。
第一方面,本公开实施例提供了一种鼠标的模型映射方法,包括:
确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息;
接收鼠标设备的移动数据;
根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息;
基于更新后的目标信息,将鼠标模型映射到虚拟现实系统对应的虚拟现实场景中。
第二方面,本公开实施例提供了一种鼠标的模型映射装置,包括:
确定单元,用于确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息;
接收单元,用于接收鼠标设备的移动数据;
更新单元,用于根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息;
映射单元,用于基于更新后的目标信息,将鼠标模型映射到虚拟现实系统对应的虚拟现实场景中。
第三方面,本公开实施例提供了一种电子设备,包括:
存储器;
处理器;以及
计算机程序;
其中,计算机程序存储在存储器中,并被配置为由处理器执行以实现如上述的鼠标的模型映射方法。
第四方面,本公开实施例提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现如上述的鼠标的模型映射方法的步骤。
第五方面,本公开实施例提供了一种计算机程序产品,该计算机程序产品包括计算机程序或指令,该计算机程序或指令被处理器执行时实现如上所述的鼠标的模型映射方法。
本公开实施例提供的一种鼠标的模型映射方法,通过获取鼠标设备的相关数据,相关数据具体包括鼠标设备的配置信息、鼠标设备上元件对应的输入信号和鼠标设备的图像等,随后可以基于鼠标设备的相关数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,该目标信息可以看作是初始目标信息,同时实时接收鼠标设备移动时生成的移动数据,移动数据中包括鼠标的移动距离和方向等,最后根据鼠标设备的移动数据,更新鼠标模型在虚拟现实系统中的目标信息,并在虚拟现实场景中、更新后的目标信息处显示鼠标模型。本公开的鼠标的模型映射方法,能够将现实空间中的鼠标设备准确的映射到虚拟现实场景中,便于后续用户根据虚拟现实场景中的鼠标模型,高效的使用鼠标设备进行交互操作。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种应用场景的示意图;
图2为本公开实施例提供的一种鼠标的模型映射方法的流程示意图;
图3a为本公开实施例提供的另一种应用场景的示意图;
图3b为本公开实施例提供的一种虚拟现实场景的示意图;
图4为本公开实施例提供的一种鼠标的模型映射方法的流程示意图;
图5为本公开实施例提供的一种鼠标的模型映射方法的流程示意图;
图6为本公开实施例提供的一种鼠标的模型映射装置的结构示意图;
图7为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
虚拟现实系统包括头戴式显示器和虚拟现实软件系统,虚拟现实软件系统包括操作系统、用于图像识别的软件算法、用于空间计算的软件算法和用于渲染虚拟场景的渲染软件(渲染后的虚拟场景显示在头戴式显示器的显示屏幕上),其中虚拟现实软件系统可以配置在头戴式显示器上,头戴式显示设备会直接连接摄像头和鼠标等,可以理解为一体机;虚拟现实软件系统还可以配置在和头戴式显示器连接的主机上,摄像头以及鼠标和主机相连接,可以理解为分体机。参见图1,图1为本公开实施例提供的一种应用场景的示意图,图1中包括头戴式显示器110,下述实施例以头戴式显示器110上运行虚拟现实软件系统(一体机)为例进行说明,头戴式显示器连接的主机上运行的虚拟现实软件系统执行本公开提供的鼠标的模型映射方法
针对上述技术问题,本公开实施例提供了一种鼠标的模型映射方法,获取鼠标设备的相关数据,随后基于鼠标设备的相关数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,可以将鼠标模型在虚拟现实系统中的目标信息作为初始目标信息,同时实时获取鼠标设备的移动数据,移动数据用于表示鼠标的移动距离和方向,随后基于鼠标设备的移动数据,更新鼠标模型在虚拟现实系统中的目标信息,并在虚拟现实场景中、更新后的目标信息处显示鼠标模型,能够将现实空间中的鼠标设备对应的鼠标模型准确的映射到虚拟现实场景中,便于后续用户根据虚拟现实场景中显示的鼠标模型,高效的使用现实空间中的鼠标设备进行交互操作。本公开基于鼠标本身和虚拟现实软件系统之间的操作信号,来确定鼠标模型的目标信息,不受遮挡问题影响,也不需要先加装其他定位装置,便于实施且使用方便。具体的,通过下述一个或多个实施例对鼠标的模型映射方法进行详细说明。
图2为本公开实施例提供的一种鼠标的模型映射方法的流程示意图,应用于虚拟现实系统,具体包括如图2所示如下的步骤S210至S240:
可理解的,虚拟现实软件系统可以配置在头戴式显示器中,虚拟现实软件系统可以对接收到的由鼠标设备传输的数据进行处理,并将处理结果返回至头戴式显示器中的显示屏幕,随后显示屏幕根据处理结果改变虚拟现实场景中各物件的显示状态。
示例性的,参见图3a,图3a为本公开实施例提供的另一种应用场景的示意图,图3a中包括鼠标设备310、头戴式显示器320和用户手部330,用户头部佩戴头戴式显示器320,手部330操作鼠标设备310,鼠标设备310和头戴式显示器320连接;图3b中的340是图3a中头戴式显示器320内构建的场景,可以称为虚拟现实场景340,也就是佩戴头显的用户可以看到的场景。本公开实施例提供的方法能够根据鼠标设备310在现实空间中的空间位置和姿态,将鼠标设备310对应的鼠标模型350映射到头戴式显示器320构建的虚拟现实场景340中,实现用户观看虚拟现实场景340中显示的鼠标模型350来了解并操控鼠标设备310,在虚拟现实场景340中手部模型360操作鼠标模型350的操作情况和用户手部330实际使用鼠标310进行操作的情况在一定程度上可以同步,相当于用户双眼直接看到鼠标设备中的元件并进行后续操作,提高了用户的使用体验,也提高了交互速度。可理解的,下述实施例提供的鼠标的模型映射方法以图3a所示的应用场景为例进行说明。
S210、确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息。
可选的,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息具体包括如下步骤:获取鼠标设备的相关数据;鼠标设备的相关数据包括鼠标设备的配置信息,配置信息包括型号信息;在基于鼠标设备的相关数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息之前,还可以根据型号信息,确定鼠标设备对应的鼠标模型。
可理解的,虚拟现实软件系统获取鼠标设备的相关数据,其中,鼠标设备的相关数据具体包括鼠标设备的配置信息、鼠标设备上元件对应的输入信号和鼠标设备的图像等。虚拟现实软件系统获取鼠标的配置信息,配置信息中可以包括鼠标的型号信息,鼠标的不同型号设置的各元件的分布以及各元件之间的距离不同,其中元件可以是鼠标上设置的按键或者标识,按键包括左键、右键、滚轮和侧键等,标识可以是鼠标的标志或者预先在鼠标上设置的标识等;随后根据鼠标设备的型号选择该鼠标对应的鼠标模型,该鼠标模型可以从预先构建的模型数据库中比对分析后选择,选择确定的是该型号的鼠标对应的精确的鼠标模型或是与鼠标中元件分布相似的三维模型。根据鼠标设备的配置信息确定鼠标设备对应的鼠标模型后,虚拟现实软件系统可以基于鼠标设备的输入信号或鼠标设备的图像,确定鼠标模型在虚拟现实系统中的目标信息,其中目标信息包括位置信息和姿态信息。
可理解的,图3a中显示的头戴式显示器320会配置多个摄像头,通过摄像头拍摄到的环境信息和头部佩戴的头戴式显示器的位置关系,构建空间,该空间可以称为目标空间,图3a中的鼠标设备和用户手部就在确定的目标空间内。其中,位置信息是指字符在目标空间中的空间三维坐标(XYZ),姿态信息是指字符在目标空间中的方向属性信息,例如字符在目标空间中的旋转角、俯仰角和翻滚角等,空间三维坐标是指在目标空间内的三维坐标,姿态信息是指在目标空间内的姿态。可理解的是,虚拟现实场景中显示的场景是目标空间内的场景。
可选的,上述基于鼠标设备的数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,具体包括:基于鼠标设备的输入信号,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息。
可选的,上述基于鼠标设备的数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,还可以包括:基于鼠标设备的图像,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息。
可选的,确定鼠标模型在虚拟现实系统中的目标信息之后,在虚拟现实场景中映射鼠标模型。
S220、接收鼠标设备的移动数据。
可理解的,鼠标设备和头戴式显示器通过蓝牙协议或者通用串行总线(UniversalSerial Bus,USB)连接协议连接,头戴式显示器上运行的虚拟现实软件系统会通过连接协议接收到鼠标设备进行移动时的移动数据,具体的,当用户移动鼠标时,可以通过鼠标设备的输入信号获得鼠标设备的移动数据,鼠标还可以是无线鼠标,鼠标的类型具体不作限定,虚拟现实软件系统只接收和头戴式显示器相连的鼠标产生的移动数据随即可。具体的,移动数据包括鼠标的移动距离和移动方向。
S230、根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息。
可理解的,在上述S210和S220的基础上,虚拟现实软件系统根据接收的鼠标的移动数据,重新确定鼠标模型在虚拟现实系统中的目标信息,该目标信息可以理解为移动后的鼠标基于初始目标信息的相对位置信息,并在虚拟现实场景中、在重新确定的目标信息处显示鼠标模型。确定鼠标模型在虚拟现实场景中的初始目标信息后,现实空间中的鼠标设备可能会发生移动,此时,就可以基于初始目标信息,根据虚拟现实软件系统接收到的鼠标设备的移动数据,重新确定鼠标模型在虚拟现实系统中的目标信息,该目标信息是相对于初始目标信息确定的。例如,确定的鼠标对应的初始目标信息中的空间坐标(空间三维坐标)为(1,2,3),鼠标的移动数据中表示鼠标的移动距离为2,移动方向为沿着X轴,此时,重新确定鼠标模型在虚拟现实系统中的目标信息中的空间坐标为(3,2,3)。
S240、基于更新后的目标信息,将鼠标模型映射到虚拟现实系统对应的虚拟现实场景中。
可理解的,在上述S230的基础上,更新鼠标模型在目标空间中的目标信息后,在虚拟现实场景中、在重新确定的目标信息处显示鼠标模型,其中虚拟现实场景显示的是目标空间内的场景。
本公开实施例提供的一种鼠标的模型映射方法,通过获取鼠标设备的相关数据,随后基于鼠标设备的相关数据,确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息,同时实时接收鼠标设备的移动数据,再根据鼠标设备的输入信号获得的移动数据,更新鼠标模型在虚拟现实系统中的目标信息,并在虚拟现实场景中、更新后的目标信息处显示鼠标模型。本公开的鼠标的模型映射方法,能够将现实空间中的鼠标设备准确的映射到虚拟现实场景中,遮挡的影响比较小,便于后续用户根据虚拟现实场景中的鼠标模型,高效的使用鼠标设备进行交互操作。
在上述实施例的基础上,图4为本公开实施例提供的一种鼠标的模型映射方法的流程示意图,目标信息包括空间坐标位置,空间坐标位置是指鼠标模型在目标空间的位置,可选的,根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息,具体包括如图4所示的如下步骤S410至S430:
S410、将鼠标模型在虚拟现实系统中的空间坐标位置作为初始空间坐标位置。
可理解的,将上述计算得到的鼠标模型在虚拟现实系统中的目标信息中的空间坐标位置作为初始空间坐标位置,初始坐标位置是后续移动数据的参考坐标,移动数据可以理解为二维数据,移动数据具体包括移动方向和移动距离,也就是鼠标模型基于初始坐标位置移动的距离和方向。
可理解的,虚拟现实软件系统可以接收鼠标移动时产生的多组移动数据,多组移动数据可以计算出鼠标设备的空间坐标位置和姿态信息,对于检测到的空间坐标位置需要给定初始空间坐标位置,相当于给定空间坐标位置一个坐标系或坐标原点,以明确后续采集到的鼠标的移动轨迹的起点,多个空间坐标位置就可以表示鼠标的移动轨迹。移动轨迹可能是包括向右平移等一系列鼠标移动后的空间坐标位置,若没有给定初始空间坐标位置则无法准确的确定是从何处向右平移的以及平移后的具体位置,因此需要确定一个初始空间坐标位置,来准确的确定鼠标设备移动后的具体位置,初始空间坐标位置是在上述构建的以头部为中心的目标空间内,该具体位置也是在同一目标空间内的。
S420、确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量。
可理解的,确定移动数据中移动距离和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,将数据中移动距离记为第一距离,将鼠标模型在虚拟现实系统中的移动距离记为第二距离,也就是确定第一距离和第二距离之间的对应关系量,例如,移动数据中移动距离为5个单位距离,相当于鼠标模型移动了1个单位距离,鼠标模型和鼠标设备是同步的,因此鼠标设备也移动了1个单位距离,此时第二距离和第一距离之间的对应关系量为5。
可选的,确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,包括:获取鼠标设备的操作参数;根据操作参数,确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量。
具体的,可以根据虚拟现实软件系统中设置的鼠标操作参数来确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量。
可选的,确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,包括:获取手部模型在虚拟现实系统中第一预设特征点处的第一目标信息,并根据第一目标信息,确定鼠标模型在虚拟现实系统中第一预设特征点处的第二目标信息;获取手部模型在虚拟现实系统中第二预设特征点处的第三目标信息,并根据第三目标信息,确定鼠标模型在虚拟现实系统中第二预设特征点处的第四目标信息;根据第四目标信息和第二目标信息,计算鼠标模型在虚拟现实系统中的移动距离;根据移动数据和移动距离,计算对应关系量。
可理解的,根据移动数据,得到鼠标设备更新后的姿态信息和移动轨迹,具体可以通过获取虚拟现实软件系统设置的鼠标的相关操作参数或者映射校准等方法来实现。下述以映射校准方法为例进行说明。其中,映射校准方式为在显示屏中显示两个预设特征点,具体可以记为第一预设特征点A和第二预设特征点B,此时可以在显示屏上显示引导提示信息,来引导用户用鼠标左键点击显示屏上的A点,用户使用鼠标点击A点后,显示屏上的鼠标光标在A点,获取此时手部模型中手指在A点处的第一目标信息,并根据第一目标信息确定鼠标模型中左键在A点的第二目标信息。然后引导用户移动鼠标到B点,鼠标左键点击B点,同样获取此时手部模型中手指在B点处的第三目标信息,并根据第三目标信息确定鼠标模型中左键在B点处的第三目标信息;随后根据第四目标信息和第二目标信息,计算鼠标模型在虚拟现实系统中的移动距离,也就是通过两个特征点的位置计算鼠标模型的移动距离;最后根据移动数据和计算得到的移动距离,计算对应关系量,例如根据鼠标在A点按下时产生的第一移动数据和在B点按下时产生的第二移动数据,确定第一移动数据和第二移动数据之间的移动距离,也就是鼠标信号对应的移动距离,根据鼠标模型在A点和B点的目标信息,计算鼠标模型在目标空间中的移动距离,从而计算鼠标信号的移动距离(移动数据)与鼠标模型在目标空间中的移动距离之间的映射关系。
S430、根据初始空间坐标位置、移动数据和对应关系量,计算鼠标模型在虚拟现实系统中的空间坐标位置。
可理解的,在上述S410和S420的基础上,根据初始空间坐标位置、移动数据和对应关系量,计算鼠标模型在虚拟现实系统中的空间坐标位置,也就是给定基准点、对应关系以及移动距离后,得到更新后的空间坐标位置。
可选的,上述S430具体包括如下步骤:根据移动数据和对应关系量计算鼠标模型的移动偏移量;根据移动偏移量和初始空间坐标位置,计算鼠标模型在虚拟现实系统中的空间坐标位置。
可理解的,根据移动数据中的移动方向和移动距离以及对应关系量计算移动偏移量,例如移动数据中移动方向为X轴的方向,移动距离为10个单位距离,根据上述确定的对应关系量为移动数据中移动距离为5个单位距离,相当于鼠标模型移动了1个单位距离,也相当于鼠标设备移动了1个单位距离,可以计算得到鼠标模型的移动偏移量为2个单位距离,此时移动偏移量可以以(2,0,0)三维坐标的形式表示,说明鼠标模型沿着X轴的正方向移动了2个单位距离,其他轴不变;随后,根据确定的鼠标模型的初始空间坐标位置和移动偏移量,得到当前鼠标模型在虚拟现实系统中的空间坐标位置,例如,鼠标模型的初始空间坐标位置为(2,2,2),也就是XYZ三维坐标是(2,2,2),通过初始空间坐标位置(2,2,2)以及移动偏移量(2,0,0),计算得到当前鼠标模型在虚拟现实系统中的空间坐标位置为(4,2,2)。
可理解的,在现实空间中当用户按下或者抬起鼠标上的某个按键和滚动鼠标滚轮的时候,虚拟现实系统会通过蓝牙协议或者通用串行总线(Universal Serial Bus,USB)连接协议接收到该按键按下或者抬起和滚轮滚动时的输入信号。此时,虚拟现实软件系统触发虚拟现实场景中与鼠标结构一致的鼠标模型上的对应按键按下或者抬起和滚轮转动。从而实现用户在现实空间中对鼠标的操作,在虚拟现实场景中相应的显示的功能。用户就能够通过使用现实空间中的鼠标,对虚拟现实场景中的界面和物体进行鼠标交互操作,极大的提高了交互的效率。
可选的,方法还包括:更新初始空间坐标位置;根据更新后的初始空间坐标位置校正计算误差。
本公开实施例提供的一种鼠标的模型映射方法,确定鼠标模型在虚拟现实系统中的初始空间坐标位置后,确定鼠标设备的移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,并以该初始空间坐标位置为基准,根据初始空间坐标位置、移动数据和对应关系量,重新计算鼠标模型在虚拟现实系统中的空间坐标位置,以便于根据现实空间中的鼠标设备的状态实时、快速、准确的更新鼠标模型在虚拟现实场景中的显示状态。
在上述实施例的基础上,图5为本公开实施例提供的一种鼠标的模型映射方法的流程示意图,目标信息中还包括姿态信息,姿态信息可以理解为鼠标模型在目标空间内的姿态;可选的,根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息,具体还包括如图5所示的如下步骤S510至S530:
S510、将鼠标模型在虚拟现实系统中的姿态信息中的朝向作为初始朝向。
可理解的,将上述确定的鼠标模型在虚拟现实系统中的目标信息中的姿态信息中表示的鼠标模型的朝向作为初始朝向,目标信息中的初始朝向可以由上述图像识别方法或按下按键方法获得。
S520、根据初始朝向和移动数据,计算鼠标设备的朝向。
可理解的,在上述S510的基础上,根据初始朝向和移动数据中鼠标设备的移动方向和移动距离,计算鼠标设备当前的朝向。
S530、根据鼠标设备的朝向和鼠标设备所在的平面,计算鼠标模型在虚拟现实系统中的姿态信息。
可理解的,在上述S520的基础上,确定显示空间中鼠标设备所在平面,具体可以根据上述图像识别方法或按下按键方法获得,随后根据鼠标设备的当前朝向和鼠标设备所在的平面,确定鼠标设备的姿态信息,可理解的是,鼠标设备也在目标空间内,虚拟现实场景中显示的也是目标空间内实体设备的模型,因此鼠标设备的姿态信息就是鼠标模型的姿态信息。
本公开实施例提供的一种鼠标的模型映射方法,通过确定鼠标设备的朝向和鼠标设备所在的平面,确定鼠标模型在虚拟现实场景中的姿态信息,不受遮挡的影响,且便于实施,还便于后续根据虚拟场景中鼠标模型,高效的使用鼠标设备,快速完成交互操作。
图6为本公开实施例提供的鼠标的模型映射装置的结构示意图。本公开实施例提供的鼠标的模型映射装置可以执行上述鼠标的模型映射方法实施例提供的处理流程,如图6所示,装置600包括:
确定单元610,用于确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息;
获取单元620,用于接收鼠标设备的移动数据;
更新单元630,用于根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息;
映射单元640,用于基于更新后的目标信息,将鼠标模型映射到虚拟现实系统对应的虚拟现实场景中。
可选的,装置600中目标信息包括空间坐标位置。
可选的,更新单元630中根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息,具体用于:
将鼠标模型在虚拟现实系统中的空间坐标位置作为初始空间坐标位置;
确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量;
根据初始空间坐标位置、移动数据和对应关系量,计算鼠标模型在虚拟现实系统中的空间坐标位置。
可选的,更新单元630中根据初始空间坐标位置、移动数据和对应关系量,计算鼠标模型在虚拟现实系统中的空间坐标位置,具体用于:
根据移动数据和所述对应关系量计算鼠标模型的移动偏移量;
根据移动偏移量和初始空间坐标位置,计算鼠标模型在虚拟现实系统中的空间坐标位置。
可选的,更新单元630中确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,具体用于:
获取鼠标设备的操作参数;
根据操作参数,确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量。
可选的,更新单元630中确定移动数据和鼠标模型在虚拟现实系统中的移动距离之间的对应关系量,具体用于:
获取手部模型在虚拟现实系统中第一预设特征点处的第一目标信息,并根据第一目标信息,确定鼠标模型在虚拟现实系统中第一预设特征点处的第二目标信息;
获取手部模型在虚拟现实系统中第二预设特征点处的第三目标信息,并根据第三目标信息,确定鼠标模型在虚拟现实系统中第二预设特征点处的第四目标信息;
根据第四目标信息和第二目标信息,计算鼠标模型在虚拟现实系统中的移动距离;
根据移动数据和移动距离,计算对应关系量。
可选的,装置600中目标信息包括姿态信息。
可选的,更新单元630中根据移动数据,更新鼠标模型在虚拟现实系统中的目标信息,具体用于:
将鼠标模型在虚拟现实系统中的姿态信息中的朝向作为初始朝向;
根据初始朝向和移动数据,计算鼠标设备的朝向;
根据鼠标设备的朝向和鼠标设备所在的平面,计算鼠标模型在虚拟现实系统中的姿态信息。
图6所示实施例的鼠标的模型映射装置可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图7为本公开实施例提供的一种电子设备的结构示意图。本公开实施例提供的电子设备可以执行上述实施例提供的处理流程,如图7所示,电子设备700包括:处理器710、通讯接口720和存储器730;其中,计算机程序存储在存储器730中,并被配置为由处理器710执行如上述的鼠标的模型映射方法。
另外,本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行以实现上述实施例的鼠标的模型映射方法。
此外,本公开实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机程序或指令,该计算机程序或指令被处理器执行时实现如上的鼠标的模型映射方法。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (11)

1.一种鼠标的模型映射方法,其特征在于,包括:
确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息;
接收所述鼠标设备的移动数据;
根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息;
基于更新后的所述目标信息,将所述鼠标模型映射到所述虚拟现实系统对应的虚拟现实场景中。
2.根据权利要求1所述的方法,其特征在于,所述目标信息包括空间坐标位置;所述根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息,包括:
将所述鼠标模型在所述虚拟现实系统中的空间坐标位置作为初始空间坐标位置;
确定所述移动数据和所述鼠标模型在所述虚拟现实系统中的移动距离之间的对应关系量;
根据所述初始空间坐标位置、所述移动数据和所述对应关系量,计算所述鼠标模型在所述虚拟现实系统中的空间坐标位置。
3.根据权利要求2所述的方法,其特征在于,所述根据所述初始空间坐标位置、所述移动数据和所述对应关系量,计算所述鼠标模型在所述虚拟现实系统中的空间坐标位置,包括:
根据所述移动数据和所述对应关系量计算所述鼠标模型的移动偏移量;
根据所述移动偏移量和所述初始空间坐标位置,计算所述鼠标模型在所述虚拟现实系统中的空间坐标位置。
4.根据权利要求2所述的方法,其特征在于,所述确定所述移动数据和所述鼠标模型在所述虚拟现实系统中的移动距离之间的对应关系量,包括:
获取所述鼠标设备的操作参数;
根据所述操作参数,确定所述移动数据和所述鼠标模型在所述虚拟现实系统中的移动距离之间的对应关系量。
5.根据权利要求2所述的方法,其特征在于,所述确定所述移动数据和所述鼠标模型在所述虚拟现实系统中的移动距离之间的对应关系量,包括:
获取手部模型在所述虚拟现实系统中第一预设特征点处的第一目标信息,并根据所述第一目标信息,确定所述鼠标模型在所述虚拟现实系统中所述第一预设特征点处的第二目标信息;
获取所述手部模型在所述虚拟现实系统中第二预设特征点处的第三目标信息,并根据所述第三目标信息,确定所述鼠标模型在所述虚拟现实系统中所述第二预设特征点处的第四目标信息;
根据所述第四目标信息和所述第二目标信息,计算所述鼠标模型在所述虚拟现实系统中的移动距离;
根据所述移动数据和所述移动距离,计算对应关系量。
6.根据权利要求1所述的方法,其特征在于,所述目标信息包括姿态信息;所述根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息,包括:
将所述鼠标模型在所述虚拟现实系统中的姿态信息中的朝向作为初始朝向;
根据所述初始朝向和所述移动数据,计算所述鼠标设备的朝向;
根据所述鼠标设备的朝向和所述鼠标设备所在的平面,计算所述鼠标模型在所述虚拟现实系统中的姿态信息。
7.一种鼠标的模型映射装置,其特征在于,包括:
确定单元,用于确定鼠标设备对应的鼠标模型在虚拟现实系统中的目标信息;
接收单元,用于接收所述鼠标设备的移动数据;
更新单元,用于根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息;
映射单元,用于基于更新后的所述目标信息,将所述鼠标模型映射到所述虚拟现实系统对应的虚拟现实场景中。
8.根据权利要求7所述的装置,其特征在于,所述目标信息包括空间坐标位置;所述更新单元中根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息,具体用于:
将所述鼠标模型在所述虚拟现实系统中的空间坐标位置作为初始空间坐标位置;
确定所述移动数据和所述鼠标模型在所述虚拟现实系统中的移动距离之间的对应关系量;
根据所述初始空间坐标位置、所述移动数据和所述对应关系量,计算所述鼠标模型在所述虚拟现实系统中的空间坐标位置。
9.根据权利要求7所述的装置,其特征在于,所述目标信息包括姿态信息;所述根据所述移动数据,更新所述鼠标模型在所述虚拟现实系统中的目标信息,具体用于:
将所述鼠标模型在所述虚拟现实系统中的姿态信息中的朝向作为初始朝向;
根据所述初始朝向和所述移动数据,计算所述鼠标设备的朝向;
根据所述鼠标设备的朝向和所述鼠标设备所在的平面,计算所述鼠标模型在所述虚拟现实系统中的姿态信息。
10.一种电子设备,其特征在于,包括:
存储器;
处理器;以及
计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行以实现如权利要求1至6中任一所述的鼠标的模型映射方法。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6中任一所述的鼠标的模型映射方法的步骤。
CN202210187245.4A 2022-02-28 2022-02-28 一种鼠标的模型映射方法、装置、设备和存储介质 Pending CN114706490A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202210187245.4A CN114706490A (zh) 2022-02-28 2022-02-28 一种鼠标的模型映射方法、装置、设备和存储介质
PCT/CN2023/078398 WO2023160697A1 (zh) 2022-02-28 2023-02-27 一种鼠标的模型映射方法、装置、设备和存储介质
US18/176,249 US11995254B2 (en) 2022-02-28 2023-02-28 Methods, devices, apparatuses, and storage media for mapping mouse models for computer mouses

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210187245.4A CN114706490A (zh) 2022-02-28 2022-02-28 一种鼠标的模型映射方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN114706490A true CN114706490A (zh) 2022-07-05

Family

ID=82166180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210187245.4A Pending CN114706490A (zh) 2022-02-28 2022-02-28 一种鼠标的模型映射方法、装置、设备和存储介质

Country Status (3)

Country Link
US (1) US11995254B2 (zh)
CN (1) CN114706490A (zh)
WO (1) WO2023160697A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115827282A (zh) * 2023-02-14 2023-03-21 北京铁力山科技股份有限公司 鼠标漫游方法、装置、设备及存储介质
WO2023160697A1 (zh) * 2022-02-28 2023-08-31 北京所思信息科技有限责任公司 一种鼠标的模型映射方法、装置、设备和存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117311562B (zh) * 2023-11-28 2024-02-20 北京蓝天航空科技股份有限公司 基于鼠标控制的航空模拟器视景视角实时控制方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105068679A (zh) * 2015-07-22 2015-11-18 深圳多新哆技术有限责任公司 调整虚拟物件在虚拟空间中位置的方法及装置
CN105096384A (zh) * 2015-07-22 2015-11-25 深圳多新哆技术有限责任公司 调整虚拟物件位置及姿态角的方法及装置
US20180284982A1 (en) * 2017-04-01 2018-10-04 Intel Corporation Keyboard for virtual reality
US20190227693A1 (en) * 2018-01-25 2019-07-25 Institute For Information Industry Virtual space positioning method and apparatus

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10943402B2 (en) * 2018-03-20 2021-03-09 Logitech Europe S.A. Method and system for mixed reality interaction with peripheral device
CN112486321B (zh) * 2020-11-30 2022-12-13 郑州捷安高科股份有限公司 三维模型操作控制方法、装置以及终端设备
CN114706490A (zh) * 2022-02-28 2022-07-05 北京所思信息科技有限责任公司 一种鼠标的模型映射方法、装置、设备和存储介质
CN114706489B (zh) * 2022-02-28 2023-04-25 北京所思信息科技有限责任公司 一种输入设备的虚拟方法、装置、设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105068679A (zh) * 2015-07-22 2015-11-18 深圳多新哆技术有限责任公司 调整虚拟物件在虚拟空间中位置的方法及装置
CN105096384A (zh) * 2015-07-22 2015-11-25 深圳多新哆技术有限责任公司 调整虚拟物件位置及姿态角的方法及装置
US20180284982A1 (en) * 2017-04-01 2018-10-04 Intel Corporation Keyboard for virtual reality
US20190227693A1 (en) * 2018-01-25 2019-07-25 Institute For Information Industry Virtual space positioning method and apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023160697A1 (zh) * 2022-02-28 2023-08-31 北京所思信息科技有限责任公司 一种鼠标的模型映射方法、装置、设备和存储介质
US11995254B2 (en) 2022-02-28 2024-05-28 Beijing Source Technology Co., Ltd. Methods, devices, apparatuses, and storage media for mapping mouse models for computer mouses
CN115827282A (zh) * 2023-02-14 2023-03-21 北京铁力山科技股份有限公司 鼠标漫游方法、装置、设备及存储介质
CN115827282B (zh) * 2023-02-14 2023-05-19 北京铁力山科技股份有限公司 鼠标漫游方法、装置、设备及存储介质

Also Published As

Publication number Publication date
US20230325009A1 (en) 2023-10-12
US11995254B2 (en) 2024-05-28
WO2023160697A1 (zh) 2023-08-31

Similar Documents

Publication Publication Date Title
CN114706490A (zh) 一种鼠标的模型映射方法、装置、设备和存储介质
JP5695758B2 (ja) 手のジェスチャによるヒューマンマシンインターフェースのための方法、回路、及び、システム
CN110456907A (zh) 虚拟画面的控制方法、装置、终端设备及存储介质
CN114170407B (zh) 输入设备的模型映射方法、装置、设备和存储介质
CN110568929B (zh) 一种基于虚拟键盘的虚拟场景交互方法、装置和电子设备
CN111950521A (zh) 一种增强现实交互的方法、装置、电子设备及存储介质
JP2014501011A5 (zh)
CN107357428A (zh) 基于手势识别的人机交互方法及装置、系统
CN103733229A (zh) 信息处理设备、信息处理方法及程序
TWI530858B (zh) 一種立體交互系統和立體交互方法
CN111815761A (zh) 三维立体展示方法、装置、设备及存储介质
CN114706489B (zh) 一种输入设备的虚拟方法、装置、设备和存储介质
CN104656893A (zh) 一种信息物理空间的远程交互式操控系统及方法
CN113129451B (zh) 基于双目视觉定位的全息三维影像空间定量投影方法
US10281804B2 (en) Image processing apparatus, image processing method, and program
CN106598422B (zh) 混合操控方法及操控系统和电子设备
CN114167997B (zh) 一种模型显示方法、装置、设备和存储介质
US20140142900A1 (en) Information processing apparatus, information processing method, and program
CN114445525A (zh) 虚拟对象的显示方法、装置及电子设备
US11294510B2 (en) Method, system and non-transitory computer-readable recording medium for supporting object control by using a 2D camera
US20210055784A1 (en) Information processing apparatus
CN117590954A (zh) 笔状态检测电路及方法以及输入系统
CN115309113A (zh) 一种零件装配的引导方法及相关设备
CN113703577A (zh) 一种绘图方法、装置、计算机设备及存储介质
JP2013109538A (ja) 入力方法及び入力装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination