CN117531192A - 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统 - Google Patents

基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统 Download PDF

Info

Publication number
CN117531192A
CN117531192A CN202410032223.XA CN202410032223A CN117531192A CN 117531192 A CN117531192 A CN 117531192A CN 202410032223 A CN202410032223 A CN 202410032223A CN 117531192 A CN117531192 A CN 117531192A
Authority
CN
China
Prior art keywords
simulation
user
virtual reality
game
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202410032223.XA
Other languages
English (en)
Other versions
CN117531192B (zh
Inventor
林晓妹
刘迪红
刘波良
刘丽丽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Bako Optoelectronics Co ltd
Original Assignee
Shenzhen Bako Optoelectronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Bako Optoelectronics Co ltd filed Critical Shenzhen Bako Optoelectronics Co ltd
Priority to CN202410032223.XA priority Critical patent/CN117531192B/zh
Publication of CN117531192A publication Critical patent/CN117531192A/zh
Application granted granted Critical
Publication of CN117531192B publication Critical patent/CN117531192B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55Controlling game characters or game objects based on the game progress
    • A63F13/57Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308Details of the user interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提出一种基于Micro‑LED显示屏的虚拟现实设备交互控制方法、装置及系统,涉及虚拟现实控制技术领域;包括:响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号;向车辆中的各个第一模拟设备发送第一切换指令,以控制每个第一模拟设备进入模拟模式对应的模拟状态,在各个第一模拟设备均准备完成后对用户进行提示;确定与模拟模式关联的目标设备,控制目标设备处于安全状态;监控用户对每个第一模拟设备的操作信息,并对操作信息进行处理,以得到对应的游戏模拟信号;基于游戏模拟信号,控制各个第二模拟设备,以实现用户的虚拟现实交互控制;可以增强交互的沉浸感,更准确地捕捉用户的身体动作,使用户可以进行更自由的运动和互动。

Description

基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及 系统
技术领域
本公开涉及虚拟现实控制技术领域,尤其涉及一种基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统。
背景技术
虚拟现实技术近年来得到广泛关注和应用。随着计算机技术、传感器技术和图形处理技术的不断进步,虚拟现实设备在游戏、娱乐、教育、医疗、航空航天、建筑设计等领域展示出巨大的潜力。
通过虚拟现实设备,用户可以沉浸于各种虚拟场景中,如沉入海底世界、探索宇宙、参观历史文化遗址等。虚拟现实技术还被应用于模拟训练、虚拟旅游、心理治疗、物理疗法等领域,为用户提供了一种全新的体验方式。
目前的虚拟现实设备主要依赖手柄、控制器或手势识别等方式进行交互,用户和虚拟环境互动的方式非常的单一,体验不够真实和丰富。目前在车辆中也可以使用虚拟现实设备进行游戏,如何使得用户能够适应车辆的虚拟现实交互环境,提高用户的体验感,是目前亟需解决的问题。
发明内容
本公开旨在至少在一定程度上解决相关技术中的技术问题之一。
本公开第一方面提出了一种基于Micro-LED显示屏的虚拟现实设备交互控制方法,包括:
响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,所述模拟开始信号中有模拟模式;
向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态,在各个所述第一模拟设备均准备完成后对用户进行提示;
确定与所述模拟模式关联的目标设备,控制所述目标设备处于安全状态,其中,所述目标设备为在所述模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个所述模拟模式对应的一个或者多个目标设备进行了关联,所述安全状态为锁定状态或者待机状态;
监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号;
基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,其中,所述各个第二模拟设备中至少包含有所述用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在所述生成模拟开始信号之后,还包括:基于所述模拟模式调整所述VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
本公开第二方面提出了一种基于Micro-LED显示屏的虚拟现实设备交互控制装置,包括:
生成模块,用于响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,所述模拟开始信号中有模拟模式;
发送模块,用于向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态,在各个所述第一模拟设备均准备完成后对用户进行提示;
第一控制模块,用于确定与所述模拟模式关联的目标设备,控制所述目标设备处于安全状态,其中,所述目标设备为在所述模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个所述模拟模式对应的一个或者多个目标设备进行了关联,所述安全状态为锁定状态或者待机状态;
处理模块,用于监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号;
第二控制模块,用于基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,其中,所述各个第二模拟设备中至少包含有所述用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在所述生成模拟开始信号之后,还包括:基于所述模拟模式调整所述VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
本申请第三方面实施例提出了一种虚拟现实系统,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开第一方面提出的基于Micro-LED显示屏的虚拟现实设备交互控制方法。
本公开提供的基于Micro-LED显示屏的虚拟现实设备交互控制方法,存在如下有益效果:
能够让在用户在车辆中进行虚拟现实交互体验时,有一个安全可靠的环境,防止车辆的动力或者和模拟模式无关的设备或者功能给用户带来不良的体验,能够模拟模式在车辆中选择不同的第一模拟设备来与其相适应,极大的提高了用户的体验感受,让用户的感受更加真实,并且可以根据模拟模式来调整刷新率从而降低延迟,通过减少图像的显示延迟和响应时间,高刷新率显示器还能减少运动模糊,提高视觉的清晰度和沉浸感,通过多个第二模拟设备让用户更加能够感受到虚拟环境中的物体和力度,增强交互的沉浸感,更准确地捕捉用户的身体动作,使用户可以进行更自由的运动和互动,使得用户能够在每个模拟模式下都有最符合该模拟模式的感受。
本公开附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本公开的实践了解到。
附图说明
本公开上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本公开第一实施例所提供的一种基于Micro-LED显示屏的虚拟现实设备交互控制方法的流程示意图;
图2为本公开第一实施例所提供的一种基于Micro-LED显示屏的虚拟现实设备交互控制装置的结构示意图。
具体实施方式
下面详细描述本公开的实施例,实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本公开,而不能理解为对本公开的限制。
下面参考附图描述本公开实施例的基于Micro-LED显示屏的虚拟现实设备交互控制方法和装置。
图1为本公开第一实施例所提供的一种基于Micro-LED显示屏的虚拟现实设备交互控制方法的流程示意图。
如图1所示,该基于Micro-LED显示屏的虚拟现实设备交互控制方法的执行主体为服务器,可以包括以下步骤:
步骤101,响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,模拟开始信号中有模拟模式。
本申请实际应用于真实的车辆中,当车机监测到用户的模拟开始操作,且车辆处于限制动力状态,生成模拟开始信号。
可选地,用户的模拟开始操作可以是用户手动点击操作界面的进入键,并选择了指定的模拟模式。需要说明的是,车机的操作界面中有多种模拟模式可以选择,用户可以通过点击任一模拟模式,从而车机可以监测到模拟开始操作。
可选地,也可以是用户使用终端设备,比如说遥控器或者手机,发出模拟开始信号,以进入模拟模式。
其中,模拟模式可以为不同的游戏模式,比如快艇游戏模式、过山车游戏模式、海底游戏模式和轮船游戏模式,可以有多种,在此不赘述。
其中,限制动力状态可以为一种使得用户能够安全的使用虚拟现实设备的状态。
作为一种可能实现的方式,限制动力状态需要满足以下条件:
将档位切换至停车档位,根据车辆型号和操作方式,将档位从驱动档位(如D档或R档)切换至停车档位(P档)。通常情况下,停车档位会将车辆的变速器锁定,确保车辆停止移动。为了进一步确保车辆处于限制动力状态,可以通过制动系统提供额外的阻力,防止车辆滑动或意外移动。或者,还可以控制手刹杆将其固定在上锁位置。手刹可以提供额外的制动力,确保车辆在停车时保持稳定。
进一步的,可以根据需要,将发动机关闭,这样可以进一步限制车辆的动力输出。在车辆完全停下并处于停车档位后,将发动机关闭可以增加安全性和燃油效率。
其中,模拟开始信号可以为一种触发信号,在生成了模拟开始信号之后,则虚拟现实系统则可以根据模拟开始信号中包含的模拟模式来实现之后的控制操作。
步骤102,向车辆中的各个第一模拟设备发送第一切换指令,以控制每个第一模拟设备进入模拟模式对应的模拟状态,在各个第一模拟设备均准备完成后对用户进行提示。
其中,第一切换指令使得第一模拟设备能够进行模拟前的准备,进而得到能够提供模拟服务的模拟状态。不同的模拟模式对应的第一切换指令不同,也即第一切换指令中包含的参数也不同。
其中,第一模拟设备是与模拟模式对应的模拟设备,不同的模拟模式所用到的模拟设备有所不同的。比如在航行模拟模式下,对车辆和快艇的驾驶舱内的驾驶部件进行对应,其中,车辆的方向盘对应模拟快艇的舵操纵台,车辆的变速箱档把对应模拟快艇的前进后退切换开关,车辆的油门对应模拟快艇的速度调整表度盘,车辆的手刹对应模拟快艇的锚点,车辆的导航屏对应模拟快艇的导航屏。因而航行模拟模式之下,车辆的方向盘、变速箱档、油门、手刹、导航屏即为对应的第一模拟设备。
作为一种可能实现的方式,要向车辆中的各个第一模拟设备发送第一切换指令,以控制每个第一模拟设备进入模拟模式对应的模拟状态,并在各个第一模拟设备均准备完成后对用户进行提示,可以按照以下步骤进行:
联网检测:首先需要确保车辆各个第一模拟设备已经联网。可以通过与设备通信并获取相应响应来检测设备的联网状态。
发送指令:将第一切换指令发往车辆各个第一模拟设备。
其中,第一切换指令中包含如何进入模拟模式的详细说明,以及如何设置对应的模拟状态参数。可以通过网络直接向各个设备发送指令,也可以通过车载控制系统实现。
监测状态:在发送指令后,应该实时监测设备的状态,以确保它们已经成功进入模拟状态。如果有任何设备无法进入模拟状态,应该发送警报以提示用户。
提示用户:当所有设备都已进入正确的模拟状态后,应该向用户发送消息或讯息,告知他们相应设备已经可用。
进一步的,在控制每个第一模拟设备进入模拟模式对应的模拟状态之后,还可以执行以下步骤:
S1:从数据库中获取预先记录的每个所述第一模拟设备在所述模拟模式下所映射的第一工作参数范围。
其中,需要说明的是,同一个第一模拟设备在不同的模拟模式下的工作参数是不同的,比如若过山车模拟模式和过山车模拟模式都需要用到车中的座椅设备,但是座椅设备需要工作在不同的参数范围,也即需要工作在不同的模式下来给用户提供相对应的体验。因而,可以预先记录好每个模拟模式所对应的各个第一模拟设备的第一工作参数范围。
举例来说,对于方向盘来说,对于正常驾驶的情况下,车辆的方向盘可旋转的最大圈数为3圈,为了模拟航行的体验感更真实,在进入虚拟快艇的模拟过程之后,向车辆的方向盘发送电子限制放开指令,将车辆的方向盘的电子限制放开,将车辆的方向盘可旋转的最大圈数调整为5圈。
其中,第一工作参数范围为第一模拟设备在任一模拟模式下所运行的参数范围。
S2:将每个所述第一模拟设备当前的第二工作参数范围调整为所述第一工作参数范围。
其中,第二工作参数范围可以为第一模拟设备在未进入当前模拟模式所对应的模拟状态之前的工作参数范围。
S3:在所述基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制之前,还包括:
采用指定数据传输协议,以实现每个所述第二模拟设备和车机之间的数据传输,其中,所述指定数据传输协议用于表征支持高速数据传输的通讯协议。其中,指定数据传输协议可以为Bluetooth。通过使用蓝牙连接,第二模拟设备可以与车机之间进行数据传输,实现虚拟现实交互控制,而无需使用有线连接,或者可以使用Oculus Link协议,以提供高速数据传输和低延迟的性能。
具体的,在选择指定数据传输协议时,可以根据具体需求和系统要求,选择适合的被指定的数据传输协议,以支持高速数据传输,高速数据传输协议包括Ethernet(以太网)、USB(通用串行总线)和CAN(控制器区域网络)等。将每个第二模拟设备和车机通过合适的接口连接起来。例如,如果选择Ethernet协议,可以使用Ethernet接口或通过转换器将其他接口转换为Ethernet接口。之后根据所选择的数据传输协议,为每个设备配置网络参数,确保它们位于同一网络中,并具有唯一的网络地址。最后,可以使用指定的数据传输协议,在设备之间进行高速数据传输。可以根据具体情况,使用协议提供的API或库函数来实现数据传输功能。例如,在Ethernet协议下,可以使用Socket编程接口来进行数据传输。
或者,确使每个所述第二模拟设备和所述车机之间利用Wi-Fi 6或5G网络进行通信。
为了实现虚拟现实交互控制,还需要使用指定的数据传输协议或Wi-Fi 6/5G网络进行通信。这是因为虚拟现实交互系统需要高速数据传输和低延迟的响应,以确保用户体验的流畅性和真实感。
作为另一种可能实现的方式,可以在车辆中利用5G网络和边缘计算技术,在车机内附近部署高性能的边缘服务器,实现更快速的数据传输和处理。这样可以减少传输延迟,并使虚拟现实交互更加实时和流畅。
步骤103,确定与模拟模式关联的目标设备,控制目标设备处于安全状态,其中,目标设备为在模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个模拟模式对应的一个或者多个目标设备进行了关联,安全状态为锁定状态或者待机状态。
其中,目标设备可以为预先记录的工作情况下可能会影响用户的体验的操作设备。举例来说,目标设备可以为音响设备、油门踏板、刹车踏板、离合器踏板、换挡杆(对于手动变速器)、换挡拨片、电子油门/刹车控制按钮,在此不做限定。
需要说明的是,不同的模拟模式关联的目标设备也是不相同的,比如说有的模拟模式需要用到音响设备,有的需要用到传感器设备,比如在航行模拟模式下,对车辆和快艇的驾驶舱内的驾驶部件进行对应,其中,车辆的方向盘对应模拟快艇的舵操纵台,车辆的变速箱档把对应模拟快艇的前进后退切换开关,车辆的油门对应模拟快艇的速度调整表度盘,车辆的手刹对应模拟快艇的锚点,车辆的导航屏对应模拟快艇的导航屏。而切换到过山车模式的情况下,则变速箱档、导航屏、方向盘等设备则可以作为与过山车模拟模式对应的目标设备,也即若使用这几种目标设备,会对用户带来干扰的体验。
可选的,也可以将一些动力设备作为各个模拟模式都关联的目标设备,比如刹车踏板、离合器踏板、换挡杆(对于手动变速器)、换挡拨片、电子油门/刹车控制按钮,若启动或者工作,车身则会启动,会影响到正在进行虚拟现实交互的用户的体验。
由此,可以通过将目标设备控制在锁定状态或者待机状态,这样可以提高用户体验的安全性,使得用户不用顾虑无意触碰到目标设备会引起的干扰体验,将目标设备带来的负面体验降到最低。
举例来说,若用户原来在使用A模拟模式进行体验,A模拟模式关联的第一模拟设备为D1、D2、D3,若用户切换到了B模拟模式,B模拟模式关联的第一模拟设备为D1、D2,则D3即为B模拟模式关联的目标设备,需要将D3调整为锁定状态或者待机状态在,这样用户在无意中触发到D3时不会影响B模拟模式的体验感。
步骤104,监控用户对每个第一模拟设备的操作信息,并对操作信息进行处理,以得到对应的游戏模拟信号。
具体的,可以首先对每个第一模拟设备的操作信息进行数据清洗和数据脱敏处理,然后对操作信息进行处理,以确定第一模拟设备对应的操作特征,之后将操作特征转化为模拟模式下的对应模拟信号,最后基于预设的规则,融合每个第一模拟设备的模拟信号,以得到游戏模拟信号。
可以理解的是,可以首先对收集到的操作信息进行清洗,去除无效或冗余的数据。这包括删除缺失数值、异常数据或不一致的数据。为了保护用户隐私和数据安全,可以对操作信息进行脱敏处理。脱敏可以采用方法如数据加密、数据哈希、数据匿名化等,以确保个人身份和敏感信息得到保护。
在对操作信息进行处理以确定第一模拟设备的操作特征时,可以采取以下步骤:
从经过清洗的操作信息中提取与设备操作相关的特征。这可能涉及到统计指标、频率分析、时域特征或频域特征等方法,对提取到的特征进行筛选和选择,选择与模拟设备操作的相关特征。
最后,将操作特征转化为模拟模式下的对应模拟信号时,可以根据具体设备和信号类型进行转换。具体的,可以根据设备的工作原理和控制方式,按照相应的方法将操作特征转化为模拟信号,以模拟设备在模拟模式下的行为或输出。
在确定了用户在任一时刻对各个模拟设备的操作特征之后,可以将操作特征转为模拟模式下的行为。举例来说,若第一模拟设备为方向盘,用户的操作特征为将方向盘顺时针转动一圈,进而车机可以基于当前的模拟模式和用户所位于的虚拟场景,来确定该操作特征所对应的模拟信号是什么,比如在模拟模式A和模拟模式B中将方向盘顺时针转动一圈分别为左偏移45度和右偏移36度,在此不进行限定。
需要说明的是,在将各个第一模拟设备所对应的模拟信号进行融合时,需要在时间上进行对齐,将相同时间对应的各个模拟信号进行融合。
其中,游戏模拟信号可以为根据任一时刻用户对各个第一模拟设备的模拟操作所确定的一个整体的模拟信号。
需要说明的是,比如用户在虚拟场景中控制虚拟物体A时,需要联合手对第一模拟设备1的操作动作和脚对第一模拟设备2的操作动作,由此,可以确定游戏模拟信号中对虚拟物体A的控制方式。
其中,游戏模拟信号中包含有该任一时刻所对应的场景模拟信号,和游戏场景中的各个虚拟物体的控制动作信号,还可以包含有对用户的感知反馈信号(比如声觉和触觉),在此不进行限定。
在所述基于预设的规则,融合每个所述第一模拟设备的模拟信号,以得到游戏模拟信号之后,还包括:
根据所述模拟模式中包含的场景类型,以及所述游戏模拟信号,生成所述游戏模拟信号所对应的游戏场景图像;
将所述游戏场景图像传输给所述VR设备进行处理;
根据所述场景类型和所述游戏模拟信号,调整所述传感套装设备所提供的传感特征所对应的交互参数,其中,所述传感特征用于使得用户体验到实际场景中所体验到的感受,其中,所述传感套装设备至少包含有具有触觉反馈功能的手套和鞋子,以及具有声觉反馈功能的耳机,所述触觉反馈功能对应的传感特征为触觉特征、所述声觉反馈功能对应的传感特征为声觉特征。
具体的,可以根据模拟模式中包含的场景类型和游戏模拟信号,使用计算机图形学、或者渲染引擎等生成游戏场景的图像。
为了提高用户体验,可以使用以下方式中的一种或者多种:
(1)渲染、光照、阴影、纹理映射等技术,可以用于创建逼真的游戏图像。计算机图形学库和工具包括OpenGL、DirectX和Unity等。
(2)通过物理引擎模拟真实世界的物理规律,可以增加游戏场景的真实感。例如,模拟物体的运动、重力、碰撞等,物理引擎有PhysX、Havok和Bullet等。
(3)添加适当的纹理和材质可以使游戏场景更加真实。例如,使用高质量的纹理图像来模拟物体表面的细节,并设置合适的材质属性,如反射率、折射率等。
(4)使用光照模型和阴影算法,可以模拟不同类型的光源和光照效果,使场景中的物体产生逼真的阴影。
(5)利用粒子系统模拟火焰、烟雾、爆炸等效果,后期处理技术可以用于实现景深效果、色彩校正等。
进一步的,可以将游戏场景图像传输至VR设备,将生成的游戏场景图像传输给连接的VR设备进行处理,这可以通过有线或无线方式传输图像数据,确保传输的稳定性和低延迟。
调整交互参数:根据场景类型和游戏模拟信号,调整传感套装设备上的传感特征,以提供更贴近实际场景的体验。对于具有触觉反馈功能的手套和鞋子,可以利用传感器捕捉用户的动作和触摸,然后根据模拟信号调整触觉特征。对于具有声觉反馈功能的耳机,可以根据当前场景中的声音信号和游戏模拟信号调整声觉特征,使用户沉浸于虚拟场景中。
需要说明的是,本公开实施例中,可以根据场景类型和游戏模拟信号,来选择与当前 场景类型和模拟情况所对应的传感特征,从而通过调节交互参数,以为用户提供对应的传感特征,比如用触觉反馈功能的手套和鞋子来提供手部位置的传感特征和脚部位置的传感特征。可以利用声觉反馈功能的耳机来提供音效感受。
其中,交互参数可以为压力、声音等等参数增强用户对虚拟物体的感知。通过立体声音技术,使用户能够根据声源的方向和距离判断虚拟环境中的物体位置,进一步提高交互的感知和真实感。
步骤105,基于游戏模拟信号,控制各个第二模拟设备,以实现用户的虚拟现实交互控制,其中,各个第二模拟设备中至少包含有用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在生成模拟开始信号之后,还包括:基于模拟模式调整VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
其中,第二模拟设备可以是虚拟现实系统用于根据游戏模拟信号来为用户实现虚拟现实交互控制的设备。其中,第二模拟设备和第一模拟设备不同,但第二模拟设备可以和第一模拟设备之间有重合。
其中,头戴式虚拟现实(VR)设备包括显示器、陀螺仪、加速度计和传感器等组件。通过佩戴头戴式设备,用户可以进入虚拟现实世界。传感套装设备包括手套、鞋子等,用于捕捉用户的动作和触摸。这些设备通常配备有触摸传感器、加速度计和陀螺仪等,能够追踪和记录用户的手部和脚部运动。
头部追踪和控制:通过头戴式VR设备内置的传感器,可以追踪用户的头部姿态和运动。游戏模拟信号可以用来调整虚拟现实场景中的视角,使其与用户的头部运动保持一致。
手部和手指追踪:利用传感套装设备中的手套,可以对用户手部和手指的运动进行追踪。通过捕捉手部位置和手指姿势,可以将用户的手部动作实时传输到虚拟现实场景中,实现与虚拟物体的交互。
需要说明的是,游戏模拟信号主要包含场景模拟信号、虚拟物体的控制动作信号以及对用户的感知反馈信号。下面是基于这些信号实现用户虚拟现实交互控制的方法:
根据场景模拟信号,在虚拟现实设备中呈现相应的虚拟场景。场景模拟信号可以包括位置、方向、光照等信息,通过传输到设备中实时渲染,让用户感受到身临其境的虚拟环境。
虚拟物体的控制动作信号:根据虚拟物体的控制动作信号,用户可以与虚拟场景中的物体进行交互。例如,用户可以使用手部的动作信号来抓取、移动或操作虚拟物体,通过传感套装设备中的传感器捕捉用户手部的动作,并将其转化为虚拟场景中的物体动作。
感知反馈信号:根据感知反馈信号,用户可以感受到虚拟场景中的声觉和触觉。比如,当用户在虚拟场景中与物体碰撞时,可以通过传感套装设备中的触觉反馈模块产生震动或压力感,增强用户的沉浸感。通过以上控制方法,用户可以通过头戴式虚拟现实(VR)设备和传感套装设备与虚拟场景进行交互。
其中,第二模拟设备中包含有电流传导设备。
其中,基于游戏模拟信号,控制各个第二模拟设备,以实现用户的虚拟现实交互控制,至少包含有以下步骤:
基于游戏模拟信号,确定至少一个待传导的电流传导设备;
确定每个待传导的电流传导设备对应的电流传导频率和目标电流范围;
基于传导频率,通过待传导的电流传导设备向用户传导处于目标电流范围的电流。
基于游戏模拟信号,确定待传导的至少一个电流传导设备,包括:
根据用户的每个操作信息,确定每个操作信息对应的操作特征;
基于游戏模拟信号,判断操作特征对应的动作感受特征和操作幅度;
基于动作感受特征和操作幅度,确定关联的身体感受部位;
将身体感受部位所穿戴的电流传导设备,作为待传导的电流传导设备。
具体的,可以首先确定操作特征,根据用户的每个操作信息,可以通过分析动作类型、时长、速度、力度等参数来确定每个操作特征。之后可以判断操作特征对应的动作感受特征和操作幅度,通过与游戏模拟信号进行对比和分析,可以判断出每个操作特征所对应的动作感受特征,例如挥动手臂、踏步等。同时,操作幅度可以根据操作的程度(如力度大小)来确定,以反映用户对虚拟环境的交互强度。
进一步的,可以确定关联的身体感受部位:根据动作感受特征和操作幅度,可以确定与每个特征相关的身体感受部位。例如,如果操作特征是挥动手臂,关联的身体感受部位可以是手臂和肩膀。
之后可以确定待传导的电流传导设备,根据关联的身体感受部位,选择相应的电流传导设备来传导电流。例如,对于手臂和肩膀的身体感受部位,可以选择相应的电流传导贴片或手套。
进一步的,可以根据用户的动作幅度和具体的游戏场景来为用户确定更可靠的电流范围。
举例来说,假设用户在虚拟场景中进行击打动作,例如拳击。根据用户的操作信息和动作特征,可以确定用户进行拳击动作的频率、速度和力度等参数。接下来,可以根据这些信息来选择合适的电流传导频率和目标电流范围。根据用户进行拳击的频率,我们可以选择与拳击频率相匹配的电流传导频率。例如,如果用户进行快速连续的拳击动作,我们可能选择较高的电流传导频率以保持与用户动作的同步感。目标电流范围可以根据用户拳击动作的力度和感受需求来确定。如果用户期望更强烈的感受,我们可以选择更大的目标电流范围;如果用户更倾向于轻柔的感觉,我们可以选择较小的目标电流范围。
假设用户在虚拟场景中进行跑步动作。根据用户的操作信息和动作特征,我们可以确定用户跑步的速度、节奏和步幅等参数。接下来,我们可以根据这些信息来选择合适的电流传导频率和目标电流范围。
根据用户跑步的节奏和步频,我们可以选择与其步伐频率相匹配的电流传导频率。例如,如果用户进行快速而连续的跑步动作,我们可能选择较高的电流传导频率以提供更加连贯的感受效果。
目标电流范围可以根据用户的跑步强度和感受需求来确定。如果用户期望更强烈的感受,我们可以选择较大的目标电流范围以增强刺激感;如果用户更倾向于轻柔的感觉,我们可以选择较小的目标电流范围以提供柔和的触感。
需要注意的是,选择适当的电流传导频率和目标电流范围时,应考虑用户的舒适度和安全性。过高的电流传导频率或过大的目标电流范围可能对用户造成不适或不安全。
进一步的,可以根据待传导的电流传导设备以及确定的电流传导频率和目标电流范围,通过控制电流传导设备向用户传导处于目标电流范围内的电流。通过电流传导设备将电流传递到手部肌肉,实现触摸、抓握等真实操作的模拟,用户可以在虚拟环境中直接感受到物体的形状和质地。
可选的,还可以按照指定的周期,监测用户的眼球转动特征和车内的环境亮度,之后基于眼球转动特征和车内的环境亮度,修正VR设备中显示器的刷新率。
需要说明的是,根据指定的周期监测用户的眼球转动特征和车内环境亮度,并基于这些信息来修正VR设备中显示器的刷新率,可以提供更好的视觉体验和适应用户的需求。以下是一个示例来说明如何进行修正:
眼球转动特征监测:通过使用眼球追踪技术,可以实时监测用户的眼球转动特征,例如注视点的位置、变化速度和频率等。这可以帮助我们了解用户在虚拟现实环境中的注意力焦点和视觉习惯。
车内环境亮度监测:通过环境光传感器或其他相关技术,可以监测车内的环境亮度水平。这有助于了解车内光照条件,以及可能会对用户的视觉体验产生影响的因素。
修正显示器刷新率:根据眼球转动特征和车内环境亮度,可以动态地调整VR设备中显示器的刷新率。例如,如果用户的眼球转动速度较快,可以增加显示器的刷新率以提供更加流畅的图像;如果车内环境较暗,可以降低刷新率以节省能源并避免眼睛的过度疲劳。通过跟踪用户的眼球运动,定位用户的视线焦点,减少不必要的图像渲染和计算,提高系统的效率和用户的舒适度。
需要注意的是,修正显示器刷新率时应遵循一定的安全和舒适性原则(在指定的刷新率范围内进行刷新)。确保刷新率的调整不会引起用户的不适、眩晕或其他不良体验。
需要说明的是,不同的模拟模式所对应的刷新率也是不同的,因而在用户确定了模拟模式之后,则可以调整刷新率在一个合理的范围内,从而保证用户在该模拟模式下的体验。
需要说明的是,可以根据模拟模式所允许的延迟参数和刷写率参数范围,来选择使用低延迟的高刷新率显示器是解决虚拟现实交互控制的视觉疲劳和运动延迟问题,传统显示器的低刷新率容易引起用户眼睛疲劳和运动模糊感,而高刷新率显示器可提供更流畅的图像,减少眼睛疲劳。同时,通过减少图像的显示延迟和响应时间,高刷新率显示器还能减少运动模糊,提高视觉的清晰度和沉浸感。
可选的,还可以通过立体声音技术使用户能够根据声源的方向和距离判断虚拟环境中的物体位置,进一步提高交互的感知和真实感,以及通过在虚拟环境中显示边界线或虚拟障碍物来提醒用户注意现实世界中的障碍物位置,避免碰撞事故的发生。
本公开提供的基于Micro-LED显示屏的虚拟现实设备交互控制方法,存在如下有益效果:
能够让在用户在车辆中进行虚拟现实交互体验时,有一个安全可靠的环境,防止车辆的动力或者和模拟模式无关的设备或者功能给用户带来不良的体验,能够模拟模式在车辆中选择不同的第一模拟设备来与其相适应,极大的提高了用户的体验感受,让用户的感受更加真实,并且可以根据模拟模式来调整刷新率从而降低延迟,通过减少图像的显示延迟和响应时间,高刷新率显示器还能减少运动模糊,提高视觉的清晰度和沉浸感,通过多个第二模拟设备让用户更加能够感受到虚拟环境中的物体和力度,增强交互的沉浸感,更准确地捕捉用户的身体动作,使用户可以进行更自由的运动和互动。
图2为本公开第二实施例所提供的基于Micro-LED显示屏的虚拟现实设备交互控制装置的结构示意图。
如图2所示,该基于Micro-LED显示屏的虚拟现实设备交互控制装置200可以包括:
生成模块210,用于响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,所述模拟开始信号中有模拟模式;
发送模块220,用于向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态,在各个所述第一模拟设备均准备完成后对用户进行提示;
第一控制模块230,用于确定与所述模拟模式关联的目标设备,控制所述目标设备处于安全状态,其中,所述目标设备为在所述模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个所述模拟模式对应的一个或者多个目标设备进行了关联,所述安全状态为锁定状态或者待机状态;
处理模块240,用于监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号;
第二控制模块250,用于基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,其中,所述各个第二模拟设备中至少包含有所述用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在所述生成模拟开始信号之后,还包括:基于所述模拟模式调整所述VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
可选的,所述发送模块,还用于:
从数据库中获取预先记录的每个所述第一模拟设备在所述模拟模式下所映射的第一工作参数范围;
将每个所述第一模拟设备当前的第二工作参数范围调整为所述第一工作参数范围。
所述第二控制模块,还用于:
采用指定数据传输协议,以实现每个所述第二模拟设备和车机之间的数据传输,其中,所述指定数据传输协议用于表征支持高速数据传输的通讯协议;
或者,确使每个所述第二模拟设备和所述车机之间利用Wi-Fi 6或5G网络进行通信。
可选的,所述处理模块,包括:
第一处理单元,用于对每个所述第一模拟设备的操作信息进行数据清洗和数据脱敏处理;
第二处理单元,用于对所述操作信息进行处理,以确定所述第一模拟设备对应的操作特征;
转换单元,用于将所述操作特征转化为所述模拟模式下的对应模拟信号;
融合单元,用于基于预设的规则,融合每个所述第一模拟设备的模拟信号,以得到游戏模拟信号。
可选的,所述融合单元,还用于:
根据所述模拟模式中包含的场景类型,以及所述游戏模拟信号,生成所述游戏模拟信号所对应的游戏场景图像;
将所述游戏场景图像传输给所述VR设备进行处理;
根据所述场景类型和所述游戏模拟信号,调整所述传感套装设备所提供的传感特征所对应的交互参数;
其中,所述传感特征用于使得用户体验到实际场景中所体验到的感受,其中,所述传感套装设备至少包含有具有触觉反馈功能的手套和鞋子,以及具有声觉反馈功能的耳机,所述触觉反馈功能对应的传感特征为触觉特征、所述声觉反馈功能对应的传感特征为声觉特征。
可选的,所述第二模拟设备中包含有电流传导设备,所述第二控制模块,具体用于:
基于所述游戏模拟信号,确定至少一个待传导的电流传导设备;
确定每个所述待传导的电流传导设备对应的电流传导频率和目标电流范围;
基于所述传导频率,通过所述待传导的电流传导设备向所述用户传导处于所述目标电流范围的电流。
可选的,所述第二控制模块,还用于:
根据所述用户的每个所述操作信息,确定每个所述操作信息对应的操作特征;
基于所述游戏模拟信号,判断所述操作特征对应的动作感受特征和操作幅度;
基于所述动作感受特征和操作幅度,确定关联的身体感受部位;
将所述身体感受部位所穿戴的电流传导设备,作为待传导的电流传导设备。
可选的,所述第二控制模块,还用于:
按照指定的周期,监测所述用户的眼球转动特征和车内的环境亮度;
基于所述眼球转动特征和所述车内的环境亮度,修正所述VR设备中显示器的刷新率。
本公开提供的基于Micro-LED显示屏的虚拟现实设备交互控制装置,存在如下有益效果:
能够让在用户在车辆中进行虚拟现实交互体验时,有一个安全可靠的环境,防止车辆的动力或者和模拟模式无关的设备或者功能给用户带来不良的体验,能够模拟模式在车辆中选择不同的第一模拟设备来与其相适应,极大的提高了用户的体验感受,让用户的感受更加真实,并且可以根据模拟模式来调整刷新率从而降低延迟,通过减少图像的显示延迟和响应时间,高刷新率显示器还能减少运动模糊,提高视觉的清晰度和沉浸感,通过多个第二模拟设备让用户更加能够感受到虚拟环境中的物体和力度,增强交互的沉浸感,更准确地捕捉用户的身体动作,使用户可以进行更自由的运动和互动。
本申请还提出了一种虚拟现实系统,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述的基于Micro-LED显示屏的虚拟现实设备交互控制方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、 “示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本公开的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本公开的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本公开的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本公开的实施例所属技术领域的技术人员所理解。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本公开各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本公开的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本公开的限制,本领域的普通技术人员在本公开的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种基于Micro-LED显示屏的虚拟现实设备交互控制方法,其特征在于,包括:
响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,所述模拟开始信号中有模拟模式;
向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态,在各个所述第一模拟设备均准备完成后对用户进行提示;
确定与所述模拟模式关联的目标设备,控制所述目标设备处于安全状态,其中,所述目标设备为在所述模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个所述模拟模式对应的一个或者多个目标设备进行了关联,所述安全状态为锁定状态或者待机状态;
监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号;
基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,其中,所述各个第二模拟设备中至少包含有所述用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在所述生成模拟开始信号之后,还包括:基于所述模拟模式调整所述VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
2.根据权利要求1所述的方法,其特征在于,在所述向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态之后,包括:
从数据库中获取预先记录的每个所述第一模拟设备在所述模拟模式下所映射的第一工作参数范围;
将每个所述第一模拟设备当前的第二工作参数范围调整为所述第一工作参数范围;
在所述基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制之前,还包括:
采用指定数据传输协议,以实现每个所述第二模拟设备和车机之间的数据传输,其中,所述指定数据传输协议用于表征支持高速数据传输的通讯协议;
或者,确使每个所述第二模拟设备和所述车机之间利用Wi-Fi 6或5G网络进行通信。
3.根据权利要求1所述的方法,其特征在于,所述监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号,包括:
对每个所述第一模拟设备的操作信息进行数据清洗和数据脱敏处理;
对所述操作信息进行处理,以确定所述第一模拟设备对应的操作特征;
将所述操作特征转化为所述模拟模式下的对应模拟信号;
基于预设的规则,融合每个所述第一模拟设备的模拟信号,以得到游戏模拟信号。
4.根据权利要求3所述的方法,其特征在于,在所述基于预设的规则,融合每个所述第一模拟设备的模拟信号,以得到游戏模拟信号之后,还包括:
根据所述模拟模式中包含的场景类型,以及所述游戏模拟信号,生成所述游戏模拟信号所对应的游戏场景图像;
将所述游戏场景图像传输给所述VR设备进行处理;
根据所述场景类型和所述游戏模拟信号,调整所述传感套装设备所提供的传感特征所对应的交互参数;
其中,所述传感特征用于使得用户体验到实际场景中所体验到的感受,其中,所述传感套装设备至少包含有具有触觉反馈功能的手套和鞋子,以及具有声觉反馈功能的耳机,所述触觉反馈功能对应的传感特征为触觉特征、所述声觉反馈功能对应的传感特征为声觉特征。
5.根据权利要求1所述的方法,其特征在于,所述第二模拟设备中包含有电流传导设备,所述基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,至少包含有以下步骤:
基于所述游戏模拟信号,确定至少一个待传导的电流传导设备;
确定每个所述待传导的电流传导设备对应的电流传导频率和目标电流范围;
基于所述传导频率,通过所述待传导的电流传导设备向所述用户传导处于所述目标电流范围的电流。
6.根据权利要求5所述的方法,其特征在于,所述基于所述游戏模拟信号,确定待传导的至少一个电流传导设备,包括:
根据所述用户的每个所述操作信息,确定每个所述操作信息对应的操作特征;
基于所述游戏模拟信号,判断所述操作特征对应的动作感受特征和操作幅度;
基于所述动作感受特征和操作幅度,确定关联的身体感受部位;
将所述身体感受部位所穿戴的电流传导设备,作为待传导的电流传导设备。
7.根据权利要求1所述的方法,其特征在于,在所述基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制之后,还包括:
按照指定的周期,监测所述用户的眼球转动特征和车内的环境亮度;
基于所述眼球转动特征和所述车内的环境亮度,修正所述VR设备中显示器的刷新率。
8.一种基于Micro-LED显示屏的虚拟现实设备交互控制装置,其特征在于,包括:
生成模块,用于响应于监测到模拟开始操作且车辆处于限制动力状态,生成模拟开始信号,其中,所述模拟开始信号中有模拟模式;
发送模块,用于向车辆中的各个第一模拟设备发送第一切换指令,以控制每个所述第一模拟设备进入所述模拟模式对应的模拟状态,在各个所述第一模拟设备均准备完成后对用户进行提示;
第一控制模块,用于确定与所述模拟模式关联的目标设备,控制所述目标设备处于安全状态,其中,所述目标设备为在所述模拟模式下触发时会影响用户的虚拟现实交互体验的车载电子设备,其中,预先已经将每个所述模拟模式对应的一个或者多个目标设备进行了关联,所述安全状态为锁定状态或者待机状态;
处理模块,用于监控所述用户对每个所述第一模拟设备的操作信息,并对所述操作信息进行处理,以得到对应的游戏模拟信号;
第二控制模块,用于基于所述游戏模拟信号,控制各个第二模拟设备,以实现所述用户的虚拟现实交互控制,其中,所述各个第二模拟设备中至少包含有所述用户穿戴的头戴式虚拟现实VR设备和传感套装设备,其中,在所述生成模拟开始信号之后,还包括:基于所述模拟模式调整所述VR设备中显示器的刷新率,其中,所述头戴式虚拟现实VR设备为基于Micro-LED显示屏的虚拟现实设备。
9.根据权利要求8所述的方法,其特征在于,所述发送模块,还用于:
从数据库中获取预先记录的每个所述第一模拟设备在所述模拟模式下所映射的第一工作参数范围;
将每个所述第一模拟设备当前的第二工作参数范围调整为所述第一工作参数范围;
所述第二控制模块,还用于:
采用指定数据传输协议,以实现每个所述第二模拟设备和车机之间的数据传输,其中,所述指定数据传输协议用于表征支持高速数据传输的通讯协议;
或者,确使每个所述第二模拟设备和所述车机之间利用Wi-Fi 6或5G网络进行通信。
10.一种基于Micro-LED显示屏的虚拟现实设备交互控制系统,其特征在于,包括:
至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一项所述的方法。
CN202410032223.XA 2024-01-10 2024-01-10 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统 Active CN117531192B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410032223.XA CN117531192B (zh) 2024-01-10 2024-01-10 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410032223.XA CN117531192B (zh) 2024-01-10 2024-01-10 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统

Publications (2)

Publication Number Publication Date
CN117531192A true CN117531192A (zh) 2024-02-09
CN117531192B CN117531192B (zh) 2024-05-28

Family

ID=89796215

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410032223.XA Active CN117531192B (zh) 2024-01-10 2024-01-10 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统

Country Status (1)

Country Link
CN (1) CN117531192B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020199149A1 (en) * 1992-09-28 2002-12-26 Olympus Optical Co., Ltd. Recording medium, information reproducing apparatus and information reproducing method
CN110368679A (zh) * 2019-08-07 2019-10-25 广州小鹏汽车科技有限公司 车载游戏方法、装置、车辆及机器可读介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020199149A1 (en) * 1992-09-28 2002-12-26 Olympus Optical Co., Ltd. Recording medium, information reproducing apparatus and information reproducing method
CN110368679A (zh) * 2019-08-07 2019-10-25 广州小鹏汽车科技有限公司 车载游戏方法、装置、车辆及机器可读介质

Also Published As

Publication number Publication date
CN117531192B (zh) 2024-05-28

Similar Documents

Publication Publication Date Title
JP6977134B2 (ja) 頭部装着ディスプレイにおける仮想現実(vr)コンテンツの視野(fov)絞り
US10825350B2 (en) Virtual reality driver training and assessment system
CN109690633B (zh) 模拟系统、处理方法以及信息存储介质
EP3427103B1 (en) Virtual reality
JP6714791B2 (ja) シミュレーションシステム及びプログラム
KR20230047184A (ko) 3차원 환경들과의 상호작용을 위한 디바이스들, 방법들 및 그래픽 사용자 인터페이스들
US20150070274A1 (en) Methods and systems for determining 6dof location and orientation of head-mounted display and associated user movements
CN106873767B (zh) 一种虚拟现实应用的运行控制方法和装置
KR101850028B1 (ko) 가상 여행 체험 장치 및 그 방법
US11467658B2 (en) Application processing system, method of processing application, and storage medium storing program for processing application
US12011665B2 (en) Game processing system, method of processing game, and storage medium storing program for processing game
CN107930119A (zh) 信息处理方法、装置、电子设备及存储介质
CN106569614A (zh) 虚拟现实中场景切换控制方法及系统
CN106598228B (zh) Vr环境下的物体视觉定位操控方法
CN117531192B (zh) 基于Micro-LED显示屏的虚拟现实设备交互控制方法、装置及系统
CN106569609A (zh) 改进型虚拟现实中用户传送方法及系统
US11983829B2 (en) Non-transitory computer readable medium including augmented reality processing program and augmented reality processing system
US20240033619A1 (en) Impaired player accessability with overlay logic providing haptic responses for in-game effects
WO2018234318A1 (en) REDUCING VIRTUAL DISEASE IN VIRTUAL REALITY APPLICATIONS
WO2024044470A1 (en) Smooth switchover of computer game control
JP2021099562A (ja) 制御装置およびプログラム
CN117122910A (zh) 用于将真实世界声音添加到虚拟现实场景的方法和系统
CN115701772A (zh) 避免动晕症发生的虚拟实境控制方法
JP2001034784A (ja) 動画画面の生成方法および動画画面の生成時の評価方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant