CN114377385A - 一种增强现实的骰子投掷方法、装置、电子设备和介质 - Google Patents

一种增强现实的骰子投掷方法、装置、电子设备和介质 Download PDF

Info

Publication number
CN114377385A
CN114377385A CN202111561135.1A CN202111561135A CN114377385A CN 114377385 A CN114377385 A CN 114377385A CN 202111561135 A CN202111561135 A CN 202111561135A CN 114377385 A CN114377385 A CN 114377385A
Authority
CN
China
Prior art keywords
augmented reality
dice
throwing
model
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111561135.1A
Other languages
English (en)
Inventor
刘文军
彭飞
邓竹立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing 58 Information Technology Co Ltd
Original Assignee
Beijing 58 Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing 58 Information Technology Co Ltd filed Critical Beijing 58 Information Technology Co Ltd
Priority to CN202111561135.1A priority Critical patent/CN114377385A/zh
Publication of CN114377385A publication Critical patent/CN114377385A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308Details of the user interface
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例提供了一种增强现实的骰子投掷方法、装置、电子设备和可读存储介质,所述方法包括:响应于骰子投掷指令,开启增强现实功能页面;获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。根据本发明实施例,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案。

Description

一种增强现实的骰子投掷方法、装置、电子设备和介质
技术领域
本发明涉及增强现实技术领域,特别是涉及一种增强现实的骰子投掷方法、一种增强现实的骰子投掷装置、一种电子设备和一种计算机可读存储介质。
背景技术
增强现实技术(Augmented Reality,简称AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
随着智能手机的普及,基于智能手机的App(应用程序,Application的缩写)涉及到各行各业,人们通过App可以做各种各样的事情。在各种App中植入的小游戏也越来越多,类似大富翁之类的小游戏比比皆是,而这种类型的小游戏中有一个重要的游戏动作是摇骰子。通常情况下,游戏界面上显示有虚拟骰子,在用户点击摇动按钮时仅需要做一个骰子旋转的动画,然后将骰子旋转结果定格在一个预先设计的画面即可。由于用户无法实际参与摇骰子过程,会带来一种不太真实的感觉,而且由于缺少用户交互,也使得游戏趣味性大大降低。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种增强现实的骰子投掷方法和相应的一种增强现实的骰子投掷装置、一种电子设备,以及一种计算机可读存储介质。
本发明实施例公开了一种增强现实的骰子投掷方法,应用于移动终端,所述方法包括:
响应于骰子投掷指令,开启增强现实功能页面;
获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;
从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;
当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;
从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
可选地,所述当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷,包括:
当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向;
基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹;
控制所述虚拟骰子模型在所述增强现实功能页面中按照所述运动轨迹运动。
可选地,所述基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹,包括:
基于所述移动速度设定所述虚拟骰子模型的质量参数;
基于所述移动方向确定所述虚拟骰子模型的运动方向;
确定与所述质量参数和所述运动方向对应的所述运动轨迹。
可选地,所述当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向之前,还包括:
检测所述增强现实场景中的图像信息;
当识别到所述图像信息中包括手部图像信息时,从所述手部图像信息中获取所述姿态动作信息;
基于所述姿态动作信息对应的所述移动方向,判断是否满足所述预设的手势动作条件。
可选地,所述目标平面为静态物理体,所述虚拟骰子模型为动态物理体,所述增强现实场景的加速度为真实世界的重力加速度。
可选地,所述虚拟骰子模型具有弹力属性,所述从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果,包括:
在所述虚拟骰子模型按照所述弹力属性从所述目标平面反弹后,从反弹后静止于所述目标平面上的所述虚拟骰子模型中确定所述本轮投掷结果。
可选地,所述检测所述增强现实场景中的图像信息,包括:
采用预先训练的手部图像识别模型对基于AR引擎提供的所述增强现实场景中的预设数量的图像信息进行检测。
本发明实施例还公开了一种增强现实的骰子投掷装置,应用于移动终端,所述装置包括:
开启模块,用于响应于骰子投掷指令,开启增强现实功能页面;
显示模块,用于获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;
生成模块,用于从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;
投掷模块,用于当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;
确定模块,用于从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
可选地,所述投掷模块,包括:
第一确定子模块,用于当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向;
第二确定子模块,用于基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹;
控制子模块,用于控制所述虚拟骰子模型在所述增强现实功能页面中按照所述运动轨迹运动。
可选地,所述第二确定子模块,包括:
设定单元,用于基于所述移动速度设定所述虚拟骰子模型的质量参数;
第一确定单元,用于基于所述移动方向确定所述虚拟骰子模型的运动方向;
第二确定单元,用于确定与所述质量参数和所述运动方向对应的所述运动轨迹。
可选地,所述投掷模块,还包括:
检测子模块,用于检测所述增强现实场景中的图像信息;
获取子模块,用于当识别到所述图像信息中包括手部图像信息时,从所述手部图像信息中获取所述姿态动作信息;
判断子模块,用于基于所述姿态动作信息对应的所述移动方向,判断是否满足所述预设的手势动作条件。
可选地,所述目标平面为静态物理体,所述虚拟骰子模型为动态物理体,所述增强现实场景的加速度为真实世界的重力加速度。
可选地,所述虚拟骰子模型具有弹力属性,所述确定模块,包括:
第三确定子模块,用于在所述虚拟骰子模型按照所述弹力属性从所述目标平面反弹后,从反弹后静止于所述目标平面上的所述虚拟骰子模型中确定所述本轮投掷结果。
可选地,所述检测子模块,包括:
检测单元,用于采用预先训练的手部图像识别模型对基于AR引擎提供的所述增强现实场景中的预设数量的图像信息进行检测。
本发明实施例还公开了一种电子设备,包括:处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的一种增强现实的骰子投掷方法的步骤。
本发明实施例还公开了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的一种增强现实的骰子投掷方法的步骤。
本发明实施例包括以下优点:
在本发明实施例中,可以在增强现实场景中识别目标平面,并在该目标平面上添加虚拟骰子模型,根据用户的手部动作对该虚拟骰子模型进行投掷。通过采用上述方法,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案,通过设计骰子根据不同的用户手势做不同的掉落运动,模拟真实的骰子投掷过程,可以增加骰子投掷过程中的用户交互,大大增加投骰子游戏中的真实性和趣味性。
附图说明
图1是本发明实施例提供的一种增强现实的骰子投掷方法的步骤流程图;
图2是本发明实施例提供的另一种增强现实的骰子投掷方法的步骤流程图;
图3是本发明实施例的一种增强现实的骰子投掷方法的流程图;
图4是本发明实施例提供的一种增强现实的骰子投掷装置的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明保护的范围。
当前,在移动终端例如智能手机,平板电脑、游戏机等上的游戏程序中进行摇骰子的游戏动作时,游戏界面上显示有虚拟骰子,在用户点击摇动按钮时仅需要做一个骰子旋转的动画,然后将骰子旋转结果定格在一个预先设计的画面上。上述过程中,用户实际上无法真实参与摇骰子过程,给用户带来一种不太真实的感觉,而且由于缺少用户交互,也使得游戏趣味性大大降低。
本发明实施例的核心构思之一在于,可以在增强现实场景中识别目标平面,并在该目标平面上添加虚拟骰子模型,根据用户的手部动作对该虚拟骰子模型进行投掷。通过采用上述方法,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案,通过设计骰子根据不同的用户手势做不同的掉落运动,模拟真实的骰子投掷过程,可以增加骰子投掷过程中的用户交互,大大增加投骰子游戏中的真实性和趣味性。
参照图1,示出了本发明实施例提供的一种增强现实的骰子投掷方法的步骤流程图,应用于移动终端,具体可以包括如下步骤:
步骤101,响应于骰子投掷指令,开启增强现实功能页面。
在本发明实施例中,移动终端可以为智能手机、笔记本、平板电脑、游戏机、PDA等各种电子设备。移动终端上安装有游戏应用。其中,游戏应用中具有对骰子进行控制的游戏功能。
本申请提供的基于增强现实的骰子投掷方法可以应用于移动终端的游戏应用程序中,也可以作为一个独立的功能应用于移动终端中进行实施。
骰子投掷指令可以有多种实施方式,在一种示例中,游戏应用中设置有骰子投掷按钮,当检测到针对该骰子投掷按钮的触控操作时,可以将该触控操作作为骰子投掷指令,此时可以打开增强现实功能页面。本领域技术人员还可以根据实际需要设置骰子投掷指令的其他实施方式,对此,本发明实施例不加以具体限制。
其中,增强现实功能页面为可以采用增强现实技术对真实场景进行渲染处理,生成对应的增强现实场景并显示的页面。用户通过增强现实功能页面可以在真实世界中对页面呈现的虚拟对象进行相应的控制操作。
举例而言,用户可以在智能手机App的小游戏中点击“3D摇骰子”按钮,触发打开AR页面,页面打开时可以初始化AR场景,具体可以是初始化对应AR引擎下的AR视图(如iOS系统为ARSCNView),并配置该视图的相关属性(包括开启摄像机捕获真实场景、添加灯光、设置物体追踪效果让虚拟物体在真实场景中更加契合等)。
步骤102,获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景。
在本发明实施例中,在当前移动终端的屏幕加载增强现实功能页面时,可以同时开启移动终端的摄像头,并通过摄像头获取当前实时拍摄的真实场景。对当前拍摄的真实场景进行渲染生成对应的增强现实场景,并在增强现实功能页面中显示该增强现实场景。
步骤103,从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型。
目标平面用于模拟真实世界中投掷骰子掉落的水平平面。虚拟骰子模型用于模拟真实世界中投掷骰子所用的骰子。在一种示例中,可以预先配置了多种虚拟骰子模型,用户可以根据实际需要选择所需的一种。虚拟骰子模型可以为三维骰子模型。
为了方便用户操作,可以在增强现实功能页面中显示提示信息,提示信息用于辅助用户完成基于增强现实的骰子投掷操作。在本步骤中,可以显示提示用户寻找一个水平平面的提示信息。用户在提示信息的指导下会尝试在增强现实场景中寻找一个水平平面。
在一种实施方式中,可以通过AR引擎从增强现实场景包含的真实场景中识别平面,并响应于用户的平面选择操作从该增强现实场景中确定最终使用的目标平面。具体而言,移动终端使用AR引擎识别平面,识别到平面后可以在该平面上添加引导效果图,引导效果图用于告知用户识别到的平面的位置和大小,并提示用户可以点击引导效果图确定采用该平面作为目标平面。平面的识别会受到光线等因素的影响,如果未能识别到平面则可以提示用户调整移动终端的位置以识别平面。其中,AR引擎可以为iOS系统中的ARKit。
采用AR引擎进行平面识别,在确定目标平面后可以将目标平面设置为静态物理体,在增强现实技术中,静态物理体是指质量无限大的物体,例如:大地,掉落其上可以反弹或者静止。
在本发明实施例中,在目标平面上方的预设位置生成一虚拟骰子模型。虚拟骰子模型可以是预先设计的,可以在增强现实场景中采用该预先设计好的虚拟骰子模型初始化一个AR节点。增强现实场景中的每一个虚拟物体均为一个节点存在于场景中,节点是个抽象的概念,节是个看不见,摸不到的东西,没有几何形状,但是它有位置,以及自身坐标系。通俗地讲,在场景中创建一个添加节点后,就可以在该节点上放置所需的游戏元素,例如:人物模型,灯光,摄像机等。
初始化一个AR节点后,可以将该节点添加至目标平面上方的某个位置上,例如可以是添加到距离目标平面一定高度的正上方。即相当于将虚拟骰子模型放置于目标平面上方的某个位置上。可以将加入增强现实场景中的虚拟骰子模型设置为动态物理体。
静态物理体和动态物理体实际上是在增强现实场景中为虚拟物体的“物理身体”设置的类型,如果在iOS系统中使用ARkit引擎,静态物理体为SCNPhysicsBodystaticBody;动态物理体为SCNPhysicsBody dynamicBody。静态物理体表示物体具有很大的质量,外力对它不起作用;动态物理体表示物体有自己的质量,并且不是无限大,能够受到力的作用。
步骤104,当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷。
在本发明实施例中,预先设置了针对虚拟骰子模型的投掷触发条件,当从增强现实场景中识别到用户手部的姿态动作信息满足该预设的投掷触发条件时,触发对虚拟骰子模型的投掷,且是根据用户手部的姿态动作信息进行投掷的。不同的姿态动作信息可以控制虚拟骰子模型呈现不同的掉落过程,从而可以增强用户在骰子投掷中的真实参与感。
步骤105,从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
虚拟骰子模型掉落到目标平面,并最终静止在目标平面上,可以从该静止的虚拟骰子模型中读取本轮投掷结果。在一种示例中,可以将虚拟投掷模型朝上一面的点数作为本轮的最终投掷结果。
此外,在一种优选的实施方法中,可以在掉落过程中为虚拟骰子模型设置在各个方向不规则的旋转动作,该旋转动作的旋转方向和旋转速度是随机的,从而可以模拟真实世界中的骰子掉落过程,并实现真正意义上的随机结果。
综上,在本发明实施例中,可以在增强现实场景中识别目标平面,并在该目标平面上添加虚拟骰子模型,根据用户的手部动作对该虚拟骰子模型进行投掷。通过采用上述方法,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案,通过设计骰子根据不同的用户手势做不同的掉落运动,模拟真实的骰子投掷过程,可以增加骰子投掷过程中的用户交互,大大增加投骰子游戏中的真实性和趣味性。
参照图2,示出了本发明实施例提供的另一种增强现实的骰子投掷方法的步骤流程图,应用于移动终端,具体可以包括如下步骤:
步骤201,响应于骰子投掷指令,开启增强现实功能页面。
在本发明实施例中,骰子投掷指令可以为针对骰子投掷控件的触控操作,当检测到针对该骰子投掷控件的触控操作时,开启增强现实功能页面。其中,增强现实功能页面为可以采用增强现实技术对真实场景进行渲染处理,生成对应的增强现实场景并显示的页面。用户通过增强现实功能页面可以在真实世界中对页面呈现的虚拟对象进行相应的控制操作。
由于本步骤与步骤101相似,详细描述可参照步骤101,在此不再赘述。
步骤202,获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景。
通过调用移动终端摄像头拍摄当前真实场景后,可以对该真实场景添加增强现实内容,以渲染生成对应的增强现实场景,并在增强现实功能页面上进行显示。
步骤203,从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型。
目标平面用于模拟真实世界中投掷骰子掉落的水平平面。虚拟骰子模型用于模拟真实世界中投掷骰子所用的骰子。虚拟骰子模型为具有六个面的立方体模型,每个面分别对应一个点数。
在本发明实施例中,可以采用AR引擎进行平面识别,并确定最终选定的目标平面,在目标平面上以AR节点的方式生成虚拟骰子模型。其中,目标平面设置为静态物理体,虚拟骰子模型设置为动态物理体。此外,为了模拟真实世界中的骰子掉落运动,可以将增强现实场景的加速度设置为真实世界的重力加速度。
由于本步骤与步骤103相似,详细描述可参照步骤101,在此不再赘述。
步骤204,当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向。
在本发明实施例中,如果用户手部的姿态动作信息满足预设的手势动作条件时,触发针对虚拟骰子模型的投掷。在一种示例中,可以是检测到用户手部发生由上而下的投掷动作时,触发针对虚拟骰子模型的投掷,并根据姿态动作信息确定用户手部的移动速度和移动方向。
在一种可选的示例中,可以将用户手部(用户手臂)分为手指、手掌、手腕、小前臂、臂肘和后臂几个关键节点,通过计算不同关键节点的移动方向确定整体用户手部的移动方向,且计算不同关键节点的移动速度确定用户手部投掷骰子动作的移动速度。
在本申请的一种可选的示例中,所述当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向之前,还可以执行以下步骤:
检测所述增强现实场景中的图像信息;当识别到所述图像信息中包括手部图像信息时,从所述手部图像信息中获取所述姿态动作信息;基于所述姿态动作信息对应的所述移动方向,判断是否满足所述预设的手势动作条件。
其中,所述检测所述增强现实场景中的图像信息,包括:
采用预先训练的手部图像识别模型对基于AR引擎提供的所述增强现实场景中的预设数量的图像信息进行检测。
在本申请的一种实施方式中,手部图像识别模型可以是将大量的手部(手臂)图像数据作为样本数据通过机器学习进行模型训练得到的。可以采用训练得到的手部图像识别模型通过机器学习引擎(iOS系统中为coreML)对AR引擎(iOS系统中为ARKit)提供的图像信息进行识别。其中,为了性能考虑,可以只对预设数量的图像信息进行处理,例如,不需要将每秒返回的60帧屏幕截图图片都进行识别,而仅需要识别其中的10-20帧即可。
当识别到图像信息中存在手部(手臂)图像信息时,可以开始捕捉相应的姿态动作信息,并判断该姿态动作信息对应的手部移动方向是否为手势向下。当确定手部移动方向为手势向下时,触发针对虚拟骰子模型的投掷。
步骤205,基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹。
在本发明实施例中,具体是根据计算得到的移动速度和移动方向控制虚拟骰子模型做相应的运动动作的。不同的移动速度和移动方向对应不同的运动轨迹。
针对步骤205,具体可以执行以下子步骤:
子步骤S11,基于所述移动速度设定所述虚拟骰子模型的质量参数。
子步骤S12,基于所述移动方向确定所述虚拟骰子模型的运动方向。
子步骤S13,确定与所述质量参数和所述运动方向对应的所述运动轨迹。
在一种实施方式中,可以将投掷骰子动作的移动速度转换为虚拟骰子模型的质量参数,以模拟真实世界中的投掷力度;将投掷骰子动作的移动方向转换为虚拟骰子模型的运动方向,以模拟真实世界中的投掷方向。
步骤206,控制所述虚拟骰子模型在所述增强现实功能页面中按照所述运动轨迹运动。
根据移动速度让虚拟骰子模型具有质量,且根据移动方向让虚拟骰子模型向该方向向下掉落,由于增强现实场景具有重力加速度,虚拟骰子模型会一直掉落直到碰到目标平面。在掉落的过程中,可以为虚拟骰子模型添加在各个方向不规则旋转的动作,在增强现实功能页面展示对应的虚拟骰子模型的运动轨迹和运动状况。
步骤207,从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
虚拟骰子模型掉落到目标平面,并最终静止在目标平面上,可以从该静止的虚拟骰子模型中读取本轮投掷结果。
在一种可选的实施方式中,虚拟骰子模型具有弹力属性,针对步骤207,可以执行以下子步骤:
子步骤S21,在所述虚拟骰子模型按照所述弹力属性从所述目标平面反弹后,从反弹后静止于所述目标平面上的所述虚拟骰子模型中确定所述本轮投掷结果。
虚拟骰子模型在不规则旋转的情况下掉落碰撞到目标平面,为了模拟更加真实,可以对虚拟骰子模型设置一定的弹力值让其进行反弹,虚拟骰子模型反弹几次最终静止在目标平面上,此时朝上的一面即为最终投掷结果。
此外,所述从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果之后,还包括:
当识别到用户手部针对所述虚拟骰子模型的抓取动作时,删除所述虚拟骰子模型。
为了使得投掷动作可以重复进行,在识别到用户通过手势将虚拟骰子模型拿起时会将对应的虚拟骰子模型节点移除,并设置此时可以再次启动骰子投掷操作。用户可以重复进行上述的骰子投掷操作,并将多次投掷结果进行记录,方便在小游戏中进行使用,例如大富翁游戏中根据投掷点数确定前进步数。
为了使本领域技术人员能够更好地理解本发明实施例步骤201至步骤207,下面通过一个例子加以说明:
参照图3所示,为本发明实施例的一种增强现实的骰子投掷方法的流程图,该流程可以包括:
1、在App内的小游戏情景中点击“3D摇骰子”按钮触发打开AR页面,页面打开时初始化AR场景并开启相机,为了具有更逼真的3D摇骰子效果,设置了AR场景的加速度为真实世界的重力加速度。
2、用户在提示下会尝试寻找一个平面,使用AR引擎进行平面的识别,为了更好实现3D摇骰子功能仅识别水平平面。
3、在识别到目标平面后需要将其设置为静态物理体,方便骰子掉落其上可以反弹或者静止。
4、使用预先设计好的3D骰子模型初始化一个AR节点,并将其添加到距离目标平面一定高度的正上方,3D骰子模型可以为正常样式即有6个面且分别为1到6个点。将加入AR场景中的骰子节点设置为动态物理体。
5、为了更好增加用户体验和交互效果,在相机中识别用户的手。当识别到用户的手由上而下进行投掷动作时根据投掷手势的速度让骰子模型具有一定(合适范围内)的质量(以便模拟真实世界中投掷骰子的力度),且根据投掷手势的方向让骰子模型向着该方向向下掉落。
6、骰子模型会由于AR场景重力的原因一直掉落直到碰到目标平面,在掉落的过程中给骰子模型添加在各个方向不规则旋转的动作(旋转的方向和速度是随机的,从而实现真正意义上的随机结果)。骰子模型在不规则旋转的情况下掉落碰撞到平面。
7、为了更加符合真实情况,可以给骰子模型设置一定的弹力值让其进行反弹,骰子反弹几次最终静止在目标平面上,此时朝上的一面即为该次骰子投掷结果。
综上,在本发明实施例中,可以在增强现实场景中识别目标平面,并在该目标平面上添加虚拟骰子模型,根据用户的手部动作对该虚拟骰子模型进行投掷。通过采用上述方法,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案,通过设计骰子根据不同的用户手势做不同的掉落运动,模拟真实的骰子投掷过程,可以增加骰子投掷过程中的用户交互,大大增加投骰子游戏中的真实性和趣味性。通过在AR场景中识别平面将其设置为静态物理体,并添加虚拟骰子模型做为动态物理体使其根据用户投掷手势的速度和方向,不规则旋转掉落到平面上,从而实现了一种基于AR的通过投掷手势触发的骰子投掷方案,增加了用户交互,提高了游戏真实体验和趣味性。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图4,示出了本发明实施例提供的一种增强现实的骰子投掷装置的结构框图,应用于移动终端,具体可以包括如下模块:
开启模块401,用于响应于骰子投掷指令,开启增强现实功能页面;
显示模块402,用于获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;
生成模块403,用于从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;
投掷模块404,用于当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;
确定模块405,用于从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
在本发明实施例中,所述投掷模块,包括:
第一确定子模块,用于当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向;
第二确定子模块,用于基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹;
控制子模块,用于控制所述虚拟骰子模型在所述增强现实功能页面中按照所述运动轨迹运动。
在本发明实施例中,所述第二确定子模块,包括:
设定单元,用于基于所述移动速度设定所述虚拟骰子模型的质量参数;
第一确定单元,用于基于所述移动方向确定所述虚拟骰子模型的运动方向;
第二确定单元,用于确定与所述质量参数和所述运动方向对应的所述运动轨迹。
在本发明实施例中,所述投掷模块,还包括:
检测子模块,用于检测所述增强现实场景中的图像信息;
获取子模块,用于当识别到所述图像信息中包括手部图像信息时,从所述手部图像信息中获取所述姿态动作信息;
判断子模块,用于基于所述姿态动作信息对应的所述移动方向,判断是否满足所述预设的手势动作条件。
在本发明实施例中,所述目标平面为静态物理体,所述虚拟骰子模型为动态物理体,所述增强现实场景的加速度为真实世界的重力加速度。
在本发明实施例中,所述虚拟骰子模型具有弹力属性,所述确定模块,包括:
第三确定子模块,用于在所述虚拟骰子模型按照所述弹力属性从所述目标平面反弹后,从反弹后静止于所述目标平面上的所述虚拟骰子模型中确定所述本轮投掷结果。
在本发明实施例中,所述检测子模块,包括:
检测单元,用于采用预先训练的手部图像识别模型对基于AR引擎提供的所述增强现实场景中的预设数量的图像信息进行检测。
综上,在本发明实施例中,可以在增强现实场景中识别目标平面,并在该目标平面上添加虚拟骰子模型,根据用户的手部动作对该虚拟骰子模型进行投掷。通过采用上述方法,提供一种基于AR的通过用户手势触发对虚拟骰子进行投掷的实现方案,通过设计骰子根据不同的用户手势做不同的掉落运动,模拟真实的骰子投掷过程,可以增加骰子投掷过程中的用户交互,大大增加投骰子游戏中的真实性和趣味性。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种电子设备,包括:处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述一种增强现实的骰子投掷方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现上述一种增强现实的骰子投掷方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种增强现实的骰子投掷方法和一种增强现实的骰子投掷装置、一种电子设备和一种计算机可读存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种增强现实的骰子投掷方法,其特征在于,应用于移动终端,所述方法包括:
响应于骰子投掷指令,开启增强现实功能页面;
获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;
从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;
当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;
从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
2.根据权利要求1所述的方法,其特征在于,所述当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷,包括:
当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向;
基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹;
控制所述虚拟骰子模型在所述增强现实功能页面中按照所述运动轨迹运动。
3.根据权利要求2所述的方法,其特征在于,所述基于所述移动速度和所述移动方向确定针对所述虚拟骰子模型的运动轨迹,包括:
基于所述移动速度设定所述虚拟骰子模型的质量参数;
基于所述移动方向确定所述虚拟骰子模型的运动方向;
确定与所述质量参数和所述运动方向对应的所述运动轨迹。
4.根据权利要求2所述的方法,其特征在于,所述当识别到所述姿态动作信息满足预设的手势动作条件时,基于所述姿态动作信息确定所述用户手部的移动速度和移动方向之前,还包括:
检测所述增强现实场景中的图像信息;
当识别到所述图像信息中包括手部图像信息时,从所述手部图像信息中获取所述姿态动作信息;
基于所述姿态动作信息对应的所述移动方向,判断是否满足所述预设的手势动作条件。
5.根据权利要求1所述的方法,其特征在于,所述目标平面为静态物理体,所述虚拟骰子模型为动态物理体,所述增强现实场景的加速度为真实世界的重力加速度。
6.根据权利要求1所述的方法,其特征在于,所述虚拟骰子模型具有弹力属性,所述从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果,包括:
在所述虚拟骰子模型按照所述弹力属性从所述目标平面反弹后,从反弹后静止于所述目标平面上的所述虚拟骰子模型中确定所述本轮投掷结果。
7.根据权利要求4所述的方法,其特征在于,所述检测所述增强现实场景中的图像信息,包括:
采用预先训练的手部图像识别模型对基于AR引擎提供的所述增强现实场景中的预设数量的图像信息进行检测。
8.一种增强现实的骰子投掷装置,其特征在于,应用于移动终端,所述装置包括:
开启模块,用于响应于骰子投掷指令,开启增强现实功能页面;
显示模块,用于获取所述移动终端当前拍摄的真实场景,并在所述增强现实功能页面中显示对所述真实场景渲染后生成的增强现实场景;
生成模块,用于从所述增强现实场景中确定目标平面,并在所述目标平面上方的预设位置生成一虚拟骰子模型;
投掷模块,用于当从所述增强现实场景中识别到用户手部的姿态动作信息满足预设的投掷触发条件时,根据所述姿态动作信息对所述虚拟骰子模型进行投掷;
确定模块,用于从静止于所述目标平面上的所述虚拟骰子模型中确定本轮投掷结果。
9.一种电子设备,其特征在于,包括:处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1-7中任一项所述的一种增强现实的骰子投掷方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的一种增强现实的骰子投掷方法的步骤。
CN202111561135.1A 2021-12-15 2021-12-15 一种增强现实的骰子投掷方法、装置、电子设备和介质 Pending CN114377385A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111561135.1A CN114377385A (zh) 2021-12-15 2021-12-15 一种增强现实的骰子投掷方法、装置、电子设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111561135.1A CN114377385A (zh) 2021-12-15 2021-12-15 一种增强现实的骰子投掷方法、装置、电子设备和介质

Publications (1)

Publication Number Publication Date
CN114377385A true CN114377385A (zh) 2022-04-22

Family

ID=81197755

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111561135.1A Pending CN114377385A (zh) 2021-12-15 2021-12-15 一种增强现实的骰子投掷方法、装置、电子设备和介质

Country Status (1)

Country Link
CN (1) CN114377385A (zh)

Similar Documents

Publication Publication Date Title
US10282882B2 (en) Augmented reality simulation continuum
CN108958475B (zh) 虚拟对象控制方法、装置及设备
US9501204B2 (en) Display device
US20190236344A1 (en) Methods of determining handedness for virtual controllers
JP6062621B2 (ja) 物理モデルに基づくジェスチャ認識
US8957858B2 (en) Multi-platform motion-based computer interactions
CN111492330A (zh) 增强现实用户界面控制
CN107526443A (zh) 一种增强现实方法、装置、系统、电子设备及存储介质
US9535493B2 (en) Apparatus, method, computer program and user interface
WO2014114132A1 (en) Method, device, and system for interacting with a virtual character in smart terminal
WO2013147804A1 (en) Creation of three-dimensional graphics using gestures
CN112598769B (zh) 特效渲染方法、装置、电子设备、计算机可读存储介质
JP6450875B1 (ja) ゲームプログラム、ゲーム方法、および情報処理装置
CN108037830B (zh) 一种增强现实的实现方法
Ionescu et al. A multimodal interaction method that combines gestures and physical game controllers
US10512840B2 (en) Program, system, and method for providing game
KR101539666B1 (ko) 모바일 단말기를 통한 골프 시뮬레이션 방법, 이에 관한 프로그램 또는 어플리케이션이 기록된 기록매체 및 이를 이용한 골프 시뮬레이션 구동을 위한 모바일 단말기
CN114377384A (zh) 基于增强现实的骰子交互方法、装置以及电子设备
CN114377385A (zh) 一种增强现实的骰子投掷方法、装置、电子设备和介质
CN111651054A (zh) 音效控制方法、装置、电子设备及存储介质
CN114797096A (zh) 虚拟对象的控制方法、装置、设备及存储介质
TW201718061A (zh) 遊戲系統、控制方法及程式
Ionescu et al. Multimodal control of virtual game environments through gestures and physical controllers
Quek et al. Obscura: A mobile game with camera based mechanics
CN114385004A (zh) 基于增强现实的交互方法、装置、电子设备及可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination