CN115116295A - 关联性交互训练展示方法、系统、设备及存储介质 - Google Patents
关联性交互训练展示方法、系统、设备及存储介质 Download PDFInfo
- Publication number
- CN115116295A CN115116295A CN202210873754.2A CN202210873754A CN115116295A CN 115116295 A CN115116295 A CN 115116295A CN 202210873754 A CN202210873754 A CN 202210873754A CN 115116295 A CN115116295 A CN 115116295A
- Authority
- CN
- China
- Prior art keywords
- training
- special effect
- equipment
- intention
- display interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012549 training Methods 0.000 title claims abstract description 302
- 230000003993 interaction Effects 0.000 title claims abstract description 79
- 238000000034 method Methods 0.000 title claims abstract description 55
- 230000000694 effects Effects 0.000 claims abstract description 150
- 230000002452 interceptive effect Effects 0.000 claims abstract description 47
- 230000015654 memory Effects 0.000 claims description 16
- 238000003062 neural network model Methods 0.000 claims description 12
- 230000004927 fusion Effects 0.000 claims description 10
- 230000009471 action Effects 0.000 claims description 9
- 230000008921 facial expression Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 3
- 238000009877 rendering Methods 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Educational Technology (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明属于虚拟现实领域，提供了关联性交互训练展示方法、系统、设备及存储介质，所述方法通过实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面；可以使得两个互联设备同时具有用户的训练交互需求时，基于技能训练意图的关联性，使得两个设备建立统一的训练互动场景，实现两个用户之间的交互训练，有效提升技能训练的效果。
Description
技术领域
本发明属于虚拟现实技术领域，尤其涉及关联性交互训练展示方法、系统、设备及存储介质。
背景技术
随着虚拟现实技术的发展，虚拟现实的人机交互技术在技能训练方面也出现了越来越多的应用。目前，在人机交互技术领域中，如公开号为CN105425953B的专利文件中公开的一种人机交互的方法及系统，该方法包括获取指定对象的个性特征；将所述个性特征赋予虚拟角色，以使虚拟角色模仿所述指定对象与用户进行交互；其中，所述个性特征包括语言特征和语音特征。
上述方案提供的交互方法中，虽然通过让虚拟角色模仿指定对象相应的个性特征，使得人机进行交互时，能够使虚拟角色能像所述指定对象一样与用户进行互动，但是在实际应用时，其本质上还是与交互设备的虚拟角色进行单调的交互互动，多次使用后就不再有太多的吸引力，使得交互设备的使用频率大大降低，互动性降低，导致交互功能形同虚设，影响了技能训练的效果。
发明内容
本发明的目的在于提供关联性交互训练展示方法、系统、设备及存储介质，旨在解决上述背景技术中所提出的技术问题。
为实现上述目的，本发明提供了如下的技术方案。
第一方面，本发明提供了关联性交互训练展示方法；
所述的关联性交互训练展示方法应用于至少两台互动设备，至少两台互动设备包括第一设备和第二设备；所述关联性交互训练展示方法包括以下步骤：
实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面为训练特效A和训练特效B的融合画面。
作为本发明优选实施例技术方案的进一步限定，所述实时通过第一设备获取第一用户的第一训练意图的步骤包括：
当第一设备检测到第一用户触发交互的输入指令时，获取第一用户的图像信息，其中，所述图像信息包括面部表情图像和肢体动作图像；
将所述图像信息输入预设的级联神经网络模型进行处理，得到所述第一用户的训练意图。
作为本发明提供的优选实施例技术方案的进一步限定，所述级联神经网络模型基于YOLO算法对图像样本集训练得到，在训练过程中，所述级联神经网络模型的输入为图像样本集中标记了交互意图类型的样本图像信息，所述级联神经网络模型的输出为所述样本图像信息的交互意图；所述交互意图包括肢体动作意图、面部表情意图以及手势动作意图。
作为本发明提供的优选实施例技术方案的进一步限定，所述基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤包括：
服务器提取第一训练意图中的关键词；
服务器基于所述关键词在特效数据库中进行搜索，获得与所述关键词相匹配的至少两个训练特效；
第一设备在接收所述服务器发送的至少两个训练特效时，将所述至少两个训练特效在互动展示界面进行展示。
作为本发明提供的优选实施例技术方案的进一步限定，所述基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤还包括：
根据针对所述至少两个训练特效的操作手势，对所述至少两个训练特效执行选择操作；或者，根据针对所述至少两个训练特效的点击操作；
将选择操作或者点击操作所确定的训练特效作为训练特效A进行展示。
作为本发明提供的优选实施例技术方案的进一步限定，所述在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面的步骤包括：
服务器在接收训练特效A和训练特效B时，基于训练特效A生成多个场景A；以及基于训练特效B生成多个场景B；在所述多个场景A与所述多个场景B存在相同场景时，则确定所述训练特效A和训练特效B之间存在关联；
将训练特效A和训练特效B在所述相同场景中的融合渲染效果在第一设备和第二设备中进行同步的输出展示。
第二方面，本发明还提供了一种关联性交互训练展示系统。
所述关联性交互训练展示系统包括：
第一设备，所述第一设备用于实时获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
第二设备，所述第二设备用于实时获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
服务器，所述服务器用于在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B。
第三方面，本发明还提供了一种计算机设备，所述计算机设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令；
其中，所述处理器执行所述计算机可读指令时实现如第一方面所提供的关联性交互训练展示方法。
第四方面，本发明还提供了一种计算机可读存储介质；
所述计算机可读存储介质存储有计算机可读指令，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如第一方面所提供的关联性交互训练展示方法。
与现有技术相比，本发明提供的关联性交互训练展示方法通过实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面；可以使得两个互联设备同时具有用户的训练交互需求时，基于技能训练意图的关联性，使得两个设备建立统一的训练互动场景，实现两个用户之间的交互训练，有效提升技能训练的效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例。
图1为本发明用于实现关联性交互训练展示方法的系统架构图；
图2为本发明提供的关联性交互训练展示方法的实现流程图；
图3为本发明提供的关联性交互训练展示方法的一个子流程图；
图4为本发明提供的关联性交互训练展示方法的另一个子流程图；
图5为本发明提供的关联性交互训练展示方法的又一个子流程图；
图6为本发明提供的一种技能训练的关联性交互展示系统的结构框图；
图7为本发明提供的一种计算机设备的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
目前，现有技术的交互方法中，虽然通过让虚拟角色模仿指定对象相应的个性特征，使得人机进行交互时，能够使虚拟角色能像所述指定对象一样与用户进行互动，但是在实际应用时，其本质上还是与交互设备的虚拟角色进行单调的交互互动，多次使用后就不再有太多的吸引力，使得交互设备的使用频率大大降低，互动性降低，导致交互功能形同虚设，影响了技能训练的效果。
为解决上述问题，本发明提供了关联性交互训练展示方法，本发明提供的关联性交互训练展示方法通过实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面；可以使得两个互联设备同时具有用户的训练交互需求时，基于技能训练意图的关联性，使得两个设备建立统一的训练互动场景，实现两个用户之间的交互训练，有效提升技能训练的效果。
图1示出了用于实现关联性交互训练展示方法的示例性系统架构。
如图1所示，该系统架构包括第一设备101、服务器102和第二设备103。
其中，在本公开的示例性实施例中，所述第一设备101和服务器102之间、以及所述第二设备与所述服务器102之间均通过网络实现通信连接。
所述网络可以包括各种类型的有线通信链路或无线通信链路，例如：有线通信链路包括光纤、双绞线或同轴电缆的，无线通信链路包括蓝牙通信链路、无线保真(WIreless-FIdelity，Wi-Fi)通信链路。
相应的，所述服务器102可以是硬件，也可以是软件。当服务器102为硬件时，可以是具有图像处理能力、数据处理能力的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携式计算机和台式计算机等等。当服务器102为软件时，可以是安装上上述所列举的电子设备中。其可以实现呈多个软件或软件模块，也可以实现成单个软件或软件模块，在此不作具体限定。
以下结合具体实施例对本发明的具体实现进行详细描述。
实施例1
如图2所示，在本公开提供的一个示例性实施例中，关联性交互训练展示方法，所述的关联性交互训练展示方法应用于至少两台互动设备，至少两台互动设备包括第一设备101和第二设备103；
具体的，如图2所示，在本发明实施例中，所述关联性交互训练展示方法包括以下步骤：
步骤S201：实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
在本公开实施例提供的步骤S201的具体实现中，第一设备101通过自身配置的摄像模块，获取到与该设备当前互动的用户的影像，其中，第一设备所获取到的影像为包含有当前用户的图像，通过图像可以分析出当前用户的肢体动作的意图以及面部表情，结合肢体动作和面部表情对当前用户的训练意图进行分析。
步骤S202：实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
步骤S203：在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面。
可以理解的是，本发明通过对训练特效A和训练特效B之间是否存在联系进行判断，当存在联系时，使第一设备与第二设备之间进行产生关联性的训练互动，使得第一用户在利用第一设备进行训练交互时，能够产生与第二用户利用第二设备进行训练互动时的联动，这样使得用户进行训练交互时，并不是单纯的与设备的虚拟人物进行互动，而是与另外一个真实存在的用户进行训练的交互互动，这样能够提高技能训练互动的效果，提高用户进行训练交互的兴趣；
相应的，在本公开实施例中，当训练特效A与训练特效B之间不存在联系时，则第一用户单独与第一设备进行交互，而第二用户单独与第二设备进行交互。
可以理解的是，在实际应用过程中，还可以在第一用于与第一设备进行交互时，将训练特效A共享在其他互联交互设备的显示界面上，提醒其他互联交互设备的用户可以选择与训练特效A具有联系的训练特效来进行互动使用，这样，可以更为主动的建立与其他互联设备的交互，提高交互的趣味性。
进一步的，如图3所示，在本发明实施例中，所述实时通过第一设备获取第一用户的第一训练意图的步骤包括：
步骤S301：当第一设备检测到第一用户触发交互的输入指令时，获取第一用户的图像信息，其中，所述图像信息包括面部表情图像和肢体动作图像；
步骤S302：将所述图像信息输入预设的级联神经网络模型进行处理，得到所述第一用户的训练意图。
进一步的，在本发明实施例中，所述级联神经网络模型基于YOLO算法对图像样本集训练得到，在训练过程中，所述级联神经网络模型的输入为图像样本集中标记了交互意图类型的样本图像信息，所述级联神经网络模型的输出为所述样本图像信息的交互意图；所述交互意图包括肢体动作意图、面部表情意图以及手势动作意图。
进一步的，如图4所示，在本发明实施例中，所述基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤包括：
步骤S401：服务器提取第一训练意图中的关键词；
步骤S402：服务器基于所述关键词在特效数据库中进行搜索，获得与所述关键词相匹配的至少两个训练特效；
步骤S403：第一设备在接收所述服务器发送的至少两个训练特效时，将所述至少两个训练特效在互动展示界面进行展示。
进一步的，在本发明实施例中，所述基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤还包括：
步骤S404：根据针对所述至少两个训练特效的操作手势，对所述至少两个训练特效执行选择操作；或者，根据针对所述至少两个训练特效的点击操作；
步骤S405：将选择操作或者点击操作所确定的训练特效作为训练特效A进行展示。
进一步的，如图5所示，在本发明实施例中，所述在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面的步骤包括：
步骤S501：服务器在接收训练特效A和训练特效B时，基于训练特效A生成多个场景A；以及基于训练特效B生成多个场景B；在所述多个场景A与所述多个场景B存在相同场景时，则确定所述训练特效A和训练特效B之间存在关联；
步骤S502：将训练特效A和训练特效B在所述相同场景中的渲染效果同步在第一设备和第二设备中进行展示。
因此，本发明提供的关联性交互训练展示方法通过实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面；可以使得两个互联设备同时具有用户的训练交互需求时，基于技能训练意图的关联性，使得两个设备建立统一的训练互动场景，实现两个用户之间的交互训练，有效提升技能训练的效果。
实施例2
如图6所示，在本公开提供的示例性实施例中，本发明还提供了一种关联性交互训练展示系统，所述关联性交互训练展示系统包括：
第一设备101，所述第一设备用于实时获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
第二设备102，所述第二设备用于实时获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
服务器103，所述服务器用于在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B。
实施例3
如图7所示，在本发明实施例中，本发明还提供了一种计算机设备。
所述设备600包括存储器601、处理器602以及存储在所述存储器601中并可在所述处理器602上运行的计算机可读指令，所述处理器602执行所述计算机可读指令时实现如实施例1所提供的关联性交互训练展示方法。
其中，所述关联性交互训练展示方法包括以下步骤：
步骤S201：实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
步骤S202：实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
步骤S203：在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面。
此外，本发明实施例提供的所述设备600还可具有通讯接口603，用于接收控制指令。
实施例4
在本公开提供的示例性实施例中，还提供了一种计算机可读存储介质。
具体的，在本公开的示例性实施例中，所述存储介质存储有计算机可读指令，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如实施例1所提供的关联性交互训练展示方法。
在本公开的示例性实施例中，所述关联性交互训练展示方法包括以下步骤：
步骤S201：实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
步骤S202：实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
步骤S203：在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B的融合画面。
在本发明的各种实施例中，应理解，所述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物单元，即可位于一个地方，或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例所述方法的部分或全部步骤。
在本发明所提供的实施例中，应理解，“与A对应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。
本领域普通技术人员可以理解所述实施例的各种方法中的部分或全部步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，11RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory，EPROM)、一次可编程只读存储器(One-time Programma ble Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的信息交互的方法、装置、电子设备及存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (9)
1.关联性交互训练展示方法，其特征在于，应用于至少两台互动设备，至少两台互动设备包括第一设备和第二设备；
所述关联性交互训练展示方法包括以下步骤：
实时通过第一设备获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
实时通过第二设备获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面为训练特效A和训练特效B的融合画面。
2.根据权利要求1所述的关联性交互训练展示方法，其特征在于，所述实时通过第一设备获取第一用户的第一训练意图的步骤包括：
当第一设备检测到第一用户触发交互的输入指令时，获取第一用户的图像信息，其中，所述图像信息包括面部表情图像和肢体动作图像；
将所述图像信息输入预设的级联神经网络模型进行处理，得到所述第一用户的训练意图。
3.根据权利要求2所述的关联性交互训练展示方法，其特征在于，所述级联神经网络模型基于YOLO算法对图像样本集训练得到，在训练过程中，所述级联神经网络模型的输入为图像样本集中标记了交互意图类型的样本图像信息，所述级联神经网络模型的输出为所述样本图像信息的交互意图；所述交互意图包括肢体动作意图、面部表情意图以及手势动作意图。
4.根据权利要求2或3所述的关联性交互训练展示方法，其特征在于，所述基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤包括：
服务器提取第一训练意图中的关键词；
服务器基于所述关键词在特效数据库中进行搜索，获得与所述关键词相匹配的至少两个训练特效；
第一设备在接收所述服务器发送的至少两个训练特效时，将所述至少两个训练特效在互动展示界面进行展示。
5.根据权利要求4所述的关联性交互训练展示方法，其特征在于，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A的步骤还包括：
根据针对所述至少两个训练特效的操作手势，对所述至少两个训练特效执行选择操作；或者，根据针对所述至少两个训练特效的点击操作；
将选择操作或者点击操作所确定的训练特效作为训练特效A进行展示。
6.根据权利要求5所述的关联性交互训练展示方法，其特征在于，所述在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面的步骤包括：
服务器在接收训练特效A和训练特效B时，基于训练特效A生成多个场景A；以及基于训练特效B生成多个场景B；在所述多个场景A与所述多个场景B存在相同场景时，则确定所述训练特效A和训练特效B之间存在关联；
将训练特效A和训练特效B在所述相同场景中的融合渲染效果在第一设备和第二设备中进行同步的输出展示。
7.一种关联性交互训练展示系统，其特征在于，所述系统用于实现如权利要求1-6任一项所述的展示方法，所述系统包括：
第一设备，所述第一设备用于实时获取第一用户的第一训练意图，基于所述第一训练意图在所述第一设备的互动展示界面提供训练特效A；
第二设备，所述第二设备用于实时获取第二用户的第二训练意图，基于所述第二训练意图在所述第二设备的互动展示界面提供训练特效B；
服务器，所述服务器用于在所述训练特效A与所述训练特效B之间存在关联时，向所述第一设备的显示界面和所述第二设备的显示界面同步推送训练画面，所述训练画面包括训练特效A和训练特效B。
8.一种计算机设备，其特征在于，所述设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现如权利要求1-6任一项所述关联性交互训练展示方法。
9.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机可读指令，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如权利要求1-6任一项所述的关联性交互训练展示方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210873754.2A CN115116295B (zh) | 2022-07-24 | 2022-07-24 | 关联性交互训练展示方法、系统、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210873754.2A CN115116295B (zh) | 2022-07-24 | 2022-07-24 | 关联性交互训练展示方法、系统、设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115116295A true CN115116295A (zh) | 2022-09-27 |
| CN115116295B CN115116295B (zh) | 2024-05-28 |
Family
ID=83333638
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210873754.2A Active CN115116295B (zh) | 2022-07-24 | 2022-07-24 | 关联性交互训练展示方法、系统、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115116295B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116186644A (zh) * | 2023-02-17 | 2023-05-30 | 飞算数智科技(深圳)有限公司 | 人机交互开发方法、装置、存储介质及电子设备 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105023215A (zh) * | 2015-07-21 | 2015-11-04 | 中国矿业大学(北京) | 一种基于头戴式混合现实设备的危险行业安全培训系统 |
| CN106125903A (zh) * | 2016-04-24 | 2016-11-16 | 林云帆 | 多人交互系统及方法 |
| CN108665755A (zh) * | 2017-03-31 | 2018-10-16 | 深圳市掌网科技股份有限公司 | 互动式培训方法及互动式培训系统 |
| CN111369850A (zh) * | 2018-12-25 | 2020-07-03 | 南京飞鲨信息技术有限公司 | 一种vr模拟训练系统 |
| CN111722700A (zh) * | 2019-03-21 | 2020-09-29 | Tcl集团股份有限公司 | 一种人机交互方法及人机交互设备 |
| CN111880653A (zh) * | 2020-07-21 | 2020-11-03 | 珠海格力电器股份有限公司 | 一种设备联动场景建立方法、装置、电子设备及存储介质 |
| WO2021118237A1 (ko) * | 2019-12-10 | 2021-06-17 | 주식회사 피앤씨솔루션 | 복수의 사용자에게 최적화된 증강현실 시계 공유 전술 훈련 시스템 |
| CN113838331A (zh) * | 2021-10-11 | 2021-12-24 | 上海凯态信息技术有限公司 | 基于移动互联网的“人-人互动”能力训练方法 |
| CN113905189A (zh) * | 2021-09-28 | 2022-01-07 | 安徽尚趣玩网络科技有限公司 | 一种视频内容动态拼接方法及装置 |
-
2022
- 2022-07-24 CN CN202210873754.2A patent/CN115116295B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105023215A (zh) * | 2015-07-21 | 2015-11-04 | 中国矿业大学(北京) | 一种基于头戴式混合现实设备的危险行业安全培训系统 |
| CN106125903A (zh) * | 2016-04-24 | 2016-11-16 | 林云帆 | 多人交互系统及方法 |
| CN108665755A (zh) * | 2017-03-31 | 2018-10-16 | 深圳市掌网科技股份有限公司 | 互动式培训方法及互动式培训系统 |
| CN111369850A (zh) * | 2018-12-25 | 2020-07-03 | 南京飞鲨信息技术有限公司 | 一种vr模拟训练系统 |
| CN111722700A (zh) * | 2019-03-21 | 2020-09-29 | Tcl集团股份有限公司 | 一种人机交互方法及人机交互设备 |
| WO2021118237A1 (ko) * | 2019-12-10 | 2021-06-17 | 주식회사 피앤씨솔루션 | 복수의 사용자에게 최적화된 증강현실 시계 공유 전술 훈련 시스템 |
| CN111880653A (zh) * | 2020-07-21 | 2020-11-03 | 珠海格力电器股份有限公司 | 一种设备联动场景建立方法、装置、电子设备及存储介质 |
| WO2022017066A1 (zh) * | 2020-07-21 | 2022-01-27 | 格力电器（武汉）有限公司 | 一种设备联动场景建立方法、装置、电子设备及存储介质 |
| CN113905189A (zh) * | 2021-09-28 | 2022-01-07 | 安徽尚趣玩网络科技有限公司 | 一种视频内容动态拼接方法及装置 |
| CN113838331A (zh) * | 2021-10-11 | 2021-12-24 | 上海凯态信息技术有限公司 | 基于移动互联网的“人-人互动”能力训练方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116186644A (zh) * | 2023-02-17 | 2023-05-30 | 飞算数智科技(深圳)有限公司 | 人机交互开发方法、装置、存储介质及电子设备 |
| CN116186644B (zh) * | 2023-02-17 | 2024-04-19 | 飞算数智科技(深圳)有限公司 | 人机交互开发方法、装置、存储介质及电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115116295B (zh) | 2024-05-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11587300B2 (en) | Method and apparatus for generating three-dimensional virtual image, and storage medium | |
| KR102503413B1 (ko) | 애니메이션 인터랙션 방법, 장치, 기기 및 저장 매체 | |
| JP7316453B2 (ja) | オブジェクト推薦方法及び装置、コンピュータ機器並びに媒体 | |
| US20190272428A1 (en) | System, method and apparatus for displaying information | |
| KR102104294B1 (ko) | 디스플레이 장치로 읽을 수 있는 저장매체에 저장된 수화 영상 챗봇 애플리케이션 | |
| US20230107213A1 (en) | Method of generating virtual character, electronic device, and storage medium | |
| CN111729291B (zh) | 一种交互方法、装置、电子设备和存储介质 | |
| CN112990043A (zh) | 一种服务交互方法、装置、电子设备及存储介质 | |
| CN114222076B (zh) | 一种换脸视频生成方法、装置、设备以及存储介质 | |
| CN115116295A (zh) | 关联性交互训练展示方法、系统、设备及存储介质 | |
| CN113655895B (zh) | 应用于输入法的信息推荐方法、装置及电子设备 | |
| CN112700541B (zh) | 一种模型更新方法、装置、设备及计算机可读存储介质 | |
| CN114187405A (zh) | 确定虚拟形象的方法及装置、设备、介质和产品 | |
| CN110636362B (zh) | 图像处理方法、装置、系统及电子设备 | |
| EP4152138A1 (en) | Method and apparatus for adjusting virtual face model, electronic device and storage medium | |
| CN113327311B (zh) | 基于虚拟角色的显示方法、装置、设备、存储介质 | |
| CN116030185A (zh) | 三维发丝生成方法和模型的训练方法 | |
| CN115631251A (zh) | 基于文本生成图像的方法、装置、电子设备和介质 | |
| CN110807408B (zh) | 人物属性识别方法及装置 | |
| CN116048258A (zh) | 用于虚拟对象控制的方法、装置、设备和存储介质 | |
| CN116993868A (zh) | 动画生成方法、装置、电子设备及存储介质 | |
| CN115554701A (zh) | 虚拟角色的控制方法、装置、计算机设备和存储介质 | |
| CN118262016A (zh) | 图像生成方法、装置、电子设备及存储介质 | |
| CN115981539A (zh) | 多媒体资源交互方法、装置、电子设备及存储介质 | |
| CN114638919A (zh) | 虚拟形象的生成方法、电子设备、程序产品及用户终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |