CN114911381A - 交互的反馈方法和装置、存储介质及电子装置 - Google Patents
交互的反馈方法和装置、存储介质及电子装置 Download PDFInfo
- Publication number
- CN114911381A CN114911381A CN202210395861.9A CN202210395861A CN114911381A CN 114911381 A CN114911381 A CN 114911381A CN 202210395861 A CN202210395861 A CN 202210395861A CN 114911381 A CN114911381 A CN 114911381A
- Authority
- CN
- China
- Prior art keywords
- target
- action
- interaction
- intention
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 59
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000003993 interaction Effects 0.000 claims abstract description 197
- 230000009471 action Effects 0.000 claims abstract description 173
- 230000004927 fusion Effects 0.000 claims abstract description 56
- 238000012545 processing Methods 0.000 claims abstract description 28
- 238000011156 evaluation Methods 0.000 claims description 33
- 238000004458 analytical method Methods 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 13
- 230000033001 locomotion Effects 0.000 claims description 6
- 238000010801 machine learning Methods 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 5
- 239000013589 supplement Substances 0.000 claims description 5
- 230000000875 corresponding effect Effects 0.000 description 67
- 238000010586 diagram Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000003058 natural language processing Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 238000004887 air purification Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000008846 dynamic interplay Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
- G06F40/35—Discourse or dialogue representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种交互的反馈方法和装置、存储介质及电子装置，涉及智慧家庭技术领域，该方法包括：获取目标对象的交互意图，并确定处理交互意图的技能服务；目标对象为对话交互的对象，技能服务用于对交互意图进行响应；在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息；根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与动作分类匹配的目标动作；以及读取反馈信息携带的目标内容，基于目标内容确定虚拟对象的目标唇形动作；将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画，解决了无法根据目标对象的交互意图确定出相应的动画等问题。
Description
技术领域
本发明涉及智慧家庭领域，具体而言，涉及一种交互的反馈方法和装置、存储介质及电子装置。
背景技术
传统虚拟人交互，是根据用户交互信息，生成相应的动作参数，然后传递给终端展示出对应的表情和肢体动作。但是，上述方式通过参数驱动的虚拟人，在应对一些会实时变化的语料，或复杂的动作时，无法呈现良好的展示效果，只能下发固定的动作，使得用户与虚拟对象的交互过于死板，并且确定出的虚拟对象的动作种类过于单一。
针对相关技术中，无法根据目标对象的交互意图确定出相应的动画等问题，尚未提出有效的技术方案。
发明内容
本发明实施例提供了一种交互的反馈方法和装置、存储介质及电子装置，以至少解决相关技术中，无法根据目标对象的交互意图确定出相应的动画等问题。
根据本发明的一个实施例，提供了一种交互的反馈方法，包括：获取目标对象的交互意图，并确定处理交互意图的技能服务；其中，目标对象为对话交互的对象，技能服务用于对交互意图进行响应；在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息；根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画。
在一个示例性实施例中，获取目标对象的交互意图，包括：采集目标对象与智能设备进行对话交互的实时交互信息，其中，实时交互信息包括以下至少之一：目标对象发出的语音信息、目标对象输入的文本信息；对实时交互信息进行语义解析，根据语义解析的结果确定目标对象的交互意图。
在一个示例性实施例中，在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息，包括：在交互意图中存在多个语料的情况下，对交互意图进行语料筛选，以确定出用于在技能服务进行查询的查询语料；在查询语料添加上目标对象的标识信息，得到目标查询语料；将目标查询语料传输至技能服务中进行查询，以确定出与目标查询语料对应的反馈信息，其中，反馈信息包含以下至少之一：技能服务反馈的文本信息、技能服务反馈的语音信息。
在一个示例性实施例中，读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作，包括：读取所述反馈信息中携带的目标内容；生成与所述目标内容对应的口型数据，获取所述口型数据中的唇形特征；汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
在一个示例性实施例中，将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画，包括：将目标动作与目标唇形动作输入到虚拟对象模型中，以得到用于反馈目标对象交互意图的融合动画，其中，虚拟对象模型为使用多组数据通过机器学习训练出的，多组数据中的每组数据均包括：目标动作，以及目标动作对应的目标唇形动作。
在一个示例性实施例中，将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画之后，上述方法还包括：获取目标对象对智能设备上显示的融合动画的评价信息；其中，评价信息为目标对象与融合动画完成交互后反馈的满意度；根据评价信息确定智能设备是否对交互意图进行了成功响应。
在一个示例性实施例中，根据评价信息确定智能设备是否对交互意图进行了成功响应，包括：在评价信息对应的满意度大于或者等于预设阈值的情况下，确定目标对象的交互意图已经被成功响应，结束对目标对象当前交互意图的处理；在评价信息对应的满意度小于预设阈值的情况下，确定目标对象的交互意图未被成功响应，在智能设备上显示询问信息，其中，显示询问信息用于提示目标对象对交互意图进行补充。
根据本发明的另一个实施例，提供了一种交互的反馈方法装置，包括：第一获取模块，用于获取目标对象的交互意图，并确定处理交互意图的技能服务；其中，目标对象为对话交互的对象，技能服务用于对交互意图进行响应；第二获取模块，用于在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息；动作模块，用于根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；融合模块，用于将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画。
在一个示例性实施例中，上述第一获取模块，还用于采集所述目标对象与所述智能设备进行对话交互的实时交互信息，其中，所述实时交互信息包括以下至少之一：目标对象发出的语音信息、目标对象输入的文本信息；对所述实时交互信息进行语义解析，根据所述语义解析的结果确定所述目标对象的交互意图。
在一个示例性实施例中，上述第二获取模块，还用于在交互意图中存在多个语料的情况下，对交互意图进行语料筛选，以确定出用于在技能服务进行查询的查询语料；在查询语料添加上目标对象的标识信息，得到目标查询语料；将目标查询语料传输至技能服务中进行查询，以确定出与目标查询语料对应的反馈信息，其中，反馈信息包含以下至少之一：技能服务反馈的文本信息、技能服务反馈的语音信息。
在一个示例性实施例中，上述动作模块，还用于读取所述反馈信息中携带的目标内容；生成与所述目标内容对应的口型数据，获取所述口型数据中的唇形特征；汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
在一个示例性实施例中，上述融合模块，还用于将目标动作与目标唇形动作输入到虚拟对象模型中，以得到用于反馈目标对象交互意图的融合动画，其中，虚拟对象模型为使用多组数据通过机器学习训练出的，多组数据中的每组数据均包括：目标动作，以及目标动作对应的目标唇形动作。
在一个示例性实施例中，上述装置还包括：评价模块，用于获取目标对象对智能设备上显示的融合动画的评价信息；其中，评价信息为目标对象与融合动画完成交互后反馈的满意度；根据评价信息确定智能设备是否对交互意图进行了成功响应。
在一个示例性实施例中，上述评价模块，还用于在评价信息对应的满意度大于或者等于预设阈值的情况下，确定目标对象的交互意图已经被成功响应，结束对目标对象当前交互意图的处理；在评价信息对应的满意度小于预设阈值的情况下，确定目标对象的交互意图未被成功响应，在智能设备上显示询问信息，其中，显示询问信息用于提示目标对象对交互意图进行补充。
根据本发明的又一个实施例，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明，获取目标对象的交互意图，并确定处理交互意图的技能服务；其中，目标对象为对话交互的对象，技能服务用于对交互意图进行响应；在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息；根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画。也就是说，通过确定目标对象的交互意图，进而分发至对应的技能服务进行处理，并根据处理的反馈信息确定出虚拟对象的目标动作以及虚拟对象的目标唇形动作，以生成用于与目标对象进行交互，反馈目标意图的融合动画，因此，可以解决现有技术中无法根据目标对象的交互意图确定出相应的动画等问题，进一步的，通过针对不同的交互意图，确定出相应的融合动画，使得智能设备上的虚拟对象与目标对象的交互更加灵活，对于复杂文本、复杂动作也可以实现快速处理，提升了用户的使用体验。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种交互的反馈方法的硬件环境示意图；
图2是根据本发明实施例的交互的反馈方法的流程图；
图3是根据本发明可选实施例的虚拟人技能动作的处理流程示意图；
图4是根据本发明实施例的交互的反馈方法装置的结构框图(一)；
图5是根据本发明实施例的交互的反馈方法装置的结构框图(二)。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例的一个方面，提供了一种交互的反馈方法。该交互的反馈方法广泛应用于智慧家庭(Smart Home)、智能家居、智能家用设备生态、智慧住宅(Intelligence House)生态等全屋智能数字化控制应用场景。可选地，在本实施例中，上述交互的反馈方法可以应用于如图1所示的由终端设备102和服务器104所构成的硬件环境中。如图1所示，服务器104通过网络与终端设备102进行连接，可用于为终端或终端上安装的客户端提供服务(如应用服务等)，可在服务器上或独立于服务器设置数据库，用于为服务器104提供数据存储服务，可在服务器上或独立于服务器配置云计算和/或边缘计算服务，用于为服务器104提供数据运算服务。
上述网络可以包括但不限于以下至少之一：有线网络，无线网络。上述有线网络可以包括但不限于以下至少之一：广域网，城域网，上述无线网络可以包括但不限于以下至少之一：WIFI(Wireless Fidelity，无线保真)，蓝牙。终端设备102可以并不限定于为PC、手机、平板电脑、智能空调、智能烟机、智能冰箱、智能烤箱、智能炉灶、智能洗衣机、智能热水器、智能洗涤设备、智能洗碗机、智能投影设备、智能电视、智能晾衣架、智能窗帘、智能影音、智能插座、智能音响、智能音箱、智能新风设备、智能厨卫设备、智能卫浴设备、智能扫地机器人、智能擦窗机器人、智能拖地机器人、智能空气净化设备、智能蒸箱、智能微波炉、智能厨宝、智能净化器、智能饮水机、智能门锁等。
在本实施例中提供了一种交互的反馈方法，图2是根据本发明实施例的交互的反馈方法的流程图，该流程包括如下步骤：
步骤S202，获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；可选的，这里的交互双方可以为携带有生成融合动画功能的智能设备与目标对象。
步骤S204，在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
步骤S206，根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
可选的，为了保证虚拟对象与目标对象之间的联系，将目标对象与所述虚拟对象进行对应关联，例如，收集目标对象的图像信息作为虚拟对象作出反馈的参考，继而在生成虚拟对象的融合动画后，识别当前的目标对象的图像信息，并通过比较图像信息确定是否为同一目标对象，从而向目标对象准确的反馈对应的融合动画，保证虚拟人响应的准确性。即目标对象与所述虚拟对象可以相互对应。
步骤S208，将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
通过上述步骤，获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。也就是说，通过确定目标对象的交互意图，进而分发至对应的技能服务进行处理，并根据处理的反馈信息确定出虚拟对象的目标动作以及虚拟对象的目标唇形动作，以生成用于与目标对象进行交互，反馈目标意图的融合动画，因此，可以解决现有技术中无法根据目标对象的交互意图确定出相应的动画等问题，进一步的，通过针对不同的交互意图，确定出相应的融合动画，使得智能设备上的虚拟对象与目标对象的交互更加灵活，对于复杂文本、复杂动作也可以实现快速处理，提升了用户的使用体验。
需要说明的是，上述实施方式可以应用在智能机器人上，也可以应用在连接云平台的目标终端上，对此本发明不作过多限定。
在一个示例性实施例中，获取目标对象的交互意图，包括：采集目标对象与智能设备进行对话交互的实时交互信息，其中，实时交互信息包括以下至少之一：目标对象发出的语音信息、目标对象输入的文本信息；对实时交互信息进行语义解析，根据语义解析的结果确定目标对象的交互意图。
简单来说，通过实时采集目标对象与智能设备进行交互的文本信息以及语音信息，使用NLP(natural language processing，自然语言处理，简称NLP)技术对获取得到的文本信息以及语音信息进行语义解析处理，继而可以快速确定出目标对象与智能设备进行对话交互的交互意图。
在一个示例性实施例中，在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息，包括：在交互意图中存在多个语料的情况下，对交互意图进行语料筛选，以确定出用于在技能服务进行查询的查询语料；在查询语料添加上目标对象的标识信息，得到目标查询语料；将目标查询语料传输至技能服务中进行查询，以确定出与目标查询语料对应的反馈信息，其中，反馈信息包含以下至少之一：技能服务反馈的文本信息、技能服务反馈的语音信息。
可以理解的是，为了保证不同目标对象的反馈信息可以准确的响应至对应的目标对象，通过在交互意图对应的查询语料中添加目标对象的标识信息进行标识，使得确定出的反馈信息也与对应的目标对象相互对应，保证目标对象与智能设备交互的准确性。
在一个示例性实施例中，读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作，包括：读取所述反馈信息中携带的目标内容；生成与所述目标内容对应的口型数据，获取所述口型数据中的唇形特征；汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
在一个示例性实施例中，将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画，包括：将目标动作与目标唇形动作输入到虚拟对象模型中，以得到用于反馈目标对象交互意图的融合动画，其中，虚拟对象模型为使用多组数据通过机器学习训练出的，多组数据中的每组数据均包括：目标动作，以及目标动作对应的目标唇形动作。
例如，以“北京今天天气”为例，通过对用户文本的解析，可以知道用户意图是查询北京的天气，下一步将用户的语料送入技能服务中，获得天气结果文本“北京今天天气晴…”，获得文本后，从预置动作集合中确定出与天气结果关联的预置天气动作，并进一步根据文本内容生成与文本对应的口型动作，得到用户意图对应的反馈信息的目标唇形动作，并且在文本口型动作生成后，可以与对应的预置天气动作进行合成渲染，这样输出最终的天气查询动画，包含用户意图对应的目标动作与目标唇形动作。
在一个示例性实施例中，将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画之后，上述方法还包括：获取目标对象对智能设备上显示的融合动画的评价信息；其中，评价信息为目标对象与融合动画完成交互后反馈的满意度；根据评价信息确定智能设备是否对交互意图进行了成功响应。其中，所述成功响应用于指示目标对象的交互意图与融合动画相互对应，交互意图被融合动画成功处理。
在一个示例性实施例中，根据评价信息确定智能设备是否对交互意图进行了成功响应，包括：在评价信息对应的满意度大于或者等于预设阈值的情况下，确定目标对象的交互意图已经被成功响应，结束对目标对象当前交互意图的处理；在评价信息对应的满意度小于预设阈值的情况下，确定目标对象的交互意图未被成功响应，在智能设备上显示询问信息，其中，显示询问信息用于提示目标对象对交互意图进行补充。
换句话说，为了保证目标对象的交互体验，在确定出目标对象对应交互意图响应的融合动画之后，获取目标对象对显示的融合动画的满意度，继而在目标对象不满意的情况下，主动向目标对象进行询问，对交互意图进行再次确认，以保证目标对象的真实交互意图被准确的响应。
为了更好的理解上述交互的反馈方法的过程，以下结合几个可选实施例对上述交互的反馈方法流程进行说明。
作为一种可选的实施例，提出了一种虚拟人技能动作的处理方法，对复杂的文本，或复杂连续的动作，通过结合用户具体的交互内容，确定出对应的交互意图，给到对应的技能进行处理，生成相应的文本结果。使用文本内容，进行唇形动作的生成，最终将唇形动作与事前制作好的预置动作集合，进行统一的渲染，输出最终的动画，以得到在智能设备上显示的与用户进行动态交互的交互动画。
可选的，图3是根据本发明可选实施例的虚拟人技能动作的处理流程示意图。具体的，包含以下步骤：
步骤S302，获取用户与智能设备对话产生的交互内容，例如：我要听XXX，跳个XXX，北京今天天气，现在几点了等。
步骤S304，对用户的交互内容进行语义解析，就以“北京今天天气”为例，将该交互内容可以解析为：北京(地点)/今天(时间)/天气(反馈内容)，即可以确定出用户的交互意图是想要知道北京这个地点在今天的天气状况信息。
步骤S306，对语音解析出的交互意图通过技能解析进行进一步处理，例如，交互意图是想要知道北京这个地点在今天的天气状况信息，此处，可以对智能设备上有关天气的技能服务进行调用，并在中查询北京今天的天气。
步骤S308，确定出技能服务的响应结果(相当于本发明实施例中的反馈信息)，例如：技能服务根据交互意图是想要知道北京这个地点在今天的天气状况信息，输出天气结果是“北京今天天气晴”的文本。
步骤S310，根据响应结果对应的文本内容，生成对应的口型动作，得到虚拟对象的目标唇形动作；通过判断文本内容从预置动作中选出与文本对应的动作模型，将目标唇形动作和动作模型进行融合，得到与所述交互意图对应的虚拟对应的展示动画。
可选的，以“北京今天天气”为例，对上述整体流程进行解释说明，通过对用户文本的语义解析，可以知道用户意图是查询北京的天气，下一步将用户的语料送入技能服务中，获得天气结果文本“北京今天天气晴…”，获得文本后，需要根据文本内容，生成与文本对应的口型动作，文本口型动作生成后，与对应的预置天气动作进行合成渲染，这样输出最终的天气查询动画，包含口型与对应的文本动作。
可选的，上述技能服务还可以根据实际应用情况反馈对应的语音融合数据，对此本发明不做不过多限定。
综上，通过上述设计，解决了在虚拟人交互时，用户交互意图中的复杂动作的难以实现步骤，就需要结合用户具体的交互内容，与预先生成半成品动画进行结合，进而生成最终的交互动画，即在解析用户交互意图获得文本结果后，将文本生成的唇形动画与预置的动画进行合成，生成最终动画的方式，实时的唇形生成与预置动画相结合，在避免唇不对形的同时，还能实现较好的展示效果。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述交互的反馈方法。
在本实施例中还提供了一种交互的反馈装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本发明实施例的交互的反馈装置的结构框图(一)，如图4所示，该装置包括：
(1)第一获取模块42，用于获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；
(2)第二获取模块44，用于在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
(3)动作模块46，用于根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
(4)融合模块，用于将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
通过上述装置，获取目标对象的交互意图，并确定处理交互意图的技能服务；其中，目标对象为对话交互的对象，技能服务用于对交互意图进行响应；在技能服务收到交互意图的情况下，获取技能服务根据交互意图确定的反馈信息；确定出与反馈信息匹配的虚拟对象的目标动作，并根据反馈信息生成虚拟对象的目标唇形动作；将目标动作与目标唇形动作进行融合，得到用于反馈目标对象的交互意图，且显示在智能设备上的融合动画。也就是说，通过确定目标对象的交互意图，进而分发至对应的技能服务进行处理，并根据处理的反馈信息确定出虚拟对象的目标动作以及虚拟对象的目标唇形动作，以生成用于与目标对象进行交互，反馈目标意图的融合动画，因此，可以解决现有技术中无法根据目标对象的交互意图确定出相应的动画等问题，进一步的，通过针对不同的交互意图，确定出相应的融合动画，使得智能设备上的虚拟对象与目标对象的交互更加灵活，对于复杂文本、复杂动作也可以实现快速处理，提升了用户的使用体验。
在一个示例性实施例中，上述第一获取模块，还用于采集所述目标对象与所述智能设备进行对话交互的实时交互信息，其中，所述实时交互信息包括以下至少之一：目标对象发出的语音信息、目标对象输入的文本信息；对所述实时交互信息进行语义解析，根据所述语义解析的结果确定所述目标对象的交互意图。简单来说，通过实时采集目标对象与智能设备进行交互的文本信息以及语音信息，使用NLP(natural language processing，自然语言处理，简称NLP)技术对获取得到的文本信息以及语音信息进行语义解析处理，继而可以快速确定出目标对象与智能设备进行对话交互的交互意图。
在一个示例性实施例中，上述第二获取模块，还用于在交互意图中存在多个语料的情况下，对交互意图进行语料筛选，以确定出用于在技能服务进行查询的查询语料；在查询语料添加上目标对象的标识信息，得到目标查询语料；将目标查询语料传输至技能服务中进行查询，以确定出与目标查询语料对应的反馈信息，其中，反馈信息包含以下至少之一：技能服务反馈的文本信息、技能服务反馈的语音信息。可以理解的是，为了保证不同目标对象的反馈信息可以准确的响应至对应的目标对象，通过在交互意图对应的查询语料中添加目标对象的标识信息进行标识，使得确定出的反馈信息也与对应的目标对象相互对应，保证目标对象与智能设备交互的准确性。
在一个示例性实施例中，上述动作模块，还用于读取所述反馈信息中携带的目标内容；生成与所述目标内容对应的口型数据，获取所述口型数据中的唇形特征；汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。在一个示例性实施例中，上述融合模块，还用于将目标动作与目标唇形动作输入到虚拟对象模型中，以得到用于反馈目标对象交互意图的融合动画，其中，虚拟对象模型为使用多组数据通过机器学习训练出的，多组数据中的每组数据均包括：目标动作，以及目标动作对应的目标唇形动作。
例如，以“北京今天天气”为例，通过对用户文本的解析，可以知道用户意图是查询北京的天气，下一步将用户的语料送入技能服务中，获得天气结果文本“北京今天天气晴…”，获得文本后，从预置动作集合中确定出与天气结果关联的预置天气动作，并进一步根据文本内容生成与文本对应的口型动作，得到用户意图对应的反馈信息的目标唇形动作，并且在文本口型动作生成后，可以与对应的预置天气动作进行合成渲染，这样输出最终的天气查询动画，包含用户意图对应的目标动作与目标唇形动作。
图5是根据本发明实施例的交互的反馈装置的结构框图(二)，如图5所示，该装置除了包含图4中的所有模块，还包括：评价模块50。
在一个示例性实施例中，上述装置还包括：评价模块，用于获取目标对象对智能设备上显示的融合动画的评价信息；其中，评价信息为目标对象与融合动画完成交互后反馈的满意度；根据评价信息确定智能设备是否对交互意图进行了成功响应。
在一个示例性实施例中，上述评价模块，还用于在评价信息对应的满意度大于或者等于预设阈值的情况下，确定目标对象的交互意图已经被成功响应，结束对目标对象当前交互意图的处理；在评价信息对应的满意度小于预设阈值的情况下，确定目标对象的交互意图未被成功响应，在智能设备上显示询问信息，其中，显示询问信息用于提示目标对象对交互意图进行补充。
换句话说，为了保证目标对象的交互体验，在确定出目标对象对应交互意图响应的融合动画之后，获取目标对象对显示的融合动画的满意度，继而在目标对象不满意的情况下，主动向目标对象进行询问，对交互意图进行再次确认，以保证目标对象的真实交互意图被准确的响应。
在本发明的描述中，需要理解的是，术语中“中心”、“上”、“下”、“前”、“后”、“左”、“右”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或组件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“连接”、“相连”应做广义理解，例如，可以是固定连接，也可以是拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以是通过中间媒介间接相连，可以是两个组件内部的连通。当组件被称为“固定于”或“设置于”另一个元件，它可以直接在另一个组件上或者也可以存在居中的组件。当一个组件被认为是“连接”另一个元件，它可以是直接连接到另一个元件或者可能同时存在居中元件。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明的具体含义。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：
S1，获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；
S2，在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
S3，根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
S4，将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
在一个示例性实施例中，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
在一个示例性实施例中，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；
S2，在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
S3，根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
S4，将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
在一个示例性实施例中，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，在一个示例性实施例中，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种交互的反馈方法，其特征在于，包括：
获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；
在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
2.根据权利要求1所述交互的反馈方法，其特征在于，获取目标对象的交互意图，包括：
采集所述目标对象与所述智能设备进行对话交互的实时交互信息，其中，所述实时交互信息包括以下至少之一：目标对象发出的语音信息、目标对象输入的文本信息；
对所述实时交互信息进行语义解析，根据所述语义解析的结果确定所述目标对象的交互意图。
3.根据权利要求1所述交互的反馈方法，其特征在于，在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息，包括：
在所述交互意图中存在多个语料的情况下，对所述交互意图进行语料筛选，以确定出用于在所述技能服务进行查询的查询语料；
在所述查询语料添加上所述目标对象的标识信息，得到目标查询语料；
将所述目标查询语料传输至所述技能服务中进行查询，以确定出与所述目标查询语料对应的反馈信息，其中，所述反馈信息包含以下至少之一：技能服务反馈的文本信息、技能服务反馈的语音信息。
4.根据权利要求1所述交互的反馈方法，其特征在于，读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作，包括：
读取所述反馈信息中携带的目标内容；
生成与所述目标内容对应的口型数据，获取所述口型数据中的唇形特征；
汇总所述唇形特征确定出所述反馈信息对应的所述虚拟对象的目标唇形动作。
5.根据权利要求1所述交互的反馈方法，其特征在于，将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画，包括：
将所述目标动作与所述目标唇形动作输入到虚拟对象模型中，以得到用于反馈所述目标对象交互意图的融合动画，其中，所述虚拟对象模型为使用多组数据通过机器学习训练出的，所述多组数据中的每组数据均包括：目标动作，以及目标动作对应的目标唇形动作。
6.根据权利要求1所述交互的反馈方法，其特征在于，将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画之后，所述方法还包括：
获取所述目标对象对智能设备上显示的所述融合动画的评价信息；其中，所述评价信息为目标对象与所述融合动画完成交互后反馈的满意度；
根据所述评价信息确定智能设备是否对所述交互意图进行了成功响应。
7.根据权利要求6所述交互的反馈方法，其特征在于，根据所述评价信息确定智能设备是否对所述交互意图进行了成功响应，包括：
在所述评价信息对应的满意度大于或者等于预设阈值的情况下，确定所述目标对象的交互意图已经被成功响应，结束对所述目标对象当前交互意图的处理；
在所述评价信息对应的满意度小于预设阈值的情况下，确定所述目标对象的交互意图未被成功响应，在所述智能设备上显示询问信息，其中，所述显示询问信息用于提示所述目标对象对交互意图进行补充。
8.一种交互的反馈方法装置，其特征在于，包括：
第一获取模块，用于获取目标对象的交互意图，并确定处理所述交互意图的技能服务；其中，所述目标对象为对话交互的对象，所述技能服务用于对所述交互意图进行响应；
第二获取模块，用于在所述技能服务收到所述交互意图的情况下，获取所述技能服务根据所述交互意图确定的反馈信息；
动作模块，用于根据反馈信息确定动作分类，从虚拟对象的预置动作集合中确定出与所述动作分类匹配的目标动作；以及读取所述反馈信息携带的目标内容，基于所述目标内容确定所述虚拟对象的目标唇形动作；
融合模块，用于将所述目标动作与所述目标唇形动作进行融合，得到用于反馈所述目标对象的交互意图，且显示在智能设备上的融合动画。
9.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行权利要求1至7中任一项所述的方法。
10.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行权利要求1至7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210395861.9A CN114911381B (zh) | 2022-04-15 | 2022-04-15 | 交互的反馈方法和装置、存储介质及电子装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210395861.9A CN114911381B (zh) | 2022-04-15 | 2022-04-15 | 交互的反馈方法和装置、存储介质及电子装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114911381A true CN114911381A (zh) | 2022-08-16 |
| CN114911381B CN114911381B (zh) | 2023-06-16 |
Family
ID=82764078
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210395861.9A Active CN114911381B (zh) | 2022-04-15 | 2022-04-15 | 交互的反馈方法和装置、存储介质及电子装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114911381B (zh) |
Citations (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106653052A (zh) * | 2016-12-29 | 2017-05-10 | Tcl集团股份有限公司 | 虚拟人脸动画的生成方法及装置 |
| US20190043252A1 (en) * | 2017-08-07 | 2019-02-07 | Personify, Inc. | Systems and methods compression, transfer, and reconstruction of three-dimensional (3d) data meshes |
| CN110109541A (zh) * | 2019-04-25 | 2019-08-09 | 广州智伴人工智能科技有限公司 | 一种多模态交互的方法 |
| CN110767220A (zh) * | 2019-10-16 | 2020-02-07 | 腾讯科技（深圳）有限公司 | 一种智能语音助手的交互方法、装置、设备及存储介质 |
| CN110876024A (zh) * | 2018-08-31 | 2020-03-10 | 百度在线网络技术（北京）有限公司 | 确定虚拟形象唇部动作的方法和装置 |
| CN111145282A (zh) * | 2019-12-12 | 2020-05-12 | 科大讯飞股份有限公司 | 虚拟形象合成方法、装置、电子设备和存储介质 |
| CN111274372A (zh) * | 2020-01-15 | 2020-06-12 | 上海浦东发展银行股份有限公司 | 用于人机交互的方法、电子设备和计算机可读存储介质 |
| CN111459264A (zh) * | 2018-09-18 | 2020-07-28 | 阿里巴巴集团控股有限公司 | 3d对象交互系统和方法及非暂时性计算机可读介质 |
| CN112102448A (zh) * | 2020-09-14 | 2020-12-18 | 北京百度网讯科技有限公司 | 虚拟对象图像显示方法、装置、电子设备和存储介质 |
| US20210035586A1 (en) * | 2017-03-23 | 2021-02-04 | Joyson Safety Systems Acquisition Llc | System and method of correlating mouth images to input commands |
| CN112562670A (zh) * | 2020-12-03 | 2021-03-26 | 深圳市欧瑞博科技股份有限公司 | 语音智能识别方法、语音智能识别装置及智能设备 |
| CN112650831A (zh) * | 2020-12-11 | 2021-04-13 | 北京大米科技有限公司 | 虚拟形象生成方法、装置、存储介质及电子设备 |
| CN113298858A (zh) * | 2021-05-21 | 2021-08-24 | 广州虎牙科技有限公司 | 一种虚拟形象的动作生成方法、装置、终端以及存储介质 |
| CN113392201A (zh) * | 2021-06-18 | 2021-09-14 | 中国工商银行股份有限公司 | 信息交互方法、装置、电子设备、介质和程序产品 |
| CN113436602A (zh) * | 2021-06-18 | 2021-09-24 | 深圳市火乐科技发展有限公司 | 虚拟形象语音交互方法、装置、投影设备和计算机介质 |
| CN113590078A (zh) * | 2021-07-30 | 2021-11-02 | 平安科技（深圳）有限公司 | 虚拟形象合成方法、装置、计算设备及存储介质 |
| CN113760100A (zh) * | 2021-09-22 | 2021-12-07 | 入微智能科技(南京)有限公司 | 一种带有虚拟形象生成、显示和控制功能的人机交互设备 |
| CN113760142A (zh) * | 2020-09-30 | 2021-12-07 | 完美鲲鹏(北京)动漫科技有限公司 | 基于虚拟角色的交互方法及装置、存储介质、计算机设备 |
-
2022
- 2022-04-15 CN CN202210395861.9A patent/CN114911381B/zh active Active
Patent Citations (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106653052A (zh) * | 2016-12-29 | 2017-05-10 | Tcl集团股份有限公司 | 虚拟人脸动画的生成方法及装置 |
| US20210035586A1 (en) * | 2017-03-23 | 2021-02-04 | Joyson Safety Systems Acquisition Llc | System and method of correlating mouth images to input commands |
| US20190043252A1 (en) * | 2017-08-07 | 2019-02-07 | Personify, Inc. | Systems and methods compression, transfer, and reconstruction of three-dimensional (3d) data meshes |
| CN110876024A (zh) * | 2018-08-31 | 2020-03-10 | 百度在线网络技术（北京）有限公司 | 确定虚拟形象唇部动作的方法和装置 |
| CN111459264A (zh) * | 2018-09-18 | 2020-07-28 | 阿里巴巴集团控股有限公司 | 3d对象交互系统和方法及非暂时性计算机可读介质 |
| CN110109541A (zh) * | 2019-04-25 | 2019-08-09 | 广州智伴人工智能科技有限公司 | 一种多模态交互的方法 |
| CN110767220A (zh) * | 2019-10-16 | 2020-02-07 | 腾讯科技（深圳）有限公司 | 一种智能语音助手的交互方法、装置、设备及存储介质 |
| CN111145282A (zh) * | 2019-12-12 | 2020-05-12 | 科大讯飞股份有限公司 | 虚拟形象合成方法、装置、电子设备和存储介质 |
| CN111274372A (zh) * | 2020-01-15 | 2020-06-12 | 上海浦东发展银行股份有限公司 | 用于人机交互的方法、电子设备和计算机可读存储介质 |
| CN112102448A (zh) * | 2020-09-14 | 2020-12-18 | 北京百度网讯科技有限公司 | 虚拟对象图像显示方法、装置、电子设备和存储介质 |
| US20210201912A1 (en) * | 2020-09-14 | 2021-07-01 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Virtual Object Image Display Method and Apparatus, Electronic Device and Storage Medium |
| CN113760142A (zh) * | 2020-09-30 | 2021-12-07 | 完美鲲鹏(北京)动漫科技有限公司 | 基于虚拟角色的交互方法及装置、存储介质、计算机设备 |
| CN112562670A (zh) * | 2020-12-03 | 2021-03-26 | 深圳市欧瑞博科技股份有限公司 | 语音智能识别方法、语音智能识别装置及智能设备 |
| CN112650831A (zh) * | 2020-12-11 | 2021-04-13 | 北京大米科技有限公司 | 虚拟形象生成方法、装置、存储介质及电子设备 |
| CN113298858A (zh) * | 2021-05-21 | 2021-08-24 | 广州虎牙科技有限公司 | 一种虚拟形象的动作生成方法、装置、终端以及存储介质 |
| CN113392201A (zh) * | 2021-06-18 | 2021-09-14 | 中国工商银行股份有限公司 | 信息交互方法、装置、电子设备、介质和程序产品 |
| CN113436602A (zh) * | 2021-06-18 | 2021-09-24 | 深圳市火乐科技发展有限公司 | 虚拟形象语音交互方法、装置、投影设备和计算机介质 |
| CN113590078A (zh) * | 2021-07-30 | 2021-11-02 | 平安科技（深圳）有限公司 | 虚拟形象合成方法、装置、计算设备及存储介质 |
| CN113760100A (zh) * | 2021-09-22 | 2021-12-07 | 入微智能科技(南京)有限公司 | 一种带有虚拟形象生成、显示和控制功能的人机交互设备 |
Non-Patent Citations (2)
| Title |
|---|
| 汪永生;李岩;刘明;: "移动AR技术教学机器人实验辅助应用研究", 铜陵学院学报 * |
| 赵守伟;王凯;张勇;王伟明;于明;: "增强现实辅助维修系统的评价方法研究", 火炮发射与控制学报 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114911381B (zh) | 2023-06-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108108821B (zh) | 模型训练方法及装置 | |
| US10063702B2 (en) | Intelligent customer service systems, customer service robots, and methods for providing customer service | |
| CN105898487B (zh) | 一种面向智能机器人的交互方法和装置 | |
| CN109582872B (zh) | 一种信息推送方法、装置、电子设备及存储介质 | |
| US20090259648A1 (en) | Automated avatar creation and interaction in a virtual world | |
| CN108181819A (zh) | 家电设备的联动控制方法、装置、系统及家电设备 | |
| CN109829106A (zh) | 自动化推荐方法、装置、电子设备及存储介质 | |
| US20220343183A1 (en) | Human-computer interaction method and apparatus, storage medium and electronic device | |
| CN105491126A (zh) | 基于人工智能的服务提供方法及装置 | |
| CN109147056A (zh) | 一种电器控制方法、装置、存储介质及移动终端 | |
| CN114821236A (zh) | 智慧家庭环境感知方法、系统、存储介质及电子装置 | |
| CN107976919B (zh) | 一种智能机器人控制方法、系统及电子设备 | |
| CN107645559B (zh) | 家电信息推送方法、服务器、移动终端及存储介质 | |
| CN115358395A (zh) | 知识图谱的更新方法和装置、存储介质及电子装置 | |
| CN110531632A (zh) | 控制方法及系统 | |
| CN114911381A (zh) | 交互的反馈方法和装置、存储介质及电子装置 | |
| CN107911720A (zh) | 一种信息结合处理的方法、装置和智能结合系统 | |
| CN115167160A (zh) | 设备控制方法和装置、设备控制系统及存储介质 | |
| CN114864046A (zh) | 信息的推送方法和装置、存储介质及电子装置 | |
| CN114925158A (zh) | 语句文本的意图识别方法和装置、存储介质及电子装置 | |
| CN111681052B (zh) | 一种语音交互方法、服务器和电子设备 | |
| CN109872722B (zh) | 一种语音交互方法、装置、存储介质及空调 | |
| CN114915514A (zh) | 意图的处理方法和装置、存储介质及电子装置 | |
| CN114995726B (zh) | 交互方式的确定方法和装置、存储介质及电子装置 | |
| CN116301511A (zh) | 设备交互方法、装置、存储介质及电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |