CN117076755A - 一种多用途数字人的控制系统及方法 - Google Patents
一种多用途数字人的控制系统及方法 Download PDFInfo
- Publication number
- CN117076755A CN117076755A CN202311330811.3A CN202311330811A CN117076755A CN 117076755 A CN117076755 A CN 117076755A CN 202311330811 A CN202311330811 A CN 202311330811A CN 117076755 A CN117076755 A CN 117076755A
- Authority
- CN
- China
- Prior art keywords
- module
- information
- digital
- digital person
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000009471 action Effects 0.000 claims abstract description 33
- 230000002452 interceptive effect Effects 0.000 claims abstract description 9
- 238000013461 design Methods 0.000 claims description 29
- 230000003993 interaction Effects 0.000 claims description 26
- 238000013500 data storage Methods 0.000 claims description 18
- 230000007246 mechanism Effects 0.000 claims description 15
- 238000012790 confirmation Methods 0.000 claims description 9
- 238000012549 training Methods 0.000 claims description 9
- 230000008520 organization Effects 0.000 claims description 6
- 238000004891 communication Methods 0.000 claims description 3
- 238000004321 preservation Methods 0.000 claims description 3
- 239000004744 fabric Substances 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/33—User authentication using certificates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/004—Artificial life, i.e. computing arrangements simulating life
- G06N3/006—Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Molecular Biology (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Storage Device Security (AREA)
Abstract
本发明提供了一种多用途数字人的控制系统及方法,该系统包括:数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,所述数字人身份数据保护模块、数字人交互内容生成模块及数字人上线发布模块电性连接所述中央控制模,数字人身份数据保护模块用于对数字人的身份数据进行存储,数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息,数字人上线发布模块用于将数字人以不同的载体模型进行发布。本发明提供的多用途数字人的控制系统及方法,能够实现多用途数字人的控制,便于使用。
Description
技术领域
本发明涉及数字人技术领域,特别是涉及一种多用途数字人的控制系统及方法。
背景技术
三维数字人的生成一直是学术界的研究热点,并有着广泛的工业应用。其最为常见的应用领域有虚拟主播、虚拟客服、虚拟助理、虚拟教师、虚拟偶像等,但是,现有三维数字人存在一些问题,包括语音不准确,唇动动画表现差,动作不自热,以及三维数字人的身份信息存储不安全等等。因此,设计一种多用途数字人的控制系统及方法是十分有必要的。
发明内容
本发明的目的是提供一种多用途数字人的控制系统及方法,能够实现多用途数字人的控制,便于使用。
为实现上述目的,本发明提供了如下方案:
一种多用途数字人的控制系统,包括:数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,所述数字人身份数据保护模块、数字人交互内容生成模块及数字人上线发布模块电性连接所述中央控制模块;
所述数字人身份数据保护模块用于对数字人的身份数据进行存储;
所述数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息;
所述数字人上线发布模块用于将数字人以不同的载体模型进行发布。
可选的,所述数字人身份数据保护模块包括数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块,所述数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块电性连接所述中央控制模块;
所述数字人注册模块用于进行数字人身份数据保护模块的注册;
所述区块链模块用于进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
所述上链模块用于将数字人身份信息进行上链;
所述数据存储模块用于存储数字人的身份信息;
所述身份信息查询模块用于进行数字人的身份信息查询。
本发明还提供了一种多用途数字人的控制方法,应用于上述的多用途数字人的控制系统,包括如下步骤:
步骤1:通过数字人身份数据保护模块对生成的数字人的身份信息进行存储;
步骤2:通过数字人交互内容生成模块生成数字人的语音、唇动及动作信息;
步骤3:通过数字人上线发布模块将数字人以不同的载体模型进行发布。
可选的,步骤1中,通过数字人身份数据保护模块对生成的数字人的身份信息进行存储,具体包括如下步骤:
步骤101:用户通过用户端向数字人注册模块提交数字人所属用户的名字、地址及电话,数字人注册模块根据提交的信息生成CA证书、用户名及密码,并将其返回至用户端,完成注册,注册完成后,用户通过用户端将数字人身份信息发送至上链模块进行数据存储模块进行身份保存;
步骤102:基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
步骤103:数据存储模块获取数字人的身份信息,并将需要上链的信息发送至上链模块,基于上链模块进行上链操作,将无需上链的信息存储至数据库中;
步骤104:用户端通过身份信息查询模块对数字人的身份信息进行查询。
可选的,步骤102中,基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,具体为:
基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,其中,节点配置包括为节点生成数字证书,配置共识内容,构建四个联盟委员会,每个组织配置 1个主节点、1 个锚节点、1 个或多个背书节点和记账节点进行共识;
通道创建包括对区块链网络创建不同节点共享的通道,同一通道内的节点的账本数据相同,其他通道内的节点不允许查看此通道内的账本数据;
共识机制设计包括通过共识算法进行搭建,手动分组并配置节点,Orderer 节点跟每个组织中的Leader节点间通信采用改进的BLS签名PBFT共识,四个组织的内部使用Raft共识。
可选的,步骤103中,基于上链模块进行上链操作,具体为:
数据存储模块将需要上链的信息发送至上链模块,其中,需要上链的信息包括数字人的姓名、性别、所属用户的电话及相关视频信息,上链模块将相关视频信息进行水印添加,将相关视频信息存储至IPFS分布式存储系统上,IPFS分布式存储系统返回文件地址,上链模块将文件地址及其他需要上链的信息进行打包,进行上链操作。
可选的,步骤104中,通过身份信息查询模块对数字人的身份信息进行查询,具体为:
用户端将查询请求发送至中央控制模块,中央控制模块收到查询请求后,将查询请求发送至上链模块对用户端进行身份确认,若确认失败,则向用户端返回确认失败,若确认成功,则获取文件地址及其他信息,通过文件地址获取相关视频信息,并将相关视频信息及其他信息返回至用户端。
可选的,步骤2中,通过数字人交互内容生成模块生成数字人的语音、唇动信息,具体为:
获取交互信息,根据交互信息确定目标语音信息,根据目标语音信息确定与目标语音信息对应的单字特征集合,其中,单字特征表征不同发音状态下的单字的特征信息;
搭建信息确定模型,并对其进行训练,得到训练完成的信息确定模型,将目标语音信息及单字特征集合输入信息确定模型中,得到目标语音信息对应的唇动信息;
通过目标语音信息及唇动信息驱动数字人运动。
可选的,步骤2中,通过数字人交互内容生成模块生成动作信息,具体为:
获取交互信息,搭建动作确定模型,通过预设的数据集对动作确定模型进行训练,得到训练后的动作确定模型,将交互信息输入动作确定模型中,得到待执行的动作信息,基于待执行的动作信息,驱动数字人运动。
根据本发明提供的具体实施例,本发明公开了以下技术效果:本发明提供的多用途数字人的控制系统及方法,该系统包括数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,其中,数字人身份数据保护模块用于对数字人的身份数据进行存储,数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息,数字人上线发布模块用于将数字人以不同的载体模型进行发布,该方法包括通过数字人身份数据保护模块对生成的数字人的身份信息进行存储,通过数字人交互内容生成模块生成数字人的语音、唇动及动作信息,通过数字人上线发布模块将数字人以不同的载体模型进行发布,能够实现对多用途数字人的控制,便于使用。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例多用途数字人的控制系统结构示意图;
图2为本发明实施例多用途数字人的控制方法流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的目的是提供一种多用途数字人的控制系统及方法,能够实现多用途数字人的控制,便于使用。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
如图1所示,本发明实施例提供的多用途数字人的控制系统,包括:数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,所述数字人身份数据保护模块、数字人交互内容生成模块及数字人上线发布模块电性连接所述中央控制模块;
所述数字人身份数据保护模块用于对数字人的身份数据进行存储;
所述数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息;
所述数字人上线发布模块用于将数字人以不同的载体模型进行发布。
所述数字人身份数据保护模块包括数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块,所述数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块电性连接所述中央控制模块;
所述数字人注册模块用于进行数字人身份数据保护模块的注册;
所述区块链模块用于进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
所述上链模块用于将数字人身份信息进行上链;
所述数据存储模块用于存储数字人的身份信息;
所述身份信息查询模块用于进行数字人的身份信息查询。
如图2所示,本发明还提供了一种多用途数字人的控制方法,应用于上述的多用途数字人的控制系统,包括如下步骤:
步骤1:通过数字人身份数据保护模块对生成的数字人的身份信息进行存储;
步骤2:通过数字人交互内容生成模块生成数字人的语音、唇动及动作信息;
步骤3:通过数字人上线发布模块将数字人以不同的载体模型进行发布。
步骤1中,通过数字人身份数据保护模块对生成的数字人的身份信息进行存储,具体包括如下步骤:
步骤101:用户通过用户端向数字人注册模块提交数字人所属用户的名字、地址及电话,数字人注册模块根据提交的信息生成CA证书、用户名及密码,并将其返回至用户端,完成注册,注册完成后,用户通过用户端将数字人身份信息发送至上链模块进行数据存储模块进行身份保存;
步骤102:基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
步骤103:数据存储模块获取数字人的身份信息,并将需要上链的信息发送至上链模块,基于上链模块进行上链操作,将无需上链的信息存储至数据库中;
步骤104:用户端通过身份信息查询模块对数字人的身份信息进行查询。
步骤102中,基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,具体为:
基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,其中,节点配置是为了构建 Fabric 网络做准备,为节点生成数字证书,配置共识内容,保证节点正常启动后区块链网络能够正常运行。构建四个联盟委员会,每个组织配置1个主节点、1 个锚节点、1 个或多个背书节点和记账节点进行共识;
区块链的子网称为通道,可以在 Hyperledger Fabric 区块链网络上拥有一到任意数量的通道,但是在配置级别,网络中的通道数应该是最终确定的。任何对等点或节点都可以成为许多通道的一部分,一个渠道中的交易详情仅对该渠道中的实体可见,每个通道都应该有自己的链码和策略,创建通道是对区块链网络创建不同节点共享的通道,同一通道内的节点的账本数据相同,其他通道内的节点不允许查看此通道内的账本数据,实现数据隐私保护;
共识机制设计包括通过共识算法进行搭建,手动分组并配置节点,Orderer 节点跟每个组织中的Leader节点间通信采用改进的BLS签名PBFT共识,四个组织的内部使用Raft共识;
智能合约设计在Hyperledger fabric 中智能合约同时也被称为链码(chaincode),链码的开发使用的是 SDK,为使用不同开发语言的开发人员提供不同的变成语言本文使用 Golang 语言编写智能合约逻辑,编写智能合约是要实现CopyrightRegister、IsCopyright 以及 Query方法。
步骤103中,基于上链模块进行上链操作,具体为:
数据存储模块将需要上链的信息发送至上链模块,其中,需要上链的信息包括数字人的姓名、性别、所属用户的电话及相关视频信息,上链模块将相关视频信息进行水印添加,将相关视频信息存储至IPFS分布式存储系统上,IPFS分布式存储系统返回文件地址,上链模块将文件地址及其他需要上链的信息进行打包,进行上链操作。
步骤104中,通过身份信息查询模块对数字人的身份信息进行查询,具体为:
用户端将查询请求发送至中央控制模块,中央控制模块收到查询请求后,将查询请求发送至上链模块对用户端进行身份确认,若确认失败,则向用户端返回确认失败,若确认成功,则获取文件地址及其他信息,通过文件地址获取相关视频信息,并将相关视频信息及其他信息返回至用户端。
步骤2中,通过数字人交互内容生成模块生成数字人的语音、唇动信息,具体为:
获取交互信息,根据交互信息确定目标语音信息,其中,可通过搭建目标语音信息确定模型进行目标语音信息的确定,其中目标语音确定模型可通过深度学习网络搭建,通过数据集对其进行训练,训练过程采用常规训练过程即可,最终得到训练后的目标语音信息,进而确定目标语音信息;
根据目标语音信息确定与目标语音信息对应的单字特征集合,其中,单字特征表征不同发音状态下的单字的特征信息;
搭建信息确定模型,并对其进行训练,得到训练完成的信息确定模型,将目标语音信息及单字特征集合输入信息确定模型中,得到目标语音信息对应的唇动信息;
通过目标语音信息及唇动信息驱动数字人运动。
通过数字人交互内容生成模块生成动作信息,具体为:
获取交互信息,搭建动作确定模型,通过预设的数据集对动作确定模型进行训练,得到训练后的动作确定模型,将交互信息输入动作确定模型中,得到待执行的动作信息,基于待执行的动作信息,驱动数字人运动。
信息确定模型及动作确定模型与目标语音信息确定模型相类似,均采用深度学习网络搭建,通过数据集进行训练。
本发明提供的多用途数字人的控制系统及方法,该系统包括数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,其中,数字人身份数据保护模块用于对数字人的身份数据进行存储,数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息,数字人上线发布模块用于将数字人以不同的载体模型进行发布,该方法包括通过数字人身份数据保护模块对生成的数字人的身份信息进行存储,通过数字人交互内容生成模块生成数字人的语音、唇动及动作信息,通过数字人上线发布模块将数字人以不同的载体模型进行发布,能够实现对多用途数字人的控制,便于使用。
Claims (9)
1.一种多用途数字人的控制系统,其特征在于,包括:数字人身份数据保护模块、数字人交互内容生成模块、数字人上线发布模块及中央控制模块,所述数字人身份数据保护模块、数字人交互内容生成模块及数字人上线发布模块电性连接所述中央控制模块;
所述数字人身份数据保护模块用于对数字人的身份数据进行存储;
所述数字人交互内容生成模块用于生成数字人的语音、唇动及动作信息;
所述数字人上线发布模块用于将数字人以不同的载体模型进行发布。
2.根据权利要求1所述的多用途数字人的控制系统,其特征在于,所述数字人身份数据保护模块包括数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块,所述数字人注册模块、区块链模块、上链模块、身份信息查询模块及数据存储模块电性连接所述中央控制模块;
所述数字人注册模块用于进行数字人身份数据保护模块的注册;
所述区块链模块用于进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
所述上链模块用于将数字人身份信息进行上链;
所述数据存储模块用于存储数字人的身份信息;
所述身份信息查询模块用于进行数字人的身份信息查询。
3.一种多用途数字人的控制方法,应用于权利要求1-2任一所述的多用途数字人的控制系统,其特征在于,包括如下步骤:
步骤1:通过数字人身份数据保护模块对生成的数字人的身份信息进行存储;
步骤2:通过数字人交互内容生成模块生成数字人的语音、唇动及动作信息;
步骤3:通过数字人上线发布模块将数字人以不同的载体模型进行发布。
4.根据权利要求3所述的多用途数字人的控制方法,其特征在于,步骤1中,通过数字人身份数据保护模块对生成的数字人的身份信息进行存储,具体包括如下步骤:
步骤101:用户通过用户端向数字人注册模块提交数字人所属用户的名字、地址及电话,数字人注册模块根据提交的信息生成CA证书、用户名及密码,并将其返回至用户端,完成注册,注册完成后,用户通过用户端将数字人身份信息发送至上链模块进行数据存储模块进行身份保存;
步骤102:基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计;
步骤103:数据存储模块获取数字人的身份信息,并将需要上链的信息发送至上链模块,基于上链模块进行上链操作,将无需上链的信息存储至数据库中;
步骤104:用户端通过身份信息查询模块对数字人的身份信息进行查询。
5.根据权利要求4所述的多用途数字人的控制方法,其特征在于,步骤102中,基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,具体为:
基于区块链模块进行区块链网络的节点配置、通道创建、共识机制设计及智能合约设计,其中,节点配置包括为节点生成数字证书,配置共识内容,构建四个联盟委员会,每个组织配置 1个主节点、1 个锚节点、1 个或多个背书节点和记账节点进行共识;
通道创建包括对区块链网络创建不同节点共享的通道,同一通道内的节点的账本数据相同,其他通道内的节点不允许查看此通道内的账本数据;
共识机制设计包括通过共识算法进行搭建,手动分组并配置节点,Orderer 节点跟每个组织中的Leader节点间通信采用改进的BLS签名PBFT共识,四个组织的内部使用Raft共识。
6.根据权利要求5所述的多用途数字人的控制方法,其特征在于,步骤103中,基于上链模块进行上链操作,具体为:
数据存储模块将需要上链的信息发送至上链模块,其中,需要上链的信息包括数字人的姓名、性别、所属用户的电话及相关视频信息,上链模块将相关视频信息进行水印添加,将相关视频信息存储至IPFS分布式存储系统上,IPFS分布式存储系统返回文件地址,上链模块将文件地址及其他需要上链的信息进行打包,进行上链操作。
7.根据权利要求6所述的多用途数字人的控制方法,其特征在于,步骤104中,通过身份信息查询模块对数字人的身份信息进行查询,具体为:
用户端将查询请求发送至中央控制模块,中央控制模块收到查询请求后,将查询请求发送至上链模块对用户端进行身份确认,若确认失败,则向用户端返回确认失败,若确认成功,则获取文件地址及其他信息,通过文件地址获取相关视频信息,并将相关视频信息及其他信息返回至用户端。
8.根据权利要求7所述的多用途数字人的控制方法,其特征在于,步骤2中,通过数字人交互内容生成模块生成数字人的语音、唇动信息,具体为:
获取交互信息,根据交互信息确定目标语音信息,根据目标语音信息确定与目标语音信息对应的单字特征集合,其中,单字特征表征不同发音状态下的单字的特征信息;
搭建信息确定模型,并对其进行训练,得到训练完成的信息确定模型,将目标语音信息及单字特征集合输入信息确定模型中,得到目标语音信息对应的唇动信息;
通过目标语音信息及唇动信息驱动数字人运动。
9.根据权利要求8所述的多用途数字人的控制方法,其特征在于,步骤2中,通过数字人交互内容生成模块生成动作信息,具体为:
获取交互信息,搭建动作确定模型,通过预设的数据集对动作确定模型进行训练,得到训练后的动作确定模型,将交互信息输入动作确定模型中,得到待执行的动作信息,基于待执行的动作信息,驱动数字人运动。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311330811.3A CN117076755A (zh) | 2023-10-16 | 2023-10-16 | 一种多用途数字人的控制系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311330811.3A CN117076755A (zh) | 2023-10-16 | 2023-10-16 | 一种多用途数字人的控制系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117076755A true CN117076755A (zh) | 2023-11-17 |
Family
ID=88719859
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311330811.3A Pending CN117076755A (zh) | 2023-10-16 | 2023-10-16 | 一种多用途数字人的控制系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117076755A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117744051A (zh) * | 2023-12-21 | 2024-03-22 | 江苏云工场信息技术有限公司 | 一种数字人身份确权的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113158148A (zh) * | 2021-05-21 | 2021-07-23 | 广东工业大学 | 基于区块链的多模态数字人版权管理方法及系统 |
CN113886778A (zh) * | 2021-09-24 | 2022-01-04 | 杭州电子科技大学 | 一种可监管的动态自我主权身份生成方法 |
KR20220011100A (ko) * | 2020-07-20 | 2022-01-27 | 펄스나인 주식회사 | 얼굴 이미지 검색을 통한 가상 인물 생성 시스템 및 방법 |
CN115050354A (zh) * | 2022-08-10 | 2022-09-13 | 北京百度网讯科技有限公司 | 数字人驱动方法和装置 |
-
2023
- 2023-10-16 CN CN202311330811.3A patent/CN117076755A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220011100A (ko) * | 2020-07-20 | 2022-01-27 | 펄스나인 주식회사 | 얼굴 이미지 검색을 통한 가상 인물 생성 시스템 및 방법 |
CN113158148A (zh) * | 2021-05-21 | 2021-07-23 | 广东工业大学 | 基于区块链的多模态数字人版权管理方法及系统 |
CN113886778A (zh) * | 2021-09-24 | 2022-01-04 | 杭州电子科技大学 | 一种可监管的动态自我主权身份生成方法 |
CN115050354A (zh) * | 2022-08-10 | 2022-09-13 | 北京百度网讯科技有限公司 | 数字人驱动方法和装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117744051A (zh) * | 2023-12-21 | 2024-03-22 | 江苏云工场信息技术有限公司 | 一种数字人身份确权的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021109690A1 (zh) | 多类型问题智能问答方法、系统、设备及可读存储介质 | |
CN110929333B (zh) | 一种产品设计方法、服务器、电子设备及存储介质 | |
CN107808035B (zh) | 一种基于计算机开发的智能装饰设计系统 | |
CN110111193A (zh) | 一种数据处理的方法及装置 | |
CN117076755A (zh) | 一种多用途数字人的控制系统及方法 | |
CN109240670A (zh) | 模块化的软件开发方法、系统、设备及介质 | |
CN106378781A (zh) | 服务机器人引导系统及方法 | |
CN109242164A (zh) | 优化产品路径的方法及装置、计算机存储介质、电子设备 | |
CN116483980A (zh) | 人机交互方法、装置及系统 | |
CN111985000A (zh) | 模型服务输出方法、装置、设备及存储介质 | |
CN111221949A (zh) | 基于强化学习的智能回访方法、装置、设备及存储介质 | |
CN103593412A (zh) | 一种基于树形结构问题的应答方法及系统 | |
CN106886592A (zh) | 一种基于数据源服务的城市时空数据汇聚系统及方法 | |
CN116737910B (zh) | 智能对话处理方法、装置、设备及存储介质 | |
CN113391992B (zh) | 测试数据的生成方法和装置、存储介质及电子设备 | |
CN117472552B (zh) | 服务场景智能编排及动态调度方法、装置、设备及介质 | |
CN105871998A (zh) | 一种数据展示方法及装置 | |
CN109903193A (zh) | 房产交易中佣金的分配方法、装置、设备及存储介质 | |
CN110018823A (zh) | 交互式应用程序的处理方法及系统、生成方法及系统 | |
KR20220108914A (ko) | 인테리어 서비스 제공 시스템 | |
CN116188912A (zh) | 主题图像的图像合成模型的训练方法、装置、介质及设备 | |
US11699431B2 (en) | Methods and systems for codeless chatbot development | |
CN106658666A (zh) | 一种用于建立无线连接的方法与设备 | |
CN106126578B (zh) | 一种Web服务推荐方法以及装置 | |
CN110502573A (zh) | 一种闸机数据同步方法及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20231117 |
|
RJ01 | Rejection of invention patent application after publication |