CN110502120A - 动捕数据和预设动作数据结合的虚拟主播系统及实现方 - Google Patents
动捕数据和预设动作数据结合的虚拟主播系统及实现方 Download PDFInfo
- Publication number
- CN110502120A CN110502120A CN201910807493.2A CN201910807493A CN110502120A CN 110502120 A CN110502120 A CN 110502120A CN 201910807493 A CN201910807493 A CN 201910807493A CN 110502120 A CN110502120 A CN 110502120A
- Authority
- CN
- China
- Prior art keywords
- data
- deliberate action
- dynamic
- catching
- processing module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000694 effects Effects 0.000 claims abstract description 6
- 238000000034 method Methods 0.000 claims description 6
- 230000010354 integration Effects 0.000 claims description 3
- 238000012216 screening Methods 0.000 claims description 3
- 210000001699 lower leg Anatomy 0.000 claims description 2
- 230000002452 interceptive effect Effects 0.000 abstract description 5
- 238000005194 fractionation Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种动捕数据和预设动作数据结合的虚拟主播系统及实现方，包括硬件动捕数据处理模块，用于接收采集硬件实时数据，并转化为自定义标准的数据；预设动作数据处理模块,用于采集预设动作数据，并转化为自定义标准的数据；动作同步模块,用于接收硬件动捕数据处理模块和预设动作数据处理模块的数据，做数据计算处理；虚拟角色模型,用于接收动作同步模块的数据，呈现最终表现效果的载体。本发明通过实现动捕数据和预设动作数据的结合，可以既能够使用动捕数据提供实时互动，也能够通过预设动作数据呈现准确无误的表演动作。
Description
技术领域
本发明涉及虚拟主播技术领域，具体为一种动捕数据和预设动作数据结合的虚拟主播系统及实现方。
背景技术
虚拟主播系统是目前虚拟主播制作内容的系统，通过外置硬件设备把演员的动作表情数据传输给系统用以驱动虚拟角色模型。外置硬件设备有惯性原理设备，也有光学原理设备，各有优劣点，惯性设备使用时间长会有累计误差导致动作信息不准确，光学设备会存在遮挡盲区无法识别动作问题。外置设备目前的动作信息捕捉精度并不能100%捕捉还原，可能会因为设备穿戴，环境干扰导致动作捕捉数据有误差，对于一些精度要求非常高的动作，无法实现。而现有的动捕数据和预设动作数据结合，无法随时切换转变，要么就用动捕数据，要么就用预设动作数据，且不能身体用动捕数据和头部用预设动作数据同时进行结合。
发明内容
本发明目的在于提供一种动捕数据和预设动作数据结合的虚拟主播系统及实现方，以方便在使用动捕数据提供实时互动，也能够通过预设动作数据呈现准确无误的表演动作。
本发明所述的动捕数据和预设动作数据结合的虚拟主播系统，包括硬件动捕数据处理模块，用于接收采集硬件实时数据，并转化为自定义标准的数据；预设动作数据处理模块,用于采集预设动作数据，并转化为自定义标准的数据；动作同步模块,用于接收硬件动捕数据处理模块和预设动作数据处理模块的数据，做数据计算处理；虚拟角色模型,用于接收动作同步模块的数据，呈现最终表现效果的载体。
通过采集硬件数据，预设动作数据，把数据经过计算的出自定义标准数据后传输给动作同步模块，动作同步模块对接收到的数据进行不同部位数据拆分及优先级处理得到最终的部位数据，然后把最终的数据发送给虚拟角色模型，驱动模型的全身动作，手指姿态动作，使得在使用动捕数据提供实时互动，也能够通过预设动作数据呈现准确无误的表演动作的效果。
动捕数据和预设动作数据结合的虚拟主播的实现方法，包括以下步骤：
硬件动捕数据处理模块从硬件设备接收到实时数据，并根据自定义标准数据的补偿参数进行计算得出自定义标准数据，然后把数据发送给动作同步模块;
预设动作数据处理模块接收到用户指定预设动作播放命令，播放指定预设动作，并根据自定义标准的补偿参数对预设动作数据进行计算，计算得出自定义标准数据，然后把数据发送给动作同步模块;
动作同步模块从硬件动捕数据处理模块和预设动作数据处理模块收到数据，然后对数据进行分部位筛选处理，得出不同部位的数据；
动作同步模块根据预设的数据优先级设定，分别对不同部位的数据进行优先级处理，高优先级的数据取代低优先级的数据，得出不同部位最终数据，然后把不同部位的最终数据整合发送给虚拟角色模型;
虚拟角色模型收到数据后，根据数据信息，驱动模型的全身动作，手指姿态动作。
通过所述动捕数据和预设动作数据结合的虚拟主播实现方法能够实现动捕数据和预设动作数据结合，可以既能够使用动捕数据提供实时互动，也能够通过预设动作数据呈现准确无误的表演动作的虚拟主播系统。
附图说明
图1为本发明控制原理示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，动捕数据和预设动作数据结合的虚拟主播系统，包括：硬件动捕数据处理模块，用于接收采集硬件实时数据，并转化为自定义标准的数据；预设动作数据处理模块,用于采集预设动作数据，并转化为自定义标准的数据；动作同步模块,用于接收硬件动捕数据处理模块和预设动作数据处理模块的数据，做数据计算处理；虚拟角色模型,用于接收动作同步模块的数据，呈现最终表现效果的载体。
通过采集硬件数据，预设动作数据，把数据经过计算的出自定义标准数据后传输给动作同步模块，动作同步模块对接收到的数据进行不同部位数据拆分及优先级处理得到最终的部位数据，然后把最终的数据发送给虚拟角色模型，驱动模型的全身动作，手指姿态动作，使得在使用动捕数据提供实时互动，也能够通过预设动作数据呈现准确无误的表演动作的效果。
硬件动捕数据处理模块设置多个硬件设备接口，通过硬件设备接口与硬件设备接通，使得硬件动捕数据处理模块能够同时接入不同的硬件设备，方便硬件动捕数据处理模块采集更多的数据。
硬件设备接口为USB接口或者手机接口，可方便在不同的地方，不同的环境接入电脑或者手机等其他设备。
动捕数据和预设动作数据结合的虚拟主播的实现方法，包括以下步骤：
硬件动捕数据处理模块从硬件设备接收到实时数据，并根据自定义标准数据的补偿参数进行计算得出自定义标准数据，然后把数据发送给动作同步模块;
预设动作数据处理模块接收到用户指定预设动作播放命令，播放指定预设动作，并根据自定义标准的补偿参数对预设动作数据进行计算，计算得出自定义标准数据，然后把数据发送给动作同步模块;
动作同步模块从硬件动捕数据处理模块和预设动作数据处理模块收到数据，然后对数据进行分部位筛选处理，得出不同部位的数据；
动作同步模块根据预设的数据优先级设定，分别对不同部位的数据进行优先级处理，高优先级的数据取代低优先级的数据，得出不同部位最终数据，然后把不同部位的最终数据整合发送给虚拟角色模型;
虚拟角色模型收到数据后，根据数据信息，驱动模型的全身动作，手指姿态动作。
不同部位的数据包括但不限于头部数据，躯干数据，左手数据，右手数据，左脚数据，右脚数据。
虚拟主播系统在使用时候，接入了惯性动捕软件对演员的动作数据进行采集用以驱动虚拟角色模型。表演过程中需要精确的拍掌动作，此时用户给系统发出播放拍掌预设动作的指令，系统接收到指令后播放拍掌预设动作，动作同步模块就会接收到硬件动捕数据以及预设动作数据，动作同步模块根据动作优先级进行数据计算，且预设动作优先级高于硬件动捕数据，最终得出一个下半身使用硬件动捕数据进行行走移动，上半身双手在拍掌的动作数据，动作同步模块将此数据发送给虚拟角色模型，虚拟角色模型根据数据进行动作表演，一边行走一边拍掌。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。
Claims (6)
1.动捕数据和预设动作数据结合的虚拟主播系统，其特征在于，包括：
硬件动捕数据处理模块，用于接收采集硬件实时数据，并转化为自定义标准的数据；
预设动作数据处理模块,用于采集预设动作数据，并转化为自定义标准的数据；
动作同步模块,用于接收硬件动捕数据处理模块和预设动作数据处理模块的数据，做数据计算处理；
虚拟角色模型,用于接收动作同步模块的数据，呈现最终表现效果的载体。
2.根据权利要求1所述动捕数据和预设动作数据结合的虚拟主播系统，其特征在于，所述硬件动捕数据处理模块设置多个硬件设备接口，通过硬件设备接口与硬件设备接通。
3.根据权利要求2所述动捕数据和预设动作数据结合的虚拟主播系统，其特征在于，所述硬件设备接口为USB接口或者手机接口。
4.根据权利要求1所述动捕数据和预设动作数据结合的虚拟主播系统，其特征在于，所述预设动作数据包括预设动作播放指令。
5.动捕数据和预设动作数据结合的虚拟主播的实现方法，其特征在于，包括以下步骤：
硬件动捕数据处理模块从硬件设备接收到实时数据，并根据自定义标准数据的补偿参数进行计算得出自定义标准数据，然后把数据发送给动作同步模块;
预设动作数据处理模块接收到用户指定预设动作播放命令，播放指定预设动作，并根据自定义标准的补偿参数对预设动作数据进行计算，计算得出自定义标准数据，然后把数据发送给动作同步模块;
动作同步模块从硬件动捕数据处理模块和预设动作数据处理模块收到数据，然后对数据进行分部位筛选处理，得出不同部位的数据；
动作同步模块根据预设的数据优先级设定，分别对不同部位的数据进行优先级处理，高优先级的数据取代低优先级的数据，得出不同部位最终数据，然后把不同部位的最终数据整合发送给虚拟角色模型;
虚拟角色模型收到数据后，根据数据信息，驱动模型的全身动作，手指姿态动作。
6.根据权利要求5所述动捕数据和预设动作数据结合的虚拟主播的实现方法，其特征在于，步骤S30中所述不同部位的数据包括但不限于头部数据，躯干数据，左手数据，右手数据，左脚数据，右脚数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910807493.2A CN110502120A (zh) | 2019-08-29 | 2019-08-29 | 动捕数据和预设动作数据结合的虚拟主播系统及实现方 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910807493.2A CN110502120A (zh) | 2019-08-29 | 2019-08-29 | 动捕数据和预设动作数据结合的虚拟主播系统及实现方 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110502120A true CN110502120A (zh) | 2019-11-26 |
Family
ID=68590337
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910807493.2A Pending CN110502120A (zh) | 2019-08-29 | 2019-08-29 | 动捕数据和预设动作数据结合的虚拟主播系统及实现方 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110502120A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111970535A (zh) * | 2020-09-25 | 2020-11-20 | 魔珐(上海)信息科技有限公司 | 虚拟直播方法、装置、系统及存储介质 |
| CN116112716A (zh) * | 2023-04-14 | 2023-05-12 | 世优（北京）科技有限公司 | 基于单指令流多数据流的虚拟人直播方法、装置及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106919632A (zh) * | 2015-12-28 | 2017-07-04 | 广州华多网络科技有限公司 | 基于主播外貌的视频推荐方法及装置 |
| CN107533374A (zh) * | 2015-08-26 | 2018-01-02 | 谷歌有限责任公司 | 虚拟现实中的头部、手势和触摸输入的动态切换和合并 |
| CN109445573A (zh) * | 2018-09-14 | 2019-03-08 | 重庆爱奇艺智能科技有限公司 | 一种用于虚拟化身形象互动的方法与装置 |
| CN109788345A (zh) * | 2019-03-29 | 2019-05-21 | 广州虎牙信息科技有限公司 | 直播控制方法、装置、直播设备及可读存储介质 |
-
2019
- 2019-08-29 CN CN201910807493.2A patent/CN110502120A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107533374A (zh) * | 2015-08-26 | 2018-01-02 | 谷歌有限责任公司 | 虚拟现实中的头部、手势和触摸输入的动态切换和合并 |
| CN106919632A (zh) * | 2015-12-28 | 2017-07-04 | 广州华多网络科技有限公司 | 基于主播外貌的视频推荐方法及装置 |
| CN109445573A (zh) * | 2018-09-14 | 2019-03-08 | 重庆爱奇艺智能科技有限公司 | 一种用于虚拟化身形象互动的方法与装置 |
| CN109788345A (zh) * | 2019-03-29 | 2019-05-21 | 广州虎牙信息科技有限公司 | 直播控制方法、装置、直播设备及可读存储介质 |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111970535A (zh) * | 2020-09-25 | 2020-11-20 | 魔珐(上海)信息科技有限公司 | 虚拟直播方法、装置、系统及存储介质 |
| CN111970535B (zh) * | 2020-09-25 | 2021-08-31 | 魔珐(上海)信息科技有限公司 | 虚拟直播方法、装置、系统及存储介质 |
| WO2022062678A1 (zh) * | 2020-09-25 | 2022-03-31 | 魔珐(上海)信息科技有限公司 | 虚拟直播方法、装置、系统及存储介质 |
| US11785267B1 (en) | 2020-09-25 | 2023-10-10 | Mofa (Shanghai) Information Technology Co., Ltd. | Virtual livestreaming method, apparatus, system, and storage medium |
| CN116112716A (zh) * | 2023-04-14 | 2023-05-12 | 世优（北京）科技有限公司 | 基于单指令流多数据流的虚拟人直播方法、装置及系统 |
| CN116112716B (zh) * | 2023-04-14 | 2023-06-09 | 世优（北京）科技有限公司 | 基于单指令流多数据流的虚拟人直播方法、装置及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103631221B (zh) | 一种遥操作服务机器人系统 | |
| CN104410883A (zh) | 一种移动可穿戴非接触式交互系统与方法 | |
| CN108986189B (zh) | 基于三维动画中实时多人动作捕捉并直播的方法和系统 | |
| WO2020063009A1 (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN107181818A (zh) | 基于云平台的机器人远端控制和管理系统及方法 | |
| CN110502120A (zh) | 动捕数据和预设动作数据结合的虚拟主播系统及实现方 | |
| CN103338331A (zh) | 一种采用眼球控制对焦的图像采集系统 | |
| CN203012636U (zh) | 一种基于激光投影定位的人机交互系统 | |
| CN108983636A (zh) | 人机智能共生平台系统 | |
| CN107943282A (zh) | 一种基于增强现实和可穿戴设备的人机交互系统及方法 | |
| CN106096301A (zh) | 一种远程音视频手术协助系统 | |
| CN110033764A (zh) | 无人机的语音控制方法、装置、系统及可读存储介质 | |
| CN105938665A (zh) | 一种远程音视频手术示教系统 | |
| CN108763394A (zh) | 面向协同交互的多用户眼动跟踪数据可视化方法和系统 | |
| CN110297540A (zh) | 一种人机交互装置及人机交互方法 | |
| KR20220044897A (ko) | 웨어러블 기기, 스마트 가이드 방법 및 장치, 가이드 시스템, 저장 매체 | |
| CN203630822U (zh) | 虚拟影像与真实场景相结合的舞台交互集成系统 | |
| CN103514449A (zh) | 一种图像采集装置及方法 | |
| CN109413152A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN109839827A (zh) | 一种基于全空间位置信息的手势识别智能家居控制系统 | |
| CN206411612U (zh) | 一种虚拟现实系统的交互控制装置及虚拟现实设备 | |
| CN106377401A (zh) | 导盲前端设备、导盲后端设备及导盲系统 | |
| CN109821202A (zh) | 一种基于人工智能的体育训练动作辅助指导系统 | |
| CN101071350B (zh) | 一种通过识别动态轨迹操作光标、视窗的装置 | |
| Meier et al. | Synchronized multimodal recording of a table setting dataset |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191126 |