CN117119259B - 一种基于场景分析的特效自合成系统 - Google Patents
一种基于场景分析的特效自合成系统 Download PDFInfo
- Publication number
- CN117119259B CN117119259B CN202311150887.8A CN202311150887A CN117119259B CN 117119259 B CN117119259 B CN 117119259B CN 202311150887 A CN202311150887 A CN 202311150887A CN 117119259 B CN117119259 B CN 117119259B
- Authority
- CN
- China
- Prior art keywords
- special effect
- scene
- gift
- data
- live
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000694 effects Effects 0.000 title claims abstract description 188
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 37
- 238000004458 analytical method Methods 0.000 title claims abstract description 34
- 238000000034 method Methods 0.000 claims abstract description 96
- 230000008569 process Effects 0.000 claims abstract description 45
- 230000004927 fusion Effects 0.000 claims abstract description 27
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 21
- 230000004044 response Effects 0.000 claims description 40
- 230000007246 mechanism Effects 0.000 claims description 23
- 239000011159 matrix material Substances 0.000 claims description 16
- 230000001960 triggered effect Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 10
- 238000009877 rendering Methods 0.000 claims description 9
- 238000005259 measurement Methods 0.000 claims description 4
- 238000005457 optimization Methods 0.000 claims description 4
- 238000007405 data analysis Methods 0.000 claims description 3
- 230000000977 initiatory effect Effects 0.000 claims 1
- 230000009286 beneficial effect Effects 0.000 description 7
- 230000008901 benefit Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000008713 feedback mechanism Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4784—Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
Abstract
本发明涉及直播领域,提供了一种基于场景分析的特效自合成系统,包括场景采集模块:用于在直播软件中植入第一场景采集进程和第二场景采集进程,采集直播场景数据;其中,第一场景采集进程用于采集直播场景数据,第二场景采集进程用于弹幕礼物数据;场景分析模块:用于对弹幕礼物数据进行分析,确定待合成礼物特效等级和礼物购买者头像;元素定制模块:用于根据待合成礼物特效等级,在预先设定的元素关联模板中植入与弹幕礼物相关的特效元素,生成初始特效模板;特效合成模块:用于将初始特效模板与直播场景数据进行特效化融合,生成目标特效。
Description
技术领域
本发明涉及网络直播技术领域,特别涉及一种基于场景分析的特效自合成系统。
背景技术
目前,随着直播行业的发展普及,观看直播成为众多用户的日常娱乐方式,而直播间内送礼作为直播间的重要付费功能,是用户对直播内容喜好程度的重要反馈手段。随着直播特效处理技术的不断提升,直播礼物的效果也越来越多元化,例如,可以赠送一些特定礼物,触发某个跟随人物特征变化的特效。
在对现有技术的研究和实践过程中,本申请的发明人发现,现有技术中,该特效需要与人脸数据结合生成,但是观众端的网络传输通常有着延迟性,当延迟达到一定时间时,观众端可能无法接收到人脸数据,会造成特效播放失败,使得赠送的特定礼物没有反馈效果,造成非常差的用户体验,降低直播的互动性。
发明内容
本发明提供一种基于场景分析的特效自合成系统,用以解决的情况。
本申请提出了一种基于场景分析的特效自合成系统,包括:
场景采集模块:用于在直播软件中植入第一场景采集进程和第二场景采集进程,采集直播场景数据;其中,
第一场景采集进程用于采集直播场景数据,第二场景采集进程用于弹幕礼物数据;
场景分析模块:用于对弹幕礼物数据进行分析,确定待合成礼物特效等级和礼物购买者头像;
元素定制模块:用于根据待合成礼物特效等级,在预先设定的元素关联模板中植入与弹幕礼物相关的特效元素,生成初始特效模板;
特效合成模块:用于将初始特效模板与直播场景数据进行特效化融合,生成目标特效。
优选的,所述第一场景采集进程为视觉采集进程,用于构建基于直播界面的初始三维空间模型,并在初始三维空间模型中实时捕捉动态数据,并基于三维空间模型和动态数据构成直播场景数据。
优选的,所述第二场景采集进程为后台数据采集进程,用于实时分级采集直播留言、直播弹幕和直播礼物;其中,
分级采集为直播贡献度等级。
优选的,所述场景分析模块包括:
第一数据分析单元:用于构建基于弹幕礼物数据的多维分析矩阵,并按照预设矩阵项进行弹幕礼物数据填充;其中,
预设矩阵项包括礼物时间戳、礼物价格等级、礼物对象;
特效等级确定单元:用于设置反馈响应机制,以使得待合成特效等级的特效模板被触发;其中,
反馈响应机制包括等级响应机制和价格响应机制;
等级响应机制用于对不同等级的用户发送礼物生成反馈响应;
价格响应机制用于对不同价格的礼物生成反馈响应;
礼物购买者头像采集单元:用于根据预设矩阵项,确定礼物对象,并提取礼物对象的实时头像。
优选的,所述反馈响应机制包括如下反馈过程:
根据预设矩阵项,进行分析预处理;其中,
分析预处理包括:数据聚类、数据合并类簇和数据时间戳标定;
根据分析与处理结果,进行混合相似度度量,确定被触发的特效模板;
根据被触发的特效模板,确定对应的精简指令;
根据精简指令,进行反馈响应。
优选的,所述元素定制模块包括:
第一响应单元:用于根据礼物时间戳,将当前礼物的特效显示层级设置为优先层;
第二响应单元:用于根据礼物价格等级和礼物对象,确定在优先层排列的特效显示范围;
关联性模板调用单元:用于根据待合成礼物特效等级和礼物对象,在预设特效模板库中调用特效合成模板;
模板生成单元:用于根据待合成礼物特效等级,在特效元素数据库中调用对应等级元素,并生成初始特效模板。
优选的,所述生成初始特效模板还包括:
获取礼物对象的身份信息;
根据身份信息,遍历用户直播交易参数;
根据用户直播交易参数,判断用户端是否存在特效元素购买记录;其中,
当存在特效元素购买记录时,将购买记录中存在的特效元素作为优先元素填充至初始特效模板;
当不存在特效元素购买记录时,直接生成初始特效模板。
优选的,所述特效合成模块包括:
第一判定单元:根据初始特效模板与直播场景数据,确定可融合的特效节点;其中,
融合单元:用于根据特效节点,确定特效融合算法;其中,
特效融合算法用于根据直播场景和元素组合进行特效融合;
不同直播场景对应不同的融合算法;
融合生成单元:用于在特效节点将初始特效模板与直播场景数据进行融合,生成目标特效。
优选的,所述系统还包括:
音频采集单元:根据直播数据,获取直播时的音频数据和数量信息;其中,
数量信息用于指示接收音频数据的接收方的数量;
接收端处理单元:用于在接收方的数量为多个时,根据数量信息在元数据中配置分别与多个接收方相对应的多个接收方字段;其中,
接收方字段包括与接收方的位置信息相关的特征字段;
渲染单元:用于将元数据发送至音频渲染器;其中,
音频渲染器用于根据多个所述接收方字段分别为多个接收方差异化地渲染音频数据。
优选的,所述系统还包括:
热度识别单元:用于获取直播时的直播界面产生的热度数据;
识别单元:用于热度数据,确定直播界面上各元素的欢迎度;
界面处理单元:当欢迎度低于预设的欢迎度界限值,则根据不同的界面排布元素进行界面优化,得到优化排布界面。
本发明的有益效果在于:
(1)本申请因为可以采集直播场景数据和弹幕礼物数据,所以可以将实时的直播页面和特效礼物融合,特效随场景有所变化,而不是所有的特效都是一样,使得直播效果更好。
(2)本申请因为可以实现自动化的合成特效,而不是所有礼物采用固定特效,所以,在实时合成特效得方式上,本申请是效果更好。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种基于场景分析的特效自合成系统的系统组成图;
图2为本发明实施例中反馈响应机制的处理流程图;
图3为本发明实施例中特效合成的方法流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本申请提出了一种基于场景分析的特效自合成系统,包括:
场景采集模块:用于在直播软件中植入第一场景采集进程和第二场景采集进程,采集直播场景数据;其中,
第一场景采集进程用于采集直播场景数据,第二场景采集进程用于弹幕礼物数据;
场景分析模块:用于对弹幕礼物数据进行分析,确定待合成礼物特效等级和礼物购买者头像;
元素定制模块:用于根据待合成礼物特效等级,在预先设定的元素关联模板中植入与弹幕礼物相关的特效元素,生成初始特效模板;
特效合成模块:用于将初始特效模板与直播场景数据进行特效化融合,生成目标特效。
上述技术方案的原理在于:
如附图1所示,本申请是一种能够适应直播的场景,结合场景信息实现特效自动合成的快速特效生成系统;
在具体实施的过程中,首先在直播软件中植入第一场景采集进程和第二场景采集进程,第一场景采集进程能够采集直播时,直播界面上的各种场景信息,包括直播界面上直播的主播,直播主播实时动作和表情,以及直播主播所在直播空间的空间元素(桌子、椅子、直播间所体现的一切元素);第二场景采集进程是采集后台数据,确定主播直播时,实时界面的具体显示信息,包括弹幕信息,礼物购买信息以及观看直播的实时用户的注册信息;
场景分析模块可以对弹幕礼物数据进行分析,从而判断待合成礼物的具体的等级以及购买礼物的用户信息,从而可以确定需要合成的特效的具体标准;
元素定制单元可以根据待合成礼物的具体特效等级,判断在生成初始特效模板的过程中,采用哪些特效元素符合用户的等级和礼物价格。
特效合成模板可以通过初始特效好的合成模板以及直播场景数据在特效融合算法之下,进行特效得具体融合,生成对应的目标特效。
上述技术方案的有益效果在于:
(3)本申请因为可以采集直播场景数据和弹幕礼物数据,所以可以将实时的直播页面和特效礼物融合,特效随场景有所变化,而不是所有的特效都是一样,使得直播效果更好。
(4)本申请因为可以实现自动化的合成特效,而不是所有礼物采用固定特效,所以,在实时合成特效得方式上,本申请是效果更好。
优选的,所述第一场景采集进程为视觉采集进程,用于构建基于直播界面的初始三维空间模型,并在初始三维空间模型中实时捕捉动态数据,并基于三维空间模型和动态数据构成直播场景数据。
上述技术方案的原理在于:
在实际实施的过程中,本申请的第一场景采集进程基于直播界面进行视觉采集,可以构建三维空间模型,并且实时捕捉动态数据。
上述技术方案的有益效果在于:
可以实现动态数据和静态数据的快速捕捉。
优选的,所述第二场景采集进程为后台数据采集进程,用于实时分级采集直播留言、直播弹幕和直播礼物;其中,
分级采集为直播贡献度等级。
上述技术方案的原理在于:
本申请的第二场景采集进程为后台数据采集进程,可以进行分级的直播留言、直播弹幕和直播礼物等数据采集,因此,可以判断合成特效得具体等级。
上述技术方案的有益效果在于:
本申请可以快速识别主播直播时,具体需要合成的特效等级。
优选的,所述场景分析模块包括:
第一数据分析单元:用于构建基于弹幕礼物数据的多维分析矩阵,并按照预设矩阵项进行弹幕礼物数据填充;其中,
预设矩阵项包括礼物时间戳、礼物价格等级、礼物对象;
特效等级确定单元:用于设置反馈响应机制,以使得待合成特效等级的特效模板被触发;其中,
反馈响应机制包括等级响应机制和价格响应机制;
等级响应机制用于对不同等级的用户发送礼物生成反馈响应;
价格响应机制用于对不同价格的礼物生成反馈响应;
礼物购买者头像采集单元:用于根据预设矩阵项,确定礼物对象,并提取礼物对象的实时头像。
上述技术方案的原理在于:
如附图2所示,在实际实施的过程中,通过多维分析矩阵可以快速获取直播时,当前发送礼物的用户的具体信息,从而通过反馈响应机制,快速反馈,从而调用对用的特效合成模板和用户实时图像。
上述技术方案的有益效果在于:
本申请可以通过快速反馈机制,快速确定特效合成模板和发送礼物人员的具体信息。
优选的,所述反馈响应机制包括如下反馈过程:
根据预设矩阵项,进行分析预处理;其中,
分析预处理包括:数据聚类、数据合并类簇和数据时间戳标定;
根据分析与处理结果,进行混合相似度度量,确定被触发的特效模板;
根据被触发的特效模板,确定对应的精简指令;
根据精简指令,进行反馈响应。
上述技术方案的原理在于:
本申请在反馈响应的过程中,首先通过预处理的方式,可以确定特效得具体相似度量信息,从而确定被触发的特效模板,所以可以通过精简指令,实现反馈响应。
优选的,所述元素定制模块包括:
第一响应单元:用于根据礼物时间戳,将当前礼物的特效显示层级设置为优先层;
第二响应单元:用于根据礼物价格等级和礼物对象,确定在优先层排列的特效显示范围;
关联性模板调用单元:用于根据待合成礼物特效等级和礼物对象,在预设特效模板库中调用特效合成模板;
模板生成单元:用于根据待合成礼物特效等级,在特效元素数据库中调用对应等级元素,并生成初始特效模板。
上述技术方案的原理在于:
本申请的元素定制模块在模板元素提取的过程中,通过礼物的时间戳,可以确定礼物合成特效是否很优先,所以会设置优先层,缓存对应的特效信息,然后根据礼物价格和礼物对象,判断用户特效需要显示的具体范围,从而在合成特效模板的过程中,能够以更加快速的方式,调用对应等级元素,进行初始特效合成。
优选的,如附图3所示,所述生成初始特效模板还包括:
获取礼物对象的身份信息;
根据身份信息,遍历用户直播交易参数;
根据用户直播交易参数,判断用户端是否存在特效元素购买记录;其中,
当存在特效元素购买记录时,将购买记录中存在的特效元素作为优先元素填充至初始特效模板;
当不存在特效元素购买记录时,直接生成初始特效模板。
优选的,所述特效合成模块包括:
第一判定单元:根据初始特效模板与直播场景数据,确定可融合的特效节点;其中,
融合单元:用于根据特效节点,确定特效融合算法;其中,
特效融合算法用于根据直播场景和元素组合进行特效融合;
不同直播场景对应不同的融合算法;
融合生成单元:用于在特效节点将初始特效模板与直播场景数据进行融合,生成目标特效。
优选的,所述系统还包括:
音频采集单元:根据直播数据,获取直播时的音频数据和数量信息;其中,
数量信息用于指示接收音频数据的接收方的数量;
接收端处理单元:用于在接收方的数量为多个时,根据数量信息在元数据中配置分别与多个接收方相对应的多个接收方字段;其中,
接收方字段包括与接收方的位置信息相关的特征字段;
渲染单元:用于将元数据发送至音频渲染器;其中,
音频渲染器用于根据多个所述接收方字段分别为多个接收方差异化地渲染音频数据。
上述技术方案的原理在于:
本申请在实际实施的时候,因为直播间可能存在多个主播实现联合直播,所以需要进行音效渲染,使得直播间的不同主播的声音更加清晰。
在这个过程中,本申请通过多个接收方字段进行统计,从而再输出具体的声音,以达到渲染的效果,也会根据不同主播的声音质量,进行差异化渲染。
上述技术方案的有益效果在于:
本申请可以在直播的时候进行音频的渲染,从而保证直播时主播声音更加清晰。
优选的,所述系统还包括:
热度识别单元:用于获取直播时的直播界面产生的热度数据;
识别单元:用于热度数据,确定直播界面上各元素的欢迎度;
界面处理单元:当欢迎度低于预设的欢迎度界限值,则根据不同的界面排布元素进行界面优化,得到优化排布界面。
上述技术方案的原理在于:
本申请在直播的时候,需要提高直播热度,但是对于初级的主播,并不清楚如何提高热度,因此,本身还能获取直播时的直播热度数据,从而记录不同直播元素相对于用户的欢迎度,根据欢迎度,将一些直播元素在直播时进行不断的替换优化,从而达到更好的直播效果,提供更好的直播界面。
上述技术方案的有益效果在于:
本申请可以实现直播界面的优化,从而提高直播效果,而且是实时,且不间断的更新优化直播界面。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (8)
1.一种基于场景分析的特效自合成系统,其特征在于,包括:
场景采集模块:用于在直播软件中植入第一场景采集进程和第二场景采集进程,采集直播场景数据;其中,
第一场景采集进程用于采集直播场景数据,第二场景采集进程用于弹幕礼物数据;
场景分析模块:用于对弹幕礼物数据进行分析,确定待合成礼物特效等级和礼物购买者头像;
元素定制模块:用于根据待合成礼物特效等级,在预先设定的元素关联模板中植入与弹幕礼物相关的特效元素,生成初始特效模板;
特效合成模块:用于将初始特效模板与直播场景数据进行特效化融合,生成目标特效;
所述系统还包括:
音频采集单元:根据直播数据,获取直播时的音频数据和数量信息;其中,
数量信息用于指示接收音频数据的接收方的数量;
接收端处理单元:用于在接收方的数量为多个时,根据数量信息在元数据中配置分别与多个接收方相对应的多个接收方字段;其中,
接收方字段包括与接收方的位置信息相关的特征字段;
渲染单元:用于将元数据发送至音频渲染器;其中,
音频渲染器用于根据多个所述接收方字段分别为多个接收方差异化地渲染音频数据;
所述系统还包括:
热度识别单元:用于获取直播时的直播界面产生的热度数据;
识别单元:用于热度数据,确定直播界面上各元素的欢迎度;
界面处理单元:当欢迎度低于预设的欢迎度界限值,则根据不同的界面排布元素进行界面优化,得到优化排布界面。
2.如权利要求1所述的一种基于场景分析的特效自合成系统,其特征在于,所述第一场景采集进程为视觉采集进程,用于构建基于直播界面的初始三维空间模型,并在初始三维空间模型中实时捕捉动态数据,并基于三维空间模型和动态数据构成直播场景数据。
3.如权利要求1所述的一种基于场景分析的特效自合成系统,其特征在于,所述第二场景采集进程为后台数据采集进程,用于实时分级采集直播留言、直播弹幕和直播礼物;其中,
分级采集为直播贡献度等级。
4.如权利要求1所述的一种基于场景分析的特效自合成系统,其特征在于,所述场景分析模块包括:
第一数据分析单元:用于构建基于弹幕礼物数据的多维分析矩阵,并按照预设矩阵项进行弹幕礼物数据填充;其中,
预设矩阵项包括礼物时间戳、礼物价格等级、礼物对象;
特效等级确定单元:用于设置反馈响应机制,以使得待合成特效等级的特效模板被触发;其中,
反馈响应机制包括等级响应机制和价格响应机制;
等级响应机制用于对不同等级的用户发送礼物生成反馈响应;
价格响应机制用于对不同价格的礼物生成反馈响应;
礼物购买者头像采集单元:用于根据预设矩阵项,确定礼物对象,并提取礼物对象的实时头像。
5.如权利要求4所述的一种基于场景分析的特效自合成系统,其特征在于,所述反馈响应机制包括如下反馈过程:
根据预设矩阵项,进行分析预处理;其中,
分析预处理包括:数据聚类、数据合并类簇和数据时间戳标定;
根据分析与处理结果,进行混合相似度度量,确定被触发的特效模板;
根据被触发的特效模板,确定对应的精简指令;
根据精简指令,进行反馈响应。
6.如权利要求4所述的一种基于场景分析的特效自合成系统,其特征在于,所述元素定制模块包括:
第一响应单元:用于根据礼物时间戳,将当前礼物的特效显示层级设置为优先层;
第二响应单元:用于根据礼物价格等级和礼物对象,确定在优先层排列的特效显示范围;
关联性模板调用单元:用于根据待合成礼物特效等级和礼物对象,在预设特效模板库中调用特效合成模板;
模板生成单元:用于根据待合成礼物特效等级,在特效元素数据库中调用对应等级元素,并生成初始特效模板。
7.如权利要求6所述的一种基于场景分析的特效自合成系统,其特征在于,所述生成初始特效模板还包括:
获取礼物对象的身份信息;
根据身份信息,遍历用户直播交易参数;
根据用户直播交易参数,判断用户端是否存在特效元素购买记录;其中,
当存在特效元素购买记录时,将购买记录中存在的特效元素作为优先元素填充至初始特效模板;
当不存在特效元素购买记录时,直接生成初始特效模板。
8.如权利要求6所述的一种基于场景分析的特效自合成系统,其特征在于,所述特效合成模块包括:
第一判定单元:根据初始特效模板与直播场景数据,确定可融合的特效节点;其中,
融合单元:用于根据特效节点,确定特效融合算法;其中,
特效融合算法用于根据直播场景和元素组合进行特效融合;
不同直播场景对应不同的融合算法;
融合生成单元:用于在特效节点将初始特效模板与直播场景数据进行融合,生成目标特效。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311150887.8A CN117119259B (zh) | 2023-09-07 | 2023-09-07 | 一种基于场景分析的特效自合成系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311150887.8A CN117119259B (zh) | 2023-09-07 | 2023-09-07 | 一种基于场景分析的特效自合成系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117119259A CN117119259A (zh) | 2023-11-24 |
CN117119259B true CN117119259B (zh) | 2024-03-08 |
Family
ID=88800006
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311150887.8A Active CN117119259B (zh) | 2023-09-07 | 2023-09-07 | 一种基于场景分析的特效自合成系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117119259B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108650523A (zh) * | 2018-05-22 | 2018-10-12 | 广州虎牙信息科技有限公司 | 直播间的显示及虚拟物品选取方法、服务器、终端和介质 |
CN109462769A (zh) * | 2018-10-30 | 2019-03-12 | 武汉斗鱼网络科技有限公司 | 直播间挂件显示方法、装置、终端及计算机可读介质 |
CN112040262A (zh) * | 2020-08-31 | 2020-12-04 | 腾讯科技(深圳)有限公司 | 一种虚拟资源对象处理方法及装置 |
CN113205575A (zh) * | 2021-04-29 | 2021-08-03 | 广州繁星互娱信息科技有限公司 | 直播唱歌信息的显示方法、装置、终端及存储介质 |
WO2022042089A1 (zh) * | 2020-08-28 | 2022-03-03 | 北京达佳互联信息技术有限公司 | 直播间的互动方法及装置 |
CN114827637A (zh) * | 2021-01-21 | 2022-07-29 | 北京陌陌信息技术有限公司 | 一种虚拟定制礼物的展示方法、系统、设备和存储介质 |
CN115225923A (zh) * | 2022-06-09 | 2022-10-21 | 广州博冠信息科技有限公司 | 礼物特效的渲染方法、装置、电子设备和直播服务器 |
CN116708853A (zh) * | 2023-05-12 | 2023-09-05 | 广州博冠信息科技有限公司 | 直播中的互动方法、装置和电子设备 |
-
2023
- 2023-09-07 CN CN202311150887.8A patent/CN117119259B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108650523A (zh) * | 2018-05-22 | 2018-10-12 | 广州虎牙信息科技有限公司 | 直播间的显示及虚拟物品选取方法、服务器、终端和介质 |
CN109462769A (zh) * | 2018-10-30 | 2019-03-12 | 武汉斗鱼网络科技有限公司 | 直播间挂件显示方法、装置、终端及计算机可读介质 |
WO2022042089A1 (zh) * | 2020-08-28 | 2022-03-03 | 北京达佳互联信息技术有限公司 | 直播间的互动方法及装置 |
CN112040262A (zh) * | 2020-08-31 | 2020-12-04 | 腾讯科技(深圳)有限公司 | 一种虚拟资源对象处理方法及装置 |
CN114827637A (zh) * | 2021-01-21 | 2022-07-29 | 北京陌陌信息技术有限公司 | 一种虚拟定制礼物的展示方法、系统、设备和存储介质 |
CN113205575A (zh) * | 2021-04-29 | 2021-08-03 | 广州繁星互娱信息科技有限公司 | 直播唱歌信息的显示方法、装置、终端及存储介质 |
CN115225923A (zh) * | 2022-06-09 | 2022-10-21 | 广州博冠信息科技有限公司 | 礼物特效的渲染方法、装置、电子设备和直播服务器 |
CN116708853A (zh) * | 2023-05-12 | 2023-09-05 | 广州博冠信息科技有限公司 | 直播中的互动方法、装置和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN117119259A (zh) | 2023-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11861903B2 (en) | Methods and apparatus to measure brand exposure in media streams | |
JP2971381B2 (ja) | マルティメディアプログラム編集方法及びマルチメディアプログラム編集システム | |
CN103024464B (zh) | 提供与视频播放内容相关信息的系统和方法 | |
US20020055891A1 (en) | Researching method and researching system for interests in commercial goods by using electronic catalog including interactive 3D image data | |
CA2721481C (en) | Preprocessing video to insert visual elements and applications thereof | |
CN102696223B (zh) | 多功能多媒体装置 | |
CN102077580B (zh) | 显示控制设备、显示控制方法 | |
US20160050465A1 (en) | Dynamically targeted ad augmentation in video | |
CN102890950B (zh) | 媒体自动剪辑装置、方法、媒体播送方法与其播送系统 | |
CN105518666A (zh) | 信息处理装置和信息处理方法 | |
CN113961995B (zh) | 一种用于展览展示与会议服务的智能交互系统 | |
KR101867950B1 (ko) | 생방송 및 영상서비스용 실시간 부가정보 표시 시스템 | |
CN117119259B (zh) | 一种基于场景分析的特效自合成系统 | |
KR101613494B1 (ko) | Bj중간광고시스템 및 bj중간광고방법 | |
KR20180131687A (ko) | 실시간기반 및 컨텐츠 기반 실시간 공연공유 서비스 제공시스템 | |
KR20220095591A (ko) | 개인미디어 크리에이터를 위한 클라우드 기반 스튜디오 플랫폼 제공 시스템 | |
CN112312207A (zh) | 智能电视终端与移动终端流量打通的方法、装置及设备 | |
CN114079777A (zh) | 视频处理方法和装置 | |
EP2680164A1 (en) | Content data interaction | |
CN117793407A (zh) | 直播流的标签确定方法、装置、设备及存储介质 | |
CN114501097A (zh) | 在视频中插入数字内容 | |
KR20230090899A (ko) | 방송영상의 영역 및 객체 인식을 이용한 가상광고 삽입 시스템 및 방법 | |
KR20180132185A (ko) | 실시간기반 및 컨텐츠 기반 실시간 공연공유 서비스 제공시스템 | |
CN116266193A (zh) | 视频封面的生成方法、装置、设备、存储介质及程序产品 | |
CN116033223A (zh) | 一种基于ai的推荐视频信息生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |