CN116704092B - 一种动漫场景实时渲染系统 - Google Patents
一种动漫场景实时渲染系统 Download PDFInfo
- Publication number
- CN116704092B CN116704092B CN202310993358.8A CN202310993358A CN116704092B CN 116704092 B CN116704092 B CN 116704092B CN 202310993358 A CN202310993358 A CN 202310993358A CN 116704092 B CN116704092 B CN 116704092B
- Authority
- CN
- China
- Prior art keywords
- rendering
- preset
- picture
- delay time
- central control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000009877 rendering Methods 0.000 title claims abstract description 229
- 230000011218 segmentation Effects 0.000 claims abstract description 40
- 230000008054 signal transmission Effects 0.000 claims abstract description 11
- 238000011156 evaluation Methods 0.000 claims description 14
- 238000000034 method Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 9
- 230000004075 alteration Effects 0.000 claims description 3
- 230000006872 improvement Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 8
- 239000002245 particle Substances 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
- G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明涉及动漫渲染技术领域,尤其涉及一种动漫场景实时渲染系统,包括:建模模块,用以对动漫场景模型和动漫人物模型进行构建;渲染模块,其与所述建模模块相连,包括用以对渲染帧画面进行画面切分的切分单元、与所述切分单元相连用以对待渲染画面进行渲染的渲染单元;信号传输模块,其与所述渲染模块相连,用以将渲染模块输出的实时动漫画面实时传输回本地用户端;中控模块,用以根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,以及,根据渲染画面的延迟时长对非边缘简单帧块的粒度进行调节。本发明实现了渲染效率的提高。
Description
技术领域
本发明涉及动漫渲染技术领域,尤其涉及一种动漫场景实时渲染系统。
背景技术
现有技术中的动漫渲染系统针对动漫的渲染过程存在渲染效率不足的问题,渲染过程中的不同帧率和不同粒度的画面所需的渲染时长也不同,因此动漫渲染系统仍存在较大的改进空间。
中国专利公开号:CN113096220A公开了一种动漫场景渲染制作方法,包括以下步骤:(1)在单机计算机上创建需要的场景模型;(2)在单机计算机上设定场景的不同景深、亮度,以及材质纹理和阴影;(3)在单机计算机上设定图像的计算参数,把计算参数与数据服务器连通;(4)数据服务器把不同的场景图像计算参数分发给不同的运算服务器,不同的运算服务器分别对接收的场景图像计算参数进行计算,制作出该计算参数的图像;(5)不同的运算服务器把各自制作出的图像传送给数据整合服务器,数据整合服务器按照顺序把不同的图像组合成一组完整的具有渲染效果的场景图像。由此可见,所述动漫场景渲染制作方法存在由于渲染画面的复杂度不同和画面切分数量与渲染节点之间的平衡性不足导致的渲染效率下降的问题。
发明内容
为此,本发明提供一种动漫场景实时渲染系统,用以克服现有技术中由于渲染画面的复杂度不同和画面切分数量与渲染节点之间的平衡性不足导致的渲染效率下降的问题。
为实现上述目的,本发明提供一种动漫场景实时渲染系统,包括:建模模块,用以对动漫场景模型和动漫人物模型进行构建;渲染模块,其与所述建模模块相连,包括用以对渲染帧画面进行切分的切分单元、与所述切分单元相连用以对待渲染画面进行渲染的渲染单元,渲染单元包括若干个用以对切分画面进行渲染的渲染节点;信号传输模块,其与所述渲染模块相连,用以将渲染模块输出的实时动漫画面实时传输回本地用户端;中控模块,其分别与所述建模模块、所述渲染模块以及所述信号传输模块相连,用以根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,以及,根据渲染画面的延迟时长对非边缘简单帧块的粒度进行调节,以及,根据渲染线程所占实际运行内存对渲染节点数量进行调节,以及,根据若干相邻画面切分帧块的色差对相邻切分帧块画面的粒度差进行调节。
进一步地,所述中控模块根据单张渲染帧画面中的人物所占面积和单张渲染帧总面积确定单张渲染帧画面的切分块数量,单张渲染帧画面的切分块数量的计算公式为:
;
其中,G为单张渲染帧画面的切分块数量,C总为单张渲染帧总面积,C0为单张渲染帧画面中的人物所占面积。
进一步地,所述中控模块根据切分后画面的复杂度评价参数与预设复杂度评价参数QO的对比结果判定是否对渲染帧画面进行二次切分,切分后画面的复杂度评价参数的计算公式为:
;
其中,Q为切分后画面的复杂度评价参数,N为画面的人物数量,n为画面的人物数量的权重系数,M为人物之间的交叉面积,m为人物之间的交叉面积的权重系数,P为画面封闭阴影区域的数量,p为画面封闭阴影区域的数量的权重系数,其中,n+m+p=1;
若Q≤QO,所述中控模块判定切分画面的复杂度在允许范围内并将当前切分画面对应的帧块划分为简单帧块;
若Q>QO,所述中控模块判定切分画面的复杂度超出允许范围,控制切分单元对当前切分画面进行二次切分并将切分后的待渲染画面发送至相邻渲染节点。
进一步地,所述中控模块根据画面渲染的延迟时长对渲染的连续性进行判定,
若画面渲染的延迟时长满足预设第一延迟时长条件和预设第二延迟时长条件,所述中控模块判定渲染的连续性低于允许范围,其中,
所述中控模块在所述预设第一延迟时长条件下判定需调升所述非边缘简单帧块的粒度;
所述中控模块在所述预设第二延迟时长条件下初次判定网络延迟程度超出允许范围,并根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定;
其中,所述预设第一延迟时长条件为,画面渲染的延迟时长大于预设第一延迟时长且小于等于预设第二延迟时长;所述预设第二延迟时长条件为,画面渲染的延迟时长大于预设第二延迟时长;所述预设第一延迟时长小于所述预设第二延迟时长。
进一步地,所述中控模块在所述预设第二延迟时长条件下设有若干根据画面渲染的延迟时长与预设第一延迟时长的差值增大非边缘简单帧块的粒度的调节方式,其中,每种调节方式对所述非边缘简单帧块的粒度的调节大小不同。
进一步地,所述中控模块在所述预设第二延迟时长条件下根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定,
若渲染线程的实际运行内存占比满足预设内存占比条件,所述中控模块二次判定网络延迟程度超出允许范围,对渲染节点数量进行调节;
其中,所述预设内存占比条件为,渲染线程的实际运行内存占比大于预设运行内存占比。
进一步地,所述渲染线程的实际运行内存占比的计算公式为:
;
其中,Xa为渲染线程的实际运行内存,Z总为设备总运行内存。
进一步地,所述中控模块在所述预设内存占比条件下设有若干根据渲染线程的实际运行内存占比与预设运行内存占比的差值减小渲染节点数量的调节方式,其中,每种节点数量调节方式对所述渲染节点数量的调节大小不同。
进一步地,所述中控模块根据单组相邻画面切分帧块的色差对相邻切分帧块的边缘区分度进行判定,
若单组相邻画面切分帧块的色差满足预设第一色差条件和预设第二色差条件,所述中控模块判定相邻切分帧块的边缘区分度低于允许范围,其中,
所述中控模块在所述预设第一色差条件下判定将该相邻切分帧块所处区域在后续渲染过程中进行合并;
所述中控模块在所述预设第二色差条件下判定需增大相邻切分帧块的粒度差;
其中,所述预设第一色差条件为,单组相邻画面切分帧块的色差小于等于预设第一色差;所述预设第二色差条件为,单组相邻画面切分帧块的色差大于预设第一色差且小于等于预设第二色差;所述预设第一色差小于所述预设第二色差。
进一步地,所述中控模块在所述预设第二色差条件下设有若干根据单组相邻画面切分帧块的色差与预设第一色差的差值增大相邻切分帧块粒度差的调节方式,其中,每种粒度差调节方式对所述相邻切分帧块粒度差的调节大小不同。
与现有技术相比,本发明的有益效果在于,本发明所述系统通过设置的建模模块、渲染模块、信号传输模块以及中控模块,通过根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,降低了由于对切分块数量设置的不合理对于渲染效率的影响;通过根据渲染画面的延迟时长将非边缘简单帧块的粒度调节至对应粒度,降低了由于对渲染过程的粒度设置不合理对于渲染速度的影响;通过根据渲染线程所占实际运行内存将渲染节点数量调节至对应数量,降低了渲染线程所占内存过多对于网络传输效率的影响;通过根据若干相邻画面切分帧块的色差将相邻切分帧块画面的粒度差调节至对应粒度差,降低了由于对粒度差的调节不精准对于渲染速度的影响,实现了渲染效率的提高。
进一步地,本发明所述系统通过设置的针对画面复杂度评价参数的计算公式,对于画面的复杂度进行了精准的计算,并判定是否进行二次切分,提高了渲染的速度,进一步实现了渲染效率的提高。
进一步地,本发明所述系统通过设置的预设第一延迟时长和预设第二延迟时长,通过根据画面渲染的延迟时长确定渲染的连续性是否在允许范围内的三种判定方式,降低了由于对渲染的连续性的判定不精准对于渲染效率的影响,进一步实现了渲染效率的提高。
进一步地,本发明所述系统通过设置的预设第一延迟时长、预设第二延迟时长、预设第一粒度调节系数以及预设第二粒度调节系数,通过根据画面渲染的延迟时长与预设第一延迟时长的差值确定针对非边缘简单帧块的粒度的三种调节方式,降低了由于对粒度的调节不精准对于渲染画面的渲染速度的影响,进一步实现了渲染效率的提高。
进一步地,本发明所述系统通过设置的预设运行内存占比,通过根据渲染线程的实际运行内存占比确定网络延迟程度是否超出允许范围的两种二次判定方式,降低了由于对网络延迟程度判定不精准对于渲染过程的影响,进一步实现了渲染效率的提高。
进一步地,本发明所述系统通过设置的预设第一运行内存占比差值、预设第二运行内存占比差值、预设第一节点数量调节系数以及预设第二节点数量调节系数,通过根据渲染线程的实际运行内存占比与预设运行内存占比的差值确定针对渲染节点数量的三种调节方式,降低了由于对所述渲染节点数量的调节不精准对于渲染效率的影响。
进一步地,本发明所述系统通过设置的预设第一色差差值、预设第二色差差值、预设第一粒度差调节系数以及预设第二粒度差调节系数,通过根据单组相邻画面切分帧块的色差与预设第一色差的差值确定针对相邻切分帧块粒度差的三种调节方式,降低了由于对粒度差的调节不精准对于画面渲染粒度的精准性的影响,进一步实现了渲染效率的提高。
附图说明
图1为本发明实施例动漫场景实时渲染系统的整体结构框图;
图2为本发明实施例动漫场景实时渲染系统的渲染模块结构框图;
图3为本发明实施例动漫场景实时渲染系统的渲染模块与中控模块连接的连接结构框图;
图4为本发明实施例动漫场景实时渲染系统的渲染模块分别与建模模块、信号传输模块以及中控模块的连接结构框图。
具体实施方式
为了使本发明的目的和优点更加清楚明白,下面结合实施例对本发明作进一步描述;应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。
下面参照附图来描述本发明的优选实施方式。本领域技术人员应当理解的是,这些实施方式仅仅用于解释本发明的技术原理,并非在限制本发明的保护范围。
请参阅图1、图2、图3以及图4所示,其分别为本发明实施例动漫场景实时渲染系统的整体结构框图、渲染模块结构框图、渲染模块与中控模块连接的连接结构框图以及渲染模块分别与建模模块、信号传输模块以及中控模块的连接结构框图;本实施例一种动漫场景实时渲染系统,包括:
建模模块,用以对动漫场景模型和动漫人物模型进行构建;
渲染模块,其与所述建模模块相连,包括用以对渲染帧画面进行画面切分的切分单元、与所述切分单元相连用以对待渲染画面进行渲染的渲染单元,渲染单元包括若干个用以对切分画面进行渲染的渲染节点;
信号传输模块,其与所述渲染模块相连,用以将渲染模块输出的实时动漫画面实时传输回本地用户端;
中控模块,其分别与所述建模模块、所述渲染模块以及所述信号传输模块相连,用以根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,以及,根据渲染画面的延迟时长对非边缘简单帧块的粒度进行调节,以及,根据渲染线程所占实际运行内存对渲染节点数量进行调节,以及,根据若干相邻画面切分帧块的色差对相邻切分帧块画面的粒度差进行调节。
具体而言,所述非边缘简单帧块的粒度为非边缘简单帧块的精细程度,具体可以为非边缘简单帧块的数据容量或非边缘简单帧块的所占总体面积的占比。
具体而言,所述相邻切分帧块画面的粒度差为相邻的切分帧块画面的粒度的差值。
本发明所述系统通过设置的建模模块、渲染模块、信号传输模块以及中控模块,通过根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,降低了由于对切分块数量设置的不合理对于渲染效率的影响;通过根据渲染画面的延迟时长将非边缘简单帧块的粒度调节至对应粒度,降低了由于对渲染过程的粒度设置不合理对于渲染速度的影响;通过根据渲染线程所占实际运行内存将渲染节点数量调节至对应数量,降低了渲染线程所占内存过多对于网络传输效率的影响;通过根据若干相邻画面切分帧块的色差将相邻切分帧块画面的粒度差调节至对应粒度差,降低了由于对粒度差的调节不精准对于渲染速度的影响,实现了渲染效率的提高。
请继续参阅图1所示,所述中控模块根据单张渲染帧画面中的人物所占面积和单张渲染帧总面积确定单张渲染帧画面的切分块数量,单张渲染帧画面的切分块数量的计算公式为:
;
其中,G为单张渲染帧画面的切分块数量,C总为单张渲染帧总面积,C0为单张渲染帧画面中的人物所占面积。
具体而言,单张渲染帧画面的切分块数量的计算公式的实质为对单张渲染帧总面积和单张渲染帧画面中的人物所占面积的比值进行向上取整运算。
请继续参阅图1所示,所述中控模块根据切分后画面的复杂度评价参数与预设复杂度评价参数QO的对比结果判定是否对渲染帧画面进行二次切分,切分后画面的复杂度评价参数的计算公式为:
;
其中,Q为切分后画面的复杂度评价参数,N为画面的人物数量,n为画面的人物数量的权重系数,M为人物之间的交叉面积,m为人物之间的交叉面积的权重系数,P为画面封闭阴影区域的数量,p为画面封闭阴影区域的数量的权重系数,其中,n+m+p=1;
若Q≤QO,所述中控模块判定切分画面的复杂度在允许范围内并将当前切分画面对应的帧块划分为简单帧块;
若Q>QO,所述中控模块判定切分画面的复杂度超出允许范围,控制切分单元对当前切分画面进行二次切分并将切分后的待渲染画面发送至相邻渲染节点。
本发明所述系统通过设置的针对画面复杂度评价参数的计算公式,对于画面的复杂度进行了精准的计算,并判定是否进行二次切分,提高了渲染的速度,进一步实现了渲染效率的提高。
请继续参阅图1和图2所示,所述中控模块根据画面渲染的延迟时长对渲染的连续性进行判定,
若画面渲染的延迟时长满足预设第一延迟时长条件和预设第二延迟时长条件,所述中控模块判定渲染的连续性低于允许范围,其中,
所述中控模块在所述预设第一延迟时长条件下判定需调升所述非边缘简单帧块的粒度;
所述中控模块在所述预设第二延迟时长条件下初次判定网络延迟程度超出允许范围,并根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定;
其中,所述预设第一延迟时长条件为,画面渲染的延迟时长大于预设第一延迟时长且小于等于预设第二延迟时长;所述预设第二延迟时长条件为,画面渲染的延迟时长大于预设第二延迟时长;所述预设第一延迟时长小于所述预设第二延迟时长。
具体而言,画面渲染的延迟时长记为T,预设第一延迟时长记为T1,预设第二延迟时长记为T2,其中T1<T2,画面渲染的延迟时长与预设第一延迟时长的差值记为△T,设定△T=T-T1。
本发明所述系统通过设置的预设第一延迟时长和预设第二延迟时长,通过根据画面渲染的延迟时长确定渲染的连续性是否在允许范围内的三种判定方式,降低了由于对渲染的连续性的判定不精准对于渲染效率的影响,进一步实现了渲染效率的提高。
请继续参阅图1所示,所述中控模块在所述预设第二延迟时长条件下设有若干根据画面渲染的延迟时长与预设第一延迟时长的差值增大非边缘简单帧块的粒度的调节方式,其中,每种调节方式对所述非边缘简单帧块的粒度的调节大小不同。
具体而言,第一种粒度调节方式为,所述中控模块在预设第一延迟时长差值条件将所述非边缘简单帧块的粒度调节至预设粒度;
第二种粒度调节方式为,所述中控模块在预设第二延迟时长差值条件使用预设第一粒度调节系数将所述非边缘简单帧块的粒度调节至第一粒度;
第三种粒度调节方式为,所述中控模块在预设第三延迟时长差值条件使用预设第二粒度调节系数将所述非边缘简单帧块的粒度调节至第二粒度;
其中,所述预设第一延迟时长差值条件为,画面渲染的延迟时长与预设第一延迟时长的差值小于等于预设第一延迟时长差值;所述预设第二延迟时长差值条件为,画面渲染的延迟时长与预设第一延迟时长的差值大于预设第一延迟时长差值且小于等于预设第二延迟时长差值;所述预设第三延迟时长差值条件为,画面渲染的延迟时长与预设第一延迟时长的差值大于预设第二延迟时长差值;所述预设第一延迟时长差值小于所述预设第二延迟时长差值,所述预设第一粒度调节系数小于所述预设第二粒度调节系数。
具体而言,预设粒度记为E0,预设第一延迟时长差值记为△T1,预设第二延迟时长差值记为△T2,预设第一粒度调节系数记为α1,预设第二粒度调节系数记为α2,其中,△T1<△T2,1<α1<α2,调节后的非边缘简单帧块的粒度记为E',设定E'=E0×(1+αi)/2,其中,αi为第i粒度调节系数,设定i=1,2。
本发明所述系统通过设置的预设第一延迟时长、预设第二延迟时长、预设第一粒度调节系数以及预设第二粒度调节系数,通过根据画面渲染的延迟时长与预设第一延迟时长的差值确定针对非边缘简单帧块的粒度的三种调节方式,降低了由于对粒度的调节不精准对于渲染画面的渲染速度的影响,进一步实现了渲染效率的提高。
请继续参阅图1和图3所示,所述中控模块在所述预设第二延迟时长条件下根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定,
若渲染线程的实际运行内存占比满足预设内存占比条件,所述中控模块二次判定网络延迟程度超出允许范围,对渲染节点数量进行调节;
其中,所述预设内存占比条件为,渲染线程的实际运行内存占比大于预设运行内存占比。
具体而言,渲染线程的实际运行内存占比记为S,预设运行内存占比记为S0,渲染线程的实际运行内存占比与预设运行内存占比的差值记为△S,设定△S=S-S0。
本发明所述系统通过设置的预设运行内存占比,通过根据渲染线程的实际运行内存占比确定网络延迟程度是否超出允许范围的两种二次判定方式,降低了由于对网络延迟程度判定不精准对于渲染过程的影响,进一步实现了渲染效率的提高。
请继续参阅图2所示,所述渲染线程的实际运行内存占比的计算公式为:
;
其中,Xa为渲染线程的实际运行内存,Z总为设备总运行内存。
请继续参阅图1所示,所述中控模块在所述预设内存占比条件下设有若干根据渲染线程的实际运行内存占比与预设运行内存占比的差值减小渲染节点数量的调节方式,其中,每种节点数量调节方式对所述渲染节点数量的调节大小不同。
第一种调节方式为,所述中控模块在预设第一内存占比差值条件下将所述渲染节点数量调节至预设节点数量;
第二种调节方式为,所述中控模块在预设第二内存占比差值条件下使用预设第二节点数量调节系数将所述渲染节点数量调节至第一节点数量;
第三种调节方式为,所述中控模块在预设第三内存占比差值条件下使用预设第一节点数量调节系数将所述渲染节点数量调节至第二节点数量;
其中,所述预设第一内存占比差值条件为,渲染线程的实际运行内存占比与预设运行内存占比的差值小于等于预设第一运行内存占比差值;所述预设第二内存占比差值条件为,渲染线程的实际运行内存占比与预设运行内存占比的差值大于预设第一运行内存占比差值且小于等于预设第二运行内存占比差值;所述预设第三内存占比差值条件为,渲染线程的实际运行内存占比与预设运行内存占比的差值大于预设第二运行内存占比差值;所述预设第一运行内存占比差值小于所述预设第二运行内存占比差值,所述预设第一节点数量调节系数小于所述预设第二节点数量调节系数。
具体而言,预设节点数量记为H0,预设第一运行内存占比差值记为△S1,预设第二运行内存占比差值记为△S2,预设第一节点数量调节系数记为β1,预设第二节点数量调节系数记为β2,其中,△S1<△S2,0<β1<β2<1,调节后的渲染节点数量记为H',设定H'=H0×βj,其中βj为第j节点数量调节系数,设定j=1,2。
本发明所述系统通过设置的预设第一运行内存占比差值、预设第二运行内存占比差值、预设第一节点数量调节系数以及预设第二节点数量调节系数,通过根据渲染线程的实际运行内存占比与预设运行内存占比的差值确定针对渲染节点数量的三种调节方式,降低了由于对所述渲染节点数量的调节不精准对于渲染效率的影响。
请继续参阅图1所示,所述中控模块根据单组相邻画面切分帧块的色差对相邻切分帧块的边缘区分度进行判定,
若单组相邻画面切分帧块的色差满足预设第一色差条件和预设第二色差条件,所述中控模块判定相邻切分帧块的边缘区分度低于允许范围,其中,
所述中控模块在所述预设第一色差条件下判定将该相邻切分帧块所处区域在后续渲染过程中进行合并;
所述中控模块在所述预设第二色差条件下判定需增大相邻切分帧块的粒度差;
其中,所述预设第一色差条件为,单组相邻画面切分帧块的色差小于等于预设第一色差;所述预设第二色差条件为,单组相邻画面切分帧块的色差大于预设第一色差且小于等于预设第二色差;所述预设第一色差小于所述预设第二色差。
具体而言,单组相邻画面切分帧块的色差记为R,预设第一色差记为R1,预设第二色差记为R2,其中R1<R2,单组相邻画面切分帧块的色差与预设第一色差的差值记为△R,设定△R=R-R1。
请继续参阅图1所示,所述中控模块在所述预设第二色差条件下设有若干根据单组相邻画面切分帧块的色差与预设第一色差的差值增大相邻切分帧块粒度差的调节方式,其中,每种粒度差调节方式对所述相邻切分帧块粒度差的调节大小不同。
具体而言,第一种粒度差调节方式为,所述中控模块在预设第一色差差值条件下将所述相邻切分帧块粒度差调节至预设粒度差;
第二种粒度差调节方式为,所述中控模块在预设第二色差差值条件下使用预设第一粒度差调节系数将所述相邻切分帧块粒度差调节至第一粒度差;
第三种粒度差调节方式为,所述中控模块在预设第三色差差值条件下使用预设第二粒度差调节系数将所述相邻切分帧块粒度差调节至第二粒度差;
其中,所述预设第一色差差值条件为,单组相邻画面切分帧块的色差与预设第一色差的差小于等于预设第一色差差值;所述预设第二色差差值条件为,单组相邻画面切分帧块的色差与预设第一色差的差值大于预设第一色差差值且小于等于预设第二色差差值;所述预设第三色差差值条件为,单组相邻画面切分帧块的色差与预设第一色差的差值大于预设第二色差差值;所述预设第一色差差值小于所述预设第二色差差值,所述预设第一粒度差调节系数小于所述预设第二粒度差调节系数。
具体而言,预设粒度差记为F0,预设第一色差差值记为△R1,预设第二色差差值记为△R2,预设第一粒度差调节系数记为γ1,预设第二粒度差调节系数记为γ2,其中,△R1<△R2,1<γ1<γ2,调节后的相邻切分帧块粒度差记为F',设定F'=F0×(1+2γg)/3,其中,γg为第g粒度差调节系数,设定g=1,2。
本发明所述系统通过设置的预设第一色差差值、预设第二色差差值、预设第一粒度差调节系数以及预设第二粒度差调节系数,通过根据单组相邻画面切分帧块的色差与预设第一色差的差值确定针对相邻切分帧块粒度差的三种调节方式,降低了由于对粒度差的调节不精准对于画面渲染粒度的精准性的影响,进一步实现了渲染效率的提高。
实施例1
本实施例1动漫场景实时渲染系统,中控模块在预设第二内存占比条件根据渲染线程的实际运行内存占比与预设运行内存占比的差值确定针对渲染节点数量的三种调节方式,预设节点数量记为H0,预设第一运行内存占比差值记为△S1,预设第二运行内存占比差值记为△S2,预设第一节点数量调节系数记为β1,预设第二节点数量调节系数记为β2,其中,△S1=0.1,△S2=0.2,β1=0.85,β2=0.96,H0=30个,
本实施例1求得△S=0.16,中控模块判定△S1<△S≤△S2并使用预设第二节点数量调节系数β2将所述渲染节点数量调节至第一节点数量,第一节点数量计算得H'=30×0.96=29个。
本实施例1所述系统通过设置的预设第一运行内存占比差值、预设第二运行内存占比差值、预设第一节点数量调节系数以及预设第二节点数量调节系数,根据渲染线程的实际运行内存占比将渲染节点数量调节至对应值,降低了渲染节点过多对于渲染效率的影响。
至此,已经结合附图所示的优选实施方式描述了本发明的技术方案,但是,本领域技术人员容易理解的是,本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下,本领域技术人员可以对相关技术特征做出等同的更改或替换,这些更改或替换之后的技术方案都将落入本发明的保护范围之内。
以上所述仅为本发明的优选实施例,并不用于限制本发明;对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种动漫场景实时渲染系统,其特征在于,包括:
建模模块,用以对动漫场景模型和动漫人物模型进行构建;
渲染模块,其与所述建模模块相连,包括用以对渲染帧画面进行切分的切分单元、与所述切分单元相连用以对待渲染画面进行渲染的渲染单元,渲染单元包括若干个用以对切分画面进行渲染的渲染节点;
信号传输模块,其与所述渲染模块相连,用以将渲染模块输出的实时动漫画面实时传输回本地用户端;
中控模块,其分别与所述建模模块、所述渲染模块以及所述信号传输模块相连,用以根据单张渲染帧画面中的最大粒度位置处为中心对画面进行切分,确定单张渲染帧画面的切分块数量,以及,根据渲染画面的延迟时长对非边缘简单帧块的粒度进行调节,以及,根据渲染线程所占实际运行内存对渲染节点数量进行调节,以及,根据若干相邻画面切分帧块的色差对相邻切分帧块画面的粒度差进行调节。
2.根据权利要求1所述的动漫场景实时渲染系统,其特征在于,所述中控模块根据单张渲染帧画面中的人物所占面积和单张渲染帧总面积确定单张渲染帧画面的切分块数量,单张渲染帧画面的切分块数量的计算公式为:
;
其中,G为单张渲染帧画面的切分块数量,C总为单张渲染帧总面积,C0为单张渲染帧画面中的人物所占面积。
3.根据权利要求2所述的动漫场景实时渲染系统,其特征在于,所述中控模块根据切分后画面的复杂度评价参数与预设复杂度评价参数QO的对比结果判定是否对渲染帧画面进行二次切分,切分后画面的复杂度评价参数的计算公式为:
;
其中,Q为切分后画面的复杂度评价参数,N为画面的人物数量,n为画面的人物数量的权重系数,M为人物之间的交叉面积,m为人物之间的交叉面积的权重系数,P为画面封闭阴影区域的数量,p为画面封闭阴影区域的数量的权重系数,其中,n+m+p=1;
若Q≤QO,所述中控模块判定切分画面的复杂度在允许范围内并将当前切分画面对应的帧块划分为简单帧块;
若Q>QO,所述中控模块判定切分画面的复杂度超出允许范围,控制切分单元对当前切分画面进行二次切分并将切分后的待渲染画面发送至相邻渲染节点。
4.根据权利要求3所述的动漫场景实时渲染系统,其特征在于,所述中控模块根据画面渲染的延迟时长对渲染的连续性进行判定,
若画面渲染的延迟时长满足预设第一延迟时长条件和预设第二延迟时长条件,所述中控模块判定渲染的连续性低于允许范围,其中,
所述中控模块在所述预设第一延迟时长条件下判定需调升所述非边缘简单帧块的粒度;
所述中控模块在所述预设第二延迟时长条件下初次判定网络延迟程度超出允许范围,并根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定;
其中,所述预设第一延迟时长条件为,画面渲染的延迟时长大于预设第一延迟时长且小于等于预设第二延迟时长;所述预设第二延迟时长条件为,画面渲染的延迟时长大于预设第二延迟时长;所述预设第一延迟时长小于所述预设第二延迟时长。
5.根据权利要求4所述的动漫场景实时渲染系统,其特征在于,所述中控模块在所述预设第二延迟时长条件下设有若干根据画面渲染的延迟时长与预设第一延迟时长的差值增大非边缘简单帧块的粒度的调节方式,其中,每种调节方式对所述非边缘简单帧块的粒度的调节大小不同。
6.根据权利要求5所述的动漫场景实时渲染系统,其特征在于,所述中控模块在所述预设第二延迟时长条件下根据渲染线程的实际运行内存占比对网络延迟程度进行二次判定,
若渲染线程的实际运行内存占比满足预设内存占比条件,所述中控模块二次判定网络延迟程度超出允许范围,对渲染节点数量进行调节;
其中,所述预设内存占比条件为,渲染线程的实际运行内存占比大于预设运行内存占比。
7.根据权利要求6所述的动漫场景实时渲染系统,其特征在于,所述渲染线程的实际运行内存占比的计算公式为:
;
其中,Xa为渲染线程的实际运行内存,Z总为设备总运行内存。
8.根据权利要求7所述的动漫场景实时渲染系统,其特征在于,所述中控模块在所述预设内存占比条件下设有若干根据渲染线程的实际运行内存占比与预设运行内存占比的差值减小渲染节点数量的调节方式,其中,每种节点数量调节方式对所述渲染节点数量的调节大小不同。
9.根据权利要求8所述的动漫场景实时渲染系统,其特征在于,所述中控模块根据单组相邻画面切分帧块的色差对相邻切分帧块的边缘区分度进行判定,
若单组相邻画面切分帧块的色差满足预设第一色差条件和预设第二色差条件,所述中控模块判定相邻切分帧块的边缘区分度低于允许范围,其中,
所述中控模块在所述预设第一色差条件下判定将该相邻切分帧块所处区域在后续渲染过程中进行合并;
所述中控模块在所述预设第二色差条件下判定需增大相邻切分帧块的粒度差;
其中,所述预设第一色差条件为,单组相邻画面切分帧块的色差小于等于预设第一色差;所述预设第二色差条件为,单组相邻画面切分帧块的色差大于预设第一色差且小于等于预设第二色差;所述预设第一色差小于所述预设第二色差。
10.根据权利要求9所述的动漫场景实时渲染系统,其特征在于,所述中控模块在所述预设第二色差条件下设有若干根据单组相邻画面切分帧块的色差与预设第一色差的差值增大相邻切分帧块粒度差的调节方式,其中,每种粒度差调节方式对所述相邻切分帧块粒度差的调节大小不同。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310993358.8A CN116704092B (zh) | 2023-08-09 | 2023-08-09 | 一种动漫场景实时渲染系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310993358.8A CN116704092B (zh) | 2023-08-09 | 2023-08-09 | 一种动漫场景实时渲染系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116704092A CN116704092A (zh) | 2023-09-05 |
CN116704092B true CN116704092B (zh) | 2023-12-22 |
Family
ID=87832579
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310993358.8A Active CN116704092B (zh) | 2023-08-09 | 2023-08-09 | 一种动漫场景实时渲染系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116704092B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117412083B (zh) * | 2023-11-07 | 2024-05-14 | 南月(广州)机器人科技有限公司 | 一种用于竞技产品教学的物联网视频传输方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103268253A (zh) * | 2012-02-24 | 2013-08-28 | 苏州蓝海彤翔系统科技有限公司 | 一种智能化的多尺度并行渲染作业调度管理方法 |
US8654121B1 (en) * | 2009-10-02 | 2014-02-18 | Pixar | Structured polygonal mesh retesselation |
CN107273080A (zh) * | 2017-05-25 | 2017-10-20 | 深圳市彬讯科技有限公司 | 一种基于多线程的移动端图片渲染方法及装置 |
US10962939B1 (en) * | 2017-04-18 | 2021-03-30 | Amazon Technologies, Inc. | Fine-grain content moderation to restrict images |
WO2022047686A1 (zh) * | 2020-09-03 | 2022-03-10 | 深圳市大疆创新科技有限公司 | 渲染方法、装置、移动终端和存储介质 |
CN115861510A (zh) * | 2022-12-20 | 2023-03-28 | 北京百度网讯科技有限公司 | 对象渲染方法、装置、电子设备、存储介质及程序产品 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012132481A1 (ja) * | 2011-03-28 | 2012-10-04 | 富士フイルム株式会社 | 色変換装置、色変換方法、プログラム及び分版装置 |
US10462499B2 (en) * | 2012-10-31 | 2019-10-29 | Outward, Inc. | Rendering a modeled scene |
-
2023
- 2023-08-09 CN CN202310993358.8A patent/CN116704092B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8654121B1 (en) * | 2009-10-02 | 2014-02-18 | Pixar | Structured polygonal mesh retesselation |
CN103268253A (zh) * | 2012-02-24 | 2013-08-28 | 苏州蓝海彤翔系统科技有限公司 | 一种智能化的多尺度并行渲染作业调度管理方法 |
US10962939B1 (en) * | 2017-04-18 | 2021-03-30 | Amazon Technologies, Inc. | Fine-grain content moderation to restrict images |
CN107273080A (zh) * | 2017-05-25 | 2017-10-20 | 深圳市彬讯科技有限公司 | 一种基于多线程的移动端图片渲染方法及装置 |
WO2022047686A1 (zh) * | 2020-09-03 | 2022-03-10 | 深圳市大疆创新科技有限公司 | 渲染方法、装置、移动终端和存储介质 |
CN115861510A (zh) * | 2022-12-20 | 2023-03-28 | 北京百度网讯科技有限公司 | 对象渲染方法、装置、电子设备、存储介质及程序产品 |
Non-Patent Citations (1)
Title |
---|
视觉深度学习的三维重建方法综述;李明阳 等;计算机科学与探索;第17卷(第02期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116704092A (zh) | 2023-09-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN116704092B (zh) | 一种动漫场景实时渲染系统 | |
EP0692917B1 (en) | Method of converting two-dimensional images into three-dimensional images | |
US8953874B2 (en) | Conversion of monoscopic visual content using image-depth database | |
CN110248112B (zh) | 一种图像传感器的曝光控制方法 | |
DE60038164T2 (de) | Verfahren und gerät zur übertragung von burstsignalen in einem mobilen kommunikationssystem, nachrichtenverteilungsverfahren und nachrichtensteuerung | |
CN112541426B (zh) | 基于无人机集群协同感知的通信带宽自适应数据处理方法 | |
CN109639992B (zh) | 一种基于自动曝光控制与自动切换投影图案的投影方法 | |
JP3166716B2 (ja) | フェード画像対応動画像符号化装置及び符号化方法 | |
CN112584089B (zh) | 人脸亮度调节方法、装置、计算机设备和存储介质 | |
CN105163102B (zh) | 一种基于fpga的实时图像自动白平衡系统及方法 | |
CN108198155B (zh) | 一种自适用色调映射方法及系统 | |
CN109151335A (zh) | 一种短波红外探测器自适应曝光方法 | |
CN108600744B (zh) | 图像质量控制的方法、摄像机拍摄图像的方法和装置 | |
CN106657847A (zh) | 图像色彩饱和度调整方法和系统 | |
CN110363197B (zh) | 基于改进视觉背景提取模型的视频感兴趣区域提取方法 | |
CN111970484B (zh) | 适于视频监控设备的运维系统和运维方法 | |
CN101534453B (zh) | 自动曝光控制的方法、图像处理器和光学成像设备 | |
CN110188625A (zh) | 一种基于多特征融合的视频精细结构化方法 | |
CN116744006B (zh) | 基于区块链的视频监控数据存储方法 | |
CN108900804B (zh) | 一种基于视频熵的自适应视频流处理方法 | |
CN114666512B (zh) | 一种快速自动曝光的调节方法及系统 | |
CA2505782A1 (en) | Particle extraction for automatic flow microscope | |
WO2023060936A1 (zh) | 一种基于深度学习的人脸属性识别系统 | |
CN105959679B (zh) | 一种立体图像视觉舒适度和深度感联合优化方法 | |
CN104935971B (zh) | 一种在线课堂中的视频传输动态调整方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |