CN115941914A - 一种基于视频帧分析的视频渲染系统 - Google Patents
一种基于视频帧分析的视频渲染系统 Download PDFInfo
- Publication number
- CN115941914A CN115941914A CN202310017191.1A CN202310017191A CN115941914A CN 115941914 A CN115941914 A CN 115941914A CN 202310017191 A CN202310017191 A CN 202310017191A CN 115941914 A CN115941914 A CN 115941914A
- Authority
- CN
- China
- Prior art keywords
- rendering
- video frame
- unit
- value
- contrast
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000009877 rendering Methods 0.000 title claims abstract description 320
- 238000004458 analytical method Methods 0.000 title claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 16
- XOFYZVNMUHMLCC-ZPOLXVRWSA-N prednisone Chemical compound O=C1C=C[C@]2(C)[C@H]3C(=O)C[C@](C)([C@@](CC4)(O)C(=O)CO)[C@@H]4[C@@H]3CCC2=C1 XOFYZVNMUHMLCC-ZPOLXVRWSA-N 0.000 claims description 39
- 238000009499 grossing Methods 0.000 claims description 19
- 230000011218 segmentation Effects 0.000 claims description 6
- 238000013507 mapping Methods 0.000 claims description 3
- 238000001454 recorded image Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 19
- 238000000034 method Methods 0.000 abstract description 9
- 230000008569 process Effects 0.000 abstract description 4
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Image Generation (AREA)
Abstract
本发明涉及视频渲染领域,尤其涉及一种基于视频帧分析的视频渲染系统,本发明通过设置数据获取模块以及数据处理模块,将待渲染视频切分为若干视频帧组合,基于差异等级对视频帧组合进行区分后选用不同的渲染单元对视频帧组合进行渲染,第一渲染单元采用相同的渲染参数对视频帧组合内的视频帧进行渲染,第二渲染单元基于视频帧组合内视频帧的差异性调整渲染参数后对视频帧进行渲染,第三渲染单元基于渲染后视频帧组合的平滑度对视频帧组合进行判定,并调整渲染参数后再次对视频帧组合进行渲染,通过上述过程合理分配视频帧组合至不同的渲染单元,合理利用数据处理内存,进而在保证渲染效果的前提下提高渲染效率。
Description
技术领域
本发明涉及视频渲染领域,尤其涉及一种基于视频帧分析的视频渲染系统。
背景技术
随着多媒体技术以及计算机技术的发展,视频的制作已经越来越简便,而渲染是视频制作的一项关键程序,渲染是指对视频进行处理、添加特效或改变视频的图像参数,这一关键程序被广泛的重视,相关视频渲染技术飞速发展,越来越多的自动化视频渲染系统应运而生。
中国专利公开号:CN103853562A,公开了一种视频帧渲染方法及装置,一种视频帧渲染方法包括:接收用户的渲染指令和待渲染的视频帧;对渲染指令进行分析,确定与视频帧对应的特效以及各特效的作用时间区间;提取所确定的特效的标识信息,确定与该特效对应的GLSL程序,每个特效对应一个GLSL程序;根据各特效的作用时间区间和所提取的特效的标识信息,分别判断与视频帧对应的各特效是否符合预设规则;将符合预设规则的特效所对应的GLSL程序进行合并,得到合并后的GLSL程序;运行合并后的GLSL程序和不符合预设规则的特效所对应的GLSL程序,得到渲染后的特效帧,应用该发明技术方案,减少了GLSL程序的运行次数,降低了重复数据的传递次数,从而提高了渲染效率。
但是现有技术中,还存在以下问题,
1、现有技术中,未考虑自动划分视频帧组合,基于视频帧组合的差异等级调整视频帧组合内的视频帧的渲染方式,提高渲染效率。
2、现有技术中,未考虑判定渲染完成的视频帧组合是否符合平滑标准并调整渲染参量,以提高渲染效果。
发明内容
为解决上述问题,本发明提供一种基于视频帧分析的视频渲染系统,其包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
进一步地,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
(1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
进一步地,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
(2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
进一步地,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
进一步地,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
进一步地,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
进一步地,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,将所述亮度值调整至第一亮度值L1,将所述灰度值调整至第一灰度值H1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,将所述亮度值调整至第二亮度值L2,将所述灰度值调整至第二灰度值H2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,将所述亮度值调整至第三亮度值L3,将所述灰度值调整至第三灰度值H3;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,将所述亮度值调整至第四亮度值L4,将所述灰度值调整至第四灰度值H4;
所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4。
进一步地,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,△E1<△E2。
进一步地,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
进一步地,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
与现有技术相比,本发明通过设置数据获取模块以及数据处理模块,将待渲染视频切分为若干视频帧组合,基于差异等级对视频帧组合进行区分后选用不同的渲染单元对视频帧组合内的视频帧进行渲染,第一渲染单元采用相同的渲染参数对视频帧组合内的视频帧进行渲染,第二渲染单元基于视频帧组合内视频帧的差异性调整渲染参数后对视频帧进行渲染,第三渲染单元基于渲染后视频帧组合的平滑度对视频帧组合进行判定,并调整渲染参数后再次对视频帧组合进行渲染,通过上述过程合理分配视频帧组合至不同的渲染单元,合理利用数据处理内存,进而在保证渲染效果的前提下提高渲染效率。
尤其,本发明解析单元获取视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P计算渲染特征参量E,上述各参量均对渲染参量的选取有影响,并且能够表征各视频帧的差异性,解析单元基于渲染特征参量E判定视频帧组合的差异等级,上述过程数据运算量较小,能够快速运算,且判定结果可靠,能够表征视频帧组合的差异等级,为后续选用不同的渲染单元提供依据,进而能够使得各视频帧组合分配至不同的渲染单元,合理利用数据处理内存,在保证渲染效果的前提下提高渲染效率。
尤其,本发明的第一渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第一渲染单元所渲染的视频帧组合相似度较高,因此,第一渲染单元基于第一视频帧的图像参数获取渲染参数后对第一视频帧、第二视频帧以及第三视频帧采用同样的渲染参数进行渲染,在提高渲染可靠度的前提下减少数据运算量,减小系统载荷,提高渲染效率。
尤其,本发明的第二渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第二渲染单元所渲染的视频帧组合相似度较低,因此,第二渲染单元获取渲染参数对第一视频帧进行渲染后基于离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,由于计算离散参量△E时所选用的参数对渲染参数的选取有影响,并且,能够体现视频帧之间的差异性,进而,通过离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,通过上述步骤,能在保证渲染可靠性的前提下减少数据运算量,进而提高渲染效率。
尤其,本发明的第三渲染单元判定所述第一渲染单元和第二渲染单元所渲染的视频帧组合是否符合平滑标准,由于渲染后各视频帧对应的离散参量△E发生了变化,由于离散参量△E能够表征视频帧组合的相似性,以此为基准判定视频帧组合的平滑性,对于平滑度不符合平滑标准的视频帧组合调整渲染参量后再次进行渲染,进而保证渲染效果,避免自动调整渲染参数后导致各视频帧平滑度降低。
附图说明
图1为发明实施例的基于视频帧分析的视频渲染系统结构示意图;
图2为发明实施例的数据处理模块结构示意图。
具体实施方式
为了使本发明的目的和优点更加清楚明白,下面结合实施例对本发明作进一步描述;应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。
下面参照附图来描述本发明的优选实施方式。本领域技术人员应当理解的是,这些实施方式仅仅用于解释本发明的技术原理,并非在限制本发明的保护范围。
需要说明的是,在本发明的描述中,术语“上”、“下”、“左”、“右”、“内”、“外”等指示的方向或位置关系的术语是基于附图所示的方向或位置关系,这仅仅是为了便于描述,而不是指示或暗示所述装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,还需要说明的是,在本发明的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域技术人员而言,可根据具体情况理解上述术语在本发明中的具体含义。
请参阅图1以及图2所示,图1为本发明实施例的基于视频帧分析的视频渲染系统结构示意图,图2为本发明实施例的数据处理模块结构示意图,本发明的基于视频帧分析的视频渲染系统包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
具体而言,本发明对所述数据获取模块的具体结构不做限定,其可以是与云端平台搭载有通信协议的数据接收装置,也可以是其他形式只需能完成获取云端平台的待渲染视频的功能即可。
具体而言,本发明对所述数据处理模块的具体结构不做限定,其可以是一个计算机,也可以是具备数据运算功能的硬件,对于数据处理模块中的各单元,其可以是能够完成对应数据运算功能的程序或者硬件,只需能完成对应的数据运算功能即可。
具体而言,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
(1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
具体而言,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
(2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,0<△E<6,0<△E0<6,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
本发明解析单元获取视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P计算渲染特征参量E,上述各参量均对渲染参量的选取有影响,并且能够表征各视频帧的差异性,解析单元基于渲染特征参量E判定视频帧组合的差异等级,上述过程数据运算量较小,能够快速运算,且判定结果可靠,能够表征视频帧组合的差异等级,为后续选用不同的渲染单元提供依据,进而能够使得各视频帧组合分配至不同的渲染单元,合理利用数据处理内存,在保证渲染效果的前提下提高渲染效率。
具体而言,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
具体而言,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
本发明的第一渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第一渲染单元所渲染的视频帧组合相似度较高,因此,第一渲染单元基于第一视频帧的图像参数获取渲染参数后对第一视频帧、第二视频帧以及第三视频帧采用同样的渲染参数进行渲染,在提高渲染可靠度的前提下减少数据运算量,减小系统载荷,提高渲染效率。
具体而言,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
具体而言,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,0<E1<6,0<E2<0.3E1,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,设定D1=D0-d1,将所述亮度值调整至第一亮度值L1,设定L1=L0-l1,将所述灰度值调整至第一灰度值H1,设定H1=H0-h1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,设定D2=D0-d2,将所述亮度值调整至第二亮度值L2,设定L2=L0-l2,将所述灰度值调整至第二灰度值H2,设定H2=H0-h2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,设定D3=D0+d1,将所述亮度值调整至第三亮度值L3,设定L3=L0+l1,将所述灰度值调整至第三灰度值H3,设定H3=H0+h1;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,设定D4=D0+d2,将所述亮度值调整至第四亮度值L4,设定L4=L0+l2,将所述灰度值调整至第四灰度值H4,设定H4=H0+h2;
其中,所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4,d1表示第一对比度调整参量,d2表示第二对比度调整参量,0<d2<d1,l1表示第一亮度调整参量,l2表示第二亮度调整参量,0<l1<l2,h1表示第一灰度调整参量,h2表示第二灰度调整参量,0<h2<h1<255,D0表示当前对比度值,L0表示当前亮度值,H0表示当前灰度值。
本发明的第二渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第二渲染单元所渲染的视频帧组合相似度较低,因此,第二渲染单元获取渲染参数对第一视频帧进行渲染后基于离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,由于计算离散参量△E时所选用的参数对渲染参数的选取有影响,并且,能够体现视频帧之间的差异性,进而,通过离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,通过上述步骤,能在保证渲染可靠性的前提下减少数据运算量,进而提高渲染效率。
具体而言,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,0<△E1<△E2<6。
本发明的第三渲染单元判定所述第一渲染单元和第二渲染单元所渲染的视频帧组合是否符合平滑标准,由于渲染后各视频帧对应的离散参量△E发生了变化,由于离散参量△E能够表征视频帧组合的相似性,以此为基准判定视频帧组合的平滑性,对于平滑度不符合平滑标准的视频帧组合调整渲染参量后再次进行渲染,进而保证渲染效果,避免自动调整渲染参数后导致各视频帧平滑度降低。
具体而言,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
具体而言,所述第三渲染单元对不符合平滑标准的视频帧组合调整渲染参数时,包括将对不符合平滑标准的所述视频帧组合进行渲染时所述对比度调整单元的当前对比度值D0、亮度调整单元的当前亮度值L0以及灰阶调整单元的当前灰度值H0进行调整,调整时预设灰度值调整参量d0,亮度值调整参量l0以及灰度值调整参量h0,将所述对比度值增大或减小所述预设灰度值调整参量d0,将所述亮度值增大或减少所述亮度值调整参量l0,将所述灰度值增大或减少所述灰度值调整参量h0,其中,d0<0.2H0,l0<0.2L0,h0<0.2H0。
具体而言,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
至此,已经结合附图所示的优选实施方式描述了本发明的技术方案,但是,本领域技术人员容易理解的是,本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下,本领域技术人员可以对相关技术特征做出等同的更改或替换,这些更改或替换之后的技术方案都将落入本发明的保护范围之内。
Claims (10)
1.一种基于视频帧分析的视频渲染系统,其特征在于,包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
2.根据权利要求1所述的基于视频帧分析的视频渲染系统,其特征在于,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
(1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
3.根据权利要求2所述的基于视频帧分析的视频渲染系统,其特征在于,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
(2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
4.根据权利要求3所述的基于视频帧分析的视频渲染系统,其特征在于,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
5.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
6.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
7.根据权利要求6所述的基于视频帧分析的视频渲染系统,其特征在于,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,将所述亮度值调整至第一亮度值L1,将所述灰度值调整至第一灰度值H1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,将所述亮度值调整至第二亮度值L2,将所述灰度值调整至第二灰度值H2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,将所述亮度值调整至第三亮度值L3,将所述灰度值调整至第三灰度值H3;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,将所述亮度值调整至第四亮度值L4,将所述灰度值调整至第四灰度值H4;
所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4。
8.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,△E1<△E2。
9.根据权利要求8所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
10.根据权利要求8所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310017191.1A CN115941914B (zh) | 2023-01-06 | 2023-01-06 | 一种基于视频帧分析的视频渲染系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310017191.1A CN115941914B (zh) | 2023-01-06 | 2023-01-06 | 一种基于视频帧分析的视频渲染系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115941914A true CN115941914A (zh) | 2023-04-07 |
CN115941914B CN115941914B (zh) | 2023-05-23 |
Family
ID=85832115
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310017191.1A Active CN115941914B (zh) | 2023-01-06 | 2023-01-06 | 一种基于视频帧分析的视频渲染系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115941914B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116389831A (zh) * | 2023-06-06 | 2023-07-04 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云原生的离线渲染系统及方法 |
CN116761018A (zh) * | 2023-08-18 | 2023-09-15 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云平台的实时渲染系统 |
CN116847126A (zh) * | 2023-07-20 | 2023-10-03 | 北京富通亚讯网络信息技术有限公司 | 一种视频解码数据传输方法及系统 |
CN117132936A (zh) * | 2023-08-31 | 2023-11-28 | 北京中电拓方科技股份有限公司 | 煤炭板块自建系统数据梳理及数据接入系统 |
CN117221654A (zh) * | 2023-11-09 | 2023-12-12 | 深圳市达瑞电子科技有限公司 | 一种基于视频帧分析的视频渲染方法及系统 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005136852A (ja) * | 2003-10-31 | 2005-05-26 | Canon Inc | 画像処理方法、画像処理装置および画像処理プログラム |
CN1670765A (zh) * | 1999-06-16 | 2005-09-21 | 西尔弗布鲁克研究股份有限公司 | 用于打印图象的方法和装置 |
CN101309412A (zh) * | 2008-07-07 | 2008-11-19 | 浙江大学 | 基于深度图像渲染的多通道视频流编码器和解码器 |
US20090040343A1 (en) * | 2007-08-06 | 2009-02-12 | Mediatek Inc. | Methods and apparatuses for defective pixel detection and correction |
CN101635859A (zh) * | 2009-08-21 | 2010-01-27 | 清华大学 | 一种实现平面视频转立体视频的方法和装置 |
CN102413382A (zh) * | 2011-12-27 | 2012-04-11 | 四川九洲电器集团有限责任公司 | 一种提高实时视频平滑性的方法 |
CN104244087A (zh) * | 2014-09-19 | 2014-12-24 | 青岛海信移动通信技术股份有限公司 | 一种视频渲染的方法及设备 |
CN106447656A (zh) * | 2016-09-22 | 2017-02-22 | 江苏赞奇科技股份有限公司 | 基于图像识别的渲染瑕疵图像检测方法 |
US20190104311A1 (en) * | 2017-09-29 | 2019-04-04 | Ati Technologies Ulc | Server-based encoding of adjustable frame rate content |
CN114222182A (zh) * | 2021-12-15 | 2022-03-22 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种视频播放方法及装置 |
CN114257867A (zh) * | 2021-12-22 | 2022-03-29 | 统信软件技术有限公司 | 视频图像显示方法和装置,计算设备和可读存储介质 |
-
2023
- 2023-01-06 CN CN202310017191.1A patent/CN115941914B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1670765A (zh) * | 1999-06-16 | 2005-09-21 | 西尔弗布鲁克研究股份有限公司 | 用于打印图象的方法和装置 |
JP2005136852A (ja) * | 2003-10-31 | 2005-05-26 | Canon Inc | 画像処理方法、画像処理装置および画像処理プログラム |
US20090040343A1 (en) * | 2007-08-06 | 2009-02-12 | Mediatek Inc. | Methods and apparatuses for defective pixel detection and correction |
CN101309412A (zh) * | 2008-07-07 | 2008-11-19 | 浙江大学 | 基于深度图像渲染的多通道视频流编码器和解码器 |
CN101635859A (zh) * | 2009-08-21 | 2010-01-27 | 清华大学 | 一种实现平面视频转立体视频的方法和装置 |
CN102413382A (zh) * | 2011-12-27 | 2012-04-11 | 四川九洲电器集团有限责任公司 | 一种提高实时视频平滑性的方法 |
CN104244087A (zh) * | 2014-09-19 | 2014-12-24 | 青岛海信移动通信技术股份有限公司 | 一种视频渲染的方法及设备 |
CN106447656A (zh) * | 2016-09-22 | 2017-02-22 | 江苏赞奇科技股份有限公司 | 基于图像识别的渲染瑕疵图像检测方法 |
US20190104311A1 (en) * | 2017-09-29 | 2019-04-04 | Ati Technologies Ulc | Server-based encoding of adjustable frame rate content |
CN114222182A (zh) * | 2021-12-15 | 2022-03-22 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种视频播放方法及装置 |
CN114257867A (zh) * | 2021-12-22 | 2022-03-29 | 统信软件技术有限公司 | 视频图像显示方法和装置,计算设备和可读存储介质 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116389831A (zh) * | 2023-06-06 | 2023-07-04 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云原生的离线渲染系统及方法 |
CN116389831B (zh) * | 2023-06-06 | 2023-08-15 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云原生的离线渲染系统及方法 |
CN116847126A (zh) * | 2023-07-20 | 2023-10-03 | 北京富通亚讯网络信息技术有限公司 | 一种视频解码数据传输方法及系统 |
CN116761018A (zh) * | 2023-08-18 | 2023-09-15 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云平台的实时渲染系统 |
CN116761018B (zh) * | 2023-08-18 | 2023-10-17 | 湖南马栏山视频先进技术研究院有限公司 | 一种基于云平台的实时渲染系统 |
CN117132936A (zh) * | 2023-08-31 | 2023-11-28 | 北京中电拓方科技股份有限公司 | 煤炭板块自建系统数据梳理及数据接入系统 |
CN117221654A (zh) * | 2023-11-09 | 2023-12-12 | 深圳市达瑞电子科技有限公司 | 一种基于视频帧分析的视频渲染方法及系统 |
CN117221654B (zh) * | 2023-11-09 | 2024-04-30 | 深圳市达瑞电子科技有限公司 | 一种基于视频帧分析的视频渲染方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115941914B (zh) | 2023-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115941914A (zh) | 一种基于视频帧分析的视频渲染系统 | |
US7106900B2 (en) | Method for generating a block-based image histogram | |
US6128407A (en) | Image processing apparatus, image processing method, and image processing system | |
CN108063944B (zh) | 一种基于视觉显著性的感知码率控制方法 | |
EP1435560A2 (en) | Method and apparatus for generating user preference data regarding image colour and method and apparatus for converting image colour preference | |
US8111940B2 (en) | Image correction apparatus and method, and image correction program | |
EP2068569A1 (en) | Method of and apparatus for detecting and adjusting colour values of skin tone pixels | |
CN113556544B (zh) | 基于场景自适应的视频编码方法和装置、设备及存储介质 | |
CN116708789B (zh) | 一种基于人工智能的视频分析编码系统 | |
US7873226B2 (en) | Image encoding apparatus | |
US7136508B2 (en) | Image processing apparatus, method, and program for processing a moving image | |
CN112861645A (zh) | 红外摄像头弱光环境补偿方法、装置及电子设备 | |
CN113395457B (zh) | 图像采集器的参数调整方法、装置、设备和存储介质 | |
CN111970510A (zh) | 视频处理方法、存储介质及计算装置 | |
CN115442575A (zh) | 一种基于视频质量评估的视频自适应传输方法及系统 | |
CN111223058B (zh) | 一种图像增强方法 | |
CN112929668A (zh) | 一种视频编码的方法、装置、设备和存储介质 | |
US20100239019A1 (en) | Post processing of motion vectors using sad for low bit rate video compression | |
JP2001045494A (ja) | 画像符号化装置 | |
CN107274456A (zh) | 一种图像格式的识别方法及装置 | |
CN115880181A (zh) | 一种增强图像对比度的方法、装置及终端 | |
EP4206974A1 (en) | Chrominance component-based image segmentation method and system, image segmentation device, and readable storage medium | |
CN113382246B (zh) | 编码方法、装置、电子设备及计算机可读存储介质 | |
CN111093076A (zh) | 编码方式确定方法及装置 | |
CN115810021A (zh) | 一种色调映射方法、设备及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |