CN115941914A - 一种基于视频帧分析的视频渲染系统 - Google Patents

一种基于视频帧分析的视频渲染系统 Download PDF

Info

Publication number
CN115941914A
CN115941914A CN202310017191.1A CN202310017191A CN115941914A CN 115941914 A CN115941914 A CN 115941914A CN 202310017191 A CN202310017191 A CN 202310017191A CN 115941914 A CN115941914 A CN 115941914A
Authority
CN
China
Prior art keywords
rendering
video frame
unit
value
contrast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310017191.1A
Other languages
English (en)
Other versions
CN115941914B (zh
Inventor
邓正秋
吕绍和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Malanshan Video Advanced Technology Research Institute Co ltd
Original Assignee
Hunan Malanshan Video Advanced Technology Research Institute Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Malanshan Video Advanced Technology Research Institute Co ltd filed Critical Hunan Malanshan Video Advanced Technology Research Institute Co ltd
Priority to CN202310017191.1A priority Critical patent/CN115941914B/zh
Publication of CN115941914A publication Critical patent/CN115941914A/zh
Application granted granted Critical
Publication of CN115941914B publication Critical patent/CN115941914B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Image Generation (AREA)

Abstract

本发明涉及视频渲染领域,尤其涉及一种基于视频帧分析的视频渲染系统,本发明通过设置数据获取模块以及数据处理模块,将待渲染视频切分为若干视频帧组合,基于差异等级对视频帧组合进行区分后选用不同的渲染单元对视频帧组合进行渲染,第一渲染单元采用相同的渲染参数对视频帧组合内的视频帧进行渲染,第二渲染单元基于视频帧组合内视频帧的差异性调整渲染参数后对视频帧进行渲染,第三渲染单元基于渲染后视频帧组合的平滑度对视频帧组合进行判定,并调整渲染参数后再次对视频帧组合进行渲染,通过上述过程合理分配视频帧组合至不同的渲染单元,合理利用数据处理内存,进而在保证渲染效果的前提下提高渲染效率。

Description

一种基于视频帧分析的视频渲染系统
技术领域
本发明涉及视频渲染领域,尤其涉及一种基于视频帧分析的视频渲染系统。
背景技术
随着多媒体技术以及计算机技术的发展,视频的制作已经越来越简便,而渲染是视频制作的一项关键程序,渲染是指对视频进行处理、添加特效或改变视频的图像参数,这一关键程序被广泛的重视,相关视频渲染技术飞速发展,越来越多的自动化视频渲染系统应运而生。
中国专利公开号:CN103853562A,公开了一种视频帧渲染方法及装置,一种视频帧渲染方法包括:接收用户的渲染指令和待渲染的视频帧;对渲染指令进行分析,确定与视频帧对应的特效以及各特效的作用时间区间;提取所确定的特效的标识信息,确定与该特效对应的GLSL程序,每个特效对应一个GLSL程序;根据各特效的作用时间区间和所提取的特效的标识信息,分别判断与视频帧对应的各特效是否符合预设规则;将符合预设规则的特效所对应的GLSL程序进行合并,得到合并后的GLSL程序;运行合并后的GLSL程序和不符合预设规则的特效所对应的GLSL程序,得到渲染后的特效帧,应用该发明技术方案,减少了GLSL程序的运行次数,降低了重复数据的传递次数,从而提高了渲染效率。
但是现有技术中,还存在以下问题,
1、现有技术中,未考虑自动划分视频帧组合,基于视频帧组合的差异等级调整视频帧组合内的视频帧的渲染方式,提高渲染效率。
2、现有技术中,未考虑判定渲染完成的视频帧组合是否符合平滑标准并调整渲染参量,以提高渲染效果。
发明内容
为解决上述问题,本发明提供一种基于视频帧分析的视频渲染系统,其包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
进一步地,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
   (1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
进一步地,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
   (2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
进一步地,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
进一步地,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
进一步地,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
进一步地,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,将所述亮度值调整至第一亮度值L1,将所述灰度值调整至第一灰度值H1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,将所述亮度值调整至第二亮度值L2,将所述灰度值调整至第二灰度值H2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,将所述亮度值调整至第三亮度值L3,将所述灰度值调整至第三灰度值H3;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,将所述亮度值调整至第四亮度值L4,将所述灰度值调整至第四灰度值H4;
所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4。
进一步地,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,△E1<△E2。
进一步地,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
进一步地,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
与现有技术相比,本发明通过设置数据获取模块以及数据处理模块,将待渲染视频切分为若干视频帧组合,基于差异等级对视频帧组合进行区分后选用不同的渲染单元对视频帧组合内的视频帧进行渲染,第一渲染单元采用相同的渲染参数对视频帧组合内的视频帧进行渲染,第二渲染单元基于视频帧组合内视频帧的差异性调整渲染参数后对视频帧进行渲染,第三渲染单元基于渲染后视频帧组合的平滑度对视频帧组合进行判定,并调整渲染参数后再次对视频帧组合进行渲染,通过上述过程合理分配视频帧组合至不同的渲染单元,合理利用数据处理内存,进而在保证渲染效果的前提下提高渲染效率。
尤其,本发明解析单元获取视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P计算渲染特征参量E,上述各参量均对渲染参量的选取有影响,并且能够表征各视频帧的差异性,解析单元基于渲染特征参量E判定视频帧组合的差异等级,上述过程数据运算量较小,能够快速运算,且判定结果可靠,能够表征视频帧组合的差异等级,为后续选用不同的渲染单元提供依据,进而能够使得各视频帧组合分配至不同的渲染单元,合理利用数据处理内存,在保证渲染效果的前提下提高渲染效率。
尤其,本发明的第一渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第一渲染单元所渲染的视频帧组合相似度较高,因此,第一渲染单元基于第一视频帧的图像参数获取渲染参数后对第一视频帧、第二视频帧以及第三视频帧采用同样的渲染参数进行渲染,在提高渲染可靠度的前提下减少数据运算量,减小系统载荷,提高渲染效率。
尤其,本发明的第二渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第二渲染单元所渲染的视频帧组合相似度较低,因此,第二渲染单元获取渲染参数对第一视频帧进行渲染后基于离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,由于计算离散参量△E时所选用的参数对渲染参数的选取有影响,并且,能够体现视频帧之间的差异性,进而,通过离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,通过上述步骤,能在保证渲染可靠性的前提下减少数据运算量,进而提高渲染效率。
尤其,本发明的第三渲染单元判定所述第一渲染单元和第二渲染单元所渲染的视频帧组合是否符合平滑标准,由于渲染后各视频帧对应的离散参量△E发生了变化,由于离散参量△E能够表征视频帧组合的相似性,以此为基准判定视频帧组合的平滑性,对于平滑度不符合平滑标准的视频帧组合调整渲染参量后再次进行渲染,进而保证渲染效果,避免自动调整渲染参数后导致各视频帧平滑度降低。
附图说明
图1为发明实施例的基于视频帧分析的视频渲染系统结构示意图;
图2为发明实施例的数据处理模块结构示意图。
具体实施方式
为了使本发明的目的和优点更加清楚明白,下面结合实施例对本发明作进一步描述;应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。
下面参照附图来描述本发明的优选实施方式。本领域技术人员应当理解的是,这些实施方式仅仅用于解释本发明的技术原理,并非在限制本发明的保护范围。
需要说明的是,在本发明的描述中,术语“上”、“下”、“左”、“右”、“内”、“外”等指示的方向或位置关系的术语是基于附图所示的方向或位置关系,这仅仅是为了便于描述,而不是指示或暗示所述装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,还需要说明的是,在本发明的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域技术人员而言,可根据具体情况理解上述术语在本发明中的具体含义。
请参阅图1以及图2所示,图1为本发明实施例的基于视频帧分析的视频渲染系统结构示意图,图2为本发明实施例的数据处理模块结构示意图,本发明的基于视频帧分析的视频渲染系统包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
具体而言,本发明对所述数据获取模块的具体结构不做限定,其可以是与云端平台搭载有通信协议的数据接收装置,也可以是其他形式只需能完成获取云端平台的待渲染视频的功能即可。
具体而言,本发明对所述数据处理模块的具体结构不做限定,其可以是一个计算机,也可以是具备数据运算功能的硬件,对于数据处理模块中的各单元,其可以是能够完成对应数据运算功能的程序或者硬件,只需能完成对应的数据运算功能即可。
具体而言,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
   (1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
具体而言,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
   (2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,0<△E<6,0<△E0<6,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
本发明解析单元获取视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P计算渲染特征参量E,上述各参量均对渲染参量的选取有影响,并且能够表征各视频帧的差异性,解析单元基于渲染特征参量E判定视频帧组合的差异等级,上述过程数据运算量较小,能够快速运算,且判定结果可靠,能够表征视频帧组合的差异等级,为后续选用不同的渲染单元提供依据,进而能够使得各视频帧组合分配至不同的渲染单元,合理利用数据处理内存,在保证渲染效果的前提下提高渲染效率。
具体而言,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
具体而言,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
本发明的第一渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第一渲染单元所渲染的视频帧组合相似度较高,因此,第一渲染单元基于第一视频帧的图像参数获取渲染参数后对第一视频帧、第二视频帧以及第三视频帧采用同样的渲染参数进行渲染,在提高渲染可靠度的前提下减少数据运算量,减小系统载荷,提高渲染效率。
具体而言,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
具体而言,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,0<E1<6,0<E2<0.3E1,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,设定D1=D0-d1,将所述亮度值调整至第一亮度值L1,设定L1=L0-l1,将所述灰度值调整至第一灰度值H1,设定H1=H0-h1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,设定D2=D0-d2,将所述亮度值调整至第二亮度值L2,设定L2=L0-l2,将所述灰度值调整至第二灰度值H2,设定H2=H0-h2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,设定D3=D0+d1,将所述亮度值调整至第三亮度值L3,设定L3=L0+l1,将所述灰度值调整至第三灰度值H3,设定H3=H0+h1;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,设定D4=D0+d2,将所述亮度值调整至第四亮度值L4,设定L4=L0+l2,将所述灰度值调整至第四灰度值H4,设定H4=H0+h2;
其中,所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4,d1表示第一对比度调整参量,d2表示第二对比度调整参量,0<d2<d1,l1表示第一亮度调整参量,l2表示第二亮度调整参量,0<l1<l2,h1表示第一灰度调整参量,h2表示第二灰度调整参量,0<h2<h1<255,D0表示当前对比度值,L0表示当前亮度值,H0表示当前灰度值。
本发明的第二渲染单元对视频帧组合进行渲染时,根据第一视频帧的图像参数获取渲染参数,由于第二渲染单元所渲染的视频帧组合相似度较低,因此,第二渲染单元获取渲染参数对第一视频帧进行渲染后基于离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,由于计算离散参量△E时所选用的参数对渲染参数的选取有影响,并且,能够体现视频帧之间的差异性,进而,通过离散参量△E对渲染参量进行调整,调整后对第二视频帧以及第三视频帧进行渲染,通过上述步骤,能在保证渲染可靠性的前提下减少数据运算量,进而提高渲染效率。
具体而言,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,0<△E1<△E2<6。
本发明的第三渲染单元判定所述第一渲染单元和第二渲染单元所渲染的视频帧组合是否符合平滑标准,由于渲染后各视频帧对应的离散参量△E发生了变化,由于离散参量△E能够表征视频帧组合的相似性,以此为基准判定视频帧组合的平滑性,对于平滑度不符合平滑标准的视频帧组合调整渲染参量后再次进行渲染,进而保证渲染效果,避免自动调整渲染参数后导致各视频帧平滑度降低。
具体而言,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
具体而言,所述第三渲染单元对不符合平滑标准的视频帧组合调整渲染参数时,包括将对不符合平滑标准的所述视频帧组合进行渲染时所述对比度调整单元的当前对比度值D0、亮度调整单元的当前亮度值L0以及灰阶调整单元的当前灰度值H0进行调整,调整时预设灰度值调整参量d0,亮度值调整参量l0以及灰度值调整参量h0,将所述对比度值增大或减小所述预设灰度值调整参量d0,将所述亮度值增大或减少所述亮度值调整参量l0,将所述灰度值增大或减少所述灰度值调整参量h0,其中,d0<0.2H0,l0<0.2L0,h0<0.2H0。
具体而言,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
至此,已经结合附图所示的优选实施方式描述了本发明的技术方案,但是,本领域技术人员容易理解的是,本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下,本领域技术人员可以对相关技术特征做出等同的更改或替换,这些更改或替换之后的技术方案都将落入本发明的保护范围之内。

Claims (10)

1.一种基于视频帧分析的视频渲染系统,其特征在于,包括:
数据获取模块,其与云端平台连接,用以获取用户端上传至所述云端平台的待渲染视频;
数据处理模块,其包括相互连接的切分单元、解析单元、第一渲染单元、第二渲染单元以及第三渲染单元,所述切分单元与所述数据获取模块连接,用以将所述待渲染视频切分为若干视频帧组合,各所述视频帧组合包括第一视频帧以及与所述第一视频帧相邻的第二视频帧以及第三视频帧;
所述解析单元用以基于视频帧组合中各视频帧中的亮度、平均色度值以及物体轮廓的面积占比率判定所述视频帧组合的差异等级;
所述第一渲染单元用以对第一差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数对所述视频帧组合中的第一视频帧、第二视频帧以及第三视频帧以相同的渲染参数进行渲染;
所述第二渲染单元用以对第二差异等级的视频帧组合进行渲染,包括调用渲染功能单元,并确定所述渲染功能单元的渲染参数后对所述视频帧组合中的第一视频帧进行渲染,并基于所述视频帧组合的差异等级调整所述渲染功能单元的渲染参数后对所述第二视频帧以及第三视频帧进行渲染;
所述第三渲染单元,用以在第一状况下基于视频帧组合对应的离散参量判定所述第一渲染单元以及第二渲染单元所渲染的视频帧组合是否符合平滑标准,并对不符合渲染标准的视频帧组合调整渲染参数后再次进行渲染直至所述视频帧组合符合所述平滑标准;
所述第一状况为所述第一渲染单元或/和所述第二渲染单元完成对视频帧帧组合渲染后。
2.根据权利要求1所述的基于视频帧分析的视频渲染系统,其特征在于,所述解析单元获取任一视频帧的平均亮度值L、平均色度值S以及视频帧中物体轮廓的面积占比率P,并按照公式(1)计算渲染特征参量E,
   (1)
公式(1)中,L0表示预设亮度值对比参量,S0表示预设色度值对比参量,P0表示预设面积占比率对比参量,α表示第一权重系数,β表示第二权重系数,γ表示第三权重系数,α+β+γ=1。
3.根据权利要求2所述的基于视频帧分析的视频渲染系统,其特征在于,所述解析单元计算视频帧组合中第一视频帧对应的渲染特征参量Ee1,计算第二视频帧对应的渲染特征参量Ee2,计算第三视频帧对应的渲染特征参量Ee3,并按照公式(2)计算离散参量△E,
   (2)
所述解析单元将所述离散参量△E与预设标准离散对比参量△E0进行对比,确定所述视频帧组合的差异等级,其中,
在第一对比结果下,所述解析单元判定所述视频帧组合为第一差异等级;
在第二对比结果下,所述解析单元判定所述视频帧组合为第二差异等级;
所述第一对比结果为△E≥△E0,所述第二对比结果为△E<△E0。
4.根据权利要求3所述的基于视频帧分析的视频渲染系统,其特征在于,所述第一渲染单元、第二渲染单元以及第三渲染单元调用渲染功能单元时包括调用对比度调整单元、亮度调整单元以及灰阶调整单元,所述第一渲染单元、第二渲染单元以及第三渲染单元内均存储有渲染数据库,所述渲染数据库内存储有不同图像参数所映射的渲染参数,所述图像参数包括物体轮廓的平均景深、平均色度值、平均亮度值,所述渲染参数包括所述对比度调整单元所选用的对比度参数、所述亮度调整单元所选用的亮度参数以及灰阶调整单元的灰度参数。
5.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第一渲染单元确定所调用的渲染功能单元的渲染参数对时包括,所述第一渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的图像参数进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,且,所述第一渲染单元调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧、第二视频帧以及第三视频帧进行渲染。
6.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第二渲染单元将所述第一视频帧的图像参数与所述渲染数据库中的数据进行对比,以根据图像参数映射的渲染参数获取所述对比度调整单元的对比度参数、所述亮度调整单元的亮度参数以及所述灰阶调整单元的灰度参数,调用所述对比度调整单元、亮度调整单元以及灰阶调整单元以对应的渲染参数对所述第一视频帧进行渲染,并基于所述视频帧组合对应的离散参量△E对所述对比度调整单元、亮度调整单元以及灰阶调整单元的渲染参数进行调整后对所述第二视频帧以及第三视频帧进行渲染。
7.根据权利要求6所述的基于视频帧分析的视频渲染系统,其特征在于,所述第二渲染单元计算所述离散参量△E与第一渲染对比参量E1的第一差值△E10,并将所述第一差值△E10与第二渲染对比参量E2进行对比,并根据对比结果确定对所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值进行调整时的调整方式,其中,
第一调整方式为,所述第二渲染单元将所述对比度值调整至第一对比度值D1,将所述亮度值调整至第一亮度值L1,将所述灰度值调整至第一灰度值H1;
第二调整方式为,所述第二渲染单元将所述对比度值调整至第二对比度值D2,将所述亮度值调整至第二亮度值L2,将所述灰度值调整至第二灰度值H2;
第三调整方式为,所述第二渲染单元将所述对比度值调整至第三对比度值D3,将所述亮度值调整至第三亮度值L3,将所述灰度值调整至第三灰度值H3;
第四调整方式为,所述第二渲染单元将所述对比度值调整至第四对比度值D4,将所述亮度值调整至第四亮度值L4,将所述灰度值调整至第四灰度值H4;
所述第一调整方式需满足△E10>0且△E10>E2,所述第二调整方式需满足△E10>0且△E10≤E2,所述第三调整方式需满足△E10≤0且△E10>E2,所述第四调整方式需满足△E10≤0且△E10≤E2,D1<D2<D3<D4,L1<L2<L3<L4,H1<H2<H3<H4。
8.根据权利要求4所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元获取视频帧组合,并按照公式(2)计算所述视频帧组合对应的离散参量△E,并判定所述视频帧组合是否符合平滑标准,其中,
在第一条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第一预设离散对比参量△E1进行对比,若△E>△E1,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
在第二条件下,所述第三渲染单元将所述视频帧组合对应的离散参量△E与第二预设离散对比参量△E2进行对比,若△E>△E2,则所述第三渲染单元判定所述视频帧组合符合平滑标准;
其中,所述第一条件为所述视频帧组合为所述第一渲染单元所渲染,所述第二条件为所述视频帧组合为所述第二渲染单元所渲染,△E1<△E2。
9.根据权利要求8所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元判定视频帧组合符合平滑标准时,记录所述视频帧组合中各视频帧的图像参量以及对各视频帧进行渲染时所述对比度调整单元的对比度值、亮度调整单元的亮度值以及灰阶调整单元的灰度值,并将已记录的图像参量与已记录的对比度值、亮度值以及灰度值建立映射关系后储存至渲染数据库中。
10.根据权利要求8所述的基于视频帧分析的视频渲染系统,其特征在于,所述第三渲染单元还用以将已渲染的各视频帧进行拼接,以获取完整视频。
CN202310017191.1A 2023-01-06 2023-01-06 一种基于视频帧分析的视频渲染系统 Active CN115941914B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310017191.1A CN115941914B (zh) 2023-01-06 2023-01-06 一种基于视频帧分析的视频渲染系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310017191.1A CN115941914B (zh) 2023-01-06 2023-01-06 一种基于视频帧分析的视频渲染系统

Publications (2)

Publication Number Publication Date
CN115941914A true CN115941914A (zh) 2023-04-07
CN115941914B CN115941914B (zh) 2023-05-23

Family

ID=85832115

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310017191.1A Active CN115941914B (zh) 2023-01-06 2023-01-06 一种基于视频帧分析的视频渲染系统

Country Status (1)

Country Link
CN (1) CN115941914B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116389831A (zh) * 2023-06-06 2023-07-04 湖南马栏山视频先进技术研究院有限公司 一种基于云原生的离线渲染系统及方法
CN116761018A (zh) * 2023-08-18 2023-09-15 湖南马栏山视频先进技术研究院有限公司 一种基于云平台的实时渲染系统
CN116847126A (zh) * 2023-07-20 2023-10-03 北京富通亚讯网络信息技术有限公司 一种视频解码数据传输方法及系统
CN117132936A (zh) * 2023-08-31 2023-11-28 北京中电拓方科技股份有限公司 煤炭板块自建系统数据梳理及数据接入系统
CN117221654A (zh) * 2023-11-09 2023-12-12 深圳市达瑞电子科技有限公司 一种基于视频帧分析的视频渲染方法及系统

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005136852A (ja) * 2003-10-31 2005-05-26 Canon Inc 画像処理方法、画像処理装置および画像処理プログラム
CN1670765A (zh) * 1999-06-16 2005-09-21 西尔弗布鲁克研究股份有限公司 用于打印图象的方法和装置
CN101309412A (zh) * 2008-07-07 2008-11-19 浙江大学 基于深度图像渲染的多通道视频流编码器和解码器
US20090040343A1 (en) * 2007-08-06 2009-02-12 Mediatek Inc. Methods and apparatuses for defective pixel detection and correction
CN101635859A (zh) * 2009-08-21 2010-01-27 清华大学 一种实现平面视频转立体视频的方法和装置
CN102413382A (zh) * 2011-12-27 2012-04-11 四川九洲电器集团有限责任公司 一种提高实时视频平滑性的方法
CN104244087A (zh) * 2014-09-19 2014-12-24 青岛海信移动通信技术股份有限公司 一种视频渲染的方法及设备
CN106447656A (zh) * 2016-09-22 2017-02-22 江苏赞奇科技股份有限公司 基于图像识别的渲染瑕疵图像检测方法
US20190104311A1 (en) * 2017-09-29 2019-04-04 Ati Technologies Ulc Server-based encoding of adjustable frame rate content
CN114222182A (zh) * 2021-12-15 2022-03-22 湖南快乐阳光互动娱乐传媒有限公司 一种视频播放方法及装置
CN114257867A (zh) * 2021-12-22 2022-03-29 统信软件技术有限公司 视频图像显示方法和装置,计算设备和可读存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1670765A (zh) * 1999-06-16 2005-09-21 西尔弗布鲁克研究股份有限公司 用于打印图象的方法和装置
JP2005136852A (ja) * 2003-10-31 2005-05-26 Canon Inc 画像処理方法、画像処理装置および画像処理プログラム
US20090040343A1 (en) * 2007-08-06 2009-02-12 Mediatek Inc. Methods and apparatuses for defective pixel detection and correction
CN101309412A (zh) * 2008-07-07 2008-11-19 浙江大学 基于深度图像渲染的多通道视频流编码器和解码器
CN101635859A (zh) * 2009-08-21 2010-01-27 清华大学 一种实现平面视频转立体视频的方法和装置
CN102413382A (zh) * 2011-12-27 2012-04-11 四川九洲电器集团有限责任公司 一种提高实时视频平滑性的方法
CN104244087A (zh) * 2014-09-19 2014-12-24 青岛海信移动通信技术股份有限公司 一种视频渲染的方法及设备
CN106447656A (zh) * 2016-09-22 2017-02-22 江苏赞奇科技股份有限公司 基于图像识别的渲染瑕疵图像检测方法
US20190104311A1 (en) * 2017-09-29 2019-04-04 Ati Technologies Ulc Server-based encoding of adjustable frame rate content
CN114222182A (zh) * 2021-12-15 2022-03-22 湖南快乐阳光互动娱乐传媒有限公司 一种视频播放方法及装置
CN114257867A (zh) * 2021-12-22 2022-03-29 统信软件技术有限公司 视频图像显示方法和装置,计算设备和可读存储介质

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116389831A (zh) * 2023-06-06 2023-07-04 湖南马栏山视频先进技术研究院有限公司 一种基于云原生的离线渲染系统及方法
CN116389831B (zh) * 2023-06-06 2023-08-15 湖南马栏山视频先进技术研究院有限公司 一种基于云原生的离线渲染系统及方法
CN116847126A (zh) * 2023-07-20 2023-10-03 北京富通亚讯网络信息技术有限公司 一种视频解码数据传输方法及系统
CN116761018A (zh) * 2023-08-18 2023-09-15 湖南马栏山视频先进技术研究院有限公司 一种基于云平台的实时渲染系统
CN116761018B (zh) * 2023-08-18 2023-10-17 湖南马栏山视频先进技术研究院有限公司 一种基于云平台的实时渲染系统
CN117132936A (zh) * 2023-08-31 2023-11-28 北京中电拓方科技股份有限公司 煤炭板块自建系统数据梳理及数据接入系统
CN117221654A (zh) * 2023-11-09 2023-12-12 深圳市达瑞电子科技有限公司 一种基于视频帧分析的视频渲染方法及系统
CN117221654B (zh) * 2023-11-09 2024-04-30 深圳市达瑞电子科技有限公司 一种基于视频帧分析的视频渲染方法及系统

Also Published As

Publication number Publication date
CN115941914B (zh) 2023-05-23

Similar Documents

Publication Publication Date Title
CN115941914A (zh) 一种基于视频帧分析的视频渲染系统
US7106900B2 (en) Method for generating a block-based image histogram
CN108063944B (zh) 一种基于视觉显著性的感知码率控制方法
EP1435560A2 (en) Method and apparatus for generating user preference data regarding image colour and method and apparatus for converting image colour preference
US8111940B2 (en) Image correction apparatus and method, and image correction program
EP2068569A1 (en) Method of and apparatus for detecting and adjusting colour values of skin tone pixels
CN113556544B (zh) 基于场景自适应的视频编码方法和装置、设备及存储介质
CN116708789B (zh) 一种基于人工智能的视频分析编码系统
US7873226B2 (en) Image encoding apparatus
CN112861645A (zh) 红外摄像头弱光环境补偿方法、装置及电子设备
CN113395457B (zh) 图像采集器的参数调整方法、装置、设备和存储介质
CN111970510A (zh) 视频处理方法、存储介质及计算装置
US20020085740A1 (en) Image processing apparatus, image processing method, image determining method, recording medium and program
CN115442575A (zh) 一种基于视频质量评估的视频自适应传输方法及系统
CN111223058B (zh) 一种图像增强方法
CN112929668A (zh) 一种视频编码的方法、装置、设备和存储介质
US20100239019A1 (en) Post processing of motion vectors using sad for low bit rate video compression
JP2001045494A (ja) 画像符号化装置
CN107274456A (zh) 一种图像格式的识别方法及装置
JP2000306104A (ja) 画像領域分割方法及び装置
CN115880181A (zh) 一种增强图像对比度的方法、装置及终端
EP4206974A1 (en) Chrominance component-based image segmentation method and system, image segmentation device, and readable storage medium
CN113382246B (zh) 编码方法、装置、电子设备及计算机可读存储介质
CN111093076A (zh) 编码方式确定方法及装置
CN115810021A (zh) 一种色调映射方法、设备及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant