CN116320218B - 基于嵌入式计算机平台的多路视频合成分析处理管理系统 - Google Patents
基于嵌入式计算机平台的多路视频合成分析处理管理系统 Download PDFInfo
- Publication number
- CN116320218B CN116320218B CN202310586480.3A CN202310586480A CN116320218B CN 116320218 B CN116320218 B CN 116320218B CN 202310586480 A CN202310586480 A CN 202310586480A CN 116320218 B CN116320218 B CN 116320218B
- Authority
- CN
- China
- Prior art keywords
- video
- synthesized
- picture brightness
- image
- preprocessed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 83
- 230000015572 biosynthetic process Effects 0.000 title claims abstract description 35
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 35
- 238000012545 processing Methods 0.000 title claims abstract description 20
- 238000007781 pre-processing Methods 0.000 claims abstract description 19
- 238000000034 method Methods 0.000 claims description 61
- 239000002131 composite material Substances 0.000 claims description 36
- 238000012937 correction Methods 0.000 claims description 9
- 238000007726 management method Methods 0.000 claims description 8
- 238000012216 screening Methods 0.000 claims description 8
- 238000005457 optimization Methods 0.000 claims description 6
- 238000000354 decomposition reaction Methods 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 claims description 3
- 239000000203 mixture Substances 0.000 claims description 3
- 230000008030 elimination Effects 0.000 claims description 2
- 238000003379 elimination reaction Methods 0.000 claims description 2
- 230000001105 regulatory effect Effects 0.000 abstract 1
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000011835 investigation Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 239000002994 raw material Substances 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/268—Signal distribution or switching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明涉及多路视频合成分析领域,具体公开一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,本发明通过对各待合成视频进行预处理,保证待合成的各视频的质量;获取各待合成视频的特征参数,分析合成视频的适宜特征参数,保证合成视频分辨率、帧率和码率的一致性;获取各待合成视频的画面亮度,分析合成视频的适宜画面亮度,保证合成视频画面亮度的一致性;获取各待合成视频的动态元素比例,分析合成视频的适宜动态元素比例,保证保证合成视频动态元素比例的一致性;根据合成视频的适宜特征参数、适宜画面亮度和适宜动态元素比例,对各待合成视频进行调节,进一步处理得到合成视频。
Description
技术领域
本发明涉及多路视频合成分析领域,涉及到一种基于嵌入式计算机平台的多路视频合成分析处理管理系统。
背景技术
多路视频合成是指将多个视频流通过特定的算法合并在一起,生成一个整体的视频流输出。这个过程需要考虑很多因素,如视频流的分辨率、帧率、码率等,以及如何保证合成后的视频流质量不会受到影响。因此,对多路视频合成进行分析处理具有重要意义。
现有的多路视频合成分析方法存在一些不足:一方面,现有方法主要通过合成视频的质量,分析多路视频合成过程中存在的问题,进而对多路视频的合成过程进行优化改进,提升合成视频的质量,采用的是事后处理的手段,问题排查的范围广,排查的难度和工作量都比较大。
一方面,现有方法缺乏对多路视频预处理过程的深度分析,合成视频原材料的质量即多路视频的质量,直接影响合成视频的质量,如果多路视频中出现画面抖动不定或者对比度不佳引起的画面模糊,会严重影响合成视频画面的观赏体验。
另一方面,由于多路视频的来源可能不同,拍摄设备存在差异,导致多路视频的分辨率、帧率、码率、画面亮度和动态元素比例等均存在差异,故对多路视频合成时需要进行统一,进而需要确定一个视频合成的标准,现有方法可能以某一固定数值作为标准,或者以多路视频相关参数的平均值或众数作为标准,分析标准的维度比较单一,导致制定的视频合成标准的精准度和可靠性不足,无法保证视频合成的质量。
发明内容
针对上述问题,本发明提出了一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,实现对多路视频合成分析的功能。
本发明解决其技术问题采用的技术方案是:本发明提供一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,包括:多路视频预处理模块:用于对各待合成视频中各帧图像进行检测,判断各待合成视频中各帧图像的稳定性和对比度是否符合要求,进一步对各待合成视频进行预处理。
多路视频特征参数获取模块:用于获取预处理过的各待合成视频的特征参数,其中特征参数包括分辨率、帧率和码率。
合成视频适宜特征参数分析模块:用于根据预处理过的各待合成视频的特征参数,分析合成视频的适宜特征参数。
多路视频画面亮度获取模块:用于获取预处理过的各待合成视频的画面亮度。
合成视频适宜画面亮度分析模块:用于根据预处理过的各待合成视频的画面亮度,分析合成视频的适宜画面亮度。
多路视频动态元素比例获取模块:用于获取预处理过的各待合成视频的动态元素比例。
合成视频适宜动态元素比例分析模块:用于根据预处理过的各待合成视频的动态元素比例,分析合成视频的适宜动态元素比例。
多路视频合成处理模块:用于根据合成视频的适宜特征参数、适宜画面亮度和适宜动态元素比例,对预处理过的各待合成视频进行调节,进一步处理得到合成视频。
数据库:用于存储各题材类型视频对应的画面亮度和动态元素比例,并存储标准视频的画面亮度范围和各动态元素在标准图像中的整体面积。
在上述实施例的基础上,所述多路视频预处理模块的分析过程包括:利用视频分解技术获取各待合成视频中各帧图像,进一步分析得到各待合成视频中各场景的图像集合。
获取各待合成视频中各场景图像集合的各参照物体。
在各待合成视频中各场景图像集合中各帧图像中标出其场景图像集合对应的各参照物体,按照预设的原则在各待合成视频中各场景图像集合中各帧图像中建立坐标系,获取各待合成视频中各场景图像集合中各帧图像中各参照物体的坐标,将其记为,/>表示第/>个待合成视频的编号,/>,/>表示第/>个场景图像集合的编号,/>,/>表示第/>帧图像的编号,/>,/>表示第/>个参照物体的编号,。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像中各参照物体的相对位置偏移系数/>,其中/>表示场景图像集合中图像的数量,/>表示第/>个待合成视频中第/>个场景图像集合中第/>帧图像中第/>个参照物体的坐标。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的抖动指数/>,其中/>表示预设的相对位置偏移系数阈值。
根据各待合成视频中各场景图像集合中各帧图像的抖动指数,获取各待合成视频中稳定性不符合要求的各帧图像。
对各待合成视频中稳定性不符合要求的各帧图像进行剪辑,并将稳定性符合要求的各帧图像进行组合,得到消除抖动后的各待合成视频。
在上述实施例的基础上,所述多路视频预处理模块的分析过程还包括:获取各待合成视频中各场景图像集合中各帧图像的对比度,将其记为。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的对比度符合指数/>,其中/>表示场景图像集合的数量,/>表示单位对比度偏差对应的影响因子。
根据各待合成视频中各场景图像集合中各帧图像的对比度符合指数,获取各待合成视频中对比度不符合要求的各帧图像,将其记为各待合成视频中各标记图像。
将各待合成视频中各标记图像按照预设的原则进行划分,得到各待合成视频中各标记图像的各区域。
进一步获取各待合成视频中各标记图像中各区域的匹配对比度,对各待合成视频中各标记图像中各区域的对比度进行调节,得到对比度优化后的各待合成视频中各标记图像,进一步得到对比度优化后的各待合成视频。
在上述实施例的基础上,所述多路视频特征参数获取模块的分析过程为:通过视频分析仪获取预处理过的各待合成视频的分辨率。
通过视频信号发生器获取预处理过的各待合成视频的帧率。
通过视频编解码器获取预处理过的各待合成视频的码率。
在上述实施例的基础上,所述合成视频适宜特征参数分析模块的具体过程为::将预处理过的各待合成视频的分辨率进行相互比较,得到待合成视频的最大分辨率,将其记为合成视频的第一参考分辨率,并表示为/>。
获取合成视频投放平台的视频分辨率限制范围,将合成视频投放平台的视频分辨率限制范围的中位数记为合成视频的第二参考分辨率,并表示为。
获取预处理过的各待合成视频题材类型对应的基准分辨率,分析得到合成视频的第三参考分辨率,将其记为。
获取电子设备播放视频对应分辨率的最大值,将其记为合成视频的第四参考分辨率,并表示为。
:通过分析公式/>得到合成视频的适宜分辨率/>,其中/>分别表示预设的第一参考分辨率、第二参考分辨率、第三参考分辨率和第四参考分辨率的权重因子,/>表示预设的合成视频的适宜分辨率修正量。
:同理,根据合成视频的适宜分辨率的分析方法,获取合成视频的适宜帧率和适宜码率。
在上述实施例的基础上,所述合成视频适宜画面亮度分析模块的具体过程为::将预处理过的各待合成视频的画面亮度进行相互比较,得到待合成视频的画面亮度的中位数,将其记为合成视频的第一参考画面亮度,并表示为/>。
获取预处理过的各待合成视频题材类型对应的画面亮度,分析得到合成视频的第二参考画面亮度,将其记为。
提取数据库中存储的标准视频的画面亮度范围,将标准视频画面亮度范围的中位数记为合成视频的第三参考画面亮度,并表示为。
获取合成视频投放平台的视频画面亮度限制范围,将合成视频投放平台视频画面亮度限制范围的中位数记为合成视频的第四参考画面亮度,并表示为。
:通过分析公式/>得到合成视频的适宜画面亮度/>,其中/>表示预设的合成视频的适宜画面亮度修正因子,/>分别表示预设的第一参考画面亮度、第二参考画面亮度、第三参考画面亮度和第四参考画面亮度的权值。
在上述实施例的基础上,所述多路视频动态元素比例获取模块的具体分析过程为:获取预处理过的各待合成视频中各动态元素。
获取预处理过的各待合成视频中各帧图像中出现动态元素的各帧图像,将其记为预处理过的各待合成视频中各待分析图像。
在预处理过的各待合成视频中各待分析图像中标出各动态元素,分析预处理过的各待合成视频中各待分析图像中各动态元素的整体面积,将其记为,/>表示第/>个待分析图像的编号,/>,/>表示第/>个动态元素的编号,/>。
提取数据库中存储的各动态元素在标准图像中的整体面积,将其记为各动态元素的参考整体面积,筛选得到预处理过的各待合成视频中各待分析图像中各动态元素的参考整体面积,将其记为。
通过分析公式得到预处理过的各待合成视频的动态元素比例/>,其中/>表示待分析图像的数量,/>表示动态元素的数量。
在上述实施例的基础上,所述合成视频适宜动态元素比例分析模块的分析过程为:将预处理过的各待合成视频的动态元素比例进行相互比较,得到待合成视频的动态元素比例的众数,将其记为。
获取预处理过的各待合成视频题材类型对应的动态元素比例,分析待合成视频题材类型对应动态元素比例的中位数,将其记为。
通过分析公式得到合成视频的适宜动态元素比例/>,其中/>表示预设的合成视频适宜动态元素比例的修正因子。
相对于现有技术,本发明所述的一种基于嵌入式计算机平台的多路视频合成分析处理管理系统以下有益效果:1、本发明采用事前干预的手段,根据多路视频的信息,分析多路视频合成的适宜参数,如分辨率、帧率和码率等,进而对多路视频的合成过程进行调控,从而提升合成视频的质量,可操作性比较强,降低合成视频出现质量问题的几率,同时降低合成视频问题排查的难度。
2、本发明通过对多路视频进行预处理,消除多路视频中的画面抖动和对比度不佳引起的画面模糊,保证合成视频的质量,提升合成视频画面的观赏体验。
3、本发明通过从多个维度分析多路视频合成中分辨率、帧率、码率、画面亮度和动态元素比例的合成标准,提升视频合成标准的精准度和可靠性,进一步对多路视频的相关参数进行统一化,为视频合成的质量提供保障。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的系统模块连接图。
图2为本发明的场景的图像集合示意图。
图3为本发明的图像抖动示意图。
其中,附图标记为:1.场景的图像集合;2.场景的图像集合;3.场景转换时间点;4.时间轴。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1所示,本发明提供一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,包括多路视频预处理模块、多路视频特征参数获取模块、合成视频适宜特征参数分析模块、多路视频画面亮度获取模块、合成视频适宜画面亮度分析模块、多路视频动态元素比例获取模块、合成视频适宜动态元素比例分析模块、多路视频合成处理模块和数据库。
所述多路视频预处理模块分别与多路视频特征参数获取模块、多路视频画面亮度获取模块和多路视频动态元素比例获取模块连接,多路视频特征参数获取模块与合成视频适宜特征参数分析模块连接,多路视频画面亮度获取模块与合成视频适宜画面亮度分析模块连接,多路视频动态元素比例获取模块与合成视频适宜动态元素比例分析模块连接,多路视频合成处理模块分别与合成视频适宜特征参数分析模块、合成视频适宜画面亮度分析模块和合成视频适宜动态元素比例分析模块连接,数据库分别与合成视频适宜画面亮度分析模块、多路视频动态元素比例获取模块和合成视频适宜动态元素比例分析模块连接。
所述多路视频预处理模块用于对各待合成视频中各帧图像进行检测,判断各待合成视频中各帧图像的稳定性和对比度是否符合要求,进一步对各待合成视频进行预处理。
进一步地,所述多路视频预处理模块的分析过程包括:利用视频分解技术获取各待合成视频中各帧图像,进一步分析得到各待合成视频中各场景的图像集合。
参阅图2所示,分析各待合成视频中各场景的图像集合,具体过程为:将各待合成视频中各帧图像按照其图像拍摄时间的先后顺序进行排序。
将各待合成视频中各帧图像与其相邻下一帧图像进行比对,得到各待合成视频中各帧图像与其相邻下一帧图像的相似度,将各待合成视频中各帧图像与其相邻下一帧图像的相似度与预设的相似度阈值进行比较,若某待合成视频中某帧图像与其相邻下一帧图像的相似度小于预设的相似度阈值,则将该帧图像的相邻下一帧图像记为场景转换图像,并将场景转换图像对应的拍摄时间点记为场景转换时间点,统计得到各待合成视频中各场景转换时间点。
根据各待合成视频中各场景转换时间点,对各待合成视频中各帧图像进行归类,得到各待合成视频中各场景的图像集合。
获取各待合成视频中各场景图像集合的各参照物体。
作为一种优选方案,获取各待合成视频中各场景图像集合的各参照物体,具体方法为:将各待合成视频中各场景图像集合中各帧图像进行相互比对,获取各待合成视频中各场景图像集合中各帧图像共同出现的各物体,将其记为各待合成视频中各场景图像集合的各参照物体。
参阅图3所示,在各待合成视频中各场景图像集合中各帧图像中标出其场景图像集合对应的各参照物体,按照预设的原则在各待合成视频中各场景图像集合中各帧图像中建立坐标系,获取各待合成视频中各场景图像集合中各帧图像中各参照物体的坐标,将其记为,/>表示第/>个待合成视频的编号,/>,/>表示第/>个场景图像集合的编号,/>,/>表示第/>帧图像的编号,/>,/>表示第/>个参照物体的编号,。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像中各参照物体的相对位置偏移系数/>,其中/>表示场景图像集合中图像的数量,/>表示第/>个待合成视频中第/>个场景图像集合中第帧图像中第/>个参照物体的坐标。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的抖动指数/>,其中/>表示预设的相对位置偏移系数阈值。
根据各待合成视频中各场景图像集合中各帧图像的抖动指数,获取各待合成视频中稳定性不符合要求的各帧图像。
作为一种优选方案,获取各待合成视频中稳定性不符合要求的各帧图像,具体过程为:将各待合成视频中各场景图像集合中各帧图像的抖动指数与预设的抖动指数阈值进行比对,若某待合成视频中某场景图像集合中某帧图像的抖动指数大于或等于预设的抖动指数阈值,则该帧图像的稳定性不符合要求,筛选各待合成视频中各场景图像集合中稳定性不符合要求的各帧图像,统计得到各待合成视频中稳定性不符合要求的各帧图像。
对各待合成视频中稳定性不符合要求的各帧图像进行剪辑,并将稳定性符合要求的各帧图像进行组合,得到消除抖动后的各待合成视频。
作为一种优选方案,在相同场景图像集合中各帧图像中建立坐标系的方法相同。
作为一种优选方案,参照物体中心点的坐标即为参照物体的坐标。
进一步地,所述多路视频预处理模块的分析过程还包括:获取各待合成视频中各场景图像集合中各帧图像的对比度,将其记为。
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的对比度符合指数/>,其中/>表示场景图像集合的数量,/>表示单位对比度偏差对应的影响因子。
根据各待合成视频中各场景图像集合中各帧图像的对比度符合指数,获取各待合成视频中对比度不符合要求的各帧图像,将其记为各待合成视频中各标记图像。
作为一种优选方案,获取各待合成视频中对比度不符合要求的各帧图像,具体过程为:将各待合成视频中各场景图像集合中各帧图像的对比度符合指数与预设的对比度符合指数阈值进行比较,若某待合成视频中某场景图像集合中某帧图像的对比度符合指数小于预设的对比度符合指数阈值,则该帧图像的对比度不符合要求。
筛选各待合成视频中各场景图像集合中对比度不符合要求的各帧图像,统计得到各待合成视频中对比度不符合要求的各帧图像。
将各待合成视频中各标记图像按照预设的原则进行划分,得到各待合成视频中各标记图像的各区域。
进一步获取各待合成视频中各标记图像中各区域的匹配对比度,对各待合成视频中各标记图像中各区域的对比度进行调节,得到对比度优化后的各待合成视频中各标记图像,进一步得到对比度优化后的各待合成视频。
作为一种优选方案,获取各待合成视频中各标记图像中各区域的匹配对比度,具体过程为:获取各待合成视频中各标记图像所在场景图像集合中对比度符合要求的各帧图像,将其记为各待合成视频中各标记图像的各参照图像。
获取各待合成视频中各标记图像中各区域在其标记图像对应各参照图像中的对比度,将标记图像中区域在其标记图像对应参照图像中的最大对比度记为标记图像中区域的匹配对比度,进一步得到各待合成视频中各标记图像中各区域的匹配对比度。
作为一种优选方案,获取图像对比度的具体步骤为:第一步,将彩色图像转换为灰度图像。
第二步,计算灰度图像中所有像素的平均灰度值。
第三步,对于每个像素,计算其与平均灰度值的差值的平方。
第四步,计算这些差值的平均值。
第五步,取这个平均值的平方根,就得到了图像的对比度。
作为一种优选方案,各待合成视频的预处理过程中,消除抖动操作和对比度优化操作可以同时进行,也可以先后进行。
需要说明的是,本发明通过对多路视频进行预处理,消除多路视频中的画面抖动和对比度不佳引起的画面模糊,保证合成视频的质量,提升合成视频画面的观赏体验。
所述多路视频特征参数获取模块用于获取预处理过的各待合成视频的特征参数,其中特征参数包括分辨率、帧率和码率。
进一步地,所述多路视频特征参数获取模块的分析过程为:通过视频分析仪获取预处理过的各待合成视频的分辨率。
通过视频信号发生器获取预处理过的各待合成视频的帧率。
通过视频编解码器获取预处理过的各待合成视频的码率。
所述合成视频适宜特征参数分析模块用于根据预处理过的各待合成视频的特征参数,分析合成视频的适宜特征参数。
进一步地,所述合成视频适宜特征参数分析模块的具体过程为::将预处理过的各待合成视频的分辨率进行相互比较,得到待合成视频的最大分辨率,将其记为合成视频的第一参考分辨率,并表示为/>。
获取合成视频投放平台的视频分辨率限制范围,将合成视频投放平台的视频分辨率限制范围的中位数记为合成视频的第二参考分辨率,并表示为。
获取预处理过的各待合成视频题材类型对应的基准分辨率,分析得到合成视频的第三参考分辨率,将其记为。
作为一种优选方案,所述合成视频的第三参考分辨率,具体分析过程为:获取预处理过的各待合成视频的题材类型,将预处理过的各待合成视频的题材类型与预设的各题材类型视频对应的基准分辨率进行比对,筛选得到预处理过的各待合成视频题材类型对应的基准分辨率,将预处理过的各待合成视频题材类型对应的基准分辨率进行相互比较,得到待合成视频题材类型对应基准分辨率的众数,将其记为合成视频的第三参考分辨率。
获取电子设备播放视频对应分辨率的最大值,将其记为合成视频的第四参考分辨率,并表示为。
作为一种优选方案,所述电子设备播放视频对应分辨率的最大值,具体获取方法为:获取各种电子设备播放视频对应的分辨率,将各种电子设备播放视频对应的分辨率进行相互比较,得到电子设备播放视频对应分辨率的最大值。
:通过分析公式/>得到合成视频的适宜分辨率/>,其中/>分别表示预设的第一参考分辨率、第二参考分辨率、第三参考分辨率和第四参考分辨率的权重因子,/>表示预设的合成视频的适宜分辨率修正量。
:同理,根据合成视频的适宜分辨率的分析方法,获取合成视频的适宜帧率和适宜码率。
作为一种优选方案,所述电子设备包括但不限于:手机、平板、电视、和笔记本电脑等。
所述多路视频画面亮度获取模块用于获取预处理过的各待合成视频的画面亮度。
作为一种优选方案,多路视频画面亮度获取模块中获取预处理过的各待合成视频的画面亮度,可以借助软件工具或者物理亮度计仪器。
所述合成视频适宜画面亮度分析模块用于根据预处理过的各待合成视频的画面亮度,分析合成视频的适宜画面亮度。
进一步地,所述合成视频适宜画面亮度分析模块的具体过程为::将预处理过的各待合成视频的画面亮度进行相互比较,得到待合成视频的画面亮度的中位数,将其记为合成视频的第一参考画面亮度,并表示为/>。
获取预处理过的各待合成视频题材类型对应的画面亮度,分析得到合成视频的第二参考画面亮度,将其记为。
作为一种优选方案,所述合成视频的第二参考画面亮度,具体分析过程为:提取数据库中存储的各题材类型视频对应的画面亮度,获取预处理过的各待合成视频的题材类型,筛选得到预处理过的各待合成视频题材类型对应的画面亮度,将预处理过的各待合成视频题材类型对应的画面亮度进行相互比较,得到待合成视频题材类型对应画面亮度的平均值,将其记为合成视频的第二参考画面亮度。
提取数据库中存储的标准视频的画面亮度范围,将标准视频画面亮度范围的中位数记为合成视频的第三参考画面亮度,并表示为。
获取合成视频投放平台的视频画面亮度限制范围,将合成视频投放平台视频画面亮度限制范围的中位数记为合成视频的第四参考画面亮度,并表示为。
:通过分析公式/>得到合成视频的适宜画面亮度/>,其中/>表示预设的合成视频的适宜画面亮度修正因子,/>分别表示预设的第一参考画面亮度、第二参考画面亮度、第三参考画面亮度和第四参考画面亮度的权值。
所述多路视频动态元素比例获取模块用于获取预处理过的各待合成视频的动态元素比例。
进一步地,所述多路视频动态元素比例获取模块的具体分析过程为:获取预处理过的各待合成视频中各动态元素。
获取预处理过的各待合成视频中各帧图像中出现动态元素的各帧图像,将其记为预处理过的各待合成视频中各待分析图像。
在预处理过的各待合成视频中各待分析图像中标出各动态元素,分析预处理过的各待合成视频中各待分析图像中各动态元素的整体面积,将其记为,/>表示第/>个待分析图像的编号,/>,/>表示第/>个动态元素的编号,/>。
作为一种优选方案,分析预处理过的各待合成视频中各待分析图像中各动态元素的整体面积,具体过程为:获取预处理过的各待合成视频中各待分析图像中各动态元素的轮廓,进一步获取预处理过的各待合成视频中各待分析图像中各动态元素暴露在镜头中的部分占其整体的比例和暴露在镜头中部分的面积,分析得到预处理过的各待合成视频中各待分析图像中各动态元素的整体面积。
提取数据库中存储的各动态元素在标准图像中的整体面积,将其记为各动态元素的参考整体面积,筛选得到预处理过的各待合成视频中各待分析图像中各动态元素的参考整体面积,将其记为。
通过分析公式得到预处理过的各待合成视频的动态元素比例/>,其中/>表示待分析图像的数量,/>表示动态元素的数量。
作为一种优选方案,动态元素指视频中的运动物体,如人物、车辆、动物和移动物体等。
所述合成视频适宜动态元素比例分析模块用于根据预处理过的各待合成视频的动态元素比例,分析合成视频的适宜动态元素比例。
进一步地,所述合成视频适宜动态元素比例分析模块的分析过程为:将预处理过的各待合成视频的动态元素比例进行相互比较,得到待合成视频的动态元素比例的众数,将其记为。
获取预处理过的各待合成视频题材类型对应的动态元素比例,分析待合成视频题材类型对应动态元素比例的中位数,将其记为。
作为一种优选方案,待合成视频题材类型对应动态元素比例的中位数,获取方法为:提取数据库中存储的各题材类型视频对应的动态元素比例,筛选得到预处理过的各待合成视频题材类型对应的动态元素比例,将预处理过的各待合成视频题材类型对应的动态元素比例进行相互比较,得到待合成视频题材类型对应动态元素比例的中位数。
通过分析公式得到合成视频的适宜动态元素比例/>,其中/>表示预设的合成视频适宜动态元素比例的修正因子。
所述多路视频合成处理模块用于根据合成视频的适宜特征参数、适宜画面亮度和适宜动态元素比例,对预处理过的各待合成视频进行调节,进一步处理得到合成视频。
需要说明的是,本发明采用事前干预的手段,根据多路视频的信息,分析多路视频合成的适宜参数,如分辨率、帧率和码率等,进而对多路视频的合成过程进行调控,从而提升合成视频的质量,可操作性比较强,降低合成视频出现质量问题的几率,同时降低合成视频问题排查的难度。
需要说明的是,本发明通过从多个维度分析多路视频合成中分辨率、帧率、码率、画面亮度和动态元素比例的合成标准,提升视频合成标准的精准度和可靠性,进一步对多路视频的相关参数进行统一化,为视频合成的质量提供保障。
所述数据库用于存储各题材类型视频对应的画面亮度和动态元素比例,并存储标准视频的画面亮度范围和各动态元素在标准图像中的整体面积。
以上内容仅仅是对本发明的构思所作的举例和说明,所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离发明的构思或者超越本发明所定义的范围,均应属于本发明的保护范围。
Claims (2)
1.一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,其特征在于,包括:
多路视频预处理模块:用于对各待合成视频中各帧图像进行检测,判断各待合成视频中各帧图像的稳定性和对比度是否符合要求,进一步对各待合成视频进行预处理;
所述多路视频预处理模块的分析过程包括:
利用视频分解技术获取各待合成视频中各帧图像,进一步分析得到各待合成视频中各场景的图像集合;
获取各待合成视频中各场景图像集合的各参照物体;
在各待合成视频中各场景图像集合中各帧图像中标出其场景图像集合对应的各参照物体,按照预设的原则在各待合成视频中各场景图像集合中各帧图像中建立坐标系,获取各待合成视频中各场景图像集合中各帧图像中各参照物体的坐标,将其记为,/>表示第/>个待合成视频的编号,/>,/>表示待合成视频的数量,/>表示第/>个场景图像集合的编号,/>,/>表示场景图像集合的数量,/>表示第/>帧图像的编号,,/>表示场景图像集合中图像的数量,/>表示第/>个参照物体的编号,,/>表示参照物体的数量;
通过分析公式得到各待合成视频中各场景图像集合中各帧图像中各参照物体的相对位置偏移系数/>,/>表示第/>个待合成视频中第/>个场景图像集合中第/>帧图像中第/>个参照物体的坐标;
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的抖动指数/>,其中/>表示预设的相对位置偏移系数阈值;
根据各待合成视频中各场景图像集合中各帧图像的抖动指数,获取各待合成视频中稳定性不符合要求的各帧图像;
对各待合成视频中稳定性不符合要求的各帧图像进行剪辑,并将稳定性符合要求的各帧图像进行组合,得到消除抖动后的各待合成视频;
所述多路视频预处理模块的分析过程还包括:
获取各待合成视频中各场景图像集合中各帧图像的对比度,将其记为;
通过分析公式得到各待合成视频中各场景图像集合中各帧图像的对比度符合指数/>,/>表示单位对比度偏差对应的影响因子;
根据各待合成视频中各场景图像集合中各帧图像的对比度符合指数,获取各待合成视频中对比度不符合要求的各帧图像,将其记为各待合成视频中各标记图像;
将各待合成视频中各标记图像按照预设的原则进行划分,得到各待合成视频中各标记图像的各区域;
进一步获取各待合成视频中各标记图像中各区域的匹配对比度,对各待合成视频中各标记图像中各区域的对比度进行调节,得到对比度优化后的各待合成视频中各标记图像,进一步得到对比度优化后的各待合成视频;
各待合成视频的预处理过程中,消除抖动操作和对比度优化操作同时进行或先后进行;
多路视频特征参数获取模块:用于获取预处理过的各待合成视频的特征参数,其中特征参数包括分辨率、帧率和码率;
合成视频适宜特征参数分析模块:用于根据预处理过的各待合成视频的特征参数,分析合成视频的适宜特征参数;
多路视频画面亮度获取模块:用于获取预处理过的各待合成视频的画面亮度;
合成视频适宜画面亮度分析模块:用于根据预处理过的各待合成视频的画面亮度,分析合成视频的适宜画面亮度;
多路视频动态元素比例获取模块:用于获取预处理过的各待合成视频的动态元素比例;
合成视频适宜动态元素比例分析模块:用于根据预处理过的各待合成视频的动态元素比例,分析合成视频的适宜动态元素比例;
多路视频合成处理模块:用于根据合成视频的适宜特征参数、适宜画面亮度和适宜动态元素比例,对预处理过的各待合成视频进行调节,进一步处理得到合成视频;
数据库:用于存储各题材类型视频对应的画面亮度和动态元素比例,并存储标准视频的画面亮度范围和各动态元素在标准图像中的整体面积;
所述合成视频适宜画面亮度分析模块的具体过程为:
:将预处理过的各待合成视频的画面亮度进行相互比较,得到待合成视频的画面亮度的中位数,将其记为合成视频的第一参考画面亮度,并表示为/>;
获取预处理过的各待合成视频题材类型对应的画面亮度,分析得到合成视频的第二参考画面亮度,将其记为;
提取数据库中存储的标准视频的画面亮度范围,将标准视频画面亮度范围的中位数记为合成视频的第三参考画面亮度,并表示为;
获取合成视频投放平台的视频画面亮度限制范围,将合成视频投放平台视频画面亮度限制范围的中位数记为合成视频的第四参考画面亮度,并表示为;
:通过分析公式/>得到合成视频的适宜画面亮度/>,其中/>表示预设的合成视频的适宜画面亮度修正因子,/>分别表示预设的第一参考画面亮度、第二参考画面亮度、第三参考画面亮度和第四参考画面亮度的权值;
所述多路视频动态元素比例获取模块的具体分析过程为:
获取预处理过的各待合成视频中各动态元素;
获取预处理过的各待合成视频中各帧图像中出现动态元素的各帧图像,将其记为预处理过的各待合成视频中各待分析图像;
在预处理过的各待合成视频中各待分析图像中标出各动态元素,分析预处理过的各待合成视频中各待分析图像中各动态元素的整体面积,将其记为,/>表示第/>个待分析图像的编号,/>,/>表示待分析图像的数量,/>表示第/>个动态元素的编号,,/>表示动态元素的数量;
提取数据库中存储的各动态元素在标准图像中的整体面积,将其记为各动态元素的参考整体面积,筛选得到预处理过的各待合成视频中各待分析图像中各动态元素的参考整体面积,将其记为;
通过分析公式得到预处理过的各待合成视频的动态元素比例;
所述合成视频适宜动态元素比例分析模块的分析过程为:
将预处理过的各待合成视频的动态元素比例进行相互比较,得到待合成视频的动态元素比例的众数,将其记为;
获取预处理过的各待合成视频题材类型对应的动态元素比例,分析待合成视频题材类型对应动态元素比例的中位数,将其记为;
通过分析公式得到合成视频的适宜动态元素比例/>,其中/>表示预设的合成视频适宜动态元素比例的修正因子。
2.根据权利要求1所述的一种基于嵌入式计算机平台的多路视频合成分析处理管理系统,其特征在于:所述合成视频适宜特征参数分析模块的具体过程为:
:将预处理过的各待合成视频的分辨率进行相互比较,得到待合成视频的最大分辨率,将其记为合成视频的第一参考分辨率,并表示为/>;
获取合成视频投放平台的视频分辨率限制范围,将合成视频投放平台的视频分辨率限制范围的中位数记为合成视频的第二参考分辨率,并表示为;
获取预处理过的各待合成视频题材类型对应的基准分辨率,分析得到合成视频的第三参考分辨率,将其记为;
获取手机、平板、电视和笔记本电脑这四种电子设备播放视频对应分辨率中的最大值,将其记为合成视频的第四参考分辨率,并表示为;
:通过分析公式/>得到合成视频的适宜分辨率/>,其中/>分别表示预设的第一参考分辨率、第二参考分辨率、第三参考分辨率和第四参考分辨率的权重因子,/>表示预设的合成视频的适宜分辨率修正量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310586480.3A CN116320218B (zh) | 2023-05-24 | 2023-05-24 | 基于嵌入式计算机平台的多路视频合成分析处理管理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310586480.3A CN116320218B (zh) | 2023-05-24 | 2023-05-24 | 基于嵌入式计算机平台的多路视频合成分析处理管理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116320218A CN116320218A (zh) | 2023-06-23 |
CN116320218B true CN116320218B (zh) | 2023-08-29 |
Family
ID=86789183
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310586480.3A Active CN116320218B (zh) | 2023-05-24 | 2023-05-24 | 基于嵌入式计算机平台的多路视频合成分析处理管理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116320218B (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103067741A (zh) * | 2013-01-24 | 2013-04-24 | 浙江理工大学 | 一种基于多特征融合的抖动检测算法 |
CN108055478A (zh) * | 2017-12-18 | 2018-05-18 | 天津津航计算技术研究所 | 一种基于fc-av协议的多路视频叠加传输方法 |
WO2019069482A1 (ja) * | 2017-10-06 | 2019-04-11 | パナソニックIpマネジメント株式会社 | 映像表示システム及び映像表示方法 |
CN110913273A (zh) * | 2019-11-27 | 2020-03-24 | 北京翔云颐康科技发展有限公司 | 视频直播方法及装置 |
CN112073648A (zh) * | 2020-08-12 | 2020-12-11 | 深圳市捷视飞通科技股份有限公司 | 视频多画面合成方法、装置、计算机设备和存储介质 |
CN113014838A (zh) * | 2021-03-03 | 2021-06-22 | 北京工业大学 | 一种基于fpga的多格式高速数字视频融合系统 |
CN114339248A (zh) * | 2021-12-30 | 2022-04-12 | 杭州海康威视数字技术股份有限公司 | 一种视频转码及视频显示方法、装置及电子设备 |
WO2022105759A1 (zh) * | 2020-11-20 | 2022-05-27 | 华为技术有限公司 | 视频处理方法、装置及存储介质 |
CN114996518A (zh) * | 2022-08-04 | 2022-09-02 | 深圳市稻兴实业有限公司 | 一种基于云平台的超高清视频数据存储分类管理系统 |
WO2022262313A1 (zh) * | 2021-06-16 | 2022-12-22 | 荣耀终端有限公司 | 基于画中画的图像处理方法、设备、存储介质和程序产品 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114331848A (zh) * | 2021-12-31 | 2022-04-12 | 广州小鹏汽车科技有限公司 | 视频图像拼接方法、装置及设备 |
CN114639051B (zh) * | 2022-03-22 | 2023-07-21 | 上海阜能信息科技有限公司 | 一种基于大数据分析的广告短视频质量评价方法、系统及存储介质 |
CN114820405A (zh) * | 2022-04-20 | 2022-07-29 | 深圳市慧鲤科技有限公司 | 图像融合方法、装置、设备及计算机可读存储介质 |
-
2023
- 2023-05-24 CN CN202310586480.3A patent/CN116320218B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103067741A (zh) * | 2013-01-24 | 2013-04-24 | 浙江理工大学 | 一种基于多特征融合的抖动检测算法 |
WO2019069482A1 (ja) * | 2017-10-06 | 2019-04-11 | パナソニックIpマネジメント株式会社 | 映像表示システム及び映像表示方法 |
CN108055478A (zh) * | 2017-12-18 | 2018-05-18 | 天津津航计算技术研究所 | 一种基于fc-av协议的多路视频叠加传输方法 |
CN110913273A (zh) * | 2019-11-27 | 2020-03-24 | 北京翔云颐康科技发展有限公司 | 视频直播方法及装置 |
CN112073648A (zh) * | 2020-08-12 | 2020-12-11 | 深圳市捷视飞通科技股份有限公司 | 视频多画面合成方法、装置、计算机设备和存储介质 |
WO2022105759A1 (zh) * | 2020-11-20 | 2022-05-27 | 华为技术有限公司 | 视频处理方法、装置及存储介质 |
CN113014838A (zh) * | 2021-03-03 | 2021-06-22 | 北京工业大学 | 一种基于fpga的多格式高速数字视频融合系统 |
WO2022262313A1 (zh) * | 2021-06-16 | 2022-12-22 | 荣耀终端有限公司 | 基于画中画的图像处理方法、设备、存储介质和程序产品 |
CN114339248A (zh) * | 2021-12-30 | 2022-04-12 | 杭州海康威视数字技术股份有限公司 | 一种视频转码及视频显示方法、装置及电子设备 |
CN114996518A (zh) * | 2022-08-04 | 2022-09-02 | 深圳市稻兴实业有限公司 | 一种基于云平台的超高清视频数据存储分类管理系统 |
Also Published As
Publication number | Publication date |
---|---|
CN116320218A (zh) | 2023-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3109469B2 (ja) | 画像入力装置 | |
US20040246229A1 (en) | Information display system, information processing apparatus, pointing apparatus, and pointer cursor display method in information display system | |
CN110136166B (zh) | 一种多路画面的自动跟踪方法 | |
CN107622497B (zh) | 图像裁剪方法、装置、计算机可读存储介质和计算机设备 | |
CN107911683B (zh) | 图像白平衡处理方法、装置、存储介质和电子设备 | |
CN104584032A (zh) | 混合式精确跟踪 | |
CN111475676B (zh) | 视频数据处理方法、系统、装置、设备及可读存储介质 | |
CN110458964B (zh) | 一种现实环境动态光照的实时计算方法 | |
CN110298829A (zh) | 一种舌诊方法、装置、系统、计算机设备和存储介质 | |
CN111880649A (zh) | Ar观景仪的演示方法、系统及计算机可读储存介质 | |
CN102592302B (zh) | 数字化卡通智能动检系统及动检方法 | |
EP4184388A1 (en) | White balance correction method and apparatus, device, and storage medium | |
CN113132695A (zh) | 镜头阴影校正方法、装置及电子设备 | |
CN118014832B (zh) | 一种基于线性特征不变性的图像拼接方法及相关装置 | |
CN116030453A (zh) | 一种数字电气表计的识别方法、装置及设备 | |
CN115984862A (zh) | 一种基于深度学习的远传式水表数字识别方法 | |
CN116320218B (zh) | 基于嵌入式计算机平台的多路视频合成分析处理管理系统 | |
CN101729739A (zh) | 一种图像纠偏处理方法 | |
CN109145912A (zh) | 一种数字仪表读数自动识别方法 | |
CN117423027A (zh) | 一种基于rdp协议的运维视频记录标签生成方法 | |
CN111797694A (zh) | 一种车牌检测方法及装置 | |
CN111539975A (zh) | 一种运动目标的检测方法、装置、设备及存储介质 | |
CN116310263A (zh) | 一种指针式航空地平仪示数自动读取实现方法 | |
CN112396639A (zh) | 图像对齐方法 | |
US9243935B2 (en) | Distance information estimating apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |