CN102006498B - 基于视音频比对的安全播出监测方法 - Google Patents
基于视音频比对的安全播出监测方法 Download PDFInfo
- Publication number
- CN102006498B CN102006498B CN2010105829450A CN201010582945A CN102006498B CN 102006498 B CN102006498 B CN 102006498B CN 2010105829450 A CN2010105829450 A CN 2010105829450A CN 201010582945 A CN201010582945 A CN 201010582945A CN 102006498 B CN102006498 B CN 102006498B
- Authority
- CN
- China
- Prior art keywords
- signal
- video
- comparison
- signals
- paths
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明涉及一种基于视音频比对的安全播出监测方法,其步骤包括:a.接收两路信号的步骤;所述两路信号由相同的播出信号源播出;b.两路信号按照时间戳机制对齐的步骤;c.两路信号视音频数据累积的步骤;d.视音频数据提取和信号比对的步骤;e.对比对结果进行处理的步骤。通过引进两路信号比对的方法,在播出频道分控系统内部,实现了对末级播出信号技术指标的自动客观分析;当信号差异超过限定的阈值范围,自动向系统内部相关工作站发布报警消息,提示相关人员进行必要的处理操作,从而完成故障的快速处理。不在受到人为主观判断能力的限制,极大的减轻了电视台播出人员的工作量和精神压力,有效避免了播出事故的发生,大幅提高了播出安全性。
Description
技术领域
本发明涉及一种基于视音频比对的安全播出监测方法,是一种计算机网络环境下播出频道分控系统对于末级信号进行分析、比对和报警的方法,对于末级信号和回传信号进行分析、比对和报警的方法,是一种面向电视台播出系统的安全播出监测技术。
背景技术
通常情况下,电视台在设计和建设播控系统的时候,播出安全性是首要考虑的因素,安全播出是每个电视台播出系统的最终目标。对于播出分控系统而言,播出系统的安全性可以通过各种方式来实现,比如对于系统内部的核心设备采用冗余备份的结构,避免出现单一溃点;通过改进应用程序优化播出信号调度的控制逻辑、提高控制精度,还可以增加一些自动故障处理机制。另外,衡量一个播出频道分控系统是否具有全面的安全性,还体现在对播出末级信号的分析、比对和报警能力是否准确和及时。目前,电视台播出频道分控系统仍然采用比较原始的末级信号监测方式,通过信号监视设备和监测设备实现播出末级信号的监控,完全依靠播出人员的主观判断发现故障,并进行应急处理,无法保证频道分控系统播出的高安全性和高可靠性。
传统的播出频道分控系统,为了保证播出信号的安全性,通常采取冗余播出切换设备的结构,配合信号监视设备和信号监测仪器对末级播出信号进行监控和分析,具体的实现方式如下:
播出信号源送给视频分配器进行视音频信号分配,然后按照频道分控系统预先定义的信号源顺序,分别连接到主、备播出切换设备的信号输入端。此处,主播出切换设备通常为切换矩阵(或切换台),备切换设备通常为切换矩阵。频道分控系统内部使用的播出切换矩阵为专业视音频信号切换设备,通常具有多路视频信号输入和两路信号输出,其中一路信号输出(PST),用于进行信号预监,另外一路信号输出(PGM)为正在播出信号。播出切换台除了具有上述切换矩阵的功能之外,还可以对PGM信号进行音频限幅调整,并叠加台标、字幕等键信号。由主、备播出切换设备输出的PGM信号,送给视频分配器进行视音频信号分配,然后分别送给末端信号自动切换设备以及信号监视设备。
播出频道分控系统通常采用的信号监视设备为多画面分割器,可以同时实现对多路视音频信号的监控,这里主要完成对分控系统主、备播出切换设备输出的PGM信号的实时监控。播出人员值班人员通过该设备监视视频信号的状态,通过设备提供的VU表监控立体声音频的状态,一旦发现异常立即采取播出应急处理措施,保证安全播出。
播出频道分控系统末端通常采用的信号自动切换设备为3x1视音频切换开关,提供两路播出视音频信号输入、一路辅助信号输入和一路视音频信号输出。3x1切换开关支持手动切换和自动切换两种方式:手动模式,通常情况下由工作人员通过控制面板或应用软件,根据主备播出切换矩阵输出的PGM信号的状态,手动控制末端切换设备完成输出信号的倒换;自动模式,依靠3x1视音频切换开关预置的报警阈值,对主、备路视音频信号的载波、SDI锁定、行制式、EDH和嵌入音频、数据的有无进行检测,通过内部信号分析处理机制完成主、备播出切换矩阵PGM信号的自动倒换。
末端信号自动切换设备的输出信号送给后端的信号传输系统,完成播出信号的传送和发布。
另外,在对播出信号质量要求比较高的情况下,在播出频道分控系统末端信号自动切换设备之后,增加专业的视音频信号监测仪器,用来分析音频信号参数和视频信号指标,满足对播出信号的技术监督需求。还可以通过信号接收设备对传输之后的信号进行解码,通过监看回传信号判断传输过程中是否出现信号故障。
目前,电视台播出频道分控系统普遍采用上述信号监控和监测技术,由于缺少必要的视音频信号安全播出监测方法,完全依靠人工对播出信号的状态进行主观判断和应急处理,存在的问题描述如下:
对于播出频道分控系统末级信号的监控和监测,需要播出人员实时监看主、备播出切换矩阵的PGM信号是否正常。为了保证安全播出,要求播出人员能够对末级信号异常及时发现、及时处理,因此播出人员所承受的压力很大。如果工作人员稍有疏忽,没有发现播出末级信号出现异常,就会导致最终的播出画面出现黑场、静帧等播出事故。而且,在这种精神长期处于紧张状态的情况下,即使能够及时发现末级播出信号异常,也容易在进行播控应急处理的时候发生人为误操作的事故。另外,对于频道分控系统的末级播出信号,若信号某些技术指标出现问题,例如音频信号左右声道差异过大、反相,视频信号一段时间内持续静帧,类似这种信号异常的情况根本无法通过人工主观判断发现,势必影响到最终播出的质量,无法满足安全播出的要求。对于回传信号的监看,也仅能简单判断信号传输过程中是否出现故障,而无法提供后续处理方案建议,也无法保证信号故障得到及时处理。
发明内容
为了解决上述问题,本发明提出了基于视音频比对的安全播出监测方法,本发明面向电视台播出频道分控系统,通过对两路视音频信号的自动比对,实现对播出末级信号的分析、比对和报警,当主、备路末级信号比对出现明显差异时,则通过以太网向播出系统内部的相关工作站发送报警处理信息。此外,也能够实现对播出信号与回传信号的比对,当信号差异超过限定的阈值范围,则自动向系统内部相关工作站发布报警消息,提示相关人员进行必要的处理操作,从而完成故障的快速处理。
本发明方法是这样实现的:基于视音频比对的安全播出监测方法:播出信号源的视音频信号分别传递至主播出切换设备和备播出切换设备信号输入端,主播出切换设备输出和备播出切换设备输出的信号传递至信号自动切换设备,自动切换设备的信号输出传递至信号传输链路,由接收播出信号的设备负责对链路传输后的回传信号进行接收,所述安全播出监测方法是对上述两路视音频信号之间的比对,比对的步骤包括:
a.接收两路信号的步骤;所述两路信号由相同的播出信号源播出;
b.两路信号按照时间戳机制对齐的步骤;
c.两路信号视音频数据累积的步骤;
d.视音频数据提取和信号比对的步骤;
e.对比对结果进行处理的步骤;比较的结果大于差异阈值,发送处理消息;比较的结果小于阈值,则输出两路信号之间的偏移量,返回步骤a继续执行对两路信号进行比较的步骤。
所述两路信号是主播出切换设备播出信号和备播出切换设备播出信号、主播出切换设备播出信号和播出信号源、备播出切换设备播出信号和播出信号源、信号自动切换设备输出信号和接收播出信号设备的输出信号中的一种。
所述的阈值包括音频差异度阈值、视频画面差异度阈值和比对范围阈值。
所述按照时间戳机制对齐的步骤:将两路信号的视频图像数据和音频波形数据逐帧存储在内存的一个缓冲区内,由于开始存储的时间并不完全一致,存在细微的误差;因此,按照后者的开始时间进行对齐,提供时间戳机制:即信号对齐之后,按照时序给每一帧视频图像和每一帧音频波形记录一个绝对的时间戳,用于计算出两路信号的偏移量。
所述视音频数据累积的步骤:开始阶段,按照时间戳机制对存储在内存缓冲区中的视音频数据进行对齐之后,将所接收两路信号的视音频数据不断存储到该缓冲区内进行累积。
所述数据提取和信号比对的步骤:预置一个两路信号以帧为单位的比对范围阈值,当内存缓冲区内累积的视音频数据达到该阈值之后,对已存储的视音频数据进行提取,然后,采用视音频比对的算法,进行两路信号的客观比对,包括对音频信号之间差异度的比较和对连续视频画面差异度的比较。比较的结果大于差异阈值,发送处理消息;比较的结果小于阈值,则输出两路信号之间的偏移量。
所述视频画面差异度的比较是对两路视频信号每一帧视频图像的各个YUV分量差值的算术平均值的比较。
所述视频画面差异度的比较是对视频图像上的每一个8*8或者16*16的块YUV分量中的Y分量差值的算术平均值的比较。
所述视频画面差异度的比较是每一帧视频画面峰值信噪比值的比较。
所述视频画面差异度的比较是基于视频水印的比较。
本发明产生的有益效果:
1.通过引进两路信号比对的方法,在播出频道分控系统内部,实现了对末级播出信号技术指标的自动客观分析;通过主、备路信号比对,当信号偏移量或信号差异超过允许范围的时候立即报警,提示播出人员采取必要的应急处理操作。另外,也能够实现对播出分控系统的播出信号与传输之后的回传信号的比对,当信号差异超过限定的阈值范围,则自动向系统内部相关工作站发布报警消息,提示相关人员进行必要的处理操作,从而完成故障的快速处理。
2.本发明是对传统信号监视和监测方法的重大变革,扩大了安全播出监测的范围,不在受到人为主观判断能力的限制,使播出系统的安全性有了进一步的发展;
3.改变了播出人员人为监视末级播出信号状态,进行播出应急处理的传统操作模式,极大的减轻了电视台播出人员的工作量和精神压力,实现了对播出末级信号异常、回传信号异常的自动发现、快速报警,及及时处理,有效避免了播出事故的发生,大幅提高了播出安全性。
下面结合附图和实施例对本发明作进一步说明。
附图说明
图1是本发明视音频信号比对的安全播出监测方法系统示意图;
图2是安全播出监测方法的流程图。
具体实施方式
实施例一:
基于视音频比对的安全播出监测方法实施例,参见图1和图2,所述方法基于的播出设备包括:用于提供播出信号源的设备1,播出信号源包括:视频服务器信号1-1、应急录像机信号1-2,以及线路信号1-3;与该设备连接的有用于播出信号切换的主播出切换设备2,该设备还连接有用于播出信号切换的备播出切换设备3;在主、备播出切换设备后面连接有用于进行主播出切换设备输出信号和备播出切换设备输出信号切换的信号自动切换设备4;信号自动切换设备的后面是信号传输链路5,传输链路后连接有用于接收播出信号的设备6;在播出设备中还包括用于对所述信号中的两路信号进行比对的两路信号比对装置7,图中的标号8为视频分配器,所述两路信号比对装置的A、B端分别接入系统内部用于比对的两路视音频信号,所述安全播出监测方法包括如下的步骤:
a.接收两路关键信号的步骤;所述两路关键信号由相同的播出信号源播出;
b.对两路关键信号按照时间戳机制对齐的步骤;
c.对两路关键信号视音频数据累积的步骤;
d.视音频数据提取和信号比对的步骤;
e.对比对的结果进行处理的步骤;比对的结果大于阈值,发送处理消息;比对的结果小于阈值,则输出两路信号之间的偏移量,可以精确到帧;继续执行对两路关键信号进行比较的步骤。
其中,所述两路关键视音频信号分别是:主播出切换设备播出信号和备播出切换设备播出信号、主播出切换设备播出信号和播出信号源、备播出切换设备播出信号和播出信号源、信号自动切换设备输出信号和接收播出信号设备的输出信号中的一种。
所述的信号传输链路是指有线网络或者传输中继站等。
所述按照时间戳机制对齐的步骤:开始进行两路视音频信号的比对之后,信号比对装置将接收到的两路信号的视频图像和音频波形逐帧(25帧/秒)存储在内存的一个缓冲区内,由于开始存储的时间并不完全一致,存在细微的误差;因此,按照后者的开始时间进行对齐,将前者已经存储的视、音频数据丢弃。另外,对于存储在内存缓冲区中的两路信号的视、音频数据,提供时间戳机制;信号对齐之后,按照时序给每一帧视频图像和每一帧音频波形记录一个绝对的时间戳,用于计算出两路信号的偏移量。
所述视音频数据累积的步骤:开始阶段,按照时间戳机制对存储在内存缓冲池中的视音频数据进行对齐之后,后续处理过程很简单,就是将所接收两路信号的视音频数据不断存储到该缓冲区内进行累积。
所述数据提取和信号比对的步骤:需要预置一个两路信号的比对范围阈值(以帧为单位),当内存缓冲区内累积的视音频数据达到该阈值之后,对已存储的视音频数据进行提取。然后,采用视音频比对的算法,进行两路关键信号的客观比对,包括对音频信号之间差异度的比较和对连续视频画面差异度的比较。
所述的阈值除了上述比对范围阈值以外,还包括音频差异度阈值和视频画面差异度阈值。
对于参与比对的两路关键视音频信号,经过不同的编解码链路后连接到两路信号比对装置,实际接收到视音频信号一般情况下不是完全同步的,存在固定的偏移量(或延时量)。例如回传信号经过卫星传输,经过编码、发射、接收,及解码等过程,相对于频道分控系统的输出信号存在明显的延时量。因此,需要根据回传信号和分控系统输出信号的延时量,给出两路视、音频信号比对范围的经验值,即比对范围阈值。该阈值作为信号比对方法的核心参数,决定视音频数据的累积长度和数据提取的频率。假设回传信号与分控系统输出信号的延时量在2秒钟左右,以帧(25帧/秒)为单位进行换算的结果为50帧左右,考虑一定的容忍范围,可以将比对范围阈值设置为75帧。实际信号比对过程中,两路视音频信号不断在内存缓冲区内进行累积,达到设置的比对范围阈值即75帧之后,对这部分数据进行提取,按照时序开始进行视频信号比对和音频信号比对。信号比对的过程中,继续对两路信号的视音频数据进行累积,为下一次比对做准备,从而保证两路信号比对的连续性。
音频信号的比对内容主要包括:两路信号音频之间相似度比较、立体声左声道电平过低(或过高)、立体声右声道电平过低(或过高)、左右声道差异过大、响度比较、静音检测、千周检测等等,其音频差异度阈值可以用电平值设定。
视频信号的比对能够及时发现视频信号之间的差异,常见的信号故障包括了黑场、蓝场、绿场、100%饱和度彩条、75%饱和度彩条、视频静帧、台标丢失、视频乱序、马赛克、画面被篡改等等。
对于两路关键视音信号的比对,可以预先设置限定的阈值范围,进行连续视频画面差异度和音频信号差异度的比较,例如在连续4帧之内视频画面存在明显差异,不需要进行自动报警;视频差异超过4帧,则进行自动报警。两路信号比对装置对两路视音频信号进行比对的过程中,一旦发现音频差异超过允许的阈值范围,或视频差异超过允许的阈值范围,则立即通过以太网对外发布报警消息。比对结果小于视、音频允许的阈值范围,基于时间戳机制输出两路信号之间的偏移量,可以达到帧精度。
本实施例中的对于两路信号比对,专门配置了用于进行消息转发的消息服务器,接收到报警消息之后立即进行转发。针对末级播出信号比对的情况,播出频道分控系统内部订阅末级信号比对报警消息的工作站,例如播控工作站、监控工作站,收到上述报警消息后,立即在应用软件界面中弹出提示信息,通知播出人员进行必要播控应急操作。播出人员发现报警信息之后,只需要对报警内容进行简单分析,在原有信号监视设备的辅助下,就可以判断是否需要手动控制末端的信号自动切换设备进行主、备路末级播出信号倒换操作。消息通讯属于比较通用的信息传递方式,利用 MSMQ(Microsoft Message Queue),应用程序开发人员可以通过发送和接收消息方便地与应用程序进行快速可靠的通信。需要在进行消息通讯的工作站上面部署MSMQ组件,消息服务负责将工作站发布的消息转发给订阅上述消息的工作站。
由于数字媒体具有易于无损拷贝和修改的特点,使得数据篡改更加容易。而且,信号传输链路中的设备故障也会不同程度的造成画面破损,色度、亮度分量丢失,编解码及传输过程中数据块损坏造成的马赛克等。为了检测接收端的视频信号是否被恶意篡改,可以通过对比播出分控系播出信号和接收端的回传信号加以判断。
所述视频画面差异的比较,需要逐帧比对视频图像的差异度,通常采用有几种比对方法。
实施例二,
本实施例是基于视音频比对的安全播出监测方法对于视频画面的差异度比对的第一种方法,参见实施例1,所述视频画面差异度的比较是对两路视频信号每一帧视频图像的各个YUV分量差值的算术平均值进行比较;计算参与比对的两路视频信号每一帧视频图像的各个YUV分量的差值(SAD,sum-of-absolute-differences),再对差值计算算术平均值,然后进行比对。考虑到故障信号的随机性、传输设备故障的偶发性,以及恶意篡改的隐蔽性等因素,会导致视频图像破损,色度、亮度分量丢失。另外,编解码及传输过程中数据块损坏,也会造成视频画面出现马赛克。采用上述方法计算每一帧视频画面的各个YUV分量的差值SAD,经过算术平均之后,会发现异常内容的能量可能已经很小,导致无法识别。
实施例三:
本实施例是基于视音频比对的安全播出监测方法对于视频画面的差异度比对的第二种方法,参见实施例1,所述视频画面差异度的比较是对视频图像上每一个8*8或者16*16的块YUV分量中的Y分量差值的算术平均值的比较。由于信号传输过程中视频图像的恶意篡改经常发生在局部范围内,例如对原始视频图像下方的滚屏字幕进行覆盖,为了实现视频画面的精细化比对,对实施例一提出的视频画面差异度比较方法进行改进和优化,缩小算术平均范围,对视频画面上的每一个8*8或者16*16的块计算差值SAD,再进行算术平均,然后进行比对。对于原始播出信号和接收到的回传信号,逐帧比较视频图像的每一对应块的SAD,判断比对结果是否超出某个阈值,从而判断播出信号是否被恶意篡改或传输系统出现故障。该方法也适合于播出信号的台标检测,对两路信号的台标区域进行精细化比对,一旦其中一路信号出现台标丢失的情况,通过信号比对就可以立即报警,通知播出人员进行相关操作。
前面计算的都是针对YUV三个分量,Y分量代表了亮度信息,UV分量代表了色差信息。相比之下,人眼对于Y分量更为敏感。为了简化计算,我们可以在一个8*8或者16*16块范围内,只针对Y分量计算SAD,并计算算术平均值,根据计算结果进行视频图像的差异比对。由于Y亮度信息的取值范围在0-255之间,采用上述算法可以将亮度差异的阀值设置为5,当比对结果超过5则发出报警消息。
实施例四:
本实施例是基于视音频比对的安全播出监测方法对于视频画面的差异度比对的第三种方法,参见实施例1,本实施例所述视频画面差异度的比较是对每一帧视频画面峰值信噪比数值的比较,判断视频画面经过传输之后是否被篡改,通过计算PSNR判断传输前后视频画面是否存在差异。PSNR(Peak Signal-to-Noise Ratio)为峰值信噪比,计算公式为:PSNR=10*log10(2552/MSE),MSE = sum[(recpixel - orgpixel)2] / ImageSize。
其中,recpixel 是压缩后的图像内容(或经过传输后的),orgpixel是原始图像内容;MSE是原图像与处理图像之间均方误差。
PSNR的原理很简单,就是把回传信号和原始播出信号逐像素点的相对比,然后把二者的差异值取平方进行累加。再把这个累加后的结果被255的平方除并进行对数运算,目的是为了使差异的累加结果和最终的PSNR结果表达按对数关系表达(而不是线性关系),即两副图像差别越小PSNR提升的越慢。
传输前后视频信号图像的差别越小,代表质量越高,PSNR越大。如果两副图像完全一致,按公式应该是无穷大,这个时候PSNR一般都记为100db。为了使计算方法更简单,直接使用MSE就可以,若MSE为0,则说明两副图像完全一致;若不为0,说明两副图像有差异。
实施例五:
本实施例是视音频比对的安全播出监测方法对于视频画面的差异度比对的第四种方法,参见实施例1,本实施例所述视频画面差异度的比较是基于视频水印技术实现的;比对方法是通过嵌入视频水印,比对传输前后视频画面的差异。采用水印技术,对视频转换、压缩和编辑具有鲁棒性,不受视音频压缩、传输等环境因素的影响,具有较强的实用性和可靠性。
频道分控系统的最终输出信号送给信号传输系统,采用不同的方式进行信号传输。本发明全部实施例是采用卫星传输方式,其他信号传输方式原理基本相似。播出基带信号经过编码之后发射,通过卫星传输,在为卫星信号接收机的后端,本实施例通过机顶盒对接收下来的卫星信号进行解码,并将解码后的回传信号送给两路信号比对装置。
两路信号比对装置接收频道分控系统的输出信号,对视音频信号的技术指标进行客观分析;同时接收卫星回传信号,对视音频信号的技术指标进行客观分析。由于回传信号经过卫星传输,经过编码、发射、接收,及解码等过程,相对于频道分控系统输出信号存在明显的延时量。针对这种情况,需要根据回传信号和分控系统输出信号的延时量,给出两路视、音频信号比对范围的经验值,即比对范围阈值,该阈值决定了视音频数据的累积长度和数据提取的频率。假设回传信号与分控系统输出信号的延时量在2秒钟左右,以帧(25帧/秒)为单位进行换算的结果为50帧左右,考虑一定的容忍范围,可以将比对范围阈值设置为75帧。实际信号比对过程中,两路视音频信号不断在内存缓冲区内进行累积,达到设置的比对范围阈值即75帧之后,对这部分数据进行提取,按照时序开始进行视频信号和音频信号的客观比对。比对的结果大于预置的视、音频差异阈值,就发送报警消息;比对的结果小于阈值,基于时间戳机制输出两路信号之间的偏移量,可以达到帧精度。信号比对的过程中,继续对两路信号的视音频数据进行累积,为下一次比对做准备,从而保证两路信号比对的连续性。
音频信号比对也可以通过嵌入音频水印技术,比对传输前后音频信号的差异。比对过程中,一旦发现音频差异超过允许的阈值范围,或视频差异超过允许的阈值范围,则立即通过以太网对外发布报警消息。向系统中订阅频道分控系统输出信号与回传系统比对报警消息的工作站,例如播出系统监控工作站、全台监控工作站转发报警消息,上述工作站收到报警消息后,立即在应用软件界面中弹出提示信息,通知相关业务人员信号比对发现异常,需要立即采取必要的应急处理措施。若通过比对报警,发现卫星信号被篡改,那么卫星地球站的值班人员收到提示信息后可以采取加大发射功率或改变频点等方式对卫星信号传输进行干预,保证信号的传输安全,实现安播监测的目标。
综上所述,播出频道分控系统内部,通过引进两路信号比对方法实现了对末级播出信号的客观分析、比对,当差异超过允许的阈值范围时立即报警,提示播出人员采取必要的应急处理措施。当然,对于末级播出信号和播出信号源,也可以基于视音频比对技术到达安全播出的要求。此外,对于频道分控系统输出信号和回传信号,同样可以采用基于视音频比对技术的安播检测方法。
上述实施例对传统信号监视和监测方法进行了彻底变革,扩大了信号监测的范围,不再受到人为主观判断能力的限制,使播出系统的安全性有了进一步的发展。而且,极大的减轻了电视台播出人员的工作量和精神压力,实现了对播出末级信号、回传信号异常的自动发现、快速报警,及时处理,有效避免了播出事故的发生提高了播出的安全性。
Claims (8)
1.基于视音频比对的安全播出监测方法:该方法是对两路传输中的视音频信号进行比对,其特征在于,所述比对的步骤包括:
a.接收两路信号的步骤;所述两路信号由相同的播出信号源播出;
b.两路信号按照时间戳机制对齐的步骤:将两路信号的视频图像数据和音频波形数据逐帧存储在内存的一个缓冲区内,按照其中一路信号的开始时间进行对齐,提供时间戳机制:即信号对齐之后,按照时序给每一帧视频图像和每一帧音频波形记录一个绝对的时间戳,用于计算出两路信号的偏移量;
c.两路信号视音频数据累积的步骤;
d.视音频数据提取和信号比对的步骤:预置一个两路信号以帧为单位的比对范围阈值,当内存缓冲区内累积的视音频数据达到该阈值之后,对已存储的视音频数据进行提取,然后,采用视音频比对的算法,进行两路信号的客观比对,包括对音频信号之间差异度的比较和对连续视频画面差异度的比较;
e.对比对结果进行处理的步骤;比较的结果大于差异阈值,发送处理消息;比较的结果小于阈值,则输出两路信号之间的偏移量,返回步骤a继续执行对两路信号进行比较的步骤。
2.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述两路信号是主播出切换设备播出信号和备播出切换设备播出信号、主播出切换设备播出信号和播出信号源、备播出切换设备播出信号和播出信号源、信号自动切换设备输出信号和接收播出信号设备的输出信号中的一种。
3.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述的阈值包括音频差异度阈值、视频画面差异度阈值和比对范围阈值。
4.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述视音频数据累积的步骤:开始阶段,按照时间戳机制对存储在内存缓冲区中的视音频数据进行对齐之后,将所接收两路信号的视音频数据不断存储到该缓冲区内进行累积。
5.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述视频画面差异度的比较是对两路视频信号每一帧视频图像的各个YUV分量差值的算术平均值的比较。
6.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述视频画面差异度的比较是对视频图像上的每一个8*8或者16*16的块YUV分量中的Y分量差值的算术平均值的比较。
7.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述视频画面差异度的比较是每一帧视频画面峰值信噪比值的比较。
8.根据权利要求1所述的基于视音频比对的安全播出监测方法,其特征在于,所述视频画面差异度的比较是基于视频水印的比较。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010105829450A CN102006498B (zh) | 2010-12-10 | 2010-12-10 | 基于视音频比对的安全播出监测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2010105829450A CN102006498B (zh) | 2010-12-10 | 2010-12-10 | 基于视音频比对的安全播出监测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102006498A CN102006498A (zh) | 2011-04-06 |
CN102006498B true CN102006498B (zh) | 2012-05-30 |
Family
ID=43813505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2010105829450A Active CN102006498B (zh) | 2010-12-10 | 2010-12-10 | 基于视音频比对的安全播出监测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102006498B (zh) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102184615B (zh) * | 2011-05-09 | 2013-06-05 | 关建超 | 一种根据声音源报警的方法和系统 |
CN103780924B (zh) * | 2012-10-26 | 2017-12-05 | 合肥康东福双信息科技有限公司 | 动态延迟条件下自适应智能电视同步播出监测系统 |
CN103067778B (zh) * | 2013-01-06 | 2015-12-23 | 北京华兴宏视技术发展有限公司 | 数据监测系统和数据监测方法 |
CN103501408B (zh) * | 2013-09-23 | 2017-09-26 | 广东欧珀移动通信有限公司 | 一种使用移动终端拍摄视频短片的方法和系统 |
CN104333752B (zh) * | 2014-11-25 | 2017-09-01 | 杭州海康威视数字技术股份有限公司 | 进行音频质量诊断的方法及装置 |
CN104581393A (zh) * | 2015-01-27 | 2015-04-29 | 北京正奇联讯科技有限公司 | 电视播出信号的故障判断和切换方法及其系统 |
CN104935978A (zh) * | 2015-06-29 | 2015-09-23 | 湖南双菱电子科技有限公司 | 基于云的电视覆盖检测分析与统计系统及装置 |
CN105721984A (zh) * | 2016-03-16 | 2016-06-29 | 国网山东省电力公司信息通信公司 | 基于主备保护的音频输入快速切换器、系统及工作方法 |
WO2017181389A1 (zh) * | 2016-04-21 | 2017-10-26 | 深圳市樊溪电子有限公司 | 一种多路音视频信号故障监测系统 |
CN106028147B (zh) * | 2016-06-23 | 2019-05-28 | 北京华兴宏视技术发展有限公司 | 视频信号监测方法及视频信号监测系统 |
CN106060629A (zh) * | 2016-07-25 | 2016-10-26 | 北京金山安全软件有限公司 | 一种画面的提取方法及终端 |
CN106603305B (zh) * | 2016-12-30 | 2020-05-15 | 中广热点云科技有限公司 | Ip码流热备份切换系统 |
CN106993219B (zh) * | 2017-03-09 | 2020-03-17 | 中央电视台 | 视频信号的比对方法及装置 |
CN108540347B (zh) * | 2018-04-11 | 2020-08-25 | 武汉大学 | 用于网络信号溯源的网线两端信号延时序列匹配生成方法 |
CN109246333A (zh) * | 2018-09-19 | 2019-01-18 | 北京正奇联讯科技有限公司 | 视频播放的控制方法及装置 |
CN110049313A (zh) * | 2019-04-17 | 2019-07-23 | 微梦创科网络科技(中国)有限公司 | 一种视频测试方法及系统 |
CN110213656A (zh) * | 2019-06-17 | 2019-09-06 | 山东云缦智能科技有限公司 | 一种基于图像分区域对比的iptv内容篡改类型识别方法及系统 |
CN112181331A (zh) * | 2020-06-25 | 2021-01-05 | 江苏金晓电子信息股份有限公司 | 一种可变信息发布终端发布内容一致性检测系统 |
CN112887707A (zh) * | 2021-01-22 | 2021-06-01 | 北京锐马视讯科技有限公司 | 视音频转播监测方法和装置、设备及存储介质 |
CN116939197A (zh) * | 2023-09-15 | 2023-10-24 | 海看网络科技(山东)股份有限公司 | 基于音视频的直播节目首播和重播内容一致性监测方法 |
CN117201845A (zh) * | 2023-09-15 | 2023-12-08 | 海看网络科技(山东)股份有限公司 | 基于帧比对的直播节目首播和重播内容一致性监测方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1633088A (zh) * | 2005-01-14 | 2005-06-29 | 杜百川 | 一种数字信号传输的码流比对方法、装置及系统 |
CN1852435A (zh) * | 2006-01-10 | 2006-10-25 | 华为技术有限公司 | 数字媒体安全播放系统及方法 |
CN101330578A (zh) * | 2008-06-13 | 2008-12-24 | 大连科迪视频技术有限公司 | 数字电视信号智能切换系统 |
CN101668206A (zh) * | 2009-09-15 | 2010-03-10 | 武汉大学 | 基于h.264的多路视频解码显示方法及系统 |
-
2010
- 2010-12-10 CN CN2010105829450A patent/CN102006498B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1633088A (zh) * | 2005-01-14 | 2005-06-29 | 杜百川 | 一种数字信号传输的码流比对方法、装置及系统 |
CN1852435A (zh) * | 2006-01-10 | 2006-10-25 | 华为技术有限公司 | 数字媒体安全播放系统及方法 |
CN101330578A (zh) * | 2008-06-13 | 2008-12-24 | 大连科迪视频技术有限公司 | 数字电视信号智能切换系统 |
CN101668206A (zh) * | 2009-09-15 | 2010-03-10 | 武汉大学 | 基于h.264的多路视频解码显示方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN102006498A (zh) | 2011-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102006498B (zh) | 基于视音频比对的安全播出监测方法 | |
CN102082955B (zh) | 基于视音频比对技术的安全播出监测系统 | |
CN103067778B (zh) | 数据监测系统和数据监测方法 | |
US7580612B2 (en) | Digital broadcast sending apparatus, receiving apparatus and digital broadcast system | |
CN102006499B (zh) | 一种检测数字电视节目文件视音频质量的方法 | |
US20130293784A1 (en) | Systems and Methods for Video Transmission | |
KR20030035959A (ko) | 디지털방송 보완방법 및 디지털방송 수신시스템 | |
US8352810B2 (en) | Fault detection using embedded watermarks | |
US8336067B2 (en) | System and method for bypassing an emergency alert break-in | |
US20080198922A1 (en) | Systems and Methods For Video Quality Measurement Using Auxiliary Information of Codec | |
CN102761771A (zh) | 一种基于图像客观质量评估进行视频劣播检测的方法及设备 | |
US20100026813A1 (en) | Video monitoring involving embedding a video characteristic in audio of a video/audio signal | |
CN103167221A (zh) | 一种通过质量监管比对来保证播出安全的切换方法 | |
CN100440974C (zh) | 数字媒体安全播放系统及方法 | |
JP2000184365A (ja) | 映像比較監視方式 | |
CN109246333A (zh) | 视频播放的控制方法及装置 | |
US20160373380A1 (en) | Packet reception apparatus | |
US20130027562A1 (en) | System and method for image processing using mosaic techniques | |
JP2001045525A (ja) | 圧縮伝送画像の品質評価装置およびそれに用いる送信装置および受信装置 | |
CN115225842A (zh) | 一种广播电视前端超高清系统 | |
CN110677680A (zh) | 一种基于解码器错误检测的主备信源切换方法 | |
CN112954448A (zh) | 直播内容图像特征码提取方法及直播内容一致性比对方法 | |
CN104394462A (zh) | 一种音视频马赛克和拉条故障的识别方式 | |
JP2000092049A (ja) | マルチキャストシステム、受信装置、及びマルチキャストの制御方法 | |
CN217693333U (zh) | 一种同时具备内容和数据检测功能的应急自动倒换电路 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |