CN109194955A - 一种场景切换检测方法及系统 - Google Patents
一种场景切换检测方法及系统 Download PDFInfo
- Publication number
- CN109194955A CN109194955A CN201811371997.6A CN201811371997A CN109194955A CN 109194955 A CN109194955 A CN 109194955A CN 201811371997 A CN201811371997 A CN 201811371997A CN 109194955 A CN109194955 A CN 109194955A
- Authority
- CN
- China
- Prior art keywords
- frame
- scene
- detection
- current
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点,设定当前场景发生切换的检测区域和特征,并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测,既可以保证场景检测的精确度,同时又可以避免了全帧检测算法在计算量上的无谓浪费,从而达到提升算法效率的目的。
Description
技术领域
本发明涉及视频处理领域,尤其涉及一种场景切换检测方法及系统。
背景技术
实际视频源具有多样性,精确的场景切换可提升编码器的压缩性能。然而,传统的全帧分析法,虽然判断较为精确,却忽略了每个场景都具有自己的特点,如背景变化、仅前景运动、全局运动等。抛开不同场景的特点,独立进行全帧图像分析的判定,会降低场景切换检测算法的时效性。
发明内容
本发明实施例的目的在于提出一种场景切换检测方法,旨在解决现有技术抛开不同场景的特点,独立进行全帧图像分析的判定,会降低场景切换检测时效性的问题。
本发明实施例是这样实现的,一种场景切换检测方法,所述方法包括
Step1:首先选取当前帧的运动检测辅助帧;若所述运动检测辅助帧选取成功,则进入Step2,否则,结束;
Step2:利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析;
Step3:根据当前场景运动特点分析,划定当前场景切换的检测区域;
Step4:对视频进行当前场景场景切换检测。
本发明实施例的另一目的在于提出一种场景切换检测系统所述系统包括:
运动检测辅助帧选取及判断模块,用于首先选取当前帧的运动检测辅助帧;然后判断若所述运动检测辅助帧选取成功,则进入场景运动特点分析装置,否则,结束;
场景运动特点分析装置,用于利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析;
场景切换检测区域划分模块,用于根据当前场景运动特点分析,划定当前场景切换的检测区域;
场景切换检测装置,用于对视频进行当前场景场景切换检测。
本发明的有益效果
本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点,设定当前场景发生切换的检测区域和特征,并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测,既可以保证场景检测的精确度,同时又可以避免了全帧检测算法在计算量上的无谓浪费,从而达到提升算法效率的目的。
附图说明
图1是本发明优选实施例一种场景切换检测方法流程图;
图2是图1中Step2的详细方法流程图;
图3是本发明优选实施例一种场景切换检测系统结构图;
图4是图3中场景运动特点分析装置的详细结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图和实施例,对本发明进行进一步详细说明,为了便于说明,仅示出了与本发明实施例相关的部分。应当理解,此处所描写的具体实施例,仅仅用于解释本发明,并不用以限制本发明。
本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点,设定当前场景发生切换的检测区域和特征,并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测,既可以保证场景检测的精确度,同时又可以避免了全帧检测算法在计算量上的无谓浪费,从而达到提升算法效率的目的。
实施例一
图1是本发明优选实施例一种场景切换检测方法流程图;所述方法包括:Stepl:首先选取当前帧的运动检测辅助帧;若所述运动检测辅助帧选取成功,则进入Step2,否则,结束。
其中,上述“当前帧的运动检测辅助帧”可选取当前帧编码顺序后的某一个P帧,或者选取当前帧在播放顺序上的后续某一帧,间隔不宜超过1秒。Step2:利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析。
图2是图1中Step2的详细方法流程图;包括:
Step21:如果当前帧和当前帧的运动检测辅助帧均为已编码帧,则进入Step22;否则进入Step23。
Step22:采用第一处理模式,对当前场景进行运动特点分析,然后进入Step3。
StepA1:将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合,将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合;
StepA2:判断上述第一集合是否为空集,若为空则进入StepA3;若为非空则进入StepA4。
StepA3:若第二集合为空,则将当前帧设置为当前帧的运动检测辅助帧,接着标识当前帧为场景切换帧,然后清空第一、第二集合后重回Stepl;否则,则对第二集合内块进行一致运动趋势判定,若存在一致运动趋势时,设置一致运动标识符为1,即noteu=1(其初始值为0),并记录一致运动方向及运动强度,然后进入Step3;否则,设置noteu=-1,然后进入Step3。
其中,“一致运动趋势的判定”可采用业内公开的基于压缩信息全局运动判定方法;“并记录一致运动方向及运动强度”,应在对当前帧和当前帧的运动检测辅助帧编码后,记录全局运动向量。
StepA4:首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识。
即如果numc>numb*Thres1,则notec=1,并计算变化比重k=numc/sizec,然后进入Step3;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入Step3;否则,令notec=0,k=0,然后进入Step3。
其中,numc、numb分别表示第一集合中位于中心区域、边界区域块的数量;Thres1表示第一门限阈值;notec表示分类标识符,初始值为0;中心区域可以选取图像中心点为中心的矩形区域,面积不超过9/16;sizec、sizeb分别表示中心区域、边界区域块的数量。
Step23:采用第二处理模式,对当前场景进行运动特点分析,然后进入Step3。包括以下步骤:
StepBl:首先以块为单位,计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值,称为差值块;接着求差值块的各像素绝对值,再求取均值;然后,将均值小于运动阈值的块划入第一集合。
StepB2:判断上述第一集合是否为空集,若为非空则进入StepB3;若为空则进入StepB4。
StepB3:首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识。
即如果numc>numb*Thres1,则令notec=1,并计算变化比重k=numc/sizec,然后进入Step3;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入Step3;否则,进入StepB4。
StepB4:进行全局运动检测,若存在一致运动趋势时,设置noteu=1,并记录一致运动方向,然后进入Step3;否则,设置noteu=-1,然后进入Step3。
其中,“一致运动趋势的判定”可采用业内公开的基于非压缩信息全局运动判定方法。
Step3:根据当前场景运动特点分析,划定当前场景切换的检测区域:
即:如果notec=1,划定场景检测区域为中心区域;否则,如果notec=-1,划定场景检测区域为边界区域;否则,如果abs(noteu)=1,则将图像第n个块行、最后n个块行、第m个块列、最后m个块列(1≤n≤4、1≤m≤4)划为场景检测区域;否则,划定场景检测区域为全帧图像。
Step4:对视频进行当前场景场景切换检测。包括以下步骤:
StepC0:当当前检测帧获取失败时,则结束;否则,清空非空的第二集合后进入StepC1。
首次操作时,则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧,作为当前检测帧,并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧;其余情况,设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
StepC1:如果不满足notec≠0,则进入StepC2;否则,如果noteu=1,则进入StepC5;否则进入StepC6。
StepC2:首先以块为单位,对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块,计算亮度差值绝对值的均值;然后,将其中均值大于数倍运动阈值的块划入第二集合。
StepC3:计算当前变化比重kn=hum/size。
其中,num、size分别表示第二集合块的数量、场景检测区域块的数量。
StepC4:如果(k≠0且kn/k>Thres2)或者(k=0且kn>Thres3),则判定当前检测帧为场景切换帧,将当前检测帧设置为当前帧,然后清空第一、第二集合后重回Step1;否则,判定当前检测帧非场景切换帧,清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
其中,Thres2、Thres3分别表示第二、第三门限阈值,一般Thres2≥2、0.9<Thres3<1。
StepC5:首先,将当前检测帧运动检测辅助帧,按照全局运动向量,作全局移动,构建出虚拟帧,然后设置该虚拟帧为当前检测帧运动检测辅助帧;然后利用“StepC2-StepC4”的方法判定当前检测帧是否为场景切换帧。
StepC6:将位于场景检测区域的当前检测帧块,构建为虚拟帧。然后利用业内公开的场景检测法,判定该虚拟帧是否为场景切换帧:若是,则判定当前检测帧块为场景切换帧,然后将当前检测帧设置为当前帧,在清空第一、第二集合后重回Stepl;若否,则判定当前检测帧非场景切换帧,清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
实施例二
图3是本发明优选实施例一种场景切换检测系统结构图。所述系统包括:
运动检测辅助帧选取及判断模块,用于首先选取当前帧的运动检测辅助帧;然后判断若所述运动检测辅助帧选取成功,则进入场景运动特点分析装置,否则,结束。
其中,上述“当前帧的运动检测辅助帧”可选取当前帧编码顺序后的某一个P帧,或者选取当前帧在播放顺序上的后续某一帧,间隔不宜超过1秒。
场景运动特点分析装置,用于利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析。
场景切换检测区域划分模块,用于根据当前场景运动特点分析,划定当前场景切换的检测区域:
即:如果notec=1,划定场景检测区域为中心区域;否则,如果notec=-1,划定场景检测区域为边界区域;否则,如果abs(noteu)=1,则将图像第n个块行、最后n个块行、第m个块列、最后m个块列(1≤n≤4、1≤m≤4)划为场景检测区域;否则,划定场景检测区域为全帧图像。
场景切换检测装置,用于对视频进行当前场景场景切换检测。
图4是图3中场景运动特点分析装置的详细结构图。所述装置包括
判断模块,用于判断如果当前帧和当前帧的运动检测辅助帧均为已编码帧,则进入第一场景运动特点分析装置,否则,进入第二场景运动特点分析装置;
第一场景运动特点分析装置,用于采用第一处理模式,对当前场景进行运动特点分析;
第二场景运动特点分析装置,用于采用第二处理模式,对当前场景进行运动特点分析;
所述第一场景运动特点分析装置(图中未示出)包括:
第一预测块划分模块,用于将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合,将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合;
第一判断处理模块,用于判断上述第一集合是否为空集,若为空则进入第二判断处理模块;若为非空则进入第一分类标识模块。
第二判断处理模块,用于判断若第二集合为空,则将当前帧设置为当前帧的运动检测辅助帧,接着标识当前帧为场景切换帧,然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块;否则,则对第二集合内块进行一致运动趋势判定,若存在一致运动趋势时,设置一致运动标识符为1,即noteu=1(其初始值为0),并记录一致运动方向及运动强度,然后进入场景切换检测区域划分模块;否则,设置noteu=-1,然后进入场景切换检测区域划分模块。
其中,“一致运动趋势的判定”可采用业内公开的基于压缩信息全局运动判定方法;“并记录一致运动方向及运动强度”,应在对当前帧和当前帧的运动检测辅助帧编码后,记录全局运动向量。
第一分类标识模块,用于首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识。
即如果numc>numb*Thres1,则notec=1,并计算变化比重k=numc/sizec,然后进入场景切换检测区域划分模块;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入场景切换检测区域划分模块;否则,令notec=0,k=0,然后进入场景切换检测区域划分模块。
其中,numc、numb分别表示第一集合中位于中心区域、边界区域块的数量;Thres1表示第一门限阈值;notec表示分类标识符,初始值为0;中心区域可以选取图像中心点为中心的矩形区域,面积不超过9/16;sizec、sizeb分别表示中心区域、边界区域块的数量。
所述第二场景运动特点分析装置(图中未示出)包括:
第二预测块划分模块,用于首先以块为单位,计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值,称为差值块;接着求差值块的各像素绝对值,再求取均值;然后,将均值小于运动阈值的块划入第一集合。
第三判断处理模块,用于判断上述第一集合是否为空集,若为非空则进入第二分类标识模块;若为空则进入全局运动检测模块。
第二分类标识模块,用于首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识。
即如果numc>numb*Thres1,则令notec=1,并计算变化比重k=numc/sizec,然后进入场景切换检测区域划分模块;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入场景切换检测区域划分模块;否则,进入全局运动检测模块。
全局运动检测模块,用于进行全局运动检测,若存在一致运动趋势时,设置noteu=1,并记录一致运动方向,然后进入场景切换检测区域划分模块;否则,设置noteu=-1,然后进入场景切换检测区域划分模块。
其中,“一致运动趋势的判定”可采用业内公开的基于非压缩信息全局运动判定方法。
所述场景切换检测装置(图中未示出)包括:
第四判断处理模块,用于当当前检测帧获取失败时,则结束;否则,清空非空的第二集合后进入第五判断处理模块。
首次操作时,则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧,作为当前检测帧,并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧;其余情况,设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
第五判断处理模块,用于判断如果不满足notec≠0,则进入第三预测块划分模块,;否则,如果noteu=1,则进入场景切换帧判断模块;否则进入第六判断处理模块。
第三预测块划分模块,用于首先以块为单位,对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块,计算亮度差值绝对值的均值;然后,将其中均值大于数倍运动阈值的块划入第二集合。
变化比重计算模块,用于计算当前变化比重kn=num/size。
其中,num、size分别表示第二集合块的数量、场景检测区域块的数量。
第五判断处理模块,用于判断如果(k≠0且kn/k>Thres2)或者(k=0且kn>Thres3),则判定当前检测帧为场景切换帧,将当前检测帧设置为当前帧,然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块;否则,判定当前检测帧非场景切换帧,清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
其中,Thres2、Thres3分别表示第二、第三门限阈值,一般Thres2≥2、0.9<Thres3<1。
场景切换帧判断模块,用于首先,将当前检测帧运动检测辅助帧,按照全局运动向量,作全局移动,构建出虚拟帧,然后设置该虚拟帧为当前检测帧运动检测辅助帧;然后利用“第三预测块划分模块+变化比重计算模块+第五判断处理模块”中的方法判定当前检测帧是否为场景切换帧。
第六判断处理模块,用于将位于场景检测区域的当前检测帧块,构建为虚拟帧。然后利用业内公开的场景检测法,判定该虚拟帧是否为场景切换帧:若是,则判定当前检测帧块为场景切换帧,然后将当前检测帧设置为当前帧,在清空第一、第二集合后重回运动检测辅助帧选取及判断模块;若否,则判定当前检测帧非场景切换帧,清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
本领域的普通技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序指令相关硬件来完成的,所述的程序可以存储于一计算机可读取存储介质中,所述的存储介质可以为ROM、RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (14)
1.一种场景切换检测方法,其特征在于,所述方法包括
Step1:首先选取当前帧的运动检测辅助帧;若所述运动检测辅助帧选取成功,则进入Step2,否则,结束;
Step2:利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析;
Step3:根据当前场景运动特点分析,划定当前场景切换的检测区域;
Step4:对视频进行当前场景场景切换检测。
2.如权利要求1所述的场景切换检测方法,其特征在于,所述运动检测辅助帧选取当前帧编码顺序后的某一个P帧,或者选取当前帧在播放顺序上的后续某一帧,间隔不超过1秒。
3.如权利要求1所述的场景切换检测方法,其特征在于,所述利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析具体为:
如果当前帧和当前帧的运动检测辅助帧均为已编码帧,则采用第一处理模式,对当前场景进行运动特点分析;否则采用第二处理模式,对当前场景进行运动特点分析。
4.如权利要求3所述的场景切换检测方法,其特征在于,所述采用第一处理模式,对当前场景进行运动特点分析具体为:
StepA1:将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合,将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合;
StepA2:判断所述第一集合是否为空集,若为空则进入StepA3;若为非空则进入StepA4;
StepA3:若第二集合为空,则将当前帧设置为当前帧的运动检测辅助帧,接着标识当前帧为场景切换帧,然后清空第一、第二集合后重回Step1;否则,对第二集合内块进行一致运动趋势判定,若存在一致运动趋势时,设置一致运动标识符noteu=1,并记录一致运动方向及运动强度,然后进入Step3;否则,设置noteu=-1,然后进入Step3;
其中,“一致运动趋势的判定”采用业内公开的基于压缩信息全局运动判定方法;“并记录一致运动方向及运动强度”,应在对当前帧和当前帧的运动检测辅助帧编码后,记录全局运动向量;
StepA4:首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识;
即如果numc>numb*Thres1,则notec=1,并计算变化比重k=numc/sizec,然后进入Step3;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入Step3;否则,令notec=0,k=0,然后进入Step3;
其中,numc、numb分别表示第一集合中位于中心区域、边界区域块的数量;Thres1表示第一门限阈值;notec表示分类标识符,初始值为0;中心区域选取图像中心点为中心的矩形区域,面积不超过9/16;sizec、sizeb分别表示中心区域、边界区域块的数量。
5.如权利要求4所述的场景切换检测方法,其特征在于,所述采用第二处理模式,对当前场景进行运动特点分析包括以下步骤:
StepB1:首先以块为单位,计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值,称为差值块;接着求差值块的各像素绝对值,再求取均值;然后,将均值小于运动阈值的块划入第一集合;
StepB2:判断所述第一集合是否为空集,若为非空则进入StepB3;若为空则进入StepB4;
StepB3:首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识;
即如果numc>numb*Thres1,则令notec=1,并计算变化比重k=numc/sizec,然后进入Step3;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入Step3;否则,进入StepB4;
StepB4:进行全局运动检测,若存在一致运动趋势时,设置noteu=1,并记录一致运动方向,然后进入Step3;否则,设置noteu=-1,然后进入Step3;
其中,“一致运动趋势的判定”采用业内公开的基于非压缩信息全局运动判定方法。
6.如权利要求5所述的场景切换检测方法,其特征在于,所述根据当前场景运动特点分析,划定当前场景切换的检测区域具体为:
如果notec=1,划定场景检测区域为中心区域;否则,如果notec=-1,划定场景检测区域为边界区域;否则,如果abs(noteu)=1,则将图像第n个块行、最后n个块行、第m个块列、最后m个块列划为场景检测区域;否则,划定场景检测区域为全帧图像;其中1≤n≤4、1≤m≤4。
7.如权利要求6所述的场景切换检测方法,其特征在于,所述对视频进行当前场景场景切换检测包括以下步骤:
StepC0:当当前检测帧获取失败时,则结束;否则,清空非空的第二集合后进入StepCl;
StepCl:如果不满足notec≠0,则进入StepC2;否则,如果noteu=1,则进入StepC5;否则进入StepC6;
StepC2:首先以块为单位,对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块,计算亮度差值绝对值的均值;然后,将其中均值大于数倍运动阈值的块划入第二集合;
StepC3:计算当前变化比重kn=num/size;
其中,num、size分别表示第二集合块的数量、场景检测区域块的数量;
StepC4:如果(k≠0且kn/k>Thres2)或者(k=0且kn>Thres3),则判定当前检测帧为场景切换帧,将当前检测帧设置为当前帧,然后清空第一、第二集合后重回Stepl;否则,判定当前检测帧非场景切换帧,清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测;
其中,Thres2、Thres3分别表示第二、第三门限阈值,Thres2≥2、0.9<Thres3<1;
StepC5:首先,将当前检测帧运动检测辅助帧,按照全局运动向量,作全局移动,构建出虚拟帧,然后设置该虚拟帧为当前检测帧运动检测辅助帧;然后利用“StepC2-StepC4”中的方法判定当前检测帧是否为场景切换帧;
StepC6:将位于场景检测区域的当前检测帧块,构建为虚拟帧;然后利用业内公开的场景检测法,判定该虚拟帧是否为场景切换帧:若是,则判定当前检测帧块为场景切换帧,然后将当前检测帧设置为当前帧,在清空第一、第二集合后重回Stepl;若否,则判定当前检测帧非场景切换帧,清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
8.如权利要求7所述的场景切换检测方法,其特征在于,所述StepC0中,首次操作时,则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧,作为当前检测帧,并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧;其余情况,设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
9.一种场景切换检测系统,其特征在于,所述系统包括:
运动检测辅助帧选取及判断模块,用于首先选取当前帧的运动检测辅助帧;然后判断若所述运动检测辅助帧选取成功,则进入场景运动特点分析装置,否则,结束;
场景运动特点分析装置,用于利用当前帧的运动检测辅助帧,对当前帧进行当前场景运动特点分析;
场景切换检测区域划分模块,用于根据当前场景运动特点分析,划定当前场景切换的检测区域;
场景切换检测装置,用于对视频进行当前场景场景切换检测。
10.如权利要求9所述的场景切换检测系统,其特征在于,所述场景运动特点分析装置包括
判断模块,用于判断如果当前帧和当前帧的运动检测辅助帧均为已编码帧,则进入第一场景运动特点分析装置,否则,进入第二场景运动特点分析装置;
第一场景运动特点分析装置,用于采用第一处理模式,对当前场景进行运动特点分析;
第二场景运动特点分析装置,用于采用第二处理模式,对当前场景进行运动特点分析。
11.如权利要求10所述的场景切换检测系统,其特征在于,所述第一场景运动特点分析装置包括:
第一预测块划分模块,用于将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合,将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合;
第一判断处理模块,用于判断上述第一集合是否为空集,若为空则进入第二判断处理模块;若为非空则进入第一分类标识模块;
第二判断处理模块,用于判断若第二集合为空,则将当前帧设置为当前帧的运动检测辅助帧,接着标识当前帧为场景切换帧,然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块;否则,则对第二集合内块进行一致运动趋势判定,若存在一致运动趋势时,设置一致运动标识符为noteu=1,并记录一致运动方向及运动强度,然后进入场景切换检测区域划分模块;否则,设置noteu=-1,然后进入场景切换检测区域划分模块;
第一分类标识模块,用于首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识;
即如果numc>numb*Thres1,则notec=1,并计算变化比重k=numc/sizec,然后进入场景切换检测区域划分模块;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入场景切换检测区域划分模块;否则,令notec=0,k=0,然后进入场景切换检测区域划分模块;
其中,numc、numb分别表示第一集合中位于中心区域、边界区域块的数量;Thres1表示第一门限阈值;notec表示分类标识符,初始值为0;中心区域选取图像中心点为中心的矩形区域,面积不超过9/16;sizec、sizeb分别表示中心区域、边界区域块的数量。
12.如权利要求11所述的场景切换检测系统,其特征在于,所述第二场景运动特点分析装置包括:
第二预测块划分模块,用于首先以块为单位,计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值,称为差值块;接着求差值块的各像素绝对值,再求取均值;然后,将均值小于运动阈值的块划入第一集合;
第三判断处理模块,用于判断上述第一集合是否为空集,若为非空则进入第二分类标识模块;若为空则进入全局运动检测模块;
第二分类标识模块,用于首先,划定位于图像中心的块为中心区域,剩余的块划定为边界区域;然后根据第一集合中块的位置分布,进行分类标识;
即如果numc>numb*Thres1,则令notec=1,并计算变化比重k=numc/sizec,然后进入场景切换检测区域划分模块;否则如果numb>numc*Thres1,则notec=-1,并计算变化比重k=numb/sizeb,然后进入场景切换检测区域划分模块;否则,进入全局运动检测模块;
全局运动检测模块,用于进行全局运动检测,若存在一致运动趋势时,设置noteu=1,并记录一致运动方向,然后进入场景切换检测区域划分模块;否则,设置noteu=-1,然后进入场景切换检测区域划分模块。
13.如权利要求12所述的场景切换检测系统,其特征在于,场景切换检测区域划分模块中,用于根据当前场景运动特点分析,划定当前场景切换的检测区域;
即:如果notec=1,划定场景检测区域为中心区域;否则,如果notec=-1,划定场景检测区域为边界区域;否则,如果abs(noteu)=1,则将图像第n个块行、最后n个块行、第m个块列、最后m个块列划为场景检测区域;否则,划定场景检测区域为全帧图像;1≤n≤4、1≤m≤4。
14.如权利要求13所述的场景切换检测系统,其特征在于,所述场景切换检测装置包括:
第四判断处理模块,用于当当前检测帧获取失败时,则结束;否则,清空非空的第二集合后进入第五判断处理模块;
第五判断处理模块,用于判断如果不满足notec≠0,则进入第三预测块划分模块;否则,如果noteu=1,则进入场景切换帧判断模块;否则进入第六判断处理模块;
第三预测块划分模块,用于首先以块为单位,对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块,计算亮度差值绝对值的均值;然后,将其中均值大于数倍运动阈值的块划入第二集合;
变化比重计算模块,用于计算当前变化比重kn=num/size;
其中,num、size分别表示第二集合块的数量、场景检测区域块的数量。
第五判断处理模块,用于判断如果(k≠0且kn/k>Thres2)或者(k=0且kn>Thres3),则判定当前检测帧为场景切换帧,将当前检测帧设置为当前帧,然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块;否则,判定当前检测帧非场景切换帧,清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测;
其中,Thres2、Thres3分别表示第二、第三门限阈值,Thres2≥2、0.9<Thres3<1;
场景切换帧判断模块,用于首先,将当前检测帧运动检测辅助帧,按照全局运动向量,作全局移动,构建出虚拟帧,然后设置该虚拟帧为当前检测帧运动检测辅助帧;然后利用“第三预测块划分模块+变化比重计算模块+第五判断处理模块”中的方法判定当前检测帧是否为场景切换帧;
第六判断处理模块,用于将位于场景检测区域的当前检测帧块,构建为虚拟帧。然后利用业内公开的场景检测法,判定该虚拟帧是否为场景切换帧:若是,则判定当前检测帧块为场景切换帧,然后将当前检测帧设置为当前帧,在清空第一、第二集合后重回运动检测辅助帧选取及判断模块;若否,则判定当前检测帧非场景切换帧,清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811371997.6A CN109194955B (zh) | 2018-11-16 | 2018-11-16 | 一种场景切换检测方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811371997.6A CN109194955B (zh) | 2018-11-16 | 2018-11-16 | 一种场景切换检测方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109194955A true CN109194955A (zh) | 2019-01-11 |
CN109194955B CN109194955B (zh) | 2021-04-30 |
Family
ID=64939716
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811371997.6A Active CN109194955B (zh) | 2018-11-16 | 2018-11-16 | 一种场景切换检测方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109194955B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112019848A (zh) * | 2020-09-11 | 2020-12-01 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112019849A (zh) * | 2020-09-11 | 2020-12-01 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112203092A (zh) * | 2020-09-27 | 2021-01-08 | 深圳市梦网视讯有限公司 | 一种全局运动场景的码流分析方法、系统及设备 |
CN114153307A (zh) * | 2020-09-04 | 2022-03-08 | 中移(成都)信息通信科技有限公司 | 场景区块化处理方法、装置、电子设备及计算机存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1602592A (zh) * | 2001-09-26 | 2005-03-30 | 汤姆森许可公司 | 视频比特流中的场景切换检测 |
CN1758759A (zh) * | 2005-11-18 | 2006-04-12 | 清华大学 | 一种视频场景切换检测方法 |
CN1761331A (zh) * | 2005-09-29 | 2006-04-19 | 深圳清华大学研究院 | 视频场景切换检测方法 |
CN101072342A (zh) * | 2006-07-01 | 2007-11-14 | 腾讯科技(深圳)有限公司 | 一种场景切换的检测方法及其检测系统 |
CN101742293A (zh) * | 2008-11-14 | 2010-06-16 | 北京中星微电子有限公司 | 一种基于视频运动特征的图像自适应帧场编码方法 |
CN102497556A (zh) * | 2011-12-26 | 2012-06-13 | 深圳市融创天下科技股份有限公司 | 一种基于时间变化度的场景切换检测方法、装置、设备 |
CN102572418A (zh) * | 2010-12-28 | 2012-07-11 | 深圳市融创天下科技股份有限公司 | 一种帧间编码的运动预测方法和系统 |
CN102883175A (zh) * | 2012-10-23 | 2013-01-16 | 青岛海信信芯科技有限公司 | 深度图提取、判断视频场景切换及深度图边缘优化方法 |
US8363938B2 (en) * | 2008-05-02 | 2013-01-29 | Psytechnics Limited | Method and apparatus for aligning signals |
CN103458155B (zh) * | 2013-08-01 | 2016-10-19 | 北京邮电大学 | 视频场景变换检测方法和系统及体验质量检测方法和系统 |
CN106210718A (zh) * | 2016-08-08 | 2016-12-07 | 飞狐信息技术(天津)有限公司 | 一种视频序列中场景切换检测方法及装置 |
CN106303528A (zh) * | 2015-06-04 | 2017-01-04 | 北京中传视讯科技有限公司 | 一种码流平移场景检测方法及系统 |
-
2018
- 2018-11-16 CN CN201811371997.6A patent/CN109194955B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1602592A (zh) * | 2001-09-26 | 2005-03-30 | 汤姆森许可公司 | 视频比特流中的场景切换检测 |
CN1761331A (zh) * | 2005-09-29 | 2006-04-19 | 深圳清华大学研究院 | 视频场景切换检测方法 |
CN1758759A (zh) * | 2005-11-18 | 2006-04-12 | 清华大学 | 一种视频场景切换检测方法 |
CN101072342A (zh) * | 2006-07-01 | 2007-11-14 | 腾讯科技(深圳)有限公司 | 一种场景切换的检测方法及其检测系统 |
US8363938B2 (en) * | 2008-05-02 | 2013-01-29 | Psytechnics Limited | Method and apparatus for aligning signals |
CN101742293A (zh) * | 2008-11-14 | 2010-06-16 | 北京中星微电子有限公司 | 一种基于视频运动特征的图像自适应帧场编码方法 |
CN102572418A (zh) * | 2010-12-28 | 2012-07-11 | 深圳市融创天下科技股份有限公司 | 一种帧间编码的运动预测方法和系统 |
CN102497556A (zh) * | 2011-12-26 | 2012-06-13 | 深圳市融创天下科技股份有限公司 | 一种基于时间变化度的场景切换检测方法、装置、设备 |
CN102883175A (zh) * | 2012-10-23 | 2013-01-16 | 青岛海信信芯科技有限公司 | 深度图提取、判断视频场景切换及深度图边缘优化方法 |
CN103458155B (zh) * | 2013-08-01 | 2016-10-19 | 北京邮电大学 | 视频场景变换检测方法和系统及体验质量检测方法和系统 |
CN106303528A (zh) * | 2015-06-04 | 2017-01-04 | 北京中传视讯科技有限公司 | 一种码流平移场景检测方法及系统 |
CN106210718A (zh) * | 2016-08-08 | 2016-12-07 | 飞狐信息技术(天津)有限公司 | 一种视频序列中场景切换检测方法及装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114153307A (zh) * | 2020-09-04 | 2022-03-08 | 中移(成都)信息通信科技有限公司 | 场景区块化处理方法、装置、电子设备及计算机存储介质 |
CN112019848A (zh) * | 2020-09-11 | 2020-12-01 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112019849A (zh) * | 2020-09-11 | 2020-12-01 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112019848B (zh) * | 2020-09-11 | 2022-09-16 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112019849B (zh) * | 2020-09-11 | 2022-10-04 | 深圳市梦网视讯有限公司 | 一种预测模式快速分析方法、系统及设备 |
CN112203092A (zh) * | 2020-09-27 | 2021-01-08 | 深圳市梦网视讯有限公司 | 一种全局运动场景的码流分析方法、系统及设备 |
CN112203092B (zh) * | 2020-09-27 | 2024-01-30 | 深圳市梦网视讯有限公司 | 一种全局运动场景的码流分析方法、系统及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109194955B (zh) | 2021-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109194955A (zh) | 一种场景切换检测方法及系统 | |
US8285045B2 (en) | Image analysis method, medium and apparatus and moving image segmentation system | |
CN106534967A (zh) | 视频剪辑方法及装置 | |
CN1465191A (zh) | 采用运动描述符归纳视频的方法 | |
JPWO2020094058A5 (zh) | ||
JP2009512246A (ja) | 画像のショットタイプを決定する方法及び装置 | |
CN104851112A (zh) | 一种基于数据集补偿的运动目标检测跟踪算法的评估方法 | |
CN110443115A (zh) | 人脸识别方法、装置、计算机设备及可读存储介质 | |
CN103096117B (zh) | 视频噪声检测方法及装置 | |
CN101587706A (zh) | 流媒体实时音乐节拍分析与舞蹈控制系统及方法 | |
CN106303528A (zh) | 一种码流平移场景检测方法及系统 | |
CN109218728A (zh) | 一种场景切换检测方法和系统 | |
US11282179B2 (en) | System and method for machine learning based video quality assessment | |
CN109460724B (zh) | 基于对象检测的停球事件的分离方法和系统 | |
KR100963701B1 (ko) | 영상 식별 장치 | |
CN106157388B (zh) | 局部高效编码行车记录方法及系统 | |
KR20170090868A (ko) | 장면 전환 프레임 검출 장치 및 방법 | |
CN116634183A (zh) | 一种快速帧间块划分方法 | |
CN110889347A (zh) | 基于时空计数特征的密度交通流计数方法及系统 | |
JP4656680B2 (ja) | 画像検索情報記録装置及び画像検索装置 | |
CN110135382A (zh) | 一种人体检测方法和装置 | |
CN115100594A (zh) | 一种行人目标检测方法、系统、装置及存储介质 | |
CN114666579A (zh) | 视频编码方法、装置、电子设备及存储介质 | |
JP4036321B2 (ja) | 映像の検索装置および検索プログラム | |
Choudhary et al. | Real time video summarization on mobile platform |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 518000 Guangdong city of Shenzhen province Nanshan District Guangdong streets high in the four Longtaili Technology Building Room 325 No. 30 Applicant after: Shenzhen mengwang video Co., Ltd Address before: 518000 Guangdong city of Shenzhen province Nanshan District Guangdong streets high in the four Longtaili Technology Building Room 325 No. 30 Applicant before: SHENZHEN MONTNETS ENCYCLOPEDIA INFORMATION TECHNOLOGY Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |