CN109194955B - 一种场景切换检测方法及系统 - Google Patents

一种场景切换检测方法及系统 Download PDF

Info

Publication number
CN109194955B
CN109194955B CN201811371997.6A CN201811371997A CN109194955B CN 109194955 B CN109194955 B CN 109194955B CN 201811371997 A CN201811371997 A CN 201811371997A CN 109194955 B CN109194955 B CN 109194955B
Authority
CN
China
Prior art keywords
frame
detection
current
scene
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811371997.6A
Other languages
English (en)
Other versions
CN109194955A (zh
Inventor
舒倩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Mengwang Video Co ltd
Original Assignee
Shenzhen Mengwang Video Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Mengwang Video Co ltd filed Critical Shenzhen Mengwang Video Co ltd
Priority to CN201811371997.6A priority Critical patent/CN109194955B/zh
Publication of CN109194955A publication Critical patent/CN109194955A/zh
Application granted granted Critical
Publication of CN109194955B publication Critical patent/CN109194955B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details

Abstract

本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点，设定当前场景发生切换的检测区域和特征，并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测，既可以保证场景检测的精确度，同时又可以避免了全帧检测算法在计算量上的无谓浪费，从而达到提升算法效率的目的。

Description

一种场景切换检测方法及系统
技术领域
本发明涉及视频处理领域，尤其涉及一种场景切换检测方法及系统。
背景技术
实际视频源具有多样性，精确的场景切换可提升编码器的压缩性能。然而，传统的全帧分析法，虽然判断较为精确，却忽略了每个场景都具有自己的特点，如背景变化、仅前景运动、全局运动等。抛开不同场景的特点，独立进行全帧图像分析的判定，会降低场景切换检测算法的时效性。
发明内容
本发明实施例的目的在于提出一种场景切换检测方法，旨在解决现有技术抛开不同场景的特点，独立进行全帧图像分析的判定，会降低场景切换检测时效性的问题。
本发明实施例是这样实现的，一种场景切换检测方法，所述方法包括
Step1：首先选取当前帧的运动检测辅助帧；若所述运动检测辅助帧选取成功，则进入Step2，否则，结束；
Step2：利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析；
Step3：根据当前场景运动特点分析，划定当前场景切换的检测区域；
Step4：对视频进行当前场景场景切换检测。
本发明实施例的另一目的在于提出一种场景切换检测系统所述系统包括：
运动检测辅助帧选取及判断模块，用于首先选取当前帧的运动检测辅助帧；然后判断若所述运动检测辅助帧选取成功，则进入场景运动特点分析装置，否则，结束；
场景运动特点分析装置，用于利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析；
场景切换检测区域划分模块，用于根据当前场景运动特点分析，划定当前场景切换的检测区域；
场景切换检测装置，用于对视频进行当前场景场景切换检测。
本发明的有益效果
本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点，设定当前场景发生切换的检测区域和特征，并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测，既可以保证场景检测的精确度，同时又可以避免了全帧检测算法在计算量上的无谓浪费，从而达到提升算法效率的目的。
附图说明
图1是本发明优选实施例一种场景切换检测方法流程图；
图2是图1中Step2的详细方法流程图；
图3是本发明优选实施例一种场景切换检测系统结构图；
图4是图3中场景运动特点分析装置的详细结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图和实施例，对本发明进行进一步详细说明，为了便于说明，仅示出了与本发明实施例相关的部分。应当理解，此处所描写的具体实施例，仅仅用于解释本发明，并不用以限制本发明。
本发明提出一种场景切换检测方法及系统。本发明方法根据相邻帧的运动特点，设定当前场景发生切换的检测区域和特征，并据此对后续帧进行场景切换的判定。本发明方法根据不同场景的运动特点进行场景检测，既可以保证场景检测的精确度，同时又可以避免了全帧检测算法在计算量上的无谓浪费，从而达到提升算法效率的目的。
实施例一
图1是本发明优选实施例一种场景切换检测方法流程图；所述方法包括：Step1：首先选取当前帧的运动检测辅助帧；若所述运动检测辅助帧选取成功，则进入Step2，否则，结束。
其中，上述“当前帧的运动检测辅助帧”可选取当前帧编码顺序后的某一个P帧，或者选取当前帧在播放顺序上的后续某一帧，间隔不宜超过1秒。Step2：利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析。
图2是图1中Step2的详细方法流程图；包括：
Step21：如果当前帧和当前帧的运动检测辅助帧均为已编码帧，则进入Step22；否则进入Step23。
Step22：采用第一处理模式，对当前场景进行运动特点分析，然后进入Step3。
StepA1：将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合，将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合；
StepA2：判断上述第一集合是否为空集，若为空则进入StepA3；若为非空则进入StepA4。
StepA3：若第二集合为空，则将当前帧设置为当前帧的运动检测辅助帧，接着标识当前帧为场景切换帧，然后清空第一、第二集合后重回Step1；否则，则对第二集合内块进行一致运动趋势判定，若存在一致运动趋势时，设置一致运动标识符为1，即noteu＝1(其初始值为0)，并记录一致运动方向及运动强度，然后进入Step3；否则，设置noteu＝-1，然后进入Step3。
其中，“一致运动趋势的判定”可采用业内公开的基于压缩信息全局运动判定方法；“并记录一致运动方向及运动强度”，应在对当前帧和当前帧的运动检测辅助帧编码后，记录全局运动向量。
StepA4：首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识。
即如果numc＞numb*Thres1，则notec＝1，并计算变化比重k＝numc/sizec，然后进入Step3；否则如果numb＞numc*Thres1，则notec＝-1，并计算变化比重k＝numb/sizeb，然后进入Step3；否则，令notec＝0，k＝0，然后进入Step3。
其中，numc、numb分别表示第一集合中位于中心区域、边界区域块的数量；Thres1表示第一门限阈值；notec表示分类标识符，初始值为0；中心区域可以选取图像中心点为中心的矩形区域，面积不超过9/16；sizec、sizeb分别表示中心区域、边界区域块的数量。
Step23：采用第二处理模式，对当前场景进行运动特点分析，然后进入Step3。包括以下步骤：
StepB1：首先以块为单位，计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值，称为差值块；接着求差值块的各像素绝对值，再求取均值；然后，将均值小于运动阈值的块划入第一集合。
StepB2：判断上述第一集合是否为空集，若为非空则进入StepB3；若为空则进入StepB4。
StepB3：首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识。
即如果numc＞numb*Thres1，则令notec＝1，并计算变化比重k＝numc/sizec，然后进入Step3；否则如果numb＞numc*Thres1，则notec＝-1，并计算变化比重k＝numb/sizeb，然后进入Step3；否则，进入StepB4。
StepB4：进行全局运动检测，若存在一致运动趋势时，设置noteu＝1，并记录一致运动方向，然后进入Step3；否则，设置noteu＝-1，然后进入Step3。
其中，“一致运动趋势的判定”可采用业内公开的基于非压缩信息全局运动判定方法。
Step3：根据当前场景运动特点分析，划定当前场景切换的检测区域：
即：如果notec＝1，划定场景检测区域为中心区域；否则，如果notec＝-1，划定场景检测区域为边界区域；否则，如果abs(noteu)＝1，则将图像第n个块行、最后n个块行、第m个块列、最后m个块列(1≤n≤4、1≤m≤4)划为场景检测区域；否则，划定场景检测区域为全帧图像。
Step4：对视频进行当前场景场景切换检测。包括以下步骤：
StepC0：当当前检测帧获取失败时，则结束；否则，清空非空的第二集合后进入StepC1。
首次操作时，则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧，作为当前检测帧，并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧；其余情况，设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
StepC1：如果不满足notec≠0，则进入StepC2；否则，如果noteu＝1，则进入StepC5；否则进入StepC6。
StepC2：首先以块为单位，对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块，计算亮度差值绝对值的均值；然后，将其中均值大于数倍运动阈值的块划入第二集合。
StepC3：计算当前变化比重kn＝num/size。
其中，num、size分别表示第二集合块的数量、场景检测区域块的数量。
StepC4：如果(k≠0且kn/k＞Thres2)或者(k＝0且kn＞Thres3)，则判定当前检测帧为场景切换帧，将当前检测帧设置为当前帧，然后清空第一、第二集合后重回Step1；否则，判定当前检测帧非场景切换帧，清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
其中，Thres2、Thres3分别表示第二、第三门限阈值，一般Thres2≥2、0.9＜Thres3＜1。
StepC5：首先，将当前检测帧运动检测辅助帧，按照全局运动向量，作全局移动，构建出虚拟帧，然后设置该虚拟帧为当前检测帧运动检测辅助帧；然后利用“StepC2-StepC4”的方法判定当前检测帧是否为场景切换帧。
StepC6：将位于场景检测区域的当前检测帧块，构建为虚拟帧。然后利用业内公开的场景检测法，判定该虚拟帧是否为场景切换帧：若是，则判定当前检测帧块为场景切换帧，然后将当前检测帧设置为当前帧，在清空第一、第二集合后重回Step1；若否，则判定当前检测帧非场景切换帧，清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
实施例二
图3是本发明优选实施例一种场景切换检测系统结构图。所述系统包括：
运动检测辅助帧选取及判断模块，用于首先选取当前帧的运动检测辅助帧；然后判断若所述运动检测辅助帧选取成功，则进入场景运动特点分析装置，否则，结束。
其中，上述“当前帧的运动检测辅助帧”可选取当前帧编码顺序后的某一个P帧，或者选取当前帧在播放顺序上的后续某一帧，间隔不宜超过1秒。
场景运动特点分析装置，用于利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析。
场景切换检测区域划分模块，用于根据当前场景运动特点分析，划定当前场景切换的检测区域：
即：如果notec＝1，划定场景检测区域为中心区域；否则，如果notec＝-1，划定场景检测区域为边界区域；否则，如果abs(noteu)＝1，则将图像第n个块行、最后n个块行、第m个块列、最后m个块列(1≤n≤4、1≤m≤4)划为场景检测区域；否则，划定场景检测区域为全帧图像。
场景切换检测装置，用于对视频进行当前场景场景切换检测。
图4是图3中场景运动特点分析装置的详细结构图。所述装置包括
判断模块，用于判断如果当前帧和当前帧的运动检测辅助帧均为已编码帧，则进入第一场景运动特点分析装置，否则，进入第二场景运动特点分析装置；
第一场景运动特点分析装置，用于采用第一处理模式，对当前场景进行运动特点分析；
第二场景运动特点分析装置，用于采用第二处理模式，对当前场景进行运动特点分析；
所述第一场景运动特点分析装置(图中未示出)包括：
第一预测块划分模块，用于将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合，将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合；
第一判断处理模块，用于判断上述第一集合是否为空集，若为空则进入第二判断处理模块；若为非空则进入第一分类标识模块。
第二判断处理模块，用于判断若第二集合为空，则将当前帧设置为当前帧的运动检测辅助帧，接着标识当前帧为场景切换帧，然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块；否则，则对第二集合内块进行一致运动趋势判定，若存在一致运动趋势时，设置一致运动标识符为1，即noteu＝1(其初始值为0)，并记录一致运动方向及运动强度，然后进入场景切换检测区域划分模块；否则，设置noteu＝-1，然后进入场景切换检测区域划分模块。
其中，“一致运动趋势的判定”可采用业内公开的基于压缩信息全局运动判定方法；“并记录一致运动方向及运动强度”，应在对当前帧和当前帧的运动检测辅助帧编码后，记录全局运动向量。
第一分类标识模块，用于首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识。
即如果numc＞numb*Thres1，则notec＝1，并计算变化比重k＝numc/sizec，然后进入场景切换检测区域划分模块；否则如果numb＞numc*Thres1，则notec＝-1，并计算变化比重k＝numb/sizeb，然后进入场景切换检测区域划分模块；否则，令notec＝0，k＝0，然后进入场景切换检测区域划分模块。
其中，numc、numb分别表示第一集合中位于中心区域、边界区域块的数量；Thres1表示第一门限阈值；notec表示分类标识符，初始值为0；中心区域可以选取图像中心点为中心的矩形区域，面积不超过9/16；sizec、sizeb分别表示中心区域、边界区域块的数量。
所述第二场景运动特点分析装置(图中未示出)包括：
第二预测块划分模块，用于首先以块为单位，计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值，称为差值块；接着求差值块的各像素绝对值，再求取均值；然后，将均值小于运动阈值的块划入第一集合。
第三判断处理模块，用于判断上述第一集合是否为空集，若为非空则进入第二分类标识模块；若为空则进入全局运动检测模块。
第二分类标识模块，用于首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识。
即如果numc＞numb*Thres1，则令notec＝1，并计算变化比重k＝numc/sizec，然后进入场景切换检测区域划分模块；否则如果numb＞numc*Thres1，则notec＝-1，并计算变化比重k＝numb/sizeb，然后进入场景切换检测区域划分模块；否则，进入全局运动检测模块。
全局运动检测模块，用于进行全局运动检测，若存在一致运动趋势时，设置noteu＝1，并记录一致运动方向，然后进入场景切换检测区域划分模块；否则，设置noteu＝-1，然后进入场景切换检测区域划分模块。
其中，“一致运动趋势的判定”可采用业内公开的基于非压缩信息全局运动判定方法。
所述场景切换检测装置(图中未示出)包括：
第四判断处理模块，用于当当前检测帧获取失败时，则结束；否则，清空非空的第二集合后进入第五判断处理模块。
首次操作时，则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧，作为当前检测帧，并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧；其余情况，设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
第五判断处理模块，用于判断如果不满足notec≠0，则进入第三预测块划分模块，；否则，如果noteu＝1，则进入场景切换帧判断模块；否则进入第六判断处理模块。
第三预测块划分模块，用于首先以块为单位，对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块，计算亮度差值绝对值的均值；然后，将其中均值大于数倍运动阈值的块划入第二集合。
变化比重计算模块，用于计算当前变化比重kn＝num/size。
其中，num、size分别表示第二集合块的数量、场景检测区域块的数量。
第五判断处理模块，用于判断如果(k≠0且kn/k＞Thres2)或者(k＝0且kn＞Thres3)，则判定当前检测帧为场景切换帧，将当前检测帧设置为当前帧，然后清空第一、第二集合后重回运动检测辅助帧选取及判断模块；否则，判定当前检测帧非场景切换帧，清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
其中，Thres2、Thres3分别表示第二、第三门限阈值，一般Thres2≥2、0.9＜Thres3＜1。
场景切换帧判断模块，用于首先，将当前检测帧运动检测辅助帧，按照全局运动向量，作全局移动，构建出虚拟帧，然后设置该虚拟帧为当前检测帧运动检测辅助帧；然后利用“第三预测块划分模块+变化比重计算模块+第五判断处理模块”中的方法判定当前检测帧是否为场景切换帧。
第六判断处理模块，用于将位于场景检测区域的当前检测帧块，构建为虚拟帧。然后利用业内公开的场景检测法，判定该虚拟帧是否为场景切换帧：若是，则判定当前检测帧块为场景切换帧，然后将当前检测帧设置为当前帧，在清空第一、第二集合后重回运动检测辅助帧选取及判断模块；若否，则判定当前检测帧非场景切换帧，清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
本领域的普通技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序指令相关硬件来完成的，所述的程序可以存储于一计算机可读取存储介质中，所述的存储介质可以为ROM、RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种场景切换检测方法，其特征在于，所述方法包括：
Step1：首先选取当前帧的运动检测辅助帧；若所述运动检测辅助帧选取成功，则进入Step2，否则，结束；
Step2：利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析；
Step3：根据当前场景运动特点分析，划定当前场景切换的检测区域；
Step4：对视频进行当前场景场景切换检测；
所述利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析具体为：如果当前帧和当前帧的运动检测辅助帧均为已编码帧，则采用第一处理模式，对当前场景进行运动特点分析；否则采用第二处理模式，对当前场景进行运动特点分析；
所述采用第一处理模式，对当前场景进行运动特点分析具体为：
StepA1：将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合，将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合；
StepA2：判断所述第一集合是否为空集，若为空则进入StepA3；若为非空则进入StepA4；
StepA3：若第二集合为空，则将当前帧设置为当前帧的运动检测辅助帧，接着标识当前 帧为场景切换帧，然后清空第一、第二集合后重回Step1；否则，对第二集合内块进行一致运 动趋势判定，若存在一致运动趋势时，设置一致运动标识符
Figure 120620DEST_PATH_IMAGE001
，并记录一致运动方 向及运动强度，然后进入Step3；否则，设置
Figure 491559DEST_PATH_IMAGE002
，然后进入Step3；
StepA4：首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识；
即如果
Figure 503377DEST_PATH_IMAGE003
，则
Figure 326977DEST_PATH_IMAGE004
，并计算变化比重
Figure 715233DEST_PATH_IMAGE005
，然 后进入Step3；否则如果
Figure 940678DEST_PATH_IMAGE006
，则
Figure 326660DEST_PATH_IMAGE007
，并计算变化比重
Figure 201337DEST_PATH_IMAGE008
，然后进入Step3；否则，令
Figure 330967DEST_PATH_IMAGE009
，
Figure 410919DEST_PATH_IMAGE010
，然后进入Step3；
其中，
Figure 30119DEST_PATH_IMAGE011
、
Figure 828311DEST_PATH_IMAGE012
分别表示第一集合中位于中心区域、边界区域块的数量；
Figure 558369DEST_PATH_IMAGE013
表示第一门限阈值；
Figure 758406DEST_PATH_IMAGE014
表示分类标识符，初始值为0；中心区域选取图像中心点为中心 的矩形区域，面积不超过9/16；
Figure 548508DEST_PATH_IMAGE015
、
Figure 69881DEST_PATH_IMAGE016
分别表示中心区域、边界区域块的数量；
所述采用第二处理模式，对当前场景进行运动特点分析包括以下步骤：
StepB1：首先以块为单位，计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值，称为差值块；接着求差值块的各像素绝对值，再求取均值；然后，将均值小于运动阈值的块划入第一集合；
StepB2：判断所述第一集合是否为空集，若为非空则进入StepB3；若为空则进入StepB4；
StepB3：首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识；
即如果
Figure 603631DEST_PATH_IMAGE003
，则令
Figure 658174DEST_PATH_IMAGE004
，并计算变化比重
Figure 353598DEST_PATH_IMAGE005
， 然后进入Step3；否则如果
Figure 329644DEST_PATH_IMAGE006
，则
Figure 401505DEST_PATH_IMAGE007
，并计算变化比重
Figure 310556DEST_PATH_IMAGE008
，然后进入Step3；否则，进入StepB4；
StepB4：进行全局运动检测，若存在一致运动趋势时，设置
Figure 442460DEST_PATH_IMAGE001
，并记录一致运动 方向，然后进入Step3；否则，设置
Figure 436961DEST_PATH_IMAGE002
，然后进入Step3。
2.如权利要求1所述的场景切换检测方法，其特征在于，所述运动检测辅助帧选取当前帧编码顺序后的某一个P帧，或者选取当前帧在播放顺序上的后续某一帧，间隔不超过1秒。
3.如权利要求1所述的场景切换检测方法，其特征在于，所述StepA3中的“一致运动趋势判定”采用基于压缩信息全局运动判定方法；“并记录一致运动方向及运动强度”，应在对当前帧和当前帧的运动检测辅助帧编码后，记录全局运动向量。
4.如权利要求1所述的场景切换检测方法，其特征在于，所述StepB4中的 “一致运动趋势”的判定采用基于非压缩信息全局运动判定方法。
5.如权利要求4所述的场景切换检测方法，其特征在于，所述根据当前场景运动特点分析，划定当前场景切换的检测区域具体为：
如果
Figure 831556DEST_PATH_IMAGE004
，划定场景检测区域为中心区域；否则，如果
Figure 860691DEST_PATH_IMAGE007
，划定场景检 测区域为边界区域；否则，如果
Figure 163497DEST_PATH_IMAGE017
，则将图像第n个块行、最后n个块行、第m个 块列、最后m个块列划为场景检测区域；否则，划定场景检测区域为全帧图像；其中、
Figure 910873DEST_PATH_IMAGE018
、
Figure 324537DEST_PATH_IMAGE019
。
6.如权利要求5所述的场景切换检测方法，其特征在于，所述对视频进行当前场景场景切换检测包括以下步骤：
StepC0：当当前检测帧获取失败时，则结束；否则，清空非空的第二集合后进入StepC1；
StepC1：如果不满足
Figure 411442DEST_PATH_IMAGE020
，则进入StepC2；否则，如果
Figure 416307DEST_PATH_IMAGE001
，则进入StepC5； 否则进入StepC6；
StepC2：首先以块为单位，对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块，计算亮度差值绝对值的均值；然后，将其中均值大于数倍运动阈值的块划入第二集合；
StepC3：计算当前变化比重
Figure 588662DEST_PATH_IMAGE021
；
其中，
Figure 806017DEST_PATH_IMAGE022
、
Figure 842368DEST_PATH_IMAGE023
分别表示第二集合块的数量、场景检测区域块的数量；
StepC4：如果
Figure 486976DEST_PATH_IMAGE024
，则判定当前检测帧 为场景切换帧，将当前检测帧设置为当前帧，然后清空第一、第二集合后重回Step1；否则， 判定当前检测帧非场景切换帧，清空第二集合后重回Step4对当前检测帧在播放顺序上的 后续帧进行场景检测；
其中，
Figure 943365DEST_PATH_IMAGE025
、
Figure 698832DEST_PATH_IMAGE026
分别表示第二、第三门限阈值，
Figure 557066DEST_PATH_IMAGE027
、
Figure 372575DEST_PATH_IMAGE028
；
StepC5：首先，将当前检测帧运动检测辅助帧，按照全局运动向量，作全局移动，构建出虚拟帧，然后设置该虚拟帧为当前检测帧运动检测辅助帧；然后利用“StepC2-StepC4”中的方法判定当前检测帧是否为场景切换帧；
StepC6：将位于场景检测区域的当前检测帧块，构建为虚拟帧；然后判定该虚拟帧是否为场景切换帧，若是，则判定当前检测帧块为场景切换帧，然后将当前检测帧设置为当前帧，在清空第一、第二集合后重回Step1；若否，则判定当前检测帧非场景切换帧，清空第二集合后重回Step4对当前检测帧在播放顺序上的后续帧进行场景检测。
7.如权利要求6所述的场景切换检测方法，其特征在于，所述StepC0中，首次操作时，则选取当前帧的运动检测辅助帧在播放顺序上的后续某一帧，作为当前检测帧，并设置当前检测帧的运动检测辅助帧为当前帧的运动检测辅助帧；其余情况，设置当前检测帧的运动检测辅助帧为前检测帧、并将当前检测帧在播放顺序上的后续帧设置为当前检测帧。
8.一种场景切换检测系统，其特征在于，所述系统包括：
运动检测辅助帧选取及判断模块，用于首先选取当前帧的运动检测辅助帧；然后判断若所述运动检测辅助帧选取成功，则进入场景运动特点分析装置，否则，结束；
场景运动特点分析装置，用于利用当前帧的运动检测辅助帧，对当前帧进行当前场景运动特点分析；
场景切换检测区域划分模块，用于根据当前场景运动特点分析，划定当前场景切换的检测区域；
场景切换检测装置，用于对视频进行当前场景场景切换检测;
所述场景运动特点分析装置包括：
判断模块，用于判断如果当前帧和当前帧的运动检测辅助帧均为已编码帧，则进入第一场景运动特点分析装置，否则，进入第二场景运动特点分析装置；
第一场景运动特点分析装置，用于采用第一处理模式，对当前场景进行运动特点分析；
第二场景运动特点分析装置，用于采用第二处理模式，对当前场景进行运动特点分析；
所述第一场景运动特点分析装置包括：
第一预测块划分模块，用于将当前帧的运动检测辅助帧中Skip模式的预测块划入第一集合，将当前帧的运动检测辅助帧中非Skip模式的帧间预测块划入第二集合；
第一判断处理模块，用于判断上述第一集合是否为空集，若为空则进入第二判断处理模块；若为非空则进入第一分类标识模块；
第二判断处理模块，用于判断若第二集合为空，则将当前帧设置为当前帧的运动检测 辅助帧，接着标识当前帧为场景切换帧，然后清空第一、第二集合后重回运动检测辅助帧选 取及判断模块；否则，则对第二集合内块进行一致运动趋势判定，若存在一致运动趋势时， 设置一致运动标识符为
Figure 253944DEST_PATH_IMAGE001
，并记录一致运动方向及运动强度，然后进入场景切换检 测区域划分模块；否则，设置
Figure 813101DEST_PATH_IMAGE002
，然后进入场景切换检测区域划分模块；
第一分类标识模块，用于首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识；
即如果
Figure 27307DEST_PATH_IMAGE003
，则
Figure 13718DEST_PATH_IMAGE004
，并计算变化比重
Figure 444699DEST_PATH_IMAGE005
，然 后进入场景切换检测区域划分模块；否则如果
Figure 541968DEST_PATH_IMAGE029
，则
Figure 374795DEST_PATH_IMAGE007
，并 计算变化比重
Figure 532107DEST_PATH_IMAGE008
，然后进入场景切换检测区域划分模块；否则，令
Figure 184805DEST_PATH_IMAGE009
，
Figure 85765DEST_PATH_IMAGE010
，然后进入场景切换检测区域划分模块；
其中，
Figure 274563DEST_PATH_IMAGE011
、
Figure 602776DEST_PATH_IMAGE012
分别表示第一集合中位于中心区域、边界区域块的数量；
Figure 946033DEST_PATH_IMAGE013
表示第一门限阈值；
Figure 385104DEST_PATH_IMAGE014
表示分类标识符，初始值为0；中心区域选取图像中心点为中心 的矩形区域，面积不超过9/16；
Figure 926944DEST_PATH_IMAGE015
、
Figure 426058DEST_PATH_IMAGE016
分别表示中心区域、边界区域块的数量；
所述第二场景运动特点分析装置包括：
第二预测块划分模块，用于首先以块为单位，计算相同位置的当前帧和当前帧的运动检测辅助帧对应块的亮度差值，称为差值块；接着求差值块的各像素绝对值，再求取均值；然后，将均值小于运动阈值的块划入第一集合；
第三判断处理模块，用于判断上述第一集合是否为空集，若为非空则进入第二分类标识模块；若为空则进入全局运动检测模块；
第二分类标识模块，用于首先，划定位于图像中心的块为中心区域，剩余的块划定为边界区域；然后根据第一集合中块的位置分布，进行分类标识；
即如果
Figure 53349DEST_PATH_IMAGE003
，则令
Figure 561691DEST_PATH_IMAGE004
，并计算变化比重
Figure 223616DEST_PATH_IMAGE005
， 然后进入场景切换检测区域划分模块；否则如果
Figure 920396DEST_PATH_IMAGE006
，则
Figure 769403DEST_PATH_IMAGE007
， 并计算变化比重
Figure 815856DEST_PATH_IMAGE008
，然后进入场景切换检测区域划分模块；否则，进入全局 运动检测模块；
全局运动检测模块，用于进行全局运动检测，若存在一致运动趋势时，设置
Figure 535551DEST_PATH_IMAGE001
， 并记录一致运动方向，然后进入场景切换检测区域划分模块；否则，设置
Figure 376468DEST_PATH_IMAGE002
，然后 进入场景切换检测区域划分模块。
9.如权利要求8所述的场景切换检测系统，其特征在于，场景切换检测区域划分模块中，用于根据当前场景运动特点分析，划定当前场景切换的检测区域；
即：如果
Figure 712771DEST_PATH_IMAGE004
，划定场景检测区域为中心区域；否则，如果
Figure 297336DEST_PATH_IMAGE007
，划定场景 检测区域为边界区域；否则，如果
Figure 668275DEST_PATH_IMAGE017
，则将图像第n个块行、最后n个块行、第m 个块列、最后m个块列划为场景检测区域；否则，划定场景检测区域为全帧图像；
Figure 181558DEST_PATH_IMAGE018
、
Figure 536316DEST_PATH_IMAGE019
。
10.如权利要求9所述的场景切换检测系统，其特征在于，所述场景切换检测装置包括：
第四判断处理模块，用于当当前检测帧获取失败时，则结束；否则，清空非空的第二集合后进入第五判断处理模块；
第五判断处理模块，用于判断如果不满足
Figure 658993DEST_PATH_IMAGE020
，则进入第三预测块划分模块；否 则，如果
Figure 150017DEST_PATH_IMAGE001
，则进入场景切换帧判断模块；否则进入第六判断处理模块；
第三预测块划分模块，用于首先以块为单位，对位于场景检测区域相同位置的当前检测帧和当前检测帧运动检测辅助帧对应块，计算亮度差值绝对值的均值；然后，将其中均值大于数倍运动阈值的块划入第二集合；
变化比重计算模块，用于计算当前变化比重
Figure 332737DEST_PATH_IMAGE021
；
其中，
Figure 643632DEST_PATH_IMAGE022
、
Figure 570000DEST_PATH_IMAGE023
分别表示第二集合块的数量、场景检测区域块的数量；
第五判断处理模块，用于判断如果
Figure 118793DEST_PATH_IMAGE024
，则判定当前检测帧为场景切换帧，将当前检测帧设置为当前帧，然后清空第一、第二集合 后重回运动检测辅助帧选取及判断模块；否则，判定当前检测帧非场景切换帧，清空第二集 合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测；
其中，
Figure 472414DEST_PATH_IMAGE025
、
Figure 772070DEST_PATH_IMAGE026
分别表示第二、第三门限阈值，
Figure 502129DEST_PATH_IMAGE027
、
Figure 702166DEST_PATH_IMAGE028
；
场景切换帧判断模块，用于首先，将当前检测帧运动检测辅助帧，按照全局运动向量，作全局移动，构建出虚拟帧，然后设置该虚拟帧为当前检测帧运动检测辅助帧；然后利用“第三预测块划分模块+变化比重计算模块+第五判断处理模块”中的方法判定当前检测帧是否为场景切换帧；
第六判断处理模块，用于将位于场景检测区域的当前检测帧块，构建为虚拟帧，然后判定该虚拟帧是否为场景切换帧，若是，则判定当前检测帧块为场景切换帧，然后将当前检测帧设置为当前帧，在清空第一、第二集合后重回运动检测辅助帧选取及判断模块；若否，则判定当前检测帧非场景切换帧，清空第二集合后重回场景切换检测装置对当前检测帧在播放顺序上的后续帧进行场景检测。
CN201811371997.6A 2018-11-16 2018-11-16 一种场景切换检测方法及系统 Active CN109194955B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811371997.6A CN109194955B (zh) 2018-11-16 2018-11-16 一种场景切换检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811371997.6A CN109194955B (zh) 2018-11-16 2018-11-16 一种场景切换检测方法及系统

Publications (2)

Publication Number Publication Date
CN109194955A CN109194955A (zh) 2019-01-11
CN109194955B true CN109194955B (zh) 2021-04-30

Family

ID=64939716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811371997.6A Active CN109194955B (zh) 2018-11-16 2018-11-16 一种场景切换检测方法及系统

Country Status (1)

Country Link
CN (1) CN109194955B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114153307A (zh) * 2020-09-04 2022-03-08 中移(成都)信息通信科技有限公司 场景区块化处理方法、装置、电子设备及计算机存储介质
CN112019848B (zh) * 2020-09-11 2022-09-16 深圳市梦网视讯有限公司 一种预测模式快速分析方法、系统及设备
CN112019849B (zh) * 2020-09-11 2022-10-04 深圳市梦网视讯有限公司 一种预测模式快速分析方法、系统及设备
CN112203092B (zh) * 2020-09-27 2024-01-30 深圳市梦网视讯有限公司 一种全局运动场景的码流分析方法、系统及设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1602592A (zh) * 2001-09-26 2005-03-30 汤姆森许可公司 视频比特流中的场景切换检测
CN1758759A (zh) * 2005-11-18 2006-04-12 清华大学 一种视频场景切换检测方法
CN1761331A (zh) * 2005-09-29 2006-04-19 深圳清华大学研究院 视频场景切换检测方法
CN101072342A (zh) * 2006-07-01 2007-11-14 腾讯科技（深圳）有限公司 一种场景切换的检测方法及其检测系统
CN101742293A (zh) * 2008-11-14 2010-06-16 北京中星微电子有限公司 一种基于视频运动特征的图像自适应帧场编码方法
CN102497556A (zh) * 2011-12-26 2012-06-13 深圳市融创天下科技股份有限公司 一种基于时间变化度的场景切换检测方法、装置、设备
CN102572418A (zh) * 2010-12-28 2012-07-11 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102883175A (zh) * 2012-10-23 2013-01-16 青岛海信信芯科技有限公司 深度图提取、判断视频场景切换及深度图边缘优化方法
US8363938B2 (en) * 2008-05-02 2013-01-29 Psytechnics Limited Method and apparatus for aligning signals
CN103458155B (zh) * 2013-08-01 2016-10-19 北京邮电大学 视频场景变换检测方法和系统及体验质量检测方法和系统
CN106210718A (zh) * 2016-08-08 2016-12-07 飞狐信息技术（天津）有限公司 一种视频序列中场景切换检测方法及装置
CN106303528A (zh) * 2015-06-04 2017-01-04 北京中传视讯科技有限公司 一种码流平移场景检测方法及系统

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1602592A (zh) * 2001-09-26 2005-03-30 汤姆森许可公司 视频比特流中的场景切换检测
CN1761331A (zh) * 2005-09-29 2006-04-19 深圳清华大学研究院 视频场景切换检测方法
CN1758759A (zh) * 2005-11-18 2006-04-12 清华大学 一种视频场景切换检测方法
CN101072342A (zh) * 2006-07-01 2007-11-14 腾讯科技（深圳）有限公司 一种场景切换的检测方法及其检测系统
US8363938B2 (en) * 2008-05-02 2013-01-29 Psytechnics Limited Method and apparatus for aligning signals
CN101742293A (zh) * 2008-11-14 2010-06-16 北京中星微电子有限公司 一种基于视频运动特征的图像自适应帧场编码方法
CN102572418A (zh) * 2010-12-28 2012-07-11 深圳市融创天下科技股份有限公司 一种帧间编码的运动预测方法和系统
CN102497556A (zh) * 2011-12-26 2012-06-13 深圳市融创天下科技股份有限公司 一种基于时间变化度的场景切换检测方法、装置、设备
CN102883175A (zh) * 2012-10-23 2013-01-16 青岛海信信芯科技有限公司 深度图提取、判断视频场景切换及深度图边缘优化方法
CN103458155B (zh) * 2013-08-01 2016-10-19 北京邮电大学 视频场景变换检测方法和系统及体验质量检测方法和系统
CN106303528A (zh) * 2015-06-04 2017-01-04 北京中传视讯科技有限公司 一种码流平移场景检测方法及系统
CN106210718A (zh) * 2016-08-08 2016-12-07 飞狐信息技术（天津）有限公司 一种视频序列中场景切换检测方法及装置

Also Published As

Publication number Publication date
CN109194955A (zh) 2019-01-11

Similar Documents

Publication Publication Date Title
CN109194955B (zh) 一种场景切换检测方法及系统
KR100987365B1 (ko) 비디오 프레임들로부터 키 프레임들의 선택
JP2009512246A (ja) 画像のショットタイプを決定する方法及び装置
JP6016332B2 (ja) 画像処理装置、画像処理方法
WO2011153869A1 (zh) 一种图像区域划分/编码方法、装置及系统
CN104869403B (zh) 一种基于x264压缩视频的镜头分割方法
US20040218675A1 (en) Method and apparatus for determining reference picture and block mode for fast motion estimation
JP2009147911A (ja) 映像データ圧縮前処理方法およびこれを用いた映像データ圧縮方法と映像データ圧縮システム
KR101281850B1 (ko) 영상 디스크립터 생성 장치
CN101938649A (zh) 译码设备、译码控制设备、译码方法和程序
CN109218728B (zh) 一种场景切换检测方法和系统
US7558429B2 (en) Image processing method and method for detecting differences between different image macro-blocks
CN110310303B (zh) 图像分析多目标跟踪方法
KR100963701B1 (ko) 영상 식별 장치
CN111726620A (zh) 一种监控视频背景帧的编码方法、装置、电子设备及介质
JP4154459B2 (ja) デジタル映像処理方法及びその装置
JP4225503B2 (ja) 動画像のカット点検出装置
Liu et al. A novel compressed domain shot segmentation algorithm on H. 264/AVC
US20190098330A1 (en) Coding apparatus, coding method, and recording medium
JP4430690B2 (ja) 動き探索装置、動き探索方法、動き探索プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
CN106331720B (zh) 一种视频解码相关信息存储方法和装置
Saoudi et al. Spatio-temporal video slice edges analysis for shot transition detection and classification
US20240155107A1 (en) Video compression method and system
KR101787004B1 (ko) 표본 픽셀 기반 움직임 추정장치 및 방법
JP2005079675A (ja) カット点検出装置及びカット点検出プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 518000 Guangdong city of Shenzhen province Nanshan District Guangdong streets high in the four Longtaili Technology Building Room 325 No. 30

Applicant after: Shenzhen mengwang video Co., Ltd

Address before: 518000 Guangdong city of Shenzhen province Nanshan District Guangdong streets high in the four Longtaili Technology Building Room 325 No. 30

Applicant before: SHENZHEN MONTNETS ENCYCLOPEDIA INFORMATION TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant