CN1471306A - 场景改变检测器及其方法 - Google Patents
场景改变检测器及其方法 Download PDFInfo
- Publication number
- CN1471306A CN1471306A CNA031475086A CN03147508A CN1471306A CN 1471306 A CN1471306 A CN 1471306A CN A031475086 A CNA031475086 A CN A031475086A CN 03147508 A CN03147508 A CN 03147508A CN 1471306 A CN1471306 A CN 1471306A
- Authority
- CN
- China
- Prior art keywords
- scene change
- signal
- change detector
- detector according
- signals
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 35
- 238000004364 calculation method Methods 0.000 claims abstract description 36
- 238000006243 chemical reaction Methods 0.000 claims abstract description 25
- 239000000872 buffer Substances 0.000 claims abstract description 21
- 238000001914 filtration Methods 0.000 claims description 13
- 238000003780 insertion Methods 0.000 claims description 5
- 230000037431 insertion Effects 0.000 claims description 5
- 230000015654 memory Effects 0.000 claims 2
- 238000001514 detection method Methods 0.000 abstract description 13
- 238000012545 processing Methods 0.000 description 4
- 238000004566 IR spectroscopy Methods 0.000 description 2
- 101150064138 MAP1 gene Proteins 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
Abstract
场景改变检测器包括第一和第二帧缓冲器,用于分别存储检测场景改变的两个图像帧数据;第一和第二彩色空间转换单元,用于把存储在第一和第二帧缓冲器中的图像帧数据转换成分别预定第一和第二彩色信号,和把预定第一和第二彩色信号分别输出到第一和第二直方图检测单元;第一和第二直方图检测单元,用于从在第一和第二彩色空间转换单元上转换的彩色信号中计算直方图;交叉相关系数计算单元,用于计算由第一直方图检测单元计算的第一直方图和第二直方图检测单元计算的第二直方图之间的相关值;和判决单元,用于通过将在交叉相关系数计算单元计算的相关值与预定阈值相比较,输出场景改变信号。因此,场景改变可以利用源自彩色信号的直方图来检测。
Description
交叉参考相关申请
本申请要求2002年7月9日向韩国知识产权局提出的韩国专利申请第2002-39579号的优先权,特此全文引用,以供参考。
技术领域
本发明涉及场景改变检测器及其方法,尤其涉及利用关于色度或亮度的彩色信号的直方图之间的相关信息,检测运动图像之间的场景改变的场景改变检测器和方法。
背景技术
一般说来,场景改变表示一个场景完成之后,运动图像在连续场景(屏幕图像)中,从一个场景改变到另一个场景。场景改变一般分为几种模式:某个场景逐渐消失和另一个场景慢慢出现的淡出(fade-out)和淡入(fade-in)模式、在某个时间间隔内某两个场景从不同方向慢慢重叠的重叠模式和简单场景改变模式。
场景改变检测器是检测运动图像的场景改变的设备,它可应用于数字TV(电视机)、基于计算机的图像处理系统和MPEG(运动图像专家组)信号处理系统。
例如,通过使场景改变检测器的场景改变检测适用于提高数字TV等的图像的对比度,可以适当地处理发生在图像对比度上的闪烁或像移现象。
对于MPEG信号处理系统,利用运动预测和补偿的帧间编码技术适用于在时间轴上密切相关的数据。当运动图像的场景之间发生场景改变时,相同图像数据的重复频率很低,从而使数据量增加。因此,当在没有反映像场景改变那样的特殊图像效果的情况下使用MPEG信号处理系统时,位利用率降低了,和运动图像的质量变差了,因此,有必要在运动图像的信号处理之前,进行场景改变检测。
已经为检测运动图像的场景之间的场景改变的场景改变检测器及其方法开发了几种技术。
例如,名称为“对TV和IR数据进行场景改变分析的对象检测方法和系统(Object detection method and system for scene change analysis inTV and IR data)”的美国专利第6,049,363号公开了基于用于场景改变检测的两个帧的边缘信息的像素差异法。
名称为“连续图像之间的剧烈改变的精确检测(Accurate detection ofa drastic change between successive pictures)的美国专利第5,032,905号公开了应用在用于场景改变检测的两个帧之间的帧差异法。
名称为“记录代表视频信号中的切断的图像数据的设备(Apparatus forrecording image data representative of cuts in a video signal)”的美国专利第5,835,663号公开了把两个帧划分成子块之后,获取关于每个子块的色度彩色信号的直方图的场景改变检测的另一种方法,其中,计算相关信息是通过于块的总比较,从统计上加以处理的。
如上所述的这些传统场景改变检测器及其方法使用了基于运动向量或帧差异法的算法。这些算法的缺点在于,由于它们结构复杂,导致处理速度慢。因此,当图像帧中的运动信息不是非常重要时,比如,在提高图像的对比度或颜色的情况下,这些方法就不那么有效了。
此外,传统场景改变检测器及其方法不能提供通过检测作为显示在运动图像上的副标题的TI(“标题插入”),或PIP(“画中画”),即,与场景改变一起加以考虑的显示在运动图像中的另一个图像,提高运动图像的质量的有效方法。
发明内容
本发明就是为了克服现有技术中存在的上述和/或其它问题而作出的。因此,本发明的一个方面是提供一种当图像帧中的运动信息不重要时,譬如,在提高图像帧中图像的对比度的情况下可以使用的场景改变检测器及其方法。
本发明的另一个方面是提供一种当存在TI(标题插入)或PIP(画中画)时,通过考虑场景能够改变提高图像的质量的场景改变检测器及其方法。
本发明的其它方面和优点部分在如下的描述中摆出来,和部分可从如下的描述中明显看出,或者,可以通过具体实施本发明来获知。
根据本发明一个方面的场景改变检测器包括第一和第二直方图检测单元,用于分别计算关于预定输入的第一和第二彩色信号的第一和第二直方图;交叉相关系数计算单元,用于计算由第一和第二直方图检测单元分别计算的第一和第二直方图之间的相关值;和判决单元,用于通过将相关值与预定阈值相比较,输出场景改变信号。
根据本发明的另一个方面,场景改变检测器还包括第一和第二帧缓冲器,用于分别存储检测场景改变的两个图像帧数据;和第一和第二彩色空间转换单元,用于把存储在第一和第二帧缓冲器中的图像帧数据转换成预定第一和第二彩色信号,和把预定第一和第二彩色信号分别输出到第一和第二直方图检测单元。
预定第一和第二彩色信号是亮度彩色信号或色度彩色信号。第一和第二直方图检测单元可以把输入的彩色信号的各个彩色信号量化成预定信号频带,对预定帧中所有像素计算量化输入彩色信号的具有相同值的像素个数,和通过使计算的个数标准化计算第一和第二直方图。当相关值小于在0.9到0.95范围之内的预定阈值时,判决单元可以输出场景改变信号。
根据本发明的另一个方面,场景改变检测器包括第一和第二直方图检测单元,用于分别计算关于预定输入的第一和第二彩色信号的直方图;第一和第二平均值/最大值计算单元,用于从由第一和第二直方图检测单元分别计算的第一和第二直方图中计算平均值和最大值;比较单元,用于通过将第一和第二平均值/最大值计算单元计算的第一和第二平均值之间的第一差值与预定第一阈值相比较,输出平均信号,和通过将第一和第二平均值/最大值计算单元计算的第一和第二最大值之间的第二差值与预定第二阈值相比较,输出最大信号;第一和第二滤波器,用于通过滤波第一和第二直方图,分别输出具有各自抑制峰值的第一和第二直方图;交叉相关系数计算单元,用于计算经滤波的第一和第二直方图之间的相关值;和判决单元,用于通过将相关值与预定阈值相比较,输出场景改变信号,和根据场景改变信号和从比较单元输出的平均信号和最大信号,输出TI信号和PIP信号。
场景改变检测器还可以包括第一和第二帧缓冲器,用于分别存储检测场景改变的两个图像帧数据;和第一和第二彩色空间转换单元,用于把存储在第一和第二帧缓冲器中的图像帧数据转换成预定第一和第二彩色信号,和把预定第一和第二彩色信号分别输出到第一和第二直方图检测单元。
预定第一和第二彩色信号可以是亮度彩色信号或色度彩色信号。
第一和第二直方图检测单元可以把各个输入彩色信号量化成预定信号频带,从关于预定帧中所有像素的量化输入彩色信号中计算量化彩色信号的具有相同值的像素个数,和通过使计算的个数标准化分别计算第一和第二直方图。
当相关值小于在0.9到0.95范围之内的预定第三阈值时,判决单元可以输出场景改变信号。
比较单元在第一和第二平均值之间的差值大于预定第一阈值时,可以输出平均信号,和在第一和第二最大值之间的差值大于预定第二阈值时,可以输出最大信号。
并且,判决单元可以接收平均信号和最大信号,和当场景改变信号大于预定第一阈值时,输出TI信号和PIP信号。
根据本发明另一个方面,场景检测的方法包括计算关于预定输入的第一和第二彩色信号的第一和第二直方图;计算第一和第二直方图之间的相关值;和当相关值小于预定阈值时,输出场景改变信号。
场景检测的方法还可以包括分别存储检测场景改变信号的两个图像帧数据;和分别把图像帧数据转换成预定第一和第二彩色信号。
根据本发明的另一个方面,场景检测的方法包括分别计算关于预定输入的第一和第二彩色信号的直方图;从第一和第二直方图中计算第一和第二平均值和第一和第二最大值;当计算的第一和第二平均值之间的第一差值大于预定第一阈值时,输出平均信号,和当计算的第一和第二最大值之间的第二差值大于预定第二阈值时,输出最大信号;滤波第一和第二直方图,以限制峰值,和分别输出经滤波的第一和第二直方图;计算经滤波的第一和第二直方图之间的相关值;和当相关值小于预定第三阈值时,输出场景改变信号,输入平均信号和最大信号,和当相关值大于预定第三阈值时,输出TI信号或PIP信号。
本发明的场景检测的方法还可以包括分别存储检测场景改变信号的两个图像帧数据,和把图像帧数据转换成预定第一和第二彩色信号。
附图说明
通过结合附图,对本发明的优选实施例进行如下描述,本发明的这些和/或其它方面和优点将更加清楚,在附图中:
图1是显示根据本发明一个实施例的场景改变检测器的方块图;
图2是显示图1的场景改变检测器的操作方法的流程图;
图3A和3B是显示在图1的场景改变检测器中生成的直方图的图形;
图4是显示根据本发明另一个实施例的场景改变检测器的方块图;和
图5A和5B是显示在图4的场景改变检测器中生成的直方图的图形。
具体实施方式
现在详细介绍其例子显示在附图中的本发明的优选实施例,其中,相同的标号自始至终表示相同的部件。通过参照这些图形描述这些实施例是为了说明本发明。
从现在开始,通过参照附图更详细地描述本发明。
图1是显示根据本发明一个实施例的场景改变检测器的方块图。
场景改变检测器包括第一帧缓冲器100、第一彩色空间转换单元102、第一直方图检测单元104、第二帧缓冲器110、第二彩色空间转换单元112、第二直方图检测单元114、交叉相关系数计算单元120和判决单元130。
参照图1,第一帧缓冲器和第二帧缓冲器100和110分别存储具有预定时间间隔的两个图像帧数据,以便从输入视频流数据中检测场景改变。第一和第二彩色空间转换单元102和112分别将存储在第一和第二帧缓冲器100和110中的图像帧数据的各自彩色空间转换成各自彩色信号。第一和第二直方图检测单元104和114从在第一和第二彩色空间转换单元102和112上转换的彩色信号中计算第一和第二直方图。
交叉相关系数计算器120计算所计算的第一和第二直方图之间的相关值C,和判决单元130将计算的相关值C与预定阈值相比较,并且输出场景改变信号。
图2是显示图1的场景改变检测器的操作方法的流程图。参照图2,在操作S150中,把具有预定时间间隔的两个图像帧数据分别存储在第一和第二帧缓冲器100和110中,以便从输入音频流数据中检测场景改变。在操作S152中,在第一和第二彩色空间转换单元102和112上把存储在第一和第二帧缓冲器100和110中的图像帧数据的彩色空间转换成色度(或亮度)彩色信号。换句话说,根据使用环境,存储到第一和第二帧缓冲器100和110中的图像帧数据可以具有彩色空间,譬如,RGB、YIQ、YUV、YcbCr或HLS。利用适当的方程把这些彩色空间转换成色度(或亮度)彩色信号。例如,利用如下方程1,可以从RGB彩色信号中计算出色度(或亮度)彩色信号:
方程1
Y=a·R+b·G+c·B 这里,a、b和c是转换系数。例如,根据CCIR(国际无线电咨询委员会)的推荐601-1,a=0.29900,b=0.58700和c=0.1140。它们是用于JPEG(联合图像专家组)压缩的典型转换系数。
在操作S154中,第一和第二直方图检测单元104和114从在第一和第二彩色空间转换单元102和112上转换的色度(或亮度)彩色信号中分别计算直方图。此时,在第一直方图计算单元104上计算的直方图之一是第一直方图,和在第二直方图计算单元114上计算的直方图的另一个是第二直方图。计算第一和第二直方图的方法如下。把第一和第二彩色空间转换单元102和112从各自彩色空间转换的色度(或亮度)彩色信号量化成预定信号频带,譬如,0~100数值范围、0~127数值范围、0~255数值范围,和计算每个直方图,以便对所选的局部窗口或图像帧或半帧的所有像素计算具有相同值的像素个数。在直方图中搜索到最大值之后,通过标准化而使最大值具有某个值(例如,100),来计算直方图。
图3A和3B是显示根据上面方法计算的第一和第二直方图的图形。所示的直方图具有0~255的信号频带和100的最大值。换句话说,X轴是0~255的信号频带,和与每个X轴相对应的Y轴是具有相同值的像素个数的计数值。
在操作S156中,交叉相关系数计算单元120利用如下方程,计算在第一直方图计算单元104上计算的第一直方图和在第二直方图计算单元114上计算的第二直方图之间的相关值C。
方程2 这里,xi是在第一直方图计算单元104上计算的第一直方图在X轴上的预定值,和yi是在第二直方图计算单元114上计算的第二直方图在X轴上的预定值。
x是第一直方图的独立直方图计数的平均值,和
y是第二直方图的独立直方图计数的平均值。
通过方程2计算的相关值C具有在-1和1之间的值。当第一直方图与第二直方图正交时,相关值C是-1。当第一直方图和第二直方图之间的相关程度变得较强时,那么,相关值C接近1。当相关值C是1时,确定第一直方图和第二直方图是相同的。
判决单元130通过将在方程2上计算的相关值C与预定阈值相比较,产生场景改变信号Csc。换句话说,当相关值C小于预定阈值时,可以认为发生了场景改变。通过试验计算的阈值是0.9到0.95。因此,当相关值C小于0.9到0.95时,确定存在场景改变,因此,把场景改变信号Csc输出成1。当相关值C大于0.9到0.95时,场景改变信号Csc是0。
正如到目前为止所述的那样,即使在利用色度(或亮度)直方图之间的相关信息,而不是利用运动信息检测到场景改变之后,在图像帧中存在运动,也不能确定存在场景改变。
图4是显示根据本发明另一个实施例的场景改变检测器的方块图。参照图4的方块图,场景改变检测器包括第一帧缓冲器200、第一彩色空间转换单元202、第一直方图检测单元204、第一滤波器206、第一平均值/最大值计算单元208、第二帧缓冲器210、第二彩色空间转换单元212、第二直方图检测单元214、第二滤波器216、第二平均值/最大值计算单元218、交叉相关系数计算单元220、比较单元222和判决单元230。
如图4的方块图所示,场景改变检测器拥有比图1的场景改变检测器更多的附加块,譬如,第一和第二滤波器206和216、第一和第二平均值/最大值计算单元208和218和比较单元222。这些附加块用于主要检测画中画(PIP)信号或标题插入(TI)信号。
第一和第二帧缓冲器200和210、第一和第二彩色空间转换单元202和212、第一和第二直方图检测单元204和214和交叉相关系数计算单元220的各自功能与图1的场景改变检测器的那些部件的功能相同。因此,从现在开始描述附加块的功能。
第一和第二平均值/最大值计算单元208和218对在第一和第二直方图检测单元204和214上计算的第一和第二直方图分别计算平均值和最大值。在第一平均值/最大值计算单元208上从第一直方图中计算的平均值和最大值分别是第一平均值和第一最大值,和在第二平均值/最大值计算单元218上从第二直方图中计算的平均值和最大值分别是第二平均值和第二最大值。
把在第一和第二平均值/最大值计算单元208和218上计算的第一平均值和第一最大值和第二平均值和第二最大值传输到比较单元222。比较单元222根据如下方程,计算平均信号Cmean。和最大信号Cmax:
方程3
ΔSmax=|Smax(T-ΔT)-Smax(T)|
,if ΔSmax<Th1 then Cmax=O,else Cmax=1
方程4
ΔSmean=|Smean(T-ΔT)-Smean(T)|
,if ΔSmean<Th2 then Cmean=O,else Cmean=1这里,ΔT是预定时间间隔,因此,Smax(T-ΔT)和Smax(T)分别是第一和第二直方图的最大值。第一和第二直方图的平均值的情况与上述相同。
把在比较单元230中计算的平均信号Cmean和最大信号Cmax传输到判决单元230。
同时,第一和第二滤波器206和216利用线性或非线性滤波器降低由TI信号或PIP信号形成的各自直方图的峰值。例如,图5A显示了由TI或PIP信号形成的直方图,和图5B显示了由经过第一滤波器206或第二滤波器216的信号形成的另一个直方图。如图5A和5B所示,当信号经过第一和第二滤波器206和216时,信号的峰值受到限制。利用限制由PIP或TI信号引起的峰值的第一和第二滤波器206和216,即使产生了PIP和TI信号,也可以防止场景改变信号Csc被无条件输出。
第一和第二滤波器206和216是线性低通滤波器或非线性中间滤波器。
如下方程是利用5-Tab中值滤波器计算的、关于输入直方图值的输出直方图值的例子:
方程5这里,Finput(i)是输入直方图值,和Fout(i)是输出直方图值。中值运算器是按它们的幅度重新排列给定直方图值,取出中间值的过滤方法。一旦对直方图完成它的过滤,最大值就得到设置,并且把最大值标准化成预定值(例如,100)。
把标准化直方图传输到交叉相关系数计算单元220。交叉相关系数计算单元220利用上面说明的方程2,计算相关值C。把计算的相关值C传输到判决单元230。
判决单元230利用相关值C、平均信号Cmean和最大信号Cmax,根据如下方程生成场景改变信号CSC和PIP(画中画)/TI(标题插入)信号CTI/P:
方程6
If(C≤Th3)then CSC=1,else CSC=O
If((Cmean==1 or Cmax==1)AND C>Th3)then CTI/P=1 else CTI/P=O
换句话说,当相关值C小于阈值时,这是一般场景改变的情况。在这种情况下,把场景改变信号CSC输出成1。当Cmax或Cmean。是1时,在前面和后面图像中存在显著改变,同时,如果相关值C大于阈值,那么,确定存在TI或PIP。
正如到此为止所述的那样,由于可以检测到场景改变是一般改变或由TI或PIP引起的改变的事实,通过把上述信息用于提高图像信号的对比度,可以有效地提高图像质量,从而适当地处理了上述问题。
根据本发明,利用色度或亮度彩色信号的直方图之间的相关信息,可以检测图像帧中与运动无关的场景改变。此外,由于可以把TI或PIP引起的场景改变和一般场景改变彼此分开,可以更有效地提高图像的质量。
虽然已经对本发明的优选实施例进行了描述,但是,本领域的普通技术人员应该明白,本发明不局限于所述的优选实施例,可以在本发明的精神和范围内进行各种各样的调换和修改。因此,本发明的范围不局限于所述的范围,而是由所附权利要求书及其等效物来限定。
Claims (50)
1.一种场景改变检测器,包括:
第一和第二直方图检测单元,用于从输入的第一和第二彩色信号中分别计算直方图;
交叉相关系数计算单元,用于计算由第一和第二直方图检测单元计算的第一和第二直方图之间的相关值;和
判决单元,用于通过将相关值与阈值相比较,输出场景改变信号。
2.根据权利要求1所述的场景改变检测器,还包括:
第一和第二帧缓冲器,用于分别存储两个图像帧数据,以检测场景改变;和
第一和第二彩色空间转换单元,用于把存储在第一和第二帧缓冲器中的图像帧数据分别转换成要输出到第一和第二直方图检测单元的第一和第二彩色信号。
3.根据权利要求2所述的场景改变检测器,其中,第一和第二彩色信号是亮度彩色信号。
4.根据权利要求2所述的场景改变检测器,其中,第一和第二彩色信号是色度彩色信号。
5.根据权利要求1所述的场景改变检测器,其中,第一和第二直方图检测单元把输入的第一和第二彩色信号分别量化成信号频带,每一个都对预定帧区域中所有像素计算量化第一和第二彩色信号的具有相同值的像素个数,和通过使计算的各自个数标准化,分别计算第一和第二直方图。
6.根据权利要求1所述的场景改变检测器,当相关值小于阈值时,判决单元输出场景改变信号。
7.根据权利要求6所述的场景改变检测器,其中,阈值在0.9到0.95的范围之内,包括0.9和0.95。
8.一种场景改变检测器,包括:
第一和第二直方图检测单元,用于从输入的第一和第二彩色信号中分别计算第一和第二直方图;
第一和第二平均值/最大值计算单元,用于从在第一和第二直方图检测单元中计算的第一和第二直方图中分别计算平均值和最大值;
比较单元,用于通过将第一和第二平均值/最大值计算单元分别计算的第一和第二平均值之间的第一差值与第一阈值相比较,输出平均信号,和通过将第一和第二平均值/最大值计算单元分别计算的第一和第二最大值之间的第二差值与第二阈值相比较,输出最大信号;
第一和第二滤波器,用于分别滤波第一和第二直方图,以便输出具有抑制峰值的经滤波的第一和第二直方图;
交叉相关系数计算单元,用于计算经滤波的第一和第二直方图之间的相关值;和
判决单元,用于通过将相关值与第三阈值相比较,输出场景改变信号,和根据场景改变信号和从比较单元输出的平均信号和最大信号,输出TI(标题插入)信号和PIP(画中画)信号。
9.根据权利要求8所述的场景改变检测器,还包括:
第一和第二帧缓冲器,用于存储两个图像帧数据,以便检测场景改变;和
第一和第二彩色空间转换单元,用于把存储在第一和第二帧缓冲器中的图像帧数据分别转换成预定第一和第二彩色信号,和把第一和第二彩色信号分别输出到第一和第二直方图检测单元。
10.根据权利要求9所述的场景改变检测器,其中,第一和第二彩色信号是亮度彩色信号。
11.根据权利要求9所述的场景改变检测器,其中,第一和第二彩色信号是色度彩色信号。
12.根据权利要求8所述的场景改变检测器,其中,第一和第二直方图检测单元把输入彩色信号量化成各自的信号频带,每一个都对预定帧区域中的所有像素计算量化第一和第二彩色信号的具有相同值的像素个数,和通过使计算的各自的个数标准化,分别计算第一和第二直方图。
13.根据权利要求8所述的场景改变检测器,其中,当相关值小于第三阈值时,判决单元输出场景改变信号。
14.根据权利要求8所述的场景改变检测器,其中,第三阈值在0.9到0.95的范围之内,包括0.9和0.95。
15.根据权利要求13所述的场景改变检测器,其中,比较单元在第一和第二平均值之间的差值大于第一阈值时,输出平均信号,和在第一和第二最大值之间的差值大于第二阈值时,输出最大信号。
16.根据权利要求8所述的场景改变检测器,其中,判决单元接收平均信号和最大信号,和当场景改变信号大于第一阈值时,输出TI或PIP信号。
17.一种检测场景改变的方法,该方法包括:
分别计算关于输入的第一和第二彩色信号的第一和第二直方图;
计算第一和第二直方图之间的相关值;和
当相关值小于预定阈值时,输出场景改变信号。
18.根据权利要求17所述的方法,其中,第一和第二直方图的计算包括:
分开存储两个图像帧数据,以便检测场景改变;和
把存储的两个帧数据转换成第一和第二彩色信号。
19.一种检测场景改变的方法,该方法包括:
计算关于输入的第一和第二彩色信号的第一和第二直方图;
从第一和第二直方图中分别计算第一和第二平均值和第一和第二最大值;
当计算的第一和第二平均值之间的第一差值大于第一阈值时,输出平均信号,和当计算的第一和第二最大值之间的第二差值大于第二阈值时,输出最大信号;
滤波第一和第二直方图,输出具有抑制峰值的经滤波的第一和第二直方图;
计算经滤波的第一和第二直方图之间的相关值;和
当相关值小于第三阈值时,输出场景改变信号,和当相关值大于预定第三阈值,以及输入平均和最大信号时,输出TI或PIP信号。
20.根据权利要求19所述的方法,其中,第一和第二直方图的计算包括:
分开存储两个图像帧数据,以便检测场景改变;和
把存储的两个帧数据转换成第一和第二彩色信号。
21.一种场景改变检测器,包括:
第一和第二直方图检测单元,每一个用于从第一和第二视频信号中分别计算具有相同值的各自像素的每个个数;和
判决单元,用于按照第一和第二视频信号每一个的像素个数,输出场景改变信号。
22.根据权利要求21所述的场景改变检测器,其中,第一和第二视频信号在视频流数据中存在一个时间间隔。
23.根据权利要求21所述的场景改变检测器,其中,第一和第二视频信号包括:
RGB型信号、YIQ型信号、YUV型信号、YcbCr型信号和HLS型信号之一。
24.根据权利要求21所述的场景改变检测器,还包括:
第一和第二存储器,用于分别存储第一和第二视频信号。
25.根据权利要求21所述的场景改变检测器,还包括:
第一和第二存储器,用于分别存储与第一和第二视频信号相对应的视频流数据的第一和第二图像帧/半帧数据。
26.根据权利要求25所述的场景改变检测器,还包括:
第一和第二彩色空间转换单元,用于把存储的视频流数据的第一和第二图像帧/半帧数据分别转换成第一和第二视频信号。
27.根据权利要求21所述的场景改变检测器,其中,第一和第二直方图检测单元从第一和第二视频信号中分别计算代表具有相同值的各自像素的各自个数的第一和第二直方图。
28.根据权利要求27所述的场景改变检测器,其中,第一和第二直方图的每一个包括:
每一个代表具有相同值的像素个数的第一个数;和
每一个代表具有不同值的像素个数的第二个数。
29.根据权利要求28所述的场景改变检测器,其中,判决单元按照第一个数和第二个数,输出场景改变信号。
30.根据权利要求27所述的场景改变检测器,还包括:
交叉相关系数计算单元,用于计算第一和第二直方图之间的相关值,其中,当将相关值与阈值相比较时,判决单元输出场景改变信号。
31.根据权利要求21所述的场景改变检测器,还包括:
第一和第二滤波器,用于分别滤波具有相同值的像素的各自个数,以抑制像素的各自个数中大于峰值的那一个。
32.根据权利要求21所述的场景改变检测器,其中,第一和第二直方图检测单元分别计算具有不同值的各自像素的另一个个数,和判决单元按照第一和第二视频信号每一个的像素的个数和另一个个数,输出场景改变信号。
33.根据权利要求21所述的场景改变检测器,其中,第一和第二直方图检测单元分别计算具有不同值的各自像素的另一个个数,把像素的个数和另一个个数分别标准化在第一和第二范围之内,和判决单元按照第一和第二视频信号每一个的像素的个数和另一个个数,输出场景改变信号。
34.根据权利要求21所述的场景改变检测器,其中,第一和第二直方图检测单元计算具有不同值的各自像素的另一个个数,和检测器还包括:
第一和第二平均值/最大值计算单元,用于从像素的个数中分别计算第一和第二平均信号和第一和第二最大信号。
35.根据权利要求34所述的场景改变检测器,其中,判决单元按照第一和第二平均值/最大值计算单元的第一和第二平均信号和第一和第二最大信号,输出场景改变信号。
36.根据权利要求34所述的场景改变检测器,其中,把像素的个数和另一个个数分别标准化在第一和第二范围之内。
37.根据权利要求36所述的场景改变检测器,其中,第一范围是1到100(包括1和100)之间的数值范围的N倍,和N是正数。
38.根据权利要求36所述的场景改变检测器,其中,第二范围是0到255之间的数值范围的N倍,和N是正数。
39.根据权利要求34所述的场景改变检测器,其中,当像素的个数处在1到100(包括1和100)之间的数值范围内时,像素的个数具有100的最大数。
40.根据权利要求34所述的场景改变检测器,其中,当像素的个数处在0到255(包括0和255)之间的数值范围内时,像素的另一个个数具有255的最大数。
41.根据权利要求21所述的场景改变检测器,其中,各自像素具有不同值的第二个数之一,和检测器还包括:
交叉相关系数计算单元,用于从与不同值的第二个数相对应的各自像素的各自个数中计算第一和第二视频信号之间的相关值。
42.根据权利要求41所述的场景改变检测器,其中,当将相关值与阈值相比较时,判决单元输出场景改变信号。
43.根据权利要求42所述的场景改变检测器,其中,当相关值小于阈值时,场景改变信号代表在第一和第二视频信号之间存在场景改变。
44.根据权利要求42所述的场景改变检测器,其中,当相关值大于阈值时,场景改变信号代表在第一和第二视频信号中存在标题插入信号或画中画信号。
45.根据权利要求21所述的场景改变检测器,其中,各自像素是分别形成与第一和第二视频信号相对应的帧或半帧的所有像素的一部分。
46.一种场景改变检测器,包括:
第一和第二直方图检测单元,用于形成色度或亮度彩色信号的直方图之间的相关信息,和从形成的相关信息中检测图像帧中与运动无关的场景改变;和
判决单元,用于按照检测的场景改变,输出场景改变信号。
47.一种用在场景改变检测器中的方法,该方法包括:
从第一和第二视频信号中分别计算具有相同值的各自像素的各自个数;和
按照第一和第二视频信号的像素的各自个数,输出场景改变信号。
48.根据权利要求47所述的方法,其中,各自个数包括具有不同值的像素的第二个数,和各自像素的个数的计算包括:
从与不同值的第二个数相对应的各自像素的各自个数中计算第一和第二视频信号之间的相关值。
49.根据权利要求47所述的方法,其中,场景改变信号的输出包括:
将相关值与阈值相比较,以输出代表第一和第二视频信号中场景改变和标题插入或画中画信号之一的场景改变信号。
50.一种用在场景改变检测器中的方法,该方法包括:
利用色度或亮度彩色信号的直方图之间的相关信息,检测图像帧中与运动无关的场景改变;和
按照检测的场景改变,输出场景改变信号。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020020039579A KR20040006065A (ko) | 2002-07-09 | 2002-07-09 | 장면전환검출장치 및 그 방법 |
KR39579/2002 | 2002-07-09 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006101631868A Division CN1984237A (zh) | 2002-07-09 | 2003-07-09 | 场景改变检测器及其方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1471306A true CN1471306A (zh) | 2004-01-28 |
Family
ID=29728781
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006101631868A Pending CN1984237A (zh) | 2002-07-09 | 2003-07-09 | 场景改变检测器及其方法 |
CNA031475086A Pending CN1471306A (zh) | 2002-07-09 | 2003-07-09 | 场景改变检测器及其方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2006101631868A Pending CN1984237A (zh) | 2002-07-09 | 2003-07-09 | 场景改变检测器及其方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20040008284A1 (zh) |
EP (1) | EP1381225A3 (zh) |
JP (2) | JP3810392B2 (zh) |
KR (1) | KR20040006065A (zh) |
CN (2) | CN1984237A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100391232C (zh) * | 2005-01-07 | 2008-05-28 | 智辉研发股份有限公司 | 数字影像闪光场景检测与消除方法 |
CN100435556C (zh) * | 2005-10-31 | 2008-11-19 | 台湾新力国际股份有限公司 | 照相机系统 |
CN101072342B (zh) * | 2006-07-01 | 2010-08-11 | 腾讯科技(深圳)有限公司 | 一种场景切换的检测方法及其检测系统 |
CN101277441B (zh) * | 2007-03-30 | 2011-04-06 | 索尼株式会社 | 信息处理装置和方法 |
CN104184925A (zh) * | 2014-09-11 | 2014-12-03 | 刘鹏 | 一种视频场景变化的检测方法 |
CN106358029A (zh) * | 2016-10-18 | 2017-01-25 | 北京字节跳动科技有限公司 | 一种视频图像处理方法和装置 |
CN108171153A (zh) * | 2017-12-26 | 2018-06-15 | 深圳Tcl新技术有限公司 | 场景变换检测方法、设备及计算机可读存储介质 |
CN109327655A (zh) * | 2017-07-31 | 2019-02-12 | 展讯通信(上海)有限公司 | 连续自动对焦方法及系统 |
CN109977738A (zh) * | 2017-12-28 | 2019-07-05 | 深圳Tcl新技术有限公司 | 一种视频场景分割判断方法、智能终端及存储介质 |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7219352B2 (en) * | 2002-04-15 | 2007-05-15 | Microsoft Corporation | Methods and apparatuses for facilitating processing of interlaced video images for progressive video displays |
KR20040008067A (ko) * | 2002-07-15 | 2004-01-28 | 삼성전자주식회사 | 화면간의 상관도를 이용한 화질 개선 회로 및 방법 |
US7643675B2 (en) * | 2003-08-01 | 2010-01-05 | Microsoft Corporation | Strategies for processing image information using a color information data structure |
US7030690B2 (en) * | 2004-02-12 | 2006-04-18 | Honeywell International, Inc. | Operational amplifier with selectable performance characteristics |
KR100612494B1 (ko) * | 2004-06-07 | 2006-08-14 | 삼성전자주식회사 | 칼러 영상의 채도 조절 장치 및 방법 |
JP3912548B2 (ja) * | 2004-11-04 | 2007-05-09 | 船井電機株式会社 | 光ディスク装置 |
US7880815B2 (en) * | 2005-01-10 | 2011-02-01 | Mavs Lab, Inc. | Method for detecting and eliminating flash scene in digital video |
US7532256B2 (en) * | 2005-01-25 | 2009-05-12 | Teresis Media Management | Methods and apparatus for detecting scenes in a video medium |
AU2006214892B2 (en) | 2005-02-16 | 2013-06-27 | Kt & G Co., Ltd | Pharmaceutical composition for the treatment or prevention of diseases involving obesity, diabetes, metabolic syndrome, neuro-degenerative diseases and mitochondria dysfunction diseases |
JP2007060169A (ja) | 2005-08-23 | 2007-03-08 | Sony Corp | 画像処理装置、画像表示装置および画像処理方法 |
JP4419933B2 (ja) | 2005-08-26 | 2010-02-24 | ソニー株式会社 | 画像処理装置、画像表示装置および画像処理方法 |
GB2438905B (en) * | 2006-06-07 | 2011-08-24 | Tandberg Television Asa | Temporal noise analysis of a video signal |
KR100812041B1 (ko) * | 2006-07-19 | 2008-03-10 | 주식회사 대우일렉트로닉스 | 개선된 장면 전환 검출 방법을 이용한 자동 인덱싱 방법 |
KR101359920B1 (ko) | 2007-04-03 | 2014-02-12 | 포항공과대학교 산학협력단 | 표시 장치의 구동 장치, 이를 포함하는 표시 장치 및 표시장치의 구동 방법 |
US20080247665A1 (en) * | 2007-04-04 | 2008-10-09 | Silicon Integrated Systems Corp. | Method and apparatus for dynamic contrast enhancement |
US20100088232A1 (en) * | 2008-03-21 | 2010-04-08 | Brian Gale | Verification monitor for critical test result delivery systems |
US20100104018A1 (en) * | 2008-08-11 | 2010-04-29 | New York University | System, method and computer-accessible medium for providing body signature recognition |
JP4609559B2 (ja) * | 2008-09-02 | 2011-01-12 | ソニー株式会社 | フィルタ装置、画像補正回路、画像表示装置および画像補正方法 |
KR101149522B1 (ko) * | 2008-12-15 | 2012-05-25 | 한국전자통신연구원 | 장면 전환 검출 시스템 및 방법 |
CN102333174A (zh) * | 2011-09-02 | 2012-01-25 | 深圳市万兴软件有限公司 | 一种视频图像处理方法和装置 |
US8971645B1 (en) * | 2012-05-18 | 2015-03-03 | Google Inc. | Video categorization using heterogeneous signals |
CN102932582B (zh) | 2012-10-26 | 2015-05-27 | 华为技术有限公司 | 实现运动检测的方法及装置 |
US9195892B2 (en) * | 2013-03-15 | 2015-11-24 | Arris Technology, Inc. | System for and method of detecting strobe using spatial features in video frames |
CN104811586B (zh) * | 2015-04-24 | 2018-01-16 | 福建星网物联信息系统有限公司 | 场景变换视频智能分析方法、装置、网络摄像机及监控系统 |
US20170004859A1 (en) * | 2015-06-30 | 2017-01-05 | Coursera, Inc. | User created textbook |
JP6557592B2 (ja) * | 2015-12-15 | 2019-08-07 | 日本放送協会 | 映像シーン分割装置及び映像シーン分割プログラム |
KR20180135075A (ko) | 2016-07-14 | 2018-12-19 | 삼성전자주식회사 | 크로마 인트라 예측 방법 및 그 장치 |
US10819882B2 (en) * | 2018-02-28 | 2020-10-27 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device and imaging apparatus |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05236458A (ja) * | 1992-02-20 | 1993-09-10 | Toshiba Corp | 動画像処理装置 |
US5719643A (en) * | 1993-08-10 | 1998-02-17 | Kokusai Denshin Denwa Kabushiki Kaisha | Scene cut frame detector and scene cut frame group detector |
US5805733A (en) * | 1994-12-12 | 1998-09-08 | Apple Computer, Inc. | Method and system for detecting scenes and summarizing video sequences |
JPH09130732A (ja) * | 1995-11-01 | 1997-05-16 | Matsushita Electric Ind Co Ltd | シーンチェンジ検出方法および動画像編集装置 |
US6219382B1 (en) * | 1996-11-25 | 2001-04-17 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for locating a caption-added frame in a moving picture signal |
JP3730740B2 (ja) * | 1997-02-24 | 2006-01-05 | 株式会社日立製作所 | 並列ジョブ多重スケジューリング方法 |
KR100249826B1 (ko) * | 1997-12-01 | 2000-03-15 | 정선종 | 디지털 동영상 데이터 자동분할장치 및 그 방법 |
AU2674499A (en) * | 1998-02-13 | 1999-08-30 | Fast Tv | Processing and delivery of audio-video information |
AU4239200A (en) * | 1999-04-16 | 2000-11-02 | Avid Technology, Inc. | Apparatus and method for generating and displaying histograms of color images for color correction |
JP2000324499A (ja) * | 1999-05-14 | 2000-11-24 | Fujitsu Ltd | 画像処理装置及びシーンチェンジ検出方法 |
KR100698106B1 (ko) * | 2000-03-07 | 2007-03-26 | 엘지전자 주식회사 | 엠펙(mpeg)압축 비디오 환경에서 계층적 혼합형장면 변화 검출 방법 |
FR2807902B1 (fr) * | 2000-04-17 | 2002-10-25 | Thomson Multimedia Sa | Procede de detection de changement de plan dans une succession d'images video |
US6995805B1 (en) * | 2000-09-29 | 2006-02-07 | Sonic Solutions | Method and system for scene change detection |
KR20020040503A (ko) * | 2000-11-24 | 2002-05-30 | 구자홍 | 동영상 비디오 스트림의 장면전환 검출방법 |
-
2002
- 2002-07-09 KR KR1020020039579A patent/KR20040006065A/ko not_active Application Discontinuation
-
2003
- 2003-05-22 EP EP20030011638 patent/EP1381225A3/en not_active Withdrawn
- 2003-07-03 US US10/611,953 patent/US20040008284A1/en not_active Abandoned
- 2003-07-09 JP JP2003272531A patent/JP3810392B2/ja not_active Expired - Fee Related
- 2003-07-09 CN CNA2006101631868A patent/CN1984237A/zh active Pending
- 2003-07-09 CN CNA031475086A patent/CN1471306A/zh active Pending
-
2006
- 2006-04-14 JP JP2006112547A patent/JP2006254486A/ja not_active Withdrawn
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100391232C (zh) * | 2005-01-07 | 2008-05-28 | 智辉研发股份有限公司 | 数字影像闪光场景检测与消除方法 |
CN100435556C (zh) * | 2005-10-31 | 2008-11-19 | 台湾新力国际股份有限公司 | 照相机系统 |
CN101072342B (zh) * | 2006-07-01 | 2010-08-11 | 腾讯科技(深圳)有限公司 | 一种场景切换的检测方法及其检测系统 |
CN101277441B (zh) * | 2007-03-30 | 2011-04-06 | 索尼株式会社 | 信息处理装置和方法 |
CN104184925A (zh) * | 2014-09-11 | 2014-12-03 | 刘鹏 | 一种视频场景变化的检测方法 |
WO2016037422A1 (zh) * | 2014-09-11 | 2016-03-17 | 刘鹏 | 一种视频场景变化的检测方法 |
CN106358029A (zh) * | 2016-10-18 | 2017-01-25 | 北京字节跳动科技有限公司 | 一种视频图像处理方法和装置 |
CN109327655A (zh) * | 2017-07-31 | 2019-02-12 | 展讯通信(上海)有限公司 | 连续自动对焦方法及系统 |
CN109327655B (zh) * | 2017-07-31 | 2020-12-22 | 展讯通信(上海)有限公司 | 连续自动对焦方法及系统 |
CN108171153A (zh) * | 2017-12-26 | 2018-06-15 | 深圳Tcl新技术有限公司 | 场景变换检测方法、设备及计算机可读存储介质 |
CN108171153B (zh) * | 2017-12-26 | 2021-10-01 | 深圳Tcl新技术有限公司 | 场景变换检测方法、设备及计算机可读存储介质 |
CN109977738A (zh) * | 2017-12-28 | 2019-07-05 | 深圳Tcl新技术有限公司 | 一种视频场景分割判断方法、智能终端及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP1381225A2 (en) | 2004-01-14 |
JP2004040808A (ja) | 2004-02-05 |
US20040008284A1 (en) | 2004-01-15 |
JP3810392B2 (ja) | 2006-08-16 |
EP1381225A3 (en) | 2004-05-06 |
CN1984237A (zh) | 2007-06-20 |
KR20040006065A (ko) | 2004-01-24 |
JP2006254486A (ja) | 2006-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1471306A (zh) | 场景改变检测器及其方法 | |
CN101262559B (zh) | 一种序列图像噪声消除的方法及装置 | |
US8582915B2 (en) | Image enhancement for challenging lighting conditions | |
KR100823371B1 (ko) | 화상 데이터 처리 장치 및 화상 데이터 처리 방법 | |
US20100027905A1 (en) | System and method for image and video encoding artifacts reduction and quality improvement | |
CN101626454B (zh) | 一种增强视频可视性的方法 | |
CN104335565A (zh) | 采用具有自适应滤芯的细节增强滤波器的图像处理方法 | |
CN1218561C (zh) | 对图象序列的噪声滤除 | |
US7734110B2 (en) | Method for filtering the noise of a digital image sequence | |
JP4118906B2 (ja) | 映像信号処理装置及び映像信号処理方法 | |
EP1863283B1 (en) | A method and apparatus for frame interpolation | |
CN1193618C (zh) | 用于运动估算的预处理方法 | |
WO2006131866A2 (en) | Method and system for image processing | |
CN1476234A (zh) | 用于检测信号的频率特性的装置和方法 | |
CN1874421A (zh) | 一种图像序列帧间闪烁噪声消除装置 | |
CN106303366B (zh) | 一种基于区域分类编码的视频编码的方法及装置 | |
JPH07143333A (ja) | 画像信号のa/d変換回路 | |
CN114897720A (zh) | 一种图像增强装置及其方法 | |
JP2008294706A (ja) | 映像信号処理装置、映像信号処理方法、映像信号処理方法のプログラム及び映像信号処理方法のプログラムを記録した記録媒体 | |
CN1253016C (zh) | 图像处理装置 | |
US20080226166A1 (en) | Image signal processing device, image signal processing method and image signal processing program product | |
JP5179433B2 (ja) | ノイズリダクション装置、ノイズリダクション方法、および動画再生装置 | |
JP2003333370A (ja) | 信号処理装置 | |
KR101780444B1 (ko) | 영상 신호의 노이즈 제거 방법 | |
JP2003143605A (ja) | ブロッキングアーチファクト検出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |