CN101241553A

CN101241553A - 一种识别特定信息起点和终点的方法和装置

Info

Publication number: CN101241553A
Application number: CNA2008100567740A
Authority: CN
Inventors: 蒋亚洪
Original assignee: BEIJING LIUWEI SHIJI NETWORK TECHNOLOGIES Co Ltd
Current assignee: BEIJING LIUWEI SHIJI NETWORK TECHNOLOGIES Co Ltd
Priority date: 2008-01-24
Filing date: 2008-01-24
Publication date: 2008-08-13

Abstract

本发明实施例公开了一种识别特定信息起点和终点的方法，包括步骤：获取视频信息流中的切变帧；判断所述切变帧是否带有特定信息特征，如果是，则所述切变帧所在的镜头段为特定信息段；获取所述特定信息段的起点和终点。还提供了一种识别特定信息起点和终点的装置，包括：切变帧获取单元，第一特定信息段判断单元，特定信息段起点和终点获取单元。与现有技术相比，本发明实施例具有以下优点：本发明的技术方案由于是仅仅只判断切变帧是否带有特定信息特征的方式来识别特定信息段，而不是对于每个视频帧都进行特定信息特征的识别，节约了运算量。因此，运算速度快，效率高。再者，本发明的方法能够实现更精确的进行特定信息起点和终点的识别。

Description

一种识别特定信息起点和终点的方法和装置

技术领域

本发明涉及图像处理技术领域，特别是涉及识别特定信息起点和终点的方法和装置。

背景技术

现在，随着各种各样的媒体的广泛发展，特别借助于图像传递信息的技术和广场日益发达。消费者和媒体的经营者都从中获得了很大的益处。但是，现在最流行的媒体基本上都要播放赞助商的广告。但是由于各种原因，在某些场合，基于用户的需要，想要去除其中的广告信息。现有技术中从视频信息中去除广告技术方案主要有以下三种：

一种识别广告的技术是：广告需要在较短的时间段中传递他们的消息。这就导致在商业广播中频繁重复产品名称、公司名称和其它标识特征。脚本信息能通过检测在广告中频繁出现的词语而用于检测广告。这也能用来将个别广告与其它广告区分开。一旦各个广告已经被识别，就可以将对应于每个广告的脚本信息存储在数据库中，以识别随后广播中的广告，或者提供用于在数据库中搜索特定广告的搜索机制。这种技术的缺点在于，其准确性依赖于广告内容本身。而广告内容本身差别很大，相应地，其准确性就很受影响。

另一种技术是基于接收广播数据流后，识别信息中的广告的方法是识别信息中的服务信息的方法来识别信息中的广告，进而获得广告的起点和终点。所述服务信息主要包含了当前节目的有关特征，如内容、时间、类型等。这种技术需要依据节目数据提供商在其中插入的服务信息，不具有适用的普遍性。

还有一种识别广告的技术是通过预先存储下广告图像及其图像特征，在后来的播放过程中，不断地存储当前正在播放的图像，并且与已经存储的图像进行对比，如果图像特征相符合，则会认为是当前播放的图像是广告内容。这种技术的缺陷是显而易见的，除非所有的广告都被事先存储下来，否则就会有大量的遗漏。而且，根据这种技术来进而获得广告的起点和终点相应地也就存在着上述问题。

在进行本发明创造过程中，发明人发现现有技术中至少存在如下问题：

识别广告的起点和终点过程中，需要对于包含广告的数据流进行大量的运算，其运算过程要依赖于已经知道的广告信息本身，如其图像特征、服务信息或者其中的文字信息等，如果这些信息由于实际中各种各样的原因，导致不能获得的情况下，则不能进行广告识别。

发明内容

有鉴于此，本发明一个或多个实施例的目的在于提供一种识别特定信息的方法和装置，以实现对于特定信息的起点和终点的识别。

为解决上述问题，本发明实施例提供了一种识别特定信息起点和终点的方法，包括步骤：

获取视频信息流中的切变帧；

判断所述切变帧是否带有特定信息特征，如果是，则所述切变帧所在的镜头段为特定信息段；

获取所述特定信息段的起点和终点。

还提供了一种识别特定信息起点和终点的装置，包括：

切变帧获取单元，用于：获取视频信息流中的切变帧；

第一特定信息段判断单元，用于：判断所述切变帧是否带有特定信息特征，如果是，则所述切变帧所在的镜头段为特定信息段；

特定信息段起点和终点获取单元，用于：获取所述特定信息段的起点和终点。

与现有技术相比，本发明实施例具有以下优点：

首先，利用切变帧带有其所在的镜头段相同的特定信息特征的规律，通过获取视频信息流中的切变帧后，判断所述切变帧是否带有特定信息特征，就可以知道所述切变帧所在的镜头段是否带有特定信息特征，对于带特定信息特征的镜头段，通过获取其起点和终点，就相应地得到了视频信息流中的特定信息的起点和终点。

其次，本发明的技术方案由于是仅仅只判断切变帧是否带有特定信息特征的方式来识别特定信息段，而不是对于每个视频帧都进行特定信息特征的识别，节约了很大的运算量。因此，运算速度快，效率高。

再次，本发明的技术方案不需要事先获得已经特定信息的图像特征后与当前的视频帧图像进行对比，而是通过图像中普遍具有的特定信息特征的共性，来对达到对带特定信息特征的镜头的识别，进而识别特定信息的起点和终点。

附图说明

图1所示，是本发明的识别特定信息起点和终点的方法的第一个实施例的流程图；

图2所示，是本发明的识别特定信息起点和终点的方法的第二个实施例的流程图；

图3所示，是本发明的识别特定信息起点和终点的装置的框图；

图4所示，是本发明的装置的实施例二的框图；

图5所示，是本发明的装置的实施例三的框图。

具体实施方式

下面结合附图对本发明实施例做进一步的详细阐述。

为了更好地理解本发明的实施例，下面介绍一下与本发明有关的基本概念和原理。

首先，以广告这种特定信息为例，进行介绍。要从一段电视节目的视频中筛选出广告信息段。就需要区别广告信息与非广告信息。通常的电视节目都是通过摄像机拍摄，或者是通过软件制作的。但是他们呈现出来的节目都可以区别为长镜头节目和短镜头节目。

长镜头：指在一段持续时间内连续摄取的、占用胶片较长的镜头。短镜头：是相对于长镜头而言的，持续拍摄的时间比较短的镜头。镜头切变：指两个镜头直接连接在一起，中间没有任何非线编效果(淡入淡出)。

镜头段：两个时间上连续的切变帧之间的视频帧构成一个镜头段，每个镜头段的开头是一个切变帧，其他部分是非切变帧。

本发明的实施例是要根据非广告节目与广告节目的拍摄镜头的差异，从一段电视节目的视频中筛选出广告信息段。也就是说：通过将视频看作是一系列镜头的集合。包括长镜头和短镜头节目，本发明就是从某段视频中沿时间轴进行分割，识别出其中的广告节目，然后从中选出广告节目的视频段。

统计直方图法：利用图像的像素的特征统计数据来比较静态图片的方法，也是直方图法的基本算法。

边缘点数直方图是在统计直方图基础之上的一种符合人眼视觉特征的增强算法，是提取图像的边缘特征进行统计比较。

本发明应用和借鉴了以上技术原理。

直方图法是一种静态图片的处理方法，用于提取图像特征有着效率高的优点，但是对颜色特征相似但布局不同的图像无法识别。

视频的切变检测和图标、字幕段识别就是主要基于比统计直方图法来进行的。但是根据电视节目的画面特征，进行了分区域统计和比较，以能够区分所有切变镜头和筛选出非广告镜头。

通过上述的描述，所属领域的技术人员可以明白，对于广告或者其他的特定信息，都可以采用本发明的各个实施例的技术方案达到相应的技术效果，因此，都应该在本发明的保护范围之内。

如图1所示，是本发明的识别特定信息起点和终点的方法的第一个实施例的流程图，包括步骤：

S101、获取视频信息流中的切变帧；

S102、判断所述切变帧是否带有特定信息特征，如果是，进入步骤S103；如果否，则所述切变帧不带有特定信息特征，不进行处理；

S103、则所述切变帧所在的镜头段为特定信息段，进入步骤S104；

S104、获取所述特定信息段的起点和终点。

利用本发明的实施例，能够带来如下优点：

其中，上述实施例中，所述判断所述切变帧是否带有特定信息特征可以具体为：

对所述切变帧的镜头画面的字幕进行二值化处理；

根据所述二值化处理结果，统计得到所述字幕区域的直方图；

判断所述字幕特征是否在已知的字幕特征范围内，如果否，则所述切变帧带有特定信息特征，如果是，则所述切变帧不带有特定信息特征。

使用基于纹理特征的方法判断所述切变帧是否带有特定信息特征。

其中，上述实施例中，在所述获取所述特定信息段的起点和终点步骤之前，还可以包括步骤：

判断所述切变帧所在的镜头段是否符合短镜头特征，如果是，则所述切变帧所在的镜头段是特定信息段。

通过上述步骤，可以实现对于已经进行了二值化处理后进行特定信息特征识别的切变帧，再进行一次短镜头识别，进一步从中将可能的非特定信息段排除，大大提高了对于视频信息流的特定信息特征识别的准确性。

其中，上述实施例中，还可以包括步骤：

如果所述特定信息段在时间上连续，则将所述特定信息段合并。

其中，上述实施例中，所述获取视频信息流中的切变帧步骤可以具体为：

将当前视频帧与其相邻的视频帧中的台标部分进行位图色彩的累积距离比较，得到比较结果一；

如果所述的比较结果一是小于或等于某阀值，则所述当前视频帧为切变帧。

将前后视频帧中字幕区域的统计直方图进行比较，得到比较结果二；

如果所述的比较结果二是小于或等于某阀值，则所述当前视频帧为切变帧。

其中，上述实施例中，在所述获取切变帧的步骤中，如果所述的两个比较结果中有一个大于指定的阀值的，则所述当前视频帧不是切变帧。

其中，上述实施例中，所述特定信息可以为但不限于广告，所述特定信息特征可以为但不限于广告特征，所述特定信息段可以为但不限于广告段。

如图2所示，是本发明的识别特定信息起点和终点的方法的第二个实施例的流程图，包括步骤：

首先，对于某段视频进行切变帧检测，包含：

S201、读取媒体流文件；

S202、对于媒体流中的每个视频帧，将前后视频帧中的台标部分进行位图色彩的累积距离比较，并将前后视频帧中字幕区域的统计直方图进行比较；

S203、如果上述的两个比较的结果中有一个大于指定的阀值，则进入步骤S204中；如果比较的结果是小于或等于某阀值，则进入步骤S205；阀值的大小，可以根据实际的视频流自身的特性以及技术方案需要的精确度和实现的复杂程度，进行具体的调整，其数值本身的确定对于所属领域的技术人员而言，是显而易见的。

S204、则确定当前视频帧为切变帧；

S205、则确定当前视频帧为非切变帧，为某个镜头段内的视频帧，不进行处理。

上述的比较识别是为后面的非广告段的识别做准备，之后的视频非广告段识别步骤处理是针对连续两个这样的切变帧构成的镜头段进行的。然后，在其他的实施例中，也可以不进行上述的视频切变帧识别，但是可能会增加后续的非广告段识别的工作量。从而降低了对于广告段起点和终止点识别处理的效率。因为以台标与字幕作为区分特征，就不以全图的特征进行比较。

其次，可以在上述切变检测的步骤之后，进行非广告段识别：

对于前述步骤中得到的切变帧进行以下处理，当然，如果不先进行切变帧检测，则需要对每个镜头段内的每一视频帧逐个进行下述处理：

S206、对当前切变帧的镜头画面中的字幕区域，进行特定灰度值的二值化处理后，统计得到所述字幕区域的直方图。具体的灰度值可以根据实际需要而定，这是所属领域的技术人员所能公知的；

S207、根据所述字幕区域的直方图，判断所述字幕特征是否在已知字幕特征范围内，如果是，进入步骤S208，否则，进入步骤S209；对于本发明的各个实施例使用基于颜色特征的统计方法来进行非广告段的识别，效率比较高。用基于纹理特征的方法也可以达到本实施例的目的。

S208、确定所述切变帧所在的镜头段为有字幕非广告段，如新闻或电视剧等，不进行进一步处理；

S209、则所述切变帧带有广告特征，确定所述切变帧所在的镜头段为广告段。

如果上述步骤是在没有进行切变帧检测的情况下进行的，则对每个镜头段内的每一视频帧逐个进行上述处理，不同的是，在根据字幕区域直方图得到的判断结果是每一个视频帧自身是否为广告段。

在上述非广告段识别的步骤后，对于可能出现的各个广告段在时间上连续的情况，进行广告段合并：

S210、对于通过切变检测得到的所有镜头段，排除前述步骤S208中识别出的非广告段；

S211、根据统计的短镜头时间特征，对于步骤S210中余下的镜头段，进行短镜头排除，将非短镜头特征的镜头段排除。这是由于广告视频的特征所决定的，根据大量的统计结果，表明大部分广告信息流都是短镜头构成，且切变镜头较多，这是我们进行短镜头处理的依据所在。由于在步骤S207是根据画面颜色特征排除，考虑到画面颜色排除可能的误差，因此，在本步骤中就根据短镜头的时间特征来进行短镜头排除。因为根据字幕和台标分割的镜头段的特征，如字幕并不是连续的，这样两个字幕之间的镜头段没有被排除；

其中，在其他的实施例中，所述短镜头时间特征可以先进行统计，也可以在此进行，还可以由使用者来设定。

S212、将进行了画面颜色排除和短镜头特征排除的镜头段合并；

S213、将步骤S212中的合并后的所述镜头段的起点终点分别作为广告信息流的起点和终点。比如两个电视节目之间有5分钟广告时间，10个广告。这5分钟的视频信息流的起始帧时间点和结束帧时间点就是所述广告信息流的起点和终点。

其中，上述实施例中，关于切变检测对直方图算法的改进：将图像划分为16块，是为了加入了图像的区域形状特性的比较，是针对一般直方图算法对颜色特征相似但布局不同的图像无法识别的一种改进。二值化处理是实现快速比较的一种优化。

如图3所示，是本发明的识别特定信息起点和终点的装置的框图，包括：

切变帧获取单元301，用于：获取视频信息流中的切变帧；

第一特定信息段判断单元302，用于：判断所述切变帧是否带有特定信息特征，如果是，则所述切变帧所在的镜头段为特定信息段；

特定信息段起点和终点获取单元303，用于：获取所述特定信息段的起点和终点。

其中，在上述实施例中，所述第一特定信息段判断单元具体为：

二值化处理单元，用于：对所述切变帧的镜头画面的字幕进行二值化处理；

直方图统计单元，用于：根据所述二值化处理结果，统计得到所述字幕区域的直方图；

特定信息特征判断单元，用于：判断所述字幕特征是否在已知的字幕特征范围内，如果否，则所述切变帧带有特定信息特征，如果是，则所述切变帧不带有特定信息特征。

纹理特征判断单元，用于：使用基于纹理特征的方法判断所述切变帧是否带有特定信息特征。

其中，如图4所示，是本发明的装置的实施二，在上述实施例中，为了实现更精确的特定信息段识别，还可以包括：

第二特定信息段判断单元401，用于：对于第一特定信息段判断单元判断得到的所述特定信息段，进一步判断是否符合短镜头特征，如果是，则所述切变帧所在的镜头段是特定信息段。

其中，如图5所示，本发明的装置的实施例三，在上述实施例中，为了获取多个在时间上连接的特定信息段的起点和终点，还可以包括：

特定信息段合并单元501，用于：如果所述特定信息段在时间上连续，则将所述特定信息段合并。

其中，在上述实施例中，所述切变帧获取单元具体为：

第一比较子单元，用于：将当前视频帧与其相邻的视频帧中的台标部分进行位图色彩的累积距离比较，得到比较结果一；

第二比较子单元，用于：将前后视频帧中字幕区域的统计直方图进行比较，得到比较结果二；

切变帧获取子单元，用于：如果所述的两个比较结果是小于或等于某阀值，则所述当前视频帧为切变帧。

通过以上的实施方式的描述，所属领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上所述的本发明实施方式，并不构成对本发明保护范围的限定。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims

1、一种识别特定信息起点和终点的方法，其特征在于，包括步骤：

获取视频信息流中的切变帧；

判断所述切变帧是否带有特定信息特征，如果是，则确定所述切变帧所在的镜头段为特定信息段；

获取所述特定信息段的起点和终点。

2、如权利要求1所述的识别特定信息起点和终点的方法，其特征在于，所述判断所述切变帧是否带有特定信息特征具体为：

对所述切变帧的镜头画面的字幕进行二值化处理；

3、如权利要求1所述的识别广告起点和终点的方法，其特征在于，所述判断所述切变帧是否带有特定信息特征具体为：

4、如权利要求1所述的识别广告起点和终点的方法，其特征在于，在所述获取所述特定信息段的起点和终点步骤之前，还包括步骤：

5、如权利要求1或4所述的识别特定信息起点和终点的方法，其特征在于，还包括步骤：

6、如权利要求1所述的识别特定信息起点和终点的方法，其特征在于，所述获取视频信息流中的切变帧步骤具体为：

7、如权利要求1所述的识别特定信息起点和终点的方法，其特征在于，所述获取视频信息流中的切变帧步骤具体为：

8、如权利要求6或7所述的识别特定信息起点和终点的方法，其特征在于，如果所述比较结果一或所述比较结果二大于指定的阀值的，则所述当前视频帧不是切变帧。

9、如权利要求1-4、6任一项所述的识别特定信息起点和终点的方法，其特征在于，所述特定信息为广告，所述特定信息特征为广告特征，所述特定信息段为广告段。

10、一种识别特定信息起点和终点的装置，其特征在于，包括：

切变帧获取单元，用于：获取视频信息流中的切变帧；

11、如权利要求10所述的识别特定信息起点和终点的装置，其特征在于，所述第一特定信息段判断单元具体为：

12、如权利要求10所述的识别特定信息起点和终点的装置，其特征在于，所述第一特定信息段判断单元具体为：

13、如权利要求10所述的识别特定信息起点和终点的装置，其特征在于，还包括：

第二特定信息段判断单元，用于：对于第一特定信息段判断单元判断得到的所述特定信息段，进一步判断是否符合短镜头特征，如果是，则所述切变帧所在的镜头段是特定信息段。

14、如权利要求10或13所述的识别特定信息起点和终点的装置，其特征在于，还包括：

特定信息段合并单元，用于：如果所述特定信息段在时间上连续，则将所述特定信息段合并。

15、如权利要求10所述的识别特定信息起点和终点的装置，其特征在于，所述切变帧获取单元具体为：

16、如权利要求10-13、15任一项所述的识别特定信息起点和终点的装置，其特征在于，所述特定信息为广告，所述特定信息特征为广告特征，所述特定信息段为广告段。