CN101389029A - 一种视频图像编码和检索的方法及装置 - Google Patents

一种视频图像编码和检索的方法及装置 Download PDF

Info

Publication number
CN101389029A
CN101389029A CN 200810224606 CN200810224606A CN101389029A CN 101389029 A CN101389029 A CN 101389029A CN 200810224606 CN200810224606 CN 200810224606 CN 200810224606 A CN200810224606 A CN 200810224606A CN 101389029 A CN101389029 A CN 101389029A
Authority
CN
China
Prior art keywords
average brightness
macro block
frame picture
frame
brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200810224606
Other languages
English (en)
Other versions
CN101389029B (zh
Inventor
王浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanxi Vimicro Technology Co Ltd
Original Assignee
Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vimicro Corp filed Critical Vimicro Corp
Priority to CN 200810224606 priority Critical patent/CN101389029B/zh
Publication of CN101389029A publication Critical patent/CN101389029A/zh
Application granted granted Critical
Publication of CN101389029B publication Critical patent/CN101389029B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供了一种视频图像编码和检索的方法及装置,方法包括:步骤一,对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;步骤二,在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;步骤三,在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。本发明能够排除图像编码噪声的干扰,准确检测出编码图像中的运动目标。

Description

一种视频图像编码和检索的方法及装置
技术领域
本发明涉及一种视频处理技术,特别是涉及一种视频图像编码和检索的方法及装置。
背景技术
随着网络化数字视频监控技术的发展,越来越多的用户采用了带有视频压缩功能的网络摄像机。网络摄像机和网络监控系统也由原来的单纯摄取、传送、保存图像,慢慢发展到支持一些简单的分析和处理功能,例如运动检测和报警功能。一般网络摄像机都是由其中的视频压缩模块(例如MPEG4,H.264,AVS等)将捕获的监控视频画面压缩为码率较低的编码视频流,通过网络传送到监控中心的服务器上。服务器则负责对各个网络摄像机发送过来的视频流进行分析,并在满足某些条件的时候发送报警信号给管理员。
为了能够基于视频压缩码流实现运动检测和报警,现有的技术有多种实现方法。最简单的方法是直接将压缩码流做解码,还原出视频画面,然后基于帧差或光流场等技术检测各帧之间是否存在运动目标,以及提取运动目标的大小、运动方向等参数。这种方法主要的问题是,解码过程需要耗费大量的运算量,这直接限制了每台服务器允许接入网络摄像机的数量,增加了网络监控系统的成本。
另一种方法运算复杂度稍微简单一些,它并不需要将整个图像都解出来,只需要从码流中解析出各个宏块的运动向量等参数。基于各个宏块的运动向量等信息,可以粗略判断出各个区域是否存在运动目标。这个方法的问题在于,当画面中噪声成分比较多的时候,噪声会对视频压缩过程中计算运动向量的搜索算法造成干扰,使得运动向量也不能准确地反映目标的运动情况。最典型的例子是,画面中没有任何运动目标,但是由于噪声较大,很多宏块的运动向量都非零。这将直接导致运动检测算法做出误报警。
发明内容
本发明的目的是提供一种视频图像编码和检索的方法及装置,能够排除图像编码噪声的干扰,准确检测出编码图像中的运动目标,解决现有视频图像监测技术容易产生误报警的技术问题。
为了实现上述目的,一方面,提供了一种视频图像编码和检索的方法,包括:
步骤一,对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
步骤二,在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
步骤三,在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
优选地,上述的方法中,所述步骤三中,所述根据所述亮度平均值进行运动目标的检测具体包括:将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较,如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
优选地,上述的方法中,在所述步骤三之前还包括:在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行步骤三,如果所述运动参数为零,则检索下一帧画面。
优选地,上述的方法中,在所述步骤二中,所述亮度平均值加入到所述编码数据的图像头扩展数据定义区。
优选地,上述的方法中,所述图像头扩展数据定义区还包括有代表所述亮度平均值存在的存在标识。
优选地,上述的方法中,所述图像头扩展数据定义区为用户数据区。
优选地,上述的方法中,在所述步骤二中,所述亮度平均值以原始值进行编码并加入到所述编码数据中。
优选地,上述的方法中,在所述步骤二中,所述亮度平均值以联合图像专家组JPEG的直流分量DC系数预测的方式进行编码。
还提供了一种视频图像编码和检索的装置,包括:
计算模块,用于:对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
编码模块,用于:在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
亮度检索模块,用于:在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
优选地,上述的装置中,所述亮度检索模块具体包括:
比较单元,用于:将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较;
判断单元,用于:如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
优选地,上述的装置中,还包括:运动参数检索模块,用于:在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行所述检索模块的功能,如果所述运动参数为零,则检索下一帧画面。
本发明实施例至少存在以下技术效果:
1)编码器在对一帧图像进行编码时,通过简单的计算,可以求出各宏块的亮度平均值,通过特定的扩展语法结构,在码流中可以方便简单的嵌入这些亮度平均值信息。
2)解码器不需要进行修改,即可正常解出图像画面。
3)基于编码视频流的检测模块,可以提取出每帧中各宏块的平均值,直接或辅助用来做运动检测和报警。
附图说明
图1为本发明实施例提供的方法的步骤流程图;
图2为本发明实施例提供的装置的结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对具体实施例进行详细描述。
现有的视频编码方法中,因为用到帧间预测及运动补偿等技术,所以不能很方便的从编码后的编码数据中提取出各个宏块的亮度平均值。而这样的亮度平均值信息对运动检测算法会有很大帮助。例如,在背景技术所举的例子中,噪声大导致运动向量非零,但此时若辅以宏块的亮度平均值信息,将当前宏块亮度平均值与以往图像中对应的宏块亮度平均值相比较,则会排除一些干扰,获得更为准确的结果。
因此,本发明在视频编码时,将每帧中各宏块的亮度平均值嵌入到视频流中,作为附加信息。解码器在解码过程中可以完全忽略这些信息而不影响解码。检测模块可以读取这些附加信息,得到各宏块的亮度平均值,直接或辅助做运动检测。
图1为本发明实施例提供的方法的步骤流程图,如图所示,本发明实施例的种视频图像编码和检索的方法,包括:
步骤101,对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
步骤102,在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
步骤103,在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
其中,步骤103中,所述根据所述亮度平均值进行运动目标的检测具体包括:将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较,如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
当然,以上方法也可以将各宏块的亮度平均值信息与现有的其他运动检测方法(例如采用运动向量进行运动检测)相结合,来提高运动检测的准确率,降低误报和错报的几率。结合后的方法是在所述步骤103之前加入步骤:在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行步骤103,如果所述运动参数为零,则检索下一帧画面。
在步骤102中,所述亮度平均值是加入到所述编码数据的图像头扩展数据定义区。本发明在每帧图像头的扩展数据定义(例如用户数据区)中,嵌入如下语法结构:
{宏块亮度均值存在的标志;
如果宏块亮度均值存在,则
{依次列出各个宏块的亮度均值;}}
计算宏块(16x16像素)的亮度均值是公知的方法,在此不做详述。计算方法比较简单,视频编码器容易实现。
当然,依据运动检测精度的需要,也可以将各个块(8x8像素)的均值嵌入码流中,但这会增加码流的大小。
步骤103中,在做运动检测时,将各宏块的亮度均值从码流中提取出来,与以往图像进行对比。如果某个宏块的亮度均值变化程度大于某个事先设定的阈值,则认为该宏块发生了运动。
在所述步骤102中,所述亮度平均值以原始值进行编码,或者所述亮度平均值以联合图像专家组JPEG的直流分量DC系数预测的方式进行编码。
图2为本发明实施例提供的装置的结构图,如图所示,本发明实施例提供的视频图像编码和检索的装置包括:
计算模块201,用于:对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
编码模块202,用于:在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
亮度检索模块203,用于:在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
还可以包括:
运动参数检索模块204,用于:在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行所述检索模块的功能,如果所述运动参数为零,则检索下一帧画面。
其中,所述亮度检索模块可以具体包括:
比较单元,用于:将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较;
判断单元,用于:如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
由上可知,本发明实施例具有以下特点和优势:
1)编码器在对一帧图像进行编码时,通过简单的计算,可以求出各宏块的亮度平均值。根据上述扩展语法结构,在码流中可以方便简单的嵌入这些信息。
2)解码器不需要进行修改,即可正常解出图像画面。
3)基于编码视频流的检测模块,可以提取出每帧中各宏块的平均值,直接或辅助用来做运动检测和报警。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (11)

1.一种视频图像编码和检索的方法,其特征在于,包括:
步骤一,对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
步骤二,在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
步骤三,在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
2.根据权利要求1所述的方法,其特征在于,所述步骤三中,所述根据所述亮度平均值进行运动目标的检测具体包括:
将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较,如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
3.根据权利要求2所述的方法,其特征在于,在所述步骤三之前还包括:
在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行步骤三,如果所述运动参数为零,则检索下一帧画面。
4.根据权利要求1所述的方法,其特征在于,在所述步骤二中,所述亮度平均值加入到所述编码数据的图像头扩展数据定义区。
5.根据权利要求4所述的方法,其特征在于,所述图像头扩展数据定义区还包括有代表所述亮度平均值存在的存在标识。
6.根据权利要求5所述的方法,其特征在于,所述图像头扩展数据定义区为用户数据区。
7.根据权利要求1所述的方法,其特征在于,在所述步骤二中,所述亮度平均值以原始值进行编码并加入到所述编码数据中。
8.根据权利要求1所述的方法,其特征在于,在所述步骤二中,所述亮度平均值以联合图像专家组JPEG的直流分量DC系数预测的方式进行编码。
9.一种视频图像编码和检索的装置,其特征在于,包括:
计算模块,用于:对于摄像机所拍摄的每帧画面,计算该帧画面中各宏块的亮度平均值;
编码模块,用于:在每帧画面的编码数据中加入该帧各宏块的所述亮度平均值;
亮度检索模块,用于:在检索过程中,提取所述亮度平均值,根据所述亮度平均值进行运动目标的检测。
10.根据权利要求9所述的装置,其特征在于,所述亮度检索模块具体包括:
比较单元,用于:将当前帧图像各宏块的所述亮度平均值与以往帧的对应宏块的亮度平均值进行比较;
判断单元,用于:如果当前正比较的当前宏块的亮度平均值与对应宏块的亮度平均值的差值超出预定阈值,则认为当前宏块具有运动目标。
11.根据权利要求9所述的装置,其特征在于,还包括:
运动参数检索模块,用于:在检索过程中,提取编码数据中的当前帧画面的运动参数,如果所述运动参数不为零,则执行所述检索模块的功能,如果所述运动参数为零,则检索下一帧画面。
CN 200810224606 2008-10-21 2008-10-21 一种视频图像编码和检索的方法及装置 Active CN101389029B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200810224606 CN101389029B (zh) 2008-10-21 2008-10-21 一种视频图像编码和检索的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200810224606 CN101389029B (zh) 2008-10-21 2008-10-21 一种视频图像编码和检索的方法及装置

Publications (2)

Publication Number Publication Date
CN101389029A true CN101389029A (zh) 2009-03-18
CN101389029B CN101389029B (zh) 2012-01-11

Family

ID=40478155

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200810224606 Active CN101389029B (zh) 2008-10-21 2008-10-21 一种视频图像编码和检索的方法及装置

Country Status (1)

Country Link
CN (1) CN101389029B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012027893A1 (en) * 2010-09-02 2012-03-08 Intersil Americas Inc. Systems and methods for video content analysis
CN102509083A (zh) * 2011-11-19 2012-06-20 广州大学 一种肢体冲突事件的检测方法
WO2012079377A1 (zh) * 2010-12-17 2012-06-21 上海合合信息科技发展有限公司 自动开关摄像单元的方法及系统
CN101931738B (zh) * 2009-06-19 2013-02-27 智原科技股份有限公司 动作侦测方法与动作侦测器
CN103631786A (zh) * 2012-08-22 2014-03-12 腾讯科技(深圳)有限公司 一种视频文件的聚类方法和装置
CN103744993A (zh) * 2014-01-22 2014-04-23 苏州科达科技股份有限公司 一种录像文件的存储与检索方法及其存储与检索装置
CN103761882A (zh) * 2013-11-18 2014-04-30 广西师范学院 一种自动十字路口红绿灯控制装置及应用
CN103927736A (zh) * 2013-01-14 2014-07-16 安凯(广州)微电子技术有限公司 一种基于jpeg格式的图像匹配方法和装置
US8824554B2 (en) 2010-09-02 2014-09-02 Intersil Americas LLC Systems and methods for video content analysis
CN104702964A (zh) * 2015-03-30 2015-06-10 北京三好互动教育科技有限公司 一种图像处理方法及装置
CN106131502A (zh) * 2016-08-16 2016-11-16 深圳英飞拓科技股份有限公司 用于管廊隧道的视频监控方法及装置
CN106507110A (zh) * 2016-12-06 2017-03-15 北京华夏电通科技有限公司 庭审证人画面及视频运动画面保护方法、装置和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3861607B2 (ja) * 2001-02-22 2006-12-20 セイコーエプソン株式会社 画像信号復号装置
CN100536573C (zh) * 2004-01-16 2009-09-02 北京工业大学 基于方向的dc预测方法及用于视频编码的帧内预测方法
CN101208954B (zh) * 2004-03-08 2010-09-08 Nxp股份有限公司 具有可变压缩比和用于存储及检索参考帧数据的缓冲器的视频解码器以及视频解码方法
CN100426859C (zh) * 2006-05-11 2008-10-15 蓝汛网络科技(北京)有限公司 针对网络视频的选择性加密算法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101931738B (zh) * 2009-06-19 2013-02-27 智原科技股份有限公司 动作侦测方法与动作侦测器
US8824554B2 (en) 2010-09-02 2014-09-02 Intersil Americas LLC Systems and methods for video content analysis
WO2012027893A1 (en) * 2010-09-02 2012-03-08 Intersil Americas Inc. Systems and methods for video content analysis
US9609348B2 (en) 2010-09-02 2017-03-28 Intersil Americas LLC Systems and methods for video content analysis
WO2012079377A1 (zh) * 2010-12-17 2012-06-21 上海合合信息科技发展有限公司 自动开关摄像单元的方法及系统
CN102509083A (zh) * 2011-11-19 2012-06-20 广州大学 一种肢体冲突事件的检测方法
CN103631786A (zh) * 2012-08-22 2014-03-12 腾讯科技(深圳)有限公司 一种视频文件的聚类方法和装置
CN103631786B (zh) * 2012-08-22 2017-04-12 腾讯科技(深圳)有限公司 一种视频文件的聚类方法和装置
CN103927736A (zh) * 2013-01-14 2014-07-16 安凯(广州)微电子技术有限公司 一种基于jpeg格式的图像匹配方法和装置
CN103761882A (zh) * 2013-11-18 2014-04-30 广西师范学院 一种自动十字路口红绿灯控制装置及应用
CN103761882B (zh) * 2013-11-18 2016-04-27 广西师范学院 一种自动十字路口红绿灯控制装置及应用
CN103744993A (zh) * 2014-01-22 2014-04-23 苏州科达科技股份有限公司 一种录像文件的存储与检索方法及其存储与检索装置
CN104702964A (zh) * 2015-03-30 2015-06-10 北京三好互动教育科技有限公司 一种图像处理方法及装置
CN106131502A (zh) * 2016-08-16 2016-11-16 深圳英飞拓科技股份有限公司 用于管廊隧道的视频监控方法及装置
CN106131502B (zh) * 2016-08-16 2020-03-24 深圳英飞拓科技股份有限公司 用于管廊隧道的视频监控方法及装置
CN106507110A (zh) * 2016-12-06 2017-03-15 北京华夏电通科技有限公司 庭审证人画面及视频运动画面保护方法、装置和系统
CN106507110B (zh) * 2016-12-06 2019-11-12 北京华夏电通科技有限公司 庭审证人画面及视频运动画面保护方法、装置和系统

Also Published As

Publication number Publication date
CN101389029B (zh) 2012-01-11

Similar Documents

Publication Publication Date Title
CN101389029B (zh) 一种视频图像编码和检索的方法及装置
US9609348B2 (en) Systems and methods for video content analysis
Zhao et al. Real-time moving object segmentation and classification from HEVC compressed surveillance video
US7082210B2 (en) Moving object detector and image monitoring system
US7933333B2 (en) Method and apparatus for detecting motion in MPEG video streams
EP2782340B1 (en) Motion analysis method based on video compression code stream, code stream conversion method and apparatus thereof
CN104137146A (zh) 用于利用前景对象分割的噪声过滤的视频编码的方法和系统
CN102724554B (zh) 一种基于场景分割的视频资源语义水印嵌入方法
WO2003052951A1 (en) Method and apparatus for motion detection from compressed video sequence
CN111670580A (zh) 渐进压缩域计算机视觉和深度学习系统
CN103997620B (zh) 用于检测压缩视频中的运动的系统和方法
CN104837031B (zh) 一种高速自适应提取视频关键帧的方法
KR101149522B1 (ko) 장면 전환 검출 시스템 및 방법
CN111131825A (zh) 一种视频处理方法及相关装置
WO2003045070A1 (en) Feature extraction and detection of events and temporal variations in activity in video sequences
JP5713797B2 (ja) 映像監視装置
CN103020138A (zh) 一种视频检索的方法和装置
Yu et al. Detection of fake high definition for HEVC videos based on prediction mode feature
Bakas et al. Mpeg double compression based intra-frame video forgery detection using cnn
CN114157863A (zh) 基于数字视网膜的视频编码方法、系统及存储介质
US20150341654A1 (en) Video coding system with efficient processing of zooming transitions in video
KR102557904B1 (ko) 동적프레임이 존재하는 구간의 검출방법
CN112637605B (zh) 基于分析cavlc码字和非零dct系数个数的视频隐写分析方法和装置
CN106162196A (zh) 一种面向智能分析的视频编码架构及方法
KR20230040285A (ko) 영상정보의 비트스트림정보에 기반하여 객체영역을 검출하는 방법 및 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: SHANXI ZHONGTIANXIN TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: BEIJING VIMICRO ELECTRONICS CO., LTD.

Effective date: 20121218

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 100083 HAIDIAN, BEIJING TO: 030032 TAIYUAN, SHAANXI PROVINCE

TR01 Transfer of patent right

Effective date of registration: 20121218

Address after: 105, room 3, building 6, Kaiyuan street, Taiyuan economic and Technological Development Zone, Shanxi 030032, China

Patentee after: SHANXI VIMICRO TECHNOLOGY CO., LTD.

Address before: 100083, Haidian District, Xueyuan Road, Beijing No. 35, Nanjing Ning building, 15 Floor

Patentee before: Beijing Vimicro Corporation