CN104980621B - 一种帧率调整方法及电子设备 - Google Patents

一种帧率调整方法及电子设备 Download PDF

Info

Publication number
CN104980621B
CN104980621B CN201410143030.8A CN201410143030A CN104980621B CN 104980621 B CN104980621 B CN 104980621B CN 201410143030 A CN201410143030 A CN 201410143030A CN 104980621 B CN104980621 B CN 104980621B
Authority
CN
China
Prior art keywords
frame
area
difference
frame per
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410143030.8A
Other languages
English (en)
Other versions
CN104980621A (zh
Inventor
蔡明祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201410143030.8A priority Critical patent/CN104980621B/zh
Publication of CN104980621A publication Critical patent/CN104980621A/zh
Application granted granted Critical
Publication of CN104980621B publication Critical patent/CN104980621B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种帧率调整方法,用于提高前景检测准确性。所述方法包括:在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;判断所述第一区域是否满足预设条件;若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。本发明还公开了相应的电子设备。

Description

一种帧率调整方法及电子设备
技术领域
本发明涉及计算机技术领域,特别涉及一种帧率调整方法及电子设备。
背景技术
在很多情况下,我们需要从一段视频或者一系列图片中找到感兴趣的目标,即运动目标,比如说,要设置当人进入已经打烊的超市时会发出警报,前提就是检测到有人进入。为了达到这个目的,就产生了前景检测的技术,或者也可以称为运动目标检测技术。
目前,前景检测大概包括帧间差分法、背景差分法及对称差分法等几种不同的方法。
帧间差分法为通过相邻两帧做差,找到运动目标所在的目标区域。该方法的优势是实时性高,算法简单,易于嵌入式设备实现。但是该方法的缺点是对目标的检测效率不高。
背景差分法是预设背景图,将每帧图像都与背景图进行比较,从而找到运动目标所在的目标区域,该背景图可以是一幅,或者也可以是多幅。该方法的缺点是需要预设背景图,算法较为复杂。
对称差分法是帧间差分法的优化算法,现在应用比较多。该方法主要是在前后两帧基础上,通过前后三帧图像进行彼此差分后求得交集确定运动目标所在的目标区域的算法,该方法的优势是可实现性高,比帧间差分法的检测效率高,也比背景差分法的算法简单。但是该方法也存在一个缺点,当运动目标的运动速度过快或过慢时,前后相邻的三帧显然无法适配目标运动速度,通过对前后三帧的检测可能无法较为准确地确定出运动目标,从而影响到检测结果的准确性。
发明内容
本发明实施例提供一种帧率调整方法及电子设备,用于解决现有技术中在通过对称差分法进行运动目标检测时由于运动目标的速度过快或过慢而导致检测结果不准确的技术问题。
一种帧率调整方法,包括以下步骤:
在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;
根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;
判断所述第一区域是否满足预设条件;
若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
可选的,根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域,包括:
确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;
根据所述第一帧差及所述第二帧差确定所述第一区域。
可选的,根据所述第一帧差及所述第二帧差确定所述第一区域,包括:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
可选的,根据所述第一帧差及所述第二帧差的交集确定所述第一区域,包括:
确定所述第一帧差及所述第二帧差的交集;
判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;
根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
可选的,根据大于所述预设像素差值阈值的像素差值确定所述第一区域,包括:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
可选的,判断所述第一区域是否满足预设条件,包括:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
可选的,若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率,包括:
若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;
若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
可选的,在将采样帧率由所述第一帧率调整为第二帧率之后,还包括:
顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;
根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;
判断所述第二区域是否满足所述预设条件;
若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
可选的,在判断所述第一区域是否满足预设条件之后,还包括:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
一种电子设备,包括:
获取模块,用于在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;
确定模块,用于根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;
判断模块,用于判断所述第一区域是否满足预设条件;
调整模块,用于若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
可选的,所述确定模块具体用于:确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;根据所述第一帧差及所述第二帧差确定所述第一区域。
可选的,所述确定模块具体用于根据所述第一帧差及所述第二帧差确定所述第一区域,具体为:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
可选的,所述确定模块具体用于根据所述第一帧差及所述第二帧差的交集确定所述第一区域,具体为:确定所述第一帧差及所述第二帧差的交集;判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
可选的,所述确定模块具体用于根据大于所述预设像素差值阈值的像素差值确定所述第一区域,具体为:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
可选的,所述判断模块具体用于:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
可选的,所述调整模块具体用于:若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
可选的,所述获取模块还用于:顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;
所述确定模块还用于:根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;
所述判断模块还用于:判断所述第二区域是否满足所述预设条件;
所述调整模块还用于:若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
可选的,所述电子设备还包括编码模块,用于:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
本发明实施例中,根据所述第一帧图像、所述第二帧图像和所述第三帧图像确定所述第一区域,判断所述第一区域是否满足所述预设条件,如果所述第一区域满足所述预设条件,说明通过本次检测能够较为准确地确定运动目标,而如果所述第一区域不满足所述预设条件,说明通过本次检测不能较为准确地确定运动目标,则可以调整所述采样帧率。
例如,运动目标运动速度过快,则检测得到的所述第一区域不会满足所述预设条件,可以将所述采样帧率进行调整,所述第二帧率小于所述第一帧率,即采样变得较慢,例如原来是每秒采样两帧,现在每秒只采样一帧,显然有利于适配运动目标的运动速度,能够较为准确地确定所述运动目标,通过调整采样检测帧的采样帧率的方式来提高前景检测的准确性。
附图说明
图1为本发明实施例中帧率调整方法的主要流程图;
图2为本发明实施例中电子设备的主要结构图。
具体实施方式
本发明实施例中的帧率调整方法可以包括:在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;判断所述第一区域是否满足预设条件;若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
本发明实施例中,根据所述第一帧图像、所述第二帧图像和所述第三帧图像确定所述第一区域,判断所述第一区域是否满足所述预设条件,如果所述第一区域满足所述预设条件,说明通过本次检测能够较为准确地确定运动目标,而如果所述第一区域不满足所述预设条件,说明通过本次检测不能较为准确地确定运动目标,则可以调整所述采样帧率。
例如,运动目标运动速度过快,则检测得到的所述第一区域不会满足所述预设条件,可以将所述采样帧率进行调整,所述第二帧率小于所述第一帧率,即采样变得较慢,例如原来是每秒采样两帧,现在每秒只采样一帧,显然有利于适配运动目标的运动速度,能够较为准确地确定所述运动目标,通过调整采样检测帧的采样帧率的方式来提高前景检测的准确性。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中,所述电子设备可以是手机、PAD(平板电脑)、PC(个人计算机)、智能电视、摄像机或专门的前景检测设备等等不同的电子设备,本发明对此不作限制。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图对本发明优选的实施方式进行详细说明。
请参见图1,本发明实施例提供一种帧率调整方法,所述方法的主要步骤描述如下。
步骤101:在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像。
本发明实施例中,多媒体文件可以是指视频文件或图片文件,即包括有图像信息的文件。对于不包含图像信息的多媒体文件不在本发明的解释范围之内。
例如,要对所述多媒体文件进行前景检测,则可以以所述第一帧率对所述多媒体文件进行采样,依次获得所述第一帧图像、所述第二帧图像及所述第三帧图像。对于这三帧图像来说,所述第一帧图像为所述第二帧图像的上一帧采样图像,所述第三帧图像为所述第二帧图像的下一帧采样图像。
步骤102:根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域。
可选的,本发明实施例中,根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的所述运动目标所在的所述第一区域,可以包括:确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;根据所述第一帧差及所述第二帧差确定所述第一区域。即,帧差中的每个值都是相应两个像素值的差值,即帧差中的每个值都可以称为像素差值,帧差可以是像素差值的集合。
例如,所述第一帧图像中包括像素点A,所述第二帧图像中也包括所述像素点A,所述像素点A在所述第一帧图像中的像素值为255,所述像素点A在所述第二帧图像中的像素值为0,则所述第一帧差中所包括的所述像素点A的像素差值为255。
可选的,本发明实施例中,根据所述第一帧差及所述第二帧差确定所述第一区域,可以包括:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
确定所述第一帧差和所述第二帧差后,即可确定其交集。
例如,所述第一帧图像、所述第二帧图像和所述第三帧图像均包括相同的5个像素,分别为像素点1、像素点2、像素点2、像素点4和像素点5。
所述第一帧差为(0,0,50,50,20),其中按照从左至右的顺序,每个像素差值分别与所述像素点1、所述像素点2、所述像素点2、所述像素点4和所述像素点5对应,所述第二帧差为(0,20,30,50,20),其中按照从左至右的顺序,每个像素差值分别与所述像素点1、所述像素点2、所述像素点2、所述像素点4和所述像素点5对应。则显然交集为(0,50,20),分别对应于所述像素点1、所述像素点4和所述像素点5。
可选的,本发明实施例中,根据所述第一帧差及所述第二帧差的交集确定所述第一区域,可以包括:确定所述第一帧差及所述第二帧差的交集;判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
例如所述预设像素差值阈值为30,则所述交集中显然有对应于所述像素点4的像素差值大于所述预设像素差值阈值。
可选的,本发明实施例中,根据大于所述预设像素值阈值的像素值确定所述第一区域,可以包括:根据大于所述预设像素值阈值的像素值确定所述第一区域,所述第一区域中包括了大于所述预设像素值阈值的像素值对应的像素点。
例如,所述交集中有对应于所述像素点4的像素差值大于所述预设像素差值阈值,则可以根据所述像素点4确定所述第一区域,所述第一区域就包含所述像素点4。本发明实施例中,所述第一区域例如可以是矩形区域,所述第一区域可以是包括所有大于所述预设像素值阈值的像素值对应的像素点的最小矩形区域。
即,首先确定所述第一帧差和所述第二帧差,之后确定所述第一帧差和所述第二帧差的交集,在确定所述交集后,可以将所述交集中包括的所有像素差值与所述预设像素差值阈值进行比较,判断所述交集中是否有像素差值大于所述预设像素差值阈值,其中,所述交集中大于所述预设像素差值阈值的像素差值对应的像素点可以认为是所述运动目标对应的像素点,而所述交集中小于所述预设像素差值阈值的像素差值对应的像素点可以认为是背景区域对应的像素点。通过与所述预设像素差值阈值进行比较,可以从中筛选出所述运动目标对应的像素点。从而可以根据运动目标对应的像素点确定所述第一区域。
步骤103:判断所述第一区域是否满足预设条件。
在确定所述第一区域后,可以判断所述第一区域是否满足所述预设条件。
可选的,本发明实施例中,判断所述第一区域是否满足预设条件,可以包括:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
所述预设面积范围可以根据经验或实际情况进行设定。在确定所述第一区域后,例如所述第一区域为矩形,则可以根据该矩形的四个顶点的坐标计算出所述第一区域的面积,将所述第一区域的面积与所述预设面积范围进行比对,判断所述第一区域的面积是否位于所述预设面积范围内。如果所述第一区域的面积位于所述预设面积范围内,则表明所述第一区域能够较好地描述所述运动目标,即表明所述第一区域满足所述预设条件,如果所述第一区域的面积未位于所述预设面积范围内,则表明所述第一区域不能较好地描述所述运动目标,即表明所述第一区域不满足所述预设条件。
步骤104:若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
本发明实施例中,所述第二帧率与所述第一帧率不相等。
可选的,本发明实施例中,若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为所述第二帧率,可以包括:若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
若所述第一区域的面积大于所述预设面积范围的最大值,表明所述运动目标的运动速度过快,此时需要将采样帧率调低,以更好地确定所述运动目标。例如,所述第一帧率为5帧/秒,而确定所述第一区域的面积大于所述预设面积范围的最大值,则可以将所述采样帧率调整为所述第二帧率,所述第二帧率例如为2帧/秒,采样帧率降低,有利于确定运动速度较快的运动目标。
若所述第一区域的面积小于所述预设面积范围的最小值,表明所述运动目标的运动速度过慢,此时需要将采样帧率调高,以更好地确定所述运动目标。例如,所述第一帧率为5帧/秒,而确定所述第一区域的面积大于所述预设面积范围的最大值,则可以将所述采样帧率调整为所述第二帧率,所述第二帧率例如为8帧/秒,采样帧率提高,有利于确定运动速度较慢的运动目标。
例如可以预先设定所述第二帧率,则可以直接进行调整。
本发明实施例中,若所述第一区域不满足所述预设条件,则可以调整所述采样帧率重新进行采样,以使所述第一区域满足所述预设条件后再确定所述运动目标。这样能够使确定出的运动目标较为准确,提高检测结果的准确性。
进一步的,本发明一实施例中,在将采样帧率由所述第一帧率调整为第二帧率之后,还可以包括:顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;判断所述第二区域是否满足所述预设条件;若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
即,在将所述采样帧率由所述第一帧率调整为所述第二帧率后,重新对所述多媒体文件进行采样,再次确定所述运动目标所在的区域是否满足所述预设条件,如果不满足的话,继续调整所述采样帧率。即,本发明实施例中是一个循环的过程,直到调整至所述运动目标所在的区域满足所述预设条件,即所述采样帧率合适时为止,这样才能保证确定出的运动目标较为准确,符合实际情况。
进一步的,本发明一实施例中,在判断所述第一区域是否满足预设条件之后,还包括:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。即,如果确定所述第一区域满足所述预设条件,则可以根据所述第一区域确定所述运动目标。
相应的,若所述第二区域满足所述预设条件,则对所述第二区域进行编码,确定所述运动目标。即,在循环处理的过程中,只要所述运动目标所在的区域满足了所述预设条件,就可以根据所述运动目标所在的区域确定所述运动目标。
以下通过一个具体的例子来介绍本发明实施例中的帧率调整方法。
例如需要对一个视频文件进行前景检测,则首先以所述第一帧率对所述视频文件进行采样,顺次获得所述第一帧图像、所述第二帧图像和所述第三帧图像。
确定所述第一帧图像和所述第二帧图像之间的所述第一帧差,及,确定所述第二帧图像和所述第三帧图像之间的所述第二帧差。
例如,所述第一帧图像、所述第二帧图像和所述第三帧图像均包括相应相同15个像素点,分别为像素点1、像素点2、像素点3、像素点4、像素点5、像素点6、像素点7、像素点8、像素点9、像素点10、像素点11、像素点12、像素点13和像素点14。
在所述第一帧图像中,这15个像素点的像素值分别为(1,2,3,4,5,9,8,7,6,5,4,4,3,2,1),在所述第二帧图像中,这15个像素点的像素值分别为(1,2,3,4,9,8,7,6,5,4,5,4,3,2,1),在所述第三帧图像中,这15个像素点的像素值分别为(1,2,3,9,8,7,6,5,4,6,5,4,3,2,1)。则所述第一帧差为(0,0,0,0,-4,1,1,1,1,1,-1,0,0,0,0),所述第二帧差为(0,0,0,-5,1,1,1,1,1,-2,0,0,0,0,0)。
可以求得所述第一帧差和所述第二帧差的交集,所述交集为(0,0,0,1,1,1,1,0,0),所述交集中的像素差值按从左至右的顺序,分别对应的像素点为所述像素点1、所述像素点2、所述像素点3、所述像素点6、所述像素点7、所述像素点8、所述像素点9、所述像素点14和所述像素点15。
例如,所述预设像素差值阈值为0,则所述交集中大于所述预设像素差值阈值的像素差值为所述像素点6、所述像素点7、所述像素点8和所述像素点9所对应的像素差值。
其中,在确定所述第一帧差和所述第二帧差后,也可以将所述第一帧差和所述第二帧差分别二值化之后再求交集,所述预设像素差值阈值可以根据二值化的特点进行设定。具体处理方式本发明不做限制。
确定所述交集中大于所述预设像素差值阈值的像素差值为所述像素点6、所述像素点7、所述像素点8和所述像素点9所对应的像素差值,则可以根据所述像素点6、所述像素点7、所述像素点8和所述像素点9确定所述第一区域,所述第一区域中需要包括所述像素点6、所述像素点7、所述像素点8和所述像素点9。例如所述第一区域为包括所述像素点6、所述像素点7、所述像素点8和所述像素点9最小矩形区域,确定出所述第一区域后,可以根据所述第一区域的顶点的坐标计算出所述第一区域的面积。
将所述第一区域的面积与预设面积范围进行比对,判断所述第一区域的面积是否位于所述预设面积范围内。如果所述第一区域的面积位于所述预设面积范围内,说明所述第一区域满足所述预设条件,如果所述第一区域的面积没有位于所述预设面积范围内,说明所述第一区域不满足所述预设条件。
本发明实施例中,如果所述第一区域满足所述预设条件,则可以对所述第一区域进行编码,以确定所述运动目标,如果所述第一区域不满足所述预设条件,则可以调整所述采样帧率。例如,如果所述第一区域的面积大于所述预设面积范围的最大值,则可以将采样帧率调低,如果所述第一区域的面积小于所述预设面积范围的最小值,则可以将所述采样帧率调高。
若所述第一区域不满足所述预设条件,则可以将所述采样帧率由所述第一帧率调整为所述第二帧率,之后可以继续以所述第二帧率重新对所述视频文件进行采样,得到所述运动目标所在的区域,可以继续判断所述运动目标所在的区域是否满足所述预设条件,如果所述运动目标所在的区域依然不满足所述预设条件,则可以继续调整采样帧率,继续进行处理判断,直到所述运动目标所在的区域满足所述预设条件为止。
请参见图2,基于同一发明构思,本发明实施例提供一种电子设备,所述电子设备可以包括获取模块201、确定模块202、判断模块203和调整模块204。
获取模块201可以用于在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像。
确定模块202可以用于根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域。
判断模块203可以用于判断所述第一区域是否满足预设条件。
调整模块204可以用于若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
可选的,本发明实施例中,确定模块202具体可以用于:确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;根据所述第一帧差及所述第二帧差确定所述第一区域。
可选的,本发明实施例中,确定模块202具体可以用于根据所述第一帧差及所述第二帧差确定所述第一区域,具体为:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
可选的,本发明实施例中,确定模块202具体可以用于根据所述第一帧差及所述第二帧差的交集确定所述第一区域,具体为:确定所述第一帧差及所述第二帧差的交集;判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
可选的,本发明实施例中,确定模块202具体可以用于根据大于所述预设像素差值阈值的像素差值确定所述第一区域,具体为:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
可选的,本发明实施例中,判断模块203具体可以用于:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
可选的,本发明实施例中,调整模块204具体可以用于:若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
可选的,本发明实施例中,获取模块201还可以用于:顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;确定模块202还可以用于:根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;判断模块203还可以用于:判断所述第二区域是否满足所述预设条件;调整模块204还可以用于:若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
可选的,本发明实施例中,所述电子设备还可以包括编码模块,用于:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
其中,获取模块201、确定模块202、判断模块203、调整模块204和所述编码模块均可以彼此相连,例如这5个模块可以均连接到同一总线上。
本发明实施例中的帧率调整方法可以包括:在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;判断所述第一区域是否满足预设条件;若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
本发明实施例中,根据所述第一帧图像、所述第二帧图像和所述第三帧图像确定所述第一区域,判断所述第一区域是否满足所述预设条件,如果所述第一区域满足所述预设条件,说明通过本次检测能够较为准确地确定运动目标,而如果所述第一区域不满足所述预设条件,说明通过本次检测不能较为准确地确定运动目标,则可以调整所述采样帧率。
例如,运动目标运动速度过快,则检测得到的所述第一区域不会满足所述预设条件,可以将所述采样帧率进行调整,所述第二帧率小于所述第一帧率,即采样变得较慢,例如原来是每秒采样两帧,现在每秒只采样一帧,显然有利于适配运动目标的运动速度,能够较为准确地确定所述运动目标,通过调整采样检测帧的采样帧率的方式来提高检测结果的准确性。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
具体来讲,本申请实施例中的一种帧率调整方法对应的计算机程序指令可以被存储在光盘,硬盘,U盘等存储介质上,当存储介质中的与一种帧率调整方法对应的计算机程序指令被一电子设备读取或被执行时,包括如下步骤:
在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;
根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域;
判断所述第一区域是否满足预设条件;
若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
可选的,所述存储介质中存储的与步骤:根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域,对应的计算机指令在被执行的过程中,具体包括:
确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;
根据所述第一帧差及所述第二帧差确定所述第一区域。
可选的,所述存储介质中存储的与步骤:根据所述第一帧差及所述第二帧差确定所述第一区域,对应的计算机指令在具体被执行过程中,具体包括:
根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
可选的,所述存储介质中存储的与步骤:根据所述第一帧差及所述第二帧差的交集确定所述第一区域,对应的计算机指令在具体被执行过程中,具体包括:
确定所述第一帧差及所述第二帧差的交集;
判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;
根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
可选的,所述存储介质中存储的与步骤:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,对应的计算机指令在具体被执行过程中,具体包括:
根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
可选的,所述存储介质中存储的与步骤:判断所述第一区域是否满足预设条件,对应的计算机指令在具体被执行过程中,具体包括:
判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
可选的,所述存储介质中存储的与步骤:若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率,对应的计算机指令在具体被执行过程中,具体包括:
若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;
若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
可选的,所述存储介质中存储的与步骤:将采样帧率由所述第一帧率调整为第二帧率,对应的计算机指令在具体被执行之后,还包括:
顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;
根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;
判断所述第二区域是否满足所述预设条件;
若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
可选的,所述存储介质中存储的与步骤:判断所述第一区域是否满足预设条件,对应的计算机指令在具体被执行之后,还包括:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
以上所述,以上实施例仅用以对本申请的技术方案进行了详细介绍,但以上实施例的说明只是用于帮助理解本发明的方法及其核心思想,不应理解为对本发明的限制。本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。

Claims (18)

1.一种帧率调整方法,包括以下步骤:
在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;
根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述多媒体文件中的运动目标所在的第一区域;
判断所述第一区域是否满足预设条件;
若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
2.如权利要求1所述的方法,其特征在于,根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述视频文件中的运动目标所在的第一区域,包括:
确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;
根据所述第一帧差及所述第二帧差确定所述第一区域。
3.如权利要求2所述的方法,其特征在于,根据所述第一帧差及所述第二帧差确定所述第一区域,包括:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
4.如权利要求3所述的方法,其特征在于,根据所述第一帧差及所述第二帧差的交集确定所述第一区域,包括:
确定所述第一帧差及所述第二帧差的交集;
判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;
根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
5.如权利要求4所述的方法,其特征在于,根据大于所述预设像素差值阈值的像素差值确定所述第一区域,包括:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
6.如权利要求1-5任一所述的方法,其特征在于,判断所述第一区域是否满足预设条件,包括:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
7.如权利要求6所述的方法,其特征在于,若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率,包括:
若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;
若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
8.如权利要求1-5任一所述的方法,其特征在于,在将采样帧率由所述第一帧率调整为第二帧率之后,还包括:
顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;
根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;
判断所述第二区域是否满足所述预设条件;
若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
9.如权利要求1-5任一所述的方法,其特征在于,在判断所述第一区域是否满足预设条件之后,还包括:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
10.一种电子设备,包括:
获取模块,用于在对多媒体文件进行前景检测时,顺次获得以第一帧率对所述多媒体文件进行采样得到的第一帧图像、第二帧图像及第三帧图像;
确定模块,用于根据所述第一帧图像、所述第二帧图像及所述第三帧图像确定所述多媒体文件中的运动目标所在的第一区域;
判断模块,用于判断所述第一区域是否满足预设条件;
调整模块,用于若所述第一区域不满足所述预设条件,将采样帧率由所述第一帧率调整为第二帧率。
11.如权利要求10所述的电子设备,其特征在于,所述确定模块具体用于:确定所述第一帧图像与所述第二帧图像之间的第一帧差,及确定所述第二帧图像与所述第三帧图像之间的第二帧差;其中,帧差是指两帧图像中相应像素点的像素值之差的集合;根据所述第一帧差及所述第二帧差确定所述第一区域。
12.如权利要求11所述的电子设备,其特征在于,所述确定模块具体用于根据所述第一帧差及所述第二帧差确定所述第一区域,具体为:根据所述第一帧差及所述第二帧差的交集确定所述第一区域。
13.如权利要求12所述的电子设备,其特征在于,所述确定模块具体用于根据所述第一帧差及所述第二帧差的交集确定所述第一区域,具体为:确定所述第一帧差及所述第二帧差的交集;判断所述交集中包括的像素差值中是否有像素差值大于预设像素差值阈值;根据大于所述预设像素差值阈值的像素差值确定所述第一区域。
14.如权利要求13所述的电子设备,其特征在于,所述确定模块具体用于根据大于所述预设像素差值阈值的像素差值确定所述第一区域,具体为:根据大于所述预设像素差值阈值的像素差值确定所述第一区域,所述第一区域中包括了大于所述预设像素差值阈值的像素差值对应的像素点。
15.如权利要求10-14任一所述的电子设备,其特征在于,所述判断模块具体用于:判断所述第一区域的面积是否位于预设面积范围内;其中,若所述第一区域的面积没有位于所述预设面积范围内,表明所述第一区域不满足所述预设条件。
16.如权利要求15所述的电子设备,其特征在于,所述调整模块具体用于:若所述第一区域的面积大于所述预设面积范围的最大值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率小于所述第一帧率;若所述第一区域的面积小于所述预设面积范围的最小值,将采样帧率由所述第一帧率调整为所述第二帧率,所述第二帧率大于所述第一帧率。
17.如权利要求10-14任一所述的电子设备,其特征在于,所述获取模块还用于:顺次获得以第二帧率对所述视频文件进行采样得到的第四帧图像、第五帧图像及第六帧图像;
所述确定模块还用于:根据所述第四帧图像、所述第五帧图像及所述第六帧图像确定所述运动目标所在的第二区域;
所述判断模块还用于:判断所述第二区域是否满足所述预设条件;
所述调整模块还用于:若所述第二区域不满足所述预设条件,将采样帧率由所述第二帧率调整为第三帧率。
18.如权利要求10-14任一所述的电子设备,其特征在于,所述电子设备还包括编码模块,用于:若所述第一区域满足所述预设条件,对所述第一区域进行编码,确定所述运动目标。
CN201410143030.8A 2014-04-10 2014-04-10 一种帧率调整方法及电子设备 Active CN104980621B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410143030.8A CN104980621B (zh) 2014-04-10 2014-04-10 一种帧率调整方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410143030.8A CN104980621B (zh) 2014-04-10 2014-04-10 一种帧率调整方法及电子设备

Publications (2)

Publication Number Publication Date
CN104980621A CN104980621A (zh) 2015-10-14
CN104980621B true CN104980621B (zh) 2018-07-03

Family

ID=54276689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410143030.8A Active CN104980621B (zh) 2014-04-10 2014-04-10 一种帧率调整方法及电子设备

Country Status (1)

Country Link
CN (1) CN104980621B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466153B (zh) * 2022-04-13 2022-09-09 深圳时识科技有限公司 自适应脉冲生成方法、装置、类脑芯片和电子设备
CN114913471B (zh) * 2022-07-18 2023-09-12 深圳比特微电子科技有限公司 一种图像处理方法、装置和可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102695042A (zh) * 2012-05-28 2012-09-26 昆山锐芯微电子有限公司 图像传感器监控系统及监控方法
CN102957864A (zh) * 2011-08-24 2013-03-06 奥林巴斯映像株式会社 影像设备及控制方法
CN103176584A (zh) * 2011-12-26 2013-06-26 联想(北京)有限公司 电源管理系统和电源管理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102957864A (zh) * 2011-08-24 2013-03-06 奥林巴斯映像株式会社 影像设备及控制方法
CN103176584A (zh) * 2011-12-26 2013-06-26 联想(北京)有限公司 电源管理系统和电源管理方法
CN102695042A (zh) * 2012-05-28 2012-09-26 昆山锐芯微电子有限公司 图像传感器监控系统及监控方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于区域特征的顶视运动行人快速检测;李铖果等;《微型机与应用》;20110531;第30卷(第10期);第38-43页,第1、1.1节,图1 *

Also Published As

Publication number Publication date
CN104980621A (zh) 2015-10-14

Similar Documents

Publication Publication Date Title
CN113179368B (zh) 一种车辆定损的数据处理方法、装置、处理设备及客户端
US10360732B2 (en) Method and system of determining object positions for image processing using wireless network angle of transmission
EP3414891B1 (en) Camera setting adjustment based on predicted environmental factors and tracking systems employing the same
US20200364802A1 (en) Processing method, processing apparatus, user terminal and server for recognition of vehicle damage
JP6348574B2 (ja) 総体的カメラ移動およびパノラマカメラ移動を使用した単眼視覚slam
CN106709932A (zh) 一种人脸位置跟踪方法、装置和电子设备
CN103905737B (zh) 逆光检测方法及装置
WO2017092332A1 (zh) 一种渲染图像的处理方法及装置
JP2018507476A (ja) コンピュータビジョンに関する遮蔽処理
CN103477352A (zh) 使用深度图像的姿势识别
CN107292318B (zh) 基于中心暗通道先验信息的图像显著性物体检测方法
US20150269739A1 (en) Apparatus and method for foreground object segmentation
CN111104925B (zh) 图像处理方法、装置、存储介质和电子设备
EP2966591B1 (en) Method and apparatus for identifying salient events by analyzing salient video segments identified by sensor information
CN101483001A (zh) 基于视频的入侵检测方法、检测装置、芯片
US9323989B2 (en) Tracking device
US20140044342A1 (en) Method for generating 3d coordinates and mobile terminal for generating 3d coordinates
CN103747240A (zh) 融合颜色和运动信息的视觉显著性滤波方法
Kowalski et al. Holoface: Augmenting human-to-human interactions on hololens
CN104185012B (zh) 三维视频格式自动检测方法及装置
CN108876672A (zh) 一种远程教育教师自动识别图像优化跟踪方法及系统
CN104980621B (zh) 一种帧率调整方法及电子设备
CN107358624B (zh) 单目稠密即时定位与地图重建方法
CN106683113A (zh) 特征点跟踪方法和装置
US20180356894A1 (en) 2d pointing indicator analysis

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant