CN105245817A - 录像回放方法及其装置 - Google Patents

Abstract

本发明公开了一种录像回放方法及其装置，所述方法包括依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；依据预设的录像回放速率调整间隔获取两帧图像，并计算至少一个感兴趣区域内图像内容的运动强度值；依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，并据此视频回放速率播放视频录像文件。依据本发明，在进行视频录像文件的播放过程中，无需编码器端的参与，对于任意一路视频码流，在保证用户能够获得足够多的感兴趣信息的同时，即可实现高效率的视频回放，提高了视频检索的工作效率。

Description

录像回放方法及其装置

技术领域

本发明涉及数字图像处理领域，具体而言，涉及一种录像回放方法及其装置。

背景技术

随着视频监控系统在各行各业的普及以及多媒体技术应用领域的不断拓展，视频数据的后处理技术的使用就变得越来越为广泛，其中，从视频序列中检索用户感兴趣的信息即是一种目前较为常见的视频后处理技术。

基于此，目前常用的检索方法是通过人工查看录像回放的方式，但现实情况是，当前视频录像已经呈现海量化的特点，无疑采用该方案会耗费大量的人力和时间，具有明显的低效率、易使人疲劳的问题。因而，发展可以高效快速地进行录像回放的技术就显得尤为必要。

相比于上述的人工检索录像方法，目前另外一种比较高效的解决方案的核心思路为：当检测到视频中出现了用户感兴趣的信息时，以相对慢的速率播放视频录像；而当检测到视频中没有用户所感兴趣的信息时，则以相对快的速率播放视频录像。现有技术中通常借助编码器端的信息来实现上述方案，其思路为：在编码器端对视频流进行编码处理时，同时进行特征分析，并将分析的结果生成特征标签写到视频流中，在解码端对视频流进行解码时再利用这些特征标签信息依据控制回放速率，但是该技术方案需要编码器端进行参与，对于一没有经过编码器进行特征分析并提取了相应的特征标签信息的码流而言，对于视频录像文件的回放则只能按正常的模式进行。

发明内容

鉴于此，本发明实施例的目的在于提供一种录像回放方法及其装置。

本发明实施例采用以下技术方案实现：

一种录像回放方法，包括：

依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

依据预设的录像回放速率调整间隔获取两帧图像，并计算至少一个感兴趣区域内图像内容的运动强度值；

依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，并据此视频回放速率播放视频录像文件。

优选地，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。

更为优选地，当所述感兴趣区域为至少两个时，其相互之间不重叠地被设置。

优选地，依据预设的录像回放速率调整间隔获取相邻的两帧图像计算任意一个感兴趣区域内图像内容的运动强度值的步骤包括：

每隔一录像回放速率调整间隔获取两帧相邻图像；

对两帧相邻图像的感兴趣区域进行块划分处理；

计算每一个块在两帧图像之间的差异值，判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

当完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。

优选地，依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。

一种录像回放装置，包括：

设置模块，用于依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

获取模块，用于依据预设的录像回放速率调整间隔获取两帧图像；

计算模块，用于计算所述两帧图像的至少一个感兴趣区域内图像内容的运动强度值；

调整模块，用于依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率；

回放模块，用于依据所述视频回放速率播放视频录像文件。

优选地，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。

更为优选地，当所述感兴趣区域为至少两个时，其相互之间不重叠地被设置模块设置。

优选地，所述计算模块包括：

划分单元，用于对获取模块每隔一录像回放速率调整间隔获取的两帧相邻图像的感兴趣区域进行块划分处理；

差异值计算单元，用于计算每一个块在两帧图像之间的差异值；

判断单元，用于判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

运动强度值计算单元，用于当判断单元完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。

优选地，调整模块依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。

本发明提供的录像回放方法及其装置通过对图像进行感兴趣区域设置，并依据感兴趣区域内图像内容的视频运动强度来量化表述用户所关心的信息，并据此来调整视频录像文件的回放速率，依据本发明，在进行视频录像文件的播放过程中，无需编码器端的参与，对于任意一路视频码流，在保证用户能够获得足够多的感兴趣信息的同时，即可实现高效率的视频回放，提高了视频检索的工作效率。

附图说明

图1为本发明实施例提供的录像回放方法流程示意图；

图2为本发明实施例提供的录像回放装置结构示意图。

本发明目的的实现、功能特点及优异效果，下面将结合具体实施例以及附图做进一步的说明。

具体实施方式

下面结合附图和具体实施例对本发明所述技术方案作进一步的详细描述，以使本领域的技术人员可以更好的理解本发明并能予以实施，但所举实施例不作为对本发明的限定。

本发明实施例提供的录像回放方法，以应用于视频监控领域为例，通常，视频监控的重点往往是运动的目标，例如移动中的人、交通工具、动物等，因而运动目标通常被界定为用户所感兴趣的信息。本发明实施例中，所述录像回放方法通过对图像进行感兴趣区域设置，并依据感兴趣区域内图像内容的视频运动强度来量化表述用户所关心的信息，并据此来调整视频录像文件的回放速率，例如调整的准则为：运动强度值越大，录像回放速率越慢，从而达到视频录像文件的回放速率可以自适应调整的目的。

具体地，如图1所示，本发明实施例提供的一种录像回放方法，包括如下步骤：

S10、依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

S20、依据预设的录像回放速率调整间隔获取两帧图像，并计算至少一个感兴趣区域内图像内容的运动强度值；

S30、依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，并据此视频回放速率播放视频录像文件。

本实施例中，需要被回放的视频录像文件在被输入之后，需要首先被还原成一图像序列。视频录像文件往往都是由一系列图像序列进行编码处理而获得，因此在本实施例中，还原所述视频录像文件以获得一图像序列，可通过对该视频录像文件进行相对应的解码处理而获得。

在所述步骤S10中，所述用来设置感兴趣区域的图像帧可以是视频录像文件经解码处理后得到图像序列中的任何位置的至少一帧图像，用户设置所述感兴趣区域的具体输入方式可由本领域的技术人员简单的得到，本文对此不做详述。在本实施例中，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。例如，当所述感兴趣区域被设置为仅仅一个时，所述感兴趣区域的大小可以等于视频录像文件中任意一帧图像的大小。在某些实施例中，当所述感兴趣区域为至少两个时，优选地，其相互之间不重叠地被设置。

在所述步骤S20中，所述预设的录像回放速率调整间隔不能小于录像的原始帧率。依据预设的录像回放速率调整间隔获取相邻的两帧图像计算任意一个感兴趣区域内图像内容的运动强度值的步骤包括：

S201、每隔一录像回放速率调整间隔获取两帧相邻图像；

S202、对两帧相邻图像的感兴趣区域进行块划分处理；

S203、计算每一个块在两帧图像之间的差异值，判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

S204、当完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。在本实施例中，通过以差异值统计变量值除以运动块计数器中的值，其商即用以表征该感兴趣区域图像内容的运动强度值。

例如在某一具体实施例中，依据预设的录像回放速率调整间隔获取相邻的两帧图像计算任意一个感兴趣区域内图像内容的运动强度值包括如下具体实施例步骤：

步骤1：获取一帧图像；

步骤2：判读帧间隔计数器中的值是否等于录像回放速率调整间隔值减1，若是，则进入步骤3，否则，进入步骤5；

步骤3；缓存当前帧图像；

步骤4：以当前视频回放速率播放并显示该当前帧图像，帧间隔计数器加1，并请求下一帧图像；

步骤5：判断帧间隔计数器中的值是否等于录像回放速率调整间隔值，若否，则进入步骤4，否则，进入步骤6；

步骤6：对前后两帧图像的感兴趣区域进行块划分处理；

步骤7：计算块在两帧图像间的差异值；

在该步骤中，所述计算块差异值的方法，包括但不限于如下：

(1)块间对应像素值差值的绝对值的累积和；

(2)块间对应像素值的差值的平方累积和等方法。

步骤8：判读所述差异值是否大于运动块鉴别阈值，若是，则进入步骤9，否则，进入步骤10；

步骤9：标记该块为运动块，并且将运动块计数器加1，将差异值累加到差异值统计量中；

步骤10：判断所有的块是否已计算完，若是，则进入步骤11，否则，进入步骤7；

步骤11：以差异值统计变量值除以运动块计数器的值，其商即用以表征该感兴趣区域图像内容的运动强度值，之后，将帧间隔计数器置零。

在所述步骤S30中，可以依据一个用户最为感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，也可以依据至少两个较为感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，同时也可以依据所有感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率。例如，当依据所有感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率时，可以用所有感兴趣区域的运动强度值的最大值表示视频录像文件的当前的运动强度值，或用所有感兴趣区域的运动强度值的最小值表示视频录像文件的当前的运动强度值，或用所有感兴趣区域的运动强度值的平均值表示视频录像文件的当前的运动强度值。

本实施例中，当用户依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。

其中，所述第一门限以及第二门限均可以由本领域的技术人员按照本发明的发明精神经测试、计算或其他方式简单的得到，本文对此不做细述。

相应地，如图2所示，本发明实施例还提供了一种录像回放装置，包括：

设置模块20，用于依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

获取模块30，用于依据预设的录像回放速率调整间隔获取两帧图像；

计算模块40，用于计算所述两帧图像的至少一个感兴趣区域内图像内容的运动强度值；

调整模块50，用于依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率；

回放模块60，用于依据所述视频回放速率播放视频录像文件。

本实施例中，所述录像回放装置还包括：

还原模块10，用于在需要被回放的视频录像文件被输入之后，将所述视频录像文件还原成一图像序列。视频录像文件往往都是由一系列图像序列进行编码处理而获得，因此在本实施例中，还原模块10还原所述视频录像文件以获得一图像序列，可通过对该视频录像文件进行相对应的解码处理而获得。

在通过设置模块20依据视频录像文件中的至少一帧图像进行感兴趣区域的设置时，所述用来设置感兴趣区域的图像帧可以是视频录像文件经解码处理后得到图像序列中的任何位置的至少一帧图像，用户设置所述感兴趣区域的具体输入方式可由本领域的技术人员简单的得到，本文对此不做详述。在本实施例中，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。例如，当所述感兴趣区域被设置为仅仅一个时，所述感兴趣区域的大小可以等于视频录像文件中任意一帧图像的大小。在某些实施例中，当所述感兴趣区域为至少两个时，优选地，其相互之间不重叠地被设置。

本实施例中，所述预设的录像回放速率调整间隔不能小于录像的原始帧率，继续参考图2，所述计算模块40包括：

划分单元401，用于对获取模块30每隔一录像回放速率调整间隔获取的两帧相邻图像的感兴趣区域进行块划分处理；

差异值计算单元402，用于计算每一个块在两帧图像之间的差异值；

判断单元，403用于判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

运动强度值计算单元404，用于当判断单元完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。

本实施例中，调整模块50可以依据一个用户最为感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，也可以依据至少两个较为感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，同时也可以依据所有感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率。例如，当调整模块50依据所有感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率时，可以用所有感兴趣区域的运动强度值的最大值表示视频录像文件的当前的运动强度值，或用所有感兴趣区域的运动强度值的最小值表示视频录像文件的当前的运动强度值，或用所有感兴趣区域的运动强度值的平均值表示视频录像文件的当前的运动强度值。

本实施例中，调整模块50依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。

以上所述仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种录像回放方法，其特征在于，包括：

依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

依据预设的录像回放速率调整间隔获取两帧图像，并计算至少一个感兴趣区域内图像内容的运动强度值；

依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率，并据此视频回放速率播放视频录像文件。

2.如权利要求1所述的录像回放方法，其特征在于，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。

3.如权利要求1或2所述的录像回放方法，其特征在于，当所述感兴趣区域为至少两个时，其相互之间不重叠地被设置。

4.如权利要求1所述的录像回放方法，其特征在于，依据预设的录像回放速率调整间隔获取相邻的两帧图像计算任意一个感兴趣区域内图像内容的运动强度值的步骤包括：

每隔一录像回放速率调整间隔获取两帧相邻图像；

对两帧相邻图像的感兴趣区域进行块划分处理；

计算每一个块在两帧图像之间的差异值，判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

当完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。

5.如权利要求1所述的录像回放方法，其特征在于，依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。

6.一种录像回放装置，其特征在于，包括：

设置模块，用于依据视频录像文件中的至少一帧图像设置至少一感兴趣区域；

获取模块，用于依据预设的录像回放速率调整间隔获取两帧图像；

计算模块，用于计算所述两帧图像的至少一个感兴趣区域内图像内容的运动强度值；

调整模块，用于依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率；

回放模块，用于依据所述视频回放速率播放视频录像文件。

7.如权利要求6所述的录像回放装置，其特征在于，所述感兴趣区域的大小小于或等于视频录像文件中任意一帧图像的大小。

8.如权利要求6或7所述的录像回放装置，其特征在于，当所述感兴趣区域为至少两个时，其相互之间不重叠地被设置模块设置。

9.如权利要求6所述的录像回放装置，其特征在于，所述计算模块包括：

划分单元，用于对获取模块每隔一录像回放速率调整间隔获取的两帧相邻图像的感兴趣区域进行块划分处理；

差异值计算单元，用于计算每一个块在两帧图像之间的差异值；

判断单元，用于判断所述差异值是否大于预设的运动块鉴别阈值，若是，则标记该块为运动块，将运动块计数器加一，并将该差异值累加到差异值统计变量值中；

运动强度值计算单元，用于当判断单元完成所有块的统计后，依据得到的运动块计数器中的值以及差异值统计变量值计算该感兴趣区域内图像内容的运动强度值。

10.如权利要求6所述的录像回放装置，其特征在于，调整模块依据至少一个感兴趣区域内图像内容的运动强度值调整视频录像文件的视频回放速率的策略为：

当所述运动强度值大于预设的第一门限时，降低视频录像文件的视频回放速率；

或，当所述运动强度值小于预设的第二门限时，提高视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为升高趋势时，降低视频录像文件的视频回放速率；

或，当当前运动强度值较上次运动强度值的变化趋势为减小趋势时，提高视频录像文件的视频回放速率。