CN103412859B - 基于媒资管理系统的海量视频快速检索方法和装置 - Google Patents

Abstract

本发明实施例提供了一种基于MAM（Media Asset Management，媒资管理系统）的海量视频快速检索方法和装置。该方法主要包括：利用视频分析工具对视频数据进行分析，获得视频数据的分析结果；利用MAM系统提供的标签处理服务，结合所述视频分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；将所述视频数据的MAM属性和场景属性和所述视频数据进行关联保存，利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索。本发明实施例可以实现对海量视频进行高效率、快速地检索。

Description

基于媒资管理系统的海量视频快速检索方法和装置

技术领域

本发明涉及视频处理技术领域，尤其涉及一种基于MAM（Media Asset Management，媒资管理系统）的海量视频快速检索方法和装置。

背景技术

视频监控已经广泛应用于平安城市、智能交通等多个领域，视频监控市场每年都在增长，前端摄像头不断地铺设，产生的海量的视频资料存储在磁盘或数字文件中。

目前，当需要检索视频资源时，对视频的查找工作大多仍是人工操作，人工查找不仅需要大量的人力和时间，而且要求人的精神保持高度集中，另外，人对视频的熟悉程度也是视频查找效率的影响因素。因此，开发一种对海量视频进行高效率、快速检索的方法是一个亟待解决的问题。

发明内容

本发明的实施例提供了一种基于MAM的海量视频快速检索方法和装置，以实现对海量视频进行高效率、快速地检索。

一种基于媒资管理系统的海量视频快速检索方法，包括：

利用视频分析工具对视频数据进行分析，获得视频数据的分析结果；

利用媒资管理系统MAM系统提供的标签处理服务，结合所述视频分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；

将所述视频数据的MAM属性、场景属性和所述视频数据进行关联保存，利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索。

一种基于媒资管理系统的海量视频快速检索装置，包括：

视频属性提取单元，用于利用视频分析工具对视频数据进行分析，获得视频数据的分析结果，利用MAM系统提供的标签处理服务，结合所述视频分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；

视频属性存储单元，用于将所述视频数据的MAM属性和场景属性和所述视频数据进行关联保存；

视频检索单元，用于利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索。

由上述本发明的实施例提供的技术方案可以看出，本发明实施例结合视频分析和MAM各自的优势，提取并保存视频数据的各种属性，将视频数据和属性进行关联，借助MAM系统的视频数据和属性的自动关联功能及检索功能，从而实现对海量视频进行高效率、快速地检索。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一提供的一种基于MAM（Media Asset Management，媒资管理系统）和事后视频分析的海量视频快速检索方法的处理流程图；

图2为本发明实施例二提供的一种基于MAM和实时视频分析的海量视频快速检索方法的处理流程图；

图3为本发明实施例三提供的一种基于MAM的海量视频快速检索系统的结构图；

图4为本发明实施例三提供的一种视频属性提取单元的结构图。

具体实施方式

为便于对本发明实施例的理解，下面将结合附图以几个具体实施例为例做进一步的解释说明，且各个实施例并不构成对本发明实施例的限定。

实施例一

该实施例提供的一种基于MAM的海量视频快速检索方法的处理流程如图1所示，该处理流程对应的是视频事后分析，包括如下的处理步骤：

步骤11、对视频数据进行采集，将采集的视频存储在MAM指定的文件夹下。

通过视频采集系统中的前端视频采集设备（比如，摄像头）进行视频采集，对采集到的视频数据进行统一的编码或转码，形成统一的视频格式，存储到MAM系统指定的文件夹中。

MAM系统是广泛应用于广电行业进行媒体采集、存储、编辑、播放的专业性软件，可以进行视频场景分析、处理，具有强大的属性关联与查询机制，可以实现视频与属性的自动关联，可以基于广泛的搜索条件进行快速、有效和准确的媒体资源定位。另外，MAM基于SOA（service-oriented architecture，面向服务的体系结构）架构，支持分布式部署，可以将存储在不同物理节点的视频在逻辑上进行统一的管理，与传统的视频集中式存储相比较，其查询压力较小，能做到压力负载均衡，因此带来稳定、快速的视频检索。

MAM还具有超强的视频并发处理能力，并发查询时占用更小的带宽，可以同时对视频进行多种操作，如上传、下载、查询、点播等。

步骤12、利用视频分析工具对上述存储的视频文件进行分析，获得视频数据的分析结果。

利用视频分析工具对上述存储的视频文件进行分析，这种先存储视频再分析视频的方法称为视频事后分析。

通过硬件设备或者计算机软件实现的视频分析工具对视频数据进行视频事后分析的过程中，可以根据用户设定的交通和/或安防检测规则，有选择地设置视频分析的触发事件的特征、区域和规则等，根据各种触发事件对视频数据分别进行入侵检测分析、遗弃物检测分析、徘徊检测分析、人数统计分析、物品搬移检测分析等多种检测分析，获取视频数据的分析结果。上述检测规则分为两类：交通和安防。交通规则包括：车位禁区、车辆逆行、违规变道、车辆统计、非法停车、路况检测等。安防规则包括：禁区、逆行、攀爬、徘徊、遗留物、区域人数统计、客流统计、异常奔跑、取走检测、周界保护、单向周界保护、密度统计、人群聚集等。

比如，当对视频数据进行入侵检测分析后，该视频分析结果可以包括：入侵次数、入侵时间、入侵物特征等。

上述视频分析结果可以以xml（Extensible Markup Language，可扩展标记语言）格式或者文本格式保存。然后，将上述视频数据的分析结果发送给MAM系统。

步骤13、MAM系统利用标签处理服务，结合上述视频分析结果对上述视频数据进行特征提取，获得视频数据的MAM属性和场景属性。

MAM系统利用其内部提供的标签处理服务，结合上述视频分析结果对上述MAM系统指定的文件夹中存储的视频数据进行特征提取，获取视频数据的MAM属性。在该处理过程中，视频分析结果以XML的形式传递给标签处理服务，标签处理服务将分析结果处理成MAM可以识别的标签，并且根据视频分析结果中的关联ID，MAM标签处理服务将生成的标签和文件夹中存储的视频数据关联。从而实现标签处理服务和视频分析结果相结合来提取MAM属性。

上述MAM属性可以包括视频采集设备的名称、IP地址、经纬度、物品消失、人物逆行和其他分析结果得到的相关属性等。

MAM系统还对上述视频数据进行场景分析，该场景分析将视频数据的不同场景进行区分，获取视频的场景属性，该场景属性可以包括视频数据的标识、名称、录制起止时间、入库时间、格式、监控对象和视频数据中包括的片段的数量、描述信息等。

MAM系统将上述视频数据的MAM属性和场景属性存储到MAM的属性数据库中，并通过视频数据的标识与视频数据相关联。在属性数据库中建立索引列表，列出与视频数据相关的各种属性。

步骤14、将上述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，通过视频数据与属性的关联关系，将检索属性对应的视频数据快速检索出来。

当需要在上述MAM系统指定的文件夹中存储的海量的视频数据中检索所需要的视频时，可以依据上述属性数据库中存储的视频数据的MAM属性和场景属性进行视频检索。

在进行视频数据检索时，可以将上述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，根据所述检索属性在所述属性数据库中进行检索，通过视频数据与属性的关联关系，将与输入的检索属性对应的视频文件、视频帧和/或视频段快速检索出来。

属性组合越丰富，检索效率越高，检索范围越小。MAM系统可以自定义搜索条件，可以对检索条件进行添加、删除、修改等动态操作。

上述视频数据的检索结果可以以各种形式展示，包括视频缩略图、视频格式、视频录制时间等字段，显示结果条件可以筛选和排序。

MAM系统还具有超强的视频并发处理能力，可以同时接受对海量视频的多种操作，如上传、下载、检索、点播等。可以承受海量视频快速检索的压力。

在实际应用中，可以将多个MAM系统进行分布式部署，解决海量视频的查询压力，提高检索效率。

实施例二

该实施例提供的一种基于MAM的海量视频快速检索方法的处理流程如图2所示，该处理流程对应的是实时视频分析，包括如下的处理步骤：

步骤21、对视频数据进行采集，将采集的视频存储在MAM指定的文件夹下。

通过视频采集系统中的前端视频采集设备（比如，摄像头）进行视频采集，对采集到的视频数据进行统一的编码或转码，形成统一的视频格式，存储到MAM系统指定的文件夹中。

MAM系统是广泛应用于广电行业进行媒体采集、存储、编辑、播放的专业性软件，可以进行视频场景分析、处理，具有强大的属性关联与查询机制，可以实现视频与属性的自动关联，可以基于广泛的搜索条件进行快速、有效和准确的媒体资源定位。另外，MAM基于SOA（service-oriented architecture，面向服务的体系结构）架构，支持分布式部署，可以将存储在不同物理节点的视频在逻辑上进行统一的管理，与传统的视频集中式存储相比较，其查询压力较小，能做到压力负载均衡，因此带来稳定、快速的视频检索。

MAM还具有超强的视频并发处理能力，并发查询时占用更小的带宽，可以同时对视频进行多种操作，如上传、下载、查询、点播等。

步骤22、利用视频分析工具对上述即将进行存储的视频数据进行分析，获得视频数据的分析结果。该步骤22与上述步骤21中的存储视频数据的处理过程同时执行。

该实施例在采集完视频数据，对视频数据进行存储的同时，对视频数据进行实时分析，这种方法称为实时视频分析。

通过硬件设备或者计算机软件实现的视频分析工具对视频数据进行实时视频分析的过程中，可以根据用户设定的交通和/或安防检测规则，有选择地设置视频分析的触发事件的特征、区域和规则等，根据各种触发事件对视频数据分别进行入侵检测分析、遗弃物检测分析、徘徊检测分析、人数统计分析、物品搬移检测分析等多种检测分析，获取视频数据的分析结果。上述检测规则分为两类：交通和安防。交通规则包括：车位禁区、车辆逆行、违规变道、车辆统计、非法停车、路况检测等。安防规则包括：禁区、逆行、攀爬、徘徊、遗留物、区域人数统计、客流统计、异常奔跑、取走检测、周界保护、单向周界保护、密度统计、人群聚集等。

比如，当对视频数据进行入侵检测分析后，该视频分析结果可以包括：入侵次数、入侵时间、入侵物特征等。

上述视频分析结果可以以xml（Extensible Markup Language，可扩展标记语言）格式或者文本格式保存。然后，将上述视频数据的分析结果发送给MAM系统。

步骤23、MAM系统利用标签处理服务，结合上述视频分析结果对上述视频数据进行特征提取，获得视频数据的MAM属性和场景属性。

MAM系统利用其内部提供的标签处理服务，结合上述视频分析结果对上述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行特征提取，获取视频数据的MAM属性。在该处理过程中，视频分析结果以XML的形式传递给标签处理服务，标签处理服务将分析结果处理成MAM可以识别的标签，并且根据视频分析结果中的关联ID，MAM标签处理服务将生成的标签和文件夹中存储的视频数据关联。从而实现标签处理服务和视频分析结果相结合来提取MAM属性。

上述MAM属性可以包括视频采集设备的名称、IP地址、经纬度、物品消失、人物逆行和其他分析结果得到的相关属性等。

MAM系统还对上述视频数据进行场景分析，该场景分析将视频数据的不同场景进行区分，获取视频的场景属性，该场景属性包括视频数据的标识、名称、录制起止时间、入库时间、格式、监控对象和视频数据中包括的片段的数量、描述信息等。

MAM系统将上述视频数据的MAM属性和场景属性存储到MAM的属性数据库中，并通过视频数据的标识与视频数据相关联。在属性数据库中建立索引列表，列出与视频数据相关的各种属性。

步骤24、将上述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，通过视频数据与属性的关联关系，将检索属性对应的视频数据快速检索出来。

当需要在上述MAM系统指定的文件夹中存储的海量的视频数据中检索所需要的视频时，可以依据上述属性数据库中存储的视频数据的MAM属性和场景属性进行视频检索。

在进行视频数据检索时，可以将上述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，根据所述检索属性在所述属性数据库中进行检索，通过视频数据与属性的关联关系，将与输入的检索属性对应的视频文件、视频帧和/或视频段快速检索出来。

属性组合越丰富，检索效率越高，检索范围越小。MAM系统可以自定义搜索条件，可以对检索条件进行添加、删除、修改等动态操作。

上述视频数据的检索结果可以以各种形式展示，包括视频缩略图、视频格式、视频录制时间等字段，显示结果条件可以筛选和排序。

MAM系统还具有超强的视频并发处理能力，可以同时接受对海量视频的多种操作，如上传、下载、检索、点播等。可以承受海量视频快速检索的压力。

在实际应用中，可以将多个MAM系统进行分布式部署，解决海量视频的查询压力，提高检索效率。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体（Read-Only Memory，ROM）或随机存储记忆体（Random Access Memory，RAM）等。

实施例三

本发明实施例还提供了一种基于MAM系统的海量视频快速检索的装置，其具体实现结构如图3所示，具体可以包括：

视频属性提取单元32，用于利用视频分析工具对视频数据进行分析，获得视频数据的分析结果，利用MAM系统提供的标签处理服务，结合所述视频分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；

视频属性存储单元33，用于将所述视频数据的MAM属性和场景属性和所述视频数据进行关联保存，

视频检索单元34，用于利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索。

进一步地，所述装置还可以包括：

视频采集单元31，用于通过视频采集设备进行视频采集，对采集到的视频数据进行统一的编码或转码，形成统一的视频格式，并存储到MAM系统指定的文件夹中。

具体的，所述视频属性提取单元32的结构如图4所示，可以包括：

视频分析处理模块321，用于根据用户设定的交通和/或安防检测规则设置视频分析的触发事件的特征、区域和规则，根据各种触发事件通过视频分析工具对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行入侵检测分析、遗弃物检测分析、徘徊检测分析、人数统计分析、物品搬移检测分析中的至少一项，获取视频数据的分析结果；

MAM属性和场景属性获取模块322，用于利用MAM系统内部提供的标签处理服务，结合所述视频分析结果对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行特征提取，将所述视频分析结果处理成MAM可以识别的标签，获取视频数据的MAM属性，该MAM属性包括视频采集设备的名称、IP地址、经纬度、物品消失、人物逆行、人数统计、车辆逆行、车牌号码、车辆颜色、攀爬、闯入和其他分析结果得到的相关属性；

利用MAM系统对所述视频数据进行场景分析，该场景分析将视频数据的不同场景进行区分，获取视频的场景属性，该场景属性包括视频数据的标识、名称、录制起止时间、入库时间、格式、监控对象和视频数据中包括的片段的数量、描述信息等。

具体的，所述的视频属性存储单元33，还用于将所述视频数据的MAM属性和场景属性存储到MAM的属性数据库中，并通过视频数据的标识将所述MAM属性和场景属性与所述MAM系统指定的文件夹中存储的视频数据相关联。

具体的，所述视频检索单元34，还用于将所述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，根据所述检索属性在所述属性数据库中进行检索，通过视频数据与属性的关联关系，将所述检索属性对应的视频文件、视频帧和/或视频段快速检索出来。

综上所述，本发明实施例结合视频分析和MAM各自的优势，提取并保存视频数据的各种属性，将视频数据和属性进行关联，借助MAM系统的视频数据和属性的自动关联功能及检索功能，从而实现对海量视频进行高效率、快速地检索。

本发明实施例可以有效地管理了各类监控产生的视频数据，为解决安全问题等提供了良好的辅助决策功能。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。

Claims (9)

1.一种基于媒资管理系统的海量视频快速检索方法，其特征在于，包括：

利用视频分析工具对视频数据进行分析，获得视频数据的分析结果；

利用媒资管理系统MAM系统提供的标签处理服务，结合所述视频数据的分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；

将所述视频数据的MAM属性、场景属性和所述视频数据进行关联保存，利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索；

所述的利用视频分析工具对视频数据进行分析，获得视频数据的分析结果包括：

根据用户设定的交通和/或安防检测规则设置视频分析的触发事件的特征、区域和规则，根据各种触发事件通过视频分析工具，对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行入侵检测分析、遗弃物检测分析、徘徊检测分析、人数统计分析、物品搬移检测分析中的至少一项，获取视频数据的分析结果。

2.根据权利要求1所述的基于媒资管理系统的海量视频快速检索方法，其特征在于，所述的方法还包括：

通过视频采集设备进行视频采集，对采集到的视频数据进行统一的编码或转码，形成统一的视频格式，并存储到MAM系统指定的文件夹中。

3.根据权利要求1所述的基于媒资管理系统的海量视频快速检索方法，其特征在于，所述的利用MAM系统提供的标签处理服务，结合所述视频数据的分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性包括：

利用MAM系统内部提供的标签处理服务，结合所述视频数据的分析结果对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行特征提取，将所述视频数据的分析结果处理成MAM可以识别的标签，获取视频数据的MAM属性，该MAM属性包括视频采集设备的名称、IP地址、经纬度、物品消失、人物逆行、人数统计、车辆逆行、车牌号码、车辆颜色、攀爬、闯入和其他分析结果得到的相关属性；

利用MAM系统对所述视频数据进行场景分析，该场景分析将视频数据的不同场景进行区分，获取视频的场景属性，该场景属性包括视频数据的标识、名称、录制起止时间、入库时间、格式、监控对象和视频数据中包括的片段的数量、描述信息。

4.根据权利要求1所述的基于媒资管理系统的海量视频快速检索方法，其特征在于，所述的将所述视频数据的MAM属性和场景属性和所述视频数据进行关联保存，利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索，包括：

将所述视频数据的MAM属性和场景属性存储到MAM的属性数据库中，并通过视频数据的标识将所述MAM属性和场景属性与所述MAM系统指定的文件夹中存储的视频数据相关联；

将所述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，根据所述检索属性在所述属性数据库中进行检索，通过视频数据与属性的关联关系，将所述检索属性对应的视频文件、视频帧和/或视频段检索出来。

5.一种基于媒资管理系统的海量视频快速检索装置，其特征在于，包括：

视频属性提取单元，用于利用视频分析工具对视频数据进行分析，获得视频数据的分析结果，利用MAM系统提供的标签处理服务，结合所述视频数据的分析结果对所述视频数据进行特征提取，获得所述视频数据的MAM属性和场景属性；

视频属性存储单元，用于将所述视频数据的MAM属性和场景属性和所述视频数据进行关联保存；

视频检索单元，用于利用所述视频数据的MAM属性和场景属性对所述视频数据进行检索；

所述视频属性提取单元包括：

视频分析处理模块，用于根据用户设定的交通和/或安防检测规则设置视频分析的触发事件的特征、区域和规则，根据各种触发事件通过视频分析工具，对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行入侵检测分析、遗弃物检测分析、徘徊检测分析、人数统计分析、物品搬移检测分析中的至少一项，获取视频数据的分析结果。

6.根据权利要求5所述的基于媒资管理系统的海量视频快速检索装置，其特征在于，所述装置还包括：

视频采集单元，用于通过视频采集设备进行视频采集，对采集到的视频数据进行统一的编码或转码，形成统一的视频格式，并存储到MAM系统指定的文件夹中。

7.根据权利要求5所述的基于媒资管理系统的海量视频快速检索装置，其特征在于，所述视频属性提取单元还包括：

MAM属性和场景属性获取模块，用于利用MAM系统内部提供的标签处理服务，结合所述视频数据的分析结果对所述MAM系统指定的文件夹中存储的视频数据或即将存储的视频数据进行特征提取，将所述视频数据的分析结果处理成MAM可以识别的标签，获取视频数据的MAM属性，该MAM属性包括视频采集设备的名称、IP地址、经纬度、物品消失、人物逆行、人数统计、车辆逆行、车牌号码、车辆颜色、攀爬、闯入和其他分析结果得到的相关属性；

利用MAM系统对所述视频数据进行场景分析，该场景分析将视频数据的不同场景进行区分，获取视频的场景属性，该场景属性包括视频数据的标识、名称、录制起止时间、入库时间、格式、监控对象和视频数据中包括的片段的数量、描述信息。

8.根据权利要求5所述的基于媒资管理系统的海量视频快速检索装置，其特征在于：

所述的视频属性存储单元，还用于将所述视频数据的MAM属性和场景属性存储到MAM的属性数据库中，并通过视频数据的标识将所述MAM属性和场景属性与所述MAM系统指定的文件夹中存储的视频数据相关联。

9.根据权利要求8所述的基于媒资管理系统的海量视频快速检索装置，其特征在于：

所述视频检索单元，还用于将所述视频数据的MAM属性和场景属性中的一个或多个属性组合作为检索属性，根据所述检索属性在所述属性数据库中进行检索，通过视频数据与属性的关联关系，将所述检索属性对应的视频文件、视频帧和/或视频段快速检索出来。