CN109255051B - 一种视频搜索方法、装置、云存储系统及计算机设备 - Google Patents
一种视频搜索方法、装置、云存储系统及计算机设备 Download PDFInfo
- Publication number
- CN109255051B CN109255051B CN201710565416.1A CN201710565416A CN109255051B CN 109255051 B CN109255051 B CN 109255051B CN 201710565416 A CN201710565416 A CN 201710565416A CN 109255051 B CN109255051 B CN 109255051B
- Authority
- CN
- China
- Prior art keywords
- index information
- video
- monitoring video
- information
- storage node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2181—Source of audio or video content, e.g. local disk arrays comprising remotely distributed storage units, e.g. when movies are replicated over a plurality of video servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明实施例提供了一种视频搜索方法、装置、云存储系统及计算机设备,方法包括:管理节点接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;所述管理节点确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点;各所述目标存储节点接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。本发明实施例能够实现云存储系统中监控视频的搜索。
Description
技术领域
本发明涉及视频监控技术领域,特别是涉及一种视频搜索方法、装置、云存储系统及计算机设备。
背景技术
随着视频监控技术的不断发展,平安城市、智能小区、智能交通等建设的日益普遍,视频监控应用越来越广泛。这将导致监控视频呈几何指数的爆炸性增长。
为满足对海量监控视频的存储,云存储系统应运而生。具体的,云存储系统可以包括管理节点、多个存储节点,前端监控设备采集的监控视频需要通过接入节点写入云存储系统。在监控视频存储过程中,如图1所示,数据流向为1.1-1.2-1.3-1.4,即接入节点在具体接入任一前端监控设备的监控视频时,可以首先通过接入节点向管理节点申请,为该前端监控设备分配一存储节点,从而该前端监控设备可以将其采集的监控视频发送给该存储节点存储。
其中,管理节点中存储有各存储节点中所存储监控视频的索引信息,该索引信息中至少包括各存储节点中所存储监控视频对应的粗略位置信息,如所属省、市、地区信息等;各存储节点中也存储有该存储节点所存储监控视频的索引信息,该索引信息中至少包括各监控视频对应的时间信息、详细位置信息,如所属街道名称等。
但是,仅仅只是提供存储大量监控视频的能力,对用户的实际应用来说还远远不够。如何智能的、快速的在云存储系统存储的海量监控视频中找到用户关注的、感兴趣的监控视频,如,某一时间段内位于某个位置处的监控视频,或包含某个特定目标的监控视频,成为一个亟待解决的问题。
发明内容
本发明实施例的目的在于提供一种视频搜索方法、装置、云存储系统及计算机设备,以实现云存储系统中监控视频的搜索。具体技术方案如下:
第一方面,本发明实施例提供了一种视频搜索方法,所述方法包括:
管理节点接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
所述管理节点确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点;
各所述目标存储节点接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
可选的,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述各所述目标存储节点根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息的步骤包括:
任一目标存储节点对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
该目标存储节点在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
该目标存储节点在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
可选的,所述该目标存储节点在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息的步骤包括:
该目标存储节点构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断所述初始索引信息集合是否为空;
如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;
如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
可选的,各存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,所述采用预先配置的特征算法提取该监控视频的视频特征信息的步骤包括:
采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息的步骤包括:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤。
可选的,所述将所述目标监控视频索引信息发送给所述管理节点之后,所述方法还包括:
所述管理节点接收各目标存储节点发送的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述客户端。
可选的,所述将所述目标监控视频索引信息发送给所述客户端之后,所述方法还包括:
所述管理节点接收所述客户端发送的确认信息,并根据所述确认信息对各目标存储节点中的第一预设阈值进行调整。
可选的,所述根据所述确认信息对各目标存储节点中的第一预设阈值进行调整的步骤包括:
当所述确认信息中包括的准确率大于第二预设阈值时,减小所述第一预设阈值;
当所述确认信息中包括的准确率小于或等于所述第二阈值时,增大所述第一预设阈值。
可选的,所述管理节点确定存储有所述待搜索监控视频的目标存储节点的步骤包括:
所述管理节点根据所述空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有所述待搜索监控视频的目标存储节点。
可选的,所述将所述视频搜索请求发送至各所述目标存储节点的步骤包括:
所述管理节点构建包含各目标存储节点标识的目标存储节点列表;
判断所述目标存储节点列表是否为空;当所述目标存储节点列表不为空时,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功;
当发送成功时,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行所述判断所述目标存储节点列表是否为空的步骤;
当发送失败时,返回执行所述判断所述存储节点列表是否为空的步骤。
可选的,所述管理节点接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求之前,所述方法还包括:
所述客户端接收用户上传的所述参考图片;
所述客户端接收用户输入的所述空间范围、所述时间范围、和所述属性信息;
所述客户端将所述参考图片、所述空间范围、所述时间范围、和所述属性信息整合后生成所述视频搜索请求,并将所述视频搜索请求发送给所述管理节点。
第二方面,本发明实施例提供了一种视频搜索方法,应用于云存储系统中的目标存储节点,所述云存储系统还包括管理节点,所述方法包括:
接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
可选的,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息的步骤包括:
对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
可选的,所述在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息的步骤包括:
构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断所述初始索引信息集合是否为空;
如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;
如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
可选的,所述目标存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,所述采用预先配置的特征算法提取该监控视频的视频特征信息的步骤包括:
采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息的步骤包括:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
第三方面,本发明实施例提供了一种云存储系统,所述云存储系统包括:管理节点和多个存储节点,
所述管理节点,用于接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点;
各所述目标存储节点,用于接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
可选的,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,
任一目标存储节点,具体用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
可选的,任一目标存储节点,具体用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;判断所述初始索引信息集合是否为空;如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
可选的,各存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,
任一目标存储节点,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;在将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息时,判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
可选的,所述管理节点,还用于接收各目标存储节点发送的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述客户端。
可选的,所述管理节点,还用于接收客户端发送的确认信息,并根据所述确认信息对各目标存储节点中的第一预设阈值进行调整。
可选的,所述管理节点,具体用于当所述确认信息中包括的准确率大于第二预设阈值时,减小所述第一预设阈值;当所述确认信息中包括的准确率小于或等于所述第二阈值时,增大所述第一预设阈值。
可选的,所述管理节点,具体用于根据所述空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有所述待搜索监控视频的目标存储节点。
可选的,所述管理节点,具体用于构建包含各目标存储节点标识的目标存储节点列表;判断所述目标存储节点列表是否为空;当所述目标存储节点列表不为空时,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功;当发送成功时,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行所述判断所述目标存储节点列表是否为空的步骤;当发送失败时,返回执行所述判断所述存储节点列表是否为空的步骤。
第四方面,本发明实施例提供了一种视频搜索装置,应用于云存储系统中的目标存储节点,所述云存储系统还包括管理节点,所述装置包括:
接收模块,用于接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
搜索模块,用于根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
可选的,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述搜索模块包括:
特征提取子模块,用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
查找子模块,用于在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
搜索子模块,用于在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
可选的,所述搜索子模块,包括:
构建子单元,用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断子单元,用于判断所述初始索引信息集合是否为空;
特征提取子单元,用于当所述判断子单元判断结果为否时,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息;
搜索子单元,用于根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并触发所述判断子单元;
确定子单元,用于当所述判断子单元判断结果为是时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
可选的,所述特征提取子单元,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述确定子单元,具体用于:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
第五方面,本发明实施例提供了一种计算机设备,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口、所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的程序时,实现上述第二方面所述的方法步骤。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。当然,本发明实施例并不一定达到上述全部的优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为现有的监控视频存储到云存储系统的过程示意图;
图2为应用本发明实施例的一种视频搜索方法的系统架构图;
图3为本发明实施例的一种视频搜索方法的流程图;
图4为本发明实施例的一种视频搜索方法的另一流程图;
图5为本发明实施例的一种视频搜索方法的另一流程图;
图6为本发明实施例的一种视频搜索方法的另一流程图;
图7为本发明实施例的一种视频搜索方法的另一流程图;
图8为本发明实施例的一种视频搜索方法的另一流程图;
图9为本发明实施例的云存储系统的结构示意图;
图10为本发明实施例的一种视频搜索装置的结构示意图;
图11为本发明实施例的一种计算机设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
以下通过具体实施例,对本发明进行详细说明。
请参考图2,其示出了应用本发明实施例方法的系统架构图。如图2所示,应用本发明实施例方法的系统可以包括云存储系统210和客户端220。其中,云存储系统210可以包括管理节点211和多个存储节点212,存储节点212中存储有监控视频。用户可以通过客户端220在存储节点212中搜索其想要的监控视频,具体的,客户端可以通过管理节点211将视频搜索请求发送给存储节点212,进而在存储节点212中进行视频搜索。
具体的,请参考图3,其示出了本发明实施例的一种视频搜索方法流程,该方法可以包括以下步骤:
S301,管理节点接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息。
在本发明实施例中,在云存储系统存储监控视频后,用户可以在云存储系统中搜索其感兴趣的监控视频,如包含某个人的所有监控视频,或包含某辆车在某个时间段的所有监控视频等。具体的,用户可以在客户端生成包含待搜索监控视频的特征信息的视频搜索请求,并将该视频搜索请求发送给云存储系统的管理节点,进而管理节点可以根据该视频搜索请求,在存储节点所存储监控视频中搜索出满足条件的监控视频。其中,上述特征信息可以包括以下至少一项:参考图片、空间范围、时间范围、和属性信息。
如,当想要搜索包含某个人的监控视频时,用户可以在客户端上传该人的照片,作为参考图片,从而可以根据该照片在云存储系统中搜索包含有该人的监控视频;或者,当想要搜索某人在某段时间内的监控视频,且知道该人在该段时间内的着装情况,如红色上衣黑色裤子时,用户可以将该人的照片和着装情况输入,着装情况作为属性信息,从而可以根据该照片和属性信息在云存储系统中搜索满足该条件的监控视频。
S302,所述管理节点确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点。
通常情况下,云存储系统可以包括多个存储节点。并且,不同存储节点中存储的监控视频是不同的,管理节点中存储有各存储节点所存储监控视频的索引信息,该索引信息中至少包括各存储节点中所存储监控视频对应的粗略位置信息,如所属省、市、地区信息等。
在本发明实施例中,管理节点接收到视频搜索请求后,可以首先确定存储有待搜索监控视频的目标存储节点,进而可以将视频搜索请求发送给各目标存储节点,以在各目标存储节点中进行监控视频搜索。
例如,当视频搜索请求中不包含空间范围、时间范围、属性信息等描述信息,只包含参考图片时,管理节点可以将所在云存储系统中所有的存储节点都确定为目标存储节点;当视频搜索请求中包含管理节点所存储索引信息中包含的相关信息,如空间范围等时,管理节点可以根据视频搜索请求中包括的空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有待搜索监控视频的目标存储节点。
S303,各所述目标存储节点接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
各目标存储节点接收到视频搜索请求后,可以根据本地所存储的监控视频、所存储监控视频索引信息、以及视频搜索请求中包括的特征信息,搜索与该特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将该目标监控视频索引信息发送给管理节点。
如,任一目标存储节点可以在本地存储的所有的索引信息中,依次读取各索引信息对应的监控视频,并提取该监控视频的视频特征信息。之后,可以计算该监控视频的视频特征信息与视频搜索请求中包括的特征信息的匹配度,当该匹配度大于预设阈值,如80%、85%、90%时,确定该索引信息为目标监控视频索引信息。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
作为本发明实施例的一种实施方式,为了提高视频搜索效率,当目标存储节点接收到的视频搜索请求中的特征信息包括:参考图片、空间范围、时间范围、和属性信息时,各目标存储节点进行监控视频搜索的过程,如图4所示,可以包括以下步骤:
S401,任一目标存储节点对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息。
本发明实施例中,当特征信息包括参考图片、空间范围、时间范围、和属性信息时,任一目标存储节点可以根据这些信息,快速准确的进行监控视频搜索。
具体的,目标存储节点可以首先对参考图片进行特征提取,得到该参考图片对应的图片特征信息。例如,目标存储节点可以利用任一种特征提取算法,对参考图片进行特征提取,本发明实施例对此不做限定。
S402,该目标存储节点在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息。
在本发明实施例中,为了提高监控视频搜索效率,目标存储节点可以不在自身存储的所有的监控视频中进行搜索,其可以根据特征信息中包括的空间范围和时间范围,在本地存储的监控视频索引信息中查找与该空间范围和时间范围匹配的候选监控视频索引信息。
例如,任一目标存储节点中存储的监控视频索引信息可以如表1所示:
表1
监控视频 | 时间信息 | 位置信息 |
1 | 2017.3.2.1:00:00-2017.3.2.1:10:00 | 街道a |
2 | 2017.3.2.1:10:00-2017.3.2.1:20:00 | 街道a |
3 | 2017.3.2.1:20:00-2017.3.2.1:30:00 | 街道a |
上述监控视频索引信息只是示例性的示出存储节点中所存储监控视频索引信息的内容,并不构成对监控视频索引信息的限定。
当特征信息中包括的空间范围为街道a,时间范围为2017.3.2.1:01:00-2017.3.2.1:18:00时,该存储节点可以在其存储的监控视频索引信息中,查找到与该空间范围和时间范围匹配的候选监控视频索引信息为监控视频1和2对应的索引信息。
S403,该目标存储节点在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
确定候选监控视频索引信息后,该目标存储节点可以进一步在候选监控视频索引信息中,确定满足条件的目标监控视频索引信息。
具体的,该目标存储节点可以在候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频。如,该目标存储节点可以根据每条候选监控视频索引信息中包括的存储位置,从对应位置处读取对应的监控视频。读取到监控视频后,该存储节点可以进一步提取该监控视频的视频特征信息。
在本发明实施例中,各存储节点中通常存储的是相同应用场景的监控视频,如,一个存储节点中存储的是道路监控视频,另一存储节点中存储的是小区监控视频等。可以理解,针对不同场景的监控视频,通常关注的视频特征也是不同的。如,针对道路监控视频,通常关注的是车辆特征;针对小区监控视频,通常关注的是人员特征。
因此,在本发明实施例中,可以针对各存储节点,根据其中存储的监控视频的应用场景,预先在各存储节点中配置对应的一种特征算法。如,针对存储有道路监控视频的存储节点,可以在其中配置针对车辆进行特征提取的特征算法;针对存储有小区监控视频的存储节点,可以在其中配置针对人员进行特征提取的特征算法。当对监控视频进行特征提取时,存储节点即可根据预先配置的特征算法,对监控视频进行特征提取,从而得到监控视频的视频特征信息。
得到任一候选监控视频索引信息对应的视频特征信息后,该存储节点可以根据该监控视频的视频特征信息,以及图片特征信息和属性信息,计算该条候选监控视频索引信息与特征信息的匹配度。如,该存储节点可以根据任一种匹配度计算方法,来计算该条候选监控视频索引信息与特征信息的匹配度,本发明实施例对此不做限定。
计算得到该条候选监控视频索引信息与特征信息的匹配后,该存储节点可以进一步判断该匹配度是否大于第一预设阈值,如果是,则将该条候选监控视频索引信息作为目标监控视频索引信息。
如,当目标存储节点确定监控视频1和监控视频2对应的索引信息为候选监控视频索引信息时,其可以首先确定监控视频1的索引信息是否为目标监控视频索引信息,再确定监控视频2的索引信息是否为目标监控视频索引信息。当然,也可以先确定监控视频2的索引信息是否为目标监控视频索引信息,再确定监控视频1的索引信息是否为目标监控视频索引信息,本发明实施例对此不做限定。
本实施例中,目标存储节点可以首先在其存储的监控视频索引信息中,查找出满足空间范围和时间范围的候选监控视频索引信息,进而再确定目标监控视频索引信息,从而能够提高监控视频搜索效率。
作为本发明实施例的一种实施方式,目标存储节点在各候选监控视频索引信息中确定目标监控视频索引信息时,为了提高准确性,防止漏掉一个或多个候选监控视频索引信息,如图5所示,该过程可以包括以下步骤:
S501,该目标存储节点构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合。
在本实施例中,为了提高监控视频搜索的准确性,目标存储节点在得到候选监控视频索引信息后,可以构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合。
如,当目标存储节点确定候选监控视频索引信息为监控视频1和监控视频2对应的索引信息时,其可以构建如表2所示的初始索引信息集合:
表2
监控视频 | 时间信息 | 位置信息 |
1 | 2017.3.2.1:00:00-2017.3.2.1:10:00 | 街道a |
2 | 2017.3.2.1:10:00-2017.3.2.1:20:00 | 街道a |
S502,判断所述初始索引信息集合是否为空;如果否,执行步骤S503,如果是,执行步骤S504。
S503,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行步骤S502。
当目标存储节点判断出初始索引信息集合不为空时,该目标存储节点可以在该初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,并对该监控视频进行特征提取,之后可以根据该监控视频的视频特征信息,以及图片特征信息和属性信息,确定该监控视频索引信息与特征信息的匹配度。该过程与图4所示实施例中确定任一候选监控视频索引信息与特征信息的匹配度的过程基本相同,在此不进行赘述。
当目标存储节点确定任一条候选监控视频与特征信息的匹配度大于第一预设阈值时,其可以将该条候选监控视频索引信息加入结果索引信息集合,将该条候选监控视频索引信息从初始索引信息集合删除,并返回判断初始索引信息集合是否为空。
例如,当初始索引信息集合为表2所示时,目标存储节点可以首先针对监控视频1,判断监控视频1的索引信息与特征信息的匹配度是否大于第一预设阈值,如果是,将监控视频1的索引信息加入结果索引信息集合;如果否,将监控视频1的索引信息从初始索引信息集合删除,并继续针对监控视频2进行判断,确定是否将监控视频2的索引信息接入结果索引信息集合中。
S504,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
当初始索引信息集合为空时,表明已对所有的候选监控视频索引信息进行了判断,此时,在结果索引信息集合中的索引信息即为与特征信息的匹配度大于第一预设阈值的索引信息。这种情况下,该目标存储节点可以直接将结果索引信息集合中包括的索引信息作为目标监控视频索引信息。
本实施例中,可以通过构建初始索引信息集合和结果索引信息集合,来确定目标监控视频索引信息,从而能够保证对每个候选监控视频索引信息都进行判断,提高监控视频搜索的准确性。
可以理解,有些情况下,针对同一应用场景,也可能会进行不同类型的视频搜索。如,针对小区监控视频,除了进行人员搜索外,有时候也可能会需要进行车辆搜索。
因此,作为本发明实施例的一种实施方式,为了提高监控视频搜索的适用性和准确性,在各存储节点中配置特征算法时,可以在各存储节点中配置多种特征算法。并且,各特征算法可以有其对于的优先级。如,针对存储小区监控视频的存储节点,可以在其中配置两种特征算法,分别为针对车辆进行特征提取的特征算法和针对人员进行特征提取的特征算法,且针对人员进行特征提取的特征算法的优先级高于针对车辆进行特征提取的特征算法的优先级。
相应的,目标存储节点在各候选监控视频索引信息中确定目标监控视频索引信息时,如图6所示,该过程可以包括以下步骤:
S601,该目标存储节点构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合。
S602,判断所述初始索引信息集合是否为空;如果否,执行步骤S603,如果是,执行步骤S604。
S603,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用优先级最高的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行步骤S602。
上述步骤S601-S603与图5所示实施例中步骤S501-S503基本相同,在此不进行赘述。区别点在于步骤S503中,在目标存储节点中预先配置了多种特征算法的情况下,目标存储节点提取监控视频的视频特征信息时,所用的是优先级最高的特征算法。
S604,判断所述结果索引信息集合是否为空,如果是,执行步骤S605,如果否,执行步骤S608。
在本发明实施例中,当得到结果索引信息集合后,目标存储节点可以判断该结果索引信息集合是否为空。
当目标存储节点确定结果索引信息集合为空时,可能是因为所用的特征算法有误造成的。这种情况下,目标存储节点可以采用其他的特征算法对监控视频进行特征提取,并重新根据所提取的视频特征信息在候选监控视频索引信息中确定目标监控视频特征信息。
S605,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合。
S606,判断最新构建的初始索引信息集合是否为空,如果否,执行步骤S607,如果是,返回执行步骤S604。
S607,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行步骤S606。
上述步骤S605-S607与上述步骤S601-S603基本相同,在此不进行赘述。区别点在于步骤S607中,目标存储节点提取监控视频的视频特征信息时,所用的是下一优先级的特征算法。
也就是说,目标存储节点在步骤S603中采用优先级最高的特征算法对监控视频进行特征提取,并进行匹配度计算之后,得到的结果索引信息集合为空时,在步骤S607中采用优先级仅次于最高优先级的特征算法再次对监控视频进行特征提取并进行匹配度计算。
采用优先级仅次于最高优先级的特征算法对所有的候选监控视频索引信息对应的监控视频进行特征提取并进行匹配度计算后,可以再次判断结果索引信息集合是否为空,若是,则再次使用第三优先级的特征算法对所有的候选监控视频索引信息对应的监控视频进行特征提取并进行匹配度计算,循环上述过程,直到结果索引信息集合不为空,或使用了所有的特征算法对候选监控视频索引信息对应的监控视频进行特征提取并进行匹配度计算。
S608,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
当存储节点确定结果索引信息集合不为空时,其可以将结果索引信息集合中包括的索引信息作为目标监控视频索引信息。
本实施例中,可以通过多种特征算法对监控视频进行特性提取,从而可以提高监控视频搜索的全面性和准确性。
作为本发明实施例的一种实施方式,管理节点接收到各目标存储节点发送的目标监控视频索引信息后,可以将目标监控视频索引信息发送给客户端。并且,管理节点还可以进一步根据客户端的反馈信息,对各目标存储节点中的第一预设阈值进行调整。
具体的,客户端接收到管理节点发送的目标监控视频索引信息后,可以根据目标监控视频索引信息,从各目标存储节点中获取对应的监控视频并展示,从而用户可以在客户端观看所展示的监控视频。例如,客户端可以根据监控视频索引信息中包括的各监控视频所在存储节点标识及存储位置,从对应存储节点相应位置处获取各监控视频并展示。
当用户在客户端观看所展示的监控视频后,其还可以判断监控视频是否为其想要搜索的监控视频,并输入确认信息。如,其可以输入监控视频的准确率,即其可以确认搜索到的监控视频中,符合要求的监控视频占所有的监控视频的比例。客户端接收到用户输入的确认信息后,可以将该确认信息发送给管理节点。
管理节点接收到确认信息后,可以根据该确认信息对各目标存储节点中的第一预设阈值进行调整。例如,当确认信息中包括的准确率大于第二预设阈值时,表明当前的第一预设阈值比较大;这种情况下,管理节点可以减小第一预设阈值,以搜索到更多的监控视频。当确认信息中包括的准确率小于或等于第二阈值时,表明当前的第一预设阈值比较小,监控视频搜索准确性较低;这种情况下,管理节点可以增大第一预设阈值,以提高监控视频搜索的准确性。
本实施例中,管理节点可以根据客户的反馈信息,对目标存储节点的第一预设阈值进行调整,从而后续再次进行监控视频搜索时,可以搜索到更多满足要求的监控视频,或提高监控视频搜索的准确性。
作为本发明实施例的一种实施方式,管理节点在确定目标存储节点后,为了准确的将视频搜索请求准确的发送给各目标存储节点,如图7所示,该过程可以包括以下步骤:
S701,所述管理节点构建包含各目标存储节点标识的目标存储节点列表。
在本发明实施例中,确定目标存储节点后,管理节点可以构建包含各目标存储节点标识的目标存储节点列表。如,管理节点构建的目标存储节点列表中可以包括目标存储节点1、目标存储节点2、目标存储节点3。
S702,判断所述目标存储节点列表是否为空;如果否,执行步骤S703,如果是,结束。
S703,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功,如果是,执行步骤S704,如果否,返回执行步骤S702。
当管理节点判断出目标存储节点列表不为空时,其可以将视频搜索请求发送至目标存储节点列表中一目标存储节点。将视频搜索请求发送至一目标存储节点后,管理节点还可以确定是否发送成功。
如,管理节点可以根据各目标存储节点在目标存储节点列表的顺序,将视频搜索请求发送至排在最前面的目标存储节点。当目标存储节点列表中依次包括存储节点1、存储节点2、存储节点3时,管理节点可以首先将视频搜索请求发送至目标存储节点1。
S704,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行步骤S702。
当管理节点将视频搜索请求发送至一目标存储节点,并确认发送成功后,管理节点可以将该目标存储节点标识从目标存储节点列表移除,并返回判断目标存储节点列表是否为空,以保证将视频搜索请求发送至所有的目标存储节点。
本实施例中,管理节点可以通过构建目标存储节点列表的方式将视频搜索请求发送至目标存储节点,从而可以保证成功的将视频搜索请求发送至每个目标存储节点。
作为本发明实施例的一种实施方式,在进行监控视频搜索之前,客户端可以首先构建视频搜索请求,具体的,当进行监控视频搜索时,用户可以在客户端上传参考图片。如,其可以上传包含某个人或某辆车的图片,作为参考图片。
当用户想要搜索某人在一段时间内的监控视频,且大概知道这段时间内该人所在空间范围,和该人的着装情况等信息时,用户可以将这些信息输入客户端。如,用户可以在客户端提供的输入界面中,输入其所知道的所有的信息,以提高视频搜索的准确性。
客户端接收到用户输入的参考图片、空间范围、时间范围和属性信息后,其可以根据预定的格式标准,将参考图片、空间范围、时间范围、和属性信息整合后生成视频搜索请求,并将视频搜索请求发送给管理节点,以使管理节点根据视频搜索请求进行监控视频搜索。
本实施例中,客户端可以生成符合要求的视频搜索请求,从而保证云存储系统能够成功的进行监控视频搜索。
相应的,本发明实施例还提供了一种视频搜索方法,应用于云存储系统中的目标存储节点,该云存储系统还包括管理节点,如图8所示,该方法包括以下步骤:
S801,接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息。
在本发明实施例中,在云存储系统存储监控视频后,用户可以在云存储系统中搜索其感兴趣的监控视频,如包含某个人的所有监控视频,或包含某辆车在某个时间段的所有监控视频等。具体的,用户可以在客户端生成包含待搜索监控视频的特征信息的视频搜索请求,并将该视频搜索请求发送给云存储系统的管理节点,进而管理节点可以根据该视频搜索请求,在存储节点所存储监控视频中搜索出满足条件的监控视频。其中,上述特征信息可以包括以下至少一项:参考图片、空间范围、时间范围、和属性信息。
管理节点接收到视频搜索请求后,可以首先确定存储有待搜索监控视频的目标存储节点,进而可以将视频搜索请求发送给各目标存储节点,以在各目标存储节点中进行监控视频搜索。
例如,当视频搜索请求中不包含空间范围、时间范围、属性信息等描述信息,只包含参考图片时,管理节点可以将所在云存储系统中所有的存储节点都确定为目标存储节点;当视频搜索请求中包含管理节点所存储索引信息中包含的相关信息,如空间范围等时,管理节点可以根据视频搜索请求中包括的空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有待搜索监控视频的目标存储节点。
S802,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
目标存储节点接收到视频搜索请求后,可以根据本地所存储的监控视频、所存储监控视频索引信息、以及视频搜索请求中包括的特征信息,搜索与该特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将该目标监控视频索引信息发送给管理节点。
如,目标存储节点可以在本地存储的所有的索引信息中,依次读取各索引信息对应的监控视频,并提取该监控视频的视频特征信息。之后,可以计算该监控视频的视频特征信息与视频搜索请求中包括的特征信息的匹配度,当该匹配度大于预设阈值,如80%、85%、90%时,确定该索引信息为目标监控视频索引信息。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
作为本发明实施例的一种实施方式,为了提高视频搜索效率,当目标存储节点接收到的视频搜索请求中的特征信息包括:参考图片、空间范围、时间范围、和属性信息时,各目标存储节点进行监控视频搜索的过程可以包括:
对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
本实施例中,目标存储节点可以首先在其存储的监控视频索引信息中,查找出满足空间范围和时间范围的候选监控视频索引信息,进而再确定目标监控视频索引信息,从而能够提高监控视频搜索效率。
作为本发明实施例的一种实施方式,目标存储节点在各候选监控视频索引信息中确定目标监控视频索引信息时,为了提高准确性,防止漏掉一个或多个候选监控视频索引信息,该过程可以包括以下步骤:
构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断所述初始索引信息集合是否为空;
如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;
如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
本实施例中,可以通过构建初始索引信息集合和结果索引信息集合,来确定目标监控视频索引信息,从而能够保证对每个候选监控视频索引信息都进行判断,提高监控视频搜索的准确性。
可以理解,有些情况下,针对同一应用场景,也可能会进行不同类型的视频搜索。如,针对小区监控视频,除了进行人员搜索外,有时候也可能会需要进行车辆搜索。
因此,作为本发明实施例的一种实施方式,为了提高监控视频搜索的适用性和准确性,在各存储节点中配置特征算法时,可以在各存储节点中配置多种特征算法。并且,各特征算法可以有其对于的优先级。如,针对存储小区监控视频的存储节点,可以在其中配置两种特征算法,分别为针对车辆进行特征提取的特征算法和针对人员进行特征提取的特征算法,且针对人员进行特征提取的特征算法的优先级高于针对车辆进行特征提取的特征算法的优先级。
相应的,目标存储节点在各候选监控视频索引信息中确定目标监控视频索引信息时,该过程可以包括以下步骤:
采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息的步骤包括:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
本实施例中,可以通过多种特征算法对监控视频进行特性提取,从而可以提高监控视频搜索的全面性和准确性。
相应的,本发明实施例还提供了一种云存储系统,如图9所示,所述云存储系统包括:管理节点910和多个存储节点920,
所述管理节点910,用于接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;确定存储有所述待搜索监控视频的目标存储节点920,并将所述视频搜索请求发送至各所述目标存储节点920;
各所述目标存储节点920,用于接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点910。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
作为本发明实施例的一种实施方式,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,
任一目标存储节点920,具体用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
作为本发明实施例的一种实施方式,任一目标存储节点920,具体用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;判断所述初始索引信息集合是否为空;如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
作为本发明实施例的一种实施方式,各存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,
任一目标存储节点920,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;在将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息时,判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
作为本发明实施例的一种实施方式,所述管理节点910,还用于接收各目标存储节点发送的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述客户端。
作为本发明实施例的一种实施方式,所述管理节点910,还用于接收客户端发送的确认信息,并根据所述确认信息对各目标存储节点中的第一预设阈值进行调整。
作为本发明实施例的一种实施方式,所述管理节点910,具体用于当所述确认信息中包括的准确率大于第二预设阈值时,减小所述第一预设阈值;当所述确认信息中包括的准确率小于或等于所述第二阈值时,增大所述第一预设阈值。
作为本发明实施例的一种实施方式,所述管理节点910,具体用于根据所述空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有所述待搜索监控视频的目标存储节点。
作为本发明实施例的一种实施方式,所述管理节点910,具体用于构建包含各目标存储节点标识的目标存储节点列表;判断所述目标存储节点列表是否为空;当所述目标存储节点列表不为空时,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功;当发送成功时,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行所述判断所述目标存储节点列表是否为空的步骤;当发送失败时,返回执行所述判断所述存储节点列表是否为空的步骤。
相应的,本发明实施例还提供了一种视频搜索装置,应用于云存储系统中的目标存储节点,所述云存储系统还包括管理节点,如图10所示,所述装置包括:
接收模块1010,用于接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
搜索模块1020,用于根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
作为本发明实施例的一种实施方式,当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述搜索模块1020包括:
特征提取子模块(图中未示出),用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
查找子模块(图中未示出),用于在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
搜索子模块(图中未示出),用于在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息。
作为本发明实施例的一种实施方式,所述搜索子模块,包括:
构建子单元(图中未示出),用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断子单元(图中未示出),用于判断所述初始索引信息集合是否为空;
特征提取子单元(图中未示出),用于当所述判断子单元判断结果为否时,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息;
搜索子单元(图中未示出),用于根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并触发所述判断子单元;
确定子单元(图中未示出),用于当所述判断子单元判断结果为是时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
作为本发明实施例的一种实施方式,所述特征提取子单元,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述确定子单元,具体用于:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
相应的,本发明实施例还提供了一种计算机设备,如图11所示,该计算机设备包括:处理器1110、通信接口1120、存储器1130和通信总线1140,其中,所述处理器1110、所述通信接口1120、所述存储器1130通过所述通信总线1140完成相互间的通信;
所述存储器1130,用于存放计算机程序;
所述处理器1110,用于执行所述存储器1130上所存放的程序时,实现上述实施例所述的一种视频搜索方法。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
上述计算机设备提到的通信总线1140可以是外设部件互连标准(PeripheralComponent Interconnect,简称PCI)总线或扩展工业标准结构(Extended IndustryStandard Architecture,简称EISA)总线等。该通信总线1140可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口1120用于上述计算机设备与其他设备之间的通信。
存储器1130可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器1130还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器1110可以是通用处理器,包括中央处理器(Central ProcessingUnit,简称CPU)、网络处理器(Ne twork Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Applica tion SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
相应的,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例所述的一种视频搜索方法。
本发明实施例中,当管理节点接收到视频搜索请求时,其可以首先确定存储有待搜索视频的目标存储节点,从而将视频搜索请求发送给各目标存储节点,各目标存储节点接收到视频搜索请求后,可以分别在其自身存储的监控视频中,搜索与视频搜索请求匹配的目标监控视频索引信息,并将搜索到的目标监控视频索引信息发送给管理节点,从而管理节点接收到的即为与视频搜索请求匹配的全部的目标监控视频索引信息,实现了云存储系统中监控视频的搜索。并且,各存储节点单独搜索自身存储的与视频搜索请求匹配的目标监控视频索引信息,能够保证监控视频搜索的效率。
对于装置/云存储系统/计算机设备/存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (19)
1.一种视频搜索方法,其特征在于,应用于云存储系统,所述云存储系统包括管理节点和多个存储节点,所述方法包括:
管理节点接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围;时间范围、和属性信息;
所述管理节点确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点;
各所述目标存储节点接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点;
当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述各所述目标存储节点根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息的步骤包括:
任一目标存储节点对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
该目标存储节点在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
该目标存储节点构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断所述初始索引信息集合是否为空;
如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;
如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
2.根据权利要求1所述的方法,其特征在于,各存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,所述采用预先配置的特征算法提取该监控视频的视频特征信息的步骤包括:
采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息的步骤包括:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤。
3.根据权利要求1或2所述的方法,其特征在于,所述将所述目标监控视频索引信息发送给所述管理节点之后,所述方法还包括:
所述管理节点接收各目标存储节点发送的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述客户端。
4.根据权利要求3所述的方法,其特征在于,所述将所述目标监控视频索引信息发送给所述客户端之后,所述方法还包括:
所述管理节点接收所述客户端发送的确认信息,并根据所述确认信息对各目标存储节点中的第一预设阈值进行调整。
5.根据权利要求4所述的方法,其特征在于,所述根据所述确认信息对各目标存储节点中的第一预设阈值进行调整的步骤包括:
当所述确认信息中包括的准确率大于第二预设阈值时,减小所述第一预设阈值;
当所述确认信息中包括的准确率小于或等于所述第二阈值时,增大所述第一预设阈值。
6.根据权利要求1-2任一项所述的方法,其特征在于,所述管理节点确定存储有所述待搜索监控视频的目标存储节点的步骤包括:
所述管理节点根据所述空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有所述待搜索监控视频的目标存储节点。
7.根据权利要求1-2任一项所述的方法,其特征在于,所述将所述视频搜索请求发送至各所述目标存储节点的步骤包括:
所述管理节点构建包含各目标存储节点标识的目标存储节点列表;
判断所述目标存储节点列表是否为空;当所述目标存储节点列表不为空时,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功;
当发送成功时,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行所述判断所述目标存储节点列表是否为空的步骤;
当发送失败时,返回执行所述判断所述存储节点列表是否为空的步骤。
8.一种视频搜索方法,其特征在于,应用于云存储系统中的目标存储节点,所述云存储系统还包括管理节点,所述方法包括:
接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点;
当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息的步骤包括:
对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断所述初始索引信息集合是否为空;
如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;
如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
9.根据权利要求8所述的方法,其特征在于,所述目标存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,所述采用预先配置的特征算法提取该监控视频的视频特征信息的步骤包括:
采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息的步骤包括:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
10.一种云存储系统,其特征在于,所述云存储系统包括:管理节点和多个存储节点,
所述管理节点,用于接收客户端发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;确定存储有所述待搜索监控视频的目标存储节点,并将所述视频搜索请求发送至各所述目标存储节点;
各所述目标存储节点,用于接收所述视频搜索请求,根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点;
当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,
任一目标存储节点,具体用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;在所述候选监控视频索引信息中,依次读取每条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息作为目标监控视频索引信息;
任一目标存储节点,具体用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;判断所述初始索引信息集合是否为空;如果否,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并返回执行所述判断所述初始索引信息集合是否为空的步骤;如果是,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
11.根据权利要求10所述的云存储系统,其特征在于,各存储节点中预先配置有多种特征算法,且各特征算法有其对应的优先级,
任一目标存储节点,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;在将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息时,判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
12.根据权利要求10或11所述的云存储系统,其特征在于,
所述管理节点,还用于接收各目标存储节点发送的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述客户端。
13.根据权利要求12所述的云存储系统,其特征在于,
所述管理节点,还用于接收客户端发送的确认信息,并根据所述确认信息对各目标存储节点中的第一预设阈值进行调整。
14.根据权利要求13所述的云存储系统,其特征在于,
所述管理节点,具体用于当所述确认信息中包括的准确率大于第二预设阈值时,减小所述第一预设阈值;当所述确认信息中包括的准确率小于或等于所述第二阈值时,增大所述第一预设阈值。
15.根据权利要求10-11任一项所述的云存储系统,其特征在于,
所述管理节点,具体用于根据所述空间范围,以及本地保存的各存储节点中所存储监控视频的索引信息,确定存储有所述待搜索监控视频的目标存储节点。
16.根据权利要求10-11任一项所述的云存储系统,其特征在于,
所述管理节点,具体用于构建包含各目标存储节点标识的目标存储节点列表;判断所述目标存储节点列表是否为空;当所述目标存储节点列表不为空时,将所述视频搜索请求发送至所述目标存储节点列表中一目标存储节点,并确定是否发送成功;当发送成功时,将该目标存储节点标识从所述目标存储节点列表移除,并返回执行所述判断所述目标存储节点列表是否为空的步骤;当发送失败时,返回执行所述判断所述存储节点列表是否为空的步骤。
17.一种视频搜索装置,其特征在于,应用于云存储系统中的目标存储节点,所述云存储系统还包括管理节点,所述装置包括:
接收模块,用于接收所述管理节点发送的包含待搜索监控视频的特征信息的视频搜索请求,其中,所述视频搜索请求是所述管理节点确定所述目标存储节点存储有待搜索监控视频时,向所述目标存储节点发送的,所述特征信息包括以下至少一项:参考图片、空间范围、时间范围、和属性信息;
搜索模块,用于根据本地所存储的监控视频、所存储监控视频索引信息、以及所述特征信息,搜索与所述特征信息之间的匹配度大于第一预设阈值的目标监控视频索引信息,并将所述目标监控视频索引信息发送给所述管理节点;
当所述特征信息包括:参考图片、空间范围、时间范围、和属性信息时,所述搜索模块包括:
特征提取子模块,用于对所述参考图片进行特征提取,得到所述参考图片对应的图片特征信息;
查找子模块,用于在本地所存储监控视频索引信息中查找与所述空间范围和时间范围匹配的候选监控视频索引信息;
搜索子模块,所述搜索子模块,包括:
构建子单元,用于构建包含各候选监控视频索引信息的初始索引信息集合,并构建空的结果索引信息集合;
判断子单元,用于判断所述初始索引信息集合是否为空;
特征提取子单元,用于当所述判断子单元判断结果为否时,在所述初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用预先配置的特征算法提取该监控视频的视频特征信息;
搜索子单元,用于根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述初始索引信息集合删除,并触发所述判断子单元;
确定子单元,用于当所述判断子单元判断结果为是时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
18.根据权利要求17所述的装置,其特征在于,所述特征提取子单元,具体用于采用优先级最高的特征算法提取该监控视频的视频特征信息;
所述确定子单元,具体用于:
判断所述结果索引信息集合是否为空;当所述结果索引信息集合为空时,该目标存储节点再次构建包含各候选监控视频索引信息的初始索引信息集合,并判断最新构建的初始索引信息集合是否为空;
当最新构建的初始索引信息集合不为空时,在所述最新构建的初始索引信息集合中顺序读取位于最前面的一条候选监控视频索引信息对应的监控视频,采用下一优先级的特征算法提取该监控视频的视频特征信息,并根据该监控视频的视频特征信息,以及所述图片特征信息和所述属性信息,计算该条候选监控视频索引信息与所述特征信息的匹配度,并判断该匹配度是否大于第一预设阈值,如果是,将该条候选监控视频索引信息加入所述结果索引信息集合,将该条候选监控视频索引信息从所述最新构建的初始索引信息集合删除,并返回执行所述判断所述最新构建的初始索引信息集合是否为空的步骤;
当最新构建的初始索引信息集合为空时,返回执行所述判断所述结果索引信息集合是否为空的步骤;
当所述结果索引信息集合不为空时,将所述结果索引信息集合中包括的索引信息作为所述目标监控视频索引信息。
19.一种计算机设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口、所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的程序时,实现权利要求8-9任一所述的方法步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710565416.1A CN109255051B (zh) | 2017-07-12 | 2017-07-12 | 一种视频搜索方法、装置、云存储系统及计算机设备 |
PCT/CN2018/095279 WO2019011275A1 (zh) | 2017-07-12 | 2018-07-11 | 一种视频搜索方法、装置、云存储系统及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710565416.1A CN109255051B (zh) | 2017-07-12 | 2017-07-12 | 一种视频搜索方法、装置、云存储系统及计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109255051A CN109255051A (zh) | 2019-01-22 |
CN109255051B true CN109255051B (zh) | 2021-08-06 |
Family
ID=65001059
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710565416.1A Active CN109255051B (zh) | 2017-07-12 | 2017-07-12 | 一种视频搜索方法、装置、云存储系统及计算机设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109255051B (zh) |
WO (1) | WO2019011275A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110704505A (zh) * | 2019-09-23 | 2020-01-17 | 广州海颐信息安全技术有限公司 | 针对历史特权会话进行搜索和回放的方法及装置 |
CN114297441B (zh) * | 2021-12-08 | 2023-05-12 | 北京格灵深瞳信息技术股份有限公司 | 视频对象检索方法、装置、计算机设备及可读存储介质 |
CN115495615B (zh) * | 2022-11-15 | 2023-02-28 | 浪潮电子信息产业股份有限公司 | 视频与文本的互检方法、装置、设备、存储介质及终端 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090116640A1 (en) * | 2007-11-01 | 2009-05-07 | Jeonghun Noh | Distributed search methods for time-shifted and live peer-to-peer video streaming |
CN105335387A (zh) * | 2014-07-04 | 2016-02-17 | 杭州海康威视系统技术有限公司 | 一种视频云存储系统的检索方法 |
CN105721883A (zh) * | 2014-12-05 | 2016-06-29 | 华中科技大学 | 一种云存储系统中基于溯源信息的视频共享方法与系统 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103107944B (zh) * | 2011-11-14 | 2016-03-30 | 中国移动通信集团公司 | 一种内容定位方法和路由设备 |
KR20140098959A (ko) * | 2013-01-31 | 2014-08-11 | 한국전자통신연구원 | 증거 영상 생성 장치 및 방법 |
CN104394380A (zh) * | 2014-12-09 | 2015-03-04 | 浙江省公众信息产业有限公司 | 视频监控管理系统以及视频监控录像的回放方法 |
CN105120321A (zh) * | 2015-08-21 | 2015-12-02 | 北京佳讯飞鸿电气股份有限公司 | 一种视频搜索方法、视频存储方法和相关装置 |
-
2017
- 2017-07-12 CN CN201710565416.1A patent/CN109255051B/zh active Active
-
2018
- 2018-07-11 WO PCT/CN2018/095279 patent/WO2019011275A1/zh active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090116640A1 (en) * | 2007-11-01 | 2009-05-07 | Jeonghun Noh | Distributed search methods for time-shifted and live peer-to-peer video streaming |
CN105335387A (zh) * | 2014-07-04 | 2016-02-17 | 杭州海康威视系统技术有限公司 | 一种视频云存储系统的检索方法 |
CN105721883A (zh) * | 2014-12-05 | 2016-06-29 | 华中科技大学 | 一种云存储系统中基于溯源信息的视频共享方法与系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109255051A (zh) | 2019-01-22 |
WO2019011275A1 (zh) | 2019-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108038114B (zh) | 一种路径查询方法、终端、计算机可读存储介质 | |
CN109255051B (zh) | 一种视频搜索方法、装置、云存储系统及计算机设备 | |
CN104426841A (zh) | 设置背景图像的方法及相关的服务器和系统 | |
CN104199906B (zh) | 一种拍摄区域的推荐方法及装置 | |
KR20100068468A (ko) | 그리드 기반 피처 구조를 이용한 비주얼 서치 수행의 방법, 장치 및 컴퓨터 프로그램 제품 | |
CN107133248B (zh) | 一种应用程序的分类方法和装置 | |
US10599380B2 (en) | Method and system for automatically managing content in an electronic device | |
US20160248724A1 (en) | Social Message Monitoring Method and Apparatus | |
US20120121192A1 (en) | Method and apparatus for image search using feature point | |
CN112836124A (zh) | 一种画像数据获取方法、装置、电子设备及存储介质 | |
CN111314094A (zh) | 分群数据处理方法、装置、电子设备及可读存储介质 | |
CN107656967B (zh) | 一种场景信息处理方法及装置 | |
CN105786986A (zh) | 照片的查找方法及装置 | |
CN104866818A (zh) | 一种用于搜索包含人脸的图片的方法和装置 | |
CN110245198B (zh) | 多源售票数据管理方法及系统、服务器和计算机可读介质 | |
CN105991400B (zh) | 一种群组搜索方法及其设备 | |
CN113010775B (zh) | 信息推荐方法、装置和计算机设备 | |
US20220222232A1 (en) | Data management device, control method, and storage medium | |
CN111221781B (zh) | 一种数据查找方法、装置、电子设备及系统 | |
CN109597942B (zh) | 展柜信息的推送方法、装置、设备和存储介质 | |
CN112671595B (zh) | 网络特征的获取方法和装置 | |
US20170180511A1 (en) | Method, system and apparatus for dynamic detection and propagation of data clusters | |
CN111104528B (zh) | 图片获取方法、装置及客户端 | |
CN114648713A (zh) | 视频分类方法、装置、电子设备及计算机可读存储介质 | |
CN106257461B (zh) | 数据存储方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |