CN107704609A - 视频内容检索方法及装置、计算机可读存储介质、终端 - Google Patents

视频内容检索方法及装置、计算机可读存储介质、终端 Download PDF

Info

Publication number
CN107704609A
CN107704609A CN201710968220.7A CN201710968220A CN107704609A CN 107704609 A CN107704609 A CN 107704609A CN 201710968220 A CN201710968220 A CN 201710968220A CN 107704609 A CN107704609 A CN 107704609A
Authority
CN
China
Prior art keywords
solid structure
solid
target
video image
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710968220.7A
Other languages
English (en)
Other versions
CN107704609B (zh
Inventor
王红娟
董毅
付宪瑞
王玉奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Financial Information Technology Co Ltd
Original Assignee
Inspur Financial Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Financial Information Technology Co Ltd filed Critical Inspur Financial Information Technology Co Ltd
Priority to CN201710968220.7A priority Critical patent/CN107704609B/zh
Publication of CN107704609A publication Critical patent/CN107704609A/zh
Application granted granted Critical
Publication of CN107704609B publication Critical patent/CN107704609B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

一种视频内容检索方法及装置、计算机可读存储介质、终端，所述方法包括：当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。上述的方案，可以提高视频内容检索的效率，并降低成本。

Description

视频内容检索方法及装置、计算机可读存储介质、终端
技术领域
本发明涉及检索技术领域，特别是涉及一种视频内容检索方法及装置、计算机可读存储介质、终端。
背景技术
随着计算机技术和网络技术的发展，信息高速公路的建设，以及多媒体的推广应用，视频文件源源不断地产生，随之建立起了越来越多的视频数据库。而如何从众多的视频文件中检索到目标所在的有效视频文件，以及如何快速查找到其包含目标内容的视频文件成为亟需解决的技术问题。
现有技术中，在从视频文件中检索目标时，首先以时间范围和地理范围为界限过滤掉部分视频文件，再采用人工逐一检索过滤后的视频文件的内容，直到检索到相关的内容为止。
因此，现有的视频内容检索方法，存在着效率低下且成本较高的问题。
发明内容
本发明实施例解决的技术问题是如何提高视频内容检索的效率，并降低成本。
为解决上述问题，本发明实施例提供了一种视频内容检索方法，所述方法包括：
当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；
当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
可选地，所述视频文件中的索引数据通过以下方式得到：
在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征；所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息；
将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
可选地，所述对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征，包括：
构建所述目标视频图像的几何体结构；
从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构；
对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；
从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；
基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
可选地，所述构建所述目标视频图像的几何体结构，包括：
以所述目标视频图像中的像素点的图像坐标系位置作为所述像素点在预设的多维化数据空间的X轴和Y轴坐标，以所述像素点的色彩值作为像素点在所述多维化数据空间的Z轴坐标，将所述目标视频图像中的各个像素点分别载入所述多维化数据空间；
将Z轴坐标位于预设的多个色彩区间中同一色彩区间，且X轴和Y轴坐标位置闭合的像素点作为一个几何体区域；
将两两之间的距离分别在预设的距离阈值之内的两个以上的几何体区域作为一个所述几何体结构。
可选地，所述从所述几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构，包括：
将所述目标视频图像的几何体结构中位置保持不变的几何体结构作为背景区域的几何体结构；
将所述目标视频图像的几何体结构中除所述背景区域的几何体结构之外的几何体结构作为所述捕获目标区域的几何体结构。
可选地，所述对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构，包括：
在所述目标视频图像的几何体结构中识别出的背景区域的几何体结构中，将所述监控目标的活动区域的几何体结构作为所述背景图层的几何体结构，将所述背景区域的几何体结构中除所述背景图层的几何体结构之外的几何体结构作为所述背景图形的几何体结构。
可选地，所述几何体索引特征，包括从所述监控目标的几何体结构中提取构成所述几何体结构的构件，以及所述构件的颜色以及所述构件之间的比例和位置关系。
本发明实施例还提供了一种视频内容检索装置，包括：
匹配单元，适于当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；
确定单元，适于当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
可选地，所述装置还包括：
特征构建单元，适于在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征；所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息；
索引创建单元，适于将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
可选地，所述特征构建单元，适于构建所述目标视频图像的几何体结构；从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构；对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
可选地，所述特征构建单元，适于以所述目标视频图像中的像素点的图像坐标系位置作为所述像素点在预设的多维化数据空间的X轴和Y轴坐标，以所述像素点的色彩值作为像素点在所述多维化数据空间的Z轴坐标，将所述目标视频图像中的各个像素点分别载入所述多维化数据空间；将Z轴坐标位于预设的多个色彩区间中同一色彩区间，且X轴和Y轴坐标位置闭合的像素点作为一个几何体区域；将两两之间的距离分别在预设的距离阈值之内的两个以上的几何体区域作为一个所述几何体结构。
可选地，所述特征构建单元，适于将所述目标视频图像的几何体结构中位置保持不变的几何体结构作为背景区域的几何体结构；将所述目标视频图像的几何体结构中除所述背景区域的几何体结构之外的几何体结构作为所述捕获目标区域的几何体结构。
可选地，所述特征构建单元，适于在所述目标视频图像的几何体结构中识别出的背景区域的几何体结构中，将所述监控目标的活动区域的几何体结构作为所述背景图层的几何体结构，将所述背景区域的几何体结构中除所述背景图层的几何体结构之外的几何体结构作为所述背景图形的几何体结构。
可选地，所述几何体索引特征，包括从所述监控目标的几何体结构中提取构成所述几何体结构的构件，以及所述构件的颜色以及所述构件之间的比例和位置关系。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机指令，所述计算机指令运行时执行上述任一项所述的视频内容检索方法的步骤。
本发明实施例还提供了一种终端，包括存储器和处理器，所述存储器上储存有能够在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行上述任一项所述的视频内容方法的步骤。
与现有技术相比，本发明的技术方案具有以下的优点：
上述的方案，当在视频文件中检索目标时，将所述目标的对应的特征数据与所述视频文件对应的索引特征中的索引数据进行匹配，并在确定所述目标的索引数据与所述索引特征中的索引数据匹配时，将相应索引特征对应的视频文件内容作为目标检索内容，与采用人工方式进行视频内容相比，可以提高视频检索的效率，并可以降低成本。
进一步地，在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征，并将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据，由于所构建的几何体索引特征包括所述监控目标的几何体结构的特征信息，而非监控目标完整的几何体特征，故可以提高视频索引创建的速度和效率。
附图说明
图1是本发明实施例中的一种视频内容检索方法的流程图；
图2是本发明实施例中的一种视频索引创建方法的流程图；
图3是本发明实施例中另一种视频索引创建方法的流程图；
图4是本发明实施例中所创建的目标视频图像的几何体结构的示意图；
图5是本发明实施例中的一种视频内容检索装置的结构示意图。
具体实施方式
为解决现有技术中存在的上述问题，本发明实施例采用的技术方案当在视频文件中检索目标时，将所述目标的对应的特征数据与所述视频文件对应的索引特征中的索引数据进行匹配，并在确定所述目标的索引数据与所述索引特征中的索引数据匹配时，将相应索引特征对应的视频文件内容作为目标检索内容，与采用人工方式进行视频内容相比，可以提高视频检索的效率，并可以降低成本。
为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。
图1示出了本发明实施例中的一种视频内容检索方法的流程图。如图1所示的一种视频内容检索方法，具体可以包括如下的步骤：
步骤S101：当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配。
在具体实施中，在视频文件中检索的所述目标，可以根据实际的需要进行设置，如人脸等。
在具体实施中，所述视频文件中预设时间点包括多个，且相邻的预设时间点之间的时间间隔相同，如5s等，本领域的技术人员可以根据实际的需要对预设时间点，或者对相应的时间间隔进行设置，在此不做限制。在具体实施中，视频文件对应的索引特征为在采集视频文件的目标视频图像的过程中，对对应时间点采集到的目标视频图像中出现的监控目标进行实时检测，为检测到的目标监控场所中出现的监控目标建立对应的索引数据，并将监控目标对应的索引数据与出现的时间点及在视频文件中的出现位置进行关联得到，具体请参见图2和图3中的详细描述。
步骤S102：当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
在具体实施中，通过在视频文件中的视频图像数据采集过程中，每隔预设时间创建相应时间点的目标视频图像中出现的监控目标的索引特征，可以在后续对视频文件回放过程中检索目标时，将目标的索引数据与视频文件中记录的相应时间点的目标视频图像的几何体索引特征中对应的监控目标的索引数据进行匹配，以确定对应的目标视频图像中是否出现所述目标，从而可以从视频文件中快速定位所述目标在视频文件中出现的位置，以快速定位到视频文件中出现的所述目标，提高检索的速度。
上述的方案，当在视频文件中检索目标时，将所述目标的对应的特征数据与所述视频文件对应的索引特征中的索引数据进行匹配，并在确定所述目标的索引数据与所述索引特征中的索引数据匹配时，将相应索引特征对应的视频文件内容作为目标检索内容，与采用人工方式进行视频内容相比，可以提高视频检索的效率，并可以降低成本。
图2示出了本发明实施例中的一种视频索引创建方法的流程图。参见图2，本发明实施例中的一种视频索引创建方法，具体可以采用如下的操作实现：
步骤S201：在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征。
在具体实施中，所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息。其中，预设的时间的时长可以根据实际的需要进行设置，如5s等，本领域的技术人员可以根据实际的需要进行设置，在此不做限制。
步骤S202：将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
在具体实施中，所述时间点为所述目标视频图像采集的时刻。当对应时间点的视频图像的几何体索引特征构建完成时，便可以将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，从而生成该时间点的目标视频图像对应的索引数据，以在对应的视频文件回放过程中，可以利用各个时间点的目标视频图像中的索引数据，对该视频文件中的目标进行检索。
上述的方案，通过在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征，并将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据，由于所构建的几何体索引特征包括所述监控目标的几何体结构的特征信息，而非监控目标完整的几何体特征，故可以提高视频索引创建的速度和效率。
图3示出了本发明实施例中的另一种视频索引创建方法的流程图。参见图3，本发明实施例中的一种视频索引创建方法，适于在对目标监控场景进行图像采集的过程中，对各个预设时间点的视频图像构建对应的索引数据，具体可以采用如下的操作实现：
步骤S301：在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像构建对应的几何体结构。
在具体实施中，在视频文件中的目标视频图像采集过程中，可以按照预设的时间间隔，将相应时间点采集到的视频图像分别作为目标视频图像，并为每帧目标视频图像创建对应的几何体结构，从而得到相应时间点的目标视频图像对应的几何体结构。
在本发明一实施例中，通过将对应时间点采集到的目标视频图像载入预设的多维化数据空间，以创建该时间点的目标视频图像对应的几何体结构。
具体而言，多维化数据空间包括三个正交的坐标轴，即X轴、Y轴和Z轴。其中，以相应时间点采集到的目标视频图像中各个像素点在图像坐标系中的位置坐标作为该像素点在多维化数据空间中的X轴坐标和Y轴坐标，以像素点的色彩值作为像素点在多维化数据空间中的Z轴坐标，便可以将对应时间点的目标视频图像中的各个像素点载入所述多维化数据空间中。
当将对应时间点的目标视频图像中的各个像素点载入多维化数据空间中，便可以根据像素点的色彩值差异构建对应的几何体结构，即当像素点的色彩值位于预设的多个色彩区间中同一色彩区间，且像素点的X轴坐标和Y轴坐标位置构成闭合区域时，便可以将相应像素点围成的闭合区域作为一个几何体区域，从而构建得到对应时间点的目标视频图像中的所有几何体结构。
步骤S302：从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构。
在具体实施中，当对应时间点的目标视频图像的几何体结构构建完成时，便可以对所构建的几何体结构进行分析，以确定目标视频图像的几何体结构是背景区域的几何体结构还是捕获目标区域的几何体结构。
其中，背景区域的几何体结构为位置静止的几何体结构，捕获目标区域的几何体结构为位置动态变化的几何体结构，也即监控目标所构成的几何体结构。因此，通过对对应时间点的目标视频图像构建的几何体结构的位置是否变化进行分析，便可以确定是所创建的几何体结构是背景区域的几何体结构还是捕获目标区域的几何体结构。如图3所示，其中的几何体结构H1、H2和H3为背景区域的几何体结构，几何体H4为捕获目标区域的几何体结构。
步骤S303：对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；
在具体实施中，当从相应时间点的目标视频图像的几何体结构中识别出的背景区域的几何体结构和捕获目标区域的几何体结构时，可以根据背景区域的几何体结构与捕获目标区域的几何体结构之间的关系，对背景区域的几何体结构进行进一步划分。
具体地，可以根据背景区域的几何体结构是否为捕获目标区域的监控目标的有效活动区域，将背景区域的几何体结构进一步划分为背景图形的几何体结构和背景图层的几何体结构，即将监控目标的有效活动区域的几何体结构作为背景图层的几何体结构，将背景区域中非监控目标活动区域的几何体结构作为背景图形的几何体结构。其中，背景图层的几何体结构为地面或道路等对应的几何体结构，背景图形的几何体结构为建筑、植被等对应的几何体结构。
请继续参见图4，对于背景区域的几何体结构H1、H2和H3而言，几何体结构H3为捕获目标区域的几何体结构H4的有效活动区域，几何体结构H1、H2不是捕获区域的几何体结构H4的有效活动区域，因而将几何体结构H1、H2作为背景图形的几何体结构，将几何体结构H3作为背景图层的几何体结构。
步骤S304：从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；
在具体实施中，在得到各个时间点对应的目标视频图像的几何体结构时，可以对背景图层的几何体结构对应的捕获目标区域中实时地识别出监控目标的几何体结构，以在后续的步骤中为实时识别出的监控目标创建对应的索引数据。
步骤S305：基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
在具体实施中，当实时地识别出对应时间点的目标视频图像中出现的监控目标时，可以根据所创建的监控目标的几何体结构的基本特征信息，创建监控目标对应的索引数据。
在具体实施中，当在对应时间点的目标视频图像的几何体结构中识别出监控目标的几何体结构，如人体的几何体结构时，可以根据构成监控目标的几何体结构的基本几何特征，创建该监控目标对应的索引数据。
继续参见图4，对于在背景图层上捕获的监控目标的几何体结构H4，可以将构成几何体结构H4的构件C2和C2基本特征信息，如颜色、相互之间的比例关系等，形成几何体结构H4的索引数据。
这里需要指出的是，这里创建的几何体结构的索引数据仅仅体现了构成物体的构件、颜色、以及构件之间的位置关系和比例等，是监控目标的基本特征及其比例关系等，并非完整的几何体识别特征。
以目标视频图像中所出现的人体为监控目标为例，如要精确识别人脸数据将十分复杂，要创建对应的索引数据的难度和数据量也比较大。而采用本发明实施例中的索引数据的创建方法，所创建的索引数据仅仅采用体现人体的基本几何特征建立索引，比如头部和身体的比例、四肢的比例等，故可以使用最少的数据，以最快的速度创建索引。
步骤S306：将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
在具体实施中，当创建完成对应时间点的目标视频图像中出现的监控目标的索引数据时，便可以将所创建的索引数据与对应时间点的目标视频图像和所述时间点进行关联，形成该时间点的目标视频图像对应的索引特征。
上述对本发明实施例中的视频内容检索方法进行了详细的介绍，下面将对上述的方法对应的装置进行描述。
图5示出了本发明实施例中的一种视频内容检索装置的结构。参见图5，本发明实施例中的一种视频内容检索装置50可以包括匹配单元501和确定单元502，其中：
所述匹配单元501，适于当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；
所述确定单元502，适于当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
在本发明一实施中，所述视频内容检索装置50还可以包括503和索引创建单元504，其中：
所述特征构建单元503，适于在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征；所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息；在本发明一实施例中，所述几何体索引特征，包括从所述监控目标的几何体结构中提取构成所述几何体结构的构件，以及所述构件的颜色以及所述构件之间的比例和位置关系。
在本发明一实施例中，所述特征构建单元503，适于构建所述目标视频图像的几何体结构；从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构；对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
在本发明一实施例中，所述特征构建单元503，适于以所述目标视频图像中的像素点的图像坐标系位置作为所述像素点在预设的多维化数据空间的X轴和Y轴坐标，以所述像素点的色彩值作为像素点在所述多维化数据空间的Z轴坐标，将所述目标视频图像中的各个像素点分别载入所述多维化数据空间；将Z轴坐标位于预设的多个色彩区间中同一色彩区间，且X轴和Y轴坐标位置闭合的像素点作为一个几何体区域；将两两之间的距离分别在预设的距离阈值之内的两个以上的几何体区域作为一个所述几何体结构。
在本发明一实施例中，所述特征构建单元503，适于将所述目标视频图像的几何体结构中位置保持不变的几何体结构作为背景区域的几何体结构；将所述目标视频图像的几何体结构中除所述背景区域的几何体结构之外的几何体结构作为所述捕获目标区域的几何体结构。
在本发明一实施例中，所述特征构建单元503，适于在所述目标视频图像的几何体结构中识别出的背景区域的几何体结构中，将所述监控目标的活动区域的几何体结构作为所述背景图层的几何体结构，将所述背景区域的几何体结构中除所述背景图层的几何体结构之外的几何体结构作为所述背景图形的几何体结构。
所述索引创建单元504，适于将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机指令，所述计算机指令运行时执行所述的视频内容检索方法的步骤。其中，所述的视频内容检索方法的步骤请参见前述部分的介绍，不再赘述。
本发明实施例还提供了一种终端，包括存储器和处理器，所述存储器上储存有能够在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行所述的视频内容检索方法的步骤。其中，所述的视频内容检索方法的步骤请参见前述部分的介绍，不再赘述。
采用本发明实施例中的上述方案，当在视频文件中检索目标时，将所述目标的对应的特征数据与所述视频文件对应的索引特征中的索引数据进行匹配，并在确定所述目标的索引数据与所述索引特征中的索引数据匹配时，将相应索引特征对应的视频文件内容作为目标检索内容，与采用人工方式进行视频内容相比，可以提高视频检索的效率，并可以降低成本。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于计算机可读存储介质中，存储介质可以包括：ROM、RAM、磁盘或光盘等。
以上对本发明实施例的方法及系统做了详细的介绍，本发明并不限于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (16)

1.一种视频内容检索方法，其特征在于，包括：
当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；
当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
2.根据权利要求1所述的视频内容检索方法，其特征在于，所述视频文件中的索引数据通过以下方式得到：
在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征；所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息；
将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
3.根据权利要求2所述的视频内容检索方法，其特征在于，所述对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征，包括：
构建所述目标视频图像的几何体结构；
从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构；
对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；
从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；
基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
4.根据权利要求3所述的视频内容检索方法，其特征在于，所述构建所述目标视频图像的几何体结构，包括：
以所述目标视频图像中的像素点的图像坐标系位置作为所述像素点在预设的多维化数据空间的X轴和Y轴坐标，以所述像素点的色彩值作为像素点在所述多维化数据空间的Z轴坐标，将所述目标视频图像中的各个像素点分别载入所述多维化数据空间；
将Z轴坐标位于预设的多个色彩区间中同一色彩区间，且X轴和Y轴坐标位置闭合的像素点作为一个几何体区域；
将两两之间的距离分别在预设的距离阈值之内的两个以上的几何体区域作为一个所述几何体结构。
5.根据权利要求3所述的视频内容检索方法，其特征在于，所述从所述几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构，包括：
将所述目标视频图像的几何体结构中位置保持不变的几何体结构作为背景区域的几何体结构；
将所述目标视频图像的几何体结构中除所述背景区域的几何体结构之外的几何体结构作为所述捕获目标区域的几何体结构。
6.根据权利要求3所述的视频内容检索方法，其特征在于，所述对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构，包括：
在所述目标视频图像的几何体结构中识别出的背景区域的几何体结构中，将所述监控目标的活动区域的几何体结构作为所述背景图层的几何体结构，将所述背景区域的几何体结构中除所述背景图层的几何体结构之外的几何体结构作为所述背景图形的几何体结构。
7.根据权利要求2所述的视频内容检索方法，其特征在于，所述几何体索引特征，包括从所述监控目标的几何体结构中提取构成所述几何体结构的构件，以及所述构件的颜色以及所述构件之间的比例和位置关系。
8.一种视频内容检索装置，其特征在于，包括：
匹配单元，适于当在视频文件中检索目标时，将所述目标的对应的几何体索引特征与所述视频文件中预设时间点的目标视频图像的索引数据中的几何体索引特征进行匹配；
确定单元，适于当确定所述目标的几何体索引特征与所述索引数据中的几何体索引特征匹配时，将相应索引数据对应的目标视频图像作为目标检索内容。
9.根据权利要求8所述的视频内容检索装置，其特征在于，还包括：
特征构建单元，适于在对目标监控场景的视频图像采集过程中，对每隔预设时间的目标视频图像中的监控目标构建对应的几何体索引特征；所述几何体索引特征包括所述监控目标的几何体结构的基本特征的信息；
索引创建单元，适于将所构建的几何体索引特征与对应的时间点和对应的目标视频图像进行关联，得到所述对应的目标视频图像的索引数据。
10.根据权利要求9所述的视频内容检索装置，其特征在于，所述特征构建单元，适于构建所述目标视频图像的几何体结构；从所构建的几何体结构中识别出背景区域的几何体结构和捕获目标区域的几何体结构；对所述目标视频图像的几何体结构中识别出的背景区域的几何体结构进行分析，得到背景图形的几何体结构和背景图层的几何体结构；从所述目标视频图像的几何体结构中，实时获取所述背景图层的几何体结构上出现的监控目标的几何体结构；基于所获取的监控目标的几何体结构的基本特征信息，构建所述监控目标的几何体索引特征。
11.根据权利要求9所述的视频内容检索装置，其特征在于，所述特征构建单元，适于以所述目标视频图像中的像素点的图像坐标系位置作为所述像素点在预设的多维化数据空间的X轴和Y轴坐标，以所述像素点的色彩值作为像素点在所述多维化数据空间的Z轴坐标，将所述目标视频图像中的各个像素点分别载入所述多维化数据空间；将Z轴坐标位于预设的多个色彩区间中同一色彩区间，且X轴和Y轴坐标位置闭合的像素点作为一个几何体区域；将两两之间的距离分别在预设的距离阈值之内的两个以上的几何体区域作为一个所述几何体结构。
12.根据权利要求9所述的视频内容检索装置，其特征在于，所述特征构建单元，适于将所述目标视频图像的几何体结构中位置保持不变的几何体结构作为背景区域的几何体结构；将所述目标视频图像的几何体结构中除所述背景区域的几何体结构之外的几何体结构作为所述捕获目标区域的几何体结构。
13.根据权利要求9所述的视频内容检索装置，其特征在于，所述特征构建单元，适于在所述目标视频图像的几何体结构中识别出的背景区域的几何体结构中，将所述监控目标的活动区域的几何体结构作为所述背景图层的几何体结构，将所述背景区域的几何体结构中除所述背景图层的几何体结构之外的几何体结构作为所述背景图形的几何体结构。
14.根据权利要求8所述的视频内容检索装置，其特征在于，所述几何体索引特征，包括从所述监控目标的几何体结构中提取构成所述几何体结构的构件，以及所述构件的颜色以及所述构件之间的比例和位置关系。
15.一种计算机可读存储介质，其上存储有计算机指令，其特征在于，所述计算机指令运行时执行权利要求1至7任一项所述的视频内容检索方法的步骤。
16.一种终端，其特征在于，包括存储器和处理器，所述存储器上储存有能够在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行权利要求1至7任一项所述的视频内容方法的步骤。
CN201710968220.7A 2017-10-18 2017-10-18 视频内容检索方法及装置、计算机可读存储介质、终端 Active CN107704609B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710968220.7A CN107704609B (zh) 2017-10-18 2017-10-18 视频内容检索方法及装置、计算机可读存储介质、终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710968220.7A CN107704609B (zh) 2017-10-18 2017-10-18 视频内容检索方法及装置、计算机可读存储介质、终端

Publications (2)

Publication Number Publication Date
CN107704609A true CN107704609A (zh) 2018-02-16
CN107704609B CN107704609B (zh) 2021-01-08

Family

ID=61181298

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710968220.7A Active CN107704609B (zh) 2017-10-18 2017-10-18 视频内容检索方法及装置、计算机可读存储介质、终端

Country Status (1)

Country Link
CN (1) CN107704609B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113254701A (zh) * 2021-06-21 2021-08-13 北京电信易通信息技术股份有限公司 一种基于fov模型的视频数据索引构建方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593363A (zh) * 2012-08-15 2014-02-19 中国科学院声学研究所 视频内容索引结构的建立方法、视频检索方法及装置
CN103714077A (zh) * 2012-09-29 2014-04-09 日电（中国）有限公司 物体检索的方法、检索校验的方法及装置
CN104036018A (zh) * 2014-06-25 2014-09-10 百度在线网络技术（北京）有限公司 视频获取方法和装置
US20160188577A1 (en) * 2005-11-09 2016-06-30 Cxense Asa User-directed navigation of multimedia search results
CN107220602A (zh) * 2017-05-18 2017-09-29 浪潮金融信息技术有限公司 一种快速捕获视频流中新增运动区域的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160188577A1 (en) * 2005-11-09 2016-06-30 Cxense Asa User-directed navigation of multimedia search results
CN103593363A (zh) * 2012-08-15 2014-02-19 中国科学院声学研究所 视频内容索引结构的建立方法、视频检索方法及装置
CN103714077A (zh) * 2012-09-29 2014-04-09 日电（中国）有限公司 物体检索的方法、检索校验的方法及装置
CN104036018A (zh) * 2014-06-25 2014-09-10 百度在线网络技术（北京）有限公司 视频获取方法和装置
CN107220602A (zh) * 2017-05-18 2017-09-29 浪潮金融信息技术有限公司 一种快速捕获视频流中新增运动区域的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113254701A (zh) * 2021-06-21 2021-08-13 北京电信易通信息技术股份有限公司 一种基于fov模型的视频数据索引构建方法及系统

Also Published As

Publication number Publication date
CN107704609B (zh) 2021-01-08

Similar Documents

Publication Publication Date Title
JP4553650B2 (ja) 画像グループの表現方法および表現方法によって導出される記述子、探索方法、装置、コンピュータプログラム、ならびに記憶媒体
US10025854B2 (en) Video searching
CN111046235B (zh) 基于人脸识别的声像档案搜索方法、系统、设备及介质
CN105324793B (zh) 用于检测和跟踪视频中的一个或多个感兴趣对象的方法和设备
CN116188821B (zh) 版权检测方法、系统、电子设备和存储介质
CN106991370B (zh) 基于颜色和深度的行人检索方法
Meng et al. Object instance search in videos via spatio-temporal trajectory discovery
CN103617263A (zh) 一种基于多模态特征的电视广告片花自动检测方法
CN107358622A (zh) 一种基于可视化运动轨迹的视频信息处理方法与系统
CN110765215A (zh) 人员共同关系的查询方法、装置、电子设备及存储介质
JP2014096138A (ja) 背景を除外することによるスペクトルシーンの簡易化
CN108932509A (zh) 一种基于视频跟踪的跨场景目标检索方法及装置
Wan et al. A new technique for summarizing video sequences through histogram evolution
KR20190124436A (ko) 영상 기반 건물 검색 방법 및 장치
CN104484457A (zh) 一种并行视频运动目标提取和检索的方法及系统
CN107704609A (zh) 视频内容检索方法及装置、计算机可读存储介质、终端
JP2003006654A (ja) 動画像における移動体の特徴量抽出方法と自動追跡方法及びそれらの装置、並びに、それらの方法の実行プログラムとこの実行プログラムを記録した記録媒体
CN105608423A (zh) 一种视频匹配方法及装置
CN110825821B (zh) 人员关系的查询方法、装置、电子设备及存储介质
CN110852172B (zh) 一种基于Cycle Gan图片拼贴并增强的扩充人群计数数据集的方法
CN112257638A (zh) 一种图像比对方法、系统、设备及计算机可读存储介质
CN107809613A (zh) 视频索引创建方法及装置、计算机可读存储介质、终端
CN104182959A (zh) 目标搜索方法及装置
CN112784088A (zh) 人员检索方法、装置、电子设备及可读存储介质
CN110781797B (zh) 一种标注方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant