CN115687663A - 基于全文搜索的视频检索及标记方法、系统及存储介质 - Google Patents
基于全文搜索的视频检索及标记方法、系统及存储介质 Download PDFInfo
- Publication number
- CN115687663A CN115687663A CN202211179617.5A CN202211179617A CN115687663A CN 115687663 A CN115687663 A CN 115687663A CN 202211179617 A CN202211179617 A CN 202211179617A CN 115687663 A CN115687663 A CN 115687663A
- Authority
- CN
- China
- Prior art keywords
- retrieval
- video
- full
- data
- text
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于全文搜索的视频检索及标记方法、系统及存储介质；方法包括：视频结构化分析；结构化数据及视频帧图片存储；结构化数据输出至消息中间件；消费数据并进行全文索引；用户根据案件关键信息进行检索；全文引擎进行数据检索并返回结果；用户基于WEB页面查看结果；视频片段调阅；结果研判及标签处理；标签数据更新至全文索引库；可以根据任何可能的关键字对视频进行检索；对应检索分析后的结果可以进行快速打标签，同时将标签数据更新至全文索引，对索引数据进行了补充和更新，便于后续更多维度的检索；基于全文检索引擎实现数据检索，检索效率大幅提升，能够以较低的成本并且高效地解决视频快速检索调阅的问题。
Description
技术领域
本发明涉及视频调阅技术领域，特别是涉及一种基于全文搜索的视频检索及标记方法、系统及存储介质。
背景技术
公共安全领域中，在案件发生后会根据案发地点和案发时间调阅历史视频，从而来寻找相关的案件线索，但是录像的查阅是一个比较耗费人力的过程，即使目前视频结构化技术已经很成熟，可以辅助对结构化的视频数据进行检索来快速定位相应的视频，但是需要明确知道具体的检索条件，要求相对比较苛刻，大多数的案件不一定能提供明确的检索要求，很难快速找到对应的线索信息。
因此，亟需一种基于全文搜索的视频检索及标记方法、系统及存储介质，能够解决现有视频调阅需要提供明确的检索条件，无法快速找到对应的线索信息的问题。
发明内容
本发明的目的是提供一种基于全文搜索的视频检索及标记方法、系统及存储介质，以解决上述现有视频调阅需要提供明确的检索条件，无法快速找到对应的线索信息的问题。
为实现上述目的，本发明提供了如下方案：
本发明提供一种基于全文搜索的视频检索及标记方法，包括以下步骤：
步骤一：视频结构化分析；
步骤二：结构化数据及视频帧图片存储；
步骤三：结构化数据输出至消息中间件；
步骤四：消费数据并进行全文索引；
步骤五：用户根据案件关键信息进行检索；
步骤六：全文引擎进行数据检索并返回结果；
步骤七：用户基于WEB页面查看结果；
步骤八：视频片段调阅；
步骤九：结果研判及标签处理；
步骤十：标签数据更新至全文索引库。
优选地，步骤一具体为：
系统接入前端摄像机设备或者历史录像存储设备，系统利用视频结构化分析技术，对视频流中的目标进行检测分析，并输出结构化数据、对应视频帧时间范围、视频帧截图数据。
优选地，步骤二具体为：
结构化数据信息和对应视频帧时间范围、视频帧截图做映射关系，然后将数据存储至数据库中，以支持结构化数据的查询。
优选地，步骤四具体为：
系统订阅消息中间件中结构化数据，将数据按照全文检索引擎要求格式进行预处理，然后调用引擎创建索引接口，将索引添加至索引库。
优选地，步骤六具体为：
根据用户输入的检索关键字进行分词处理，将分词后的数据和全文索引库进行检索匹配，引擎根据匹配的结果进行排序返回，并将匹配中的关键字进行高亮处理。
优选地，还包括利用图像识别技术实现检索。
优选地，还包括利用OCR技术实现检索。
优选地，还包括利用语音识别技术实现检索。
本发明还提供一种基于全文搜索的视频检索及标记系统，包括：
视频结构化模块，用于将系统接入的实时视频离线时间进行结构化处理；
图片存储模块，用于存储视频结构化过程中生成的视频帧截图，并生成图片URL；
结构化数据存储模块，用于存储所有的视频结构化详情数据；
消息中间件模块，用于将结构化数据通过消息方式传递给全文搜索引擎的模块；
全文检索引擎模块，用于结构化数据生成索引并提供检索能力；
数据检索模块，用于获取用户输入并请求全文检索引擎获取结果；
视频调阅模块，用于根据指定的视频设备和时段来调阅视频流；
标签处理模块：用于用户对目标结果进行打标签并将数据提交至全文检索引擎。
本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述基于全文搜索的视频检索及标记方法的步骤。
本发明相对于现有技术取得了以下有益技术效果：
本发明提供的一种基于全文搜索的视频检索及标记方法、系统及存储介质；方法包括：视频结构化分析；结构化数据及视频帧图片存储；结构化数据输出至消息中间件；消费数据并进行全文索引；用户根据案件关键信息进行检索；全文引擎进行数据检索并返回结果；用户基于WEB页面查看结果；视频片段调阅；结果研判及标签处理；标签数据更新至全文索引库；可以根据任何可能的关键字对视频进行检索；对应检索分析后的结果可以进行快速打标签，同时将标签数据更新至全文索引，对索引数据进行了补充和更新，便于后续更多维度的检索；基于全文检索引擎实现数据检索，检索效率大幅提升，能够以较低的成本并且高效地解决视频快速检索调阅的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明提供的基于全文搜索的视频检索及标记方法流程框图；
图2为本发明提供的基于全文搜索的视频检索及标记系统结构图；
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明的目的是提供一种基于全文搜索的视频检索及标记方法、系统及存储介质，以解决现有视频调阅需要提供明确的检索条件，无法快速找到对应的线索信息的问题。
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
实施例1：
本实施例提供一种基于全文搜索的视频检索及标记方法，如图1所示，包括：
步骤S101：视频结构化分析；系统接入前端摄像机设备或者历史录像存储设备，系统利用视频结构化分析技术，对视频流中的目标进行检测分析，并输出结构化数据、对应视频帧时间范围、视频帧截图数据等；
步骤S102：结构化数据及视频帧图片存储；结构化数据信息和对应视频帧时间范围、视频帧截图做映射关系，然后将数据存储至数据库中，可以支持结构化数据的查询；
步骤S103：结构化数据输出至消息中间件；结构化数据存储完成同时将数据推送至消息中间件，用于创建全文检索索引；
步骤S104：消费数据并进行全文索引；系统订阅消息中间件中结构化数据，将数据按照全文检索引擎要求格式进行预处理，然后调用引擎创建索引接口将索引添加至索引库；
步骤S105：用户根据案件关键信息进行检索；系统用户根据实际案件相关信息，输入检索关键字，可以是一个、多个或者一句话描述；
步骤S106：全文引擎进行数据检索并返回结果；根据用户输入的检索关键字进行分词处理，将分词后的数据和全文索引库进行检索匹配，引擎根据匹配的结果进行排序返回，并将匹配中的关键字进行高亮处理；
步骤S107：用户基于WEB页面查看结果；根据全文检索引擎返回的数据进行web页面展示，展示内容包含视频帧图片，结构化信息、高亮匹配中的关键字信息以及视频片段调阅入口；
步骤S108：视频片段调阅；根据检索结果中对应的视频片段的时间范围以及视频所属的设备信息，系统打开对应的历史录像片段；
步骤S109：结果研判及标签处理；用户根据对视频片段的查阅及分析，明确是否对案件线索有帮助，可以根据实际情况添加相关的数据标签；
步骤S110：标签数据更新至全文索引库；数据标签添加至系统后台后，后台会调用全文检索引擎接口将标签数据更新至对应数据的索引中，后续即可根据标签数据进行快速检索。
下面对本实施例提供的基于全文搜索的视频检索及标记系统进行描述，下文描述的基于全文搜索的视频检索及标记系统与上文描述的基于全文搜索的视频检索及标记方法可相互对应参照。
一种基于全文搜索的视频检索及标记系统，如图2所示，包括：
视频结构化模块，用于将系统接入的实时视频离线时间进行结构化处理；
图片存储模块，用于存储视频结构化过程中生成的视频帧截图，并生成图片URL；
结构化数据存储模块，用于存储所有的视频结构化详情数据；
消息中间件模块，用于将结构化数据通过消息方式传递给全文搜索引擎的模块；
全文检索引擎模块，用于结构化数据生成索引并提供检索能力；
数据检索模块，用于获取用户输入并请求全文检索引擎获取结果；
视频调阅模块，用于根据指定的视频设备和时段来调阅视频流；
标签处理模块：用于用户对目标结果进行打标签并将数据提交至全文检索引擎。
本实施例还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述基于全文搜索的视频检索及标记方法，包括：
步骤一：视频结构化分析；
步骤二：结构化数据及视频帧图片存储；
步骤三：结构化数据输出至消息中间件；
步骤四：消费数据并进行全文索引；
步骤五：用户根据案件关键信息进行检索；
步骤六：全文引擎进行数据检索并返回结果；
步骤七：用户基于WEB页面查看结果；
步骤八：视频片段调阅；
步骤九：结果研判及标签处理；
步骤十：标签数据更新至全文索引库。
所述非暂态计算机可读存储介质例如包括：U盘、移动硬盘、只读存储器 (Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
实施例2：
作为实施例1的一种替代方案，本实施例与实施例1的区别在于：基于图像识别技术来实现检索，需要在视频结构化的同时对目标图片进行特征提取，同时建立特征和视频片段的对应关系，同时在检索时将检索输入的图片进行特征提取，然后再和特征库进行比对检索。
实施例3：
作为实施例1的一种替代方案，本实施例与实施例1的区别在于：基于 OCR技术来实现检索，检索目标进行OCR识别后，将识别后的文本数据作为检索的关键字进行全文检索。
实施例4：
作为实施例1的一种替代方案，本实施例与实施例1的区别在于：基于语音识别技术来实现检索，将识别后的语音转化成文字后再进行全文检索。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
本发明应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处。综上，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种基于全文搜索的视频检索及标记方法，其特征在于：包括以下步骤：
步骤一：视频结构化分析；
步骤二：结构化数据及视频帧图片存储；
步骤三：结构化数据输出至消息中间件；
步骤四：消费数据并进行全文索引；
步骤五：用户根据案件关键信息进行检索；
步骤六：全文引擎进行数据检索并返回结果；
步骤七：用户基于WEB页面查看结果；
步骤八：视频片段调阅；
步骤九：结果研判及标签处理；
步骤十：标签数据更新至全文索引库。
2.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：步骤一具体为：
系统接入前端摄像机设备或者历史录像存储设备，系统利用视频结构化分析技术，对视频流中的目标进行检测分析，并输出结构化数据、对应视频帧时间范围、视频帧截图数据。
3.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：步骤二具体为：
结构化数据信息和对应视频帧时间范围、视频帧截图做映射关系，然后将数据存储至数据库中，以支持结构化数据的查询。
4.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：步骤四具体为：
系统订阅消息中间件中结构化数据，将数据按照全文检索引擎要求格式进行预处理，然后调用引擎创建索引接口，将索引添加至索引库。
5.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：步骤六具体为：
根据用户输入的检索关键字进行分词处理，将分词后的数据和全文索引库进行检索匹配，引擎根据匹配的结果进行排序返回，并将匹配中的关键字进行高亮处理。
6.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：还包括利用图像识别技术实现检索。
7.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：还包括利用OCR技术实现检索。
8.根据权利要求1所述的基于全文搜索的视频检索及标记方法，其特征在于：还包括利用语音识别技术实现检索。
9.一种基于全文搜索的视频检索及标记系统，其特征在于：包括：
视频结构化模块，用于将系统接入的实时视频离线时间进行结构化处理；
图片存储模块，用于存储视频结构化过程中生成的视频帧截图，并生成图片URL；
结构化数据存储模块，用于存储所有的视频结构化详情数据；
消息中间件模块，用于将结构化数据通过消息方式传递给全文搜索引擎的模块；
全文检索引擎模块，用于结构化数据生成索引并提供检索能力；
数据检索模块，用于获取用户输入并请求全文检索引擎获取结果；
视频调阅模块，用于根据指定的视频设备和时段来调阅视频流；
标签处理模块：用于用户对目标结果进行打标签并将数据提交至全文检索引擎。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于：所述计算机程序被处理器执行时实现如权利要求1至8任一项所述的基于全文搜索的视频检索及标记方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211179617.5A CN115687663A (zh) | 2022-09-27 | 2022-09-27 | 基于全文搜索的视频检索及标记方法、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211179617.5A CN115687663A (zh) | 2022-09-27 | 2022-09-27 | 基于全文搜索的视频检索及标记方法、系统及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115687663A true CN115687663A (zh) | 2023-02-03 |
Family
ID=85061801
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211179617.5A Pending CN115687663A (zh) | 2022-09-27 | 2022-09-27 | 基于全文搜索的视频检索及标记方法、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115687663A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117312480A (zh) * | 2023-10-24 | 2023-12-29 | 广东广信通信服务有限公司 | 一种基于多领域的知识库更新优化方法及系统 |
-
2022
- 2022-09-27 CN CN202211179617.5A patent/CN115687663A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117312480A (zh) * | 2023-10-24 | 2023-12-29 | 广东广信通信服务有限公司 | 一种基于多领域的知识库更新优化方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105677735B (zh) | 一种视频搜索方法及装置 | |
| CN111694965B (zh) | 一种基于多模态知识图谱的图像场景检索系统及方法 | |
| US20120117051A1 (en) | Multi-modal approach to search query input | |
| JP2023513568A (ja) | 検索方法、装置、電子機器及び記憶媒体 | |
| CN111459977B (zh) | 自然语言查询的转换 | |
| CN112884005B (zh) | 一种基于sptag及卷积神经网的图像检索方法及装置 | |
| CN110990597B (zh) | 基于文本语义映射的跨模态数据检索系统及其检索方法 | |
| CN110866091A (zh) | 一种数据检索方法及装置 | |
| US20230367804A1 (en) | Multimedia content publishing method and apparatus, and electronic device and storage medium | |
| CN108491543A (zh) | 图像检索方法、图像存储方法及图像检索系统 | |
| CN113704667B (zh) | 一种招标公告的自动提取处理方法和装置 | |
| CN115687663A (zh) | 基于全文搜索的视频检索及标记方法、系统及存储介质 | |
| CN110968723B (zh) | 一种图像特征值的搜索方法、装置及电子设备 | |
| CN115827881A (zh) | 一种基于旅游知识图谱的多模态旅游信息定位式检索方法 | |
| CN112241463A (zh) | 一种基于融合文本语义与图片信息的搜索方法 | |
| CN111241313A (zh) | 支持图像录入的检索方法和装置 | |
| CN114385903B (zh) | 应用账号的识别方法、装置、电子设备及可读存储介质 | |
| CN113505889B (zh) | 图谱化知识库的处理方法、装置、计算机设备和存储介质 | |
| CN114328847B (zh) | 一种基于知识图谱的数据处理方法及系统 | |
| CN117688140B (zh) | 文档查询方法、装置、计算机设备和存储介质 | |
| CN110795924B (zh) | 一种意图模板库构建方法、装置及存储介质 | |
| CN117951324A (zh) | 数据的搜索方法、装置、电子设备以及存储介质 | |
| CN118013094A (zh) | 一种非结构化指标评估数据的处理方法、系统及设备 | |
| CN115878569A (zh) | 资源文件检索、倒排索引构建方法、装置和电子设备 | |
| CN116521732A (zh) | 基于YApi标签的接口查询方法、装置、存储介质及电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |