CN103530357A - 视频检索方法及系统 - Google Patents

Abstract

本发明实施例提供的一种视频检索方法及系统，可以预先建立存储有视频信息及其对应的索引图片的视频检索库，从而可以使用户通过图片进行视频检索。当用户并不知悉视频名称时，可以方便的对该视频进行拍摄或提取该视频的视频帧进行视频检索，从而获得自己所需要的视频信息。同时，视频图片的修改较为困难，因此也可以排除视频提供者修改带来的干扰，提高了视频检索的准确性。

Description

视频检索方法及系统

技术领域

本发明涉及视频检索技术领域，特别是涉及视频检索方法及系统。

背景技术

随着互联网的发展，视频这种多媒体资源的传播也越来越广泛。用户在下载视频前需要首先要检索到该视频。

现有技术下，用户只能通过视频名称检索视频，当用户并不知悉视频名称时就无法再检索到所需视频。例如：用户在某地看到别人观看视频很精彩，想下载该视频。但是由于该用户并不知悉视频名称，因此无法检索到该视频。另一方面，很多视频的提供者出于某种目的，常常将视频名称修改为与该视频内容并不匹配的名称，这无疑干扰了用户对视频的检索，使用户常常检索到自己不需要的视频。

发明内容

本发明实施例的目的在于提供一种视频检索方法及系统，以实现不通过视频名称进行视频检索的目的。

为达到上述目的，本发明实施例公开了一种视频检索方法，包括：

获得用于检索视频的第一图片；

在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

将所述第一视频信息作为检索结果输出给用户。

优选的，所述将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片，包括：

对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算，获得与所述第一图片相似度最高的索引图片作为第一索引图片，或者获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

优选的，所述第一图片为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

优选的，所述索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

优选的，所述索引图片是经过大小和/或光照归一化处理后的图片，在获得用于检索视频的第一图片后，所述方法还包括：

对所述第一图片的大小和/或光照进行归一化处理，在进行归一化处理后，再将所述第一图片与所述视频检索库中的各个索引图片进行匹配。

优选的，所述对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算，包括：

获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

一种视频检索系统，包括：第一获得单元、检索单元、第二获得单元和输出单元，

所述第一获得单元，用于获得用于检索视频的第一图片；

所述检索单元，用于在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

所述第二获得单元，用于获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

所述输出单元，用于将所述第一视频信息作为检索结果输出给用户。

优选的，所述检索单元包括：相似度模块，用于对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算；

所述检索单元还包括：第一获得模块或第二获得模块，

所述第一获得模块，用于获得与所述第一图片相似度最高的索引图片作为第一索引图片；

所述第二获得模块，用于获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

优选的，所述第一图片为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

优选的，所述索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

优选的，所述索引图片是经过大小和/或光照归一化处理后的图片，所述系统还包括：归一化单元，用于在所述第一获得单元获得用于检索视频的第一图片后，对所述第一图片的大小和/或光照进行归一化处理，在进行归一化处理后，再触发所述检索单元。

优选的，所述相似度模块包括：特征子模块、匹配度子模块和相似度子模块，

所述特征子模块，用于获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

所述匹配度子模块，用于确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

所述相似度子模块，用于根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

本发明实施例提供的一种视频检索方法及系统，可以预先建立存储有视频信息及其对应的索引图片的视频检索库，从而可以使用户通过图片进行视频检索。当用户并不知悉视频名称时，可以方便的对该视频进行拍摄或提取该视频的视频帧进行视频检索，从而获得自己所需要的视频信息。同时，视频图片的修改较为困难，因此也可以排除视频提供者修改带来的干扰，提高了视频检索的准确性。当然，实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种视频检索方法的流程图；

图2为本发明实施例提供的另一种视频检索方法的流程图；

图3为本发明实施例提供的一种视频检索系统的结构示意图；

图4为本发明实施例提供的另一种视频检索系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，本发明实施例提供的一种视频检索方法，包括：

S100、获得用于检索视频的第一图片；

其中，所述第一图片为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

可以理解的是，由于智能移动终端的普及，“随手拍”已成为人们日常生活的一部分。用户可以使用手机、平板电脑等智能移动终端方便的对自己所要检索的视频画面进行拍摄。例如：当用户对某人手机上播放的视频进行拍摄，获得该视频的图片。

当然，用户也可以直接将视频的视频帧作为用于检索视频的图片。例如：用户正在电脑上在线观看某视频，希望下载下来，但并不知悉该视频的名称，因此用户可以获得该视频的视频帧，通过该视频帧进行视频检索。

S200、在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

其中，所述索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

视频检索库可以位于视频提供网站的后台服务器中。其中，视频信息可以为视频本身，也可以为视频下载地址、视频播放地址、视频名称、视频大小、视频演职员信息等。一个视频信息可以对应一个或多个索引图片。当采用视频帧作为索引图片时，优选的，该视频帧为视频片头或片尾的视频帧。优选的，该视频帧还携带有该视频帧的位置信息，例如在视频中的第01分内的第1.28秒。这样，可以首先提示用户输入所要检索的视频的第01分内的第1.28秒或其周围的视频帧，以提高检索精度。为了实现精确检索，优选的，可以将各视频中的相同位置处的视频帧作为视频检索库中的各索引图片，例如对于视频A和视频B，将视频A的第01分内的第1.28秒处的视频帧作为视频A的索引图片，将视频B的第01分内的第1.28秒处的视频帧作为视频B的索引图片。当第01分内的第1.28秒处无视频帧时，可以将距离该位置最近的视频帧作为索引图片。优选的，当一个视频信息对应多个索引图片时，可以将多个特定位置的视频帧依次作为该视频信息对应的多个索引图片，以增加检索精度。在实际应用中，可以在第一图片与某视频信息对应多个索引图片中的任一个索引图片匹配时确定该索引图片对应的视频信息为该第一图片所对应的视频信息，也可以在第一图片与该视频信息对应的两个、三个直至所有索引图片匹配时确定该索引图片对应的视频信息为该第一图片所对应的视频信息。

用户指定的图片可以为电影海报、视频的精彩截图、经典画面等。

步骤S200可以包括：

对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算，获得与所述第一图片相似度最高的索引图片作为第一索引图片，或者获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

进一步，对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算的过程，可以包括：

获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

优选的，在本发明其他实施例中，还可以使用随机抽样一致性算法对特征向量间的匹配度进行检验，去除错误的匹配度，以提高图片相似度的准确率。

S300、获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

在确定与所述第一图片匹配的第一索引图片后，就可以根据视频信息与索引图片的对应关系确定视频信息。

S400、将所述第一视频信息作为检索结果输出给用户。

本发明实施例提供的一种视频检索方法，可以预先建立存储有视频信息及其对应的索引图片的视频检索库，从而可以使用户通过图片进行视频检索。当用户并不知悉视频名称时，可以方便的对该视频进行拍摄或提取该视频的视频帧进行视频检索，从而获得自己所需要的视频信息。同时，视频图片的修改较为困难，因此也可以排除视频提供者修改带来的干扰，提高了视频检索的准确性。

如图2所示，本发明实施例提供的另一种视频检索方法中，该方法可以包括：

S100、获得用于检索视频的第一图片；

S110、对所述第一图片的大小和/或光照进行归一化处理；

归一化处理可以将原始图像变成标准形式，以消除外部影响，便于进行图片比较。

对大小归一化可以将图像缩放为统一尺寸；对光照归一化可以用RGB各分量占总量的比例代替绝对值。

S200、在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

其中，索引图片是经过大小和/或光照归一化处理后的图片。

S300、获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

S400、将所述第一视频信息作为检索结果输出给用户。

图2所示实施例可以首先对图片进行归一化处理，因此可以提高匹配的准确性。

相应于上述方法实施例，如图3所示，本发明还提供了一种视频检索系统，可以包括：第一获得单元100、检索单元200、第二获得单元300和输出单元400，

第一获得单元100，用于获得用于检索视频的第一图片；

其中，第一图片可以为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

检索单元200，用于在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

其中，索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

检索单元200可以包括：相似度模块，用于对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算；

检索单元还包括：第一获得模块或第二获得模块，

第一获得模块，用于获得与所述第一图片相似度最高的索引图片作为第一索引图片；

第二获得模块，用于获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

其中，相似度模块可以包括：特征子模块、匹配度子模块和相似度子模块，

特征子模块，用于获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

匹配度子模块，用于确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

相似度子模块，用于根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

第二获得单元300，用于获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

输出单元400，用于将所述第一视频信息作为检索结果输出给用户。

上述各单元的具体执行过程，请参见图1所示实施例部分。

本发明实施例提供的一种视频检索系统，可以预先建立存储有视频信息及其对应的索引图片的视频检索库，从而可以使用户通过图片进行视频检索。当用户并不知悉视频名称时，可以方便的对该视频进行拍摄或提取该视频的视频帧进行视频检索，从而获得自己所需要的视频信息。同时，视频图片的修改较为困难，因此也可以排除视频提供者修改带来的干扰，提高了视频检索的准确性。

如图4所示，本发明实施例提供的另一种视频检索系统中，索引图片是经过大小和/或光照归一化处理后的图片，该系统还可以包括：归一化单元110，用于在所述第一获得单元获得用于检索视频的第一图片后，对所述第一图片的大小和/或光照进行归一化处理，在进行归一化处理后，再触发所述检索单元200。

图4所示实施例可以首先对图片进行归一化处理，因此可以提高匹配的准确性。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (12)

1.一种视频检索方法，其特征在于，包括：

获得用于检索视频的第一图片；

在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

将所述第一视频信息作为检索结果输出给用户。

2.根据权利要求1所述的方法，其特征在于，所述将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片，包括：

对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算，获得与所述第一图片相似度最高的索引图片作为第一索引图片，或者获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

3.根据权利要求1或2所述的方法，其特征在于，所述第一图片为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

4.根据权利要求1或2所述的方法，其特征在于，所述索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

5.根据权利要求1或2所述的方法，其特征在于，所述索引图片是经过大小和/或光照归一化处理后的图片，在获得用于检索视频的第一图片后，所述方法还包括：

对所述第一图片的大小和/或光照进行归一化处理，在进行归一化处理后，再将所述第一图片与所述视频检索库中的各个索引图片进行匹配。

6.根据权利要求2所述的方法，其特征在于，所述对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算，包括：

获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

7.一种视频检索系统，其特征在于，包括：第一获得单元、检索单元、第二获得单元和输出单元，

所述第一获得单元，用于获得用于检索视频的第一图片；

所述检索单元，用于在预先建立的视频检索库中进行检索，将所述第一图片与所述视频检索库中的各个索引图片进行匹配，获得与所述第一图片匹配的第一索引图片,所述视频检索库中存储有视频信息及其对应的索引图片；

所述第二获得单元，用于获得所述视频检索库中与所述第一索引图片对应的第一视频信息；

所述输出单元，用于将所述第一视频信息作为检索结果输出给用户。

8.根据权利要求7所述的系统，其特征在于，所述检索单元包括：相似度模块，用于对所述第一图片与所述视频检索库中的各个索引图片进行相似度计算；

所述检索单元还包括：第一获得模块或第二获得模块，

所述第一获得模块，用于获得与所述第一图片相似度最高的索引图片作为第一索引图片；

所述第二获得模块，用于获得与所述第一图片相似度不低于预设阈值的索引图片作为第一索引图片。

9.根据权利要求7或8所述的系统，其特征在于，所述第一图片为对视频进行拍摄后获得的图片、对海报/剧照进行拍摄后获得的图片或从视频中提取的视频帧。

10.根据权利要求7或8所述的系统，其特征在于，所述索引图片为所述视频信息所对应的视频的视频帧，或所述索引图片为用户指定的图片。

11.根据权利要求7或8所述的系统，其特征在于，所述索引图片是经过大小和/或光照归一化处理后的图片，所述系统还包括：归一化单元，用于在所述第一获得单元获得用于检索视频的第一图片后，对所述第一图片的大小和/或光照进行归一化处理，在进行归一化处理后，再触发所述检索单元。

12.根据权利要求8所述的系统，其特征在于，所述相似度模块包括：特征子模块、匹配度子模块和相似度子模块，

所述特征子模块，用于获得所述视频检索库中的各个索引图片的特征向量，获得所述第一图片的特征向量；

所述匹配度子模块，用于确定所述各个索引图片的特征向量与所述第一图片的特征向量的匹配度；

所述相似度子模块，用于根据所述匹配度确定所述各个索引图片与所述第一图片的相似度。

Images