CN108702551B - 用于提供视频的概要信息的方法和装置 - Google Patents

Abstract

一种在电子设备中提供视频的概要的方法，包括：基于预设标准，从视频的多个帧当中确定第一概要帧；生成与第一概要帧对应的多条第一概要信息；以及将所述第一概要帧和所述多条第一概要信息中的至少一个、与所述视频的至少一个帧一起显示。

Description

用于提供视频的概要信息的方法和装置

技术领域

与示例性实施例一致的方法和装置涉及概括(summarize)视频并提供视频的概要(summary)信息。

背景技术

随着多媒体技术和/或网络技术的发展，用户能够通过使用终端设备生成视频、或者从其它终端设备或服务器(例如，服务服务器)接收视频并利用所接收的视频。

当用户可能使用的视频的数目增加时，用户可能难以有效地选择用户想要利用的视频。因此，已经开发了概括视频的内容并提供视频的概要的技术。然而，在相关领域技术中，视频的概要仅仅是一些现有视频(或图像)的组合，因此用户难以容易且自信地识别视频的内容。因此，需要提供视频的有效概要信息的技术。

发明内容

问题的解决方案

一个或多个示例性实施例提供了用于概括视频并提供视频的概要信息的方法和装置。

发明的有益效果

电子设备可以显示概要帧并且可以从由用户选择的概要帧的再现位置显示视频。

电子设备可以在单个视频内搜索类似的视频，并且可以向用户提供找到的类似视频。

电子设备可以从存储空间中删除除了概要帧和多条概要信息之外的、数据的与捕获的视频对应的部分。

附图说明

图1图示了根据示例性实施例的执行视频概括的用户设备(UE)的框图；

图2是图示根据示例性实施例的UE的组件的框图；

图3是根据示例性实施例的通过使用关键帧生成第一概要帧的方法的流程图；

图4是根据示例性实施例的通过使用UE基于视频导航来处理第一概要帧的方法的流程图；

图5是根据示例性实施例的通过使用UE基于动作概要搜索来处理第一概要帧的方法的流程图；

图6是根据示例性实施例的利用第一概要帧的方法的流程图；

图7是根据示例性实施例的利用第一概要帧来增强存储空间的方法的流程图；

图8是根据示例性实施例用于说明提供电子设备的输入视频的概要帧的示意图；

图9是根据示例性实施例的生成概要帧的概要信息的方法的流程图；

图10是根据示例性实施例的从选择的第一概要帧显示视频的方法的流程图；

图11图示了根据示例性实施例的从选择的第一概要帧显示视频的示例；

图12是根据示例性实施例的视频搜索方法的流程图；

图13是根据示例性实施例的搜索与视频的再现片段匹配的视频的方法的流程图；

图14图示了根据示例性实施例的选择第一概要帧的部分区域的示例；

图15是根据示例性实施例的生成多个视频的主概要的方法的流程图；

图16是用于说明根据示例性实施例的生成多个视频的主概要的方法的示意图；

图17图示了根据示例性实施例的从选择的概要帧的再现位置显示视频的方法的示例；

图18是根据示例性实施例的存储视频的一部分的方法的流程图；

图19图示了根据示例性实施例的选择存储视频的方法的示例；以及

图20是根据示例性实施例的电子设备的框图。

图21是根据示例性实施例的在电子设备中显示视频的方法的流程图。

具体实施方式

用于执行本发明的最佳方式

根据示例性实施例的一方面，提供了一种在电子设备中提供视频的概要的方法，该方法包括：基于预设标准，从视频的多个帧当中确定第一概要帧；生成与第一概要帧对应的多条第一概要信息；以及将第一概要帧和多条第一概要信息中的至少一个、与视频的至少一个帧一起显示。

根据示例性实施例的另一方面，提供了一种电子设备，包括：显示器；以及处理器，被配置为基于预设标准，从视频的多个帧当中确定第一概要帧，并且被配置为生成与第一概要帧对应的多条第一概要信息。该处理器可以控制显示器将第一概要帧和多条第一概要信息中的至少一个、与视频的至少一个帧一起显示。

根据示例性实施例的又一方面，提供了一种电子设备，包括：存储器；处理器；输入单元，被配置为接收用户输入以选择视频的第一位置和第二位置；以及显示器。该处理器可以获得与包括在第一位置与第二位置之间的第一帧中的至少一个对应的第一概要信息，获得与视频的第二帧对应的至少一条第二概要信息，并从至少一条第二概要信息当中搜索与第一概要信息匹配的第二概要信息，其中第二帧不包括第一帧，并且，该显示器可以显示视频的与所搜索的第二概要信息对应的部分视频。

根据示例性实施例的又一方面，提供了一种在电子设备上显示视频的方法，该方法包括：接收用户输入以选择视频的第一位置和第二位置；获得与包括在第一位置与第二位置之间的第一帧中的至少一个对应的第一概要信息；获得与视频的第二帧对应的至少一条第二概要信息，其中第二帧不包括第一帧；从至少一条第二概要信息当中搜索与第一概要信息匹配的第二概要信息；以及显示视频的与所搜索的第二概要信息对应的部分视频。

用于本发明的方式

下面参考附图更详细地描述某些示例性实施例。

在以下描述中，即使在不同的附图中，相同的附图标号也用于相同的元件。提供说明书中定义的事项，诸如，详细构造和元件，以帮助全面理解示例性实施例。然而，显而易见的是，可以在没有那些具体定义的事项的情况下实践示例性实施例。而且，不详细描述众所周知的功能或构造，因为它们会以不必要的细节来模糊描述。

在整个说明书中，当元件被称为“连接”或“耦合”到另一个元件时，它可以直接连接或耦合到另一个元件，或者可以利用其间插入的介入元件电连接或耦合到另一个元件。此外，当在本说明书中使用时，术语“包括”或“包含”指定所述元件的存在，但不排除存在或添加一个或多个其它元件。

在本说明书中，术语“关键帧”是指以规则的时间间隔出现在视频中的图像，并且术语“概要帧”是指从关键帧当中被确定为在图像中具有相对大的改变的帧。概要帧可以包括关键帧。

此外，在电子设备上显示视频可以包括再现状态(例如，正在再现视频图像)或保持状态(例如，显示静止图像)。

图1图示了根据示例性实施例的执行视频概括的用户设备(UE)的框图。

UE 101可以是能够以至少一种格式存储数据的任何电子设备。UE 101 可以包括至少一个组件，来以至少一种格式捕获和存储数据。UE 101可以将数据存储在本地存储器、基于存储空间的云、或两者中。UE 101还可以包括至少一个组件，来向用户显示媒体内容。UE 101可以支持至少一个选项以允许用户与UE 101交互以管理数据。UE 101的示例可以包括但不限于智能电话、平板式计算机、个人数字助理(PDA)等。

图2是图示根据示例性实施例的UE 101的组件的框图。

UE 101包括输入/输出(I/O)接口201、视频概括引擎202、存储器模块 203、导航模块204、内容检索模块205和主概要生成器206。

I/O接口201被配置为允许用户与UE 101交互，以执行与数据管理、数据捕获和任何相关活动相关的至少一个功能。I/O接口201可以以任何形式，诸如但不限于小键盘或触摸屏显示器。此外，I/O接口201向用户提供至少一个选项以启动和控制与数据捕获和管理相关联的任何功能。I/O接口201可以与至少一个组件相关联以捕获媒体内容，并且/或者可以从外部源接收(或收集)内容。外部源可以是互联网、外部硬盘等。

视频概括引擎202可以识别接收的视频中的动作序列，提取对应的关键帧，并通过使用所提取的关键帧生成与视频对应的概要帧。术语“关键帧”可以指表示来自正被处理的视频的唯一(unique)场景(例如，动作场景) 的帧。根据示例性实施例，视频概括引擎202在新视频被接收并被存储在存储器模块203中时自动启动关键帧。根据另一示例性实施例，视频概括引擎 202响应于用户输入而生成概要帧。

存储器模块203可以在对应的媒体数据库中存储不同类型和/或不同格式的媒体内容，并将媒体内容提供给UE 101的其它组件，以在接收到数据请求时进一步处理。在各种示例性实施例中，存储器模块203可以位于UE 101 内部或外部。此外，存储器模块203可以具有固定大小或者可以是可变大小 (例如，可扩展的)。存储器模块203可以将对应于存储在媒体数据库中的每个视频而生成的概要帧存储在相同的数据库或不同的数据库中。存储器模块 203可以支持媒体内容的索引以支持媒体内容的快速搜索和检索。

导航模块204可以执行视频导航。视频导航处理旨在允许用户快速访问视频中的期望场景。当视频正在回放时，导航模块204可以基于在存储器模块203中为该视频生成和存储的概要帧，向用户提供与该视频相关联的关键帧。导航模块204可以从用户接收输入。该输入可以与从提供给用户的关键帧中对特定关键帧的选择相关联。此外，响应于来自用户的输入，导航模块 204将用户重定向到视频的对应于所选择的关键帧的一部分。

内容检索模块205可以从用户接收搜索查询，其中搜索查询可以包括至少一种类型的媒体文件的至少一部分。根据示例性实施例，可以由用户基于正在查看的媒体内容立即生成搜索查询。例如，在观看视频文件的同时，用户可以通过使用任何方法选择视频的特定部分，并提供所选择的部分作为搜索查询。响应于搜索查询，内容检索模块205搜索存储在存储器模块203中的内容，例如，在由视频库索引表示的概要视频当中。概要视频可以包括通过使用概要帧提取的视频。例如，可以基于每个概要帧的再现位置来提取概要视频。接下来，内容检索模块205识别搜索查询与存储在存储器模块203 中的内容之间的匹配内容的全部或一些。此外，内容检索模块205可以使用 I/O接口201将所识别的匹配内容提供给用户。

主概要生成器206可以为两个或更多个选择的视频生成包括来自所选择的视频的概要帧的主概要。主概要生成器206从为所选择的视频生成的概要帧中识别用于所选择的视频的关键帧，并通过使用关键帧生成用于所选择的视频的主概要。根据示例性实施例，主概要生成器206接收用户输入以选择要用于生成主概要的视频。根据另一示例性实施例，主概要生成器206从存储器模块203自动识别并选择彼此相关的内容，并生成用于所选择的视频的主概要。主概要生成器206可以基于至少一个参数(诸如但不限于内容已经被生成和存储和/或标记的日期和/或时间)来识别相关内容。

图3是通过使用关键帧生成一个或多个概要帧的方法300的流程图。

在操作302中，当例如自动地或基于用户指令选择视频时，视频概括引擎202识别表示所选择的视频中的不同动作的一个或多个帧。此外，在操作 304中，视频概括引擎202提取所识别的一个或多个视频，作为与特定视频 (或所选择的视频)对应的关键帧。

在识别(多个)关键帧之后，视频概括引擎202基于一个或多个预定标准从所识别的关键帧生成概要帧。根据示例性实施例，预定标准可以是关键帧的兴趣级别评分(或兴趣度评分)。在操作306中，视频概括引擎202确定关于所提取的关键帧的兴趣级别，作为兴趣级别评分。根据示例性实施例，基于由用户预设的至少一个标准确定兴趣级别评分。

根据示例性实施例，可以基于要考虑的关键帧中呈现的新信息的量来确定兴趣级别评分。出于说明性目的，假设在时间T正在处理第M个关键帧，并且包括N个关键帧(例如，表示为具有时空特征)的字典(dictionary)也可用。通过使用预设的匹配标准，将第M个关键帧与字典的所有内容比较，并且识别第M个关键帧与字典内容之间的匹配的数目。在第M个关键帧与字典的内容之间的匹配的数目超过预定义阈值的情况下，第M个关键帧的兴趣级别评分被设置为“高”(或设置为具有高值)。

此外，可以通过从字典中移除已存在的关键帧来将第M个关键帧添加到字典，由此更新字典。根据示例性实施例，选择与字典中的其余关键帧最匹配的关键帧被移除。根据另一示例性实施例，基于关键帧的兴趣级别评分更新字典。例如，将新关键帧的兴趣级别评分与字典中存在的所有关键帧当中的关键帧的最低兴趣级别评分进行比较。当发现新关键帧的兴趣级别评分高于最低兴趣级别评分时，通过用新关键帧取代具有最低兴趣级别评分的现有关键帧来更新字典。当第M个关键帧与字典的内容之间的匹配的数目低于预定阈值时，第M个关键帧的兴趣级别评分被设置为“低”(或设置为具有低值)，并且可以不将第M个关键帧添加到字典。

此外，将所确定的兴趣级别评分与兴趣级别的阈值进行比较。例如，可以预设兴趣级别的阈值。响应于所确定的兴趣级别评分等于或大于阈值，选择与兴趣级别评分对应的关键帧以生成概要帧。此外，在操作310中，通过使用所选择的关键帧来生成概要帧。方法300中的各种操作可以以所呈现的顺序、以不同的顺序、或同时地执行。此外，在一些示例性实施例中，图3 中所示的一些操作可以被省略并且/或者可以在方法300中添加附加操作。

图4是根据示例性实施例的通过使用UE基于视频导航处理概要帧的方法400的流程图。

当视频正在回放时，导航模块204基于在存储器模块203中为视频生成和存储的概要帧来识别与视频关联的关键帧。根据示例性实施例，在操作402 中，导航模块204仅选择具有更高的兴趣级别值的关键帧，并且所选择的关键帧被提供给用户。用户可以通过使用对应的用户接口从提供给用户的关键帧选择至少一个关键帧。用户接口可以包括小键盘、圆顶开关、包括电容覆盖型、电阻覆盖型、红外光束型、表面声波型、积分应变计型和压电型的触摸板、旋转轮、拨动开关等，但是示例性实施例不限于此。

导航模块204在操作404中接收对特定关键帧的用户选择，并且在操作 406中识别关键帧选自的正被回放的视频的特定部分。此外，导航模块204 在操作408中将用户导航或重定向到视频的所选择的部分。方法400中的各种操作可以以所呈现的顺序、以不同的顺序、或同时地执行。此外，在一些示例性实施例中，图4中所示的一些操作可以省略并且/或者可以在方法400 中添加附加操作。

图5是根据示例性实施例的通过使用UE基于动作概要搜索来处理概要帧的方法500的流程图。

在操作502中，UE 101中的内容检索模块205可以从用户接收搜索查询。例如，搜索查询可以包括至少一种类型的媒体文件的至少一部分。例如，在用户旨在从媒体库(或视频库)搜索所有视频的情况下，搜索查询可以对应于视频的一部分。例如，在观看视频文件的同时，用户可以通过使用由内容检索模块205和I/O接口201提供的选项来选择视频的特定部分，并提供所选择的部分作为搜索查询。

响应于搜索查询，内容检索模块205在操作504中从查询视频(或视频的所选择的部分)提取关键帧，并在操作506中将所提取的关键帧与视频库索引(或视频库的索引)比较。通过将关键帧与视频库索引比较，内容检索模块205在操作508中从视频库识别匹配内容，并在操作510中检索该匹配内容。此外，可以将所识别的匹配内容显示给用户。例如，当查询视频对应于在足球比赛中罚点球时，内容检索模块205搜索并识别具有至少一个类似的关键帧(例如，显示罚点球的帧)的视频库中的所有视频，并将搜索结果显示给用户。

方法500中的各种操作可以以所呈现的顺序、以不同的顺序、或同时地执行。此外，在一些示例性实施例中，图5中所示的一些操作可以被省略并且/或者可以向方法500添加附加操作。

图6是使用概要帧来执行时刻回忆(moment recall)的特征的方法600 的流程图。

术语“时刻回忆”是指允许获得匹配输入查询的视频概要帧的特征。例如，输入查询是图像。在操作602中，UE 101响应于接收图像作为输入查询来启动时刻回忆特征。此外，在操作604中，UE 101将所接收的输入查询与存储对应于至少一个视频的概要帧的相关联的存储空间中的数据库比较。

通过将输入查询与数据库中的概要帧进行比较，在操作606中，确定至少一个概要帧是否与输入查询匹配。可以使用任何图像和/或视频处理和比较算法来比较输入查询与概要帧。在各种示例性实施例中，参数(诸如但不限于与输入查询相关联的时间戳和地理标签)以及概要帧可用于识别作为比较结果的匹配。

当检测到至少一个匹配时，在操作608中，响应于输入查询，经由至少一个接口以预定格式提供所检测的匹配作为输出。如果未找到匹配，则在操作610中，通过使用接口向用户显示指示未找到匹配的预设消息。

方法600中的各种操作可以以所呈现的顺序、以不同的顺序或同时地执行。此外，在一些示例性实施例中，图6中所示的一些操作可以省略并且/或者可以向方法600添加附加操作。

图7是根据示例性实施例的使用概要帧来执行存储空间增强的方法700 的流程图。

在操作702中，用户可以通过使用UE 101启动视频记录。UE 101可以被配置为监控视频的记录。在操作704中，UE 101检测预定义类型的至少一个触发，以执行存储空间增强。例如，触发可以是可用存储空间变得小于或等于设置值(即，已经利用UE 101预设的存储空间的阈值限制)的事件。此外，触发可以是由用户提供的手动输入、以及可用存储空间变得小于阈值的事件中的至少一个或组合，并且/或者可以是由用户预定义的任何事件。

在接收到至少一个触发以增强存储空间时，UE 101在操作706中动态地生成正被记录的视频的概要(或概要帧)，并且在操作708中将概要(或概要帧)存储在对应的存储空间中，而非实际视频。

方法700中的各种操作可以以所呈现的顺序、以不同的顺序或同时地执行。此外，在一些实施例中，图7中所示的一些操作可以省略并且/或者可以向方法700添加附加操作。

图8是根据示例性实施例的用于说明通过概括输入到电子设备1000的视频来提供概要帧的示意图。

电子设备1000可以分析输入视频并基于图像中的相对大的改变来确定概要帧。例如，电子设备1000可以确定在诸如图像中的对象的位置或形状的特征中具有相对大的改变量的帧，作为概要帧。电子设备1000可以显示视频 810，并且还可以将包括概要帧B、概要帧C、概要帧D和概要帧E的概要帧与视频810一起显示。当用户从概要帧选择一个概要帧(例如，概要帧C) 时，电子设备1000可以从所选择的概要帧的再现位置再现视频810。

根据示例性实施例，电子设备1000确定视频810的概要帧，并将所确定的概要帧提供给用户。因此，用户可以容易地从视频810搜索期望的再现位置。参考图8，电子设备1000可以显示输入视频810。电子设备1000还可以显示概要帧B-E。电子设备1000可以将概要帧B-E与输入视频810一起显示，但是示例性实施例不限于此。

电子设备1000可以获取关键帧并从所获取的关键帧当中确定概要帧。响应于用户输入820，电子设备1000可以显示概要帧。例如，当用户触摸显示的图标821时，电子设备1000可以显示概要帧。电子设备1000可以响应于用户输入820在输入视频810上显示概要帧。

电子设备1000可以接收从所显示的概要帧当中选择一个的用户输入830。

电子设备1000可以生成关于概要帧的概要信息。概要信息包括关于概要帧的信息。例如，概要信息可以包括包括概要帧的视频文件的名称、概要帧的再现位置、下一关键帧的再现位置、以及用于执行内容搜索的匹配信息。可以为每个概要帧生成概要信息。例如，概要信息C 840是关于概要帧C的信息。概要信息C 840包括用于概要帧C的视频文件名称、再现位置和匹配信息。视频文件名称是视频810的标识(ID)值。例如，视频文件名称可以被显示为abc.avi。概要帧C的再现位置指示在视频810中再现视频810中的概要帧C的时间。

匹配信息可以包括关键点信息、地点信息、以及日期和时间信息，并且还可以包括可以用于搜索与对应于匹配信息的帧相同或类似的概要帧的任何信息。例如，关键点信息可以包括关于概要帧的关键点的信息，地点信息可以包括已经捕获包括概要帧的视频的地点的信息，并且日期和时间信息可以包括关于已经捕获包括概要帧的视频的日期和时间的信息。

电子设备1000可以是能够执行图像处理的任何设备。电子设备1000的示例可以包括但不限于智能电话、平板型个人计算机(PC)、PC、智能电视 (TV)、移动电话、个人数字助理(PDA)、膝上型计算机、媒体播放器、微服务器、全球定位系统(GPS)设备、电子书终端、数字广播终端、导航设备、售货亭(kiosk)、MP3播放器、数码相机、家用电器、以及其它移动或非移动计算设备。电子设备1000还可以是可穿戴设备，诸如，具有通信功能和/或数据处理功能的手表、眼镜、发带或环(ring)。

图9是根据示例性实施例的生成概要帧的概要信息的方法的流程图。

在操作910中，电子设备可以从输入视频获取关键帧。电子设备的输入视频可以是由电子设备生成的视频。例如，输入视频可以是由电子设备的相机捕获的视频。输入到电子设备的视频还可以是由电子设备从外部服务器(例如，云服务器)或从外部电子设备接收的视频。输入到电子设备的视频可以包括关键帧。包括在输入视频中的关键帧可以是图像的静止帧。换句话说，关键帧可以是图像文件。由电子设备获取的关键帧可以被显示为缩略图(thumbnail)。

在操作920中，电子设备可以基于预设标准从关键帧当中确定概要帧。根据示例性实施例，预设标准可以基于与其它关键帧相比较的特定关键帧的变化。例如，可以从关键帧当中将整个屏幕的像素值已经改变了预设阈值度或更大的关键帧、出现新对象的关键帧、或对象的动作已经改变了预设阈值或更大的关键帧确定为概要帧。

当电子设备从属于特定再现片段的关键帧当中确定多个概要帧时，电子设备可以限制所确定的概要帧的数目。例如，电子设备可以从属于输入视频的十分钟长的片段的关键帧当中确定一个概要帧。

例如，当输入到电子设备的视频包括N个关键帧时，电子设备可以将给定关键帧(例如，关键帧A)与剩余的(N-1)个关键帧比较。电子设备可以通过使用关键帧的时空特征来将关键帧彼此比较。电子设备还可以通过使用关键帧的关键点来将关键帧彼此比较。电子设备还可以通过使用关键帧中包括的时间信息和地点信息中的至少一个来将关键帧彼此比较。如果基于关键帧A与剩余的(N-1)个关键帧之间的比较确定关键帧A中的变化等于或大于预设阈值，则电子设备可以将关键帧A确定为概要帧。电子设备可以通过将输入视频中包括的N个关键帧中的每个与剩余的(N-1)个关键帧比较来确定概要帧。

在操作930中，电子设备可以生成概要帧的多条概要信息。概要信息包括例如视频文件名称、再现位置和匹配信息。

在操作940中，电子设备可以将概要帧和多条概要信息存储在存储器或外部存储装置(例如，云)中。电子设备可以将多条概要信息关联到概要帧。

图10是根据示例性实施例的从选择的概要帧显示视频的方法的流程图。

在操作1010中，当输入视频正在被显示时，电子设备可以显示概要帧。根据示例性实施例，电子设备可以将概要帧与输入视频一起显示。电子设备可以响应于用户输入将所确定的概要帧与输入视频一起显示。可以在屏幕的特定区域上显示概要帧。例如，可以在屏幕的下部、左部或右部显示概要帧。

根据另一示例性实施例，当多个概要帧被确定时，电子设备可以在没有用户输入的情况下显示一些所确定的概要帧。电子设备可以响应于用户输入显示其它概要帧。

在操作1020中，电子设备可以接收从所显示的概要帧当中选择一个的用户输入。电子设备可以接收从所显示的概要帧当中选择多个概要帧的用户输入。

在操作1030中，电子设备可以从所选择的概要帧的再现位置显示视频。电子设备可以显示与所选择的概要帧的再现位置对应的视频，但是示例性实施例不限于此。当视频正在电子设备上被再现时，电子设备可以再现与所选择的概要帧的再现位置对应的视频。当视频在电子设备上处于保持状态(例如，显示静止图像)时，电子设备可以显示与所选择的概要帧的再现位置对应的视频的静止图像。

图11图示了根据示例性实施例的从选择的概要帧显示视频的示例。

参考图11，当输入视频1110a正在电子设备1000上被显示时，电子设备 1000可以显示多个概要帧。多个概要帧可以位于屏幕的下部。响应于用户输入1120，电子设备1000可以显示概要帧。电子设备1000可以接收从所显示的概要帧选择一个的用户输入1130。

响应于从所显示的概要帧选择一个的用户输入1120，电子设备1000可以从所选择的概要帧的再现位置再现输入视频1110b。

图12是根据示例性实施例的视频搜索方法的流程图。

参考图12，电子设备可以通过使用概要帧的概要信息向用户提供与当前再现的视频类似的视频。

在操作1210中，电子设备可以接收从视频的再现时间片段选择第一位置和第二位置的用户输入。例如，再现片段可以指示正在再现视频的动态进展，并且可以在视频的下部例如以条形图形(或时间指示器)表示。根据示例性实施例，电子设备可以接收从视频的再现片段仅选择第一位置的用户输入。当用户输入仅选择第一位置时，电子设备可以自动确定例如视频的起始位置作为第二位置。当用户输入仅选择第一位置时，电子设备可以自动确定例如视频的结束位置作为第二位置。

根据示例性实施例，电子设备可以接收选择多组第一位置和第二位置的用户输入。

根据示例性实施例，代替从视频的再现片段选择第一和第二位置，电子设备可以接收从包括在视频中的第一概要帧选择两个帧的用户输入。例如，电子设备可以接收从与视频一起显示的第一概要帧选择两个帧的用户输入。从由用户选择的两个第一概要帧当中，比其它所选择的第一概要帧更早再现的第一概要帧的再现位置被确定为第一位置，并且剩余的第一概要帧的再现位置被确定为第二位置。

从当前再现的视频的帧选择第一概要帧。从存储在存储器中的视频的帧选择第二概要帧。根据另一示例性实施例，可以从当前再现的视频中用户未指定的片段选择第二概要帧。

在操作1220中，电子设备可以从第一概要帧提取包括在所选择的位置之间的第一概要帧。电子设备可以显示所提取的第一概要帧。所提取的第一概要帧可以包括与未提取的第一概要帧区分的ID值。

根据示例性实施例，响应于多组第一位置和第二位置，电子设备可以提取包括在每组中的第一概要帧。电子设备可以显示所提取的第一概要帧。所提取的第一概要帧可以包括与未提取的第一概要帧区分的ID值。每组中包括的第一概要帧可以包括与包括在另一组中的第一概要帧区分的ID值。

根据示例性实施例，当电子设备接收从视频的再现片段选择两个第一概要帧、而非选择第一和第二位置的用户输入时，电子设备可以提取包括在两个所选择的第一个概要帧的再现位置之间的第一概要帧。

在操作1230中，电子设备可以获取关于所提取的第一概要帧的概要信息。电子设备可以获取用于第一概要帧中的每个的第一概要信息。在操作1240中，电子设备可以从存储在电子设备中的多个视频获取多条第二概要信息。电子设备可以从包括第一概要帧的视频获取第二概要信息。电子设备可以从视频获取关于除了包括在第一位置与第二位置之间的帧之外的帧的第二概要信息。电子设备可以从包括在多个视频中的关键帧当中获取第二概要帧。电子设备可以生成并获取第二概要帧的多条第二概要信息。多条第二概要信息可以包括具有与多条第一概要信息相同的类型的信息。例如，多条第二概要信息可以包括视频文件名称、再现位置和匹配信息中的任何一个的信息。

在操作1250中，电子设备可以从多条第二概要信息搜索与多条第一概要信息匹配的第二概要信息。电子设备可以通过使用包括在多条第一概要信息中的匹配信息和包括在多条第二概要信息中的匹配信息来搜索与多条第一概要信息匹配的第二概要信息。

根据示例性实施例，电子设备可以经由视觉识别来搜索与多条第一概要信息匹配的第二概要信息。电子设备可以通过使用包括在多条第一概要信息和多条第二概要信息中的关键点信息，将多条第一概要信息与多条第二概要信息匹配。通过使用关键点信息执行匹配的方法的示例包括但不限于Harris 角点、Shi&Tomasi、SIFT DoG、FAST和AGAST算法。电子设备可以通过使用视觉识别算法和区域跟踪算法来搜索与多条第一概要信息匹配的第二概要信息。

根据另一示例性实施例，电子设备可以通过使用包括在多条第一概要信息和多条第二概要信息中的地点信息和数据以及时间信息，来搜索与多条第一概要信息匹配的第二概要信息。电子设备可以搜索包括与多条第一概要信息中包括的地点信息匹配的地点信息的多条第二概要信息。电子设备可以搜索包括与多条第一概要信息中包括的日期和时间信息匹配的日期和时间信息的多条第二概要信息。地点信息可以是已经捕获包括多条第一概要信息的视频的地点的GPS信息。日期和时间信息可以是关于已经捕获包括多条第一概要信息的视频的日期和时间的信息。然而，地点信息以及日期和时间信息不限于此。

根据示例性实施例，电子设备可以接收选择第一概要帧的一些区域的用户输入。当从第一概要帧的区域选择一些区域时，电子设备可以识别与所选择的区域对应的第一概要帧的多条第一概要信息，并搜索与所识别的第一概要信息匹配的第二概要信息。例如，电子设备可以通过仅使用所选择的区域的关键点信息来搜索多条匹配的第二概要信息，但是示例性实施例不限于此。

在操作1260中，电子设备可以显示由找到的第二概要信息表示的视频的多个图像。根据示例性实施例，电子设备可以显示与所找到的第二概要信息对应的第二概要帧。电子设备可以将屏幕分成区并在屏幕的区上显示第二概要帧。例如，电子设备可以将屏幕分成十二个区并在十二个区上显示十二个第二概要帧。用户可以从所显示的第二概要帧选择一个，并且电子设备可以再现包括所选择的第二概要帧的视频。此时，电子设备可以从所选择的第二概要帧的再现位置再现视频。

根据示例性实施例，电子设备可以基于多条第二概要信息与多条第一概要信息之间的匹配值来显示多条第二概要信息。电子设备可以计算多条第二概要信息的匹配值。电子设备可以显示包括满足预设条件的多条第二概要信息的视频的图像(或关键帧或概要帧)。例如，当多条第二概要信息具有更高的匹配值时，多条第二概要信息可能具有关于多条第一概要信息的更高的匹配度。电子设备可以显示包括具有等于或大于阈值的匹配值的多条第二概要信息的视频的图像。例如，电子设备可以优先显示包括具有高匹配值的多条第二概要信息的视频的图像。

图13是根据示例性实施例的搜索与视频的再现片段匹配的视频的方法的流程图。

参考图13，电子设备1000可以接收从视频再现片段选择第一位置1310 和第二位置1320的用户输入。电子设备1000可以提取在所选择的第一和第二位置1310与1320之间包括的第一概要帧，并且所提取的第一概要帧可以包括ID值。在图13中，提取包括在第一与第二位置1310与1320之间的第一概要帧C和第一概要帧D，作为第一概要帧。

电子设备1000可以获取所提取的第一概要帧的多条第一概要信息。例如，第一概要信息C 1350或第一概要信息D 1360可以包括视频文件名称、再现位置和匹配信息。匹配信息可以包括关键点信息、时间信息和地点信息。第一概要信息C 1350表示第一概要帧C。第一概要信息D 1360表示第一概要帧D。

电子设备1000可以从存储在存储器1400中的多条第二概要信息搜索与多条第一概要信息匹配的第二概要信息。

图14图示了根据示例性实施例的选择第一概要帧的部分区域的示例。

电子设备1000可以接收从第一概要帧1410选择部分区域1420的用户输入1430。如图14所示，用户输入1430可以是触摸和拖动，并且用户可以经由触摸和拖动来选择部分区域1420。

电子设备1000可以获取与所选择的第一概要帧的部分区域对应的多条第一概要信息。多条获取的第一概要信息可以是但不限于关于所选择的第一概要帧的部分区域的关键点信息。

前述操作之后可以是与图5的操作506至510相同或类似的操作。因此，由于后续操作与图5的操作506至510相同或类似，所以，为了便于说明，将省略其描述。

根据示例性实施例，电子设备1000可以通过使用所选择的部分区域1420 的关键点信息来识别面部被包括在所选择的部分区域1420中。电子设备1000 可以搜索包括与所识别的面部匹配的帧的视频。例如，可以使用面部识别算法来搜索包括与所识别的面部匹配的帧的视频。电子设备1000可以从所选择的部分区域1420检测面部，通过使用关键点信息提取所检测到的面部的特征，并且搜索包括与所提取的面部特征匹配的信息的第二概要信息。

图15是根据示例性实施例的生成多个视频的主概要的方法的流程图。参考图15，电子设备可以通过从多个视频提取一些视频并将所提取的视频彼此组合，来生成主概要。用户可以再现主概要，因此可以在短时间段内观看多个视频的主要部分。

在操作1510中，电子设备可以获取视频的概要帧。根据示例性实施例，电子设备可以获取多个视频的概要帧。例如，多个视频可以是在由用户指定的时间段内捕获的视频，或者可以是由用户选择的视频。替代地，多个视频可以是包括在同一文件夹中的视频。替代地，多个视频可以是包括相同或类似的文件名称的视频。

在操作1520中，电子设备可以通过使用概要帧来提取视频的概要视频。根据示例性实施例，电子设备可以通过使用概要帧来提取多个视频的概要视频。电子设备可以通过提取从每个概要帧的再现位置到下一关键帧的再现位置的视频，来提取概要视频。例如，可以提取概要视频以具有关于每个概要帧的再现位置的特定长度的再现(例如，从概要帧的再现位置起的三十秒再现时段)。

在操作1530中，电子设备通过将所提取的概要视频彼此组合来生成主概要。例如，电子设备可以在主概要的较早的按时间顺序排列的位置中定位时间上较早的输入视频的概要视频。

图16是用于说明根据示例性实施例的生成多个视频的主概要的方法的示意图。

参考图16，电子设备可以包括存储在存储器中的多个视频1610。电子设备可以从多个视频1610当中获取在特定时间段期间生成的视频1620中包括的概要帧1630。例如，用户可以从存储在电子设备中的多个视频当中选择在最近的旅行时段期间捕获的视频，并且电子设备可以获取由用户选择的视频的概要帧。

电子设备可以通过使用所获取的概要帧1630来提取概要视频。电子设备可以通过将所提取的概要视频彼此组合来生成主概要，由此以单个视频文件的形式向用户提供用户感兴趣的部分视频。

图17图示了根据示例性实施例的从选择的概要帧的再现位置显示视频的方法的示例。电子设备1000可以显示概要帧，并且可以从由用户选择的概要帧的再现位置显示视频。

电子设备1000可以显示多个存储的概要帧。电子设备1000可以显示包括在单个视频文件中的多个概要帧。替代地，电子设备1000可以显示分别表示多个视频的概要帧。根据示例性实施例，电子设备1000可以基于预设标准显示概要帧。例如，电子设备1000可以以在视频内再现概要帧的顺序显示概要帧。电子设备1000可以确定在多个图像被存储时以日期的顺序显示用于多个视频的概要帧的位置。

电子设备1000可以接收选择所显示的概要帧的用户输入1710。响应于用户输入1710，电子设备1000从显示的概要帧的再现位置1720再现视频。

电子设备1000可以获取选择的概要帧的多条概要信息。多条概要信息可包括但不限于关于概要帧的再现位置的信息。

电子设备1000还可以从包括在多条概要信息中的再现位置1720显示视频，但是显示视频的位置不限于此。

图18是根据示例性实施例的存储输入视频的一部分的方法的流程图。

参考图18，当电子设备的存储空间不足时，电子设备可以仅存储捕获的视频的一部分。

在操作1810中，电子设备可以确定存储空间是否小于或等于预设阈值。存储空间可以是但不限于电子设备的存储器。当在操作1810中未确定存储空间小于或等于预设阈值时，电子设备可以将整个输入视频存储在存储空间中。

另一方面，当在操作1810中确定存储空间小于或等于预设阈值时，电子设备可以提供通知信息，从而向用户通知存储空间小于或等于预设阈值。响应于关于通知信息的用户输入，电子设备可以进行到操作1820。然而，根据示例性实施例，即使在操作1810中未确定存储空间小于或等于预设阈值，电子设备也可以响应于用户输入进行到操作1820。

在操作1820中，电子设备可以存储来自输入视频的数据当中的概要帧和多条概要信息。根据示例性实施例，响应于关于通知信息的用户输入，电子设备可以接收在存储空间中仅存储概要帧和多条概要信息的输入。此外，响应于关于通知信息的用户输入，电子设备可以从存储空间中删除输入视频数据的除了概要帧和多条概要信息之外的部分。

图19图示了根据示例性实施例的选择存储视频的方法的示例。

参考图19，用户可以通过使用电子设备1000捕获视频。电子设备1000 可以接收从多个视频捕获模式当中选择概要帧模式1910的用户输入。响应于选择概要帧模式1910的用户输入，电子设备1000可以将从所捕获的视频获取的概要帧和多条概要信息存储在电子设备1000的存储空间中。此外，响应于选择概要帧模式1910的用户输入，电子设备1000可以从存储空间中删除与所捕获的视频对应的数据的除了概要帧和多条概要信息之外的部分。

图20是根据示例性实施例的电子设备2000的框图。

参考图20，电子设备2000可以包括处理器2100、显示器2200、通信器 2300和存储器2400。并非所有图20所示的组件都会是电子设备2000的必要组件。比图20所示的组件更多或更少的组件可以被包括在电子设备2000中。

例如，电子设备2000还可以包括用户输入单元、输出单元、感测单元和音频/视频(A/V)输入单元。

用户输入单元可以接收由用户输入的数据以控制电子设备2000。例如，用户输入单元可以是但不限于小键盘、圆顶开关、触摸板(例如，电容覆盖型、电阻覆盖型、红外光束型、积分应变计型、表面声波型、压电型等)、旋转轮、或拨动开关。

输出单元可以输出音频信号、视频信号或振动信号。

显示器2200可以显示由电子设备2000处理的信息。例如，显示器2200 可以存储输入到电子设备2000的视频。

当显示器2200与触摸板一起形成层结构以构造触摸屏时，显示器2200 可以用作输入设备以及输出设备。显示器2200可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、三维(3D)显示器和电泳显示器中的至少一个。根据电子设备2000的示例性实施例，电子设备2000可以包括至少两个显示器2200。例如，至少两个显示器2200可以通过使用铰链而被部署为彼此面对。

处理器2100可以控制电子设备2000的操作。例如，处理器2100可以通过执行存储在存储器2400中的程序来控制用户输入单元、输出单元、感测单元、通信器2300、A/V输入单元等。处理器2100可以控制用户输入单元、输出单元、感测单元、通信器2300、A/V输入单元等，以执行电子设备2000 的操作。

可以由电子设备2000执行上述根据示例性实施例的操作。

处理器2100可以通过分析视频来确定具有相对大的图像改变的帧作为概要帧。显示器2200可以显示视频，并且还可以将概要帧与视频一起显示。当通信器2300接收从概要帧选择一个的用户输入时，处理器2100可以从所选择的概要帧的再现位置再现视频。因为处理器2100通过使用关键帧确定视频的概要帧并且将所确定的概要帧提供给用户，所以用户可以容易地从视频搜索期望的再现位置。

处理器2100可以生成关于每个所确定的概要帧的概要信息，并将概要帧和概要信息存储在存储器2400中。处理器2100可以通过使用存储在存储器 2400中的概要帧和概要信息来搜索与输入视频类似的视频，可以生成主概要，并且可以在视频被再现时从用户所期望的再现位置显示视频。

图21是根据示例性实施例的电子设备显示视频的方法的流程图。参考图 21，电子设备可以在单个视频内搜索类似的视频，并且可以向用户提供所找到的类似视频。

在操作2110中，电子设备接收从视频的再现片段选择第一位置和第二位置的用户输入。

在操作2120中，电子设备获取关于包括在第一位置与第二位置之间的帧的第一概要信息。第一概要信息可以是表示包括在第一位置与第二位置之间的帧的信息。替代地，第一概要信息可以是关于包括在第一位置与第二位置之间的每个帧的信息。

在操作2130中，电子设备获取用于视频中的除了包括在第一位置与第二位置之间的帧之外的帧的至少一条第二概要信息。电子设备从单个视频的整个片段获取用于除了由用户选择的片段之外的片段中包括的视频的第二概要信息。电子设备可以将除了由用户选择的片段之外的片段中包括的视频分成多个片段，并且可以获取用于包括在每个片段中的帧的第二概要信息。

第一概要信息和第二概要信息可以包括视频中包括的对象的特征、形状、布置、运动等。

在操作2140中，电子设备可以从至少一条第二概要信息搜索与第一概要信息匹配的第二概要信息。电子设备在对象的特征、形状、布置、运动等方面搜索与第一概要信息最相同的第二概要信息。

电子设备可以确定与所找到的第二概要信息对应的视频的概要帧。电子设备可以从与所找到的第二概要信息对应的视频中包括的帧当中确定概要帧。

在操作2150中，电子设备可以显示与所找到的第二概要信息对应的视频。电子设备可以在整个屏幕上显示与所找到的第二概要信息对应的视频的第一帧，或者可以在屏幕的部分区域上显示第一帧。

电子设备还可以显示与所找到的第二概要信息对应的视频的概要帧。当用户选择概要帧时，电子设备再现与所选择的概要帧对应的视频。电子设备可以从概要帧再现视频，或者可以从第一帧再现视频。

当对应于第二概要信息的至少两个视频被找到时，电子设备可以以时间顺序显示至少两个视频。电子设备可以显示至少两个视频的第一帧。电子设备还可以显示至少两个视频的概要帧。

示例性实施例还可以体现为包括可由计算机执行的指令代码(诸如，由计算机执行的程序模块)的计算机可读存储介质。计算机可读存储介质可以是可以由计算机访问的任何可用介质，并且包括任何类型的易失性/非易失性和/或可移除/不可移除介质。此外，计算机可读存储介质可以包括任何类型的计算机存储和通信介质。计算机可读存储介质包括任何类型的易失性/非易失性和/或可移除/不可移除介质，其由用于存储诸如计算机可读指令代码、数据结构、程序模块或其它数据的信息的特定方法或技术体现。通信介质可以包括计算机可读指令代码、数据结构、程序模块或诸如载波或其它发送机构的经调制的数据信号的其它数据，并且包括任何信息发送介质。

计算机可读存储介质的示例包括只读存储器(ROM)、随机存取存储器 (RAM)、光盘ROM(CD-ROM)、磁带、软盘、光数据存储设备等。此外，计算机可读存储介质可以分布到通过网络连接的计算机系统中，以在分布式计算机构中存储和实施计算机可读代码。

根据示例性实施例，由如附图中所示的框表示的组件、元件、模块或单元中的至少一个可以体现为执行上述各个功能的各种数目的硬件、软件和/或固件结构。例如，这些组件、元件或单元中的至少一个可以使用可以通过控制一个或多个微处理器或其它控制装置来执行各个功能的直接电路结构，诸如，存储器、处理器、逻辑电路、查找表等。而且，这些组件、元件或单元中的至少一个可以由包含用于执行特定的逻辑功能的一个或多个可执行指令的模块、程序或代码的一部分具体体现，并且由一个或多个微处理器或其它控制装置执行。而且，这些组件、元件或单元中的至少一个还可以包括诸如执行各个功能的中央处理单元(CPU)、微处理器等的处理器、或者由诸如执行各个功能的中央处理单元(CPU)、微处理器等的处理器实施。这些组件、元件或单元中的两个或更多个可以被组合为一个单个组件、元件或单元，其执行组合的两个或更多个组件、元件或单元的所有操作或功能。而且，这些组件、元件或单元中的至少一个的至少一部分功能可以由这些组件、元件或单元中的另一个来执行。此外，虽然在上述框图中未示出总线，但是可以通过总线执行组件、元件或单元之间的通信。可以以在一个或多个处理器上执行的算法实施上述示例性实施例的功能方面。此外，由块或处理步骤表示的组件、元件或单元可以采用任何数目的用于电子配置、信号处理和/或控制、数据处理等的相关领域技术。

这里使用的“单元”或“模块”可以是诸如处理器或电路的硬件组件、和/或由诸如处理器的硬件组件执行的软件组件。

可以分割地使用以集成形式描述的各个元件，并且可以在组合的状态下使用所分割的元件。

示例性实施例应仅在描述意义上考虑，而不是为了限制的目的。对每个实施例内的特征或方面的描述通常应被认为可用于其它实施例中的其它类似的特征或方面。

虽然已经示出和描述了一些示例性实施例，但是本领域技术人员将理解，可以在不脱离本公开的原理和精神的情况下在示例性实施例中进行改变，本公开的范围在权利要求和它们的等同物中限定。

Claims (6)

1.一种在电子设备中提供视频的概要的方法，所述方法包括：

基于预设标准，从视频的多个帧当中确定第一概要帧；

生成与所述第一概要帧对应的多条第一概要信息；以及

将所述第一概要帧和所述多条第一概要信息中的至少一个、与所述视频的至少一个帧一起显示，

该方法还包括：

接收用户输入以选择所显示的第一概要帧的一个的部分区域；

从所述多条第一概要信息中获得对应于所选择的部分区域的第一概要信息；

从存储在电子设备中的多个视频获得多条第二概要信息；

从所述多条第二概要信息搜索与对应于所选择的部分区域的第一概要信息匹配的至少一个第二概要信息；以及

显示多个视频的与所搜索的至少一个第二概要信息对应的至少一个概要帧，

其中，第一概要信息和第二概要信息中的每个包括以下中的至少一个：视频文件名称、第一概要帧和第二概要帧中的每个的再现位置或者用于执行内容搜索的匹配信息，

其中，匹配信息包括关于第一概要帧或第二概要帧中的至少一个的关键点的关键点信息、关于已经捕获包括所述第一概要帧或第二概要帧中的至少一个的视频的地点的地点信息以及关于已经捕获包括所述第一概要帧或第二概要帧中的至少一个的视频的日期和时间的日期和时间信息，

其中，基于预设标准从视频的多个帧当中确定第一概要帧包括：

获得位于所述视频的预设时间间隔的关键帧；和

基于关键帧中呈现的新信息的量来确定所述第一概要帧。

2.如权利要求1所述的方法，其中，将所述第一概要帧与所述视频的至少一个帧一起显示，并且

其中，所述方法还包括：

接收用户输入以从所述第一概要帧当中选择第一概要帧；以及

再现与所选择的第一概要帧的位置对应的视频。

3.如权利要求1所述的方法，还包括：

通过使用所述第一概要帧，提取所述视频的概要视频；以及

基于所述概要视频，生成主概要。

4.如权利要求1所述的方法，还包括：

还显示存储在电子设备中的多个第二概要帧；

接收用户输入以选择第二概要帧；以及

再现与所选择的第二概要帧的位置对应的视频。

5.如权利要求1所述的方法，还包括：

响应于确定电子设备的存储空间小于或等于预设阈值，在电子设备中仅存储来自包括在所述视频中的数据当中的所述第一概要帧和所述多条第一概要信息。

6.一种电子设备，包括：

显示器；以及

处理器，被配置为：

基于预设标准，从视频的多个帧当中确定第一概要帧；

生成与所述第一概要帧对应的多条第一概要信息；

控制所述显示器将所述第一概要帧和所示多条第一概要信息中的至少一个、与所述视频的至少一个帧一起显示；

接收用户输入以选择所显示的第一概要帧的一个的部分区域；

从所述多条第一概要信息中获得对应于所选择的部分区域的第一概要信息；

从存储在电子设备中的多个视频获得多条第二概要信息；

从所述多条第二概要信息搜索与对应于所选择的部分区域的第一概要信息匹配的至少一个第二概要信息；以及

控制显示器显示多个视频的与所搜索的至少一个第二概要信息对应的至少一个概要帧，

其中，第一概要信息和第二概要信息中的每个包括以下中的至少一个：视频文件名称、第一概要帧和第二概要帧中的每个的再现位置或者用于执行内容搜索的匹配信息，

其中，匹配信息包括关于第一概要帧或第二概要帧中的至少一个的关键点的关键点信息、关于已经捕获包括所述第一概要帧或第二概要帧中的至少一个的视频的地点的地点信息以及关于已经捕获包括所述第一概要帧或第二概要帧中的至少一个的视频的日期和时间的日期和时间信息，

其中，基于预设标准从视频的多个帧当中确定第一概要帧包括：

获得位于所述视频的预设时间间隔的关键帧；和

基于关键帧中呈现的新信息的量来确定所述第一概要帧。

Images