CN111225250A - 视频的扩展信息处理方法及装置 - Google Patents

Abstract

本发明提供了一种视频的扩展信息处理方法、装置、电子设备及存储介质；方法包括：获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；呈现所述目标视频中每个时间点的视频内容；确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息；通过本发明，能够自动呈现与用户感兴趣的视频内容相关的、多样化的扩展信息，提升用户体验。

Description

视频的扩展信息处理方法及装置

技术领域

本发明涉及互联网技术领域，尤其涉及一种视频的扩展信息处理方法、装置、电子设备及存储介质。

背景技术

随着智能终端的普及，观看视频越来越方便。而用户在使用智能终端(比如智能电视等)观看影视剧或综艺节目等视频时，经常会对视频的某段视频内容感兴趣，此时如果为用户提供感兴趣视频内容的相关信息，则会提升用户体验。相关技术中，显示视频的相关信息的功能均需要用户手动触发，导致操作不便，难以短时间内找到用户所需的相关信息；并且所呈现的相关信息是单一且局限的，给用户带来了不好的观感体验。

发明内容

本发明实施例提供一种视频的扩展信息处理方法、装置、电子设备及存储介质，能够自动呈现与用户感兴趣的视频内容相关的、多样化的扩展信息，提升用户体验。

本发明实施例的技术方案是这样实现的：

本发明实施例提供一种视频的扩展信息处理方法，包括：

获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；

呈现所述目标视频中每个时间点的视频内容；

确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；

其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息。

上述方案中，所述方法还包括：

获取所述目标用户的历史观看视频信息；

基于所述历史观看视频信息，确定所述信息扩展模式的触发条件得到满足时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述方法还包括：

获取所述目标视频的视频类型；

确定所述视频类型为目标视频类型时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户，包括：

对所述图像中各个用户进行识别；

分别获取所述识别得到的各个用户的历史观看视频时长；

选取历史观看视频时长最长的用户作为所述目标用户。

上述方案中，所述方法还包括：

在所述目标扩展信息的呈现界面中，呈现所述目标视频的播放进度条，所述播放进度条用于指示所述目标视频的播放进度；

所述播放进度条中显示有以下时间点至少之一：所述目标视频播放过程中扩展信息首次出现的时间点、所述目标视频播放过程中所呈现的各扩展信息对应的时间点、及所述目标扩展信息对应的所述目标时间点。

上述方案中，所述同步呈现所述目标时间点的视频内容及目标扩展信息之后，所述方法还包括：

统计所述目标扩展信息对应的呈现次数；

确定所述呈现次数达到呈现次数阈值时的时间点；

在呈现所确定的所述时间点之后的视频内容的过程中，隐藏确定的所述时间点之后的所述目标扩展信息。

上述方案中，所述获取目标视频及至少两种类型的扩展信息之后，所述方法还包括：

分别确定各所述类型的扩展信息对应的存储格式；

基于所述扩展信息的类型，采用相应的存储格式存储所述扩展信息。

本发明实施例还提供一种视频的扩展信息处理装置，包括：

获取模块，用于获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；

第一呈现模块，用于呈现所述目标视频中每个时间点的视频内容；

第二呈现模块，用于确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；

其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息。

上述方案中，所述装置还包括：

信息扩展模式开启模块，用于当所述视频播放模式为非信息扩展模式时，接收到所述信息扩展模式的开启指令；

响应于所述开启指令，切换所述视频播放模式至所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于获取所述目标用户的历史观看视频信息；

基于所述历史观看视频信息，确定所述信息扩展模式的触发条件得到满足时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于获取所述目标视频的视频类型；

确定所述视频类型为目标视频类型时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于获取所述目标视频的视频摘要信息及所述目标用户的画像信息；

将所述视频摘要信息与所述画像信息进行匹配，得到相应的匹配度；

当所述匹配度达到匹配度阈值时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于获取所述目标时间点对应的视频帧图像；

将所述视频帧图像输入至人工智能模型，以预测所述目标时间点对应的视频播放模式；

当所述人工智能模型的预测结果为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于采集观看所述目标视频的用户的图像；

基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户；

获取所述目标用户对应的视频播放模式的配置信息；

当所述配置信息指示所述视频播放模式为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

上述方案中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别；

分别检测所述识别得到的各个用户的视线驻留屏幕的时长；

选取视线驻留屏幕的时长最长的用户作为所述目标用户。

上述方案中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别；

分别获取所述识别得到的各个用户的历史观看视频时长；

选取历史观看视频时长最长的用户作为所述目标用户。

上述方案中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别，得到识别结果；

呈现包含所述识别结果的目标用户选择界面；

响应于基于所述目标用户选择界面触发的目标用户选择指令，选取所述目标用户选择指令所指示的用户作为所述目标用户。

上述方案中，所述第二呈现模块，还用于基于所述目标扩展信息的类型，确定所述目标扩展信息对应的呈现方式及呈现位置；

在呈现所述目标时间点的视频内容的同时，在所述呈现位置，采用所述呈现方式呈现所述目标扩展信息。

上述方案中，所述第二呈现模块，还用于当所述目标扩展信息的类型为物品信息类型或演员信息类型时，在显示屏幕的一侧，采用独立子页面的展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为历史背景信息类型时，在显示屏幕的一侧，采用弹幕展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为导演评论信息类型时，在显示屏幕的一侧，采用字幕展示方式呈现所述目标扩展信息。

上述方案中，所述第二呈现模块，还用于获取所述至少两种类型的扩展信息中，与所述目标时间点的视频内容相关联的扩展信息；

从与所述目标时间点的视频内容相关联的扩展信息的类型中，确定所述目标用户偏好的类型，将所述目标用户偏好的类型的扩展信息作为所述目标扩展信息；

同步呈现所述目标时间点的视频内容及目标扩展信息。

上述方案中，所述第二呈现模块，还用于在所述目标扩展信息的呈现界面中，呈现对应每种类型的扩展信息的关闭项；

响应于基于所述关闭项触发的关闭指令，取消显示所述关闭指令所指示的扩展信息。

上述方案中，所述第二呈现模块，还用于在所述目标扩展信息的呈现界面中，呈现包括多个视频片段选项的菜单；

其中，各所述视频片段选项对应的视频内容与所述目标时间点的视频内容的相似度满足相似度条件；

响应于基于所述菜单触发的针对目标视频片段选项的选取指令，进行页面跳转至所述目标视频片段选项对应的目标视频片段，并

在呈现所述目标视频片段的同时，同步呈现与所述目标视频片段相关联的扩展信息。

上述方案中，所述第二呈现模块，还用于在所述目标扩展信息的呈现界面中，呈现所述目标视频的播放进度条，所述播放进度条用于指示所述目标视频的播放进度；

所述播放进度条中显示有以下时间点至少之一：

所述目标视频播放过程中扩展信息首次出现的时间点、所述目标视频播放过程中所呈现的各扩展信息对应的时间点、及所述目标扩展信息对应的所述目标时间点。

上述方案中，所述装置还包括：

统计模块，用于统计所述目标扩展信息对应的呈现次数；

确定所述呈现次数达到呈现次数阈值时的时间点；

在呈现所确定的所述时间点之后的视频内容的过程中，隐藏确定的所述时间点之后的所述目标扩展信息。

上述方案中，所述装置还包括：

检测模块，用于检测所述目标扩展信息对应的呈现时长；

当所述呈现时长达到目标呈现时长时，取消显示所述目标扩展信息。

上述方案中，所述获取模块，还用于接收到针对所述目标视频的播放指令；

响应于所述播放指令，通过视频数据获取接口获取所述目标视频，并通过扩展数据获取接口获取所述至少两种类型的扩展信息。

上述方案中，所述装置还包括：

存储模块，用于分别确定各所述类型的扩展信息对应的存储格式；

基于所述扩展信息的类型，采用相应的存储格式存储所述扩展信息。

本发明实施例还提供一种电子设备，包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本发明实施例提供的视频的扩展信息处理方法。

本发明实施例还提供一种存储介质，存储有可执行指令，所述可执行指令被处理器执行时，实现本发明实施例提供的视频的扩展信息处理方法。

本发明实施例具有以下有益效果：

当确定目标时间点的视频播放模式为信息扩展模式、且目标时间点对应的视频内容归属于目标用户感兴趣的视频内容时，在获取的至少两种类型的扩展信息中，确定与目标时间点的视频内容相关联的目标扩展信息，从而在目标时间点到达时，同步呈现目标时间点的视频内容及目标扩展信息；这里，该至少两种类型的扩展信息与目标视频中目标用户感兴趣的视频内容相关，在呈现目标扩展信息的过程中无需人为操作，能够自动呈现与用户感兴趣的视频内容相关的、多样化的扩展信息，提升用户体验。

附图说明

图1是本发明实施例提供的视频的扩展信息处理系统的架构示意图；

图2是本发明实施例提供的电子设备的结构示意图；

图3是本发明实施例提供的视频的扩展信息处理方法的流程示意图；

图4是本发明实施例提供的获取目标视频及扩展信息的流程示意图；

图5是本发明实施例提供的目标扩展信息的呈现示意图一；

图6是本发明实施例提供的目标扩展信息的呈现示意图二；

图7是本发明实施例提供的目标扩展信息的呈现界面示意图一；

图8是本发明实施例提供的目标扩展信息的呈现界面示意图二；

图9是本发明实施例提供的目标扩展信息的呈现界面示意图三；

图10是本发明实施例提供的视频的扩展信息处理方法的流程示意图；

图11是本发明实施例提供的呈现扩展信息的流程示意图；

图12是本发明实施例提供的视频的扩展信息处理装置的结构示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，所描述的实施例不应视为对本发明的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。

在以下的描述中，所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序，以使这里描述的本发明实施例能够以除了在这里图示或描述的以外的顺序实施。

除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本发明实施例的目的，不是旨在限制本发明。

对本发明实施例进行进一步详细说明之前，对本发明实施例中涉及的名词和术语进行说明，本发明实施例中涉及的名词和术语适用于如下的解释。

1)响应于，用于表示所执行的操作所依赖的条件或者状态，当满足所依赖的条件或状态时，所执行的一个或多个操作可以是实时的，也可以具有设定的延迟；在没有特别说明的情况下，所执行的多个操作不存在执行先后顺序的限制；

2)扩展信息，与视频中用户感兴趣的视频内容相关，可以是文字形式、图片形式、音频信息、视频信息(子窗口呈现)中任意一种或多种，比如用户感兴趣视频内容的历史背景、演员信息、物品信息等；

3)信息扩展模式，用于当信息扩展模式为开启状态时，在播放视频的过程中，同步呈现与各时间点的视频内容相关联的扩展信息；

4)画像信息，即用户画像，包括用户兴趣画像及用户基础画像；其中，

用户兴趣画像，指真实用户的虚拟代表，是建立在一系列属性数据之上的目标用户模型，用于指示用户的兴趣分类；

用户基础画像，根据用户的真实姓名，性别、年龄，收入情况，常驻登录地等用户基础信息抽象出的标签化的用户的信息全貌。

基于上述对本发明实施例中涉及的名词和术语的解释，下面说明本发明实施例提供的视频的扩展信息处理系统，参见图1，图1是本发明实施例提供的视频的扩展信息处理系统的架构示意图，为实现支撑一个示例性应用，终端(包括终端200-1和终端200-2)通过网络300连接服务器100，网络300可以是广域网或者局域网，又或者是二者的组合，使用无线或有线链路实现数据传输。

终端(如终端200-1)，用于获取目标视频及至少两种类型的扩展信息；顺序呈现目标视频中每个时间点的视频内容；确定目标时间点对应的视频播放模式为信息扩展模式、且目标时间点对应的视频内容归属于目标用户感兴趣的视频内容时，在目标时间点到达时，同步呈现目标时间点的视频内容及目标扩展信息；

终端(如终端200-1)，还用于发送对应目标视频及至少两种类型的扩展信息的获取请求；

服务器100，用于接收上述获取请求，向终端返回目标视频及至少两种类型的扩展信息。

在实际应用中，服务器100既可以为单独配置的支持各种业务的一个服务器，亦可以配置为一个服务器集群；终端(如终端200-1)可以为智能手机、平板电脑、笔记本电脑等各种类型的用户终端，还可以为可穿戴计算设备、个人数字助理(PDA)、台式计算机、蜂窝电话、媒体播放器、导航设备、游戏机、智能电视、或者这些数据处理设备或其他数据处理设备中任意两个或多个的组合。

示例性地，以终端为智能电视为例，该智能电视上设置有视频播放客户端。当智能电视接收到用户触发的目标视频播放指令时，向服务器发送目标视频及扩展信息的获取请求。

服务器基于上述获取请求，向设置有视频播放客户端的智能电视下发目标视频及扩展信息。

智能电视接收到目标视频及扩展信息并存储，开始播放该目标视频，即顺序呈现目标视频中每个时间点的视频内容；当确定当前播放的目标时间点的视频播放模式为信息扩展模式，并确定目标时间点对应的视频内容为用户感兴趣内容时，在呈现目标时间点的视频内容的同时，自动呈现与目标时间点的视频内容相关联的目标扩展信息。

基于此，用户通过智能电视等终端观看视频时，即使智能电视难以操作、或者不具备资讯查询功能，在视频播放过程中，仍能够自动呈现与用户感兴趣的视频内容相关的、多样化的扩展信息。整个过程无需用户手动控制，无需借用其他设备，无需中断当前播放，从而提升了用户体验。

下面对本发明实施例提供的执行视频的扩展信息处理方法的电子设备的硬件结构做详细说明，这里，该电子设备可以是上述视频的扩展信息处理系统中的终端(如终端200-1)，也可以是服务器100。

参见图2，图2是本发明实施例提供的电子设备的结构示意图，图2所示的电子设备200包括：至少一个处理器210、存储器250、至少一个网络接口220和用户接口230。电子设备200中的各个组件通过总线系统240耦合在一起。可理解，总线系统240用于实现这些组件之间的连接通信。总线系统240除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图2中将各种总线都标为总线系统240。

处理器210可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。

用户接口230包括使得能够呈现媒体内容的一个或多个输出装置231，包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口230还包括一个或多个输入装置232，包括有助于用户输入的用户接口部件，比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。

存储器250可以是可移除的，不可移除的或其组合。示例性的硬件设备包括固态存储器，硬盘驱动器，光盘驱动器等。存储器250可选地包括在物理位置上远离处理器210的一个或多个存储设备。

存储器250包括易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM，Read Only Me mory)，易失性存储器可以是随机存取存储器(RAM，Random Access Memor y)。本发明实施例描述的存储器250旨在包括任意适合类型的存储器。

在一些实施例中，存储器250能够存储数据以支持各种操作，这些数据的示例包括程序、模块和数据结构或者其子集或超集，下面示例性说明。

操作系统251，包括用于处理各种基本系统服务和执行硬件相关任务的系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务；

网络通信模块252，用于经由一个或多个(有线或无线)网络接口220到达其他计算设备，示例性的网络接口220包括：蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB，Universal Serial Bus)等；

呈现模块253，用于经由一个或多个与用户接口230相关联的输出装置231(例如，显示屏、扬声器等)使得能够呈现信息(例如，用于操作外围设备和显示内容和信息的用户接口)；

输入处理模块254，用于对一个或多个来自一个或多个输入装置232之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。

在一些实施例中，本发明实施例提供的视频的扩展信息处理装置可以采用软件方式实现，图2示出了存储在存储器250中的视频的扩展信息处理装置255，其可以是程序和插件等形式的软件，包括以下软件模块：获取模块2551、第一呈现模块2552和第二呈现模块2553，这些模块是逻辑上的，因此根据所实现的功能可以进行任意的组合或进一步拆分，将在下文中说明各个模块的功能。

在另一些实施例中，本发明实施例提供的视频的扩展信息处理装置可以采用软硬件结合的方式实现，作为示例，本发明实施例提供的视频的扩展信息处理装置可以是采用硬件译码处理器形式的处理器，其被编程以执行本发明实施例提供的视频的扩展信息处理方法，例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC，Application Specific Integrated Cir cuit)、DSP、可编程逻辑器件(PLD，ProgrammableLogic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)或其他电子元件。

基于上述对本发明实施例的视频的扩展信息处理系统及电子设备的说明，下面说明本发明实施例提供的视频的扩展信息处理方法。参见图3，图3是本发明实施例提供的视频的扩展信息处理方法的流程示意图；在一些实施例中，该视频的扩展信息处理方法可由电子设备执行，如可以由终端实施，或由服务器及终端协同实施，以终端实施为例，本发明实施例提供的视频的扩展信息处理方法包括：

步骤301：终端获取目标视频及至少两种类型的扩展信息。

这里，扩展信息与目标视频中目标用户感兴趣的视频内容相关，可以是文字形式、图片形式、音频信息、视频信息(子窗口呈现)中任意一种或多种，比如目标用户感兴趣的视频内容的历史背景、演员信息、物品信息等。

在一些实施例中，终端上设置有视频播放客户端，通过视频播放客户端实现目标视频、及多种类型的扩展信息的获取、播放、呈现等操作。这里，视频播放客户端可以为本地客户端、网页(Web)客户端或者作为轻量化应用的小程序等。在实际应用中，终端可通过如下方式获取目标视频及扩展信息：接收到针对目标视频的播放指令；响应于播放指令，通过视频数据获取接口获取目标视频，并通过扩展数据获取接口获取至少两种类型的扩展信息。

用户可通过终端设置的视频播放客户端，针对视图界面呈现的目标视频的播放按钮执行点击操作，以触发针对目标视频的播放指令。视频播放客户端响应于播放指令，向服务器发送目标视频及扩展信息的获取请求，在实际实施时，该获取请求中携带有目标视频的唯一标识信息、用户信息等，以保证服务器可成功下发。服务器响应于该获取请求，下发目标视频及扩展信息的相关数据。视频播放客户端调用视频数据获取接口获取目标视频，并调用扩展数据获取接口获取多种类型的扩展信息。

在一些实施例中，终端获取目标视频及扩展信息之后，分别确定各类型的扩展信息对应的存储格式；基于扩展信息的类型，采用相应的存储格式存储扩展信息。

终端在获取目标视频及扩展信息之后，确定每个扩展信息的类型、及各类型的扩展信息对应的存储格式；基于各扩展信息的类型，采用相应的存储格式、将多种类型的扩展信息存储下来。在实际应用中，目标视频配置的扩展信息通常包括信息内容、信息类型、信息标识、信息呈现时长等，因此可以采用如表1所示的存储格式存储各类型的扩展信息：

信息标识

信息类型

信息内容

信息呈现时长

……

表1

在一些实施例中，目标视频的扩展信息可以是人为配置的，也可以是自动识别抓取的。由于一条扩展信息可能适用于多个目标视频，一个目标视频也可能会对应多条扩展信息，即扩展信息与目标视频是多对多的关系。如果依次存储多个目标视频的扩展信息时，可以将目标视频与扩展信息关联存储，在实际实施时，将目标视频标识与扩展信息的信息标识关联存储时，同时还可以存储每个扩展信息对应该目标视频的呈现开始时间点，具体地，目标视频与扩展信息可按照如表2所示的存储格式关联存储：

目标视频标识

信息标识

呈现开始时间点

信息内容

……

表2

示例性地，以终端设置有视频播放客户端为例，参见图4，图4是本发明实施例提供的获取目标视频及扩展信息的流程示意图。这里，视频播放客户端响应于用户通过目标视频播放按钮触发的播放指令，首先调用视频数据获取接口(getvinfo接口)获取目标视频，再调用扩展数据获取接口(getvmessage接口)获取多种类型的扩展信息。在实际实施时，还可以对目标视频及扩展信息是否获取完成进行检测，如果获取未完成，则等待通过上述接口继续获取，直至获取完成；如果获取已完成，则采用相应的存储格式存储扩展信息。从而进入目标视频的播放状态。

步骤302：呈现目标视频中每个时间点的视频内容。

在基于上述实施例获取到目标视频及扩展信息后，终端通过设置的视频播放客户端开始播放目标视频，即按照时间顺序，依次呈现目标视频中每个时间点的视频内容。

这里，时间点可以与时间戳对应，即一个时间点用于显示目标视频的一帧图像；可以与一个图像组对应，即一个时间点显示目标视频的一组连续的图像；也可以与任意粒度的时间段对应。

步骤303：确定目标时间点对应的视频播放模式为信息扩展模式、且目标时间点对应的视频内容归属于目标用户感兴趣的视频内容时，在目标时间点到达时，同步呈现目标时间点的视频内容及目标扩展信息。

这里，目标扩展信息包括上述至少两种类型的扩展信息中与目标时间点的视频内容相关联的扩展信息；目标时间点为目标视频的任一时间点。

在上述目标视频的播放过程中，当确定目标时间点对应的视频播放模式为信息扩展模式、且确定目标时间点对应的视频内容属于目标用户感兴趣的视频内容时，确定与该视频内容相关联的扩展信息为目标扩展信息，从而在播放目标时间点对应的视频内容时，同步呈现该视频内容对应的目标扩展信息。

在实际应用中，当确定用户感兴趣的视频内容时，可针对目标视频的每个时间点的视频内容进行检测，比如关键字检测、关键人物检测、关键物品检测等，将检测结果与用户感兴趣内容的关键信息进行匹配，得到相应的匹配度；当确定该匹配度达到预设匹配度阈值时，则确定该时间点的视频内容归属于目标用户感兴趣的视频内容。

在一些实施例中，还为目标用户感兴趣的视频内容均对应配置了扩展信息，以提高扩展信息呈现的多样性与准确性，进而提高用户体验。在实际实施时，该配置扩展信息的过程可以是人为实现，也可以自动识别抓取实现。比如当用户感兴趣的视频内容为XX明星，则可以为其配置包括XX明星的姓名、籍贯、出生日期、毕业院校、主要代表作等的扩展信息；当用户感兴趣的内容为XX动物角色时，则可为其配置包括XX动物的品种、性格、习性等的扩展信息。

下面在说明终端同步呈现目标时间点的视频内容及目标扩展信息之前，首先对视频播放模式为信息扩展模式的开启方式进行说明。在一些实施例中，可通过如下方式开启信息扩展模式：当视频播放模式为非信息扩展模式时，接收到信息扩展模式的开启指令；响应于开启指令，切换视频播放模式至信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

终端在播放目标视频时，信息扩展模式可以是默认开启的，也可以是基于用户操作触发开启的。当终端检测到当前视频播放模式为非信息扩展模式，此时如果接收到用户触发的信息扩展模式的开启指令，则响应于该开启指令，切换当前视频播放模式至信息扩展模式，即开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。在实际应用中，终端通过视频播放客户端、在视图界面呈现信息扩展模式的开启按钮，当检测到终端点击该开启按钮时，则接收到用户触发的信息扩展模式的开启指令，此时响应于该开启指令，开启信息扩展模式。

在一些实施例中，终端还可通过如下方式开启信息扩展模式：获取目标用户的历史观看视频信息；基于历史观看视频信息，确定信息扩展模式的触发条件得到满足时，开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

终端在播放目标视频之前，获取目标用户的历史观看视频信息，根据该历史观看视频信息，判断信息扩展模式的开启触发条件是否得到满足；如果确定开启触发条件得到满足，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。示例性地，比如目标用户的历史观看视频信息中、显示目标用户在10次观看视频时，有6次开启了信息扩展模式，则可以认为信息扩展模式的开启触发条件得到满足，此时开启信息扩展模式；还比如目标用户的历史观看视频信息中、显示目标用户在上次观看视频时开启了信息扩展模式，则也可以认为信息扩展模式的开启触发条件得到满足，此时开启信息扩展模式。具体的信息扩展模式的开启触发条件可以根据需要灵活设置，在本发明实施例中不作限定。

在一些实施例中，终端还可通过如下方式开启信息扩展模式：获取目标视频的视频类型；确定视频类型为目标视频类型时，开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

这里，在实际应用中，可以针对特定视频类型，预先设置该类型的视频播放模式为信息扩展模式；或者针对特定视频，预先设置该特定视频的视频播放模式为信息扩展模式。

基于此，终端在播放目标视频之前，获取目标视频的视频类型，判断该目标视频的视频类型是否为目标视频类型，即预设的特定视频类型；当确定该目标视频的视频类型为目标视频类型时，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

或者，终端在播放目标视频之前，判断该目标视频是否为预设的特定视频；当确定该目标视频为预设的特定视频时，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，终端还可通过如下方式开启信息扩展模式：获取目标视频的视频摘要信息及目标用户的画像信息；将视频摘要信息与画像信息进行匹配，得到相应的匹配度；当匹配度达到匹配度阈值时，开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

终端在播放目标视频之前，首先获取目标视频的视频摘要信息及目标用户的画像信息。在实际实施时，可通过哈希算法对目标视频进行哈希计算以得到视频摘要信息；同时获取目标用户的相关画像数据，比如用户基本信息、用户偏好的视频类型、用户感兴趣内容、用户在观看视频时是否开启信息扩展模式、用户在观看哪类视频时开启信息扩展模式等，基于目标用户的相关画像数据，生成目标用户的画像信息。

将视频摘要信息与目标用户的画像信息进行匹配，得到匹配度；当确定视频摘要信息与画像信息的匹配度达到匹配度阈值时，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，终端还可通过如下方式开启信息扩展模式：获取目标时间点对应的视频帧图像；将视频帧图像输入至人工智能模型，以预测目标时间点对应的视频播放模式；当人工智能模型的预测结果为信息扩展模式时，开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在实际应用中，还可以通过人工智能模型的方式来预测是否开启信息扩展模式。首先，可以基于卷积神经网络、深度信念网络等构建人工智能模型，采集样本数据，比如视频帧图像、用户画像数据，对采集的数据进行标注，包括普通播放模式和扩展信息模式；基于采集的样本数据及对应的目标视频播放模式，对构建的人工智能模型进行训练，以优化模型中的模型参数，具体地，可以根据损失函数对模型参数进行优化，损失函数可以是各种类型，例如对数损失函数，折页损失函数，指数损失函数，交叉熵损失函数，平方误差损失函数，绝对值损失函数等；损失函数用于表示模型针对样本预测的视频播放模式与目标视频播放模式之间的差异；训练过程中，通过反向传播算法更新模型各层的模型参数，直至损失函数满足收敛条件。

在人工智能模型训练完成后，将目标时间点对应的视频帧图像输入至人工智能模型，从而通过人工智能模型预测目标时间点对应的视频播放模式；当人工智能模型预测输出目标时间点对应的视频播放模式为扩展信息模式时，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，终端还可通过如下方式开启信息扩展模式：采集观看目标视频的用户的图像；基于图像确定观看目标视频的用户数量为多个时，从多个用户中选取一个用户作为目标用户；获取目标用户对应的视频播放模式的配置信息；当配置信息指示视频播放模式为信息扩展模式时，开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在实际应用中，可能存在多个用户同时通过智能电视等终端观看目标视频的情况。通常，终端会通过摄像头等图像采集装置采集观看目标视频的用户的图像，对该图像进行图像识别及用户人数计数，当确定观看目标视频的用户数量为多个时，则需要从多个用户中选取一个用户作为目标用户，以确定在播放目标视频时是否需要开启信息扩展模式。

在一些实施例中，终端可通过如下方式选取目标用户：对图像中各个用户进行识别；分别检测识别得到的各个用户的视线驻留屏幕的时长；选取视线驻留屏幕的时长最长的用户作为目标用户。

在选取目标用户时，终端可以通过轮廓提取技术、卷积神经网络模型等人脸识别技术对图像中的各个用户进行识别，这里图像可以是预设时间段内的视频帧图像；对图像中的各个用户的视线驻留屏幕时长进行检测，具体地，可通过摄像头、眼动仪等设备检测各用户视线驻留在终端屏幕的时间；确定视线驻留屏幕的时长最长的用户为针对目标视频注意力最集中的用户，选取该视线驻留屏幕的时长最长的用户作为目标用户。

在一些实施例中，还可通过如下方式选取目标用户：对图像中各个用户进行识别；分别获取识别得到的各个用户的历史观看视频时长；选取历史观看视频时长最长的用户作为目标用户。

在选取目标用户时，终端对图像中的各个用户进行识别后，还可以分别获取基于图像识别到的各用户的历史观看视频时长；从而选取历史观看视频时长最长的用户作为目标用户。

在一些实施例中，终端还可通过如下方式选取目标用户：对图像中各个用户进行识别，得到识别结果；呈现包含识别结果的目标用户选择界面；响应于基于目标用户选择界面触发的目标用户选择指令，选取目标用户选择指令所指示的用户作为目标用户。

在实际应用中，还可以根据用户的选择来确定目标用户。当对采集的观看用户的图像进行识别后，确定观看目标视频的用户为多个时，终端则可通过视图界面呈现包含所识别的各用户的目标用户选择界面，这里，该目标用户选择界面可以通过用户图像的形式来标识各个用户，也可以通过用户的相关登陆信息(比如登陆名、用户头像等)来标识各个用户；用户可通过在目标用户选择界面上，点击所要选择的目标用户的图像，触发目标用户选择指令；终端接收到该目标用户选择指令，并响应于该目标用户选择指令，选取目标用户选择指令所指示的用户作为目标用户。

终端在基于上述实施例从多个观看用户中选取目标用户之后，获取该目标用户对应的视频播放模式的配置信息；当目标用户的配置信息指示视频播放模式为信息扩展模式时，则开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

在基于上述实施例开启信息扩展模式后，下面对基于信息扩展模式播放目标视频、同步呈现目标扩展信息进行说明。在一些实施例中，终端可通过如下方式同步呈现目标时间点的视频内容及目标扩展信息：基于目标扩展信息的类型，确定目标扩展信息对应的呈现方式及呈现位置；在呈现目标时间点的视频内容的同时，在呈现位置采用呈现方式呈现目标扩展信息。

在实际应用中，针对不同类型的扩展信息，设置了对应的呈现方式及呈现位置，具体地，该呈现方式可以是字幕展示方式、弹幕展示方式、独立于主页面的子页面展示方式(比如浮层展示方式)等；该呈现位置可以是显示屏幕的右侧、左侧、底部、上部等；其中，基于独立子页面的展示方式呈现扩展信息时，用户还可以通过拖动子页面改变扩展信息的呈现位置。

终端在确定目标时间点对应的视频内容归属于目标用户感兴趣的视频内容时，确定与该视频内容相关联的目标扩展信息，从而对该目标扩展信息进行解析，以得到目标扩展信息的类型及内容；基于目标扩展信息的类型，确定目标扩展信息所对应的呈现方式及呈现位置；进而在呈现目标时间点的视频内容的同时，将目标扩展信息的内容，采用对应的呈现方式、在显示屏幕的呈现位置同步呈现。

在一些实施例中，终端可通过如下方式在呈现位置采用呈现方式呈现目标扩展信息：当目标扩展信息的类型为物品信息类型或演员信息类型时，在显示屏幕的一侧，采用独立子页面的展示方式呈现目标扩展信息；当目标扩展信息的类型为历史背景信息类型时，在显示屏幕的一侧，采用弹幕展示方式呈现目标扩展信息；当目标扩展信息的类型为导演评论信息类型时，在显示屏幕的一侧，采用字幕展示方式呈现目标扩展信息。

示例性地，参见图5，图5是本发明实施例提供的目标扩展信息的呈现示意图一，这里，目标扩展信息包括物品信息类型和演员信息类型的扩展信息，具体地，物品信息类型的扩展信息包括“XX球队球衣”、“XX品牌西服”，用户可通过点击相应信息获取详细的物品信息的内容；演员信息类型的扩展信息包括“姓名：杨XX、简介、代表作”、“姓名：邓XX、简介、代表作”等，以使用户方便快捷的获取演员相关信息；其中，物品信息类型和演员信息类型的扩展信息均采用浮层展示方式呈现在显示屏幕的预设位置，比如，演员信息类型的扩展信息呈现在对应演员的附近位置。

示例性地，参见图6，图6是本发明实施例提供的目标扩展信息的呈现示意图二，这里，目标扩展信息包括历史背景信息类型和导演评论信息类型的扩展信息，其中，历史背景信息类型的扩展信息(历史背景1和历史背景2)采用弹幕展示方式呈现在显示屏幕的上方，以使用户在观看视频时，充分了解视频的历史背景，便于理解，提升用户观看体验；导演评论信息类型的扩展信息通过字幕展示方式呈现在显示屏幕的下方，以使用户在观看视频的同时，了解导演想要表达的情感、拍摄细节等。

在一些实施例中，终端可通过如下方式同步呈现目标时间点的视频内容及目标扩展信息：获取至少两种类型的扩展信息中，与目标时间点的视频内容相关联的扩展信息；从与目标时间点的视频内容相关联的扩展信息的类型中，确定目标用户偏好的类型，将目标用户偏好的类型的扩展信息作为目标扩展信息；同步呈现目标时间点的视频内容及目标扩展信息。

终端在呈现目标扩展信息时，首先在获取的至少两种类型的扩展信息中，确定与目标时间点的视频内容相关联的扩展信息；基于目标用户偏好的扩展信息类型，将该类型的扩展信息作为目标扩展信息，从而在呈现目标时间点的视频内容的同时，呈现对应的目标扩展信息。

这里，可通过以下方式确定目标用户偏好的扩展信息类型：

A)在本地终端和云端没有任何用户数据的情况下，使用服务器统计的符合超出设定比例(例如50％)用户偏好的扩展信息类型，作为目标用户偏好的扩展信息类型；

B)如果本地或云端存储有终端的历史播放数据，则根据终端本地或者云端的历史播放数据确定用户偏好的扩展信息类型，例如根据不同类型的扩展信息的播放次数、时长，确定播放次数超出次数阈值、或者播放时长超出时长阈值的扩展信息类型作为目标用户偏好的扩展信息类型；

C)目标用户偏好的扩展信息的类型还可以根据终端在用户观看视频的过程中收集的反馈信息(包括收藏、点赞、转发等行为)确定，例如转发数量最多的一种扩展信息类型，可作为目标用户偏好的扩展信息类型；

D)目标用户偏好的扩展信息类型还可以通过人工智能模型预测；具体地，可以采集样本数据，包括视频类型，扩展信息，用户数据(观看历史，画像数据)，用户针对扩展信息的反应行为(切换视频、停止观看，手动关闭等)，基于采集的样本数据及目标扩展信息类型对构建的人工智能模型进行训练，从而使用训练完成的人工智能模型预测目标用户偏好的扩展信息类型；

E)扩展信息类型可以是用户根据需求设置的，当确定目标用户之后，将该用户设置的扩展信息类型作为目标用户偏好的扩展信息类型。

在一些实施例中，当目标扩展信息包括多种类型的扩展信息时，为避免视频播放界面太复杂以降低用户体验，终端还可在目标扩展信息的呈现界面中，呈现对应每种类型的扩展信息的关闭项；响应于基于关闭项触发的关闭指令，取消显示关闭指令所指示的扩展信息。

在实际应用中，终端在目标扩展信息的呈现界面，分别呈现对应每种类型的扩展信息的关闭项，这里，关闭项可以是针对每个扩展信息的，也可以是针对每种类型的扩展信息的，或者可以是针对所有扩展信息的；用户在认为不需要显示某种类型的扩展信息、或者不需要显示某个扩展信息时，可以通过点击扩展信息的关闭项来触发关闭指令；终端接收并响应于基于关闭项触发的关闭指令，取消该关闭指令所指示的扩展信息。

示例性地，参见图7，图7是本发明实施例提供的目标扩展信息的呈现界面示意图一。这里，针对每个类型的目标扩展信息均设置了对应的关闭项，即按钮

用户可通过点击关闭项

触发对应的目标扩展信息的关闭指令，终端响应于该关闭指令，取消该关闭指令所指示的目标扩展信息的显示，即取消目标扩展信息“历史背景2”的显示。

在一些实施例中，终端还可在目标扩展信息的呈现界面中，呈现包括多个视频片段选项的菜单；其中，各视频片段选项对应的视频内容与目标时间点的视频内容的相似度满足相似度条件；响应于基于菜单触发的针对目标视频片段选项的选取指令，进行页面跳转至目标视频片段选项对应的目标视频片段，并在呈现目标视频片段的同时，同步呈现与目标视频片段相关联的扩展信息。

在实际应用中，终端还可在目标扩展信息的呈现界面中，呈现包括多个视频片段选项的菜单，这里，该多个视频片段选项中的各视频片段选项对应的视频内容与目标时间点的视频内容满足相似度条件，比如两个视频片段的视频内容均包含同一演员、或者均对应相同的历史背景、或者均包含相同的物品推荐等；该多个视频片段选项可隐藏于菜单中，用户可通过点击菜单对应的按钮，使视图界面呈现多个视频片段选项，进而通过点击其中的视频片段选项，触发针对目标视频片段选项的选取指令。

终端响应于该选取指令，进行页面跳转，以呈现目标视频片段选项对应的目标视频片段；同时，还可以呈现与该目标视频片段相关联的扩展信息。

示例性地，参见图8，图8是本发明实施例提供的目标扩展信息的呈现界面示意图二。这里，终端在目标扩展信息的呈现界面，呈现包括多个视频片段选项的菜单，比如视频片段选项A、视频片段选项B等；响应于针对视频片段选项B的选取指令，进行页面跳转至视频片段B，并呈现与视频片段B相关联的扩展信息，比如目标视频中包含宠物“拉布拉多犬”，那么视频片段选项中则包含宠物“拉布拉多犬”的相关视频，即视频片段选项B；终端响应于用户针对视频片段选项B的选取指令，跳转至视频片段B，并呈现与视频片段B相关联的扩展信息，即“拉布拉多犬”的简介。

在一些实施例中，终端还可在目标扩展信息的呈现界面中，呈现目标视频的播放进度条，播放进度条用于指示目标视频的播放进度；播放进度条中显示有以下时间点至少之一：目标视频播放过程中扩展信息首次出现的时间点、目标视频播放过程中所呈现的各扩展信息对应的时间点、及目标扩展信息对应的目标时间点。

在实际应用中，终端还可以在目标扩展信息的呈现界面呈现目标视频的播放进度条，以指示目标视频的播放进度。同时播放进度条上还可通过预设的标识、标识目标视频播放过程中所涉及的时间点，比如扩展信息首次出现的时间点、各扩展信息对应的时间点、及目标扩展信息对应的目标时间点等。

示例性地，参见图9，图9是本发明实施例提供的目标扩展信息的呈现界面示意图三。这里，终端在目标扩展信息的呈现界面还呈现了目标视频的播放进度条，包括扩展信息A和扩展信息B分别对应的时间点、扩展信息A和扩展信息B分别对应的首次出现时间点、以及目标扩展信息(历史背景信息和物品信息)对应的目标时间点。

在一些实施例中，终端还会在同步呈现目标时间点的视频内容及目标扩展信息之后，统计目标扩展信息对应的呈现次数；确定呈现次数达到呈现次数阈值时的时间点；在呈现所确定的时间点之后的视频内容的过程中，隐藏确定的时间点之后的目标扩展信息。

在实际应用中，还会针对目标扩展信息的呈现次数设置呈现次数阈值，以避免多次出现同一扩展信息降低用户体验。当终端在目标时间点首次呈现目标扩展信息后，在后续的呈现过程中，会依次统计目标扩展信息对应的呈现次数；当确定目标扩展信息的呈现次数达到次数阈值时，则确定当前达到次数阈值时、呈现目标扩展信息所对应的时间点；进而在该时间点之后播放视频内容的过程中，隐藏确定的时间点之后的目标扩展信息，即不再呈现该目标扩展信息。

示例性地，当目标扩展信息为扩展信息A时，预设的呈现次数阈值为3次，当扩展信息A在目标时间点00:56:00时首次出现后，在后续的呈现过程中，依次统计扩展信息A的呈现次数，即每再次呈现一次扩展信息A，呈现次数+1；在统计中发现扩展信息A分别在目标时间点01:10:00、01:35:00再次出现，此时统计得到扩展信息A的呈现次数为3，达到预设的呈现次数阈值，则确定扩展信息A在第3次呈现时的时间点为确定的时间点，即01:35:00；在确定的时间点01:35:00之后的视频内容播放过程中，则不再呈现扩展信息A。

在一些实施例中，终端还会在同步呈现目标时间点的视频内容及目标扩展信息之后，检测目标扩展信息对应的呈现时长；当呈现时长达到目标呈现时长时，取消显示目标扩展信息。

在实际应用中，终端在存储扩展信息时，还存储了每个扩展信息的目标呈现时长。当终端同步呈现目标时间点的视频内容及目标扩展信息之后，会从当前目标时间点起，检测目标扩展信息对应的呈现时长；当确定目标扩展信息的呈现时长达到目标呈现时长时，则取消目标扩展信息的显示，即从目标视频播放的屏幕上撤销该目标扩展信息的显示。在实际实施时，可以针对每个扩展信息设置不同的目标呈现时长，比如可以依据用户针对不同的目标扩展信息的感兴趣程度，设置不同的目标呈现时长。

应用本发明上述实施例，当确定目标时间点的视频播放模式为信息扩展模式、且目标时间点对应的视频内容归属于目标用户感兴趣的视频内容时，在获取的至少两种类型的扩展信息中，确定与目标时间点的视频内容相关联的目标扩展信息，从而在目标时间点到达时，同步呈现目标时间点的视频内容及目标扩展信息；这里，该至少两种类型的扩展信息与目标视频中目标用户感兴趣的视频内容相关，在呈现目标扩展信息的过程中无需人为操作，能够自动呈现与用户感兴趣的视频内容相关的、多样化的扩展信息，提升用户体验。

下面将说明本发明实施例在一个实际的应用场景中的示例性应用。以终端运行视频播放客户端，实现目标视频及目标扩展信息的呈现为例，继续对本发明实施例提供的视频的扩展信息处理方法进行说明。参见图10，图10为本发明实施例提供的视频的扩展信息处理方法的流程示意图，本发明实施例提供的视频的扩展信息处理方法包括：

步骤1001：终端发送目标视频及至少两种类型的扩展信息的获取请求。

这里，终端运行视频播放客户端，接收用户通过视频播放客户端触发的目标视频播放指令，响应于该播放指令，发送目标视频及至少两种类型的扩展信息的获取请求，该获取请求中可以携带目标视频的标识。

步骤1002：服务器响应于获取请求，下发目标视频及扩展信息的相关数据。

这里，针对每个视频，运营人员可预先对其进行扩展信息的配置，也可通过技术手段进行自动识别并抓取。具体配置的扩展信息包括扩展信息的呈现开始时间点、呈现时长、类型(演员信息类型、物品信息类型、历史背景信息类型等)、内容、呈现方式、呈现位置等。将每个视频与其对应的扩展信息进行一一对应存储。具体地，可以采用以下方式，存储视频与其配置的扩展信息：

视频标识

信息标识

呈现开始时间点

信息内容

信息类型

……

服务器接收到获取请求后，基于获取请求中的目标视频标识，确定目标视频的视频数据、及对应的扩展信息，将扩展信息与目标视频一同下发。

步骤1003：终端调用视频数据获取接口获取目标视频，并调用扩展数据获取接口获取扩展信息。

这里，视频数据获取接口可以是getvinfo接口，扩展数据获取接口可以是getvmessage接口，基于接口获取目标视频及扩展信息可以继续参见上述图4所示，对目标视频及扩展信息是否获取完成进行检测，如果获取未完成，则等待通过上述接口继续获取，直至获取完成；如果获取已完成，则采用相应的存储格式存储扩展信息。

步骤1004：采用相应的存储格式存储扩展信息。

步骤1005：开启信息扩展模式，以使目标时间点对应的视频播放模式为信息扩展模式。

这里，信息扩展模式可以是默认开启的，也可以是在播放过程中自动开启的。如果信息扩展模式没有开启，则可以通过以下方式开启信息扩展模式：

1)接收到信息扩展模式的开启指令；响应于开启指令，切换视频播放模式至信息扩展模式；

2)获取目标用户的历史观看视频信息；基于历史观看视频信息，确定信息扩展模式的触发条件得到满足时，开启信息扩展模式；

3)获取目标视频的视频类型；确定视频类型为目标视频类型时，开启信息扩展模式；

4)获取目标视频的视频摘要信息及目标用户的画像信息；将视频摘要信息与画像信息进行匹配，得到相应的匹配度；当匹配度达到匹配度阈值时，开启信息扩展模式。

开启信息扩展模式的方式可以包括上述各开启方式，但不仅限于上述示例的开启方式，在本发明实施例中不作限定。

步骤1006：呈现目标视频中每个时间点的视频内容。

即，在目标视频及扩展信息获取完成后，进入目标视频的播放状态，按照时间顺序，依次呈现目标视频中每个时间点的视频内容。

步骤1007：当确定目标时间点的视频内容为用户感兴趣的视频内容，确定与视频内容相关联的目标扩展信息。

这里，目标扩展信息是在上述至少两种类型的扩展信息中选取的。

步骤1008：基于目标扩展信息的类型，确定对应的呈现方式及呈现位置。

这里，终端对目标扩展信息进行解析，得到目标扩展信息的类型及内容。

呈现方式可以是字幕展示方式、弹幕展示方式、浮层展示方式等；呈现位置可以是显示屏幕的右侧、左侧、底部、上部等。

步骤1009：在呈现目标时间点的视频内容的同时，在呈现位置采用对应的呈现方式呈现目标扩展信息。

这里，终端可通过如下方式在呈现位置采用呈现方式呈现目标扩展信息：当目标扩展信息的类型为物品信息类型或演员信息类型时，在显示屏幕的一侧，采用浮层展示方式呈现目标扩展信息；当目标扩展信息的类型为历史背景信息类型时，在显示屏幕的一侧，采用弹幕展示方式呈现目标扩展信息；当目标扩展信息的类型为导演评论信息类型时，在显示屏幕的一侧，采用字幕展示方式呈现目标扩展信息。

步骤1010：呈现对应每种类型的扩展信息的关闭项。

这里，关闭项可以是针对每个扩展信息的，也可以是针对每种类型的扩展信息的，或者可以是针对所有扩展信息的；用户在认为不需要显示某种类型的扩展信息、或者不需要显示某个扩展信息时，可以通过点击扩展信息的关闭项来触发关闭指令；终端接收并响应于基于关闭项触发的关闭指令，取消该关闭指令所指示的扩展信息。

步骤1011：呈现包括多个视频片段选项的菜单。

这里，该多个视频片段选项中的各视频片段选项对应的视频内容与目标时间点的视频内容满足相似度条件，比如两个视频片段的视频内容均包含同一演员、或者均对应相同的历史背景、或者均包含相同的物品推荐等；

该多个视频片段选项可隐藏于菜单中，用户可通过点击菜单对应的按钮，使视图界面呈现多个视频片段选项，进而通过点击其中的视频片段选项，触发针对目标视频片段选项的选取指令。

终端响应于该选取指令，进行页面跳转，以呈现目标视频片段选项对应的目标视频片段；同时，还可以呈现与该目标视频片段相关联的扩展信息。

步骤1012：当目标扩展信息的呈现时长达到目标呈现时长时，取消显示目标扩展信息。

在实际应用中，由于扩展信息中包含扩展信息对应目标视频的呈现开始时间，因此终端还可以通过以下方式实现目标视频的扩展信息的呈现。下面参见图11，对本发明实施例提供的视频的扩展信息处理方法进行进一步说明。图11是本发明实施例提供的呈现扩展信息的流程示意图，包括：

步骤1101：终端响应于用户触发的播放指令，向服务器发送目标视频及扩展信息的获取请求。

步骤1102：服务器响应于获取请求，向终端下发目标视频及扩展信息。

步骤1103：终端通过视频播放客户端播放目标视频。

这里，终端响应于目标视频的播放指令，调用视频数据获取接口获取目标视频，并调用扩展数据获取接口获取扩展信息。在获取完成后，播放目标视频。

步骤1104：将获取的扩展信息按照时间顺序进行排序。

步骤1105：获取播放目标视频的当前目标时间点。

步骤1106：判断目标视频是否播放结束。

这里，如果确定目标视频播放结束，则执行步骤1107；

如果确定目标视频播放未结束，则执行步骤1108。

步骤1107：结束目标视频的播放。

步骤1108：查询目标时间点是否有对应的扩展信息。

步骤1109：判断是否查询到对应的扩展信息。

这里，可以通过启动循环查询的查询器，将目标时间点与各扩展信息对应的呈现开始时间点进行匹配。如果匹配成功，则确定目标时间点存在对应的扩展信息，执行步骤1110；如果匹配失败，则返回步骤1105。

步骤1110：同步呈现目标时间点的视频内容及对应的扩展信息。

下面继续说明本发明实施例提供的视频的扩展信息处理装置255，在一些实施例中，视频的扩展信息处理装置可采用软件模块的方式实现。参见图12，图12是本发明实施例提供的视频的扩展信息处理装置255的结构示意图，本发明实施例提供的视频的扩展信息处理装置255包括：

获取模块2551，用于获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；

第一呈现模块2552，用于呈现所述目标视频中每个时间点的视频内容；

第二呈现模块2553，用于确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；

其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息。

在一些实施例中，所述装置还包括：

信息扩展模式开启模块，用于当所述视频播放模式为非信息扩展模式时，接收到所述信息扩展模式的开启指令；

响应于所述开启指令，切换所述视频播放模式至所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于获取所述目标用户的历史观看视频信息；

基于所述历史观看视频信息，确定所述信息扩展模式的触发条件得到满足时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于获取所述目标视频的视频类型；

确定所述视频类型为目标视频类型时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于获取所述目标视频的视频摘要信息及所述目标用户的画像信息；

将所述视频摘要信息与所述画像信息进行匹配，得到相应的匹配度；

当所述匹配度达到匹配度阈值时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于获取所述目标时间点对应的视频帧图像；

将所述视频帧图像输入至人工智能模型，以预测所述目标时间点对应的视频播放模式；

当所述人工智能模型的预测结果为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于采集观看所述目标视频的用户的图像；

基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户；

获取所述目标用户对应的视频播放模式的配置信息；

当所述配置信息指示所述视频播放模式为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

在一些实施例中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别；

分别检测所述识别得到的各个用户的视线驻留屏幕的时长；

选取视线驻留屏幕的时长最长的用户作为所述目标用户。

在一些实施例中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别；

分别获取所述识别得到的各个用户的历史观看视频时长；

选取历史观看视频时长最长的用户作为所述目标用户。

在一些实施例中，所述信息扩展模式开启模块，还用于对所述图像中各个用户进行识别，得到识别结果；

呈现包含所述识别结果的目标用户选择界面；

响应于基于所述目标用户选择界面触发的目标用户选择指令，选取所述目标用户选择指令所指示的用户作为所述目标用户。

在一些实施例中，所述第二呈现模块2553，还用于基于所述目标扩展信息的类型，确定所述目标扩展信息对应的呈现方式及呈现位置；

在呈现所述目标时间点的视频内容的同时，在所述呈现位置，采用所述呈现方式呈现所述目标扩展信息。

在一些实施例中，所述第二呈现模块2553，还用于当所述目标扩展信息的类型为物品信息类型或演员信息类型时，在显示屏幕的一侧，采用独立子页面的展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为历史背景信息类型时，在显示屏幕的一侧，采用弹幕展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为导演评论信息类型时，在显示屏幕的一侧，采用字幕展示方式呈现所述目标扩展信息。

在一些实施例中，所述第二呈现模块2553，还用于获取所述至少两种类型的扩展信息中，与所述目标时间点的视频内容相关联的扩展信息；

从与所述目标时间点的视频内容相关联的扩展信息的类型中，确定所述目标用户偏好的类型，将所述目标用户偏好的类型的扩展信息作为所述目标扩展信息；

同步呈现所述目标时间点的视频内容及目标扩展信息。

在一些实施例中，所述第二呈现模块2553，还用于在所述目标扩展信息的呈现界面中，呈现对应每种类型的扩展信息的关闭项；

响应于基于所述关闭项触发的关闭指令，取消显示所述关闭指令所指示的扩展信息。

在一些实施例中，所述第二呈现模块2553，还用于在所述目标扩展信息的呈现界面中，呈现包括多个视频片段选项的菜单；

其中，各所述视频片段选项对应的视频内容与所述目标时间点的视频内容的相似度满足相似度条件；

响应于基于所述菜单触发的针对目标视频片段选项的选取指令，进行页面跳转至所述目标视频片段选项对应的目标视频片段，并

在呈现所述目标视频片段的同时，同步呈现与所述目标视频片段相关联的扩展信息。

在一些实施例中，所述第二呈现模块2553，还用于在所述目标扩展信息的呈现界面中，呈现所述目标视频的播放进度条，所述播放进度条用于指示所述目标视频的播放进度；

所述播放进度条中显示有以下时间点至少之一：所述目标视频播放过程中扩展信息首次出现的时间点、所述目标视频播放过程中所呈现的各扩展信息对应的时间点、及所述目标扩展信息对应的所述目标时间点。

在一些实施例中，所述装置还包括：

统计模块，用于统计所述目标扩展信息对应的呈现次数；

确定所述呈现次数达到呈现次数阈值时的时间点；

在呈现所确定的所述时间点之后的视频内容的过程中，隐藏确定的所述时间点之后的所述目标扩展信息。

在一些实施例中，所述装置还包括：

检测模块，用于检测所述目标扩展信息对应的呈现时长；

当所述呈现时长达到目标呈现时长时，取消显示所述目标扩展信息。

在一些实施例中，所述获取模块2551，还用于接收到针对所述目标视频的播放指令；

响应于所述播放指令，通过视频数据获取接口获取所述目标视频，并通过扩展数据获取接口获取所述至少两种类型的扩展信息。

在一些实施例中，所述装置还包括：

存储模块，用于分别确定各所述类型的扩展信息对应的存储格式；

基于所述扩展信息的类型，采用相应的存储格式存储所述扩展信息。

本发明实施例还提供一种电子设备，所述电子设备包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本发明实施例提供的视频的扩展信息处理方法。

本发明实施例还提供一种存储介质，存储有可执行指令，所述可执行指令被处理器执行时，实现本发明实施例提供的视频的扩展信息处理方法。

在一些实施例中，存储介质可以是FRAM、ROM、PROM、EPROM、EE PROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器；也可以是包括上述存储器之一或任意组合的各种设备。

在一些实施例中，可执行指令可以采用程序、软件、软件模块、脚本或代码的形式，按任意形式的编程语言(包括编译或解释语言，或者声明性或过程性语言)来编写，并且其可按任意形式部署，包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。

作为示例，可执行指令可以但不一定对应于文件系统中的文件，可以可被存储在保存其它程序或数据的文件的一部分，例如，存储在超文本标记语言(H TML，Hyper TextMarkup Language)文档中的一个或多个脚本中，存储在专用于所讨论的程序的单个文件中，或者，存储在多个协同文件(例如，存储一个或多个模块、子程序或代码部分的文件)中。

作为示例，可执行指令可被部署为在一个计算设备上执行，或者在位于一个地点的多个计算设备上执行，又或者，在分布在多个地点且通过通信网络互连的多个计算设备上执行。

以上所述，仅为本发明的实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本发明的保护范围之内。

Claims (15)

1.一种视频的扩展信息处理方法，其特征在于，所述方法包括：

获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；

呈现所述目标视频中每个时间点的视频内容；

确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；

其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

当所述视频播放模式为非信息扩展模式时，接收到所述信息扩展模式的开启指令；

响应于所述开启指令，切换所述视频播放模式至所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

3.如权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述目标视频的视频摘要信息及所述目标用户的画像信息；

将所述视频摘要信息与所述画像信息进行匹配，得到相应的匹配度；

当所述匹配度达到匹配度阈值时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

4.如权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述目标时间点对应的视频帧图像；

将所述视频帧图像输入至人工智能模型，以预测所述目标时间点对应的视频播放模式；

当所述人工智能模型的预测结果为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

5.如权利要求1所述的方法，其特征在于，所述方法还包括：

采集观看所述目标视频的用户的图像；

基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户；

获取所述目标用户对应的视频播放模式的配置信息；

当所述配置信息指示所述视频播放模式为信息扩展模式时，开启所述信息扩展模式，以使所述目标时间点对应的视频播放模式为信息扩展模式。

6.如权利要求5所述的方法，其特征在于，所述基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户，包括：

对所述图像中各个用户进行识别；

分别检测所述识别得到的各个用户的视线驻留屏幕的时长；

选取视线驻留屏幕的时长最长的用户作为所述目标用户。

7.如权利要求5所述的方法，其特征在于，所述基于所述图像确定观看所述目标视频的用户数量为多个时，从所述多个用户中选取一个用户作为所述目标用户，包括：

对所述图像中各个用户进行识别，得到识别结果；

呈现包含所述识别结果的目标用户选择界面；

响应于基于所述目标用户选择界面触发的目标用户选择指令，选取所述目标用户选择指令所指示的用户作为所述目标用户。

8.如权利要求1所述的方法，其特征在于，所述同步呈现所述目标时间点的视频内容及目标扩展信息，包括：

基于所述目标扩展信息的类型，确定所述目标扩展信息对应的呈现方式及呈现位置；

在呈现所述目标时间点的视频内容的同时，在所述呈现位置，采用所述呈现方式呈现所述目标扩展信息。

9.如权利要求8述的方法，其特征在于，所述在所述呈现位置，采用所述呈现方式呈现所述目标扩展信息，包括：

当所述目标扩展信息的类型为物品信息类型或演员信息类型时，在显示屏幕的一侧，采用独立子页面的展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为历史背景信息类型时，在显示屏幕的一侧，采用弹幕展示方式呈现所述目标扩展信息；

当所述目标扩展信息的类型为导演评论信息类型时，在显示屏幕的一侧，采用字幕展示方式呈现所述目标扩展信息。

10.如权利要求1所述的方法，其特征在于，所述同步呈现所述目标时间点的视频内容及目标扩展信息，包括：

获取所述至少两种类型的扩展信息中，与所述目标时间点的视频内容相关联的扩展信息；

从与所述目标时间点的视频内容相关联的扩展信息的类型中，确定所述目标用户偏好的类型，将所述目标用户偏好的类型的扩展信息作为所述目标扩展信息；

同步呈现所述目标时间点的视频内容及目标扩展信息。

11.如权利要求1所述的方法，其特征在于，当所述目标扩展信息包括多种类型的扩展信息时，所述方法还包括：

在所述目标扩展信息的呈现界面中，呈现对应每种类型的扩展信息的关闭项；

响应于基于所述关闭项触发的关闭指令，取消显示所述关闭指令所指示的扩展信息。

12.如权利要求1所述的方法，其特征在于，所述方法还包括：

在所述目标扩展信息的呈现界面中，呈现包括多个视频片段选项的菜单；

其中，各所述视频片段选项对应的视频内容与所述目标时间点的视频内容的相似度满足相似度条件；

响应于基于所述菜单触发的针对目标视频片段选项的选取指令，进行页面跳转至所述目标视频片段选项对应的目标视频片段，并

在呈现所述目标视频片段的同时，同步呈现与所述目标视频片段相关联的扩展信息。

13.如权利要求1所述的方法，其特征在于，所述同步呈现所述目标时间点的视频内容及目标扩展信息之后，所述方法还包括：

检测所述目标扩展信息对应的呈现时长；

当所述呈现时长达到目标呈现时长时，取消显示所述目标扩展信息。

14.如权利要求1所述的方法，其特征在于，所述获取目标视频及至少两种类型的扩展信息，包括：

接收到针对所述目标视频的播放指令；

响应于所述播放指令，通过视频数据获取接口获取所述目标视频，并通过扩展数据获取接口获取所述至少两种类型的扩展信息。

15.一种视频的扩展信息处理装置，其特征在于，所述装置包括：

获取模块，用于获取目标视频及至少两种类型的扩展信息，所述扩展信息与所述目标视频中目标用户感兴趣的视频内容相关；

第一呈现模块，用于呈现所述目标视频中每个时间点的视频内容；

第二呈现模块，用于确定目标时间点对应的视频播放模式为信息扩展模式、且所述目标时间点对应的视频内容归属于所述目标用户感兴趣的视频内容时，在所述目标时间点到达时，同步呈现所述目标时间点的视频内容及目标扩展信息；

其中，所述目标扩展信息包括：所述至少两种类型的扩展信息中与所述目标时间点的视频内容相关联的扩展信息。

Images