CN112533050A - 一种视频处理方法、装置、设备及介质 - Google Patents

一种视频处理方法、装置、设备及介质 Download PDF

Info

Publication number
CN112533050A
CN112533050A CN202011357183.4A CN202011357183A CN112533050A CN 112533050 A CN112533050 A CN 112533050A CN 202011357183 A CN202011357183 A CN 202011357183A CN 112533050 A CN112533050 A CN 112533050A
Authority
CN
China
Prior art keywords
information
target
channel
image
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011357183.4A
Other languages
English (en)
Other versions
CN112533050B (zh
Inventor
陈建军
高萌
陈春勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202011357183.4A priority Critical patent/CN112533050B/zh
Publication of CN112533050A publication Critical patent/CN112533050A/zh
Application granted granted Critical
Publication of CN112533050B publication Critical patent/CN112533050B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4825End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种视频处理方法、装置、设备及介质,其中的方法包括:获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的至少一帧图像相关联;根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息;所述目标互动信息的信息内容与目标信息频道的目标频道类型相关联,从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像。本申请实施例能够根据目标视频的互动信息对视频封面进行更新,提升视频封面的内容与频道类型的相关性,提高视频的点击率。

Description

一种视频处理方法、装置、设备及介质
技术领域
本申请涉及计算机技术领域,尤其涉及一种视频处理方法、一种视频处理装置、一种视频处理设备以及一种计算机可读存储介质。
背景技术
视频凭借其直观、生动、简单等优势越来越受到人们的喜爱,而吸引用户打开并观看视频的主要因素是视频封面;所谓的视频封面是视频展现在信息流应用(如微视客户端、QQ浏览器等)中、用来简述视频内容的一张封面图像。现有技术中,视频封面是由用户自主上传的,这使得上传后的视频的视频封面较为固化,容易导致视频点击率较低,不利于视频传播。
发明内容
本申请实施例提供一种视频处理方法、装置、设备及介质,能够根据目标视频的互动信息对视频封面进行更新,提升视频封面的内容与频道类型的相关性,提高视频的点击率。
一方面,本申请实施例提供一种视频处理方法,该方法包括:
获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的一帧或多帧图像相关联;目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息;目标互动信息的信息内容与目标信息频道的目标频道类型相关联,目标信息频道为一个或多个信息频道中的任一信息频道,且目标视频在目标信息频道中具有第一封面图像;
从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像,第二封面图像用于在显示目标信息频道的频道页面时,在频道页面中的目标视频的封面显示位置处,替换显示第一封面图像。
另一方面,本申请实施例提供一种视频处理装置,包括:
获取单元,用于获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的一帧或多帧图像相关联;目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
处理单元,用于根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息;目标互动信息的信息内容与目标信息频道的目标频道类型相关联,目标信息频道为一个或多个信息频道中的任一信息频道,且目标视频在目标信息频道中具有第一封面图像;
处理单元,还用于从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像,第二封面图像用于在显示目标信息频道的频道页面时,在频道页面中的目标视频的封面显示位置处,替换显示第一封面图像。
另一方面,本申请实施例提供一种视频处理装置,包括:
显示单元,用于在信息流应用中的目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第一封面图像;
处理单元,用于当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像;第二封面图像是根据目标视频在目标时间段内的多个互动信息和目标信息频道的目标频道类型生成的。
另一方面,本申请实施例提供一种视频处理设备,包括:
处理器,适于执行计算机程序;
计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时,实现如上述的视频处理方法。
另一方面,本申请实施例提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机指令,该计算机程序适于由处理器加载并执行如上述的视频处理方法。
另一方面,本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述的视频处理方法。
本申请实施例可根据多个互动信息的信息内容筛选出与目标信息频道的目标频道类型相关联的目标互动信息;基于目标互动信息关联的关联图像帧生成目标视频在目标信息频道中的第二封面图像。上述过程中,目标视频在目标信息频道中的第二封面图像是根据与目标视频相关的目标互动信息确定的,并且目标互动信息的信息内容与目标信息频道的目标频道类型相关联;这可以确保基于目标互动信息关联的关联图像帧生成的第二封面图像与目标信息频道的目标频道类型相关联,提升视频封面的内容与频道类型的相关性,提高视频的点击率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本申请一个示例性实施例提供的一种视频处理系统的架构示意图;
图1b是本申请一个示例性实施例提供的一种视频处理方法的方法示意图;
图2是本申请一个示例性实施例提供的一种视频处理方法的流程示意图;
图3a是本申请一个示例性实施例提供的一种频道页面的示意图;
图3b是本申请一个示例性实施例提供的另一种频道页面的示意图;
图4a是本申请一个示例性实施例提供的一种选择第一封面图像的示意图;
图4b是本申请一个示例性实施例提供的另一种选择第一封面图像的示意图;
图5a是本申请一个示例性实施例提供的一种刷新控件的示意图;
图5b是本申请一个示例性实施例提供的一种刷新手势的示意图;
图5c是本申请一个示例性实施例提供的一种针对空白区域的触发操作的示意图;
图5d是本申请一个示例性实施例提供的一种响应于显示触发操作显示第二封面图像的示意图;
图6是本申请一个示例性实施例提供的一种切换信息频道显示第三封面图像的示意图;
图7是本申请一个示例性实施例提供的另一种视频处理方法的流程示意图;
图8a是本申请一个示例性实施例提供的一种确定与互动信息关联的图像帧的示意图;
图8b是本申请一个示例性实施例提供的另一种确定与互动信息关联的图像帧的示意图;
图9a是本申请一个示例性实施例提供的一种确定目标互动信息的示意图;
图9b是本申请一个示例性实施例提供的一种目标热点文本库的示意图;
图9c是本申请一个示例性实施例提供的一种统计互动信息数量的示意图;
图9d是本申请一个示例性实施例提供的一种第二封面图像替换显示第一封面图像的示意图;
图10是本申请一个示例性实施例提供的一种拼接图像的示意图;
图11是本申请一个示例性实施例提供的一种视频处理装置的结构示意图;
图12是本申请一个示例性实施例提供的另一种视频处理装置的结构示意图;
图13是本申请一个示例性实施例提供的一种视频处理设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
下面先对本申请涉及的一些术语及概念进行说明:
(1)本申请实施例涉及信息流应用,所谓信息流应用是指可向用户推送信息的任一应用;其可以包括但不限于:视频应用(如用于观看短视频(即播放时长小于阈值的视频)的短视频应用、或用于观看影视剧的普通视频应用等)、即时通讯应用(如QQ、微信或企业微信等)、内容分享应用(如微博等)、浏览器应用、包含信息推送功能的地图应用、游戏应用,等等。
其中,应用是应用程序的简称;应用程序是指为完成某项或多项特定工作的计算机程序。按照应用程序的运行方式分类,应用程序可包括但不限于:①客户端,所谓的客户端(又可称为应用客户端、APP客户端)是指安装并运行在终端中的应用程序;②小程序(或称为子程序、子应用),所谓的小程序是指无需下载安装即可使用的应用程序,其通常运行于客户端中;③web程序,所谓的web程序是指通过浏览器打开的应用程序;等等。本申请实施例后续提及的应用可以是上述描述的三种应用程序中的任一种应用程序,在此进行说明。
(2)本申请实施例还涉及视频,视频是由多帧图像平滑连接所形成的连续画面。例如:连续的图像变化每秒超过24帧时,人眼无法辨别单帧的静态图像,使得多帧图像形成平滑连续的视觉效果,这样连续的画面即是视频。视频通过上述描述的应用程序进行播放;例如,在应用程序的服务界面中往往显示有目标视频的视频封面,视频封面可以是由图像(该图像可以是目标视频的图像或与目标视频无关的图像)和目标视频相关的信息(如视频标题、点击量、观看量等等)构成,通过点击视频封面可触发播放视频。另外,当用户存在上传视频的需求时,用户可将视频上传至信息流应用的一个或多个信息频道中,这样一个视频可被发布至信息流应用的不同的信息频道中,这样可提高视频的推广率和点击率。其中,所谓发布可以是指将视频上传至信息流应用,并将视频显示于信息流应用的一个或多个信息频道的频道页面中。
(3)本申请实施例还涉及互动信息,互动信息是指用户在观看视频过程中所发送的,用于表达自己对视频内容的一些感想的信息;其可包括但不限于:弹幕信息(可简称弹幕)、评论信息,等等。其中,弹幕是指在播放视频的过程中,直接显示于视频播放页面上的信息;弹幕支持以滚动、停留、重复等方式出现在视频播放页面上。评论信息是指显示于评论页面中的信息,该评论页面与视频播放页面可以是显示于信息流应用的不同界面的两个页面,或者评论页面和视频播放页面也可以是显示于信息流应用的同一界面中相互独立的两个页面。需要说明的是,后续以弹幕为例描述互动信息,在此进行说明。
由于互动信息是用户在观看视频过程中用来表达自己对视频内容的一些感想的信息,因此可以在一定程度上根据互动信息的内容来确定与互动信息相关联的图像的图像内容。例如,目标视频的总播放时长为2分钟,当用户观看到第30秒时触发输入弹幕,且设弹幕的弹幕内容为“太好笑了吧”,那么可在一定程度上确定目标视频的第30秒所对应的图像的内容可能是搞笑内容。
基于上述术语和概念,本申请实施例提供一种视频处理方案和对应的视频处理系统。下面结合附图1a来简单介绍本申请实施例涉及的视频处理系统。
请参见图1a,图1a示出了本申请一个示例性实施例提供的一种视频处理系统的架构示意图。如图1a所示,该视频处理系统可包括但不限于:服务器101和N个终端,N为大于1的整数,例如:N个终端可包括终端102、终端103……。可以理解的是,该系统中包含的服务器的命名和数量、终端的命名和数量仅为举例,本申请实施例对服务器的命名和数量、终端的命名和数量并不作限定。
其中,终端102、终端103可以是指用来运行信息流应用(如微视、QQ浏览器等)的设备;通过终端实现视频的上传、播放,弹幕输入、展示等。终端可包括但不限于:PC(PersonalComputer,个人计算机)、PDA(平板电脑)、手机、可穿戴智能设备等等。终端往往配置有显示装置,显示装置也可为显示器、显示屏、触摸屏等等,触摸屏也可为触控屏、触控面板等等,显示装置可用来显示视频的播放页面。服务器101可以是终端中的应用程序(即信息流应用)的后台服务器,用于与终端进行交互,以为终端中的应用程序提供计算和应用服务支持。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端以及服务器之间可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
下面结合图1b来对本申请涉及的视频处理方案进行简要介绍,具体的方案原理大致如下:
首先,视频制作者在制作完成目标视频后,可通过终端中运行的信息流应用将目标视频上传至服务器中,以便于服务器将目标视频分发给运行有信息流应用的各终端。在上传目标视频的过程中,视频制作者可选择将目标视频上传至信息流应用的全部或部分的信息频道中。目标视频上传成功后,服务器可持续获取来自各终端的、与目标视频相关的互动信息(即弹幕)。例如:终端102获取到与目标视频相关的弹幕A,终端103获取到与目标视频相关的弹幕B,那么服务器可接收终端102发送的与目标视频相关的弹幕A,以及接收终端103发送的与目标视频相关的弹幕B。另外,终端还可以基于信息频道的频道类型,实时或周期性收集互联网中流行的热点文本,基于热点文本生成与信息流应用中的各信息频道的频道类型相关的热点文本库;一个信息频道对应一个热点文本库,且每个信息频道对应的热点文本库中包含一个或多个与该信息频道的频道类型相关联的热点文本。其中,一个热点文本可以是由一个字、或者一个词、或者一个句子构成的。热点文本是指:在热度排序列表(如热度从高至低排序显示)中排序位置在门限位置之前的文本,例如,热度排序列表中包含热度从高至低排序显示的10个文本,门限位置为热度排序列表中60%的文本所在的位置,则热点文本是10个文本中排序靠前的4个文本;此处的文本可包括微博热搜词、热门评论信息,等等。文本的热度可以用来反映用户对该文本的感兴趣程度;文本的热度越高,表示用户对该文本感兴趣程度越高。
其次,终端可从服务器处获取目标视频在目标时间段内的多个互动信息,这些互动信息可能来自于不同的终端,每个互动信息与目标视频中的至少一帧图像相关联。当目标时间段内的多个互动信息的数量达到一定数量条件后,终端从多个互动信息中筛选出目标信息频道的目标频道类型相关联的候选互动信息;并根据目标信息频道对应的目标热点文本库从候选互动信息中确定目标互动信息。其中,目标信息频道为信息流应用中发布有目标视频的一个或多个信息频道中的任一信息频道。举例来说:目标视频被上传发布至信息流应用中的美食频道;多个互动信息的信息内容分别为:“挺好吃的”、“太好笑了”、“太馋了吧”、“美味”等等;那么可得到与美食频道的频道类型相关联的候选互动信息包括“挺好吃的”、“太馋了吧”、“美味”。若目标热点文本库中包括“美味”,则可将“美味”作为目标互动信息。
最后,终端可获取与目标互动信息关联的关联图像帧,并基于关联图像帧生成目标视频在目标信息频道中的第二封面图像,以在目标信息频道的频道页面中的目标视频的封面显示位置处,替换显示第一封面图像。其中,第一封面图像可以是目标视频在上传的过程中生成的,或者,第一封面图像可以是采用生成第二封面图像的方式生成的。另外,终端还可以将目标视频关联的第二封面图像回传至服务器,以使得服务器采用第二封面图像替换第一封面图像,并将目标视频的第二封面图像下发至运行有信息流应用的其他终端,使得这些终端将目标信息频道的频道页面中目标视频的第一封面图像替换显示为第二封面图像。
需要说明的是,上述以终端为执行主体为例,来描述从多个互动信息中确定目标互动信息,以及根据目标互动信息生成第二封面图像的步骤,并不对本申请实施例的执行主体产生限定。也就是说,也可由服务器101根据获取到的多个互动信息执行从多个互动信息中确定目标互动信息,以及根据目标互动信息生成第二封面图像的步骤。本申请实施例对本方案的执行主体不作限定。
本申请实施例中,能够获取目标视频在目标时间段内的多个互动信息,并根据各互动信息的信息内容获取到与目标信息频道相关联的目标互动信息,再基于与目标互动信息关联的关联图像帧生成第二封面图像。上述过程中,第二封面图像是根据目标视频所包含的多帧图像中,与目标信息频道的目标频道类型相关联的图像帧生成的,这使得目标视频的封面图像的内容与目标信息频道的目标频道类型的关联度高,提升目标视频的吸引力,提高目标视频的点击率。
下面结合附图2详细介绍本申请提出的视频处理方案。图2示出了本申请一个示例性实施例提供的一种视频处理方法的流程示意图。该视频处理方案可以由图1a所示系统的终端来执行,具体可以是由终端中的信息流应用来执行。如图2所示,该视频处理方法可包括步骤S201-步骤S202,其中:
S201、在信息流应用中的目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第一封面图像。
信息流应用中往往包含一个或多个信息频道,各信息频道对应不同的频道类型。目标信息频道为信息流应用中的一个或多个信息频道中的任一信息频道。目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,且目标视频在目标信息频道中具有第一封面图像。请参见图3a,图3a示出了本申请一个示例性实施例提供的一种频道页面的示意图。如图3a所示,在信息流应用的服务界面301中包含多个信息频道标识(如信息频道名称),包括:萌宠频道、动画频道、体育频道以及搞笑频道等等。假设目标信息频道为搞笑频道,当搞笑频道的频道标识3011处于有效状态(即频道标识3011被触发)时,显示搞笑频道的频道页面3012;且该频道页面3012中显示属于搞笑频道下的多个视频以及各视频的封面图像。当触发其他信息频道标识时,显示被触发的信息频道的频道页面。可以理解的是,各信息频道的频道页面除像图3a所示的分布于信息流应用的不同界面以外,各信息频道的频道页面也可显示于信息流应用的同一界面中。请参见图3b,图3b示出了本申请一个示例性实施例提供的另一种频道页面的示意图。如图3b所示,在服务界面301中包含多个信息频道的频道页面,如推荐信息的频道页面、萌宠频道的频道页面、搞笑频道的频道页面等等。
用户可以根据第一封面图像所展示的内容,视频的点击量等信息来确定是否观看该视频。其中,第一封面图像可包括以下任一种:(1)采用封面选取策略从目标视频中选取的一帧图像,封面选取策略用于指示:从目标视频中选取第一帧图像作为封面图像,或者从目标视频中随机选取一帧图像作为封面图像,或者从目标视频中选取图像内容与目标频道类型相关联的图像作为封面图像。(2)根据目标视频在历史时间段内的多个历史互动信息和目标信息频道的目标频道类型生成的图像;其中,历史时间段的结束时间早于目标时间段的开始时间,例如:历史时间段为的开始时间为:12月1日的10:00,结束时间为12月1日的11:11,那么目标时间段的开始时间应该是晚于12月1日的11:11的;这种生成第一封面图像的方法即是本申请提及的视频处理方案,详细生成过程可参见后续实施例的相关描述。(3)目标视频在上传至信息流应用的过程中,由用户指定的图像;用户指定的第一封面图像可以是用户从目标视频所包含的多帧图像中选择的,或者,是用户上传的任意图像(即该图像可以不为目标视频所包含的多帧图像中的一帧图像)。
下面结合附图4a和图4b来详细介绍用户指定图像作为第一封面图像的可能的实现方式,其中:
请参见图4a,图4a示出了本申请一个示例性实施例提供的一种选择第一封面图像的示意图;如图4a所示,当用户具有上传视频的需求时,可执行上传操作(如在个人中心页面中选中上传视频控件等等),此时信息流应用中显示上传页面401。当目标视频被成功上传后,在上传页面401的播放窗口4011中显示目标视频的初始封面。播放窗口4011中包括有封面选择控件40111,当封面选择控件40111被触发时,表示用户想要更改视频的初始封面,则显示封面选择页面402。封面选择页面402中包括预览窗口4021,预览窗口4021用来显示用户上传的图像。封面选择页面402中还显示有播放进度条4022以及按照视频的播放顺序排列的多帧图像序列4023,当播放进行条4022未被拖动时,预览窗口4021中显示视频的第一帧图像。当播放进行条被拖动时,预览窗口4021跟随播放进度条4022的移动实时显示播放进度条4022所指示的图像帧,例如,播放进度条4022指示第M帧图像,则预览窗口4021中显示第M帧图像,M为大于零的整数。封面选择页面402中还显示有完成标识4024,当完成标识4024被选中时,表示用户已经选定视频封面,此时信息流应用显示上传页面401,上传页面401中的播放窗口4011中显示由用户选择的封面图像(即第一封面图像)。
再请参见图4b,图4b示出了本申请一个示例性实施例提供的另一种选择第一封面图像的示意图;如图4b所示,在封面选择页面402中显示有提示消息4025,该提示消息4025用于提示用户可以上传图像作为视频封面,该上传的图像可以来自于本地存储空间,也可以来自于互联网等;当提示消息4025被选中时,显示图册页面403,图册页面403中包含多个图像,在图册页面403中可对任意图像进行放大查看,在放大查看的页面中选择该图像为封面图像,或者,在图册页面403中选中图像,即确定将被选中的图像作为封面图像。例如,图册页面403中的图像4031(图像4031不为视频中的任何图像帧)被选中时,信息流应用显示上传页面401,上传页面401中的播放窗口4011中显示由用户选择的图像4031。
S202、当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像。
第二封面图像是根据目标视频在目标时间段内的多个互动信息和目标信息频道的目标频道类型生成的。其中,目标时间段可以是指当前时刻与目标视频上传至信息流应用时的上传时刻之间的一段时间;在这种情况下,目标视频的第一封面图像是:由用户上传的图像或采用封面选取策略选取的图像;目标视频的第二封面图像是:从目标视频上传至信息流应用后,根据与目标视频关联的互动信息生成的封面图像。或者,目标时间段还可以是指当前时刻与上一次生成封面图像的历史时刻之间的一段时间;在这种情况下,目标视频的第一封面图像是:上一次根据互动信息和目标信息频道的目标频道类型生成的封面图像;目标视频的第二封面图像是:信息流应用根据当前时刻与上一次生成封面图像的历史时刻之间的时间段内收集到的互动信息和目标信息频道的目标频道类型生成新的封面图像。当然,生成第二封面图像时除考虑当前时刻与上一次生成封面图像的历史时刻之间的时间段内收集到的互动信息以外,还可以考虑在上一次生成封面图像之前的时间内收集到的互动信息,本申请实施例对此不作限定。
下面详细介绍几种在目标视频的封面显示位置处显示第二封面图像的实施方式,其中:
一种实现方式中,当存在第二封面图像、且当前显示的用户页面为目标信息频道的频道页面时,在目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像。换句话说,如果当前信息流应用显示的页面是目标信息频道的频道页面,并且存在第二封面图像,那么信息流应用可自动在频道页面中目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像。上述第二封面图像替换显示第一封面图像的过程,不需要用户执行任何操作,信息流应用可在检测到相关条件(即存在第二封面图像、且信息流应用中当前显示的页面为目标信息频道的频道页面)时自动执行。
当然,第二封面图像替换显示第一封面图像的步骤还可以是在检测到刷新操作之后执行的。所谓刷新操作可包括但不限于:①针对目标信息频道的频道页面中的刷新控件的触发操作。请参见图5a,图5a示出了本申请一个示例性实施例提供的一种刷新控件的示意图;如图5a所示,在信息流应用的服务页面301中显示有刷新控件501(或按键、按钮等),当刷新控件501被触发时,将服务页面301中目标视频的第一封面图像5011替换为第二封面图像5012。②在目标信息频道的频道页面中输入页面刷新手势的操作;刷新手势可包括但不限于:下拉频道页面、在频道页面中画指定形状(如L形、S形等等)等等。请参见图5b,图5b示出了本申请一个示例性实施例提供的一种刷新手势的示意图;如图5b所示,通过手指(或鼠标、电子笔等)长按并下拉频道页面的任意位置,可实现将服务页面301中的目标视频的第一封面图像5011替换显示为第二封面图像5012。③针对目标信息频道的频道页面中的空白区域的触发操作;该触发操作可以是指在频道页面的空白区域的点击操作,换句话说,点击频道页面中的空白区域的任意位置可实现目标视频的封面图像的更新。请参见图5c,图5c示出了本申请一个示例性实施例提供的一种针对空白区域的触发操作的示意图;如图5c所示,点击目标信息频道的频道页面中的空白区域502所包含的任意位置处,目标视频的封面显示位置处从第一封面图像5011替换显示为第二封面图像5012。当然,触发操作也可以是在频道页面中空白区域的双击操作(即连续两次点击频道页面中的同一空白位置),本申请实施例对触发操作不作限定。
在另一种实现方式中,当存在第二封面图像、且当前显示的用户页面不为目标信息频道的频道页面时,响应于频道页面的显示触发操作,显示目标信息频道的频道页面,并在目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第二封面图像。换句话说,当存在第二封面图像,且目标信息频道的频道页面被执行切换显示操作时,响应于频道页面的显示触发操作,将第二封面图像替换显示第一封面图像。此处的切换显示操作可包括但不限于:从信息流应用的其他信息频道的频道页面切换至目标信息频道的频道页面;或者,信息流应用被打开并显示目标信息频道的频道页面;或者,从目标视频的播放页面中退回至目标视频所在的频道页面;等等。请参见图5d,图5d示出了本申请一个示例性实施例提供的一种响应于显示触发操作显示第二封面图像的示意图;如图5d所示,目标视频在搞笑频道3011的频道页面中显示有第一封面图像5011,当第一封面图像5011的任意位置被触发时,显示播放页面503,播放页面503用于播放目标视频,播放页面503中包含返回选项5031;当返回选项5031被触发时,从播放页面503跳转至搞笑频道3011的频道页面,且频道页面中的目标视频的封面图像显示为第二封面图像,即终端在检测到存在第二封面图像、且存在切换显示操作时,自动将第一封面图像切换显示为第二封面图像。需要说明的是,图5d所示的播放页面503为终端在横屏状态下的示意图,终端在竖屏状态下的播放页面的示意图可适应发生变化,本申请实施例在此不做赘述。
基于上述描述可知,目标视频在目标信息频道的频道页面中的封面图像可根据互动信息的数量进行实时更新,这使得目标视频中与目标信息频道的目标频道类型较为相关的封面图像能够自动更新显示于频道页面中,提高目标视频的封面图像与目标信息频道的相关性,提高目标视频的吸引力,提升目标视频的点击量。
另外,本申请实施例还支持生成目标视频在不同信息频道中的封面图像,在切换显示各信息频道时,目标视频在各信息频道的频道页面中展现为不同的封面图像。具体地,目标视频被发布于信息流应用的至少一个信息频道中,目标信息频道为至少一个信息频道中的任一信息频道;目标信息频道的频道页面属于信息流应用的服务界面,服务界面中还包括:用于切换至第一频道的切换组件,第一频道为至少一个信息频道中除目标信息频道以外的任一信息频道;当切换组件被触发时,显示第一频道的频道页面,并在第一频道的频道页面中的目标视频的封面显示位置处,显示目标视频的第三封面图像,该第三封面图像是根据目标视频的互动信息和第一频道页面的频道类型确定的。
请参见图6,图6示出了本申请一个示例性实施例提供的一种切换信息频道显示第三封面图像的示意图;如图6所示,假设目标视频被发布于信息流应用中的萌宠频道601和搞笑频道3011,此时,萌宠频道601为目标信息频道,搞笑频道3011为第一频道,切换组件为信息频道标识(如萌宠频道601的文字标识);目标视频在萌宠频道601的频道页面中显示有封面图像5011,该封面图像5011的图像内容与萌宠频道601的频道类型相关联;当搞笑频道3011的文字标识被触发时,信息流应用从萌宠频道601的频道页面切换至搞笑频道3011的频道页面,其中,搞笑频道3011的频道页面中的目标视频以第三封面图像5012进行显示,第三封面图像5012的图像内容与搞笑频道3011的频道类型相关联。
本申请实施例中,在目标视频存在第二封面图像时,可自动将频道页面中目标视频的第一封面图像切换显示为第二封面图像,其中,第二封面图像是基于目标视频的互动信息和目标信息频道的目标频道类型生成的,提高第二封面图像与目标信息频道的目标频道类型的关联度,这使得目标视频在目标信息频道中展现与目标频道类型较高的封面图像,提升目标视频的吸引力,提高目标视频的点击率。
请参见图7,图7示出了本申请一个示例性实施例提供的另一种视频处理方法的流程示意图;该视频处理方案可以由图1a所示系统的终端或服务器来执行。如图7所示,该视频处理方法可包括步骤S701-步骤S703,其中:
S701、获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的一帧或多帧图像相关联。
可以理解的是,互动信息是用户在观看视频时即兴输入的一种评论信息,该评论信息与目标视频的图像帧相关联。其中,目标互动相关联的图像帧的数量可以大于1帧。比如,当同一互动信息由多个用户在不同的播放时刻输入时,该互动信息与目标视频的多帧图像帧均相关联,如用户A在目标视频播放到1分28秒时输入第一互动信息,用户B在目标视频播放到3分2秒时输入第一互动信息,则确定第一互动信息关联的图像帧包括目标视频在1分28秒时的图像和目标视频在3分2秒时的图像。又如,由一个用户输入的互动信息被播放于目标视频的不同播放时刻,如用户输入的第一互动信息被重复播放在目标视频的1分28秒对应的图像和3分2秒对应的图像,则确定一个用户输入的第一互动信息关联的图像帧包括目标视频在1分28秒时的图像和目标视频在3分2秒时的图像。
其中,确定与互动信息相关联的图像帧的方式可包括但不限于以下任一种或多种:
在一种实现方式中,根据互动信息被触发输入的时刻,来确定与互动信息相关联的图像帧。具体地,在视频的播放页面中显示有用于输入互动信息的信息输入框;当信息输入框被触发时,表示用户想要输入互动信息,则将信息输入框被触发的时刻对应的目标视频的图像作为与输入的互动信息相关联的图像。例如:目标视频的播放时间为2分钟,用户在观看到50秒时点击信息输入框,则确定输入的互动信息与目标视频在50秒对应的一帧图像相关联。又如:互动信息为“666”,目标视频的播放时长为2分钟;用户A在观看到12秒时点击信息输入框并输入互动信息“666”,用户B在观看到54秒时点击信息输入框并输入互动信息“666”,以及用户C在观看到1分23秒时点击信息输入框并输入互动信息“666”则确定同一互动信息“666”与目标视频在12秒对应的图像、54秒对应的图像以及1分23秒对应的图像均相关联。
下面结合附图8a来介绍根据互动信息被触发输入的时刻,来确定与互动信息相关联的图像帧的流程。请参见图8a,图8a示出了本申请一个示例性实施例提供的一种确定与互动信息关联的图像帧的示意图;如图8a所示,目标视频的播放页面503中包括信息输入框801,触发信息输入框801可输入互动信息;假设目标视频总的播放时长为4分58秒,当用户观看到2分32秒时,点击信息输入框801,表示用户对目标视频的2分32秒对应的图像感兴趣,则记录输入的互动信息与目标视频的2分32秒对应的图像802相关联。需要说明的是,当用户点击信息输入框801时,目标视频可以自动暂停播放,当用户在信息输入框801中输入互动信息并点击发送后,目标视频自动继续播放,并将输入的互动信息显示于播放页面中。或者,当用户点击信息输入框801时,目标视频也可以继续播放,在这种情况下,当用户在信息输入框801中输入互动信息结束后,输入的互动信息可显示于输入结束时刻对应的播放页面中,或者,当视频重新播放到触发信息输入框801的时刻时显示于播放页面中。其中,互动信息在播放页面上的显示形式可包括但不限于:显示于播放页面的固定位置、在播放页面中滚动显示等等,互动信息的字体颜色、大小可以由用户自定义等等。
在另一种实现方式中,根据互动信息出现于播放页面中的时刻,来确定与互动信息相关联的图像帧。换句话说,在互动信息被输入之后,将互动信息首次出现在播放页面的时刻所对应的目标视频的图像帧确定为与互动信息相关联的图像帧。
下面结合附图8b来介绍与互动信息出现于显示屏时与互动信息相关联的图像帧。请参见图8b,图8b示出了本申请一个示例性实施例提供的另一种确定与互动信息关联的图像帧的示意图;如图8b所示,目标视频的总播放时长为4分58秒,当目标视频播放到2分32秒时,信息输入区域801被触发,此时在显示屏上显示键盘区域802,且目标视频持续播放;键盘区域802中显示有输入框8021,通过触发键盘区域802所包含的字符实现在输入框8021中输入互动消息8022(如“史迪仔超可爱”);当目标视频播放到4分钟时,互动消息8022被点击发送,则互动消息8022可显示于目标视频在4分钟所对应的图像803上,此时记录互动信息8022与图像803相关联。
S702、根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息。
其中,目标互动信息的信息内容与目标信息频道的目标频道类型相关联。所谓相关联可以包括以下一种或多种情况:(1)目标互动信息的信息内容包括目标频道类型的全部或部分类型标识(如类型名称);例如,目标互动信息的信息内容为“这个油炸鸡腿,真是不错的美食呢”,目标频道类型的类型标识为“美食”,则目标互动信息的信息内容中包含目标频道类型的全部类型标识,即“美食”,那么确定目标互动信息的信息内容与目标信息频道的目标频道类型相关联。(2)目标互动信息的信息向量与目标信息频道的基准向量之间的相似度满足相似条件;其中,所谓的目标互动信息的信息向量可以是对信息内容进行特征处理得到的,所谓的目标信息频道的基准向量可以是基于目标信息频道的类型标识生成的,所谓相似度满足相似条件可包括相似度大于相似度阈值等。(3)目标互动信息的信息内容所表达的语义信息与目标频道类型所表达的语义信息相同或相似;举例来说,假设目标互动信息的信息内容为“味道不错”,该信息内容“味道不错”所表达的语义信息为食物,假设目标频道类型为“美食类型”,该目标频道类型“美食类型”所表达的语义信息也为食物,则确定信息内容“味道不错”的语义信息与目标频道类型“美食类型”的语义信息相同,确定目标互动信息的信息内容与目标信息频道的目标频道类型相关联。
下面给出几种根据各个互动信息的信息内容,获取目标互动信息的实现方式,其中:
在一种实现方式中,根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息的流程可参见图9a,图9a示出本申请一个示例性实施例提供的一种确定目标互动信息的示意图;具体实施过程可包括以下步骤s11-s13:
s11,根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量,并根据目标信息频道的类型标识生成基准向量。
在具体实施过程中,互动信息的信息向量可以用来表示互动信息的信息内容的特征,互动信息的信息向量之间的相似度可以用来表征互动信息之间的相似性。根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量的实施方式可包括但不限于:
(1)对参考互动信息进行分词处理,得到至少两个词,参考互动信息为多个互动信息中的任一互动信息。分词处理的目的是将较长的字段(如文本)分为较短的字段(即词),这样便于对较长字段的理解;例如:较长的字段为:小明来到太湖市,对该字段进行分词处理可得到:小明/来到/太湖/市。
常见的分词处理方法可包括但不限于:
基于词典的分词方法,是按照一定的策略将待关联的字符串和一个已建立好的“充分大的”词典库中的词进行关联,若找到某个词,则说明关联成功,识别了该词。基于词典的分词方法的分词步骤可包括:首先,建立统一的词典库,该词典库中包含海量的词;其次,将待处理的文本(如互动信息“太好看了趴!”)拆分成多个词语;最后,将每一词语与词典库进行比对,若该词语存在于词典库中,则确定分词成功,若该词语不存在与词典库中,则继续对文本进行拆分,直至拆分得到的所有词语中的全部或部分词语存在于词典库中。
基于统计的分词方法,是对文本所包含的各个字进行标注训练,不仅考虑词语出现的频率,还考虑上下文。基于统计的分词方法的原理是:统计文本相邻的字组成的词语在文本中出现的概率,相邻的字组成的词语在文本中出现的次数越多,则该相连的字在该文本中应当被划分为一个词。
基于理解的分词方法,是通过让计算机模拟人对文本的理解,达到识别文本中的词的效果。基于理解的分词方法的基本思想是在对文本进行分词的同时,对文本和拆分的词语进行句法分析(如句子结构分析)、语义分析(如文本或词语的语义),采用句法分析和语义分析可以更好地处理文本中的歧义现象,得到更好的分词处理结果。基于理解的分词处理方法的系统通过包括三个部分:分词子系统、句法语义子系统、总控子系统;具体地,总控子系统调控分词子系统和句法语义子系统来模拟人对文本的理解过程,可以获得文本中的句法分析得到的句法信息和语义分析得到的语义信息,更好地实现对文本进行词语的拆分。
(2)根据每个词的特征信息计算每个词的词向量,并采用每个词的词向量生成参考互动信息的信息向量。
在一种实现方式中,可采用算法(如神经网络算法、概率模型等)将分词处理得到的词映射到实数的向量,进而得到词向量;并采用每个词的词向量生成参考互动信息的信息向量。其中,采用每个词的词向量生成参考互动信息的信息向量的实施方式可包括但不限于:①将每个词向量进行拼接;例如,将两个二位的词向量拼接成参考互动信息的信息向量。②对各词向量进行平均处理;换句话说,对参考互动信息的所有词向量求平均值,得到参考互动信息的信息向量。③对各词向量进行加权求和处理;也就是说,给参考互动信息的所有词向量分配权重值,基于权重值对各词向量进行加权求和得到参考互动信息的信息向量。
s12,根据信息向量和基准向量之间的相似度,从各个互动信息中筛选出至少一个候选互动信息,相似度用于指示互动信息和信息频道的频道类型之间的关联度。
在具体实施过程中,根据信息向量和基准向量之间的相似度,从各个互动信息中筛选出至少一个候选互动信息,相似度用于指示互动信息和信息频道的频道类型之间的关联度。其中,信息向量与基准向量之间的相似度越高,表示信息向量对应的互动信息与基准向量对应的信息频道的频道类型之间的关联度越高,信息向量与基准向量之间的相似度越低,表示信息向量对应的互动信息与基准向量对应的信息频道的频道类型之间的关联度越低。
在一种实现方式中,将信息向量与基准向量之间的相似度大于配置相似度的信息向量对应的互动信息作为候选互动信息。举例来说,假设配置相似度为70%,互动信息A的信息向量与基准向量之间的相似度为71%,互动信息B的信息向量与基准向量之间的相似度为69%,互动信息C的信息向量与基准向量之间的相似度为80%,确定互动信息A和互动信息C作为候选互动信息,互动信息B不作为候选互动信息。
在另一种实现方式中,所有互动信息的信息向量与基准向量之间的相似度进行排序,按照相似度从高到低的顺序选取目标数量的互动信息作为候选互动信息。举例来说,假设候选互动信息的目标数量为3,假设互动信息A的信息向量与基准向量之间的相似度为60%,互动信息B的信息向量与基准信息之间的相似度为67%,互动信息C的信息向量与基准向量之间的相似度为89%、互动信息D的信息向量与基准向量之间的相似度为51%,那么,按照相似度从高至低的顺序对互动信息进行排序,可得到排列顺序为:互动信息C>互动信息B>互动信息A>互动信息D,可得候选互动信息包括:互动信息C、互动信息B、互动信息A。
s13,从至少一个候选互动信息中选取出目标互动信息的流程可包括:获取与目标信息频道对应的目标热点文本库,目标热点文本库中包括至少一个与目标频道类型相关联的热点文本;遍历至少一个候选互动信息,并采用当前遍历的候选互动信息对目标热点文本库进行文本命中检测;若当前遍历的候选互动信息命中目标热点文本库,则将当前遍历的候选互动信息作为目标互动信息。下面结合附图9b来阐述采用当前遍历的候选互动信息对目标热点文本库进行文本命中检测的步骤。请参见图9b,图9b示出了本申请一个示例性实施例提供的一种目标热点文本库的示意图;如图9b所示,至少一个候选互动信息包括:美丽、精彩、真不错;假设当前遍历的候选互动信息为美丽,则采用美丽对目标热点文本库进行文本命中检测,由于目标热点文本库中包含美丽这一热点文本,则确定当前遍历的候选互动信息命中目标热点文本库,则将当前遍历的候选互动信息-美丽,作为目标互动信息。假设采用上述方法确定候选互动信息-精彩,同样命中目标热点文本库,则确定与目标信息频道的目标频道类型相关联的至少一个候选互动信息中的目标互动信息为美丽和精彩。
目标热点文本库可以是终端或服务器来生成的;目标热点文本库的生成方式可包括:从至少一个信息交互平台中获取初始热点信息集,初始热点信息集中包含至少两个热点文本;从初始热点信息集中筛选出与目标频道类型相关联的热点文本;对筛选出的热点文本进行去重处理,并采用去重后的热点文本构建得到目标热点文本库。其中,信息交互平台可以包括但不限于:微信朋友圈、QQ空间、微博话题等等。通过从广泛的信息交互平台收集初始热点信息集,可得到一定时间段内、热度值较高的热点文本,这使得基于目标热点文本库得到的目标互动信息是与目标信息频道的目标频道类型较为关联的互动信息,提高目标互动信息的准确性。需要说明的是,目标热点文本库可以是定期更新的,例如,每隔目标时间段更新一次目标热点文本库中的热点文本;或者,目标热点文本库可以是在执行一次文本命中检测之前更新(或生成)的;等等,本申请实施例对此不作限定。
在另一种实现方式中,根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息的流程可包括:调用信息分类模型根据各个互动信息的信息内容对各个互动信息进行频道分类处理,得到各个互动信息的分类结果,任一互动信息的分类结果用于指示任一互动信息所关联的频道类型;根据各个互动信息的分类结果,从多个互动信息中选取至少一个候选互动信息;每个候选互动信息的分类结果所指示的频道类型为目标信息频道的目标频道类型;从至少一个候选互动信息中选取出目标互动信息。换句话说,基于目标视频发布的至少一个信息频道的频道类型,采用信息分类模型对各个互动信息的信息内容进行类型识别,可得到互动信息的分类结果,互动信息的分类结果指示了该互动信息与目标视频发布的至少一个信息频道中的哪一个信息频道的频道类型相关联;并将属于同一信息频道(如目标信息频道)的互动信息从目标视频的多个互动信息中选取出来,将这些被选取出来的互动信息称为候选互动信息,可以确定的是,这些候选互动信息的分类结果所指示的频道类型为目标信息频道的目标频道类型;再从至少一个候选互动信息中选取出目标互动信息。需要说明的是,从至少一个候选互动信息中选取出目标互动信息的操作可参见前述实现方式中相关内容的相应描述,在此不作赘述。
S703、从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像。
目标互动信息的数量为一个或多个,针对任一目标互动信息,其可与目标视频数据中的一帧或多帧图像相关联;那么关联图像帧可以是目标视频中与该目标互动信息相关联的其中一帧图像,或者关联图像帧可以是目标视频中与该目标互动信息相关联的多帧帧图像。当关联图像帧可以是目标视频中与该目标互动信息相关联的其中一帧图像时,可对目标互动信息所关联的多帧图像进行处理,得到目标互动信息的关联图像帧;此处的处理方法可包括:从目标视频中获取与目标互动信息关联的至少两帧图像;根据获取到的各帧图像在目标视频中的播放时间点,从至少两帧图像中选取播放时间点最早的图像帧作为目标互动信息关联的关联图像帧。举例来说,假设目标视频的总播放时长为2分钟,第一用户在目标视频播放到20秒时输入目标互动信息A,则目标互动信息A与目标视频在第20秒对应的第一图像帧相关联;第二用户在目标视频播放到30秒时输入目标互动信息A,则目标互动信息A与目标视频在第30秒对应的第二图像帧相关联,可知目标互动信息A关联的多帧图像包括:第一图像帧和第二图像帧;由于第一图像帧的播放时间早于第二图像帧,所以将第一图像帧作为目标互动信息A的关联图像帧。当然,对目标互动信息所关联的多个图像帧进行处理,得到目标互动信息的关联图像帧的处理方式还可以包括其他方式,如,比较与目标互动信息所关联的多帧图像所包含的互动信息的数量,将包含互动信息的数量较多的一帧或多帧图像作为目标互动信息关联的关联图像帧;等等,本申请实施例对此不作限定。
由于目标互动信息的数量、目标互动信息所关联的关联图像帧的数量均会对第二封面图像的生成产生影响。下面根据目标互动信息的数量、目标互动信息所关联的关联图像帧的数量分别介绍几种生成第二封面图像的可能的实现方式:
在一种实现方式中,与目标信息频道的目标频道类型相关联的目标互动信息的数量为1个,且该目标互动信息关联的关联图像帧为1帧,则根据关联图像帧生成目标视频在目标信息频道中的第二封面图像的过程可包括:采用目标互动信息仅有的一帧关联图像帧,以及目标视频的视频内容生成第二封面图像。其中,目标视频的视频内容可包括但不限于:目标视频的标题、目标视频的点击量、目标视频的收藏量等等。
在另一种实现方式中,目标互动信息的数量为1,目标互动信息关联的关联图像帧为至少两帧图像;或者,目标互动信息的数量为大于等于2,各目标互动信息关联的关联图像帧为至少一帧。在这几种情况下,关联图像帧的数量均为多个;那么根据关联图像帧生成目标视频在目标信息频道中的第二封面图像的方式可包括但不限于以下任一种:
(1)根据目标互动信息关联的关联图像帧中的互动信息数量,得到目标图像帧,基于目标图像帧生成第二封面图像。具体地,获取每个关联图像帧所关联的第一互动信息集,每个第一互动信息集中均包括至少一个互动信息,且至少一个互动信息中包括目标互动信息;采用目标频道类型,分别对各个第一互动信息集进行信息过滤处理,得到每个关联图像帧的第二互动信息集;任一第二互动信息集中的互动信息均与目标频道类型关联;将互动信息数量最多的第二互动信息集所关联的关联图像帧作为目标图像帧,并根据目标图像帧生成第二封面图像。也就是说,首先,将各关联图像帧所包含的互动信息组成第一互动信息集,得到多个第一互动信息集;其次,根据目标信息频道的目标频道类型对每个第一互动信息集进行信息过滤处理,即去除第一互动信息集中与目标频道类型不关联的互动信息,得到每个关联图像帧的第二互动信息集,这使得第二互动信息集中的互动信息的类型均与目标频道类型相关联;最后,将多个第二互动信息集中,互动信息数量最多的第二互动信息集所对应的关联图像帧作为目标图像帧,并根据目标图像帧生成第二封面图像。
统计关联图像帧所包含的互动信息的数量的示意图可参见图9c,图9c示出了本申请一个示例性实施例提供的一种统计互动信息数量的示意图。如图9c所示,假设目标信息频道为搞笑信息频道,关联图像帧中包含有多个互动信息,多个互动信息中与搞笑频道的频道类型相关联的互动信息可包括:互动信息9011、互动信息9012、互动信息9013……。如果关联图像帧所包含的第二互动信息集中互动信息(即互动信息9011、互动信息9012、互动信息9013……)的数量,在目标互动信息的多帧关联图像帧中是最多的,则将关联图像帧作为目标图像901,并基于目标图像帧901生成第二封面图像,并用第二封面图像替换显示搞笑频道的频道页面中目标视频的第一封面图像。其中,第二封面图像替换显示第一封面图像的示意图可参见图9d,图9d示出了本申请一个示例性实施例提供的一种第二封面图像替换显示第一封面图像的示意图的示意图。
下面以具体数字为例简要阐述确定目标图像帧的过程。请参见表1,表1示出了目标互动信息的数量为1,目标互动信息关联的关联图像帧为3帧的情况下,确定目标图像帧的过程,见表1。
表1目标互动信息的数量为1,关联图像帧为3帧
Figure BDA0002802917240000211
Figure BDA0002802917240000221
如表1所示,第一关联图像帧所关联的第一互动信息集中互动信息的数量为9个,这9个互动信息中包含与目标信息频道的目标频道类型相关联的互动信息,也包括与目标信息频道的目标频道类型不相关联的互动信息;第二关联图像帧所关联的第一互动信息集中互动信息的数量为12个;第三关联图像帧所关联的第一互动信息集中互动信息的数量为17个。根据目标信息频道的目标频道类型对每个第一互动信息集进行信息过滤处理后,得到第一关联图像帧所关联的第二互动信息集中的互动信息的数量为8个,这8个互动信息与目标信息频道的目标频道类型均相关联;第二关联图像帧所关联的第二互动信息集中的互动信息的数量为7个;第三关联图像帧所关联的第二互动信息集中的互动信息的数量为3个;可知,第一关联图像帧所关联的第二互动信息集中的互动信息的数量>第二关联图像帧所关联的第二互动信息集中的互动信息的数量>第三关联图像帧所关联的第二互动信息集中的互动信息的数量,则确定第一关联图像帧作为目标图像帧。
再请参见表2,表2示出了目标互动信息的数量为2,每个目标互动信息关联的关联图像帧为2帧的情况下,确定目标图像帧的过程,见表2。
表2目标互动信息的数量为2,关联图像帧为4帧
Figure BDA0002802917240000222
如表2所示,第一目标互动信息所关联的,第一关联图像帧关联的第一互动信息集中互动信息的数量为12个,这12个互动信息中包含与目标信息频道的目标频道类型相关联的互动信息,也包括与目标信息频道的目标频道类型不相关联的互动信息;第二关联图像帧所关联的第一互动信息集中互动信息的数量为8个;第二目标互动信息所关联的,第三关联图像帧所关联的第一互动信息集中互动信息的数量为15个;第四关联图像帧所关联的第一互动信息集中互动信息的数量为10个。根据目标信息频道的目标频道类型对每个第一互动信息集进行信息过滤处理后,得到第一关联图像帧所关联的第二互动信息集中的互动信息的数量为7个,这7个互动信息与目标信息频道的目标频道类型均相关联;第二关联图像帧所关联的第二互动信息集中的互动信息的数量为6个;第三关联图像帧所关联的第二互动信息集中的互动信息的数量为8个;第四关联图像帧所关联的第二互动信息集中的互动信息的数量为9个;可知,第四关联图像帧所关联的第二互动信息集中的互动信息的数量>第三关联图像帧所关联的第二互动信息集中的互动信息的数量>第一关联图像帧所关联的第二互动信息集中的互动信息的数量>第二关联图像帧所关联的第二互动信息集中的互动信息的数量,则确定第四关联图像帧作为目标图像帧。
需要说明的是,有可能有两个及以上的关联图像帧的第二互动信息集中包含的互动信息的数量是相同的,在这种情况下,可从两个及以上的关联图像帧中选取某一帧图像作为目标图像帧,选取方式可包括但不限于:随机选取等;或者,将多个关联图像帧均作为目标图像帧,对多个目标图像帧采用下述的拼接方式拼接为第二封面图像;等等。
(2)对关联图像帧进行拼接处理,得到拼接图像,并基于拼接图像生成第二封面图像。
在一种实现方式中,将多个目标互动信息的多个关联图像帧进行图像拼接处理,得到拼接图像;根据拼接图像,生成目标视频在目标信息频道中的第二封面图像。请参见图10,图10示出了本申请一个示例性实施例提供的一种拼接图像的示意图;如图10所示,假设目标互动信息关联有第一关联图像帧1001和第二关联图像帧1002,将第一关联图像帧1001和第二关联图像帧1002进行左右拼接,可得到拼接图像1003,基于拼接图像1003可生成第二封面图像5012。其中,第一关联图像1001和第二关联图像1002除采用图10所示的左右拼接以外,还可以是上下拼接(即第一关联图像帧位于第二关联图像帧的上方(或下方)),对角拼接等等,本申请实施例对多帧关联图像帧的拼接方式不作限定。
在另一种实现方式中,先分别统计各个目标互动信息所关联的关联图像帧的总互动信息的数量,将总互动信息的数量最多的目标互动信息所关联的关联图像帧进行图像拼接处理,得到拼接图像,该拼接图像中包含总互动信息的数量最多的目标互动信息所关联的关联图像帧全部或部分的图像内容。下面以具体数字为例对拼接图像的确定过程进行介绍。请参见表3,表3示出了目标互动信息的数量为2,各目标互动信息关联的关联图像帧为2帧的情况下,确定拼接图像的过程,见表3。
表3目标互动信息的数量为2,关联图像帧为4帧
Figure BDA0002802917240000241
如表3所示,第一目标互动信息所关联的第一关联图像帧所包含的互动信息的数量为12,第二关联图像帧所包含的互动信息的数量为8,那么第一目标互动信息所关联的关联图像帧中互动信息的总数量为20;第二目标互动信息所关联的第三关联图像帧所包含的互动信息的数量为15,第四关联图像帧所包含的互动信息的数量为11,那么第一目标互动信息所关联的关联图像帧中互动信息的总数量为26,则确定将第一目标互动信息所关联的多帧图像(即第三关联图像帧和第四关联图像帧)进行图像拼接处理得到拼接图像。
综上述,本申请实施例中能够获取目标视频在目标时间段内的多个互动信息,并根据各互动信息的信息内容获取到与目标信息频道相关联的目标互动信息,再基于与目标互动信息关联的关联图像帧生成第二封面图像。上述过程中,第二封面图像是根据目标视频所包含的多帧图像中,与目标信息频道的目标频道类型相关联的图像帧生成的,这使得目标视频的封面图像的内容与目标信息频道的目标频道类型的关联度高,提升目标视频的吸引力,提高目标视频的点击率。
上述详细阐述了本申请实施例的视频处理方法,为了便于更好地实施本申请实施例的上述方案,相应地,下面提供了本申请实施例的装置。
图11示出了本申请一个示例性实施例提供的一种视频处理装置的结构示意图;该视频处理装置可以用于是运行于终端中的一个计算机程序(包括程序代码),例如该视频处理装置可以是终端中的社交应用程序(如微信、QQ、微博等);该视频处理装置可以用于执行图7所示的方法实施例中的部分或全部步骤。请参见图11,该视频处理装置包括如下单元:
获取单元1101,用于获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的一帧或多帧图像相关联;目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
处理单元1102,用于根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息;目标互动信息的信息内容与目标信息频道的目标频道类型相关联,目标信息频道为一个或多个信息频道中的任一信息频道,且目标视频在目标信息频道中具有第一封面图像;
处理单元1102,还用于从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像,第二封面图像用于在显示目标信息频道的频道页面时,在频道页面中的目标视频的封面显示位置处,替换显示第一封面图像。
在一种实现方式中,关联图像帧的数量为多个;处理单元1102,具体用于:
获取每个关联图像帧所关联的第一互动信息集,每个第一互动信息集中均包括一个或多个互动信息,且一个或多个互动信息中包括目标互动信息;
采用目标频道类型,分别为各个第一互动信息集进行信息过滤处理,得到每个关联图像帧的第二互动信息集;任一第二互动信息集中的互动信息均与目标频道类型相关联;
将互动信息数量最多的第二互动信息集所关联的关联图像帧作为目标图像帧,并根据目标图像帧生成第二封面图像。、
在一种实现方式中,关联图像帧的数量为多个;处理单元1102,具体用于:
对多个关联图像帧进行图像拼接处理,得到拼接图像;
根据拼接图像,生成目标视频在目标信息频道中的第二封面图像。
在一种实现方式中,目标互动信息关联有至少两帧图像;处理单元1102,具体用于:
从目标视频中获取与目标互动信息关联的至少两帧图像;
根据获取到的各帧图像在目标视频中的播放时间点,从至少两帧图像中选取播放时间点最早的图像帧作为目标互动信息关联的关联图像帧。
在一种实现方式中,处理单元1102,具体用于:
根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量,并根据目标信息频道的类型标识生成基准向量;
根据信息向量和基准向量之间的相似度,从各个互动信息中筛选出一个或多个候选互动信息,相似度用于指示互动信息和信息频道的频道类型之间的关联度;
从一个或多个候选互动信息中选取出目标互动信息。
在一种实现方式中,处理单元1102,具体用于:
对参考互动信息进行分词处理,得到至少两个词,参考互动信息为多个互动信息中的任一互动信息;
根据每个词的特征信息计算每个词的词向量,并采用每个词的词向量生成参考互动信息的信息向量。
在一种实现方式中,处理单元1102,具体用于:
调用信息分类模型根据各个互动信息的信息内容对各个互动信息进行频道分类处理,得到各个互动信息的分类结果,任一互动信息的分类结果用于指示任一互动信息所关联的频道类型;
根据各个互动信息的分类结果,从多个互动信息中选取一个或多个候选互动信息;每个候选互动信息的分类结果所指示的频道类型为目标频道的目标频道类型;
从一个或多个候选互动信息中选取出目标互动信息。
在一种实现方式中,处理单元1102,具体用于:
获取与目标信息频道对应的目标热点文本库,目标热点文本库中包括一个或多个与目标频道类型相关联的热点文本;
遍历一个或多个候选互动信息,并采用当前遍历的候选互动信息对目标热点文本库进行文本命中检测;
若当前遍历的候选互动信息命中目标热点文本库,则将当前遍历的候选互动信息作为目标互动信息。
在一种实现方式中,第一封面图像包括以下任一种:
目标视频在上传至信息流应用的过程中,由用户指定的图像;
采用封面选取策略从目标视频中选取的一帧图像,封面选取策略用于指示:从目标视频中选取第一帧图像作为封面图像,或者从目标视频中随机选取一帧图像作为封面图像,或者从目标视频中选取图像内容与目标频道类型相关联的图像作为封面图像;
根据目标识破在历史时间段内的多个历史互动信息和目标信息频道的目标频道类型生成的图像,历史时间段的结束时间早于目标时间段的开始时间。
根据本申请的一个实施例,图11所示的视频处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,该视频处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图7所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图11中所示的视频处理装置,以及来实现本申请实施例的视频处理方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本申请实施例中,获取单元1101能够获取目标视频在目标时间段内的多个互动信息;处理单元1102根据各互动信息的信息内容获取到与目标信息频道相关联的目标互动信息,再基于与目标互动信息关联的关联图像帧生成第二封面图像。上述过程中,第二封面图像是根据目标视频所包含的多帧图像中,与目标信息频道的目标频道类型相关联的图像帧生成的,这使得目标视频的封面图像的内容与目标信息频道的目标频道类型的关联度高,提升目标视频的吸引力,提高目标视频的点击率。
图12示出了本申请一个示例性实施例提供的另一种视频处理装置的结构示意图;该视频处理装置可以用于是运行于终端中的一个计算机程序(包括程序代码),例如该视频处理装置可以是终端中的社交应用程序(如微信、QQ、微博等);该视频处理装置可以用于执行图2所示的方法实施例中的部分或全部步骤。请参见图12,该视频处理装置包括如下单元:
显示单元1201,用于在信息流应用中的目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第一封面图像;
处理单元1202,用于当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像;第二封面图像是根据目标视频在目标时间段内的多个互动信息和目标信息频道的目标频道类型生成的。
在一种实现方式中,处理单元1202,具体用于:
当存在第二封面图像、且当前显示的用户页面为目标信息频道的频道页面时,在目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像。
在一种实现方式中,在目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像的步骤,是在检测到刷新操作后执行的;
刷新操作包括以下任一种:针对目标信息频道的频道页面中的刷新控件的触发操作,在目标信息频道的频道页面中输入页面刷新手势的操作,或者针对目标信息频道的频道页面中的空白区域的触发操作。
在一种实现方式中,处理单元1202,具体用于:
当存在第二封面图像、且当前显示的用户页面不为目标信息频道的频道页面时,响应于针对目标信息频道的频道页面的显示触发操作,显示目标信息频道的频道页面;
在目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第二封面图像。
在一种实现方式中,目标视频被发布于信息流应用的一个或多个信息频道中,目标信息频道为一个或多个信息频道中的任一信息频道;
目标信息频道的频道页面属于信息流应用的服务界面;服务界面还包括:用于切换至第一频道的切换组件,第一频道为所述至少一个信息频道中除目标信息频道以外的任一信息频道;处理单元1202,还用于:
当切换组件被触发时,显示第一频道的频道页面,并在第一频道的频道页面中的目标视频的封面显示位置处,显示目标视频的第三封面图像,第三封面图像是根据目标视频的互动信息和第一频道页面的频道类型确定的。
根据本申请的一个实施例,图12所示的视频处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,该视频处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图12中所示的视频处理装置,以及来实现本申请实施例的视频处理方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本申请实施例中,在目标视频存在第二封面图像时,可自动将频道页面中目标视频的第一封面图像切换显示为第二封面图像,其中,第二封面图像是基于目标视频的互动信息和目标信息频道的目标频道类型生成的,提高第二封面图像与目标信息频道的目标频道类型的关联度,这使得目标视频在目标信息频道中展现与目标频道类型较高的封面图像,提升目标视频的吸引力,提高目标视频的点击率。
图13示出了本申请一个示例性实施例提供的一种视频处理设备的结构示意图。请参见图13,该视频处理设备,包括处理器1301、通信接口1302以及计算机可读存储介质1303。其中,处理器1301、通信接口1302以及计算机可读存储介质1303可通过总线或者其它方式连接。其中,通信接口1302用于接收和发送数据。计算机可读存储介质1303可以存储在视频处理设备的存储器中,计算机可读存储介质1303用于存储计算机程序,计算机程序包括程序指令,处理器1301用于执行计算机可读存储介质1303存储的程序指令。处理器1301(或称CPU(Central Processing Unit,中央处理器))是视频处理设备的计算核心以及控制核心,其适于实现一条或多条指令,具体适于加载并执行一条或多条指令从而实现相应方法流程或相应功能。
本申请实施例还提供了一种计算机可读存储介质(Memory),计算机可读存储介质是视频处理设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机可读存储介质既可以包括视频处理设备中的内置存储介质,当然也可以包括视频处理设备所支持的扩展存储介质。计算机可读存储介质提供存储空间,该存储空间存储了视频处理设备的处理系统。并且,在该存储空间中还存放了适于被处理器1301加载并执行的一条或多条的指令,这些指令可以是一个或多个的计算机程序(包括程序代码)。需要说明的是,此处的计算机可读存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatilememory),例如至少一个磁盘存储器;可选的,还可以是至少一个位于远离前述处理器的计算机可读存储介质。
在一个实施例中,该视频处理设备可以是前述实施例提到的终端或服务器;该计算机可读存储介质中存储有一条或多条指令;由处理器1301加载并执行计算机可读存储介质中存放的一条或多条指令,以实现上述视频处理方法实施例中的相应步骤;具体实现中,计算机可读存储介质中的一条或多条指令由处理器1301加载并执行如下步骤:
获取目标视频在目标时间段内的多个互动信息,每个互动信息与目标视频中的一帧或多帧图像相关联;目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息;目标互动信息的信息内容与目标信息频道的目标频道类型相关联,目标信息频道为一个或多个信息频道中的任一信息频道,且目标视频在目标信息频道中具有第一封面图像;
从目标视频中获取与目标互动信息关联的关联图像帧,并根据关联图像帧生成目标视频在目标信息频道中的第二封面图像,第二封面图像用于在显示目标信息频道的频道页面时,在频道页面中的目标视频的封面显示位置处,替换显示第一封面图像。
在一种实现方式中,关联图像帧的数量为多个;计算机可读存储介质中的一条或多条指令由处理器1301加载并在根据关联图像帧生成目标视频在目标信息频道中的第二封面图像时,具体执行如下步骤:
获取每个关联图像帧所关联的第一互动信息集,每个第一互动信息集中均包括一个或多个互动信息,且一个或多个互动信息中包括目标互动信息;
采用目标频道类型,分别对各个第一互动信息集进行信息过滤处理,得到每个关联图像帧的第二互动信息集;任一第二互动信息集中的互动信息均与目标频道类型关联;
将互动信息数量最多的第二互动信息集所关联的关联图像帧作为目标图像帧,并根据目标图像帧生成第二封面图像。
在一种实现方式中,关联图像帧的数量为多个;计算机可读存储介质中的一条或多条指令由处理器1301加载并在根据关联图像帧生成目标视频在目标信息频道中的第二封面图像时,具体执行如下步骤:
对多个关联图像帧进行图像拼接处理,得到拼接图像;
根据拼接图像,生成目标视频在目标信息频道中的第二封面图像。
在一种实现方式中,目标互动信息关联有至少两帧图像;计算机可读存储介质中的一条或多条指令由处理器1301加载并从目标视频中获取与目标互动信息关联的关联图像帧时,具体执行如下步骤:
从目标视频中获取与目标互动信息关联的至少两帧图像;
根据获取到的各帧图像在目标视频中的播放时间点,从至少两帧图像中选取播放时间点最早的图像帧作为目标互动信息关联的关联图像帧。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并在根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息时,具体执行如下步骤:
根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量,并根据目标信息频道的类型标识生成基准向量;
根据信息向量和基准向量之间的相似度,从各个互动信息中筛选出一个或多个候选互动信息,相似度用于指示互动信息和信息频道的频道类型之间的关联度;
从一个或多个候选互动信息中选取出目标互动信息。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并在根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量时,具体执行如下步骤:
对参考互动信息进行分词处理,得到至少两个词,参考互动信息为多个互动信息中的任一互动信息;
根据每个词的特征信息计算每个词的词向量,并采用每个词的词向量生成参考互动信息的信息向量。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并在根据各个互动信息的信息内容,从多个互动信息中获取目标互动信息时,具体执行如下步骤:
调用信息分类模型根据各个互动信息的信息内容对各个互动信息进行频道分类处理,得到各个互动信息的分类结果,任一互动信息的分类结果用于指示任一互动信息所关联的频道类型;
根据各个互动信息的分类结果,从多个互动信息中选取一个或多个候选互动信息;每个候选互动信息的分类结果所指示的频道类型为目标信息频道的目标频道类型;
从一个或多个候选互动信息中选取出目标互动信息。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并在从一个或多个候选互动信息中选取出目标互动信息时,具体执行如下步骤:
获取与目标信息频道对应的目标热点文本库,目标热点文本库中包括一个或多个与目标频道类型相关联的热点文本;
遍历一个或多个候选互动信息,并采用当前遍历的候选互动信息对目标热点文本库进行文本命中检测;
若当前遍历的候选互动信息命中目标热点文本库,则将当前遍历的候选互动信息作为目标互动信息。
在一种实现方式中,第一封面图像包括以下任一种:
目标视频在上传至述信息流应用的过程中,由用户指定的图像;
采用封面选取策略从目标视频中选取的一帧图像,封面选取策略用于指示:从目标视频中选取第一帧图像作为封面图像,或者从目标视频中随机选取一帧图像作为封面图像,或者从目标视频中选取图像内容与目标频道类型相关联的图像作为封面图像;
根据目标视频在历史时间段内的多个历史互动信息和目标信息频道的目标频道类型生成的图像,历史时间段的结束时间早于目标时间段的开始时间。
在另一个实施例中,该视频处理设备可以是前述实施例提到的终端;该计算机可读存储介质中存储有一条或多条指令;由处理器1301加载并执行计算机可读存储介质中存放的一条或多条指令,以实现上述视频处理方法实施例中的相应步骤;具体实现中,计算机可读存储介质中的一条或多条指令由处理器1301加载并执行如下步骤:
在信息流应用中的目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第一封面图像;
当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像;第二封面图像是根据目标视频在目标时间段内的多个互动信息和目标信息频道的目标频道类型生成的。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像时,具体执行如下步骤:
当存在第二封面图像、且当前显示的用户页面为目标信息频道的频道页面时,在目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像。
在一种实现方式中,在目标视频的封面显示位置处采用第二封面图像替换显示第一封面图像的步骤,是在检测到刷新操作后执行的;
刷新操作包括以下任一种:针对目标信息频道的频道页面中的刷新控件的触发操作,在目标信息频道的频道页面中输入页面刷新手势的操作,或者针对目标信息频道的频道页面中的空白区域的触发操作。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1301加载并当目标视频存在第二封面图像时,在目标视频的封面显示位置处显示第二封面图像时,具体执行如下步骤:
当存在第二封面图像、且当前显示的用户页面不为目标信息频道的频道页面时,响应于针对目标信息频道的频道页面的显示触发操作,显示目标信息频道的频道页面;
在目标信息频道的频道页面中,目标视频的封面显示位置处显示目标视频的第二封面图像。
在一种实现方式中,目标视频被发布于信息流应用的一个或多个信息频道中,述目标信息频道为一个或多个信息频道中的任一信息频道;
目标信息频道的频道页面属于信息流应用的服务界面,服务界面还包括:用于切换至第一频道的切换组件,第一频道为至少一个信息频道中除目标信息频道以外的任一信息频道;计算机可读存储介质中的一条或多条指令由处理器1301加载并且还用于执行如下步骤:
当切换组件被触发时,显示第一频道的频道页面,并在第一频道的频道页面中的目标视频的封面显示位置处,显示目标视频的第三封面图像,第三封面图像是根据目标视频的互动信息和第一频道页面的频道类型确定的。
本申请实施例中,能够获取目标视频在目标时间段内的多个互动信息;根据各互动信息的信息内容获取到与目标信息频道相关联的目标互动信息,再基于与目标互动信息关联的关联图像帧生成第二封面图像。上述过程中,第二封面图像是根据目标视频所包含的多帧图像中,与目标信息频道的目标频道类型相关联的图像帧生成的,这使得目标视频的封面图像的内容与目标信息频道的目标频道类型的关联度高,提升目标视频的吸引力,提高目标视频的点击率。另外,在目标视频存在第二封面图像时,可自动将频道页面中目标视频的第一封面图像切换显示为第二封面图像,其中,第二封面图像是基于目标视频的互动信息和目标信息频道的目标频道类型生成的,提高第二封面图像与目标信息频道的目标频道类型的关联度,这使得目标视频在目标信息频道中展现与目标频道类型较高的封面图像,提升目标视频的吸引力,提高目标视频的点击率。
本申请实施例还提供一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述视频处理方法。
本领域普通技术人员可以意识到,结合本申请中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用,使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程设备。计算机指令可以存储在计算机可读存储介质中,或者通过计算机可读存储介质进行传输。计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如,同轴电缆、光纤、数字用户线(DSL))或无线(例如,红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘(Solid State Disk,SSD))等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (15)

1.一种视频处理方法,其特征在于,包括:
获取目标视频在目标时间段内的多个互动信息,每个互动信息与所述目标视频中的一帧或多帧图像相关联;所述目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
根据各个互动信息的信息内容,从所述多个互动信息中获取目标互动信息;所述目标互动信息的信息内容与目标信息频道的目标频道类型相关联,所述目标信息频道为所述一个或多个信息频道中的任一信息频道,且所述目标视频在所述目标信息频道中具有第一封面图像;
从所述目标视频中获取与所述目标互动信息关联的关联图像帧,并根据所述关联图像帧生成所述目标视频在所述目标信息频道中的第二封面图像,所述第二封面图像用于在显示所述目标信息频道的频道页面时,在所述频道页面中的目标视频的封面显示位置处,替换显示所述第一封面图像。
2.如权利要求1所述的方法,其特征在于,所述关联图像帧的数量为多个,
所述根据所述关联图像帧生成所述目标视频在所述目标信息频道中的第二封面图像,包括:
获取每个关联图像帧所关联的第一互动信息集,每个第一互动信息集中均包括一个或多个互动信息,且所述一个或多个互动信息中包括所述目标互动信息;
采用所述目标频道类型,分别对各个第一互动信息集进行信息过滤处理,得到所述每个关联图像帧的第二互动信息集;任一第二互动信息集中的互动信息均与所述目标频道类型关联;
将互动信息数量最多的第二互动信息集所关联的关联图像帧作为目标图像帧,并根据所述目标图像帧生成所述第二封面图像。
3.如权利要求1所述的方法,其特征在于,所述关联图像帧的数量为多个,所述根据所述关联图像帧生成所述目标视频在所述目标信息频道中的第二封面图像,包括:
对多个关联图像帧进行图像拼接处理,得到拼接图像;
根据所述拼接图像,生成所述目标视频在所述目标信息频道中的第二封面图像。
4.如权利要求1所述的方法,其特征在于,所述目标互动信息关联有至少两帧图像;所述从所述目标视频中获取与所述目标互动信息关联的关联图像帧,包括:
从所述目标视频中获取与所述目标互动信息关联的至少两帧图像;
根据获取到的各帧图像在所述目标视频中的播放时间点,从所述至少两帧图像中选取播放时间点最早的图像帧作为所述目标互动信息关联的关联图像帧。
5.如权利要求1所述的方法,其特征在于,所述根据各个互动信息的信息内容,从所述多个互动信息中获取目标互动信息,包括:
根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量,并根据所述目标信息频道的类型标识生成基准向量;
根据所述信息向量和所述基准向量之间的相似度,从所述各个互动信息中筛选出一个或多个候选互动信息,所述相似度用于指示互动信息和所述信息频道的频道类型之间的关联度;
从所述一个或多个候选互动信息中选取出所述目标互动信息。
6.如权利要求5所述的方法,其特征在于,所述根据各个互动信息的信息内容对各个互动信息进行特征处理得到各个互动信息的信息向量,包括:
对参考互动信息进行分词处理,得到至少两个词,所述参考互动信息为所述多个互动信息中的任一互动信息;
根据每个词的特征信息计算每个词的词向量,并采用每个词的词向量生成所述参考互动信息的信息向量。
7.如权利要求1所述的方法,其特征在于,所述根据各个互动信息的信息内容,从所述多个互动信息中获取目标互动信息,包括:
调用信息分类模型根据各个互动信息的信息内容对所述各个互动信息进行频道分类处理,得到所述各个互动信息的分类结果,任一互动信息的分类结果用于指示所述任一互动信息所关联的频道类型;
根据所述各个互动信息的分类结果,从所述多个互动信息中选取一个或多个候选互动信息;每个候选互动信息的分类结果所指示的频道类型为目标信息频道的目标频道类型;
从所述一个或多个候选互动信息中选取出所述目标互动信息。
8.如权利要求5或7所述的方法,其特征在于,所述从所述一个或多个候选互动信息中选取出所述目标互动信息,包括:
获取与所述目标信息频道对应的目标热点文本库,所述目标热点文本库中包括一个或多个与所述目标频道类型相关联的热点文本;
遍历所述一个或多个候选互动信息,并采用当前遍历的候选互动信息对所述目标热点文本库进行文本命中检测;
若所述当前遍历的候选互动信息命中所述目标热点文本库,则将所述当前遍历的候选互动信息作为目标互动信息。
9.如权利要求1所述的方法,其特征在于,所述第一封面图像包括以下任一种:
所述目标视频在上传至所述信息流应用的过程中,由用户指定的图像;
采用封面选取策略从所述目标视频中选取的一帧图像,所述封面选取策略用于指示:从所述目标视频中选取第一帧图像作为封面图像,或者从所述目标视频中随机选取一帧图像作为封面图像,或者从所述目标视频中选取图像内容与所述目标频道类型相关联的图像作为封面图像;
根据所述目标视频在历史时间段内的多个历史互动信息和所述目标信息频道的目标频道类型生成的图像,所述历史时间段的结束时间早于所述目标时间段的开始时间。
10.一种视频处理方法,其特征在于,包括:
在信息流应用中的目标信息频道的频道页面中,目标视频的封面显示位置处显示所述目标视频的第一封面图像;
当所述目标视频存在第二封面图像时,在所述目标视频的封面显示位置处显示所述第二封面图像;所述第二封面图像是根据所述目标视频在目标时间段内的多个互动信息和所述目标信息频道的目标频道类型生成的。
11.如权利要求10所述的方法,其特征在于,所述当所述目标视频存在第二封面图像时,在所述目标视频的封面显示位置处显示所述第二封面图像,包括:
当存在所述第二封面图像、且当前显示的用户页面为所述目标信息频道的频道页面时,在所述目标视频的封面显示位置处采用所述第二封面图像替换显示所述第一封面图像。
12.如权利要求11所述的方法,其特征在于,在所述目标视频的封面显示位置处采用所述第二封面图像替换显示所述第一封面图像的步骤,是在检测到刷新操作后执行的;
所述刷新操作包括以下任一种:针对所述目标信息频道的频道页面中的刷新控件的触发操作,在所述目标信息频道的频道页面中输入页面刷新手势的操作,或者针对所述目标信息频道的频道页面中的空白区域的触发操作。
13.如权利要求10所述的方法,其特征在于,所述当所述目标视频存在第二封面图像时,在所述目标视频的封面显示位置处显示所述第二封面图像,包括:
当存在所述第二封面图像、且当前显示的用户页面不为所述目标信息频道的频道页面时,响应于针对所述目标信息频道的频道页面的显示触发操作,显示所述目标信息频道的频道页面;
在所述目标信息频道的频道页面中,所述目标视频的封面显示位置处显示所述目标视频的第二封面图像。
14.如权利要求10所述的方法,其特征在于,所述目标视频被发布于所述信息流应用的一个或多个信息频道中,所述目标信息频道为所述一个或多个信息频道中的任一信息频道;
所述目标信息频道的频道页面属于所述信息流应用的服务界面;所述服务界面还包括:用于切换至第一频道的切换组件,所述第一频道为所述至少一个信息频道中除所述目标信息频道以外的任一信息频道;
所述方法还包括:
当所述切换组件被触发时,显示所述第一频道的频道页面,并在所述第一频道的频道页面中的所述目标视频的封面显示位置处,显示所述目标视频的第三封面图像,所述第三封面图像是根据所述目标视频的互动信息和所述第一频道页面的频道类型确定的。
15.一种视频处理装置,其特征在于,包括:
获取单元,用于获取目标视频在目标时间段内的多个互动信息,每个互动信息与所述目标视频中的一帧或多帧图像相关联;所述目标视频是在信息流应用内的一个或多个信息频道中发布的任一视频,各信息频道对应不同的频道类型;
处理单元,用于根据各个互动信息的信息内容,从所述多个互动信息中获取目标互动信息;所述目标互动信息的信息内容与目标信息频道的目标频道类型相关联,所述目标信息频道为所述一个或多个信息频道中的任一信息频道,且所述目标视频在所述目标信息频道中具有第一封面图像;
所述处理单元,还用于从所述目标视频中获取与所述目标互动信息关联的关联图像帧,并根据所述关联图像帧生成所述目标视频在所述目标信息频道中的第二封面图像,所述第二封面图像用于在显示所述目标信息频道的频道页面时,在所述频道页面中的目标视频的封面显示位置处,替换显示所述第一封面图像。
CN202011357183.4A 2020-11-27 2020-11-27 一种视频处理方法、装置、设备及介质 Active CN112533050B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011357183.4A CN112533050B (zh) 2020-11-27 2020-11-27 一种视频处理方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011357183.4A CN112533050B (zh) 2020-11-27 2020-11-27 一种视频处理方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN112533050A true CN112533050A (zh) 2021-03-19
CN112533050B CN112533050B (zh) 2023-11-03

Family

ID=74994230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011357183.4A Active CN112533050B (zh) 2020-11-27 2020-11-27 一种视频处理方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN112533050B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113835813A (zh) * 2021-09-26 2021-12-24 乐美科技股份私人有限公司 一种页面显示方法及装置
CN114827644A (zh) * 2021-12-29 2022-07-29 广州方硅信息技术有限公司 基于用户匹配信息的直播互动方法、装置及计算机设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
CN105103105A (zh) * 2012-12-28 2015-11-25 脸谱公司 社交封面信息流界面
CN109996091A (zh) * 2019-03-28 2019-07-09 苏州八叉树智能科技有限公司 生成视频封面的方法、装置、电子设备和计算机可读存储介质
CN110366027A (zh) * 2019-08-29 2019-10-22 维沃移动通信有限公司 一种视频管理方法及终端设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
CN105103105A (zh) * 2012-12-28 2015-11-25 脸谱公司 社交封面信息流界面
CN109996091A (zh) * 2019-03-28 2019-07-09 苏州八叉树智能科技有限公司 生成视频封面的方法、装置、电子设备和计算机可读存储介质
CN110366027A (zh) * 2019-08-29 2019-10-22 维沃移动通信有限公司 一种视频管理方法及终端设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
别昊;: "制作刷屏级的爆款短视频 封面设置篇", 中国眼镜科技杂志, no. 08 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113835813A (zh) * 2021-09-26 2021-12-24 乐美科技股份私人有限公司 一种页面显示方法及装置
CN114827644A (zh) * 2021-12-29 2022-07-29 广州方硅信息技术有限公司 基于用户匹配信息的直播互动方法、装置及计算机设备

Also Published As

Publication number Publication date
CN112533050B (zh) 2023-11-03

Similar Documents

Publication Publication Date Title
CN111143610B (zh) 一种内容推荐方法、装置、电子设备和存储介质
JP7222022B2 (ja) 情報検索方法、装置、設備、記憶媒体、及びプログラム
US11290775B2 (en) Computerized system and method for automatically detecting and rendering highlights from streaming videos
US10645142B2 (en) Video keyframes display on online social networks
US9396763B2 (en) Computer-assisted collaborative tagging of video content for indexing and table of contents generation
WO2016109450A1 (en) Selecting a high-valence representative image
KR20190011829A (ko) 컴퓨터 실행 방법, 시스템 및 컴퓨터 판독 가능 매체
KR20220145424A (ko) 검색/생성된 디지털 미디어 파일을 기반으로 잠재적 관련성에 대한 주제 예측
US11126682B1 (en) Hyperlink based multimedia processing
RU2714594C1 (ru) Способ и система определения параметра релевантность для элементов содержимого
CN112541120B (zh) 推荐评论生成方法、装置、设备和介质
CN112533050B (zh) 一种视频处理方法、装置、设备及介质
Jia et al. Multi-modal learning for video recommendation based on mobile application usage
CN112040339A (zh) 一种视频数据的制作方法、装置、计算机设备和存储介质
CN111954087B (zh) 视频中图像的截取方法和装置、存储介质和电子设备
US20140006318A1 (en) Collecting, discovering, and/or sharing media objects
US20240040210A1 (en) Systems and methods for providing content relevant to a quotation
CN111597446B (zh) 基于人工智能的内容推送方法、装置、服务器和存储介质
Roy et al. Social multimedia signals
CN115152242A (zh) 用于选择和显示的视频的机器学习管理
EP3296890A1 (en) Video keyframes display on online social networks
CN112533032B (zh) 一种视频数据处理方法、装置及存储介质
CN114090848A (zh) 数据推荐及分类方法、特征融合模型及电子设备
CN109756759B (zh) 一种弹幕信息推荐方法和装置
CN111611491A (zh) 搜索词推荐方法、装置、设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40040531

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant