CN112532998A - 抽取视频帧的方法、装置、设备和可读存储介质 - Google Patents

抽取视频帧的方法、装置、设备和可读存储介质 Download PDF

Info

Publication number
CN112532998A
CN112532998A CN202011384682.2A CN202011384682A CN112532998A CN 112532998 A CN112532998 A CN 112532998A CN 202011384682 A CN202011384682 A CN 202011384682A CN 112532998 A CN112532998 A CN 112532998A
Authority
CN
China
Prior art keywords
video
video frames
extracted
pixel
video frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011384682.2A
Other languages
English (en)
Other versions
CN112532998B (zh
Inventor
张安娜
王磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Media Technology Beijing Co Ltd
Original Assignee
Netease Media Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netease Media Technology Beijing Co Ltd filed Critical Netease Media Technology Beijing Co Ltd
Priority to CN202011384682.2A priority Critical patent/CN112532998B/zh
Publication of CN112532998A publication Critical patent/CN112532998A/zh
Application granted granted Critical
Publication of CN112532998B publication Critical patent/CN112532998B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明的实施方式提供了一种抽取视频帧的方法。该视频抽取方法包括:获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧;确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值;以及根据针对每个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。通过根据相邻视频帧之间的像素差异值进行视频帧的抽取,可以实现不同场景中视频帧的快速抽取和定位。因此,本发明的方法使得抽取到的视频帧更全面,从而显著地提高了审核人员对待抽取视频的审核效率,为用户带来了更好的体验。此外,本发明的实施方式提供了一种抽取视频帧的装置、设备和可读存储介质。

Description

抽取视频帧的方法、装置、设备和可读存储介质
技术领域
本发明的实施方式涉及视频处理领域,更具体地,本发明的实施方式涉及抽取视频帧的方法、装置、设备和可读存储介质。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
为了便于对视频传输或处理,通常会将视频按照标准格式规范进行压缩。压缩视频时,需要从视频中抽取关键帧。再者,在对视频进行质检时,通常也会从视频中抽取关键帧,通过对关键帧的质检来实现对整个视频的质检。
关键帧抽取的质量会影响对压缩后视频解压得到的视频的质量,也会影响视频质检结果的准确性。
目前,已经出现一些关键帧的抽取方法,该些方法通常采用均匀抽取或抽取指定时间的帧的方法,存在抽取的视频帧难以体现视频整体的内容。该些方法还有采用将视频分为“活动时间片”、“静止时间片”和“间歇活动时间片”三种类型,这三种类型中,活动时间片包含有较多有用信息,可以用较小的间隔抽帧;静止时间片中包含的有用信息很少,可以大间隔抽帧;而间歇活动时间片中可能包含有重要信息,抽帧要尽量抽取含有活动对象的帧。该方法虽然能够在一定程度上使得抽取的视频帧能够体现视频整体的内容,但需要对视频进行两次处理,存在关键帧抽取速度慢且适用场景有限的技术问题。
发明内容
为此,非常需要一种改进的抽取视频帧的方法,以在提高抽取的视频帧的准确性和完整性的同时,提高视频帧的抽取效率。
在本发明实施方式的第一方面中,提供了一种抽取视频帧的方法,包括:获取待抽取视频,该待抽取视频包括按播放顺序排列等多个视频帧;确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值;以及根据针对每个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。
在本发明的一个实施例中,该每个视频帧包括多个像素点,确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值包括:确定每个视频帧中每个像素点的像素值;确定每个像素点与对应的相邻视频帧中对应像素点之间的像素差异值,作为针对每个像素点的像素差异值;以及根据针对多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值。
在本发明的另一实施例中,该从待抽取视频中抽取第一预定数量的视频帧包括:确定多个视频帧中像素差异值大于预设差异值的视频帧,得到第一视频帧;根据第一视频帧的播放时间,从待抽取视频中抽取第一预定数量的视频帧,其中,第一预定数量的视频帧包括至少部分的第一视频帧。
在本发明的又一个实施例中,该从待抽取视频中抽取第一预定数量的视频帧包括在第一视频帧的数量小于第一预定数量的情况下:根据待抽取视频帧的播放时长,将待抽取视频划分为第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第一预定数量的视频帧包括第一视频帧,且第一视频帧与第二视频帧的数量之和为第一预定数量。
在本发明的再一个实施例中,该从待抽取视频中抽取第一预定数量的视频帧包括在第一视频帧的数量大于等于第一预定数量的情况下:根据第一视频帧的播放时间,将第一视频帧均匀地划分至多个视频帧组;以及从每个视频帧组中抽取像素差异值较大的第二预定数量的视频帧,得到第一预定数量的视频帧,其中,视频帧组的数量与第二预定数量的乘积为第一预定数量。
在本发明的再一个实施例中,从待抽取视频中抽取第一预定数量的视频帧包括在第一视频帧的数量大于等于第三预定数量的情况下:根据第一视频帧的播放时间,将第一视频帧均匀地划分至第三预定数量的视频帧组;针对第三预定数量的视频帧组中的每个视频帧组:在每个视频帧组中第一视频帧的数量大于等于第二预定数量的情况下,从每个视频帧组中抽取像素差异值较大的第二预定数量的第一视频帧;在每个视频帧组中第一视频帧的数量小于第二预定数量的情况下,从每个视频帧组中抽取所有第一视频帧;在从第三预定数量个视频帧组中抽取的第一视频帧的数量小于第一预定数量的情况下:根据待抽取视频的播放时长,将待抽取视频划分为第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第二预定数量与第三预定数量的乘积为第一预定数量;从第三预定数量个视频帧组中抽取的第一视频帧的数量与第二视频帧的数量之和为第一预定数量。
在本发明的再一个实施例中,该抽取视频帧的方法还包括从待抽取视频中抽取第一预定数量的视频帧之后:在第一预定数量的视频帧中不包括多个视频帧中播放时间最早的首帧的情况下,从待抽取视频中抽取首帧;并且/或者在第一预定数量的视频帧中不包括多个视频帧中播放时间最晚的尾帧的情况下,从待抽取视频中抽取尾帧。
在本发明的再一个实施例中,根据针对多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值包括:确定多个像素差异值的平均值为针对每个视频帧的像素差异值。
在本发明的再一个实施例中,根据针对多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值包括:自预定起始点开始,从每个视频帧中获取相等大小的多个像素块,每个像素块包括至少两个像素点,多个像素块包括多个像素点中的部分像素点或全部像素点;以及确定针对多个像素块包括的像素点的像素差异值的平均值为针对每个视频帧的像素差异值。
在本发明的再一个实施例中,每个像素点的像素值包括R通道的像素值、G通道的像素值和B通道的像素值;确定每个像素点与对应的相邻视频帧中对应像素点之间的像素值差值包括:确定每个像素点与对应相邻像素点之间在R通道的像素值的差异值、G通道的像素值的差异值和B通道的像素值的差异值,得到三个差异值;以及确定三个差异值的绝对值的和为针对每个像素点的像素差异值。
在本发明实施方式的第二方面中,提供了一种抽取视频帧的装置,包括:视频获取模块,用于获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧;差异值确定模块,用于确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值;视频帧抽取模块,用于根据针对多个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。
在本发明的一个实施例中,该每个视频帧包括多个像素点,差异值确定模块包括:像素值确定子模块,用于确定每个视频帧中每个像素点的像素值;第一差异确定子模块,用于确定每个像素点与对应的相邻视频帧中对应像素点之间的像素值差值,作为针对每个像素点的像素差异值;以及第二差异确定子模块,用于根据针对多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值。
在本发明的另一实施例中,视频帧抽取模块包括:第一抽取子模块,用于确定多个视频帧中像素差异值大于预设差异值的视频帧,得到第一视频帧;以及第二抽取子模块,用于根据第一视频帧的播放时间,从待抽视频中抽取第一预定数量的视频帧,其中,第一预定数量的视频帧包括至少部分的第一视频帧。
在本发明的又一实施例中,该第二抽取子模块用于在第一视频帧的数量小于第一预定数量的情况下执行以下操作:根据待抽取视频的播放时长,将待抽取视频划分至第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第一预定数量的视频帧包括第一视频帧,且第一视频帧与第二视频帧的数量之和为第一预定数量。
在本发明的再一实施例中,该第二抽取子模块用于在第一视频帧的数量大于等于第一预定数量的情况下执行以下操作:根据第一视频帧的播放时间,将第一视频帧均匀地划分至多个视频帧组;以及从每个视频帧组中抽取像素差异值较大的第二预定数量的视频帧,得到第一预定数量的视频帧,其中,视频帧组的数量与第二预定数量的乘积为第一预定数量。
在本发明的再一实施例中,该第二抽取子模块用于在第一视频帧的数量大于等于第三预定数量的情况下执行以下操作:根据第一视频帧的播放时间,将第一视频帧均匀地划分至第三预定数量的视频帧组;针对第三预定数量的视频帧组中的每个视频帧组:在每个视频帧组中第一视频帧的数量大于等于第二预定数量的情况下,从每个视频帧组中抽取像素差异值较大的第二预定数量的第一视频帧;在每个视频帧组中第一视频帧的数量小于第二预定数量的情况下,从每个视频帧组中抽取所有第一视频帧;在从第三预定数量个视频帧组中抽取的第一视频帧的数量小于第一预定数量的情况下:根据待抽取视频的播放时长,将待抽取视频划分为第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第二预定数量与第三预定数量的乘积为第一预定数量;从第三预定数量个视频帧组中抽取的第一视频帧的数量与第二视频帧的数量之和为第一预定数量。
在本发明的再一实施例中,该抽取视频帧的装置还包括:首帧抽取模块,用于在第一预定数量的视频帧中不包括多个视频帧中播放时间最早的首帧的情况下,从待抽取视频中抽取首帧;并且/或者尾帧抽取模块,用于在第一预定数量的视频帧中不包括多个视频帧中播放时间最晚的尾帧的情况下,从待抽取视频中抽取尾帧。
在本发明的再一实施例中,第二差异确定子模块用于确定多个像素差异值的平均值为针对每个视频帧的像素差异值。
在本发明的再一实施例中,第二差异确定子模块包括:像素块获取单元,用于自预定起始点开始,从每个视频帧中获取相等大小的多个像素块,每个像素块包括至少两个像素点,多个像素块包括多个像素点中的部分像素点或全部像素点;以及差异确定模块,用于确定针对多个像素块包括的像素点的像素差异值的平均值为针对每个视频帧的像素差异值。
在本发明的再一实施例中,每个像素点的像素值包括R通道的像素值、G通道的像素值和B通道的像素值;第一差异确定子模块包括:第一差异确定单元,用于确定每个像素点与对应相邻像素点之间在R通道的像素值的差异值、G通道的像素值的差异值和B通道的像素值的差异值,得到三个差异值;以及第二差异确定单元,用于确定三个差异值的绝对值的和为针对每个像素点的像素差异值。
在本发明实施方式的第三方面中,提供了一种计算设备,包括:一个或多个存储器,存储有可执行指令;以及一个或多个处理器,执行可执行指令,以实现本发明实施方式的第一方面提供的抽取视频帧的方法。
在本发明实施方式的第四方面中,提供了一种计算机可读存储介质,其上存储有可执行指令,该指令在被处理器执行时实现本发明实施方式的第一方面提供的抽取视频帧的方法。
根据本发明实施方式的抽取视频帧的方法和装置,可以根据两个相邻视频帧之间的像素差异值来从视频中抽取视频帧,而不是按时间或个数间隔抽帧,从而显著地提高抽取得到的视频帧的全面性,便于提高基于抽取的视频帧得到的压缩视频和质检结果的精准度,从而可以为用户带来更好的体验。
附图说明
通过参考附图阅读下文的详细描述,本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本发明的若干实施方式,其中:
图1示意性地示出了根据本发明实施方式的抽取视频帧的方法、装置、设备和可读存储介质的应用场景;
图2示意性地示出了根据本发明一实施例的抽取视频帧的方法的流程图;
图3示意性地示出了根据本发明一实施例的从待抽取视频中抽取第一预定数量的视频帧的流程图;
图4示意性地示出了根据本发明一实施例的从待抽取视频中抽取第一预定数量的视频帧的原理图;
图5示意性地示出了根据本发明一实施例的确定针对每个视频帧的像素差异值的原理图;
图6示意性地示出了根据本发明实施例的抽取视频帧的装置的结构框图;
图7示意性地示出了根据本发明实施方式的适于抽取视频帧的程序产品的示意图;以及
图8示意性地示出了根据本发明实施方式的适于抽取视频帧的计算设备的框图。
在附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明,而并非以任何方式限制本发明的范围。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道,本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
根据本发明的实施方式,提出了一种抽取视频帧的方法、介质、装置和计算设备。
在本文中,需要理解的是,所涉及的术语视频帧表示在视频某个时间点上的图像,抽取视频帧表示将视频某个时间点上的图像保存为图片。此外,附图中的任何元素数量均用于示例而非限制,以及任何命名都仅用于区分,而不具有任何限制含义。
下面参考本发明的若干代表性实施方式,详细阐释本发明的原理和精神。
发明概述
本发明人发现,现有的根据固定时间间隔或根据固定帧数间隔来抽取视频帧,往往会由于视频中不同视频段的图像差异不同,导致从图像差异大的视频段中抽取的视频帧数量较少,无法完整体现该视频段内容的问题。若采用将视频分为“活动时间片”、“静止时间片”和“间歇活动时间片”的方法来针对性地提取视频帧,则需要对视频进行两次处理,存在视频帧抽取效率低的问题。
为了兼顾抽取视频帧的全面性和抽取效率,本发明人发现,若根据两个相邻视频帧之间的差异值来抽取视频帧,则可以保证抽取的视频帧能够表征更为全面的内容,还可以提高视频帧的抽取效率。
在介绍了本发明的基本原理之后,下面具体介绍本发明的各种非限制性实施方式。
应用场景总览
首先参考图1,图1示意性地示出了根据本发明实施方式的抽取视频帧的方法、装置、设备和可读存储介质的应用场景。
如图1所示,该实施例的应用场景100包括终端设备101、102、103,网络104和服务器105。终端设备101、102、103可以通过网络104与服务器105交互。网络可以为局域网、广域网、移动互联网等。
终端设备101、102、103可以为具有视频播放功能的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。用户例如可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。
服务器105可以是提供各种服务的服务器,例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的请求等向终端设备发送视频。
示例性地,终端设备101、102、103可以从服务器105中获取待质检的视频,并通过从该视频中抽取视频帧,将视频帧展示给质检人员进行人工校验。
示例性地,终端设备101、102、103可以从拍摄到的视频中抽取视频帧。随后将抽取的视频帧作为关键帧对视频进行压缩,并将压缩后的视频通过网络104发送给服务器105,以供服务器105存储或者供其他终端设备调用。
示例性地,服务器105例如还可以具有处理功能,可以用于响应于终端设备发送的请求获取视频,并从视频中抽取视频帧。最后将抽取的视频帧发送给终端设备,以供用户通过终端设备对视频帧进行人工校验等。
需要说明的是,本发明实施例的抽取视频帧的方法可以由终端设备101、102、103执行,也可以由服务器105执行,或者部分步骤由终端设备执行,部分步骤由服务器执行。相应地,本发明实施例的抽取视频帧的装置可以设置在终端设备101、102、103中,或者可以设置在服务器105中,或者部分设置在终端设备中,部分设置在服务器中。
可以理解,图1中的终端设备、网络和服务器的类型和数目仅仅是示意性的。根据实现需要,可以具有任意类型和任意数目的终端设备、网络和服务器。
示例性方法
下面结合图1的应用场景,参考图2~6来描述根据本发明示例性实施方式的抽取视频帧的方法。需要注意的是,上述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施方式在此方面不受任何限制。相反,本发明的实施方式可以应用于适用的任何场景。
图2示意性地示出了根据本发明一实施例的抽取视频帧的方法的流程图。
如图2所示,该实施例的抽取视频帧的方法可以包括操作S210~操作S230。
在操作S210,获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧。
根据本发明的实施例,待抽取视频可以由视频拍摄设备拍摄得到。在获取待抽取视频时,可以从视频拍摄设备中获取,也可以从预先存储了视频的存储空间获取。
在操作S220,确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值。
根据本发明的实施例,每个视频帧为一个图像,每个图像由多个像素点构成。该操作可以根据两个视频帧之间各对应像素点的像素值差值来体现两个视频帧的像素差异。相应地,该操作S220可以先确定每个视频帧包括的多个像素点中各像素点的像素值。然后确定每个像素点与对应的相邻视频帧中对应像素点之间的像素差异值,以该像素差异值作为针对每个像素点的像素差异值。最后根据多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值。
示例性地,若每个视频帧包括m行n列的像素点。可以根据两个相邻的视频帧中,位于其中一个视频帧的第i行第j列的像素点的像素值与其中另一视频帧的第i行第j列的像素点的像素值的差值,作为针对其中另一视频帧的第i行第j列的像素点的像素差异值。其中,m、n均为自然数,i的取值为1至m之间的任一自然数,j的取值为1至n之间的任一自然数。通过改变i、j的取值,循环执行前述操作,可以得到针对每个视频帧中像素点的m*n个像素差异值。最终,可以将该m*n个像素差异值的绝对值的和作为针对每个视频帧的像素差异值。
示例性地,在得到每个视频帧包括的多个像素点的多个像素差异值后,该实施例还可以将多个像素差异值的绝对值的平均值作为针对每个视频帧的像素差异值。例如,在每个视频帧包括m行n列的像素点时,将得到的m*n个像素差异值的绝对值的平均值作为针对每个视频帧的像素差异值。
示例性地,在获取到待抽取视频后,可以采用多媒体视频处理工具FFmpeg(FastForward Mpeg)解码该待抽取视频,得到按播放顺序排列的多个视频帧,及多个视频帧中每个像素点的像素值。其中,FFmpeg是一套可以用来记录、转换数字音频、视频,并能将其转化为流的开源计算机程序。可以理解的是,上述确定每个像素点的像素值的方法仅作为示例以利于理解本申请,本申请例如还可以使用迭代器或指针的方法依次获取到各像素点的像素值。
可以理解的是,每个视频帧对应的相邻视频帧可以为多个视频帧中排在每个视频帧前一位的视频帧。此种情况下,对于待抽取视频中按播放顺序排在首位的视频帧,由于不存在对应的视频帧,因此,针对该排在首位的视频帧的像素差异值可以取预设值,该预设值可以根据实际需求进行设定。例如,该预设值可以取针对多个视频帧中除该排在首位的视频帧外其他视频帧的像素差异值的绝对值的平均值。
可以理解的是,每个视频帧对应的相邻视频帧也可以为多个视频帧中排在每个视频帧后一位的视频帧。此种情况下,对于待抽取视频中按播放顺序排在末尾的视频帧,由于不存在对应的视频帧,因此,针对该排在末尾的视频帧的像素差异值可以取预设值,该预设值可以根据实际需求进行设定。例如,该预设值可以取针对多个视频帧中除该排在末尾的视频帧外其他视频帧的像素差异值的绝对值的平均值。
在操作S230,根据针对每个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。
根据本发明的实施例,可以根据像素差异值,从待抽取视频中抽取所针对的像素差异值最大的第一预定数量的视频帧。
根据本发明的实施例,可以预先设定有差异值阈值,从待抽取视频中抽取所针对的像素差异值大于差异值阈值的视频帧。若抽取到的视频帧数量小于第一预定数量,则可以再从待抽取视频中随机抽取若干个视频帧,使得抽取得到的视频帧总量为第一预定数量。
根据本发明的实施例,通过设定第一预定数量,并从待抽取视频中抽取该第一预定数量的视频帧,可以保证抽取的视频帧的数量能够满足视频帧全面体现视频内容的要求。该第一预定数量可以根据待抽取视频的时长、拍摄待抽取视频的场景等灵活设定,本申请对此不作限定。
综上分析,本发明实施例通过根据两个相邻视频帧之间的像素差异值来从视频中抽取视频帧,而不是按时间或个数间隔抽帧,从而可以显著地提高抽取得到的视频帧的全面性,便于提高基于抽取的视频帧得到的压缩视频和质检结果的精准度,从而可以为用户带来了更好的体验。
图3示意性地示出了根据本发明一实施例的从待抽取视频中抽取第一预定数量的视频帧的流程图。
如图3所示,本发明实施例的从待抽取视频中抽取第一预定数量的视频帧的操作可以包括操作S331~操作S332。
在操作S331,确定多个视频帧中像素差异值大于预设差异值的视频帧,得到第一视频帧。
在操作S332,根据第一视频帧的播放时间,从待抽取视频中抽取第一预定数量的视频帧。
根据本发明的实施例,可以先根据针对多个视频帧中各视频帧的像素差异值,确定像素差异值大于预设差异值的视频帧,作为第一视频帧。
示例性地,在第一视频帧的数量大于等于第一预定数量的情况下,可以从第一视频帧中确定像素差异值最大的第一预定数量个视频帧。最后从待抽取视频中抽取该像素差异值最大的第一预定数量个视频帧。
示例性地,在第一视频帧的数量小于第一预定数量的情况下,可以先从待抽取视频中抽取第一视频帧。然后确定抽取的第一视频帧中,播放时间间隔较大的两个第一视频帧,并从待抽取视频中随机抽取播放时间位于该两个第一视频帧之间的一个视频帧。然后再根据已抽取的视频帧中,播放时间间隔较大的两个视频帧,从待抽取视频中随机抽取播放时间位于该两个视频帧之间的任一视频帧。以此类推,直至抽取得到第一预定数量的视频帧。通过该方法,可以使得抽取到的视频帧在保证与相邻视频帧具有较大的像素差异值的前提下,使得抽取的视频帧在播放时间上较均匀的分布,从而进一步提高抽取的视频帧所表征内容的完整性。
图4示意性地示出了根据本发明一实施例的从待抽取视频中抽取第一预定数量的视频帧的原理图。
根据本申请的实施例,在第一视频帧的数量小于第一预定数量的情况下,如图4所示,该实施例可以先根据待抽取视频410的播放时长,将待抽取视频划分为第一预定数量的视频段421~424。然后根据第一视频帧的播放时间,从第一预定数量的视频段中抽取多个第二视频帧430,由第二视频帧430和第一视频帧440作为最终抽取的视频帧,得到第一预定数量的视频帧。
示例性地,可以根据第一视频帧的播放时间及每个视频段的播放时间,确定不包括第一视频帧的视频段。然后,从不包括第一视频帧的每个视频段中任意抽取一个视频帧,得到多个视频帧。最后,将该多个视频帧根据与其相邻的视频帧的像素差异值自大至小排序,并从排序后的多个视频帧中,自前至后获取n个视频帧,作为第二视频帧。其中,n的取值为第一预定数量与第一视频帧的数量的差值,即第一视频帧与第二视频帧的数量之和为第一预定数量。
示例性地,可以预先设定有抽帧时间点集合。然后根据判重操作,从该抽帧时间点集合中剔除与第一视频帧的播放时间相同的抽帧时间点,得到剩余的多个时间点。然后采用FFmpeg从该多个时间点各自所属的视频段中抽取播放时间分别为该多个时间点的视频帧,得到多个视频帧。在该多个视频帧的数量大于第一预定数量与第一视频帧的数量的差值的情况下,从该多个视频帧中筛选到与其相邻的视频帧的像素差异值最大的n个视频帧,作为第二视频帧。
示例性地,可以先从多个视频段中的第一个视频段中随机抽取一个视频帧,判定该抽取的视频帧是否为第一视频帧。若是,则丢弃该抽取的视频帧,从第二个视频段中随机抽取一个视频帧。若否,则保留该抽取的视频帧,并从第二个视频段中随机抽取一个视频帧。随后再对从第二个视频段中抽取的视频帧执行是否为第一视频帧的判定。以此类推,直至保留的视频帧数量为第一预定数量与第一视频帧的数量的差值为止,并将保留的视频帧作为第二视频帧。
根据本申请的实施例,在第一视频帧的数量大于第一预定数量的情况下,可以先根据多个第一视频帧的播放时间,将第一视频帧均匀地划分至多个视频帧组。然后从多个视频帧组中的每个视频帧组中抽取像素差异值较大的第二预定数量的视频帧,得到第一预定数量的视频帧。其中,视频帧组的数量与第二预定数量的乘积为第一预定数量。
示例性地,在第一视频帧的数量为K个时,可以将K个第一视频帧根据播放顺序排序。然后,将按播放顺序排序的K个第一视频帧划分至L个视频帧组。在K为L的整数倍时,每个视频帧组包括的第一视频帧的数量为K/L。在K不是L的整数倍时,L个视频帧组中前b个视频帧组包括的第一视频帧的数量为K除以L向上取整的值,后(L-b)个视频帧组包括的第一视频帧的数量为K除以L向下取整的值。随后对于每个视频帧组,将包括的第一视频帧按像素差异值自大到小排序,并从排序后的视频帧组中取前第二预定数量个第一视频帧,作为最终抽取的视频帧。其中,第二预定数量小于等于K除以L向下取整的值。
根据本申请的实施例,通过将多个第一视频帧按播放时间均等地划分至多个视频帧组,并从每个视频帧组中抽取第二预定数量的第一视频帧作为最终抽取的视频帧。可以使得最终抽取到的视频帧能够表征待抽取视频中不同时段、不同场景中的内容,从而可以进一步提高表征内容的全面性,进一步提高基于抽取的视频帧得到的压缩视频和质检结果的精准度。
根据本申请的实施例,在从待抽取视频中抽取第一预定数量的视频帧时,例如还可以先判断第一视频帧的数量是否大于等于第三预定数量。若小于第三预定数量,则采用与图4描述方法类似的方法从第一预定数量的视频段中抽取多个第二视频帧,最终使得第一视频帧与第二视频帧的数量之和为第一预定数量。其中,第三预定数量小于第一预定数量。例如,第一预定数量可以为50,第三预定数量可以为10。可以理解的是,本发明对第一预定数量和第二预定数量的取值不做限定。
若第一视频帧的数量大于等于第三预定数量,该实施例可以先根据第一视频帧的播放时间,将第一视频帧均匀地划分至第三预定数量的视频帧组。随后针对第三预定数量的视频帧组中的每个视频帧组,在每个视频帧组中第一视频帧的数量大于等于第二预定数量的情况下,从每个视频帧组中抽取像素差异值较大的第二预定数量的第一视频帧。在每个视频帧组中第一视频帧的数量小于第二预定数量的情况下,从每个视频帧组中抽取所有的第一视频帧。随后判断从第三预定数量个视频帧组中抽取的第一视频帧的数量是否小于第一预定数量。若不小于,则得到第一预定数量的视频帧。若小于,则采用与与图4描述方法类似的方法从第一预定数量的视频段中抽取多个第二视频帧,最终使得从第三预定数量个视频帧组中抽取的第一视频帧的数量与第二视频帧的数量之和为第一预定数量。其中,第二预定数量与第三预定数量的乘积为第一预定数量。
根据本申请的实施例,在得到第一预定数量的视频帧后,该实施例还可以判断第一预定数量的视频帧中是否包括多个视频帧中播放时间最早的首帧,若不包括,则从待抽取视频中抽取首帧图像,作为最终抽取到的视频帧的一个。考虑到视频的首帧一般包括较丰富的内容,因此通过该实施例,可以保证最终抽取的视频帧中包括首帧,并使得抽取到的视频帧能够表征更丰富的内容。
示例性地,在解码待抽取视频得到多个视频帧时,可以同时获取到待抽取视频的播放起始时间。该实施例可以先确定第一预定数量的视频帧中是否包括播放时间为待抽取视频的播放起始时间的视频帧,若不包括,则确定第一预定数量的视频帧中不包括多个视频帧中的首帧。
根据本申请的实施例,在得到第一预定数量的视频帧后,该实施例还可以判断第一预定数量的视频帧中是否包括多个视频帧中播放时间最晚的尾帧,若不包括,则从待抽取视频中抽取尾帧图像,作为最终抽取到的视频帧的一个。考虑到视频的尾帧一般包括较丰富的内容,因此通过该实施例,可以保证最终抽取的视频帧中包括尾帧,并使得抽取到的视频帧能够表征更丰富的内容。
示例性地,在解码待抽取视频得到多个视频帧时,可以同时获取到待抽取视频的播放终止时间。该实施例可以先确定第一预定数量的视频帧中是否包括播放时间为待抽取视频的播放终止时间的视频帧,若不包括,则确定第一预定数量的视频帧中不包括多个视频帧中的尾帧。
图5示意性地示出了根据本发明一实施例的确定针对每个视频帧的像素差异值的原理图。
根据本发明的实施例,在确定针对每个视频帧的像素差异值时,对于每个视频帧,可以先自预定起始点开始,从每个视频帧中抽取相等大小的多个像素块,每个像素块包括至少两个像素点。然后确定针对多个像素块包括的像素点的像素差异值的平均值为对每个视频帧的像素差异值。
示例性地,如图5所示,对于视频帧510和视频帧520,在确定视频帧520的像素差异值时,可以以各视频帧的首个像素点(即左上角的像素点)为起始点,从视频帧510中获取12个像素块511,从视频帧520中获取12个像素块521,每个像素块包括6个像素点。然后,确定每个像素块521中各像素点与对应像素块511中相同位置像素点之间的像素值差值,得到6个像素值差值。然后将该6个像素值差值的绝对值之和作为针对每个像素块521的像素差异值530。类似的,可以得到从视频帧520中抽取的多个像素块中每个像素块的像素差异值。最后,将该12个像素块521的像素差异值的平均值作为针对视频帧520的像素差异值。
可以理解的是,前述获取的像素块包括的像素点个数仅作为示例以利于理解本发明。在视频帧包括的总像素点个数为像素块包括的像素点个数的整数倍时,从视频帧中抽取的多个像素块包括多个像素点中的全部像素点。在视频帧包括的总像素点个数不是像素块包括的像素点个数的整数倍时,在计算两个视频帧的像素差异值时,可以将不能组成一个像素块的像素点剔除,仅根据抽取的视频块包括的像素点来确定像素差异值。或者,在计算两个视频帧的像素差异值时,还可以对视频帧进行像素点补充操作,使得补充的像素点与未获取的像素点能够组成新的像素块。其中,补充的像素点的像素值可以取预设值,该预设值可以根据实际需求进行设定,本发明对此不作限定。
根据本发明的实施例,在每个像素点的像素值由RGB值表示时,即每个像素点的像素值包括R通道的像素值、G通道的像素值和B通道的像素值时。前文描述的确定每个像素点与对应的相邻视频帧中对应像素点之间的像素值差值时,可以先确定每个像素点与对应相邻像素点之间在R通道的像素值的差异值、在G通道的像素值的差异值和在B通道的像素值的差异值,得到三个差异值。最后将三个差异值的绝对值的和为针对每个像素点的像素差异值。
示例性装置
在介绍了本发明示例性实施方式的抽取视频帧方法之后,接下来,参考图6对本发明示例性实施方式的抽取视频帧的装置的结构进行详细描述。
图6示意性地示出了根据本发明实施例的抽取视频帧的装置的结构框图。
如图6所示,该实施例的抽取视频帧的装置600包括视频获取模块610、差异值确定模块620和视频帧抽取模块630。
视频获取模块610用于获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧。在一实施例中,视频获取模块610例如可以用于执行前文描述的操作S210,在此不再赘述。
差异值确定模块620用于确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值。在一实施例中,差异值确定模块620例如可以用于执行前文描述的操作S220,在此不再赘述。
视频帧抽取模块630用于根据针对多个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。在一实施例中,视频帧抽取模块630例如可以用于执行前文描述的操作S230,在此不再赘述。
根据本发明的实施例,上述每个视频帧包括多个像素点,差异值确定模块620例如可以包括:像素值确定子模块,用于确定每个视频帧中每个像素点的像素值;第一差异确定子模块,用于确定每个像素点与对应的相邻视频帧中对应像素点之间的像素值差值,作为针对每个像素点的像素差异值;以及第二差异确定子模块,用于根据针对多个像素点的多个像素差异值,确定针对每个视频帧的像素差异值。
根据本发明的实施例,上述视频帧抽取模块630例如可以包括:第一抽取子模块,用于确定多个视频帧中像素差异值大于预设差异值的视频帧,得到第一视频帧;以及第二抽取子模块,用于根据第一视频帧的播放时间,从待抽视频中抽取第一预定数量的视频帧,其中,第一预定数量的视频帧包括至少部分的第一视频帧。在一实施例中,第一抽取子模块和第二抽取子模块例如可以分别用于执行前文描述的操作S331和操作S332,在此不再赘述。
根据本发明的实施例,上述第二抽取子模块用于在第一视频帧的数量小于第一预定数量的情况下执行以下操作:根据待抽取视频的播放时长,将待抽取视频划分至第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第一预定数量的视频帧包括第一视频帧,且第一视频帧与第二视频帧的数量之和为第一预定数量。
根据本发明的实施例,上述第二抽取子模块用于在第一视频帧的数量大于等于第一预定数量的情况下执行以下操作:根据第一视频帧的播放时间,将第一视频帧均匀地划分至多个视频帧组;以及从每个视频帧组中抽取像素差异值较大的第二预定数量的视频帧,得到第一预定数量的视频帧,其中,视频帧组的数量与第二预定数量的乘积为第一预定数量。
根据本发明的实施例,上述第二抽取子模块用于在第一视频帧的数量大于等于第三预定数量的情况下执行以下操作:根据第一视频帧的播放时间,将第一视频帧均匀地划分至第三预定数量的视频帧组;针对第三预定数量的视频帧组中的每个视频帧组:在每个视频帧组中第一视频帧的数量大于等于第二预定数量的情况下,从每个视频帧组中抽取像素差异值较大的第二预定数量的第一视频帧;在每个视频帧组中第一视频帧的数量小于第二预定数量的情况下,从每个视频帧组中抽取所有第一视频帧;在从第三预定数量个视频帧组中抽取的第一视频帧的数量小于第一预定数量的情况下:根据待抽取视频的播放时长,将待抽取视频划分为第一预定数量的视频段;根据第一视频帧的播放时间,从第一预定数量的视频段中抽取第二视频帧,其中,第二预定数量与第三预定数量的乘积为第一预定数量;从第三预定数量个视频帧组中抽取的第一视频帧的数量与第二视频帧的数量之和为第一预定数量。
根据本发明的实施例,上述抽取视频帧的装置600例如还可以包括:首帧抽取模块,用于在第一预定数量的视频帧中不包括多个视频帧中播放时间最早的首帧的情况下,从待抽取视频中抽取首帧;并且/或者尾帧抽取模块,用于在第一预定数量的视频帧中不包括多个视频帧中播放时间最晚的尾帧的情况下,从待抽取视频中抽取尾帧。
根据本发明的实施例,上述第二差异确定子模块用于确定多个像素差异值的平均值为针对每个视频帧的像素差异值。
根据本发明的实施例,上述第二差异确定子模块包括:像素块获取单元,用于自预定起始点开始,从每个视频帧中获取相等大小的多个像素块,每个像素块包括至少两个像素点,多个像素块包括多个像素点中的部分像素点或全部像素点;以及差异确定模块,用于确定针对多个像素块包括的像素点的像素差异值的平均值为针对每个视频帧的像素差异值。
根据本发明的实施例,每个像素点的像素值包括R通道的像素值、G通道的像素值和B通道的像素值;第一差异确定子模块包括:第一差异确定单元,用于确定每个像素点与对应相邻像素点之间在R通道的像素值的差异值、G通道的像素值的差异值和B通道的像素值的差异值,得到三个差异值;以及第二差异确定单元,用于确定三个差异值的绝对值的和为针对每个像素点的像素差异值。
示例性介质
在介绍了本发明示例性实施方式的方法之后,接下来,参考图7对本发明示例性实施方式的适于抽取视频帧的程序产品进行描述。
图7示意性地示出了根据本发明实施方式的适于抽取视频帧的程序产品的示意图。
在一些可能的实施方式中,本发明的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在计算设备上运行时,所述程序代码用于使所述计算设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的用于抽取视频帧的方法中的步骤,例如,所述计算设备可以执行如图2中所示的操作S210,获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧;操作S220,确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值;以及操作S230,根据针对每个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
如图7所示,描述了根据本发明的实施方式的适于抽取视频帧的程序产品70,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在计算设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、有线、光缆,RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言——诸如Java,C++等,还包括常规的过程式程序设计语言——诸如“C”,语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
示例性计算设备
在介绍了本发明示例性实施方式的方法、介质和装置之后,接下来,参考图8对本发明示例性实施方式的适于抽取视频帧的计算设备进行描述。
图8示意性地示出了根据本发明实施方式的适于抽取视频帧的计算设备的框图。
本发明实施例还提供了一种计算设备。所属技术领域的技术人员能够理解,本发明的各个方面可以实现为系统、方法或程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
在一些可能的实施方式中,根据本发明的计算设备可以至少包括至少一个处理单元、以及至少一个存储单元。其中,所述存储单元存储有程序代码,当所述程序代码被所述处理单元执行时,使得所述处理单元执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的抽取视频帧方法中的步骤。例如,所述处理单元可以执行如图2中所示的操作S210,获取待抽取视频,该待抽取视频包括按播放顺序排列的多个视频帧;操作S220,确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对每个视频帧的像素差异值;以及操作S230,根据针对每个视频帧的像素差异值,从待抽取视频中抽取第一预定数量的视频帧。
下面参照图8来描述根据本发明的这种实施方式的适于抽取视频帧的计算设备80。如图8所示的计算设备80仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示,计算设备80以通用计算设备的形式表现。计算设备80的组件可以包括但不限于:上述至少一个处理单元801、上述至少一个存储单元802、连接不同系统组件(包括存储单元802和处理单元801)的总线803。
总线803包括数据总线、地址总线和控制总线。
存储单元802可以包括易失性存储器形式的可读介质,例如随机存取存储器(RAM)8021和/或高速缓存存储器8022,还可以进一步包括只读存储器(ROM)8023。
存储单元802还可以包括具有一组(至少一个)程序模块8024的程序/实用工具8025,这样的程序模块8024包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
计算设备80也可以与一个或多个外部设备804(例如键盘、指向设备、蓝牙设备等)通信,这种通信可以通过输入/输出(I/0)接口805进行。并且,计算设备80还可以通过网络适配器806与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器806通过总线803与计算设备80的其它模块通信。应当明白,尽管图中未示出,可以结合计算设备80使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
应当注意,尽管在上文详细描述中提及了装置的若干单元/模块或子单元/模块,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之,上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
此外,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本发明的精神和原理,但是应该理解,本发明并不限于所公开的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合以进行受益,这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (10)

1.一种抽取视频帧的方法,包括:
获取待抽取视频,所述待抽取视频包括按播放顺序排列的多个视频帧;
确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对所述每个视频帧的像素差异值;以及
根据针对所述每个视频帧的像素差异值,从所述待抽取视频中抽取第一预定数量的视频帧。
2.根据权利要求1所述的方法,其中,所述每个视频帧包括多个像素点;所述确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值包括:
确定所述每个视频帧中每个像素点的像素值;
确定所述每个像素点与所述对应的相邻视频帧中对应像素点之间的像素值差值,作为针对所述每个像素点的像素差异值;以及
根据针对所述多个像素点的多个像素差异值,确定针对所述每个视频帧的像素差异值。
3.根据权利要求1所述的方法,其中,从所述待抽取视频中抽取第一预定数量的视频帧包括:
确定所述多个视频帧中像素差异值大于预设差异值的视频帧,得到第一视频帧;以及
根据所述第一视频帧的播放时间,从所述待抽取视频中抽取第一预定数量的视频帧,
其中,所述第一预定数量的视频帧包括至少部分的所述第一视频帧。
4.根据权利要求3所述的方法,其中,从所述待抽取视频中抽取第一预定数量的视频帧包括在所述第一视频帧的数量小于所述第一预定数量的情况下:
根据所述待抽取视频的播放时长,将所述待抽取视频划分为所述第一预定数量的视频段;
根据所述第一视频帧的播放时间,从所述第一预定数量的视频段中抽取第二视频帧,
其中,所述第一预定数量的视频帧包括所述第一视频帧,且所述第一视频帧与所述第二视频帧的数量之和为所述第一预定数量。
5.根据权利要求3所述的方法,其中,从所述待抽取视频中抽取第一预定数量的视频帧包括在所述第一视频帧的数量大于等于所述第一预定数量的情况下:
根据所述第一视频帧的播放时间,将所述第一视频帧均匀地划分至多个视频帧组;以及
从每个视频帧组中抽取像素差异值较大的第二预定数量的视频帧,得到所述第一预定数量的视频帧,
其中,所述视频帧组的数量与所述第二预定数量的乘积为所述第一预定数量。
6.根据权利要求3所述的方法,其中,从所述待抽取视频中抽取第一预定数量的视频帧包括在所述第一视频帧的数量大于等于第三预定数量的情况下:
根据所述第一视频帧的播放时间,将所述第一视频帧均匀地划分至所述第三预定数量的视频帧组;
针对所述第三预定数量的视频帧组中的每个视频帧组:
在所述每个视频帧组中第一视频帧的数量大于等于第二预定数量的情况下,从所述每个视频帧组中抽取像素差异值较大的第二预定数量的第一视频帧;
在所述每个视频帧组中第一视频帧的数量小于所述第二预定数量的情况下,从所述每个视频帧组中抽取所有第一视频帧;
在从所述第三预定数量个视频帧组中抽取的第一视频帧的数量小于所述第一预定数量的情况下:
根据所述待抽取视频的播放时长,将所述待抽取视频划分为所述第一预定数量的视频段;
根据所述第一视频帧的播放时间,从所述第一预定数量的视频段中抽取第二视频帧,
其中,所述第二预定数量与所述第三预定数量的乘积为所述第一预定数量;从所述第三预定数量个视频帧组中抽取的第一视频帧的数量与所述第二视频帧的数量之和为所述第一预定数量。
7.根据权利要求1~6中任一项所述的方法,还包括在从所述待抽取视频中抽取第一预定数量的视频帧之后:
在所述第一预定数量的视频帧中不包括所述多个视频帧中播放时间最早的首帧的情况下,从所述待抽取视频中抽取所述首帧;并且/或者
在所述第一预定数量的视频帧中不包括所述多个视频帧中播放时间最晚的尾帧的情况下,从所述待抽取视频中抽取所述尾帧。
8.一种抽取视频帧的装置,包括:
视频获取模块,用于获取待抽取视频,所述待抽取视频包括按播放顺序排列的多个视频帧;
差异值确定模块,用于确定每个视频帧的像素值与对应的相邻视频帧的像素值之间的差异值,作为针对所述每个视频帧的像素差异值;以及
视频帧抽取模块,用于根据针对所述多个视频帧的像素差异值,从所述待抽取视频中抽取第一预定数量的视频帧。
9.一种计算机可读存储介质,其上存储有可执行指令,所述指令在被处理器执行时实现根据权利要求1~7中任一项所述的方法。
10.一种计算设备,包括:
一个或多个存储器,存储有可执行指令;以及
一个或多个处理器,执行所述可执行指令,以实现根据权利要求1~7中任一项所述的方法。
CN202011384682.2A 2020-12-01 2020-12-01 抽取视频帧的方法、装置、设备和可读存储介质 Active CN112532998B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011384682.2A CN112532998B (zh) 2020-12-01 2020-12-01 抽取视频帧的方法、装置、设备和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011384682.2A CN112532998B (zh) 2020-12-01 2020-12-01 抽取视频帧的方法、装置、设备和可读存储介质

Publications (2)

Publication Number Publication Date
CN112532998A true CN112532998A (zh) 2021-03-19
CN112532998B CN112532998B (zh) 2023-02-21

Family

ID=74995795

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011384682.2A Active CN112532998B (zh) 2020-12-01 2020-12-01 抽取视频帧的方法、装置、设备和可读存储介质

Country Status (1)

Country Link
CN (1) CN112532998B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112989113A (zh) * 2021-04-21 2021-06-18 北京金和网络股份有限公司 图片的筛查方法、装置和设备
CN113556582A (zh) * 2021-07-30 2021-10-26 海宁奕斯伟集成电路设计有限公司 视频数据处理方法、装置、设备以及存储介质
CN113792600A (zh) * 2021-08-10 2021-12-14 武汉光庭信息技术股份有限公司 一种基于深度学习的视频抽帧方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080309819A1 (en) * 2007-06-14 2008-12-18 Hardacker Robert L Video sequence ID by decimated scene signature
CN105828184A (zh) * 2015-08-31 2016-08-03 维沃移动通信有限公司 一种视频处理方法及移动终端
CN109495783A (zh) * 2018-11-02 2019-03-19 平安科技(深圳)有限公司 视频审核方法、装置、电子设备及介质
CN110505495A (zh) * 2019-08-23 2019-11-26 北京达佳互联信息技术有限公司 多媒体资源抽帧方法、装置、服务器及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080309819A1 (en) * 2007-06-14 2008-12-18 Hardacker Robert L Video sequence ID by decimated scene signature
CN105828184A (zh) * 2015-08-31 2016-08-03 维沃移动通信有限公司 一种视频处理方法及移动终端
CN109495783A (zh) * 2018-11-02 2019-03-19 平安科技(深圳)有限公司 视频审核方法、装置、电子设备及介质
CN110505495A (zh) * 2019-08-23 2019-11-26 北京达佳互联信息技术有限公司 多媒体资源抽帧方法、装置、服务器及存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112989113A (zh) * 2021-04-21 2021-06-18 北京金和网络股份有限公司 图片的筛查方法、装置和设备
CN112989113B (zh) * 2021-04-21 2021-08-31 北京金和网络股份有限公司 图片的筛查方法、装置和设备
CN113556582A (zh) * 2021-07-30 2021-10-26 海宁奕斯伟集成电路设计有限公司 视频数据处理方法、装置、设备以及存储介质
CN113792600A (zh) * 2021-08-10 2021-12-14 武汉光庭信息技术股份有限公司 一种基于深度学习的视频抽帧方法和系统
CN113792600B (zh) * 2021-08-10 2023-07-18 武汉光庭信息技术股份有限公司 一种基于深度学习的视频抽帧方法和系统

Also Published As

Publication number Publication date
CN112532998B (zh) 2023-02-21

Similar Documents

Publication Publication Date Title
CN112532998B (zh) 抽取视频帧的方法、装置、设备和可读存储介质
US9961398B2 (en) Method and device for switching video streams
US10600140B2 (en) Method for selecting a display capturing mode
CN110213614B (zh) 从视频文件中提取关键帧的方法和装置
CN110381326B (zh) 视频系统及处理方法、设备与计算机可读介质
CN110784750B (zh) 视频播放方法、装置及计算机设备
CN106470353B (zh) 一种多媒体数据处理方法及其装置、电子设备
CN111263243B (zh) 视频编码方法、装置、计算机可读介质及电子设备
CN112423140A (zh) 视频播放方法、装置、电子设备和存储介质
CN112738418A (zh) 视频获取方法、装置以及电子设备
CN112929728A (zh) 一种视频渲染方法、装置、系统、电子设备及存储介质
CN113873288A (zh) 在直播过程中生成回放的方法和装置
WO2024148979A1 (zh) 视频解码方法、装置、电子设备、计算机可读存储介质及计算机程序产品
CN110381365A (zh) 视频抽帧方法、装置及电子设备
CN113096218B (zh) 动态图像播放方法、装置、存储介质和计算机设备
CN110912948A (zh) 一种问题上报的方法和装置
CN116320648B (zh) 一种弹幕绘制方法、装置及电子设备
CN107872683B (zh) 一种视频数据处理方法、装置、设备及存储介质
CN111709342B (zh) 字幕分割方法、装置、设备及存储介质
US20180189143A1 (en) Simultaneous compression of multiple stored videos
CN112612435A (zh) 信息处理方法、装置、设备及存储介质
CN113473236A (zh) 录屏视频的处理方法、装置、可读介质和电子设备
CN111949819A (zh) 用于推送视频的方法和装置
CN112866779A (zh) 视频展示方法、装置、计算机设备和介质
CN111614998B (zh) 推广视频的处理方法、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant