CN112019878A - 一种视频解码和编辑的方法、装置、设备和存储介质 - Google Patents

一种视频解码和编辑的方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN112019878A
CN112019878A CN201910471084.XA CN201910471084A CN112019878A CN 112019878 A CN112019878 A CN 112019878A CN 201910471084 A CN201910471084 A CN 201910471084A CN 112019878 A CN112019878 A CN 112019878A
Authority
CN
China
Prior art keywords
video
frame
current frame
decoding
editing instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910471084.XA
Other languages
English (en)
Other versions
CN112019878B (zh
Inventor
王新宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bigo Technology Singapore Pte Ltd
Original Assignee
Guangzhou Baiguoyuan Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Baiguoyuan Information Technology Co Ltd filed Critical Guangzhou Baiguoyuan Information Technology Co Ltd
Priority to CN201910471084.XA priority Critical patent/CN112019878B/zh
Publication of CN112019878A publication Critical patent/CN112019878A/zh
Application granted granted Critical
Publication of CN112019878B publication Critical patent/CN112019878B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种视频解码和编辑的方法、装置、设备和存储介质。其中，该视频解码的方法包括：如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果；如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果；如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。本发明实施例提供的技术方案，在当前帧的不同解码场景中采用不同的解码策略，提高了当前帧的解码速度。

Description

一种视频解码和编辑的方法、装置、设备和存储介质
技术领域
本发明实施例涉及视频处理领域，尤其涉及一种视频解码和编辑的方法、装置、设备和存储介质。
背景技术
随着互联网和通信技术的发展，越来越多的用户通过Android手机录制视频来记录日常信息，同时通过用户终端的视频编辑系统解码出录制视频中待编辑的视频帧，并对各个视频帧进行编辑，从而美化视频。
目前，视频编辑系统通常采用软件解码方式解码视频中的各个视频帧，而视频编码后存在帧内编码帧(I帧)、帧间预测编码帧(P帧)和双向预测编码帧(B帧)，此时在解码视频中的P帧和B帧时，均需要查找到之前的I帧，并从I帧开始顺序解码，从而得到解码后的P帧和B帧；如果视频中的一个连续画面组(Group of Pictures，GOP)较大，在解码P帧和B帧时从查找到的I帧开始使得参与的视频帧数较多，导致解码耗时，极大降低了解码速度。
发明内容
本发明实施例提供了一种视频解码和编辑的方法、装置、设备和存储介质，提高视频帧的解码速度和视频编辑的准确性。
第一方面，本发明实施例提供了一种视频解码的方法，该方法包括：
如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为所述当前帧的解码结果；
如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到所述当前帧的解码结果，所述目标帧为所述帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到所述当前帧的解码结果。
第二方面，本发明实施例提供了一种视频编辑的方法，该方法包括：
对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
执行如第一方面中所述的视频解码的方法，得到所述视频帧序列中当前帧的解码结果；
根据所述视频编辑指令对所述当前帧的解码结果进行编辑。
第三方面，本发明实施例提供了一种视频解码的装置，该装置包括：
第一解码模块，用于如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为所述当前帧的解码结果；
第二解码模块，用于如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到所述当前帧的解码结果，所述目标帧为所述帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
第三解码模块，用于如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到所述当前帧的解码结果。
第四方面，本发明实施例提供了一种视频编辑的装置，该装置包括：
视频预处理模块，用于对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
视频解码模块，用于执行如第一方面中所述的视频解码的方法，得到所述视频帧序列中当前帧的解码结果；
视频编辑模块，用于根据所述视频编辑指令对所述当前帧的解码结果进行编辑。
第五方面，本发明实施例提供了一种设备，该设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面中所述的视频解码的方法，或者，实现如第二方面中所述的视频编辑的方法。
第六方面，本发明实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面中所述的视频解码的方法，或者，实现如第二方面中所述的视频编辑的方法。
本发明实施例提供了一种视频解码和编辑的方法、装置、设备和存储介质，在通过视频编辑指令对视频中当前帧进行编辑时，首先需要解码当前帧，此时如果视频编辑指令要求对当前帧的画面非准确解析，则仅解码当前帧前向临近的第一个帧内编码帧，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则从帧内编码帧和已解码视频帧中确定出的与当前帧关联度最高，也就是间隔最小的目标帧开始到当前帧依次解码，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则从当前帧临近的前方第一个帧内编码帧开始到当前帧依次解码，进而根据当前帧的不同解码场景采用不同的解码策略，无需每种解码场景均从帧内编码帧开始依次解码，提高了当前帧的解码速度，同时对得到的当前帧的解码结果进行编辑，提高视频编辑的速度，提升了用户对视频的编辑体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1A为本发明实施例一提供的一种视频解码的方法的流程图；
图1B为本发明实施例一提供的视频解码过程的原理示意图；
图2A为本发明实施例二提供的一种视频解码的方法的流程图；
图2B为本发明实施例二提供的视频解码过程的原理示意图；
图3为本发明实施例三提供的一种视频编辑的方法的流程图；
图4为本发明实施例四提供的一种视频解码的装置的结构示意图；
图5为本发明实施例五提供的一种视频编辑的装置的结构示意图；
图6为本发明实施例六提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。此外，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
实施例一
图1A为本发明实施例一提供的一种视频解码的方法的流程图，本实施例可应用于对视频中任一帧进行解码的情况中。本实施例提供的一种视频解码的方法可以由本发明实施例提供的视频解码的装置来执行，该装置可以通过软件和\或硬件的方式来实现，并集成在执行本方法的设备中，该设备可以是具备视频解码能力的任一种Android设备。
具体的，参考图1A，该方法可以包括如下步骤：
S110，确定视频编辑指令对当前帧的画面解析准确性。
具体的，目前为了增加视频的显示效果，会对视频进行一系列编辑，用户在视频编辑系统中预先输入当前需要编辑的视频，并选择当前指定编辑的视频帧以及编辑操作，此时由于待编辑的视频一般是经过编码处理的，因此在对视频中的某一帧进行编辑之前，首先需要对该视频帧进行解码；本实施例在用户终端生成对当前帧的视频编辑指令时，可以通过视频编辑指令判断对当前帧解码时所处的解码场景，也就是通过判断是否要求对当前帧的画面准确解析，确定视频编辑指令对当前帧的画面解析准确性。
可选的，本实施例在判断视频编辑指令对当前帧的画面解析准确性之前，还可以包括：获取视频编辑指令。
其中，视频编辑指令可以包括本次在视频中指定编辑的当前帧和具体执行的待编辑操作。本实施例根据视频编辑指令中的待编辑操作判断对当前帧的画面是否需要准确解析，进而在不同的解码场景下，采用不同的解码策略对当前帧进行解码。
具体的，由于经过编码后的视频中会包括帧内编码帧(I帧)、帧间预测编码帧(P帧)和双向预测编码帧(B帧)三种类型的视频帧；其中，I帧是一种自带该帧的全部画面信息的独立帧，无需参考其他帧便可独立进行解码，可以简单理解为一副静态画面，如视频序列中的第一帧始终都是I帧，因为它是关键帧；P帧需要参考之前的I帧才能进行编码，表示当前帧画面与前一帧画面(前一帧可能是I帧也可能是P帧)的差别，此时对P帧解码时需要在之前解码后的帧画面上叠加本帧定义的差别，得到最终的解码画面；B帧记录本帧与前后帧的差别，此时解码B帧时，不仅要取得之前的帧画面，还要解码之后的帧画面，通过前后帧画面与本帧定义的差别的叠加得到最终的解码画面。
此时，本实施例中针对视频编码后不同的帧类型，可以将视频编辑指令对当前帧的画面解析准确性分成三种情况：视频编辑指令要求对当前帧的画面非准确解析、视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析以及视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析；对不同的画面解析准确性情况制定不同的解码策略，进而提高解码速度。其中，视频编辑指令要求对当前帧的画面非准确解析是指无需获取当前帧中的准确画面信息，允许得到的画面解析结果与当前帧存在一定的误差，也就是得到与当前帧类似的画面即可，如视频编辑指令中待编辑操作为获取视频的视频封面或者缩略图时，也就是指定当前帧的解码结果作为视频封面或者缩略图进行展示时，由于视频中存在由与当前帧画面类似的多个视频帧组成的连续画面组，此时多个类似的视频帧的解码结果与当前帧的解码结果也类似，因此在不影响用户选择的视频封面和缩略图的整体风格的基础上，也可以将类似视频帧的解码结果作为视频封面或缩略图；视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析是指对视频中连续时间段内的视频帧进行相应的画面编辑，此时要求对该连续时间段内的每一视频帧均需要获取准确的画面信息，例如为连续时间段内的多个视频帧添加相同的特效时，需要得到每一视频帧中的准确画面，进而判断特效的具体添加位置；视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析是指对视频中随机的多个视频帧进行画面编辑，此时要求对随机每一视频帧均需要获取准确的画面信息，例如为随机时间点的多个视频帧添加各自的特效时，需要得到各个视频帧中的准确画面，进而判断对应特效的具体添加位置。
此外，本实施例中对于画面解析的准确程度可以通过视频编辑指令对于画面的解析要求来判断，画面非准确解析为视频编辑指令要求画面解析结果与当前帧不完全一致，此时允许当前帧的解码结果与当前帧画面可以存在一定误差，，画面准确解析为视频编辑指令要求画面解析结果与当前帧完全一致。
S120，如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果。
具体的，本实施例针对视频编辑指令对当前帧的画面解析准确性的三种情况，对应采用不同的解码策略；如果视频编辑指令要求对当前帧的画面非准确解析，说明可以将与当前帧具有类似画面的视频帧的解码结果作为当前帧的解码结果返回，而视频中与当前帧画面类似的视频帧可以组成一个连续画面组，且其中必定存在I帧，如图1B所示，如果视频编辑指令要求对当前帧的画面非准确解析，则为了提高解码速度，可以从当前帧开始向前查找对应的I帧，如果当前帧为I帧，则直接解码当前帧；如果当前帧不是I帧，则依次向前查找I帧，并直接解码前向查找到的第一个I帧，也就是本实施例中的与当前帧前向临近的第一个I帧，作为当前帧的解码结果，无需对I帧与当前帧之间的每一视频帧顺序解码，极大提高了解码速度。
S130，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果。
具体的，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，说明需要对当前帧所在的连续视频帧获取准确的画面信息，此时本实施例中会记录视频中已解码的视频帧，并根据视频解码情况实时更新该视频中最后一帧已解码视频帧的序号，如图1B所示，在要求对当前帧所在的连续视频帧的画面准确解析时，首先在该视频中查找出I帧以及全部的已解码视频帧，进而在帧内编码帧(I帧)和已解码视频帧中确定出与当前帧关联度最高的视频帧，作为目标帧，此时关联度最高的视频帧是指该视频的I帧和已解码视频帧中与当前帧间隔最小的视频帧；并从目标帧开始顺序解码，直至解码到当前帧，得到当前帧的解码结果。
可选的，本实施例中与当前帧关联度最高的视频帧为帧内编码帧(I帧)和已解码视频帧中帧序号最大的视频帧；本实施例可以按照视频时间顺序为每一视频帧进行编号，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，判断当前帧是否为I帧，如果是I帧，则直接解码当前帧；如果不是I帧，则从当前帧开始向前查找I帧和已解码视频帧，并在首次查找到的I帧和已解码视频帧中选择帧序号较大的视频帧作为目标帧，从该目标帧开始顺序解码每一帧，直至解码到当前帧，得到当前帧的解码结果，能够减少视频帧的解码数量，提高了解码速度。
S140，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。
具体的，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，此时采用现有的解码方式，如图1B所示，从当前帧开始向前查找第一个I帧，进而从I帧开始顺序解码，直至解码到当前帧，得到当前帧的解码结果。
本实施例提供的技术方案，在通过视频编辑指令对视频中当前帧进行编辑时，首先需要解码当前帧，此时如果视频编辑指令要求对当前帧的画面非准确解析，则仅解码与当前帧前向临近的第一个帧内编码帧，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则从帧内编码帧和已解码视频帧中确定出的与当前帧关联度最高，也就是间隔最小的目标帧开始到当前帧依次解码，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则从与当前帧前向临近的第一个帧内编码帧开始到当前帧依次解码，进而根据当前帧的不同解码场景采用不同的解码策略，无需每种解码场景均从帧内编码帧开始依次解码，提高了当前帧的解码速度。
实施例二
图2A为本发明实施例二提供的一种视频解码的方法的流程图，图2B为本发明实施例二提供的视频解码过程的原理示意图。本实施例是在上述实施例的基础上进行优化，本实施例主要对不同解码场景下所采用的解码器进行说明。
可选的，如图2A所示，本实施例可以包括如下步骤：
S210，确定视频编辑指令对当前帧的画面解析准确性。
S220，如果视频编辑指令要求对当前帧的画面非准确解析，则采用软件解码器解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果。
具体的，如果视频编辑指令要求对当前帧的画面非准确解析，此时对指定非连续视频帧进行解码，为了避免硬件解码存在的帧级解码延时，本实施例可以采用软件解码器解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果。
此外，由于Android设备中设置的硬件解码器才会存在帧级解码延时，因此本实施例中提供的视频解码方案仅适用于Android设备中，其他非Android设备采用硬件解码和软件解码均可。
S230，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则采用硬件解码器解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果。
具体的，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，此时需要对当前帧所在的连续视频帧依次进行解码，会顺序得到每一视频帧的解码结果，避免了Android设备中采用硬件解码帧级延迟造成的解码错误，因此本实施例采用Android设备中的硬件解码器解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果，该目标帧为帧内编码帧(I帧)和已解码视频帧中与当前帧关联度最高，也就是间隔最小的视频帧，从而提高解码速度。
S240，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则采用软件解码器解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。
具体的，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，此时对指定非连续的多个视频帧进行解码，为了避免Android设备中硬件解码存在的帧级解码延时，使得解码出错的问题，本实施例可以采用软件解码器解码视频中从与当前帧前向临近的第一个帧内编码帧(I帧)到当前帧的视频帧，得到当前帧的解码结果。
本实施例提供的技术方案，通过分析当前帧所处的不同解码场景，确定对应的解码策略和解码器，进而在不同解码场景下，采用不同的解码策略和解码器解码当前帧，使用了硬件解码器加速了连续帧的解码，避免了多场景下对CPU的消耗，提高当前帧的解码速度。
实施例三
图3为本发明实施例三提供的一种视频编辑的方法的流程图，本实施例可应用于对视频中的任一帧进行编辑的情况中。本实施例提供的一种视频编辑的方法可以由本发明实施例提供的视频编辑的装置来执行，该装置可以通过软件和/或硬件的方式来实现，并集成在执行本方法的设备中，该设备可以是具备视频编辑能力的任一种Android设备。
可选的，如图3所示，本实施例可以包括如下步骤：
S310，对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令。
具体的，本实施例中待编辑的视频是经过编码并封装好的，此时为了确定后续解码对应的当前帧，本实施例可以对待编辑的视频解封装，得到对应的视频帧序列，如将封装好的视频文件解封装后，可以得到对应的视频裸流；同时，用户终端选择本次执行编辑的当前帧以及对应执行的待编辑操作，进而生成对应的视频编辑指令，在后续根据该视频编辑指令判断当前帧的画面解析准确性。
S320，执行上述的视频解码的方法，得到视频帧序列中当前帧的解码结果。
可选的，在得到视频编辑指令后，可以采用本发明实施例中提供的视频解码的方法，判断视频编辑指令中要求对当前帧的画面是否需要准确解析，进而确定当前帧所处的解码场景，并采用该解码场景下的解码策略和解码器对当前帧进行解码，得到视频帧序列中当前帧的解码结果。
S330，根据视频编辑指令对当前帧的解码结果进行编辑。
具体的，在得到当前帧的解码结果后，通过执行视频编辑指令中的待编辑操作，进而对当前帧的解码结果进行编辑，按照相同的方式对视频中指定的各个视频帧进行编辑，最终得到编辑后的视频。
本实施例提供的技术方案，通过对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令，从而采用本发明任意实施例中提供的视频解码的方法，对视频帧序列中的当前帧进行解码，提高解码速度，同时在得到当前帧的解码结果后对该解码结果进行编辑，提高视频编辑的速度，提升了用户对视频的编辑体验。
实施例四
图4为本发明实施例四提供的一种视频解码的装置的结构示意图，具体的，如图4所示，该装置可以包括：
第一解码模块410，用于如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果；
第二解码模块420，用于如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果，该目标帧为帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
第三解码模块430，用于如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。
本实施例提供的技术方案，在通过视频编辑指令对视频中当前帧进行编辑时，首先需要解码当前帧，此时如果视频编辑指令要求对当前帧的画面非准确解析，则仅解码当前帧前向临近的第一个帧内编码帧，如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则从帧内编码帧和已解码视频帧中确定出的与当前帧关联度最高，也就是间隔最小的目标帧开始到当前帧依次解码，如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则从帧内编码帧开始到当前帧依次解码，进而根据当前帧的不同解码场景采用不同的解码策略，无需每种解码场景均从帧内编码帧开始依次解码，提高了当前帧的解码速度。
进一步的，上述画面非准确解析为视频编辑指令要求画面解析结果与当前帧不完全一致，画面准确解析为视频编辑指令要求画面解析结果与当前帧完全一致。
进一步的，上述与当前帧关联度最高的视频帧为帧内编码帧和已解码视频帧中帧序号最大的视频帧。
进一步的，上述视频解码的装置，还可以包括：
编辑指令获取模块，用于获取视频编辑指令，该视频编辑指令包括当前帧和待编辑操作。
进一步的，上述第一解码模块410，可以具体用于：
如果视频编辑指令要求对当前帧的画面非准确解析，则采用软件解码器解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果。
上述第二解码模块420，可以具体用于：
如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则采用硬件解码器解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果。
上述第三解码模块430，可以具体用于：
如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则采用软件解码器解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。
本实施例提供的视频解码的装置可适用于上述任意实施例提供的视频解码的方法，具备相应的功能和有益效果。
实施例五
图5为本发明实施例五提供的一种视频编辑的装置的结构示意图，具体的，如图5所示，该装置可以包括：
视频预处理模块510，用于对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
视频解码模块520，用于执行本发明实施例提供的视频解码的方法，得到视频帧序列中当前帧的解码结果；
视频编辑模块530，用于根据视频编辑指令对当前帧的解码结果进行编辑。
本实施例提供的技术方案，通过对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令，从而采用本发明任意实施例中提供的视频解码的方法，对视频帧序列中的当前帧进行解码，提高解码速度，同时在得到当前帧的解码结果后对该解码结果进行编辑，提高视频编辑的速度，提升了用户对视频的编辑体验。
本实施例提供的视频编辑的装置可适用于上述任意实施例提供的视频编辑的方法，具备相应的功能和有益效果。
实施例六
图6为本发明实施例六提供的一种设备的结构示意图，如图6所示，该设备包括处理器60、存储装置61和通信装置62；设备中处理器60的数量可以是一个或多个，图6中以一个处理器60为例；设备中的处理器60、存储装置61和通信装置62可以通过总线或其他方式连接，图6中以通过总线连接为例。
存储装置61作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中提供的视频解码的方法或者视频编辑的方法对应的程序指令/模块。处理器60通过运行存储在存储装置61中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述视频解码的方法，或者，视频编辑的方法。
存储装置61可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储装置61可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储装置61可进一步包括相对于处理器60远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
通信装置62可用于实现设备间的网络连接或者移动数据连接。
本实施例提供的一种设备可用于执行上述任意实施例提供的视频解码的方法，或者视频编辑的方法，具备相应的功能和有益效果。
实施例七
本发明实施例七还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时可实现上述任意实施例中的视频解码的方法，或者视频编辑的方法。该视频解码的方法具体可以包括：
如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为当前帧的解码结果；
如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到当前帧的解码结果，该目标帧为帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到当前帧的解码结果。
该视频编辑的方法具体可以包括：
对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
执行本发明实施例中提供的视频解码的方法，得到视频帧序列中当前帧的解码结果；
根据视频编辑指令对当前帧的解码结果进行编辑。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的视频解码的方法，或者视频编辑的方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述视频解码的装置，或者视频编辑的装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
以上所述仅为本发明的优选实施例，并不用于限制本发明，对于本领域技术人员而言，本发明可以有各种改动和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种视频解码的方法，其特征在于，包括：
如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为所述当前帧的解码结果；
如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到所述当前帧的解码结果，所述目标帧为所述帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到所述当前帧的解码结果。
2.根据权利要求1所述的方法，其特征在于，所述画面非准确解析为所述视频编辑指令要求画面解析结果与当前帧不完全一致，所述画面准确解析为所述视频编辑指令要求画面解析结果与当前帧完全一致。
3.根据权利要求1所述的方法，其特征在于，所述与当前帧关联度最高的视频帧为所述帧内编码帧和已解码视频帧中帧序号最大的视频帧。
4.根据权利要求1所述的方法，其特征在于，还包括：
获取视频编辑指令，所述视频编辑指令包括当前帧和待编辑操作。
5.根据权利要求1-4任一项所述的方法，其特征在于，具体包括：
如果视频编辑指令要求对当前帧的画面非准确解析，则采用软件解码器解码视频中与当前帧前向临近的第一个帧内编码帧，作为所述当前帧的解码结果；
如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则采用硬件解码器解码视频中从目标帧到当前帧的视频帧，得到所述当前帧的解码结果；
如果视频编辑指令要求对当前帧所在的不连续视频帧的画面准确解析，则采用软件解码器解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到所述当前帧的解码结果。
6.一种视频编辑的方法，其特征在于，包括：
对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
执行如权利要求1-5中任一项所述的视频解码的方法，得到所述视频帧序列中当前帧的解码结果；
根据所述视频编辑指令对所述当前帧的解码结果进行编辑。
7.一种视频解码的装置，其特征在于，包括：
第一解码模块，用于如果视频编辑指令要求对当前帧的画面非准确解析，则解码视频中与当前帧前向临近的第一个帧内编码帧，作为所述当前帧的解码结果；
第二解码模块，用于如果视频编辑指令要求对当前帧所在的连续视频帧的画面准确解析，则解码视频中从目标帧到当前帧的视频帧，得到所述当前帧的解码结果，所述目标帧为所述帧内编码帧和已解码视频帧中与当前帧关联度最高的视频帧；
第三解码模块，用于如果视频编辑指令要求对当前帧所在的不连续视频帧的画面完整解析，则解码视频中从与当前帧前向临近的第一个帧内编码帧到当前帧的视频帧，得到所述当前帧的解码结果。
8.一种视频编辑的装置，其特征在于，包括：
视频预处理模块，用于对待编辑的视频解封装，得到对应的视频帧序列，并获取视频编辑指令；
视频解码模块，用于执行如权利要求1-5中任一项所述的视频解码的方法，得到所述视频帧序列中当前帧的解码结果；
视频编辑模块，用于根据所述视频编辑指令对所述当前帧的解码结果进行编辑。
9.一种设备，其特征在于，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5中任一所述的视频解码的方法，或者，实现如权利要求6中所述的视频编辑的方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5中任一所述的视频解码的方法，或者，实现如权利要求6中所述的视频编辑的方法。
CN201910471084.XA 2019-05-31 2019-05-31 一种视频解码和编辑的方法、装置、设备和存储介质 Active CN112019878B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910471084.XA CN112019878B (zh) 2019-05-31 2019-05-31 一种视频解码和编辑的方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910471084.XA CN112019878B (zh) 2019-05-31 2019-05-31 一种视频解码和编辑的方法、装置、设备和存储介质

Publications (2)

Publication Number Publication Date
CN112019878A true CN112019878A (zh) 2020-12-01
CN112019878B CN112019878B (zh) 2022-06-21

Family

ID=73506130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910471084.XA Active CN112019878B (zh) 2019-05-31 2019-05-31 一种视频解码和编辑的方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN112019878B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113518187A (zh) * 2021-07-13 2021-10-19 北京达佳互联信息技术有限公司 视频编辑方法及设备
CN114650437A (zh) * 2022-03-14 2022-06-21 百果园技术(新加坡)有限公司 一种视频发布方法、装置、设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010053276A1 (en) * 1998-05-29 2001-12-20 Boyce Jill Macdonald Digital video playback with trick play features
US20070058928A1 (en) * 2005-09-08 2007-03-15 Hitoshi Naito Playback apparatus, playback method, and playback program
WO2010116588A1 (ja) * 2009-04-08 2010-10-14 パナソニック株式会社 デジタルテレビ放送再生装置およびその再生方法
CN102761773A (zh) * 2012-07-03 2012-10-31 Ut斯达康通讯有限公司 一种利用i帧改善iptv业务的用户体验的方法
US20130120454A1 (en) * 2009-09-18 2013-05-16 Elya Shechtman Methods and Apparatuses for Generating Thumbnail Summaries for Image Collections
WO2015085009A2 (en) * 2013-12-03 2015-06-11 Implicitcare, Llc 360° imaging system
US20190028726A1 (en) * 2017-07-24 2019-01-24 Cisco Technology, Inc. Encoding, transmission and decoding of combined high motion and high fidelity content
CN109672893A (zh) * 2018-11-30 2019-04-23 广州市百果园信息技术有限公司 一种视频解码方法、装置、设备和存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010053276A1 (en) * 1998-05-29 2001-12-20 Boyce Jill Macdonald Digital video playback with trick play features
US20070058928A1 (en) * 2005-09-08 2007-03-15 Hitoshi Naito Playback apparatus, playback method, and playback program
WO2010116588A1 (ja) * 2009-04-08 2010-10-14 パナソニック株式会社 デジタルテレビ放送再生装置およびその再生方法
US20130120454A1 (en) * 2009-09-18 2013-05-16 Elya Shechtman Methods and Apparatuses for Generating Thumbnail Summaries for Image Collections
CN102761773A (zh) * 2012-07-03 2012-10-31 Ut斯达康通讯有限公司 一种利用i帧改善iptv业务的用户体验的方法
WO2015085009A2 (en) * 2013-12-03 2015-06-11 Implicitcare, Llc 360° imaging system
US20190028726A1 (en) * 2017-07-24 2019-01-24 Cisco Technology, Inc. Encoding, transmission and decoding of combined high motion and high fidelity content
CN109672893A (zh) * 2018-11-30 2019-04-23 广州市百果园信息技术有限公司 一种视频解码方法、装置、设备和存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSDN: "视频播放软解与硬解的区别", 《HTTPS://BLOG.CSDN.NET/U010072711/ARTICLE/DETAILS/52413766》 *
E. S. D. LIMA ET AL.: "Automatic Video Editing for Video-Based Interactive Storytelling", 《2012 IEEE INTERNATIONAL CONFERENCE ON MULTIMEDIA AND EXPO》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113518187A (zh) * 2021-07-13 2021-10-19 北京达佳互联信息技术有限公司 视频编辑方法及设备
CN113518187B (zh) * 2021-07-13 2024-01-09 北京达佳互联信息技术有限公司 视频编辑方法及设备
CN114650437A (zh) * 2022-03-14 2022-06-21 百果园技术(新加坡)有限公司 一种视频发布方法、装置、设备及存储介质
CN114650437B (zh) * 2022-03-14 2024-04-16 百果园技术(新加坡)有限公司 一种视频发布方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN112019878B (zh) 2022-06-21

Similar Documents

Publication Publication Date Title
CN109862391B (zh) 视频分类方法、介质、装置和计算设备
CN110351553B (zh) 视频倒播、视频倒播数据处理方法、装置和计算机设备
CA2819674C (en) Video encoding apparatus, video decoding apparatus, video encoding method, and video decoding method
US10819994B2 (en) Image encoding and decoding methods and devices thereof
US20130216201A1 (en) System and method for aligning tags to specific video frames
EP4054190A1 (en) Video data encoding method and device, apparatus, and storage medium
US10582208B2 (en) Video encoding apparatus, video decoding apparatus, video encoding method, and video decoding method
CN112019878B (zh) 一种视频解码和编辑的方法、装置、设备和存储介质
CN106791875B (zh) 视频数据解码方法、编码方法以及相关设备
CN112653904B (zh) 一种基于pts与dts修改的快速视频裁剪方法
CN114827663A (zh) 分布式直播插帧系统及方法
CN110784717B (zh) 一种编码方法、装置、电子设备及存储介质
CN109640019B (zh) 一种通过移动终端录制编辑长视频的方法
KR20120019872A (ko) 보간 프레임 생성 시스템
JP4362480B2 (ja) レジューム再生システム
CN104980763B (zh) 一种视频码流、视频编解码方法及装置
CN112714336B (zh) 视频分割方法和装置、电子设备、计算机可读存储介质
WO2022120828A1 (zh) 视频抽帧方法、设备及存储介质
CN116132719A (zh) 视频处理方法、装置、电子设备及可读存储介质
CN110636332A (zh) 一种视频处理方法、装置及计算机可读存储介质
CN111147954A (zh) 一种缩略图抽取方法及装置
CN108111900B (zh) 一种播放速度控制方法及装置
CN114615549B (zh) 流媒体seek方法、客户端、存储介质和移动设备
CN117135364B (zh) 一种视频解码方法和系统
CN115243101B (zh) 视频动静率识别方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20221208

Address after: 31a, 15 / F, building 30, maple mall, bangrang Road, Brazil, Singapore

Patentee after: Baiguoyuan Technology (Singapore) Co.,Ltd.

Address before: 511400 floor 5-13, West Tower, building C, 274 Xingtai Road, Shiqiao street, Panyu District, Guangzhou City, Guangdong Province

Patentee before: GUANGZHOU BAIGUOYUAN INFORMATION TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right