CN117354533A - 一种透明视频处理方法和系统 - Google Patents

一种透明视频处理方法和系统 Download PDF

Info

Publication number
CN117354533A
CN117354533A CN202311364254.7A CN202311364254A CN117354533A CN 117354533 A CN117354533 A CN 117354533A CN 202311364254 A CN202311364254 A CN 202311364254A CN 117354533 A CN117354533 A CN 117354533A
Authority
CN
China
Prior art keywords
image frame
encoding
video
image
stream data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311364254.7A
Other languages
English (en)
Inventor
徐水峰
余傲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Momo Information Technology Co Ltd
Original Assignee
Beijing Momo Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Momo Information Technology Co Ltd filed Critical Beijing Momo Information Technology Co Ltd
Priority to CN202311364254.7A priority Critical patent/CN117354533A/zh
Publication of CN117354533A publication Critical patent/CN117354533A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供一种透明视频处理方法和系统。本申请提供的透明视频处理方法，所述方法应用于透明视频处理系统，所述系统包括编码器和解码播放器，所述方法包括：编码器从待编码的目标视频中获取多对图像帧对；编码器针对每对图像帧对，按照第一编码方式将图像帧对中的第一图像帧编码入第一视频轨道，生成第一码流数据；编码器按照第二编码方式将图像帧对中的第二图像帧编码入第二视频轨道，生成第二码流数据；编码器将第一码流数据和第二码流数据写入目标视频的源文件中，得到源文件对应的编码文件。本申请提供的透明视频处理方法和系统，可以节省透明视频存储和传输时使用的空间和带宽，以达到节约成本的目的。

Description

一种透明视频处理方法和系统
技术领域
本申请涉及视频处理技术领域，尤其涉及一种透明视频处理方法和系统。
背景技术
随着移动互联网的发展，终端设备的下载流量大幅增长，用户下载流量中，视频文件流量占据很大占比。大量的视频文件也给网络传输带宽负载带来了很大的压力。如果能将视频文件大小减小，不但能提升加载速度，还能节省大量带宽以及存储成本。传统的透明视频文件压缩方法，一是降低视频文件质量，很影响用户体验；另一种是采用更高效的视频文件压缩方法，而目前主流的视频文件有AVI、WMV和MPEG等，但在保证视频文件质量的前提下，他们都存在压缩效率不高的问题。因此，亟需一种透明视频处理方法，以节省透明视频存储和传输时使用的空间和带宽，达到节约成本的目的。
发明内容
有鉴于此，本申请提供一种透明视频处理方法和系统，用以节省透明视频存储和传输时使用的空间和带宽，以达到节约成本的目的。
具体地，本申请是通过如下技术方案实现的：
本申请第一方面提供一种透明视频处理方法，所述方法应用于透明视频处理系统，所述系统包括编码器和解码播放器，所述方法包括：
所述编码器从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同；
所述编码器针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据；
所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据；
所述编码器将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
本申请第二方面提供一种透明视频处理系统，所述系统包括编译器和解码播放器；
所述编译器，用于从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同；
所述编译器，还用于针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据；
所述编译器，还用于按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据；
所述编译器，还用于将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
本申请提供的透明视频处理方法和系统，所述编码器通过从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧，每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同，并针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据，进而按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据，从而将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。这样，通过将目标视频中的颜色通道的第一图像帧和透明度通道的第二图像帧分别编码到不同的视频轨道，使得第一图像帧和第二图像帧可以有独立的图片大小和编码方式，这样，可根据实际应用情况调整各自的图片大小和编码方式，以节省视频存储和传输时使用的空间和带宽，达到节约成本的目的。
附图说明
图1为本申请提供的透明视频处理方法实施例一的流程图；
图2为本申请提供的透明视频处理方法实施例二的流程图；
图3为本申请提供的透明视频处理方法实施例三的流程图；
图4为本申请提供的透明视频处理系统实施例一的示意图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请提供一种透明视频处理方法和系统，用以节省透明视频存储和传输时使用的空间和带宽以达到节约成本的目的。
本申请提供的透明视频处理方法和系统，所述编码器通过从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧，每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同，并针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据，进而按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据，从而将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。这样，通过将目标视频中的颜色通道的第一图像帧和透明度通道的第二图像帧分别编码到不同的视频轨道，使得第一图像帧和第二图像帧可以有独立的图片大小和编码方式，这样，可根据实际应用情况调整各自的图片大小和编码方式，以节省视频存储和传输时使用的空间和带宽，达到节约成本的目的。
下面给出具体的实施例，用以详细介绍本申请的技术方案。
图1为本申请提供的透明视频处理方法实施例一的流程图。请参照图1，本实施例提供的方法，所述方法应用于透明视频处理系统，所述系统包括编码器和解码播放器，所述方法包括：
S101、所述编码器从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同。
具体的，透明视频处理系统用于对透明视频进行处理，透明视频处理系统包括编码器和解码播放器，其中，编码器对透明视频进行编码，解码播放器对编码后的编码文件进行解码、播放。
具体的，待编码的目标视频指的是编码器将要编码的透明视频。每对图像帧对包含颜色通道的第一图像帧和透明度通道的第二图像帧，其中，透明视频包含颜色通道和透明度通道，颜色通道指定了透明视频中每个像素的颜色级别，透明度通道指定了透明视频中每个像素的透明度级别。
进一步的，从颜色通道获取的图像帧为第一图像帧，从透明度通道获取的图像帧为第二图像帧。每对图像帧中的第一图像帧和第二图像帧的时间戳相同，因为每对图像帧中的第一图像帧和第二图像帧是在同一时间被编码器获取的。
需要说明的是，第一图像帧可以存储预乘透明度后的颜色或不预乘透明度的颜色。
例如，一实施例一可能的实现方式中，第一图像帧为RGB图像(其每个像素的颜色值为其原始的颜色值，没有乘以透明度值)，第二图像帧为A图像；一实施例另一可能的实现方式中，第一图像帧为RGBA图像(其每个像素的颜色值为原始的颜色值乘以透明度值后的值)，第二图像帧为1图像(其每每个像素的像素值为1)。
本实施例提供的方法，预乘透明度后的第一图像帧更容易用于颜色合成和图像叠加。
具体实现时，当用户想要播放某个透明视频时，会在用户端(用户端上集成由解码播放器)触发一个处理指令，指示透明视频处理系统中编码器对该透明视频进行编码，当编码器接收到用户触发的处理指令后，编码器会对该透明视频进行编码，并将编码后得到的编码文件发送给用户端，进而用户端在接收到该编码文件时，利用其上集成的解码播放器对该编码文件进行解码，得到带透明信息的透明视频，并播放该透过视频。
例如，一实施例中，待编码的目标视频为目标视频A，从目标视频A获取的多对图像帧对包括图像帧对1、图像帧对2和图像帧对3。其中，图像帧对1包括第一图像帧11和第二图像帧12，图像帧对2包括第一图像帧21和第二图像帧22，图像帧对3包括第一图像帧31和第二图像帧32。
S102、所述编码器针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据。
具体的，第一编码方式是根据实际需要选择的，本实施例中，不对第一编码方式进行限定，例如，一实施例中，第一编码方式可以为HEVC(High Efficiency Video Coding，高效视频编码)、AVC(AdvancedVideo Coding，高级视频编码)、MPEG-4(Moving PictureExperts Group-Part 4，动态图像专家组第四部分)、MPEG-2(Moving Picture ExpertsGroup-Part 2，动态图像专家组第二部分)、VP8(Video Compression Standard 8，视频压缩规范8)、VP9(Video Compression Standard 9，视频压缩规范9)和AV1(Audio andVideo1，音频和视频编码1)中的任意一种编码方式。需要说明的是，针对每对所述图像帧对中的第一图像帧，第一编码方式是相同的。
进一步的，第一视频轨道指的是编码器对第一图像帧进行编码时、所编入的视频轨道。具体实现时，第一视频轨道是编码器的第一个视频轨道，即第一视频轨道为视频轨道T1。第一码流数据指的是所有的第一图像帧经编码器编码后生成的码流数据。
结合上面的例子，本步骤中，编码器针对图像帧对1，就按照编码方式1将第一图像帧11编码入视频轨道T1，同样的，针对图像帧对2，就按照编码方式1将第一图像帧21编码入视频轨道T1，进一步的，针对图像帧对3，就按照编码方式1将第一图像帧31编码入视频轨道T1，这样，生成第一码流数据M1。
S103、所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据。
具体的，第二编码方式是根据实际需要选择的，本实施例中，不对第二编码方式进行限定，例如，一实施例中，第二编码方式可以为HEVC、AVC、MPEG-4、MPEG-2、VP8、VP9和AV1中的任一种编码方式。需要说明的是，针对每对所述图像帧对中的第二图像帧，第二编码方式是相同的。
具体的，第一编码方式和第二编码方式可以相同，且第一编码方式中的编码参数和第二编码方式中的编码参数也可以相同。
可选的，在本申请一可能的实现方式中，所述第一编码方式和所述第二编码方式不同；或者，所述第一编码方式和所述第二编码方式相同、且所述第一编码方式中的编码参数和所述第二编码方式中的编码参数不同。
具体的，在一可能的实现方式中，第一编码方式和第二编码方式可以是不同的。例如，一实施例中，第一编码方式为HEVC，第二编码方式为AVC。在另一可能的实现方式中，第一编码方式和第二编码方式可以是相同的，但是第一编码方式中的编码参数和第二编码方式中的编码参数是不同的。例如，一实施例中，第一编码方式和第二编码方式都为HEVC，但是第一编码方式中的编码参数为编码参数1，第二编码方式中的编码参数为编码参数2。
本实施例提供的方法，使得颜色信息和透明信息可以有独立的编码方式和编码参数，可根据实际应用情况进行调整以节省视频存储和传输时使用的空间和带宽，以达到节约成本的目的。
进一步的，第二视频轨道指的是编码器对第二图像帧进行编码时、所编入的视频轨道。具体实现时，第二视频轨道可以是编码器中的第二个视频轨道(需要说明的是，第二个视频轨道位于第一个视频轨道之后，这样，在传统的解码播放器中，编码文件也可以被正确识别和播放，可提升兼容性)。即第二视频轨道可以为视频轨道T2。第二码流数据指的是所有的第二图像帧经编码器编码后生成的码流数据。
可选的，所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，本实施例提供的方法，还可以包括：
所述编码器将所述第二图像帧缩放为预设尺寸的图像帧。
具体的，预设尺寸是根据实际需要设定的，本实施例中，不对预设尺寸的具体值进行限定。例如，一实施例中，预设尺寸为1080p。
本实施例提供的方法，通过缩放图像帧，可以节省编码成本。
例如，一实施例中，第一编码方式和第二编码方式相同，均为编码方式1。结合上面的例子，在一实施例的一种实现方式中，编码器针对图像帧对1，就按照编码方式1将第二图像帧12编码入视频轨道T2，；针对图像帧对2，就按照编码方式1将第二图像帧22编码入视频轨道T2；针对图像帧对3，就按照编码方式1将第二图像帧32编码入视频轨道T2，最后，生成第二码流数据N1。
再例如，另一实施例中，第一编码方式和第二编码方式不同，第一编码方式为编码方式1，第二编码方式为编码方式2(其中，1和2可以为编码方式的标识信息)。结合上面的例子，在一实施例的另一种实现方式中，编码器针对图像帧对1，就按照编码方式2将第二图像帧12编码入视频轨道T2，生成第二码流数据N1。针对图像帧对2，就按照编码方式2将第二图像帧22编码入视频轨道T2，生成第二码流数据N2。针对图像帧对3，就按照编码方式2将第二图像帧32编码入视频轨道T2，生成第二码流数据N3。
S104、所述编码器将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
具体的，目标视频的源文件指的是未经编码的原始目标视频文件。
具体实现时，编码器将第一码流数据和第二码流数据与目标视频的源文件进行合并，得到所述源文件对应的编码文件。
本实施例提供的方法，颜色通道的第一图像帧和透明度通道的第二图像帧时分来进行编码的，这样可以避免因色度抽样而带来的第一图像帧和第二图像帧混合在一起的失真现象。
本实施例提供的透明视频处理方法，所述方法应用于透明视频处理系统，所述系统包括编码器和解码播放器，所述编码器通过从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧，每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同，并针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据，进而按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据，从而将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。这样，通过将目标视频中的颜色通道的第一图像帧和透明度通道的第二图像帧分别编码到不同的视频轨道，使得第一图像帧和第二图像帧可以有独立的图片大小和编码方式，这样，可根据实际应用情况调整各自的图片大小和编码方式，以节省视频存储和传输时使用的空间和带宽，达到节约成本的目的。
可选的，本实施例还可用于将音频内容编码入音频轨道，编码方式可选包括但不限于：AAC、OPUS和MPEG-3。
本实施例提供的方法，提高了透明视频处理系统的兼容性。
图2为本申请提供的透明视频处理方法实施例二的流程图。请参照图2，本实施例提供的方法，在上述实施例的基础上，所述方法还包括：
S201、所述解码播放器从所述目标视频的源文件对应的编码文件中获取颜色通道对应的第三码流数据和透明度通道对应的第四码流数据。
具体实现时，解码播放器首先打开目标视频的源文件对应的编码文件，然后从编码文件中逐帧读取码流数据，其中，码流数据包括颜色通道对应的码流数据和透明度通道对应的码流数据。进而根据目标视频的源文件的格式规范，解析每一帧对应的码流数据，分别得到颜色通道对应的第三码流数据和透明度透明对应的第四码流数据。
结合上面的例子，本步骤中，解码播放器从目标视频1的源文件1对应的编码文件A中，获取颜色通道对应的第三码流数据D1、以及透明度通道对应的第四码流数据E1。
S202、所述解码播放器按照所述第一编码方式对应的第一解码方式对所述第三码流数据进行解码，得到多个颜色通道的第三图像帧。
具体的，第一解码方式与第一编码方式一一对应。换言之，一种编码方式有一个对应的解码方式，以确保数据可以在传输、存储和播放过程中进行有效的压缩和解压缩。例如，一实施例中，第一编码方式为编码方式1，与第一编码方式对应的第一解码方式为解码方式1。
结合上面的例子，本步骤中，解码播放器按照解码方式1对第三码流数据D1进行解码，得到多个颜色通道的第三图像帧。例如，多个颜色通道的第三图像帧包括图像帧A1、图像帧A2和图像帧A3。
S203、所述解码播放器按照所述第二编码方式对应的第二解码方式对所述第四码流数据进行解码，得到多个透明度通道的第四图像帧。
具体的，第二解码方式与第二编码方式一一对应。换言之，一种编码方式有一个对应的解码方式，以确保数据可以在传输、存储和播放过程中进行有效的压缩和解压缩。例如，一实施例中，第二编码方式为编码方式1，与第二编码方式对应的第二解码方式为解码方式1；再例如，一实施例中，第二编码方式为编码方式2，与第二编码方式对应的第二解码方式为解码方式2。
结合上面的例子，第二编码方式为编码方式1时，此时，与其对应的解码方式为解码方式1，此时，解码播放器按照解码方式1对第四码流数据E1进行解码，得到对应多个透明度通道的第四图像帧。例如，第四图像帧包括图像帧B1、图像帧B2和图像帧B3。
S204、所述解码播放器针对每个所述第三图像帧，从多个所述第四图像帧中查找与该第三图像帧时间戳相同的目标第四图像帧，并对该第三图像帧和所述目标第四图像帧进行合并，得到带透明信息的透明图像帧。
具体的，所述第三图像帧与所述第四图像帧的数量相同，多个所述第四图像帧中存在与各个所述第三图像帧时间戳相同的第四图像帧。
结合上面的例子，本步骤中，解码播放器针对图像帧A1，从多个第四图像帧中查找到与图像帧A1时间戳相同的目标第四图像帧，例如，查找到的目标第四图像帧为B1，此时，就将图像帧A1和图像帧B1进行合并，得到带透明信息的透明图像帧1。
类似的，解码播放器针对图像帧A2，从多个第四图像帧中查找到与图像帧A2时间戳相同的目标第四图像帧，例如，查找到的目标第四图像帧为B2，此时，就将图像帧A2和图像帧B2进行合并，得到带透明信息的透明图像帧2。
类似的，解码播放器针对图像帧A3，从多个第四图像帧中查找到与图像帧A3时间戳相同的目标第四图像帧，例如，查找到的目标第四图像帧为B3，此时，就将图像帧A3和图像帧B3进行合并，得到带透明信息的透明图像帧3。
S205、所述解码播放器根据多个所述透明图像帧，生成带透明信息的透明视频。
具体实现时，首先创建一个新的透明视频容器，用于保存多个所述透明图像帧。然后在透明视频容器中设置视频的参数，并将多个所述透明图像帧按照时间戳顺序添加到透明视频容器中。最后选择适当的输出设置和编码选项，保存生成的透明视频。
结合上面的例子，本步骤中，先创建一个新的透明视频容器，然后在透明视频容器中设置视频的参数，并按照透明图像帧1、透明图像帧2和透明图像帧3的顺序将这3个透明图像帧添加到透明视频容器中，最后选择适当的输出设置和编码选项，得到带透明信息的透明视频。
本实施例提供的透明视频处理方法，解码播放器通过从所述目标视频的源文件对应的编码文件中获取颜色通道对应的第三码流数据和透明度通道对应的第四码流数据，并按照所述第一编码方式对应的第一解码方式对所述第三码流数据进行解码，得到多个颜色通道的第三图像帧，进而按照所述第二编码方式对应的第二解码方式对所述第四码流数据进行解码，得到多个透明度通道的第四图像帧，从而针对每个所述第三图像帧，从多个所述第四图像帧中查找与该第三图像帧时间戳相同的目标第四图像帧，并对该第三图像帧和所述目标第四图像帧进行合并，得到带透明信息的透明图像帧，最后根据多个所述透明图像帧，生成带透明信息的透明视频。这样，针对颜色通道对应的第三码流数据和透明度通道对应的第四码流数据，采用与各自编码方式对应的解码方式进行解码，得到对应颜色通道的第三图像帧和对应透明度通道的第四图像帧，进而将第三图像帧和第四图像帧按照时间戳合并为透明图像帧，从而基于多个透明图像帧得到带透明信息的透明视频。这样，不仅可以得到透明视频，还解决了传统视频解码播放器遮挡下层的视频的问题，提高了用户体验。
相应的，解码播放器，还可以对编码的音频内容进行解码播放。
图3为本申请提供的透明视频处理方法实施例三的流程图。请参照图3，本实施例提供的方法，在上述实施例的基础上，所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，所述方法还包括：
S301、所述编码器判断已编码的第二图像帧是否存在与所述第二图像帧内容相同的目标第二图像帧。
结合上面的例子，例如，一实施例中，已编码的第二图像帧包括第二图像帧12，编码器在对第二图像帧22编码之前，先判断第二图像帧12的内容是否与第二图像帧22的内容相同。
S302、所述编码器在判断已编码的第二图像帧中存在目标第二图像帧时，将所述目标第二图像帧的编码结果作为所述第二图像帧的编码结果写入所述第二视频轨道。
结合上面的例子，第二图像帧12的内容与第二图像帧22的内容相同，本步骤中，就将第二图像帧12的编码结果作为第二图像帧22的编码结果直接写入视频轨道T2。
S303、所述编码器在判断已编码的第二图像帧中不存在目标第二图像帧时，按照所述第二编码方式将所述第二图像帧编码入第二视频轨道。
结合上面的例子，第二图像帧12的内容与第二图像帧22的内容不同，在一实施例的一种实现方式中，就按照编码方式1将第二图像帧22编码入视频轨道T2。
本实施例提供的透明视频处理方法，所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，所述编码器通过判断已编码的第二图像帧是否存在与所述第二图像帧内容相同的目标第二图像帧，并在判断已编码的第二图像帧中存在目标第二图像帧时，将所述目标第二图像帧的编码结果作为所述第二图像帧的编码结果写入所述第二视频轨道，而在判断已编码的第二图像帧中不存在目标第二图像帧时，按照所述第二编码方式将所述第二图像帧编码入第二视频轨道。这样，在已编码的图像帧与待编码的图像帧内容相同时，可直接将已编码的图像帧的编码结果作为待编码的图像帧的编码结果写入对应的视频轨道，节省了编码成本，提高了编码效率。
与前述一种透明视频处理方法的实施例相对应，本申请还提供了一种透明视频处理系统的实施例。图4为本申请提供的透明视频处理系统实施例一的示意图，请参照图4，本实施例提供的系统，包括编码器和解码播放器；其中，
所述编译器，用于从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同；
所述编译器，还用于针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据；
所述编译器，还用于按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据；
所述编译器，还用于将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
可选的，所述解码播放器，用于从所述目标视频的源文件对应的编码文件中获取颜色通道对应的第三码流数据和透明度通道对应的第四码流数据；
所述解码播放器，还用于按照所述第一编码方式对应的第一解码方式对所述第三码流数据进行解码，得到多个颜色通道的第三图像帧；
所述解码播放器，还用于按照所述第二编码方式对应的第二解码方式对所述第四码流数据进行解码，得到多个透明度通道的第四图像帧；
所述解码播放器，还用于针对每个所述第三图像帧，从多个所述第四图像帧中查找与该第三图像帧时间戳相同的目标第四图像帧，并对该第三图像帧和所述目标第四图像帧进行合并，得到带透明信息的透明图像帧；
所述解码播放器，还用于根据多个所述透明图像帧，生成带透明信息的透明视频。
可选的，所述第一编码方式和所述第二编码方式不同；或者，所述第一编码方式和所述第二编码方式相同、且所述第一编码方式中的编码参数和所述第二编码方式中的编码参数不同。
可选的，所述编码器，还用于在按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，判断已编码的第二图像帧是否存在与所述第二图像帧内容相同的目标第二图像帧；
所述编码器，还用于在判断已编码的第二图像帧中存在目标第二图像帧时，将所述目标第二图像帧的编码结果作为所述第二图像帧的编码结果写入所述第二视频轨道；
所述编码器，还用于在判断已编码的第二图像帧中不存在目标第二图像帧时，按照所述第二编码方式将所述第二图像帧编码入第二视频轨道。
可选的，所述编码器，还用于在按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，将所述第二图像帧缩放为预设尺寸的图像帧。
上述系统中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

Claims (10)

1.一种透明视频处理方法，其特征在于，所述方法应用于透明视频处理系统，所述系统包括编码器和解码播放器，所述方法包括：
所述编码器从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同；
所述编码器针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据；
所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据；
所述编码器将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述解码播放器从所述目标视频的源文件对应的编码文件中获取颜色通道对应的第三码流数据和透明度通道对应的第四码流数据；
所述解码播放器按照所述第一编码方式对应的第一解码方式对所述第三码流数据进行解码，得到多个颜色通道的第三图像帧；
所述解码播放器按照所述第二编码方式对应的第二解码方式对所述第四码流数据进行解码，得到多个透明度通道的第四图像帧；
所述解码播放器针对每个所述第三图像帧，从多个所述第四图像帧中查找与该第三图像帧时间戳相同的目标第四图像帧，并对该第三图像帧和所述目标第四图像帧进行合并，得到带透明信息的透明图像帧；
所述解码播放器根据多个所述透明图像帧，生成带透明信息的透明视频。
3.根据权利要求1所述的方法，其特征在于，所述第一编码方式和所述第二编码方式不同；或者，所述第一编码方式和所述第二编码方式相同、且所述第一编码方式中的编码参数和所述第二编码方式中的编码参数不同。
4.根据权利要求1所述的方法，其特征在于，所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，所述方法还包括：
所述编码器判断已编码的第二图像帧是否存在与所述第二图像帧内容相同的目标第二图像帧；
所述编码器在判断已编码的第二图像帧中存在目标第二图像帧时，将所述目标第二图像帧的编码结果作为所述第二图像帧的编码结果写入所述第二视频轨道；
所述编码器在判断已编码的第二图像帧中不存在目标第二图像帧时，按照所述第二编码方式将所述第二图像帧编码入第二视频轨道。
5.根据权利要求1所述的方法，其特征在于，所述编码器按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，所述方法还包括：
所述编码器将所述第二图像帧缩放为预设尺寸的图像帧。
6.一种透明视频处理系统，其特征在于，所述系统包括编译器和解码播放器；
所述编译器，用于从待编码的目标视频中获取多对图像帧对；其中，每对所述图像帧对包括颜色通道的第一图像帧和透明度通道的第二图像帧；每对所述图像帧中的所述第一图像帧和所述第二图像帧的时间戳相同；
所述编译器，还用于针对每对所述图像帧对，按照第一编码方式将所述图像帧对中的所述第一图像帧编码入第一视频轨道，生成第一码流数据；
所述编译器，还用于按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道，生成第二码流数据；
所述编译器，还用于将所述第一码流数据和所述第二码流数据写入所述目标视频的源文件中，得到所述源文件对应的编码文件。
7.根据权利要求6所述的系统，其特征在于，所述解码播放器，用于从所述目标视频的源文件对应的编码文件中获取颜色通道对应的第三码流数据和透明度通道对应的第四码流数据；
所述解码播放器，还用于按照所述第一编码方式对应的第一解码方式对所述第三码流数据进行解码，得到多个颜色通道的第三图像帧；
所述解码播放器，还用于按照所述第二编码方式对应的第二解码方式对所述第四码流数据进行解码，得到多个透明度通道的第四图像帧；
所述解码播放器，还用于针对每个所述第三图像帧，从多个所述第四图像帧中查找与该第三图像帧时间戳相同的目标第四图像帧，并对该第三图像帧和所述目标第四图像帧进行合并，得到带透明信息的透明图像帧；
所述解码播放器，还用于根据多个所述透明图像帧，生成带透明信息的透明视频。
8.根据权利要求6所述的系统，其特征在于，所述第一编码方式和所述第二编码方式不同；或者，所述第一编码方式和所述第二编码方式相同、且所述第一编码方式中的编码参数和所述第二编码方式中的编码参数不同。
9.根据权利要求6所述的系统，其特征在于，所述编码器，还用于在按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，判断已编码的第二图像帧是否存在与所述第二图像帧内容相同的目标第二图像帧；
所述编码器，还用于在判断已编码的第二图像帧中存在目标第二图像帧时，将所述目标第二图像帧的编码结果作为所述第二图像帧的编码结果写入所述第二视频轨道；
所述编码器，还用于在判断已编码的第二图像帧中不存在目标第二图像帧时，按照所述第二编码方式将所述第二图像帧编码入第二视频轨道。
10.根据权利要求6所述的系统，其特征在于，所述编码器，还用于在按照第二编码方式将所述图像帧对中的所述第二图像帧编码入第二视频轨道之前，将所述第二图像帧缩放为预设尺寸的图像帧。
CN202311364254.7A 2023-10-20 2023-10-20 一种透明视频处理方法和系统 Pending CN117354533A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311364254.7A CN117354533A (zh) 2023-10-20 2023-10-20 一种透明视频处理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311364254.7A CN117354533A (zh) 2023-10-20 2023-10-20 一种透明视频处理方法和系统

Publications (1)

Publication Number Publication Date
CN117354533A true CN117354533A (zh) 2024-01-05

Family

ID=89360964

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311364254.7A Pending CN117354533A (zh) 2023-10-20 2023-10-20 一种透明视频处理方法和系统

Country Status (1)

Country Link
CN (1) CN117354533A (zh)

Similar Documents

Publication Publication Date Title
TWI603609B (zh) 簡化視訊隨機存取之限制及單元類型
US7725593B2 (en) Scalable video coding (SVC) file format
TWI606722B (zh) 用於減少視訊編碼及解碼中之延遲的方法、系統及電腦可讀取媒體
RU2370906C2 (ru) Способ и устройство для редактирования видеофрагментов в сжатой области
CN102447906B (zh) 低延时视频解码
CN107634930B (zh) 一种媒体数据的获取方法和装置
US20120251015A1 (en) Decoding method, decoding apparatus, coding method, and coding apparatus
EP3962089A1 (en) Dependent random access point pictures
WO2019128668A1 (zh) 视频码流处理方法、装置、网络设备和可读存储介质
US20090219987A1 (en) Method and Device for Generating a Marked Data Flow, Method and Device for Inserting a Watermark Into a Marked Data Flow, and Marked Data Flow
CN115398481A (zh) 对图像执行人工智能编码和人工智能解码的设备和方法
CN118525518A (zh) 视频处理方法、装置及介质
CN115134629A (zh) 视频传输方法、系统、设备及存储介质
CN114363648A (zh) 直播系统混流过程中音视频对齐的方法、设备及存储介质
JP2009218873A (ja) デジタル放送受信機、および、プログラム
KR20160023777A (ko) 그래픽 처리기를 이용한 비디오 디코딩에 대한 픽처 참조 제어
CN117354533A (zh) 一种透明视频处理方法和系统
CN103379320A (zh) 视频图像码流处理方法和设备
TWI552573B (zh) 具有初始化片段之視訊及音訊之寫碼
TWI439137B (zh) 重建一圖像群以在該圖像群中隨機存取之方法及裝置
US7423652B2 (en) Apparatus and method for digital video decoding
EP4380156A1 (en) Video encoding method and apparatus, video decoding method and apparatus, and electronic device and storage medium
CN113261283B (zh) 视频处理方法、装置及计算机可读存储介质
CN118214872A (zh) 一种超高清无损图像编解码方法和系统
CN118509633A (zh) 视频转码方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination