CN115103228A - 视频流传输方法、装置、电子设备、存储介质及产品 - Google Patents
视频流传输方法、装置、电子设备、存储介质及产品 Download PDFInfo
- Publication number
- CN115103228A CN115103228A CN202210684393.7A CN202210684393A CN115103228A CN 115103228 A CN115103228 A CN 115103228A CN 202210684393 A CN202210684393 A CN 202210684393A CN 115103228 A CN115103228 A CN 115103228A
- Authority
- CN
- China
- Prior art keywords
- frame
- channel data
- data
- subframes
- header
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 230000005540 biological transmission Effects 0.000 title claims abstract description 61
- 239000002131 composite material Substances 0.000 claims abstract description 133
- 239000012634 fragment Substances 0.000 claims description 33
- 230000015654 memory Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 4
- 238000004458 analytical method Methods 0.000 claims description 3
- 230000010354 integration Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 19
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请提供了一种视频流传输方法、装置、电子设备、存储介质及产品,属于多媒体技术领域。方法包括:从视频流中获取目标视频帧的颜色通道数据和透明通道数据;分别对颜色通道数据和透明通道数据进行编码,得到多个子帧;基于多个子帧,确定目标帧头,目标帧头包括多个子帧的解码信息;将目标帧头和多个子帧整合为一个复合帧,复合帧的帧头为目标帧头,帧内容为多个子帧;向播放端传输复合帧。该方法将颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,这样在复合帧的传输过程中存在数据丢失的情况下,其颜色通道数据和透明通道数据均被丢失,进而避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
Description
技术领域
本申请涉及多媒体技术领域,特别涉及一种视频流传输方法、装置、电子设备、存储介质及产品。
背景技术
随着多媒体技术的发展,透明通道数据越来越多的被应用在视频流中,用来制作视频特效;因此,在视频流的传输过程中,不仅会将视频流的颜色通道数据传输到播放端,且还会将视频流的透明通道数据传输到播放端,以在播放端通过该透明通道数据和颜色通道数据实现带特效的视频的播放。
相关技术中,向播放端传输视频流时,对于视频流中的任一视频帧,会将视频帧中的颜色通道数据和透明通道数据分别进行编码,得到两个子帧,然后向播放端传输该两个子帧。
然而,在子帧的传输过程中,会存在子帧丢失的情况,而不论是颜色通道数据对应的子帧丢失还是透明通道数据对应的子帧丢失,都会导致视频帧错位,从而在播放端基于视频流播放视频时,就会出现视频有拖影,视频颜色被污染等情况,也即降低了视频的播放效果。
发明内容
本申请实施例提供了一种视频流传输方法、装置、电子设备、存储介质及产品,能够提高视频的播放效果。所述技术方案如下:
一方面,提供了一种视频流传输方法,所述方法包括:
从视频流中获取目标视频帧的颜色通道数据和透明通道数据;
分别对所述颜色通道数据和所述透明通道数据进行编码,得到多个子帧;
基于所述多个子帧,确定目标帧头,所述目标帧头包括所述多个子帧的解码信息;
将所述目标帧头和所述多个子帧整合为一个复合帧,所述复合帧的帧头为所述目标帧头,帧内容为所述多个子帧;
向播放端传输所述复合帧。
另一方面,提供了一种视频流传输方法,所述方法包括:
接收复合帧;
解析所述复合帧,得到目标帧头和帧内容,所述帧内容包括多个子帧,所述目标帧头包括所述多个子帧的解码信息;
基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据;
基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧。
另一方面,提供了一种视频流传输装置,所述装置包括:
第一获取模块,用于从视频流中获取目标视频帧的颜色通道数据和透明通道数据;
编码模块,用于分别对所述颜色通道数据和所述透明通道数据进行编码,得到多个子帧;
确定模块,用于基于所述多个子帧,确定目标帧头,所述目标帧头包括所述多个子帧的解码信息;
整合模块,用于将所述目标帧头和所述多个子帧整合为一个复合帧,所述复合帧的帧头为所述目标帧头,帧内容为所述多个子帧;
传输模块,用于向播放端传输所述复合帧。
另一方面,提供了一种视频流传输装置,所述装置包括:
第一接收模块,用于接收复合帧;
解析模块,用于解析所述复合帧,得到目标帧头和帧内容,所述帧内容包括多个子帧,所述目标帧头包括所述多个子帧的解码信息;
解码模块,用于基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据;
显示模块,用于基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧。
另一方面,提供了一种电子设备,所述电子设备包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述至少一条程序代码由所述一个或多个处理器加载并执行,以实现上述任一实现方式所述的视频流传输方法。
另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行,以实现上述任一实现方式所述的视频流传输方法。
另一方面,提供了一种计算机程序产品,所述计算机程序产品存储有至少一条程序代码,所述至少一条程序代码用于被处理器执行以实现如上述任一实现方式所述的视频流传输方法。
本申请提供了一种视频流传输方法,由于该方法将颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,这样在复合帧的传输过程中存在数据丢失的情况下,其颜色通道数据和透明通道数据均被丢失,进而避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
附图说明
图1示出了本申请一个示例性实施例示出的实施环境的示意图;
图2示出了本申请一个示例性实施例示出的视频流传输方法的流程图;
图3示出了本申请一个示例性实施例示出的视频流传输方法的流程图;
图4示出了本申请一个示例性实施例示出的视频流传输方法的流程图;
图5示出了本申请一个示例性实施例示出的数据编码示意图;
图6示出了本申请一个示例性实施例示出的视频流传输方法的流程图;
图7示出了本申请一个示例性实施例示出的视频流传输方法的流程图;
图8示出了本申请一个示例性实施例示出的播放端播放视频的示意图;
图9示出了本申请一个示例性实施例示出的视频流传输装置的框图;
图10示出了本申请一个示例性实施例示出的视频流传输装置的框图;
图11示出了本申请一个示例性实施例示出的电子设备的框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
需要说明的是,本申请所涉及的信息(包括但不限于用户设备信息、用户个人信息等)、数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)以及信号,均为经用户授权或者经过各方充分授权的,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。例如,本申请中涉及到的颜色通道数据和透明通道数据等都是在充分授权的情况下获取的。
请参考图1,其示出了本申请一个示例性实施例所提供的实施环境的示意图。在该实施环境中,电子设备包括发送端100和播放端200,发送端100和播放端200通过有线或无线网络进行数据的传输。其中,发送端100用于将视频流中视频帧的数据进行编码后,向播放端200传输编码后的数据;播放端200用于接收编码后的数据,且对编码后的数据进行解码,以得到视频流中的视频帧并进行显示,进而实现在播放端200播放视频。
在一些实施例中,发送端100提供为终端或服务器,播放端200提供为终端。终端可以为智能手机、智能手表、台式电脑、手提电脑、虚拟现实终端、增强现实终端、无线终端和膝上型便携计算机等设备中的至少一种。终端具有通信功能,可以接入有线网络或无线网络。终端可以泛指多个终端中的一个,本领域技术人员可以知晓,上述终端的数量可以更多或更少。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式文件系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。在一些实施例中,服务器与终端通过有线或无线通信方式进行直接或间接的连接,本公开实施例对此不作限定。可选地,上述服务器的数量可以更多或更少,本公开实施例对此不加以限定。当然,服务器还可以包括其他功能服务器,以便提供更全面且多样化的服务。其中,服务器承担主要计算工作,终端承担次要计算工作;或者,服务器承担次要计算工作,终端承担主要计算工作;或者,服务器或终端分别能够单独承担计算工作,本公开实施例对此不作限定。
在一些实施例中,本申请实施例提供的视频流传输方法应用在视频直播、视频连麦或视频会议等视频实时播放的场景中,但并不限于此。其中,视频流由发送端100传输至播放端200时,会基于本申请实施例提供的方法将视频流中视频帧的数据传输至播放端200,以在播放端200播放视频。
请参考图2,其示出了本申请一个示例性实施例示出的视频流传输方法的流程图。方法包括:
201、发送端从视频流中获取目标视频帧的颜色通道数据和透明通道数据。
在本申请实施例中,视频流中包括多个视频帧,任一视频帧中包括颜色通道数据和透明通道数据,透明通道数据为阿尔法透明通道数据,目标视频帧为多个视频帧中当前待传输的视频帧。发送端对多个视频帧依次执行步骤201-205,即向播放端依次传输多个视频帧对应的复合帧,以实现发送端和播放端之间视频流的传输。
202、发送端分别对颜色通道数据和透明通道数据进行编码,得到多个子帧。
在本申请实施例中,发送端通过两个独立的编码器分别对颜色通道数据和透明通道数据进行有损编码,得到多个子帧。
203、发送端基于多个子帧,确定目标帧头。
在本申请实施例中,目标帧头包括多个子帧的解码信息,解码信息用于对多个子帧进行解码,得到颜色通道数据和透明通道数据。
204、发送端将目标帧头和多个子帧整合为一个复合帧。
在本申请实施例中,复合帧的帧头为目标帧头,帧内容为多个子帧。
205、发送端向播放端传输复合帧。
本申请提供了一种视频流传输方法,由于该方法将颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,这样在复合帧的传输过程中存在数据丢失的情况下,其颜色通道数据和透明通道数据均被丢失,进而避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图3,其示出了本申请一个示例性实施例示出的视频流传输方法的流程图。方法包括:
301、播放端接收复合帧。
在本申请实施例中,复合帧为目标视频帧对应的复合帧,复合帧基于目标视频帧的颜色通道数据和透明通道数据确定。
302、播放端解析复合帧,得到目标帧头和帧内容。
在本申请实施例中,帧内容包括多个子帧,目标帧头包括多个子帧的解码信息。
303、播放端基于多个子帧的解码信息,解码帧内容,得到目标视频帧的颜色通道数据和透明通道数据。
在本申请实施例中,由于对复合帧的帧内容进行解码,能够得到一一对应的颜色通道数据和透明通道数据,进而避免了视频帧的错位情况,保证了基于视频帧播放视频的效果。
304、播放端基于目标视频帧的颜色通道数据和透明通道数据,显示目标视频帧。
本申请实施例提供了一种视频流传输方法,由于该方法接收的是复合帧,而该复合帧能够解码得到颜色通道数据和透明通道数据,进而通过该复合帧能够同时获取视频帧的颜色通道数据和透明通道数据,基于该视频帧的颜色通道数据和透明通道数据进行视频播放,避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图4,其示出了本申请一个示例性实施例示出的视频流传输方法的流程图。方法包括:
401、发送端从视频流中获取目标视频帧的颜色通道数据和透明通道数据。
可选地,视频流中多个视频帧的图像格式为YUVA420P;其中,Y代表视频中图像的亮度分量,U代表视频中图像的色度分量,为图像的蓝色部分去掉亮度得到的,V代表视频中图像的色度分量,为图像的红色部分去掉亮度得到的,A代表透明通道数据。相应地,发送端对目标视频帧的颜色通道数据和透明通道数据进行抽取,得到该目标视频帧的颜色通道数据和透明通道数据。
402、发送端分别对颜色通道数据和透明通道数据进行编码,得到多个子帧。
在一些实施例中,多个子帧包括颜色通道数据对应的第一子帧和透明通道对应的第二子帧;请参考图5,其示出了本申请一个示例性实施例示出的数据编码示意图。发送端从视频流中获取目标视频帧的颜色通道数据和透明通道数据后,将颜色通道数据和透明通道数据分别进行独立编码,得到第一子帧和第二子帧,其中,Y、U和V代表颜色通道数据,A代表透明通道数据,X代表透明通道数据中的填充数据,该填充数据为0或噪声数据,以增加透明通道数据的长度,使透明通道数据能够编码为一个子帧。
其中,发送端通过编码器VP8和VP9中的至少一个分别对颜色通道数据和透明通道数据进行有损编码。可选地,发送端通过编码器VP8和VP9分别对颜色通道数据和透明通道数据进行编码;或者发送端均通过编码器VP8分别对颜色通道数据和透明通道数据进行编码;或者发送端均通过编码器VP9分别对颜色通道数据和透明通道数据进行编码。
在一些实施例中,发送端分别对颜色通道数据和透明通道数据进行编码,得到多个子帧,包括以下步骤:发送端获取目标视频帧的视频内容数据;发送端对颜色通道数据、透明通道数据和视频内容数据分别进行编码,得到多个子帧。
其中,视频内容数据为与目标视频帧中待显示的内容数据强相关的数据,也可以为目标视频帧中待显示的内容数据,以使该视频内容数据与待显示的内容数据的严格同步。例如,在视频播放的答题场景中,该视频内容可以为答题题目和答案,对其进行编码后,作为多个子帧中的一个子帧,进而后续将该子帧与颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,保证了视频内容数据与颜色通道数据和视频内容数据之间的对应关系,避免了视频帧的错位,保证了视频播放的效果。
403、发送端获取多个子帧的子帧数和多个子帧中第一个子帧在复合帧中的第一起始位置。
其中,第一起始位置为第一个子帧在复合帧中的字节位置,如复合帧中第一个子帧之前的数据占据3个字节,则第一起始位置为第4个字节。
404、发送端基于子帧数和第一起始位置,生成解码信息。
可选地,解码信息仅包括子帧数和第一起始位置,则发送端组合子帧数和第一起始位置,得到解码信息,该解码信息中子帧数和第一起始位置的排列顺序可以根据需要进行设定并更改,在此不作具体限定。
405、发送端基于解码信息,确定目标帧头。
在一些实施例中,目标帧头为了标识目标视频帧,其还包括目标视频帧的第一索引标识,则发送端基于解码信息,确定目标帧头,包括以下步骤:发送端获取目标视频帧的第一索引标识;发送端基于解码信息和第一索引标识,生成目标帧头。
其中,子帧数、第一起始位置和第一索引标识在目标帧头中的位置可以根据需要进行设定并更改,在此不作具体限定;例如,发送端依次排列子帧数、第一索引标识和第一起始位置,得到目标帧头。其中,子帧数、第一索引标识和第一起始位置所占的字节数可以根据需要进行设定并更改。请参考表1,其示出了本申请一个示例性实施例示出的复合帧的数据结构,其包括目标帧头和多个子帧,子帧数、第一索引标识和第一起始位置依次排列在该目标帧头中,且子帧数、第一索引标识和第一起始位置所占的字节数分别为1、2和4。
表1
在该实施例中,通过基于第一索引标识,生成目标帧头,实现了对目标视频帧的标识,且便于在播放端对视频流中的多个视频帧进行排序,以及确定视频流中是否存在视频帧的丢失。
在该实施例中,通过子帧数和第一起始位置生成解码信息,进而基于解码信息生成目标帧头,这样后续基于目标帧头中的解码信息能够实现对复合帧的快速解码,进而提高视频播放的效率。
406、发送端确定多个子帧分别对应的子帧头和多个子帧分别对应的帧数据。
在一些实施例中,子帧的子帧头的确定过程,包括以下步骤:发送端获取子帧的子帧头在复合帧中的第二起始位置、子帧在复合帧中的第二索引标识、子帧的帧数据在复合帧中的第三起始位置、子帧的帧数据的长度和子帧的类型;发送端基于第二起始位置、第二索引标识、第三起始位置、长度和类型,生成子帧头。
其中,第二起始位置表示子帧的子帧头在复合帧中的开始位置;在一种实现方式中,若第二起始位置标为0,则表示该子帧为最后一个子帧。第二索引标识用于标识该子帧为多个子帧中的哪一个子帧,如多个子帧的个数为两个,若第二索引标识为0,则表示该子帧为第一个子帧,若第二索引标识为1,则表示该子帧为第二个子帧。
其中,帧数据的长度指帧数据占据的字节数,子帧的类型包括子帧对应的编码器类型和子帧的帧类型;可选地,若编码器类型标为1,表示其对应的编码器为VP8,若编码器类型标为2,表示其对应的编码器为VP9。若帧类型标为1,表示该子帧为关键帧,若帧类型标为0,表示该子帧为非关键帧。其中,第二起始位置、第二索引标识、第三起始位置、长度和类型在子帧头中的位置可以根据需要进行设定并更改;例如,发送端依次排列第二起始位置、第二索引标识、第三起始位置、长度和类型,得到子帧头。其中,子帧数、第一索引标识和第一起始位置所占的字节数可以根据需要进行设定并更改。
请参考表2,其示出了本申请一个示例性实施例示出的子帧的数据结构,其包括子帧头和帧数据,第二起始位置、第二索引标识、第三起始位置、长度、编码器类型和帧类型依次排列在该子帧头中,且第二起始位置、第二索引标识、第三起始位置、长度、编码器类型和帧类型所占的字节数分别为4、1、4、4、1和1,终端将多个子帧的子帧头依次排列完后,将该多个子帧的帧数据依次排列在该多个子帧头的后面。其中,帧数据为二进制格式的编码数据。
表2
在本申请实施例中,通过基于第二起始位置、第二索引标识、第三起始位置、长度和类型,得到子帧头,使得该子帧头能够有效代表该子帧的帧信息和该子帧的帧数据的相关信息,进而基于该子帧头能够快速得到帧数据,提高获取帧数据的效率。
407、发送端依次排列目标帧头、多个子帧分别对应的子帧头和多个子帧分别对应的帧数据,得到复合帧。
在该实施例中,通过依次排列目标帧头、多个子帧分别对应的子帧头和多个子帧分别对应的帧数据,进而便于基于排列在前的目标帧头对复合帧中的多个子帧进行解码,提高获取多个子帧分别对应的帧数据的效率。
408、发送端向播放端传输复合帧。
在一些实施例中,发送端向播放端传输复合帧,包括以下步骤:发送端将复合帧划分为多个子数据;发送端获取多个子数据分别对应的报头信息;发送端基于报头信息,分别对多个子数据进行封装,得到多个分片数据包,分片数据包包括报头信息和子数据;发送端向播放端发送多个分片数据包。
需要说明的是,由于数据在传输过程中,往往要经过网关等中间设备的处理,由于这些中间设备处理的数据不能超过额定字节,而在本申请实施例中,通过将复合帧以分片数据包的形式发送,降低了传输的数据的字节量,保证了网关设备对复合帧的有效处理,使得复合帧能够平稳的传输到播放端,进而能够提高复合帧传输到播放端的稳定性。
在一些实施例中,子数据对应的报头信息的确定过程,包括以下步骤:发送端获取目标传输协议的报头字段、子数据的序列号和时间戳;发送端基于报头字段、序列号和时间戳,生成子数据对应的报头信息。
其中,序列号用于表示子数据的发送顺序,时间戳用于表示子数据的采样时刻。可选地,序列号占16个比特位,用来表示子数据的发送顺序,也即是分片数据包的发送顺序,通常发送端每发送一个分片数据包时,该分片数据包的序列号递增1。可选地,时间戳占32个比特位。
可选地,目标传输协议为实时传输协议(Real-time Transport Protocol,RTP),报头字段包括多个比特位,前12位为目标传输协议的固定头;请参考表3,其示出了本申请一个示例性实施例示出的分片数据包的数据结构。报头字段包括V、P、X、CC、M和PT;其中,V为版本指示位,占2个比特位,用来指示目标传输协议的版本号。P为填充指示位,占1个比特位,用来表示分片数据包的尾部是否有RTP填充字段。X为拓展指示位,占1个比特位,用来表示报头信息与子数据之间是否存在拓展报头字段,如X为1,则表示存在拓展报头字段,如表3中的子数据之前的拓展报头字段。CC为贡献源字段指示位,占4个比特位,用来表示特约信源标识(Contributing source identifiers,CSRC)的个数。M为标记指示位,占一个比特位,用来表示该分片数据包是否为最后一个分片数据包。PT为有效载荷类型指示位,占7个比特位,用来表示子数据的类型。
表3
在一些实施例中,报头信息还包括同步信源标识(Synchronization sourceidentifier,SSRC)、CSRC和子数据的通用头,通用头占一个字节;请参考表4,其示出了本申请一个示例性实施例示出的通用头的数据结构。
表4
其中,E为拓展指示位,如E为1,则其后面存在两个字节的拓展数据,通常表示为图像标识(picture_id)。S用于标识该分片数据包是否为复合帧的第一个分片数据包,如S为1,则表示其为复合帧的第一个分片数据包。F表示该分片数据包的帧类型,例如,F为1表示关键帧,F为0表示非关键帧。其中,通用头的后面依次跟着复合帧的子数据,该子数据中包括目标帧头、多个子帧的子帧头和多个子帧的帧数据中的至少一项。在一些实施例中,子数据的后面还跟着填充字段,该填充字段为发送端和播放端协议好的自定义数据,在此不作具体限定。
在本申请实施例中,通过报头字段、序列号和时间戳来生成报头信息,由于序列号和时间戳分别标识子数据的发送顺序和采样时刻,进而基于该报头信息对子数据进行封装,使得该多个分片数据包依次排序,保证了复合帧对应的多个分片数据包的有序性,进而便于播放端基于该报头信息对该多个分片数据包进行排序组合,得到复合帧。
本申请提供了一种视频流传输方法,由于该方法将颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,这样在复合帧的传输过程中存在数据丢失的情况下,其颜色通道数据和透明通道数据均被丢失,进而避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图6,其示出了本申请一个示例性实施例示出的视频流传输方法的流程图。方法包括:
601、播放端接收至少一个分片数据包,分片数据包包括子数据和子数据的报头信息。
其中,复合帧以多个分片数据包的形式传输,则播放端接收该至少一个数据包,实现对复合帧的接收。
602、播放端在基于至少一个分片数据包分别包括的报头信息,确定复合帧在传输过程中不存在传输错误的情况下,解析复合帧,得到目标帧头和帧内容。
其中,帧内容包括多个子帧,目标帧头包括多个子帧的解码信息。
在本申请实施例中,通过在复合帧在传输过程中不存在传输错误的情况下,才对复合帧进行解析,此时接收的复合帧为数据准确的复合帧,进而保证了对复合帧进行解析的有效性。
在另一些实施例中,播放端在基于至少一个分片数据包分别包括的报头信息,确定复合帧在传输过程中存在传输错误的情况下,丢弃复合帧。
其中,报头信息包括报头字段、序列号和时间戳,则播放端基于至少一个分片数据包分别包括的报头信息,确定复合帧在传输过程中存在传输错误,包括以下至少一种实现方式:在一种实现方式中,播放端在至少一个分片数据包分别包括的报头信息中任一分片数据包的报头信息与该至少一个分片数据包中其他分片数据包的报头信息不匹配的情况下,则确定复合帧在传输过程中存在传输错误。在另一种实现方式中,播放端在至少一个分片数据包中任一分片数据包的时间戳与该至少一个分片数据包中其他分片数据包的时间戳不匹配的情况下,则确定复合帧在传输过程中存在传输错误。在另一种实现方式中,播放端在至少一个分片数据包的数量少于复合帧的多个分片数据包的数量的情况下,或至少一个分片数据包分别包括的序列号不连续的情况下,确定复合帧在传输过程中存在分片数据包丢失,进而确定复合帧在传输过程中存在传输错误。
在该实施例中,在复合帧在传输过程中存在传输错误的情况下,直接丢弃该复合帧,避免了该传输错误的复合帧对视频播放造成不利影响,从而提高了视频播放的效果。
603、播放端基于多个子帧的解码信息,解码帧内容,得到目标视频帧的颜色通道数据和透明通道数据。
在一些实施例中,播放端基于多个子帧的解码信息,解码帧内容,得到目标视频帧的颜色通道数据和透明通道数据,包括以下步骤:播放端基于多个子帧的解码信息,确定帧内容包括的多个子帧的子帧数和多个子帧中第一个子帧在复合帧中的第一起始位置;播放端基于子帧数和第一起始位置,确定帧内容中依次排列的多个子帧头和多个帧数据;播放端基于多个子帧头,从多个帧数据中,确定多个子帧分别对应的帧数据;播放端对多个子帧分别对应的帧数据进行解码,得到颜色通道数据和透明通道数据。
其中,播放端通过解码器VP8或VP9分别对多个子帧对应的帧数据进行独立解码,得到颜色通道数据和透明通道数据。在该实施例中,通过确定多个子帧的子帧数和第一个子帧的第一起始位置,进而得到多个子帧头和多个帧数据,再对多个子帧分别对应的帧数据进行解码,从而能够得到目标视频帧的颜色通道数据和透明通道数据,保证了对多个子帧进行解码的有序性和规律性。
在一种实现方式中,播放端对多个子帧分别对应的帧数据进行解码,得到颜色通道数据和透明通道数据,包括以下步骤:播放端对多个子帧分别对应的帧数据进行解码,得到颜色通道数据、透明通道数据和目标视频帧的视频内容数据。
在该实现方式中,将视频内容数据对应的子帧与颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,保证了视频内容数据与颜色通道数据和透明通道数据之间的对应关系,进而对多个子帧分别对应的帧数据进行解码,可以得到一一对应的颜色通道数据、透明通道数据和视频内容数据,避免了视频帧的错位,保证了视频播放的效果。
604、播放端基于目标视频帧的颜色通道数据和透明通道数据,显示目标视频帧。
在一种实现方式中,播放端组合颜色通道数据和透明通道数据,得到目标视频帧,再通过播放端的渲染模块对该目标视频帧进行渲染后,显示目标视频帧。
在一些实施例中,若播放端对多个子帧分别对应的帧数据进行解码,得到颜色通道数据、透明通道数据和目标视频帧的视频内容数据,则相应地,播放端基于目标视频帧的颜色通道数据和透明通道数据,显示目标视频帧,包括以下步骤:播放端基于颜色通道数据、透明通道数据和视频内容数据,显示目标视频帧。
在该实施例中,播放端基于颜色通道数据、透明通道数据和视频内容数据,显示目标数据,保证了颜色通道数据、透明通道数据和视频内容数据之间的一一对应关系,避免了视频帧错位,进而保证了视频播放的效果。
请参考图7,其示出了本申请一个示例性实施例示出的视频流传输方法的流程图。其中,目标视频帧为YUVA420帧,播放端对该目标视频帧进行拆解,得到颜色通道数据和透明通道数据,再分别对颜色通道数据和透明通道数据进行编码,得到第一子帧和第二子帧,将二者整合为复合帧,在RTP协议中打包传输,通过网络传输至播放端。播放端接收RTP协议中传输的分片数据包后组合为复合帧,从复合帧中得到第一子帧和第二子帧并进行解码,得到颜色通道数据和透明通道数据,再将该颜色通道数据和透明通道数据组合为YUVA420帧,对该视频帧进行渲染,以在播放端显示目标视频帧,实现视频的播放。
本申请实施例提供的视频流传输方法,实现了在实时传输协议中传输带透明通道数据的视频流,其保证了透明通道数据和颜色通道数据之间的一一对应,进而能够实现实时音视频场景中播放透明视频的效果,扩大了实时音视频的使用场景,且通过该方法还能够降低视频后期融合多种数据的成本。
在一些实施例中,通过本申请实施例提供的方法传输带透明通道数据的视频流,使得播放端可以设置前端对象的背景为透明状态,进而在播放时就可以动态添加背景,如参考图8,其示出了本申请一个示例性实施例示出的播放端播放视频的示意图,其可以在前端对象的透明背景下动态添加任意背景。
在一些实施例中,发送端还可以将带透明通道数据的视频帧转换为编码器支持的格式进行整帧编码,进而也能保证颜色通道数据和透明通道数据之间的对应关系。如将YUVA420格式的视频帧的UV部分进行填充,组合成YUV444格式,然后对YUV444格式的视频帧使用VP8、VP9或H264等编码器进行编码,编码后的数据在RTP协议中传输,播放端对编码后的数据进行解码后,根据发送端的填充规则将其还原为YUVA420格式的视频帧去播放,保证了在播放视频时颜色通道数据和透明通道数据之间的对应关系。且对视频流整帧编码,仅需要一个编码器,进而降低了编码的复杂性。
本申请实施例提供了一种视频流传输方法,由于该方法接收的是复合帧,而该复合帧能够解码得到颜色通道数据和透明通道数据,进而通过该复合帧能够同时获取视频帧的颜色通道数据和透明通道数据,基于该视频帧的颜色通道数据和透明通道数据进行视频播放,避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图9,其示出了本申请一个示例性实施例示出的视频流传输装置的框图,装置包括:
第一获取模块901,用于从视频流中获取目标视频帧的颜色通道数据和透明通道数据;
编码模块902,用于分别对颜色通道数据和透明通道数据进行编码,得到多个子帧;
确定模块903,用于基于多个子帧,确定目标帧头,目标帧头包括多个子帧的解码信息;
整合模块904,用于将目标帧头和多个子帧整合为一个复合帧,复合帧的帧头为目标帧头,帧内容为多个子帧;
传输模块905,用于向播放端传输复合帧。
在一些实施例中,确定模块903,用于:
获取多个子帧的子帧数和多个子帧中第一个子帧在复合帧中的第一起始位置;
基于子帧数和第一起始位置,生成解码信息;
基于解码信息,确定目标帧头。
在一些实施例中,确定模块903,用于:
获取目标视频帧的第一索引标识;
基于解码信息和第一索引标识,生成目标帧头。
在一些实施例中,整合模块904,用于:
确定多个子帧分别对应的子帧头和多个子帧分别对应的帧数据;
依次排列目标帧头、多个子帧分别对应的子帧头和多个子帧分别对应的帧数据,得到复合帧。
在一些实施例中,装置还包括:
第二获取模块,用于获取子帧的子帧头在复合帧中的第二起始位置、子帧在复合帧中的第二索引标识、子帧的帧数据在复合帧中的第三起始位置、子帧的帧数据的长度和子帧的类型;
生成模块,用于基于第二起始位置、第二索引标识、第三起始位置、长度和类型,生成子帧头。
在一些实施例中,传输模块905,用于:
将复合帧划分为多个子数据;
获取多个子数据分别对应的报头信息;
基于报头信息,分别对多个子数据进行封装,得到多个分片数据包,分片数据包包括报头信息和子数据;
向播放端发送多个分片数据包。
在一些实施例中,传输模块905,用于:
获取目标传输协议的报头字段、子数据的序列号和时间戳,序列号用于表示子数据的发送顺序,时间戳用于表示子数据的采样时刻;
基于报头字段、序列号和时间戳,生成子数据对应的报头信息。
在一些实施例中,编码模块902,用于:
获取目标视频帧的视频内容数据;
对颜色通道数据、透明通道数据和视频内容数据分别进行编码,得到多个子帧。
本申请提供了一种视频流传输装置,其将颜色通道数据和透明通道数据分别对应的子帧整合到一个复合帧中,这样在复合帧的传输过程中存在数据丢失的情况下,其颜色通道数据和透明通道数据均被丢失,进而避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图10,其示出了本申请一个示例性实施例示出的视频流传输装置的框图,装置包括:
第一接收模块1001,用于接收复合帧;
解析模块1002,用于解析所述复合帧,得到目标帧头和帧内容,所述帧内容包括多个子帧,所述目标帧头包括所述多个子帧的解码信息;
解码模块1003,用于基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据;
显示模块1004,用于基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧。
在一些实施例中,所述复合帧以多个分片数据包的形式传输;
所述装置还包括:
第二接收模块,用于接收至少一个分片数据包,所述分片数据包包括子数据和所述子数据的报头信息;
执行模块,用于在基于所述至少一个分片数据包分别包括的报头信息,确定所述复合帧在传输过程中不存在传输错误的情况下,执行所述解析所述复合帧,得到目标帧头和帧内容的步骤。
在一些实施例中,所述装置还包括:
丢弃模块,用于在基于所述至少一个分片数据包分别包括的报头信息,确定所述复合帧在传输过程中存在传输错误的情况下,丢弃所述复合帧。
在一些实施例中,所述解码模块1003,用于:
基于所述多个子帧的解码信息,确定所述帧内容包括的多个子帧的子帧数和所述多个子帧中第一个子帧在所述复合帧中的第一起始位置;
基于所述子帧数和所述第一起始位置,确定所述帧内容中依次排列的多个子帧头和多个帧数据;
基于所述多个子帧头,从所述多个帧数据中,确定所述多个子帧分别对应的帧数据;
对所述多个子帧分别对应的帧数据进行解码,得到所述颜色通道数据和所述透明通道数据。
在一些实施例中,所述解码模块1003,用于:
对所述多个子帧分别对应的帧数据进行解码,得到所述颜色通道数据、所述透明通道数据和所述目标视频帧的视频内容数据;
所述显示模块1004,用于:
基于所述颜色通道数据、所述透明通道数据和所述视频内容数据,显示所述目标视频帧。
本申请实施例提供了一种视频流传输装置,由于接收的是复合帧,而该复合帧能够解码得到颜色通道数据和透明通道数据,进而通过该复合帧能够同时获取视频帧的颜色通道数据和透明通道数据,基于该视频帧的颜色通道数据和透明通道数据进行视频播放,避免了视频流中视频帧的错位情况,从而能够提高视频的播放效果。
请参考图11,其示出了本申请一个示例性实施例所提供的电子设备1100的结构方框图。电子设备1100可以为智能家居、可穿戴设备、电视、耳机、智能手机、平板电脑等。本申请中的电子设备1100可以包括一个或多个如下部件:处理器1110、存储器1120和显示屏1130。
处理器1110可以包括一个或者多个处理核心。处理器1110利用各种接口和线路连接整个电子设备1100内的各个部分,通过运行或执行存储在存储器1120内的指令、程序、代码集或指令集,以及调用存储在存储器1120内的数据,执行电子设备1100的各种功能和处理数据。可选地,处理器1110可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器1110可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)、神经网络处理器(Neural-network Processing Unit,NPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏1130所需要显示的内容的渲染和绘制;NPU用于实现人工智能(Artificial Intelligence,AI)功能;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器1110中,单独通过一块芯片进行实现。
存储器1120可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选地,该存储器1120包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1120可用于存储指令、程序、代码、代码集或指令集。存储器1120可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等;存储数据区可存储根据电子设备1100的使用所创建的数据(比如音频数据、电话本)等。
显示屏1130是用于显示用户界面的显示组件。可选的,该显示屏1130为具有触控功能的显示屏,通过触控功能,用户可以使用手指、触摸笔等任何适合的物体在显示屏1130上进行触控操作。
显示屏1130通常设置在电子设备1100的前面板。显示屏1130可被设计成为全面屏、曲面屏、异型屏、双面屏或折叠屏。显示屏1130还可被设计成为全面屏与曲面屏的结合,异型屏与曲面屏的结合等,本实施例对此不加以限定。
除此之外,本领域技术人员可以理解,上述附图所示出的电子设备1100的结构并不构成对电子设备1100的限定,电子设备1100可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。比如,电子设备1100中还包括麦克风、扬声器、射频电路、输入单元、传感器、音频电路、无线保真(Wireless Fidelity,Wi-Fi)模块、电源、蓝牙模块等部件,在此不再赘述。
本申请实施例还提供了一种计算机可读介质,该计算机可读介质存储有至少一条指令,该至少一条指令由该处理器加载并执行以实现如上各个实施例示出的视频流传输方法。
本申请实施例还提供了一种计算机程序产品,该计算机程序产品存储有至少一条指令,该至少一条指令由该处理器加载并执行以实现如上各个实施例示出的视频流传输方法。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本申请实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (18)
1.一种视频流传输方法,其特征在于,所述方法包括:
从视频流中获取目标视频帧的颜色通道数据和透明通道数据;
分别对所述颜色通道数据和所述透明通道数据进行编码,得到多个子帧;
基于所述多个子帧,确定目标帧头,所述目标帧头包括所述多个子帧的解码信息;
将所述目标帧头和所述多个子帧整合为一个复合帧,所述复合帧的帧头为所述目标帧头,帧内容为所述多个子帧;
向播放端传输所述复合帧。
2.根据权利要求1所述的方法,其特征在于,所述基于所述多个子帧,确定目标帧头,包括:
获取所述多个子帧的子帧数和所述多个子帧中第一个子帧在所述复合帧中的第一起始位置;
基于所述子帧数和所述第一起始位置,生成所述解码信息;
基于所述解码信息,确定所述目标帧头。
3.根据权利要求2所述的方法,其特征在于,所述基于所述解码信息,确定所述目标帧头,包括:
获取所述目标视频帧的第一索引标识;
基于所述解码信息和所述第一索引标识,生成所述目标帧头。
4.根据权利要求1或2所述的方法,其特征在于,所述将所述目标帧头和所述多个子帧整合为一个复合帧,包括:
确定所述多个子帧分别对应的子帧头和所述多个子帧分别对应的帧数据;
依次排列所述目标帧头、所述多个子帧分别对应的子帧头和所述多个子帧分别对应的帧数据,得到所述复合帧。
5.根据权利要求4所述的方法,其特征在于,所述子帧的子帧头的确定过程,包括:
获取所述子帧的子帧头在所述复合帧中的第二起始位置、所述子帧在所述复合帧中的第二索引标识、所述子帧的帧数据在所述复合帧中的第三起始位置、所述子帧的帧数据的长度和所述子帧的类型;
基于所述第二起始位置、所述第二索引标识、所述第三起始位置、所述长度和所述类型,生成所述子帧头。
6.根据权利要求1所述的方法,其特征在于,所述向播放端传输所述复合帧,包括:
将所述复合帧划分为多个子数据;
获取所述多个子数据分别对应的报头信息;
基于所述报头信息,分别对所述多个子数据进行封装,得到多个分片数据包,所述分片数据包包括所述报头信息和子数据;
向所述播放端发送所述多个分片数据包。
7.根据权利要求6所述的方法,其特征在于,所述子数据对应的报头信息的确定过程,包括:
获取目标传输协议的报头字段、所述子数据的序列号和时间戳,所述序列号用于表示所述子数据的发送顺序,所述时间戳用于表示所述子数据的采样时刻;
基于所述报头字段、所述序列号和所述时间戳,生成所述子数据对应的报头信息。
8.根据权利要求1所述的方法,其特征在于,所述分别对所述颜色通道数据和所述透明通道数据进行编码,得到多个子帧,包括:
获取所述目标视频帧的视频内容数据;
对所述颜色通道数据、所述透明通道数据和所述视频内容数据分别进行编码,得到所述多个子帧。
9.一种视频流传输方法,其特征在于,所述方法包括:
接收复合帧;
解析所述复合帧,得到目标帧头和帧内容,所述帧内容包括多个子帧,所述目标帧头包括所述多个子帧的解码信息;
基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据;
基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧。
10.根据权利要求9所述的方法,其特征在于,所述复合帧以多个分片数据包的形式传输;
所述方法还包括:
接收至少一个分片数据包,所述分片数据包包括子数据和所述子数据的报头信息;
在基于所述至少一个分片数据包分别包括的报头信息,确定所述复合帧在传输过程中不存在传输错误的情况下,执行所述解析所述复合帧,得到目标帧头和帧内容的步骤。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
在基于所述至少一个分片数据包分别包括的报头信息,确定所述复合帧在传输过程中存在传输错误的情况下,丢弃所述复合帧。
12.根据权利要求9所述的方法,其特征在于,所述基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据,包括:
基于所述多个子帧的解码信息,确定所述帧内容包括的多个子帧的子帧数和所述多个子帧中第一个子帧在所述复合帧中的第一起始位置;
基于所述子帧数和所述第一起始位置,确定所述帧内容中依次排列的多个子帧头和多个帧数据;
基于所述多个子帧头,从所述多个帧数据中,确定所述多个子帧分别对应的帧数据;
对所述多个子帧分别对应的帧数据进行解码,得到所述颜色通道数据和所述透明通道数据。
13.根据权利要求12所述的方法,其特征在于,所述对所述多个子帧分别对应的帧数据进行解码,得到所述颜色通道数据和所述透明通道数据,包括:
对所述多个子帧分别对应的帧数据进行解码,得到所述颜色通道数据、所述透明通道数据和所述目标视频帧的视频内容数据;
所述基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧,包括:
基于所述颜色通道数据、所述透明通道数据和所述视频内容数据,显示所述目标视频帧。
14.一种视频流传输装置,其特征在于,所述装置包括:
第一获取模块,用于从视频流中获取目标视频帧的颜色通道数据和透明通道数据;
编码模块,用于分别对所述颜色通道数据和所述透明通道数据进行编码,得到多个子帧;
确定模块,用于基于所述多个子帧,确定目标帧头,所述目标帧头包括所述多个子帧的解码信息;
整合模块,用于将所述目标帧头和所述多个子帧整合为一个复合帧,所述复合帧的帧头为所述目标帧头,帧内容为所述多个子帧;
传输模块,用于向播放端传输所述复合帧。
15.一种视频流传输装置,其特征在于,所述装置包括:
第一接收模块,用于接收复合帧;
解析模块,用于解析所述复合帧,得到目标帧头和帧内容,所述帧内容包括多个子帧,所述目标帧头包括所述多个子帧的解码信息;
解码模块,用于基于所述多个子帧的解码信息,解码所述帧内容,得到目标视频帧的颜色通道数据和透明通道数据;
显示模块,用于基于所述目标视频帧的颜色通道数据和透明通道数据,显示所述目标视频帧。
16.一种电子设备,其特征在于,所述电子设备包括一个或多个处理器和一个或多个存储器,所述一个或多个存储器中存储有至少一条程序代码,所述至少一条程序代码由所述一个或多个处理器加载并执行,以实现如权利要求1至权利要求13任一项所述的视频流传输方法。
17.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行,以实现如权利要求1至权利要求13任一项所述的视频流传输方法。
18.一种计算机程序产品,其特征在于,所述计算机程序产品存储有至少一条程序代码,所述至少一条程序代码用于被处理器执行以实现如权利要求1至权利要求13任一项所述的视频流传输方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210684393.7A CN115103228A (zh) | 2022-06-16 | 2022-06-16 | 视频流传输方法、装置、电子设备、存储介质及产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210684393.7A CN115103228A (zh) | 2022-06-16 | 2022-06-16 | 视频流传输方法、装置、电子设备、存储介质及产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115103228A true CN115103228A (zh) | 2022-09-23 |
Family
ID=83291673
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210684393.7A Pending CN115103228A (zh) | 2022-06-16 | 2022-06-16 | 视频流传输方法、装置、电子设备、存储介质及产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115103228A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117119223A (zh) * | 2023-10-23 | 2023-11-24 | 天津华来科技股份有限公司 | 基于多通道传输的视频流播放控制方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101072360A (zh) * | 2007-06-22 | 2007-11-14 | 中兴通讯股份有限公司 | 一种提高移动多媒体广播终端接收性能的方法 |
US20180255308A1 (en) * | 2016-12-28 | 2018-09-06 | Kt Corporation | Video transmitting device and video playing device |
CN111669646A (zh) * | 2019-03-07 | 2020-09-15 | 北京陌陌信息技术有限公司 | 透明视频的播放方法、装置、设备及介质 |
CN113709554A (zh) * | 2021-08-26 | 2021-11-26 | 上海哔哩哔哩科技有限公司 | 动画视频生成、直播间动画视频播放方法及装置 |
-
2022
- 2022-06-16 CN CN202210684393.7A patent/CN115103228A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101072360A (zh) * | 2007-06-22 | 2007-11-14 | 中兴通讯股份有限公司 | 一种提高移动多媒体广播终端接收性能的方法 |
US20180255308A1 (en) * | 2016-12-28 | 2018-09-06 | Kt Corporation | Video transmitting device and video playing device |
CN111669646A (zh) * | 2019-03-07 | 2020-09-15 | 北京陌陌信息技术有限公司 | 透明视频的播放方法、装置、设备及介质 |
CN113709554A (zh) * | 2021-08-26 | 2021-11-26 | 上海哔哩哔哩科技有限公司 | 动画视频生成、直播间动画视频播放方法及装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117119223A (zh) * | 2023-10-23 | 2023-11-24 | 天津华来科技股份有限公司 | 基于多通道传输的视频流播放控制方法及系统 |
CN117119223B (zh) * | 2023-10-23 | 2023-12-26 | 天津华来科技股份有限公司 | 基于多通道传输的视频流播放控制方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11025940B2 (en) | Method for signalling caption asset information and device for signalling caption asset information | |
KR102117445B1 (ko) | 패킷 헤더 압축을 위한 방법 및 장치 | |
US8707124B2 (en) | Method for processing forward error correction, FEC, data, device and system thereof | |
US6580756B1 (en) | Data transmission method, data transmission system, data receiving method, and data receiving apparatus | |
KR101122143B1 (ko) | 수신기 버퍼 아키텍처를 나타내는 버퍼 파라미터의 시그널링 | |
KR20130120422A (ko) | 멀티미디어 전송 시스템을 위한 데이터 송수신 방법 및 장치 | |
CN114221909B (zh) | 数据传输方法、装置、终端及存储介质 | |
WO2014183478A1 (en) | Video encoding method and apparatus | |
CN113473106A (zh) | 图像传输方法、图像显示及处理设备、及图像传输系统 | |
US9936266B2 (en) | Video encoding method and apparatus | |
CN115103228A (zh) | 视频流传输方法、装置、电子设备、存储介质及产品 | |
US20080248782A1 (en) | Providing Devices With Command Functionality in Content Streams | |
WO2017157168A1 (zh) | 一种实现视频通话的方法、终端、系统和计算机存储介质 | |
WO2020137766A1 (ja) | 送信装置、送信方法、符号化装置、符号化方法、受信装置および受信方法 | |
CN100534198C (zh) | 基于音视频信源数据的封装方法 | |
CN114009030B (zh) | 视频解码的方法、装置及可读介质 | |
CN114979093A (zh) | 一种基于rtp的数据传输方法、装置、设备和介质 | |
CN110691212A (zh) | 数据编解码的方法和系统 | |
CN114979092B (zh) | 一种基于rtp的数据传输方法、装置、设备和介质 | |
WO2024164714A1 (zh) | 一种音频编解码方法、音频编解码装置、计算机设备及存储介质 | |
US20220408071A1 (en) | Image transmission method, image display device, image processing device, and image transmission system | |
CN118802874A (zh) | 音频数据传输方法、装置、电子设备及可读存储介质 | |
Weaver | RTP Payload Format for VC-2 High Quality (HQ) Profile | |
WO2024088599A1 (en) | Transporting multimedia immersion and interaction data in a wireless communication system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |