CN114173156A - 视频传输方法、电子设备和存储介质 - Google Patents
视频传输方法、电子设备和存储介质 Download PDFInfo
- Publication number
- CN114173156A CN114173156A CN202111452270.2A CN202111452270A CN114173156A CN 114173156 A CN114173156 A CN 114173156A CN 202111452270 A CN202111452270 A CN 202111452270A CN 114173156 A CN114173156 A CN 114173156A
- Authority
- CN
- China
- Prior art keywords
- video
- restored
- code stream
- fused
- videos
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 193
- 238000000034 method Methods 0.000 title claims abstract description 72
- 238000004590 computer program Methods 0.000 claims description 2
- 230000004927 fusion Effects 0.000 abstract description 53
- 238000010586 diagram Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 6
- 238000009826 distribution Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000739 chaotic effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4347—Demultiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频传输方法、电子设备和存储介质。该方法应用于服务器端,所述方法包括:按照第一预设画面布局将至少两路视频合并为融合视频,并生成所述融合视频的传输码流;将各所述视频在所述融合视频内的位置信息添加到所述传输码流;向客户端传输所述传输码流。本发明实施例,通过将各视频在融合视频内的位置信息添加到传输码流,然后向客户端传输传输码流,以实现多路视频的融合传输,降低多路视频传输的带宽占用,实现多路视频的个性化布局。
Description
技术领域
本发明实施例涉及图像处理技术领域,尤其涉及一种视频传输方法、电子设备和存储介质。
背景技术
随着互联网技术的发展,多路视频得到广泛的应用,目前常见的应用场景包括公告广播、直播、应急指挥和在线教育等。为了节省传输带宽以及降低客户端播放压力,多路视频通常需要进行视频融合,将多路视频变为单路视频。但是虽然这种方式节省了传输带宽,但是由于视频融合采取固定方式,导致视频融合后生成的画面固定,不能灵活拆分,这将导致客户端无法对融合视频进行个性化渲染,例如,客户端无法放大融合画面中的某个子画面或者,调换几个视频画面的布局位置等。现有技术中若想改变融合画面中的某个或某几个子画面只能在编码端实现融合画面的布局,并且为统一布局的改变,所有接收端的画面布局均相同,无法针对各客户端实现个性化视频画面布局。
发明内容
本发明提供一种视频传输方法、电子设备和存储介质,以实现多路视频的融合传输,降低多路视频传输的带宽占用,便于多路视频的个性化布局。
第一方面,本发明实施例提供了一种视频传输方法,应用于服务器端,所述方法包括:
按照第一预设画面布局将至少两路视频合并为融合视频,并生成所述融合视频的传输码流;
将各所述视频在所述融合视频内的位置信息添加到所述传输码流;
向客户端传输所述传输码流。
第二方面,本发明实施例还提供了一种视频传输方法,应用于客户端,所述方法包括:
获取编码端的传输码流,并生成所述传输码流对应的还原融合视频;
根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频;
根据第二预设画面布局展示各所述还原视频。
第三方面,本发明实施例还提供了一种电子设备,包括:一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面所述的视频传输方法,和/或,第二方面所述的视频传输方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如第一方面所述的视频传输方法,和/或,第二方面所述的视频传输方法。
本发明实施例所提供的技术方案中,首先按照第一预设画面布局将至少两路视频合并为融合视频,并生成融合视频的传输码流,然后将各视频在融合视频内的位置信息添加到传输码流,最后向客户端传输传输码流。通过将各视频在融合视频内的位置信息添加到传输码流,然后向客户端传输传输码流,实现了多路视频的融合传输,使用融合视频替代多路视频传输,可降低视频传输过程的带宽占用,融合视频中的位置信息便于对传输后的融合视频进行处理,可增强客户端视频展示的个性化程度。
附图说明
图1为现有技术中视频画面布局的流程示意图;
图2为现有技术中视频画面个性化布局的流程示意图;
图3是本发明实施例一中的一种视频传输方法的流程图;
图4是本发明实施例二中的一种视频传输方法的流程图;
图5是本发明实施例三中的一种视频传输方法的流程图;
图6是本发明实施例四中的一种视频传输方法的流程图;
图7是本发明实施例四中的一种视频传输方法的流程图;
图8是本发明实施例四中的一种视频传输方法流程示意图;
图9是本发明实施例五中的一种视频传输装置的结构示意图;
图10为本发明实施例六提供的另一种视频传输装置的结构示意图;
图11是本发明实施例七提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构,此外,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
为便于验证现有技术中视频画面布局的应用,图1给出了现有技术中视频画面布局的流程示意图。如图1所示,现有技术中视频画面布局的流程为:在服务器端,视频1、视频2,…,视频N的视频画面布局经过服务器的编码融合,将视频1、视频2,…,视频N放在一个视频画面布局中,然后在客户端只能收到跟视频融合前的画面布局一样的画面布局,且每个用户收到的视频画面布局均是统一的,各个客户端画面都一样,不能做到各个客户端个性化视频画面布局。如果想改变视频画面布局只能触发服务器端在视频融合前,对视频画面布局进行改变。
为便于验证现有技术中视频画面个性化布局的流程示意图的应用,图2给出了视频画面个性化布局的流程示意图。如图2所示,现有技术中视频画面个性化布局的流程为:在服务器端,视频1、视频2,…,视频N的视频画面布局采用固定画面路数及位置方式的融合视频,将视频1、视频2,…,视频N放在多个视频画面布局中,然后在客户端每个用户收到的视频画面布局相当于复制了一份,在客户端进行播放时遮盖了其中一路视频,以达到个性化布局的方式,这种方式中央处理器资源会占用双倍。
有鉴于此,本申请提出一种视频传输方法,通过视频传输,在客户端实现个性化视频布局,提高了用户使用体验,在一定程度上降低了成本,更加适用于实际的使用场景。
实施例一
图3为本发明实施例一提供的一种视频传输方法的流程图,本实施例可适用于实现多路视频融合传输时的情况,该方法可以由一种视频传输装置来执行,该装置可以采用硬件和/或软件的方式来实现,通常可配置于电子设备中。
一种视频传输方法,应用于服务器端,具体包括如下步骤:
S310、按照第一预设画面布局将至少两路视频合并为融合视频,并生成融合视频的传输码流。
其中,服务器端可以理解为网络中能对其它机器提供某些服务的计算机系统。第一预设画面布局可以理解为服务器端预先设置的画面布局。服务器端的工作人员经过构思,组织,对视频界面的展示形式包括:主体、陪体、前景、背景、空白各个成分的相互关系以及视频分辨率、尺寸、位置信息等进行配置,所形成的画面布局。主体可以理解为视频画面的构图中心。陪体可以理解为视频界面中与主体紧密关联构成一定关系的对象。前景可以配置在视频界面的上下左右边缘或遍布视频界面,也可以采用不同的处理方法,使之产生不同的效果。背景可以理解为主体后面的景物。
在本实施例中,第一预设画面布局用于生成融合视频。其中,融合视频可以由至少两路视频融合生成,包括上述至少两路视频分别对应的视频界面,可以理解为两个或两个以上视频界面。示例性的,融合视频可以为3路视频的输入进行融合而成,也可以为6路视频的输入进行融合而成的,本实施例在此不做限制。
在本实施例中,传输码流可以理解为视频文件在单位时间内使用的数据流量,也可以称为码率,是视频编码中画面质量控制中最重要的部分。在相同的分辨率下,单位时间内所传送的数据越多,所包含的信息量也越多,此时视频文件的码流越大,压缩比就越小,画面质量也就越好。
其中,融合视频可以理解为将按照第一预设画面布局将两路或多路视频合并成的一路视频。其中,融合视频中的各路视频均有相对应预先设置的第一预设画面布局,可以包括预设的各路视频的分辨率信息、尺寸信息以及位置坐标等相关信息。示例性的,将视频1、视频2以及视频3三路视频按照第一预设画面布局进行一路视频融合,融合后的一路融合视频中,包含视频1、视频2以及视频3的分辨率信息、尺寸信息以及相关位置坐标,生成一路传输码流进行传输。
在本发明实施例中,可以按照第一预设画面布局将至少两路视频合并为一路融合视频,例如可以在第一预设画面布局中获取各路视频的子界面在融合视频的主界面中的位置坐标,可以按照位置坐标将各视频合并为融合视频;也可以监控视频数据流,然后提取视频帧并将其投射到虚拟场景里进行融合视频。本实施对此不作限制。
S320、将各视频在融合视频内的位置信息添加到传输码流。
其中,位置信息可以标识视频与融合视频的对应关系,可以包括视频在融合视频中所处的位置以及视频展示在融合视频中的调整量,位置信息至少可以包括各视频在融合视频中的位置坐标。例如,在位置信息仅包括视频所对应的位置坐标时,位置信息的形式是不固定的。示例性的,位置坐标的形式可以为左下角坐标的形式,以视频左下角在融合视频中的坐标位置作为位置信息,也可以为中心坐标的形式,以视频中心点在融合视频中的坐标位置作为位置信息,还可以为右上角的坐标形式,以视频右上角在融合视频中的坐标位置作为位置信息,本实施例对此不做限制。
在本实施例中,融合视频中的各路视频均有相对应预先设置的第一预设画面布局,可以包括预设的各路视频的分辨率信息、尺寸信息以及位置坐标相关信息。各路视频在融合视频中的原始分辨率信息、原始尺寸信息以及位置坐标相关信息可以在原始相关信息的基础上进行一定的调整。例如,可以在融合视频中调整视频1以及视频2的原始分辨率信息、原始尺寸信息,可以对其进行缩小,可以进行放大,也可以对视频3的位置坐标进行调整,可以对其从各视频中间调整至各视频下方,本实施例在此不做限制。
在本实施例中,在将各视频在融合视频内的位置信息添加到传输码流时,可以首先获取各视频对应的位置坐标、原始分辨率和原始尺寸作为位置信息,然后将位置坐标、原始分辨率和原始尺寸添加到传输码流的附加增强信息字段中;也可以为获取原始视频流中的网络传输单元,对网络传输单元添加包头信息,以得到视频数据包,然后分别切割各个视频数据包,得到第二视频数据包并添加第二包头信息,将第二视频数据包分配到至少一个线路中;本实施例在此不做限制。
需要说明的是,添加到传输码流的位置信息在除位置坐标外,还可以包括视频的原始分辨率和原始尺寸,传输码流中位置信息的字段可以是自定义字段或者是附加增强信息字段。
在本实施例中,需要将各视频在融合视频内的位置坐标、原始分辨率以及原始尺寸等信息添加到传输码流,以向客户端传输传输码流。
S330、向客户端传输传输码流。
其中,客户端也可以称为用户端,可以理解为与服务器相对应,为客户提供本地服务的程序。除了一些只在本地运行的应用程序之外,一般安装在普通的客户机上,需要与服务端互相配合运行。
在本实施例中,服务器端可以向客户端传输包括各视频的位置信息的传输码流。
本发明实施例所提供的技术方案中,首先按照第一预设画面布局将至少两路视频合并为融合视频,并生成融合视频的传输码流,然后将各视频在融合视频内的位置信息添加到传输码流,最后向客户端传输传输码流。本发明实施例将多路视频融合为一路融合视频,通过融合视频替代多路视频传输降低传输码流的带宽占用,传输码流中携带的位置信息便于对传输后的融合视频进行处理,实现客户端视频展示的个性化布局,可提高视频展示的动态化程度。
实施例二
图4为本发明实施例二提供的一种视频输出方法的流程图,本实施例在上述各实施例地基础上,进一步进行了细化。具体可以包含如下步骤:
具体的,按照第一预设画面布局可以将至少两路视频合并为融合视频,并生成融合视频的传输码流。具体步骤可以为S410至S440:
S410、获取第一预设画面布局的视频界面绑定关系、主界面和子界面
其中,视频界面绑定关系可以理解为主界面和用户端显示界面的对应关系,即用户端观看到的视频与该视频所在位置的对应关系。主界面可以理解为输入进来的各个视频进行视频融合后,所形成的一路视频画面。子界面可以理解为视频融合形成的一路视频画面中,每个输入进来的单个视频。示例性的,主界面为1个,子界面可以有子界面1、子界面2、子界面3等等。
在本实施例中,用户端显示界面会有用户界面控件,用于开发构建用户界面的控件,帮助完成软件开发中视窗、文本框、按钮、下拉式菜单等界面元素的开发。示例性的,视窗界面可能和子界面1进行绑定,也可能和子界面2进行绑定。视频界面绑定关系可以是用户预设的,也可以是开发人员预设的,还可以是用户后来自定义的个性化布局,本实施例对此不做限制。
在本实施例中,按照第一预设画面布局可以有多路视频合并为一路融合视频,各路视频在融合视频中均有相对应的展示窗口,并生成一路融合视频的传输码流进行传输。
S420、将获取的各路视频按照视频界面绑定关系确定对应的子界面。
其中,视频界面的绑定关系确定对应的子界面可以根据配置的数据表以及配置文件进行确定。配置文件包含视频界面的绑定关系配置参数和初始设置。
在本实施例中,将获取到的各路视频按照视频界面绑定关系可以确定对应的子界面,在各路视频中,每路视频在融合视频中均有相对应的展示窗口。示例性的,有三路视频输入,视频1对应子界面2、视频2对应子界面3、视频3对应子界面1。各路视频对应的子界面不限于此种方式,还可以视频1对应子界面3、视频2对应子界面1、视频3对应子界面2等等方式。
S430、按照各子界面与主界面的位置关系确定对应视频在融合视频中的位置坐标。
其中,子界面与主界面的位置关系可以理解为输入的各视频在融合视频中的位置。位置坐标可以理解为表示对应视频在融合视频中的空间分布,所在或所占的地方,所处的方位的信息。
在本实施例中,按照各子界面与主界面的位置关系,在进行视频融合也即多画面合成时,可以确定对应视频在融合视频中的位置坐标。需要记录每个子界面的序号信息,以及缩放的分辨率,在融合视频中的相对位置等信息。示例性的,比如:num=0,name=‘AAA’,x=186,y=252,w=720,h=576;num=1,name=‘BBB’,x=1092,y=40,w=640,h=480;num=2,name=‘CCC’,x=1092,y=520,w=640,h=480。
S440、按照位置坐标将各视频合并为融合视频。
在本实施例中,可以由每个子界面的序号信息、缩放的分辨率、尺寸大小以及在融合视频中的相对位置等信息可以将各视频合并为一路融合视频,并进行一路码流传输。
在本实施例中,按照位置坐标将各视频合并为融合视频的方式为首先要确定各视频在融合视频中的分辨率和尺寸,然后按照分辨率和尺寸以调整对应的视频,最后按照位置坐标将调整后的各视频合并为融合视频;也可以为在获得的待合并的第一预设数量个视频片段的位置信息和每个视频片段的属性信息,根据属性信息,生成针对第一预设数量个视频片段的文件信息段。按照上述各视频片段对应的起始位置,将各视频片段合并为合并数据段,存储至一个合并文件中形成融合视频;还可以为针对每一视频片段,依序获取前后视频片段的结合部中预定数量的视频帧图片的位置信息,按照预先设置的梯次处理策略分别对获取的前后视频片段的结合部中预定数量的视频帧图片的位置信息依序进行梯次处理,然后进行合并以得到合并后的融合视频;本发明实施例在此不做限制。
可选的,按照位置坐标将各视频合并为融合视频,包括:
确定各视频在融合视频中的分辨率和尺寸;按照分辨率和尺寸调整对应的视频;按照位置坐标将调整后的各视频合并为融合视频。
其中,分辨率又称解析度、解像度,可以细分为显示分辨率、图像分辨率、打印分辨率和扫描分辨率等。分辨率决定了位图图像细节的精细程度。通常情况下,图像的分辨率越高,所包含的像素就越多,图像就越清晰。尺寸可以理解为融合视频的长宽的大小。
在本实施例中,在确定各视频在融合视频中的分辨率和尺寸之后,需要按照分辨率和尺寸对视频进行调整,然后按照位置坐标将调整后的各视频合并为融合视频。示例性的,视频1、视频2在融合视频中的分辨率和尺寸依次分别为1920×1080P、512*384,1900×1200P、640*352,然后按此分辨率和尺寸对输入进来的视频进行调整,然后根据位置坐标就可以将视频1和视频2融合在一个视频中。
具体的,可以将各视频在融合视频内的位置信息添加到传输码流。具体步骤可以为S450至S460:
S450、获取各视频对应的位置坐标、原始分辨率和原始尺寸作为位置信息。
在本实施例中,位置坐标、原始分辨率和原始尺寸均为各视频在进行融合视频前位置坐标、分辨率、尺寸,获取各视频对应的位置坐标、原始分辨率和原始尺寸作为位置信息,以添加至传输码流的附加增强信息字段。
S460、将位置坐标、原始分辨率和原始尺寸添加到传输码流的附加增强信息字段。
其中,附加增强信息字段可以理解为视频编解码技术标准,即H264标准或H265标准中规定的拓展信息,具体可以是码流中的特定位置上的信息。可以通过附加增强信息字段中的附加信息在解码过程中提高码流的容错性,并基于附加增强信息字段提高码流的纠缠能力,附加增强信息字段可以是传输的视频码流中的固定位置。
在本实施例中,各视频的位置坐标、原始分辨率和原始尺寸需要添加到传输码流的附加增强信息字段中,以向客户端进行传输。
示例性的,将各子界面的位置坐标、原始分辨率和原始尺寸等信息进行合并,存放在视频编码,也即网络抽象层单元附加增强信息字段,显示形式可以为以下方式:
常用Nalu_type:
0x67(01100111)SPS 非常重要type=7
0x68(01101000)PPS 非常重要type=8
0x65(01100101)IDR帧 非常重要type=5
0x61(01100001)I帧 重要type=1
0x41(01000001)P帧 重要type=1
0x01(00000001)B帧 不重要type=1
0x06(00000110)SEI 不重要type=6
S470、向客户端传输传输码流。
本发明实施例所提供的技术方案中,通过获取第一预设画面布局的视频界面绑定关系、主界面和子界面,然后将获取的各路视频按照视频界面绑定关系确定对应的子界面,按照各子界面与主界面的位置关系确定对应视频在融合视频中的位置坐标,按照位置坐标将各视频合并为融合视频,最后将位置坐标、原始分辨率和原始尺寸添加到传输码流的附加增强信息字段以向客户端传输传输码流。本发明实施例,通过获取的各路视频按照视频界面绑定关系确定对应的子界面,按照各子界面与主界面的位置关系确定对应视频在融合视频中的位置坐标,使得视频画面位置信息跟随每帧界面,不会发生布局混乱,进一步提升了多路视频的个性化布局。
实施例三
图5为本发明实施例三提供的一种视频传输方法的流程图,本实施例可适用于实现多路视频融合传输时的情况,该方法可以由一种视频传输装置来执行,该装置可以采用硬件和/或软件的方式来实现,通常可配置于电子设备中。
一种视频传输方法,应用于客户端,具体包括如下步骤:
S510、获取服务器端的传输码流,并生成传输码流对应的还原融合视频。
其中,还原融合视频可以理解为对融合视频的还原。
在本实施例中,客户端能够获取服务器端传输的传输码流,此时的传输码流的附加增强信息字段中包含各视频的位置信息。其中,位置信息至少可以包括各视频在融合视频中的位置坐标。示例性的,在位置信息仅包括各视频所对应的位置坐标时,位置信息的形式是不固定的。此外,位置信息还可以包括各视频的原始分辨率和原始尺寸信息,可以提取此时附加增强信息字段中各视频的位置信息、原始分辨率和原始尺寸信息,根据附加增强信息字段中的信息,把融合视频进行拆分还原。
在本实施例中,客户端解码时可根据附加增强信息字段中的信息实时的获取融合视频的合成信息,并且一一对应,信息实时同步。
需要说明的是,根据传输码流将融合视频进行还原时的方式可以为根据附加增强信息字段将各视频直接拆分还原出来,并根据第二预设画面布局向用户展示还原视频;也可以为根据附加增强信息字段中的位置信息、分辨率以及尺寸等对还原出来的视频进行一定的调整,之后在向用户展示还原视频。示例性的,可以将还原视频的分辨率调大一点,也可以将还原视频的尺寸调小一点,还可以将还原视频的位置从左上角调至右下角等等,本实施例对此不做限制。
S520、根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频。
其中,还原视频可以是对传输码流解码生成的视频,还原视频中可以包括一个或者多个视频的画面。
在本实施例中,可以根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频。示例性的,融合视频为视频1、视频2、视频3的融合所构成的一路传输码流,经过融合视频还原后,可以拆分为视频1和视频2;视频1和视频2的位置不做限制,也可以拆分为视频1、视频2、视频3。其中,视频1、视频2、视频3的位置不做限制。
需要说明的是,根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频的方式可以为在传输码流的附加增强信息字段中提取各还原视频的位置坐标作为位置信息进行还原,还可以为将传输码流中的位置信息从一个第一全局坐标系转换为一个局部坐标系的方法进行还原;本实施例对此不做限制。
S530、根据第二预设画面布局展示各还原视频。
在本实施例中,根据第二预设画面布局可以展示各还原视频。示例性的,从客户端还原出三路视频,即客户端有三个用户。向客户端的三个用户都传输一路传输码流,然后在用户端进行还原时,拆分为三路视频,用户端可以根据本地布局信息,进行还原视频的展示。其中,本地布局信息可以为页面布局,位置,缩放,分辨率等信息。用户可以全选三路视频,也可以选择其中的两路视频,且各还原视频中的位置信息、分辨率以及尺寸等信息均可以根据用户的喜好进行更改。
本发明实施例所提供的技术方案中,通过获取编码端的传输码流,并生成传输码流对应的还原融合视频,然后根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频,最后根据第二预设画面布局展示各还原视频。本发明实施例通过获取编码端的一路传输码流,并生成传输码流对应的还原融合视频,降低了视频传输的带宽占用,且根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频,实现了还原视频的个性化布局。
实施例四
图6为本发明实施例三提供的一种视频输出方法的流程图,本实施例在上述各实施例地基础上,进一步进行了细化。具体可以包含如下步骤:
S610、获取服务器端的传输码流,并生成传输码流对应的还原融合视频。
具体的,本实施例可以根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频。具体步骤可以为S620至S630:
S620、在传输码流的附加增强信息字段中提取各还原视频的位置信息,其中,位置信息包括位置坐标、原始分辨率和原始尺寸。
在本实施例中,附加增强信息字段不影响还原视频的播放,在不支持该附加增强信息字段解析的播放器中照样可以播放,显示的还是融合后的视频,不影响原来的系统使用。
在本实施例中,客户端在收到服务器端传输的视频数据进行解码时,需要通过从传输码流的附加增强信息字段中,提取各还原视频的位置坐标作为位置信息,其中,位置信息包括位置坐标、原始分辨率和原始尺寸,从而能够根据位置信息进行还原融合视频的拆分,获得各个独立的还原视频,然后进行个性化的渲染,显示个性化视频画面布局,以提高用户使用体验。
S630、按照位置信息将还原融合视频拆分为至少两个还原视频。
在本实施例中,根据传输码流的附加增强信息字段中的各还原视频的位置坐标可以将还原视频拆分为两个或多个还原视频,供客户端用户进行自由选择。
可选的,按照位置信息将还原融合视频拆分为至少两个还原视频,包括:
提取附加增强信息字段中还原视频的原始分辨率和原始尺寸;按照位置坐标在还原融合视频中获取待处理视频;按照原始分辨率和原始尺寸将待处理视频调整为还原视频。
其中,待处理视频可以理解为还原融合视频中待拆分的视频。
在本实施例中,通过传输码流中的附加增强信息字段的固定位置中可以提取还原视频的原始分辨率和原始尺寸。其中,附加增强信息字段的固定位置是由标准协议规定的,比如:H264标准协议或H265标准协议。
在本实施例中,按照坐标位置,通过原始分辨率和原始尺寸可以将还原融合视频进行视频还原,然后可以将还原视频图像进行提取。示例性的,按照位置坐标在还原融合视频中可以提取到左下角的坐标位置信息,然后进行还原视频图像提取;也可以为提取还原融合视频中视频中心点的坐标位置信息,然后进行还原视频图像提取;还可以为提取还原融合视频中视频右下角的坐标位置信息,然后进行还原视频图像提取。其中,还原视频图像提取可以是通过图像识别进行提取,也可以是通过神经网络进行提取。
在本实施例中,在进行融合视频的还原时,需要将附加增强信息字段中待还原视频的原始分辨率和原始尺寸进行提取,然后按照位置坐标找出还原融合视频中的待还原视频,按照附加增强信息字段中待还原视频的原始分辨率和原始尺寸对还原视频进行调整。示例性的,待还原视频的原始分辨率和原始尺寸分别为1920×1440、640*352,客户端的各个用户可以根据此时的原始分辨率和原始尺寸调整分辨率的大小,尺寸的大小,然后可以拆分出各个待还原视频。
S640、根据第二预设画面布局展示各还原视频。
本发明实施例所提供的技术方案中,首先在传输码流的附加增强信息字段中提取各还原视频的位置坐标作为位置信息,然后基于所提取的位置信息,将还原融合视频拆分为至少两个还原视频,实现了每个客户端的自定义布局,视频画面位置信息跟随每帧画面,不会发生布局混乱信息,进一步提高多路视频的个性化布局,提高用户使用体验。
可选的,在根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频之前,还包括:
判断传输码流是否存在附加增强信息字段;若是,则在传输码流的附加增强信息字段内提取位置信息;若否,则将传输码流还原为显示视频。
其中,显示视频可以理解为客户端的用户根据喜好进行布局信息的调整所观看到的视频。
在本实施例中,在判断传输码流是否存在附加增强信息字段时,需要基于H264或H265标准协议规则,在固定位置上判断传输码流是否存在附加增强信息字段。如果存在附加增强信息字段,则在传输码流的附加增强信息字段内提取还原视频对应位置上的位置信息,按照位置信息将融合视频进行还原,并根据第二预设画面布局展示各还原视频;如果不存在附加增强信息字段,则直接将传输码流还原为显示视频供用户观看,可以理解的是,H264或H265标准协议规则仅为举例,不作限制,客户端与服务器端之间用于判断附加增强信息字段时共同遵守的规则均在本申请的保护范围内,该规则可以包括自定义规则或者协议规则。
示例性的,图7是本发明实施例四中的一种视频传输方法的流程图。具体可以为如下步骤:
a1、按照预设的画面布局的视频界面绑定关系、主界面和子界面,将输入进来的一路视频画面1、一路视频画面2、…、一路视频画面N,按照视频界面绑定关系确定对应的子界面,按照各子界面与主界面的位置关系确定对应视频在融合视频中的位置坐标,按照位置坐标将各视频合并为一路融合视频,并生成融合视频的一路传输码流。将输入进来的一路视频画面1、一路视频画面2、…、一路视频画面N,在融合视频内的位置信息添加到传输码流中,并向客户端传输传输码流。
a2、客户端收到各路视频画面在融合视频内的位置信息时,需要对位置信息进行解码,以判断是否存在附加增强信息字段,若存在附加增强信息字段,则在传输码流的附加增强信息字段内提取位置信息,然后对附加增强信息字段进行解析;若不存在附加增强信息字段,则根据解码获得YUV或RGB格式的一路融合视频画面,直接将传输码流还原为一路融合视频进行播放。其中,YUV和RGB是一种颜色编码方法,YUV中,“Y”表示明亮度,也就是灰度值;而“U”和“V”表示的则是色度,作用是描述影像色彩及饱和度,用于指定像素的颜色。RGB是常说的光学三原色,R代表红色,G代表绿色,B代表蓝色。
a3、根据解析的附加增强信息字段将融合视频拆分为多路子视频画面,获得各个独立的子视频画面,如一路视频画面1、一路视频画面2、…、一路视频画面N,以便客户端进行个性化的渲染,显示个性化视频画面布局。
a4、根据拆分的多路子视频画面,用户可以根据个人的喜好,将至少两个还原视频进行个性化视频布局播放。
示例性的,为便于更好的理解视频传输的方法,图8是本发明实施例四中的一种视频传输方法流程示意。如图8所示,可以包含一下步骤:
b1、客户端1采集并编码视频1,客户端2采集并编码视频2,客户端3采集并编码视频3,3个客户端都把视频发送到服务器。
b2、服务器端接收到3路视频编码后,按照预设的画面布局的视频界面绑定关系、主界面和子界面,将输入进来视频1、视频2、…视频N按照视频界面绑定关系确定对应的子界面,按照各子界面与主界面的位置关系确定对应视频在融合视频中的位置坐标,按照位置坐标将各视频合并为一路融合视频,并生成融合视频的一路传输码流。示例性的,可以对各路视频进行解码,以及视频缩放等调整,然后进行融合视频即多视频画面合成,再编码发送回客户端。
b3、客户端在传输码流的附加增强信息字段中提取各还原视频的位置坐标作为位置信息。客户端的每个用户都进行相同的信息解析,根据解析信息还原视频的方式可以分为两种,一种是传输码流不存在附加增强信息字段,则将传输码流直接还原为用户观看的显示视频;另一种是传输码流存在附加增强信息字段,则在传输码流的附加增强信息字段内提取位置信息,根据位置信息可以调整分辨率的大小,缩放的大小等信息,然后可以拆分出各个还原视频。
b4、根据解析的信息,每个客户端都可以根据拆分出的各个还原视频以及每个客户端各自的个性化视频画面布局需求,对子视频进行视频融合(多画面合成),然后进行显示,实现个性化视频画面布局。
实施例五
图9为本发明实施例五提供的一种视频传输装置的结构示意图,本实施例所提供的一种视频传输装置可以通过软件和/或硬件来实现,可配置于服务器中来实现本发明实施例中的一种视频传输方法。如图9所示,该装置具体可包括:码流生成模块910、码流信息添加模块920和码流传输模块930。
其中,码流生成模块910,用于按照第一预设画面布局将至少两路视频合并为融合视频,并生成所述融合视频的传输码流;
码流信息添加模块920,用于将各所述视频在所述融合视频内的位置信息添加到所述传输码流;
码流传输模块930,用于向客户端传输所述传输码流。
本发明实施例所提供的技术方案中,首先码流生成模块按照第一预设画面布局将至少两路视频合并为融合视频,并生成融合视频的传输码流,然后码流信息添加模块将各视频在融合视频内的位置信息添加到传输码流,最后向客户端传输传输码流。通过将各视频在融合视频内的位置信息添加到传输码流,然后码流传输模块向客户端传输传输码流,实现了多路视频的融合传输,以及多路视频的个性化布局,且在一定程度上降低了多路视频传输的带宽占用。
可选的,在上述各实施例的基础上,码流生成模块910,具体可以包括:
界面获取单元,用于获取第一预设画面布局的视频界面绑定关系、主界面和子界面;
子界面确定单元,用于将获取的各路所述视频按照所述视频界面绑定关系确定对应的所述子界面;
坐标确定单元,用于按照各所述子界面与所述主界面的位置关系确定对应所述视频在所述融合视频中的位置坐标;
视频合并单元,用于按照所述位置坐标将各所述视频合并为所述融合视频。
可选的,视频合并单元,可以包括:
信息确定子单元,用于确定各所述视频在所述融合视频中的分辨率和尺寸;
信息调整子单元,用于按照所述分辨率和所述尺寸调整对应的所述视频;
视频融合子单元,用于按照所述位置坐标将调整后的各所述视频合并为所述融合视频。
可选的,在上述各实施例的基础上,码流信息添加模块920,具体可以包括:
信息获取单元,用于获取各所述视频对应的位置坐标、原始分辨率和原始尺寸作为所述位置信息;
信息添加单元,用于将所述位置坐标、所述原始分辨率和所述原始尺寸添加到所述传输码流的附加增强信息字段。
实施例六
图10为本发明实施例六提供的另一种视频传输装置的结构示意图,本实施例所提供的另一种视频传输装置可以通过软件和/或硬件来实现,可配置于服务器中来实现本发明实施例中的一种视频传输方法。如图10所示,该装置具体可包括:融合视频生成模块1010、融合视频拆分模块1020和还原视频展示模块1030。
其中,融合视频生成模块1010,用于获取编码端的传输码流,并生成所述传输码流对应的还原融合视频;
融合视频拆分模块1020,用于根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频;
还原视频展示模块1030,用于根据第二预设画面布局展示各所述还原视频。
本发明实施例所提供的技术方案中,通过融合视频生成模块获取编码端的传输码流,并生成传输码流对应的还原融合视频,然后融合视频拆分模块根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频,最后还原视频展示模块根据第二预设画面布局展示各还原视频。本发明实施例通过获取编码端的一路传输码流,并生成传输码流对应的还原融合视频,降低了视频传输的带宽占用,且根据传输码流添加的位置信息将还原融合视频拆分至少两个还原视频,实现了还原视频的个性化布局。
可选的,在上述各实施例的基础上,还包括:
信息判断单元,用于判断所述传输码流是否存在附加增强信息字段;
信息提取单元,用于若是,则在所述传输码流的所述附加增强信息字段内提取所述位置信息;
视频还原单元,用于若否,则将所述传输码流还原为显示视频。
可选的,在上述各实施例的基础上,融合视频拆分模块1020,具体可以包括:
位置坐标提取单元,用于在所述传输码流的附加增强信息字段中提取各所述还原视频的所述位置信息,其中,所述位置信息包括位置坐标、原始分辨率和原始尺寸;
视频拆分单元,用于按照所述位置信息将所述还原融合视频拆分为至少两个所述还原视频。
可选的,视频拆分单元,可以包括:
原始信息提取子单元,用于提取所述附加增强信息字段中所述还原视频的原始分辨率和原始尺寸;
待处理视频获取子单元,用于按照所述位置坐标在所述还原融合视频中获取待处理视频;
待处理视频调整子单元,用于按照所述原始分辨率和所述原始尺寸将所述待处理视频调整为所述还原视频。
实施例七
图11是本发明实施例七提供的一种电子设备的结构示意图,如图11所示,该电子设备包括处理器1110、存储器1120、输入装置1130和输出装置1140;电子设备中处理器1110的数量可以是一个或多个,图11中以一个处理器1110为例;电子设备中的处理器1110、存储器1120、输入装置1130和输出装置1140可以通过总线或其他方式连接,图11中以通过总线连接为例。
存储器1120作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的视频传输方法对应的程序指令/模块(例如,视频传输装置中的码流生成模块910、码流信息添加模块920和码流传输模块930,和/或融合视频生成模块1010、融合视频拆分模块1020和还原视频展示模块1030。)。处理器1110通过运行存储在存储器1120中的软件程序、指令以及模块,从而执行电子设备的各种功能应用以及数据处理,即实现上述的视频传输方法。
存储器1120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器1120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器1120可进一步包括相对于处理器1110远程设置的存储器,这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置1130可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置1140可包括显示屏等显示设备。
实施例八
本发明实施例八还提供一种包含计算机可执行指令的应用于服务器端以及客户端的存储介质,计算机可执行指令在由计算机处理器执行时用于执行一种视频传输方法,该方法包括:
按照第一预设画面布局将至少两路视频合并为融合视频,并生成融合视频的传输码流;
将各视频在融合视频内的位置信息添加到传输码流;
向客户端传输传输码流。
和/或,
计算机可执行指令在由计算机处理器执行时用于执行另一种视频传输方法,该方法包括:
获取编码端的传输码流,并生成所述传输码流对应的还原融合视频;
根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频;
根据第二预设画面布局展示各所述还原视频。
当然,本发明实施例所提供的一种包含计算机可执行指令的应用于服务器端以及客户端的的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的视频传输方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台电子设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述视频传输装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种视频传输方法,其特征在于,应用于服务器端,所述方法包括:
按照第一预设画面布局将至少两路视频合并为融合视频,并生成所述融合视频的传输码流;
将各所述视频在所述融合视频内的位置信息添加到所述传输码流;
向客户端传输所述传输码流。
2.根据权利要求1所述方法,其特征在于,所述按照第一预设画面布局将至少两路视频合并为融合视频,包括:
获取第一预设画面布局的视频界面绑定关系、主界面和子界面;
将获取的各路所述视频按照所述视频界面绑定关系确定对应的所述子界面;
按照各所述子界面与所述主界面的位置关系确定对应所述视频在所述融合视频中的位置坐标;
按照所述位置坐标将各所述视频合并为所述融合视频。
3.根据权利要求2所述方法,其特征在于,所述按照所述位置坐标将各所述视频合并为所述融合视频,包括:
确定各所述视频在所述融合视频中的分辨率和尺寸;
按照所述分辨率和所述尺寸调整对应的所述视频;
按照所述位置坐标将调整后的各所述视频合并为所述融合视频。
4.根据权利要求1所述方法,其特征在于,所述将各所述视频在所述融合视频内的位置信息添加到所述传输码流,包括:
获取各所述视频对应的位置坐标、原始分辨率和原始尺寸作为所述位置信息;
将所述位置坐标、所述原始分辨率和所述原始尺寸添加到所述传输码流的附加增强信息字段。
5.一种视频传输方法,其特征在于,应用于客户端,所述方法包括:
获取编码端的传输码流,并生成所述传输码流对应的还原融合视频;
根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频;
根据第二预设画面布局展示各所述还原视频。
6.根据权利要求5所述方法,其特征在于,所述根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频,包括:
在所述传输码流的附加增强信息字段中提取各所述还原视频的所述位置信息,其中,所述位置信息包括位置坐标、原始分辨率和原始尺寸;
按照所述位置信息将所述还原融合视频拆分为至少两个所述还原视频。
7.根据权利要求6所述方法,其特征在于,所述按照所述位置信息将所述还原融合视频拆分为至少两个还原视频,包括:
按照所述位置坐标在所述还原融合视频中获取待处理视频;
按照所述原始分辨率和所述原始尺寸将所述待处理视频调整为所述还原视频。
8.根据权利要求5所述方法,其特征在于,在所述根据所述传输码流添加的位置信息将所述还原融合视频拆分至少两个还原视频之前,还包括:
判断所述传输码流是否存在附加增强信息字段;
若是,则在所述传输码流的所述附加增强信息字段内提取所述位置信息;
若否,则将所述传输码流还原为显示视频。
9.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-4中任一所述视频传输方法,和/或,5-6中任一所述视频传输方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-4中任一所述视频传输方法,和/或,5-6中任一所述视频传输方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111452270.2A CN114173156A (zh) | 2021-12-01 | 2021-12-01 | 视频传输方法、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111452270.2A CN114173156A (zh) | 2021-12-01 | 2021-12-01 | 视频传输方法、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114173156A true CN114173156A (zh) | 2022-03-11 |
Family
ID=80482235
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111452270.2A Pending CN114173156A (zh) | 2021-12-01 | 2021-12-01 | 视频传输方法、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114173156A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116055700A (zh) * | 2023-03-23 | 2023-05-02 | 北京清扬通信有限公司 | 一种降低网络流量的多路视频处理方法、设备及介质 |
-
2021
- 2021-12-01 CN CN202111452270.2A patent/CN114173156A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116055700A (zh) * | 2023-03-23 | 2023-05-02 | 北京清扬通信有限公司 | 一种降低网络流量的多路视频处理方法、设备及介质 |
CN116055700B (zh) * | 2023-03-23 | 2023-06-20 | 北京清扬通信有限公司 | 一种降低网络流量的多路视频处理方法、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107483460B (zh) | 一种多平台并行导播推流的方法及系统 | |
US20160261927A1 (en) | Method and System for Providing and Displaying Optional Overlays | |
US8330798B2 (en) | Apparatus and method for providing stereoscopic three-dimensional image/video contents on terminal based on lightweight application scene representation | |
US10511803B2 (en) | Video signal transmission method and device | |
US8908006B2 (en) | Method, terminal and system for caption transmission in telepresence | |
CN110784730B (zh) | 直播视频数据的传输方法、装置、设备和存储介质 | |
CN100515056C (zh) | 在同一画面中显示多个频道信息的方法、系统、装置及机顶盒 | |
US20110090970A1 (en) | Terminal and relay node for video conference system | |
US20080133604A1 (en) | Apparatus and method for linking basic device and extended devices | |
US20200145736A1 (en) | Media data processing method and apparatus | |
WO2003034734A1 (fr) | Appareil video interactif et procede de superposition du sous-titre sur l'image utilisee par ledit appareil | |
US20160057488A1 (en) | Method and System for Providing and Displaying Optional Overlays | |
CN102547213A (zh) | 一种用于视频会议系统的视频成像预览方法 | |
US11936936B2 (en) | Method and system for providing and displaying optional overlays | |
CN107888993A (zh) | 一种视频数据的处理方法及装置 | |
CN102088631B (zh) | 数字电视节目直播和点播方法及相关装置和系统 | |
CN111147801A (zh) | 一种视联网终端的视频数据处理方法和装置 | |
DE112016004560T5 (de) | Gateway Multi-View-Video-Stream-Verarbeitung für Zweitbildschirminhalts-Überlagerung | |
CN106412617B (zh) | 远程调试控制方法及装置 | |
CN114173156A (zh) | 视频传输方法、电子设备和存储介质 | |
US10462500B2 (en) | Location agnostic media control room/broadcast facility | |
US20140115639A1 (en) | Multi-vision virtualization system and method | |
CN115988171B (zh) | 一种视频会议系统及其沉浸式布局方法和装置 | |
CN102685415A (zh) | 一种视频画面处理方法、系统、设备及终端 | |
JP2018520546A (ja) | オーディオビデオ・コンテンツをレンダリングする方法、この方法を実施するためのデコーダ、及びこのオーディオビデオ・コンテンツをレンダリングするためのレンダリング装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |