CN112672078A - 多媒体数据处理方法、装置和系统 - Google Patents

多媒体数据处理方法、装置和系统 Download PDF

Info

Publication number
CN112672078A
CN112672078A CN202011507917.2A CN202011507917A CN112672078A CN 112672078 A CN112672078 A CN 112672078A CN 202011507917 A CN202011507917 A CN 202011507917A CN 112672078 A CN112672078 A CN 112672078A
Authority
CN
China
Prior art keywords
multimedia data
resolution
path
merging
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011507917.2A
Other languages
English (en)
Inventor
宫庆宝
周晶晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Novastar Electronic Technology Co Ltd
Original Assignee
Xian Novastar Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Novastar Electronic Technology Co Ltd filed Critical Xian Novastar Electronic Technology Co Ltd
Priority to CN202011507917.2A priority Critical patent/CN112672078A/zh
Publication of CN112672078A publication Critical patent/CN112672078A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种多媒体数据处理方法、装置和系统。其中,该方法包括:将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端。本发明解决了由于视频拼接器同时监视多路输入视频,导致的数据处理压力大的技术问题。

Description

多媒体数据处理方法、装置和系统
技术领域
本发明涉及图像显示技术领域,具体而言,涉及一种多媒体数据处理方法、装置和系统。
背景技术
视频拼接器设备的软件中视频显示是很重要的部分,用来观看每路输入信号的真实情况以及内容,是业务的必备功能。但是由于视频拼接器设备的输入源比较多,在视频传输与播放时压力非常之大。
针对上述由于视频拼接器同时监视多路输入视频,导致的数据处理压力大的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种多媒体数据处理方法、装置和系统,以至少解决由于视频拼接器同时监视多路输入视频,导致的数据处理压力大的技术问题。
根据本发明实施例的一个方面,提供了一种多媒体数据处理方法,包括:将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端。
可选的,将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据包括:将多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,第一类分辨率小于第二类分辨率;将分辨率为第二类分辨率的多媒体数据确定为合并后的多媒体数据。
进一步地,可选的,依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据包括:将分辨率为第二类分辨率的多路多媒体数据中有效视频源的数量确定布局模式;依据布局模式将多路有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,第三类分辨率小于第二类分辨率,第三类分辨率大于第一类分辨率。
可选的,将压缩后的多路多媒体数据进行合并,生成数据流包括:依据预设合并规则,将分辨率为第三类分辨率的多路多媒体数据进行合并,生成数据流,其中,预设合并规则包括:视频总分辨率规则、输入顺序规则和排放规则。
进一步地,可选的,视频总分辨率规则包括:当多路多媒体数据中的输入源数量小于或等于第一预设值时,确定视频总分辨率为第一分辨率;当多路多媒体数据中的输入源数量大于或等于第二预设值且小于或等于第三预设值时,确定视频总分辨率为第二分辨率;当多路多媒体数据中的输入源数量大于第三预设值时,确定视频总分辨率为第三分辨率;其中,第一预设值小于第二预设值,第三预设值大于第二预设值;第三类分辨率包括:第一分辨率、第二分辨率和第三分辨率;第一分辨率小于第二分辨率,第二分辨率小于第三分辨率;输入顺序规则包括:依据多路多媒体数据的序号顺序依据从左至右,从上至下的顺序排列;排放规则包括:依据多路多媒体数据中的输入源数量计算行列数,并依据行列数排放多路多媒体数据。
可选的,该方法还包括:接收客户端返回的性能参数;依据性能参数对数据流的帧率和画质进行调整,得到调整后的数据流。
根据本发明实施例的另一方面,还提供了一种多媒体数据处理装置,包括:第一合并模块,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;压缩模块,用于通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;第二合并模块,用于将压缩后的多路多媒体数据进行合并,生成数据流;发送模块,用于将数据流发送至客户端。
可选的,第一合并模块包括:第一合并单元,用于将多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,第一类分辨率小于第二类分辨率;确定单元,用于将分辨率为第二类分辨率的多媒体数据确定为合并后的多媒体数据。
进一步地,可选的,压缩模块包括:布局确定单元,用于将分辨率为第二类分辨率的多路多媒体数据中有效视频源的数量确定布局模式;压缩单元,用于依据布局模式将多路有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,第三类分辨率小于第二类分辨率,第三类分辨率大于第一类分辨率。
根据本发明实施例的另一方面,还提供了一种视频传输系统,包括:视频处理器和客户端,其中,视频处理器,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端;客户端,与视频处理器连接,用于接收数据流,对数据流进行解码,对解码后的数据流进行重组切割得到待输出的多路多媒体数据。
在本发明实施例中,通过将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端,达到了实现多路视频同时传输、显示的目的,从而实现了视频拼接器同时监视多路输入视频的技术效果,进而解决了由于视频拼接器同时监视多路输入视频,导致的数据处理压力大的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的多媒体数据处理方法的流程示意图;
图2是根据本发明实施例的多媒体数据处理方法中原理的示意图;
图3是根据本发明实施例的多媒体数据处理方法中输入的数量依据排放规则进行排放的示意图;
图4是根据本发明实施例的多媒体数据处理装置的示意图;
图5是根据本发明实施例的视频传输系统中合并一帧图像的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请涉及的技术名词:
视频编码:视频编解码器,是指一个能够对数字视频进行压缩或者解压缩的程序或者设备。
视频编码方式就是指通过压缩技术,将原始视频格式的文件转换成另一种视频格式文件的方式。视频流传输中最为重要的编解码标准有国际电联的H.261、H.263、H.264。
实施例1
根据本发明实施例,提供了一种多媒体数据处理方法的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的多媒体数据处理方法的流程示意图,如图1所示,该方法由视频处理设备执行,其中,视频处理设备例如是视频拼接器、视频切换器,或视频处理器等用于进行视频处理的设备,该方法包括如下步骤:
步骤S102,将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;
具体的,图2是根据本发明实施例的多媒体数据处理方法中原理的示意图,如图2所示,本申请实施例提供的多媒体数据处理方法可以适用于视频拼接器中(应理解,本文以视频拼接器为例,本方案对于其他类型的用于视频处理的设备在不矛盾的情况下也可适用),其中,视频拼接器包括AUX(Auxiliary,辅助输出或辅助输出接口)和预监卡,通过预监卡能够同时监视多路输入视频图像,如:16、40、60、120路,需要说明的是,在本申请实施例中优选的通过预监卡能够同时监视120路视频图像;预监卡可以包括:FPGA和MPU(MicroProcessor Unit,微处理器),本申请实施例仅以上述示例进行说明,以实现本申请实施例提供的多媒体数据处理方法为准,具体不做限定。
作为可选地一例,该步骤S102可以由AUX执行。
在本申请实施例中多媒体数据可以包括:视频输入数据或图像输入数据。
如图2所示,AUX接收至少一路多媒体数据,即,input1,input2和input3。
可选的,步骤S102中将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据包括:将多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,第一类分辨率小于第二类分辨率;将分辨率为第二类分辨率的多媒体数据确定为合并后的多媒体数据。
具体的,基于接收到的至少一路多媒体数据,预监卡中的FPGA通过serdes接收多媒体输入端口AUX合并拼接的所有子卡视频输入数据,AUX发送至FPGA的视频输入数据是将每路视频输入数据以第一类辨率合并拼接为第二类分辨率的数据,在本申请实施例中,第一类分辨率可以为480X270的分辨率;第二类分辨率可以为4K分辨率。
步骤S104,通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;
具体的,基于得到的合并后的多媒体数据,FPGA将多路视频信号分别依据分辨率压缩、并将多路图像合并为一路视频,得到压缩后的多路多媒体数据。
可选的,步骤S104中依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据包括:将分辨率为第二类分辨率的多路多媒体数据中有效视频源的数量确定布局模式;依据布局模式将多路有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,第三类分辨率小于第二类分辨率,第三类分辨率大于第一类分辨率。
具体的,预监卡根据有效视频源数量决定NxN布局模式,创建新的宽480xN高270xN的新视频缓冲。把4k原始视频中的有效输入源分别裁剪出来紧凑重组在新视频缓冲中。
步骤S106,将压缩后的多路多媒体数据进行合并,生成数据流;
其中,如图2所示,预监卡FPGA通过bt1120将4k原始视频传输给预监卡的微处理器(microprocessor unit,MPU),由MPU对合并后的多媒体数据进行帧率和画质的处理,生成数据流。通过先压缩再合并的方式,将分辨率为4K的视频分为多路视频,并分别对多路视频进行压缩,最终将压缩后的多路视频进行合并,能够有效降低步骤S106中数据流的大小;
可选的,步骤S106中将压缩后的多路多媒体数据进行合并,生成数据流包括:依据预设合并规则,将分辨率为第三类分辨率的多路多媒体数据进行合并,生成数据流,其中,预设合并规则包括:视频总分辨率规则、输入顺序规则和排放规则。
其中,视频总分辨率规则包括:当多路多媒体数据中的输入源数量小于或等于第一预设值时,确定视频总分辨率为第一分辨率;当多路多媒体数据中的输入源数量大于或等于第二预设值且小于或等于第三预设值时,确定视频总分辨率为第二分辨率;当多路多媒体数据中的输入源数量大于第三预设值时,确定视频总分辨率为第三分辨率;其中,第一预设值小于第二预设值,第三预设值大于第二预设值;第三类分辨率包括:第一分辨率、第二分辨率和第三分辨率;第一分辨率小于第二分辨率,第二分辨率小于第三分辨率;
具体的,视频总分辨率规则包括:将视频总分辨率控制在两个标准上,当输入源数量(Input)≤64(本申请实施例中的第一预设值)时,视频总分辨率固定为:1920*1080(本申请实施例中的第一分辨率);
当65(本申请实施例中的第二预设值)≤输入源数量(Input)≤128(本申请实施例中的第三预设值)时,视频总分辨率固定为:1920*2160(本申请实施例中的第二分辨率);
当输入源数量(Input)>128时,视频总分辨率固定为:1920*N(本申请实施例中的第三分辨率);
输入顺序规则包括:依据多路多媒体数据的序号顺序依据从左至右,从上至下的顺序排列;
具体的,按照Input1、Input2、Input3……从小到大的顺序排放,在大屏显示时中按照从左到右、从上到下的方式排列。
排放规则包括:依据多路多媒体数据中的输入源数量计算行列数,并依据行列数排放多路多媒体数据。
具体的,按照Input的数量(即,本申请实施例中的输入的数量)动态计算行列数,以求每个小图(Input)能有更大的分辨率;每行最多8个。
其中,排放规则示例如下:
当输入的数量为[1,4]个时,采用2×2方式,如图3所示,图3是根据本发明实施例的多媒体数据处理方法中输入的数量依据排放规则进行排放的示意图:
同理,设置如下:
当输入的数量为[5,16]个时,采用4×4方式;
当输入的数量为[17,25]个时,采用5×5方式;
当输入的数量为[26,36]个时,采用6×6方式;
当输入的数量为[37,49]个时,采用7×7方式;
当输入的数量为[50,64]个时,采用8×8方式;
当输入的数量为[65,72]个时,采用9×8方式;
当输入的数量为[73,80]个时,采用10×8方式;
当输入的数量为[81,88]个时,采用11×8方式;
当输入的数量为[89,96]个时,采用12×8方式;
当输入的数量为[97,104]个时,采用13×8方式;
当输入的数量为[105,112]个时,采用14×8方式;
当输入的数量为[113,120]个时,采用15×8方式;
当输入的数量为[121,128]个时,采用16×8方式。
步骤S108,将数据流发送至客户端。
可选的,本申请实施例提供的多媒体数据处理方法还包括:接收客户端返回的性能参数;依据性能参数对数据流的帧率和画质进行调整,得到调整后的数据流。
其中,FPGA将合并后的视频在硬件内部传输给预监卡的嵌入式程序。嵌入式程序根据与客户端之间的交互,获取客户端的性能参数,依据客户端的性能参数,对数据流的帧率和画质进行处理,然后打包成RTSP流(Real Time Streaming Protocol,实时串流协议,专为娱乐和通信系统使用,以控制流媒体服务器,用于建立和控制终端之间的媒体会话)。
在本发明实施例中,通过将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端,达到了实现多路视频同时传输、显示的目的,从而实现了视频拼接器同时监视多路输入视频的技术效果,进而解决了由于视频拼接器同时监视多路输入视频,导致的数据处理压力大的技术问题。
实施例2
根据本发明实施例的另一方面,还提供了一种多媒体数据处理装置,图4是根据本发明实施例的多媒体数据处理装置的示意图,如图4所示,包括:第一合并模块42,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;压缩模块44,用于通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;第二合并模块46,用于将压缩后的多路多媒体数据进行合并,生成数据流;发送模块48,用于将数据流发送至客户端。
可选的,第一合并模块42包括:第一合并单元,用于将多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,第一类分辨率小于第二类分辨率;确定单元,用于将分辨率为第二类分辨率的多媒体数据确定为合并后的多媒体数据。
进一步地,可选的,压缩模块44包括:布局确定单元,用于将分辨率为第二类分辨率的多路多媒体数据中有效视频源的数量确定布局模式;压缩单元,用于依据布局模式将多路有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,第三类分辨率小于第二类分辨率,第三类分辨率大于第一类分辨率。
可选的,第二合并模块46包括:第二合并单元,用于依据预设合并规则,将分辨率为第三类分辨率的多路多媒体数据进行合并,生成数据流,其中,预设合并规则包括:视频总分辨率规则、输入顺序规则和排放规则。
进一步地,可选的,视频总分辨率规则包括:当多路多媒体数据中的输入源数量小于或等于第一预设值时,确定视频总分辨率为第一分辨率;当多路多媒体数据中的输入源数量大于或等于第二预设值且小于或等于第三预设值时,确定视频总分辨率为第二分辨率;当多路多媒体数据中的输入源数量大于第三预设值时,确定视频总分辨率为第三分辨率;其中,第一预设值小于第二预设值,第三预设值大于第二预设值;第三类分辨率包括:第一分辨率、第二分辨率和第三分辨率;第一分辨率小于第二分辨率,第二分辨率小于第三分辨率;输入顺序规则包括:依据多路多媒体数据的序号顺序依据从左至右,从上至下的顺序排列;排放规则包括:依据多路多媒体数据中的输入源数量计算行列数,并依据行列数排放多路多媒体数据。
可选的,本申请实施例提供的多媒体数据处理装置还包括:接收模块,用于接收客户端返回的性能参数;调整模块,用于依据性能参数对数据流的帧率和画质进行调整,得到调整后的数据流。
实施例3
根据本发明实施例的另一方面,还提供了一种视频传输系统,包括:视频处理器和客户端,其中,视频处理器,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将压缩后的多路多媒体数据进行合并,生成数据流;将数据流发送至客户端;客户端,与视频处理器连接,用于接收数据流,对数据流进行解码,对解码后的数据流进行重组切割得到待输出的多路多媒体数据。
具体的,本申请实施例中的视频传输系统可以如实施例1中的图2所示。
其中,客户端依据预设合并规则对数据流进行切割,通过重组切割后的数据流得到待输出的多媒体数据具体可以包括:
客户端收到视频流数据后根据实施例1中的的“分辨率规则、顺序规则、排放规则”进行切割。例如:客户端检测到当前有3个Input时,就知道了分辨率是1920*1080,且合并方式如图5所示的一帧图像,图5是根据本发明实施例的视频传输系统中合并一帧图像的示意图。
基于图5,可以计算出Input1、Input2、Input3在大图的坐标、尺寸。
Input1:x=0,y=0,w=1920/2=960,h=1080/2=540
Input2:x=Input1.w,y=0,w=1920/2=960,h=1080/2=540
Input3:x=0,y=Input1.h,w=1920/2=960,h=1080/2=540
计算出每个Input的坐标、尺寸后就可以从大图中切割出每个Input所对应的视频内容。
实施例4
根据本发明实施例的另一方面,还提供了一种存储介质,其中,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行上述实施例1中的方法。
实施例5
根据本发明实施例的另一方面,还提供了一种处理器,其中,处理器用于运行程序,其中,程序运行时执行上述实施例1中的方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种多媒体数据处理方法,其特征在于,包括:
将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;
通过预监卡将所述合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据所述多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;
将所述压缩后的多路多媒体数据进行合并,生成数据流;
将所述数据流发送至客户端。
2.根据权利要求1所述的方法,其特征在于,所述将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据包括:
将所述多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,所述第一类分辨率小于所述第二类分辨率;
将所述分辨率为所述第二类分辨率的多媒体数据确定为所述合并后的多媒体数据。
3.根据权利要求2所述的方法,其特征在于,所述依据所述多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据包括:
将分辨率为所述第二类分辨率的所述多路多媒体数据中有效视频源的数量确定布局模式;
依据所述布局模式将多路所述有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,所述第三类分辨率小于所述第二类分辨率,所述第三类分辨率大于所述第一类分辨率。
4.根据权利要求3所述的方法,其特征在于,所述将所述压缩后的多路多媒体数据进行合并,生成数据流包括:
依据预设合并规则,将分辨率为所述第三类分辨率的所述多路多媒体数据进行合并,生成所述数据流,其中,所述预设合并规则包括:视频总分辨率规则、输入顺序规则和排放规则。
5.根据权利要求4所述的方法,其特征在于,
所述视频总分辨率规则包括:当所述多路多媒体数据中的输入源数量小于或等于第一预设值时,确定视频总分辨率为第一分辨率;当所述多路多媒体数据中的输入源数量大于或等于第二预设值且小于或等于第三预设值时,确定视频总分辨率为第二分辨率;当所述多路多媒体数据中的输入源数量大于所述第三预设值时,确定视频总分辨率为第三分辨率;其中,所述第一预设值小于所述第二预设值,所述第三预设值大于所述第二预设值;所述第三类分辨率包括:所述第一分辨率、所述第二分辨率和所述第三分辨率;所述第一分辨率小于所述第二分辨率,所述第二分辨率小于所述第三分辨率;
所述输入顺序规则包括:依据所述多路多媒体数据的序号顺序依据从左至右,从上至下的顺序排列;
所述排放规则包括:依据所述多路多媒体数据中的输入源数量计算行列数,并依据所述行列数排放所述多路多媒体数据。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:
接收所述客户端返回的性能参数;
依据所述性能参数对所述数据流的帧率和画质进行调整,得到调整后的所述数据流。
7.一种多媒体数据处理装置,其特征在于,包括:
第一合并模块,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;
压缩模块,用于通过预监卡将所述合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据所述多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;
第二合并模块,用于将所述压缩后的多路多媒体数据进行合并,生成数据流;
发送模块,用于将所述数据流发送至客户端。
8.根据权利要求7所述的装置,其特征在于,所述第一合并模块包括:
第一合并单元,用于将所述多路多媒体数据由第一类分辨率进行合并拼接,得到分辨率为第二类分辨率的多媒体数据,其中,所述第一类分辨率小于所述第二类分辨率;
确定单元,用于将所述分辨率为所述第二类分辨率的多媒体数据确定为所述合并后的多媒体数据。
9.根据权利要求8所述的装置,其特征在于,所述压缩模块包括:
布局确定单元,用于将分辨率为所述第二类分辨率的所述多路多媒体数据中有效视频源的数量确定布局模式;
压缩单元,用于依据所述布局模式将多路所述有效视频源根据帧率和画质进行分别进行压缩,得到分辨率为第三类分辨率的多路多媒体数据,其中,所述第三类分辨率小于所述第二类分辨率,所述第三类分辨率大于所述第一类分辨率。
10.一种视频传输系统,其特征在于,包括:视频处理器和客户端,其中,
所述视频处理器,用于将接收到的多路多媒体数据进行合并,得到合并后的多媒体数据;通过预监卡将所述合并后的多媒体数据进行拆分,得到多路多媒体数据,并依据所述多路多媒体数据分别进行压缩,得到压缩后的多路多媒体数据;将所述压缩后的多路多媒体数据进行合并,生成数据流;将所述数据流发送至客户端;
所述客户端,与所述视频处理器连接,用于接收所述数据流,对所述数据流进行解码,对解码后的所述数据流进行重组切割得到待输出的多路多媒体数据。
CN202011507917.2A 2020-12-18 2020-12-18 多媒体数据处理方法、装置和系统 Pending CN112672078A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011507917.2A CN112672078A (zh) 2020-12-18 2020-12-18 多媒体数据处理方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011507917.2A CN112672078A (zh) 2020-12-18 2020-12-18 多媒体数据处理方法、装置和系统

Publications (1)

Publication Number Publication Date
CN112672078A true CN112672078A (zh) 2021-04-16

Family

ID=75406869

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011507917.2A Pending CN112672078A (zh) 2020-12-18 2020-12-18 多媒体数据处理方法、装置和系统

Country Status (1)

Country Link
CN (1) CN112672078A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060059043A (ko) * 2004-11-26 2006-06-01 엘지전자 주식회사 휴대단말기의 영상신호 합성장치 및 방법
CN103533300A (zh) * 2013-04-16 2014-01-22 北京淳中视讯科技有限公司 图像预监方法、装置及系统
CN105635670A (zh) * 2015-12-25 2016-06-01 北京小鸟科技发展有限责任公司 视频预监方法和系统
CN208768196U (zh) * 2018-09-19 2019-04-19 深圳市唯奥视讯技术有限公司 一种具有视频预监功能的视频处理装置
CN110099224A (zh) * 2018-01-31 2019-08-06 杭州海康威视数字技术股份有限公司 预监显示方法、装置及系统、计算机设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060059043A (ko) * 2004-11-26 2006-06-01 엘지전자 주식회사 휴대단말기의 영상신호 합성장치 및 방법
CN103533300A (zh) * 2013-04-16 2014-01-22 北京淳中视讯科技有限公司 图像预监方法、装置及系统
CN105635670A (zh) * 2015-12-25 2016-06-01 北京小鸟科技发展有限责任公司 视频预监方法和系统
CN110099224A (zh) * 2018-01-31 2019-08-06 杭州海康威视数字技术股份有限公司 预监显示方法、装置及系统、计算机设备及存储介质
CN208768196U (zh) * 2018-09-19 2019-04-19 深圳市唯奥视讯技术有限公司 一种具有视频预监功能的视频处理装置

Similar Documents

Publication Publication Date Title
CN104394486B (zh) 一种基于云桌面的视频流处理方法及装置
US10567463B2 (en) Quality tagging in adaptive bitrate technologies
CN112040233B (zh) 视频编码、视频解码方法和装置、电子设备及存储介质
CN111901666B (zh) 图像处理方法、装置、电子设备以及存储介质
KR101805550B1 (ko) 프리젠테이션 가상화를 위한 화면 부호화 방법 및 서버
CN110691260A (zh) Iptv多分屏编码播放控制方法及装置
CN108400956A (zh) 视频数据流的分配方法、装置和系统
RU2673102C2 (ru) Устройство и способ обработки информации и программа
CN107809647A (zh) 视频播放的码率切换方法、装置及存储介质
CN110740352B (zh) 显卡透传环境下基于spice协议的差异图像显示方法
CN111193936B (zh) 视频流传输方法、装置、电子设备及计算机可读存储介质
CN113141352B (zh) 多媒体数据的传输方法、装置、计算机设备和存储介质
RU2668064C2 (ru) Устройство обработки информации, способ обработки информации и программа
CN115708356A (zh) 视频处理方法、装置、设备及计算机可读存储介质
CN113099184A (zh) 兼容多种视频格式的图像拼接方法、装置及电子设备
CN112672078A (zh) 多媒体数据处理方法、装置和系统
CN102685415A (zh) 一种视频画面处理方法、系统、设备及终端
CN110392285B (zh) 媒体流处理方法及装置
CN115942009A (zh) 基于混合式编码的远程视频业务办理方法和装置
CN114915797A (zh) 一种多路视频解码方法、装置及相关产品
CN114257771A (zh) 一种多路音视频的录像回放方法、装置、存储介质和电子设备
Canovas et al. A cognitive network management system to improve QoE in stereoscopic IPTV service
CN111343475A (zh) 数据处理方法和装置、直播服务器及存储介质
CN111294617A (zh) 视频播放的方法、装置以及存储介质
CN106954073B (zh) 一种视频数据输入和输出方法、装置与系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210416

RJ01 Rejection of invention patent application after publication