CN116456122A - 直播视频数据处理方法、装置和系统 - Google Patents

直播视频数据处理方法、装置和系统 Download PDF

Info

Publication number
CN116456122A
CN116456122A CN202310456554.1A CN202310456554A CN116456122A CN 116456122 A CN116456122 A CN 116456122A CN 202310456554 A CN202310456554 A CN 202310456554A CN 116456122 A CN116456122 A CN 116456122A
Authority
CN
China
Prior art keywords
video data
processing
processing end
target
live
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310456554.1A
Other languages
English (en)
Inventor
鲁永泉
穆凯辉
卢创
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Chuangyiyun Network Technology Co ltd
Original Assignee
Suzhou Chuangyiyun Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Chuangyiyun Network Technology Co ltd filed Critical Suzhou Chuangyiyun Network Technology Co ltd
Priority to CN202310456554.1A priority Critical patent/CN116456122A/zh
Publication of CN116456122A publication Critical patent/CN116456122A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本说明书提供了直播视频数据处理方法、装置和系统。基于该方法,具体实施前,用户只需要准备一台配置较高的第一处理端,在直播间布设一台或多台配置较低的第二处理端;并将第一处理端分别与云端服务器、摄像头、第二处理端相连。具体实施时,用户只需要操作第一处理端,利用第一处理端完成初始视频数据的采集、编解码等处理;调用云端服务器的利用云端服务器的处理资源完成视频数据的编辑处理,得到符合要求的目标视频数据;最后向第二处理端提供所述目标视频数据,并通过第二处理端将该目标视频数据发送至相对应的直播平台服务器进行播放。从而能够有效地降低直播视频数据处理成本,高效地完成复杂直播场景下多个直播间的直播视频数据的处理。

Description

直播视频数据处理方法、装置和系统
技术领域
本说明书属于互联网技术领域,尤其涉及直播视频数据处理方法、装置和系统。
背景技术
随着互联网直播的兴起,越来越多人开始选择加入互联网直播行业。
通常,高质量的直播视频数据处理本身就较为繁琐、复杂,对于处理设备有较高的配置要求。基于现有的直播视频数据处理方法,如果用户面对较为复杂的直播场景,例如,需要同时管理多个不同直播间的高质量视频直播,势必需要对应多个直播间,布设多台高配置的处理设备,从而增加了用户的直播数据处理成本。此外,基于现有的直播视频数据处理方法,应用于复杂的直播场景时,还容易出现处理效率低、出现时延,影响观众体验等问题。
针对上述问题,目前尚未提出有效的解决方案。
发明内容
本说明书提供了一种直播视频数据处理方法、装置和系统,有效地降低处理成本,高效、高质量地完成相关直播视频数据的处理。
本说明书提供了一种直播视频数据处理系统,至少包括第一处理端、第二处理端和云端服务器;所述第二处理端布设于直播间所述第二处理端至少对应一个直播间,所述第一处理端和第二处理端位于同一个局域网中;所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,其中,
所述第一处理端用于接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;并将所述编码后的初始视频数据发送至云端服务器;
所述云端服务器用于根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;并对目标视频数据进行编码处理,得到编码后的目标视频数据;
所述第一处理端还用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;以及根据目标视频数据,生成对应的视频信号;并在局域网中广播所述视频信号;
所述第二处理端用于根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据;以及将所述目标视频数据发送至相对应的直播平台服务器进行播放。
本说明书还提供了一种直播视频数据处理方法,应用于第一处理端,其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间,所述方法包括:
接收摄像头采集的初始视频数据;
对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
在一个实施例中,所述第二处理端包括布设于不同直播间的多个第二处理端;所述第二处理端的配置低于所述第一处理端。
在一个实施例中,所述第一处理端与所述第二处理端位于同一个局域网中。
在一个实施例中,所述第一处理端部署有目标直播管理软件的客户端模块;所述第二处理端部署有目标直播管理软件的虚拟摄像头模块。
在一个实施例中,将所述目标视频数据提供给相对应的第二处理端,包括:
根据目标视频数据,生成对应的视频信号;其中,所述视频信号至少携带有与目标视频数据对应的目标标识;
在局域网中广播所述视频信号;其中,第二处理端根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据。
在一个实施例中,在对外广播所述视频信号之后,所述方法还包括:
接收第二处理端基于该视频信号发起的数据获取请求;其中,数据获取请求至少携带有与第二处理端对应的身份凭证;
根据所述身份凭证和目标标识,对第二处理端进行身份验证;
在确定第二处理端身份验证通过的情况下,建立与第二处理端之间的数据传输通道;并通过该数据传输通道,将目标视频数据发送至第二处理端。
在一个实施例中,在对所述初始视频数据进行编码处理,得到编码后的初始视频数据之后,所述方法还包括:
接收用户通过客户端模块发起的编辑处理指令;
将所述编辑处理指令发送至云端服务器;其中,所述云端服务器根据所述编辑处理指令,基于相应的虚拟场景,对所述编码后的初始视频数据进行相应的编辑处理。
本说明书还提供了一种直播视频数据处理装置,应用于第一处理端,其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间,所述装置包括:
接收模块,用于接收摄像头采集的初始视频数据;
编码模块,用于对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
发送模块,用于将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
解码模块,用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
提供模块,用于将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
本说明书还提供了一种计算机可读存储介质,其上存储有计算机指令,所述指令被处理器执行时实现以下步骤:接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
基于本说明书提供的直播视频数据处理方法、装置和系统,具体实施前,用户只需要准备一台配置较高的第一处理端,在直播间布设一台或多台配置较低的第二处理端;并将第一处理端分别与云端服务器、布设于直播间的摄像头、第二处理端相连即可。具体实施时,基于上述系统设备,可以将视频的采集、编解码的处理,与视频的编辑处理拆分开,用户只需要操作第一处理端,利用第一处理端完成初始视频数据的采集、编解码等处理;调用云端服务器的利用云端服务器的处理资源完成较复杂的直播视频数据的编辑处理,得到符合要求的目标视频数据;最后向第二处理端提供所述目标视频数据,并通过第二处理端将该目标视频数据发送至相对应的直播平台服务器进行播放。从而能够有效地降低直播视频数据处理成本,高效、高质量地完成复杂直播场景下多个直播间的相关直播视频数据的处理。并且还能够较好同时对接不同的直播平台,减少时延,使得直播平台观众可以获得较好的观看体验。
附图说明
为了更清楚地说明本说明书实施例,下面将对实施例中所需要使用的附图作简单地介绍,下面描述中的附图仅仅是本说明书中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本说明书的一个实施例提供的直播视频数据处理方法的流程示意图;
图2是在一个场景示例中,应用本说明书实施例提供的直播视频数据处理方法的一种实施例的示意图;
图3是在一个场景示例中,应用本说明书实施例提供的直播视频数据处理方法的一种实施例的示意图;
图4是本说明书的一个实施例提供的直播视频数据处理系统的结构组成示意图;
图5是本说明书的一个实施例提供的服务器的结构组成示意图;
图6是本说明书的一个实施例提供的直播视频数据处理装置的结构组成示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
参阅图1所示,本说明书实施例提供了一种直播视频数据处理方法,其中,该方法具体应用于第一处理端一侧。具体实施时,该方法可以包括以下内容:
S101:接收摄像头采集的初始视频数据;
S102:对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
S103:将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
S104:接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
S105:将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间。所述摄像头布设于直播间内。
具体的,所述第二处理端可以布设于所对应的直播间内。进一步,所述第二处理端具体可以包括布设于不同直播间的多个第二处理端。
基于上述实施例,针对同时存在多个直播间,以及多个待处理的直播视频数据的复杂直播场景,在直播间一侧,只需要布设一台配置相对较高的第一处理端,以及一台或多台配置相对较低、设备成本较小的第二处理端即可,仅需一个用户通过操作第一处理端,就能同时较好地同步处理不同直播间的多个高质量的直播视频数据,从而可以有效地降低直播过程中诸如设备成本、人力成本等数据处理成本;并且,还可以同时较好地对接不同的直播平台,减少直播视频的时延,确保直播的一致性,使直播平台观众可以获得较好的观看体验。
在一些实施例中,可以参阅图2所示,可以存在多个直播间(例如,1号直播间,2号直播间……N号直播间),在每一个直播间中至少布设有一个摄像头(例如,在N个直播间中分别布设有摄像头1,摄像头2……摄像头N),以及与每个直播间分别对应的多个第二处理端(例如,第二处理端1,第二处理端2……第二处理端N)。针对上述包含有多个直播间的复杂直播场景,只需要在用户(例如,导演或剪辑等工作人员)一侧布设一个第一处理端即可。其中,上述第一处理端与各个摄像头、各个第二处理端分别相连;并且,第一处理端与第二处理端具体可以位于同一个局域网内。此外,上述第一处理端还可以通过有线或无线的方式与云端服务器相连。其中,上述摄像头具体可以是支持高质量视频采集的高清摄像头。
具体的,上述云端服务器可以包括一种应用于云服务平台一侧,能够实现数据传输、数据处理等功能的后台服务器。具体的,所述云端服务器例如可以为一个具有数据运算、存储功能以及网络交互功能的电子设备。或者,所述云端服务器也可以为运行于该电子设备中,为数据处理、存储和网络交互提供支持的软件程序。在本实施例中,并不具体限定所述云端服务器所包含的服务器的数量。所述云端服务器具体可以为一个服务器,也可以为几个服务器,或者,由若干服务器形成的服务器集群。
上述第一处理端、第二处理端具体可以包括一种应用于直播间一侧,能够实现数据采集、数据传输等功能的前端。具体的,所述第一处理端、第二处理端例如可以为台式电脑、平板电脑、笔记本电脑、智能手等。或者,所述第一处理端、第二处理端也可以为能够运行于上述电子设备中的软件应用。例如,可以是在台式电脑上运行的直播管理程序等。
进一步,上述第一处理端的配置具体可以高于第二处理端。具体表现为第一处理端(例如,高配PC)的GPU、CPU等优于第二处理端(例如,低配PC)。相应的,第一处理端能够支持处理相对更加复杂、计算量相对更大的数据处理;第二处理端的设备成本相对低于第一处理端。
上述第二处理端还通过相应的数据接口,与至少一个相对应的直播平台服务器相连。例如,第二处理端1可以与XX直播平台的服务器相连。
在一些实施例中,进一步,在软件层面上,所述第一处理端、第二处理端还部署有相同的目标直播管理软件。基于该目标直播管理软件可以支持有用户更加便捷、高效地完成直播视频数据的处理,并减少时延,使得提供给不同直播平台的直播视频具有较好的一致性。
具体实施前,所述第一处理端可以部署有目标直播管理软件的客户端模块;所述第二处理端可以部署有目标直播管理软件的虚拟摄像头模块。
其中,上述客户端模块具体可以包括:导播台、接收器等结构。上述虚拟摄像头模块具体可以理解为一种模拟真实的摄像头采集并输出相应的视频数据的模块结构。
此外,上述云端服务器还可以部署有与目标直播管理软件关联的服务端模块(例如,UE模块),以使云端服务器能够更好地与第一处理端进行数据交互,进一步减少时延。
参阅图2所示,基于上述系统,用户(例如,负责直播视频管理的导演、剪辑等)可以通过上述第一处理端的客户端模块便捷、高效地先利用第一处理端控制相连的摄像头采集初始视频,并利用第一处理终端对初始视频进行编码等操作;进而,利用第一处理端与云端服务器进行数据交互,以利用利用云端服务器的处理资源接力对初始视频进行更加复杂的编辑处理,得到符合要求的高质量目标视频数据;最后,利用第一处理端通过虚拟摄像头模块将目标视频数据及时、稳定地提供给第二处理端,以便第二处理端能够将与直播平台相匹配的高质量的目标视频数据顺利地发送给相对应的直播平台服务器进行播放。相应的,直播平台的观众可以通过终端设备,例如,手机、平板电脑等,顺利地观看到正在直播的目标视频数据,获得较好的直播视频观看体验。
具体的,上述目标直播软件可以是vLive。相应的,可以在第一处理端部署有vLive的客户端组件,包括导播台、vLiveCamera接收器等;在第二处理端部署有vLiveCamera(即,vLive的虚拟摄像头模块)。
在一些实施例中,具体实施前,根据相应合作协议,第一处理端、第二处理端与云端服务器还可以分别部署有预设的指令交互协议,例如,webRtc、httpRestful或Socket等交互协议。基于上述指令交互协议,第一处理端可以更加及时、稳定地与第二处理端、云端服务器进行数据交互,以进一步减少视频数据的时延。
此外,第一处理端和云端服务器还可以分别部署有相对应的视频处理传输层,例如,StudioBridge。相应的,第一处理端和云端服务器可以通过上述视频处理传输层输出编码后的视频数据,以提高编码后的视频数据的传输效率,以及传输稳定性。
在一些实施例中,上述将所述目标视频数据提供给相对应的第二处理端,具体实施时,可以包括以下内容:
S1:根据目标视频数据,生成对应的视频信号;其中,所述视频信号至少携带有与目标视频数据对应的目标标识;
S2:在局域网中广播所述视频信号;其中,第二处理端根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据。
具体实施时,第一处理端可以根据目标视频数据,建立对应的虚拟信号源,生成相对应的视频信号;并在局域网中广播该视频信号。其中,上述视频信号至少携带有与该目标视频数据对应的目标标识。
具体的,第一处理端可以根据目标视频数据的直播视频内容信息(例如,直播主题、主播姓名等)和/或目标视频数据所对应的目标直播间的编号,生成对应的目标标识。
相应的,布设于不同直播间的第二处理端可以根据所在直播间的编号和/或所在直播间的直播视频内容信息等在局域网中进行搜索,以找到相匹配的视频信号;进而以相匹配的视频信号作为索引,自动找到并获取相对应的目标视频数据。
具体的,第二处理端还可以通过目标直播管理软件的虚拟摄像头模块获取上述目标视频数据,再通过上述虚拟摄像头模块模拟真实的摄像头,将上述目标视频数据通过相应的数据接口传输至相对应的直播平台服务器,以供该直播平台的观众观看。
在一些实施例中,在对外广播所述视频信号之后,参阅图3所示,所述方法具体实施时,还可以包括以下内容:
S1:接收第二处理端基于该视频信号发起的数据获取请求;其中,数据获取请求至少携带有与第二处理端对应的身份凭证;
S2:根据所述身份凭证和目标标识,对第二处理端进行身份验证;
S3:在确定第二处理端身份验证通过的情况下,建立与第二处理端之间的数据传输通道;并通过该数据传输通道,将目标视频数据发送至第二处理端。
具体实施时,第二处理端可以根据相匹配的视频信号,生成并向第一处理端发送关于目标视频数据的数据获取请求;其中,该数据获取请求至少携带有与第二处理端对应的身份凭证。
上述身份凭证具体可以是第二处理端根据自己持有的身份私钥加密目标标识生成得到的。其中,第一处理端持有第二处理端的身份公钥。
相应的,第一处理端可以先利用所持有的身份公钥尝试对身份凭证进行解密处理;在解密成功的情况下,核对目标标识;确定目标标识准确后,确定第二处理端身份验证通过,进而可以确认该第二处理端具有获取和使用目标视频数据的权项。
在确定第二处理端身份验证通过的情况下,第一处理端可以通过目标直播管理软件的客户端模块与第二处理端的目标直播管理软件的虚拟摄像头模块,在第一处理端与第二处理端之间建立专门用于传输视频数据的数据传输通道。
进而,第一处理端可以通过该专用的数据传输通道,高效、稳定地将目标视频数据发送给第二处理端,以进一步降低时延,提高整体的处理效率。
此外,第一处理端在确定第二处理端身份验证通过的情况下,还可以进一步对第二处理端进行权限验证。
在一些实施例中,第二处理端在接收到目标视频数据之后,可以通过相应的数据接口将该目标视频数据发送至相对应的直播平台服务器,以通过该直播平台向观众进行播放。
在一些实施例中,在对所述初始视频数据进行编码处理,得到编码后的初始视频数据之后,所述方法具体实施时,还可以包括以下内容:
S1:接收用户通过客户端模块发起的编辑处理指令;
S2:将所述编辑处理指令发送至云端服务器;其中,所述云端服务器根据所述编辑处理指令,基于相应的虚拟场景,对所述编码后的初始视频数据进行相应的编辑处理。
具体实施时,用户可以通过第一处理端的目标直播视频管理软件的客户端模块生成针对初始视频数据的编辑处理指令。其中,上述编辑处理指令具体可以包括以下所列举的一种或多种:抠图指令、图像合成指令、运镜指令、镜头移动指令、图像渲染指令等等。当然,上述所列举的编辑处理指令只是一种示意性说明。具体实施时,根据具体的应用场景和处理需求,上述编辑处理指令还可以包括其他类型的指令。对此,本说明书不作限定。
在一些实施例中,具体实施时,云端服务器可以根据编辑处理指令,基于虚拟场景,一方面能够模拟诸如运镜、镜头移动等真实的镜头操作,得到与真实的镜头操作效果类似的处理后的视频数据;另一方面还能够进行诸如抠图、图像合成、图像渲染等虚拟的图像操作,得到对应的处理后的视频数据。
其中,所述处理的虚拟场景具体可以理解为一种虚拟的立体三维环境模型。在上述虚拟场景中,云端服务器可以通过内置的与该虚拟场景匹配的图像处理程序,较为自由、有效地对视频数据进行多种不同类型的编辑处理,以满足多样化的直播需求。
在一些实施例中,云端服务器还可以预先配置有针对不同直播需求的多种不同类型的虚拟场景。具体实施时,用户还可以通过第一终端的客户端模块选择指定的虚拟场景;相应的,云端服务器可以基于用户指定的虚拟场景,对编码后的初始视频数据进行相应的编辑处理。
此外,第一处理端发送给云端服务器的编码后的初始视频数据也可以携带有对应的目标标识。云端服务器还可以根据目标标识,分析初始视频的直播视频内容信息和/或直播间的直播号,智能地选择出相匹配的虚拟场景;进而可以基于上述相匹配的虚拟场景,对编码后的初始视频数据进行相应的编辑处理。
在一些实施例中,为了方便缺乏视频编辑能力的用户的操作,云端服务器还可以预先通过对大量历史视频编辑记录进行整理、学习,确定出多个预设的编辑处理流程模板;其中,每一个预设的编辑处理流程模板对应一种编辑处理需求,并包含有与该编辑处理需求相对应的编辑处理规则。
具体实施时,用户还可以通过第一处理端的客户端模块,输入用于描述自己想要的视频风格、视频类型等特征的描述文本;第一处理端可以将该描述文本发送至云端服务器。进而,云端服务器可以利用预先训练好的语义分类模型通过处理该描述文本,确定出满足该用户要求的目标编辑处理需求;再从预设的编辑处理流程模板中确定出与目标编辑处理需求相对应的目标编辑处理流程模板;进而可以直接根据该目标编辑处理流程模板,自动基于相应的虚拟场景,对所述编码后的初始视频数据进行相应的编辑处理。从而可以有效地降低用户的操作门槛,智能地对初始视频数据自动进行相匹配的编辑处理。
在一些实施例中,云端服务器还可以根据不同直播平台的直播要求和直播风格,建立预设的编辑处理流程模板与直播平台的对应关系表。第一处理端发送给云端服务器的编码后的初始视频数据,还可以携带有待投放的直播平台的平台标识。相应的,云端服务器在接收到编码后的初始视频数据之后,可以根据该编码后的初始视频数据所携带的直播平台的平台标识,确定出该视频待投放的直播平台;再查询上述对应关系表,自动确定出相对应的预设的编辑处理流程模板,作为所述目标编辑处理流程模板。
在一些实施例中,所述方法具体实施时,还可以包括以下内容:第一处理端接收用户通过客户端模块发起的摄像头调整指令;其中,所述摄像头调整指令用于指示调整相应直播间中布设的摄像头,例如,新开启直播间中的摄像头;或者,关闭直播间中的摄像头;又或者,调整直播间中摄像头的机位。所述摄像头调整指令至少携带有被调整摄像头的标识信息。进而,第一处理端可以根据所述摄像头调整指令,对摄像头进行相应的调整控制。
在一些实施例中,在目标直播间布设有多个摄像头的情况下,第一处理终端发送给云端服务器的与目标直播间对应的编码后的初始视频数据具体可以包括与多个涉嫌头所分别采集到的多个编码后的初始子视频数据。所述方法具体实施时,还可以包括以下内容:第一处理端接收用户通过客户端模块发起的切换指令。其中,该切换指令至少包括目标直播间中被切换的目标摄像头的标识信息。所述编码后的初始子视频数据还携带有对应的摄像头的标识信息。第一处理端将上述切换指令发送至云端服务器。
相应的,云端服务器可以根据上述切换指令,确定出被切换的目标摄像头的标识信息;根据该目标摄像头的标识信息,从多个编码后的初始子视频数据中确定出目标摄像头所采集的初始视频数据,并优先对该初始视频数据进行编辑处理,得到与目标摄像头对应的编码后的目标子视频数据;再将该编码后的目标子视频数据优先反馈给第一处理端。
第一处理端可以根据切换指令,只将对编码后的目标子视频数据进行解码处理,得到对应的目标子视频数据;只将目标子视频数据发送给对应的第二处理端,以便相应的直播平台的观众能够及时观看摄像头切换后基于目标摄像头所采集到的直播视频数据。
此外,所述方法具体实施时,还可以包括以下内容:第一处理端接收用户通过客户端模块发起的融合指令。其中,该融合指令至少包括目标直播间中至少两个参与融合的摄像头的标识信息。第一处理端将上述融合指令发送给云端服务器。
相应的,云端服务器可以根据上述融合指令,从多个编码后的初始子视频数据中确定出参与融合的摄像头所采集的初始视频数据,并对参与融合的摄像头所采集的初始视频数据进行融合处理,例如,视频叠加,或者视频拼接等,得到融合后的目标视频数据;再将融合后的目标视频数据提供给第一处理端。从而可以满足多样化的直播需求。
由上可见,基于本说明书实施例提供的直播视频数据处理方法,具体实施前,用户只需要准备一台配置较高的第一处理端,在直播间布设一台或多台配置较低的第二处理端;并将第一处理端分别与云端服务器、摄像头、第二处理端相连即可。具体实施时,基于上述设备,可以将视频的采集、编解码的处理,与视频的编辑处理拆分开,用户只需要操作第一处理端,利用第一处理端完成初始视频数据的采集、编码、解码等操作;调用云端服务器的利用云端服务器的处理资源完成视频数据的编辑处理,得到符合要求的目标视频数据;最后向第二处理端提供所述目标视频数据,并通过第二处理端将该目标视频数据发送至相对应的直播平台服务器进行播放。从而能够有效地降低直播视频数据处理成本,高效、高质量地完成复杂直播场景下多个直播间的相关直播视频数据的处理。并且还能够较好同时对接不同的直播平台,减少时延,使得直播平台观众可以获得较好的观看体验。
参阅图4所示,本说明书实施例还提供了一种直播视频数据处理系统,至少包括第一处理端、第二处理端和云端服务器;所述第二处理端至少对应一个直播间,所述第一处理端和第二处理端位于同一个局域网中;所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,其中,
所述第一处理端用于接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;并将所述编码后的初始视频数据发送至云端服务器;
所述云端服务器用于根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;并对目标视频数据进行编码处理,得到编码后的目标视频数据;
所述第一处理端还用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;以及根据目标视频数据,生成对应的视频信号;并在局域网中广播所述视频信号;
所述第二处理端用于根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据;以及将所述目标视频数据发送至相对应的直播平台服务器进行播放。
其中,所述第二处理端可以包括多个第二处理端。所述摄像头布设于直播间内。具体的,所述第二处理端可以布设于所对应的直播间内。
由上可见,基于本说明书实施例提供的直播视频数据处理系统,能够有效地降低直播视频数据处理成本,高效、高质量地完成复杂直播场景下多个直播间的相关直播视频数据的处理。并且还能够较好同时对接不同的直播平台,减少时延,使得直播平台观众可以获得较好的观看体验。
本说明书实施例还提供一种服务器,包括处理器以及用于存储处理器可执行指令的存储器,所述处理器具体实施时可以根据指令执行以下步骤:接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
为了能够更加准确地完成上述指令,参阅图5所示,本说明书实施例还提供了另一种具体的服务器,其中,所述服务器包括网络通信端口501、处理器502以及存储器503,上述结构通过内部线缆相连,以便各个结构可以进行具体的数据交互。
其中,所述网络通信端口501,具体可以用于接收摄像头采集的初始视频数据。
所述处理器502,具体可以用于对所述初始视频数据进行编码处理,得到编码后的初始视频数据;将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
所述存储器503,具体可以用于存储相应的指令程序。
在本实施例中,所述网络通信端口501可以是与不同的通信协议进行绑定,从而可以发送或接收不同数据的虚拟端口。例如,所述网络通信端口可以是负责进行web数据通信的端口,也可以是负责进行FTP数据通信的端口,还可以是负责进行邮件数据通信的端口。此外,所述网络通信端口还可以是实体的通信接口或者通信芯片。例如,其可以为无线移动网络通信芯片,如GSM、CDMA等;其还可以为Wifi芯片;其还可以为蓝牙芯片。
在本实施例中,所述处理器502可以按任何适当的方式实现。例如,处理器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程逻辑控制器和嵌入微控制器的形式等等。本说明书并不作限定。
在本实施例中,所述存储器503可以包括多个层次,在数字系统中,只要能保存二进制数据的都可以是存储器;在集成电路中,一个没有实物形式的具有存储功能的电路也叫存储器,如RAM、FIFO等;在系统中,具有实物形式的存储设备也叫存储器,如内存条、TF卡等。
本说明书实施例还提供了一种基于上述直播视频数据处理方法的计算机可读存储介质,所述计算机可读存储介质存储有计算机程序指令,在所述计算机程序指令被执行时实现以下步骤:接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
在本实施例中,上述存储介质包括但不限于随机存取存储器(Random AccessMemory,RAM)、只读存储器(Read-Only Memory,ROM)、缓存(Cache)、硬盘(Hard DiskDrive,HDD)或者存储卡(Memory Card)。所述存储器可以用于存储计算机程序指令。网络通信单元可以是依照通信协议规定的标准设置的,用于进行网络连接通信的接口。
在本实施例中,该计算机可读存储介质存储的程序指令具体实现的功能和效果,可以与其它实施方式对照解释,在此不再赘述。
参阅图6所示,在软件层面上,本说明书实施例还提供了一种直播视频数据处理装置,应用于第一处理端,其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间,所述装置包括:
接收模块601,具体可以用于接收摄像头采集的初始视频数据;
编码模块602,具体可以用于对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
发送模块603,具体可以用于将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
解码模块604,具体可以用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
提供模块605,具体可以用于将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
在一些实施例中,所述第二处理端具体可以包括布设于不同直播间的多个第二处理端;所述第二处理端的配置可以低于所述第一处理端。
在一些实施例中,所述第一处理端与所述第二处理端具体可以位于同一个局域网中。
在一些实施例中,所述第一处理端部署有目标直播管理软件的客户端模块;所述第二处理端部署有目标直播管理软件的虚拟摄像头模块。
在一些实施例中,上述提供模块605具体实施时,可以按照以下方式将所述目标视频数据提供给相对应的第二处理端:根据目标视频数据,生成对应的视频信号;其中,所述视频信号至少携带有与目标视频数据对应的目标标识;在局域网中广播所述视频信号;其中,第二处理端根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据。
在一些实施例中,在对外广播所述视频信号之后,所述装置具体实施时,还可以用于接收第二处理端基于该视频信号发起的数据获取请求;其中,数据获取请求至少携带有与第二处理端对应的身份凭证;根据所述身份凭证和目标标识,对第二处理端进行身份验证;在确定第二处理端身份验证通过的情况下,建立与第二处理端之间的数据传输通道;并通过该数据传输通道,将目标视频数据发送至第二处理端。
在一些实施例中,在对所述初始视频数据进行编码处理,得到编码后的初始视频数据之后,所述装置具体实施时,还可以用于接收用户通过客户端模块发起的编辑处理指令;将所述编辑处理指令发送至云端服务器;其中,所述云端服务器根据所述编辑处理指令,基于相应的虚拟场景,对所述编码后的初始视频数据进行相应的编辑处理。
需要说明的是,上述实施例阐明的单元、装置或模块等,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本说明书时可以把各模块的功能在同一个或多个软件和/或硬件中实现,也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
由上可见,基于本说明书实施例提供的直播视频数据处理装置,可以将视频的采集、编解码的处理,与视频的编辑处理拆分开,用户只需要操作第一处理端,利用第一处理端完成初始视频数据的采集、编码、解码等操作;调用云端服务器的利用云端服务器的处理资源完成视频数据的编辑处理,得到符合要求的目标视频数据;最后向第二处理端提供所述目标视频数据,并通过第二处理端将该目标视频数据发送至相对应的直播平台服务器进行播放。从而能够有效地降低直播视频数据处理成本,高效、高质量地完成复杂直播场景下多个直播间的相关直播视频数据的处理。并且还能够较好同时对接不同的直播平台,减少时延,使得直播平台观众可以获得较好的观看体验。
虽然本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的装置或客户端产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境,甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下,并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
本领域技术人员也知道,除了以纯计算机可读程序代码方式实现控制器以外,完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件,而对其内部包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至,可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构、类等等。也可以在分布式计算环境中实践本说明书,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机可读存储介质中。
通过以上的实施例的描述可知,本领域的技术人员可以清楚地了解到本说明书可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本说明书的技术方案本质上可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,移动终端,服务器,或者网络设备等)执行本说明书各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例采用递进的方式描述,各个实施例之间相同或相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。本说明书可用于众多通用或专用的计算机系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
虽然通过实施例描绘了本说明书,本领域普通技术人员知道,本说明书有许多变形和变化而不脱离本说明书的精神,希望所附的权利要求包括这些变形和变化而不脱离本说明书的精神。

Claims (10)

1.一种直播视频数据处理系统,其特征在于,至少包括第一处理端、第二处理端和云端服务器;所述第二处理端布设于直播间所述第二处理端至少对应一个直播间,所述第一处理端和第二处理端位于同一个局域网中;所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,其中,
所述第一处理端用于接收摄像头采集的初始视频数据;对所述初始视频数据进行编码处理,得到编码后的初始视频数据;并将所述编码后的初始视频数据发送至云端服务器;
所述云端服务器用于根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;并对目标视频数据进行编码处理,得到编码后的目标视频数据;
所述第一处理端还用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;以及根据目标视频数据,生成对应的视频信号;并在局域网中广播所述视频信号;
所述第二处理端用于根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据;以及将所述目标视频数据发送至相对应的直播平台服务器进行播放。
2.一种直播视频数据处理方法,其特征在于,应用于第一处理端,其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间,所述方法包括:
接收摄像头采集的初始视频数据;
对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
3.根据权利要求2所述的方法,其特征在于,所述第二处理端包括布设于不同直播间的多个第二处理端;所述第二处理端的配置低于所述第一处理端。
4.根据权利要求3所述的方法,其特征在于,所述第一处理端与所述第二处理端位于同一个局域网中。
5.根据权利要求4所述的方法,其特征在于,所述第一处理端部署有目标直播管理软件的客户端模块;所述第二处理端部署有目标直播管理软件的虚拟摄像头模块。
6.根据权利要求5所述的方法,其特征在于,将所述目标视频数据提供给相对应的第二处理端,包括:
根据目标视频数据,生成对应的视频信号;其中,所述视频信号至少携带有与目标视频数据对应的目标标识;
在局域网中广播所述视频信号;其中,第二处理端根据所述目标标识在所述局域网中搜索到相匹配的视频信号,并基于该视频信号获取所述目标视频数据。
7.根据权利要求5所述的方法,其特征在于,在对外广播所述视频信号之后,所述方法还包括:
接收第二处理端基于该视频信号发起的数据获取请求;其中,数据获取请求至少携带有与第二处理端对应的身份凭证;
根据所述身份凭证和目标标识,对第二处理端进行身份验证;
在确定第二处理端身份验证通过的情况下,建立与第二处理端之间的数据传输通道;并通过该数据传输通道,将目标视频数据发送至第二处理端。
8.根据权利要求5所述的方法,其特征在于,在对所述初始视频数据进行编码处理,得到编码后的初始视频数据之后,所述方法还包括:
接收用户通过客户端模块发起的编辑处理指令;
将所述编辑处理指令发送至云端服务器;其中,所述云端服务器根据所述编辑处理指令,基于相应的虚拟场景,对所述编码后的初始视频数据进行相应的编辑处理。
9.一种直播视频数据处理装置,其特征在于,应用于第一处理端,其中,所述第一处理端分别与摄像头、第二处理端和云端服务器相连,所述第二处理端与直播平台服务器相连,所述第二处理端至少对应一个直播间,所述装置包括:
接收模块,用于接收摄像头采集的初始视频数据;
编码模块,用于对所述初始视频数据进行编码处理,得到编码后的初始视频数据;
发送模块,用于将所述编码后的初始视频数据发送至云端服务器;其中,所述云端服务器根据所述编码后的初始视频数据,通过相应的编辑处理,得到符合要求的目标视频数据;所述云端服务器还对目标视频数据进行编码处理,得到编码后的目标视频数据;
解码模块,用于接收编码后的目标视频数据,并通过解码处理,得到对应的目标视频数据;
提供模块,用于将所述目标视频数据提供给相对应的第二处理端;其中,所述第二处理端通过相应的数据接口将所述目标视频数据发送至相对应的直播平台服务器进行播放。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,所述指令被处理器执行时实现权利要求2至8中任一项所述方法的步骤。
CN202310456554.1A 2023-04-25 2023-04-25 直播视频数据处理方法、装置和系统 Pending CN116456122A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310456554.1A CN116456122A (zh) 2023-04-25 2023-04-25 直播视频数据处理方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310456554.1A CN116456122A (zh) 2023-04-25 2023-04-25 直播视频数据处理方法、装置和系统

Publications (1)

Publication Number Publication Date
CN116456122A true CN116456122A (zh) 2023-07-18

Family

ID=87135559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310456554.1A Pending CN116456122A (zh) 2023-04-25 2023-04-25 直播视频数据处理方法、装置和系统

Country Status (1)

Country Link
CN (1) CN116456122A (zh)

Similar Documents

Publication Publication Date Title
He et al. Rubiks: Practical 360-degree streaming for smartphones
CN107872732B (zh) 一种自助式互动视频直播系统
US20200382570A1 (en) Systems and methods of facilitating live streaming of content on multiple social media platforms
CN103002330B (zh) 一种同时同地拍摄的多视频网络编辑方法、客户端、服务器及系统
EP2724343B1 (en) Video remixing system
CN104012106A (zh) 使表示不同视点的视频对准
US20150124048A1 (en) Switchable multiple video track platform
CN106028092B (zh) 一种电视截屏的分享方法及装置
CN106131591A (zh) 直播方法、装置及终端
US20170134825A1 (en) Method and device for processing panoramic live broadcast video resources
US10674183B2 (en) System and method for perspective switching during video access
CN111614967B (zh) 虚拟形象直播方法、装置、电子设备及存储介质
CN111683260A (zh) 基于虚拟主播的节目视频生成方法、系统和存储介质
WO2017157135A1 (zh) 媒体信息处理方法及媒体信息处理装置、存储介质
US11082756B2 (en) Crowdsource recording and sharing of media files
CN111131909A (zh) 一种分享终端桌面的方法、装置、设备及介质
CN105550934A (zh) 虚拟现实中微信软文的推送系统及方法
CN109426993A (zh) 一种推荐观看信息的方法及系统
CN110719526A (zh) 视频播放方法及装置
CN111698522A (zh) 一种基于混合现实的直播系统
CN113473165A (zh) 直播控制系统、直播控制方法、装置、介质与设备
CN107707830B (zh) 基于单向通信的全景视频播放拍照系统
CN108320331B (zh) 一种生成用户场景的增强现实视频信息的方法与设备
CN112306240A (zh) 虚拟现实数据处理方法、装置、设备及存储介质
US20170195717A1 (en) Mobile search-ready smart display technology utilizing optimized content fingerprint coding and delivery

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination