CN106254913A - 多媒体数据的处理方法及装置 - Google Patents

多媒体数据的处理方法及装置 Download PDF

Info

Publication number
CN106254913A
CN106254913A CN201610704545.XA CN201610704545A CN106254913A CN 106254913 A CN106254913 A CN 106254913A CN 201610704545 A CN201610704545 A CN 201610704545A CN 106254913 A CN106254913 A CN 106254913A
Authority
CN
China
Prior art keywords
medium data
data
data bag
account information
live
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610704545.XA
Other languages
English (en)
Inventor
韩尚佑
孙超
喻泽高
刘威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201610704545.XA priority Critical patent/CN106254913A/zh
Publication of CN106254913A publication Critical patent/CN106254913A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25875Management of end-user data involving end-user authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开是关于一种多媒体数据的处理方法及装置,包括:获取携带有对应的账号信息和机位信息的各路多媒体数据包;接收终端发送的第一账号信息;将第一账号信息对应的各路多媒体数据包发送给终端,终端播放第一账号信息对应的各路多媒体数据包中的数据并返回用户根据播放的数据输入的处理指令;接收该处理指令,处理指令用于指示获取直播用数据,直播用数据包括第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频和/或音频数据;根据处理指令和各路的多媒体数据包,获取直播用数据;将直播用数据发送给直播平台。该技术方案云端成本低,且用户可以随时随地用终端进行直播,方便快捷,且用户可快速掌握。

Description

多媒体数据的处理方法及装置
技术领域
本公开涉及数据处理技术领域,尤其涉及多媒体数据的处理方法及装置。
背景技术
随着互联网技术的迅速发展,越来越多的用户可以使用电脑、手机等终端通过网络观看在线视频直播。在线视频直播是指利用互联网网络资源进行的现场视频直播服务,通过现场的视频拍摄同步发布到网络上,用户可以同一时间在网络上看到实时的现场情况。在线视频直播从早年的电脑版直播,网页直播,到现在的手机应用直播,越来越被更多的用户所接受和喜爱。
发明内容
本公开实施例提供多媒体数据的处理方法及装置。所述技术方案如下:
根据本公开实施例的第一方面,提供一种多媒体数据的处理方法,包括:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以发挥云端强大的服务端音视频处理能力,对不同拍摄机位的多媒体数据进行处理,获取用户要求直播的播放用数据,云端成本低,且用户可以随时随地使用终端来控制云端向直播平台发送播放用多媒体数据,由直播平台进行直播,方便快捷,且云端和拍摄设备、终端之间采用无线通信,不需要操作人员离现场非常近,不受空间限制,且用户只需要根据终端播放的各路多媒体数据,选择当前要直播的视频和音频,即用户只需进行选择操作,用户学习成本低,可快速掌握。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;则根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以发挥云端强大的服务端音视频处理能力,对各路的多媒体数据进行实时的音视频分离,需要切换和合成的时候,自动进行音视频分离,获取用户所选择的当前要切换的音频数据和视频数据,进行合成,以完成各种直播需求。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则根据所述处理指令和所述多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以根据用户的选择,将直播内容切换为用户所选择的某一拍摄设备拍摄的一路多媒体数据,以完成直播需求。
在一个实施例中,获取各路的多媒体数据包,包括:
接收各拍摄设备发送的各路的原始多媒体数据包;
将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以将各路的原始多媒体数据包中的数据转换成预设格式的数据,方便云端后续对多媒体数据包中都是预设格式的数据进行音视频分离处理和合成处理。
在一个实施例中,所述方法还包括:
接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述将所述第一账号信息对应的各路多媒体数据包发送给所述终端,包括:
根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以根据用户的操作,通过终端向云端请求第一账号信息对应的各路多媒体数据包,在用户准备好后开始直播流程,与云端直接自动传输各路多媒体数据相比,可以减少不必要的数据传输,节约传输资源。
在一个实施例中,所述方法还包括:
将所述直播用数据发送给所述终端。
根据本公开实施例的第二方面,提供一种多媒体数据的处理方法,包括:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
在一个实施例中,所述方法还包括:
获取预览请求,所述预览请求中携带有所述第一账号信息;
向所述云端发送所述预览请求。
在一个实施例中,所述接收所述直播用数据包括:
接收所述云端发送的所述直播用数据。
根据本公开实施例的第三方面,提供一种多媒体数据的处理装置,包括:
第一获取模块,用于获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
第一接收模块,用于接收终端发送的第一账号信息;
第一发送模块,用于将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
第二接收模块,用于接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第二获取模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
第二发送模块,用于将所述直播用数据发送给直播平台。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;所述第二获取模块包括:
第一获取子模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
处理子模块,用于将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并子模块,用于合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则第二获取模块包括:
第二获取子模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
第三获取子模块,用于获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
在一个实施例中,所述第一获取模块包括:
第一接收子模块,用于接收各拍摄设备发送的各路的原始多媒体数据包;
转换子模块,用于将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
在一个实施例中,所述装置还包括:
第三接收模块,用于接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述第一发送模块包括:
发送子模块,用于根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
在一个实施例中,所述装置还包括:
第二发送模块,用于将所述直播用数据发送给所述终端。
根据本公开实施例的第四方面,提供一种多媒体数据的处理装置,包括:
第四发送模块,用于向云端发送第一账号信息;
第四接收模块,用于接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
播放模块,用于将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
第三获取模块,用于获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第五发送模块,用于向云端发送所述处理指令;
第五接收模块,用于接收所述直播用数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
在一个实施例中,所述装置还包括:
第四获取模块,用于获取预览请求,所述预览请求中携带有所述第一账号信息;
第六发送模块,用于向所述云端发送所述预览请求,所述预览请求用于请求所述云端返回所述第一账号信息对应的各路多媒体数据包。
在一个实施例中,第五接收模块包括:
第二接收子模块,用于接收所述云端发送的所述直播用数据。
根据本公开实施例的第五方面,提供一种多媒体数据的处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
根据本公开实施例的第六方面,提供一种多媒体数据的处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的云端侧的多媒体数据的处理方法的流程图。
图2是根据一示例性实施例示出的用户在终端上输入处理指令的示意图图。
图3是根据一示例性实施例一示出的终端播放直播用数据的示意图。
图4是根据一示例性实施例的终端侧的多媒体数据的处理方法的流程图。
图5是根据一示例性实施例示出的多媒体数据的处理方法的流程图。
图6是根据一示例性实施例示出的多媒体数据的处理方法的流程图。
图7是根据一示例性实施例示出的多媒体数据的处理方法的流程图。
图8是根据一示例性实施例示出的用于云端的多媒体数据的处理装置的框图。
图9是根据一示例性实施例示出的用于云端的多媒体数据的处理装置中第二获取模块805的框图。
图10是根据一示例性实施例示出的用于云端的多媒体数据的处理装置中第二获取模块805的框图。
图11是根据一示例性实施例示出的用于云端的多媒体数据的处理装置中第一获取模块801的框图。
图12是根据一示例性实施例示出的用于云端的多媒体数据的处理装置的框图。
图13是根据一示例性实施例示出的用于云端的多媒体数据的处理装置的框图。
图14是根据一示例性实施例示出的用于终端的多媒体数据的处理装置的框图。
图15是根据一示例性实施例示出的用于终端的多媒体数据的处理装置的框图。
图16是根据一示例性实施例示出的用于终端的多媒体数据的处理装置中第五接收模块146的框图。
图17是根据一示例性实施例示出的用于云端的多媒体数据的处理装置中的框图。
图18是根据一示例性实施例示出的用于终端的多媒体数据的处理装置中的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
随着手机直播的发展,手机上的直播应用也越来越多,为了提升直播内容的水平和质量,让用户通过手机直播应用能够看到更多更好的直播内容,进而吸引更多的用户,故需要制作出专业的现场直播节目;而专业的现场直播节目,往往需要专业的拍摄设备如多个拍摄机位进行现场拍摄,以及专业的编导设备对不同拍摄机位的音频和视频混合匹配,并进行音频和视频的切换。相关技术中,专业的编导设备可以是硬件导播台,通过人工操作硬件导播台可以手动选择某一个机位的画面和另一个机位的声音进行实时混合,然后发送至直播平台,由直播平台推送至各个用户的手机应用中供用户观看。但是,通常一个硬件导播台在几万至几十万以上,成本太高;而且硬件导播台非常笨重,占地面积大,需要连接各种线材,往往需要专门的导播场地,不利于移动时代的主播操作。另外,硬件导播台功能实现复杂,操作人员往往需要几天甚至更久的培训才能很好地操作,硬件导播设备和拍摄相机之间往往通过线缆连接,硬件导播设备的操作人员离现场非常近。
本公开实施例提供的技术方案,涉及终端、拍摄装置、云端和直播平台,用户可以给各个机位的拍摄装置设置第一账号信息,这样拍摄装置可以将拍摄获取的多路多媒体数据包发送至云端,然后用户手持终端就可以在任意地方使用第一账号信息登录云端的客户端页面,云端就可以获取该终端对应的第一账号信息,然后将第一账号信息对应的各路多媒体数据包发送给终端,终端在客户端页面的各个播放窗口播放该第一账号信息对应的各路多媒体数据包中的数据供用户预览,用户预览各路的多媒体数据,根据需要选择出直播用数据即当前要直播的视频和/或音频,终端获取用户的选择即处理指令,然后将处理指令发送给云端,云端接收到该处理指令后,就可以发挥云端强大的服务端音视频处理能力,根据处理指令对各路多媒体数据包进行实时处理,获取用户要求的直播用数据,并将该直播用数据发送给直播平台;由直播平台推送至各个用户的手机应用中供用户观看该直播。
本实施例可以发挥云端强大的服务端音视频处理能力,对不同拍摄机位的多媒体数据进行处理,获取用户要求的直播用数据,云端成本低,且用户可以随时随地使用终端来控制云端进行数据处理获取直播用数据,方便快捷,且云端和拍摄设备、终端之间采用无线通信,操作人员手持终端即可操控直播,不需要操作人员离拍摄现场非常近,不受空间限制,且用户只需要根据终端播放的各路多媒体数据,选择当前要直播的视频和音频,即用户只需进行选择操作,用户学习成本低,可快速掌握。
本公开实施例提供了多媒体数据的处理方法,实施该方法的执行主体有云端和终端。本公开实施例根据方法实施主体的不同,布置了两套多媒体数据的处理方法,如下所述:
云端侧
图1是根据一示例性实施例示出的一种多媒体数据的处理方法的流程图,如图1所示,多媒体数据的处理方法用于云端中,包括以下步骤S101-S106:
在步骤S101中,获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息。
用户在进行直播时,为了提升直播内容的水平和质量,可以使用至少两个拍摄设备进行现场拍摄,用户在使用拍摄设备进行拍摄时,可以在拍摄设备的用户使用界面上输入用户的账号信息,这样拍摄设备在拍摄获得多媒体数据后,就会将这些多媒体数据打包成多媒体数据包,该多媒体数据包中携带有该账号信息和本拍摄设备的机位信息如设备ID等,然后,拍摄设备会持续将获取的一路多媒体数据包自动上传至云端,云端就可以获取各路的多媒体数据包。
在步骤S102中,接收终端发送的第一账号信息。
用户在进行直播时,会使用终端打开云端的客户端页面,该客户端页面可以是网页也可以是云端客户端应用中的用户使用页面。用户进入该客户端页面如登录页面后可以输入本用户的登录信息进行登录,该登录信息中包括用户的第一账号信息,终端会将所述登录信息发送至云端,云端对该登录信息进行验证,在验证通过后,向终端返回验证通过信息,终端就会从登录页面切换至用户使用页面。
云端在接收到终端发送的登录信息并在验证通过后,就会获取到该终端对应的第一账号信息。
在步骤S103中,将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令。
这里,云端在获取终端对应的第一账号信息后,可以查找获得该第一账号信息对应的各路多媒体数据包,并自动向对应终端发送该第一账号信息对应的各路多媒体数据包。
例如,用户在进行直播时使用两个拍摄设备进行直播拍摄,拍摄设备1位于机位1,拍摄设备2位于机位2,用户先给两个拍摄设备配置第一账号信息,并操作两个拍摄设备开始拍摄后,每个拍摄设备就会拍摄获得一路的多媒体数据包,并将该一路的多媒体数据包发送至云端,拍摄设备1发送的一路的多媒体数据包都携带有第一账号信息和机位1的机位信息,拍摄设备2发送的一路的多媒体数据包都携带有第一账号信息和机位2的机位信息,这样云端就可以获得第一账号信息对应的两路多媒体数据包,这样,当用户在终端上使用第一账号信息登录云端的客户端页面后,云端就会将该第一账号信息对应的两路多媒体数据包发送至该终端,终端在接收到第一账号信息对应的各路多媒体数据包后,就会在用户登录后的用户使用页面上播放各路多媒体数据包中的数据供用户预览。这里,该用户使用页面上设置有多个播放窗口,终端可以将每路多媒体数据包在一个播放窗口播放,每路多媒体数据包对应有一个机位信息,每路的多媒体数据包就是一个拍摄设备拍摄获得的数据包,这样,终端就可以在各个播放窗口对应播放各个拍摄设备获得的多媒体数据,供用户预览。
示例地,终端上第一账号信息对应的用户使用页面20可以是如图2所示,用户使用页面20上有两个播放窗口201,这两个播放窗口201分别用来播放机位1的机位信息对应的多媒体数据包中的数据和机位2的机位信息对应的多媒体数据包中的数据。每个播放窗口下显示有选项框202,用户预览各个播放窗口中显示的画面,根据当前需要进行直播的内容如某个机位信息对应的多媒体数据包中视频数据、音频数据或全部数据,在选项框中选择“视频”、“音频”或“全部”选项,用户在选择完毕后,点击“确定”按钮,这样终端就会获得用户输入的处理指令;终端获取用户输入的处理指令后,就会将该处理指令发送给云端。
这里需要说明的是,图2中所示的第一账号信息对应的用户使用页面20只是该用户使用页面的一种显示形式,该用户使用页面还可以有其他各种显示形式,如可以不显示选项框202,当用户点击播放窗口后,在播放窗口自动弹出选项框等等,在此不一一例举。
另外,终端在一个播放窗口播放一路多媒体数据包中的数据时,可以使用flash进行播放;这里需要说明的是,为了防止多个窗口播放时有多个声音比较混杂,终端在同时播放多路多媒体数据包中的数据时,可以只播放画面不播放语音即静音播放,用户可以只预览播放的画面,并据此判断是否要打开该播放窗口的声音并自主控制音量大小。如果用户想听取某路多媒体数据包中的语音,则用户可以只打开该播放窗口的声音按钮来播放。
在步骤S104中,接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据。
示例地,如图2所示,用户选择机位1播放窗口下的音频选项,选择机位2播放窗口下的视频选项,则处理指令用于指示获取的直播用数据包括所述第一账号信息下的机位1的机位信息对应的多媒体数据包中的音频数据和机位2的机位信息对应的多媒体数据包中的视频数据。
在步骤S105中,根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据。
这里,云端在获得处理指令后,就会根据该处理指令指示的直播用数据,查找云端中存储的各路的多媒体数据包,进行数据处理获得该直播用数据。
在步骤S106中,将所述直播用数据发送给直播平台。
这里,云端获取到直播用数据后,就会将直播用数据发送给直播平台,由直播平台推送至观看直播的用户的直播客户端中供该用户观看本直播。
本实施例可以发挥云端强大的服务端音视频处理能力,对不同拍摄机位的多媒体数据进行处理,获取用户要求的直播用数据,云端成本低,且用户可以随时随地使用终端来控制云端进行数据处理获取直播用数据,方便快捷,且云端和拍摄设备、终端之间采用无线通信,操作人员手持终端即可操控直播,不需要操作人员离拍摄现场非常近,不受空间限制,且用户只需要根据终端中播放的各路多媒体数据,选择当前要直播的视频和音频,即用户只需进行选择操作,用户学习成本低,可快速掌握。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;则步骤S105,包括步骤A1-A3。
在步骤A1中,根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包。
在步骤A2中,将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据。
在步骤A3中,合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
示例地,用户在进行视频来自于摄像机拍远景,而音频来自于演播室主持人的场景的直播时,如图2所示,用户选择演播室的机位1对应的播放窗口下的音频选项,选择摄像机所在的机位2对应的播放窗口下的视频选项,则处理指令用于指示获取的直播用数据包括所述第一账号信息下的机位1的机位信息对应的多媒体数据包中的音频数据和机位2的机位信息对应的多媒体数据包中的视频数据。则,云端在获得处理指令后,就会根据该处理指令指示的直播用数据,查找云端中存储的各路的多媒体数据包,获取所述第一账号信息下的机位1的机位信息对应的第一多媒体数据包和所述第一账号信息下的机位2的机位信息对应的第二多媒体数据包;然后云端发挥其强大的服务端音视频处理能力,可以通过软件ffmpeg实现实时的音视频解码,并进行音视频分离处理,将第一多媒体数据包和第二多媒体数据包中的数据拆分成音频数据和视频数据,获得第一多媒体数据包中的音频数据和第二多媒体数据包中的视频数据,然后合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,并将和合成好的数据重新编码获得直播用数据,这样云端就可以获取直播用数据,该直播用数据是演播室主持人的音频数据和摄像机拍远景的视频数据的合成数据,包括演播室主持人的音频数据和摄像机拍远景的视频数据。
上述示例只是给出了用户选择出一路多媒体数据包中的音频数据和一路多媒体数据包中的视频数据,当然,用户还可以选择一路多媒体数据包中的音频数据和视频数据,以及另一路多媒体数据包中的音频数据等等,云端可以根据用户输入的处理指令进行音视频数据的分离与合成,获得直播用数据。
本实施例可以发挥云端强大的服务端音视频处理能力,对各路的多媒体数据进行实时的音视频分离,需要切换和合成的时候,自动进行音视频分离,获取用户所选择的当前要切换的音频数据和视频数据,进行合成,以完成各种直播需求。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则步骤S105包括步骤B1-B2。
在步骤B1中,根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包。
在步骤B2中,获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
示例地,用户在进行根据情况切换来自于不同摄像机拍摄不同内容的场景的直播时,用户可以选择某个摄像机机位对应的播放窗口下的“全部”选项,则处理指令用于指示获取的直播用数据包括所述第一账号信息下该摄像机的机位信息对应的多媒体数据包中的数据。则,云端在获得处理指令后,就会查找云端中存储的各路的多媒体数据包,获取所述第一账号信息下的机位1的机位信息对应的第一多媒体数据包;将该第三多媒体数据包中的多媒体数据作为所述直播用数据。
当然,云端还可以将第三多媒体数据包中的多媒体数据解码后按照某一格式重新编码,然后将重新编码后的第三多媒体数据包中的多媒体数据作为直播数据。
本实施例可以根据用户的选择,将直播内容切换为用户所选择的某一拍摄设备拍摄的一路多媒体数据,以完成直播需求。
由于各个拍摄设备上传的各路多媒体数据包可能对应有不同格式的数据,故在一个实施例中,所述步骤S101包括步骤C1-C2。
在步骤C1中,接收各拍摄设备发送的各路的原始多媒体数据包。
在步骤C2中,将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
这里,云端接收到各拍摄设备发送的各路的原始多媒体数据包后,可以将各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。这里的预设格式可以是预设的码率、分辨率、视频文件格式等。
本实施例可以将各路的原始多媒体数据包中的数据转换成预设格式的数据,方便云端后续对多媒体数据包中都是预设格式的数据进行音视频分离处理和合成处理。
在一个实施例中,所述方法还包括:接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息。所述步骤S103,包括:根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
这里,用户在使用终端登录到云端的客户端页面后,可以在客户端页面上进行开启直播的操作,此时终端就会获取到预览请求,并向云端发送预览请求,该预览请求中携带有第一账号信息,用于请求云端返回该第一账号信息对应的各路多媒体数据包。示例地,客户端页面上可以显示有“开始”按钮,用户准备好开始直播后,就会点击“开始”,此时终端就可以获取到预览请求,终端就会向云端发送预览请求,请求云端返回该第一账号信息对应的各路多媒体数据包。
本实施例可以根据用户的操作,通过终端向云端请求第一账号信息对应的各路多媒体数据包,在用户准备好后开始直播流程,与云端直接自动传输各路多媒体数据相比,可以减少不必要的数据传输,节约传输资源。
在一个实施例中,所述方法还包括:将所述直播用数据发送给所述终端。
这里,云端在获取到直播用数据后,在将该直播用数据发送给直播平台的同时,还可以将该直播用数据发送给终端,终端在获取到直播用数据后,可以在相应的页面播放该直播用数据,示例地,如图3所示,终端可以在与播放窗口201同在一个用户使用页面20的播放窗口203上播放该直播数据。这样用户就可以观看到当前正在直播的画面。
这里需要说明的是,可以是云端将直播用数据发送给终端,也可以是直播平台将直播用数据发送给终端,这样用户就可以看到自己正在直播的画面,如果由云端直接将直播用数据发送给终端,则用户可以提前看到直播画面,及时对直播画面进行切换。
本实施例可以由云端直接将直播用数据发送给终端进行直播,使用户可以提前看到直播画面,及时对直播画面进行切换。
终端侧
图4是根据一示例性实施例示出的一种多媒体数据的处理方法的流程图,如图4所示,多媒体数据的处理方法用于终端中,包括以下步骤S401-S406。
在步骤S401中,向云端发送第一账号信息。
用户在进行直播时,会使用终端打开云端的客户端页面,该客户端页面可以是网页也可以是云端客户端应用中的用户使用页面。用户进入该客户端页面如登录页面后可以输入本用户的登录信息进行登录,该登录信息中包括用户的第一账号信息和密码等信息,终端会将所述登录信息发送至云端,云端对该登录信息进行验证,在验证通过后,向终端返回验证通过信息,终端就会从登录页面切换至用户使用页面;这样,终端就将第一账号信息发送给云端。
在步骤S402中,接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息。
用户在进行直播时,为了提升直播内容的水平和质量,可以使用至少两个拍摄设备进行现场拍摄,用户在使用拍摄设备进行拍摄时,可以在拍摄设备的用户使用界面上输入用户的账号信息,这样拍摄设备在拍摄获得多媒体数据后,就会将这些多媒体数据打包成多媒体数据包,该多媒体数据包中携带有该账号信息和本拍摄设备的机位信息如设备ID等,这样,云端在获取终端对应的第一账号信息后,就可以查找获得该第一账号信息对应的各路多媒体数据包,并自动向对应终端发送该第一账号信息对应的各路多媒体数据包。
在步骤S403中,将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放。
示例地,假设第一账号信息对应有两路多媒体数据包:机位1的机位信息对应的多媒体数据包,机位2的机位信息对应的多媒体数据包;则该播放页面可以是图2所示的用户使用页面20,用户使用页面20上有两个播放窗口201,这两个播放窗口201分别用来播放机位1的机位信息对应的多媒体数据包中的数据和机位2的机位信息对应的多媒体数据包中的数据。
在步骤S404中,获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据。
示例地,如图2所示,每个播放窗口下显示有选项框202,用户预览各个播放窗口中显示的画面,根据当前需要进行直播的内容如某个机位信息对应的多媒体数据包中视频数据、音频数据或全部数据,在选项框中选择“视频”、“音频”或“全部”选项,用户在选择完毕后,点击“确定”按钮,这样终端就会获得用户输入的处理指令;终端获取用户输入的处理指令后,就会将该处理指令发送给云端。
在步骤S405中,向云端发送所述处理指令。
在步骤S406中,接收所述直播用数据。
云端接收所述终端发送的所述处理指令,根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据,然后将所述直播用数据发送给直播平台,直播平台将该直播用数据发送给终端。
本实施例可以发挥云端强大的服务端音视频处理能力,对不同拍摄机位的多媒体数据进行处理,获取用户要求的直播用数据,云端成本低,且用户可以随时随地使用终端来控制云端进行数据处理获取直播用数据,方便快捷,且云端和拍摄设备、终端之间采用无线通信,操作人员手持终端即可操控直播,不需要操作人员离拍摄现场非常近,不受空间限制,且用户只需要根据终端中播放的各路多媒体数据,选择当前要直播的视频和音频,即用户只需进行选择操作,用户学习成本低,可快速掌握。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
示例地,用户在进行视频来自于摄像机拍远景,而音频来自于演播室主持人的场景的直播时,如图2所示,用户选择演播室的机位1对应的播放窗口下的音频选项,选择摄像机所在的机位2对应的播放窗口下的视频选项,则处理指令用于指示获取的直播用数据包括所述第一账号信息下的机位1的机位信息对应的多媒体数据包中的音频数据和机位2的机位信息对应的多媒体数据包中的视频数据。则,云端在获得处理指令后,就会根据该处理指令指示的直播用数据,查找云端中存储的各路的多媒体数据包,获取所述第一账号信息下的机位1的机位信息对应的第一多媒体数据包和所述第一账号信息下的机位2的机位信息对应的第二多媒体数据包;然后云端发挥其强大的服务端音视频处理能力,可以通过软件ffmpeg实现实时的音视频解码,并进行音视频分离处理,将第一多媒体数据包和第二多媒体数据包中的数据拆分成音频数据和视频数据,获得第一多媒体数据包中的音频数据和第二多媒体数据包中的视频数据,然后合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,并将和合成好的数据重新编码获得直播用数据,这样云端就可以获取直播用数据,该直播用数据是演播室主持人的音频数据和摄像机拍远景的视频数据的合成数据,包括演播室主持人的音频数据和摄像机拍远景的视频数据。
本实施例可以发挥云端强大的服务端音视频处理能力,对各路的多媒体数据进行实时的音视频分离,需要切换和合成的时候,自动进行音视频分离,获取用户所选择的当前要切换的音频数据和视频数据,进行合成,以完成各种直播需求。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
示例地,用户在进行根据情况切换来自于不同摄像机拍摄不同内容的场景的直播时,用户可以选择某个摄像机机位对应的播放窗口下的“全部”选项,则处理指令用于指示获取的直播用数据包括所述第一账号信息下该摄像机的机位信息对应的多媒体数据包中的数据。则,云端在获得处理指令后,就会查找云端中存储的各路的多媒体数据包,获取所述第一账号信息下的机位1的机位信息对应的第一多媒体数据包;将该第三多媒体数据包中的多媒体数据作为所述直播用数据。
当然,云端还可以将第三多媒体数据包中的多媒体数据解码后按照某一格式重新编码,然后将重新编码后的第三多媒体数据包中的多媒体数据作为直播数据。
本实施例可以根据用户的选择,将直播内容切换为用户所选择的某一拍摄设备拍摄的一路多媒体数据,以完成直播需求。
在一个实施例中,所述方法还包括:获取预览请求,所述预览请求中携带有所述第一账号信息;向所述云端发送所述预览请求。
这里,用户在使用终端登录到云端的客户端页面后,可以在客户端页面上进行开启直播的操作,此时终端就会获取到预览请求,并向云端发送预览请求,该预览请求中携带有第一账号信息,用于请求云端返回该第一账号信息对应的各路多媒体数据包。示例地,客户端页面上可以显示有“开始”按钮,用户准备好开始直播后,就会点击“开始”,此时终端就可以获取到预览请求,终端就会向云端发送预览请求,请求云端返回该第一账号信息对应的各路多媒体数据包。
本实施例可以根据用户的操作,通过终端向云端请求第一账号信息对应的各路多媒体数据包,在用户准备好后开始直播流程,与云端直接自动传输各路多媒体数据相比,可以减少不必要的数据传输,节约传输资源。
在一个实施例中,所述接收所述直播用数据包括:接收所述云端发送的所述直播用数据。
这里,云端在获取到直播用数据后,在将该直播用数据发送给直播平台的同时,还可以将该直播用数据发送给终端,终端在获取到直播用数据后,可以在相应的页面播放该直播用数据,示例地,如图3所示,终端可以在与播放窗口201同在一个用户使用页面20的播放窗口203上播放该直播数据。这样用户就可以观看到当前正在直播的画面。
本实施例可以由云端直接将直播用数据发送给终端进行直播,使用户可以提前看到直播画面,及时对直播画面进行切换。
下面通过几个实施例详细介绍实现过程。
图5是根据一示例性实施例示出的一种多媒体数据的处理方法的流程图,如图5所示,所述方法包括以下步骤:
在步骤S501中,云端获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息。
在步骤S502中,终端向云端发送第一账号信息,云端接收终端发送的第一账号信息。
在步骤S503中,云端将所述第一账号信息对应的各路多媒体数据包发送给所述终端,终端接收所述云端返回的所述第一账号信息对应的各路多媒体数据包。
在步骤S504中,终端将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放。
在步骤S505中,终端获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据。
在步骤S506中,终端向云端发送所述处理指令,云端接收所述终端发送的所述处理指令。
在步骤S507中,云端根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据。
在步骤S508中,云端将所述直播用数据发送给直播平台。
图6是根据一示例性实施例示出的一种多媒体数据的处理方法的流程图,如图6所示,所述方法包括以下步骤:
在步骤S601中,云端接收各拍摄设备发送的各路的原始多媒体数据包。
在步骤S602中,云端将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包;其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息。
在步骤S603中,终端向云端发送第一账号信息,云端接收终端发送的第一账号信息。
在步骤S604中,终端获取预览请求,所述预览请求中携带有所述第一账号信息。
在步骤S605中,终端向所述云端发送所述预览请求,云端接收所述终端发送的预览请求。
在步骤S606中,云端根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
在步骤S607中,云端将所述第一账号信息对应的各路多媒体数据包发送给所述终端,终端接收所述云端返回的所述第一账号信息对应的各路多媒体数据包。
在步骤S608中,终端将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放。
在步骤S609中,终端获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
在步骤S610中,终端向云端发送所述处理指令,云端接收所述终端发送的所述处理指令。
在步骤S611中,云端根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包。
在步骤S612中,云端将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据。
在步骤S613中,云端合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
在步骤S614中,云端将所述直播用数据发送给直播平台。
在步骤S615中,云端将所述直播用数据发送给所述终端,终端接收所述云端发送的所述直播用数据。
图7是根据一示例性实施例示出的一种多媒体数据的处理方法的流程图,如图7所示,所述方法包括以下步骤:
在步骤S701中,云端接收各拍摄设备发送的各路的原始多媒体数据包。
在步骤S702中,云端将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包;其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息。
在步骤S703中,终端向云端发送第一账号信息,云端接收终端发送的第一账号信息。
在步骤S704中,终端获取预览请求,所述预览请求中携带有所述第一账号信息。
在步骤S705中,云端将所述第一账号信息对应的各路多媒体数据包发送给所述终端,终端接收所述云端返回的所述第一账号信息对应的各路多媒体数据包。
在步骤S706中,终端将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放。
在步骤S707中,终端获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
在步骤S708中,终端向云端发送所述处理指令,云端接收所述终端发送的所述处理指令。
在步骤S709中,云端根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包。
在步骤S710中,云端获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
在步骤S711中,云端将所述直播用数据发送给直播平台。
在步骤S712中,云端将所述直播用数据发送给所述终端,终端接收所述云端发送的所述直播用数据。
下述为本公开装置实施例,可以用于执行本公开方法实施例。
图8是根据一示例性实施例示出的一种多媒体数据的处理装置的框图,该装置应用于云端,可以通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。如图8所示,该多媒体数据的处理装置包括:第一获取模块801、第一接收模块802、第一发送模块803、第二接收模块804、第二获取模块805和第二发送模块806,其中:
第一获取模块801,用于获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
第一接收模块802,用于接收终端发送的第一账号信息;
第一发送模块803,用于将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
第二接收模块804,用于接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第二获取模块805,用于根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
第二发送模块806,用于将所述直播用数据发送给直播平台。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;如图9所示,所述第二获取模块805包括第一获取子模块8051、处理子模块8052和合并子模块8053,其中:第一获取子模块8051,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;处理子模块8052,用于将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;合并子模块8053,用于合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则如图10所示,第二获取模块805包括第二获取子模块8054和第三获取子模块8055,其中:第二获取子模块8054,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;第三获取子模块8055,用于获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
在一个实施例中,如图11所示,所述第一获取模块801包括第一接收子模块8011和转换子模块8012,其中:第一接收子模块8011,用于接收各拍摄设备发送的各路的原始多媒体数据包;转换子模块8012,用于将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
在一个实施例中,如图12所示,所述装置还包括第三接收模块807,所述第一发送模块803包括发送子模块8031,其中,第三接收模块807,用于接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;发送子模块8031,用于根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
在一个实施例中,如图13所示,所述装置还包括第三发送模块808,其中,第三发送模块808,用于将所述直播用数据发送给所述终端。
图14是根据一示例性实施例示出的一种多媒体数据的处理装置的框图,该装置应用于终端,可以通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。如图14所示,该多媒体数据的处理装置包括:第四发送模块141、第四接收模块142、播放模块143、第三获取模块144、第五发送模块145和第五接收模块146,其中:
第四发送模块141,用于向云端发送第一账号信息;
第四接收模块142,用于接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
播放模块143,用于将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
第三获取模块144,用于获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第五发送模块145,用于向云端发送所述处理指令;
第五接收模块146,用于接收所述直播用数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
在一个实施例中,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
在一个实施例中,如图15所示,所述装置还包括:第四获取模块147和第六发送模块148,其中:第四获取模块147,用于获取预览请求,所述预览请求中携带有所述第一账号信息;第六发送模块148,用于向所述云端发送所述预览请求,所述预览请求用于请求所述云端返回所述第一账号信息对应的各路多媒体数据包。
在一个实施例中,如图16所示,第五接收模块146包括第二接收子模块1461,其中,第二接收子模块1461,用于接收所述云端发送的所述直播用数据。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图17是根据一示例性实施例示出的一种用于多媒体数据的处理装置的框图。例如,装置1700可以被提供为一云端。装置1700包括处理组件1711,其进一步包括一个或多个处理器,以及由存储器1712所代表的存储器资源,用于存储可由处理组件1711的执行的指令,例如应用程序。存储器1712中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1711被配置为执行指令,以执行上述方法。
装置1700还可以包括一个电源组件1713被配置为执行装置1700的电源管理,一个有线或无线网络接口1714被配置为将装置1700连接到网络,和一个输入输出(I/O)接口1715。装置1700可以操作基于存储在存储器1712的操作系统,例如Windows ServerTM,MacOS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
一种多媒体数据的处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
所述处理器还可以被配置为:
所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;则根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
所述处理器还可以被配置为:
所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则根据所述处理指令和所述多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
所述处理器还可以被配置为:
获取各路的多媒体数据包,包括:
接收各拍摄设备发送的各路的原始多媒体数据包;
将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
所述处理器还可以被配置为:
所述方法还包括:
接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述将所述第一账号信息对应的各路多媒体数据包发送给所述终端,包括:
根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
所述处理器还可以被配置为:
所述方法还包括:
将所述直播用数据发送给所述终端。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由装置的处理器执行时,使得装置能够执行上述多媒体数据的处理的方法,所述方法包括:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
所述存储介质中的指令还可以包括:
所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;则根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
所述存储介质中的指令还可以包括:
所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则根据所述处理指令和所述多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
所述存储介质中的指令还可以包括:
获取各路的多媒体数据包,包括:
接收各拍摄设备发送的各路的原始多媒体数据包;
将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
所述存储介质中的指令还可以包括:
所述方法还包括:
接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述将所述第一账号信息对应的各路多媒体数据包发送给所述终端,包括:
根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
所述存储介质中的指令还可以包括:
所述方法还包括:
将所述直播用数据发送给所述终端。
图18是根据一示例性实施例示出的一种用于多媒体数据的处理方法的框图,该装置适用于终端设备。例如,装置1800可以是移动电话,游戏控制台,电脑、平板设备,个人数字助理等。
装置1800可以包括以下一个或多个组件:处理组件1801,存储器1802,电源组件1803,多媒体组件1804,音频组件1805,输入/输出(I/O)接口1806,传感器组件1807,以及通信组件1808。
处理组件1801通常控制装置1800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件1801可以包括一个或多个处理器1820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1801可以包括一个或多个模块,便于处理组件1801和其他组件之间的交互。例如,处理组件1801可以包括多媒体模块,以方便多媒体组件1804和处理组件1801之间的交互。
存储器1802被配置为存储各种类型的数据以支持在装置1800的操作。这些数据的示例包括用于在装置1800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器1802可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件1803为装置1800的各种组件提供电力。电源组件1803可以包括电源管理系统,一个或多个电源,及其他与为装置1800生成、管理和分配电力相关联的组件。
多媒体组件1804包括在所述装置1800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件1804包括一个前置摄像头和/或后置摄像头。当装置1800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1805被配置为输出和/或输入音频信号。例如,音频组件1805包括一个麦克风(MIC),当装置1800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1802或经由通信组件1808发送。在一些实施例中,音频组件1805还包括一个扬声器,用于输出音频信号。
I/O接口1806为处理组件1801和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1807包括一个或多个传感器,用于为装置1800提供各个方面的状态评估。例如,传感器组件1807可以检测到装置1800的打开/关闭状态,组件的相对定位,例如所述组件为装置1800的显示器和小键盘,传感器组件1807还可以检测装置1800或装置1800一个组件的位置改变,用户与装置1800接触的存在或不存在,装置1800方位或加速/减速和装置1800的温度变化。传感器组件1807可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1807还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1807还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件1808被配置为便于装置1800和其他设备之间有线或无线方式的通信。装置1800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件1808经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1808还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置1800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1802,上述指令可由装置1800的处理器1820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种多媒体数据的处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
所述处理器还可以被配置为:
所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
所述处理器还可以被配置为:
所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
所述处理器还可以被配置为:
所述方法还包括:
获取预览请求,所述预览请求中携带有所述第一账号信息;
向所述云端发送所述预览请求。
所述处理器还可以被配置为:
所述接收所述直播用数据包括:
接收所述云端发送的所述直播用数据。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由装置的处理器执行时,使得该装置能够执行上述多媒体数据的处理方法,所述方法包括:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
所述存储介质中的指令还可以包括:
所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
所述存储介质中的指令还可以包括:
所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
所述存储介质中的指令还可以包括:
所述方法还包括:
获取预览请求,所述预览请求中携带有所述第一账号信息;
向所述云端发送所述预览请求。
所述存储介质中的指令还可以包括:
所述接收所述直播用数据包括:
接收所述云端发送的所述直播用数据。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (24)

1.一种多媒体数据的处理方法,其特征在于,包括:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
2.根据权利要求1所述的方法,其特征在于,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;则根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
3.根据权利要求1所述的方法,其特征在于,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则根据所述处理指令和所述多媒体数据包,获取所述直播用数据,包括:
根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
4.根据权利要求1所述的方法,其特征在于,获取各路的多媒体数据包,包括:
接收各拍摄设备发送的各路的原始多媒体数据包;
将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述将所述第一账号信息对应的各路多媒体数据包发送给所述终端,包括:
根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述直播用数据发送给所述终端。
7.一种多媒体数据的处理方法,其特征在于,包括:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
8.根据权利要求7所述的方法,其特征在于,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
9.根据权利要求7所述的方法,其特征在于,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
10.根据权利要求7所述的方法,其特征在于,所述方法还包括:
获取预览请求,所述预览请求中携带有所述第一账号信息;
向所述云端发送所述预览请求。
11.根据权利要求7所述的方法,其特征在于,所述接收所述直播用数据包括:
接收所述云端发送的所述直播用数据。
12.一种多媒体数据的处理装置,其特征在于,包括:
第一获取模块,用于获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
第一接收模块,用于接收终端发送的第一账号信息;
第一发送模块,用于将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
第二接收模块,用于接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第二获取模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
第二发送模块,用于将所述直播用数据发送给直播平台。
13.根据权利要求12所述的装置,其特征在于,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据;所述第二获取模块包括:
第一获取子模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的第一机位信息对应的第一多媒体数据包和所述第一账号信息下的第二机位信息对应的第二多媒体数据包;
处理子模块,用于将所述第一多媒体数据包和所述第二多媒体数据包中的数据进行音视频分离处理,获得所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据;
合并子模块,用于合并所述第一多媒体数据包中的音频数据和所述第二多媒体数据包中的视频数据,获取所述直播用数据。
14.根据权利要求12所述的装置,其特征在于,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据;则第二获取模块包括:
第二获取子模块,用于根据所述处理指令和所述各路的多媒体数据包,获取所述第一账号信息下的所述第三机位信息对应的第三多媒体数据包;
第三获取子模块,用于获取所述第三多媒体数据包中的多媒体数据作为所述直播用数据。
15.根据权利要求12所述的装置,其特征在于,所述第一获取模块包括:
第一接收子模块,用于接收各拍摄设备发送的各路的原始多媒体数据包;
转换子模块,用于将所述各路的原始多媒体数据包中的数据转换成预设格式,获取多媒体数据包。
16.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第三接收模块,用于接收所述终端发送的预览请求,所述预览请求中携带有第一账号信息;
所述第一发送模块包括:
发送子模块,用于根据所述预览请求,将所述第一账号信息对应的各路多媒体数据包发送给所述终端。
17.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第三发送模块,用于将所述直播用数据发送给所述终端。
18.一种多媒体数据的处理装置,其特征在于,包括:
第四发送模块,用于向云端发送第一账号信息;
第四接收模块,用于接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
播放模块,用于将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
第三获取模块,用于获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
第五发送模块,用于向云端发送所述处理指令;
第五接收模块,用于接收所述直播用数据。
19.根据权利要求18所述的装置,其特征在于,所述直播用数据包括所述第一账号信息下的第一机位信息对应的多媒体数据包中的音频数据和第二机位信息对应的多媒体数据包中的视频数据。
20.根据权利要求18所述的装置,其特征在于,所述直播用数据包括所述第一账号信息下的第三机位信息对应的多媒体数据。
21.根据权利要求18所述的装置,其特征在于,所述装置还包括:
第四获取模块,用于获取预览请求,所述预览请求中携带有所述第一账号信息;
第六发送模块,用于向所述云端发送所述预览请求,所述预览请求用于请求所述云端返回所述第一账号信息对应的各路多媒体数据包。
22.根据权利要求18所述的装置,其特征在于,第五接收模块包括:
第二接收子模块,用于接收所述云端发送的所述直播用数据。
23.一种多媒体数据的处理装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取各路的多媒体数据包,其中,每路多媒体数据包中携带有所述多媒体数据包对应的账号信息和机位信息;
接收终端发送的第一账号信息;
将所述第一账号信息对应的各路多媒体数据包发送给所述终端,所述终端用于播放所述第一账号信息对应的各路多媒体数据包中的数据供用户预览,并返回用户根据播放的数据输入的处理指令;
接收所述终端发送的所述处理指令,所述处理指令用于指示获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
根据所述处理指令和所述各路的多媒体数据包,获取所述直播用数据;
将所述直播用数据发送给直播平台。
24.一种多媒体数据的处理装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
向云端发送第一账号信息;
接收所述云端返回的所述第一账号信息对应的各路多媒体数据包,其中,所述多媒体数据包中携带有所述多媒体数据包对应的第一账号信息和机位信息;
将所述第一账号信息对应的各路多媒体数据包中的数据分别在一播放页面的各个播放窗口进行播放;
获取用户根据在所述各个播放窗口预览到的画面输入的处理指令,所述处理指令用于指示云端获取直播用数据,所述直播用数据包括所述第一账号信息下的至少一个机位信息对应的多媒体数据包中的视频数据和/或音频数据;
向云端发送所述处理指令;
接收所述直播用数据。
CN201610704545.XA 2016-08-22 2016-08-22 多媒体数据的处理方法及装置 Pending CN106254913A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610704545.XA CN106254913A (zh) 2016-08-22 2016-08-22 多媒体数据的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610704545.XA CN106254913A (zh) 2016-08-22 2016-08-22 多媒体数据的处理方法及装置

Publications (1)

Publication Number Publication Date
CN106254913A true CN106254913A (zh) 2016-12-21

Family

ID=57594627

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610704545.XA Pending CN106254913A (zh) 2016-08-22 2016-08-22 多媒体数据的处理方法及装置

Country Status (1)

Country Link
CN (1) CN106254913A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106791902A (zh) * 2016-12-23 2017-05-31 北京多视角文化传播有限公司 对移动互联网设备的音视频切换方法及其切换台
CN107104883A (zh) * 2017-04-21 2017-08-29 腾讯科技(深圳)有限公司 一种社交关系链中的信息分享方法、客户端及服务器
CN107948756A (zh) * 2017-11-22 2018-04-20 广州华多网络科技有限公司 视频合成控制方法、装置及相应的终端
CN108055577A (zh) * 2017-12-18 2018-05-18 北京奇艺世纪科技有限公司 一种直播交互方法、系统、装置及电子设备
CN108401174A (zh) * 2018-02-24 2018-08-14 广州久邦世纪科技有限公司 一种带有虚拟直播房间直播系统及其实现方法
CN108495141A (zh) * 2018-03-05 2018-09-04 网宿科技股份有限公司 一种音视频的合成方法及系统
CN109327729A (zh) * 2018-10-08 2019-02-12 视联动力信息技术股份有限公司 一种多媒体数据的无线录播方法和系统
CN110033780A (zh) * 2019-04-07 2019-07-19 西安电子科技大学 基于FFmpeg和EMIF驱动的音视频数据传输方法
CN111030921A (zh) * 2019-12-17 2020-04-17 杭州涂鸦信息技术有限公司 一种基于网页即时通信的多窗口通信方法及系统
CN113784210A (zh) * 2021-09-03 2021-12-10 上海哔哩哔哩科技有限公司 预监视频播放方法及云导播台服务系统
CN115250363A (zh) * 2022-09-22 2022-10-28 广州市千钧网络科技有限公司 一种多视角直播系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101909160A (zh) * 2009-12-17 2010-12-08 新奥特(北京)视频技术有限公司 一种网络视频直播中的播控切换方法及装置
CN101917568A (zh) * 2009-12-17 2010-12-15 新奥特(北京)视频技术有限公司 一种基于流媒体技术的网络视频播放器及播放系统
CN103188422A (zh) * 2011-12-28 2013-07-03 北京同步科技有限公司 新闻演播控制系统及其控制方法
CN105120331A (zh) * 2015-08-21 2015-12-02 小米科技有限责任公司 处理直播音视频的方法及装置
CN205158678U (zh) * 2015-10-23 2016-04-13 宿迁安联智能科技有限公司 一种数字虚拟现实教学平台
CN105872570A (zh) * 2015-12-11 2016-08-17 乐视网信息技术(北京)股份有限公司 一种多机位视频同步播放的实现方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101909160A (zh) * 2009-12-17 2010-12-08 新奥特(北京)视频技术有限公司 一种网络视频直播中的播控切换方法及装置
CN101917568A (zh) * 2009-12-17 2010-12-15 新奥特(北京)视频技术有限公司 一种基于流媒体技术的网络视频播放器及播放系统
CN103188422A (zh) * 2011-12-28 2013-07-03 北京同步科技有限公司 新闻演播控制系统及其控制方法
CN105120331A (zh) * 2015-08-21 2015-12-02 小米科技有限责任公司 处理直播音视频的方法及装置
CN205158678U (zh) * 2015-10-23 2016-04-13 宿迁安联智能科技有限公司 一种数字虚拟现实教学平台
CN105872570A (zh) * 2015-12-11 2016-08-17 乐视网信息技术(北京)股份有限公司 一种多机位视频同步播放的实现方法及装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106791902A (zh) * 2016-12-23 2017-05-31 北京多视角文化传播有限公司 对移动互联网设备的音视频切换方法及其切换台
CN107104883A (zh) * 2017-04-21 2017-08-29 腾讯科技(深圳)有限公司 一种社交关系链中的信息分享方法、客户端及服务器
CN107948756B (zh) * 2017-11-22 2020-07-24 广州华多网络科技有限公司 视频合成控制方法、装置及相应的终端
CN107948756A (zh) * 2017-11-22 2018-04-20 广州华多网络科技有限公司 视频合成控制方法、装置及相应的终端
CN108055577A (zh) * 2017-12-18 2018-05-18 北京奇艺世纪科技有限公司 一种直播交互方法、系统、装置及电子设备
CN108401174A (zh) * 2018-02-24 2018-08-14 广州久邦世纪科技有限公司 一种带有虚拟直播房间直播系统及其实现方法
CN108495141A (zh) * 2018-03-05 2018-09-04 网宿科技股份有限公司 一种音视频的合成方法及系统
CN109327729A (zh) * 2018-10-08 2019-02-12 视联动力信息技术股份有限公司 一种多媒体数据的无线录播方法和系统
CN110033780A (zh) * 2019-04-07 2019-07-19 西安电子科技大学 基于FFmpeg和EMIF驱动的音视频数据传输方法
CN111030921A (zh) * 2019-12-17 2020-04-17 杭州涂鸦信息技术有限公司 一种基于网页即时通信的多窗口通信方法及系统
CN113784210A (zh) * 2021-09-03 2021-12-10 上海哔哩哔哩科技有限公司 预监视频播放方法及云导播台服务系统
CN113784210B (zh) * 2021-09-03 2023-09-22 上海哔哩哔哩科技有限公司 预监视频播放方法及云导播台服务系统
CN115250363A (zh) * 2022-09-22 2022-10-28 广州市千钧网络科技有限公司 一种多视角直播系统

Similar Documents

Publication Publication Date Title
CN106254913A (zh) 多媒体数据的处理方法及装置
CN105100829B (zh) 视频内容截取方法及装置
EP3236660A1 (en) Video processing method and device
CN106331761A (zh) 直播列表显示方法及装置
CN106210757A (zh) 直播方法、直播装置及直播系统
CN104219785A (zh) 实时视频提供方法、装置及服务器、终端设备
CN106559696A (zh) 信息发送方法及装置
CN106604089A (zh) 智能电视的截屏分享方法及装置
CN106231378A (zh) 直播间的显示方法、装置及系统
CN109151565B (zh) 播放语音的方法、装置、电子设备及存储介质
CN103927165A (zh) 一种壁纸图片的处理方法及装置
KR101684203B1 (ko) 스트림 미디어 데이터를 방송하기 위한 방법 및 장치
CN104717554A (zh) 智能电视的控制方法及装置、电子设备
CN104079964B (zh) 传输视频信息的方法及装置
CN105159523A (zh) 目标功能的开启方法、装置及系统
CN105120301A (zh) 视频处理方法和装置、智能设备
CN104933071A (zh) 一种信息检索方法及相应装置
CN112115282A (zh) 基于搜索的问答方法、装置、设备及存储介质
CN106658215A (zh) 推送直播文件的方法及装置
CN106101773A (zh) 内容同屏方法、装置和显示设备
CN107948660A (zh) 视频编码适配的方法及装置
CN104915402A (zh) 电子书封面设置方法及装置
CN106101600A (zh) 视频通话的连接方法及装置
CN111742557A (zh) 显示装置和包括该显示装置的系统
CN105357449A (zh) 拍摄方法、装置及图像处理方法、装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161221

RJ01 Rejection of invention patent application after publication