CN110636321A - 数据处理方法、装置、系统、移动终端及存储介质 - Google Patents

数据处理方法、装置、系统、移动终端及存储介质 Download PDF

Info

Publication number
CN110636321A
CN110636321A CN201910944055.0A CN201910944055A CN110636321A CN 110636321 A CN110636321 A CN 110636321A CN 201910944055 A CN201910944055 A CN 201910944055A CN 110636321 A CN110636321 A CN 110636321A
Authority
CN
China
Prior art keywords
data
live
live data
timestamp information
live broadcast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910944055.0A
Other languages
English (en)
Inventor
谢纨楠
范威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN201910944055.0A priority Critical patent/CN110636321A/zh
Publication of CN110636321A publication Critical patent/CN110636321A/zh
Priority to US17/039,485 priority patent/US11128894B2/en
Priority to US17/396,042 priority patent/US20210368214A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H04N21/4356—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen by altering the spatial resolution, e.g. to reformat additional data on a handheld device, attached to the STB
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开关于一种数据处理方法、装置、系统、移动终端及存储介质，当该方法应用于第一移动终端时包括：确定在直播中待播放的目标文件；采集第一直播数据；在直播页面中以预设的第一分辨率显示第一直播数据，以及以预设的第二分辨率显示目标文件；根据显示的目标文件，生成第二直播数据；分别为第一直播数据以及第二直播数据添加表示同一时刻的时间戳信息；分别将携带时间戳信息的第一直播数据以及第二直播数据发送至服务器中。本实施例可以使得直播页面中可以同时显示目标文件以及主播画面，且主播端可以同时推送多个内容，丰富了直播的场景和直播内容。

Description

数据处理方法、装置、系统、移动终端及存储介质
技术领域
本公开涉及数据处理技术领域，尤其涉及数据处理方法、装置、系统、移动终端及存储介质。
背景技术
随着流媒体技术的不断成熟以及网络环境的不断提升，直播的应用越来越广泛。相对于普通视频点播，直播拥有更强的互动性。比较常见的直播形式是主播在自己直播间面向观众直播。
在相关技术中，在视频直播过程中，直播间的主播终端将采集的直播视频实时上传至直播服务器，直播间的观众终端从直播服务器获取直播视频并在观众终端的显示界面上播放该直播视频。由此可见，直播的内容依赖于摄像头实时采集的内容，直播内容较为单一。
发明内容
本公开提供数据处理方法、装置、系统、移动终端及存储介质，以至少解决相关技术中直播的内容依赖于摄像头实时采集的内容，直播内容较为单一的问题。本公开的技术方案如下：
根据本公开实施例的第一方面，提供一种数据处理方法，所述方法应用于第一移动终端，所述数据处理方法包括：
确定在直播中待播放的目标文件；
采集第一直播数据；
在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
根据显示的所述目标文件，生成第二直播数据；
分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中。
根据本公开实施例的第二方面，提供一种数据处理方法，所述方法应用于第二移动终端中，所述数据处理方法包括：
从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；
根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
根据本公开实施例的第三方面，提供一种数据处理装置，所述装置应用于第一移动终端，所述数据处理装置包括：
目标文件确定模块，被配置为确定在直播中待播放的目标文件；
第一直播数据采集模块，被配置为采集第一直播数据；
显示模块，被配置为在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
第二直播数据生成模块，被配置为根据显示的所述目标文件，生成第二直播数据；
时间戳信息添加模块，被配置为分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
直播数据发送模块，被配置为分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中。
根据本公开实施例的第四方面，提供一种数据处理装置，所述装置应用于第二移动终端中，所述数据处理装置包括：
直播数据请求模块，被配置为从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；
对齐模块，被配置为根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐；
第一播放模块，被配置为播放对齐后的所述第一直播数据以及所述第二直播数据。
根据本公开实施例的第五方面，提供一种数据处理系统，所述数据处理系统包括第一客户端、服务器以及第二客户端；
所述第一客户端被配置为：
确定在直播中待播放的目标文件；
采集第一直播数据；
在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
根据显示的所述目标文件，生成第二直播数据；
分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中；
所述服务器被配置为分别存储所述第一直播数据以及所述第二直播数据，并获得所述第一直播数据以及所述第二直播数据的存储地址，根据所述存储地址以及本服务器的IP地址生成下载链接，并将所述下载链接发送至所述第二客户端；
所述第二客户端被配置为根据所述下载链接，从所述服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
根据本公开实施例的第六方面，提供一种移动终端，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述指令，以实现上述的方法。
根据本公开实施例的第七方面，提供一种存储介质，当所述存储介质中的指令由所述移动终端的处理器执行时，使得所述移动终端能够执行上述的方法。
根据本公开实施例的第八方面，提供一种计算机程序产品，包括可执行程序代码，其中，所述程序代码在通过上述装置执行时实施上述的方法。
本公开的实施例提供的技术方案至少带来以下有益效果：
在本实施例中，当确定在直播中播放的目标文件以后，可以结合移动终端采集的直播数据，使得直播页面中可以同时显示目标文件以及主播画面，且主播端可以同时推送多个内容，丰富了直播的场景和直播内容。
进一步地，由于本实施例中由主播端获得第一直播数据以及第二直播数据以后，可以分别为第一直播数据以及第二直播数据添加用于对齐两路直播数据的时间戳信息，使得观众侧接收到的第一直播数据以及第二直播数据以后能够根据该时间戳信息进行两路直播流的对齐，便于观众用户在播放第一直播数据以及第二直播数据的过程中可以调整第一直播数据以及第二直播数据的播放位置以及大小，提升观众端对于播放画面的能动性。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理，并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种数据处理方法实施例的流程图。
图2是根据一示例性实施例示出的包含更多选项的直播页面示意图。
图3是根据一示例性实施例示出的包含文件共享接口的直播页面示意图。
图4是根据一示例性实施例示出的包含相册选择列表的直播页面示意图。
图5是根据一示例性实施例示出的包含照片列表的直播页面示意图。
图6是根据一示例性实施例示出的同时显示目标文件以及第一直播数据的直播页面示意图。
图7是根据一示例性实施例示出的另一种数据处理方法实施例的流程图。
图8是根据一示例性实施例示出的一种数据处理装置框图。
图9是根据一示例性实施例示出的另一种数据处理装置框图。
图10是根据一示例性实施例示出的一种数据处理系统框图。
图11是根据一示例性实施例示出的一种用于执行上述方法实施例的装置的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案，下面将结合附图，对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是，本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种数据处理方法实施例的流程图，本实施例可以应用于第一移动终端中，具体可以应用于安装在第一移动终端的主播客户端中，可以包括以下步骤。
在步骤S11中，确定在直播中待播放的目标文件。
在一种实施例中，可以在主播客户端的直播页面中显示文件共享接口，该文件共享接口用于在主播用户直播过程中提供给主播用户选择本终端的其他文件进行直播共享的入口。
在本实施例的一种可能的实施方式中，步骤S11可以包括步骤S111-步骤S113。
步骤S111，显示包含文件共享接口的直播页面。
在该步骤中，在主播用户通过移动终端进行直播时，直播页面中可以包括文件共享接口。例如，如图2-图3的直播页面示意图所示，当主播用户触发图2中的直播页面的A部分的“更多”功能选项时，进入如图3的所示的功能选项页面，该功能选项页面中包括的B部分“文件共享”功能即为文件共享接口。
步骤S112，当检测到所述文件共享接口被触发时，获取终端的文件列表，并展示所述文件列表。
在该步骤中，当主播用户触发直播页面中的文件共享接口以后，移动终端可以调用文件接口获取本终端中的所有文件组成文件列表，并在直播页面中展示该文件列表。
例如，当主播用户点击图3中的文件共享接口时，则可以弹出本终端的所有文件类型，如“相册”、“音频”、“文档”、“安装包”等文件类型。假设主播用户选择“相册”文件，则可以进入如图4所示的相册选择列表，在相册选择列表中可以包括“近期照片”及“所有照片”选项，主播用户可以从“近期照片”中选择需要共享的图像或视频。如果“近期照片”中没有主播用户想要的图像或视频，则用户可以点击“所有照片”选项，进入如图5所示的所有照片列表，用户可以用所有照片列表中选择想要共享的图像或视频。
步骤S113，获取从所述文件列表中选定的目标文件。
在该步骤中，当检测到用户从文件列表中选定的文件以后，可以将该文件作为目标文件。
作为一种示例，目标文件可以包括多媒体文件或者非多媒体文件等。其中，多媒体文件可以包括图像数据、音频数据或视频数据等。非多媒体文件可以包括除终端中除多媒体文件以外的其他文件，如Word、PPT、Excel等文件，使得直播场景可以拓展到更多领域，如教育、培训或演讲等场景。
在步骤S12中，采集第一直播数据。
作为一种示例，第一直播数据可以包括移动终端的摄像头采集的第一图像数据和/或移动终端的麦克风mic采集的第一音频数据。
在步骤S13中，在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件。
在一种实施方式中，可以调用终端的系统提供的UI(User Interface，用户界面)API(Application Programming Interface，应用程序编程接口)中的视图View控件来对第一直播数据以及目标文件在主播客户端中进行显示。在一个例子中，可以在第一View控件中以第一分辨率显示第一直播数据；在第二View控件中以第二分辨率显示目标文件。当然，第一View控件及第二View控件中显示的内容可以根据用户的切换操作互相切换。
在一种实施方式中，第一分辨率以及第二分辨率可以为直播服务器向主播客户端下发的，而在直播服务器中存储的第一分辨率以及第二分辨率可以是开发人员或运维人员预先配置好的。
作为一种示例，第一分辨率可以为当前直播页面中的预设的小窗口的分辨率；第二分辨率可以为当前直播所需的全屏分辨率。
例如，如图6的直播页面示意图所示，当主播用户选择目标文件以后，可以调整主播端的采集分辨率至小窗口大小，即当前采集的直播画面(即第一直播数据)可以缩小到右下角的小窗口中显示。而目标文件的画面可以充满屏幕显示，比如，假设目标文件为图片，则可以通过libyuv(libyuv是Google开源的实现各种YUV与RGB之间相互转换、旋转、缩放的库)等缩放算法将图片等比例缩放至直播所需要的第二分辨率；又如，如果目标文件为视频，则可以通过OpenGL(Open Graphics Library，开放图形库或者开放式图形库)渲染，在渲染的管道里可以通过GPU(Graphics Processing Unit，图形处理器)将视频中的视频帧缩放至直播所需要的第二分辨率。
在一种例子中，主播用户还可以拖动小窗口到合适的位置或者对小窗口的尺寸进行拉伸。
在步骤S14中，根据显示的所述目标文件，生成第二直播数据。
作为一种示例，第二直播数据可以包括第二图像数据和/或第二音频数据。
在一种例子中，若目标文件为图像数据，则可以将该图像数据作为第二图像数据。具体的，可以将对该图像数据解码后得到的YUV(“Y”表示明亮度(Luminance、Luma)，“U”和“V”则是色度、饱和度(Chrominance、Chroma))数据作为第二图像数据，由于目标文件是图像数据，因此没有音频数据，即将该第二图像数据作为第二直播数据。
在另一种例子中，若目标文件为音频数据，则可以将该音频数据作为第二音频数据。具体的，可以将对该音频数据解码后得到的PCM(Pulse Code Modulation，脉冲编码调制)数据作为第二音频数据，由于目标文件是音频数据，因此没有图像数据，即将该第二音频数据作为第二直播数据。
在另一种例子中，若所述目标文件为视频数据，则可以对该视频数据进行解码后得到对应的第二图像数据以及第二音频数据，作为第二直播数据。具体的，可以对视频数据进行解码，将解码得到的YUV数据作为第二图像数据，以及将解码得到的PCM数据作为第二音频数据。
在另一种例子中，若所述目标文件为非多媒体文件，则可以对显示的非多媒体文件进行截图，得到第二图像数据，由于目标文件是非多媒体数据，因此没有音频数据，即将该截图得到的第二图像数据作为第二直播数据。在实现时，针对非多媒体文件，在显示时，可以调用终端的系统提供文件预览(preview)的API显示在一个View上，然后可以通过Graphics Contexts(图形上下文)把该View的内容变成bitmap(位图)图像，从而得到第二图像数据。
在步骤S15中，分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐。
在本实施例中，主播客户端可以将第一直播数据以及第二直播数据分两路直播流推出，以减少主播端的处理流程。
为了确保第一直播数据与第二直播数据在观众端进行播放时的同步，本实施例可以设定添加时间戳信息的时间间隔，当到达预设的时间间隔对应的时间时，则分别为当前时间对应的第一直播数据以及第二直播数据添加表示当前时间的时间戳信息。
在实现时，可以采用但不限于如下方式在直播数据中插入时间戳信息：AAC(Advanced Audio Coding，高级音频编码)的Fill Element(填充元素)扩展；FLV(FlashVideo，流媒体格式)Metadata(文件元信息)；或者H264的私有NALU(NAL unit，定义了可用于基于分组和基于比特流系统的基本格式)等。
作为一种示例，该时间戳信息可以为一种业务时间戳，本实施例对时间戳信息的具体形式不作限定，只要同一时刻第一直播数据与第二直播数据中的时间戳信息表示一致即可。例如，时间戳信息可以表示为当前时刻的时间信息(如20190709 10：00)的64bit字符串，或者，时间戳信息还可以表示为当前时刻的毫秒描述的64bit字符串。
在步骤S16中，分别将添加了时间戳信息后的所述第一直播数据以及所述第二直播数据发送至服务器。
当分别为第一直播数据以及第二直播数据添加时间戳信息以后，则可以将该第一直播数据以及该第二直播数据分别发送至服务器中。在实现时，可以分别将第一直播数据以及第二直播数据通过直播服务器发送至边缘服务器中进行保存，并选取保存该第一直播数据的其中一台边缘服务器的IP地址生成第一直播数据的下载地址发送至第二用户对应的第二移动终端中，以及，选取保存该第二直播数据的其中一台边缘服务器的IP地址生成第二直播数据的下载地址发送至第二用户对应的第二移动终端中，其中，该第二用户可以为观众用户。
第二用户对应的第二移动终端接收到第一直播数据以及第二直播数据的下载地址以后，可以分别从对应的边缘服务器中请求下载第一直播数据以及第二直播数据，并在本地对该第一直播数据以及第二直播数据进行对齐后播放。
在实际中，为了缩小第二用户对应的第二移动终端下载第一直播数据以及第二直播数据之间的时间差，则可以将第一直播数据以及第二直播数据存储在同一台边缘服务器中，并将该同一台边缘服务器的IP地址返回第二用户，从而使得第二移动终端可以从同一台边缘服务器中下载第一直播数据以及第二直播数据，避免不同边缘服务器之间的网络带宽差异带来的下载时延。
在一种实施方式中，直播过程中的帧率可以采用如下方式确定：若目标文件为非视频文件，则按照预设的帧率发送第一直播数据以及第二直播数据。若目标文件为视频文件，则按照解码出的视频文件的帧率发送第一直播数据以及第二直播数据。
例如，若目标文件为图片，则可以按照预设帧率定期发送第一直播数据以及第二直播数据，其中，如果主播用户选取一张图片，则每次发送的第二图像数据为同一张图片，如果主播用户选取多张图片，则每次发送的第二直播数据为轮流选取的该多张图片。如果目标文件为视频文件，则可以按照该视频文件解码出的帧率发送该第一直播数据及第二直播数据。
在本实施例中，主播用户在移动端的直播过程中可以通过触发文件共享接口来播放选取的目标文件，使得直播页面中可以同时显示目标文件以及主播画面，且主播端可以同时推送多个内容，丰富了直播的场景和直播内容。
进一步地，由于本实施例中由主播端获得第一直播数据以及第二直播数据以后，可以分别为第一直播数据以及第二直播数据添加用于对齐两路直播数据的时间戳信息，使得观众侧接收到的第一直播数据以及第二直播数据以后能够根据该时间戳信息进行两路直播流的对齐，便于观众用户在播放第一直播数据以及第二直播数据的过程中可以调整第一直播数据以及第二直播数据的播放位置以及大小，提升观众端对于播放画面的能动性。
图7是根据一示例性实施例示出的一种数据处理方法实施例的流程图，本实施例可以应用于第二移动终端中，具体可以应用于安装在第二移动终端的观众客户端中，可以包括以下步骤。
在步骤S21中，从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息。
在该步骤中，服务器可以为边缘服务器，当直播间中推出至少两路直播数据时，该两路直播数据可以通过直播服务器分发至相同或不同的边缘服务器进行保存，直播服务器还可以向观众客户端返回由边缘服务器的IP地址以及直播数据的存储地址组成的下载地址。
观众客户端获得下载地址以后，可以根据该下载地址从对应的边缘服务器中请求下载对应的直播数据。
在实际中，为了避免不同的边缘服务器的带宽差异造成的至少两路直播数据的下载时间差大的情况，该至少两路直播数据可以存储在同一边缘服务器中，即观众客户端获得的至少两路直播数据对应的下载地址为同一下载地址。
示例性地，该至少两路直播数据至少可以包括第一直播数据以及第二直播数据，其中，该第一直播数据可以为主播客户端的摄像头采集的主播画面的数据，该第二直播数据可以为主播用户选择播放的目标文件的内容。
作为一种示例，该时间戳信息可以为一种业务时间戳，本实施例对时间戳信息的具体形式不作限定，只要同一时刻不同的直播数据中的时间戳信息表示一致即可。例如，时间戳信息可以表示为当前时刻的时间信息(如20190709 10：00)的64bit字符串，或者，时间戳信息还可以表示为当前时刻的毫秒描述的64bit字符串。
在步骤S22中，根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
在该步骤中，在下载第一直播数据与第二直播数据的过程中，可以根据两者的时间戳信息对第一直播数据以及第二直播数据对齐，在一种实施方式中，上述根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐的步骤可以包括步骤S221-S225：
步骤S221，计算当前下载的第一直播数据的时间戳信息与第二直播数据的时间戳信息的时间差。
在一种实施方式中，可以设定一定的时间间隔来计算两路下载的直播数据的时间戳信息的差值，当到达时间间隔对应的时刻时，可以计算当前下载的第一直播数据的时间戳信息与当前下载的第二直播数据的时间戳信息的时间差。
步骤S222，若所述时间差小于或等于预设阈值，则判定所述第一直播数据以及所述第二直播数据已对齐。
当得到当前下载的第一直播数据的时间戳信息与当前下载的第二直播数据的时间戳信息的时间差以后，如果该时间差小于或等于预设阈值，表示上述两路直播数据下载的进度差不多，则可以判定上述两路直播数据已对齐。
步骤S223，若所述时间差大于预设阈值，则判断时间戳信息最大的直播数据为第一直播数据或第二直播数据。
步骤S224，若当前下载的第一直播数据的时间戳信息大于当前下载的第二直播数据的时间戳信息，则将当前下载的第一直播数据的时间戳信息作为第一待对齐时间戳信息，并等待所述第二直播数据继续下载，直到实时下载的所述第二直播数据的时间戳信息与所述第一待对齐时间戳信息的时间差小于或等于预设阈值。
步骤S225，若当前下载的第二直播数据的时间戳信息大于当前下载的第一直播数据的时间戳信息，则将当前下载的第二直播数据的时间戳信息作为第二待对齐时间戳信息，并等待所述第一直播数据继续下载，直到实时下载的所述第一直播数据的时间戳信息与所述第二待对齐时间戳信息的时间差小于或等于预设阈值。
针对上述时间差大于预设阈值的场景，则下载得比较快的一路直播数据需要等待下载慢的一路直播数据来实现对齐。在一种实施方式中，可以通过判断时间戳信息最大的直播数据为第一直播数据或第二直播数据来确定哪一路直播数据下载的进度比较快。
若当前下载的第一直播数据的时间戳信息大于当前下载的第二直播数据的时间戳信息，则表示第一直播数据的下载进度较快，则可以将当前下载的第一直播数据的时间戳信息作为第一待对齐时间戳信息，并等待第二直播数据继续下载，直到实时下载的第二直播数据的时间戳信息与第一待对齐时间戳信息的时间差小于或等于预设阈值，则完成第一直播数据与第二直播数据的对齐。
若当前下载的第二直播数据的时间戳信息大于当前下载的第一直播数据的时间戳信息，则表示第二直播数据的下载进度较快，则将当前下载的第二直播数据的时间戳信息作为第二待对齐时间戳信息，并等待第一直播数据继续下载，直到实时下载的第一直播数据的时间戳信息与第二待对齐时间戳信息的时间差小于或等于预设阈值，则完成第一直播数据与第二直播数据的对齐。
需要说明的是，上述预设阈值可以根据实际需求设定，例如设定为100ms，本实施例对此不作限制。
在一种实施方式中，在上述对两路直播数据的对齐过程中，若第一直播数据的下载进度较快，且等待第二直播数据继续下载的时长大于预设时长，则无需继续等待第二直播数据，可以从第一待对齐时间戳信息开始播放第一直播数据。
若第二直播数据的下载进度较快，且等待第一直播数据继续下载的时长大于预设时长，则无需继续等待第一直播数据，从第二待对齐时间戳信息开始播放第二直播数据。
在完成第一直播数据以及第二直播数据的对齐以后，在一种实施方式中，可以通过以下方式播放对齐后的第一直播数和第二直播数据：在直播页面中以预设的第一分辨率显示第一直播数据，以及以预设的第二分辨率显示第二直播数据。
示例性地，第一分辨率可以为当前直播页面中的预设的小窗口的分辨率，第二分辨率可以为当前直播所需的全屏分辨率。
在本实施例中，观众客户端从服务器中请求下载当前直播间的第一用户推送的第一直播数据以及第二直播数据以后，可以根据第一直播数据的时间戳信息以及第二直播数据的时间戳信息，对第一直播数据以及第二直播数据进行对齐，并播放对齐后的第一直播数据以及第二直播数据。由观众客户端对多路直播数据进行播放，便于观众用户在播放不同直播数据的过程中可以调整不同直播数据的播放位置以及大小，提升观众端对于播放画面的能动性。
图8是根据一示例性实施例示出的一种数据处理装置框图。参照图8，所述装置应用于第一移动终端，所述数据处理装置包括：目标文件确定模块801、第一直播数据采集模块802、显示模块803、第二直播数据生成模块804、时间戳信息添加模块805及直播数据发送模块806。
目标文件确定模块801，被配置为确定在直播中待播放的目标文件；
第一直播数据采集模块802，被配置为采集第一直播数据；
显示模块803，被配置为在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
第二直播数据生成模块804，被配置为根据显示的所述目标文件，生成第二直播数据；
时间戳信息添加模块805，被配置为分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
直播数据发送模块806，被配置为分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中。
在本实施例的一种可能的实施方式中，所述时间戳信息添加模块805具体被配置为：
当到达预设的时间间隔对应的时间时，则分别为当前时间对应的第一直播数据以及第二直播数据添加表示当前时间的时间戳信息。
在本实施例的一种可能的实施方式中，所述第一直播数据包括所述第一移动终端的摄像头采集的第一图像数据和/或所述第一移动终端的麦克风采集的第一音频数据；所述第二直播数据包括第二图像数据和/或第二音频数据；所述目标文件包括多媒体文件或者非多媒体文件，所述多媒体文件包括图像数据和/或音频数据和/或视频数据；
所述第二直播数据生成模块804具体被配置为：
若所述目标文件为图像数据，则将所述图像数据作为第二图像数据；
若所述目标文件为音频数据，则将所述音频数据作为第二音频数据；
若所述目标文件为视频数据，则对所述视频数据进行解码后得到对应的第二图像数据以及第二音频数据；
若所述目标文件为非多媒体文件，对所述显示的非多媒体文件进行截图，得到第二图像数据。
在本实施例的一种可能的实施方式中，所述显示模块803包括：
第一显示子模块，被配置为在第一视图View控件中以所述第一分辨率显示所述第一直播数据；
第二显示子模块，被配置为在第二视图View控件中以所述第二分辨率显示所述目标文件。
在本实施例的一种可能的实施方式中，所述第一分辨率为当前直播页面中的预设的小窗口的分辨率；所述第二分辨率为当前直播所需的全屏分辨率。
在本实施例的一种可能的实施方式中，所述目标文件检测模块801包括：
直播页面显示子模块，被配置为显示包含文件共享接口的直播页面；
文件列表显示子模块，被配置为当检测到所述文件共享接口被触发时，获取终端的文件列表，并展示所述文件列表；
目标文件检测子模块，被配置为获取从所述文件列表中选定的目标文件。
在本实施例的一种可能的实施方式中，若所述目标文件为非视频文件，则按照预设的帧率发送所述第一直播数据以及所述第二直播数据；若所述目标文件为视频文件，则按照解码出的所述视频文件的帧率发送所述第一直播数据以及所述第二直播数据。
图9是根据一示例性实施例示出的另一种数据处理装置框图。参照图9，所述装置应用于移动终端，所述数据处理装置包括：直播数据请求模块901、对齐模块902及第一播放模块903。
直播数据请求模块901，被配置为从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；
对齐模块902，被配置为根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐；
第一播放模块903，被配置为播放对齐后的所述第一直播数据以及所述第二直播数据。
在本实施例的一种可能的实施方式中，所述对齐模块902可以包括如下子模块：
时间差计算子模块，被配置为计算当前下载的第一直播数据的时间戳信息与第二直播数据的时间戳信息的时间差；
第一判定子模块，被配置为若所述时间差小于或等于预设阈值，则判定所述第一直播数据以及所述第二直播数据已对齐；
第二判定子模块，被配置为若所述时间差大于预设阈值，则判断时间戳信息最大的直播数据为第一直播数据或第二直播数据；若当前下载的第一直播数据的时间戳信息大于当前下载的第二直播数据的时间戳信息，则将当前下载的第一直播数据的时间戳信息作为第一待对齐时间戳信息，并等待所述第二直播数据继续下载，直到实时下载的所述第二直播数据的时间戳信息与所述第一待对齐时间戳信息的时间差小于或等于预设阈值；若当前下载的第二直播数据的时间戳信息大于当前下载的第一直播数据的时间戳信息，则将当前下载的第二直播数据的时间戳信息作为第二待对齐时间戳信息，并等待所述第一直播数据继续下载，直到实时下载的所述第一直播数据的时间戳信息与所述第二待对齐时间戳信息的时间差小于或等于预设阈值。
在本实施例的一种可能的实施方式中，所述数据处理装置还包括：
第二播放模块，被配置为若等待所述第二直播数据继续下载的时长大于预设时长，则从所述第一待对齐时间戳信息开始播放所述第一直播数据；若等待所述第一直播数据继续下载的时长大于预设时长，则从所述第二待对齐时间戳信息开始播放所述第二直播数据。
在本实施例的一种可能的实施方式中，所述第一播放模块903具体被配置为：
在直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述第二直播数据。
图10是根据一示例性实施例示出的一种数据处理系统框图。参照图10，该系统可以包括第一客户端10、服务器20以及第二客户端30。
所述第一客户端10被配置为：
确定在直播中待播放的目标文件；
采集第一直播数据；
在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
根据显示的所述目标文件，生成第二直播数据；
分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中；
所述服务器20被配置为分别存储所述第一直播数据以及所述第二直播数据，并获得所述第一直播数据以及所述第二直播数据的存储地址，根据所述存储地址以及本服务器的IP地址生成下载链接，并将所述下载链接发送至所述第二客户端；
所述第二客户端30被配置为根据所述下载链接，从所述服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
关于上述实施例中的装置及系统，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图11是根据一示例性实施例示出的一种用于执行上述方法实施例的装置的框图。
在示例性实施例中，还提供了一种包括指令的存储介质，例如包括指令的存储器，上述指令可由装置的处理器执行以完成上述图1或图7的方法实施例。可选地，存储介质可以是非临时性计算机可读存储介质，例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本公开实施例还提供一种移动终端，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现上述图1或图7实施例的方法。
本公开实施例还提供一种存储介质，当所述存储介质中的指令由所述移动终端的处理器执行时，使得所述移动终端能够执行上述图1或图7实施例的方法。
本公开实施例还提供一种计算机程序产品，包括可执行程序代码，其中，所述程序代码在通过上述装置执行时实施根据图1或图7实施例的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种数据处理方法，其特征在于，所述方法应用于第一移动终端，所述数据处理方法包括：
确定在直播中待播放的目标文件；
采集第一直播数据；
在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
根据显示的所述目标文件，生成第二直播数据；
分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中。
2.根据权利要求1所述的数据处理方法，其特征在于，所述分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息的步骤包括：
当到达预设的时间间隔对应的时间时，则分别为当前时间对应的第一直播数据以及第二直播数据添加表示当前时间的时间戳信息。
3.根据权利要求1或2所述的数据处理方法，其特征在于，所述第一直播数据包括所述第一移动终端的摄像头采集的第一图像数据和/或所述第一移动终端的麦克风采集的第一音频数据；所述第二直播数据包括第二图像数据和/或第二音频数据；所述目标文件包括多媒体文件或者非多媒体文件，所述多媒体文件包括图像数据和/或音频数据和/或视频数据；
所述根据显示的所述目标文件，生成第二直播数据的步骤包括：
若所述目标文件为图像数据，则将所述图像数据作为第二图像数据；
若所述目标文件为音频数据，则将所述音频数据作为第二音频数据；
若所述目标文件为视频数据，则对所述视频数据进行解码后得到对应的第二图像数据以及第二音频数据；
若所述目标文件为非多媒体文件，对所述显示的非多媒体文件进行截图，得到第二图像数据。
4.一种数据处理方法，其特征在于，所述方法应用于第二移动终端中，所述数据处理方法包括：
从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；
根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
5.根据权利要求4所述的数据处理方法，其特征在于，所述根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐的步骤包括：
计算当前下载的第一直播数据的时间戳信息与第二直播数据的时间戳信息的时间差；
若所述时间差小于或等于预设阈值，则判定所述第一直播数据以及所述第二直播数据已对齐；
若所述时间差大于预设阈值，则判断时间戳信息最大的直播数据为第一直播数据或第二直播数据；
若当前下载的第一直播数据的时间戳信息大于当前下载的第二直播数据的时间戳信息，则将当前下载的第一直播数据的时间戳信息作为第一待对齐时间戳信息，并等待所述第二直播数据继续下载，直到实时下载的所述第二直播数据的时间戳信息与所述第一待对齐时间戳信息的时间差小于或等于预设阈值；
若当前下载的第二直播数据的时间戳信息大于当前下载的第一直播数据的时间戳信息，则将当前下载的第二直播数据的时间戳信息作为第二待对齐时间戳信息，并等待所述第一直播数据继续下载，直到实时下载的所述第一直播数据的时间戳信息与所述第二待对齐时间戳信息的时间差小于或等于预设阈值。
6.一种数据处理装置，其特征在于，所述装置应用于第一移动终端，所述数据处理装置包括：
目标文件确定模块，被配置为确定在直播中待播放的目标文件；
第一直播数据采集模块，被配置为采集第一直播数据；
显示模块，被配置为在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
第二直播数据生成模块，被配置为根据显示的所述目标文件，生成第二直播数据；
时间戳信息添加模块，被配置为分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
直播数据发送模块，被配置为分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中。
7.一种数据处理装置，其特征在于，所述装置应用于第二移动终端中，所述数据处理装置包括：
直播数据请求模块，被配置为从服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；
对齐模块，被配置为根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐；
第一播放模块，被配置为播放对齐后的所述第一直播数据以及所述第二直播数据。
8.一种数据处理系统，其特征在于，所述数据处理系统包括第一客户端、服务器以及第二客户端；
所述第一客户端被配置为：
确定在直播中待播放的目标文件；
采集第一直播数据；
在所述直播页面中以预设的第一分辨率显示所述第一直播数据，以及以预设的第二分辨率显示所述目标文件；
根据显示的所述目标文件，生成第二直播数据；
分别为所述第一直播数据以及所述第二直播数据添加表示同一时刻的时间戳信息，所述时间戳信息用于在播放所述第一直播数据以及所述第二直播数据前，对所述第一直播数据以及所述第二直播数据进行对齐；
分别将携带时间戳信息的所述第一直播数据以及所述第二直播数据发送至服务器中；
所述服务器被配置为分别存储所述第一直播数据以及所述第二直播数据，并获得所述第一直播数据以及所述第二直播数据的存储地址，根据所述存储地址以及本服务器的IP地址生成下载链接，并将所述下载链接发送至所述第二客户端；
所述第二客户端被配置为根据所述下载链接，从所述服务器中请求下载当前直播间的第一直播数据以及第二直播数据，其中，所述第一直播数据以及所述第二直播数据均携带时间戳信息；根据所述第一直播数据的时间戳信息以及所述第二直播数据的时间戳信息，对所述第一直播数据以及所述第二直播数据进行对齐，并播放对齐后的所述第一直播数据以及所述第二直播数据。
9.一种移动终端，其特征在于，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述指令，以实现如权利要求1-3任一项或者4-5任一项所述的方法。
10.一种存储介质，其特征在于，当所述存储介质中的指令由所述移动终端的处理器执行时，使得所述移动终端能够执行如权利要求1-3中任一项或者4-5任一项所述的方法。
CN201910944055.0A 2019-09-30 2019-09-30 数据处理方法、装置、系统、移动终端及存储介质 Pending CN110636321A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910944055.0A CN110636321A (zh) 2019-09-30 2019-09-30 数据处理方法、装置、系统、移动终端及存储介质
US17/039,485 US11128894B2 (en) 2019-09-30 2020-09-30 Method and mobile terminal for processing data
US17/396,042 US20210368214A1 (en) 2019-09-30 2021-08-06 Method and mobile terminal for processing data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910944055.0A CN110636321A (zh) 2019-09-30 2019-09-30 数据处理方法、装置、系统、移动终端及存储介质

Publications (1)

Publication Number Publication Date
CN110636321A true CN110636321A (zh) 2019-12-31

Family

ID=68974922

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910944055.0A Pending CN110636321A (zh) 2019-09-30 2019-09-30 数据处理方法、装置、系统、移动终端及存储介质

Country Status (2)

Country Link
US (2) US11128894B2 (zh)
CN (1) CN110636321A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111464830A (zh) * 2020-05-19 2020-07-28 广州酷狗计算机科技有限公司 图像显示的方法、装置、系统、设备及存储介质
CN111919451A (zh) * 2020-06-30 2020-11-10 深圳盈天下视觉科技有限公司 一种直播方法、直播装置及终端
WO2021213165A1 (zh) * 2020-04-24 2021-10-28 华为技术有限公司 多源数据处理方法、电子设备和计算机可读存储介质
CN114390310A (zh) * 2022-01-13 2022-04-22 广州繁星互娱信息科技有限公司 数据推送方法和装置、存储介质及电子设备
CN114390310B (zh) * 2022-01-13 2024-06-21 广州繁星互娱信息科技有限公司 数据推送方法和装置、存储介质及电子设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220067993A1 (en) * 2020-08-31 2022-03-03 Popshop Technologies, Inc. Live streaming object image capture and image conversion to product catalog
CN114679618B (zh) * 2022-05-27 2022-08-02 成都有为财商教育科技有限公司 一种流媒体数据接收方法及系统

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1889686A (zh) * 2006-07-14 2007-01-03 北京时越网络技术有限公司 一种同时显示多路视频信息的方法
CN105430537A (zh) * 2015-11-27 2016-03-23 刘军 对多路数据进行合成的方法、服务器及音乐教学系统
CN106162221A (zh) * 2015-03-23 2016-11-23 阿里巴巴集团控股有限公司 直播视频的合成方法、装置及系统
CN106657925A (zh) * 2017-01-18 2017-05-10 沈阳上博智像科技有限公司 视频输出方法及红外热像仪
CN106658215A (zh) * 2016-12-15 2017-05-10 北京小米移动软件有限公司 推送直播文件的方法及装置
CN107071509A (zh) * 2017-05-18 2017-08-18 北京大生在线科技有限公司 多路直播的视频精确同步方法
CN107333165A (zh) * 2017-06-29 2017-11-07 徐文波 多画面位置调整的控制方法和装置
CN107396166A (zh) * 2017-08-07 2017-11-24 北京小米移动软件有限公司 直播中显示视频的方法及装置
CN107566878A (zh) * 2017-08-07 2018-01-09 北京小米移动软件有限公司 直播中显示图片的方法及装置
CN108259989A (zh) * 2018-01-19 2018-07-06 广州华多网络科技有限公司 视频直播的方法、计算机可读存储介质和终端设备
CN109327741A (zh) * 2018-11-16 2019-02-12 网易（杭州）网络有限公司 游戏直播方法、装置和系统
CN109756768A (zh) * 2017-11-08 2019-05-14 中国电信股份有限公司 视频流处理方法、装置和视频流显示方法、装置
CN110166788A (zh) * 2018-08-02 2019-08-23 腾讯科技（深圳）有限公司 信息同步播放方法、装置及存储介质
CN110213635A (zh) * 2018-04-08 2019-09-06 腾讯科技（深圳）有限公司 视频混流方法、视频混流装置及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140006977A1 (en) * 2012-03-30 2014-01-02 Karriem Lateff Adams Integrated social network internet operating system and management interface
KR102144339B1 (ko) * 2014-02-11 2020-08-13 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
WO2016154149A1 (en) * 2015-03-20 2016-09-29 Twitter, Inc. Live video stream sharing
US10474422B1 (en) * 2016-04-18 2019-11-12 Look Sharp Labs, Inc. Music-based social networking multi-media application and related methods
US10652294B2 (en) * 2016-10-31 2020-05-12 Google Llc Anchors for live streams
US10652618B2 (en) * 2017-02-16 2020-05-12 Facebook, Inc. Transmitting video clips of viewers' reactions during a broadcast of a live video stream
US20190236547A1 (en) * 2018-02-01 2019-08-01 Moxtra, Inc. Record and playback for online collaboration sessions
US20200068262A1 (en) * 2018-08-24 2020-02-27 Santino Anthony Saldana System and method for sharing content in a live stream and story application
US20210001236A1 (en) * 2019-07-03 2021-01-07 Scoretrade Inc. System and method for integrating live video communication and content in the context of internet-based sports gaming mobile device application
US11632592B2 (en) * 2019-10-31 2023-04-18 Scoretrade Inc. Integrating authenticated pay television streams into mobile in-game sports gaming applications

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1889686A (zh) * 2006-07-14 2007-01-03 北京时越网络技术有限公司 一种同时显示多路视频信息的方法
CN106162221A (zh) * 2015-03-23 2016-11-23 阿里巴巴集团控股有限公司 直播视频的合成方法、装置及系统
CN105430537A (zh) * 2015-11-27 2016-03-23 刘军 对多路数据进行合成的方法、服务器及音乐教学系统
CN106658215A (zh) * 2016-12-15 2017-05-10 北京小米移动软件有限公司 推送直播文件的方法及装置
CN106657925A (zh) * 2017-01-18 2017-05-10 沈阳上博智像科技有限公司 视频输出方法及红外热像仪
CN107071509A (zh) * 2017-05-18 2017-08-18 北京大生在线科技有限公司 多路直播的视频精确同步方法
CN107333165A (zh) * 2017-06-29 2017-11-07 徐文波 多画面位置调整的控制方法和装置
CN107396166A (zh) * 2017-08-07 2017-11-24 北京小米移动软件有限公司 直播中显示视频的方法及装置
CN107566878A (zh) * 2017-08-07 2018-01-09 北京小米移动软件有限公司 直播中显示图片的方法及装置
CN109756768A (zh) * 2017-11-08 2019-05-14 中国电信股份有限公司 视频流处理方法、装置和视频流显示方法、装置
CN108259989A (zh) * 2018-01-19 2018-07-06 广州华多网络科技有限公司 视频直播的方法、计算机可读存储介质和终端设备
CN110213635A (zh) * 2018-04-08 2019-09-06 腾讯科技（深圳）有限公司 视频混流方法、视频混流装置及存储介质
CN110166788A (zh) * 2018-08-02 2019-08-23 腾讯科技（深圳）有限公司 信息同步播放方法、装置及存储介质
CN109327741A (zh) * 2018-11-16 2019-02-12 网易（杭州）网络有限公司 游戏直播方法、装置和系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021213165A1 (zh) * 2020-04-24 2021-10-28 华为技术有限公司 多源数据处理方法、电子设备和计算机可读存储介质
CN111464830A (zh) * 2020-05-19 2020-07-28 广州酷狗计算机科技有限公司 图像显示的方法、装置、系统、设备及存储介质
CN111464830B (zh) * 2020-05-19 2022-07-15 广州酷狗计算机科技有限公司 图像显示的方法、装置、系统、设备及存储介质
CN111919451A (zh) * 2020-06-30 2020-11-10 深圳盈天下视觉科技有限公司 一种直播方法、直播装置及终端
CN114390310A (zh) * 2022-01-13 2022-04-22 广州繁星互娱信息科技有限公司 数据推送方法和装置、存储介质及电子设备
CN114390310B (zh) * 2022-01-13 2024-06-21 广州繁星互娱信息科技有限公司 数据推送方法和装置、存储介质及电子设备

Also Published As

Publication number Publication date
US20210099733A1 (en) 2021-04-01
US20210368214A1 (en) 2021-11-25
US11128894B2 (en) 2021-09-21

Similar Documents

Publication Publication Date Title
CN110636321A (zh) 数据处理方法、装置、系统、移动终端及存储介质
CN109168014B (zh) 一种直播方法、装置、设备及存储介质
CN110446072B (zh) 视频流切换方法、电子设备和存储介质
US10638180B1 (en) Media timeline management
CN116761007A (zh) 多主播直播间赠送虚拟礼物的方法及电子设备
US20150350594A1 (en) Methods, apparatuses and computer programs for adapting content
US10681104B1 (en) Handling media timeline offsets
CN107040808B (zh) 用于视频播放中弹幕图片的处理方法和装置
US10593365B2 (en) Methods and systems for determining that a video-capturing device is unsteady
CN110582012B (zh) 视频切换方法、视频处理方法、装置及存储介质
CN113141522B (zh) 资源传输方法、装置、计算机设备及存储介质
WO2019192481A1 (zh) 媒体信息处理方法、相关设备及计算机存储介质
CN105898395A (zh) 一种网络视频播放方法、装置及系统
WO2023279793A1 (zh) 视频的播放方法及装置
CN110996157A (zh) 一种视频播放方法、装置、电子设备及机器可读存储介质
CN112218128B (zh) 广告视频的播放方法、播放客户端及可读存储介质
CN113315982A (zh) 一种直播方法、计算机存储介质及设备
US20230217047A1 (en) Method, system, and computer-readable recording medium for implementing fast-switching mode between channels in multi-live transmission environment
CN110662082A (zh) 数据处理方法、装置、系统、移动终端及存储介质
US20180324480A1 (en) Client and Method for Playing a Sequence of Video Streams, and Corresponding Server and Computer Program Product
CN105979333B (zh) 一种数据同步展示方法及装置
US10212466B1 (en) Active region frame playback
CN112351314B (zh) 多媒体信息播放方法、服务器、终端、系统及存储介质
US11856242B1 (en) Synchronization of content during live video stream
EP4340370A1 (en) Cloud-based input latency measurement

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191231

RJ01 Rejection of invention patent application after publication