CN114125576A - 多媒体资源的同步方法和装置、存储介质及电子设备 - Google Patents
多媒体资源的同步方法和装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN114125576A CN114125576A CN202111434659.4A CN202111434659A CN114125576A CN 114125576 A CN114125576 A CN 114125576A CN 202111434659 A CN202111434659 A CN 202111434659A CN 114125576 A CN114125576 A CN 114125576A
- Authority
- CN
- China
- Prior art keywords
- multimedia
- resource
- target
- playing
- timestamp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 238000009877 rendering Methods 0.000 claims abstract description 37
- 239000000872 buffer Substances 0.000 claims description 56
- 230000000875 corresponding effect Effects 0.000 claims description 21
- 230000015654 memory Effects 0.000 claims description 18
- 230000002596 correlated effect Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 9
- 238000005516 engineering process Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 12
- 230000004044 response Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种多媒体资源的同步方法和装置、存储介质及电子设备。其中，该方法包括：在目标播放应用的第一播放场景中播放第一多媒体资源，在目标播放应用的显示界面中获取目标切换指令，响应于目标切换指令，通过第二线路获取目标多媒体子资源，其中，目标多媒体子资源为第二多媒体资源中包括的第一类型多媒体子资源，目标多媒体子资源的渲染时间戳为第二时间戳，第一线路与第二线路不同，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。本发明解决了相关技术中存在的多媒体资源在切换播放模式时无法实现无缝切换的技术问题。
Description
技术领域
本发明涉及计算机领域，具体而言，涉及一种多媒体资源的同步方法和装置、存储介质及电子设备。
背景技术
目前，在线多媒体资源播放的场景中，播放应用一般允许播放音频或允许同时播放视频，当用户需要从音频播放模式切换至视频播放模式，或者，从视频播放模式切换至音频播放模式时，需要通过获取音频资源的播放位置，以实现视频中动画资源和音频资源的同步，在上述同步过程中，由于同步需要处理时间，因此，必然会造成切换过程中导致部分多媒体资源丢失或重复，进一步导致相关技术中存在的在切换播放模式时多媒体资源播放不连贯，无法实现无缝切换的技术问题。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种多媒体资源的同步方法和装置、存储介质及电子设备，以至少解决相关技术中存在的多媒体资源在切换播放模式时无法实现无缝切换的技术问题。
根据本发明实施例的一个方面，提供了一种多媒体资源的同步方法，包括：在所述目标播放应用的第一播放场景中播放第一多媒体资源，其中，所述第一多媒体资源通过第一线路获取，所述第一多媒体资源的渲染时间戳为第一时间戳；在所述目标播放应用的显示界面中获取目标切换指令，其中，所述目标切换指令用于将所述第一播放场景切换为第二播放场景，所述第二播放场景用于播放第二多媒体资源，所述第一多媒体资源与所述第二多媒体资源均包括第一类型多媒体子资源，所述第一多媒体资源与所述第二多媒体资源其中之一包括第二类型多媒体子资源；响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，其中，所述目标多媒体子资源为所述第二多媒体资源中包括的所述第一类型多媒体子资源，所述目标多媒体子资源的渲染时间戳为第二时间戳，所述第一线路与所述第二线路不同；在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源。
根据本发明实施例的另一方面，还提供了一种多媒体资源的同步装置，包括：第一播放模块，用于在所述目标播放应用的第一播放场景中播放第一多媒体资源，其中，所述第一多媒体资源通过第一线路获取，所述第一多媒体资源的渲染时间戳为第一时间戳；第一获取模块，用于在所述目标播放应用的显示界面中获取目标切换指令，其中，所述目标切换指令用于将所述第一播放场景切换为第二播放场景，所述第二播放场景用于播放第二多媒体资源，所述第一多媒体资源与所述第二多媒体资源均包括第一类型多媒体子资源，所述第一多媒体资源与所述第二多媒体资源其中之一包括第二类型多媒体子资源；第二获取模块，用于响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，其中，所述目标多媒体子资源为所述第二多媒体资源中包括的所述第一类型多媒体子资源，所述目标多媒体子资源的渲染时间戳为第二时间戳，所述第一线路与所述第二线路不同；第二播放模块，用于在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源。
可选地，所述装置用于通过如下方式在所述目标播放应用的显示界面中获取目标切换指令：在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第一切换指令，其中，所述第一切换指令用于将所述第一播放场景切换为允许同时播放所述第一类型多媒体子资源和所述第二类型多媒体子资源的所述第二播放场景；或者，在所述第一多媒体资源包括第一类型多媒体子资源和所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第二切换指令，其中，所述第二切换指令用于将所述第一播放场景切换为允许播放所述第一类型多媒体子资源，且不允许播放所述第二类型多媒体子资源的所述第二播放场景。
可选地，所述装置用于通过如下方式在第一播放场景中播放第一多媒体资源：从服务器通过所述第一线路获取所述第一时间戳对应的所述第一多媒体资源，并存储在预分配的第一缓冲区，其中，所述第一多媒体资源的获取速度与所述第一缓冲区的存储量呈正相关；从所述第一缓冲区中读取并播放所述第一多媒体资源。
可选地，所述装置用于通过如下方式响应于所述目标切换指令，通过第二线路获取目标多媒体子资源：从服务器通过所述第二线路获取所述第二时间戳对应的所述目标多媒体子资源，并存储在预分配的第二缓冲区，其中，所述目标多媒体子资源的获取速度与所述第二缓冲区的存储量呈正相关；所述装置用于通过如下方式在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源：在所述第一时间戳与所述第二时间戳相同的情况下，从所述第二缓冲区中读取所述目标多媒体子资源，并播放所述目标多媒体子资源。
可选地，所述装置还用于：在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源之前，在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳。
可选地，所述装置用于通过如下方式在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳：在所述第一时间戳大于所述第二时间戳的情况下，降低所述目标多媒体子资源的获取速度，并保持从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳；在所述第一时间戳小于所述第二时间戳的情况下，提高所述目标多媒体子资源的获取速度，并停止从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
可选地，所述装置还用于：在从所述第二缓冲区中读取所述目标多媒体子资源之后，在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，根据所述目标多媒体子资源获取所述第二多媒体资源中包括的所述第二类型多媒体子资源；同时播放所述目标多媒体子资源和所述第二类型多媒体子资源。
根据本发明实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述多媒体资源的同步方法。
根据本发明实施例的又一方面，还提供了一种电子设备，包括存储器和处理器，上述存储器中存储有计算机程序，上述处理器被设置为通过所述计算机程序执行上述的多媒体资源的同步方法。
在本发明实施例中，采用在目标播放应用的第一播放场景中播放第一多媒体资源，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源，响应于目标切换指令，通过第二线路获取目标多媒体子资源，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源的方式，通过第一线路获取正在播放的第一多媒体资源，通过与第一线路不同的第二线路获取待播放的第一类型多媒体子资源，以确定待播放的第二多媒体资源，并根据时间戳确定播放第二多媒体资源的时间，达到了在播放应用切换播放模式时能够无缝切换的目的，从而实现了在播放多媒体资源过程中切换播放模式时可以实现无缝切换的技术效果，进而解决了相关技术中存在的多媒体资源在切换播放模式时无法实现无缝切换的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的一种可选的多媒体资源的同步方法的应用环境的示意图；
图2是根据本发明实施例的一种可选的多媒体资源的同步方法的流程示意图；
图3是根据本发明实施例的一种可选的多媒体资源的同步方法的示意图；
图4是根据本发明实施例的另一种可选的多媒体资源的同步方法的示意图；
图5是根据本发明实施例的又一种可选的多媒体资源的同步方法的示意图；
图6是根据本发明实施例的又一种可选的多媒体资源的同步方法的示意图；
图7是根据本发明实施例的一种可选的多媒体资源的同步装置的结构示意图；
图8是根据本发明实施例的一种可选的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先，在对本申请实施例进行描述的过程中出现的部分名词或者术语适用于如下解释：
Presentation Time Stamp(PTS)是渲染时间戳，解码器渲染时相对于SCR(系统参考)的时间戳。
下面结合实施例对本发明进行说明：
根据本发明实施例的一个方面，提供了一种多媒体资源的同步方法，可选地，在本实施例中，上述多媒体资源的同步方法可以应用于如图1所示的由服务器101和终端设备103所构成的硬件环境中。如图1所示，服务器101通过网络与终端103进行连接，可用于为终端设备或终端设备上安装的应用程序提供服务，应用程序可以是视频应用程序、即时通信应用程序、浏览器应用程序、教育应用程序、游戏应用程序等。可在服务器上或独立于服务器设置数据库105，用于为服务器101提供数据存储服务，例如，多媒体数据存储服务器，上述网络可以包括但不限于：有线网络，无线网络，其中，该有线网络包括：局域网、城域网和广域网，该无线网络包括：蓝牙、WIFI及其他实现无线通信的网络，终端设备103可以是配置有应用程序的终端，可以包括但不限于以下至少之一：手机(如Android手机、iOS手机等)、笔记本电脑、平板电脑、掌上电脑、MID(Mobile Internet Devices，移动互联网设备)、PAD、台式电脑、智能电视等计算机设备，上述服务器可以是单一服务器，也可以是由多个服务器组成的服务器集群，或者是云服务器，使用上述多媒体资源的同步方法的应用程序107通过终端设备103进行显示。
结合图1所示，上述多媒体资源的同步方法可以在终端设备103通过如下步骤实现：
S1，在目标播放应用的第一播放场景中播放第一多媒体资源，其中，第一多媒体资源通过第一线路获取，第一多媒体资源的渲染时间戳为第一时间戳；
S2，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源；
S3，响应于目标切换指令，通过第二线路获取目标多媒体子资源，其中，目标多媒体子资源为第二多媒体资源中包括的第一类型多媒体子资源，目标多媒体子资源的渲染时间戳为第二时间戳，第一线路与第二线路不同；
S4，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。
可选地，在本实施例中，上述多媒体资源的同步方法还可以通过服务器实现，例如，图1所示的服务器101中实现；或由用户终端和服务器共同实现。
上述仅是一种示例，本实施例不做具体的限定。
可选地，作为一种可选的实施方式，如图2所示，上述多媒体资源的同步方法包括：
S202，在目标播放应用的第一播放场景中播放第一多媒体资源，其中，第一多媒体资源通过第一线路获取，第一多媒体资源的渲染时间戳为第一时间戳；
S204，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源；
S206，响应于目标切换指令，通过第二线路获取目标多媒体子资源，其中，目标多媒体子资源为第二多媒体资源中包括的第一类型多媒体子资源，目标多媒体子资源的渲染时间戳为第二时间戳，第一线路与第二线路不同；
S208，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。
可选地，在本实施例中，上述多媒体资源的同步方法的应用场景可以包括但不限于医疗、金融、征信、银行、政务、政府、能源、教育、安防、楼宇、游戏、交通、物联、工业等多种应用场景的播放应用中。
可选地，在本实施例中，上述目标播放应用可以包括但不限于允许切换播放场景的播放应用，可以从同时播放多种多媒体资源的播放模式切换至其中部分多媒体资源的播放模式。例如，可以包括但不限于从允许播放音频和动画的音画播放模式切换至仅允许播放音频的音频播放模式，还可以包括但不限于从仅允许播放音频的音频播放模式切换至允许播放音频和动画的音画播放模式。
可选地，在本实施例中，上述第一线路可以包括但不限于封装为获取第一多媒体资源的线路，上述第二线路可以包括但不限于封装为仅获取目标多媒体子资源的线路。
可选地，在本实施例中，上述渲染时间戳(Presentation Time Stamp，PTS)，是解码器渲染时相对于SCR(系统参考)的时间戳，与Decode Time Stamp(DTS)不同，DTS是解码时间戳，解码器解码时相对于SCR(系统参考)的时间戳。
需要说明的是，上述第一时间戳以及第二时间戳均是渲染时间戳，是解码器渲染时相对于系统参考的时间戳。
可选地，在本实施例中，上述第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源可以包括但不限于上述第一多媒体资源与第二多媒体资源共同包括的多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源可以包括但不限于上述第一多媒体资源包括，但上述第二多媒体资源不包括的多媒体子资源，或者，上述第一多媒体资源不包括，但上述第二多媒体资源包括的多媒体子资源。
例如，以第一多媒体资源包括音频资源和动画资源，第二多媒体资源包括音频资源，且不包括动画资源为例，则上述音频资源即为上述第一类型的多媒体子资源，上述动画资源即为上述第二类型的多媒体子资源。
可选地，在本实施例中，上述目标切换指令可以包括但不限于用于切换播放场景的播放指令，上述第一播放场景可以包括但不限于允许播放音频和动画的音画播放模式的播放场景，上述第二播放场景可以包括但不限于仅允许播放音频的音频播放模式的播放场景。
例如，图3是根据本发明实施例的一种可选的多媒体资源的同步方法的示意图，如图3所示，可以包括但不限于如下步骤：
S1，在目标播放应用上以第一播放模式播放第一多媒体资源，其中，第一多媒体资源包括第一类型的多媒体子资源和第二类型的多媒体子资源；
S2，获取目标切换指令(图3所示的切换按钮执行点击操作)；
S3，响应于目标切换指令，在目标播放应用上以第二播放模式播放第二多媒体资源，其中，上述第二多媒体资源包括第一类型的多媒体子资源，且不包括第二类型的多媒体子资源。
需要说明的是，上述第一多媒体资源切换为第二多媒体资源时，多媒体资源的具体内容是连续的，不存在任何丢失部分或重叠部分，这是由于第一多媒体资源通过第一线路获取，而第二多媒体资源通过第二线路获取，两者通过不同线路获取，以避免无法同时获取，并且，在获取过程中会获得第一多媒体资源的渲染时间戳以及第二多媒体资源中包括的第一类型多媒体子资源的渲染时间戳，基于上述第一时间戳和第二时间戳执行对齐策略，以在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。
可选地，在本实施例中，上述目标多媒体子资源为上述第一多媒体资源和第二多媒体资源均包括的第一类型多媒体子资源，且上述目标多媒体子资源用于作为第二多媒体资源的全部或部分进行播放。
例如，当第一多媒体资源包括第二类型的多媒体子资源，而第二多媒体资源不包括第二类型的多媒体子资源时，则将目标多媒体子资源作为第二多媒体资源的部分进行播放，并同时以目标多媒体子资源为基准，获取待播放的第二类型的多媒体子资源，以和目标多媒体子资源你同时播放，实现播放第二多媒体资源，当第一多媒体资源不包括第二类型的多媒体子资源，而第二多媒体资源包括第二类型的多媒体子资源时，则将目标多媒体子资源作为第二多媒体资源的全部进行播放，以实现播放第二多媒体资源。
图4是根据本发明实施例的另一种可选的多媒体资源的同步方法的示意图，如图4所示，可以包括但不限于如下步骤：
S1，获取音画切换请求(对应于前述的目标切换指令)；
S2，新建立纯音频流stream2(对应于前述的第二线路)；
S3，通过纯音频流stream2获取流数据放到缓存区queue2；
S4，预设音频视频流stream1(对应于前述的第一线路)；
S5，通过音频视频流stream1获取流数据放到缓存区queue1；
S6-1-1，当播放器控制模块未获取到音画切换请求时，由播放器控制模块向音画渲染模块传输数据；
S6-1-2，在音画渲染模块渲染后进行播放音频视频流stream1的音频视频数据；
S6-2-1，当播放器控制模块获取到音画切换请求时，由播放器控制模块向比对模块传输数据；
S6-2-2，比对模块比对queue1和queue2里面音频的(pts，渲染时间戳)；
S6-2-3，如果确定queue2的pts已经满足queue1的pts无缝切换，则停止拉取Stram1流数据，并向音画渲染模块传输数据；
S6-2-4，在音画渲染模块渲染后进行播放纯音频流stream2的音频数据。
上述仅是一种示例，本实施例不做任何具体的限定。
需要说明的是，如果需要从允许播放视频切换至仅允许播放音频的播放模式时，虽然用户感知到的是播放应用取消显示了视频动画，仅播放音频资源，但是，此时播放应用在获取资源的过程中，依旧是同时获取视频动画资源和音频资源，仅仅是在播放的过程中，避免显示视频动画，依然会造成流量消耗过大的技术问题，而通过本实施例，可以仅通过新建立的第二线路获取音频资源，避免在仅播放音频资源的过程中，依旧需要同时获取音频资源和视频资源，导致流量的过度损耗。
通过本实施例，采用在目标播放应用的第一播放场景中播放第一多媒体资源，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源，响应于目标切换指令，通过第二线路获取目标多媒体子资源，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源的方式，通过第一线路获取正在播放的第一多媒体资源，通过与第一线路不同的第二线路获取待播放的第一类型多媒体子资源，以确定待播放的第二多媒体资源，并根据时间戳确定播放第二多媒体资源的时间，达到了在播放应用切换播放模式时能够无缝切换的目的，从而实现了在播放多媒体资源过程中切换播放模式时可以实现无缝切换的技术效果，进而解决了相关技术中存在的多媒体资源在切换播放模式时无法实现无缝切换的技术问题。
作为一种可选的方案，在所述目标播放应用的显示界面中获取目标切换指令，包括：
在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第一切换指令，其中，所述第一切换指令用于将所述第一播放场景切换为允许同时播放所述第一类型多媒体子资源和所述第二类型多媒体子资源的所述第二播放场景；或者，
在所述第一多媒体资源包括第一类型多媒体子资源和所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第二切换指令，其中，所述第二切换指令用于将所述第一播放场景切换为允许播放所述第一类型多媒体子资源，且不允许播放所述第二类型多媒体子资源的所述第二播放场景。
可选地，在本实施例中，上述第一多媒体资源包括第一类型多媒体子资源，且不包括第二类型多媒体子资源可以包括但不限于上述第一多媒体资源相较于上述第二多媒体资源缺少了上述第二类型多媒体子资源，由于第一切换指令用于指示将第一播放场景切换为允许同时播放第一类型多媒体子资源和第二类型多媒体子资源的第二播放场景，因此，通过第二线路获取目标多媒体子资源，并基于目标多媒体子资源再获取待播放的第二类型多媒体子资源，以实现同时播放包括第一类型多媒体子资源和第二类型多媒体子资源的第二多媒体资源。
可选地，在本实施例中，上述第一多媒体资源包括第一类型多媒体子资源和第二类型多媒体子资源可以包括但不限于上述第二多媒体资源相较于上述第一多媒体资源缺少了上述第二类型多媒体子资源，由于第二切换指令用于指示将第一播放场景切换为允许播放第一类型多媒体子资源，且不允许播放第二类型多媒体子资源的第二播放场景，因此，通过第二线路仅获取目标多媒体子资源，以实现播放仅包括第一类型多媒体子资源的第二多媒体资源。
作为一种可选的方案，在第一播放场景中播放第一多媒体资源，包括：
从服务器通过所述第一线路获取所述第一时间戳对应的所述第一多媒体资源，并存储在预分配的第一缓冲区，其中，所述第一多媒体资源的获取速度与所述第一缓冲区的存储量呈正相关；
从所述第一缓冲区中读取并播放所述第一多媒体资源。
可选地，在本实施例中，上述第一线路可以包括但不限于预设的媒体流，该媒体流用于从服务器获取上述第一多媒体资源，上述第一缓冲区的存储量也是预分配的，以按照预设速度获取上述第一多媒体资源。
可选地，在本实施例中，上述第一多媒体资源的获取速度与第一缓冲区的存储量呈正相关可以包括但不限于上述第一缓冲区的存储量的存储量越大，则上述第一多媒体资源的获取速度取值越大。
作为一种可选的方案，
响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，包括：从服务器通过所述第二线路获取所述第二时间戳对应的所述目标多媒体子资源，并存储在预分配的第二缓冲区，其中，所述目标多媒体子资源的获取速度与所述第二缓冲区的存储量呈正相关；
在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源，包括：在所述第一时间戳与所述第二时间戳相同的情况下，从所述第二缓冲区中读取所述目标多媒体子资源，并播放所述目标多媒体子资源。
可选地，在本实施例中，上述第二线路可以包括但不限于响应于目标切换指令所生成的新的媒体流，该媒体流用于从服务器获取上述目标多媒体子资源，上述第二缓冲区的存储量也是预分配的，以按照预设速度获取上述目标多媒体子资源。
需要说明的是，上述第二缓冲区的存储量一般配置为大于上述第一缓冲区，以实现提高播放场景的切换速度。
可选地，在本实施例中，上述目标多媒体子资源的获取速度与第二缓冲区的存储量呈正相关可以包括但不限于上述第二缓冲区的存储量的存储量越大，则上述目标多媒体子资源的获取速度取值越大。
作为一种可选的方案，在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源之前，所述方法还包括：
在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳。
可选地，在本实施例中，第一时间戳与第二时间戳不同可以包括但不限于通过比对第一多媒体资源中第一类型多媒体子资源的第一时间戳和目标多媒体子资源时间戳是否相同确定。
可选地，在本实施例中，上述调整第一多媒体资源或目标多媒体子资源的获取速度可以包括但不限于调整上述第一缓冲区的存储量或第二缓存区的存储量实现，当需要增加获取速度时，则增加上述第一缓冲区的存储量或第二缓存区的存储量，反之亦然。
作为一种可选的方案，在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳，包括：
在所述第一时间戳大于所述第二时间戳的情况下，降低所述目标多媒体子资源的获取速度，并保持从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳；
在所述第一时间戳小于所述第二时间戳的情况下，提高所述目标多媒体子资源的获取速度，并停止从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
可选地，在本实施例中，上述第一时间戳小于第二时间戳可以包括但不限于在同一时刻拉取的第一多媒体资源的第一类型多媒体子资源的渲染时间戳小于目标多媒体子资源的渲染时间戳。
例如，第一多媒体资源的第一类型多媒体子资源在t1时间点拉的数据的pts为900-950，而目标多媒体子资源在t1时间点拉的数据的pts为950-1000，此时，第一时间戳小于第二时间戳，则需要减少所述第二缓冲区的存储量，以降低所述目标多媒体子资源的获取速度，并保持从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
图5是根据本发明实施例的又一种可选的多媒体资源的同步方法的示意图，如图5所示，可以包括但不限于如下步骤：
S1，响应于目标切换指令，通过第一线路从服务器拉取原始音画视频数据(对应于前述的第一多媒体资源)；
S2，响应于目标切换指令，通过第二线路从服务器重封装裸音频数据(对应于前述的目标多媒体子资源)；
S3，通过第一线路拉取的原始音画视频数据被存放在旧流缓冲区(对应于前述的第一缓冲区，其中，旧流对应于前述的第一多媒体资源)；
S4，通过第二线路拉取的裸音频数据被存放在新流缓冲区(对应于前述的第二缓冲区，其中，新流对应于前述的目标多媒体子资源)；
S5，在t1时间点分别获取旧流pts：900-950，以及新流pts：950-1000，此时，由于旧流pts小于新流pts，则降低目标多媒体子资源的获取速度；
S6，在t2时间点分别获取旧流pts950-1000，以及新流pts：1000-1050，此时，由于t2时间点获取到的新流pts与t1时间点获取到的旧流pts相同，则表示当前可以实现无缝切换；
S7，停止拉取旧流，并将目标播放应用的播放模式由第一播放模式无缝切换至第二播放模式。
可选地，在本实施例中，上述第一时间戳大于第二时间戳可以包括但不限于在同一时刻拉取的第一多媒体资源的第一类型多媒体子资源的渲染时间戳大于目标多媒体子资源的渲染时间戳。
例如，第一多媒体资源的第一类型多媒体子资源在t1时间点拉的数据的pts为950-1000，而目标多媒体子资源在t1时间点拉的数据的pts为900-950，此时，第一时间戳大于第二时间戳，则需要增大所述第二缓冲区的存储量，以提高所述目标多媒体子资源的获取速度，并停止从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
图6是根据本发明实施例的又一种可选的多媒体资源的同步方法的示意图，如图6所示，可以包括但不限于如下步骤：
S1，响应于目标切换指令，通过第一线路从服务器拉取原始音画视频数据(对应于前述的第一多媒体资源)；
S2，响应于目标切换指令，通过第二线路从服务器重封装裸音频数据(对应于前述的目标多媒体子资源)；
S3，通过第一线路拉取的原始音画视频数据被存放在旧流缓冲区(对应于前述的第一缓冲区，其中，旧流对应于前述的第一多媒体资源)；
S4，通过第二线路拉取的裸音频数据被存放在新流缓冲区(对应于前述的第二缓冲区，其中，新流对应于前述的目标多媒体子资源)；
S5，在t1时间点分别获取新流pts：900-950，以及旧流pts：950-1000，此时，由于旧流pts大于新流pts，则提高目标多媒体子资源的获取速度；
S6，在t2时间点分别获取新流pts950-1000，以及旧流pts：1000-1050，此时，由于t2时间点获取到的旧流pts依旧大于新流pts，则限制旧流的缓冲区存储量，降低旧流的获取速度；
S7，在t3时间点，由于获取到的新流的时间戳为1000-1050，与t2时间点获取到的旧流pts相同，则表示当前可以实现无缝切换；
S8，停止拉取旧流，并将目标播放应用的播放模式由第一播放模式无缝切换至第二播放模式。
上述仅是一种示例，本实施例不做任何具体的限定。
作为一种可选的方案，在从所述第二缓冲区中读取所述目标多媒体子资源之后，所述方法还包括：
在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，根据所述目标多媒体子资源获取所述第二多媒体资源中包括的所述第二类型多媒体子资源；
同时播放所述目标多媒体子资源和所述第二类型多媒体子资源。
下面结合具体的示例，对本申请进行进一步的解释说明：
现状：
在一些在线播放视频的场景下，存在如下一些场景。
1、音频播放切换到音画播放，例如主播音频直播，但是用户付费看主播画面的情况，例如用户在音频听书，突然想切换成看节目来继续听。
2、音画播放切换到音频播放，例如用户在观看音乐mv的时候，在wifi切换4G的情况下，可以无缝切换到只听音频来节省流量消耗。
策略：
1、对于需要支持无缝切换音画播放的媒体流，需要在服务器重封装生成出一路只有纯音频的媒体流。
2、播放器音画对齐策略需要按照音频为基准。
3、对于音频播放无缝切换音画播放的场景，假设当前播放器正在播放音频的旧流，假设当前正在播放的pts1是1000，旧流数据放在缓冲区queue1。
4、此时，业务调用需要切换到音画播放器，并传入新流，如果新流拉取到的pts2是990(也就是新流pts小于旧流pts)，则需要持续拉取新流数据，放到新流缓存区queue2，并不断对比queue1/queue2两个缓冲区的首个pts是否追上。
5、假设在旧流播放到pts1＝1005的时候，新流也拉到了pts2＝1005以后的数据，则旧流可以停止拉流，然后音画同步模块开始从1005对应的时间戳开始从新流queue2的缓存区取数据来渲染。
6、对于4的另外一种情况，如果新流拉取到的pts2是1100(也就是新流pts大于旧流pts)，将其放到新流缓冲区queue2，然后持续拉取旧流一致到pts1＝1100的时候，停止旧流的拉取，并将音画同步模块开始从新流queue2的缓存区取数据来渲染。
7、对于音频切换视频，以及视频切换音频，是相同原理，在此不再赘述。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
根据本发明实施例的另一个方面，还提供了一种用于实施上述多媒体资源的同步方法的多媒体资源的同步装置。如图7所示，该装置包括：
第一播放模块702，用于在所述目标播放应用的第一播放场景中播放第一多媒体资源，其中，所述第一多媒体资源通过第一线路获取，所述第一多媒体资源的渲染时间戳为第一时间戳；
第一获取模块704，用于在所述目标播放应用的显示界面中获取目标切换指令，其中，所述目标切换指令用于将所述第一播放场景切换为第二播放场景，所述第二播放场景用于播放第二多媒体资源，所述第一多媒体资源与所述第二多媒体资源均包括第一类型多媒体子资源，所述第一多媒体资源与所述第二多媒体资源其中之一包括第二类型多媒体子资源；
第二获取模块706，用于响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，其中，所述目标多媒体子资源为所述第二多媒体资源中包括的所述第一类型多媒体子资源，所述目标多媒体子资源的渲染时间戳为第二时间戳，所述第一线路与所述第二线路不同；
第二播放模块708，用于在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源。
作为一种可选的方案，所述装置用于通过如下方式在所述目标播放应用的显示界面中获取目标切换指令：
在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第一切换指令，其中，所述第一切换指令用于将所述第一播放场景切换为允许同时播放所述第一类型多媒体子资源和所述第二类型多媒体子资源的所述第二播放场景；或者，
在所述第一多媒体资源包括第一类型多媒体子资源和所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第二切换指令，其中，所述第二切换指令用于将所述第一播放场景切换为允许播放所述第一类型多媒体子资源，且不允许播放所述第二类型多媒体子资源的所述第二播放场景。
作为一种可选的方案，所述装置用于通过如下方式在第一播放场景中播放第一多媒体资源：
从服务器通过所述第一线路获取所述第一时间戳对应的所述第一多媒体资源，并存储在预分配的第一缓冲区，其中，所述第一多媒体资源的获取速度与所述第一缓冲区的存储量呈正相关；
从所述第一缓冲区中读取并播放所述第一多媒体资源。
作为一种可选的方案，
所述装置用于通过如下方式响应于所述目标切换指令，通过第二线路获取目标多媒体子资源：从服务器通过所述第二线路获取所述第二时间戳对应的所述目标多媒体子资源，并存储在预分配的第二缓冲区，其中，所述目标多媒体子资源的获取速度与所述第二缓冲区的存储量呈正相关；
所述装置用于通过如下方式在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源：在所述第一时间戳与所述第二时间戳相同的情况下，从所述第二缓冲区中读取所述目标多媒体子资源，并播放所述目标多媒体子资源。
作为一种可选的方案，所述装置还用于：
在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源之前，在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳。
作为一种可选的方案，所述装置用于通过如下方式在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳：
在所述第一时间戳大于所述第二时间戳的情况下，降低所述目标多媒体子资源的获取速度，并保持从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳；
在所述第一时间戳小于所述第二时间戳的情况下，提高所述目标多媒体子资源的获取速度，并停止从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
作为一种可选的方案，所述装置还用于：
在从所述第二缓冲区中读取所述目标多媒体子资源之后，在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，根据所述目标多媒体子资源获取所述第二多媒体资源中包括的所述第二类型多媒体子资源；
同时播放所述目标多媒体子资源和所述第二类型多媒体子资源。
根据本发明实施例的又一个方面，还提供了一种用于实施上述多媒体资源的同步方法的电子设备，该电子设备可以是图1所示的终端设备或服务器。本实施例以该电子设备为终端设备为例来说明。如图8所示，该电子设备包括存储器802和处理器804，该存储器802中存储有计算机程序，该处理器804被设置为通过计算机程序执行上述任一项方法实施例中的步骤。
可选地，在本实施例中，上述电子设备可以位于计算机网络的多个网络设备中的至少一个网络设备。
可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，在目标播放应用的第一播放场景中播放第一多媒体资源，其中，第一多媒体资源通过第一线路获取，第一多媒体资源的渲染时间戳为第一时间戳；
S2，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源；
S3，响应于目标切换指令，通过第二线路获取目标多媒体子资源，其中，目标多媒体子资源为第二多媒体资源中包括的第一类型多媒体子资源，目标多媒体子资源的渲染时间戳为第二时间戳，第一线路与第二线路不同；
S4，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。
可选地，本领域普通技术人员可以理解，图8所示的结构仅为示意，电子装置电子设备也可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices，MID)、PAD等终端设备。图8其并不对上述电子装置电子设备的结构造成限定。例如，电子装置电子设备还可包括比图8中所示更多或者更少的组件(如网络接口等)，或者具有与图8所示不同的配置。
其中，存储器802可用于存储软件程序以及模块，如本发明实施例中的多媒体资源的同步方法和装置对应的程序指令/模块，处理器804通过运行存储在存储器802内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的多媒体资源的同步方法。存储器802可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器802可进一步包括相对于处理器804远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。其中，存储器802具体可以但不限于用于存储多媒体资源等信息。作为一种示例，如图8所示，上述存储器802中可以但不限于包括上述多媒体资源的同步装置中的第一播放模块702、第一获取模块704、第二获取模块706以及第二播放模块708。此外，还可以包括但不限于上述多媒体资源的同步装置中的其他模块单元，本示例中不再赘述。
可选地，上述的传输装置806用于经由一个网络接收或者发送数据。上述的网络具体实例可包括有线网络及无线网络。在一个实例中，传输装置806包括一个网络适配器(Network Interface Controller，NIC)，其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中，传输装置806为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
此外，上述电子设备还包括：显示器808，用于显示上述多媒体资源；和连接总线810，用于连接上述电子设备中的各个模块部件。
在其他实施例中，上述终端设备或者服务器可以是一个分布式系统中的一个节点，其中，该分布式系统可以为区块链系统，该区块链系统可以是由该多个节点通过网络通信的形式连接形成的分布式系统。其中，节点之间可以组成点对点(P2P，Peer To Peer)网络，任意形式的计算设备，比如服务器、终端等电子设备都可以通过加入该点对点网络而成为该区块链系统中的一个节点。
根据本申请的一个方面，提供了一种计算机可读存储介质，计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述多媒体资源的同步方面的各种可选实现方式中提供的多媒体资源的同步方法。
可选地，在本实施例中，上述计算机可读存储介质可以被设置为存储用于执行以下步骤的计算机程序：
S1，在目标播放应用的第一播放场景中播放第一多媒体资源，其中，第一多媒体资源通过第一线路获取，第一多媒体资源的渲染时间戳为第一时间戳；
S2，在目标播放应用的显示界面中获取目标切换指令，其中，目标切换指令用于将第一播放场景切换为第二播放场景，第二播放场景用于播放第二多媒体资源，第一多媒体资源与第二多媒体资源均包括第一类型多媒体子资源，第一多媒体资源与第二多媒体资源其中之一包括第二类型多媒体子资源；
S3，响应于目标切换指令，通过第二线路获取目标多媒体子资源，其中，目标多媒体子资源为第二多媒体资源中包括的第一类型多媒体子资源，目标多媒体子资源的渲染时间戳为第二时间戳，第一线路与第二线路不同；
S4，在第一时间戳与第二时间戳相同的情况下，在目标播放应用的第二播放场景中播放第二多媒体资源。
可选地，在本实施例中，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(Random Access Memory，RAM)、磁盘或光盘等。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种多媒体资源的同步方法，其特征在于，包括：
在所述目标播放应用的第一播放场景中播放第一多媒体资源，其中，所述第一多媒体资源通过第一线路获取，所述第一多媒体资源的渲染时间戳为第一时间戳；
在所述目标播放应用的显示界面中获取目标切换指令，其中，所述目标切换指令用于将所述第一播放场景切换为第二播放场景，所述第二播放场景用于播放第二多媒体资源，所述第一多媒体资源与所述第二多媒体资源均包括第一类型多媒体子资源，所述第一多媒体资源与所述第二多媒体资源其中之一包括第二类型多媒体子资源；
响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，其中，所述目标多媒体子资源为所述第二多媒体资源中包括的所述第一类型多媒体子资源，所述目标多媒体子资源的渲染时间戳为第二时间戳，所述第一线路与所述第二线路不同；
在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源。
2.根据权利要求1所述的方法，其特征在于，在所述目标播放应用的显示界面中获取目标切换指令，包括：
在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第一切换指令，其中，所述第一切换指令用于将所述第一播放场景切换为允许同时播放所述第一类型多媒体子资源和所述第二类型多媒体子资源的所述第二播放场景；或者，
在所述第一多媒体资源包括第一类型多媒体子资源和所述第二类型多媒体子资源的情况下，在所述目标播放应用的显示界面中获取第二切换指令，其中，所述第二切换指令用于将所述第一播放场景切换为允许播放所述第一类型多媒体子资源，且不允许播放所述第二类型多媒体子资源的所述第二播放场景。
3.根据权利要求1所述的方法，其特征在于，在第一播放场景中播放第一多媒体资源，包括：
从服务器通过所述第一线路获取所述第一时间戳对应的所述第一多媒体资源，并存储在预分配的第一缓冲区，其中，所述第一多媒体资源的获取速度与所述第一缓冲区的存储量呈正相关；
从所述第一缓冲区中读取并播放所述第一多媒体资源。
4.根据权利要求3所述的方法，其特征在于，
响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，包括：从服务器通过所述第二线路获取所述第二时间戳对应的所述目标多媒体子资源，并存储在预分配的第二缓冲区，其中，所述目标多媒体子资源的获取速度与所述第二缓冲区的存储量呈正相关；
在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源，包括：在所述第一时间戳与所述第二时间戳相同的情况下，从所述第二缓冲区中读取所述目标多媒体子资源，并播放所述目标多媒体子资源。
5.根据权利要求1所述的方法，其特征在于，在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源之前，所述方法还包括：
比对所述第一时间戳和所述第二时间戳；
在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳。
6.根据权利要求5所述的方法，其特征在于，在所述第一时间戳与所述第二时间戳不同的情况下，调整所述第一多媒体资源或所述目标多媒体子资源的获取速度，直至存在相同的所述第一时间戳与所述第二时间戳，包括：
在所述第一时间戳大于所述第二时间戳的情况下，降低所述目标多媒体子资源的获取速度，并保持从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳；
在所述第一时间戳小于所述第二时间戳的情况下，提高所述目标多媒体子资源的获取速度，并停止从所述第一线路获取所述第一多媒体资源，直至存在相同的所述第一时间戳与所述第二时间戳。
7.根据权利要求4所述的方法，其特征在于，在从所述第二缓冲区中读取所述目标多媒体子资源之后，所述方法还包括：
在所述第一多媒体资源包括第一类型多媒体子资源，且不包括所述第二类型多媒体子资源的情况下，根据所述目标多媒体子资源获取所述第二多媒体资源中包括的所述第二类型多媒体子资源；
同时播放所述目标多媒体子资源和所述第二类型多媒体子资源。
8.一种多媒体资源的同步装置，其特征在于，包括：
第一播放模块，用于在所述目标播放应用的第一播放场景中播放第一多媒体资源，其中，所述第一多媒体资源通过第一线路获取，所述第一多媒体资源的渲染时间戳为第一时间戳；
第一获取模块，用于在所述目标播放应用的显示界面中获取目标切换指令，其中，所述目标切换指令用于将所述第一播放场景切换为
第二播放场景，所述第二播放场景用于播放第二多媒体资源，所述第一多媒体资源与所述第二多媒体资源均包括第一类型多媒体子资源，所述第一多媒体资源与所述第二多媒体资源其中之一包括第二类型多媒体子资源；
第二获取模块，用于响应于所述目标切换指令，通过第二线路获取目标多媒体子资源，其中，所述目标多媒体子资源为所述第二多媒体资源中包括的所述第一类型多媒体子资源，所述目标多媒体子资源的渲染时间戳为第二时间戳，所述第一线路与所述第二线路不同；
第二播放模块，用于在所述第一时间戳与所述第二时间戳相同的情况下，在所述目标播放应用的所述第二播放场景中播放所述第二多媒体资源。
9.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序可被终端设备或计算机运行时执行所述权利要求1至7任一项中所述的方法。
10.一种电子设备，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行所述权利要求1至7任一项中所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111434659.4A CN114125576A (zh) | 2021-11-29 | 2021-11-29 | 多媒体资源的同步方法和装置、存储介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111434659.4A CN114125576A (zh) | 2021-11-29 | 2021-11-29 | 多媒体资源的同步方法和装置、存储介质及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114125576A true CN114125576A (zh) | 2022-03-01 |
Family
ID=80371269
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111434659.4A Pending CN114125576A (zh) | 2021-11-29 | 2021-11-29 | 多媒体资源的同步方法和装置、存储介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114125576A (zh) |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103024490A (zh) * | 2012-12-26 | 2013-04-03 | 北京奇艺世纪科技有限公司 | 一种支持音频和视频独立播放的方法及设备 |
| US20140156864A1 (en) * | 2012-12-05 | 2014-06-05 | Industrial Technology Research Institute | Multimedia stream buffer and output method and multimedia stream buffer module |
| US20150213839A1 (en) * | 2014-01-29 | 2015-07-30 | Google Inc. | Media application backgrounding |
| CN105657579A (zh) * | 2015-10-29 | 2016-06-08 | 乐视致新电子科技（天津）有限公司 | 直播音频切换方法、流媒体服务器及客户端 |
| CN109495760A (zh) * | 2018-12-25 | 2019-03-19 | 虎扑（上海）文化传播股份有限公司 | 一种多组摄像头同步直播的方法 |
| CN110248240A (zh) * | 2019-06-11 | 2019-09-17 | 北京达佳互联信息技术有限公司 | 视频的播放方法、装置、电子设备及存储介质 |
| US20190364346A1 (en) * | 2018-05-24 | 2019-11-28 | Google Llc | Methods, systems, and media for synchronizing audio and video content on multiple media devices |
| CN110933517A (zh) * | 2019-11-30 | 2020-03-27 | 咪咕视讯科技有限公司 | 码率切换方法、客户端和计算机可读存储介质 |
| CN111246178A (zh) * | 2020-02-05 | 2020-06-05 | 浙江大华技术股份有限公司 | 视频处理方法和装置、存储介质及电子装置 |
| CN111277885A (zh) * | 2020-03-09 | 2020-06-12 | 北京三体云时代科技有限公司 | 音视频同步方法、装置、服务器和计算机可读存储介质 |
| CN111510755A (zh) * | 2019-01-30 | 2020-08-07 | 上海哔哩哔哩科技有限公司 | 音视频的切换方法、装置、计算机设备及可读存储介质 |
| CN112738607A (zh) * | 2020-12-29 | 2021-04-30 | 广州酷狗计算机科技有限公司 | 播放方法、装置、设备及存储介质 |
| CN112866794A (zh) * | 2019-11-12 | 2021-05-28 | 腾讯科技（深圳）有限公司 | 一种音轨切换方法及设备 |
| CN113225599A (zh) * | 2021-07-08 | 2021-08-06 | 苏州华兴源创科技股份有限公司 | 多通道数据传输的调整方法和调整装置 |
-
2021
- 2021-11-29 CN CN202111434659.4A patent/CN114125576A/zh active Pending
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140156864A1 (en) * | 2012-12-05 | 2014-06-05 | Industrial Technology Research Institute | Multimedia stream buffer and output method and multimedia stream buffer module |
| CN103024490A (zh) * | 2012-12-26 | 2013-04-03 | 北京奇艺世纪科技有限公司 | 一种支持音频和视频独立播放的方法及设备 |
| US20150213839A1 (en) * | 2014-01-29 | 2015-07-30 | Google Inc. | Media application backgrounding |
| CN105657579A (zh) * | 2015-10-29 | 2016-06-08 | 乐视致新电子科技（天津）有限公司 | 直播音频切换方法、流媒体服务器及客户端 |
| US20190364346A1 (en) * | 2018-05-24 | 2019-11-28 | Google Llc | Methods, systems, and media for synchronizing audio and video content on multiple media devices |
| CN109495760A (zh) * | 2018-12-25 | 2019-03-19 | 虎扑（上海）文化传播股份有限公司 | 一种多组摄像头同步直播的方法 |
| CN111510755A (zh) * | 2019-01-30 | 2020-08-07 | 上海哔哩哔哩科技有限公司 | 音视频的切换方法、装置、计算机设备及可读存储介质 |
| CN110248240A (zh) * | 2019-06-11 | 2019-09-17 | 北京达佳互联信息技术有限公司 | 视频的播放方法、装置、电子设备及存储介质 |
| CN112866794A (zh) * | 2019-11-12 | 2021-05-28 | 腾讯科技（深圳）有限公司 | 一种音轨切换方法及设备 |
| CN110933517A (zh) * | 2019-11-30 | 2020-03-27 | 咪咕视讯科技有限公司 | 码率切换方法、客户端和计算机可读存储介质 |
| CN111246178A (zh) * | 2020-02-05 | 2020-06-05 | 浙江大华技术股份有限公司 | 视频处理方法和装置、存储介质及电子装置 |
| CN111277885A (zh) * | 2020-03-09 | 2020-06-12 | 北京三体云时代科技有限公司 | 音视频同步方法、装置、服务器和计算机可读存储介质 |
| CN112738607A (zh) * | 2020-12-29 | 2021-04-30 | 广州酷狗计算机科技有限公司 | 播放方法、装置、设备及存储介质 |
| CN113225599A (zh) * | 2021-07-08 | 2021-08-06 | 苏州华兴源创科技股份有限公司 | 多通道数据传输的调整方法和调整装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11417341B2 (en) | Method and system for processing comment information | |
| CN111277869B (zh) | 视频播放方法、装置、设备和存储介质 | |
| CN104159151A (zh) | 一种在ott盒子上进行视频截取并处理的装置及方法 | |
| CN113965811A (zh) | 播放控制方法和装置、存储介质及电子装置 | |
| CN104869467A (zh) | 媒体播放中的信息输出方法、装置和系统 | |
| JP2011234301A (ja) | コンテンツ再生装置、制御情報提供サーバ、及びコンテンツ再生システム | |
| US11706496B2 (en) | Echo bullet screen | |
| CN105357562A (zh) | 一种信息处理方法及终端 | |
| CN107707972B (zh) | 用于屏幕共享的数据处理方法、装置、系统及电子设备 | |
| CN108200444B (zh) | 一种视频直播的方法、装置和系统 | |
| CN112752109A (zh) | 视频播放控制方法和系统 | |
| CN204013943U (zh) | 一种在ott盒子上进行视频截取并处理的装置 | |
| US20240107087A1 (en) | Server, terminal and non-transitory computer-readable medium | |
| CN108337556B (zh) | 用于播放影音文件的方法和装置 | |
| KR101922968B1 (ko) | Vr 콘텐츠에 대한 라이브 스트리밍 방법 및 시스템 | |
| CN109348240A (zh) | 视频播放方法、装置及系统、电子设备以及存储介质 | |
| CN111803924B (zh) | 云游戏的多终端同步显示方法、装置及可读存储介质 | |
| CN114513506A (zh) | 业务处理方法、接入边缘云服务器及业务处理系统 | |
| CN114666565B (zh) | 多视角视频播放方法、装置及存储介质 | |
| CN108322793A (zh) | 一种共享视频播放方法、装置及电子设备 | |
| KR101915065B1 (ko) | Vr 콘텐츠에 대한 라이브 스트리밍 시스템 및 그 시스템의 동작 방법 | |
| CN109547830B (zh) | 一种用于多个虚拟现实设备的同步播放的方法与装置 | |
| US11765442B2 (en) | Information processing apparatus, information processing method, and program for presenting reproduced video including service object and adding additional image indicating the service object | |
| KR101922970B1 (ko) | Vr 콘텐츠에 대한 라이브 스트리밍 방법 및 시스템 | |
| CN114125576A (zh) | 多媒体资源的同步方法和装置、存储介质及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |