CN110324689B - 音视频同步播放的方法、装置、终端及存储介质 - Google Patents
音视频同步播放的方法、装置、终端及存储介质 Download PDFInfo
- Publication number
- CN110324689B CN110324689B CN201910609644.3A CN201910609644A CN110324689B CN 110324689 B CN110324689 B CN 110324689B CN 201910609644 A CN201910609644 A CN 201910609644A CN 110324689 B CN110324689 B CN 110324689B
- Authority
- CN
- China
- Prior art keywords
- video
- audio
- clip
- clock
- player
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000001360 synchronised effect Effects 0.000 title claims description 64
- 230000008569 process Effects 0.000 claims abstract description 13
- 238000004590 computer program Methods 0.000 claims description 8
- 230000002093 peripheral effect Effects 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 230000011218 segmentation Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000000919 ceramic Substances 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请公开了一种音视频的同步播放方法、装置、终端及存储介质，属于终端技术领域。该方法包括：通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放；在播放的过程中，获取音频片段的当前播放进度和视频片段的当前播放进度；当音频片段的当前播放进度与视频片段的当前播放进度不同步时，以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟，以实现音频片段与视频片段的同步播放。本申请可以在音视频不同步时，可以以一个播放器的时钟为基准时钟调整另一个播放器的时钟，从而实现音视频的同步播放，提升了用户体验及用户粘度。
Description
技术领域
本申请涉及终端技术领域，特别涉及一种音视频同步播放的方法、装置、终端及存储介质。
背景技术
随着网络信息技术的成熟，终端中越来越多的功能被不断扩展并逐渐融入人们的日常生活中，比如，用户可以通过终端录制各种小视频并将录制的小视频通过网络进行分享，此类小视频通常都是音频数据与视频画面同时进行录制的。但是，有时候为了丰富小视频的内容，终端可以只录制视频画面，然后再将录制的视频画面与其他的音频数据同时进行播放，从而实现音视频的同步播放。
但是，有时候在播放录制的视频画面和其他的音频数据时，由于其他的音频数据与视频画面相互独立，通常需要通过视频播放器播放视频画面，通过音频播放器播放其他的音频数据，当在播放过程中，可能会因解码问题或网络问题导致播放的视频画面与音频数据不同步，从而影响用户体验，降低了用户粘度。
发明内容
本申请提供了一种音视频的同步播放方法、装置、终端及存储介质，用于解决相关技术中音视频易发生时钟不同步，导致影响用户体验、用户粘度降低的问题。所述技术方案如下：
一方面，提供了一种音视频的同步播放方法，其特征在于，所述方法包括：
通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放，所述视频片段与所述音频片段独立且存在时钟同步关系；
在播放的过程中，获取所述音频片段的当前播放进度和所述视频片段的当前播放进度；
当所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步时，以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟，以实现所述音频片段与所述视频片段的同步播放。
在一些实施例中，所述获取所述音频片段的当前播放进度和所述视频片段的当前播放进度之后，还包括：
确定所述视频片段的参考播放进度，所述视频片段的参考播放进度与所述音频片段的当前播放进度时钟同步；
当所述视频片段的当前播放进度与所述视频片段的参考播放进度不相同时，确定所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步。
在一些实施例中，所述以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，包括：
将所述视频片段的参考播放进度发送至所述视频播放器；
通过所述视频播放器将所述视频片段的当前播放进度调整为所述视频片段的参考播放进度。
在一些实施例中，所述以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟之后，还包括：
当所述音频片段在进行音视频同步后的预设时长内未播放完毕时，执行所述获取所述音频片段的当前播放进度和所述视频片段的当前播放进度的操作，直至所述音频片段播放完毕。
在一些实施例中，所述通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放之前，还包括：
获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，所述至少一个音频片段为对所述音频数据按照分段规则进行分段得到的至少一个音频片段，所述至少一个视频片段与所述至少一个音频片段一一对应，且所述至少一个视频片段与各自对应的音频片段时钟同步。
在一些实施例中，所述获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息之前，还包括：
当接收到音频获取指令时，显示提示信息，所述提示信息用于提示是否获取与所述音频数据对应的视频片段。
另一方面，提供了一种音视频的同步播放装置，所述装置包括：
播放模块，用于通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放，所述视频片段与所述音频片段独立且存在时钟同步关系；
第一获取模块，用于在播放的过程中，获取所述音频片段的当前播放进度和所述视频片段的当前播放进度；
调整模块，用于当所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步时，以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟，以实现所述音频片段与所述视频片段的同步播放。
在一些实施例中，所述装置还包括：
第一确定模块，用于确定所述视频片段的参考播放进度，所述视频片段的参考播放进度与所述音频片段的当前播放进度时钟同步；
第二确定模块，用于当所述视频片段的当前播放进度与所述视频片段的参考播放进度不相同时，确定所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步。
在一些实施例中，所述调整模块包括：
发送子模块，用于将所述视频片段的参考播放进度发送至所述视频播放器；
调整子模块，用于通过所述视频播放器将所述视频片段的当前播放进度调整为所述视频片段的参考播放进度。
在一些实施例中，所述装置还包括：
触发模块，用于当所述音频片段在进行音视频同步后的预设时长内未播放完毕时，触发所述第一获取模块获取所述音频片段的当前播放进度和所述视频片段的当前播放进度，直至所述音频片段播放完毕。
在一些实施例中，所述装置还包括：
第二获取模块，用于获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，所述至少一个音频片段为对所述音频数据按照分段规则进行分段得到的至少一个音频片段，所述至少一个视频片段与所述至少一个音频片段一一对应，且所述至少一个视频片段与各自对应的音频片段时钟同步。
在一些实施例中，所述装置还包括：
显示模块，用于当接收到音频获取指令时，显示提示信息，所述提示信息用于提示是否获取与所述音频数据对应的视频片段。
另一方面，提供了一种计算机可读存储介质，所述存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述提供的音视频的同步播放方法。
另一方面，提供了一种终端，所述终端包括：
处理器；
用于存储处理器可执行的指令的存储器；
其中，所述处理器被配置为执行所述指令以执行上述提供的音视频的同步播放方法的步骤。
另一方面，提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述提供的音视频的同步播放方法的步骤。
本申请提供的技术方案带来的有益效果至少可以包括：
本申请中，可以在通过安装的音频播放器播放音频片段以及通过安装的视频播放器播放的视频片段时，确定音频片段的当前播放进度是否与视频片段的当前播放进度时钟同步，当不同步时，可以以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟。由于可以通过一个播放器的时钟调整另一个播放器的时钟，从而实现了播放器之间的时钟同步，保证在通过不同播放器分别播放音频片段及视频片段，音视频的同步播放，改善了音视频不同步问题，提升了用户体验，提高了用户粘度。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种音视频的同步播放方法流程图；
图2是本申请实施例提供的另一种音视频的同步播放方法流程图；
图3是本申请实施例提供的一种音视频的同步播放装置结构示意图；
图4是本申请实施例提供的另一种音视频的同步播放装置结构示意图；
图5是本申请实施例提供的一种调整模块的结构示意图；
图6是本申请实施例提供的另一种音视频的同步播放装置结构示意图；
图7是本申请实施例提供的另一种音视频的同步播放装置结构示意图；
图8是本申请实施例提供的另一种音视频的同步播放装置结构示意图；
图9是本申请实施例提供的一种终端的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
在对本申请实施例进行详细的解释说明之前，先对本申请实施例中涉及到的应用场景进行解释说明。
随着互联网发展，终端功能越来越多，比如，用户可以通过终端观看各种各样的视频，这些视频可以是通过视频播放器播放的视频，其中，视频播放器可以将视频的视频画面和音频数据进行解码，然后播放视频画面和音频数据。当然，这些视频也可以是通过视频播放器播放视频画面，通过音频播放器播放音频数据的视频。比如，当某用户在录制视频后，发现视频画面与录制的音频数据较为无趣，为了丰富视频的内容，还可以为录制的视频画面同步其他的音频数据。当其他用户获取到该视频画面和音频数据后，由于其他的音频数据与视频画面相互独立，通常需要通过视频播放器播放视频画面，通过音频播放器播放其他的音频数据。当通过视频播放器播放视频画面，通过音频播放器播放音频数据时，由于两个播放器为独立的播放器，相互之间的时钟并不统一，为了实现音视频的同步播放，终端通常需要将视频画面与音频数据同时进行播放。但是，由于两个播放器相互独立，当其中一个播放器因解码问题或网络问题导致播放出现卡顿时，可能会导致视频画面与音频数据不同步，从而导致用户体验不好，降低用户粘度。
又比如，用户可以通过终端安装的音频播放器播放音频数据，同时播放与该音频数据关联的视频数据，该视频数据可以是与音频数据相关的视频数据，也可以是与音频数据不相关的视频数据，以提高音视频播放的丰富性，提高用户体验。作为一个示例，与音频数据相关的视频数据可以是音频数据对应的MV(Music Video，音乐短片)、演唱视频、演唱会片段等，本申请实施例对此不作限定。服务器或终端可以预先存储音频数据与视频数据的关联关系，当用户通过终端的音频播放器播放音频数据时，根据音频数据与视频数据的关联关系，获取与音频数据对应视频数据进行播放，并且由音频播放器对音频数据进行解码，由视频播放器对视频数据进行解码。进一步地，音频数据可以包括多个音频片段，每个音频片段可以对应一个视频片段，当音频播放器播放音频片段时，视频播放器播放对应的视频片段。由于音频播放器和视频播放器为独立的播放器，相互之间的时钟并不统一，并且当其中一个播放器因解码问题或网络问题导致播放出现卡顿时，可能会导致视频画面与音频数据不同步的情况，从而导致用户体验不好，降低用户粘度。
基于这样的应用场景，本申请提供了一种提高用户粘度的音视频的同步播放方法。
在对本申请实施例的应用场景进行介绍之后，接下来将结合附图对本申请实施例提供的音视频的同步播放方法进行详细介绍。
图1为本申请实施例提供的一种音视频的同步播放方法的流程图，参见图1，该方法应用于终端中，包括如下步骤。
步骤101：通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放，该视频片段与该音频片段独立且存在时钟同步关系。
步骤102：在播放的过程中，获取该音频片段的当前播放进度和该视频片段的当前播放进度。
步骤103：当该音频片段的当前播放进度与该视频片段的当前播放进度不同步时，以该音频播放器的时钟为基准时钟调整该视频播放器的时钟，或者，以该视频播放器的时钟为基准时钟调整该音频播放器的时钟，以实现该音频片段与该视频片段的同步播放。
本申请中，可以在通过安装的音频播放器播放音频片段以及通过安装的视频播放器播放的视频片段时，确定音频片段的当前播放进度是否与视频片段的当前播放进度时钟同步，当不同步时，可以以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟。由于可以通过一个播放器的时钟调整另一个播放器的时钟，从而实现了不同播放器之间的时钟同步，保证在通过不同播放器分别播放音频片段及视频片段时，音视频的同步播放，改善了音视频不同步问题，提升了用户体验，提高了用户粘度。
在一些实施例中，获取该音频片段的当前播放进度和该视频片段的当前播放进度之后，还包括：
确定该视频片段的参考播放进度，该视频片段的参考播放进度与该音频片段的当前播放进度时钟同步；
当该视频片段的当前播放进度与该视频片段的参考播放进度不相同时，确定该音频片段的当前播放进度与该视频片段的当前播放进度不同步。
在一些实施例中，以该音频播放器的时钟为基准时钟调整该视频播放器的时钟，包括：
将该视频片段的参考播放进度发送至该视频播放器；
通过该视频播放器将该视频片段的当前播放进度调整为该视频片段的参考播放进度。
在一些实施例中，以该音频播放器的时钟为基准时钟调整该视频播放器的时钟，或者，以该视频播放器的时钟为基准时钟调整该音频播放器的时钟之后，还包括：
当该音频片段在进行音视频同步后的预设时长内未播放完毕时，执行该获取该音频片段的当前播放进度和该视频片段的当前播放进度的操作，直至该音频片段播放完毕。
在一些实施例中，通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放之前，还包括：
获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，该至少一个音频片段为对该音频数据按照分段规则进行分段得到的至少一个音频片段，该至少一个视频片段与该至少一个音频片段一一对应，且该至少一个视频片段与各自对应的音频片段时钟同步。
在一些实施例中，获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息之前，还包括：
当接收到音频获取指令时，显示提示信息，该提示信息用于提示是否获取与该音频数据对应的视频片段。
上述所有可选技术方案，均可按照任意结合形成本申请的可选实施例，本申请实施例对此不再一一赘述。
图2为本申请实施例提供的一种音视频的同步播放方法的流程图，参见图2，该方法包括如下步骤。
步骤201：终端通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放，该视频片段与所述音频片段独立且存在时钟同步关系。
需要说明的是，终端可以提供短视频播放模式，在该模式下，终端可以通过音频播放器播放音频片段，并通过视频播放器播放视频片段，也可以通过音频播放器播放音频片段而不播放视频片段。该音频片段可以包括至少一个音频帧，视频片段可以包括至少一个视频帧，该至少一个视频帧即为至少一个视频画面，对至少一个视频帧进行播放就是对至少一个视频画面进行播放。
由于在播放视频时，播放的可能是录制的视频画面以及与录制的视频画面不相关的其他音频数据，并非在录制视频画面时一起录制进去的音频数据。因此，本申请实施例中，音频片段与视频片段相互独立是指音频片段并不是在录制视频片段时所录制进去的音频片段。
在一些实施例中，终端通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放之前，还可以获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，该至少一个音频片段为对该音频数据按照分段规则进行分段得到的至少一个音频片段，该至少一个视频片段与该至少一个音频片段一一对应，且该至少一个视频片段与各自对应的音频片段时钟同步。
相应地，当终端基于该音频数据接收到播放指令时，可以按照该音频数据的时钟顺序，通过该音频播放器播放该至少一个音频片段，并通过该视频播放器对应播放该至少一个视频片段中视频画面。
需要说明的是，终端可以从服务器或本地存储中获取音频数据、至少一个视频片段以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息。该播放指令用于播放音频数据，且该播放指令可以由用户通过指定操作触发，该指定操作可以为点击操作、滑动操作、语音操作等等。
由于终端可以通过音频播放器播放音频片段，通过视频播放器播放视频片段，说明音频片段与视频片段是相互独立的。为了在播放音频片段的过程中能够播放该音频片段对应的视频片段，当终端基于音频数据接收到播放指令时，不仅可以按照该音频数据的时钟顺序，通过该音频播放器播放该至少一个音频片段，还可以通过该视频播放器对应播放该至少一个视频片段。
由于至少一个音频片段为对音频数据按照分段规则进行分段得到的至少一个音频片段，也即是，音频数据中可以包括一个音频片段，也可以包括多个音频片段，每个音频片段可以对应一个视频片段。当音频数据中包括多个音频片段时，该多个音频片段可以对应多个视频片段，该多个视频片段之间可以存在关联关系，比如，多个视频片段的内容存在关联关系，多个视频片段为同一终端拍摄得到等等，或者，该多个视频片段也可以为相互不相关的视频片段。
需要说明的是，分段规则可以是按照音频数据的播放顺序将音频数据进行分段的规则，该分段规则可以包括将音频数据按照音频频率变化进行分割的规则，将音频数据划分为预设数量个音频片段的规则，按照预设播放时长划分音频数据的规则等等。比如，分段规则包括将音频数据划分为10个音频片段，按照30秒播放时长划分音频数据。
作为一种示例，终端在获取至少一个视频片段后，该至少一个视频片段中的任一视频片段中可能会包括至少一个视频帧和至少一个音频帧，该视频片段中包括的至少一个音频帧可以为在录制至少一个视频帧的同时所录制的音频帧。由于终端可以同时播放至少一个视频片段和音频数据中的至少一个音频片段，如果至少一个视频片段中的至少一个音频帧也随着视频片段的播放而播放，则播放过程中可能会存在两道不同的音频片段，从而对播放造成影响，进而影响用户体验，降低用户粘度。因此，终端在获取至少一个视频片段并通过视频播放器播放至少一个视频片段时，可以对视频片段中的视频帧进行解码得到至少一个视频帧，而不解码视频片段中的音频帧。
由于用户有时候可能是想听音乐，并不想观看与音乐对应的视频画面，因此，终端在获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息之前，还可以选择是否获取视频片段。
作为一种示例，当终端接收到音频获取指令时，可以显示提示信息，该提示信息用于提示是否获取与该音频数据对应的视频片段。当根据提示信息接收到确定获取指令时，获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息。当根据提示信息接收到取消获取指令时，获取音频数据，且不获取至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息。
需要说明的是，该音频获取指令可以是由用户通过指定操作作用在音频数据的标识、获取链接等位置时触发。
步骤202：终端在播放的过程中，获取该音频片段的当前播放进度和该视频片段的当前播放进度。
由于终端在通过音频播放器播放音频片段以及通过视频播放器播放视频片段时，音频播放器需要对音频片段进行解码，视频播放器需要对视频片段进行解码，当音频播放器转码时出现卡顿、解码错误等问题，或者视频播放器转码时出现卡段、解码处所等问题时，很可能会造成音频片段与视频片段的时钟不同步，从而影响用户体验，降低用户粘度。因此，为了保证能在音视频不同步时及时纠正时钟不同步问题，以提高用户粘度，终端可以在播放过程中，获取音频片段的当前播放进度和视频片段的当前播放进度。
作为一种示例，可以对音频片段中每个音频帧设置一个时间戳，并对视频片段中每个视频帧设置一个时间戳。终端获取音频片段的当前播放进度可以是获取音频片段中当前播放的音频帧的时间戳，获取视频片段的当前播放进度可以是获取视频片段中当前播放的视频帧的时间戳。或者，也可以对音频片段中每个音频帧进行编号，并对视频片段中每个视频帧进行编号，终端获取音频片段的当前播放进度可以是获取音频片段中当前播放的音频帧的编号，获取视频片段的当前播放进度可以是获取视频片段中当前播放的视频帧的编号。
步骤203：终端确定音频片段的当前播放进度与视频片段的当前播放进度是否同步。
由上述可知，终端在通过音频播放器播放音频片段并通过视频播放器播放视频片段时，可能会因各种原因导致解码出现问题，当音频播放器或视频播放器解码出现问题后，可能会时音频片段与视频片段不同步。因此，终端在获取音频片段的当前播放进度和视频片段的当前播放进度之后，可以确定音频片段的当前播放进度与视频片段的当前播放进度是否同步。
作为一种示例，终端确定音频片段的当前播放进度与视频片段的当前播放进度是否同步的操作可以为：确定视频片段的参考播放进度，该视频片段的参考播放进度与该音频片段的当前播放进度时钟同步；当该视频片段的当前播放进度与该视频片段的参考播放进度不相同时，确定该音频片段的当前播放进度与视频片段的当前播放进度不同步。当该视频片段的当前播放进度与该视频片段的参考播放进度相同时，确定该音频片段的当前播放进度与视频片段的当前播放进度同步。
由上述可知，终端可以获取音频片段与视频片段之间的时钟同步信息，因此，终端可以从时钟同步信息中获取视频片段的参考播放进度。
作为一种示例，终端不仅可以以上述方式确定音频片段的当前播放进度与视频片段的当前播放进度是否同步，终端还可以以其他方式确定。比如，终端还可以以视频片段的当前播放进度为参考，获取音频片段的参考播放进度，然后确定音频片段的当前播放进度是否与音频片段的参考播放进度相同，当相同时，确定该音频片段的当前播放进度与视频片段的当前播放进度同步。当不同时，确定该音频片段的当前播放进度与视频片段的当前播放进度不同步。
步骤204：当音频片段的当前播放进度与视频片段的当前播放进度不同步时，终端以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟，以实现音频片段与视频片段的同步播放。
由于当音频片段的当前播放进度与视频片段的当前播放进度不同步时，终端在播放音频片段和视频片段时，将会造成画面与声音的不同步，从而影响用户体验，降低用户粘度。因此，为了提高用户粘度，终端可以以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟，以实现音频片段与视频片段的同步播放。
需要说明的是，由于音频播放器可以用于播放音频片段，视频播放器可以用于播放视频片段，因此，以音频播放器的时钟为基准时钟调整视频播放器的时钟可以是指以音频片段的当前播放进度为基准时钟调整视频片段的播放进度。以视频播放器的时钟为基准调整音频播放器的时钟可以是指以视频片段的当前播放进度为基准时钟调整音频片段的播放进度。
作为一种示例，终端以音频播放器的时钟为基准时钟调整视频播放器的时钟的操作可以为：将视频片段的参考播放进度发送至视频播放器；通过视频播放器将视频片段的当前播放进度调整为视频片段的参考播放进度。
由上述可知，终端也可以获取音频片段的参考播放进度，因此，终端以视频播放器的时钟基准时钟调整视频播放器的时钟的操作可以为：将音频片段的参考播放进度发送至音频播放器；通过音频播放器将音频片段的当前播放进度调整为音频片段的参考播放进度。
在一些实施例中，由于音视频在时钟同步后，还是会因各种各样的原因再次出现不同步的情况，因此，终端需要周期性的检测音频片段与视频片段是否同步。也即是，当音频片段在进行音视频同步后的预设时长内未播放完毕时，可以返回步骤201的操作，直至音频片段播放完毕。
需要说明的是，该预设时长可以按照需求事先进行设置，比如，该预设时长可以为100ms(毫秒)、200ms等等。
由上述可知，终端获取的音频数据中可以包括一个或多个音频片段。当音频数据包括多个音频片段时，由于该多个音频片段分别对应一个视频片段，且当前音频片段播放完毕后，将会顺次播放下一个相邻的音频片段。因此，当音频片段在进行音视频同步后的预设时长内播放完毕后，可以播放下一个相邻的音频片段及下一个相邻的音频片段对应的视频片段，在播放下一个相邻的音频片段及对应的视频片段时，终端同样可以返回步骤201的操作，直至下一个相邻的音频片段播放完毕。
本申请中，终端可以在通过安装的音频播放器播放音频片段以及通过安装的视频播放器播放的视频片段时，确定音频片段的当前播放进度是否与视频片段的当前播放进度时钟同步，当不同步时，可以以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟。由于可以通过一个播放器的时钟调整另一个播放器的时钟，从而改善了相关技术中只能在视频播放器中同步音视频，而无法同步不同播放器时钟的情况，实现了不同播放器之间的时钟同步，保证了在通过不同播放器分别播放音频片段及视频片段时，音视频的同步播放，改善了音视频不同步问题，提升了用户体验，提高了用户粘度。
在对本申请实施例提供的一种音视频的同步播放方法进行解释说明之后，接下来，对本申请实施例提供的一种音视频的同步播放装置进行介绍。
图3是本公开实施例提供的一种音视频的同步播放装置的框图，参见图3，该装置可以由软件、硬件或者两者的结合实现。该装置包括：播放模块301、第一获取模块302和调整模块303。
播放模块301，用于通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器对视频片段中的视频画面进行解码并播放，所述视频片段与所述音频片段独立且存在时钟同步关系；
第一获取模块302，用于在播放的过程中，获取所述音频片段的当前播放进度和所述视频片段的当前播放进度；
调整模块303，用于当该音频片段的当前播放进度与该视频片段的当前播放进度不同步时，以该音频播放器的时钟为基准时钟调整该视频播放器的时钟，或者，以该视频播放器的时钟为基准时钟调整该音频播放器的时钟，以实现该音频片段与该视频片段的同步播放。
在一些实施例中，参见图4，该装置还包括：
第一确定模块304，用于确定该视频片段的参考播放进度，该参考播放进度与该音频片段的当前播放进度时钟同步；
第二确定模块305，用于当该视频片段的当前播放进度与该参考播放进度不相同时，确定该音频片段的当前播放进度与该视频片段的当前播放进度不同步。
在一些实施例中，参见图5，该调整模块303包括：
发送子模块3031，用于将该参考播放进度发送至该视频播放器；
调整子模块3032，用于通过该视频播放器将该视频片段的当前播放进度调整为该参考播放进度。
在一些实施例中，参见图6，该装置还包括：
触发模块306，用于当该音频片段在进行音视频同步后的预设时长内未播放完毕时，触发该第一获取模块获取该音频片段的当前播放进度和该视频片段的当前播放进度，直至该音频片段播放完毕。
在一些实施例中，参见图7，该装置还包括：
第二获取模块307，用于获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，该至少一个音频片段为对该音频数据按照分段规则进行分段得到的至少一个音频片段，该至少一个视频片段与该至少一个音频片段一一对应，且该至少一个视频片段与各自对应的音频片段时钟同步。
在一些实施例中，参见图8，该装置还包括：
显示模块308，用于当接收到音频获取指令时，显示提示信息，该提示信息用于提示是否获取与该音频数据对应的视频片段。
综上所述，本申请中，终端可以在通过安装的音频播放器播放音频片段以及通过安装的视频播放器播放的视频片段时，确定音频片段的当前播放进度是否与视频片段的当前播放进度时钟同步，当不同步时，可以以音频播放器的时钟为基准时钟调整视频播放器的时钟，或者，以视频播放器的时钟为基准时钟调整音频播放器的时钟。由于可以通过一个播放器的时钟调整另一个播放器的时钟，从而改善了相关技术中只能在视频播放器中同步音视频，而无法同步不同播放器时钟的情况，实现了不同播放器之间的时钟同步，保证了在通过不同播放器分别播放音频片段及视频片段时，音视频的同步播放，改善了音视频不同步问题，提升了用户体验，提高了用户粘度。
需要说明的是：上述实施例提供的音视频的同步播放装置在同步音视频时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的音视频的同步播放装置与音视频的同步播放方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图9示出了本申请一个示例性实施例提供的终端900的结构框图。该终端900可以是：智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio Layer III，动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio LayerIV，动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端900还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常，终端900包括有：处理器901和存储器902。
处理器901可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器901可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器901也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器901可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器901还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器902可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器902还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器902中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器901所执行以实现本申请中方法实施例提供的音视频的同步播放方法。
在一些实施例中，终端900还可选包括有：外围设备接口903和至少一个外围设备。处理器901、存储器902和外围设备接口903之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口903相连。具体地，外围设备包括：射频电路904、显示屏905、摄像头组件906、音频电路907、定位组件908和电源909中的至少一种。
外围设备接口903可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器901和存储器902。在一些实施例中，处理器901、存储器902和外围设备接口903被集成在同一芯片或电路板上；在一些其他实施例中，处理器901、存储器902和外围设备接口903中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
射频电路904用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路904通过电磁信号与通信网络以及其他通信设备进行通信。射频电路904将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路904包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路904可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路904还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。
显示屏905用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏905是触摸显示屏时，显示屏905还具有采集在显示屏905的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器901进行处理。此时，显示屏905还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏905可以为一个，设置终端900的前面板；在另一些实施例中，显示屏905可以为至少两个，分别设置在终端900的不同表面或呈折叠设计；在再一些实施例中，显示屏905可以是柔性显示屏，设置在终端900的弯曲表面上或折叠面上。甚至，显示屏905还可以设置成非矩形的不规则图形，也即异形屏。显示屏905可以采用LCD(LiquidCrystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件906用于采集图像或视频。可选地，摄像头组件906包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件906还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
音频电路907可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器901进行处理，或者输入至射频电路904以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端900的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器901或射频电路904的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路907还可以包括耳机插孔。
定位组件908用于定位终端900的当前地理位置，以实现导航或LBS(LocationBased Service，基于位置的服务)。定位组件908可以是基于美国的GPS(GlobalPositioning System，全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源909用于为终端900中的各个组件进行供电。电源909可以是交流电、直流电、一次性电池或可充电电池。当电源909包括可充电电池时，该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中，终端900还包括有一个或多个传感器910。该一个或多个传感器910包括但不限于：加速度传感器911、陀螺仪传感器912、压力传感器913、指纹传感器914、光学传感器915以及接近传感器916。
加速度传感器911可以检测以终端900建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器911可以用于检测重力加速度在三个坐标轴上的分量。处理器901可以根据加速度传感器911采集的重力加速度信号，控制显示屏905以横向视图或纵向视图进行用户界面的显示。加速度传感器911还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器912可以检测终端900的机体方向及转动角度，陀螺仪传感器912可以与加速度传感器911协同采集用户对终端900的3D动作。处理器901根据陀螺仪传感器912采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器913可以设置在终端900的侧边框和/或显示屏905的下层。当压力传感器913设置在终端900的侧边框时，可以检测用户对终端900的握持信号，由处理器901根据压力传感器913采集的握持信号进行左右手识别或快捷操作。当压力传感器913设置在显示屏905的下层时，由处理器901根据用户对显示屏905的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器914用于采集用户的指纹，由处理器901根据指纹传感器914采集到的指纹识别用户的身份，或者，由指纹传感器914根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器901授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器914可以被设置终端900的正面、背面或侧面。当终端900上设置有物理按键或厂商Logo时，指纹传感器914可以与物理按键或厂商Logo集成在一起。
光学传感器915用于采集环境光强度。在一个实施例中，处理器901可以根据光学传感器915采集的环境光强度，控制显示屏905的显示亮度。具体地，当环境光强度较高时，调高显示屏905的显示亮度；当环境光强度较低时，调低显示屏905的显示亮度。在另一个实施例中，处理器901还可以根据光学传感器915采集的环境光强度，动态调整摄像头组件906的拍摄参数。
接近传感器916，也称距离传感器，通常设置在终端900的前面板。接近传感器916用于采集用户与终端900的正面之间的距离。在一个实施例中，当接近传感器916检测到用户与终端900的正面之间的距离逐渐变小时，由处理器901控制显示屏905从亮屏状态切换为息屏状态；当接近传感器916检测到用户与终端900的正面之间的距离逐渐变大时，由处理器901控制显示屏905从息屏状态切换为亮屏状态。
也即是，本申请实施例不仅提供了一种终端，包括处理器和用于存储处理器可执行指令的存储器，其中，处理器被配置为执行图1和图2所示的实施例中的方法，而且，本申请实施例还提供了一种计算机可读存储介质，该存储介质内存储有计算机程序，该计算机程序被处理器执行时可以实现图1和图2所示的实施例中的音视频的同步播放方法。
本领域技术人员可以理解，图9中示出的结构并不构成对终端900的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本申请的较佳实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。
Claims (10)
1.一种音视频的同步播放方法，其特征在于，所述方法应用于终端中，所述终端支持短视频播放模式，所述方法包括：
获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，所述至少一个音频片段为对所述音频数据按照音频频率变化进行分段得到的至少一个音频片段，所述至少一个视频片段与所述至少一个音频片段一一对应，且所述至少一个视频片段与各自对应的音频片段时钟同步；
通过安装的音频播放器对所述音频片段进行解码并播放，通过安装的视频播放器仅对所述视频片段中的视频帧进行解码并播放，所述视频片段与所述音频片段独立，所述视频片段与所述音频片段独立是指所述音频片段并不是在录制所述视频片段时所录制的音频片段；
在播放的过程中，获取所述音频片段的当前播放进度和所述视频片段的当前播放进度；
当所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步时，以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟，以实现所述音频片段与所述视频片段的同步播放。
2.如权利要求1所述的方法，其特征在于，所述获取所述音频片段的当前播放进度和所述视频片段的当前播放进度之后，还包括：
确定所述视频片段的参考播放进度，所述视频片段的参考播放进度与所述音频片段的当前播放进度时钟同步；
当所述视频片段的当前播放进度与所述视频片段的参考播放进度不相同时，确定所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步。
3.如权利要求2所述的方法，其特征在于，所述以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，包括：
将所述视频片段的参考播放进度发送至所述视频播放器；
通过所述视频播放器将所述视频片段的当前播放进度调整为所述视频片段的参考播放进度。
4.如权利要求1所述的方法，其特征在于，所述以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟之后，还包括：
当所述音频片段在进行音视频同步后的预设时长内未播放完毕时，执行所述获取所述音频片段的当前播放进度和所述视频片段的当前播放进度的操作，直至所述音频片段播放完毕。
5.如权利要求1所述的方法，其特征在于，所述获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息之前，还包括：
当接收到音频获取指令时，显示提示信息，所述提示信息用于提示是否获取与所述音频数据对应的视频片段。
6.一种音视频的同步播放装置，其特征在于，所述装置应用于终端中，所述终端支持短视频播放模式，所述装置包括：
播放模块，用于通过安装的音频播放器对音频片段进行解码并播放，通过安装的视频播放器仅对视频片段中的视频帧进行解码并播放，所述视频片段与所述音频片段独立且存在时钟同步关系，所述视频片段与所述音频片段独立是指所述音频片段并不是在录制所述视频片段时所录制的音频片段；
第一获取模块，用于在播放的过程中，获取所述音频片段的当前播放进度和所述视频片段的当前播放进度；
调整模块，用于当所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步时，以所述音频播放器的时钟为基准时钟调整所述视频播放器的时钟，或者，以所述视频播放器的时钟为基准时钟调整所述音频播放器的时钟，以实现所述音频片段与所述视频片段的同步播放；
所述装置还包括用于执行以下操作的模块：
获取音频数据、至少一个视频片段，以及至少一个音频片段与各自对应的视频片段之间的时钟同步信息，所述至少一个音频片段为对所述音频数据按照音频频率变化进行分段得到的至少一个音频片段，所述至少一个视频片段与所述至少一个音频片段一一对应，且所述至少一个视频片段与各自对应的音频片段时钟同步。
7.如权利要求6所述的装置，其特征在于，所述装置还包括：
第一确定模块，用于确定所述视频片段的参考播放进度，所述视频片段的参考播放进度与所述音频片段的当前播放进度时钟同步；
第二确定模块，用于当所述视频片段的当前播放进度与所述视频片段的参考播放进度不相同时，确定所述音频片段的当前播放进度与所述视频片段的当前播放进度不同步。
8.如权利要求7所述的装置，其特征在于，所述调整模块包括：
发送子模块，用于将所述视频片段的参考播放进度发送至所述视频播放器；
调整子模块，用于通过所述视频播放器将所述视频片段的当前播放进度调整为所述视频片段的参考播放进度。
9.一种终端，其特征在于，所述终端包括处理器和用于存储所述处理器可执行的指令的存储器，所述处理器被配置为执行所述指令以执行权利要求1-5中任一所述的方法。
10.一种计算机可读存储介质，其特征在于，所述存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-5中任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910609644.3A CN110324689B (zh) | 2019-07-08 | 2019-07-08 | 音视频同步播放的方法、装置、终端及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910609644.3A CN110324689B (zh) | 2019-07-08 | 2019-07-08 | 音视频同步播放的方法、装置、终端及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110324689A CN110324689A (zh) | 2019-10-11 |
| CN110324689B true CN110324689B (zh) | 2022-05-17 |
Family
ID=68121429
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910609644.3A Active CN110324689B (zh) | 2019-07-08 | 2019-07-08 | 音视频同步播放的方法、装置、终端及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110324689B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110971783B (zh) | 2019-11-29 | 2022-08-02 | 深圳创维－Rgb电子有限公司 | 电视音画同步自整定方法、装置和存储介质 |
| CN112272315B (zh) * | 2020-10-21 | 2022-07-12 | 深圳创维汽车智能有限公司 | 视频播放方法、装置、设备及计算机可读存储介质 |
| CN112637488B (zh) * | 2020-12-17 | 2022-02-22 | 深圳市普汇智联科技有限公司 | 一种音视频同步播放系统的边缘融合方法及其装置 |
| CN114630170B (zh) * | 2022-03-24 | 2023-10-31 | 抖音视界有限公司 | 一种音视频同步方法、装置、电子设备及存储介质 |
| CN114866907A (zh) * | 2022-05-23 | 2022-08-05 | 福建野小兽健康科技有限公司 | 不同类型音频独立控制的方法、存储介质和电子设备 |
| CN115174960B (zh) * | 2022-06-21 | 2023-08-15 | 咪咕文化科技有限公司 | 音视频同步方法、装置、计算设备及存储介质 |
| CN115426514A (zh) * | 2022-07-22 | 2022-12-02 | 北京罗克维尔斯科技有限公司 | 跨设备音视频同步方法、装置、设备及介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103648011A (zh) * | 2013-11-29 | 2014-03-19 | 乐视致新电子科技（天津）有限公司 | 一种基于hls协议的音视频同步装置和方法 |
| CN104853239A (zh) * | 2015-04-27 | 2015-08-19 | 浙江生辉照明有限公司 | 音视频同步播放控制方法和系统 |
| CN106385628A (zh) * | 2016-09-23 | 2017-02-08 | 努比亚技术有限公司 | 一种分析音视频不同步的装置及方法 |
| CN106792069A (zh) * | 2015-11-19 | 2017-05-31 | 北京国双科技有限公司 | 多媒体文件播放方法及装置 |
| CN107484010A (zh) * | 2017-10-09 | 2017-12-15 | 武汉斗鱼网络科技有限公司 | 一种视频资源解码方法及装置 |
| CN107613357A (zh) * | 2017-09-13 | 2018-01-19 | 广州酷狗计算机科技有限公司 | 声画同步优化方法、装置及可读存储介质 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101394469B (zh) * | 2008-10-29 | 2011-04-06 | 北京创毅视讯科技有限公司 | 一种音视频同步方法、装置及一种数字电视芯片 |
| WO2017059384A1 (en) * | 2015-09-30 | 2017-04-06 | Tivo Inc. | Synchronizing media content tag data |
| CN106658133B (zh) * | 2016-10-26 | 2020-04-14 | 广州市百果园网络科技有限公司 | 一种音视频同步播放的方法及终端 |
| CN106792154B (zh) * | 2016-12-02 | 2020-02-11 | 广东赛特斯信息科技有限公司 | 视频播放器的跳帧同步系统及其控制方法 |
| CN109936762B (zh) * | 2019-01-12 | 2021-06-25 | 河南图灵实验室信息技术有限公司 | 相似音频或视频文件同步播放的方法以及电子设备 |
-
2019
- 2019-07-08 CN CN201910609644.3A patent/CN110324689B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103648011A (zh) * | 2013-11-29 | 2014-03-19 | 乐视致新电子科技（天津）有限公司 | 一种基于hls协议的音视频同步装置和方法 |
| CN104853239A (zh) * | 2015-04-27 | 2015-08-19 | 浙江生辉照明有限公司 | 音视频同步播放控制方法和系统 |
| CN106792069A (zh) * | 2015-11-19 | 2017-05-31 | 北京国双科技有限公司 | 多媒体文件播放方法及装置 |
| CN106385628A (zh) * | 2016-09-23 | 2017-02-08 | 努比亚技术有限公司 | 一种分析音视频不同步的装置及方法 |
| CN107613357A (zh) * | 2017-09-13 | 2018-01-19 | 广州酷狗计算机科技有限公司 | 声画同步优化方法、装置及可读存储介质 |
| CN107484010A (zh) * | 2017-10-09 | 2017-12-15 | 武汉斗鱼网络科技有限公司 | 一种视频资源解码方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110324689A (zh) | 2019-10-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110324689B (zh) | 音视频同步播放的方法、装置、终端及存储介质 | |
| CN109348247B (zh) | 确定音视频播放时间戳的方法、装置及存储介质 | |
| CN108401124B (zh) | 视频录制的方法和装置 | |
| CN110572722B (zh) | 视频剪辑方法、装置、设备及可读存储介质 | |
| CN107908929B (zh) | 播放音频数据的方法和装置 | |
| CN108419113B (zh) | 字幕显示方法及装置 | |
| CN109688461B (zh) | 视频播放方法及装置 | |
| CN108881286B (zh) | 多媒体播放控制的方法、终端、音箱设备和系统 | |
| CN110533585B (zh) | 一种图像换脸的方法、装置、系统、设备和存储介质 | |
| CN110248236B (zh) | 视频播放方法、装置、终端及存储介质 | |
| CN109144346B (zh) | 歌曲分享方法、装置及存储介质 | |
| CN109922356B (zh) | 视频推荐方法、装置和计算机可读存储介质 | |
| CN112929654B (zh) | 检测音画同步的方法、装置、设备及存储介质 | |
| CN111083526B (zh) | 视频转场方法、装置、计算机设备及存储介质 | |
| CN110290392B (zh) | 直播信息显示方法、装置、设备及存储介质 | |
| CN108831513B (zh) | 录制音频数据的方法、终端、服务器和系统 | |
| CN107896337B (zh) | 信息推广方法、装置及存储介质 | |
| CN110868636B (zh) | 视频素材的截取方法、装置、存储介质及终端 | |
| CN109982129B (zh) | 短视频的播放控制方法、装置及存储介质 | |
| CN109451248B (zh) | 视频数据的处理方法、装置、终端及存储介质 | |
| CN109743461B (zh) | 音频数据处理方法、装置、终端及存储介质 | |
| CN111142838A (zh) | 音频播放方法、装置、计算机设备及存储介质 | |
| CN112738607A (zh) | 播放方法、装置、设备及存储介质 | |
| CN111092991B (zh) | 歌词显示方法及装置、计算机存储介质 | |
| CN110808021B (zh) | 音频播放的方法、装置、终端及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20220317 Address after: 4119, 41st floor, building 1, No.500, middle section of Tianfu Avenue, Chengdu hi tech Zone, China (Sichuan) pilot Free Trade Zone, Chengdu, Sichuan 610000 Applicant after: Chengdu kugou business incubator management Co.,Ltd. Address before: No. 315, Huangpu Avenue middle, Tianhe District, Guangzhou City, Guangdong Province Applicant before: GUANGZHOU KUGOU COMPUTER TECHNOLOGY Co.,Ltd. |
|
| TA01 | Transfer of patent application right | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |