CN112911365A - 一种音频同步播放方法及装置 - Google Patents
一种音频同步播放方法及装置 Download PDFInfo
- Publication number
- CN112911365A CN112911365A CN202110140683.0A CN202110140683A CN112911365A CN 112911365 A CN112911365 A CN 112911365A CN 202110140683 A CN202110140683 A CN 202110140683A CN 112911365 A CN112911365 A CN 112911365A
- Authority
- CN
- China
- Prior art keywords
- audio
- playing
- preset number
- mixer
- audio file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000001360 synchronised effect Effects 0.000 title claims description 25
- 238000005070 sampling Methods 0.000 claims abstract description 121
- 238000005538 encapsulation Methods 0.000 claims description 10
- 238000004806 packaging method and process Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 9
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000011800 void material Substances 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明公开涉及一种音频同步播放方法及装置,该方法包括:确定播放时长相等的第一音频文件;通过解码器对第一音频文件进行解码,获取音频采样点集合;在解码器解码的过程中,通过混合器同时获取第二预设数量个音频采样点集合;通过混合器对第二预设数量个音频采样点集合进行叠加,获取第二音频文件;通过播放器按照预设的播放速度对该混合器输出的第二音频文件进行播放;重复执行通过混合器获取解码器输出的音频采样点集合到播放器对第二音频文件进行播放的步骤。实现了解码器与混合器同步对音频文件进行解码和叠加,减少占用的内存资源,以及对播放时长相等的音频文件进行解码和叠加,避免了叠加后的音频文件在播放过程中出现失真,提高音质。
Description
技术领域
本发明公开涉及多媒体播放技术领域,具体地,涉及一种音频同步播放方法及装置。
背景技术
目前,多台设备(例如,手机、电脑、音箱等各类播放器)通过有线或无线网络技术连接组成一个多媒体同步播放系统,对音频、视频或图片等进行同步播放的技术,得到了广泛的应用。其中,对于不同设备之间音频的同步播放,现有技术中需要先对两段音频进行解码,再将解码后的音频进行重采样后分别传输至两个播放器中,以实现两个播放器所在设备的同步播放,此种方式是基于时间条件进行调试采样率,但由于无法获取到一个准确时间,因此并不能确保调试后打的两段音频百分百不失真(不丢帧),而对于设备之间同步播放要求较高的场景,上述只是一种相对同步的情况,明显会影响到同步播放效果,因此本领域人员亟需寻找一种新的音频同步方案。
发明内容
为克服相关技术中存在的问题,本发明公开提供一种音频同步播放方法及装置。
根据本发明公开实施例的第一方面,提供一种音频同步播放方法,所述方法包括:
确定第一预设数量个播放时长相等的第一音频文件;
通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,每个音频采样点集合中包括一定数量的音频采样点;
在解码器对所述第一音频文件进行解码的过程中,通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,所述第二预设数量小于所述第一预设数量;
通过所述混合器对所述第二预设数量个音频采样点集合进行叠加,获取第二音频文件;
通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放;
当所述播放器对所述混合器输出的第二音频文件播放完成后,重复执行从所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合到所述通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放的步骤,直至所述混合器将所述解码器中输出的所有音频采样点集合全部获取完成。
可选的,所述确定第一预设数量个播放时长相等的第一音频文件,包括:
确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长;
将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长;
获取第一预设数量个播放时长为最短播放时长的第一音频文件。
可选的,所述将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长,包括:
在所述原始音频文件中确定播放时长大于所述最短播放时长的第三音频文件;
将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0,所述数字状态为0的字节为无法通过所述混合器进行叠加的字节。
可选的,所述通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,包括:
对所述第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包;
对所述第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
可选的,所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,包括:
确定预设的播放速度;
通过所述混合器按照预设的播放速度同时获取所述第二预设数量个音频采样点集合中的音频采样点。
根据本发明公开实施例的第二方面,提供一种音频同步播放装置,所述装置包括:
第一音频文件确定模块,确定第一预设数量个播放时长相等的第一音频文件;
解码模块,与所述第一音频文件确定模块连接,通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,每个音频采样点集合中包括一定数量的音频采样点;
音频采样点集合获取模块,与所述解码模块连接,在解码器对所述第一音频文件进行解码的过程中,通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,所述第二预设数量小于所述第一预设数量;
叠加模块,与所述音频采样点集合获取模块连接,通过所述混合器对所述第二预设数量个音频采样点集合进行叠加,获取第二音频文件;
播放模块,与所述叠加模块连接,通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放;
循环执行模块,与所述播放模块连接,当所述播放器对所述混合器输出的第二音频文件播放完成后,重复执行从所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合到所述通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放的步骤,直至所述混合器将所述解码器中输出的所有音频采样点集合全部获取完成。
可选的,所述第一音频文件确定模块,包括:
播放时长确定单元,确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长;
播放时长调整单元,与所述播放时长确定单元连接,将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长;
第一音频文件确定单元,与所述播放时长调整单元连接,获取第一预设数量个播放时长为最短播放时长的第一音频文件。
可选的,所述播放时长调整单元,
在所述原始音频文件中确定播放时长大于所述最短播放时长的第三音频文件;
将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0,所述数字状态为0的字节为无法通过所述混合器进行叠加的字节。
可选的,所述解码模块,包括:
第一解码单元,对所述第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包;
第二解码单元,与所述第一解码单元连接,对所述第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
可选的,所述音频采样点集合获取模块,包括:
播放速度确定单元,确定预设的播放速度;
音频采样点获取单元,与所述播放速度确定单元连接,通过所述混合器按照预设的播放速度同时获取所述第二预设数量个音频采样点集合中的音频采样点。
通过本发明公开的技术方案,能够达到以下技术效果:实现了边解码边同步,减少对内存资源的占用;且在一开始对原始音频文件解码时,获取等时长的音频文件,解决了音频文件在重采样存在的失真问题,通过混合器进行叠加,以将叠加后的音频文件传输至一个播放器中,进而可通过一个播放器实现同步播放。
本发明公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是根据一示例性实施例示出的一种音频同步播放方法的流程图;
图2是根据图1示出的一种音频文件确定方法的流程图;
图3是根据图2示出的一种播放时长调整方法的流程图;
图4是根据图1示出的一种解码方法的流程图;
图5是根据图1示出的一种采样文件获取方法的流程图;
图6是根据一示例性实施例示出的一种音频同步播放装置的结构框图;
图7是根据图6示出的一种第一音频文件确定模块的结构示意图;
图8是根据图6示出的一种解码模块的结构示意图;
图9是根据图6示出的一种音频采样点集合获取模块的结构示意图。
具体实施方式
以下结合附图对本发明公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
图1是根据一示例性实施例示出的一种音频同步播放方法的流程图,如图1所示,该方法包括:
在步骤110中,确定第一预设数量个播放时长相等的第一音频文件。
示例地,为了防止解码后的音频文件在叠加时出现失真的问题,需要在通过解码器对音频文件进行解码之前,先将原始音频文件处理成播放时长相等的第一音频文件。对原始音频文件进行处理后,获取第一预设数量个播放时长相等的第一音频文件,以通过以下步骤120-步骤150对第一音频文件进行解码、叠加以及同步播放。
在步骤120中,通过解码器对该第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合。
其中,每个音频采样点集合中包括一定数量的音频采样点。
示例地,在本发明公开的实施例中,每个解码器用于对一段音频文件进行解码,一个解码器对音频文件进行解码的过程为一个处理线程。解码器获取第一预设数量(第一预设数量≥2)个播放时长相等的第一音频文件后,通过每个解码器将该解码器获得第一音频文件解码为包含多个音频采样点的音频采样点集合。可以理解的是,由于第一音频文件的播放时长相等,解码后每个音频采样点集合中包含的音频采样点数量相等。音频采样点是将音频文件进行分割后,每秒内包含的音频文件字节。需要说明的是,一般字节与音频采样点的对应的关系是2个字节:1个音频采样点,具体关系是N:1的关系,可根据具体需求进行设置。
另外,本发明公开实施例中通过ffmpeg解码器对音频文件进行解码。当解码器接收到混合器的获取指令时,指定一个运行内存,将解码器中解码出的音频采样点集合放入到该运行内存中,以使混合器从运行内存中获取到音频采样点集合,每一段音频采样点集合对应一个运行内存,该运行内存用于处理一段将第一音频文件解码为音频采样点集合的处理线程。当混合器从解码器的一个运行内存中获取该运行内存对应的处理线程解码的音频采样点集合后,解码器对该运行内存进行释放,释放后的运行内存可用于进行其他的处理线程(对其他音频文件进行解码)。如此,能够在混合器和播放器对音频文件进行叠加并同步播放的过程中,使解码器同时对音频文件进行解码,对音频文件解码时占用的运行内存可以在解码完成并将解码后的音频采样点发送至混合器后释放,用于下一个处理线程,极大地减少了解码过程对内存资源的占用。
在步骤130中,在解码器对该第一音频文件进行解码的过程中,通过混合器同时获取该解码器解码完成的第二预设数量个音频采样点集合。
其中,该第二预设数量小于该第一预设数量。
示例地,在解码器对上述第一预设数量个第一音频文件进行解码的过程中,同时混合器根据叠加指令(例如:叠加指令中指示混合器对第二预设数量个音频采样点集合进行叠加)同时获取解码器解码后输出的音频采样点集合,可见,本实施例在解码器进行解码的过程中,就可同时获取已完成解码的音频采样点集合,无需等待第一音频文件中的所有音频数据都被解码完成。
在步骤140中,通过该混合器对该第二预设数量个音频采样点集合进行叠加,获取第二音频文件。
示例地,可以理解的是,叠加后的第二音频文件中的字节与叠加前每个音频采样点集合中的字节相等,例如叠加前两段音频采样点集合中包含100字节,叠加后的第二音频文件也包含100字节。在本发明公开实施例中,还可以通过混合器设置一个振幅阈值,在叠加时将超过振幅阈值的音频采样点的振幅进行下调,以防止播放时出现破音现象。
在步骤150中,通过播放器按照预设的播放速度对该混合器输出的第二音频文件进行播放。
示例地,本发明公开实施例中,采用c语言中的void函数作为调用函数,从混合器中调用叠加后的第二音频文件进行同步播放,其中,在void函数中,stream为数据存放地址,len为需要的数据长度。
另外,在通过播放器对第二音频文件进行播放之前,还可通过反向叠加的方式验证叠加后的第二音频文件中是否存在异常,具体步骤包括:获取第二音频文件叠加前的音频采样点集合,将其中预设数量个音频采样点集合中的音频采样点反向排列并与剩余的正向音频采样点集合进行叠加,若叠加过程中未发出声音,则证明叠加后的第二音频文件不存在异常,若叠加过程中发出声音,则证明叠加后的第二音频文件中存在异常,此时,需要对叠加过程进行检测。采用上述方法检测叠加过程中是否存在异常,可以防止播放器对叠加后存在异常的第二音频文件进行播放时出现混响。
在步骤160中,当该播放器对该混合器输出的第二音频文件播放完成后,重复执行从该通过混合器同时获取该解码器解码完成的第二预设数量个音频采样点集合到该通过播放器按照预设的播放速度对该混合器输出的第二音频文件进行播放的步骤,直至该混合器将该解码器中输出的所有音频采样点集合全部获取完成。
示例地,本发明公开实施例中,混合器对解码器输出的音频采样点集合进行叠加的同时,解码器可以继续获取音频文件并进行解码,二者同步进行,也就是说,在混合器叠加音频采样点集合时,解码器又解码并输出了新的音频采样点集合。如此,当混合器对获取的音频采样点集合进行叠加并通过播放器播放后,混合器继续从解码器获取解码后的音频采样点集合进行叠加以及发送至播放器播放,直至混合器将解码器解码完成的所有音频采样点集合全部获取完为止。
图2是根据图1示出的一种音频文件确定方法的流程图,如图2所示,该步骤110包括:
在步骤111中,确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长。
示例地,获取第一预设数量个原始音频文件并确定每个音频文件的播放时长(该播放时长根据音频文件的起始时间和结束时间确定),若所有原始音频文件的播放时长相等,可以直接通过解码器对上述每个原始音频文件进行解码,若上述第一预设数量个原始音频文件中存在播放时长不相等的原始音频文件,需要对原始音频文件的播放时长进行调整,以使调整后的每个音频文件播放时长相等。
在步骤112中,将每个原始音频文件的播放时长调整为该第一预设数量个原始音频文件中的最短播放时长。
在步骤113中,获取第一预设数量个播放时长为最短播放时长的第一音频文件。
示例地,在上述第一预设数量个原始音频文件中确定最短的播放时长,以将每个原始音频文件的播放时长处理为该最短播放时长(播放时长为最短播放时长的原始音频文件不需要处理,对播放时长大于最短播放时长的音频文件进行调整),获取播放时长相等且为最短播放时长的第一音频文件。
图3是根据图2示出的一种播放时长调整方法的流程图,如图3所示,该步骤112包括:
在步骤1121中,在该原始音频文件中确定播放时长大于该最短播放时长的第三音频文件。
在步骤1122中,将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0。
其中,该数字状态为0的字节为无法通过该混合器进行叠加的字节。
示例地,将播放时长大于最短播放时长的第三音频文件中超出该最短播放时长部分的字节标记为数字状态为0,以保证解码器获取到的第一音频文件播放时长相等,后续播放器可直接对解码后的音频文件进行播放。数字状态为0的字节在混合器中不会被与其他字节进行叠加(混合器对音频采样点进行叠加的过程中,若识别到音频采样点中存在数字状态为0的字节,不会对该字节对应的音频采样点进行叠加),能够防止由于音频文件播放时长不相等而出现播放失真的现象。
图4是根据图1示出的一种解码方法的流程图,如图4所示,该步骤120包括:
在步骤121中,对该第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包。
在步骤122中,对该第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
示例地,在本发明公开实施例中,音频文件的解码过程与音频文件的编码过程相反,先对第一音频文件进行第一次解码获取封装包,再对封装包进行第二次解码获取包含多个音频采样点的音频采样点集合。
图5是根据图1示出的一种采样文件获取方法的流程图,如图5所示,该步骤130,包括:
在步骤131中,确定预设的播放速度。
在步骤132中,通过该混合器按照预设的播放速度同时获取该第二预设数量个音频采样点集合中的音频采样点。
示例地,混合器获取播放器中预设的播放速度(例如,播放速度可以通过每秒钟播放预设数量个音频采样点表示),并根据该播放速度从解码器中获取音频采样点,可实现混合器中对音频采样点进行叠加的速度和播放器对音频文件进行播放的速度同步。
图6是根据一示例性实施例示出的一种音频同步播放装置的结构框图,如图6所示,该装置600包括:
第一音频文件确定模块610,确定第一预设数量个播放时长相等的第一音频文件;
解码模块620,与该第一音频文件确定模块610连接,通过解码器对该第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,每个音频采样点集合中包括一定数量的音频采样点;
音频采样点集合获取模块630,与该解码模块620连接,在解码器对该第一音频文件进行解码的过程中,通过混合器同时获取该解码器解码完成的第二预设数量个音频采样点集合,该第二预设数量小于该第一预设数量;
叠加模块640,与该音频采样点集合获取模块630连接,通过该混合器对该第二预设数量个音频采样点集合进行叠加,获取第二音频文件;
播放模块650,与该叠加模块640连接,通过播放器按照预设的播放速度对该混合器输出的第二音频文件进行播放;
循环执行模块660,与所述播放模块650连接,当所述播放器对所述混合器输出的第二音频文件播放完成后,重复执行从所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合到所述通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放的步骤,直至所述混合器将所述解码器中输出的所有音频采样点集合全部获取完成。
图7是根据图6示出的一种第一音频文件确定模块的结构示意图,如图7所示,该第一音频文件确定模块610,包括:
播放时长确定单元611,确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长;
播放时长调整单元612,与该播放时长确定单元611连接,将每个原始音频文件的播放时长调整为该第一预设数量个原始音频文件中的最短播放时长;
第一音频文件确定单元613,与该播放时长调整单元612连接,获取第一预设数量个播放时长为最短播放时长的第一音频文件。
可选的,该播放时长调整单元612,
在该原始音频文件中确定播放时长大于该最短播放时长的第三音频文件;
将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0,该数字状态为0的字节为无法通过该混合器进行叠加的字节。
图8是根据图6示出的一种解码模块的结构示意图,如图8所示,该解码模块620,包括:
第一解码单元621,对该第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包;
第二解码单元622,与该第一解码单元621连接,对该第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
图9是根据图6示出的一种音频采样点集合获取模块的结构示意图,如图9所示,该音频采样点集合获取模块630,包括:
播放速度确定单元631,确定预设的播放速度;
音频采样点获取单元632,与该播放速度确定单元631连接,通过该混合器按照预设的播放速度同时获取该第二预设数量个音频采样点集合中的音频采样点。
综上所述,本发明公开涉及一种音频同步播放方法及装置,该方法包括:确定播放时长相等的第一音频文件;通过解码器对第一音频文件进行解码,获取音频采样点集合;在解码器解码的过程中,通过混合器同时获取第二预设数量个音频采样点集合;通过混合器对第二预设数量个音频采样点集合进行叠加,获取第二音频文件;通过播放器按照预设的播放速度对该混合器输出的第二音频文件进行播放;重复执行通过混合器获取解码器输出的音频采样点集合到播放器对第二音频文件进行播放的步骤。实现了解码器与混合器同步对音频文件进行解码和叠加,减少占用的内存资源,以及对播放时长相等的音频文件进行解码和叠加,避免了叠加后的音频文件在播放过程中出现失真,提高音质。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。
此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。
Claims (10)
1.一种音频同步播放方法,其特征在于,所述方法包括:
确定第一预设数量个播放时长相等的第一音频文件;
通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,每个音频采样点集合中包括一定数量的音频采样点;
在解码器对所述第一音频文件进行解码的过程中,通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,所述第二预设数量小于所述第一预设数量;
通过所述混合器对所述第二预设数量个音频采样点集合进行叠加,获取第二音频文件;
通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放;
当所述播放器对所述混合器输出的第二音频文件播放完成后,重复执行从所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合到所述通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放的步骤,直至所述混合器将所述解码器中输出的所有音频采样点集合全部获取完成。
2.根据权利要求1所述的音频同步播放方法,其特征在于,所述确定第一预设数量个播放时长相等的第一音频文件,包括:
确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长;
将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长;
获取第一预设数量个播放时长为最短播放时长的第一音频文件。
3.根据权利要求2所述的音频同步播放方法,其特征在于,所述将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长,包括:
在所述原始音频文件中确定播放时长大于所述最短播放时长的第三音频文件;
将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0,所述数字状态为0的字节为无法通过所述混合器进行叠加的字节。
4.根据权利要求1所述的音频同步播放方法,其特征在于,所述通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,包括:
对所述第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包;
对所述第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
5.根据权利要求1所述的音频同步播放方法,其特征在于,所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,包括:
确定预设的播放速度;
通过所述混合器按照预设的播放速度同时获取所述第二预设数量个音频采样点集合中的音频采样点。
6.一种音频同步播放装置,其特征在于,所述装置包括:
第一音频文件确定模块,确定第一预设数量个播放时长相等的第一音频文件;
解码模块,与所述第一音频文件确定模块连接,通过解码器对所述第一预设数量个第一音频文件进行解码,获取第一预设数量个音频采样点集合,每个音频采样点集合中包括一定数量的音频采样点;
音频采样点集合获取模块,与所述解码模块连接,在解码器对所述第一音频文件进行解码的过程中,通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合,所述第二预设数量小于所述第一预设数量;
叠加模块,与所述音频采样点集合获取模块连接,通过所述混合器对所述第二预设数量个音频采样点集合进行叠加,获取第二音频文件;
播放模块,与所述叠加模块连接,通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放;
循环执行模块,与所述播放模块连接,当所述播放器对所述混合器输出的第二音频文件播放完成后,重复执行从所述通过混合器同时获取所述解码器解码完成的第二预设数量个音频采样点集合到所述通过播放器按照预设的播放速度对所述混合器输出的第二音频文件进行播放的步骤,直至所述混合器将所述解码器中输出的所有音频采样点集合全部获取完成。
7.根据权利要求6所述的音频同步播放装置,其特征在于,所述第一音频文件确定模块,包括:
播放时长确定单元,确定第一预设数量个原始音频文件以及每个原始音频文件的播放时长;
播放时长调整单元,与所述播放时长确定单元连接,将每个原始音频文件的播放时长调整为所述第一预设数量个原始音频文件中的最短播放时长;
第一音频文件确定单元,与所述播放时长调整单元连接,获取第一预设数量个播放时长为最短播放时长的第一音频文件。
8.根据权利要求7所述的音频同步播放装置,其特征在于,所述播放时长调整单元,
在所述原始音频文件中确定播放时长大于所述最短播放时长的第三音频文件;
将每个第三音频文件中超出最短播放时长部分的字节标记为数字状态0,所述数字状态为0的字节为无法通过所述混合器进行叠加的字节。
9.根据权利要求6所述的音频同步播放装置,其特征在于,所述解码模块,包括:
第一解码单元,对所述第一预设数量个第一音频文件进行第一次解码,获取第一预设数量个封装包;
第二解码单元,与所述第一解码单元连接,对所述第一预设数量个封装包进行第二次解码,获取第一预设数量个音频采样点集合。
10.根据权利要求6所述的音频同步播放装置,其特征在于,所述音频采样点集合获取模块,包括:
播放速度确定单元,确定预设的播放速度;
音频采样点获取单元,与所述播放速度确定单元连接,通过所述混合器按照预设的播放速度同时获取所述第二预设数量个音频采样点集合中的音频采样点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110140683.0A CN112911365B (zh) | 2021-02-02 | 2021-02-02 | 一种音频同步播放方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110140683.0A CN112911365B (zh) | 2021-02-02 | 2021-02-02 | 一种音频同步播放方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112911365A true CN112911365A (zh) | 2021-06-04 |
CN112911365B CN112911365B (zh) | 2024-03-29 |
Family
ID=76121210
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110140683.0A Active CN112911365B (zh) | 2021-02-02 | 2021-02-02 | 一种音频同步播放方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112911365B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6243032B1 (en) * | 1999-03-19 | 2001-06-05 | Mitsubishi Denki Kabushiki Kaisha | Decode apparatus that can accommodate dynamic change in sample data attribute during decoding process |
JP2004151398A (ja) * | 2002-10-30 | 2004-05-27 | Yamaha Corp | 音声データと演奏データの同期再生を行うための装置および方法 |
CN101674486A (zh) * | 2009-09-29 | 2010-03-17 | 深圳市融创天下科技发展有限公司 | 一种流媒体音视频同步方法及系统 |
CN105306110A (zh) * | 2015-09-18 | 2016-02-03 | 深圳市冠旭电子有限公司 | 一种实现音乐同步播放的方法及系统 |
CN106210846A (zh) * | 2016-08-15 | 2016-12-07 | 深圳Tcl新技术有限公司 | 音视频播放方法及系统 |
CN106875967A (zh) * | 2016-12-29 | 2017-06-20 | 珠海市杰理科技股份有限公司 | 多个音频叠加播放方法与系统 |
CN110024379A (zh) * | 2016-11-30 | 2019-07-16 | 萨基姆宽带联合股份公司 | 用于同步第一音频信号和第二音频信号的方法 |
CN110634497A (zh) * | 2019-10-28 | 2019-12-31 | 普联技术有限公司 | 降噪方法、装置、终端设备及存储介质 |
CN111601178A (zh) * | 2020-05-26 | 2020-08-28 | 维沃移动通信有限公司 | 视频数据处理方法、装置和电子设备 |
-
2021
- 2021-02-02 CN CN202110140683.0A patent/CN112911365B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6243032B1 (en) * | 1999-03-19 | 2001-06-05 | Mitsubishi Denki Kabushiki Kaisha | Decode apparatus that can accommodate dynamic change in sample data attribute during decoding process |
JP2004151398A (ja) * | 2002-10-30 | 2004-05-27 | Yamaha Corp | 音声データと演奏データの同期再生を行うための装置および方法 |
CN101674486A (zh) * | 2009-09-29 | 2010-03-17 | 深圳市融创天下科技发展有限公司 | 一种流媒体音视频同步方法及系统 |
CN105306110A (zh) * | 2015-09-18 | 2016-02-03 | 深圳市冠旭电子有限公司 | 一种实现音乐同步播放的方法及系统 |
CN106210846A (zh) * | 2016-08-15 | 2016-12-07 | 深圳Tcl新技术有限公司 | 音视频播放方法及系统 |
CN110024379A (zh) * | 2016-11-30 | 2019-07-16 | 萨基姆宽带联合股份公司 | 用于同步第一音频信号和第二音频信号的方法 |
CN106875967A (zh) * | 2016-12-29 | 2017-06-20 | 珠海市杰理科技股份有限公司 | 多个音频叠加播放方法与系统 |
CN110634497A (zh) * | 2019-10-28 | 2019-12-31 | 普联技术有限公司 | 降噪方法、装置、终端设备及存储介质 |
CN111601178A (zh) * | 2020-05-26 | 2020-08-28 | 维沃移动通信有限公司 | 视频数据处理方法、装置和电子设备 |
Non-Patent Citations (4)
Title |
---|
XUPING HUANG: "Design and Implementation of Synchronized Audio-to-Audio Steganography Scheme", 《2008 INTERNATIONAL CONFERENCE ON INTELLIGENT INFORMATION HIDING AND MULTIMEDIA SIGNAL PROCESSING》 * |
何志民: "基于光盘库存储的数字卫星电视收录处理系统", 《中国优秀硕士论文电子期刊网》 * |
冯建元;: "音频播放器的架构分析与关键技术的实现", 计算机与网络, no. 20 * |
张森永;高树立;陈为刚;: "面向嵌入式系统的音视频解码与同步播放实现", 应用科学学报, no. 03 * |
Also Published As
Publication number | Publication date |
---|---|
CN112911365B (zh) | 2024-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10440238B2 (en) | Synchronization of haptic effect data in a media transport stream | |
EP2023627A2 (en) | Content playback device, content playback method, computer-readable storage medium, and content playback system | |
JP7100175B2 (ja) | 送信方法及び送信装置 | |
CN108063970A (zh) | 一种处理直播流的方法和装置 | |
CN105187896B (zh) | 多分段的媒体文件播放方法和系统 | |
BRPI0803098B1 (pt) | Dispositivos e métodos de processamento de informação, e, mídias de armazenamento legível por computador | |
US11404072B2 (en) | Encoded output data stream transmission | |
US6948186B1 (en) | Multi-tasking message extractor | |
CN106331820B (zh) | 音视频的同步处理方法和装置 | |
WO2017186036A1 (zh) | 一种播放处理方法、终端设备及计算机存储介质 | |
CN105898551A (zh) | 网络视频播放方法及装置 | |
US20060112191A1 (en) | Communications system and method, information processing apparatus and method, and program | |
CN114553839A (zh) | Rtc数据的处理方法以及装置 | |
CN112911365B (zh) | 一种音频同步播放方法及装置 | |
CN113507639A (zh) | 频道快速切换方法、播放器以及可读存储介质 | |
CN106303754A (zh) | 一种音频数据播放方法及装置 | |
JP5234172B2 (ja) | データ送信装置、データ送信プログラムおよびデータ送受信システム | |
KR20140070896A (ko) | 비디오 스트리밍 방법 및 그 전자 장치 | |
CN116233411A (zh) | 音视频同步测试的方法、装置、设备及计算机存储介质 | |
CN113409801A (zh) | 用于实时音频流播放的噪音处理方法、系统、介质和装置 | |
KR0154005B1 (ko) | 시스템 부호화기를 위한 재생시간정보 발생장치 | |
CN113949896B (zh) | Ip媒体流处理方法、装置、计算机设备及可读存储介质 | |
JP2005005825A (ja) | 音声/fax通信システム、音声/fax受信装置および揺らぎ吸収バッファ量制御方法 | |
JP6684433B2 (ja) | 送信装置、送信方法、並びに、プログラム | |
JP4820877B2 (ja) | 情報データ受信装置、情報データ受信方法、情報データ受信プログラムおよび情報データ受信プログラムを格納した記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |