CN106101738A - 音频播放方法和装置 - Google Patents

音频播放方法和装置 Download PDF

Info

Publication number
CN106101738A
CN106101738A CN201610517862.0A CN201610517862A CN106101738A CN 106101738 A CN106101738 A CN 106101738A CN 201610517862 A CN201610517862 A CN 201610517862A CN 106101738 A CN106101738 A CN 106101738A
Authority
CN
China
Prior art keywords
audio frequency
burst
target video
audio
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610517862.0A
Other languages
English (en)
Inventor
吴昊宇
邹丹
陈翌
姚键
潘柏宇
王冀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
1Verge Internet Technology Beijing Co Ltd
Original Assignee
1Verge Internet Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 1Verge Internet Technology Beijing Co Ltd filed Critical 1Verge Internet Technology Beijing Co Ltd
Priority to CN201610517862.0A priority Critical patent/CN106101738A/zh
Publication of CN106101738A publication Critical patent/CN106101738A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种音频播放方法和装置。该音频播放方法主要包括：在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。

Description

音频播放方法和装置
技术领域
本发明涉及多媒体技术领域，尤其涉及一种音频播放方法和装置。
背景技术
目前，各个视频网站存有大量的网络视频。在用户或者网站自身上传视频以后，视频网站会把这些视频转码成为多种分辨率的适合网络播放的视频格式，比如FLV(FlashVideo，流媒体格式)、MP4(Moving Picture Experts Group 4，动态图像专家组)或M3U8(UTF-8编码格式的M3U文件)格式。
由于网络视频文件一般比较大，不利于CDN(Content Delivery Network，内容分发网络)服务器进行文件缓存，所以视频网站一般都对视频进行了分片处理。然而，随着播放技术的发展，视频的清晰度越来越高，视频网站的带宽成本也在逐年增大。
发明内容
技术问题
有鉴于此，本发明要解决的技术问题是，如何降低客户端或视频网站的宽带成本。
解决方案
为了解决上述技术问题，根据本发明的一实施例，提供了一种音频播放方法，包括：
在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；
在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；
将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。
对于上述方法，在一种可能的实现方式中，从所述目标视频中提取待播放音频，包括：
从所述目标视频中提取全部或者部分音频作为所述待播放音频。
对于上述方法，在一种可能的实现方式中，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。
对于上述方法，在一种可能的实现方式中，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；
在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；
将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。
对于上述方法，在一种可能的实现方式中，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
将所述完整音频作为所述待播放音频；或，根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。
对于上述方法，在一种可能的实现方式中，还包括：
在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，并将所述完整音频存储至所述服务器中。
对于上述方法，在一种可能的实现方式中，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，包括：
在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频；或
在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。
为了解决上述技术问题，根据本发明的另一实施例，提供了一种音频播放方法，包括：
在满足播放切换条件的情况下，向服务器发送音频播放请求；
在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。
为了解决上述技术问题，根据本发明的另一实施例，提供了一种音频播放方法，包括：
查找模块，用于在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；
提取模块，与所述查找模块连接，用于在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；
第一发送模块，与所述提取模块连接，用于将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。
对于上述装置，在一种可能的实现方式中，提取模块，具体用于
从所述目标视频中提取全部或者部分音频作为所述待播放音频。
对于上述装置，在一种可能的实现方式中，提取模块包括部分音频提取单元，具体用于
在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。
对于上述装置，在一种可能的实现方式中，提取模块包括部分音频提取单元，具体用于
在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；
在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；
将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。
对于上述装置，在一种可能的实现方式中，具体用于
根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
将所述完整音频作为所述待播放音频；或，根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。
对于上述装置，在一种可能的实现方式中，提取模块还包括完整音频提取单元，具体用于
在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，并将所述完整音频存储至所述服务器中。
对于上述装置，在一种可能的实现方式中，完整音频提取单元，具体用于
在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频；或
在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。
为了解决上述技术问题，根据本发明的另一实施例，提供了一种音频播放装置，包括：
第二发送模块，用于在满足播放切换条件的情况下，向服务器发送音频播放请求；
切换模块，用于在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。
有益效果
本发明实施例的音频播放方法，能够实现在接收到来自客户端的音频播放请求的情况下，从目标视频中提取待播放音频并发送至客户端，以使得客户端由播放目标视频切换至播放待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。
进一步地，采用两路线程执行音频提取。其中，第一路线程提取部分音频作为待播放音频，可以快速响应客户端的播放需求。第二路线程提取完整音频并存储至服务器，可以避免下次请求时重复从目标视频中提取音频。
根据下面参考附图对示例性实施例的详细说明，本发明的其它特征及方面将变得清楚。
附图说明
包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本发明的示例性实施例、特征和方面，并且用于解释本发明的原理。
图1示出根据本发明一实施例的音频播放方法的流程图；
图2示出根据本发明一实施例的音频播放方法的另一流程图；
图3示出根据本发明一实施例的音频播放方法的另一流程图；
图4示出根据本发明一实施例的音频播放方法的另一流程图；
图5示出根据本发明一实施例的音频播放方法的另一流程图；
图6示出根据本发明另一实施例的音频播放方法的流程图；
图7示出根据本发明另一实施例的音频播放方法的另一流程图；
图8示出根据本发明另一实施例的音频播放方法的流程图；
图9示出根据本发明另一实施例的音频播放方法的另一流程图；
图10示出根据本发明另一实施例的音频播放方法的流程图；
图11示出根据本发明一实施例的音频播放装置的结构框图；
图12示出根据本发明一实施例的音频播放装置的另一结构框图；
图13示出根据本发明一实施例的音频播放装置的另一结构框图；
图14示出根据本发明另一实施例的音频播放装置的结构框图；
图15示出根据本发明一实施例的音频播放设备的结构框图。
具体实施方式
以下将参考附图详细说明本发明的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面，但是除非特别指出，不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外，为了更好的说明本发明，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本发明同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述，以便于凸显本发明的主旨。
实施例1
图1示出根据本发明一实施例的音频播放方法的流程图。如图1所示，该音频播放方法主要包括：
步骤101：在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；
步骤102：在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；
步骤103：将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。
在本实施例中，步骤101至步骤103主要在服务器侧执行。其中，视频可以指包含各种动态画面以及声音的影像。现实生活中，例如电影、电视剧或综艺节目等都是通过视频的方式展现。本实施例不限制视频的存储格式，例如可以是FLV、MP4或M3U8格式。本实施例不限制视频的存储方式，例如可以是完整存储或分片存储。
音频播放请求包含客户端想要获取的待播放音频的相关信息。客户端在满足播放切换条件的情况下，可以向服务器发送音频播放请求，本实施例对此不作限制。举例而言，客户端满足切换条件可以为通过用户人为在客户端选择将视频播放切换为音频播放；也可以为通过例如播放环境等的变化来触发客户端的播放切换，例如客户端检测到正在播放目标视频的电脑处于待机状态。
本实施例不限制服务器存储的已提取音频的具体内容，例如已提取音频可以是与目标视频相关的某一背景音乐，只要其能够与音频播放请求匹配即可。进一步地，在服务器接收到音频播放请求的情况下，如果服务器中存储有与目标视频相关的已提取音频，则将该音频发送至客户端。如果服务器中没有存储与目标视频相关的已提取音频，则从目标视频中提取待播放音频后发送至客户端。客户端在接收到待播放音频后，从播放目标视频切换为播放待播放音频。
在一种可能的实现方式中，如图2所示，在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取全部或者部分音频作为所述待播放音频(步骤102)，具体可以包括：
步骤201：在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取全部或者部分音频作为所述待播放音频。
本实施例不限制待播放音频的具体内容，可以是与目标视频相关的完整音频，也可以是与目标视频相关的部分音频。举例而言，待播放音频可以是与目标视频相关的某一背景音乐，某段固定时间内的对白台词，或某一时间点后的对白台词。
在本实施例中，提取部分音频的方法可以存在多种。例如，其一，可以从目标视频中直接提取部分音频。具体而言，根据目标视频的存储方式和音频播放请求中的时间信息，从目标视频中提取与时间信息对应的部分音频。其二，可以先从目标视频中提取完整音频后，再根据音频播放请求中的时间信息例如目标视频当前正在播放的时刻，从该完整音频中截取部分音频。
在一种可能的实现方式中，如图3所示，从所述目标视频中提取全部或者部分音频作为所述待播放音频(步骤201)，包括：
步骤301：在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。
其中，完整存储可以指将视频整体进行存储，主要适用于容量较小的视频，例如音乐短片。第一时刻可以为目标视频当前正在播放的时刻。举例而言，假设客户端在发送满足切换条件从而需要发送音频播放请求时，客户端中的目标视频当前正在播放10：56时刻的内容，则客户端发送的音频播放请求可以为请求播放目标视频10：56时刻以后的音频。
本实施例以播放完整存储的视频1时间T1(第一时刻)以后的音频为例进行示例性说明。客户端向服务器发送播放视频1时间T1以后的音频的请求。服务器接收到音频播放请求后，查找是否存储有与视频1相关的已提取音频(步骤101)。在没有存储的情况下，服务器从视频1中提取时间T1以后的音频(步骤301)，并将该音频发送至客户端(步骤103)。客户端由播放视频1切换至播放视频1时间T1以后的音频。
具体而言，以视频1的存储格式为FLV为例进行示例性说明。其他存储格式例如MP4可以参照FLV的提取步骤。服务器从视频1中提取时间T1以后的音频(步骤301)，主要可以包括以下步骤：
1.取出视频1的FLV文件，解析FLV文件头，寻找比时间T1小且最近的关键帧KeyFrame所对应的文件位置filepos；
2.读取FLV文件开头的第一个audio tag，这个tag里面记录了音频文件的相关参数；
3.从比时间T1小且最近的关键帧KeyFrame所对应的文件位置filepos开始顺序读取，按照FLV文件格式解析FLV tag，寻找时间戳timestamp为时间T1的音频tag所在；
4.读取音频tag存储的音频数据，然后按照相关音频格式所需要的格式，补充相应的格式数据，和音频tag里面存储的音频数据组合在一起，写入到文件中；
5.顺序找到并读取视频1中剩下的音频tag，提取音频数据，按照音频格式补充相应的格式数据，和音频数据组合，写入到文件中，直到视频1读取结束。
在一种可能的实现方式中，如图4所示，音频播放方法还包括：
步骤104a：在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
步骤104b：将所述完整音频存储至所述服务器中。
本实施例不限制执行音频提取过程的具体方式。例如，可以采用线程或者机器。本实施例不限制线程或者机器数量，例如可以采用多线程工作，也可以采用单线程工作完成后再进行下一个线程。本实施例以采用两路线程执行音频提取为例进行示例性说明。其中，第一路线程提取部分音频；第二路线程提取完整音频。
具体而言，在服务器中没有存储与目标视频相关的已提取音频的情况下，第一路线程从目标视频中提取部分音频作为待播放音频，并将该待播放音频发送至客户端。在第一路线程中，提取部分音频的目的是为了快速响应客户端的播放需求。因此，第一路线程在服务器接收到播放请求之后便开始执行，同时，该提取的部分音频不需要保存至服务器。
与此同时，在所述服务器中未存储与目标视频相关的完整音频的情况下，第二路线程从目标视频中提取完整音频，并将该完整音频存储至服务器。在下一次接收到音频播放请求的时候，可以从该完整音频中提取部分音频作为待播放音频，或将该完整音频直接作为待播放音频发送至客户端。在第二路线程中，提取完整音频并保存的目的是为了避免下次请求时重复从目标视频中提取音频。因此，第二路线程在服务器接收到播放请求之后的一段时间内执行完毕就可以。
在一种可能的实现方式中，如图5所示，根据所述目标视频的存储方式，从所述目标视频中提取完整音频(步骤104a)，包括：
步骤501：在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频。
需要说明的是，从目标视频中提取完整音频的步骤与提取部分音频的步骤相同。具体参见实施例1从视频1中提取时间T1以后的音频的步骤1至5。区别在于，提取完整音频时是从第一个关键帧KeyFrame所对应的文件位置filepos开始顺序读取，而提取部分音频时是从比时间T1小且最近的关键帧KeyFrame所对应的文件位置filepos开始顺序读取。
本发明实施例的音频播放方法，能够实现在接收到来自客户端的音频播放请求的情况下，从目标视频中提取待播放音频并发送至客户端，以使得客户端由播放目标视频切换至播放待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。
进一步地，采用两路线程执行音频提取。其中，第一路线程提取部分音频作为待播放音频，可以快速响应客户端的播放需求。第二路线程提取完整音频并存储至服务器，可以避免下次请求时重复从目标视频中提取音频。
实施例2
图6示出根据本发明另一实施例的音频播放方法的流程图。图6中标号与图1至图5相同的步骤具有相同的含义，为简明起见，省略对这些步骤的详细说明。
本实施例与上述方法实施例的不同之处在于，本实施例的目标视频的存储方式为分片存储。如图6所示，从所述目标视频中提取全部或者部分音频作为所述待播放音频(步骤201)，具体可以包括：
步骤601、在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；
步骤602、在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；
步骤603、将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。
其中，分片存储可以指将视频分成若干个片段后进行存储，主要适用于容量较大的视频，例如电影、电视剧。分片信息可以指目标视频当前正在播放的分片视频，第二时刻可以指分片视频当前正在播放的时刻。举例而言，一个60分钟的视频，可以按照3分钟一片，分为20个连续的视频片段。假设客户端在发送满足切换条件从而需要发送音频播放请求时，客户端中的目标视频当前正在播放10：56时刻的内容，客户端发送的音频播放请求可以为请求播放目标视频第4分片视频1：56时刻以后的音频。需要说明的是，本实施例不限制分片存储的方式，例如，一个60分钟的视频，也可以按照6分钟一片，分为10个连续的视频片段，或者也可以采用其他的方式进行分片存储。采用分片存储的方式，每一个视频片段，都可以单独进行播放，有利于CDN服务器进行文件缓存。
本实施例以播放分片存储的视频2分片视频K(分片信息)时间T2(第二时刻)以后的音频为例进行示例性说明。其中，每一个分片视频的存储方式均为完整存储。因此，对分片存储的视频2进行部分音频提取时包含两个阶段，其一是，从视频2的分片视频K中提取时间T2以后的第一分片音频(具体提取方式参见实施例1的从完整存储的目标视频中提取部分音频)；其二是，从视频2的分片视频K以后所有的分片视频K+1，K+2，……中分别提取其各自的第二分片音频(具体提取方式参见实施例1的从完整存储的目标视频中提取完整音频)。
需要说明的是，生成视频2某个清晰度例如1080p、720p的多个分片视频的时候，使用的音视频转码参数都是一致的。因此，可以将多个分片视频相关的音频拼接在一起，用一致的参数进行播放。本实施例不限制服务器向客户端发送待播放音频的方式，可以每提取一个分片音频后就向客户端发送，也可以提取多个分片音频后向客户端发送。同时，可以单独发送各分片音频，也可以将各分片音频按照所述分片排列顺序合成为一个音频后发送。
在一种可能的实现方式中，如图7所示，根据所述目标视频的存储方式，从所述目标视频中提取完整音频(步骤104a)，包括：
步骤701：在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。
其中，每一个分片视频的存储方式均为完整存储。因此，对分片存储的视频2进行完整音频提取时可以包括：从视频2的每个分片视频中分别提取各自的分片音频(具体提取方式参见实施例1的从完整存储的目标视频中提取完整音频)。本实施例不限制各分片音频的存储方式，可以分别存储并能够按照分片排列顺序读取，也可以按照分片排列顺序合成为一个音频后存储。
本发明实施例的音频播放方法，能够实现在接收到来自客户端的音频播放请求的情况下，从目标视频中提取待播放音频并发送至客户端，以使得客户端由播放目标视频切换至播放待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。
进一步地，采用两路线程执行音频提取。其中，第一路线程提取部分音频作为待播放音频，可以快速响应客户端的播放需求。第二路线程提取完整音频并存储至服务器，可以避免下次请求时重复从目标视频中提取音频。
实施例3
图8示出根据本发明另一实施例的音频播放方法的流程图。图8中标号与图1至图7相同的步骤具有相同的含义，为简明起见，省略对这些步骤的详细说明。
本实施例与上述方法实施例的不同之处在于，本实施例不从目标视频中提取部分音频而直接提取完整音频。如图8所示，在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取全部或者部分音频作为所述待播放音频(步骤201)，具体可以包括：
步骤801：在所述服务器中未存储所述已提取音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频作为所述待播放音频。
在一种可能实现的方式中，如图9所示，在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取全部或者部分音频作为所述待播放音频(步骤201)，具体可以包括：
步骤901：在所述服务器中未存储所述已提取音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
步骤902：根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。
在本实施例中，可以直接采用一路线程或者机器从目标视频中提取完整音频，并将该完整音频存储至服务器。其中，在目标视频的存储方式为完整存储的情况下，具体提取方式参见实施例1的从完整存储的目标视频中提取完整音频。在目标视频的存储方式为分片存储的情况下，具体提取方式参见实施例2的从分片存储的目标视频中提取完整音频。
在完成从目标视频中提取完整音频后，可以将该完整音频作为待播放音频；也可以从该完整音频中截取部分音频作为待播放音频，本实施例对此不作限制。采用一路线程或者机器直接提取完整音频的方式，可以节省工作的线程数，从而节省运算资源。这种提取方式对线程或者机器的处理速度较高，在能够快速提取的情况下适用。
本发明实施例的音频播放方法，能够实现在接收到来自客户端的音频播放请求的情况下，从目标视频中提取待播放音频并发送至客户端，以使得客户端由播放目标视频切换至播放待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。
实施例4
图10示出根据本发明另一实施例的音频播放方法的流程图。如图10所示，该音频播放方法主要包括：
步骤10：在满足播放切换条件的情况下，向服务器发送音频播放请求；
步骤20：在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。
在本实施例中，步骤10至步骤20主要在客户端侧执行。其中，客户端可以指为用户提供本地服务的程序或设备。本实施例的客户端可以指能够播放视频的程序或设备，播放设备包括但不限于网络电视、电脑、平板电脑以及手机等。
具体而言，客户端在满足播放切换条件的情况下，可以向服务器发送音频播放请求，本实施例对此不作限制。举例而言，客户端满足切换条件可以为通过用户人为在客户端选择将视频播放切换为音频播放；也可以为通过例如播放环境等的变化来触发客户端的播放切换，例如客户端检测到正在播放目标视频的电脑处于待机状态。
需要说明的是，本实施例不限制待播放音频的获取方式。举例来说，待播放音频可以是服务器中已经存储的部分音频例如背景音乐，也可以是服务器根据音乐播放请求从其自身存储的完整音频中截取的部分音频例如某个时间点后的对白台词，还可以是服务器根据音乐播放请求从目标视频中提取的部分音频或全部音频。
本发明实施例的音频播放方法，能够实现在满足播放切换条件的情况下，向服务器发送音频播放请求，并在接收到服务器发送的待播放音频后由播放目标视频切换至播放待播放音频。本发明实施例的音频播放方法能够降低客户端和视频网站的宽带成本。
实施例5
图11示出根据本发明一实施例的音频播放装置的结构框图。如图11所示，该音频播放装置主要包括：查找模块11，用于在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频。提取模块13，与所述查找模块11连接，用于在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频。第一发送模块15，与所述提取模块13连接，用于将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。具体原理和示例可以参见实施例1以及图1的相关描述。
在一种可能实现的方式中，提取模块13，具体用于从所述目标视频中提取全部或者部分音频作为所述待播放音频。具体原理和示例可以参见实施例1以及图2的相关描述。
在一种可能实现的方式中，如图12所示，提取模块13包括：部分音频提取单元131，具体用于在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。具体原理和示例可以参见实施例1以及图3的相关描述。
在一种可能实现的方式中，如图12所示，提取模块13包括：部分音频提取单元131，具体用于在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。具体原理和示例可以参见实施例2以及图6的相关描述。
在一种可能实现的方式中，提取模块13，具体用于根据所述目标视频的存储方式，从所述目标视频中提取完整音频；将所述完整音频作为所述待播放音频。具体原理和示例可以参见实施例3以及图8的相关描述。
在一种可能实现的方式中，提取模块13，具体用于根据所述目标视频的存储方式，从所述目标视频中提取完整音频；根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。具体原理和示例可以参见实施例3以及图9的相关描述。
在一种可能实现的方式中，如图13所示，提取模块13还包括完整音频提取单元133，具体用于在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，并将所述完整音频存储至所述服务器中。具体原理和示例可以参见实施例1以及图4的相关描述。
在一种可能实现的方式中，完整音频提取单元133，具体用于在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频。具体原理和示例可以参见实施例1以及图5的相关描述。
在一种可能实现的方式中，完整音频提取单元133，具体用于在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。具体原理和示例可以参见实施例2以及图7的相关描述。
本发明实施例的音频播放装置，能够实现在接收到来自客户端的音频播放请求的情况下，从目标视频中提取待播放音频并发送至客户端，以使得客户端由播放目标视频切换至播放待播放音频。本发明实施例的音频播放装置能够降低客户端和视频网站的宽带成本。
进一步地，采用两路线程执行音频提取。其中，第一路线程提取部分音频作为待播放音频，可以快速响应客户端的播放需求。第二路线程提取完整音频并存储至服务器，可以避免下次请求时重复从目标视频中提取音频。
实施例6
图14示出根据本发明一实施例的音频播放装置的结构框图。如图14所示，该音频播放装置主要包括：第二发送模块21，用于在满足播放切换条件的情况下，向服务器发送音频播放请求。切换模块23，用于在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。具体原理和示例可以参见实施例4以及图10的相关描述。
本发明实施例的音频播放装置，能够实现在满足播放切换条件的情况下，向服务器发送音频播放请求，并在接收到服务器发送的待播放音频后由播放目标视频切换至播放待播放音频。本发明实施例的音频播放装置能够降低客户端和视频网站的宽带成本。
实施例7
图15示出根据本发明一实施例的音频播放设备的结构框图。如图15所示，所述音频播放设备1100可以是具备计算能力的主机服务器、个人计算机PC、或者可携带的便携式计算机或终端等。本发明具体实施例并不对计算节点的具体实现做限定。
所述音频播放设备1100包括处理器(processor)1110、通信接口(CommunicationsInterface)1120、存储器(memory)1130和总线1140。其中，处理器1110、通信接口1120、以及存储器1130通过总线1140完成相互间的通信。
通信接口1120用于与网络设备通信，其中网络设备包括例如虚拟机管理中心、共享存储等。
处理器1110用于执行程序。处理器1110可能是一个中央处理器CPU，或者是专用集成电路ASIC(Application Specific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器1130用于存放文件。存储器1130可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器1130也可以是存储器阵列。存储器1130还可能被分块，并且所述块可按一定的规则组合成虚拟卷。
在一种可能的实施方式中，上述程序可为包括计算机操作指令的程序代码。该程序具体可用于：实现实施例1至3中各步骤的操作。
本领域普通技术人员可以意识到，本文所描述的实施例中的各示例性单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件形式来实现，取决于技术方案的特定应用和设计约束条件。专业技术人员可以针对特定的应用选择不同的方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
如果以计算机软件的形式来实现所述功能并作为独立的产品销售或使用时，则在一定程度上可认为本发明的技术方案的全部或部分(例如对现有技术做出贡献的部分)是以计算机软件产品的形式体现的。该计算机软件产品通常存储在计算机可读取的非易失性存储介质中，包括若干指令用以使得计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各实施例方法的全部或部分步骤。而前述的存储介质包括U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (16)

1.一种音频播放方法，其特征在于，包括：
在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；
在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；
将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。
2.根据权利要求1所述的方法，其特征在于，从所述目标视频中提取待播放音频，包括：
从所述目标视频中提取全部或者部分音频作为所述待播放音频。
3.根据权利要求2所述的方法，其特征在于，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。
4.根据权利要求2所述的方法，其特征在于，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；
在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；
将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。
5.根据权利要求2所述的方法，其特征在于，从所述目标视频中提取全部或者部分音频作为所述待播放音频，包括：
根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
将所述完整音频作为所述待播放音频；或，根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。
6.根据权利要求1至5中任一项所述的方法，其特征在于，还包括：
在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，并将所述完整音频存储至所述服务器中。
7.根据权利要求6所述的方法，其特征在于，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，包括：
在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频；或
在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。
8.一种音频播放方法，其特征在于，包括：
在满足播放切换条件的情况下，向服务器发送音频播放请求；
在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。
9.一种音频播放装置，其特征在于，包括：
查找模块，用于在接收到来自客户端的音频播放请求的情况下，查找服务器中是否存储有与目标视频相关的已提取音频；
提取模块，与所述查找模块连接，用于在所述服务器中未存储所述已提取音频的情况下，从所述目标视频中提取待播放音频；
第一发送模块，与所述提取模块连接，用于将所述待播放音频发送至客户端，以使得所述客户端由播放所述目标视频切换至播放所述待播放音频。
10.根据权利要求9所述的装置，其特征在于，提取模块，具体用于
从所述目标视频中提取全部或者部分音频作为所述待播放音频。
11.根据权利要求10所述的装置，其特征在于，提取模块包括部分音频提取单元，具体用于
在所述目标视频的存储方式为完整存储的情况下，根据所述音频播放请求包含的第一时刻，从所述目标视频中提取从所述第一时刻至结束时刻的音频作为所述待播放音频。
12.根据权利要求10或11所述的装置，其特征在于，提取模块包括部分音频提取单元，具体用于
在所述目标视频的存储方式为分片存储的情况下，根据所述音频播放请求包含的分片信息和第二时刻，从所述分片信息对应的第一分片视频中提取从所述第二时刻至结束时刻的第一分片音频；
在所述第一分片视频不是最后一个分片视频的情况下，获取至少一个第二分片视频，并从所述各第二分片视频中提取各第二分片音频，所述第一分片视频和所述各第二分片视频按照分片排列顺序排列；
将所述第一分片音频和所述各第二分片音频按照所述分片排列顺序合成的音频作为所述待播放音频。
13.根据权利要求10所述的装置，其特征在于，提取模块，具体用于
根据所述目标视频的存储方式，从所述目标视频中提取完整音频；
将所述完整音频作为所述待播放音频；或，根据所述音频播放请求，从所述完整音频中提取与所述音频播放请求包含的时间信息对应的部分音频作为所述待播放音频。
14.根据权利要求9至13中任一项所述的装置，其特征在于，提取模块还包括完整音频提取单元，具体用于
在所述服务器中未存储与所述目标视频相关的完整音频的情况下，根据所述目标视频的存储方式，从所述目标视频中提取完整音频，并将所述完整音频存储至所述服务器中。
15.根据权利要求14所述的装置，其特征在于，完整音频提取单元，具体用于
在所述目标视频的存储方式为完整存储的情况下，从所述目标视频中提取从起始时刻至结束时刻的音频作为所述完整音频；或
在所述目标视频的存储方式为分片存储的情况下，从各分片视频中提取从起始时刻至结束时刻的各分片音频，并将所述各分片音频按照分片排列顺序合成的音频所述完整音频。
16.一种音频播放装置，其特征在于，包括：
第二发送模块，用于在满足播放切换条件的情况下，向服务器发送音频播放请求；
切换模块，用于在接收到来自所述服务器的待播放音频的情况下，由播放目标视频切换至播放所述待播放音频。
CN201610517862.0A 2016-07-04 2016-07-04 音频播放方法和装置 Pending CN106101738A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610517862.0A CN106101738A (zh) 2016-07-04 2016-07-04 音频播放方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610517862.0A CN106101738A (zh) 2016-07-04 2016-07-04 音频播放方法和装置

Publications (1)

Publication Number Publication Date
CN106101738A true CN106101738A (zh) 2016-11-09

Family

ID=57211998

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610517862.0A Pending CN106101738A (zh) 2016-07-04 2016-07-04 音频播放方法和装置

Country Status (1)

Country Link
CN (1) CN106101738A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106686428A (zh) * 2016-12-30 2017-05-17 广东欧珀移动通信有限公司 一种视频播放方法及设备
CN112165634A (zh) * 2020-09-29 2021-01-01 北京百度网讯科技有限公司 建立音频分类模型的方法、自动转换视频的方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625150A (zh) * 2012-03-16 2012-08-01 中国科学院计算技术研究所 一种媒体播放系统和方法
CN103716647A (zh) * 2014-01-10 2014-04-09 徐鹏 一种在播放多声道环绕声视频、音频时获得双声道立体声效果的方法
CN104038772A (zh) * 2014-06-30 2014-09-10 北京奇艺世纪科技有限公司 生成铃声文件的方法及装置
CN104135667A (zh) * 2014-06-10 2014-11-05 腾讯科技（深圳）有限公司 一种视频异地解说同步方法、终端设备，及系统
WO2016059401A1 (en) * 2014-10-15 2016-04-21 British Broadcasting Corporation Subtitling method and system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625150A (zh) * 2012-03-16 2012-08-01 中国科学院计算技术研究所 一种媒体播放系统和方法
CN103716647A (zh) * 2014-01-10 2014-04-09 徐鹏 一种在播放多声道环绕声视频、音频时获得双声道立体声效果的方法
CN104135667A (zh) * 2014-06-10 2014-11-05 腾讯科技（深圳）有限公司 一种视频异地解说同步方法、终端设备，及系统
CN104038772A (zh) * 2014-06-30 2014-09-10 北京奇艺世纪科技有限公司 生成铃声文件的方法及装置
WO2016059401A1 (en) * 2014-10-15 2016-04-21 British Broadcasting Corporation Subtitling method and system

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
崔美恩: "《Oracle Applicaions性能调整手段》", 31 October 2001, 机械工业出版社 *
拉哈万蒂夫: "《iOS4编程经典实例》", 29 February 2012, 第228-232页 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106686428A (zh) * 2016-12-30 2017-05-17 广东欧珀移动通信有限公司 一种视频播放方法及设备
CN112165634A (zh) * 2020-09-29 2021-01-01 北京百度网讯科技有限公司 建立音频分类模型的方法、自动转换视频的方法和装置
CN112165634B (zh) * 2020-09-29 2022-09-16 北京百度网讯科技有限公司 建立音频分类模型的方法、自动转换视频的方法和装置

Similar Documents

Publication Publication Date Title
US11417341B2 (en) Method and system for processing comment information
US10698952B2 (en) Using digital fingerprints to associate data with a work
CN100556114C (zh) 一种媒体分片存储的方法
US9191434B2 (en) System and method for managing digital media content
CN103188522B (zh) 提供与传送复合浓缩串流的方法以及系统
CN106488253A (zh) 直播视频互动数据处理方法及装置
WO2008148268A1 (fr) Procédé et système de mise en place d'un mode de lecture de découpage de trame de multimédia à la demande dans un réseau poste à poste
CN103517135B (zh) 一种连续播放mp4格式视频文件的方法、系统及电视
CN104065979A (zh) 一种动态显示和视频内容相关联信息方法及系统
CN103959795B (zh) 用于获得视频流的系统和方法
US9197908B2 (en) Method for file formation according to freeview AV service
US6292805B1 (en) System and method for processing object-based audiovisual information
CN109168020A (zh) 基于直播的视频处理方法、装置、计算设备和存储介质
CN106131550A (zh) 播放多媒体文件的方法及装置
US20230164369A1 (en) Event progress detection in media items
CN105611395A (zh) 一种mp4格式视频在线播放的方法及系统
CN107872691A (zh) 一种广告加载处理方法、装置及系统
CN106101738A (zh) 音频播放方法和装置
CN101802803B (zh) 用于产生和再现基于媒体对象的元数据的方法和装置
CN110225399A (zh) 流媒体处理方法、装置、计算机设备及存储介质
CN105451098A (zh) 一种提供多媒体文件的方法与装置
CN105791964B (zh) 跨平台的媒体文件播放方法及系统
JP2016072858A (ja) メディアデータ生成方法、メディアデータ再生方法、メディアデータ生成装置、メディアデータ再生装置、コンピュータ読み取り可能な記録媒体、及びプログラム
CN107580264A (zh) 多媒体资源播放处理方法及装置
WO2014200539A1 (en) Remultiplexing bitstreams of encoded video for video playback

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161109

RJ01 Rejection of invention patent application after publication