CN113573123B - 多媒体资源处理方法、装置、设备及存储介质 - Google Patents

多媒体资源处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113573123B
CN113573123B CN202110838557.2A CN202110838557A CN113573123B CN 113573123 B CN113573123 B CN 113573123B CN 202110838557 A CN202110838557 A CN 202110838557A CN 113573123 B CN113573123 B CN 113573123B
Authority
CN
China
Prior art keywords
slice
resource
new
sequence
played
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110838557.2A
Other languages
English (en)
Other versions
CN113573123A (zh
Inventor
姜小霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN202110838557.2A priority Critical patent/CN113573123B/zh
Publication of CN113573123A publication Critical patent/CN113573123A/zh
Application granted granted Critical
Publication of CN113573123B publication Critical patent/CN113573123B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • G06F16/447—Temporal browsing, e.g. timeline
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0276—Advertisement creation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Marketing (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Library & Information Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请涉及多媒体领域，尤其涉及一种多媒体资源处理方法、装置、设备及存储介质。方法包括：在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，至少一个新的资源切片分别配置原始时间戳；按照第一顺序，依次修改每个新的资源切片的原始时间戳，使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续；将修改后的新的资源切片，按照第一顺序保存至待播放切片序列中。本申请用以解决多个多媒体资源连续播放时，切换不同多媒体资源造成的黑屏或卡顿的问题。

Description

多媒体资源处理方法、装置、设备及存储介质
技术领域
本申请涉及多媒体领域，尤其涉及一种多媒体资源处理方法、装置、设备及存储介质。
背景技术
随着多媒体技术的发展，广告等多媒体资源的播放存在多种策略。例如，广告素材的投放有两种方式，一种是一次性投递多个广告素材，素材是固定的，不能更改，广告投放方式不灵活；一种是当前广告素材播放完毕后，根据预设的策略投放下一个广告素材，该投放方式更加灵活。
但是，不论是何种投放方式，播放投放的广告时，对于系统播放器来说，每一个广告素材都是一个单独的多媒体资源。当系统播放器播放完一个多媒体资源后，会重新创建播放器以播放下一个多媒体资源。多媒体资源的切换，导致系统播放器的切换。而系统播放器切换期间，系统则会出现黑屏或卡顿的现象，进而降低用户的体验。
发明内容
本申请提供了一种多媒体资源处理方法、装置、设备及存储介质，用以解决多个多媒体资源连续播放时，切换不同多媒体资源造成的黑屏或卡顿的问题。
第一方面，本申请提供了一种多媒体资源处理方法，包括：在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，所述新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，所述至少一个新的资源切片分别配置原始时间戳；按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续；将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中。
可选地，所述按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，包括：获取所述待播放切片序列的最后一个资源切片的时间戳；按照所述第一顺序，分别对每个所述新的资源切片作如下处理：获取所述新的资源切片的原始时间戳；将所述待播放切片序列的最后一个资源切片的时间戳，与所述新的资源切片的原始时间戳的和值，作为所述新的资源切片的新时间戳；修改所述新的资源切片的所述原始时间戳为所述新时间戳。
可选地，所述在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，包括：在按照待播放切片序列播放的过程中，生成资源请求指令，其中，所述资源请求指令用于请求所述新的多媒体资源；将所述资源请求指令传输给服务器，其中，所述服务器用于根据所述资源请求指令，获取并返回所述新的多媒体资源；获取所述服务器返回的所述新的多媒体资源。
可选地，所述按照待播放切片序列播放，包括：按照所述待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件；按照所述切片列表文件中写入的所述资源切片的存放地址，获取所述资源切片，以使播放器按照所述待播放切片序列播放所述资源切片。
可选地，所述按照所述待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件之前，还包括：获取不含有所述资源切片的存放地址的切片列表文件，其中，所述切片列表文件包括流媒体播放标识，所述流媒体播放标识用于指示以流媒体形式播放所述切片列表文件中保存的存放地址对应的所述资源切片。
可选地，所述切片列表文件包含切片最大时长；其中，所述待播放切片序列中的所述资源切片的时长小于或等于所述切片最大时长。
可选地，所述方法还包括：在按照待播放切片序列播放的过程中，获取资源播放结束信息；根据所述资源播放结束信息，生成播放结束标识，所述播放结束标识用于指示结束播放；当所述待播放切片序列的最后一个资源切片的存放地址写入所述切片列表文件时，将所述播放结束标识写入所述切片文件列表。
可选地，所述至少一个新的资源切片分别配置原始节目时钟参考信息；所述按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续之后，所述将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中之前，还包括：按照所述第一顺序，依次修改每个所述新的资源切片的原始节目时钟参考信息，使修改后的每个所述新的资源切片的音频分量和视频分量同步，其中，所述节目时钟参考信息用于同步所述资源切片的音频分量和视频分量。
可选地，所述按照所述第一顺序，依次修改每个所述新的资源切片的原始节目时钟参考信息，包括：按照所述第一顺序，依次对每个所述新的资源切片作如下处理：获取所述新的资源切片的原始节目时钟参考信息；获取所述新的资源切片修改后的时间戳；基于所述新的资源切片修改后的时间戳，对所述新的资源切片的原始节目时钟参考信息的影响，按照预设规则，获取所述新的资源切片的新节目时钟参考信息；修改所述新的资源切片的原始节目时钟参考信息为所述新节目时钟参考信息。
第二方面，本申请提供了一种多媒体资源处理装置，包括：获取模块，用于在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，所述新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，所述至少一个新的资源切片分别配置原始时间戳；修改模块，用于按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续；保存模块，用于将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中。
第三方面，本申请提供了一种电子设备，包括：处理器、存储器和通信总线，其中，处理器和存储器通过通信总线完成相互间的通信；所述存储器，用于存储计算机程序；所述处理器，用于执行所述存储器中所存储的程序，实现第一方面所述多媒体资源处理方法。
第四方面，本申请提供了一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时实现第一方面所述的多媒体资源处理方法。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点：本申请实施例提供的该方法，通过将新的多媒体资源中每个新的资源切片的时间戳进行修改，以使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续，再将新的资源切片保存在待播放切片序列中，新的资源切片与待播放切片序列中的资源切片连续后，按照待播放切片序列播放资源切片。
该方法将新的多媒体资源的新的资源切片与待播放切片序列中的资源切片进行了拼接。只要系统播放器按照待播放切片序列播放资源切片，即可将待播放切片序列中的资源切片和新的多媒体资源的新的资源切片作为同一个资源流。系统在播放同一个资源流时，并不需要进行系统播放器的切换，进而避免了黑屏或卡顿的现象，提高用户的体验。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1为本申请实施例中提供的多媒体资源处理方法实现的流程步骤示意图；
图2为本申请实施例中提供的多媒体资源处理方法实现环境的结构连接图；
图3为本申请实施例中提供的获取新的多媒体资源的流程步骤示意图；
图4为本申请实施例中提供的修改原始时间戳的流程步骤示意图；
图5为本申请实施例中提供的按照待播放切片序列播放的流程步骤示意图；
图6为本申请实施例中提供的播放结束标识的使用流程的步骤示意图；
图7为本申请实施例中提供的多媒体资源处理装置结构连接图；
图8为本申请实施例中提供的电子设备结构连接图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。
本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
本申请实施例中提供了一种多媒体资源处理方法，该方法用于对多媒体资源进行处理，以通过系统播放器播放处理后的多媒体资源。该方法可以实现于客户端，该客户端包含播放多媒体资源的系统播放器；还可以实现于服务器，该服务器将处理后的待播放切片序列传输给客户端，以通过客户端的系统播放器播放待播放切片序列中的资源切片。本申请的保护范围不以本方法实现所基于的具体设备为限制。
为方便对本方案进行介绍，以下实施例站在客户端的角度，对本方法的实现过程进行介绍。
一个实施中，如图1所示，多媒体资源处理方法实现的具体流程包括以下步骤：
步骤101，在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，至少一个新的资源切片分别配置原始时间戳。
本实施例中，待播放切片序列中包含至少一个资源切片，客户端正在播放待播放切片序列中的资源切片。在待播放切片序列中的资源切片播放完毕之前，获取新的多媒体资源，避免出现待播放切片序列为空导致的播放异常的现象。
本实施例中，资源切片指的是组成多媒体资源的单位封装文件，例如，一个1分钟的广告资源，是由60个1秒的单位封装文件组成的，该1秒的单位封装文件即为资源切片。该广告资源的60个资源切片，是按照第一顺序排列的，按照该第一顺序播放各资源切片，能够完整且顺畅的展示该广告资源。每个资源切片分别配置有原始时间戳，而第一顺序可以根据各个资源切片的原始时间戳获得。
一个实施例中，如图2所示，新的多媒体资源保存在服务器中，客户端需要从服务器获取该新的多媒体资源，再通过客户端一侧的系统播放器播放多媒体资源。具体的，如图3所示，在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，流程步骤如下：
步骤301，在按照待播放切片序列播放的过程中，生成资源请求指令，其中，资源请求指令用于请求新的多媒体资源。
在按照待播放切片序列播放的过程中，客户端可以根据预设规则生成资源请求指令，例如，当待播放切片序列中的资源切片数量达到预设阈值后，则生成资源请求指令，或者，待播放切片序列中的资源切片全部属于同一个多媒体资源时，则生成资源请求指令。
步骤302，将资源请求指令传输给服务器，其中，服务器用于根据资源请求指令，获取并返回新的多媒体资源。
客户端将生成的资源请求指令传输给服务器，而服务器中预存了多媒体资源的投放策略。服务器根据投放策略，将需要播放的多媒体资源返回给客户端。
服务器中预存的多媒体资源投放策略，可以根据需要和实际情况而定，例如，可以预存3个需要播放的多媒体资源，当接收到一次客户端传输的资源请求指令后，将1个多媒体资源作为新的多媒体资源返回，直至3个多媒体资源分别全部返回给客户端。还可以在接收到客户端的资源请求指令后，实时确定新的多媒体资源，返回给客户端。本申请的保护范围不以多媒体资源的具体投放方式为限制。
一个实施例中，服务器保存的多媒体资源，为一个整体的资源文件。当服务器将该多媒体资源返回给客户端之前，则按照预先设定的规则，将该多媒体资源进行切片，获得由至少一个资源切片组成的多媒体资源，作为新的多媒体资源返回给客户端。
一个具体的实施例中，将多媒体资源进行切片时，可以根据预先设定的切片最大时长为基础，以及基于HTTP的自适应码率流媒体传输(HTTP Live Streaming，简称HLS)协议，完成切片过程。切片后生成的资源切片为传送流(Transport Stream，简称TS)文件。
步骤303，获取服务器返回的新的多媒体资源。
客户端获得服务器返回的新的多媒体资源后，对新的多媒体资源进行处理。
本实施例中，通过服务器获取需要播放的新的多媒体资源，且获取到的新的多媒体资源已经完成了切片过程，减少了客户端处理的流程，避免客户端处理流程过多，降低客户端处理压力。同时，服务器负责根据投放策略确定需要播放的多媒体资源，通过预设不同的投放策略使多媒体资源的投放过程更加灵活。
步骤102，按照第一顺序，依次修改每个新的资源切片的原始时间戳，使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续。
由于新的多媒体资源是至少一个新的资源切片组成的，所以对于新的多媒体资源的处理，实质上是对每个新的资源切片的处理。
一个实施例中，如图4所示，按照第一顺序，依次修改每个新的资源切片的原始时间戳，具体流程步骤如下：
步骤401，获取待播放切片序列的最后一个资源切片的时间戳。
待播放切片序列中的资源切片的时间戳是连续的，最后一个资源切片的时间戳，可以代表已经通过该待播放切片序列播完完毕的资源切片，以及正处于该待播放切片序列中的资源切片的资源累计总时长，即为已经播放完毕的多媒体资源和正在播放的多媒体资源的资源累计总时长。
步骤402，按照第一顺序，分别对每个新的资源切片作如下处理：获取新的资源切片的原始时间戳；将待播放切片序列的最后一个资源切片的时间戳，与新的资源切片的原始时间戳的和值，作为新的资源切片的新时间戳；修改新的资源切片的原始时间戳为新时间戳。
例如，待播放切片序列的最后一个时间戳为300秒，新的多媒体资源包含3个新的资源切片，原始时间戳分别为10秒，20秒，30秒。则分别将新的资源切片的时间戳修改为310秒，320秒，330秒。
一个实施例中，至少一个新的资源切片分别配置原始节目时钟参考(ProgramClock Reference，简称PCR)信息。按照第一顺序，依次修改每个新的资源切片的原始时间戳，使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续之后，将修改后的新的资源切片，按照第一顺序保存至待播放切片序列中之前，按照第一顺序，依次修改每个新的资源切片的原始节目时钟参考信息，使修改后的每个新的资源切片的音频分量和视频分量同步，其中，节目时钟参考信息用于同步资源切片的音频分量和视频分量。
节目时钟参考信息是多媒体资源的一个参数，与资源切片的时间戳存在密切联系。当资源切片的时间戳改变后，若不对应修改节目时钟参考信息，在播放器无时钟校对功能时，可能会造成多媒体资源播放时音频与视频不同步的问题。
一个实施例中，按照第一顺序，依次修改每个新的资源切片的原始节目时钟参考信息，具体过程如下：
按照第一顺序，依次对每个新的资源切片作如下处理：获取新的资源切片的原始节目时钟参考信息；获取新的资源切片修改后的时间戳；基于新的资源切片修改后的时间戳，对新的资源切片的原始节目时钟参考信息的影响，按照预设规则，获取新的资源切片的新节目时钟参考信息；修改新的资源切片的原始节目时钟参考信息为新节目时钟参考信息。
因为资源切片的节目时钟参考信息与时间戳密切相关，则根据新的资源切片修改后的时间戳，对于新的资源切片的原始节目时钟参考信息的影响，按照预设规则，生成新的节目时钟信息。该预设规则可以为HLS协议下的节目时钟参考转换规则。
步骤103，将修改后的新的资源切片，按照第一顺序保存至待播放切片序列中。
修改后的新的资源切片的时间戳，能够与待播放切片序列中的资源切片的时间戳连续，例如，上述例子中的300秒，310秒，320秒，330秒。
一个实施例中，按照待播放切片序列进行播放时，需要通过切片列表文件。具体的，如图5所示，按照待播放切片序列播放，流程步骤包括：
步骤501，按照待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件。
切片列表文件是一个用于控制播放的指示性文件，该切片列表文件中未保存资源切片，而是保存了资源切片的存放地址，访问该存放地址可以获得对应的资源切片。
切片列表文件中一次存储的存放地址个数，可以根据需要和实际情况而定，例如，根据播放器的兼容性问题，设定一次存入切片列表文件的存放地址为3个。
步骤502，控制播放器按照切片列表文件中写入的资源切片的存放地址，获取资源切片并播放。
一个具体的实施例中，待播放切片序列保存在客户端的缓存中，切片列表文件中的资源切片存放地址为对应的缓存地址。
一个实施例中，切片列表文件是预先设置的，在客户端播放第一个多媒体资源之前，切片列表文件未保存任何资源切片的地址。具体的，按照待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件之前，获取不含有资源切片的存放地址的切片列表文件，其中，切片列表文件包括流媒体播放标识，流媒体播放标识用于指示以流媒体形式播放切片列表文件中保存的存放地址对应的资源切片。其中，以流媒体形式播放资源切片，指的是将多媒体资源作为流媒体进行播放，而不是以固定资源的方式播放多媒体资源。切片列表文件中写入至少一个连续排列的资源切片的存放地址后，切片列表文件包含的流媒体资源标识，针对于每一个资源切片，指示切片列表文件对应的每一个资源切片以流媒体形式播放。
例如，流媒体播放标识为直播标识，当一段已知的点播视频资源，切片后生成连续排列的10个资源切片，将该10个资源切片的存放地址写入切片列表文件。该切片列表文件包括直播标识，当10个资源切片的存放地址成功写入切片列表文件后，直播标识针对于每一个资源切片，指示每一个资源切片以直播的形式进行播放，进而保证客户端的播放器能够以直播的形式正常播放完整的该点播视频资源。
本实施例中，流媒体播放标识是预先设置于切片列表文件中的，当客户端获取切片列表文件后，则直接通过带有流媒体资源标识的切片列表文件，完成多媒体资源的处理和播放。切片列表文件中保存有流媒体播放标识，以实现通过流媒体方式正常播放多媒体资源。若切片列表文件中没有流媒体播放标识，客户端的播放器无法以流媒体形式正常播放多媒体资源。
本实施例中，不含有资源切片的存放地址的切片列表文件可以预先保存在客户端；也可以预先保存在服务器，当客户端需要播放多媒体资源时，服务器将不含有资源切片的存放地址的切片列表文件传输给客户端。本申请的保护范围不以不含有资源切片的存放地址的切片列表文件的预先保存位置为限制。
一个实施例中，切片列表文件包含切片最大时长；其中，待播放切片序列中的资源切片的时长小于或等于切片最大时长。
本实施例中，每一个资源切片的时长需要小于或等于切片最大时长，客户端的播放器才能保证正常播放多媒体资源。当资源切片的时长大于切片最大时长时，则可能导致播放错误、跳帧或播放不连贯的情况。例如，最大切片时长为3秒，但是多媒体资源的资源切片中存在一个资源切片的时长为4秒，那么在播放该4秒的资源切片到3秒时，则播放器直接去播放下一个资源切片，导致播放不连贯，降低用户的体验感。
基于上述实施例中的描述，当服务器对新的多媒体资源进行切片时，设定的切片最大时长，与本实施例中的最大切片时长一致，以保证新的多媒体资源能够通过该切片列表文件进行播放。服务器侧设定的切片最大时长，可以预先基于客户端侧的最大切片时长进行设定。以满足正常播放多媒体资源。
一个实施例中，切片列表文件为基于HTTP的自适应码率流媒体传输协议下的m3u8文件。m3u8文件为HLS协议下用于控制播放的文本文件。
一个实施例中，客户端根据预设规则，向服务器至少传输一次资源请求指令，以请求新的多媒体资源。当按照服务器的预设投放策略，已经没有需要播放的多媒体资源时，服务器生成资源播放结束信息，并传输给客户端。具体的，如图6所示，流程步骤如下：
步骤601，在按照待播放切片序列播放的过程中，获取资源播放结束信息；
步骤602，根据资源播放结束信息，生成播放结束标识，播放结束标识用于指示结束播放；
步骤603，当待播放切片序列的最后一个资源切片的存放地址写入切片列表文件时，将播放结束标识写入切片文件列表。
当客户端收到服务器传输的资源播放结束信息后，生成播放结束标识，并将播放结束标识写入切片文件列表，具体的，写入切片文件列表中最后一个资源切片的后面，以指示播放器结束本次播放，避免出现无多媒体资源导致的播放错误。
一个具体的实施例中，当本方法基于HLS协议时，播放结束标识可以为#EXT-X-ENDLIST标签，该#EXT-X-ENDLIST标签用于指示不再向切片列表文件添加新的资源切片。
本申请实施例提供的多媒体资源处理方法，通过将新的多媒体资源中每个新的资源切片的时间戳进行修改，以使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续，再将新的资源切片保存在待播放切片序列中，新的资源切片与待播放切片序列中的资源切片连续后，按照待播放切片序列播放资源切片。
该方法将新的多媒体资源的新的资源切片与待播放切片序列中的资源切片进行了拼接。只要系统播放器按照待播放切片序列播放资源切片，即可将待播放切片序列中的资源切片和新的多媒体资源的新的资源切片作为同一个资源流。系统在播放同一个资源流时，并不需要进行系统播放器的切换，进而避免了黑屏或卡顿的现象，提高用户的体验。
该方法的实现可以基于HLS协议，便于服务器对新的多媒体资源的切片，以及切片列表文件的实现等。
基于同一构思，本申请实施例中提供了一种多媒体资源处理装置，该装置的具体实施可参见方法实施例部分的描述，重复之处不再赘述。如图7所示，该装置主要包括：
获取模块701，用于在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，至少一个新的资源切片分别配置原始时间戳；
修改模块702，用于按照第一顺序，依次修改每个新的资源切片的原始时间戳，使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续；
保存模块703，用于将修改后的新的资源切片，按照第一顺序保存至待播放切片序列中。
基于同一构思，本申请实施例中还提供了一种电子设备，如图8所示，该电子设备主要包括：处理器801、存储器802和通信总线803，其中，处理器801和存储器802通过通信总线803完成相互间的通信。其中，存储器802中存储有可被至处理器801执行的程序，处理器801执行存储器802中存储的程序，实现如下步骤：
在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，至少一个新的资源切片分别配置原始时间戳；按照第一顺序，依次修改每个新的资源切片的原始时间戳，使修改后第一顺序中的首个新的资源切片的时间戳，与待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个新的资源切片的时间戳连续；将修改后的新的资源切片，按照第一顺序保存至待播放切片序列中。
上述电子设备中提到的通信总线803可以时外设部件互连标准(PeripheralComponent Interconnect，简称PCI)总线或扩展工业标准结构(Extended IndustryStandard Architecture，简称EISA)总线等。该通信总线803可以分为地址总线、数据总线、控制总线等。为便于表示，图8中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器802可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器801的存储装置。
上述的处理器801可以是通用处理器，包括中央处理器(Central ProcessingUnit，简称CPU)、网络处理器(Network Processor，简称NP)等，还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，当该计算机程序在计算机上运行时，使得计算机执行上述实施例中所描述的多媒体资源处理方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行该计算机指令时，全部或部分地产生按照本申请实施例所述的流程或功能。该计算机可以时通用计算机、专用计算机、计算机网络或者其他可编程装置。该计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，计算机指令从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、微波等)方式向另外一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质(例如软盘、硬盘、磁带等)、光介质(例如DVD)或者半导体介质(例如固态硬盘)等。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式，使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。

Claims (11)

1.一种多媒体资源处理方法，其特征在于，包括：
在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，所述新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，所述至少一个新的资源切片分别配置原始时间戳；
按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续；
将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中；
所述在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，包括：
在按照待播放切片序列播放的过程中，生成资源请求指令，其中，所述资源请求指令用于请求所述新的多媒体资源；
将所述资源请求指令传输给服务器，其中，所述服务器用于根据所述资源请求指令，获取并返回所述新的多媒体资源；
获取所述服务器返回的所述新的多媒体资源；
所述服务器保存的多媒体资源，为一个整体的资源文件；当所述服务器将所述服务器保存的多媒体资源返回给客户端之前，按照预先设定的规则，将所述服务器保存的多媒体资源进行切片，获得由至少一个资源切片组成的多媒体资源，作为所述新的多媒体资源返回给客户端。
2.根据权利要求1所述的多媒体资源处理方法，其特征在于，所述按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，包括：
获取所述待播放切片序列的最后一个资源切片的时间戳；
按照所述第一顺序，分别对每个所述新的资源切片作如下处理：
获取所述新的资源切片的原始时间戳；
将所述待播放切片序列的最后一个资源切片的时间戳，与所述新的资源切片的原始时间戳的和值，作为所述新的资源切片的新时间戳；
修改所述新的资源切片的所述原始时间戳为所述新时间戳。
3.根据权利要求1所述的多媒体资源处理方法，其特征在于，所述按照待播放切片序列播放，包括：
按照所述待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件；
按照所述切片列表文件中写入的所述资源切片的存放地址，获取所述资源切片，以使播放器按照所述待播放切片序列播放所述资源切片。
4.根据权利要求3所述的多媒体资源处理方法，其特征在于，所述按照所述待播放切片序列，逐次将至少一个连续排列的资源切片的存放地址写入切片列表文件之前，还包括：
获取不含有所述资源切片的存放地址的切片列表文件，其中，所述切片列表文件包括流媒体播放标识，所述流媒体播放标识用于指示以流媒体形式播放所述切片列表文件中保存的存放地址对应的所述资源切片。
5.根据权利要求4所述的多媒体资源处理方法，其特征在于，所述切片列表文件包含切片最大时长；
其中，所述待播放切片序列中的所述资源切片的时长小于或等于所述切片最大时长。
6.根据权利要求3所述的多媒体资源处理方法，其特征在于，所述方法还包括：
在按照待播放切片序列播放的过程中，获取资源播放结束信息；
根据所述资源播放结束信息，生成播放结束标识，所述播放结束标识用于指示结束播放；
当所述待播放切片序列的最后一个资源切片的存放地址写入所述切片列表文件时，将所述播放结束标识写入所述切片文件列表。
7.根据权利要求1所述的多媒体资源处理方法，其特征在于，所述至少一个新的资源切片分别配置原始节目时钟参考信息；
所述按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续之后，所述将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中之前，还包括：
按照所述第一顺序，依次修改每个所述新的资源切片的原始节目时钟参考信息，使修改后的每个所述新的资源切片的音频分量和视频分量同步，其中，所述节目时钟参考信息用于同步所述资源切片的音频分量和视频分量。
8.根据权利要求7所述的多媒体资源处理方法，其特征在于，所述按照所述第一顺序，依次修改每个所述新的资源切片的原始节目时钟参考信息，包括：
按照所述第一顺序，依次对每个所述新的资源切片作如下处理：
获取所述新的资源切片的原始节目时钟参考信息；
获取所述新的资源切片修改后的时间戳；
基于所述新的资源切片修改后的时间戳，对所述新的资源切片的原始节目时钟参考信息的影响，按照预设规则，获取所述新的资源切片的新节目时钟参考信息；
修改所述新的资源切片的原始节目时钟参考信息为所述新节目时钟参考信息。
9.一种多媒体资源处理装置，其特征在于，包括：
获取模块，用于在按照待播放切片序列播放的过程中，获取需要播放的新的多媒体资源，其中，所述新的多媒体资源由按照第一顺序排列的至少一个新的资源切片组成，所述至少一个新的资源切片分别配置原始时间戳；
修改模块，用于按照所述第一顺序，依次修改每个所述新的资源切片的原始时间戳，使修改后所述第一顺序中的首个所述新的资源切片的时间戳，与所述待播放切片序列的最后一个资源切片的时间戳连续，且使修改后的每个所述新的资源切片的时间戳连续；
保存模块，用于将修改后的所述新的资源切片，按照所述第一顺序保存至所述待播放切片序列中；
所述获取模块，用于在按照待播放切片序列播放的过程中，生成资源请求指令，其中，所述资源请求指令用于请求所述新的多媒体资源；将所述资源请求指令传输给服务器，其中，所述服务器用于根据所述资源请求指令，获取并返回所述新的多媒体资源；获取所述服务器返回的所述新的多媒体资源；所述服务器保存的多媒体资源，为一个整体的资源文件；当所述服务器将所述服务器保存的多媒体资源返回给客户端之前，按照预先设定的规则，将所述服务器保存的多媒体资源进行切片，获得由至少一个资源切片组成的多媒体资源，作为所述新的多媒体资源返回给客户端。
10.一种电子设备，包括：处理器、存储器和通信总线，其中，处理器和存储器通过通信总线完成相互间的通信；所述存储器，用于存储计算机程序；所述处理器，用于执行所述存储器中所存储的程序，实现权利要求1至8任一项所述的多媒体资源处理方法。
11.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至8任一项所述的多媒体资源处理方法。
CN202110838557.2A 2021-07-23 2021-07-23 多媒体资源处理方法、装置、设备及存储介质 Active CN113573123B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110838557.2A CN113573123B (zh) 2021-07-23 2021-07-23 多媒体资源处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110838557.2A CN113573123B (zh) 2021-07-23 2021-07-23 多媒体资源处理方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113573123A CN113573123A (zh) 2021-10-29
CN113573123B true CN113573123B (zh) 2023-03-17

Family

ID=78166926

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110838557.2A Active CN113573123B (zh) 2021-07-23 2021-07-23 多媒体资源处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113573123B (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107580264A (zh) * 2017-08-29 2018-01-12 青岛海信电器股份有限公司 多媒体资源播放处理方法及装置
CN109040811A (zh) * 2018-08-16 2018-12-18 北京奇艺世纪科技有限公司 一种视频播放方法及装置
CN111031385B (zh) * 2019-12-20 2022-03-08 北京爱奇艺科技有限公司 视频播放的方法及装置
CN112954431A (zh) * 2021-01-29 2021-06-11 北京奇艺世纪科技有限公司 视频播放方法、装置、视频播放设备及可读存储介质

Also Published As

Publication number Publication date
CN113573123A (zh) 2021-10-29

Similar Documents

Publication Publication Date Title
US10349139B2 (en) Delivery of content
US11711587B2 (en) Using manifest files to determine events in content items
CN110933449B (zh) 一种外部数据与视频画面的同步方法、系统及装置
US20160165318A1 (en) Providing interactive advertisements
CN108810657B (zh) 一种设置视频封面的方法和系统
US20160119661A1 (en) On-Demand Metadata Insertion into Single-Stream Content
CN105847956A (zh) 广告的投放方法和装置
EP3304924A1 (en) Techniques for seamless media content switching during fixed-duration breaks
EP3531707A1 (en) Audio content playback control
CN111787406A (zh) 一种视频播放方法、电子设备以及存储介质
CN112837088B (zh) 广告投放方法、装置、介质及电子设备
WO2018233539A1 (zh) 视频处理方法、计算机存储介质及设备
CN105100912A (zh) 流媒体处理方法和流媒体处理装置
US20220272421A1 (en) Content Aggregation
CN112565877B (zh) 投屏方法、系统、电子设备及存储介质
CN112785333B (zh) 广告投放方法、电子设备、存储介质及装置
CN113573123B (zh) 多媒体资源处理方法、装置、设备及存储介质
WO2023103804A1 (zh) 一种推荐方法、装置、设备以及存储介质
EP3151549A1 (en) A digital video recorder and a method for dynamic management of advertising content on a digital video recorder
CN112135199B (zh) 基于多类型视频源的视频播放方法及相关设备
US10735824B2 (en) In-band trick mode control
CN113301374A (zh) 直播音视频处理方法、装置、客户端和服务器
CN111356006A (zh) 视频播放方法、装置、服务器及存储介质
US11218766B1 (en) Metadata manipulation
JP6664587B1 (ja) 情報処理装置、情報処理方法および情報処理プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant