CN110868610B - 流媒体传输方法、装置、服务器及存储介质 - Google Patents

流媒体传输方法、装置、服务器及存储介质 Download PDF

Info

Publication number
CN110868610B
CN110868610B CN201911023150.3A CN201911023150A CN110868610B CN 110868610 B CN110868610 B CN 110868610B CN 201911023150 A CN201911023150 A CN 201911023150A CN 110868610 B CN110868610 B CN 110868610B
Authority
CN
China
Prior art keywords
video
target audio
stream
target
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911023150.3A
Other languages
English (en)
Other versions
CN110868610A (zh
Inventor
马强忠
徐建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fullsee Technology Co ltd
Original Assignee
Fullsee Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fullsee Technology Co ltd filed Critical Fullsee Technology Co ltd
Priority to CN201911023150.3A priority Critical patent/CN110868610B/zh
Publication of CN110868610A publication Critical patent/CN110868610A/zh
Application granted granted Critical
Publication of CN110868610B publication Critical patent/CN110868610B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供了一种流媒体传输方法、装置及服务器，应用于流媒体技术领域，其中该方法包括：当所述服务器曾接入目标用户请求的所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。

Description

流媒体传输方法、装置、服务器及存储介质
技术领域
本申请涉及流媒体技术领域，具体而言，本申请涉及一种流媒体传输方法、装置及服务器。
背景技术
多媒体已经成为人们工作学习中必不可少的重要组成部分，在人们工作、学习以及生活中起到越来越大的作用。由于多媒体请求终端的带宽、屏幕大小、用户设定的多媒体清晰度等不同，大量多媒体需要进行相应的转码处理，即将多媒体转成相应的分辨率、码率等，以适应相应环境下的播放。
目前，传统的流媒体服务器，转发和转码功能是分开的，对多媒体的转码是由专门的转码服务器进行的，即当接收到用户发送的多媒体观看请求时，如果需要对该多媒体进行转码，则将该需转码的多媒体发送至转码服务器，待转码服务器对该多媒体进行转码处理后回传给转发服务器，由转发服务器将转码处理后的多媒体转发给用户。然而，根据现有的转发和转码分开的多媒体传输方式，需要转码的多媒体每次都需要从转码服务器往返一遍，存在多媒体传输延迟的问题，也加重了转码服务器的处理负担，此外，如果在相应环境中，需转码的多媒体请求较少，纯转发的任务占大多数，那么转码服务器用不上，导致出现资源浪费的问题。
发明内容
本申请提供了一种流媒体传输方法、装置及服务器，用于降低流媒体传输的延迟，提升用户体验，以及避免服务器资源的浪费，本申请采用的技术方案如下：
第一方面，提供了一种流媒体传输方法，该方法包括，
接收目标用户的目标音频和/或视频传输请求；
当服务器曾接入目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的目标音频和/或视频的可引用阶段中确定传输目标音频和/或视频的最长引用阶段；
基于确定的传输目标音频和/或视频的最长引用阶段，将目标音频和/或视频发送至目标用户。
其中，音频和/或视频流的全流程处理程序依次包括：
接入、解封装、解码、过滤镜、编码、封装；
所述引用阶段与所述处理程序相对应，所述引用阶段包括：
原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；
所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流。
具体地，所述对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，包括：
确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理；
基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
具体地，确定传输所述目标音频和/或视频的最长引用阶段后，该方法还包括：
确定所述目标音频和/或视频的最长引用阶段是否需要进行后续处理程序；
当需要进行后续处理程序时，对所述目标音频和/或视频的最长引用阶段进行后续处理得到后续处理后的流，并将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流。
进一步地，该方法还包括：
当所述服务器未接入所述目标音频和/或视频时，从数据库中查出所述目标音频和/或视频源，并直接接入。
进一步地，当所述服务器未接入所述目标音频和/或视频时，该方法还包括：
对接收到的目标用户的目标音频和/或视频传输请求进行分析，确定对的所述目标音频和/或视频流进行处理的流程；
基于确定的对所述从数据库中查出的所述目标音频和/或视频流进行处理的流程，对所述从数据库中查出的所述目标音频和/或视频流进行处理，并将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流。
其中，所述目标用户的目标音频和/或视频传输请求包括以下至少一项信息：
终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息。
第二方面，提供了一种流媒体传输装置，该装置包括，
接收模块，用于接收目标用户的目标音频和/或视频传输请求；
第一确定模块，用于当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段；
发送模块，用于基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
其中，音频和/或视频流的全流程处理程序依次包括：
接入、解封装、解码、过滤镜、编码、封装；
所述引用阶段与所述处理程序相对应，所述引用阶段包括：
原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；
所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流。
具体地，所述第一确定模块包括：
第一确定单元，用于确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理；
第二确定单元，用于基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
进一步地，该装置还包括：
第二确定模块，用于确定所述目标音频和/或视频的最长引用阶段是否需要进行后续处理程序；
第一存储模块，用于当需要进行后续处理程序时，对所述目标音频和/或视频的最长引用阶段进行后续处理得到后续处理后的流，并将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流。
进一步地，该装置还包括：
接入模块，用于当所述服务器未接入所述目标音频和/或视频时，从数据库中查出所述目标音频和/或视频源，并直接接入。
进一步地，该装置还包括：
第三确定模块，用于对接收到的目标用户的目标音频和/或视频传输请求进行分析，确定对的所述目标音频和/或视频流进行处理的流程；
第二存储模块，用于基于确定的对所述从数据库中查出的所述目标音频和/或视频流进行处理的流程，对所述从数据库中查出的所述目标音频和/或视频流进行处理，并将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流。
其中，所述目标用户的目标音频和/或视频传输请求包括以下至少一项信息：
终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息。
第三方面，提供了一种服务器，该服务器包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行，一个或多个程序配置用于：执行第一方面所示的流媒体传输方法。
第四方面，提供了一种计算机可读存储介质，计算机存储介质用于存储计算机指令，当其在计算机上运行时，使得计算机可以执行第一方面所示的流媒体传输方法。
本申请提供了一种流媒体传输方法、装置、服务器及计算机可读存储介质，与现有技术转发和转码分开的多媒体传输方式相比，本申请通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本申请附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本申请实施例的一种流媒体传输方法的流程示意图；
图2为本申请实施例的一种流媒体传输装置的结构示意图；
图3为本申请实施例的另一种流媒体传输装置的结构示意图；
图4为本申请实施例的一种服务器的结构示意图。
具体实施方式
下面详细描述本申请的实施例，各实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
本申请实施例提供了一种流媒体传输方法，如图1所示，该方法可以包括以下步骤：
步骤S101，接收目标用户的目标音频和/或视频传输请求；
具体地，接收目标用户通过web端程序(应用)或者通过手机、pad等终端设备发送的目标音频和/或视频传输请求。其中，所述目标用户的目标音频和/或视频传输请求包括但不限于以下信息：终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息。
步骤S102，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段；
具体地，当所述服务器曾接入所述目标音频和/或视频流时，即目标用户或其他用户曾请求该目标音频和/或视频，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和 /或视频的最长引用阶段。
其中，音频和/或视频流的全流程处理程序依次包括：接入、解封装、解码、过滤镜、编码、封装；所述引用阶段与所述处理程序相对应，所述引用阶段包括：原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流。
步骤S103，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
具体地，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
本申请实施例提供了一种流媒体传输方法，与现有技术转发和转码分开的多媒体传输方式相比，本申请实施例通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本申请实施例提供了一种可能的实现方式，步骤S102包括：
步骤S1021(图中未示出)，确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理；
具体地，对接收到的目标用户的目标音频和/或视频传输请求进行分析，可以对请求信息中包含的终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息等信息进行分析，确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理。
其中，滤镜处理可以对目标音频和/或视频添加字幕、logo等，也可以对目标音频和/或视频进行缩放(对分辨率进行处理)、加速/减慢等操作；其中，滤镜可以有多个，该多个滤镜可以形成滤镜链、滤镜图。
其中，视频编码就是指通过压缩技术，将原始视频格式的文件转换成另一种视频格式文件的方式，视频流传输中最为重要的编解码标准有国际电联的H.261、H.263、H.264；根据编码方式的不同，音频编码技术分为三种：波形编码、参数编码和混合编码，一般来说，波形编码的话音质量高，但编码速率也很高，参数编码的编码速率很低，产生的合成语音的音质不高，混合编码使用参数编码技术和波形编码技术，编码速率和音质介于它们之间。
步骤S1022(图中未示出)，基于是否需要对所述目标音频和 /或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
具体地，基于是否需要对所述目标音频和/或视频进行编码和/ 或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
具体地，音频和/或视频流的全流程处理程序依次包括：接入、解封装、解码、过滤镜、编码、封装，即如果音频和/或视频流需要进行滤镜处理，则一个完整的处理流程包括接入、解封装、解码、过滤镜、编码、封装。如果不需要滤镜处理但需要编码处理，则该音频和/或视频的处理过程包括：接入、解封装、解码、编码、封装。如果既不需要滤镜处理，也不需要编码处理，则该音频和/或视频接入服务器后可直接转发给用户。
示例性地，用户1请求了一路流(任务1)，使用的是原始流，直接转发的。用户2请求同一路流(任务2)，并且需要将分辨率变小(需要进行滤镜处理)，此时因为只能引用(任务1)的原始流(即最长引用阶段为原始流)，所以后续需要经过解封装、解码、滤镜、编码、封装。用户3请求同一路流(任务3)，需要的流信息和(任务2)是一样的，那么就可以引用(任务2)的封装以后的流(即最长引用阶段为封装后的流)，省去了中间所有的流程。用户4请求同一路流(任务4)，需要的分辨率和(任务2)的是不同的(需要进行滤镜处理)，那么它的最优引用任务是(任务2)，最长引用阶段是解码阶段，省去了解封装和解码阶段的处理。
对于本申请实施例，基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段，解决了最长引用阶段的确定问题。
本申请实施例提供了另一种可能的实现方式，进一步地，确定传输所述目标音频和/或视频的最长引用阶段后，该方法还包括：
步骤S104(图中未示出)，确定所述目标音频和/或视频的最长引用阶段是否需要进行后续处理程序；
步骤S105(图中未示出)，当需要进行后续处理程序时，对所述目标音频和/或视频的最长引用阶段进行后续处理得到后续处理后的流，并将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流。
示例性地，用户1请求了一路流(任务1)，使用的是原始流，直接转发的。用户2请求同一路流(任务2)，并且需要将分辨率变小(需要进行滤镜处理)，此时因为只能引用(任务1)的原始流(即最长引用阶段为原始流)，所以后续需要经过解封装、解码、滤镜、编码、封装。将经过解封装、解码、滤镜、编码、封装得到的流分别进行存储，用于当有用户再次请求传输所述目标音频和/ 或视频时能够引用所述后续处理后的流。其中，可以通过“红黑树”存储方式，进行后续处理后得到的流的存储。
对于本申请实施例，将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流，扩展了可引用的流的范围，当后续用户请求传输音频或视频用到后续处理后的流时，能降低传输的延迟。
本申请实施例提供了一种可能的实现方式，进一步地，该方法还包括：
步骤S106(图中未示出)，当所述服务器未接入所述目标音频和/或视频时，从数据库中查出所述目标音频和/或视频源，并直接接入。
具体地，当所述服务器未接入所述目标音频和/或视频时，即之前没有用户请求该目标音频和/或视频，则从数据库中查出所述目标音频和/或视频源，并将该目标音频和/或视频直接接入。
对于本申请实施例，解决了服务器未接入所述目标音频和/或视频时，如何进行目标音频和/或视频的传输问题。
本申请实施例提供了一种可能的实现方式，进一步地，当所述服务器未接入所述目标音频和/或视频时，该方法还包括：
步骤S107(图中未示出)，对接收到的目标用户的目标音频和/或视频传输请求进行分析，确定对的所述目标音频和/或视频流进行处理的流程；
步骤S108(图中未示出)，基于确定的对所述从数据库中查出的所述目标音频和/或视频流进行处理的流程，对所述从数据库中查出的所述目标音频和/或视频流进行处理，并将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/ 或视频时能够引用所述处理后的流。
对于本申请实施例，将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流，为后续用户引用该相应的流提供了基础。
图2为本申请实施例提供的一种流媒体传输装置，该装置20 包括：接收模块201、第一确定模块202及发送模块203，其中，
接收模块201，用于接收目标用户的目标音频和/或视频传输请求；
第一确定模块202，用于当所述服务器曾接入所述目标音频和 /或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段；
发送模块203，用于基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
本申请实施例提供了一种流媒体传输装置，与现有技术转发和转码分开的多媒体传输方式相比，本申请实施例通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本实施例的流媒体传输装置可执行本申请上述实施例中提供的一种流媒体传输方法，其实现原理相类似，此处不再赘述。
如图3所示，本申请实施例提供了另一种流媒体传输装置，该装置30包括：接收模块301、第一确定模块302及发送模块303，其中，
接收模块201，用于接收目标用户的目标音频和/或视频传输请求；
其中，图3中的接收模块301与图2中的接收模块201的功能相同或者相似。
其中，所述目标用户的目标音频和/或视频传输请求包括但不限于以下信息：终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息。
第一确定模块202，用于当所述服务器曾接入所述目标音频和 /或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段；
其中，图3中的第一确定模块302与图2中的第一确定模块 202的功能相同或者相似。
其中，音频和/或视频流的全流程处理程序依次包括：接入、解封装、解码、过滤镜、编码、封装；所述引用阶段与所述处理程序相对应，所述引用阶段包括：原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流。
发送模块203，用于基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
其中，图3中的发送模块303与图2中的发送模块203的功能相同或者相似。
本申请实施例提供了一种可能的实现方式，具体地，所述第一确定模块302包括：
第一确定单元3021，用于确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理；
第二确定单元3022，用于基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
对于本申请实施例，基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段，解决了最长引用阶段的确定问题。
本申请实施例提供了一种可能的实现方式，进一步地，该装置还包括：
第二确定模块304，用于确定所述目标音频和/或视频的最长引用阶段是否需要进行后续处理程序；
第一存储模块305，用于当需要进行后续处理程序时，对所述目标音频和/或视频的最长引用阶段进行后续处理得到后续处理后的流，并将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流。
对于本申请实施例，将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流，扩展了可引用的流的范围，当后续用户请求传输音频或视频用到后续处理后的流时，能降低传输的延迟。
本申请实施例提供了一种可能的实现方式，进一步地，该装置还包括：
接入模块306，用于当所述服务器未接入所述目标音频和/或视频时，从数据库中查出所述目标音频和/或视频源，并直接接入。
对于本申请实施例，解决了服务器未接入所述目标音频和/或视频时，如何进行目标音频和/或视频的传输问题。
本申请实施例提供了一种可能的实现方式，进一步地，该装置还包括：
第三确定模块307，用于对接收到的目标用户的目标音频和/ 或视频传输请求进行分析，确定对的所述目标音频和/或视频流进行处理的流程；
第二存储模块308，用于基于确定的对所述从数据库中查出的所述目标音频和/或视频流进行处理的流程，对所述从数据库中查出的所述目标音频和/或视频流进行处理，并将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流。
对于本申请实施例，将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流，为后续用户引用该相应的流提供了基础。
本申请实施例提供了一种流媒体传输装置，与现有技术转发和转码分开的多媒体传输方式相比，本申请实施例通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本申请实施例提供了一种流媒体传输装置，适用于上述实施例所示的方法，在此不再赘述。
本申请实施例提供了一种服务器，如图4所示，图4所示的服务器40包括：处理器401和存储器403。其中，处理器401和存储器403相连，如通过总线402相连。进一步地，服务器40还可以包括收发器404。需要说明的是，实际应用中收发器404不限于一个，该服务器40的结构并不构成对本申请实施例的限定。其中，处理器401应用于本申请实施例中，用于实现图2或图3所示的接收模块、第一确定模块及发送模块的功能，以及图3所示的第二确定模块、第一存储模块、接入模块、第三确定模块及第二存储模块的功能。收发器404包括接收机和发射机。
处理器401可以是CPU，通用处理器，DSP，ASIC，FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器401也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线402可包括一通路，在上述组件之间传送信息。总线402 可以是PCI总线或EISA总线等。总线402可以分为地址总线、数据总线、控制总线等。为便于表示，图4中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器403可以是ROM或可存储静态信息和指令的其他类型的静态存储设备，RAM或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
存储器403用于存储执行本申请方案的应用程序代码，并由处理器401来控制执行。处理器401用于执行存储器403中存储的应用程序代码，以实现图2或图3所示实施例提供的流媒体传输装置的功能。
本申请实施例提供了一种服务器，与现有技术转发和转码分开的多媒体传输方式相比，本申请实施例通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/ 或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本申请实施例提供了一种服务器适用于上述方法实施例。在此不再赘述。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述实施例中所示的方法。
本申请实施例提供了一种计算机可读存储介质，与现有技术转发和转码分开的多媒体传输方式相比，本申请实施例通过接收目标用户的目标音频和/或视频传输请求，当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，继而基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。即当所述服务器曾接入所述目标音频和/或视频流时，基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户，减少了对多媒体进行转码处理的阶段，从而降低了多媒体的传输延迟，提升了用户体验；此外，服务器既做转发又做转码，避免转码任务占比较少时，出现转码服务器空置带来的资源浪费。
本申请实施例提供了一种计算机可读存储介质适用于上述方法实施例。在此不再赘述。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (9)

1.一种流媒体传输方法，其特征在于，应用于服务器，包括:
接收目标用户的目标音频和/或视频传输请求；
当所述服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段；
其中，音频和/或视频流的全流程处理程序依次包括：接入、解封装、解码、过滤镜、编码、封装；所述引用阶段与所述处理程序相对应，所述引用阶段包括：原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流；
基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
2.根据权利要求1所述的方法，其特征在于，所述对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/或视频的最长引用阶段，包括：
确定是否需要对所述目标音频和/或视频进行编码和/或滤镜处理；
基于是否需要对所述目标音频和/或视频进行编码和/或滤镜处理，确定传输所述目标音频和/或视频的最长引用阶段。
3.根据权利要求1所述的方法，其特征在于，确定传输所述目标音频和/或视频的最长引用阶段后，该方法还包括：
确定所述目标音频和/或视频的最长引用阶段是否需要进行后续处理程序；
当需要进行后续处理程序时，对所述目标音频和/或视频的最长引用阶段进行后续处理得到后续处理后的流，并将得到的所述后续处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述后续处理后的流。
4.根据权利要求1-3任一项所述的方法，其特征在于，该方法还包括：
当所述服务器未接入所述目标音频和/或视频时，从数据库中查出所述目标音频和/或视频源，并直接接入。
5.根据权利要求4所述的方法，其特征在于，当所述服务器未接入所述目标音频和/或视频时，该方法还包括：
对接收到的目标用户的目标音频和/或视频传输请求进行分析，确定对所述目标音频和/或视频流进行处理的流程；
基于确定的对所述从数据库中查出的所述目标音频和/或视频流进行处理的流程，对所述从数据库中查出的所述目标音频和/或视频流进行处理，并将得到的进行处理后的流进行存储，用于当有用户再次请求传输所述目标音频和/或视频时能够引用所述处理后的流。
6.根据权利要求1所述的方法，其特征在于，所述目标用户的目标音频和/或视频传输请求包括以下至少一项信息：
终端设备屏幕信息、编码信息、带宽信息、码率、视频分辨率信息。
7.一种流媒体传输装置，其特征在于包括：
接收模块，用于接收目标用户的目标音频和/或视频传输请求；
第一确定模块，用于当服务器曾接入所述目标音频和/或视频流时，对接收到的目标用户的目标音频和/或视频传输请求进行分析，并从预存储的所述目标音频和/或视频的可引用阶段中确定传输所述目标音频和/ 或视频的最长引用阶段；其中，音频和/或视频流的全流程处理程序依次包括：接入、解封装、解码、过滤镜、编码、封装；所述引用阶段与所述处理程序相对应，所述引用阶段包括：原始流、解封装后的流、解码后的流、过滤镜后的流、编码后的流、封装后的流；所述最长引用阶段为传输所述目标音频和/或视频可免除最多处理程序的流；
发送模块，用于基于确定的传输所述目标音频和/或视频的最长引用阶段，将所述目标音频和/或视频发送至目标用户。
8.一种服务器，其特征在于，包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于：执行根据权利要求1至6任一项所述的流媒体传输方法。
9.一种计算机可读存储介质，其特征在于，所述计算机存储介质用于存储计算机指令，当其在计算机上运行时，使得计算机可以执行上述权利要求1至6中任一项所述的流媒体传输方法。
CN201911023150.3A 2019-10-25 2019-10-25 流媒体传输方法、装置、服务器及存储介质 Active CN110868610B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911023150.3A CN110868610B (zh) 2019-10-25 2019-10-25 流媒体传输方法、装置、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911023150.3A CN110868610B (zh) 2019-10-25 2019-10-25 流媒体传输方法、装置、服务器及存储介质

Publications (2)

Publication Number Publication Date
CN110868610A CN110868610A (zh) 2020-03-06
CN110868610B true CN110868610B (zh) 2021-11-12

Family

ID=69652901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911023150.3A Active CN110868610B (zh) 2019-10-25 2019-10-25 流媒体传输方法、装置、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN110868610B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114079749A (zh) * 2020-08-18 2022-02-22 山东汉鑫科技股份有限公司 一种面向制造业智能生产业务领域的跨平台系统
CN111935467A (zh) * 2020-08-31 2020-11-13 南昌富佑多科技有限公司 一种虚拟现实教育教学的外投影装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101778104A (zh) * 2009-12-29 2010-07-14 常州中流电子科技有限公司 一种实现自适应带宽播放流媒体的系统及其方法
CN109788314A (zh) * 2018-12-18 2019-05-21 视联动力信息技术股份有限公司 一种视频流数据传输的方法和装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0424026B1 (en) * 1989-10-14 1997-07-23 Sony Corporation Video signal transmitting system and method
US8249144B2 (en) * 2008-07-08 2012-08-21 Imagine Communications Ltd. Distributed transcoding
US8532397B1 (en) * 2010-09-16 2013-09-10 Pixia Corp. Method of creating a container file for large format imagery and organizing data within the container file
CN101986706B (zh) * 2010-11-16 2012-07-18 重庆抛物线信息技术有限责任公司 移动终端视频发布系统、方法及其应用
CN103002353B (zh) * 2011-09-16 2015-09-02 杭州海康威视数字技术股份有限公司 对多媒体文件进行封装的方法及装置
CN104754366A (zh) * 2015-03-03 2015-07-01 腾讯科技（深圳）有限公司 音视频文件直播方法、装置和系统
CN106961613A (zh) * 2017-03-30 2017-07-18 上海七牛信息技术有限公司 一种流式实时转码点播方法及系统
CN109218727B (zh) * 2017-06-30 2021-06-25 书法报视频媒体(湖北)有限公司 视频处理的方法和装置
CN110324670B (zh) * 2019-07-30 2021-08-06 北京奇艺世纪科技有限公司 一种视频的传输方法、装置及服务器

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101778104A (zh) * 2009-12-29 2010-07-14 常州中流电子科技有限公司 一种实现自适应带宽播放流媒体的系统及其方法
CN109788314A (zh) * 2018-12-18 2019-05-21 视联动力信息技术股份有限公司 一种视频流数据传输的方法和装置

Also Published As

Publication number Publication date
CN110868610A (zh) 2020-03-06

Similar Documents

Publication Publication Date Title
US8989259B2 (en) Method and system for media file compression
US6989868B2 (en) Method of converting format of encoded video data and apparatus therefor
TWI647946B (zh) 一種圖像編解碼方法及裝置
CN103179431A (zh) Vdi环境下音视频重定向转码分离方法
JP2000165436A (ja) マルチメディア・デ―タ・フロ―のネットワ―ク・トランスコ―ディング方法及び装置
KR20180100368A (ko) 이미지의 복호화 및 부호화 방법, 복호화 및 부호화 장치, 디코더 및 인코더
CN105556922B (zh) 网络中的dash表示自适应
CN110868610B (zh) 流媒体传输方法、装置、服务器及存储介质
WO2024169391A1 (zh) 一种视频数据处理方法、装置、计算机设备以及存储介质
CN111031389A (zh) 视频处理方法、电子装置和存储介质
CN115134629B (zh) 视频传输方法、系统、设备及存储介质
CN105323593A (zh) 一种多媒体转码调度方法和装置
WO2023130896A1 (zh) 媒体数据的数据处理方法、装置、计算机设备及存储介质
CN113539281A (zh) 音频信号编码方法和装置
CN105338371A (zh) 一种多媒体转码调度方法和装置
CN112954396B (zh) 视频的播放方法、装置、电子设备及计算机可读存储介质
CN104780392A (zh) 一种视频文件的转码方法及装置
CN212137851U (zh) 一种支持hevc解码的视频输出设备
JP2004289745A (ja) 動画像復号化方法および装置
CN106658154A (zh) 一种视频截图方法、装置和设备以及视频处理方法、装置和设备
WO2016107174A1 (zh) 多媒体文件数据的处理方法及系统、播放器和客户端
CN107426611B (zh) 基于视频转码的多路输出方法及系统
CN111447490A (zh) 流媒体文件处理方法及装置
CN101459833A (zh) 一种用于相似视频码流的转码方法及其转码装置
CN106954073B (zh) 一种视频数据输入和输出方法、装置与系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant