CN114189710A - 导播处理方法、装置、导播处理装置及存储介质 - Google Patents

导播处理方法、装置、导播处理装置及存储介质 Download PDF

Info

Publication number
CN114189710A
CN114189710A CN202111482573.9A CN202111482573A CN114189710A CN 114189710 A CN114189710 A CN 114189710A CN 202111482573 A CN202111482573 A CN 202111482573A CN 114189710 A CN114189710 A CN 114189710A
Authority
CN
China
Prior art keywords
stream
sub
background
director
streams
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111482573.9A
Other languages
English (en)
Inventor
张萍
陈云海
刘晓玲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN202111482573.9A priority Critical patent/CN114189710A/zh
Publication of CN114189710A publication Critical patent/CN114189710A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4333—Processing operations in response to a pause request
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例中提供导播处理方法、装置、导播处理装置及存储介质，通过持续稳定地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；监听每个子流的状态，所述状态包括：中断及恢复；根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；对所恢复的子流进行所述混合处理后以得到续播。通过提供一条常驻且稳定的背景流，维持导播流持续稳定不中断，动态地接入各路子流来与背景流混屏，通过背景流的时间轴作为参考时钟来同步子流，实现断点续播，并灵活支持子流随时接入、断开、移除等。

Description

导播处理方法、装置、导播处理装置及存储介质
技术领域
本申请涉及导播混屏技术领域，尤其涉及导播处理方法、装置、导播处理装置及存储介质。
背景技术
混音混屏是导播处理的核心技术，即多路实时流在云端进行切换、缩放、混音、混屏等处理，最终合成一路导播流用于终端分发和播放。在云端以较少的资源实现传统导播台的功能，能广泛用于游戏直播、在线教育、体育直播、视频娱乐互动等行业。
在网络传输不稳定时，导播处理现有技术存在下述问题：
1、各路子流频繁出现卡顿、中断，造成导播流播放不流畅、画面中断；
2、各路子流随时中断又恢复，难以实现子流间的同步。
3、灵活性差，不能任意接入或移除子流。
为解决子流中断的问题，相关技术中有对中断子流的断开时长进行补帧处理以在恢复时能断点续播的方式，但是此种方案之下，即使子流大量中断，也要维持多路子流的计算，不必要地占用资源。
发明消息
鉴于以上所述现有技术的缺点，本申请的目的在于提供导播处理方法、装置、导播处理装置及存储介质及介质，用于解决上述问题。
本申请第一方面提供一种导播处理方法，包括：持续地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；监听每个子流的状态，所述状态包括：中断及恢复；根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；对所恢复的子流进行所述混合处理后以得到续播。
在第一方面的一些实施例中，所述混合处理包括：混音混屏处理。
在第一方面的一些实施例中，所述背景流静音播放。
在第一方面的一些实施例中，所述背景流包括：通过预设帧率及采样率输出的背景图像及静音帧。
在第一方面的一些实施例中，所述背景图像包括以下一种：黑屏、灰屏、彩屏及预设信号中断图像。
在第一方面的一些实施例中，所述根据所监听的每个子流的状态对相应子流进行管理，还包括：新接入的子流的插入；被移除子流的释放。
本申请第二方面提供一种导播处理装置，包括：背景流发生模块，用于持续地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；子流管理模块，用于监听每个子流的状态，所述状态包括：中断及恢复；并根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；同步模块，用于对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；混合处理模块，用于对所恢复的子流进行所述混合处理后以得到续播。
在第二方面的一些实施例中，所述混合处理包括：混音混屏处理。
本申请第三方面提供一种导播处理装置，包括：通信器、存储器及处理器；所述通信器用于与外部通信；所述存储器用于存储程序指令；所述处理器用于运行所述程序指令以执行如第一方面任一项所述的导播处理方法。
本申请第四方面提供一种计算机可读存储介质，存储有程序指令，所述程序指令被运行以执行如第一方面任一项所述的导播处理方法。
如上所述，本申请实施例中提供导播处理方法、装置、导播处理装置及存储介质，通过持续稳定地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；监听每个子流的状态，所述状态包括：中断及恢复；根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；对所恢复的子流进行所述混合处理后以得到续播。通过提供一条常驻且稳定的背景流，维持导播流持续稳定不中断，动态地接入各路子流来与背景流混屏，通过背景流的时间轴作为参考时钟来同步子流，实现断点续播，并灵活支持子流随时接入、断开、移除等。
附图说明
图1展示相关技术中导播处理中对子流中断补帧的原理示意图。
图2展示本申请一实施例中导播处理方法的流程示意图。
图3展示本申请一实施例中导播处理方法的原理示意图。
图4展示本申请一实施例中导播处理装置的功能模块示意图。
图5展示本申请一实施例中导播处理装置的电路结构示意图。
图6展示本申请一实施例中导播处理装置的实际应用流程示意图。
具体实施方式
以下通过特定的具体示例说明本申请的实施方式，本领域技术人员可由本申请所揭露的消息轻易地了解本申请的其他优点与功效。本申请还可以通过另外不同的具体实施方式加以实施或应用系统，本申请中的各项细节也可以根据不同观点与应用系统，在没有背离本申请的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
下面以附图为参考，针对本申请的实施例进行详细说明，以便本申请所属技术领域的技术人员能够容易地实施。本申请可以以多种不同形态体现，并不限定于此处说明的实施例。
在本申请的表示中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的表示意指结合该实施例或示例表示的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且，表示的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本申请中表示的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于表示目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的表示中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
为了明确说明本申请，省略与说明无关的器件，对于通篇说明书中相同或类似的构成要素，赋予了相同的参照符号。
在通篇说明书中，当说某器件与另一器件“连接”时，这不仅包括“直接连接”的情形，也包括在其中间把其它元件置于其间而“间接连接”的情形。另外，当说某种器件“包括”某种构成要素时，只要没有特别相反的记载，则并非将其它构成要素排除在外，而是意味着可以还包括其它构成要素。
虽然在一些示例中术语第一、第二等在本文中用来表示各种元件，但是这些元件不应当被这些术语限制。这些术语仅用来将一个元件与另一个元件进行区分。例如，第一接口及第二接口等表示。再者，如同在本文中所使用的，单数形式“一”、“一个”和“该”旨在也包括复数形式，除非上下文中有相反的指示。应当进一步理解，术语“包含”、“包括”表明存在所述的特征、步骤、操作、元件、模块、项目、种类、和/或组，但不排除一个或多个其他特征、步骤、操作、元件、模块、项目、种类、和/或组的存在、出现或添加。此处使用的术语“或”和“和/或”被解释为包括性的，或意味着任一个或任何组合。因此，“A、B或C”或者“A、B和/或C”意味着“以下任一个：A；B；C；A和B；A和C；B和C；A、B和C”。仅当元件、功能、步骤或操作的组合在某些方式下内在地互相排斥时，才会出现该定义的例外。
此处使用的专业术语只用于言及特定实施例，并非意在限定本申请。此处使用的单数形态，只要语句未明确表示出与之相反的意义，那么还包括复数形态。在说明书中使用的“包括”的意义是把特定特性、区域、整数、步骤、作业、要素及/或成份具体化，并非排除其它特性、区域、整数、步骤、作业、要素及/或成份的存在或附加。
虽然未不同地定义，但包括此处使用的技术术语及科学术语，所有术语均具有与本申请所属技术领域的技术人员一般理解的意义相同的意义。普通使用的字典中定义的术语追加解释为具有与相关技术文献和当前提示的消息相符的意义，只要未进行定义，不得过度解释为理想的或非常公式性的意义。
相关技术中，混音混屏是导播处理中的核心技术。具体的，混音混屏是关于多路子流经混音、混屏等处理形成导播流进行播放的技术。然而，该技术目前仍存在各种问题，例如：各路子流频繁出现卡顿、中断，造成导播流播放不流畅、画面中断等；中断后恢复，子流之间又难以同步。灵活性差，不能任意接入或移除子流。
为解决其中子流断点恢复的问题，相关技术中有通过对中断子流的断开时间进行补帧处理的方式。
如图1所示，展示一示例中导播处理中对子流中断补帧的原理示意图。
图1中上半部分展示了子流1～子流N进行混音混屏为导播流的应用。举例来说，混屏即子流1～子流N分别在导播流的播放画面中占据一个窗口，混音即它们的音频一并进行了播放。
在图1中下半部展示子流1～子流N的中断补帧的时序图，图中实线部分表示正常播放的时间，图中虚线部分表示播放中断需要补帧的时间，通过补帧的方式延后中断时断点帧，直至子流恢复时从此断点帧处续播。
但是如此一来，即使子流中断也需要补帧处理，进而继续与其它子流混音混屏以形成导播流，也就是说，有N条子流就需要对N条子流都进行混音混屏的处理。即使子流大量中断乃至全部中断，也要维持多路子流的补帧、混音混屏计算，不必要地占用资源。
鉴于此，本申请实施例中提供导播处理方法，以解决上述问题。
如图2所示，展示本申请一实施例中导播处理方法的流程示意图。
所述导播处理方法的流程包括：
步骤S201：持续地播放一背景流。
其中，所述背景流供与至少一子流经混合处理形成导播流。在一些实施例中，所述混合处理包括：混音混屏处理；或者，在其它实施例中，也可以视情形仅混屏或仅混音处理。
在一些实施例中，所述背景流静音播放，即不影响子流的混音播放。在可能的示例中，所述背景流包括：通过预设帧率及采样率输出的背景图像及静音帧。所述背景图像包括以下一种：黑屏、灰屏、彩屏及预设信号中断图像。
步骤S202：监听每个子流的状态，所述状态包括：中断及恢复；
步骤S203：根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；
由此，中断的子流不需要再进行混音混屏处理。
步骤S204：对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流。
具体的，对于所有正常子流(非中断的，即未中断过或中断恢复的)进行所述同步。
步骤S205：对所恢复的子流进行所述混合处理后以得到续播。
由此，利用常驻稳定的背景流的时间轴得到可靠时钟，同步子流，以实现对中断后恢复子流的断点续播。只需要对正常子流进行混音混屏处理的计算。
通过常驻而稳定的背景流持续播放，根据子流的中断或恢复状态动态相应地选择暂停或混屏处理，并且持续稳定播放的背景流可以提供可靠的时间轴。时间轴提供可靠的时钟供同步子流，这样就不需要通过补帧处理也能对中断恢复的子流在恢复时间点断点续播。可见，通过此方法，一方面通过背景流保持持续稳定输出，改善相关技术中只依赖子流混音混屏而在子流中断时播放卡顿、中断等不良问题；另一方面，也实现了断点续播的功能，改善用户体验；再一方面，不必再对中断子流维持补帧和混音混屏处理，计算量与正常播放的子流正相关，节省了计算资源。
另外，步骤S203的管理，还可包括对新接入的子流的插入；被移除子流的释放。可以理解的是，由于背景流的支撑作用，其它子流的接入、移除均不会对背景流的播放产生影响，也不会影响对应产生的导播流的正常播放，因而实现了灵活的子流接入、移除的管理。
为更直观说明上述优点，如图3所示，展示本申请一实施例中导播处理方法的原理示意图。
如图3中上半部分所示，增加了背景流之后，本申请实施例中实现了一种子流与背景流的“虚拟开关”，可根据子流1～子流N的状态选择与背景流之间“连接”或“断开”。“连接”即正常子流、新接入子流和背景流之间混音混屏处理成导播流的关系，“断开”即中断子流、移除子流相对于背景流之间断开，不再有混音混屏处理的关系。因此，支持子流任意接入及移除、随时中断及同步，更具灵活性和符合实际场景。
图3中下半部分用于说明断点续播的原理。子流1在t0中断，在t5恢复；子流2在t2中断，在t4恢复；子流3在t1中断，在t3恢复；子流N在t0中断，在t6恢复。因此，在t0时对中断的子流1、子流N暂停，在t1时候对中断的子流3暂停，在t2时对中断的子流2暂停；进而，在t3时对恢复的子流3，利用背景流的时钟同步对齐；在t4时对恢复的子流2，利用背景流的时钟同步对齐；在t5时对恢复的子流1，利用背景流的时钟同步对齐；在t6时对恢复的子流N，利用背景流的时钟同步对齐。实现各条子流的同步断点续播。
如图4所示，展示本申请实施例中的导播处理装置的功能模块示意图。所述导播处理装置的实现可以参考之前导播处理方法实施例，因此此示例中不再对相同的技术内容进行重复赘述。
请参考图4，所述导播处理装置包括：
背景流发生模块401，用于持续地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；
子流管理模块402，用于监听每个子流的状态，所述状态包括：中断及恢复；并根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；
同步模块403，用于对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；
混合处理模块404，用于对所恢复的子流进行所述混合处理后以得到续播。
在一些实施例中，所述混合处理包括：混音混屏处理。
需特别说明的是，在图4实施例中的各个功能模块，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以程序指令产品的形式实现。程序指令产品包括一个或多个程序指令。在计算机上加载和执行程序指令指令时，全部或部分地产生按照本申请的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。程序指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输。
并且，图4实施例所揭露的装置，可通过其它的模块划分方式实现。以上所表示的装置实施例仅仅是示意性的，例如所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个模块或模块可以结合或者可以动态到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接于可以是通过一些接口，装置或模块的间接耦合或通信连接于，可以是电性或其它的形式。
另外，图4实施例中的各功能模块及子模块可以动态在一个处理部件中，也可以是各个模块单独物理存在，也可以两个或两个以上模块动态在一个部件中。上述动态的部件既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。上述动态的部件如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。该存储介质可以是只读存储器，磁盘或光盘等。
如图5所示，展示本申请实施例中导播处理装置的电路结构示意图。
在一些实施例中，所述导播处理装置500可以部署于例如云端的服务器或者边缘计算设备，实现导播台功能，能广泛用于游戏直播、在线教育、体育直播、视频娱乐互动等行业。尤其的，部署于边缘计算设备，可有效降低云导播技术的进入门槛。可能的，所述边缘计算设备可以是例如无线5G网络中的边缘计算节点。
所述导播处理装置500包括总线501、处理器502、存储器503及通信器504。处理器502、存储器503之间可以通过总线501通信。所述存储器503中可以存储有程序指令(比如系统或应用软件)。所述处理器502通过运行存储器503中的程序指令来实现之前实施例(如图2)中方法的步骤。
总线501可以是外设部件互连标准(Peripheral Component Interconnect，PCI)总线或扩展工业标准结构(Extended Industry Standard Architecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，虽然图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
在一些实施例中，处理器502可以为中央处理器(Central Processing Unit，CPU)、微处理单元(MCU)、片上系统(System On Chip)、或现场可编程逻辑阵列(FPGA)等实现。存储器503可以包括易失性存储器(Volatile Memory)以用于运行程序时的数据暂存使用，例如随机存取存储器(Random Access Memory，RAM)。
存储器503还可以包括非易失性存储器(non-volatile memory)以用于数据存储，例如只读存储器(Read-Only Memory，ROM)，快闪存储器，硬盘驱动器(Hard Disk Drive，HDD)或固态盘(Solid-State Disk，SSD)。
所述通信器504用于与外部通信。在具体实例中，所述通信器504可以包括一个或多个有线和/或无线通信电路模块。举例来说，所述通信器504可以包括例如有线网卡、USB模块、串行接口模块等中的一种或多种。无线通信模块所遵循的无线通信协议包括：例如近距离无线通信(Nearfield communication，NFC)技术、红外(Infared，IR)技术、全球移动通讯系统(Global System for Mobile communications，GSM)、通用分组无线服务(GeneralPacket Radio Service，GPRS)、码分多址引入(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband Code division multiple access，WCDMA)、时分码分多址(Time-Division Code Division Multiple Access，TD-SCDMA)、长期演进(Long TermEvolution，LTE)、蓝牙(BlueTooth，BT)、全球导航卫星系统(Global NavigationSatellite System，GNSS)等中的一种或多种。
如图6所示，展示本申请一实施例中导播处理装置的实际应用流程示意图。
图6中的流程包括：
步骤S601:启动多路子流的输入线程；
步骤S602:启动背景流发生模块，以固定帧率及采样率输出背景图像及静音帧，背景图像可选取黑屏、灰屏、彩屏或特定的信号中断图像；
步骤S603:通过子流管理模块监听子流状态,若子流发生中断或恢复，通过“虚拟开关”，断开或开启该子流；若新接入子流,插入该流；若子流被移除,释放该流；；
步骤S604:通过同步模块接收背景流以及传入的所有正常流，并以背景流的时间轴作为参考时钟，对齐子流进行同步。
例如图3中，t0、t1、t2时刻子流发生中断，暂停该路子流的处理；而t3、t4、t5时刻，子流恢复正常，恢复子流的处理并与背景流的t3、t4、t5时刻对齐，实现子流的续播与同步
步骤S605:对同步后的背景流与子流进行混音混屏处理；
步骤S606:输出混合后的导播流；
重复步骤S602-S606直到任务停止。
需特别说明的是，本申请上述实施例的流程图表示的流程或方法表示可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能。
例如，图2等实施例中的各个步骤的顺序可能可以在具体场景中加以变化，并非以上述表示为限。
本申请实施例中还可以提供一种计算机可读存储介质，存储有程序指令，所述程序指令被运行时执行前述方法流程实施例(例如如图2)所执行的流程步骤。
即上述实施例中的方法步骤被实现为可存储在记录介质(诸如CD ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此表示的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如ASIC或FPGA)的记录介质上的这样的软件处理。
综上，本申请实施例中提供导播处理方法、装置、导播处理装置及存储介质，通过持续稳定地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；监听每个子流的状态，所述状态包括：中断及恢复；根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；对所恢复的子流进行所述混合处理后以得到续播。通过提供一条常驻且稳定的背景流，维持导播流持续稳定不中断，动态地接入各路子流来与背景流混屏，通过背景流的时间轴作为参考时钟来同步子流，实现断点续播，并灵活支持子流随时接入、断开、移除等。
上述实施例仅例示性说明本申请的原理及其功效，而非用于限制本申请。任何熟悉此技术的人士皆可在不违背本申请的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本申请所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本申请的权利要求所涵盖。

Claims (10)

1.一种导播处理方法，其特征在于，包括：
持续地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；
监听每个子流的状态，所述状态包括：中断及恢复；
根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；
对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；
对所恢复的子流进行所述混合处理后以得到续播。
2.根据权利要求1所述的导播处理方法，其特征在于，所述混合处理包括：混音混屏处理。
3.根据权利要求2所述的导播处理方法，其特征在于，所述背景流静音播放。
4.根据权利要求2或3所述的导播处理方法，其特征在于，所述背景流包括：通过预设帧率及采样率输出的背景图像及静音帧。
5.根据权利要求4所述的导播处理方法，其特征在于，所述背景图像包括以下一种：黑屏、灰屏、彩屏及预设信号中断图像。
6.根据权利要求1所述的导播处理方法，其特征在于，所述根据所监听的每个子流的状态对相应子流进行管理，还包括：新接入的子流的插入；被移除子流的释放。
7.一种导播处理装置，其特征在于，包括：
背景流发生模块，用于持续地播放一背景流；其中，所述背景流供与至少一子流经混合处理形成导播流；
子流管理模块，用于监听每个子流的状态，所述状态包括：中断及恢复；并根据所监听的每个子流的状态对相应子流进行管理，包括：对中断的子流暂停播放；确定中断恢复的子流；
同步模块，用于对中断恢复的子流，参考所述背景流的时间轴的时钟以同步所述恢复的子流；
混合处理模块，用于对所恢复的子流进行所述混合处理后以得到续播。
8.根据权利要求7所述的导播处理装置，其特征在于，所述混合处理包括：混音混屏处理。
9.一种导播处理装置，其特征在于，包括：通信器、存储器及处理器；所述通信器用于与外部通信；所述存储器用于存储程序指令；所述处理器用于运行所述程序指令以执行如权利要求1至6中任一项所述的导播处理方法。
10.一种计算机可读存储介质，其特征在于，存储有程序指令，所述程序指令被运行以执行如权利要求1至6中任一项所述的导播处理方法。
CN202111482573.9A 2021-12-07 2021-12-07 导播处理方法、装置、导播处理装置及存储介质 Pending CN114189710A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111482573.9A CN114189710A (zh) 2021-12-07 2021-12-07 导播处理方法、装置、导播处理装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111482573.9A CN114189710A (zh) 2021-12-07 2021-12-07 导播处理方法、装置、导播处理装置及存储介质

Publications (1)

Publication Number Publication Date
CN114189710A true CN114189710A (zh) 2022-03-15

Family

ID=80542545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111482573.9A Pending CN114189710A (zh) 2021-12-07 2021-12-07 导播处理方法、装置、导播处理装置及存储介质

Country Status (1)

Country Link
CN (1) CN114189710A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060146854A1 (en) * 2004-12-30 2006-07-06 Lg Electronics Inc. Apparatus and method for providing pause function of broadcasting streaming in terminal
CN101557474A (zh) * 2008-05-28 2009-10-14 北京同步科技有限公司 实现多路录制单元录制的视频文件时间点对齐的方法
CN102075723A (zh) * 2011-01-07 2011-05-25 天津天地伟业数码科技有限公司 非同步视频的切换装置及切换方法
CN105022600A (zh) * 2014-04-30 2015-11-04 北京同步科技有限公司 计算机集群拼接显示系统中的图形同步设备及同步方法
CN105847862A (zh) * 2016-03-30 2016-08-10 乐视控股（北京）有限公司 云导播台及其断流续播方法
CN105872697A (zh) * 2016-03-30 2016-08-17 乐视控股（北京）有限公司 云导播台及其基于音视频同步的续播方法
CN106791919A (zh) * 2016-12-05 2017-05-31 乐视控股（北京）有限公司 多媒体信息处理方法、装置和电子设备
CN108449553A (zh) * 2018-03-23 2018-08-24 中国人民解放军92941部队 导播控制系统及信号处理方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060146854A1 (en) * 2004-12-30 2006-07-06 Lg Electronics Inc. Apparatus and method for providing pause function of broadcasting streaming in terminal
CN101557474A (zh) * 2008-05-28 2009-10-14 北京同步科技有限公司 实现多路录制单元录制的视频文件时间点对齐的方法
CN102075723A (zh) * 2011-01-07 2011-05-25 天津天地伟业数码科技有限公司 非同步视频的切换装置及切换方法
CN105022600A (zh) * 2014-04-30 2015-11-04 北京同步科技有限公司 计算机集群拼接显示系统中的图形同步设备及同步方法
CN105847862A (zh) * 2016-03-30 2016-08-10 乐视控股（北京）有限公司 云导播台及其断流续播方法
CN105872697A (zh) * 2016-03-30 2016-08-17 乐视控股（北京）有限公司 云导播台及其基于音视频同步的续播方法
CN106791919A (zh) * 2016-12-05 2017-05-31 乐视控股（北京）有限公司 多媒体信息处理方法、装置和电子设备
CN108449553A (zh) * 2018-03-23 2018-08-24 中国人民解放军92941部队 导播控制系统及信号处理方法

Similar Documents

Publication Publication Date Title
CN111970524B (zh) 交互类直播连麦的控制方法、装置、系统、设备及介质
WO2014009197A1 (en) System and method for processing video and or audio signals
CN111601175B (zh) 一种弹幕推送控制方法、装置、设备及存储介质
JP2019149812A (ja) 送信装置、送信方法、受信装置、および受信方法
KR101833942B1 (ko) 실시간 영상 합성을 위한 트랜스코더
JP2010277434A (ja) 半導体集積回路
CN113259757A (zh) 一种便捷兼容多应用进行视频投屏的方法
CN114189710A (zh) 导播处理方法、装置、导播处理装置及存储介质
KR102051985B1 (ko) 이질적인 네트워킹 환경들에서 미디어 렌더링의 동기화
CN112995543B (zh) 分布式视频切换系统、方法、设备
CN112073727B (zh) 转码方法、装置、电子设备及存储介质
CN108696762A (zh) 一种同步播放方法、装置和系统
CN113973215A (zh) 数据去重方法、装置及存储介质
CN113031895A (zh) 投屏控制方法、装置及电子设备
JP2019149811A (ja) 送信装置、送信方法、受信装置、および受信方法
KR102459197B1 (ko) 프리젠테이션 커스터마이제이션 및 인터랙티비티를 위한 방법 및 장치
JP2008140368A (ja) 表示用にネットワークを介して通信されるコンテンツを処理するためのマルチグラフィックスプロセッサシステム及び方法
CN113727183B (zh) 直播推流方法、装置、设备、存储介质及计算机程序产品
CN113286108B (zh) 接口模式配置方法、装置、电子设备以及存储介质
US20190098373A1 (en) Packet outputting device and packet outputting method
CN113612728B (zh) 流媒体播放方法、传输设备和系统
CN115134641B (zh) 投屏方法、装置和电子设备
CN117812285A (zh) 数据处理方法、装置、电子设备及存储介质
CN115802085A (zh) 播放内容方法、装置、电子设备及存储介质
JP2024092686A (ja) コンテンツ配信システム、コンテンツ配信方法、及びコンテンツ配信プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination