CN108200358A - 一种音视频导播方法、系统及控制服务器 - Google Patents

Abstract

本发明公开了一种音视频导播方法、系统及控制服务器，其中，所述控制服务器包括：请求分发模块，用于接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。本申请提供的技术方案，能够降低音视频合成过程中的成本。

Description

一种音视频导播方法、系统及控制服务器

技术领域

本发明涉及互联网技术领域，特别涉及一种音视频导播方法、系统及控制服务器。

背景技术

在当前的一些应用场景中，通常需要对多路音视频信号进行整合，从而可以将多路音视频信号的画面在同一个视频画面中进行展示。例如，在视频会议、游戏解说的过程中，通常需要从多角度、多场景采集音视频信号，然后根据预先设定的方式或者导播的操控，将采集得到的音视频信号按照所需的画面和声音效果进行合成处理，最终可以将合成处理后的音视频信号提供给用户观看。

然而，传统的这种音视频合成的方式，通常需要比较昂贵的专用硬件设备，例如导播一体机，并且还需要比较专业的人员对专用硬件设备进行调控，因此，现有技术中音视频合成的方式成本较高。

发明内容

本申请的目的在于提供一种音视频导播方法、系统及控制服务器，能够降低音视频合成过程中的成本。

为实现上述目的，本申请一方面提供一种控制服务器，所述控制服务器包括：请求分发模块和多个逻辑服务器模块，其中：所述请求分发模块，用于接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；所述目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

为实现上述目的，本申请另一方面还提供一种音视频导播方法，所述方法包括：接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

为实现上述目的，本申请另一方面还提供一种音视频导播系统，所述系统包括导播控制模块、控制服务器、转码合成模块、源服务器模块以及推流服务器模块，其中：所述导播控制模块，用于提供指定类型的控制指令，当所述控制指令被触发时，向所述控制服务器发送包含被触发的控制指令的导播控制请求；所述控制服务器包括请求分发模块和多个逻辑服务器模块，其中：所述请求分发模块，用于接收所述导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；所述目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至所述转码合成模块；所述转码合成模块，用于从所述源服务器模块处获取所述转码指令指向的至少一路输入流，并将所述至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流推送到所述推流服务器模块；所述推流服务器模块，用于将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

为实现上述目的，本申请另一方面还提供一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现以下步骤：接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

由上可见，本申请提供的技术方案中，导播控制模块可以作为导播控制的用户层，导播控制者可以通过导播控制模块下达导播控制请求，并且可以通过导播控制模块查看监控流的画面。控制服务器则可以实现导播控制请求的安全校验，并且可以将导播控制请求调度至相匹配的逻辑服务器模块，以将导播控制请求编译为转码指令。该转码指令可以由转码合成模块进行处理，具体地，转码合成模块可以从源服务器模块处获取至少一路输入流，并可以根据转码指令对这些输入流进行合成处理，从而得到供用户观看的观众流以及供导播控制者观看的监控流。合成得到的监控流和观众流可以通过推流服务器模块分别推送至导播流媒体服务器和输出流媒体服务器，其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。本申请提供的系统可以部署于云服务器中，这样，导播控制者只需要下达音视频合成过程中的操控指令，音视频的合成过程均可以在云服务器的系统中完成，从而能够降低音视频合成过程中的成本。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例中音视频导播系统的架构示意图；

图2是本发明实施例中导播控制模块的示意图；

图3是本发明实施例中音视频导播方法的示意图；

图4是本发明实施例中音视频导播方法的流程图；

图5是本发明实施例中计算机终端的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

实施例一

本申请提供一种音视频导播系统，所述系统可以部署于云端服务器上，所述云端服务器可以是独立的服务器，也可以是分布式的服务器集群，具体地可以根据所需的运算资源灵活配置。

请参阅图1，所述音视频导播系统可以包括导播控制模块、控制服务器、转码合成模块、源服务器模块以及推流服务器模块。其中，所述导播控制模块，可以作为导播控制的用户层，在所述导播控制模块中，可以提供基于HTML5的导播控制台界面，导播控制者通过该界面，可以下达各种控制指令以及观看音视频合成的画面。具体地，所述导播控制模块可以用于提供指定类型的控制指令，当所述控制指令被触发时，可以向所述控制服务器发送包含被触发的控制指令的导播控制请求。在本实施方式中，所述导播控制模块可以实现多路音视频输入流的合成和切换，并且可以提供单路切换、多路混合音画、四路会议模式以及自定义模式这四种类型的控制指令。当其中某个控制指令被导播控制者触发时，导播控制模块便可以将被触发的控制指令封装为导播控制请求，并将该导播控制请求发送至所述控制服务器处。

此外，在所述导播控制模块中还可以包括第三方集成接口，所述第三方集成接口可以给第三方提供自定义导播控制台界面的能力。通过该第三方集成接口，第三方可以根据实际需求，改变所述导播控制台界面的样式，或者可以在所述导播控制台界面中增加或者减少展示元素，从而实现个性化的定制过程。

在一个实施方式中，所述导播控制模块可以作为导播状态存储的一级缓存，在该导播控制模块中，可以存储导播控制者下达的各项指令，并且可以实时监控合成音频流的展示画面。

在本实施方式中，所述控制服务器可以包括请求分发模块和多个逻辑服务器模块，其中，所述请求分发模块可以用于接收所述导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块。具体地，部署于云服务器中的音视频导播系统在同一时间可能会建立多个不同的导播实例，为了充分利用各个逻辑服务器模块的资源，可以通过负载均衡的方式，将多个不同的导播实例均匀地在各个逻辑服务器模块中进行分配。在实际应用中，导播控制请求中通常会携带用于表征导播实例的标识，该标识可以将所述导播控制请求对应的导播实例和其它的导播实例进行区分。所述请求分发模块可以根据导播控制请求中携带的标识，通过一致性哈希算法，计算得到该标识对应的哈希值，那么计算得到的哈希值对应的逻辑服务器模块便可以作为与所述导播实例相匹配的目标逻辑服务器模块。这样，便可以将所述导播控制请求调度至所述目标逻辑服务器模块处。

在本实施方式中，所述目标逻辑服务器模块可以用于将接收到的所述导播控制请求编译为能够被转码合成模块识别的转码指令，并将所述转码指令发送至所述转码合成模块处。

在一个实施方式中，所述控制服务器还可以包括验证模块，所述验证模块可以用于验证所述导播控制请求是否符合指定协议规范，若不符合，则可以向所述导播控制模块反馈错误提示信息。在实际应用中，所述验证模块首先可以验证所述导播控制请求的合法性，所述合法性可以指导播控制请求是否具备进行音视频导播的权限，因此该合法性验证也可以视为鉴权的过程。若合法性验证不通过，则可以向所述导播控制模块反馈类似“请求被拒绝”的提示。如果验证通过，则可以继续验证所述导播控制请求的有效性，若导播控制请求不符合控制协议规范，则可以向所述导播控制模块反馈类似“错误的请求”的提示。如果符合，则可以继续执行后续的过程。

在一个实施方式中，所述控制服务器中还可以包括二级存储模块，所述二级存储模块可以为上述的安全校验过程以及导播控制请求的编译过程提供数据存储支撑。

在本实施方式中，所述转码合成模块在接收到目标逻辑服务器模块发来的转码指令后，可以解析并处理该转码指令。所述转码合成模块可以根据该转码指令，对多路音视频输入流进行合成、切换、添加弹幕、添加水印、抠图、添加特效等各项操作。在所述转码合成模块中，可以生成供用户观看的观众流以及供导播控制者观看的监控流。在实际应用中，所述转码指令中可以包含待处理的至少一路输入流的标识，这样，根据该标识，转码合成模块便可以获取至少一路输入流，并将所述至少一路输入流处理为监控流和观众流之后，将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

具体地，所述转码合成模块中可以包括指令调度模块、指令处理模块以及推流模块，其中，所述指令调度模块，用于将接收到的所述转码指令调度至所述导播实例对应的工作节点。在本实施方式中，可以通过工作(worker)集群来处理各个导播实例的音视频合成过程。为了充分利用工作集群中各个工作节点的资源，同样可以采用一致性哈希算法，将各个导播实例在多个工作节点中进行均衡分配。这样，指定调度模块接收到所述转码指令之后，可以通过一致性哈希算法计算得到该转码指令对应的工作节点，从而可以将该转码指令调度至计算得到的工作节点处。

在本实施方式中，所述指令处理模块，用于通过所述工作节点，从源服务器模块处获取所述转码指令指向的至少一路输入流，并将所述至少一路输入流处理为监控流和观众流。其中，所述源服务器模块可以包括静态资源服务器和流媒体服务器，以向所述转码合成模块提供待处理的静态资源和音视频资源。

在本实施方式中，所述指令处理模块在将至少一路输入流处理为观众流时，可以将所述至少一路输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为观众流。例如，当前输入了视频流A和视频流B，那么可以将这两个视频流的画面合成至同一个视频画面中，从而可以在一个视频画面中观看到原本两个视频流的画面。合成后的视频画面对应的视频流便可以作为提供给用户观看的观众流。当然，在实际应用中，还会针对视频流的音频流进行相应的处理，并将处理后的音频流添加至观众流当中，一并提供给用户观看。

在本实施方式中，在监控流的画面中，除了要包含观众流的画面，还需要包含当前各个输入流的画面。这样设置的目的在于，可以让导播控制者能够在监控用户观看的视频画面的同时，还能够实时查看其它输入流的画面，从而可以针对输入流的画面进行后续的画面合成。这样，所述指令处理模块在生成监控流时，可以将所述观众流的视频画面以及所述至少一路输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。也就是说，在监控流的一帧视频画面中，不仅包含观众流中的视频画面，还包含当前各个输入流的视频画面。

在本实施方式中，所述指令处理模块在处理得到监控流和观众流之后，便可以通过所述推流模块，将所述监控流和所述观众流推送到所述推流服务器模块。

在本实施方式中，所述推流服务器模块可以将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器，其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。这样，导播控制者和用户便可以观看到各自的视频画面。

在本申请中，导播控制模块通过接收一路监控流，便可以查看到观众流的画面和各个输入流的画面，从而避免了针对每个画面单独拉取一路视频流，这样能够有效降低导播控制模块的网络带宽消耗。

请参阅图2，在一个实施方式中，所述导播控制模块中可以包括多个子模块。具体地，所述导播控制模块可以包括拉流源模块、指令下达模块以及推流源模块，其中，所述拉流源模块，可以用于设置流媒体源站地址以及流媒体参数。其中，所述流媒体源站地址可以为存储静态资源和流媒体资源的服务器的通信地址。所述流媒体参数可以包括所述至少一路输入流的缓存时间和防盗链等参数。这样，所述转码合成模块便可以按照所述流媒体参数从所述流媒体源站地址处获取所述至少一路输入流。需要说明的是，在本实施方式中，所述至少一路输入流可以包括直播流，也可以包括点播流。

在本实施方式中，所述指令下达模块可以用于提供指定类型的控制指令，所述指定类型的控制指令便可以是上述的单路切换、多路混合音画、四路会议模式以及自定义模式这四种类型的控制指令。其中，单路切换是在多个不同的输入流之间以音频跟随的方式快速地切换；多路混合音画模式提供常用的一路音频输出和大小窗模式，支持多路混音；四路会议模式将输入流的前四个视频源按四格均分布局输出，支持多路混音；自定义模式则支持客户自定义输出的视频布局，支持但不限于叠加、缩放、偏移等功能及多路混音。当所述控制指令被触发时，所述指令下达模块可以向控制服务器发送包含被触发的控制指令的导播控制请求。

在本实施方式中，所述推流源模块可以用于设置输出观众流的流媒体服务器地址以及所述观众流的输出流媒体参数，以使得所述转码合成模块可以将处理得到的观众流输出至所述流媒体服务器地址指向的输出流媒体服务器。

请参阅图2，在一个实施方式中，所述导播控制模块还包括视频处理模块、信息反馈模块以及实时监控模块，其中，所述视频处理模块可以用于针对所述输入流、所述观众流以及所述监控流下达画面调整指令。具体地，所述视频处理模块可以对输入流和合成流进行视频处理，提供但不限于水印、弹幕、抠图及转场特效功能。

所述信息反馈模块可以用于接收所述转码合成模块发来的异常信息，并接收在导播过程中产生的告警信息，所述告警信息通过异步回调的方式传输至所述信息反馈模块。具体地，转码合成模块将合成流推送到流媒体服务器时，如果推送失败，则将失败信息反馈到信息反馈模块。此外，将导播过程中出现的异常状况以异步回调的告警方式通知到信息反馈模块，能够不阻塞导播操作，又能够根据告警及时调整导播行为。

所述实时监控模块，用于监控所述至少一路输入流的质量信息、所述转码合成模块的运行状态以及各个视频流的画面。具体地，所述实时监控模块可以实时拉取导播流媒体服务器中的监控流，并在导播控制台中展示监控流的画面。

实施例二

本申请还提供一种控制服务器，所述控制服务器包括：请求分发模块和多个逻辑服务器模块，其中：

所述请求分发模块，用于接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

所述目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

在一个实施方式中，所述控制服务器还包括验证模块，所述验证模块用于验证所述导播控制请求是否符合指定协议规范，若不符合，向所述导播控制模块反馈错误提示信息。

在一个实施方式中，所述转码合成模块包括指令调度模块、指令处理模块以及推流模块，其中：

所述指令调度模块，用于将接收到的所述转码指令调度至所述导播实例对应的工作节点；

所述指令处理模块，用于通过所述工作节点，从源服务器模块处获取所述转码指令指向的至少一路输入流，并将所述至少一路输入流处理为监控流和观众流；

所述推流模块，用于将所述监控流和所述观众流推送到推流服务器模块，以使得所述推流服务器模块将所述监控流和所述观众流分别推送至导播流媒体服务器和输出流媒体服务器；其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。

在一个实施方式中，所述指令处理模块在对所述至少一路输入流处理时，将所述至少一路输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为观众流。

在一个实施方式中，所述指令处理模块还用于将所述观众流的视频画面以及所述至少一路输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。

在一个实施方式中，所述导播控制模块包括拉流源模块、指令下达模块以及推流源模块，其中：

所述拉流源模块，用于设置流媒体源站地址以及流媒体参数，以使得所述转码合成模块按照所述流媒体参数从所述流媒体源站地址处获取所述至少一路输入流；其中，所述至少一路输入流包括直播流和/或点播流，所述流媒体参数至少包括所述至少一路输入流的缓存时间和防盗链；

所述指令下达模块，用于提供指定类型的控制指令，当所述控制指令被触发时，向控制服务器发送包含被触发的控制指令的导播控制请求；

所述推流源模块，用于设置输出观众流的流媒体服务器地址以及所述观众流的输出流媒体参数，以使得所述转码合成模块将处理得到的观众流输出至所述流媒体服务器地址指向的输出流媒体服务器。

在一个实施方式中，所述导播控制模块还包括视频处理模块、信息反馈模块以及实时监控模块，其中：

所述视频处理模块，用于针对所述输入流、所述观众流以及所述监控流下达画面调整指令；

所述信息反馈模块，用于接收所述转码合成模块发来的异常信息，并接收在导播过程中产生的告警信息，所述告警信息通过异步回调的方式传输至所述信息反馈模块；

所述实时监控模块，用于监控所述至少一路输入流的质量信息、所述转码合成模块的运行状态以及各个视频流的画面。

实施例三

请参阅图3和图4，本申请还提供一种音视频导播方法，所述方法包括：

S1：接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

S2：将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

在一个实施方式中，所述方法还包括：验证所述导播控制请求是否符合指定协议规范，若不符合，向所述导播控制模块反馈错误提示信息。

在一个实施方式中，所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流包括：

将接收到的所述转码指令调度至所述导播实例对应的工作节点；

通过所述工作节点，从源服务器模块处获取所述转码指令指向的至少一路输入流，并将所述至少一路输入流处理为监控流和观众流；

将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器；其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。

在一个实施方式中，将所述至少一条输入流处理为观众流包括：

将所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为观众流。

在一个实施方式中，将所述至少一路输入流处理为监控流包括：

将所述观众流的视频画面以及所述至少一路输入流的视频画面整合至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。

本申请还提供一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现以下步骤：

S1：接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

S2：将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

请参阅图5，在本申请中，上述实施例中的技术方案可以应用于如图5所示的计算机终端10上。计算机终端10可以包括一个或多个(图中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输模块106。本领域普通技术人员可以理解，图5所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图5中所示更多或者更少的组件，或者具有与图5所示不同的配置。

存储器104可用于存储应用软件的软件程序以及模块，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。

由上可见，本申请提供的技术方案中，导播控制模块可以作为导播控制的用户层，导播控制者可以通过导播控制模块下达导播控制请求，并且可以通过导播控制模块查看监控流的画面。控制服务器则可以实现导播控制请求的安全校验，并且可以将导播控制请求调度至相匹配的逻辑服务器模块，以将导播控制请求编译为转码指令。该转码指令可以由转码合成模块进行处理，具体地，转码合成模块可以从源服务器模块处获取至少一条输入流，并可以根据转码指令对这些输入流进行合成处理，从而得到供用户观看的观众流以及供导播控制者观看的监控流。合成得到的监控流和观众流可以通过推流服务器模块分别推送至导播流媒体服务器和输出流媒体服务器，其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。本申请提供的系统可以部署于云服务器中，这样，导播控制者只需要下达音视频合成过程中的操控指令，音视频的合成过程均可以在云服务器的系统中完成，从而能够降低音视频合成过程中的成本。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (16)

1.一种控制服务器，其特征在于，所述控制服务器包括：请求分发模块和多个逻辑服务器模块，其中：

所述请求分发模块，用于接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

所述目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一路输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

2.根据权利要求1所述的控制服务器，其特征在于，所述控制服务器还包括验证模块，所述验证模块用于验证所述导播控制请求是否符合指定协议规范，若不符合，向所述导播控制模块反馈错误提示信息。

3.根据权利要求1所述的控制服务器，其特征在于，所述转码合成模块包括指令调度模块、指令处理模块以及推流模块，其中：

所述指令调度模块，用于将接收到的所述转码指令调度至所述导播实例对应的工作节点；

所述指令处理模块，用于通过所述工作节点，从源服务器模块处获取所述转码指令指向的至少一条输入流，并将所述至少一条输入流处理为所述监控流和所述观众流；

所述推流模块，用于将所述监控流和所述观众流推送到推流服务器模块，以使得所述推流服务器模块将所述监控流和所述观众流分别推送至所述导播流媒体服务器和所述输出流媒体服务器；其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。

4.根据权利要求3所述的控制服务器，其特征在于，所述指令处理模块在对所述至少一条输入流处理时，将所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述观众流。

5.根据权利要求4所述的控制服务器，其特征在于，所述指令处理模块还用于将所述观众流的视频画面以及所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。

6.根据权利要求1所述的控制服务器，其特征在于，所述导播控制模块包括拉流源模块、指令下达模块以及推流源模块，其中：

所述拉流源模块，用于设置流媒体源站地址以及流媒体参数，以使得所述转码合成模块按照所述流媒体参数从所述流媒体源站地址处获取所述至少一条输入流；其中，所述至少一条输入流包括直播流和/或点播流，所述流媒体参数至少包括所述至少一条输入流的缓存时间和防盗链；

所述指令下达模块，用于提供指定类型的控制指令，当所述控制指令被触发时，向所述控制服务器发送包含被触发的控制指令的导播控制请求；

所述推流源模块，用于设置输出观众流的流媒体服务器地址以及所述观众流的输出流媒体参数，以使得所述转码合成模块将处理得到的观众流输出至所述流媒体服务器地址指向的输出流媒体服务器。

7.根据权利要求1或6所述的控制服务器，其特征在于，所述导播控制模块还包括视频处理模块、信息反馈模块以及实时监控模块，其中：

所述视频处理模块，用于针对所述输入流、所述观众流以及所述监控流下达画面调整指令；

所述信息反馈模块，用于接收所述转码合成模块发来的异常信息，并接收在导播过程中产生的告警信息，所述告警信息通过异步回调的方式传输至所述信息反馈模块；

所述实时监控模块，用于监控所述至少一条输入流的质量信息、所述转码合成模块的运行状态以及各个视频流的画面。

8.一种音视频导播方法，其特征在于，所述方法包括：

接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

9.根据权利要求8所述的方法，其特征在于，所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流包括：

将接收到的所述转码指令调度至所述导播实例对应的工作节点；

通过所述工作节点，从源服务器模块处获取所述转码指令指向的至少一条输入流，并将所述至少一条输入流处理为所述监控流和所述观众流；

将所述监控流和所述观众流分别推送到所述导播流媒体服务器和所述输出流媒体服务器；其中，所述导播流媒体服务器用于将接收到的所述监控流反馈至所述导播控制模块，所述输出流媒体服务器用于将所述观众流提供给用户客户端。

10.根据权利要求9所述的方法，其特征在于，将所述至少一条输入流处理为观众流包括：

将所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述观众流。

11.根据权利要求10所述的方法，其特征在于，将所述至少一条输入流处理为监控流包括：

将所述观众流的视频画面以及所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。

12.一种音视频导播系统，其特征在于，所述系统包括导播控制模块、控制服务器、转码合成模块、源服务器模块以及推流服务器模块，其中：

所述导播控制模块，用于提供指定类型的控制指令，当所述控制指令被触发时，向所述控制服务器发送包含被触发的控制指令的导播控制请求；

所述控制服务器包括请求分发模块和多个逻辑服务器模块，其中：所述请求分发模块，用于接收所述导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；所述目标逻辑服务器模块，用于将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至所述转码合成模块；

所述转码合成模块，用于从所述源服务器模块处获取所述转码指令指向的至少一条输入流，并将所述至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流推送到所述推流服务器模块；

所述推流服务器模块，用于将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。

13.根据权利要求12所述的系统，其特征在于，所述转码合成模块在对所述至少一条输入流处理时，将所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述观众流。

14.根据权利要求13所述的系统，其特征在于，所述转码合成模块还用于将所述观众流的视频画面以及所述至少一条输入流的视频画面合成至一个视频画面中，并将合成得到的视频画面对应的视频流作为所述监控流。

15.根据权利要求12所述的系统，其特征在于，所述导播控制模块包括拉流源模块和推流源模块，其中：

所述拉流源模块，用于设置流媒体源站地址以及流媒体参数，以使得所述转码合成模块按照所述流媒体参数从所述流媒体源站地址处获取所述至少一条输入流；其中，所述至少一条输入流包括直播流和/或点播流，所述流媒体参数至少包括所述至少一条输入流的缓存时间和防盗链；

所述推流源模块，用于设置输出观众流的流媒体服务器地址以及所述观众流的输出流媒体参数，以使得所述转码合成模块将处理得到的观众流输出至所述流媒体服务器地址指向的输出流媒体服务器。

16.一种计算机存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现以下步骤：

接收导播控制模块发来的导播控制请求，并根据所述导播控制请求对应的导播实例，将所述导播控制请求调度至所述多个逻辑服务器模块中与所述导播实例相匹配的目标逻辑服务器模块；

将接收到的所述导播控制请求编译为转码指令，并将所述转码指令发送至转码合成模块，以使得所述转码合成模块基于所述转码指令，将至少一条输入流处理为监控流和观众流，并将所述监控流和所述观众流分别推送到导播流媒体服务器和输出流媒体服务器。