CN111050025A - 音视频显控方法、装置、系统及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种分布式超大分辨率音视频显控方法、装置、系统及可读存储介质，该方法包括：控制编码节点从与编码节点对应的显卡头采集第一音视频信号流，判断第一音视频信号流所属的信号流类型；若第一音视频信号流为组合信号流，对所有第一音视频信号流进行同步处理，并对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；为第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；通过交换机将第二音视频信号帧转发至解码节点，解码节点基于第一时间戳同步对第二音视频信号帧进行解码，得到第二音视频信号流；将第二音视频信号流发送至LED屏，以显示第二音视频信号流对应的音视频，解决了拼接屏播放不同步的问题。

Description

音视频显控方法、装置、系统及计算机可读存储介质

技术领域

本发明涉及显示技术领域，尤其涉及一种音视频显控方法、装置、系统及计算机可读存储介质。

背景技术

随着显示技术的不断发展，以4K分辨率为基础显示单元的的超大分辨率显示解决方案越来越流行。采用多显卡拼接输出的多媒体素材本身是超大分辨率的，需要通过拼接屏显示出来，这种通过拼接屏输出超大分辨率的多媒体素材技术被广泛应用于各种大数据指挥中心、监控运维调度中心、大型会议室、展厅等场景当中。

传统分布式拼接屏系统的节点单元单独供电，通过网口互传数据，这种组网形式在一个编码节点码流数据分发给一个或者多个解码节点进行解码显示时比较容易处理，但当出现上述超大分辨率图像场景时，由于传统分布式拼接屏系统的节点单元独立运行，当多个编码节点发送码流数据给多个解码节点时，解码节点无法准确的同步所有编码节点的码流数据，导致整幅画面不能同步显示，尤其是当输入的音视频信号运动比较剧烈时，在拼接屏上播放出来的画面被撕裂分割得非常明显，导致视觉体验太差。

发明内容

本发明的主要目的在于提出一种音视频显控方法、装置、系统及计算机可读存储介质，旨在解决现有技术中拼接屏播放超大分辨率图像时出现整幅画面不一致的问题。

为实现上述目的，本发明提供了一种音视频显控方法，所述音视频显控方法应用于分布式音视频显控系统，所述分布式音视频显控系统包括至少一个显卡头，至少一个编码节点，交换机，至少一个解码节点，至少一个LED屏，所述显卡头的数量与所述编码节点的数量相同，所述LED屏的数量与所述解码节点的数量相同，每个所述显卡头分别与不同的所述编码节点之间通过HDMI/DVI线连接，每个所述LED屏分别与不同的所述解码器之间通过所述HDMI/DVI线连接，所述交换机分别与所有所述编码节点、所有所述解码节点之间通过网线连接，所述音视频显控方法包括：

控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流，判断所述第一音视频信号流所属的信号流类型；

若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理，并对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频。

进一步地，所述判断所述第一音视频信号流所属的信号流类型的步骤之后，还包括：

若所述第一音视频信号流为单端信号流，对所述第一音视频信号流进行编码，得到第三音视频信号帧；

为所述第三音视频信号帧添加第二时间戳，得到第四音视频信号帧，并将所述第四音视频信号帧通过交换机转发至所述解码节点；

所述解码节点基于所述第二时间戳对所述第四音视频信号帧进行解码，得到第三音视频信号流，并将所述第三音视频信号流发送至所述LED屏，以显示所述第三音视频信号流对应的音视频。

进一步地，所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流的步骤包括：

当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别；

若所述第二音视频信号帧为组合信号帧，则基于所述第一时间戳对所有所述第二音视频信号帧进行同步处理，并为所有所述第二音视频信号帧添加相同的第三时间戳，得到第二子音视频信号帧；

基于所述第三时间戳对第二子音视频信号帧进行解码，得到第二音视频信号流。

进一步地，所述当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别的步骤之后，还包括：

若所述第二音视频信号帧为单端信号帧，则直接对所述第二音视频信号帧进行解码，得到所述第二音视频信号流。

进一步地，所述分布式音视频显控系统还包括可视化控制平台，所述可视化控制平台与所述交换机通信连接，

所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤之前，还包括：

当所述交换机接收到所述第二音视频信号帧，控制所述可视化控制平台可视化显示所述交换机对所述第二音视频信号帧进行重排处理过程。

进一步地，所述将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频的步骤之前，还包括：

对所述第二音视频信号流进行裁剪和拼接，并对裁剪和拼接后的所述第二音视频信号流进行显示同步处理，得到处理后的所述第二音视频信号流。

进一步地，所述对所述第二音视频信号流进行裁剪和拼接的步骤包括：

接收所述可视化控制平台发送的音视频处理指令；

根据由所述音视频处理指令生成的坐标数据，对所述第二音视频信号流进行裁剪和拼接。

此外，为实现上述目的，本发明还提供一种音视频显控装置，所述音视频显控装置包括：

控制采集模块，用于控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流；

判断模块，用于判断所述第一音视频信号流所属的信号流类型；

同步处理模块，用于若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理；

编码模块，用于对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

添加模块，用于为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

转发模块，用于通过所述交换机将所述第二音视频信号帧转发至所述解码节点；

解码模块，用于所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

发送模块，用于将所述第二音视频信号流发送至所述LED屏；

显示模块，用于显示所述第二音视频信号流对应的音视频。

此外，为实现上述目的，本发明还提供一种音视频显控系统，所述音视频显控系统包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的音视频显控程序，所述音视频显控程序被所述处理器执行时实现如上所述的音视频显控方法的步骤。

此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有所述音视频显控程序，所述音视频显控程序被处理器执行时实现如上所述的音视频显控方法的步骤。

本实施例通过控制编码节点从显卡头采集第一音视频信号流，支持多个编码节点从多个显卡头获取音视频信号，并判断第一音视频信号流所属的信号类型，当第一音视频信号流的信号流类型是组合信号流，对第一音视频信号流进行同步处理，使得编码节点对第一音视频信号流中的信号同时编码得到第二音视频信号帧，防止编码时间相差太大，不能同步显示，为第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧，以将第二音视频信号帧同时经交换机转发至解码节点，解码节点基于第一时间戳对第二音视频信号帧进行同步解码，得到第二音视频信号流，并将第二音视频信号发送至LED屏，以显示该第二音视频信号流对应的音视频，实现了多路音视频信号的同时播放，提高了观看者的体验感。

附图说明

图1为实现本发明各个实施例一种系统的硬件结构示意图；

图2为本发明音视频显控系统的示意图；

图3为本发明中分布式音视频显控方法第一实施例的流程示意图；

图4为本发明中分布式音视频显控方法第二实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明提供了一种音视频显控系统，参照图1，图1是本发明实施例方案涉及的硬件运行环境的结构示意图。

需要说明的是，图1即可为音视频显控系统的硬件运行环境的结构示意图。本发明实施例音视频显控系统是一套嵌入式硬件系统。

如图1所示，该音视频显控系统可以包括：处理器1001，例如CPU，存储器1005，用户接口1003，网络接口1004，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括触控一体机、PC台式机，触控平板，可选用户接口1003还可以包括语音笔，电子教鞭，红外遥控器。网络接口1004可选的可以包括标准的有线接口，比如1000M网口及光纤口。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的音视频显控系统结构并不构成音视频显控系统的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机存储可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及音视频显控程序。其中，操作系统是管理和控制音视频显控系统硬件和软件资源的程序，支持音视频显控程序以及其它软件或程序的运行。

图1所示的音视频显控系统，可用于回声的消除，用户接口1003主要用于侦测或者输出各种信息，如侦测第一音视频信号帧和输出第二音视频信号流等；网络接口1004主要用于与后台服务器交互，进行通信；处理器1001可以用于调用存储器1005中存储的音视频显控程序，所述音视频显控程序应用于分布式音视频显控系统，所述分布式音视频显控系统包括至少一个显卡头，至少一个编码节点，交换机，至少一个解码节点，至少一个LED屏，所述显卡头的数量与所述编码节点的数量相同，所述LED屏的数量与所述解码节点的数量相同，每个所述显卡头分别与不同的所述编码节点之间通过HDMI/DVI线连接，每个所述LED屏分别与不同的所述解码器之间通过所述HDMI/DVI线连接，所述交换机分别与所有所述编码节点、所有所述解码节点之间通过网线连接，并执行以下操作：

控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流，判断所述第一音视频信号流所属的信号流类型；

若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理，并对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频。

进一步地，所述判断所述第一音视频信号流所属的信号流类型的步骤之后，处理器1001可以用于调用存储器1005中存储的音视频显控程序，并执行以下操作：

若所述第一音视频信号流为单端信号流，对所述第一音视频信号流进行编码，得到第三音视频信号帧；

为所述第三音视频信号帧添加第二时间戳，得到第四音视频信号帧，并将所述第四音视频信号帧通过交换机转发至所述解码节点；

所述解码节点基于所述第二时间戳对所述第四音视频信号帧进行解码，得到第三音视频信号流，并将所述第三音视频信号流发送至所述LED屏，以显示所述第三音视频信号流对应的音视频。

进一步地，所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流的步骤包括：

当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别；

若所述第二音视频信号帧为组合信号帧，则基于所述第一时间戳对所有所述第二音视频信号帧进行同步处理，并为所有所述第二音视频信号帧添加相同的第三时间戳，得到第二子音视频信号帧；

基于所述第三时间戳对第二子音视频信号帧进行解码，得到第二音视频信号流。

进一步地，所述当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别的步骤之后，处理器1001可以用于调用存储器1005中存储的音视频显控程序，并执行以下操作：

若所述第二音视频信号帧为单端信号帧，则直接对所述第二音视频信号帧进行解码，得到所述第二音视频信号流。

进一步地，所述分布式音视频显控系统还包括可视化控制平台，所述可视化控制平台与所述交换机通信连接，所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤之前，处理器1001可以用于调用存储器1005中存储的音视频显控程序，并执行以下操作：

当所述交换机接收到所述第二音视频信号帧，控制所述可视化控制平台可视化显示所述交换机对所述第二音视频信号帧重排处理过程。

进一步地，所述将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频的步骤之前，处理器1001可以用于调用存储器1005中存储的音视频显控程序，并执行以下操作：

对所述第二音视频信号流进行裁剪和拼接，并对裁剪和拼接后的所述第二音视频信号流进行显示同步处理，得到处理后的所述第二音视频信号流。

进一步地，所述对所述第二音视频信号流进行裁剪和拼接的步骤包括：

接收所述可视化控制平台发送的音视频处理指令；

根据由所述音视频处理指令生成的坐标数据，对所述第二音视频信号流进行裁剪和拼接。

本发明通过编码节点从与该编码节点对应的显卡头采集第一音视频信号流，并判断第一音视频信号流所属的信号流类型，若第一音视频信号流为组合信号流，对第一音视频信号流进行同步处理，且对其编码，得到第一音视频信号帧，以减小第一音视频信号流的存储空间，为第一音视频信号帧设添加相同的第一时间戳，得到第二音视频信号帧，这一步骤的目的在于在编码节点进行同步处理且让第二音视频信号帧具有相同的第一时间戳，以使解码节点对第二音视频信号帧同时解码，进一步地使第二音视频信号帧中的音视频信号在播放时可以同步，通过交换机将第二音视频信号帧转发至解码节点，该解码节点基于第一时间戳对第二音视频信号帧进行解码，并将解码后得到的第二音视频信号流发送至LED屏以显示第二音视频信号流对应的音视频，实现了多路音视频信号的同步播放，提高了观看者的体验感。

基于上述结构，提出本发明音视频显控方法的各个实施例。各个实施例提供的音视频显控方法均应用于分布式音视频显控系统，如图2，所述分布式音视频显控系统包括至少一个显卡头、至少一个编码节点、交换机、至少一个解码节点和至少一个LED屏，所述显卡头与所述编码节点一一对应通信连接，所述LED屏与所述解码节点一一对应通信连接，所述编码节点和所述解码节点分别与所述交换机通信连接。

本发明提供一种音视频显控方法。

参照图1，图1为本发明音视频显控方法第一实施例的流程示意图。

在本实施例中，提供了音视频显控方法的实施例，需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

在本实施例中，音视频显控方法包括：

步骤S10，控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流，判断所述第一音视频信号流所属的信号流类型。

首先对分布式音视频显控系统做一个说明，交换机具有级连口和网线接口，便于扩展接入交换机的节点数量，当接入的节点数量很大时，可接入万兆交换机作为核心交换机，千兆交换机作为底层交换机，显卡头的数量与编码节点的数量相同，显卡头与编码节点一一对应通信连接，如显卡节点1与编码节点1对应连接，显卡节点2与编码节点2对应连接，LED屏的数量和解码节点的数量相同，LED屏与解码节点也是一一对应通信连接，编码节点支持的输入接口类型为DP1.4、HDMI2.0、HDMI2.1或DVI，解码节点支持的输出接口类型同样为DP1.4、HDMI2.0、HDMI2.1或DVI，编码节点和解码节点的接口类型可以任意选择。

首先启动NTP(Network Time Protocol，网络时间协议)线程，对每个节点的媒体时间进行重新设置，使其保持一致。显卡头将第一音视频信号流通过编码节点的输入接口发送中编码节点，当编码节点收到第一音视频信号流之后，判断第一音视频信号流所属的信号流类型，信号流类型包括组合信号流和单端信号流。

步骤S20，若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理，并对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧。

组合信号流的意思是多个编码节点均收集到了第一音视频信号流。当多个编码节点接收到第一音视频信号流时，启动PTS(Presentation Time Stamp，显示时间戳)线程，以使接收到第一音视频信号流的编码节点对第一音视频信号流进行同步编码。编码方法包括H264编码和H265编码。虽然已启动了NTP线程，但是为了使各路信号流同步的更加精确，又使用了PTS线程，对同步处理后的第一音视频信号流进行编码，得到第一音视频信号帧。

步骤S30，为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧。

根据PTS线程中延时补偿算法，得到延时误差，根据该延时误差校正媒体时间，得到PTS时间，并将该PTS时间作为第一时间戳添加在第一音视频信号帧中，得到第二音视频信号帧。

步骤S40，通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流。

编码节点和解码节点通过交换机进行连接，当解码节点接收到交换机转发的第二音视频信号帧后，对第一时间戳相同的第二音视频信号帧进行同步解码，得到第二音视频信号流。

进一步地，所述分布式音视频显控系统还包括可视化控制平台，所述可视化控制平台与所述交换机之间通过网线连接，

所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤之前，还包括：

步骤a，当所述交换机接收到所述第二音视频信号帧，所述可视化控制平台对所述第二音视频信号帧进行重排处理，并将重排后的所述第二音视频信号帧转发至所述解码节点。

当交换机接收到第二音视频信号帧时，可视化控制平台可以显示第二音视频信号帧中的信号，可视化控制平台的用户可以通过拖拽这些信号，将交换机中的第二音视频信号帧进行重排，使得第二音视频信号帧中的信号在LED屏上合理的位置显示，重排后的第二音视频信号帧可以从非原来的输出接口输出，传输至解码节点。

进一步地，通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤包括：

步骤S50，将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频。

当LED屏接收到第二音视频信号流，即可显示该第二音视频对应的音频和音视频。

本实施例通过编码节点从显卡头采集第一音视频信号流，支持多个编码节点从多个显卡头获取音视频信号，并检测第一音视频信号流所属的信号类型，当第一音视频信号流的信号流类型是组合信号流，对第一音视频信号流进行同步处理，使得编码节点对第一音视频信号流中的信号同时编码得到第二音视频信号帧，防止编码时间相差太大，不能同步显示，为第一音视频信号帧设置相同的第一时间戳，得到第二音视频信号帧，以将第二音视频信号帧同时经交换机转发至解码节点，解码节点对第二音视频信号帧进行解码，得到第二音视频信号流，并将第二音视频信号发送至LED屏，以显示该第二音视频信号流对应的音视频，实现了多路音视频信号的同时播放，提高了观看者的体验感。

进一步地，提出本发明音视频显控方法的第二实施例。，所述判断所述第一音视频信号流所属的信号流类型的步骤之后，还包括：

步骤S60，若所述第一音视频信号流为单端信号流，对所述第一音视频信号流进行编码，得到第三音视频信号帧。

单端信号流是指只有一个编码节点接收到了第一音视频信号流。当编码节点采集到的第一音视频信号流为单端信号流时，不需对第一音视频信号流进行同步处理，直接对第一音视频信号流进行编码，得到第三音视频信号帧。编码方法包括H264编码和H265编码。

步骤S70，为所述第三音视频信号帧添加第二时间戳，得到第四音视频信号帧，并将所述第四音视频信号帧通过交换机转发至所述解码节点。

用媒体时间对第三音视频信号帧设置第二时间戳，得到第四音视频信号帧，并将第四音视频信号帧经交换机转发至解码节点。单端信号流不需在可视化控制平台进行信号重排。

步骤S80，所述解码节点基于所述第二时间戳对所述第四音视频信号帧进行解码，得到第三音视频信号流，并将所述第三音视频信号流发送至所述LED屏，以显示所述第三音视频信号流对应的音视频。

当解码节点接收到第四音视频信号帧时，还会对第四音频信号帧所属类别进行重新检测，当检测到第四音视频信号帧为单端信号帧时，对对第二时间戳相同的第四音视频信号帧进行同步解码，得到第三音视频信号流，将第三音视频信号流发送至LED屏，LED屏显示第三音视频信号流对应的音视频。

本实施例通过检测到第一音视频信号流为单端信号流，编码节点没有对第一音视频信号流进行同步处理，而是直接对第一音视频信号流进行编码，得到第三音视频信号帧，为第三音视频信号帧打上时间戳，得到第四音视频信号帧，并将第四音视频信号帧经交换机转发至解码节点，可视化控制平台不需对第四音视频信号帧进行重排，解码节点不需对接收到的第四音视频信号帧再打时间戳，直接对第四音视频信号帧进行解码，得到第三音视频信号流，并将该第三音视频流发送至LED屏，LED屏显示第三音视频信号对应的音视频，这种有区别于对组合信号流的处理方式体现了对音视频信号流的灵活处理，避免了系统资源的浪费。

进一步地，提出本发明音视频显控方法的第三实施例。音视频显控方法的第三实施例与音视频显控方法的第一或第二实施例的区别在于，所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流的步骤包括：

步骤b，当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别。

当解码节点接收到第二音视频信号帧时，与编码节点一样，对第二音视频信号帧的所属类别进行检测，根据第二音视频信号帧的标志位检测第二音视频信号帧的所述类别。

步骤c，若所述第二音视频信号帧为组合信号帧，则基于所述第一时间戳对所有所述第二音视频信号帧进行同步处理，并为所有所述第二音视频信号帧添加相同的第三时间戳，得到第二子音视频信号帧。

步骤d，基于所述第三时间戳对第二子音视频信号帧进行解码，得到第二音视频信号流。

对组合信号流进行编码即可得到组合信号帧。所以若音视频信号流为组合信号流，则该音视频信号流对应的音视频信号帧为组合信号帧，当检测到第二音视频信号帧为组合信号帧时，则需要对第一时间戳相同的第二音视频信号帧进行同步处理，编码节点启动PTS线程，计算延时误差，并根据该延时误差校正媒体时间，得到解码节点的PTS时间，将该PTS时间作为第三时间戳设置于第二音视频信号帧，得到第二子音视频信号帧。

解码节点对第三时间戳相同的第二子音视频信号帧进行解码，得到第二音视频信号流。

本实施例通过解码节点对第二音视频信号帧进行同步处理，并对第二音视频打时间戳，使得对第二音视频帧同步的更加准确，进一步地减小了LED屏播放时的同步误差，一般来说，采用本实施例的方法可将同步误差控制在100ns(纳秒)以内。

进一步地，提出本发明音视频显控方法的第四实施例。音视频显控方法的第四实施例与音视频显控方法的第一、第二或第三实施例的区别在于，所述分布式音视频显控系统还包括可视化控制平台，所述可视化控制平台与所述交换机通信连接，

所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤之前，还包括：

步骤e，当所述交换机接收到所述第二音视频信号帧，控制所述可视化控制平台可视化显示所述交换机对所述第二音视频信号帧重排处理过程。

可视化控制平台可显示交换机接收到第二音视频信号帧的信号，并且可对这些信号进行拖拽操作，就是将这些信号重新排列，以使其能够在合适的LED屏显示。对第二音视频信号帧进行重排后，根据重排后第二音视频信号帧的所在位置，交换机将第二音视频信号帧发送至该所在位置对应的解码节点。

本实施例通过可视化控制平台实现了对第二音视频信号帧的显示位置的控制，这种可视化操作降低了LED屏显示出错的概率，提高了音视频显控质量。

进一步地，提出本发明音视频显控方法的第五实施例。音视频显控方法的第五实施例与音视频显控方法的第一、第二、第三或第四实施例的区别在于，所述将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频的步骤之前，还包括：

步骤f，对所述第二音视频信号流进行裁剪和拼接，并对裁剪和拼接后的所述第二音视频信号流进行显示同步处理，得到处理后的所述第二音视频信号流。

在LED屏显示音视频之前，解码节点对第二音视频信号流进行裁剪和拼接，再对裁剪和拼接后的第二音视频信号进行显示同步处理，将处理后的第二音视频信号流发送给LED屏，以使得LED屏的显示效果更好，提高了观看者的体验感。

进一步地，步骤f包括：

步骤g，接收所述可视化控制平台发送的音视频处理指令。

对第二音视频信号流进行裁剪和拼接的指令是由可视化控制平台经交换机发送给解码节点。

步骤h，根据由所述音视频处理指令生成的坐标数据，对所述第二音视频信号流进行裁剪和拼接。

解码节点根据收到的裁剪和拼接的指令中的坐标数据对第二音视频信号流进行裁剪和拼接。

本实施例通过对第二音视频信号流进行裁剪和拼接，提示了LED屏的显示质量，又对裁剪和拼接后的第二音视频信号流进行显示和同步处理，进一步的保证了LED屏对各路音视频同时输出。

此外，本发明实施例还提出一种音视频显控装置，所述音视频显控装置包括：

控制采集模块，用于控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流；

判断模块，用于判断所述第一音视频信号流所属的信号流类型；

同步处理模块，用于若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理；

编码模块，用于对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

添加模块，用于为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

转发模块，用于通过所述交换机将所述第二音视频信号帧转发至所述解码节点；

解码模块，用于所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

发送模块，用于将所述第二音视频信号流发送至所述LED屏；

显示模块，用于显示所述第二音视频信号流对应的音视频。

进一步地，所述编码模块还用于若所述第一音视频信号流为单端信号流，对所述第一音视频信号流进行编码，得到第三音视频信号帧；

所述添加模块还用于为所述第三音视频信号帧添加第二时间戳，得到第四音视频信号帧；

所述转发模块还用于将所述第四音视频信号帧通过交换机转发至所述解码节点；

所述解码模块还用于所述解码节点基于所述第二时间戳对所述第四音视频信号帧进行解码，得到第三音视频信号流；

所述发送模块还用于将所述第三音视频信号流发送至所述LED屏；

所述显示模块还用于显示所述第三音视频信号流对应的音视频。

进一步地，所述检测模块还用于当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别；

所述同步处理模块还用于若所述第二音视频信号帧为组合信号帧，则基于所述第一时间戳对所有所述第二音视频信号帧进行同步处理；

所述设置模块还用于为所有所述第二音视频信号帧添加相同的第三时间戳，得到第二子音视频信号帧；

所述解码模块还用于基于第三时间戳对第二子音视频信号帧进行解码，得到第二音视频信号流。

进一步地，所述解码模块还用于若所述第二音视频信号帧为单端信号帧，则直接对所述第二音视频信号帧进行解码，得到所述第二音视频信号流。

进一步地，所述音视频显控装置还包括：

重排处理模块，用于当所述交换机接收到所述第二音视频信号帧，控制所述可视化控制平台可视化显示所述交换机对所述第二音视频信号帧重排处理过程。

进一步地，所述音视频显控装置还包括：

裁剪拼接模块，用于对所述第二音视频信号流进行裁剪和拼接；

所述同步处理模块还用于对裁剪和拼接后的所述第二音视频信号流进行显示同步处理，得到处理后的所述第二音视频信号流。

进一步地，所述裁剪拼接模块还包括：

接收单元，用于接收所述可视化控制平台发送的音视频处理指令；

裁剪拼接单元，用于根据由所述音视频处理指令生成的坐标数据，对所述第二音视频信号流进行裁剪和拼接。

本发明所述音视频显控装置实施方式与上述音视频显控方法各实施例基本相同，在此不再赘述。

此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有音视频显控程序，所述音视频显控程序被处理器执行时实现如上所述的音视频显控方法的各个步骤。

需要说明的是，计算机可读存储介质可设置在音视频显控系统中。

本发明计算机可读存储介质具体实施方式与上述音视频显控方法各实施例基本相同，在此不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其它要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的显控专用的硬件平台的方式来实现，基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端系统(可以是计算机，服务器，或者网络系统等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其它相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种音视频显控的方法，其特征在于，所述音视频显控方法应用于分布式音视频显控系统，所述分布式音视频显控系统包括至少一个显卡头、至少一个编码节点、交换机，至少一个解码节点和至少一个LED屏，所述显卡头与所述编码节点一一对应通信连接，所述LED屏与所述解码节点一一对应通信连接，所述编码节点和所述解码节点分别与所述交换机通信连接，所述音视频显控方法包括以下步骤：

控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流，判断所述第一音视频信号流所属的信号流类型；

若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理，并对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频。

2.如权利要求1所述的音视频显控方法，其特征在于，所述判断所述第一音视频信号流所属的信号流类型的步骤之后，还包括：

若所述第一音视频信号流为单端信号流，对所述第一音视频信号流进行编码，得到第三音视频信号帧；

为所述第三音视频信号帧添加第二时间戳，得到第四音视频信号帧，并将所述第四音视频信号帧通过交换机转发至所述解码节点；

所述解码节点基于所述第二时间戳对所述第四音视频信号帧进行解码，得到第三音视频信号流，并将所述第三音视频信号流发送至所述LED屏，以显示所述第三音视频信号流对应的音视频。

3.如权利要求1所述的音视频显控方法，其特征在于，所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点，所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流的步骤包括：

当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别；

若所述第二音视频信号帧为组合信号帧，则基于所述第一时间戳对所有所述第二音视频信号帧进行同步处理，并为所有所述第二音视频信号帧添加相同的第三时间戳，得到第二子音视频信号帧；

基于所述第三时间戳对第二子音视频信号帧进行解码，得到第二音视频信号流。

4.如权利要求3所述的音视频显控方法，其特征在于，所述当所述解码节点接收到所述第二音视频信号帧时，检测所述第二音视频信号帧所属类别的步骤之后，还包括：

若所述第二音视频信号帧为单端信号帧，则直接对所述第二音视频信号帧进行解码，得到所述第二音视频信号流。

5.如权利要求1所述的音视频显控方法，其特征在于，所述分布式音视频显控系统还包括可视化控制平台，所述可视化控制平台与所述交换机通信连接，

所述通过所述交换机将所述第二音视频信号帧转发至所述解码节点的步骤之前，还包括：

当所述交换机接收到所述第二音视频信号帧，控制所述可视化控制平台可视化显示所述交换机对所述第二音视频信号帧重排处理过程。

6.如权利要求5所述的音视频显控方法，其特征在于，所述将所述第二音视频信号流发送至所述LED屏，以显示所述第二音视频信号流对应的音视频的步骤之前，还包括：

对所述第二音视频信号流进行裁剪和拼接，并对裁剪和拼接后的所述第二音视频信号流进行显示同步处理，得到处理后的所述第二音视频信号流。

7.如权利要求6所述的音视频显控方法，其特征在于，所述对所述第二音视频信号流进行裁剪和拼接的步骤包括：

接收所述可视化控制平台发送的音视频处理指令；

根据由所述音视频处理指令生成的坐标数据，对所述第二音视频信号流进行裁剪和拼接。

8.一种音视频显控装置，其特征在于，所述音视频显控装置包括：

控制采集模块，用于控制所述编码节点从与所述编码节点对应的所述显卡头采集第一音视频信号流；

判断模块，用于判断所述第一音视频信号流所属的信号流类型；

同步处理模块，用于若所述第一音视频信号流为组合信号流，对所有所述第一音视频信号流进行同步处理；

编码模块，用于对同步处理后的所述第一音视频信号流进行编码，得到第一音视频信号帧；

添加模块，用于为所述第一音视频信号帧添加相同的第一时间戳，得到第二音视频信号帧；

转发模块，用于通过所述交换机将所述第二音视频信号帧转发至所述解码节点；

解码模块，用于所述解码节点基于所述第一时间戳同步对所述第二音视频信号帧进行解码，得到第二音视频信号流；

发送模块，用于将所述第二音视频信号流发送至所述LED屏；

显示模块，用于显示所述第二音视频信号流对应的音视频。

9.一种音视频显控系统，其特征在于，所述音视频显控系统包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的音视频显控程序，所述音视频显控程序被所述处理器执行时实现如权利要求1至7中任一项所述的音视频显控方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有音视频显控程序，所述音视频显控程序被处理器执行时实现如权利要求1至7中任一项所述的音视频显控方法的步骤。

Images