CN112866585A - 视音频流的调度控制系统和方法 - Google Patents

视音频流的调度控制系统和方法 Download PDF

Info

Publication number
CN112866585A
CN112866585A CN202110015791.5A CN202110015791A CN112866585A CN 112866585 A CN112866585 A CN 112866585A CN 202110015791 A CN202110015791 A CN 202110015791A CN 112866585 A CN112866585 A CN 112866585A
Authority
CN
China
Prior art keywords
card
control system
information
daughter
cards
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110015791.5A
Other languages
English (en)
Inventor
李欣
姜东超
董家炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumavision Technologies Co Ltd
Original Assignee
Sumavision Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumavision Technologies Co Ltd filed Critical Sumavision Technologies Co Ltd
Priority to CN202110015791.5A priority Critical patent/CN112866585A/zh
Publication of CN112866585A publication Critical patent/CN112866585A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1073—Registration or de-registration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了视音频流的调度控制系统和方法，包括：网络摄像头、主控系统、多个子卡和客户端，每个子卡包括多个接口；网络摄像头、多个子卡和客户端分别与主控系统相连接；网络摄像头采集图像数据信息；主控系统根据图像数据信息和每个子卡的描述信息生成控制指令信息，对子卡进行调度，将控制指令信息发送给子卡；子卡根据控制指令信息执行相应操作得到操作结果，将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端；每个子卡的功能不同，主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。

Description

视音频流的调度控制系统和方法
技术领域
本发明涉及图像处理技术领域，尤其是涉及视音频流的调度控制系统和方法。
背景技术
对于视频编解码产品，当应用到监控、会议和指挥等规模应用场景时，采用单机编解码设备会存在一些问题：第一，需要通过IP端口对每个单机编解码设备进行单独控制，不能进行统一调度分配；第二，单机编解码设备的接口数量有限，无法支持大量的视频源接入或输出；第三，单机编解码设备的功能比较单一，无法实现更多的功能。
发明内容
有鉴于此，本发明的目的在于提供视音频流的调度控制系统和方法，主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。
第一方面，本发明实施例提供了视音频流的调度控制系统，所述调度控制系统包括网络摄像头、主控系统、多个子卡和客户端，每个所述子卡包括多个接口；
所述网络摄像头、所述多个子卡和所述客户端分别与所述主控系统相连接；
所述网络摄像头，用于采集图像数据信息，将所述图像数据信息发送给所述主控系统；
所述主控系统，用于根据所述图像数据信息和每个所述子卡的描述信息生成控制指令信息，对所述子卡进行调度，并将所述控制指令信息发送给所述子卡；
所述子卡，用于根据所述控制指令信息执行相应操作，得到操作结果，并将所述操作结果发送给所述主控系统，以使所述主控系统将所述操作结果发送给所述客户端；
其中，每个所述子卡的功能不同。
进一步的，所述主控系统包括调度模块和转发服务模块，所述多个子卡包括编码卡、解码卡、智能分析卡和存储卡。
进一步的，所述控制指令信息包括第一控制指令信息；
所述编码卡，用于根据所述调度模块发送的所述第一控制指令信息将所述图像数据信息进行编码处理，得到编码后的图像数据信息，将编码后的图像数据信息通过所述转发服务模块发送给所述解码卡、所述智能分析卡和所述存储卡中的一种或几种。
进一步的，所述控制指令信息包括第二控制指令信息；
所述智能分析卡，用于根据所述调度模块发送的所述第二控制指令信息对所述编码后的图像数据信息进行拌线检测或入侵检测，得到识别结果，并且根据所述识别结果确定是否进行报警提示。
所述解码卡，用于接收所述智能分析卡发送的所述识别结果，将所述识别结果发送给所述转发服务模块；
所述转发服务模块，用于将所述识别结果发送给所述客户端，以使所述客户端显示所述识别结果。
进一步的，所述解码卡，用于接收所述编码卡发送的所述编码后的图像数据信息，将所述编码后的图像数据信息进行解码，得到所述图像数据信息。
进一步的，所述控制指令信息包括第三控制指令信息；
所述解码卡，用于根据所述调度模块发送的所述第三控制指令信息接收所述多个子卡发送的多个视音频流信息，将所述多个视音频流信息进行拼接，得到拼接图像，将所述拼接图像发送给所述转发服务模块；
所述转发服务模块，用于将所述拼接图像发送给所述客户端，以使所述客户端显示所述拼接图像。
进一步的，所述子卡，用于当处于运行状态时，在预设时间间隔内向所述主控系统发送心跳信息，以及注册信息；
所述主控系统，用于将所述注册信息进行处理，并向所述子卡发送注册成功的响应信息，并且根据所述心跳信息监测所述子卡的状态；
其中，所述注册信息包括每个所述子卡对应的名称、网络协议IP地址和卡槽号码。
第二方面，本发明实施例提供了视音频流的调度控制方法，应用于如上所述的视音频流的调度控制系统，所述视音频流的调度控制系统包括网络摄像头、主控系统、多个子卡和客户端；所述方法包括：
所述网络摄像头采集图像数据信息；
所述主控系统根据所述图像数据信息和每个子卡的描述信息生成控制指令信息；
所述子卡根据所述控制指令信息执行相应操作，得到操作结果，并将所述操作结果发送给所述主控系统，以使所述主控系统将所述操作结果发送给所述客户端；
其中，每个所述子卡的功能不同。
第三方面，本发明实施例提供了电子设备，包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的方法。
第四方面，本发明实施例提供了具有处理器可执行的非易失的程序代码的计算机可读介质，所述程序代码使所述处理器执行如上所述的方法。
本发明实施例提供了视音频流的调度控制系统和方法，包括：网络摄像头、主控系统、多个子卡和客户端，每个子卡包括多个接口；网络摄像头、多个子卡和客户端分别与主控系统相连接；网络摄像头用于采集图像数据信息，将图像数据信息发送给主控系统；主控系统用于根据图像数据信息和每个子卡的描述信息生成控制指令信息，对子卡进行调度，并将控制指令信息发送给子卡；子卡用于根据控制指令信息执行相应操作，得到操作结果，并将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端；其中，每个子卡的功能不同，主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。
本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例一提供的视音频流的调度控制系统示意图；
图2为本发明实施例一提供的主控系统与子卡的运行过程示意图；
图3为本发明实施例二提供的主控系统对子卡的调度过程示意图；
图4为本发明实施例三提供的视音频流的调度控制方法流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
以集成设备的形式，在调度控制系统内可以提供更全面的功能，并且允许一定程度的定制化，以适应各种场景下的应用，调度控制系统通过一个图形界面客户端进行统一控制，在无需知道内部调度关系的情况下即可操作需要的功能。
功能的定制和扩展通过插拔子卡来完成，如编码卡、解码卡和智能分析卡等。支持多种前端编码接入，通过RTSP(Real Time Streaming Protocol，实时流传输协议)、GB28181等协议接入网络摄像头。增加编码卡可以接入本地编码(CVBS(Composite VideoBroadcast Signal，复合同步视频广播信号)和SDI(Serial Digital Interface，数字分量串行接口)等)；增加智能分析卡可以支持视频的智能分析能力，例如拌线检测或入侵检测等；增加解码卡可以支持视频拼接，允许通过HDMI(High Definition MultimediaInterface，高清多媒体接口)和VGA(Video Graphics Array，视频图形阵列)等连接到显示器和电视墙等视频显示设备进行显示，也支持通过网络发送视频拼接视频流。
还可以作为GB28181级联的一个下级节点，允许上级进行调流，具有一定程度的组网能力。客户端一方面可以操作调度控制系统执行各种功能，通过客户端可以综合预览接入设备的视音频编码流。功能的实施基于视音频流的调度控制系统进行，与子卡通信进行控制并调度视音频流的走向以实现前述功能。
对于视频编解码产品，当应用到监控、会议和指挥等规模应用场景时，采用单机编解码设备会存在一些问题：第一，需要通过IP端口对每个单机编解码设备进行单独控制，不能进行统一调度分配；第二，单机编解码设备的接口数量有限，无法支持大量的视频源接入或输出；第三，单机编解码设备的功能比较单一，无法实现更多的功能。
本申请的主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。
随着视频会议等的需求日益增加，出现了支持复杂组网的系统，这类系统规模较大，不同的服务运行在单独的服务器上，各个编解码器可能分布在相距较远的区域内，通过预先定义的协议进行注册、呼叫等操作，由中心服务器对编解码器等资源进行集中调度，这样的系统专用于大范围组会通信相关的业务，但无论是前期的工程实施还是后期的服务维护都需要大量专业人员，而且这样的系统造价非常昂贵，对于较小区域内的监控、分析等需求并不适用。
本申请的主控系统一方面可以作为GB28181服务器，用于接入网络摄像头，另一方面也可以作为GB28181客户端进行向上级联，该功能扩展了设备的应用场景，配合设备在视频处理等方面的功能，在规模组网时也可以有充分的发挥空间。
另外，对于前述小区监控设备，与单机编解码设备比较功能丰富了一些，但在视频编解码质量、帧率上可能相对不足，同时开放给用户的更高级的扩展功能也不足。
本申请的系统中设置了多个子卡，每个子卡具有不同的功能，子卡可以为编码卡、解码卡和智能分析卡，编码卡和解码卡在视频编解码质量较高。
为便于对本实施例进行理解，下面对本发明实施例进行详细介绍。
实施例一：
图1为本发明实施例一提供的视音频流的调度控制系统示意图。
参照图1，调度控制系统包括网络摄像头、主控系统、多个子卡和客户端，每个子卡包括多个接口；网络摄像头、多个子卡和客户端分别与主控系统相连接；
调度控制系统还包括机箱、主板和接口板，主控系统运行在主板上，对主板进行控制，同时负责管理和调度子卡。子卡主要有通信卡、编码卡、解码卡、转码卡和智能分析卡等，用于提供不同扩展功能。
主控系统和每个子卡分别运行在独立的定制化环境中，主控系统运行在x86架构的处理器上，保证运行性能和执行效率，子卡(如编码卡、解码卡和存储卡等)运行在定制的板卡上，每张板卡包含两个ARM处理器，保证了子卡的处理能力。主控系统与各子卡之间通过HTTP协议交换控制、调度信息和命令，通过UDP协议传输视频流等数据。主控系统还用于对主板进行管理，包括时间和网络等参数的管理。
网络摄像头，用于采集图像数据信息，将图像数据信息发送给主控系统；
这里，网络摄像头与主控系统相连接，网络摄像头在组网和性能上都具备不错的优势，在接入网络摄像头后将提供更广的应用场景，网络摄像头接入到调度控制系统后，将屏蔽与后端的区别，对于使用者来说与编码卡接入的视频资源一样使用，降低了学习成本。网络摄像头采集的图像数据信息为视音频流。
主控系统，用于根据图像数据信息和每个子卡的描述信息生成控制指令信息，对子卡进行调度，并将控制指令信息发送给子卡；
所述子卡，用于根据控制指令信息执行相应操作，得到操作结果，并将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端；其中，每个子卡的功能不同。
具体地，主控系统一方面可以作为GB28181服务器，用于接入网络摄像头，另一方面也可以作为GB28181客户端进行向上级联，该功能扩展了调度控制系统的应用场景，配合调度控制系统在视频处理等方面的功能，在规模组网时也可以有充分的发挥空间。
主控系统负责子卡的调度，主控系统包括转发服务模块，转发服务模块是视频流在调度控制系统内部的统一中转站，也是调度控制系统内部局域网与外部网络沟通的桥梁。
调度控制系统内部通过局域网进行视音频流和控制信息的传输，主要目的是对外屏蔽内网的数据流，避免调度控制系统内部的视音频广播和组播等占用所在网络的带宽；另外，转发服务模块可以进行视音频流的复制，经常遇到某些编码视音频流在不止一个地方被使用，比如对于一个码流，我们既希望在输出设备(显示器)上看到它，也希望它被保存到磁盘上，此时需要转发服务模块的介入。
转发服务模块同时也避免了各子卡之间的耦合，任何子卡都不需要知道其它子卡的运行状态，仅需要与主控系统进行交互即可。主控系统通过控制指令信息对子卡进行调度，根据预定的协议对子卡进行控制，通过转发服务模块建立转发流，是调度控制系统正常运行的关键。
进一步的，主控系统包括调度模块和转发服务模块，多个子卡包括编码卡、解码卡、智能分析卡和存储卡。
进一步的，控制指令信息包括第一控制指令信息；
编码卡，用于根据调度模块发送的第一控制指令信息将图像数据信息进行编码处理，得到编码后的图像数据信息，将编码后的图像数据信息通过转发服务模块发送给解码卡、智能分析卡和存储卡中的一种或几种。
这里，编码卡的存在扩展了调度控制系统的接入视频来源。编码卡还可以直接与有线摄像头相连接，从有线摄像头处获取图像数据信息，并对该图像数据信息进行编码，得到编码后的图像数据信息，并且根据主控系统的调度将编码后的图像数据信息通过转发服务模块发送给其他子卡，其他子卡可以为解码卡、智能分析卡和存储卡中的一种或几种。即编码卡将编码后的图像数据信息发送给转发服务模块，转发服务模块再将编码后的图像数据信息发送给其他子卡。
进一步的，控制指令信息包括第二控制指令信息；
智能分析卡，用于根据调度模块发送的第二控制指令信息对编码后的图像数据信息进行拌线检测或入侵检测，得到识别结果，并且根据识别结果确定是否进行报警提示。
解码卡，用于接收智能分析卡发送的识别结果，将识别结果发送给转发服务模块；
转发服务模块，用于将识别结果发送给客户端，以使客户端显示识别结果。
进一步的，解码卡，用于接收编码卡发送的编码后的图像数据信息，将编码后的图像数据信息进行解码，得到图像数据信息。
进一步的，控制指令信息包括第三控制指令信息；
解码卡，用于根据调度模块发送的第三控制指令信息接收多个子卡发送的多个视音频流信息，将多个视音频流信息进行拼接，得到拼接图像，将拼接图像发送给转发服务模块；
转发服务模块，用于将拼接图像发送给客户端，以使客户端显示拼接图像。
具体地，解码卡根据第三控制指令信息接收编码卡和智能分析卡发送的多个视音频流信息，将多个视音频流信息进行拼接，得到拼接图像；拼接图像可以为3×3和4×4的画面，但不限于3×3和4×4的画面，还可以为1×2、2×2和5×5等画面。然后将拼接图像分别排列在九宫格或十六宫格的窗口上，以获得同时展示更多有效画面的效果。
解码模块设置有HDMI和VGA，可以外接显示器和电视墙等视频显示设备进行显示，同时也可以将拼接画面通过UDP(User Datagram Protocol，用户数据报协议)进行发送。
存储卡用于存储感兴趣的视频流，存储卡按照预设规则保存发送的视频流，预设规则主要指按一定周期和时间进行视频录制的策略，视频会被保存到存储卡搭载的固态硬盘上。当用户需要观看时，存储卡将发送已保存的视频流，满足回看需求。
进一步的，子卡，用于当处于运行状态时，在预设时间间隔内向主控系统发送心跳信息，以及注册信息；
主控系统，用于将注册信息进行处理，并向子卡发送注册成功的响应信息，并且根据心跳信息监测子卡的状态；
其中，注册信息包括每个子卡对应的名称、网络协议IP地址和卡槽号码。
具体地，参照图2，当调度控制系统上电时，主控系统和子卡分别上电启动，初始化阶段结束后分别进入各自运行状态。当子卡处于运行状态时，向主控系统发送注册信息，主控系统将注册信息进行处理，并向子卡发送注册成功的响应信息；子卡在预设时间间隔内向主控系统发送心跳信息，主控系统根据心跳信息监测子卡的状态，即子卡是处于运行状态还是离线状态；如果主控系统在预设时间间隔内没有接收到子卡发送的心跳信息，则说明此子卡处于离线状态。
子卡的描述信息用于表征各类型的子卡具备的功能和调度规则。主控系统启动完成后，将遍历已经注册的所有子卡，调度模块根据描述信息对所有子卡进行运行时参数的初始化，此时各个子卡将处于待命状态，随时根据控制指令信息执行相应操作。
调度模块根据客户端的命令对子卡进行相应的视音频流调度，该调度过程分为两部分，对子卡的控制和视音频流通路的建立。由于各子卡之间是没有耦合关系的，因此对子卡的控制也是独立实行的。
调度模块首先会根据调度控制系统当前的运行状态和端口资源确定通信端口，然后根据子卡描述信息控制子卡是接收参数还是发送参数，对于子卡的编码型功能将控制其发送视音频流到指定的通信端口上，对于子卡的解码型功能将控制其在相应的端口接收。
在对子卡控制后，将会对主控系统中的转发服务模块进行控制，对于转发服务模块的控制可以理解为两种命令，一种是控制视音频流的接收，主控系统发送命令要求转发服务模块在某端口进行监听，该路的转发服务模块将在此端口接收视音频流，每一路都可以接收一个编码型功能的视音频流。另一种是控制视音频流的发送，该路转发服务模块将建立socket并向目标设备发送视音频流，每一路都可以发送，这也是调度控制系统构建出复杂功能的关键所在。
本发明实施例提供了视音频流的调度控制系统，包括：网络摄像头、主控系统、多个子卡和客户端，每个子卡包括多个接口；网络摄像头、多个子卡和客户端分别与主控系统相连接；网络摄像头用于采集图像数据信息，将图像数据信息发送给主控系统；主控系统用于根据图像数据信息和每个子卡的描述信息生成控制指令信息，对子卡进行调度，并将控制指令信息发送给子卡；子卡用于根据控制指令信息执行相应操作，得到操作结果，并将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端；其中，每个子卡的功能不同，主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。
实施例二：
图3为本发明实施例二提供的主控系统对子卡的调度过程示意图。
参照图3，通过调度控制系统实现复杂的视音频流调度，调度过程具体为：插入编码卡、智能分析卡、解码卡和存储卡；解码卡的端口可以连接客户端，其中，客户端为电脑或显示器。主控系统可以接入RTSP的网络摄像头和GB28181的网络摄像头。
编码卡接口将图像数据信息进行编码后，通过主控系统的调度，由转发服务模块发送给智能分析卡、解码卡或存储卡；主控系统还可以调度智能分析卡上的视音频资源到解码卡和/或存储卡上；通过上述操作，可以在客户端上查看到调度结果。
实施例三：
图4为本发明实施例三提供的视音频流的调度控制方法流程图。
参照图4，应用于如上所述的视音频流的调度控制系统，视音频流的调度控制系统包括网络摄像头、主控系统、多个子卡和客户端；其中，每个子卡的功能不同，该方法包括以下步骤：
步骤S101，网络摄像头采集图像数据信息；
步骤S102，主控系统根据图像数据信息和每个子卡的描述信息生成控制指令信息；
步骤S103，子卡根据控制指令信息执行相应操作，得到操作结果，并将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端。
本发明实施例提供的视音频流的调度控制方法，包括：网络摄像头采集图像数据信息；主控系统根据图像数据信息和每个子卡的描述信息生成控制指令信息；子卡根据控制指令信息执行相应操作，得到操作结果，并将操作结果发送给主控系统，以使主控系统将操作结果发送给客户端，主控系统通过控制指令信息可以调度多个子卡执行相应操作，实现了统一的调度分配；系统中包括不同功能的多个子卡，实现了更多功能；每个子卡包括多个接口，实现了大量视频源的接入或输出。
本发明实施例还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述实施例提供的视音频流的调度控制方法的步骤。
本发明实施例还提供一种具有处理器可执行的非易失的程序代码的计算机可读介质，计算机可读介质上存储有计算机程序，计算机程序被处理器运行时执行上述实施例的视音频流的调度控制方法的步骤。
本发明实施例所提供的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种视音频流的调度控制系统，其特征在于，所述调度控制系统包括网络摄像头、主控系统、多个子卡和客户端，每个所述子卡包括多个接口；
所述网络摄像头、所述多个子卡和所述客户端分别与所述主控系统相连接；
所述网络摄像头，用于采集图像数据信息，将所述图像数据信息发送给所述主控系统；
所述主控系统，用于根据所述图像数据信息和每个所述子卡的描述信息生成控制指令信息，对所述子卡进行调度，并将所述控制指令信息发送给所述子卡；
所述子卡，用于根据所述控制指令信息执行相应操作，得到操作结果，并将所述操作结果发送给所述主控系统，以使所述主控系统将所述操作结果发送给所述客户端；
其中，每个所述子卡的功能不同。
2.根据权利要求1所述的视音频流的调度控制系统，其特征在于，所述主控系统包括调度模块和转发服务模块，所述多个子卡包括编码卡、解码卡、智能分析卡和存储卡。
3.根据权利要求2所述的视音频流的调度控制系统，其特征在于，所述控制指令信息包括第一控制指令信息；
所述编码卡，用于根据所述调度模块发送的所述第一控制指令信息将所述图像数据信息进行编码处理，得到编码后的图像数据信息，将编码后的图像数据信息通过所述转发服务模块发送给所述解码卡、所述智能分析卡和所述存储卡中的一种或几种。
4.根据权利要求3所述的视音频流的调度控制系统，其特征在于，所述控制指令信息包括第二控制指令信息；
所述智能分析卡，用于根据所述调度模块发送的所述第二控制指令信息对所述编码后的图像数据信息进行拌线检测或入侵检测，得到识别结果，并且根据所述识别结果确定是否进行报警提示；
所述解码卡，用于接收所述智能分析卡发送的所述识别结果，将所述识别结果发送给所述转发服务模块；
所述转发服务模块，用于将所述识别结果发送给所述客户端，以使所述客户端显示所述识别结果。
5.根据权利要求3所述的视音频流的调度控制系统，其特征在于，所述解码卡，用于接收所述编码卡发送的所述编码后的图像数据信息，将所述编码后的图像数据信息进行解码，得到所述图像数据信息。
6.根据权利要求2所述的视音频流的调度控制系统，其特征在于，所述控制指令信息包括第三控制指令信息；
所述解码卡，用于根据所述调度模块发送的所述第三控制指令信息接收所述多个子卡发送的多个视音频流信息，将所述多个视音频流信息进行拼接，得到拼接图像，将所述拼接图像发送给所述转发服务模块；
所述转发服务模块，用于将所述拼接图像发送给所述客户端，以使所述客户端显示所述拼接图像。
7.根据权利要求1所述的视音频流的调度控制系统，其特征在于，所述子卡，用于当处于运行状态时，在预设时间间隔内向所述主控系统发送心跳信息，以及注册信息；
所述主控系统，用于将所述注册信息进行处理，并向所述子卡发送注册成功的响应信息，并且根据所述心跳信息监测所述子卡的状态；
其中，所述注册信息包括每个所述子卡对应的名称、网络协议IP地址和卡槽号码。
8.一种视音频流的调度控制方法，其特征在于，应用于权利要求1至7任一项所述的视音频流的调度控制系统，所述视音频流的调度控制系统包括网络摄像头、主控系统、多个子卡和客户端；所述方法包括：
所述网络摄像头采集图像数据信息；
所述主控系统根据所述图像数据信息和每个子卡的描述信息生成控制指令信息；
所述子卡根据所述控制指令信息执行相应操作，得到操作结果，并将所述操作结果发送给所述主控系统，以使所述主控系统将所述操作结果发送给所述客户端；
其中，每个所述子卡的功能不同。
9.一种电子设备，包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述权利要求8所述的方法。
10.一种具有处理器可执行的非易失的程序代码的计算机可读介质，其特征在于，所述程序代码使所述处理器执行所述权利要求8所述的方法。
CN202110015791.5A 2021-01-06 2021-01-06 视音频流的调度控制系统和方法 Pending CN112866585A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110015791.5A CN112866585A (zh) 2021-01-06 2021-01-06 视音频流的调度控制系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110015791.5A CN112866585A (zh) 2021-01-06 2021-01-06 视音频流的调度控制系统和方法

Publications (1)

Publication Number Publication Date
CN112866585A true CN112866585A (zh) 2021-05-28

Family

ID=76004517

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110015791.5A Pending CN112866585A (zh) 2021-01-06 2021-01-06 视音频流的调度控制系统和方法

Country Status (1)

Country Link
CN (1) CN112866585A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113721995A (zh) * 2021-08-04 2021-11-30 浙江大华技术股份有限公司 一种智能子卡的加载方法、装置及存储介质
CN117640724A (zh) * 2024-01-25 2024-03-01 深圳市鲸视科技有限公司 一种数据转发方法、系统、计算机设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060133336A1 (en) * 2004-12-17 2006-06-22 Oh Hyun W System for mediating convergence services of communication and broadcasting using non-communicative appliance
CN102055962A (zh) * 2011-01-12 2011-05-11 深圳市朗驰欣创科技有限公司 基于集中编解码器的视频监控系统、方法及集中编解码器
CN105208358A (zh) * 2015-11-04 2015-12-30 武汉微创光电股份有限公司 一种用于电视墙配置的视频监控系统
CN107333096A (zh) * 2016-04-29 2017-11-07 长沙云电信息技术开发有限公司 一种用于数字高清视频监控系统中的全智能一体化监控分布式管理服务器
CN208015894U (zh) * 2018-04-11 2018-10-26 航景科创智慧科技（深圳）有限公司 一种基于全景摄像头的视频分析系统
CN110337045A (zh) * 2019-06-04 2019-10-15 青岛海信网络科技股份有限公司 一种对视频源添加二维码的系统及二维码添加方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060133336A1 (en) * 2004-12-17 2006-06-22 Oh Hyun W System for mediating convergence services of communication and broadcasting using non-communicative appliance
CN102055962A (zh) * 2011-01-12 2011-05-11 深圳市朗驰欣创科技有限公司 基于集中编解码器的视频监控系统、方法及集中编解码器
CN105208358A (zh) * 2015-11-04 2015-12-30 武汉微创光电股份有限公司 一种用于电视墙配置的视频监控系统
CN107333096A (zh) * 2016-04-29 2017-11-07 长沙云电信息技术开发有限公司 一种用于数字高清视频监控系统中的全智能一体化监控分布式管理服务器
CN208015894U (zh) * 2018-04-11 2018-10-26 航景科创智慧科技（深圳）有限公司 一种基于全景摄像头的视频分析系统
CN110337045A (zh) * 2019-06-04 2019-10-15 青岛海信网络科技股份有限公司 一种对视频源添加二维码的系统及二维码添加方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113721995A (zh) * 2021-08-04 2021-11-30 浙江大华技术股份有限公司 一种智能子卡的加载方法、装置及存储介质
CN117640724A (zh) * 2024-01-25 2024-03-01 深圳市鲸视科技有限公司 一种数据转发方法、系统、计算机设备及存储介质
CN117640724B (zh) * 2024-01-25 2024-05-07 深圳市鲸视科技有限公司 一种数据转发方法、系统、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
US8787725B2 (en) Systems and methods for managing video data
EP2452489B1 (en) Systems and methods for managing video data
CN102308551B (zh) 虚拟用户端设备
CN110446010A (zh) 基于web的视频监控方法、装置、存储介质、服务器及系统
EP2676432B1 (en) Remote controlled studio camera system
CN104660891A (zh) 运动视频捕捉系统中的方法和装置
EP3466023B1 (en) Interactive display synchronisation
KR20160109592A (ko) 비디오 월 보안 시스템
CN101300840A (zh) 多视角视频传递
CN112866585A (zh) 视音频流的调度控制系统和方法
US10530990B2 (en) Method for controlling a video-surveillance and corresponding video-surveillance system
CN110740386A (zh) 直播切换方法、装置及存储介质
US20080143831A1 (en) Systems and methods for user notification in a multi-use environment
CN108989833B (zh) 一种视频封面图像的生成方法及装置
CN104053045A (zh) 显示设备及其共享控制方法
CN100446458C (zh) 基于闪联协议的电视机无线上网的实现方法
US20140096170A1 (en) Systems And Methods For Communicating With Patients
CN111885351A (zh) 一种屏幕显示方法、装置、终端设备和存储介质
CN110730324A (zh) 一种视频画面显示控制方法和装置
CN114630101B (zh) 显示设备、vr设备及虚拟现实应用内容的显示控制方法
WO2022104638A1 (zh) 图传数据的处理方法、图传设备、终端设备及存储介质
CN103096040A (zh) 一种网络全高清监控系统方法
EP2728860A2 (en) Integration of video surveillance systems
US10499089B2 (en) System for providing cloud-based user interfaces and method therefor
CN109905668A (zh) 一种摄像头画面部分的方法以及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210528

RJ01 Rejection of invention patent application after publication