CN117478933A - 视频图像发送方法、装置、存储介质 - Google Patents

Abstract

本公开涉及一种视频图像发送方法、装置、存储介质。所述方法包括：响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因；响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整；将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。采用本方法能够在传输通道中各种参数变化的情况下，视频源在发送视频图像时不会出现带宽、时隙资源不足的情况。

Description

视频图像发送方法、装置、存储介质

技术领域

本公开涉及数据传输技术领域，特别是涉及一种视频图像发送方法、装置、存储介质。

背景技术

目前，基于FPGA(Field Programmable Gate Array，现场可编程门阵列)和嵌入式系统的视频图像处理系统，尤其涉及带有VESA(Video Electronics StandardsAssociation，视频电子标准协会)的DisplayPort(DP，数字式视频接口标准)、MIPI(MobileIndustry Processor Interface，移动产业处理器接口标准)、HDMI(High DefinitionMultimedia Interface，高清多媒体接口标准)的视频图像处理系统，以驱动并显示液晶(LCD，Liquid Crystal Display)、有机发光二极管(OLED，Organic Light-EmittingDiode)等显示平板及终端，在支持多通道显示时，当传输通道经过多级传输时，由于各种传输通道中各种参数的变化，会导致不同通道上的视频图像的发送流量发生变化。

然而，发送流量发生变化时，会使得视频源在发送视频图像至传输节点时，存在带宽、时隙资源不足的情况，会影响传输节点对视频图像的正常显示。

发明内容

基于此，有必要针对上述技术问题，提供一种在传输通道中各种参数变化的情况下，视频源在发送视频图像时不会出现带宽、时隙资源不足的情况，保证传输节点能够正常显示视频图像的视频图像发送方法、装置、存储介质。

第一方面，本公开提供了一种视频图像发送方法，应用于视频图像处理系统中的视频源，所述视频源通过传输通道传输视频图像至传输节点，所述方法包括：

响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因；

响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整；

将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

在其中一个实施例中，所述基于不同类型的视频图像的图像参数对所述传输通道进行调整，包括：

获取多种类型的视频图像的有效像素数据深度；

按照每种不同类型的有效像素数据深度，对传输通道进行分类，其中，分类后的每类传输通道中用于传输相同类型的有效像素数据深度对应的视频图像；

或者，将分类后的传输通道进行拼接，其中，拼接后的传输通道中，用于传输目标像素数据深度对应的视频图像，所述目标像素数据是基于拼接的不同类型的有效像素数据深度计算得到的。

在其中一个实施例中，所述响应于所述变化原因为传输通道配置发生改变之后，所述方法还包括：

调整所述视频图像处理系统中启用的传输通道的数量。

在其中一个实施例中，所述方法还包括：

在所述视频图像处理系统启用的传输通道中，选择预设数量的传输通道进行调整。

在其中一个实施例中，所述方法还包括：

响应于所述变化原因为传输节点的性能参数发生变化，调整传输的视频图像的有效像素数据深度，以及调整传输节点接收的视频图像的有效像素数据深度；

将调整后的视频图像发送至传输节点中，以指示所述传输节点按照调整后的有效像素数据深度接收调整后的视频图像并显示。

在其中一个实施例中，所述将调整后的视频图像发送至传输节点中，包括：

响应于所述传输的视频图像的有效像素数据深度从第一阈值变为第二阈值，增加传输视频图像时使用的传输时隙资源；

将调整后的视频图像利用增加后的传输时隙资源发送至传输节点中；

响应于所述传输的视频图像的有效像素数据深度从第二阈值变为第一阈值，基于第二阈值和第一阈值计算调整像素数据深度；

释放所述调整像素数据深度对应的时隙资源，或者，将所述调整像素数据深度对应的时隙资源分配至其他传输节点，以指示所述其他传输节点利用所述时隙资源进行视频图像传输纠错、视频图像重传以及与视频源之间的信令交互；

其中，所述第一阈值小于第二阈值。

在其中一个实施例中，所述方法还包括：

在将视频图像发送至传输节点的过程中，基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径。

在其中一个实施例中，所述基于往返时延和/或数据总量，调整传输路径，包括：

响应于所述往返时延满足第一时延条件，和/或，所述数据总量满足第一发送量条件，调整相同的传输通道上相同层级的传输路径；所述第一时延条件包括：往返时延大于预设的第一时延阈值，第一发送量条件包括：数据总量大于预设的第一数据量阈值；

响应于所述往返时延满足第二时延条件，和/或，所述数据总量满足第二发送量条件，调整相同的传输通道上不同层级的传输路径；所述第二时延条件包括：所述往返时延大于预设的第二时延阈值，且小于预设的第一时延阈值，所述第二发送量条件包括：所述数据总量大于预设的第二数据量阈值且小于预设的第一数据量阈值；

响应于所述往返时延满足第二时延条件或第三时延条件，和/或，所述数据总量满足第二发送量条件或第三发送量条件，调整不同的传输通道上相同层级的传输路径；所述第三时延条件包括：所述往返时延小于预设的第二时延阈值；所述第三发送量条件包括：所述数据总量小于预设的第二数据量阈值；

响应于所述往返时延满足第三时延条件，和/或，所述数据总量满足第三发送量条件，调整不同的传输通道上不同层级的传输路径。

在其中一个实施例中，所述传输节点和所述视频源之间使用发送帧进行通信，所述发送帧是基于标准帧得到的；所述发送帧包括：

发送使能时隙，用于确定是否启用所述发送帧，响应于启用所述发送使能时隙，确定启用所述发送帧；

发送方式选择时隙，用于选择发送视频图像的方式，所述发送视频图像的方式包括：基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；或者，调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整时隙，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈时隙，用于反馈传输节点的状态。

在其中一个实施例中，所述传输节点和所述视频源之间使用发送效率帧通信，所述发送效率帧是将标准帧中的像素数据时隙调整为常规视频发送时隙和调整发送时隙后得到的；

所述常规视频发送时隙，用于发送标准的视频图像至传输节点；

所述调整发送时隙，用于实现发送使能时隙、发送方式选择时隙、路径调整时隙和反馈时隙所对应的功能。

在其中一个实施例中，所述传输节点和所述视频源之间使用发送信令进行通信，所述发送信令包括：

发送使能字段，用于确定是否启用视频图像发送方法；

发送方式选择字段，用于选择发送视频图像的方式，所述发送视频图像的方式包括：常规发送方式；基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整字段，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈字段，用于反馈传输节点的状态。

第二方面，本公开还提供了一种视频图像发送装置。应用于视频图像处理系统中的视频源，所述视频源通过传输通道传输视频图像至传输节点，所述装置包括：

原因确定模块，用于响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因；

通道调整模块，用于响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整；

第一图像发送模块，用于将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

第三方面，本公开还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一方法实施例中的步骤。

第四方面，本公开还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一方法实施例中的步骤。

第五方面，本公开还提供了一种计算机程序产品。所述计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述任一方法实施例中的步骤。

上述各实施例中，当传输通道中的视频流量发生变化时，可能有由于多种原因导致的传输通道中的视频流量发生变化。因此，为了能够使视频源在发送视频图像时，能够正常发送视频图像。可以确定引起视频流量发生变化的变化原因。当变化原因为传输通道的配置发生改变，此时可以按照不同类型的视频图像的图像参数对传输通道进行调整，保证传输通道能够传输不同类型的视频图像，保证视频图像能够正常传输。由于传输通道已经按照不同类型的进行调整，因此可以将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中。该调整后的传输通道能够适应待发送的视频图像，保证视频图像的正常传输，不会出现带宽、时隙资源不足的情况，因此传输节点接收所述待发送的视频图像并显示。

附图说明

为了更清楚地说明本公开具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中视频图像发送方法的应用环境图；

图2为一个实施例中视频图像处理系统的示意图；

图3为一个实施例中视频图像发送方法的流程示意图；

图4为一个实施例中S204步骤的流程示意图；

图5为一个实施例中有效像素数据深度调整的步骤的流程示意图；

图6为一个实施例中S404步骤的流程示意图；

图7为一个实施例中调整传输路径的步骤的流程示意图；

图8为一个实施例中传输节点涉及的拓扑结构的示意图；

图9为一个实施例中标准帧结构的示意图；

图10为一个实施例中发送帧结构的示意图；

图11为一个实施例中视频图像发送装置的结构示意框图；

图12为一个实施例中计算机设备的内部结构示意图。

具体实施方式

为了使本公开的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本公开进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本公开，并不用于限定本公开。

需要说明的是，本文的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本文的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

在本文中，术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系。例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

正如背景技术所述，当传输通道的物理层(PHY，Physical Layer)状态、传输损耗、传输通道上的设备及线缆配置、传输距离等发生变化时，会导致不同传输通道上的视频图像发送流量存在显著的差异，并且不同传输通道上的发送流量不均衡，进而产生传输通道上视频图像发送拥塞或者吞吐量不足。

另外，由于在传输通道的拓扑结构的不同层级上产生传输节点的性能参数的变更，例如，帧率、分辨率等，也会导致传输通道发送视频图像时的流量发生显著的变化。此时，视频源在发送视频图像时，可能会出现发送时带宽、时隙资源不足的情况，从而引起传输节点显示视频图像存在时延，影响用户体验。除此之外，由于传输通道的质量不一致，在发送视频图像时也会产生某些链路拓扑层级上拥塞的问题。在视频图像重传时，也产生带宽、时隙资源的过多占用，从而导致整个系统中的吞吐量降低以及性能下降。

因此，为解决上述问题，本公开实施例提供了一种视频图像发送方法，可以应用于如图1所示的应用环境中。其中，视频源102可以通过传输通道与传输节点104直接或者间接的连接。视频源102可以通过传输通道传输视频图像至传输节点104。响应于视频源102检测到传输通道中的视频流量发生变化，视频源102可以确定引起视频流量发生变化的变化原因。响应于所述变化原因为传输通道的配置发生改变，视频源102可以基于不同类型的视频图像的图像参数对传输通道进行调整。视频源102可以将待发送的视频图像利用调整后的传输通道发送至对应的传输节点104中，以指示传输节点104接收所述待发送图像并显示。

在一个实施例中，如图2所示，本公开实施例提供的一种视频图像发送方法还可以应用在如图2所示的视频图像处理系统中，包括：嵌入式控制模块、FPGA模块、外部存储模块、快速存储模块、外设模块、视频接口物理层实现模块，以及视频传输链路。

其中，嵌入式控制模块，可以使用任何嵌入式芯片与系统，主要负责发起信令交互，诸如，读/写寄存器、启用/关闭视频显示模块与模块、外设控制、视频显示模块参数设置等。FPGA模块，主要负责具体实现存储控制、外设控制、视频接口IP核实现等需要大量数据处理、低往返时延(latency)的实施部分。外部存储模块，主要负责视频图像处理系统中需要显示的视频图像原始数据流的存储，此部分应用NandFlash、SSD等存储介质，但不限于此。快速存储模块用于FPGA模块内部需要大量数据处理、低往返时延(latency)的实施过程中，为了减小时延而时延存储的模块，此模块应用快速、低时延的物理器件，诸如，DDR3等，但不限于此。外设模块，包括GPIO(General-purpose input/output，通用型输入输出)，UART(Universal Asynchronous Receiver/Transmitter，通用异步收发传输器)、USB(Universal Serial Bus，通用串行总线)、网口等，但不限于此。视频接口物理层实现模块，主要负责驱动显示模块所需的物理层实现，诸如，DisplayPort的TX/RX(Transmitter/Receiver)-PHY，MIPI的DPHY等，但不限于此。

进一步地，FPGA模块包括，总线交互模块、MCU(Microcontroller Unit，微控制模块)视频流预处理模块、视频数据流传输控制模块、时钟控制模块、嵌入式软核控制模块、总线控制器模块、内部存储控制器模块、外设控制模块、显示时钟发生器模块、视频时序控制器模块、视频接口IP核模块。总线交互模块，主要负责所有连接到此模块的其他模块的选择、决策等功能。MCU视频流预处理模块，主要负责将从外部存储模块输入的视频数据流按照系统设定的格式与参数类型进行预处理和转换，以便于后级的处理。视频数据流传输控制模块，主要负责经过数据流预处理和转换之后的数据流的时序与参数等控制。时钟控制模块，主要负责视频图像处理系统中全局时钟的产生与控制。嵌入式软核控制模块，是FPGA模块的控制核心，主要负责FPGA模块内部所有模块的时序控制、参数配置、物理过程实现等核心功能，此部分实现中可以使用，诸如，Xilinx MicroBlaze等，但不限于此。总线控制器模块，主要负责所有与总线交互模块连接的所有模块的控制，但不限于此。视频图像处理模块，主要负责适应视频接口IP核模块对应的视频图像数据流的模式转换与时序控制等，但不限于此。内部存储控制器模块，主要负责快速存储模块的控制，包括数据流的写入/读取、帧控制等，但不限于此。外设控制模块，主要负责控制所有的外设模块，包括外设的启用/关闭、工作模式控制等，但不限于此。显示时钟发生器模块，主要负责所有与视频接口IP核模块、视频接口物理层实现模块的时序控制，但不限于此。视频时序控制器模块，主要负责从视频图像处理模块输入的数据传输到视频接口IP核模块时的数据转换与时序控制等的处理，但不限于此。

视频传输链路可以包括：视频源(视频发送源)、传输节点(嵌入式物理中继器、带有源ID的线缆、可拆卸的物理中继器、视频接收端等)，但不限于此。在公开的一些实施例中，根据不同的场景，传输节点可以包括节点、视频设备、视频源中的一种或几种，在如下所述本公开的一些实施例中，传输节点通常可以是节点和/或视频设备。

在一个实施例中，如图3所示，提供了一种视频图像发送方法，以该方法应用于图1中的视频源102，或者应用于图2中的视频源为例进行说明，包括以下步骤：

S202，响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因。

其中，视频流量通常可以是视频图像发送的总量，通常可以由传输节点的性能参数和传输通道的各种配置来影响。

具体地，当传输通道的视频流量发生变化时，通常情况下视频流量突然增加或者突然减少可以确定为视频流量发生变化。由于传输通道的配置发生改变和/或传输节点的性能参数发生变化，可能会导致视频流量发生变化。因此，需要确定视频流量发生变化的变化原因，进而针对性的进行调整，以保证不会出现带宽、时隙不足的情况，确保传输节点能够正常显示视频图像。

另外，需要说明的是，本公开的一些实施例中提及的视频流量发生变化通常指的是视频流量的变化幅度过大，例如变化幅度超过某个预设的阈值，才确定视频流量发生变化，进行后续的处理。

S204，响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整。

其中，传输通道的配置可以包括：传输通道的数量、传输通道的链路质量、传输通道中传输的视频流量发生变化。调整可以包括：对所述传输通道进行分类，或者，对传输通道进行拼接。需要说明的，本公开的一些实施例中提及的传输通道可以包括：链路层的传输通道和物理层的传输通道。例如，传输通道的数量发生变化可以包括：链路层初始为的传输通道为4个，物理层的传输通道为2个，链路层的传输通道可以从4个映射到2个，链路层的传输通道变更为2个，物理层的传输通道仍为2个，此时，链路层的传输通道到物理层的传输通道可以映射从2个映射到2个。而映射数量的变更可以确定传输通道的数量发生变化，进而来确定传输通道的状态、配置发生改变。

具体地，当确定变化原因为传输通道的配置发生变化，由于是传输通道的配置引起的视频流量发生变化，因此可以按照不同类型的图像参数对传输通道进行调整。例如，可以按照视频图像的像素深度对传输通道进行分类，使每类传输通道传输相同像素深度的视频图像，以提高传输通道传输视频数据的效率，保证传输节点能够准确的接收到视频图像并显示。还可以按照某一些预设的规则对传输通道进行处理，根据视频图像的特性，如分辨率、帧率、编码方式等，将视频图像分为不同的类型，如高清视频、标清视频、动态视频等，进而使每个传输通道传输不同类型的视频图像，保证传输效率。还可以优化传输通道传输视频图像时的算法，将视频图像进行压缩传输、编码传输等等，保证减少带宽、时隙资源的占用。除此之外，还可以确定每种类型的视频图像在传输时所占用的带宽、时隙资源，按照所占用的带宽、时隙资源等对传输通道进行分类，进而使每类传输通道传输占用不同带宽、时隙资源的视频图像。

又例如，还可以按照视频图像的像素深度对传输通道进行拼接，使拼接后的传输通道传输数据量更大的视频图像，以提到传输通道传输视频数据的效率。由于可以对传输通道进行分类，因此，可以按照分类后的每一类传输通道进行拼接，以此使拼接后的传输通道能够提到传输对应的类别视频图像的数据量。

还可以直接对传输通道进行拼接，如将能够传输分辨率A的传输通道、能够传输帧率A的传输通道进行拼接，则拼接后的传输能够传输分辨率A的视频图像，也能够传输帧率A的视频图像，可以理解的是，上述仅用于举例说明。

S206，将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

其中，视频图像在可以是视频类型的数据，也可以是图像类型的数据，本公开的一些实施例中不对视频图像的具体类型进行限制。

具体地，由于传输通道已经进行调整，因此可以确定待发送的视频图像的图像参数，来选择相对应的调整后的传输通道。然后利用选择的调整后的传输通道来传输待发送的视频图像，将待发送的视频图像发送至对应的传输节点中。传输节点可以接收该待发送的视频图像并显示。

在一些示例性的实施例中，例如按照视频图像的类型进行分类，传输通道A传输高清视频类型的视频图像，传输通道B传输标清视频类型的视频图像。若待发送视频图像为高清视频类型的视频图像，则可以仅利用传输通道A来传输待发送视频图像。以此来保证能够正常传输视频图像，进而也保证传输时由于传输通道与待发送图像适配，不会出现拥塞的问题。

上述视频图像发送方法中，当传输通道中的视频流量发生变化时，可能有由于多种原因导致的传输通道中的视频流量发生变化。因此，为了能够使视频源在发送视频图像时，能够正常发送视频图像。可以确定引起视频流量发生变化的变化原因。当变化原因为传输通道的配置发生改变，此时可以按照不同类型的视频图像的图像参数对传输通道进行调整，保证传输通道能够传输不同类型的视频图像，保证视频图像能够正常传输。由于传输通道已经按照不同类型的进行调整，因此可以将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中。该调整后的传输通道能够适应待发送的视频图像，保证视频图像的正常传输，不会出现带宽、时隙资源不足的情况，因此传输节点接收所述待发送的视频图像并显示。

在一个实施例中，如图4所示，所述基于不同类型的视频图像的图像参数对所述传输通道进行调整，包括：

S302，获取多种类型的视频图像的有效像素数据深度。

其中，有效像素数据深度是指在视频图像中每个像素所包含的信息的位数。它表示了每个像素可以表示的颜色或亮度级别的数量。在数字图像中，每个像素可以由一个或多个数字表示。有效像素数据深度决定了每个像素可以表示的不同颜色或亮度级别的数量。例如，8bit的有效像素数据深度意味着每个像素可以表示256种不同的颜色或亮度级别，而16bit的有效像素数据深度可以表示65536种不同的颜色或亮度级别。通常情况下有效像素数据深度越高，图像的颜色细节和亮度级别就越丰富，图像的质量也相应提高。但同时，越高的有效像素数据深度也会导致图像文件的大小增加，并增加处理和存储图像的计算资源要求。有效像素数据深度通常可以包括：4bit、6bit、8bit、10bit、12bit、16bit。通常情况下，有效像素数据深度受限于传输节点的最大性能参数。

具体地，视频源和传输节点之间可以传输多种不同类型的视频图像。因此，为了能够适应多种不同类型的视频图像的传输，可以先获取多种类型的视频图像的有效像素数据深度。

S304，按照每种不同类型的有效像素数据深度，对传输通道进行分类，其中，分类后的每类传输通道中用于传输相同类型的有效像素数据深度对应的视频图像。

具体地，可以按照有效像素数据对传输通道进行分类。并在分类后的不同类别的传输通道上，传输不同类型的有效像素数据深度对应的视频数据。

例如，有效像素深度包括：4bit、6bit、8bit。因此，可以将传输通道分为3类，第一类传输4bit的视频图像。第二类传输6bit的视频图像。第三类传输8bit的视频图像。通常情况下，可以将分类后的传输通道进行启用，并进行链路层到物理层的映射，未分类的传输通道进行禁用，以减少传输视频图像时时隙资源的占用。

或者，S306，将分类后的传输通道进行拼接，其中，拼接后的传输通道中，用于传输目标像素数据深度对应的视频图像，所述目标像素数据是基于拼接的不同类型的有效像素数据深度计算得到的。

具体地，为了进一步减少时隙资源的占用，提高视频图像的传输效率。在将传输通道进行分类后，还可以将不同类别的或者相同类别的传输通道进行拼接。利用拼接收的传输通道来传输目标像素深度对应的视频图像。

例如，传输通道分为3类后，第一类传输4bit的视频图像。第二类传输6bit的视频图像。第三类传输8bit的视频图像。可以将第一类传输4bit的视频图像的传输通道和第二类传输6bit的视频图像的传输通道进行拼接传输10bit的视频图像的传输通道，也可以将第三类传输8bit的视频图像的传输通道，拼接为传输16bit的视频图像的传输通道。而当传输通道传输目标像素数据深度对应的视频图像时，若目标像素数据深度为10bit，传输节点A接收4bit的视频图像，传输节点B接收6bit的视频图像，则传输节点A需要接收10bit的视频图像，从其中获取其对应的4bit的视频图像。同理，传输节点B也需要接收10bit的视频图像，从其中获取其对应的6bit的视频图像。

本实施例中，通过分类能够将多种Bit深度的视频图像和传输通道进行适配，满足多种Bit深度的视频图像的传输需求。通过拼接可以适配多种Bit深度的视频图像的传输，并且，不同的Bit深度可以应用于不同的目的传输节点，即，通过拼接发送可以满足不同Bit深度的传输节点的视频数据的同时发送，或者将拼接后的Bit深度应用于Bit深度传输节点，提高视频数据的发送效率。

在一个实施例中，所述响应于所述变化原因为传输通道配置发生改变之后，所述方法还包括：调整所述视频图像处理系统中启用的传输通道的数量。

具体地，除上述调整传输通道的方法之外，在确定变化原因为传输通道配置发生改变之后，还可以调整视频图像处理系统中启用的传输通道的数量，进而来动态的调整视频流量。可以增加启用的传输通道的数量，即启用新的传输通道，或者禁用启用的传输通道的数量。当增加传输通道的数量时，通常情况下会减少每个传输通道传输的视频图像的视频流量。当禁用启用的传输通道的数量时，会增加每个传输通道传输视频图像的视频流量。

在本实施例中，还可以通过调整启用的传输通道的数量来调整视频流量，能够增加或者减少带宽、时隙资源，不会出现带宽、时隙资源不足或者限制的情况，增加了资源的利用率。

在一个实施例中，所述方法还包括：在所述视频图像处理系统启用的传输通道中，选择预设数量的传输通道进行调整。

具体地，当确定传输通道的配置发生改变之后，视频源可以选择启用的传输通道中一部分进行调整，即选择预设数量的传输通道按照如上述实施例(S302至306步骤)进行调整，剩余部分不进行调整。

在本实施例中，为了保证视频源和传输节点之间的视频图像的传输效率，可以选择预设数量的传输通道进行调整。

在一个实施例中，如图5所示，所述方法还包括：

S402，响应于所述变化原因为传输节点的性能参数发生变化，调整传输的视频图像的有效像素数据深度，以及调整传输节点接收的视频图像的有效像素数据深度。

其中，性能参数可以包括：分辨率、视频数据的有效像素数据深度(BPC，Bits PerComponent)、刷新率。

具体地，以BPC为例，传输节点当前的BPC为8bit，由于帧率或者分辨率变化之后，BPC变更为10bit、12bit或者16bit。或者，传输节点当前的BPC为16bit，由于视频数据发送质量变差，传输节点变更BPC为8bit等都会引起视频流量发生变化。又或者，对于传输节点(显示器)可以手动调节Bit深度以适配不同的操作系统，此时也会发生性能参数变化，进而引起视频流量发生变化。而当视频流量发生变化是传输节点性能参数发生变化引起的之后，此时可以调整传输的视频图像的有效像素数据深度。当视频图像的有效像素数据深度调整之后，因此，接收视频图像的传输节点也需要对应的适配，传输节点接收的视频图像的有效像素数据深度也需要对应的调整。需要说明的是，在调整视频图像的有效像素数据深度，以及传输节点接收的视频图像的有效像素数据深度时，可以基于传输节点自身的性能参数进行调整。

例如，视频图像的有效像素数据深度从4bit调整为10bit，则传输节点接收视频图像的有效像素数据深度也需要从4bit调整为10bit，以确保传输节点能够正常接收到视频数据。

S404，将调整后的视频图像发送至传输节点中，以指示所述传输节点按照调整后的有效像素数据深度接收调整后的视频图像并显示。

具体地，由于将视频图像的有效像素数据深度进行调整了。因此，视频源可以将调整后的视频图像利用传输通道发送至传输节点中。传输节点可以按照调整后的有效像素数据深度接收调整后的视频图像并显示。

在本实施例中，当变化原因是传输节点的性能参数发生变化导致的，此时还可以调整视频图像的有效像素数据深度，以及调整传输节点接收的视频图像的有效像素数据深度，进而来保证视频图像能够正常传输，以及传输节点能够正常接收视频图像，不会出现时隙资源不足的情况。

在一个实施例中，如图6所示，所述将调整后的视频图像发送至传输节点中，包括：

S502，响应于所述传输的视频图像的有效像素数据深度从第一阈值变为第二阈值，增加传输视频图像时使用的传输时隙资源。

S504，将调整后的视频图像利用增加后的传输时隙资源发送至传输节点中。

其中，所述第一阈值小于第二阈值。第一阈值和第二阈值可以根据实际应用情况来动态确定，在本公开的一些实施例中不对第一阈值和第二阈值进行限制。传输时隙资源可以是指在无线通信系统中，用于传输数据或进行通信的时间片段或时隙。在时分多址(TDMA)和时分复用(TDM)等通信技术中，通信信道被分割成一系列时隙，每个时隙用于传输特定用户的数据。时隙资源的分配可以根据需求进行灵活调整，以满足不同用户的通信需求。时隙资源的合理利用可以提高通信系统的容量和效率。

具体地，当传输的视频图像的有效像素数据深度从第一阈值变为第二阈值时，可以确定有效像素数据深度是从低调整到高，此时由于有效像素数据深度变高了，因此视频源在发送该视频图像时，需要增加传输该视频图像时使用的传输时隙资源。然后将调整后的视频图像利用增加后的传输时隙传输到传输节点。需要说明的是，在本实施例中的传输节点指的是调整接收的视频图像的有效像素数据深度的传输节点。

S506，响应于所述传输的视频图像的有效像素数据深度从第二阈值变为第一阈值，基于第二阈值和第一阈值计算调整像素数据深度。

S508，释放所述调整像素数据深度对应的时隙资源，或者，将所述调整像素数据深度对应的时隙资源分配至其他传输节点，以指示所述其他传输节点利用所述时隙资源进行视频图像传输纠错、视频图像重传以及与视频源之间的信令交互。

具体地，当传输的视频图像的有效像素数据深度从第二阈值变为第一阈值时，可以确定有效像素数据深度是从高调整到低。由于将有效像素数据深度从高调整到低，因此原有的用于传输视频图像的时隙资源会溢出。可以根据第二阈值和第一阈值计算调整像素数据深度。然后释放该调整像素数据深度所对应的时隙资源，以降低时隙资源占用率。除此之外，由于存在溢出的时隙资源，因此视频源可以将调整像素数据深度所对应的溢出的时隙资源进行重新分配。可以分配给其他的传输节点，视频源和其他的传输节点可以利用该溢出的时隙资源进行视频图像传输纠错、视频图像重传、视频源和其他的传输节点之间的信令交互(例如，反馈传输节点的状态信息、传输一些其他信息，例如下述实施例提到的调整传输路径的信息等等)。例如，通过传输冗余视频数据为多通道链路拓扑中链路质量差的传输节点进行视频图像传输纠错。

在本实施例中，由于有效像素数据深度的调整涉及到了两种方面，第一种从低到高，第二种从高到低，因此为了适配不同的情况下，可以根据不同情况选择相对的方式，能够有效的利用时隙资源，降低时隙资源的无效的占用率。

在一个实施例中，所述方法还包括：在将视频图像发送至传输节点的过程中，基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径。

其中，数据总量可以包括：视频源确定的需要在当前帧发送的全部的数据量；另外一个是传输节点的即时数据量，此部分数据是经过调整视频图像的有效像素数据深度，或者调整传输通道后在当前传输节点产生的数据量。例如，在当前帧，视频源发送视频图像至A传输节点的数据量为S1，A传输节点调整视频图像的有效像素数据深度，或者调整传输通道时产生的数据量为S2，则数据总量可以为S1+S2。

具体地，由于上述调整视频图像的有效像素数据深度，或者调整传输通道后，视频图像的发送量以及视频源和传输节点之间的往返时延都会影响视频图像的发送。因此，可以基于传输节点和视频源之间的往返时延和视频图像的发送量来对传输路径进行调整，进而调整往返时延和视频图像的发送量，提高传输通道的链路质量。

更进一步的，如图7所示，所述基于往返时延和/或数据总量，调整传输路径，包括：

S602，响应于所述往返时延满足第一时延条件，和/或，所述数据总量满足第一发送量条件，调整相同的传输通道上相同层级的传输路径。

S604，响应于所述往返时延满足第二时延条件，和/或，所述数据总量满足第二发送量条件，调整相同的传输通道上不同层级的传输路径。

S604，响应于所述往返时延满足第二时延条件或第三时延条件，和/或，所述数据总量满足第二发送量条件或第三发送量条件，调整不同的传输通道上相同层级的传输路径。

S608，响应于所述往返时延满足第三时延条件，和/或，所述数据总量满足第三发送量条件，调整不同的传输通道上不同层级的传输路径。

其中，所述第一时延条件包括：往返时延大于预设的第一时延阈值，第一发送量条件包括：数据总量大于预设的第一数据量阈值。所述第二时延条件包括：所述往返时延大于预设的第二时延阈值，且小于预设的第一时延阈值，所述第二发送量条件包括：所述数据总量大于预设的第二数据量阈值且小于预设的第一数据量阈值。所述第三时延条件包括：所述往返时延小于预设的第二时延阈值；所述第三发送量条件包括：所述数据总量小于预设的第二数据量阈值。更进一步的，第一时延阈值可以大于第二时延阈值，第二时延阈值可以大于第三时延阈值。第一数据量阈值可以大于第二数据量阈值，第二数据量阈值可以大于第三数据量阈值。第一时延阈值、第二时延阈值、第三时延阈值、第一数据量阈值、第二数据量阈值和第三数据量阈值本领域技术人员可以根据实际需求来动态设置。

如图8所示，对本公开实施例传输节点涉及的拓扑结构进行说明。为本公开实施例提供的传输节点和视频源之间的拓扑结构示意图。本公开涉及的拓扑结构可以包括如下几类：视频源→节点1→视频设备1、视频设备2和视频设备3。其中，视频设备3还可以直接与视频源连接。即视频源→视频设备3。视频源→节点2→视频设备4和视频设备5。视频源→节点3→视频设备6、视频设备7、视频设备8、视频设备9和视频设备10。视频源→视频设备6。视频源→节点4→节点5→视频设备11。在本实施例中所涉及的数据传输过程可以为视频源发送视频图像至各个节点或视频设备。各个节点下发视频图像至各个视频设备。各个视频设备或节点显示视频数据。在一些实施例中，传输节点可以包括节点、视频设备和视频源中的一种或多种。以视频设备3为例，视频设备3存在两种拓扑结构，分别为：1、视频源→节点1→视频设备3。2、视频源→视频设备3。如图8所示，对于传输通道1中的视频设备1、视频设备2和视频设备3可以为同一个传输通道中相同层级。通常情况下，拓扑层级相对于视频源所在的位置定义，层级越多，到视频源的链路越长，即，需要较大的发射功率和接收功率方可到达此节点和/或视频终端；反之亦然。另外每个层级中的传输节点数量越多，则说明需要较大的发射功率来发送视频图像，方能覆盖此层级上的所有传输节点，反之亦然。通常，视频源可以作为层级1，对于每个传输通道上，从视频源往下分别是层级2、3等，但不限于此。传输路径可以是视频源将视频数据发送至目的传输节点的所经过的传输节点。传输路径可以包括：1、经过的传输节点全部在相同的传输通道上；2、经过的传输节点全部在不同的传输通道上；3、经过的传输节点部分在相同的传输通道上，部分在其他的传输通道上。相同通道的相同层级，例如图7中的视频设备1、视频设备2、相同通道的不同层级，例如图8中的节点1、视频设备1。不同通道的相同层级，例如图8中节点1和节点2。不同通道的不同层级，例如图8中的节点1和视频设备4。

具体地，当往返时延满足第一时延条件时，可以确定传输节点和视频源之间的往返时延较大，而当数据总量满足第一发送量条件时，可以确定数据总量较大，此时为减少数据总量，减少往返时延带来的影响，可以相同的传输通道上相同层级的传输路径。例如，继续以图8进行举例说明，之前传输路径为：视频源、节点3、视频设备7、视频设备8、视频设备9、视频设备10，此时视频设备7、视频设备8、视频设备9、视频设备10均和视频源之间的数据总量和/或往返时延过大，可以调整相同的传输通道上相同层级的传输路径，即调整为视频源、节点3、视频设备7，此时视频源不将视频图像发送至视频设备8、视频设备9、视频设备10，以减少数据总量。又或者，之前的传输路径为视频源、节点3、视频设备7，视频设备7和视频源之间的数据总量和/或往返时延过大，可以将传输路径调整为视频源、节点3、视频设备8。当层级变更时，视频设备8需要从物理层开启自身的传输通道，此时，视频设备8需要重新与视频源进行链路连接及同步操作，在重新连接的过程中，视频源会重新调整视频设备8的性能参数，以改善视频设备8的往返时延以提升链路质量。而当往返时延满足第二时延条件时，可以确定往返时延比较大(处于居中水平)，而当数据总量满足第二发送量条件时，也可以确定数据总量比较大(处于居中水平)。此时为了调整往返时延，可以调整相同通道上不同层级的传输路径，例如延长和/或缩短传输节点到视频源之间的路径长度，以及调整使得不同层级的其他传输节点与视频源传输数据，据此来调整该传输通道上的往返时延和数据总量。而当往返时延满足第二时延条件或者第三时延条件时，可以确定往返时延比较大或者较小，而当数据总量第二发送量条件或第三发送量条件时，可以确定数据总量比较大或者较小，此时调整不同的传输通道上相同层级的传输路径，视频源可以动态的调整每个传输通道上传输节点的数量，进而可以动态调整不同传输通道上的数据总量。而当往返时延满足第三时延条件时，可以确定往返时延较小，当数据总量满足第三发送量条件，可以确定数据总量较小，此时可以调整不同传输通道上不同层级的传输路径，视频源可以同时动态调整每个传输通道上传输节点的数量，以及调整每个传输通道中传输节点的往返时延。

在本实施例中，通过不同的往返时延和/或数据总量，进而调整传输路径，能够适配多种应用场景，保证传输节点在不同的情况下均能正常显示视频图像。

在一个实施例中，所述传输节点和所述视频源之间使用发送帧进行通信，所述发送帧是基于标准帧得到的。发送帧包括：

发送使能时隙，用于确定是否启用所述发送帧，响应于启用所述发送使能时隙，确定启用所述发送帧；

发送方式选择时隙，用于选择发送视频图像的方式，所述发送视频图像的方式包括：基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；或者，调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整时隙，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈时隙，用于反馈传输节点的状态。

如图9所示，为本公开实施例提供的标准帧结构的示意图，标准帧结构可以包括：BS(Blanking Start，消隐开始)、VB-ID(Vertical Blanking Identifier，场消隐标识)、Mvid(视频数据的定时器取值)、Naud(音频数据的定时器取值)、Dummy Video(用于伪数据填充)、BE(Blanking End，消隐结束)、像素数据(用于视频数据的发送)、FS(Fill Start，填充开始)、Fill Video(填充数据，用于数据不足时的填充)、FE(Fill End，填充结束)。发送帧可以是基于标准帧上增加了新的时隙后得到的。如图10所示，为本公开实施例的发送帧的结构示意图，发送帧在标准帧的基础上增加了发送使能时隙、发送方式选择时隙、路径调整时隙、反馈时隙后得到的。

其中，发送使能时隙用于确认是否启用视频图像发送方法，当需要启用视频图像发送方法的情况下，则启用发送帧，并启用所有新增的时隙，当禁用时，则禁用所有新增的时隙，而启用图9所示的标准帧结构，以最大的兼容标准设备，同时，以降低信令开销，提升数据传输效率。发送方式选择时隙用于视频源选择发送视频图像的方式，例如选择如上述实施例中S204至206步骤提到的发送方式，还可以选择上述实施例中S402至S404提到的方式。具体每种方式如何进行处理可参见上述实施例，在此不进行重复赘述。路径调整时隙，用于视频源基于与传输节点之间的往返时延和/或数据总量，来调整传输路径。具体的处理方式可参见上述实施例，在此不进行重复赘述。反馈时隙，用于传输节点将自身的状态反馈给视频源，例如反馈显示视频图像的结果，反馈接收视频图像的结果，反馈时延信息，反馈数据量信息等等。

在本实施例中，利用发送帧进行通信，并且发送帧是在标准帧结构上增加时隙后得到的，当启用时，则启用新增的时隙，当禁用时，则禁用所有新增的时隙，而启用标准帧结构，以最大的兼容标准设备，同时，以降低信令开销，提升数据传输效率。

在一个实施例中，传输节点和视频源之间还可以使用发送效率帧进行调整，所述发送效率帧是将标准帧中的像素数据时隙调整为常规视频发送时隙和调整发送时隙后得到的。

所述常规视频发送时隙，用于发送标准的视频图像至传输节点，即不进行任何调整，常规的标准方式将视频图像发送至传输节点。

所述调整发送时隙，用于实现发送使能时隙、发送方式选择时隙、路径调整时隙和反馈时隙所对应的功能，即上述实施例提及的各种时隙的功能。

在一个实施例中，所述传输节点和所述视频源之间使用发送信令进行通信，所述发送信令包括：

发送使能字段，用于确定是否启用视频图像发送方法；

发送方式选择字段，用于选择发送视频图像的方式，所述发送视频图像的方式包括：常规发送方式；基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整字段，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈字段，用于反馈传输节点的状态。

关于本公开实施例中其他字段的具体限定和实施方式，可以参见上述实施例中时隙的使用和实施方式，在此不进行重复赘述。其中，发送使能时隙和发送使能字段的作用基本相同。发送方式选择时隙和发送方式选择字段的作用基本相同。路径调整时隙和路径调整字段的作用基本相同。反馈时隙和反馈字段的作用相同。本领域技术人员可以根据实际情况选择利用发送帧和/或发送信令进行通信。

在一个实施例中，本公开还提供了一种视频图像发送方法，该方法可以是

发送帧和发送信令共同交互作用来实现。包括：

步骤01：视频源初始化发送信令的发送使能字段为禁用，并默认使用标准帧结构发送视频图像。

步骤02：视频源初始化发送信令的发送方式选择字段为常规的多通道视频图像发送方式。

步骤03：视频源初始化发送信令的路径调整字段为相同通道不同层级的传输路径。

步骤04：视频源初始化发送信令的反馈字段为传输通道的拓扑及视频图像吞吐量检测待反馈。

步骤05：视频源向多通道中所有传输节点发送发送信令。

步骤06：多通道中所有的传输节点接收并解析发送信令。

步骤07：多通道中所有的传输节点将自身的多通道链路拓扑层级、路径写入到传输路径选择字段。

步骤08：多通道中所有的传输节点修改视频图像协调发送反馈字段为链路拓扑及视频图像吞吐量检测已经完成；

步骤09：多通道中所有的传输节点向视频源发送发送信令；

步骤10：视频源接收并解析多通道中所有的传输节点发送发送信令。

步骤11：视频源修改发送信令的发送使能字段为启用，即，启用本公开的发送帧结构。

步骤12：视频源根据传输节点反馈的自身的信息，确定发送视频图像的方式。

步骤13：视频源根据传输节点反馈的路径调整字段，调整并确定传输路径。

步骤14：视频源根据确定的发送视频图像的方式进行发送视频图像，包括：基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；或者，调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送。

步骤15：视频源变更发送信令的反馈字段为准备待确认。

步骤16：视频源向多通道中所有的传输节点发送发送信令。

步骤17：多通道中所有的传输节点接收并解析发送信令。

步骤18：多通道中的所有的传输节点根据路径调整字段更改拓扑结构。

步骤19：多通道中所有的传输节点修改反馈字段为已准备待同步。

步骤20：多通道中所有的传输节点向视频源发送发送信令；

步骤21：视频源接收并解析多通道中所有的传输节点发送多的发送信令。

步骤22：视频源解析反馈字段，并发起多通道同步，即，按照传输节点的新的拓扑结构完成同步，为多通道视频图像发送做准备。

步骤23：多通道中所有的传输节点开始按照新的拓扑结构同步，如果同步成功，转到步骤24，否则，转到步骤13。

步骤24：多通道中所有的传输节点修改反馈字段为已准备已同步。

步骤25：视频源使用发送帧结构发送视频图像。

步骤26：多通道中的所有传输节点接收视频源发送的视频图像，如果正确发送，转到步骤27，否则，转到步骤13。

步骤27：视频源还可以使用发送效率帧结构发送视频图像。

关于本实施例中具体的各种信令、发送效率帧、发送帧等具体实施方式可参见上述实施例，在此不进行重复赘述。

应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。

基于同样的发明构思，本公开实施例还提供了一种用于实现上述所涉及的视频图像发送方法的视频图像发送装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个视频图像发送装置实施例中的具体限定可以参见上文中对于视频图像发送方法的限定，在此不再赘述。

在一个实施例中，如图10所示，提供了一种视频图像发送装置700，应用于视频图像处理系统中的视频源，所述视频源通过传输通道传输视频图像至传输节点，包括：原因确定模块702、通道调整模块704、第一图像发送模块706，其中：

原因确定模块702，用于响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因。

通道调整模块704，用于响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整。

第一图像发送模块706，用于将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

在所述装置的一个实施例中，所述通道调整模块704，包括：

像素数据深度获取模块，用于获取多种类型的视频图像的有效像素数据深度。

分类模块，用于按照每种不同类型的有效像素数据深度，对传输通道进行分类，其中，分类后的每类传输通道中用于传输相同类型的有效像素数据深度对应的视频图像。

拼接模块，用于将分类后的传输通道进行拼接，其中，拼接后的传输通道中，用于传输目标像素数据深度对应的视频图像，所述目标像素数据是基于拼接的不同类型的有效像素数据深度计算得到的。

在所述装置的一个实施例中，所述装置还包括：

通道数量调整模块，用于调整所述视频图像处理系统中启用的传输通道的数量。

在所述装置的一个实施例中，所述装置还包括：通道选择模块，用于在所述视频图像处理系统启用的传输通道中，选择预设数量的传输通道进行调整。

在所述装置的一个实施例中，所述装置还包括：

像素数据调整模块，用于响应于所述变化原因为传输节点的性能参数发生变化，调整传输的视频图像的有效像素数据深度，以及调整传输节点接收的视频图像的有效像素数据深度。

第二图像发送模块，用于将调整后的视频图像发送至传输节点中，以指示所述传输节点按照调整后的有效像素数据深度接收调整后的视频图像并显示。

在所述装置的一个实施例中，所述第二发送模块，包括：

第一处理模块，用于响应于所述传输的视频图像的有效像素数据深度从第一阈值变为第二阈值，增加传输视频图像时使用的传输时隙资源；将调整后的视频图像利用增加后的传输时隙资源发送至传输节点中。

第二处理模块，用于响应于所述传输的视频图像的有效像素数据深度从第二阈值变为第一阈值，基于第二阈值和第一阈值计算调整像素数据深度；释放所述调整像素数据深度对应的时隙资源，或者，将所述调整像素数据深度对应的时隙资源分配至其他传输节点，以指示所述其他传输节点利用所述时隙资源进行视频图像传输纠错、视频图像重传以及与视频源之间的信令交互。

其中，所述第一阈值小于第二阈值

在所述装置的一个实施例中，所述装置还包括：路径调整模块，用于在将视频图像发送至传输节点的过程中，基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径。

在所述装置的一个实施例中，所述路径调整模块，包括：

第一调整模块，用于响应于所述往返时延满足第一时延条件，和/或，所述数据总量满足第一发送量条件，调整相同的传输通道上相同层级的传输路径；所述第一时延条件包括：往返时延大于预设的第一时延阈值，第一发送量条件包括：数据总量大于预设的第一数据量阈值。

第二调整模块，用于响应于所述往返时延满足第二时延条件，和/或，所述数据总量满足第二发送量条件，调整相同的传输通道上不同层级的传输路径；所述第二时延条件包括：所述往返时延大于预设的第二时延阈值，且小于预设的第一时延阈值，所述第二发送量条件包括：所述数据总量大于预设的第二数据量阈值且小于预设的第一数据量阈值。

第三调整模块，用于响应于所述往返时延满足第二时延条件或第三时延条件，和/或，所述数据总量满足第二发送量条件或第三发送量条件，调整不同的传输通道上相同层级的传输路径；所述第三时延条件包括：所述往返时延小于预设的第二时延阈值；所述第三发送量条件包括：所述数据总量小于预设的第二数据量阈值。

第四调整模块，用于响应于所述往返时延满足第三时延条件，和/或，所述数据总量满足第三发送量条件，调整不同的传输通道上不同层级的传输路径。

在所述装置的一个实施例中，所述装置还包括：第一通信模块，用于使所述传输节点和所述视频源之间使用发送帧进行通信，所述发送帧是基于标准帧得到的；所述发送帧包括：

发送使能时隙，用于确定是否启用所述发送帧，响应于启用所述发送使能时隙，确定启用所述发送帧；

发送方式选择时隙，用于选择发送视频图像的方式，所述发送视频图像的方式包括：基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；或者，调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整时隙，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈时隙，用于反馈传输节点的状态。

在所述装置的一个实施例中，所述装置还包括：第二通信模块，用于使所述传输节点和所述视频源之间使用发送效率帧通信，所述发送效率帧是将标准帧中的像素数据时隙调整为常规视频发送时隙和调整发送时隙后得到的；

所述常规视频发送时隙，用于发送标准的视频图像至传输节点；

所述调整发送时隙，用于实现发送使能时隙、发送方式选择时隙、路径调整时隙和反馈时隙所对应的功能。

在所述装置的一个实施例中，所述装置还包括：第三通信模块，用于使所述传输节点和所述视频源之间使用发送信令进行通信，所述发送信令包括：

发送使能字段，用于确定是否启用视频图像发送方法；

发送方式选择字段，用于选择发送视频图像的方式，所述发送视频图像的方式包括：常规发送方式；基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整字段，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈字段，用于反馈传输节点的状态。

上述视频图像发送装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种视频图像发送方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图11中示出的结构，仅仅是与本公开方案相关的部分结构的框图，并不构成对本公开方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述任一方法实施例中的步骤。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一方法实施例中的步骤。

在一个实施例中，提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述任一方法实施例中的步骤。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本公开所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本公开所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本公开所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本公开的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本公开专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本公开构思的前提下，还可以做出若干变形和改进，这些都属于本公开的保护范围。因此，本公开的保护范围应以所附权利要求为准。

Claims (13)

1.一种视频图像发送方法，其特征在于，应用于视频图像处理系统中的视频源，所述视频源通过传输通道传输视频图像至传输节点，所述方法包括：

响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因；

响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整；

将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

2.根据权利要求1所述的方法，其特征在于，所述基于不同类型的视频图像的图像参数对所述传输通道进行调整，包括：

获取多种类型的视频图像的有效像素数据深度；

按照每种不同类型的有效像素数据深度，对传输通道进行分类，其中，分类后的每类传输通道中用于传输相同类型的有效像素数据深度对应的视频图像；

或者，将分类后的传输通道进行拼接，其中，拼接后的传输通道中，用于传输目标像素数据深度对应的视频图像，所述目标像素数据是基于拼接的不同类型的有效像素数据深度计算得到的。

3.根据权利要求1所述的方法，其特征在于，所述响应于所述变化原因为传输通道配置发生改变之后，所述方法还包括：

调整所述视频图像处理系统中启用的传输通道的数量。

4.根据权利要求1至3中所述的方法，其特征在于，所述方法还包括：

在所述视频图像处理系统启用的传输通道中，选择预设数量的传输通道进行调整。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

响应于所述变化原因为传输节点的性能参数发生变化，调整传输的视频图像的有效像素数据深度，以及调整传输节点接收的视频图像的有效像素数据深度；

将调整后的视频图像发送至传输节点中，以指示所述传输节点按照调整后的有效像素数据深度接收调整后的视频图像并显示。

6.根据权利要求5所述的方法，其特征在于，所述将调整后的视频图像发送至传输节点中，包括：

响应于所述传输的视频图像的有效像素数据深度从第一阈值变为第二阈值，增加传输视频图像时使用的传输时隙资源；

将调整后的视频图像利用增加后的传输时隙资源发送至传输节点中；

响应于所述传输的视频图像的有效像素数据深度从第二阈值变为第一阈值，基于第二阈值和第一阈值计算调整像素数据深度；

释放所述调整像素数据深度对应的时隙资源，或者，将所述调整像素数据深度对应的时隙资源分配至其他传输节点，以指示所述其他传输节点利用所述时隙资源进行视频图像传输纠错、视频图像重传以及与视频源之间的信令交互；

其中，所述第一阈值小于第二阈值。

7.根据权利要求1或5所述的方法，其特征在于，所述方法还包括：

在将视频图像发送至传输节点的过程中，基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径。

8.根据权利要求7所述的方法，其特征在于，所述基于往返时延和/或数据总量，调整传输路径，包括：

响应于所述往返时延满足第一时延条件，和/或，所述数据总量满足第一发送量条件，调整相同的传输通道上相同层级的传输路径；所述第一时延条件包括：往返时延大于预设的第一时延阈值，第一发送量条件包括：数据总量大于预设的第一数据量阈值；

响应于所述往返时延满足第二时延条件，和/或，所述数据总量满足第二发送量条件，调整相同的传输通道上不同层级的传输路径；所述第二时延条件包括：所述往返时延大于预设的第二时延阈值，且小于预设的第一时延阈值，所述第二发送量条件包括：所述数据总量大于预设的第二数据量阈值且小于预设的第一数据量阈值；

响应于所述往返时延满足第二时延条件或第三时延条件，和/或，所述数据总量满足第二发送量条件或第三发送量条件，调整不同的传输通道上相同层级的传输路径；所述第三时延条件包括：所述往返时延小于预设的第二时延阈值；所述第三发送量条件包括：所述数据总量小于预设的第二数据量阈值；

响应于所述往返时延满足第三时延条件，和/或，所述数据总量满足第三发送量条件，调整不同的传输通道上不同层级的传输路径。

9.根据权利要求1所述的方法，其特征在于，所述传输节点和所述视频源之间使用发送帧进行通信，所述发送帧是基于标准帧得到的；所述发送帧包括：

发送使能时隙，用于确定是否启用所述发送帧，响应于启用所述发送使能时隙，确定启用所述发送帧；

发送方式选择时隙，用于选择发送视频图像的方式，所述发送视频图像的方式包括：基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；或者，调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整时隙，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈时隙，用于反馈传输节点的状态。

10.根据权利要求9所述的方法，其特征在于，所述传输节点和所述视频源之间使用发送效率帧通信，所述发送效率帧是将标准帧中的像素数据时隙调整为常规视频发送时隙和调整发送时隙后得到的；

所述常规视频发送时隙，用于发送标准的视频图像至传输节点；

所述调整发送时隙，用于实现发送使能时隙、发送方式选择时隙、路径调整时隙和反馈时隙所对应的功能。

11.根据权利要求1所述的方法，其特征在于，所述传输节点和所述视频源之间使用发送信令进行通信，所述发送信令包括：

发送使能字段，用于确定是否启用视频图像发送方法；

发送方式选择字段，用于选择发送视频图像的方式，所述发送视频图像的方式包括：常规发送方式；基于不同类型的视频图像的图像参数对传输通道进行调整，将待发送的视频图像利用调整后的传输通道发送；调整传输的视频图像的有效像素数据深度，将调整后的视频图像发送；

路径调整字段，用于基于传输节点和视频源之间的往返时延和/或数据总量，调整传输路径；

反馈字段，用于反馈传输节点的状态。

12.一种视频图像发送装置，其特征在于，应用于视频图像处理系统中的视频源，所述视频源通过传输通道传输视频图像至传输节点，所述装置包括：

原因确定模块，用于响应于检测到传输通道中的视频流量发生变化，确定引起视频流量发生变化的变化原因；

通道调整模块，用于响应于所述变化原因为传输通道的配置发生改变，基于不同类型的视频图像的图像参数对所述传输通道进行调整；

第一图像发送模块，用于将待发送的视频图像利用调整后的传输通道发送至对应的传输节点中，以指示所述传输节点接收所述待发送的视频图像并显示。

13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。