WO2007059670A1

WO2007059670A1 - Procede de correction d'une caracteristique gamma dans un flux de codes video et unite de commande multipoint

Info

Publication number: WO2007059670A1
Application number: PCT/CN2006/001671
Authority: WO
Inventors: Zhong Luo
Original assignee: Huawei Technologies Co., Ltd.
Priority date: 2005-11-28
Filing date: 2006-07-14
Publication date: 2007-05-31
Also published as: EP1959691B1; CN1852414B; EP1959691A1; CN1852414A; US8111333B2; US20080231688A1; EP1959691A4

Description

一种视频码流伽玛特性校正方法及多点控制单元技术领域

本发明涉及多媒体通信 , 特别涉及一种视频通信中视频码流伽玛特性校正方法及多点控制单元。背景技术

视频通信目前正在随着宽带网络的迅速发展而得到日益广泛的应用，在国内和国际上，视频会议和可视电话业务正在成为 NGN ( Next Generation Network, 下一代网络）上的基本业务。各国的电信运营商也非常重视这个市场机会，可以预期在未来几年中，视频通信业务将成为运营商重要的业务增长点。发展此类业务的一个关键问题是提高端到端（End-to-end )的用户体验 ( User Experience , 或者叫做 Quality of Experience )。用户体验中除了网格的 QoS (丢包, 延迟，抖动， R因子等）参数外, 对于视频，因为各个环节引起的 Gamma非线性问题，造成对于亮度信号的畸变（Distortion ), 也是影响最终用户体验的重要因素。但是目前，提高端到端用户体验的方法和技术主要集中在保证网络 QoS 和视频压缩编码相关的前后处理（Pre-processing, Post-processing )方面，而对于 Gamma特性引起的亮度 ^变问题缺乏关注和系统的解决方法，但是该问题的严重性已经引起了一些国际大电信运营商的关注。法国电信（France Telecom )在国际电信联盟 ITU-T近期就提出了要在视频通信中考虑 Gamma特性对于通信用户体验的影响，并建议解决此类问题。

视频通信过程中，在一个视频通信终端（以下简称终端）中，从需要被传送,的场景（人物、背景、文件等）的光信号进入到摄像机 /摄像头，经过 A/D 转换成数字图像信号，再经过压缩编码，传送出去到达对方终端经过去压缩 ( Decompression )解码还原为数字图像信号，然后再在显示设备上显示出来，最终又变成光信号被人眼感知。这个过程中图像亮度信号（Luminance, 这里是一种广义的亮度信号，即一开始的光信号，到电信号，再到数字化的图像亮度 /灰度信号，每个阶段的信号都含有亮度信号的信息，因此广义来说，亮度信号经过了多个环节）经过了多个环节。

如图 1所示，图 1为环节 Gamma特性的模型示意图， Gamma特性就是一个环节的亮度信号输入-输出关系不是线性的，而是一种非线性。 Gamma非线性环节畸变的影响如图 2所示，上面的一行灰度方块亮度是线性递增的，从 0.1到 1.0, 下面一行是经过 Gamma非线性环节畸变的，亮度是按照幂函数规律递增的。

在实际中， Gamma非线性是由不同原因引起的，例如： CRT ( Cathode Ray Tube, 阴极射线管）显示器的 Gamma特性在理想状况下满足公式 1 :

Lou厂 Ljn (1)

而对应的摄像机 /摄像头的理想 Gamma满足公式 2:

Lcm厂 Ljn (2)

从 Gamma问题的起源来看，起源于 CRT显示器，因为其 Gamma值是 2.2 , 为了补偿掉这个非线性，在摄像机中人为引入了 Gamma值 0.45。如果在系统中只存在两个 Gamma环节： CRT显示器和摄像机，那么可以实现完全的 Gamma 校正。需要说明的是，这里的输入和输出亮度信号都是在各自的坐标空间中进行了规一化（Normalized ) , 即 0≤L。_ut≤l, 0≤L_in≤l。而其它类型的显示器，比如液晶显示器的 Gamma函数形式或者不同、或者虽然形式上也是幂函数但是参数不同。

如图 3所示，图 3为多个环节级联（Cascading或者叫做串联）起来环节

Gamma特性的模型示意图，总的 Gamma特性等于各个环节 Gamma函数的复合

(Composition), 满足公式 3:

G_CT (.) = G⁽¹⁾ (.)。 G⁽²⁾ (.)。 G⁽³⁾ (.) ........ " (.) o (.)

'-G = G(")(G("- "(GC- ² ....... G^(G⁽¹⁾ ¾))))) (3)

"。 "表示函数的复合运算。 CT表示 Cascaded Total, 即级联总 Gamma的意理想的情况是输入光信号从进入摄像头到最终在显示屏上显示输出光信号，输入和输出亮度信号之间存在线性关系，即： L。_ut= L_in, 这样人看到的景物才和原来的完全一样，用户体验最好。

要获得线性关系，必须对于具有非线性 Gamma特性环节进行 Gamma校正 ( Gamma Correction )。如图 4所示，对于一个环节来说，其 Gamma特性给定，那么可以用另外一个校正环节和它进行级联，来使得级联后总的 Gamma特性称为真正的线性关系，从而达到了补偿掉给定环节非线性的目的，校正环节的模型为 Gamma特性等效模型的逆模型，如果等效模型可以用函数关系式表示，则逆模型的函数关系式为其反函数。显然， G_g(.)和 G_c(.)互为反函数。一般情况下，对于一个函数，要获得其反函数不一定有解（或者即使解存在，也无法用计算的方法获得）。

实际应用中更多的情况如图 5所示，校正环节需要插入到前后两个给定环节之间，此时 G_c(.)情况更加复杂， G_c(.)和 G_a(.)或者 G_p(.)不再是筒单的反函数关系。

视频通信中，终端内部存在多个环节，每个环节都有其 Gamma特性，它们之间级联起来，目前还没有一般性的方法来实现从光信号进入摄像机 /摄像头到显示器显示图像的 Gamma校正方法。因此，因为 Gamma问题引起的视频质量下降还没有一般性的方法。同时，不同终端之间的 Gamma特性参数相互是不知道的，那么视频从终端 A发送到终端 B后，如何实现 Gamma校正，也是一个没有解决的问题。在多方视频通信中，情况更加复杂，因为涉及到 MCU ( Multipoint Control Unit, 多点控制单元）对于多个终端来视频进行混合，然后发给各个终端，多画面图像中各个子图像的 Gamma特性都不同，要实现 Gamma校正更力口困难。

MCU的主要功能是多点控制 MC ( Multipoint Control )和多点处理（MP Multipoint Processing ) , MC包括通信过程控制、会议控制等， MP包括媒体处理、视频码流的转发或者多画面合成、音频的混合等。与本发明相关的主要 UVCP功能，更严格来说，是 MP中视频处理的功能。在视频方面， MCU可以 . 工作在如下状态，其中前两种也被称为视频转发模式：

1、会场自由观看状态

在这种状态下，参加一个会议中的每个终端都可以自由选择观看任何其它终端的会场视频， MCU负责将被收看的终端视频转发给接收终端。当然有多少终端能够选择观看其它会场受到多点控制单元能够支持最大的自由观看会场数决定的（取决于设备能力或者运营控制系统的设定）。比如终端 A可以选择观看终端 B的会场视频，终端 B又可以选择终端 C来观看等;

2、会场指定观看（即会场广播）状态

由会议中的主席终端 (如果存在的话)或者会议组织者通过运营控制系统指定会议中的所有终端都观看某个终端会场的视频 , MCU负责将被收看的终端视频, 即被指定会场的视频广播出去。比如终端 X被选择，那么其它终端都观看 X的会场视频；

3、多画面状态

MCU将多个终端会场的视频合成为多画面, 多画面的布局（包含多少个会场，这些会场图像如何排列和相对大小等 ) 由会议主席终端（如果存在的话 )或者会议组织者通过运营控制系统来指定的。如果被选择的终端会场为、 X₂、 X₃ X_c, 那么一种可能的布局如图 6所示。

MCU合成多画面的主要方法有如下两类：

第一类为先解码再编码的合成模式， MCU将来自各个终端的视频码流首先进行去压缩解码，恢复成为未压缩的数字视频格式，然后再按照某种多画面的具体布局组合拼装成多画面图像，再对多画面图像进行压缩编码形成新的多画面视频码流；

第二类为直接合成模式， MCU将各种终端的视频码流按照一定符合标准的语法组合成新的码流。比如 H.261、 H.263、 H.264协议在语法上都允许这样的组合。一般来说，直接合成有一个问题就是，终端需要首先降低视频图像的分辨率，比如正常图像是 CIF ( Common Interchange Format ) , 而为了合成一个包含 4个子画面的多画面（2x2布局），则需要在终端把分辨率降低到原来的 1/4，即 QCIF ( Quarter CIF )格式。这种情况局限了来自该终端的图像只能用于合成多画面，而不能以正常分辨率被其他终端观看。当然这种限制在具体应用环境中并不造成很大的问题，而直接合成模式带来的好处也是显然，直接合成减少了解码和重新编码带来的问题，例如需要高的处理能力和损伤图像质量等问题，可以降低 MCU成本并提高通信容量和通信质量，因此现在也广泛被采用。

因为 MCU要进行处理和计算，因此一个 MCU能够控制的终端是有限的，为了组成更大的通信网络，支持更多的终端，可以采用如图 7所示的多个 MCU 级联的方式，例如最上层的 MCU1控制下面的第二层的 MCU2.1至 2.m (共 m个)，而后者分别控制若干个第三层的 MCU (共 n个）。每一层的 MCU可以直接控制一定数量的终端，也可以同时通过其所控制的下层 MCU间接控制一定数量的终端。

如图 8所示，每一个 MCU从功能上在内部可以进行如下分解：一个多点控制器（ Multipoint Controller )和多个多点处理器（ Multipoint Processor ) 。这种分解模型 ( Decomposed Model ) 目前非常流行，这样可以在产品的实现上更加灵活，提供更多类型的 MCU类的电信设备。通过将多个多点处理器进行堆叠（Stack )扩大处理能力，也能够达到支持更大多媒体通信网絡组网的目的。

目前的技术都是基于如下假设，在每个终端上来进行 Gamma校正：

1、每个终端的显示设备和摄像机 /摄像头都是按照标准的 Gamma特性要求设计和制造，即显示器的 Gamma参数为 2.2, 而摄像机 /摄像头的 Gamma参数为 0.45;

2、在摄像机 /摄像头和显示设备中间没有其它的 Gamma环节；

3、每个终端发送出去的视频码流数据都经过了 Gamma校正，并且这种校正是基于能够和对方终端的显示设备配合来实现的。

在以上假设下，每个终端在本地实现 Gamma校正，校正方法如图 4所示，现有校正方法的缺点是显然的，因为所要求的三个假设在目前情况下已经越来越不能成立了。现有技术中，高端的摄像机一般都能够提供 Gamma校正功能，但是大量低端的摄像头却不能提供。如果摄像机能够提供 Gamma校正功能，则意味着摄像机作为一个整体，对外的 Gamma特性由公式 2给出。而现实情况是目前电信运营商都在大力推动面向公众的视频通信，必然要提供非常便宜的终端才能吸引广大公众，这样使用廉价的摄像头是不可避免的。这类廉价摄像头可能存在非线性的 Gamma特性，但不是公式 2给出的形式，甚至根本不具有冪函数的形式。根据实际的测试结果，发现了很多基于 CCD ( Charge Coupled Device ) 的廉价摄像头的 Gamma特性，最接近的幂函数是 L。_ut=L_in ²² 左右，并且很多数据点偏离这条曲线，因此很难说是一个幂函数曲线。另夕卜，因为在终端系统中，完全可能存在其它的 Gamma环节，因此即使摄像机具有了由公式 2给出的标准的 Gamma特性，也可能无法达到完全 Gamma校正的效果。

如果要进行 Gamma校正，必须使用伽玛环节的 Gamma特性参数，高端设备符合理想的 Gamma特性，可以利用例如公式 1或 2的幂函数，包括纯幂函数和带有偏移的冪函数形式。但是大多数中端或低端设备的 Gamma特性只能采用如表 1所示的查表 ( LUT=Look-Up Table )表示方法。

因为 Gamma函数的定义域和值域都是 [0,1]区间，因此，可以采用离散化的方式来表示这种函数关系。如表 1所示，该表的形式是两列 N行，左边是 L_in 的 N个离散值，右边是对应的 L。_ut的 N的离散值。因此，要根据 L_in的数值来计算对应的！^^, 只要查表就可以完成了。如果 L_in的数值不在左列中，可以采用插值的方法来计算对应的 L。_ut值。

表 1. Gamma参数的查表表示方法

Gamma特性参数的两种方式相比来说，有各自的优点和不足。函数表示简洁，传递参数量很少。但是计算麻烦，尤其计算浮点数的非整数次方是非常耗时的。采用查表表示，计算筒洁，并且可以适应任意函数形式，通用性好，但是需要传递参^:较多。

理想状态是很难获得的，因此用純幂函数形式，或者带有偏移的幂函数形式来表示 Gamma特性，在有些情况下可能是很不精确的。比如如果摄像头是廉价的摄像头，可能其 Gamma特性就不是幂函数形式。这种情况下，函数表示方式就失效了。目前，电信运营商都在大力推动面向公众的视频通信，必然要提供非常便宜的终端才能吸引广大公众，这样使用廉价的摄像头是不可避免的。

在现有技术一中，函数表示都不够精确，过于简单化和理想化，处于简化的需要，在对于 Gamma校正精度要求不高的情况下是可以使用。但是，在一些对于质量要求很高的应用场景下，采用了满足公式 4和公式 5分段函数模型：

其中，公式 4是摄像机的 Gamma特性表示，公式 5是 CRT显示器的 Gamma 特性表示。分段函数的表述虽然比较精确，但是适用范围狭窄，只能适合高端（所谓广播级）设备，对于大量中端和低端的设备，尤其是摄像头无法很好使用。发明内容

本发明提供一种视频通信中视频码流伽玛特性校正方法及多点控制单元，以解决现有多媒体通信中视频图像的伽玛失真问题。

一种视频通信中视频码流伽玛特性校正方法，包括如下步驟：

发送终端向接收终端发送视频码流，所述视频码流中包括根据发送终端视频图像生成的视频数据和发送终端的伽玛特性参数信息；

接收终端接收所述视频码流，根据所述视频数据还原所述视频图像，并根据本端伽玛特性参数信息和发送终端伽玛特性参数信息对该视频图像进行伽玛校正。

所述方法中，至少一个发送终端将所述视频码流发送给多点控制单元；多点控制单元将所述视频码流发送给接收终端。

其中，多点控制单元将来自至少两个发送终端的视频码流合成为一个多画面视频码流后发送给接收终端。

其中：多点控制单元分别根据每一个发送终端的视频数据还原出对应的视频图像 , 将所述各个视频图像分别作为子画面并拼装成一个多画面图像，然后生成所述多画面图像的视频数据，并将该多画面图像的视频数据和每一个子画面对应的伽玛特性参数信息合成为一个多画面视频码流后发送给接收终端，其中，所述子画面的伽玛特性参数信息顺序根据子画面的拼装位置和顺序确定；以及接收终端根据所述多画面图像的视频数据还原出所述多画面图像，并根据本端伽玛特性参数信息和每一个子画面对应的伽玛特性参数分别校正每一个子画面的视频图像。

其中：多点控制单元分別提取每一个发送终端视频码流中的视频数据并根据子画面拼装顺序直接进行复合，然后将复合后的视频数据和每一个子画面对应的伽玛特性参数信息合成为一个多画面视频码流后发送给接收终端，其中，所述子画面的伽玛特性参数信息顺序根据子画面的拼装位置和顺序确定；以及，接收终端从复合后的视频数据中提取各子画面对应的视频数据并还原出各子画面的视频图像，然后根据本端伽玛特性参数信息和每一个子画面对应的伽玛特性参数分别校正每一个子画面的视频图像 , 再将校正后的各个子画面根据拼装顺序拼装为多画面图像。在所述视频码流中还设置有标识视频图像存在伽玛失真的指示信息；以及，接收终端才艮据所述指示信息确认所述多画面视频码流中携带有所述伽玛特性参数信息。

本发明所述另一种视频通信中视频码流伽玛特性校正方法，包括如下步骤：

视频码流发送终端向多点控制单元发送第一视频码流，所述第一视频码流中包括根据发送终端视频图像生成的视频数据和发送终端的伽玛特性参数信息；

多点控制单元接收所述第一视频码流，根据所述视频数据还原所述视频图像，并根据发送终端的伽玛特性参数信息对于所述视频图像进行一次伽玛校正；然后

生成经过一次校正的视频图像的视频数据并携带在第二视频码流中发送给接收终端。

所述方法还包括：接收终端接收所述第二视频码流，还原校正后视频图像并根据本端伽玛特性参数再次进行校正。

其中：多点控制单元将来自至少两个发送终端的第一视频码流并分别校正视频图像并拼装为多画面图像；以及，才据所述多画面图像生成多画面图像视频数据并携带在所述第二视频码流中发送给接收终端。

其中：接收终端根据所述多画面图像的视频数据还原出所述多画面图像，并分别根据本端伽玛特性参数再次校正每一个子画面的视频图像。

所述第一视频码流中设置有标识视频图像存在伽玛失真的第一指示信息；和 /或，所述第二视频码流中设置有标识视频图像已经经过一次伽玛校正的第二指示信息。

多点控制单元根据所述第一指示信息确认所述第一视频码流中携带有发送终端的伽玛特性参数信息。

所述的发送终端伽玛特性参数信息为所述视频图像在其采集、处理和形成视频码流的过程中：在发送终端经过每一个伽玛特性环节的伽玛特性参数， . ― 以及各伽玛特性环节的级联顺序；或者发送终端根据经过的所有伽玛 ¾环节确定的等效伽玛特性参数。

所述方法中：发送终端将本终端每一帧视频图像的伽玛特性参数信息分别对应该视频图像的视频数据携带在所述视频码流中发送给接收终端；或者，发送终端将每隔一定周期将伽玛特性参数信息携带在所迷视频码流中发送给接收终端；或者，发送终端在通信开始时将初始伽玛特性参数信息携带在所述视频码流中发送给接收终端，并在通信过程中，当本端伽玛特性参数发生变化时，再将更新的伽玛特性参数信息携带在所述视频码流中发送给接收终端。

所述每一个伽玛环节的伽玛特性参数或等效伽玛特性参数包括对应设定等级的每一级输入亮度信号值的输出亮度值集合。其中，所述输入亮度信号值的设定级别是 0-255级，亮度值的取值为整数。

根据所述方法，在所述视频码流中扩展伽玛参数信息域，并将所述输入亮度信号值集合和 /或输出亮度信号值集合组成二进制码流并携带在所述伽玛参数信息域中进行传送。

其中，所述伽玛参数信息域分别包括伽玛参数信息和位于该伽玛参数信息两端的起始定界符和结束定界符，该起始定界符和结束定界符用于确定该信息域的范围。

当所述视频码流为采用 H.264协议编码时，在 H.264码流的补充增强信息 SEI域中扩展用于携带所述伽玛参数信息的消息。

本发明还提供一种多点控制单元，包括多点处理器，所述多点处理器包括：

伽玛特性参数存储模块，用于存储视频图像发送终端的伽玛特性参数；伽玛特性校正模块，连接所述伽玛特性参数存储模块，用于根据视频图像发送终端的伽玛特性参数校正所述视频图像中的伽玛特性。

所述多点处理器还包括：

视频码流收发模块，用于收发视频码流，所述视频码流中包含视频图像数据和该视频码流发送终端的伽玛特性参数信息；

视频数据编解码模块，连接在所述视频码流收发模块和伽玛特性校正模块之间，用于从所述视频码流中解码出视频数据并送入伽玛特性校正模块进行校正；或者，根据校正后的视频图像编码视频数据；

伽玛特性参数信息提取及附加模块，连接在所述视频码流收发模块和视频数据编解码模块之间，用于从收到的视频码流中提取发送终端的伽玛特性参数信息并存入伽玛特性参数存储模块；或者，从伽玛特性参数存储模块提取伽玛特性参数信息并附加到待发送的视频码流中；

多画面拼装模块，连接所述伽玛特性校正模块，用于将收到的至少两个终端的视频图像拼装为一个多画面图像，并将该多画面图像送入视频数据编解码模块或伽玛特性参数信息提取及附加模块。

其中，所述伽玛特性校正模块中包括：

等效伽玛特性参数计算子模块，用于根据发送终端的单伽玛环节特性参数计算等效伽玛特性参数并输入伽玛校正发生子模块；

伽玛校正发生子模块，用于根据等效伽玛特性参数校正视频图像的伽玛特性。

所述多点控制单元还包括：多点控制器，连接所述多点处理器，用于向多点处理器发送进行伽玛特性校正的控制信号。

根据本发明，所述多点处理器并行设置为多个。

本发明的有益效果如下：

本发明所述方法通过在视频码流中携带发送终端的伽玛特性参数，使接收终端对收到的视频图像根据发送终端的伽玛特性参数和本端的伽玛特性参数进行一次校正，或者，由多点控制单元根据发送终端的伽玛特性参数对视频图像进行一次校正后，再由接收终端根据本地伽玛特性参数进行再次校正，可以在接收终端校正视频图像中的伽玛失真，本发明所述方法适用于视频通信中的各种场景，从而在多媒体通信中实现了伽玛校正，提高了通信的质量和用户体验；为实现本发明所述方法，本发明还提供一种具有伽玛特性校正功能的多点控制单元，该多点控制单元可以根据控制指令对转发的视频图像进行校正或再转发，并兼容现有直接转发的功能。附图说明

图 1为环节 Gamma特性的一般模型；

图 2为环节 Gamma特性弓 I起的亮度信号畸变的示意图；

图 3为多环节级联 Gamma特性的一般模型；

图 4为校正单个环节的 Gamma特性示意图；

图 5为校正多个给定环节的 Gamma特性示意图；

图 6 多画面布局的一种示例；

图 7为 MCU通过级联增大控制功能的示意图；

图 8为现有 MCU的结构示意图；

图 9为多个 Gamma环节级联时，可能校正点的示意图；

图 10为多个 Gamma环节级联时，通用 Gamma特性校正方法示意图；图 11为本发明所述实施例一，会场自由观看状态下的 Gamma校正方法原理示意图；

图 12 为本发明所述实施例二, 会场指定观看 (即会场广播)状态下的 Gamma校正方法原理示意；

图 13为本发明所述实施例三，多画面状态下的 Gamma校正时，多点控制单元对视频图像先解码再编码合成为多画面的原理示意图；

图 14为本发明实施例六所述具有视频图像伽玛特性校正功能的多点控制单元的结构示意图；

图 15为本发明定义的 Gamma参数信息区域二进制格式示意图。具体实施方式

作为本发明实施的基础，这里首先介绍一种利用 Gamma路径校正多环节 Gamma特性的通用方法，请参阅图 9所示，假设视频信号从采集到输出经过的 Gamma路径包括 N_t个级联的 Gamma环节，可以选择任意两个环节之间进行校正点，校正环节将图像经过的 Gamma路径分为前后两段，校正点之前包括个环节，校正点之后包括 N_p个环节，如图 10所示，先分别确定 N_a 环节和 N_p个环节的等效综合 Gamma特性，然后分别构造等效 Gamma特性的校正子环节，然后将两个校正子环节进行复合后插入校正点，校正环节实际上是两个校正子环节的复合，具体包括如下步骤：

1、确定与信号相关的 Gamma特性环节的级联路径，以及该级联路径包括的环节数目为 N_t;

2、在所述路径中确定一个校正点，该校正点将所述 N_t个环节划分为级联在该校正点之前的 N_a个环节和级联在该校正点之后的 N_p个环节，其中： N_a≥0、 N_p≥0、 N_a+N_p=N_t;

3、分别根据每一个环节的 Gamma特性等效模型及其参数构造所述 1^个环节的第一综合等效模型和所述 N_p个环节的第二综合等效模型；

4、确定所述第一综合等效模型的第一逆模型和第二综合等效模型的第二逆模型；

5、根据所述第一逆模型和所述第二逆模型构造校正环节模型 , 利用该校正环节模型确定所述 N_a个环节最后输出信号的校正信号并将该校正信号输入所述 N_p个环节。

根据本方法，校正环节模型的构造方法包括下列之一：

直接计算法：实时利用第一逆模型的函数关系式和第二逆模型的函数关系式的复合函数关系式计算 N_a个环节的最后输出信号的校正信号；

两步计算法：实时利用第一逆模型的函数关系式计算 N_a个环节的最后输出信号的一次校正信号，利用第二逆模型的函数关系式计算该一次校正信号的二次校正信号，将该二次校正信号作为所述校正信号；

查表法：预先根据所述直接计算法或两步计算法，计算出所述 N_a个环节的最后输出信号的取值区间中的多个采样值对应的校正值，并将对应关系保存在一个数据表中，然后通过实时查询该数据表确定任意待校正值的校正值。对于采用数据表形式的模型，等效模型本身没有解析形式（比如采用查表方法实现的，当然其反函数也就没有解析形式了），那么其逆模型就是该数据表的逆表，一个表存在两列，很多行，左列（输入列）是输入信号的采样值，即待校正的信号值，右列（输出列）是对应的输出信号值，即校正后的信号值，行数取决于采样点数，行数越多越精确，逆表就是把左右两列对调得到的新数据表。并且对于数据量大的视频数据，进行实时计算的计算量很大，查表是最实际的方法。

利用上述方法的前提是终端必须能够确定出本终端上所有 Gamma特性环节，当等效模型采用函数表示形式时，发送终端或接收终端通过下述方法分别确定本端每一个 Gamma特性环节的等效模型及其参数，或者直接确定级联 ¾多个 Gamma特性环节的综合等效模型及其参数。

本发明还在此介绍一种确定每一个 Gamma特性环节等效模型及其参数的检测方法，包括如下步骤：

首先，选择一组单环节 Gamma特性的通用等效模型，例如：

第一类 Gamma模型满足公式 6: ^z- = pL_in ^a + (l - p) 0 < p≤l, a≥l ₍₆₎ 其中：公式 6所示函数的定义域 (即自变量取值范围）为区间 [0,1] , 值域 (函数值的取值范围）为区间 [(l-p),l]。第二类 Gamma模型满足公式 7: , =(^ , + d - ^) q≥U fi≥^ ₍₇) 其中：公式 7所示函数的定义域 (即自变量取值范围）为区间 [l-l/q,l] , 值域 (函数值的取值范围）为区间 [(0,1] 。

然后将其中的一个作为待测模型进行下列步骤：

1、在输入亮度信号 1^在[0,1]区间上选择间隔均匀的 N个采样点： L_in(0)、 L_in(l)、 L_in(2)…… L_in(i)…… L_in(N-2)、 L_in(N-l);

2、将亮度信号 N个采样值分别输入环节中，并测量实际输出亮度信号 N 个对应的值： L^p。_ut(0)、 L^p。_ut(l)、 L^p _out(2)…… L^p。_ut(i)…… L^p。_ut(N-2)、 L^p _out(N-l); 3、构造拟合的目标函数，目标函数和实际检测的输出亮度信号与通过 Gamma特性模型确定的理论输出亮度信号之间的差值相关，而且，差值越小，说明模型的等效效果越接近实际情况。

目标函数的构造方法很多，较为常用的是下述公式 8或公式 9:

N-l

E_n(/_?,a) = X(L^p _out( - L₍.„() -(1-p))² (8)或者，

;=0

W- 1 丄

F_T2(g^) =∑( ^p _oat(i)-(qL_in(i) + (l-g) )² (9)

4、设定目标函数值的门限 Τ和最大迭代次数 Μ, 利用数学优化法寻找最适合的参数组；首先对于第一类的代价函数 F_n(A") = (L^p。_ut()- ） -(l-p))² , 采用某种数学优化技术，例如：爬山法、 0.618法（华罗庚优选法）、最速下降法或共轭梯度法等求取其最小值；

这个过程其实是一个迭代过程，在这个过程中不断调整参数 p和 α, 函数值 F在不断下降，当函数值下降到小于给定门限 Τ后，则认为已经找到了最小点。此时对应的参数 ρ和 α, 就认为是本次应用环境模型的真正参数。如果对于^ ^) -(l- )²经过 Μ次迭代，还不能使得

函数下降到门限 Τ以下，则认为模型选择不对。应该选择第二类模型，于是对

W-1 丄

于 =∑(L^p _out( - (gL_in(i) + (1 - q)Yf重复上述步骤 4, 得到对应的模型参数 q和 β, 应当注意的是，参数 q和 β的取值范围分别是： q≥l、 β≥1。

如果想要得到更精确的参数，可以在目标函数值 F下降到门限 Τ以下后，仍然再迭代几次，如果目标函数值 F持续下降，或下降后又上升，或直接上升，不管目标函数值 F是何种变化情况，则选择其中的最小值对应的参数作为测量结果会在一定程度上提高参数测量的精度。

可以看到，模型类型的确定和参数的测量是同时进行的，实际中，等效模型的类型不只这两种形式，通过上述方法可以在相关的所有等效模型通过测量参数的方法找到最合适的一个。

同样可以利用上述方法测量多环节综合 Gamma特性模型及其参数，测量方法步驟完全相同，需要指出，从形式上看，多个 Gamma环节级联的综合 Gamma特性模型的函数关系式仍然可以采用公式 6和公式 7所示的两类，但是第一类综合特性模型中，根据定性分析结果和实际测量的经验值，指数 α取值范围变成 α >0, 而第二类综合特性模型中，指数 β取值范围变成 β >0。

因此，确定了 Gamma特性模型及其参数后，可以才艮据前述方法进行校正模型的确定，如图 4所示，对于单个给定环节，只要 Gg(.)满足一定条件，就可以找到 Gc(.)对 Gg(.)进行 Gamma校正；如图 5所示，对于多给定环节，只要 Ga(.)、 Gp(.)满足一定条件 , 就可以找到 Gc(.)对 Ga(.)和 Gp(.)进行 Gamma校正。

对于一个多媒体通信终端来说，从外部光信号进入摄像机 /头，经过各个环节处理，最终到本端的显示器显示转换成光信号；或者经过压缩编码环节在经过通信网络传送到达对方终端, 再经过去压缩解码恢复成图像, 再到多方终端显示器上显示出来转换成光信号；或者经过光信号从摄像机 /头进入后，转换成电信号，然后经过一定的处理，被写入到文件，保存在硬盘等存储设备上。每一个视频信号经过的途径多可以看作如图 3所示的 Gamma路径，可以利用上述通用方法进行 Gamma特性的校正。

基于上述确定每一个 Gamma特性环节等效模型及其参数的检测方法，每一个终端都可以检测到本地各 Gamma环节的等效模型及其参数，由此，本发明提出以下技术构思：

1、在视频码流编码压缩或者传送承载协议中提供一种 Gamma特性参数信息传递和交换的机制，具体方式可以是：

发送终端将视频图像经过的每一个伽玛特性环节的单环节伽玛特性参数，以及各伽玛特性环节的级联顺序携带在视频码流中发送；或者发送终端根据所述视频图像经过的所有伽玛特性环节计算出等效伽玛特性参数再携带在枧频码流中发送。发送终端可以为每一个视频图像的携带对应的伽玛特性参数信息；或者，发送终端将每隔一定周期（周期可以用时间来度量，也可以用每隔一定图像帧数来度量）将伽玛特性参数信息携带在所述视频码流中发送给接收终端；或者，在通信开始时将初始伽玛特性参数信息携带在所述视频码流中发送给接收终端，并在通信过程中，当本端伽玛特性参数发生变化时，再将更新的伽玛特性参数信息携带在所述视频码流中发送给接收终端。

2、基于 1 , 在交互 Gamma特性参数的基础上，利用上述通用校正方法进行校正，校正可以在多点控制单元或者具有类似功能的多点通信服务器中进行，校正也可以由视频数据接收终端执行，因此同样适用于两点通信的情况，或者没有多点控制单元参加的多点通信情况。

并适用于多点控制单元的如下两种主要工作模式：

1 )、多画面模式，该多画面模式包括：先解码再编码的合成模式和直接合成模式（俗称软件多画面）；

2 )、视频转发模式。

并适用于多个多点控制单元级联以及多点控制单元的 MC和 MP分离的情况。

首先为描述方便，本发明定义如下概念：

1、 Gamma失真： Gamma是一种非线性失真（ Distortion,或者叫做扭曲），指信号经过一个或者多个 Gamma环节的相继作用，形成 Gamma失真；

2、无 Gamma失真：信号没有任何 Gamma失真的状态；

3、完全 Gamma校正状态：存在 Gamma失真的信号经过 Gamma校正后达到了和无失真状态完全相同的状态，叫做完全 Gamma校正状态；

4、 Gamma轨道 (Gamma Track): 在视频码流中用于携带传送 Gamma信息的数据部分。

需要说明的是，以上定义建立在理想状态下，实际上对视频图像的校正只能看作近似的无 Gamma失真或完全 Gamm 校正状态。

下面以具体实施例进行详细说明：实施例一、会场自由观看状态下的 Gamma校正

这种情况下， MCU并不处理来自终端的视频码流，只是进行转发。假设终端 A选择自由观看终端 B的视频，则终端 B加入视频会议后向 MCU发送本地视频码流，该视频码流中携带终端 B的 Gamma特性参数，假定终端 B 有 N_B个 Gamma环节； MCU将来自终端 B的视频码流转发给终端 A;

终端 A接收并分析来自终端 B的视频码流，从视频码流中提取出所携带的 Gamma特性参数和数字视频数据，并结合终端 A自身的 Gamma特性参数进行校正，具体校正方法为前述的通用校正方法，校正原理如图 11所示，校正过程包括如下步骤：

1、终端 A从终端 B的视频码流中通过去压缩解码获得数字视频数据；

2、终端 A从终端 B的视频码流中提取出 N_B个 Gamma环节的 Gamma 参数；

3、终端 A根据公式 3计算 N_B个 Gamma环节级联形成等效 Gamma环节 G_BEQ的 Gamma参数，其中 EQ表示等效（ Equivalent );

同时，终端 A根据公式 3计算出本身多个 Gamma环节的等效环节 GAEQ 的 Gamma参数；

4、终端 A根据 G_BEQ和 GAEQ计算校正环节 G_c。_r的 Gamma参数；

5、终端 A根据 Gcor的 Gamma参数校正来自终端 B的视频后通过本地显示器显示；

具体校正可以采用基于函数表示的直接计算方法或基于查表表示的查表方法，详细情况参见前述的通用校正方法，这里不再赘述。

上述实施例中，如果终端 A和终端 B之间直接通信或者当前通信系统中没有 MCU时，终端 A和终端 B之间直接交互视频数据流。

实施例二、会场指定观看（即会场广播）状态下的 Gamma校正

和实施例一相同， MCU也仅仅是对于来自被指定观看终端的视频码流向所有参见会议的终端进行广播，而不进行其他任何处理。

如图 12所示，假定被广播的会场终端为 X, 其它终端收到的都是 X的视频，其它任何一个终端 Yl、 Υ2...... Ym, 都要根据来自 X的视频码流携带的

Gamma参数信息，提取 Gamma参数，然后进行校正，其校正过程和实施例一相同。

与实施例一不同之处在于，每个观看 X终端视频的终端同步校正并收看，就实现了会场指定观看（即会场广播）状态下的 Gamma校正。

实施例三、多画面状态， MCU 工作在先解码再编码的合成模式下的 Gamma校正方法一

如图 13所示， MCU首先要对来自终端、 X₂..... X_c的 C (多画面布局中子画面的总数）个子画面视频进行去压缩解码，还原成未压缩 ( Uncompressed )数字视频格式，然后拼成多画面图像后，再编码压缩。在这个过程中 , MCU可以对于已经还原出来的未压缩数字视频格式进行一些处理和 Gamma特性校正。具体 #文法是： '

1、 MCU对于来自终端 Xi(l≤i≤C)的视频进行去压缩解码，形成未压缩数字视频格式；

2、 MCU从来自的视频码流中提取所携带的 Gamma参数信息；

3、 MCU根据所述提取出的 Gamma参数，按照级联的法则形成等效环节 G⁽ XEQ,计算出相应的 Gamma特性参数；

4、 MCU根据 G⁽ⁱ)_XEQ和相应的 Gamma特性参数来进行校正，校正的结果，形成了完全校正状态。即经过校正的视频是出于无 Gamma失真状态的;

MCU重复以上步骤 1 ~ 4, 直到把来自 C个终端的视频都校正完毕；

5、 MCU按照指定的多画面布局由 C个子画面组合拼出多画面图像；

6、 MCU对于所述组合拼出的多画面图像进行压缩编码；

7、 MCU为新生成的多画面视频码流填写携带 Gamma信息的 Gamma轨道信息。

因为这个时候多画面的每个子画面都是无 Gamma失真的，所以整个多画面也是无 Gamma失真的。因此 Gamma轨道实际上不含有任何 Gamma参数。只是需要在 Gamma轨道中设置一个校正标志，表明视频是否为无 Gamma失真。校正标志的设置方法很多，例如：设置该校正标志表明视频码流是存在

Gamma失真的，不设置时表明无 Gamma失真；或者校正标志设置为 1表明存在 Gamma失真，设置为 0表明无 Gamma失真。显然该标志应该位于 Gamma

Track的最前面，这样当 MCU或者终端在读到标志后，首先判别校正标志，如果是无 Gamma失真，意味着后面没有 Gamma参数，不用向后继续读数据了，反之则要继续读数据。

8、 MCU把新生成的多画面视频码流发送给多个终端。

在多个接收到多画面视频码流的终端中，每一个接收终端的处理过程相同，仍如图 13所示，具体 #丈法如下：

1、终端 Y计算出本身多个 Gamma环节的等效环节 G_YEQ的 Gamma参数；终端 Y首先根据校正标志判断接收到的多画面视频是否存在 Gamma失真 , 本实施例中终端 Y收到的多画面视频为无 Gamma失真，因此终端 Y只需要在校正的时候考虑自身的 Gamma特性即可。

2、终端 Y根据 G_YEQ计算校正环节 G_c。_r的 Gamma参数；

其中 GYEQ为终端 Y的等效 Gamma特性。

3、终端 Y对于来自 MCU的多画面视频进行校正。

具体校正可以采用基于函数表示的直接计算方法或基于查表表示的查表方法，详细情况参见如前所述的伽玛特性的校正通用方法。

实施例四、多画面状态， MCU 工作在先解码再编码的合成模式下的 Gamma校正方法二

MCU在把来自各个终端 XI、 X₂..... X_c的子画面视频去压缩解码还原到未压缩格式后，并不进行 Gamma校正，直接组合拼出多画面图像，再进行编码压缩，形成多画面视频码流。然后在视频码流的 Gamma轨道上设置表明 Gamma失真的校正标志后，按照所指定多画面布局给定的各个子画面的排列顺序，依次将原来各个终端视频码流 Gamma轨道携带的 Gamma参数信息复制到与子画面对应的位置，形成多画面视频码流的 Gamma轨道。

参见图 11所示的终端处理示意图，终端 Y接收到多画面视频后，处理方法如下：

1、终端 Y将多画面视频码流去压縮解码还原为未压缩格式，从而获得各个子画面的未压缩格式；

2、终端 Υ从多画面视频码流的 Gamma轨道中提取每个子画面对应的 Gamma参数信息；

3、假设取出的子画面 i(l≤i≤C)Gamma参数，其中有个 Gamma环节，这些 Gamma环节级联形成一个等效 Gamma环节 G⁽ⁱ⁾ _XEQ, 终端 Y根据公式 2 计算出等效环节 G⁽ⁱ⁾ _XEQ的 Gamma参数；

同时终端 Y计算出本身多个 Gamma环节的等效环节 G_YEQ的 Gamma参数。

4、终端 Y根据 G⁽ⁱ⁾ _XEQ和 G_YEQ计算校正环节 G_COT的 Gamma参数；

5、终端 Y根据 Gcor的 Gamma参数对子画面 i的视频进行校正后显示。终端 Y重复以上步骤 3〜5 , 直到所有的子画面都校正完毕。

具体校正方法可以基于函数表示的直接计算方法或基于查表表示的查表方法，详细情况参见如前所述的伽玛特性的校正通用方法。

实施例五、多画面状态， MCU工作在直接合成模式下的 Gamma校正在直接合成模式下， MCU对于来自终端 Xi(l≤i≤C)的视频码流不进行处理，只是按照符合具体视频压缩编码协议语法的方式进行码流合成，形成一个复合码流。复合码流同样有一个 Gamma轨道，对于该 Gamma轨道，首先 MCU要设置有校正标志，校正标志表明该视频码流存在 Gamma失真。

终端 Y接收到多画面视频后，处理方法如下：

1、终端 Y从多画面视频码流的 Gamma轨道中提取每个子画面对应的 Gamma参数信息；

2、假设取出的子画面 i(l≤i≤C)Gamma参数，其中有个 Gamma环节，这些 Gamma环节级联形成一个等效 Gamma环节 G⁽ⁱ⁾ _XEQ, 终端 Y根据公式 2 计算出等效环节 G⁽ⁱ⁾ _XEQ的 Gamma参数；

同时终端 Y计算出本身多个 Gamma环节的等效环节 GYEQ的 Gamma参数；

3、终端 Y从复合码流中定位并提取出子画面 i对应的视频码流然后进行去压缩解码还原到未压缩格式；

4、终端 Y根据 G⁽ⁱ⁾ _XEQ和 GYEQ计算校正环节 G_c。_r的 Gamma参数；

5、终端 Y根据校正环节 Gc；。 ^的 Gamma参数对子画面 i的视频进行校正。终端 Y重复以上步骤 1-5, 直到所有的子画面都校正完毕。

实施例六、具有 Gamma校正功能的 MCU

为实现在 MCU侧进行视频图像伽玛特性的一次校正，本发明还提供一种具有 Gamma校正功能的 MCU, 包括多点控制器 100和多点处理器 200。与现有技术的 MCU结构相比，本发明所述的具有 Gamma校正功能的 MCU主要在多点处理器 200上进行了改进，如图 14所示，多点处理器 200包括如下功能模块：

伽玛特性参数存储模块 201 , 用于存储视频图像发送终端的伽玛特性参数；

伽玛特性校正模块 202, 连接所述伽玛特性参数存储模块 201 , 用于根据视频图像发送终端的伽玛特性参数校正所述视频图像中的伽玛特性。

视频码流收发模块 203, 用于收发视频码流，所述视频码流中包含视频图像数据和该视频码流发送终端的伽玛特性参数信息；

视频数据编解码模块 204,连接在所述视频码流收发模块 203和伽玛特性校正模块 202之间，用于从所述视频码流中解码出视频数据并送入伽玛特性校正模块 202进行校正；或者，根据校正后的视频图像编码视频数据。

伽玛特性参数信息提取 /附加模块 205,连接在所述视频码流收发模块 203 和视频数据编解码模块 204之间，用于从收到的视频码流中提取发送终端的伽玛特性参数信息并存入伽玛特性参数存储模块 201; 或者，从伽玛特性参数存储模块 201提取伽玛特性参数信息并附加到待发送的视频码流中。多画面拼装模块 206，连接所述伽玛特性校正模块 202, 用于将收到的至少两个终端的视频图像拼装为一个多画面图像，并将该多画面图像送入视频数据编解码模块 204。

如果不需要进行多画面合成，则校正模块 202将校正后的视频图像直接发送给视频数据编解码模块 204。

同时，多画面拼装模块 206伽玛特性参数信息提取 /附加模块 205之间直接连接，当采用直接合成模式时，不需要对视频码流进行编解码的处理。

多画面拼装的各种模式预先设定在多画面拼装模块 206和伽玛特性参数信息提取 /附加模块 205中，用于根据对应的拼装模式进行多画面拼装并确定在视频码流中附加各子画面伽玛特性参数信息的顺序。

其中：伽玛特性校正模块 202中包括：

等效伽玛特性参数计算子模块 2021 , 用于根据发送终端的单伽玛环节特性参数计算等效伽玛特性参数并输入伽玛校正发生子模块 2022;

伽玛校正发生子模块 2022, 用于根据等效伽玛特性参数校正视频图像的伽玛特性。

多点处理器 200连接多点控制器 100,根据多点控制器 100的指令对接收的视频图像进行伽玛特性校正。

和现有技术相同，在一个多点控制单元中，可以并行设置多个多点处理器 200, 可以控制更多的多媒体通信终端之间的通信。

如果不需要进行校正，则视频收发模块 203根据多点控制器的指令直接转发视频码流。

下面详细说明如何在终端之间、终端与多点控制单元之间交互 Gamma参数信息的方法，因为查表法的优势比较明罩，所以本发明采用查表表示方法交互 Gamma参数。

首先，提供一种和具体协议无关的 Gamma参数信息表示的二进制格式，因为 Gamma特性作为一个函数，其定义域（L_in的取值范围）和值域（L。_ut的取值范围）都是区间 [0,1]或者其某个子区间，比如 [0.1,0.9]。前面已经说过，查表法的关键是两个集合（或者叫做序列）{L_in( i )|0<i<N-l} 和 {L。_ut ( i ) 10≤i≤N-l}，以及它们的元素之间的对应关系。我们定义 {L_in ( i ) |0≤i≤N-l}为输入亮度离散值集合（Set ofDiscrete Values of Input Luminance )； {L_out ( i ) |0≤i≤N-l}为输出亮度离散值集合（Set ofDiscrete Values of Output Luminance ) 。虽然从 Gamma特性作为一个函数的定义域和值域的要求来说， L_in、 L。_ut取值必须在 [0，1]区间上。但是，在实际应用中.，每个 Gamma环节的输入和输出亮度的取制范围可能并不是 [0,1]区间。这样为了保持和 Gamma定义的一致，实际上对于基于函数形式的 Gamma特性，在处理的时候要首先把输入亮度值进行规一化处理。将取值在 [0,1]区间上的亮度信号叫做规一化亮度 Lⁿ _in,上标 n表示 Normalized"规一化 "，而取值在 0- MaxL^a _in之间的亮度信号叫做实际亮度 L^ain, 上标示 Actual"实际"。而把实际的亮度映射到 [0,1]区间，采用的方法如公式 10所示：

Lⁿ _in=L_in ^a/MaxL^a _in ( 10 )

相应地，输出的亮度信号要从规一化的值还原到实际的值（逆规一化）。计算如公式 11所示：

目前摄像机 /摄像头，显示器和中间的数字视频交换格式比如 CIF

( Common Interchange Format )采用的都是 256级亮度，即实际的输入输出亮度取值都是 0-255的整数，即

MaxL^a _in= MaxL^a _0Ut=255 , 一般情况下 MaxL^a _ir MaxL^a。_ut。考虑到以后技术的进步的可能，摄像机、显示器的发展和人类感官对于更高亮度等级分辨率的需要，亮度等级可能会增加，从技术实现角度来说，一般会增加为 2的整数次方，比如 512甚至 1024, —般形式是 2^D， D为自然数。那么如公式 12、公式 13所示：

Lⁿ _in=L_in72^D ( 12 )

L。ut⁼L。_ut ^a/2 ( 13 )

但是在构造 {L_in ( i ) |0≤i≤N-l}和 {L。_ut ( i ) |0≤i≤N-l}的时候，必须考虑实际的应用场景，在当前的视频通信技术中，亮度信号的等级为 256级，亮度值为 0-255, 每一个亮度值可以用 8比特表示（一个字节）。

于是，集合 {L_in ( i ) |0≤i≤N-l}={0, 1， 2, 3, 4......254, 255}，而集合 {L。_ut

( i ) |0≤i≤N-l}中的每个数值也都属于 {0, 1 , 2, 3, 4…… 254, 255}。

在以上假设下，适用于目前视频通信技术的 Gamma特性查表表示数据结构仍如表 1所示，进一步分析发现，表 1的左列（Left Column ) 的数值都是固定的，必然是 {0, 1 , 2, 3, 4......254, 255}的顺序，通信双方都知道这个集合和顺序，则在通信中不需要传送左列数值。

在通信协议中传送 Gamma参数信息，不论是什么协议，一般方法就是在通信协议允许扩展和自定义内容的数据区内定义一个块（ Block或者 Region ) , 用于连续存放 Gamma参数的二进制码流表示。然后该块皮封装在协议的码流中传送。这个区域叫做 Gamma参数信息区域。

多媒体通信终端中可能有包括摄像机 /摄像头和显示设备在内的多个 Gamma环节。因此，对于一个终端要把自己的全部 Gamma参数信息传送给其它通信终端或者网络上其它设备比如多点控制单元等，那么就应该把自身的全部 Gamma环节, 按照它们从前到后（或反方向）的级联顺序，将其 Gamma 特性参数写入到 Gamma参数信息区域。而接收的终端或者其它网络设备就可以从用于承载 Gamma参数的信息区域中按顺序提取出 Gamma参数信息。因此定义 Gamma参数信息区域的具体格式如图 15所示，包括以下部分：

开始标志： 16比特（2字节），取值为 OxOFFO;

结束标志: 16比特 ( 2字节） , 取值为 OxFOOF;

区域总长度： 16比特（2字节），以字节为单位的 Gamma参数信息区域的总长度 (包含开始标志和结束标志在内）。

以上三者结合起来，可以定位出在码流中 Gamma信息区域的位置。

Gamma环节总数： 8比特（1字节）以 T表示。最多可以有 256个 Gamma环节，在实际应用中是足够的。

环节 1〜T参数子区域：这样的子区域共有 Τ个，分别对应于 Τ个 Gamma环节。

每个子区域的结构是这样定义的：

子区域长度： 16比特（2个字节），以字节为单位的子区域长度（包含传送模式字节在内）。

连续参数： Lout ( 0 ) , L_out ( 1 ) ...... Lout ( N_r3 ) , 其中： i=l , 2...... T。需要说明的是，上述定义方式仅是本发明的一种实施例，并不限定本发明的保护范围。

上面定义了不依赖具体承载协议的 Gamma参数信息区域的格式，如果视频码流采用 H.264协议编码方式，则本发明还结合 H.264协议给出利用 H.264消息扩展机制承载 Gamma参数信息的方法。

H.264中提供了多种可以进行消息扩展的机制，其中比较适合本发明使用的是 H.264中定义的补充增强信息 SEI( Supplement Enhancement Information ), SEI 的数据表示区域与视频编码数据独立 , 使用方法在 H.264协议中 NAL ( Network Abstraction Layer 网络抽象层）的描述中给出。 H.264码流的基本单位是 NALU ( NAL Unit, 即网络抽象层单元）， NALU可以承载各种 H.264 数据类型，比如视频序列参数（ Sequence parameters ), 图像参数（Picture parameters ), Slice数据 (即具体图像数据），以及 SEI消息数据。 SEI用于传递各种消息，支持消息扩展。因此 SEI域内用于传送为特定目的而自定义的消息，而不会影响基于 H.264视频通信系统的兼容性。承载 SEI消息的 NALU 叫做 SEI NALU。一个 SEI NALU含有一个或多个 SEI消息。每个 SEI消息含有一些变量，主要是 Payload Type和 Payload Size, 这些变量指明了消息载荷的类型和大小。在 H.264 Annex D.8, D.9中定义了一些常用的 H.264 SEI 消息的文法和语意。

NALU中包含的载荷叫做 RBSP ( Raw-Byte Sequence Payload ), SEI是 RBSP的一种类型。按照 H.264 7.3的定义， SEI RBSP的文法如表 2所示：表 2. SEI RBSP文法

可见，一个 NALU中的 SEI RBSP是可以包含多个 SEI消息的。一个 SEI 消息的结构如表 3所示：

表 3.SEI消息的结构

sei— message ( ) { C Descriptor

payloadType = 0

while ( next— bits ( 8 ) = = OxFF ) {

ff— byte /* equal to OxFF */ 5 f ( 8 )

payloadType += 255

}

Iastjpayload_type_byte 5 u ( 8 )

payloadType += last__payload— type— byte

payloadSize = 0

while ( next— bits ( 8 ) = = OxFF ) {

ff_byte /* equal to OxFF */ 5 f ( 8 )

payloadSize += 255

}

last_payload_size_byte 5 u ( 8 )

payloadSize += last__payload— size— byte

sei_payload ( payloadType, payloadSize ) 5

}

H.264 Annex D.8定义了保留用于今后扩展的 SEI消息的文法消息结构如表 4所示：

表 4.可扩展的 SEI消息结构

在本发明的描述中将 SEI的数据表示区域筒称为 SEI域，每个 SEI域包含一个或多个 SEI消息，而 SEI消息又由 SEI头信息和 SEI有效载荷组成。 SEI头信息包括两个码字：一个码字给出 SEI消息中载荷的类型，另一个码字给出载荷的大小。当载荷类型在 0到 255之间时用一个字节 0x00到 OxFE表示，当类型在 256到 511之间时用两个字节 OxFFOO到 OxFFFF表示，当类型大于 511 时表示方法以此类推，这样用户可以自定义任意多种载荷类型。其中类型 0到类型 18标准中已定义为特定的信息如緩存周期、图像定时等。对于本发明所述技术方案，要承载 Gamma参数信息区域类型可以定义为任何现有没有被定义的 SEI载荷类型，因为目前很可能有很多其他目的的扩展消息类型，为避免冲突，可以定义为 OxFFFF ( 511 ), OxFFFF是理论上的最大值。然后将根据定义填写的 Gamma参数信息区域直接放入到 SEI载荷中去，就实现了利用 SEI消息扩展机制承载和传送 Gamma参数信息的目的。应该说明，将 SEI载荷类型取值为 OxFFFF, 只是本发明的一个实施例，对于其他的取值，也在本发明保护范围内。

综上所述，本发明提供两种多媒体通信中的伽玛特性校正方法：其一是在视频图像接收终端侧进行，由视频图像接收终端根据本端的伽玛特性参数和发送终端的伽玛特性参数进行一次校正；

其二是在多点控制单元和视频接收终端分步进行校正，先由多点控制单元根据发送终端的伽玛特性参数校正发送终端的伽玛环节引入的伽玛失真，然后由视频接收终端根据本端的伽玛特性参数校正接收终端的伽玛环节引入的伽玛失真。

上述方法可以根据多媒体通信的具体场景选择使用，可以很好的校正视频图像从采集、发送、接收到显示的各个环节中引入的伽玛失真。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

权利要求

1、一种视频通信中视频码流伽玛特性校正方法，其特征在于，包括如下步骤：

2、如权利要求 1所述的方法，其特征在于，所述方法中，至少一个发送终端将所述视频码流发送给多点控制单元；多点控制单元将所述视频码流发送给接收终端。

3、如权利要求 2所述的方法，其特征在于，多点控制单元将来自至少两个发送终端的视频码流合成为一个多画面视频码流后发送给接收终端。

4、如权利要求 3所述的方法，其特征在于，

多点控制单元分别根据每一个发送终端的视频数据还原出对应的视频图像，将所述各个视频图像分别作为子画面并拼装成一个多画面图像，然后生成所述多画面图像的视频数据，并将该多画面图像的视频数据和每一个子画面对应的伽玛特性参数信息合成为一个多画面视频码流后发送给接收终端，其中，所述子画面的伽玛特性参数信息顺序根据子画面的拼装位置和顺序确定；以及

接收终端根据所述多画面图像的视频数据还原出所述多画面图像，并根据本端伽玛特性参数信息和每一个子画面对应的伽玛特性参数分别校正每一个子画面的视频图像。

5、如权利要求 3所述的方法，其特征在于，

多点控制单元分别提取每一个发送终端视频码流中的视频数据并根据子画面拼装顺序直接进行复合，然后将复合后的视频数据和每一个子画面对应的伽玛特性参数信息合成为一个多画面视频码流后发送给接收终端，其中，所述子画面的伽玛特性参数信息顺序根据子画面的拼装位置和顺序确定；以及

接收终端从复合后的视频数据中提取各子画面对应的视频数据并还原出各子画面的视频图像，然后根据本端伽玛特性参数信息和每一个子画面对应的伽玛特性参数分别校正每一个子画面的视频图像，再将校正后的各个子画面根据拼装顺序拼装为多画面图像。

6、如权利要求 1 ~ 5任意之一所述的方法，其特征在于，在所述视频码流中还设置有标识视频图像存在伽玛失真的指示信息；以及

接收终端根据所述指示信息确认所述多画面视频码流中携带有所述伽玛特性参数信息。

7、如权利要求 1 ~ 5任意之一所述的方法，其特征在于，所述的发送终端伽玛特性参数信息为所述视频图像在其采集、处理和形成视频码流的过程中：

在发送终端经过每一个伽玛特性环节的伽玛特性参数，以及各伽玛特性环节的级联顺序；或者

8、如权利要求 7所述的方法，其特征在于，所述方法中：

发送终端将本终端每一帧视频图像的伽玛特性参数信息分别对应该视频图像的视频数据携带在所述视频码流中发送给接收终端；或者

发送终端将每隔一定周期将伽玛特性参数信息携带在所述视频码流中发送给接收终端，或者

发送终端在通信开始时将初始伽玛特性参数信息携带在所述视频码流中发送给接收终端，并在通信过程中，当本端伽玛特性参数发生变化时，再将更新的伽玛特性参数信息携带在所述视频码流中发送给接收终端。

9、如权利要求 7所述的方法，其特征在于，所述每一个伽玛环节的伽玛特性参数或等效伽玛特性参数包括对应设定等级的每一级输入亮度信号值的输出亮度值集合。

10、如权利要求 9所述的方法，其特征在于，所述输入亮度信号值的设定级别是 0-255级，亮度值的取值为整数。

11、如权利要求 9或 10所述的方法，其特征在于，在所述视频码流中扩展伽玛参数信息域，并将所述输入亮度信号值集合和 /或输出亮度信号值集合组成二进制码流并携带在所述伽玛参数信息域中进行传送。

12、如权利要求 11所述的方法，其特征在于，所述伽玛参数信息域分别包括伽玛参数信息和位于该伽玛参数信息两端的起始定界符和结束定界符，该起始定界符和结束定界符用于确定该信息域的范围。

13、如权利要求 8、 9或 10所述的方法，其特征在于，当所述视频码流为采用 H.264协议编码时，在 H.264码流的补充增强信息 SEI域中扩展用于携带所述伽玛参数信息的消息。

14、一种视频通信中视频码流伽玛校正方法，其特征在于，包括如下步骤：

15、如权利要求 14所述的方法，其特征在于，所述方法还包括：接收终端接收所述第二视频码流，还原校正后视频图像并根据本端伽玛特性参数再次进行校正。

16、如权利要求 15所述的方法，其特征在于，

多点控制单元将来自至少两个发送终端的第一视频码流并分别校正视频图像并拼装为多画面图像；以及

根据所述多画面图像生成多画面图像视频数据并携带在所述第二视频码流中发送给接收终端。

17、如权利要求 16所述的方法，其特征在于，接收终端根据所述多画面图像的视频数据还原出所述多画面图像，并分别根据本端伽玛特性参数再次校正每一个子画面的视频图像。

18、如权利要求 14 ~ 17任意之一所述的方法，其特征在于，

所述第一视频码流中设置有标识视频图像存在伽玛失真的第一指示信息；和 /或

所述第二视频码流中设置有标识视频图像已经经过一次伽玛校正的第二指示信息。

19、如权利要求 18所述的方法，其特征在于，多点控制单元根据所述第一指示信息确认所述第一视频码流中携带有发送终端的伽玛特性参数信息。

20、如权利要求 14、 15或 16所述的方法，其特征在于，所述的发送终端伽玛特性参数信息为所述视频图像在其采集、处理和形成视频码流的过程中：

在发送终端经过每一个伽玛特性环节的伽玛特性参数, 以及各伽玛特性环节的级联顺序；或者

发送终端根据经过的所有伽玛特性环节确定的等效伽玛特性参数。

21、如权利要求 20所述的方法，其特征在于，所述方法中:

发送终端将每一个视频图像的伽玛特性参数信息分别对应该视频图像的视频数据携带在所述视频码流中发送给接收终端；或者

22、如权利要求 20所述的方法，其特征在于，所述每一个伽玛环节的伽玛特性参数或等效伽玛特性参数包括对应设定等级的每一级输入亮度信号值的输出亮度值集合。

23、如权利要求 22所述的方法，其特征在于，所述输入亮度信号值的设定级别是 0-255级，亮度值的取值为整数。

24、如权利要求 22或 23所述的方法，其特征在于，在所述视频码流中扩展伽玛参数信息域，并将所述输入亮度信号值集合和 /或输出亮度信号值集合组成二进制码流并携带在所述伽玛参数信息域中进行传送。

25、如权利要求 24所述的方法，其特征在于，所述伽玛参数信息域分别包括伽玛参数信息和位于该伽玛参数信息两端的起始定界符和结束定界符，该起始定界符和结束定界符用于确定该伽玛参数信息域的范围。

26、如权利要求 14、 15或 16所述的方法，其特征在于，当所述视频码流为采用 H.264协议编码时，在 H.264视频码流的补充增强信息 SEI域中扩展用于携带所述伽玛参数信息的消息。

27、一种多点控制单元，包括多点处理器，其特征在于，所述多点处理器包括：

伽玛特性参数存储模块 , 用于存储视频图像发送终端的伽玛特性参数；伽玛特性校正模块，连接所述珈玛特性参数存储模块，用于根据视频图像发送终端的伽玛特性参数校正所述视频图像中的伽玛特性。

28、如权利要求 27所述的多点控制单元，其特征在于，所述多点处理器还包括：

视频数据编解码模块，连接在所述视频码流收发模块和伽玛特性校正模块之间，用于从所述视频码流中解码出视频数据并送入玛特性校正模块进行校正；或者，根据校正后的视频图像编码视频数据。

29、如权利要求 28所述的多点控制单元，其特征在于，所述多点处理器还包括：伽玛特性参数信息提取及附加模块，连接在所述视频码流收发模块和视频数据编解码模块之间，用于从收到的视频码流中提取发送终端的伽玛特性参数信息并存入伽玛特性参数存储模块；或者，从伽玛特性参数存储模块提取伽玛特性参数信息并附加到待发送的视频码流中。

30、如权利要求 27所述的多点控制单元，其特征在于，所述多点处理器还包括：多画面拼装模块，连接所述伽玛特性校正模块，用于将收到的至少两个终端的视频图像拼装为一个多画面图像，并将该多画面图像送入视频数据编解码模块或伽玛特性参数信息提取及附加模块。

31、如权利要求 27所述的多点控制单元，其特征在于，所述伽玛特性校正模块中包括：

32、如权利要求 27所述的多点控制单元，其特征在于，所述多点控制单元还包括：多点控制器，连接所述多点处理器，用于向多点处理器发送进行伽玛特性校正的控制信号。

33、如权利要求 28 ~ 32任意之一所述的多点控制单元，其特征在于，所述多点处理器并行设置为多个。