WO2012171452A1

WO2012171452A1 - 视频图像的适配处理方法、设备及系统

Info

Publication number: WO2012171452A1
Application number: PCT/CN2012/076755
Authority: WO
Inventors: 赵嵩; 刘源; 王静; 余水安
Original assignee: 华为终端有限公司
Priority date: 2011-06-14
Filing date: 2012-06-12
Publication date: 2012-12-20
Also published as: CN102833519A

Abstract

本发明实施例公开了一种视频图像的适配处理方法、设备及系统，涉及图像处理领域，采用显示设备的特性参数对视频图像进行校正处理，可以节省人力并且可以使不同的远端显示设备呈现较好的显示效果。本发明实施例提供的方案通过接收待传输给第一会场的显示设备进行显示的视频码流，并获取所述第一会场的显示设备的特性参数，然后根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。本发明实施例提供的方案适合针对显示设备的视频图像的适配处理时采用。

Description

视频图像的适配处理方法、设备及系统本申请要求于 2011 年 06 月 14 日提交中国专利局、申请号为 201110159189.5、发明名称为"视频图像的适配处理方法、设备及系统"的中国专利申请的优先权，其全部内容通过引用结合在本申请中。

技术领域

本发明涉及图像处理领域，尤其涉及视频图像的适配处理方法、设备及系统。

背景技术

视频会议系统中的远端显示设备通常包括液晶屏显示器、等离子显示器、 OLED ( Organic Light-Emitting Diode, 有机发光二极管）显示器、基于投影方式的平面幕和非平面幕（弧面幕或者折面幕），所述远端显示设备的编码能力、具体编码协议差别比较大，现有的多媒体传输控制协议，如 H.323 协议族中的 H.245协议、 SIP ( Session Initiation Protocol, 会话初始化协议）协议族中的 SDP ( Session Description Protocol, 会话初始化协议）协议，可以完成远端显示设备之间或者远端显示设备与媒体控制服务器（如： MCU ( Multipoint Control Unit, 多点控制单元））之间的能力协商，通过能力协商过程能够了解对方的处理能力，进而可以确定双方进行通信时的能力参数，其中，能力参数包括但不限于：通信双方所采用的编码解码协议，支持的传输带宽等。

随着远程呈现技术的不断发展，出现了不同类型的视频会议系统的共同参加一个会议的应用场景，在这种应用场景下，显示设备的显示能力是多样化的。为了呈现出完整、流畅的画面效果，需要针对具体地远端显示设备做具体的调节，例如对多显示屏拼接系统的几何对齐和颜色校正等。员依靠人眼的判断来完成的，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出的画面效果总是较好。发明内容

本发明的实施例提供一种视频图像的适配处理方法、设备及系统，可以采用显示设备的特性参数对视频图像进行校正处理，可以节省人力并且可以为达到上述目的，本发明的实施例采用如下技术方案：

一种视频图像的适配处理方法，应用于视频会议系统中，所述视频会议系统包括一个视频会议服务器，以及至少两个视频会议终端，其中，所述的至少两个视频会议终端分别位于至少两个会场中，所述方法包括：

所述视频会议服务器接收待传输给第一会场的显示设备进行显示的视频码流；

所述视频会议服务器获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

所述视频会议服务器根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

一种视频图像的适配处理设备，所述设备应用于视频会议系统中，包括：接收单元，用于接收待传输给第一会场的显示设备进行显示的视频码流；获取单元，用于获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

执行单元，用于根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

一种视频会议系统，包括：至少两个视频会议终端、一个视频会议务器，其中，所述的至少两个视频会议终端分别位于至少两个会场中，所述系统包括：

所述视频会议服务器接收待传输给第一会场的显示设备进行显示的视频码流，并获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在会场的显示设备的显示能力信息，所述视频会议服务器根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流，发送给所述第一会场。

本发明实施例提供的一种视频图像的适配处理方法、设备及系统，通过接收待传输给第一会场的显示设备进行显示的视频码流，并获取第一会场的显示设备特性参数，然后根据第一会场的显示设备的特性参数对视频码流进行处理，并将处理之后的视频码流发送给第一会场。与现有技术中不同显示设备的调节通常是在各个会场中由工程人员依靠人眼的判断来完成的，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出较好的画面效果相比，本发明实施例中提供的方案通过采用显示设备特性参数对视频图现较好的画面效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作筒单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图 1为本发明实施例提供的第一种视频会议系统的组成架构图；图 2为本发明实施例提供的第二种视频会议系统的组成架构图；图 3为本发明实施例 1提供的一种视频图像的适配处理方法的流程图；图 4为本发明实施例 1提供的一种视频图像的适配处理设备的框图；图 5为本发明实施例 2提供的一种视频图像的适配处理方法的流程图；图 6为本发明实施例 2中采用色调校正曲线插值点数量对图像的像素点进行插值来调整图像的整体色调所采用的色调校正曲线图；

图 7为本发明实施例 2提供的一种视频图像的适配处理设备的框图；图 8为本发明实施例 3提供的一种视频会议系统的示意图。具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

不同的显示设备有不同的显示特性，一张图像在不同的显示设备上进行显示时，会导致显示的图像不能达到很好的显示效果。图像适配指根据不同的显示设备的特性对图像进行相应的调整，使得调整后的图像在不同尺寸和长宽比的显示设备上以较好的效果显示。

在介绍本发明的实施例之前，先针对本发明所应用的视频会议系统结构进行说明：

其中，图 1所示的视频会议系统由媒体控制服务器（以 MCU为例进行说明），以及 N (其中， N > 2 )个会议终端构成，其中， MCU实现媒体流的控制与转发（包括：会议音频数据的混音，以及视频图像的组合等）；

图 2所示的视频会议系统由 N+1 ( N > 2 )个视频会议终端组成，其中，存在一个终端作为主席会议终端（如下筒称：主席终端），主席终端除了具有会议终端的功能之外，还具有媒体控制的部分功能。主席终端可以通过令牌控制的方式由各个会议终端向管理台（图 2未示）进行申请，获得了该令牌的会议终端就作为主席终端。

实施例 1

本实施例提供一种视频图像的适配处理方法，如图 3 所示，应用于视频会议系统中，该视频会议系统包括至少两个视频会议终端，其中，至少两个视频会议终端分别位于至少两个会场中，该方法包括：

301 , 接收待传输给第一会场显示设备进行显示的视频码流；

在具体实现的过程中， 301中的第一会场为参加视频会议中的不特定的一个会场。

302, 获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

第一会场的显示设备的特性参数的获取方式可以有至少如下两种：方式一：获取第一会场中的显示设备的几何校正参数和颜色校正参数；从所述几何校正参数和颜色校正参数中提取显示设备特性参数；

方式二：接收第一会场中的视频会议终端发送的显示设备特性参数。需要说明的是，上述步骤 301和步骤 302的顺序并不是严格固定的，在具体的实现过程中，可以先执行 302, 再执行 301 ; 或者先执行 301 , 再执行 302; 抑或者 301与 302同时执行，对此，本发明的实施例中不加任何限定。

303 , 根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

根据第一会场的显示设备的特性参数对所述视频码流进行处理可以具体为，首先解码接收待传输给第一会场的显示设备进行显示的视频码流，获得视频图像，然后根据第一会场的显示设备特性参数中的每个参数对所述视频图像进行逐帧调整；还可以采用对解码之后的视频图像，根据第一会场的显示设备的特性参数的参数组合对视频图像进行逐帧调整，在具体应用中还可以采用其他方式，对此，本发明的实施例不加限定。可以是 MCU设备（如图 1所示），也可以为集成了视频图像适配处理模块的视频会议终端（如图 2所示的视讯会议系统中的主席终端），对此，本发明的实施例不加限定。

本发明实施例提供的视频图像的适配处理方法，通过接收待传输给第一会场的显示设备进行显示的视频码流，并获取第一会场的显示设备特性参数，然后根据第一会场的显示设备的特性参数对视频码流进行处理，并将处理之后的视频码流发送给第一会场。与现有技术中不同的显示设备的调节通常是在各个会场中的工程人员依靠人眼的判断来完成的，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出较好的画面效果相比，本发明实施例中提供的方案通过采用各个视频会议终端的显示设备特性参数对视频图像进行校正处理，可以节省人力并且可以使不同的视频会议终端的显示设备呈现较好的画面效果。

为了实现上述一种视频图像的适配处理方法，本实施例还提供一种进行视频图像的适配处理的设备，该设备可以为视频会议服务器，如 MCU设备，也可以为集成了视频图像适配处理模块的视频会议终端，如图 4所示，该设备包括：接收单元 401 , 获取单元 402, 执行单元 403。

接收单元 401 , 用于接收待传输给第一会场显示设备进行显示的视频码流;

获取单元 402, 用于获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

具体地，获取单元 402获取第一会场的显示设备的特性参数时，可以通过获取模块获取所述第一会场中的显示设备的几何校正参数和颜色校正参数，然后提取模块从所述几何校正参数和颜色校正参数中提取显示设备特性参数；也可以通过接收模块，接收所述第一会场中的视频会议终端发送的显示设备特性参数；对此，本发明的实施例不加限定。

执行单元 403,用于根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

具体地，执行单元 403中的解码模块解码所述视频码流，获得视频图像，然后调整模块，根据所述第一会场的显示设备特性参数中的每个参数对所述视频图像进行逐帧调整，还可以采用对解码之后的视频图像，根据第一会场的显示设备的特性参数的参数组合对视频图像进行逐帧调整，在具体应用中还可以采用其他方式，对此，本发明的实施例不加限定。

本发明实施例提供的设备，通过接收单元接收待传输给第一会场的显示设备进行显示的视频码流，并用获取单元获取第一会场的显示设备特性参数，然后采用执行单元根据第一会场的显示设备特性参数对视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。与现有技术中显示设备的调节通常是在各个会场中的工程人员依靠人眼的判断来调整的，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出的画面效果总是达到较好相比，本发明实施例中提供的各个视频会议终端的显示设备通过采用显示设备特性参数对视频图像进行校正处理，可以节省人力并且可以使不同的视频会议终端的显示设备呈现较好的画面效果。

此外，本发明实施例还提供一种视频会议系统，所述系统由至少两个视频会议终端、以及一个视频会议服务器所构成，其中，所述的至少两个视频会议终端分别位于至少两个会场中，所述系统包括；

具体地，视频会议服务器获取第一会场的显示设备的特性参数时，可以获取第一会场中的显示设备的几何校正参数和颜色校正参数，并从所述几何校正参数和颜色校正参数中提取显示设备特性参数；

或者，所述视频会议服务器接收所述第一会场中的视频会议终端发送的显示设备特性参数。

视频会议服务器根据第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流，发送给第一会场，具体地，视频会议服务器解码接收到的视频码流，获得视频图像，根据第一会场中的显示设备的特性参数中的每个参数对该视频图像进行逐帧调整。

本发明实施例提供的视频会议系统中有至少两个视频会议终端，因此需要获取不同的会场的显示设备的特性参数，对待传输给相应会场的显示设备进行显示的视频码流进行处理。这里，为了筒单描述和方便理解，是以第一会场（视讯会议系统中的不特定的会场）为例进行描述。本发明实施例提供的视频会议系统，通过视频会议服务器接收待传输给第一会场的显示设备进行显示的视频码流，并获取第一会场的显示设备特性参数，根据显示设备特性参数对视频码流进行调整。与现有技术中显示设备的调节通常是在各个会场中的工程人员依靠人眼的判断来完成的，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出的画面效果达到较好相比，本发明实施例中提供的各个会场的显示设备通过采用显示设备特性参数对视频图像进行校正处理，可以节省人力并且可以使不同的视频会议终端的显示设备呈现较好的画面效果。

实施例 2

本发明实施例提供一种视频图像的适配处理方法，应用于视频会议系统中，该视频会议系统包括一个视频会议服务器，以及至少两个视频会议终端，其中，所述的至少两个视频会议终端分别位于至少两个会场中，需要说明的是，本发明实施例提供的方案以视频会议终端所在的第一会场为例进行描述视频会议系统调整的方法。

如图 5所示，该方法包括：

在本发明实施例提供的视频图像的适配处理之前，需要调试人员对各个会场中的显示设备进行初步地调试，使得显示设备的显示效果调试到几何上尽量对齐，颜色上尽量接近，使后续的操作效率提高。

步骤 501 ,所述视频会议服务器接收待传输给第一会场的显示设备进行显示的视频码流；

视频会议服务器可以为 MCU, 也可以为集成了视频图像适配处理模块的视频会议终端（即图 2所示的主席终端），视频会议终端将需要调整的视频码流发送给视频会议服务器。

步骤 502,获取所述第一会场中的显示设备的几何校正参数和颜色校正参数；

具体地，视频会议服务器发送几何校正模板图像到视频会议终端进行显示，几何校正模板图像保存在视频会议服务器上，视频会议终端拍摄所述几何校正模板图像在视频会议终端所在的会场中的显示设备上的效果图像，并将拍摄的图像回传给视频会议服务器，视频会议服务器根据回传的图像计算几何校正参数；

视频会议服务器判断计算出的几何校正参数的误差是否满足精度要求，如果满足精度要求，则采用计算出的几何校正参数对几何校正模板图像进行校正后，在视频会议终端所在的会场的显示设备上的显示效果较好，如果不满足精度要求，则采用计算出的几何校正参数对几何校正模板图像进行校正后，在视频会议终端所在的会场的显示设备上的显示效果不好，例如在视频会议终端所在的会场的显示设备上显示时存在拼接区域，此时需要视频会议服务器的计算过程进行多次迭代，继续将几何校正处理后的模板图像发送到视频会议终端所在的会场的显示设备上进行显示，视频会议终端拍摄显示屏幕上的效果图像，并回传给视频会议服务器，进行再次计算，依次迭代，直到计算出的几何校正参数的误差满足精度要求，则采用计算出的几何校正参数对几何校正模板图像进行校正后，这样视频会议终端所在的会场的显示设备上的显示效果较好；

同理，视频会议服务器发送颜色校正模板图像到视频会议终端进行显示，颜色校正模板图像保存在视频会议服务器，视频会议终端拍摄所述颜色校正模板图像在视频会议终端所在的会场中的显示设备上的效果图像，并将拍摄的图像回传给视频会议服务器，视频会议服务器根据拍摄的图像计算颜色校正参数；

视频会议服务器判断计算出的颜色校正参数的误差是否满足精度要求，如果满足精度要求，则采用计算出的颜色校正参数对颜色校正模板图像进行校正后，在视频会议终端所在的会场的显示设备上的显示效果较好，如果不满足精度要求，则采用计算出的颜色校正参数对颜色校正模板图像进行校正后，在视频会议终端所在的会场的显示设备上的显示效果不好，例如在视频会议终端所在的会场的显示设备上显示时存在过亮区域，此时需要视频会议服务器的计算过程进行多次迭代，继续将颜色校正处理后的模板图像发送到视频会议终端所在的会场的显示设备上进行显示，视频会议终端拍摄显示屏幕上的效果图像，并回传给视频会议服务器，视频会议服务器可以再次计算，依次迭代，直到计算出的颜色校正参数的误差满足精度要求，则采用计算出的颜色校正参数对颜色校正模板图像进行校正后，这样视频会议终端所在的会场的显示设备上的显示效果较好。

需要说明的是，还需要获取其他会场中的显示设备的几何校正参数和颜色校正参数。

步骤 503 ,所述视频会议服务器从所述几何校正参数和颜色校正参数中提述第一会场中的显示设备的显示能力信息；

所述显示设备特性参数包括：是否进行后续的处理的标识，图像水平分辨率、图像垂直分辨率、图像位深、几何校正标记、几何校正参数、图像亮度调整操作标记、图像亮度调整系数。

具体地， "是否进行后续的处理的标识"表示视频图像是否需要采用显示设备的特性参数进行逐帧调整；

"图像水平分辨率"表示第一会场的显示设备显示的图像的水平分辨率， "图像垂直分辨率 "表示第一会场的显示设备显示的图像的垂直分辨率；

"图像位深" 表示存储每个像素所用的位数，确定彩色图像的每个像素可能有的颜色数，例如每个像素用 8位表示，即所述图像位深为 8, 则最大颜色数目为 2⁸, 即 256种颜色数；

"几何校正标记" 表示显示设备特性参数中是否包含 "几何校正参数"；当显示屏幕是由多个屏幕构成时，相邻图像间可能产生重叠，将会导致重叠部分图像的亮度较高，这时，需要应用图像亮度调整校正图像，使得整个屏幕呈现亮度一致的图像， "图像亮度调整操作标记" 表示图像是否需要进行图像亮度调整处理；

为了应用显示设备特性参数对视频图像进行处理，使视频图像达到较好的显示效果，显示设备特性参数还包括：矩阵颜色校正标记、矩阵颜色校正参数、色调校正标记、色调校正曲线插值点数量、 3D-LUT ( Three Dimensions-Look-Up-Table , 三维显示查找表）颜色校正标记， 3D-LUT 中网格点间隔、 3D-LUT中网格点数据。

矩阵颜色校正是指需要校正前和校正后的两个图像之间存在的关系，可以用一个 3*3 的矩阵表示，使得对校正前的图像应用所述矩阵颜色校正参数后，得到较好的颜色校正， "矩阵颜色校正标记" 表示所述图像是否需要进行矩阵颜色校正，如果需要对图像进行矩阵颜色的校正，则采用矩阵颜色校正参数对图像进行逐帧的校正；

色调为色与色之间的整体关系构成的颜色 Ρ介调，指图像色彩的总体倾向， "色调校正标记" 表示所述图像是否需要进行色调校正；当色调校正标记表示需要对图像进行色调校正时，读取相应的色调校正曲线插值点数量对图像的像素点进行插值来调整图像的整体色调；

3D-LUT颜色校正是对不能用所述矩阵颜色校正参数进行处理的图像进行图像处理的一种方法，具体地，是一种根据三维显示查找表，通过插值对图像进行校正的色彩校正方法，可以提高色彩校正精度， "3D-LUT颜色校正标记" 表示图像是否需要进行 3D-LUT颜色校正，如果需要对图像进行 3D-LUT颜色校正，则读取 3D-LUT中网格点间隔和 3D-LUT中网格点数据两个参数，并采用这两个参数对图像进行调整。

步骤 502和步骤 503为获取视频会议终端所在的会场的显示设备特性参数的过程，获取视频会议终端所在的会场的显示设备特性参数还可以为步骤需要说明的是，视频会议服务器接收待传输给第一会场的显示设备进行显示的视频码流和视频会议服务器获取第一会场的显示设备特性参数这两个流程的顺序不是严格确定的，可以先接收待传输给第一会场的显示设备进行显示的视频码流，再获取第一会场的显示设备特性参数，也可以先获取第一会场的显示设备特性参数，再接收待传输给第一会场的显示设备进行显示视频码流，或者两者同时执行，对此，本发明的实施例不加限定。步骤 504,所述视频会议服务器接收所述第一会场中的视频会议终端发送的显示设备特性参数；

具体地，视频会议服务器接收各个会场中的视频会议终端发送的显示设备特性参数，视频会议终端根据各自会场的显示设备的特性，计算得出各自会场中的显示设备的特性参数，然后将计算得出的显示设备特性参数携带在压缩协议 H.263协议中的 SEI ( Supplemental Enhancement Information, 补充增强信息）消息中发送给所述服务器，可以采用 H.263协议中的 SEI消息来传输用户自定义的信息，本发明实施例中的显示设备特性参数可以在所述 SEI 消息中的数据层中未使用的存储空间，例如：可以定义 SEI 消息中的数据层中的地址为 36的位置至 256的位置中的任意一个位置，优选地，可以定义 SEI 消息中的数据层中的地址为 256 的位置来存放显示设备特性参数,如下表所

上述表中的 Category表示 H.263协议中规定的不同信息的重要性的级别，在 H.263协议的 SEI消息中 Category的值都为 5,表示对应该值的消息的重要性稍低，重要性稍低的消息则可以传送也可以不传送，在传送过程中丢失后，也可以不重新传送。

本发明实施例中的显示设备特性参数在 SEI信息中的码流结构如下表所 Display_Device_param(payloadSize){ 描述符

skip—flag unsigned (1)

width unsigned (12)

height unsigned (12)

b it_dep th_minu s 8 unsigned (4)

skip_geometry unsigned (1)

int i

for (i=0; i<width*height; i++)

geometr y_tr an [i] unsigned (32)

skip—blend unsigned (1)

blend_data_depth_minusl unsigned (4)

for (i=0; width*height; i++)

blend[i] unsigned (8)

skip—color—matrix unsigned (1)

for (i=0; i<9;i++)

color_matrix[i] unsigned (8)

skip—tone—mapping unsigned (1)

for (j=0;j<3; j++)

number_pivots[j] unsigned (12)

for (i=0;i< number—pivots [j]; i++)

coded_pivot_value[i] unsigned (12)

target_pivot_value[i] unsigned (12)

skip_color_lut unsigned (1)

step unsigned (8)

color_lut_pivot_number = 3 * ( 1 «BitDepth)/step

for (i=0; i<color_lut_pivot_number;

color _lu t_p ivot [i] unsigned

(bit_depth_minus8+8)

}

上述表中描述符的 Unsigned ( 12 )表示显示特性参数占用的比特位数为无符号的 12比特， Unsigned( 8 )、 Unsigned (1), U nsigned (32)的意义与 Unsigned (12)相同，黑体部分表示实际存在于视频码流中的显示设备特性参数元素，非黑体部分为解码过程中的辅助变量。

步骤 505 ,所述视频会议服务器根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场；具体地，先将接收到的视频码流进行解码，获得视频图像，根据显示设备的特性参数对视频图像进行调整。

依次解析显示设备特性参数，显示设备特性参数中，规定给是否进行后续的处理的标识的赋值为 0或者 1 ,如果是否进行后续的处理的标识的赋值为 0, 则表示图像不需要进行后续的处理，停止解析显示设备特性参数，如果是否进行后续的处理的标识的赋值为 1 , 则表示图像需要进行后续的处理，如果是否进行后续的处理的标识的赋值为 1 , 然后读取图像水平分辨率、图像垂直分辨率、图像位深这三个参数，并根据图像水平分辨率、图像垂直分辨率、图像位深确定图像亮度调整系数；

规定给几何校正标记的赋值为 0或者 1 , 读取几何校正标记，如果几何校正标记的赋值为 0, 则表示不需要进行几何校正，此时，进入图像亮度调整的流程，如果几何校正标记的赋值为 1 , 则表示显示设备特性参数中包含几何校正参数，对图像进行相应的处理；

进一步地，采用几何校正参数对图像进行几何校正时，例如，每个像素的数据长度为 32bit,其中， 32bit数据中高 16bit为水平方向校正数据，低 16bit 为垂直方向校正数据，每个 16bit数据中高 13bit为整数部分，低 3bit为小数部分，因此精度为 1/8像素。

设原图像为 I,原图像的像素的水平坐标 X。,垂直坐标为 Y。，水平校正值为 dx,垂直校正值为 dy , 则原图像的像素校正后的像素值为 I ( X。,Y。） = I(X₀₊dx,Y₀₊dy)；

规定给图像亮度调整操作标记的赋值为 0或者 1 ,读取图像亮度调整操作标记，如果图像亮度调整操作标记的赋值为 0, 则表示图像不需要进行图像亮度调整处理，此时，进入矩阵颜色校正的流程，如果图像亮度调整操作标记的赋值为 1 ,则读取图像亮度调整系数根据确定的图像亮度调整系数对图像进行亮度调整处理；

进一步地，采用图像亮度调整系数对图像进行亮度调整时，设原图像为 I, 原图像的像素的水平坐标 X。,垂直坐标为 Y。，原图像中需要进行亮度调整的位置的亮度调整系数为 blend(x₀,y₀),则校正后的数据为 I(X₀,Y₀) = Ι(Χ₀,Υ₀)* blend(x₀,y₀);

规定给矩阵颜色校正标记的赋值为 0或者 1 ,读取矩阵颜色校正标记，如果矩阵颜色校正标记的赋值为 0, 则表示图像不需要进行矩阵颜色校正处理，此时，进入色调校正的流程，如果矩阵颜色校正标记的赋值为 1 , 则读取矩阵颜色校正系数根据确定的矩阵颜色校正系数对图像进行颜色调整处理；

进一步地，例如对需要显示的视频图像进行矩阵颜色校正调整时，根据矩阵颜色校正系数进行调整，操作过程为：

G₁=h₂₁*R₀+h₂₂*Go+h₂₃*B₀, ②

B₁=h₃₁*Ro+h₃₂*Go+h₃₃*B₀, ③

其中， [R。， Go, Β。]^τ为校正前某一点的像素值， [ , d, 为校正后某一点的像素值， h_n, h₁₂, h₁₃, h₂₁, h₂₂, h₂₃, h₃₁, h₃₂, h₃₃为调整图像颜色的字段中的元素，为生产厂家根据图像传感器的不同设置的。

可以规定其中每一个颜色校正数据长度为 32位，最高 24位为整数部分，低 8位为小数部分，这样浮点数的精度为 1/256。

对视频图像进行处理时，视频会议终端的校正设备获取校正前的 A点的像素值，根据上述①， ②， ③三个计算公式可以获得校正后的 A点的像素值，将获得的校正后的 A点的像素值对视频图像进行调整。同理，对视频图像的每一帧中的图像的所有像素值都进行这样的调整后，即可获得调整后的视频图像；

规定给色调校正标记的赋值为 0或者 1 , 读取色调校正标记，如果色调校正标记的赋值为 0,则表示图像不需要进行色调校正处理，此时，进入 3D-LUT 颜色校正的流程，如果色调校正标记的赋值为 1 , 则读取色调校正曲线插值点数量根据确定的色调校正曲线插值点数量对图像的像素点进行插值来调整图像的整体色调；

进一步地，采用色调校正曲线插值点数量对图像的像素点进行插值来调整图像的整体色调时，设某一像素的红色分量为 R₁ 校正后的红色分量为 R。，则校正过程为：

该曲线的生成方法如图 6所示，其中 F即为色调校正曲线， il,i2对应的结果分别为 ol,o2, 色调校正曲线 F在 il , i2之间的部分由 (il,ol),(i2,o2)经过线性插值得到；校正数据中的校正前颜色对应于 i, 校正后颜色对应于 0 ;

规定给 3D-LUT颜色校正标记的赋值为 0或者 1 ,读取 3D-LUT颜色校正标记，如果 3D-LUT颜色校正标记的赋值为 0,则表示图像不需要进行 3D-LUT 颜色校正处理，退出解析流程，如果 3D-LUT颜色校正标记的赋值为 1 , 则读取 3D-LUT中网格点间隔和 3D-LUT中网格点数据 color_lut_pivot两个参数，并采用这两个参数对图像进行调整；

进一步地，设原图像为 I, 原图像的像素的水平坐标 x。,垂直坐标为 y。，原图像的像素的红绿蓝分量分别为 R、 G、 B; 则经过 3D-LUT校正后的数据为： I(x₀,y₀) = color_lut_pivot[R/step] [G/step] [B/step] , 对于 R/step G/step B/step不为整数的情况，采用 4面体插值方法，关于 4面体插值方法为现有技术，本发明的实施例不作限定。

这样，对全部的显示设备特性参数解析完成后，退出解析流程，此时，经采用显示设备特性参数调整后的视频图像，可以在显示设备上呈现出完成流畅的画面。调节，使显示设备特性参数对视频图像校正调整后，可以在显示设备上呈现出完成流畅的画面。

视频会议终端所在会场中的显示设备可以为不同的显示设备，可以是显示设备的数量不同，可以是显示设备的类型不同，也可以是特定类型的屏幕，例如显示设备可以为一块液晶屏，可以为三块液晶屏拼接成平面；显示设备可以是传统 CRT ( Cathode Ray Tube, 使用阴极射线管的显示器)，可以是液晶的；显示设备可以是平面幕、折面幕、弧幕等，视频会议终端接收到编码的逐帧调整后的视频码流，进行解码后显示在该视频会议终端所在的会场的显示设备上，可以呈现出完成流畅的画面。本发明实施例提供的视频图像的适配处理方法，通过接收待传输给第一会场的显示设备进行显示的视频码流，并获取第一会场的显示设备特性参数，根据显示设备特性参数对视频码流进行调整，并将调整后的视频图像在视频会议终端上的显示设备上进行显示。与现有技术中通常依靠人眼来调节显示设备，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出的画面效果总是达到较好相比，本发明实施例中提供的方案通过采用显示设备特性参数对视频图像进行逐帧的校正处理，可以节省人力，并且可以使不同的视频会议终端的显示设备呈现较好的画面效果。

为了实现上述视频图像的适配处理方法，本发明实施例提供一种视频图像的适配处理设备，该设备为视频会议服务器，具体可以是 MCU, 也可以为集成了具有视频图像适配处理模块的视频会议终端。如图 7所示，该设备包括：接收单元 701 , 获取单元 702, 获取模块 703,提取模块 704, 接收模块 705, 执行单元 706, 解码模块 707, 调整模块 708。

接收单元 701 , 用于接收待传输给第一会场的显示设备进行显示视频码流;

获取单元 702, 用于获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

显示设备的特性参数为根据第一会场中的显示设备的具体特性计算出来的特性参数，显示设备的特性参数包括：是否进行后续的处理的标识，图像水平分辨率、图像垂直分辨率、图像位深、几何校正标记、几何校正参数、图像衰减操作标记、图像衰减系数，还包括：矩阵颜色校正标记、矩阵颜色校正参数、色调校正标记、色调校正曲线插值点数量、 3D-LUT颜色校正标记， 3D-LUT中网格点间隔、 3D-LUT中网格点数据。

获取单元 702包括：获取模块 703,用于获取所述第一会场中的显示设备的几何校正参数和颜色校正参数；提取模块 704, 用于从所述几何校正参数和颜色校正参数中提取显示设备特性参数；或者，获取单元 702中的接收模块 705, 用于接收所述第一会场中的视频会议终端发送的显示设备特性参数；此时，视频会议终端将其所在会场中的各自的显示设备的特性参数计算得出后，发送给视频会议服务器。

接收模块 705具体用于：接收所述第一会场中的视频会议终端发送的基于 H.263协议中的补充增强消息 SEI消息，所述 SEI消息中携带所述显示设备特性参数。

获取显示设备特性参数后，执行单元 706, 用于根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

执行单元 706中的解码模块 707,用于解码接收到的所述视频会议终端发送的所述视频码流，获得视频图像；

执行单元 706中的调整模块 708,用于根据所述第一会场的显示设备特性参数中的每个参数对所述视频图像进行逐帧调整。

本发明实施例提供的装置，以根据第一会场的显示设备特性参数，处理会议中接收到的视频码流为例进行描述的，具体地，需要接收各个会场的显示设备特性参数，处理会议中接收到的视频码流，并将处理之后的视频码流发送给各个会场。

本发明实施例提供的设备，通过接收单元接收待传输给第一会场的显示设备进行显示的视频码流，然后获取单元获取第一会场的显示设备的特性参数，根据第一会场的显示设备特性参数对视频码流进行调整后发送给第一会场。与现有技术中显示设备的调节通常是依靠人眼的判断来完成的，会浪费比较多的人力，同时也无法保证视频会议终端的显示设备呈现出的显示效果总是达到较好相比，本发明实施例中提供的显示装置通过采用各个会场的显示设备特性参数对视频图像进行校正处理，从而使校正后的视频图像可以适配不同的视频会议终端的显示设备，使显示设备呈现出完整流畅的画面，并且会节省人力。

实施例 3 上述视频图像的适配处理方法、设备可以应用到图像处理领域，从而形成一种视频会议系统，以便能够实现上述方法，如图 8所示，该视频会议系统包括：视频会议终端 801、视频会议终端 802 (视频会议终端至少 2个）、一个视频会议服务器 803。

视频会议服务器 803接收待传输给视频会议终端 801所在的会场的显示设备进行显示的视频码流，并接收视频会议终端 801发送的显示设备特性参数；所述显示设备特性参数为所述视频会议终端 801 所在的会场的显示设备的显示能力信息；

并且，视频会议服务器 803接收待传输给视频会议终端 802所在的会场的显示设备进行显示的视频码流，并接收视频会议终端 802发送的显示设备特性参数；所述显示设备特性参数为所述视频会议终端 802所在的会场的显示设备的显示能力信息；

视频会议服务器 803获取视频会议终端所在会场的显示设备特性参数可以为以下任一种方式：

方式一：视频会议服务器 803获取视频会议终端 801所在会场的显示设备的几何校正参数、颜色校正参数，并从该几何校正参数和颜色校正参数中提取视频会议终端 801所在会场的显示设备的特性参数；

视频会议服务器 803获取视频会议终端 802所在会场的显示设备的几何校正参数、颜色校正参数，并从该几何校正参数和颜色校正参数中提取视频会议终端 501所在会场的显示设备的特性参数；

方式二：视频会议服务器 803接收视频会议终端 801和视频会议终端 802 发送的显示设备特性参数，具体地，所述视频会议服务器 803接收所述视频会议终端发送的 H.263协议中的 SEI消息，所述 SEI消息中携带所述显示设备特性参数。

视频会议服务器 803根据视频会议终端 801的所述显示设备特性参数对所述视频会议终端 801 发送的所述视频码流进行处理，视频会议服务器 803 根据视频会议终端 802的所述显示设备特性参数对所述视频会议终端 802发送的所述视频码流进行处理；

具体地，视频会议服务器 803分别解码接收到的视频码流，根据视频会议终端 801 所在会场的显示设备的特性参数中的每个参数对所述视频图像进行逐帧调整，并将处理之后的视频码流，发送给所述视频会议终端 801 所在的会场；同理，根据所述视频会议终端 802所在会场的显示设备的特性参数中的每个参数对所述视频图像进行逐帧调整，并将处理之后的视频码流，发送给所述视频会议终端 802所在的会场。

本发明实施例提供的系统，通过视频会议服务器接收待传输给各个会场的显示设备进行显示的视频码流，并获取各个视频会议终端所在会场的显示设备的特性参数，然后根据各个视频会议终端所在会场的显示设备的特性参数对相应的各个视频会议终端的视频码流进行调整。与现有技术中对显示设备的调整需要依靠人眼来完成，会浪费较多的人力，同时也无法保证视频会议终端的显示设备呈现出的显示效果总是达到较好相比，本发明实施例中提供的显示装置通过采用显示设备特性参数对视频图像进行逐帧的校正处理，可以节省人力并且可以使不同的视频会议终端的显示设备呈现较好的显示效果。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims

1、一种视频图像的适配处理方法，应用于视频会议系统中，其特征在于，所述视频会议系统包括至少两个视频会议终端，其中，所述的至少两个视频会议终端分别位于至少两个会场中，所述方法包括：

接收待传输给第一会场的显示设备进行显示的视频码流；

获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信根据所述第一会场的显示设备的特性参数对所述视频码流进行处理，并将处理之后的视频码流发送给所述第一会场。

2、根据权利要求 1所述的视频图像的适配处理方法，其特征在于，所述获取所述第一会场的显示设备的特性参数，包括：

获取所述第一会场中的显示设备的几何校正参数和颜色校正参数；从所述几何校正参数和颜色校正参数中提取显示设备特性参数；

或者，接收所述第一会场中的视频会议终端发送的显示设备特性参数。

3、根据权利要求 1或 2所述的视频图像的适配处理方法，其特征在于，所述根据第一会场的显示设备的特性参数对所述视频码流进行处理包括：

解码所述视频码流，获得视频图像；

根据所述第一会场的显示设备特性参数中的每个参数对所述视频图像进行逐帧调整。

4、根据权利要求 1-3中任一项所述的视频图像的适配处理方法，其特征在于，所述显示设备特性参数包括至少如下一个参数：图像水平分辨率、图像垂直分辨率、图像位深、几何校正参数、图像亮度调整系数。

5、根据权利要求 2或 4所述的视频图像的适配处理方法，其特征在于，所述接收所述第一会场中的视频会议终端发送的显示设备特性参数包括：

接收所述第一会场中的视频会议终端发送的基于 H.263 协议中的补充增强消息 SEI消息，所述 SEI消息中携带所述显示设备特性参数。

6、一种视频图像的适配处理设备，所述设备应用于视频会议系统中，其特征在于，包括：

接收单元，用于接收待传输给第一会场的显示设备进行显示的视频码流；获取单元，用于获取所述第一会场的显示设备的特性参数，所述第一会场的显示设备的特性参数为第一视频会议终端所在的所述第一会场中的显示设备的显示能力信息；

7、根据权利要求 6所述的设备，其特征在于，所述获取单元包括：获取模块，用于获取所述第一会场中的显示设备的几何校正参数和颜色校正参数；提取模块，用于从所述几何校正参数和颜色校正参数中提取显示设备特性参数；

或者，接收模块，用于接收所述第一会场中的视频会议终端发送的显示设备特性参数。

8、根据权利要求 6或 7所述的设备，其特征在于，所述执行单元包括：解码模块，用于解码所述视频码流，获得视频图像；

调整模块，用于根据所述第一会场的显示设备特性参数中的每个参数对所述视频图像进行逐帧调整。

9、根据权利要求 7或 8中任一项所述的设备，其特征在于，所述接收模块具体用于：

10、一种视频会议系统，其特征在于，包括：至少两个视频会议终端、一个视频会议服务器，其中，所述至少两个视频会议终端分别位于至少两个会场中，所述系统包括：

11、根据权利要求 10所述的视频会议系统，其特征在于，所述获取第一会场的显示设备的特性参数包括：

所述视频会议服务器获取所述第一会场中的显示设备的几何校正参数和颜色校正参数，并从所述几何校正参数和颜色校正参数中提取显示设备特性参数；或者，所述视频会议服务器接收所述第一会场中的视频会议终端发送的显示设备特性参数。

12、根据权利要求 10或 11所述的视频会议系统，其特征在于，所述视频会议服务器根据所述第一会场的显示设备的特性参数对所述视频码流进行调整包括：

所述视频会议服务器解码所述视频码流，获得视频图像，根据所述第一会场中的显示设备的特性参数中的每个参数对所述视频图像进行逐帧调整。

13、根据权利要求 11或 12所述的视频会议系统，其特征在于，所述视频会议服务器接收所述第一会场中的视频会议终端发送的显示设备特性参数包括：

所述视频会议服务器接收所述第一会场中的视频会议终端发送的基于 H.263协议中的 SEI消息，所述 SEI消息中携带所述显示设备特性参数。