WO2012059008A1

WO2012059008A1 - 图像显示处理方法及装置

Info

Publication number: WO2012059008A1
Application number: PCT/CN2011/081070
Authority: WO
Inventors: 冯敬华; 马金永; 陈何熠
Original assignee: 华为终端有限公司
Priority date: 2010-11-02
Filing date: 2011-10-20
Publication date: 2012-05-10
Also published as: EP2571262A4; US20130100152A1; CN102457701B; EP2571262A1; CN102457701A

Abstract

本发明实施例公开了一种图像显示处理方法及装置，涉及图像处理技术领域，为能够提高用户使用视频会议系统时的体验而发明。所述方法包括：获取视频源图像的各帧图像；识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同；当所述当前帧图像和所述上一相关帧图像不同时，缓存所述当前帧图像和所述上一相关帧图像；将所述缓存的图像分别发送到至少两台显示设备上进行显示。本发明实施例主要用于视频会议系统中。

Description

图像显示处理方法及装置本申请要求于 2010 年 11 月 2 日提交中国专利局、申请号为 201010528108. X、发明名称为"图像显示处理方法及装置"的中国专利申请的优先权，其全部内容通过引用结合在本申请中。技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像显示处理方法及装置。背景技术

在目前视频会议系统的会场中，一般都会存在两个或两个以上的显示设备。这些显示设备要么分别显示不同的视频源的图像，要么同时显示同一视频源的同一帧图像。

在实现本发明的过程中，发明人发现现有技术还不能实现在两个或者两个以上的显示设备上同时显示同一视频源的不同帧图像，从而极大的影响了用户使用视频会议系统的体验。发明内容

本发明实施例提供一种图像显示处理方法及装置，能够提高用户使用视频会议系统时的体验。

本发明实施例釆用如下技术方案：

一种图像显示处理方法，包括：

获取视频源图像的各帧图像；

识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同；

当所述当前帧图像和所述上一相关帧图像不同时，緩存所述当前帧图像和所述上一相关帧图像；

将所述緩存的图像分别发送到至少两台显示设备上进行显示。

一种图像显示处理装置，包括：

图像获取单元，用于获取视频源图像的各帧图像；图像识别单元，用于识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同；

图像緩存单元，用于当所述当前帧图像和所述上一相关帧图像不同时，緩存所述当前帧图像和所述上一相关帧图像；

图像显示处理单元，用于将所述緩存的图像分别发送到至少两台显示设备上进行显示。

本发明实施例提供的图像显示处理方法和装置，通过识别获取的视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同，来确定对各帧图像的处理方式，并且在当前帧图像和所述上一相关帧图像不同时，緩存所述当前帧图像和所述上一相关帧图像，然后将緩存的图像分别发送到至少两台显示设备上进行显示。由上可以看出，利用本发明实施例的方法和装置，当前帧图像和所述上一相关帧图像不同时，能够将緩存的图像发送到至少两台显示设备上进行显示，也就是说当前帧图像和所述上一相关帧图像不同时，至少两台显示设备上能同时显示该视频源图像的不同帧的图像，从而满足了用户在不同的显示设备上观看同一视频源图像不同内容的图像的要求，提高了用户使用视频会议系统时的体验。附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图 1为本发明实施例一图像显示处理方法的流程图；

图 2为本发明实施例二图像显示处理方法的流程图；

图 3为本发明实施例三图像显示处理方法的流程图；

图 4为本发明实施例四图像显示处理装置的示意图；

图 5为本发明实施例五图像显示处理装置的结构图。具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例 , 都属于本发明保护的范围。

如图 1所示，本发明实施例一提供了一种图像显示处理方法，包括：步骤 11、获取视频源图像的各帧图像。

图像在传送的过程中是一帧一帧传输的，因此，接收方在获取视频源图像时，也是一帧一帧的获取该视频源图像的每一帧图像。

步骤 12、识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同。

在本发明实施例中，根据每帧图像与显示它的显示设备之间对应关系的不同，所述上一相关帧图像可以有不同的含义。它既可以理解为所述当前帧图像的上一帧图像或者上 n帧图像（n为大于 1的整数），也可以理解成为与所述当前帧图像由同一显示设备进行显示的图像，例如可以是与所述当前帧图像由同一显示设备进行显示的图像中当前帧图像的前 n帧图像。

例如，假设视频源图像的每帧图像是任意发送到任意一台显示设备上进行显示。当前帧图像为第 m帧图像，上一相关帧图像就为 m-1 帧图像或者前任意一帧图像。又例如，假设视频源图像的每帧图像是发送到特定的一台显示设备上进行显示，如果有三台显示设备 A、 B、 C , 第一帧图像发送到显示设备 A上显示，第二帧数据发送到显示设备 B上显示，第三帧图像发送到显示设备 C上显示。那么，依次类推，第四帧图像发送到显示设备 A上显示，第五帧数据发送到显示设备 B上显示，第六帧图像发送到显示设备 C上显示 ... ... 那么，在这种情况下，第一帧图像就可看成是第四帧图像的上一相关帧图像，第二帧图像就可看成是第五帧图像的上一相关帧图像，第三帧图像就可看成是第六帧图像的上一相关帧图像 ... ...

在识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同的过程中，可按照下述方式中的一种或者利用以下几种方式的组合进行识别。方式一、检测所述当前帧图像和所述上一相关帧图像内容之间的相似度，当所述相似度小于预设阔值时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同。

其中，对当前帧图像和所述上一相关帧图像内容之间的相似度的检测方式，可以釆用现有技术中任一种图像内容检测方式。例如，可通过比较两帧图像对应像素点的像素数据是否相同来检测。同时，所述预设阔值可由任意设置。

以两台显示设备 A和 B为例，指定视频源图像的各帧图像先发送到显示设备 A上显示，再发送到显示设备 B上显示。在此示例中所述上一相关帧图像为当前帧图像的上一帧或上几帧图像。

对于第一帧图像，由于它没有上一帧图像，因此对其不做此识别过程。对于第二帧图像，检测它和第一帧图像内容之间的相似度。当所述相似度小于预设阔值，例如 20%时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同。对于第三帧图像，比较它和第一帧图像内容之间的相似度，检测方式相同。对于第四帧图像，若是第三帧图像和第一帧图像相同，则是比较它和第二帧图像内容之间的相似度，否则仍是比较它和第一帧图像内容之间的相似度。

以两台显示设备 A和 B为例，视频源图像的各帧图像任意发送到显示设备 A和 B上显示。在此示例中所述上一相关帧图像为当前帧图像的上一帧或上几帧图像。对于第一帧图像，由于它没有上一帧图像，因此对其不做此识别过程。对于第二帧图像，检测它和第一帧图像内容之间的相似度。对于第三帧图像，可以比较它和第一帧图像或第二帧图像内容之间的相似度，检测方式相同。对于第四帧图像，可以比较它第一帧图像或第二帧图像或第三帧图像内容之间的相似度。

方式二、获取所述当前帧图像的标识信息和所述上一相关帧图像的标识信息，当所述当前帧图像的标识信息和所述上一相关帧图像的标识信息相同时，所述当前帧图像和所述上一相关帧图像相同，否则，所述当前帧图像和所述上一相关帧图像不同。

例如视频源图像的发送方可为该视频源图像中的每帧图像添加水印，相同内容的图像帧具有相同的水印。那么，在获取到该视频源图像的各帧图像后，即可根据发送方对各帧图像的设置，获取所述当前帧图像的标识信息和所述上一相关帧图像的标识信息。当所述当前帧图像的标识信息（即视频源图像的发送方设置的水印信息）和所述上一相关帧图像的标识信息（即视频源图像的发送方设置的水印信息）相同时，所述当前帧图像和所述上一相关帧图像相同，否则，所述当前帧图像和所述上一相关帧图像不同。

方式三、检测所述当前帧图像和所述上一相关帧图像之间是否有无效帧图像，当所述当前帧图像和所述上一相关帧图像之间有无效帧图像时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同。

例如视频源图像的发送方可为该视频源图像中的内容不同的图像帧中间插入无效帧。那么，在获取到该视频源图像的各帧图像后，即可根据发送方对各帧图像的设置，检测所述当前帧图像和所述上一相关帧图像之间是否有无效帧图像，当所述当前帧图像和所述上一相关帧图像之间有无效帧图像时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同。

当然，在此实施例中还可有其他的方式判断当前帧图像和上一相关帧图像是否相同，在此只是举例而已。

步骤 1 3、当所述当前帧图像和所述上一相关帧图像不同时，緩存所述当前帧图像和所述上一相关帧图像。

步骤 14、将所述緩存的图像分别发送到至少两台显示设备上进行显示。由上可以看出，利用本发明实施例一的方法，当前帧图像和所述上一相关帧图像不同时，能够将緩存的图像发送到至少两台显示设备上进行显示，也就是说当前帧图像和所述上一相关帧图像不同时，至少两台显示设备上能同时显示该视频源图像的不同帧的图像，从而满足了用户在不同的显示设备上观看同一视频源图像不同内容的图像的要求，提高了用户使用视频会议系统时的体验。

另外，在上述实施例一中，为了降低对系统带宽的要求，在步骤 11前，还可由发送方获取是视频源文件并存储。然后，在视频会议的过程中，接收发送方发送的视频源图像中各帧图像的标识信息，根据所述标识信息获取所述视频源图像的各帧图像。其中，所述标识信息可以是每帧图像的名称等等。

以下分别以要在两台显示设备和三台显示设备上显示同一视频源图像的不同内容为例，详细描述一下本发明实施例图像显示的处理方法。

在实施例二的图像显示处理方法中，假设有显示设备 A和显示设备 B,对接收到的图像帧是按照先显示设备 A显示、后显示设备 B显示的顺序发送以进行显示。如图 2所示，本发明实施例二的图像显示处理方法包括：

步骤 21、获取视频源图像的第一帧图像。

步骤 22、获取视频源图像的第二帧图像。

步骤 23、识别所述第一帧图像和所述第二帧图像是否相同。

在此可釆用实施例一中描述的任一方式和任意方式的组合进行识别。步骤 24、当所述第一帧图像和所述第二帧图像不同时，緩存所述第一帧图像和第二帧图像。当所述第一帧图像和所述第二帧图像相同时，丟弃所述第二帧图像，从而节约存储资源。直到获得与第一帧图像内容不同的第 i 帧图像。在此，假设第一帧图像和第二帧图像不同。

步骤 25、緩存所述第一帧图像、所述第二帧图像。

步骤 26、获取视频源图像的第三帧图像。

步骤 27、识别所述第三帧图像和所述第一帧图像是否相同。当所述第三帧图像和所述第一帧图像不同时，緩存所述第三帧图像。若相同，丟弃所述第三帧图像，获取第四帧图像。在此假设第三帧图像和第一帧图像不同，緩存所述第三帧图像。识别所述第四帧图像和所述第二帧图像是否相同。若相同，则丟弃第四帧图像，直到收到与第二帧图像不同内容的图像帧，假设此时为第 m帧，緩存所述第 m帧图像。不断重复直至该视频源图像接收完毕。

步骤 28、将所述緩存的图像发送到显示设备 A和显示设备 B上进行显示。在实施例三的图像显示处理方法中，假设有显示设备、显示设备 B和显示设备 C, 对接收到的图像帧是按照先显示设备 A显示、后显示设备 B、再显示设备 C显示的顺序发送以进行显示。如图 3所示，本发明实施例三的图像显示处理方法包括：

步骤 31、获取视频源图像的第一帧图像。

步骤 32、获取视频源图像的第二帧图像。

步骤 33、识别所述第一帧图像和所述第二帧图像是否相同。

在此可釆用实施例一中描述的任一方式和任意方式的组合进行识别。步骤 34、当所述第一帧图像和所述第二帧图像不同时，緩存所述第一帧图像和第二帧图像。当所述第一帧图像和所述第二帧图像相同时，丟弃所述第二帧图像，从而节约存储资源。直到获得与第一帧图像内容不同的第 i 帧图像。在此，假设第一帧图像和第二帧图像不同。

步骤 35、获取视频源图像的第三帧图像。

步骤 36、识别所述第三帧图像和所述第二帧图像是否相同。当所述第三帧图像和所述第二帧图像不同时，緩存所述第三帧图像。若相同，丟弃所述第三帧图像，获取第四帧图像。在此假设第三帧图像和第二帧图像相同。识别所述第四帧图像和所述第二帧图像是否相同。若相同，则丟弃第四帧图像，直到收到与第二帧图像不同内容的图像帧，假设此时为第 m帧图像与第二帧图像不同。緩存所述第 m帧图像。

步骤 37、获取视频源图像的第 m+1帧图像。

步骤 38、识别所述第 m+1帧图像和所述第一帧图像是否相同。当所述第 m+1帧图像和所述第一帧图像不同时，緩存所述第 m+1帧图像。若相同，丟弃所述第 m+1帧图像，获取第 m+2帧图像。在此假设第 m+1帧图像和第一帧图像不同，緩存所述第 m+1帧图像。

获取第 m+2帧图像，识别所述第 m+2帧图像和所述第二帧图像是否相同。若相同，则丟弃第 m+2 帧图像，直到收到与第二帧图像不同内容的图像帧，假设此时为第 m+n帧图像和第二帧图像不同，緩存所述第 m+n帧图像。

步骤 39、获取视频源图像的第 m+n+1帧图像。

步骤 310、识别所述第 m+n+1帧图像和所述第三帧图像是否相同。当所述第 m+n+1帧图像和所述第三帧图像不同时，緩存所述第 m+n+1 帧图像。若相同，丟弃所述第 m+n+1帧图像，获取第 m+n+2帧图像。在此假设第 m+n+1帧图像和第三帧图像不同，緩存所述第 m+n+1帧图像。

不断重复直至该视频源图像接收完毕。

步骤 31 1、将緩存的图像发送到显示设备、显示设备^ 显示设备 C上进行显示。

由上可以看出，利用本发明实施例二和三的方法，满足了用户在不同的显示设备上观看同一视频源图像不同内容的图像的要求，提高了用户使用视频会议系统时的体验。

如图 4所示，本发明实施例还提供了一种图像显示处理装置，包括：图像获取单元 41 , 用于获取视频源图像的各帧图像；图像识别单元 42 , 用于识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同；图像緩存单元 43 , 用于当所述当前帧图像和所述上一相关帧图像不同时，緩存所述当前帧图像和所述上一相关帧图像；图像显示处理单元 44 , 用于将所述緩存的图像分别发送到至少两台显示设备上进行显示。

根据前述方法实施例的描述，所述图像识别单元 42可包括：内容检测模块，用于检测所述当前帧图像和所述上一相关帧图像内容之间的相似度；图像识别模块，用于当所述相似度小于预设阔值时，确定所述当前帧图像和所述上一相关帧图像不同，否则，确定所述当前帧图像和所述上一相关帧图像相同。

或者，所述图像识别单元 42可包括：标识信息获取模块，用于获取所述当前帧图像的标识信息和所述上一相关帧图像的标识信息；图像识别模块，用于当所述当前帧图像的标识信息和所述上一相关帧图像的标识信息相同时，确定所述当前帧图像和所述上一相关帧图像相同，否则，确定所述当前帧图像和所述上一相关帧图像不同。

或者，所述图像识别单元 42可包括：无效帧检测模块，用于检测所述当前帧图像和所述上一相关帧图像之间是否有无效帧图像；图像识别模块，用于当所述当前帧图像和所述上一相关帧图像之间有无效帧图像时，确定所述当前帧图像和所述上一相关帧图像不同，否则，确定所述当前帧图像和所述上一相关帧图像相同。

此外，为了节约系统存储资源，所述图像显示处理单元 44还用于当所述当前帧图像和所述上一相关帧图像相同时，丟弃所述当前帧图像。

为了降低对系统带宽的要求，如图 5 所示，所述装置还包括：图像存储单元 45 , 用于存储所述视频源图像的各帧图像；信息接收单元 46 , 用于接收视频源图像中各帧图像的标识信息。此时，所述图像获取单元 41具体用于根据所述标识信息由所述图像存储单元获取所述视频源图像的各帧图像。

由上可以看出，利用本发明实施例四的装置，当前帧图像和所述上一相关帧图像不同时，能够将緩存的图像发送到至少两台显示设备上进行显示，也就是说当前帧图像和所述上一相关帧图像不同时，至少两台显示设备上能同时显示该视频源图像的不同帧的图像，从而满足了用户在不同的显示设备上观看同一视频源图像不同内容的图像的要求，提高了用户使用视频会议系统时的体验。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体（ Read-Only Memory, ROM )或随机存储记忆体 ( Random Acces s Memory, RAM )等。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims

权利要求书

1、一种图像显示处理方法，其特征在于，包括：

获取视频源图像的各帧图像；

2、根据权利要求 1所述的方法，其特征在于，所述识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同包括：检测所述当前帧图像和所述上一相关帧图像内容之间的相似度，当所述相似度小于预设阔值时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同；或

获取所述当前帧图像的标识信息和所述上一相关帧图像的标识信息，当所述当前帧图像的标识信息和所述上一相关帧图像的标识信息相同时，所述当前帧图像和所述上一相关帧图像相同，否则，所述当前帧图像和所述上一相关帧图像不同；或

检测所述当前帧图像和所述上一相关帧图像之间是否有无效帧图像，当所述当前帧图像和所述上一相关帧图像之间有无效帧图像时，所述当前帧图像和所述上一相关帧图像不同，否则，所述当前帧图像和所述上一相关帧图像相同。

3、根据权利要求 1或 2所述的方法，其特征在于，所述方法还包括：当所述当前帧图像和所述上一相关帧图像相同时，丟弃所述当前帧图像。

4、根据权利要求 1所述的方法，其特征在于，在所述获取视频源图像的各帧图像前，所述方法还包括：

存储所述视频源图像的各帧图像；

接收视频源图像中各帧图像的标识信息；

所述获取视频源图像的各帧图像包括：根据所述标识信息获取所述视频源图像的各帧图像。

5、一种图像显示处理装置，其特征在于，包括：

图像获取单元，用于获取视频源图像的各帧图像；

图像识别单元，用于识别所述视频源图像的各帧图像中当前帧图像和所述当前帧图像的上一相关帧图像是否相同；

6、根据权利要求 5所述的装置，其特征在于，所述图像识别单元包括：内容检测模块，用于检测所述当前帧图像和所述上一相关帧图像内容之间的相似度；

图像识别模块，用于当所述相似度小于预设阔值时，确定所述当前帧图像和所述上一相关帧图像不同，否则，确定所述当前帧图像和所述上一相关帧图像相同。

7、根据权利要求 5所述的装置，其特征在于，所述图像识别单元包括：标识信息获取模块，用于获取所述当前帧图像的标识信息和所述上一相关帧图像的标识信息；

图像识别模块，用于当所述当前帧图像的标识信息和所述上一相关帧图像的标识信息相同时，确定所述当前帧图像和所述上一相关帧图像相同，否则，确定所述当前帧图像和所述上一相关帧图像不同。

8、根据权利要求 5所述的装置，其特征在于，所述图像识别单元包括：无效帧检测模块，用于检测所述当前帧图像和所述上一相关帧图像之间是否有无效帧图像；

图像识别模块，用于当所述当前帧图像和所述上一相关帧图像之间有无效帧图像时，确定所述当前帧图像和所述上一相关帧图像不同，否则，确定所述当前帧图像和所述上一相关帧图像相同。

9、根据权利要求 5-8任一所述的装置，其特征在于，所述图像显示处理单元还用于当所述当前帧图像和所述上一相关帧图像相同时，丟弃所述当前帧图像。

10、根据权利要求 9所述的装置，其特征在于，所述装置还包括：图像存储单元，用于存储所述视频源图像的各帧图像；

信息接收单元，用于接收视频源图像中各帧图像的标识信息；

所述图像获取单元具体用于根据所述标识信息由所述图像存储单元获取所述视频源图像的各帧图像。