CN109429037A - 一种图像处理方法、装置、设备及系统 - Google Patents

Abstract

本发明实施例提供了一种图像处理方法、装置、设备及系统，方法包括：先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

Description

一种图像处理方法、装置、设备及系统

技术领域

本发明涉及视频监控技术领域，特别是涉及一种图像处理方法、装置、设备及系统。

背景技术

在视频监控过程中，通常需要将多路视频显示在同一画面，这样便可以对多个场景同时进行监控。现有方案中，通常按照各路视频所展现场景的位置关系，对各路视频进行拼接显示。

具体的，可以根据各台摄像机的位置关系，在显示设备中为各台摄像机划定一个显示区域，这些显示区域构成一个完整的显示窗口。对于各台摄像机来说，其采集的视频在其对应的显示区域中播放，这样，显示窗口中显示的即为各路视频的拼接画面。

但是，对于显示窗口来说，将多路视频在该显示窗口的各个显示区域中显示，各个显示区域之间会存在拼接缝隙(比如，黑线等)，显示效果较差。

发明内容

本发明实施例的目的在于提供一种图像处理方法、装置、设备及系统，以提高显示效果。

为达到上述目的，本发明实施例提供了一种图像处理方法，包括：

获取多路待拼接视频图像；

针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；

将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；

将所述总显示表面中的视频图像在显示窗口中进行显示。

可选的，所述针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面，可以包括：

确定每路待拼接视频图像的分辨率；

针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

可选的，在所述将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面之前，还可以包括：

计算所述多路待拼接视频图像的分辨率之和；

获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和。

可选的，所述将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，可以包括：

根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；

针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

可选的，在所述根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置之前，还可以包括：

获取采集所述多路待拼接视频图像的每台采集设备的位置关系，作为所述多路待拼接视频图像的位置关系；

或者，接收位置设定指令，读取所述位置设定指令中的所述多路待拼接视频图像的位置关系。

可选的，所述获取多路待拼接视频图像，可以包括：

接收一个数据包，对所述数据包进行解码处理，得到同一时刻的多路待拼接视频图像；

所述方法还可以包括：

读取所述数据包中包含的所述同一时刻的多路待拼接视频图像的位置关系；

所述根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置，可以包括：

根据所读取到的位置关系，确定每个子显示表面对应到总显示表面中的位置。

可选的，在将所述总显示表面中的视频图像在显示窗口中进行显示之后，还可以包括：

接收窗口调整指令；

读取所述窗口调整指令中的分辨率信息；

基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；

在所述显示窗口中显示所述调整后的图像。

为达到上述目的，本发明实施例还提供了一种图像处理装置，包括：

第一获取模块，用于获取多路待拼接视频图像；

第一缓存模块，用于针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；

第二缓存模块，用于将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；

第一显示模块，用于将所述总显示表面中的视频图像在显示窗口中进行显示。

可选的，所述第一缓存模块，具体可以用于：

确定每路待拼接视频图像的分辨率；

针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

可选的，所述装置还可以包括：

计算模块，用于计算所述多路待拼接视频图像的分辨率之和；

第二获取模块，用于获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和。

可选的，所述第二缓存模块，可以包括：

确定子模块，用于根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；

缓存子模块，用于针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

可选的，所述装置还可以包括：

第三获取模块，用于获取采集所述多路待拼接视频图像的每台采集设备的位置关系，作为所述多路待拼接视频图像的位置关系；

或者，第一接收模块，用于接收位置设定指令，读取所述位置设定指令中的所述多路待拼接视频图像的位置关系。

可选的，所述第一获取模块，具体可以用于：

接收一个数据包，对所述数据包进行解码处理，得到同一时刻的多路待拼接视频图像；

所述装置还可以包括：

第一读取模块，用于读取所述数据包中包含的所述同一时刻的多路待拼接视频图像的位置关系；

所述确定子模块，具体可以用于：

根据所述第二读取模块读取到的位置关系，确定每个子显示表面对应到所述总显示表面中的位置。

可选的，所述装置还可以包括：

第二接收模块，用于接收窗口调整指令；

第二读取模块，用于读取所述窗口调整指令中的分辨率信息；

调整模块，用于基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；

第二显示模块，用于在所述显示窗口中显示所述调整后的图像。

为达到上述目的，本发明实施例还提供了一种电子设备，包括处理器和存储器；其中，

存储器，用于存放计算机程序；

处理器，用于执行存储器上所存放的程序时，实现上述任一种图像处理方法。

为达到上述目的，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一种图像处理方法。

为达到上述目的，本发明实施例还提供了一种图像处理系统，该系统包括：服务器；

所述服务器，用于获取多路待拼接视频图像；针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；将所述总显示表面中的视频图像在显示器中进行显示。

可选的，该服务器还可以实现上述任一种图像处理方法。

可选的，该系统还可以包括：多台采集设备；

每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述服务器。

可选的，该系统还可以包括：多台采集设备和处理设备；

每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述处理设备；

所述处理设备，用于对接收到的多路待拼接视频图像进行同步处理，并将同步处理后的多路待拼接视频图像发送至所述服务器。

应用本发明所示实施例，先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种图像处理方法的流程示意图；

图2为本发明实施例提供的一种应用场景示意图；

图3为本发明实施例提供的一种确定每个子surface在总surface中的位置示意图；

图4为本发明实施例提供的一种总surface中图像拼接示意图；

图5为本发明实施例提供的另一种总surface中图像拼接示意图；

图6为本发明实施例提供的另两种总surface中图像拼接示意图；

图7为现有技术拼接效果示意图；

图8为本发明实施例的拼接效果示意图；

图9为本发明实施例提供的一种图像处理装置的结构示意图；

图10为本发明实施例提供的一种电子设备的结构示意图；

图11为本发明实施例提供的一种图像处理系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为了解决上述技术问题，本发明实施例提供了一种图像处理方法、装置、设备及系统。该方法及装置可以应用于具有图像处理功能的采集设备，或者与采集设备通信连接的服务器，或者，与采集设备通信连接的显示设备，或者，也可以应用于各种电子设备，具体不做限定。

下面首先对本发明实施例提供的一种图像处理方法进行详细说明。

图1为本发明实施例提供的一种图像处理方法的流程示意图，包括：

S101：获取多路待拼接视频图像。

S102：针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面。

S103：将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，该总显示表面的分辨率为该多路待拼接视频图像的分辨率之和。

S104：将该总显示表面中的视频图像在显示窗口中进行显示。

应用本发明所示实施例，先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

下面对图1所示实施进行详细说明：

S101：获取多路待拼接视频图像。

如果本实施例的执行主体为采集设备，则采集设备可以将自身采集到的视频图像作为一路待拼接视频图像，再接收其他采集设备发送的视频图像，这样，执行主体便获取到多路待拼接视频图像。

如果执行主体为其他电子设备，执行主体可以与多台采集设备通信连接，接收该多台采集设备发送的多路视频图像，作为待拼接视频图像。

或者，采集设备采集视频图像后，可以先将采集到的视频图像发送至一处理设备，该处理设备先对接收到的各路视频图像进行处理，比如，裁剪、或者其他处理，该处理设备再将处理后的各路视频图像发送至执行主体，这样，执行主体接收到多路处理后的视频图像，作为待拼接视频图像。

为了方便描述，下面的图像处理方法实施例中以执行主体为服务器为例进行说明。

举例来说，如图2所示，各台采集设备针对同一场景X进行图像采集，采集设备1采集到第一路视频图像，采集设备2采集到第二路视频图像，采集设备3采集到第三路视频图像，采集设备4采集到第四路视频图像，这四路视频图像存在重叠区域(重叠区域1，重叠区域2，重叠区域3)。

这四台采集设备的位置可以认为是固定的，因此，重叠区域的位置也是固定的。作为一种实施方式，可以预先确定重叠区域的位置信息，将该位置信息发送给采集设备，采集设备根据该位置信息，对自身采集到的图像进行裁剪处理，并将裁剪后的图像发送至服务器，这样，服务器接收到的多路待拼接视频图像为不存在重叠区域的视频图像。

比如，可以将重叠区域1的位置信息发送给采集设备1，采集设备1在自身采集的图像中去除该重叠区域1；将重叠区域2的位置信息发送给采集设备2，采集设备2在自身采集的图像中去除该重叠区域2；将重叠区域3的位置信息发送给采集设备3，采集设备3在自身采集的图像中去除该重叠区域3；这样，这四台采集设备采集的图像便可以拼接成一幅完整的且不存在重叠区域的图像。每台采集设备将裁剪后的图像、或者未裁剪的图像(采集设备4未对图像进行裁剪)发送至服务器。

或者，也可以将重叠区域1的位置信息发送给采集设备2，将重叠区域2的位置信息发送给采集设备3，将重叠区域3的位置信息发送给采集设备1，发送方式、裁剪方式有多种，具体不做限定。

作为另一种实施方式，这四台采集设备可以将采集到的四路视频图像发送至一处理设备，该处理设备中还存储有各重叠区域的位置信息，这样，该处理设备可以根据该位置信息，对这四路视频图像进行裁剪处理，使得这四台采集设备采集的图像可拼接成一幅完整的且不存在重叠区域的图像。该处理设备将这四路可拼接成完整图像的视频图像发送至服务器。

作为一种实施方式，该处理设备可以将这四路视频图像中、同一时刻对应的四张视频图像打包成一个数据包，并将该数据包发送至服务器。这样，服务器接收到的每个数据包中包含的都是同一时刻对应的多路待拼接视频图像。

具体的，服务器可以接收一个数据包，对该数据包进行解码处理，得到同一时刻的多路待拼接视频图像。

S102：针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面。

本实施例中的显示表面即为surface，也可以理解为缓存区域，该surface与显卡的显存区域存在对应关系。需要说明的是，S102中各路待拼接视频图像缓存到的子surface互不相同，也就是说，每个子surface中缓存一路待拼接视频图像。在本实施例中，将缓存一路视频图像的surface称为子surface，将缓存多路视频图像的surface称为总surface。

具体的，S102可以包括：

确定每路待拼接视频图像的分辨率；针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

延续上述例子，服务器针对接收到的四路视频图像创建四个surface，一路视频图像缓存至一个surface，surface的分辨率与其缓存的的视频图像的分辨率相同。

一般来说，同一台采集设备采集的视频图像的分辨率通常是不变的，因此，创建一路视频图像对应的子surface后，该子surface可以缓存该路视频图像中的每张视频图像。当检测到该路视频图像的分辨率发生变化后，释放该路视频图像对应的子surface，再针对变化后的该路视频图像，重新创建一个子surface。

作为一种实施方式，S101获取的多路待拼接视频图像的分辨率相同。举例来说，上述处理设备可以将四路视频图像调整为同一分辨率，然后将调整后的四路视频图像发送至服务器。

S103：将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，该总显示表面的分辨率为该多路待拼接视频图像的分辨率之和。

作为一种实施方式，在S103之前可以先计算该多路待拼接视频图像的分辨率之和，获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和；然后再执行S103，也就是将每个子显示表面中的待拼接视频图像缓存至所获取的该总显示表面。

由上述内容可知，该多路待拼接视频图像的分辨率之和，与各个子surface的分辨率之和相等，因此，S103可以计算该多路待拼接视频图像的分辨率之和，也可以计算各个子surface的分辨率之和。创建一个总surface，总surface的分辨率为计算得到的分辨率之和。

如上所述，同一台采集设备采集的视频图像的分辨率通常是不变的，也就是说，计算得到的分辨率之和通常也是不变的。因此，创建一个总surface后，该总surface可以缓存该多路视频图像中的每张视频图像。当检测到该分辨率之和发生变化后，释放该总surface，再针对变化后的分辨率之和，重新创建一个总surface。

S104：将该总显示表面中的视频图像在显示窗口中进行显示。

上述显示窗口可以是显示器上的一个显示窗口。

作为一种实施方式，S104可以包括：根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

作为一种实施方式，该多路待拼接视频图像的位置关系可以与采集该多路视频图像的采集设备的位置关系一致。比如，图2中，采集设备1位于最左侧，采集设备1采集的第一路视频图像所在的子surface对应到总surface中的位置可以为总surface的最左侧。采集设备2位于采集设备1的右侧，采集设备2采集的第二路视频图像所在的子surface对应到总surface中的位置，可以位于第一路视频图像所在子surface所对应位置(最左侧)的右侧……以此类推，不再赘述，总surface可以如图3所示。

如图3所示，将每个子surface中的一路视频图像缓存至该总surface中的相应位置(箭头指向的位置)处。这里所说的缓存可以理解为，将子surface中的图像复制到总surface中的相应位置处。

或者，作为另一种实施方式，用户也可以对各路视频图像在总surface中的位置进行设定。具体的，服务器可以接收位置设定指令，读取该位置设定指令中的该多路待拼接视频图像的位置关系，并根据所读取的位置关系，确定每个子显示表面对应到该总显示表面中的位置。

比如，该位置设定指令中可以包含如下信息：按照各路视频的序号，对各路视频纵向拼接。比如，图2中，每路视频对应一序号(第一路、第二路、第三路、第四路)，则总surface可以如图4所示。

或者，该位置设定指令中可以包含如下信息：按照各路视频的序号，对各路视频横向拼接。比如，图2中，每路视频对应一序号(第一路、第二路、第三路、第四路)，则总surface可以如图5所示。

再或者，该总surface还可以如图6所示，用户可以根据实际需求设定各路视频图像在总surface中的位置。

在上述一种实施方式中，处理设备将同一时刻的多路待拼接视频图像打包成一个数据包，可选的，该数据包中还可以包含该多路待拼接视频图像的位置关系，这样，服务器可以从接收到的数据包中读取该位置关系，并根据该位置关系，确定每个子显示表面对应到所述总显示表面中的位置。

或者，根据前面内容描述，针对同一场景进行图像采集的各台采集设备的位置可以是固定的，比如图2中的四台采集设备的位置可以是固定的，因此，处理设备将这四台采集设备采集的、同一时刻的四路视频图像打包发送给服务器时，可以仅在发送的第一个数据包中添加这四台采集设备的位置关系。

举例来说，总surface中的视频图像可以为YUV(一种颜色编码方法，Y表示亮度信息，U和Y表示两种色差信号)格式的数据，可以将该YUV数据进行GPU(Graphics ProcessingUnit，图形处理器)渲染，在显示窗口中显示渲染后的视频图像。

这样，对于显示窗口来说，显示的是一个surface中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

如果显示窗口按照显示多路视频图像的方式，将多路视频在该显示窗口的各个显示区域中显示，显示效果如图7所示，存在明显的拼接黑线。而如果利用本发明实施例，显示窗口显示一个总surface中的视频图像，显示效果如图8所示，不存在拼接黑线，显示效果较佳。

在S107之后，服务器还可以接收窗口调整指令；读取所述窗口调整指令中的分辨率信息；基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；在所述显示窗口中显示所述调整后的图像。

需要说明的是，这里所说的“基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整”，是指对显示窗口中的视频图像的分辨率进行调整，而不是对总surface中的视频图像进行调整；对显示窗口中的视频图像的分辨率进行调整，可以由设备的底层驱动来执行，具体不做限定。

可以理解，显示窗口的分辨率是可调节的。而在本实施例中，显示窗口中显示的是一个总surface中的视频图像，可以对该视频图像整体进行放大、缩小，相当于对单张图像进行放大、缩小，不会产生拼接缝隙，进一步提高了显示效果。

下面举例说明一种可选的实施方式：

1、预先设定每台采集设备对应的裁剪区域的位置信息，使得每台采集设备对自身采集的图像进行裁剪，得到待拼接图像。

以图2为例来说，可以设定采集设备1对应的裁剪区域的位置信息为重叠区域1的位置信息，设定采集设备2对应的裁剪区域的位置信息为重叠区域2的位置信息，设定采集设备3对应的裁剪区域的位置信息为重叠区域3的位置信息。

或者，也可以设定采集设备2对应的裁剪区域的位置信息为重叠区域1的位置信息，设定采集设备3对应的裁剪区域的位置信息为重叠区域2的位置信息，设定采集设备4对应的裁剪区域的位置信息为重叠区域3的位置信息。具体设定情况不做限定。

采集设备根据自身设定的裁剪区域的位置信息，对自身采集的图像进行裁剪，得到待拼接图像。如果采集设备中未设定裁剪区域的位置信息，则该采集设备不进行裁剪处理，直接将采集到的图像作为待拼接图像。

2、每台采集设备将自身的待拼接图像发送至一处理设备，该处理设备对接收到的多路待拼接图像进行编码处理，并将编码后的图像封装成数据包发送至服务器。

本实施例并不对具体的编码协议、封装协议进行限定。

具体的，该处理设备可以将同一时刻对应的各张图像打包成一个数据包。或者，该处理设备还可以将每台采集设备的位置关系添加至该数据包。或者，针对固定的位置关系，该处理设备也可以仅在第一个数据包中添加该固定的位置关系。

3、服务器针对接收到的每个数据包，对该数据包进行解码处理，得到同一时刻的多路待拼接视频图像。

4、服务器针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面。

一般来说，同一台采集设备采集的视频图像的分辨率通常是不变的，因此，创建一路视频图像对应的子surface后，该子surface可以缓存该路视频图像中的每张视频图像。当检测到该路视频图像的分辨率发生变化后，释放该路视频图像对应的子surface，再针对变化后的该路视频图像，重新创建一个子surface。

5、服务器计算该多路待拼接视频图像的分辨率之和。

6、服务器获取一个总显示表面，该总显示表面的分辨率为该分辨率之和。

如上所述，同一台采集设备采集的视频图像的分辨率通常是不变的，也就是说，步骤5中计算得到的分辨率之和通常也是不变的。因此，创建一个总surface后，该总surface可以缓存该多路视频图像中的每张视频图像。当检测到该分辨率之和发生变化后，释放该总surface，再针对变化后的分辨率之和，重新创建一个总surface。

7、服务器根据预先获取的该多路待拼接视频图像的位置关系，确定每个子显示表面对应到该总显示表面中的位置。

该多路待拼接视频图像的位置关系可以来自于上述处理设备发送的数据包中，也可以来自于用户发送的位置设定指令中，具体不做限定。

8、服务器针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到该总显示表面中的位置。

9、服务器将该总显示表面中的视频图像在显示窗口中进行显示。

10、服务器接收窗口调整指令；读取该窗口调整指令中的分辨率信息；基于所读取的分辨率信息，对显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；在显示窗口中显示该调整后的图像。

应用本发明所示实施例，先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

与上述方法实施例相对应，本发明实施例还提供一种图像处理装置。

图9为本发明实施例提供的一种图像处理装置的结构示意图，包括：

第一获取模块901，用于获取多路待拼接视频图像；

第一缓存模块902，用于针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；

第二缓存模块903，用于将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；

第一显示模块904，用于将所述总显示表面中的视频图像在显示窗口中进行显示。

作为一种实施方式，第一缓存模块902，具体可以用于：

确定每路待拼接视频图像的分辨率；

针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

作为一种实施方式，所述装置还可以包括：计算模块和第二获取模块(图中未示出)，其中，

计算模块，用于计算所述多路待拼接视频图像的分辨率之和；

第二获取模块，用于获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和。

作为一种实施方式，第二缓存模块903，可以包括：确定子模块和缓存子模块(图中未示出)，其中，

确定子模块，用于根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；

缓存子模块，用于针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

作为一种实施方式，所述装置还可以包括：

第三获取模块(图中未示出)，用于获取采集所述多路待拼接视频图像的每台采集设备的位置关系，作为所述多路待拼接视频图像的位置关系；

或者，第一接收模块(图中未示出)，用于接收位置设定指令，读取所述位置设定指令中的所述多路待拼接视频图像的位置关系。

作为一种实施方式，第一获取模块901，具体可用于：

接收一个数据包，对所述数据包进行解码处理，得到同一时刻的多路待拼接视频图像；

所述装置还可以包括：

第一读取模块(图中未示出)，用于读取所述数据包中包含的所述同一时刻的多路待拼接视频图像的位置关系；

所述确定子模块，具体用于：

根据所述第二读取模块读取到的位置关系，确定每个子显示表面对应到所述总显示表面中的位置。

作为一种实施方式，所述装置还可以包括：第二接收模块、第二读取模块、调整模块和第二显示模块(图中未示出)，其中，

第二接收模块，用于接收窗口调整指令；

第二读取模块，用于读取所述窗口调整指令中的分辨率信息；

调整模块，用于基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；

第二显示模块，用于在所述显示窗口中显示所述调整后的图像。

应用本发明图9所示实施例，先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

本发明实施例还提供了一种电子设备，如图10所示，包括处理器1001和存储器1002，其中，

存储器1002，用于存放计算机程序；

处理器1001，用于执行存储器1002上所存放的程序时，实现上述任一种图像处理方法。

上述电子设备提到的存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。

上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一种图像处理方法。

应用本发明所示实施例，先将每路待拼接视频图像分别缓存至一个子显示表面，再将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面中；将该总显示表面中的视频图像在显示窗口中进行显示；这样，对于显示窗口来说，显示的是一个显示表面中的视频图像，相当于显示窗口对一路视频图像进行显示，不会按照显示多路视频图像的方式进行显示处理，因此，也就不会存在拼接缝隙，提高了显示效果。

本发明实施例还提供了一种图像处理系统，该系统可以包含服务器，该服务器可以用于执行上述任一种图像处理方法。

该服务器，可以用于获取多路待拼接视频图像；针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，其中，该总显示表面的分辨率为该多路待拼接视频图像的分辨率之和；将该总显示表面中的视频图像在显示器中进行显示。例如，将该总显示表面中的视频图像在该服务器的显示器的一个显示窗口中显示。

作为一种实施方式，该系统还可以包括：多台采集设备；每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述服务器。

作为一种实施方式，如图11所示，该系统还可以包括：多台采集设备和处理设备；

每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述处理设备；

所述处理设备，用于对接收到的多路待拼接视频图像进行同步处理，并将同步处理后的多路待拼接视频图像发送至所述服务器。

具体的，该同步处理可以包括：处理设备将这多路视频图像中、同一时刻对应的多张视频图像打包成一个数据包，并将该数据包发送至服务器。这样，服务器接收到的每个数据包中包含的都是同一时刻对应的多路待拼接视频图像。

处理设备还可以对这多路待拼接视频图像进行裁剪、编码、封装等处理，具体不做限定。

上述系统的其它细节参见上述方法和装置实施例，在此不再赘述。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于图9所示的图像处理装置实施例、图10所示的电子设备实施例、上述计算机可读存储介质实施例、以及图11所示的图像处理系统实施例而言，由于其基本相似于图1-8所示的图像处理方法实施例，所以描述的比较简单，相关之处参见图1-8所示的图像处理方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (18)

1.一种图像处理方法，其特征在于，包括：

获取多路待拼接视频图像；

针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；

将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；

将所述总显示表面中的视频图像在显示窗口中进行显示。

2.根据权利要求1所述的方法，其特征在于，所述针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面，包括：

确定每路待拼接视频图像的分辨率；

针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

3.根据权利要求1所述的方法，其特征在于，在所述将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面之前，还包括：

计算所述多路待拼接视频图像的分辨率之和；

获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和。

4.根据权利要求1所述的方法，其特征在于，所述将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，包括：

根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；

针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

5.根据权利要求4所述的方法，其特征在于，在所述根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置之前，还包括：

获取采集所述多路待拼接视频图像的每台采集设备的位置关系，作为所述多路待拼接视频图像的位置关系；

或者，接收位置设定指令，读取所述位置设定指令中的所述多路待拼接视频图像的位置关系。

6.根据权利要求4所述的方法，其特征在于，所述获取多路待拼接视频图像，包括：

接收一个数据包，对所述数据包进行解码处理，得到同一时刻的多路待拼接视频图像；

所述方法还包括：

读取所述数据包中包含的所述同一时刻的多路待拼接视频图像的位置关系；

所述根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置，包括：

根据所读取到的位置关系，确定每个子显示表面对应到总显示表面中的位置。

7.根据权利要求1所述的方法，其特征在于，在将所述总显示表面中的视频图像在显示窗口中进行显示之后，还包括：

接收窗口调整指令；

读取所述窗口调整指令中的分辨率信息；

基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；

在所述显示窗口中显示所述调整后的图像。

8.一种图像处理装置，其特征在于，包括：

第一获取模块，用于获取多路待拼接视频图像；

第一缓存模块，用于针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；

第二缓存模块，用于将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；

第一显示模块，用于将所述总显示表面中的视频图像在显示窗口中进行显示。

9.根据权利要求8所述的装置，其特征在于，所述第一缓存模块，具体用于：

确定每路待拼接视频图像的分辨率；

针对每路待拼接视频图像，获取该路待拼接视频图像对应的一个子显示表面，所述子显示表面的分辨率等于该路待拼接视频图像的分辨率。

10.根据权利要求8所述的装置，其特征在于，所述装置还包括：

计算模块，用于计算所述多路待拼接视频图像的分辨率之和；

第二获取模块，用于获取一个总显示表面，所述总显示表面的分辨率为所述分辨率之和。

11.根据权利要求8所述的装置，其特征在于，所述第二缓存模块，包括：

确定子模块，用于根据预先获取的所述多路待拼接视频图像的位置关系，确定每个子显示表面对应到总显示表面中的位置；

缓存子模块，用于针对每个子显示表面，将该子显示表面中的待拼接视频图像缓存至该子显示表面对应到所述总显示表面中的位置。

12.根据权利要求11所述的装置，其特征在于，所述装置还包括：

第三获取模块，用于获取采集所述多路待拼接视频图像的每台采集设备的位置关系，作为所述多路待拼接视频图像的位置关系；

或者，第一接收模块，用于接收位置设定指令，读取所述位置设定指令中的所述多路待拼接视频图像的位置关系。

13.根据权利要求11所述的装置，其特征在于，所述第一获取模块，具体用于：

接收一个数据包，对所述数据包进行解码处理，得到同一时刻的多路待拼接视频图像；

所述装置还包括：

第一读取模块，用于读取所述数据包中包含的所述同一时刻的多路待拼接视频图像的位置关系；

所述确定子模块，具体用于：

根据所述第二读取模块读取到的位置关系，确定每个子显示表面对应到所述总显示表面中的位置。

14.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第二接收模块，用于接收窗口调整指令；

第二读取模块，用于读取所述窗口调整指令中的分辨率信息；

调整模块，用于基于所读取的分辨率信息，对所述显示窗口中的视频图像的分辨率进行调整，得到调整后的图像；

第二显示模块，用于在所述显示窗口中显示所述调整后的图像。

15.一种电子设备，其特征在于，包括处理器和存储器；其中，

存储器，用于存放计算机程序；

处理器，用于执行存储器上所存放的程序时，实现权利要求1-7任一所述的方法步骤。

16.一种图像处理系统，其特征在于，包括：服务器；

所述服务器，用于获取多路待拼接视频图像；针对每路待拼接视频图像，将该路待拼接视频图像缓存至一个子显示表面；将每个子显示表面中的待拼接视频图像缓存至同一个总显示表面，所述总显示表面的分辨率为所述多路待拼接视频图像的分辨率之和；将所述总显示表面中的视频图像在显示器中进行显示。

17.根据权利要求16所述的系统，其特征在于，还包括：多台采集设备；

每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述服务器。

18.根据权利要求16所述的系统，其特征在于，还包括：多台采集设备和处理设备；

每台采集设备，用于采集一路待拼接视频图像，并将所述一路待拼接视频图像发送至所述处理设备；

所述处理设备，用于对接收到的多路待拼接视频图像进行同步处理，并将同步处理后的多路待拼接视频图像发送至所述服务器。