CN103167216B - 图像遮蔽处理方法及系统 - Google Patents

Abstract

本发明涉及一种图像遮蔽处理方法，包括：监控平台接收视频访问端发出的视频获取请求时，则经由IVM将该视频获取请求转发给IVU/IEU；IVU/IEU从监控平台获得对应的原始视频信息；IVU/IEU对原始视频信息进行背景图像和前景目标的抽离，并对前景目标进行图像语义分析；IVU/IEU将得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并识别是否需要图像遮蔽处理，是则IVU/IEU通过对原始视频信息中的前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；IVU/IEU经由监控平台向视频访问端返回图像遮蔽处理后的视频信息。本发明利用智能对象识别技术自动分析理解视频画面中的内容，对目标进行分析判断后进行图像遮蔽，降低人工工作量。

Description

图像遮蔽处理方法及系统

技术领域

本发明涉及智能图像识别处理应用技术领域，尤其涉及一种图像遮蔽处理方法及系统。

背景技术

随着视频监控应用技术的大力发展，视频监控的区域及对象涵盖范围越来越广泛，同时随着社会信息化程度的提升，监控视频应用范围也将会变得更加广泛。随之而来的公众隐私问题也得到了人们的关注，为避免监控内容中涉及到公众隐私内容，目前常用的方法是通过人工区分人或物，并在视频中的对应区域进行遮蔽等处理，而这一处理过程需要对海量的监控视频进行人工辨别，因此存在着许多弊端，例如：1)工作量巨大，成本较高；2)不能在图像录制时一次性处理，需要再加工；3)应用需求不同，针对不同遮蔽对象需要进行重新处理，费时费力等。

发明内容

本发明的目的是提出一种图像遮蔽处理方法及系统，能够利用智能对象识别技术自动分析理解视频画面中的内容，对目标进行分析判断后进行图像遮蔽，降低人工工作量。

为实现上述目的，本发明提供了一种图像遮蔽处理方法，包括：

监控平台接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则经由智能图像管理服务器将该视频获取请求转发给智能图像识别单元/智能遮蔽单元；

所述智能图像识别单元/智能遮蔽单元根据所述视频获取请求从所述监控平台获得对应的原始视频信息；

所述智能图像识别单元/智能遮蔽单元对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析；

所述智能图像识别单元/智能遮蔽单元将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

如果需要图像遮蔽处理，则所述智能图像识别单元/智能遮蔽单元通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

所述智能图像识别单元/智能遮蔽单元经由所述监控平台向所述视频访问端返回所述图像遮蔽处理后的视频信息。

为实现上述目的，本发明提供了一种图像遮蔽处理系统，包括：

监控平台，用于接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则经由智能图像管理服务器转发该视频获取请求，以及将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

智能图像识别单元/智能遮蔽单元，用于根据所述智能图像管理服务器转发的视频获取请求从所述监控平台获得对应的原始视频信息，对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析，以及将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息，以及向所述监控平台返回所述图像遮蔽处理后的视频信息。

为实现上述目的，本发明还提供了一种图像遮蔽处理方法，包括

监控平台接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则将该视频获取请求转发给前端智能单元；

所述前端智能单元根据所述视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息；

所述前端智能单元对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析；

所述前端智能单元将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

如果需要图像遮蔽处理，则所述前端智能单元通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

所述前端智能单元经由所述监控平台向所述视频访问端返回所述图像遮蔽处理后的视频信息。

为实现上述目的，本发明还提供了一种图像遮蔽处理系统，包括：

监控平台，用于接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则转发该视频获取请求，以及将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

前端智能单元，用于根据所述监控平台转发的视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息，对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析，以及将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息，以及向所述监控平台返回所述图像遮蔽处理后的视频信息。

基于上述技术方案，本发明在视频访问端访问需要遮蔽处理的实时或已录制的视频信息时，由智能图像识别单元/IEU或前端智能单元对视频信息进行图像语义分析，根据得到的语义描述来识别视频信息中的敏感信息，并对该敏感信息进行图像遮蔽的屏蔽处理，从而为视频访问端提供处理后的视频信息，进而实现了公众隐私的保护，同时相比于人工辨别和遮蔽处理效率更高，且节省大量的人力物力。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1为应用本发明图像遮蔽处理系统的一实施例的场景示意图。

图2为应用本发明图像遮蔽处理系统的另一实施例的场景示意图。

图3为在图1应用场景下的图像遮蔽处理方法的一实施例的流程示意图。

图4为在图1应用场景下的图像遮蔽处理方法的另一实施例的流程示意图。

图5为在图2应用场景下的图像遮蔽处理方法的一实施例的流程示意图。

图6为在图2应用场景下的图像遮蔽处理方法的另一实施例的流程示意图。

图7为在图1应用场景下的图像遮蔽处理系统的一实施例的结构示意图。

图8为在图1应用场景下的图像遮蔽处理系统的另一实施例的结构示意图。

图9为在图2应用场景下的图像遮蔽处理系统的一实施例的结构示意图。

图10为在图2应用场景下的图像遮蔽处理系统的另一实施例的结构示意图。

具体实施方式

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

如图1所示，为应用本发明图像遮蔽处理系统的一实施例的场景示意图。在本实施例的应用场景中，图像遮蔽处理系统包括监控平台1和智能图像识别单元(IntelligentVideo Unit，简称IVU)/智能遮蔽单元(Intelliget Envelop Unit，简称IEU)2，除此之外场景中还包括智能图像管理服务器3(Intelligent Video Management，简称IVM)、前端单元4(Peripheral Unit，简称PU)和客户端单元5(Client Unit，简称CU)。其中，IVM 3、IVU/IEU2、PU 4和CU 5均与监控平台1相连，IVM 3与IVU/IEU 2相连。

监控平台1可以负责设备注册和管理、控制信令转发、视频信息转发、客户端接入等功能，且监控平台1还可以具备一定的存储空间，用来保存原始视频信息或处理后的视频信息。具体来说，监控平台1可以负责接收视频访问端(即CU 5)发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息，并且可以通过IVM 3向IVU/IEU 2转发该视频获取请求。监控平台1还负责在从IVU/IEU 2获得了图像遮蔽处理后的视频信息后，将处理后的视频信息返回给视频访问端。

IVM 3是中心服务平台侧网元，可实现对智能能力的管理，并可以对用户智能识别的策略进行管理等。当监控平台1向IVM 3转发视频获取请求时，IVM 3可以根据其管理的智能能力信息触发IVU/IEU2，将该视频获取请求转发给IVU/IEU 2，并使其根据预设的用户智能识别策略对视频信息进行分析以及智能遮蔽处理等操作。

IVU/IEU 2负责根据IVM 3转发的视频获取请求从监控平台1获得对应的原始视频信息，对原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析。图像语义分析主要是将前景目标的原始数据如尺寸、速度、轨迹、分类、目标颜色、出现时间等等提取出来，形成对目标的语法描述，现有技术中已有语义感知分析实现案例，例如人脸识别、车牌识别等技术，由于具体的图像语义分析并非本发明实施例的重点，采用现有的图像语义分析方法能够实现本发明实施例的技术目的，因此就不再对图像语义分析方法的具体实现进行详述了。

IVU/IEU 2还负责将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息。当获得了图像遮蔽处理后的视频信息后，IVU/IEU 2还负责向监控平台1返回所述图像遮蔽处理后的视频信息。IVU/IEU的表示方式在本发明中表示IVU或IEU作为单独设备，也包括在这两种设备上分工实现功能的情况，以及这两种设备合设在一起的情况。

PU 4主要负责采集视频信息，并传送给监控平台1，其通常包括有视频服务器、摄像机等前端设备。

在本应用场景中，视频信息的智能处理由平台侧的IVU/IEU 2集中完成，无需对前端设备进行改造。对于某些应用场景来说，例如前端设备具有较好的软硬件能力，且存在大量的视频信息需要处理，此时如果靠平台侧进行集中的智能处理则可能会造成系统资源的大量占用，从而带来降低处理效率等负面影响。为了在这些应用场景中能够更好的应用本发明的发明构思，则可以将智能处理功能分散到各个具有一定软硬件能力的前端智能单元中，如图2所示，为另一种应用本发明图像遮蔽处理系统的另一实施例的场景示意图。

与图1应用场景相比，图2所示的应用场景中增加了具有智能处理能力的PU，即前端智能单元6(Peripheral Intelligent Unit，简称PIU)。在本应用场景中，监控平台1负责在接收视频访问端(即CU5)发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，直接向PIU 6转发该视频获取请求。当从PIU 6获得了处理后的视频信息时，监控平台1还负责将获得的图像遮蔽处理后的视频信息返回给所述视频访问端。

PIU 6负责根据监控平台1转发的视频获取请求从监控平台1或PIU 6自身获得对应的原始视频信息，对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析。PIU 6还负责将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息。在得到了图像遮蔽处理后的视频信息后，PIU 6还负责向监控平台1返回所述图像遮蔽处理后的视频信息。

在本应用场景中，由于将智能处理过程分散到各个PIU中，因此不会给平台侧带来较大的处理压力，进而带来处理效率的提高。在现有的视频监控系统改造中，只需对部分PU进行改造，而无需对所有PU均进行改造。监控平台可以根据各个PIU的处理能力、忙闲状态、地理位置等因素选择适合的PIU执行智能处理，例如选择目前较空闲的PIU执行智能图像遮蔽处理，或者根据被请求的PU所录制的视频信息选择对应的或相邻的PIU等。

本发明不仅适用于上述图1和图2中的应用场景，还适用于更复杂的应用场景，此时可以由监控平台选择IVU/IEU以及各个PIU进行智能处理，例如优先采用IVU/IEU进行智能处理，在可能影响系统性能的情况下，继续选择PIU来进行智能处理，分担平台侧的处理压力等。

下面分别针对于前面提到的几种应用场景来对本发明的几种方法实施例进行详细说明。

如图3所示，为在图1应用场景下的图像遮蔽处理方法的一实施例的流程示意图。在本实施例中，图像遮蔽处理流程包括：

步骤101、监控平台接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息；

步骤102、监控平台经由IVM将该视频获取请求转发给IVU/IEU；

步骤103、IVU/IEU根据视频获取请求从监控平台获得对应的原始视频信息；

步骤104、IVU/IEU对原始视频信息进行背景图像和前景目标的抽离，并对前景目标进行图像语义分析；

步骤105、IVU/IEU将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配；

步骤106、根据匹配结果来识别是否需要对原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则执行步骤107，否则执行步骤109；

步骤107、IVU/IEU通过对原始视频信息中的前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

步骤108、IVU/IEU经由监控平台向视频访问端返回图像遮蔽处理后的视频信息；

步骤109、IVU/IEU通知监控平台将原始视频信息返回给视频访问端。

在本实施例中，监控平台将视频获取请求通过IVM转发给IVU/IEU，而IVU/IEU从监控平台获得相应的视频信息，这里的视频信息可以是PU实时获得并传送给监控平台的视频流，也可以是在监控平台中保存的已录制的视频文件，或者是监控平台从PU中获取的已录制的视频文件等。

IVU/IEU可以利用现有的计算机基于图像分割与识别技术对原始视频进行背景图像和前景目标的抽离，以此来避免背景图像对分析过程的干扰，前景目标可能是人、车或标牌等具有一定的语义特征的图像，利用现有的智能图像识别技术对前景目标进行图像语义分析，获得该前景目标的目标语义描述信息，根据该目标语义描述信息可以获知人、车或标牌在场景中的存在。

在获得了目标语义描述信息后，IVU/IEU则基于本地保存的或IVM所提供的预设的遮蔽规则或遮蔽标准模型库来对所述目标语义描述信息进行匹配，例如某条遮蔽规则可以为如果图像中存在人脸的语义描述信息，则对该部分前景目标执行图像遮蔽处理等，或者判断是否存在与遮蔽标准模型库中的某个标准模型的相似度小于预设阈值来确定是否符合需要图像遮蔽处理的标准等。

在具体执行图像遮蔽处理时，可以针对前景目标的全部区域进行遮蔽，从而很好的保护了隐私信息，但全部遮蔽有可能造成视频请求者的误解，还可以只对前景目标的部分区域进行遮蔽，这样不仅可以一定程度上保护隐私信息，也消除了视频请求者难以理解视频内容的问题。具体的图像遮蔽处理可以包括单色化、马赛克、模糊化等方式，尽量达到难以直接辨认出具体信息的效果。

对于一些更高级别或者政府机关的使用者或监管者来说，获得更准确的信息更为重要，而可以忽略隐私问题，因此在本发明的另一实施例中还引入了访问权限的设定，即允许一部分用户可以直接获取原始视频信息，而一部分用户则受到限制，只能够访问经过图像遮蔽处理后的视频信息。当然，对于监控平台的管理员来说，应该可以对监控平台进行用户访问的权限设定，而让这种访问权限的实施成为可能。

如图4所示，为在图1应用场景下的图像遮蔽处理方法的另一实施例的流程示意图。与上一实施例相比，本实施例中在步骤101和102之间还增加了以下步骤：

步骤101a、监控平台对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理；

步骤101b、如果视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息，则确定需要对所述被请求的视频信息进行图像遮蔽处理，并继续执行步骤102，否则执行步骤101c；

步骤101c、监控平台直接将对应的原始视频信息返回给视频访问端。

在步骤101中提到的需图像遮蔽处理的视频信息实际上是指本发明的常规处理中需要对视频信息进行图像遮蔽处理，但对于某些拥有较高权限的使用者来说，则可以根据该权限来确定这些视频信息无需经过图像遮蔽处理。

在上述的几个方法实施例中，监控平台还可以接收客户端发出的图像遮蔽设置请求，并可以根据该图像遮蔽设置请求对监控平台自身或IVU/IEU进行设置。图像遮蔽设置请求可以具体包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

考虑到监控平台具有一定的存储能力，而且在接收到图像遮蔽处理的视频信息可能会被再次索取，因此可以在首次接收到IVU/IEU返回的图像遮蔽处理后的视频信息时，在本地保存该图像遮蔽处理后的视频信息。当接收到该视频请求端或另一视频请求端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，可以直接将保存的该图像遮蔽处理后的视频信息返回给发出视频获取请求的视频请求端。从而节省了平台侧的智能处理能力和信令消耗，同时也提高了处理效率。

如图5所示，为在图2应用场景下的图像遮蔽处理方法的一实施例的流程示意图。在图2应用场景下，图像遮蔽处理流程包括：

步骤201、监控平台接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息；

步骤202、监控平台将该视频获取请求转发给PIU；

步骤203、PIU根据所述视频获取请求从监控平台或PIU自身获得对应的原始视频信息；

步骤204、PIU对该原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析；

步骤205、PIU将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

步骤206、如果需要图像遮蔽处理，则执行步骤207，否则执行步骤209；

步骤207、PIU通过对该原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

步骤208、PIU经由所述监控平台向所述视频访问端返回所述图像遮蔽处理后的视频信息；

步骤209、PIU通知监控平台将原始视频信息返回给视频访问端。

在本实施例中，监控平台将视频获取请求转发给具有智能图像处理能力的PIU，而PIU从监控平台获得相应的视频信息，这里的视频信息可以是PU或PIU实时获得并传送给监控平台的视频流，也可以是在监控平台中保存的已录制的视频文件，或者是监控平台从PU或PIU中获取的已录制的视频文件等。

PIU可以利用现有的计算机基于图像分割与识别技术对原始视频进行背景图像和前景目标的抽离，以此来避免背景图像对分析过程的干扰，前景目标可能是人、车或标牌等具有一定的语义特征的图像，利用现有的智能图像识别技术对前景目标进行图像语义分析，获得该前景目标的目标语义描述信息，根据该目标语义描述信息可以获知人、车或标牌在场景中的存在。

在获得了目标语义描述信息后，PIU则基于本地保存的预设遮蔽规则或遮蔽标准模型库来对所述目标语义描述信息进行匹配，例如某条遮蔽规则可以为如果图像中存在人脸的语义描述信息，则对该部分前景目标执行图像遮蔽处理等，或者判断是否存在与遮蔽标准模型库中的某个标准模型的相似度小于预设阈值来确定是否符合需要图像遮蔽处理的标准等。

在具体执行图像遮蔽处理时，可以针对前景目标的全部区域进行遮蔽，从而很好的保护了隐私信息，但全部遮蔽有可能造成视频请求者的误解，还可以只对前景目标的部分区域进行遮蔽，这样不仅可以一定程度上保护隐私信息，也消除了视频请求者难以理解视频内容的问题。具体的图像遮蔽处理可以包括单色化、马赛克、模糊化等方式，尽量达到难以直接辨认出具体信息的效果。

前面也提到，采用分布式的PIU的智能图像处理可以对平台侧集中处理的IVU/IEU进行图像智能处理的方式进行补充，或者直接替代平台侧集中处理的方式，均可较大程度的减轻平台侧的处理压力。

对于一些更高级别或者政府机关的使用者或监管者来说，获得更准确的信息更为重要，而可以忽略隐私问题，因此在本发明的另一实施例中还引入了访问权限的设定，即允许一部分用户可以直接获取原始视频信息，而一部分用户则受到限制，只能够访问经过图像遮蔽处理后的视频信息。当然，对于监控平台的管理员来说，应该可以对监控平台进行用户访问的权限设定，而让这种访问权限的实施成为可能。

如图6所示，为在图2应用场景下的图像遮蔽处理方法的另一实施例的流程示意图。与上一实施例相比，本实施例中在步骤201和202之间还增加了以下步骤：

步骤201a、监控平台对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理；

步骤201b、如果视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息，则确定需要对所述被请求的视频信息进行图像遮蔽处理，并继续执行步骤202，否则执行步骤201c；

步骤201c、监控平台直接将对应的原始视频信息返回给视频访问端。

在步骤201中提到的需图像遮蔽处理的视频信息实际上是指本发明的常规处理中需要对视频信息进行图像遮蔽处理，但对于某些拥有较高权限的使用者来说，则可以根据该权限来确定这些视频信息无需经过图像遮蔽处理。

在上述的几个方法实施例中，监控平台还可以接收客户端发出的图像遮蔽设置请求，并可以根据该图像遮蔽设置请求对监控平台自身或PIV进行设置。图像遮蔽设置请求可以具体包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

考虑到监控平台具有一定的存储能力，而且在接收到图像遮蔽处理的视频信息可能会被再次索取，因此可以在首次接收到PIV返回的图像遮蔽处理后的视频信息时，在本地保存该图像遮蔽处理后的视频信息。当接收到该视频请求端或另一视频请求端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，可以直接将保存的该图像遮蔽处理后的视频信息返回给发出视频获取请求的视频请求端。从而节省了平台侧的智能处理能力和信令消耗，同时也提高了处理效率。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

下面分别对各应用场景下的图像遮蔽处理系统的具体结构进行详细说明。

如图7所示，为在图1应用场景下的图像遮蔽处理系统的一实施例的结构示意图。在本实施例中，图像遮蔽处理系统包括监控平台1和IVU/IEU 2，其中监控平台1具体包括获取请求接收单元11、第一获取请求转发单元12、视频信息返回单元13。获取请求接收单元11负责接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息。第一获取请求转发单元12负责经由IVM向IVU/IEU转发该视频获取请求。视频信息返回单元13负责将获得的图像遮蔽处理后的视频信息返回给视频访问端。

IVU/IEU 2具体包括：原始视频获取单元21、前景/背景抽离单元22、语义分析单元23、规则/模型匹配单元24、图像遮蔽处理单元25和处理视频信息返回单元26。

原始视频获取单元21负责根据IVM转发的视频获取请求从监控平台获得对应的原始视频信息。前景/背景抽离单元22负责对原始视频信息进行背景图像和前景目标的抽离。语义分析单元23负责对前景目标进行图像语义分析。规则/模型匹配单元24负责将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对原始视频信息进行图像遮蔽处理。图像遮蔽处理单元25负责在判断原始视频信息需要图像遮蔽处理时，通过对原始视频信息中的前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息。处理视频信息返回单元26负责向监控平台返回图像遮蔽处理后的视频信息。

如图8所示，为在图1应用场景下的图像遮蔽处理系统的另一实施例的结构示意图。与上一实施例相比，本实施例的监控平台还包括：访问权限判断单元14和敏感信息确认单元15。其中，访问权限判断单元14负责在接收视频获取请求时，还对视频访问端的访问权限进行判断，根据访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理。敏感信息确认单元15负责在判断视频访问端的访问权限不允许访问被请求的视频信息中的敏感信息时，确定需要对被请求的视频信息进行图像遮蔽处理。相应的，视频信息返回单元13还负责在判断视频访问端的访问权限允许访问被请求的视频信息中的敏感信息时，直接将对应的原始视频信息返回给视频访问端。

在图1应用场景中的上述各系统实施例中，监控平台还可以进一步包括设置单元，该单元负责接收客户端发出图像遮蔽设置请求，并根据图像遮蔽设置请求对监控平台自身或IVU/IEU进行设置，图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

在另一实施例中，监控平台还可以进一步包括：本地保存单元，该单元负责在首次接收到IVU/IEU返回的图像遮蔽处理后的视频信息，则在本地保存图像遮蔽处理后的视频信息。相应的，视频信息返回单元还可以负责在接收到视频请求端或另一视频请求端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的图像遮蔽处理后的视频信息返回给发出视频获取请求的视频请求端。

如图9所示，为在图2应用场景下的图像遮蔽处理系统的一实施例的结构示意图。在本实施例中，图像遮蔽处理系统包括监控平台1和PIU 6。其中，监控平台1具体包括：获取请求接收单元11、第二获取请求转发单元16和视频信息访问单元13。其中，获取请求接收单元11负责接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息。第二获取请求转发单元16负责向前端智能单元转发该视频获取请求。视频信息返回单元17负责将获得的图像遮蔽处理后的视频信息返回给视频访问端。

PIU 6具体包括：原始视频获取单元61、前景/背景抽离单元62、语义分析单元63、规则/模型匹配单元64、图像遮蔽处理单元65和处理视频信息返回单元66。

原始视频获取单元61负责根据所述监控平台转发的视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息。前景/背景抽离单元62对所述原始视频信息进行背景图像和前景目标的抽离。语义分析单元63负责对所述前景目标进行图像语义分析。规则/模型匹配单元64负责将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理。图像遮蔽处理单元65在判断所述原始视频信息需要图像遮蔽处理时，通过对所述原始视频信息中的所述前景目标的部分区域或全部区域进行遮蔽处理，得到图像遮蔽处理后的视频信息。处理视频信息返回单元66负责向所述监控平台返回所述图像遮蔽处理后的视频信息。

如图10所示，为在图2应用场景下的图像遮蔽处理系统的另一实施例的结构示意图。与上一实施例相比，本实施例的监控平台还包括：访问权限判断单元14和敏感信息确认单元15。其中，访问权限判断单元14负责在接收视频获取请求时，还对视频访问端的访问权限进行判断，根据访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理。敏感信息确认单元15负责在判断视频访问端的访问权限不允许访问被请求的视频信息中的敏感信息时，确定需要对被请求的视频信息进行图像遮蔽处理。相应的，视频信息返回单元13还负责在判断视频访问端的访问权限允许访问被请求的视频信息中的敏感信息时，直接将对应的原始视频信息返回给视频访问端。

在图2应用场景中的上述各系统实施例中，监控平台还可以进一步包括设置单元，该单元负责接收客户端发出图像遮蔽设置请求，并根据图像遮蔽设置请求对监控平台自身或PIU进行设置，图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

在另一实施例中，监控平台还可以进一步包括：本地保存单元，该单元负责在首次接收到PIU返回的图像遮蔽处理后的视频信息，则在本地保存图像遮蔽处理后的视频信息。相应的，视频信息返回单元还可以负责在接收到视频请求端或另一视频请求端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的图像遮蔽处理后的视频信息返回给发出视频获取请求的视频请求端。

上述各方法实施例和系统实施例均采用了递进方式的描述，在叙述上较为简略，另外，上述系统实施例的说明可参考前面方法实施例的说明，这里也不再详述。

最后应当说明的是：以上实施例仅用以说明本发明的技术方案而非对其限制；尽管参照较佳实施例对本发明进行了详细的说明，所属领域的普通技术人员应当理解：依然可以对本发明的具体实施方式进行修改或者对部分技术特征进行等同替换；而不脱离本发明技术方案的精神，其均应涵盖在本发明请求保护的技术方案范围当中。

Claims (10)

1.一种图像遮蔽处理方法，包括：

监控平台接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则经由智能图像管理服务器将该视频获取请求转发给智能图像识别单元/智能遮蔽单元；

所述智能图像识别单元/智能遮蔽单元根据所述视频获取请求从所述监控平台获得对应的原始视频信息；

所述智能图像识别单元/智能遮蔽单元对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析；

所述智能图像识别单元/智能遮蔽单元将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

如果需要图像遮蔽处理，则所述智能图像识别单元/智能遮蔽单元通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

所述智能图像识别单元/智能遮蔽单元经由所述监控平台向所述视频访问端返回所述图像遮蔽处理后的视频信息；

其中，所述监控平台在接收所述视频获取请求时，还对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理，如果所述视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息，则确定需要对所述被请求的视频信息进行图像遮蔽处理，否则直接将对应的原始视频信息返回给所述视频访问端；

在所述监控平台首次接收到所述智能图像识别单元/智能遮蔽单元返回的图像遮蔽处理后的视频信息，则在本地保存所述图像遮蔽处理后的视频信息，当接收到所述视频访问端或另一视频访问端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的所述图像遮蔽处理后的视频信息返回给发出视频获取请求的视频访问端。

2.根据权利要求1所述的图像遮蔽处理方法，其中，还包括：

所述监控平台接收客户端发出图像遮蔽设置请求，并根据所述图像遮蔽设置请求对所述监控平台自身或所述智能图像识别单元/智能遮蔽单元进行设置，所述图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

3.一种图像遮蔽处理系统，包括：

监控平台，用于接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则经由智能图像管理服务器转发该视频获取请求，以及将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

智能图像识别单元/智能遮蔽单元，用于根据所述智能图像管理服务器转发的视频获取请求从所述监控平台获得对应的原始视频信息，对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析，以及将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息，以及向所述监控平台返回所述图像遮蔽处理后的视频信息；

其中，所述监控平台还包括：

访问权限判断单元，用于在接收所述视频获取请求时，还对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理；

敏感信息确认单元，用于在判断所述视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息时，确定需要对所述被请求的视频信息进行图像遮蔽处理；

视频信息返回单元用于在判断所述视频访问端的访问权限允许访问所述被请求的视频信息中的敏感信息时，直接将对应的原始视频信息返回给所述视频访问端；

所述监控平台还包括：

本地保存单元，用于在首次接收到所述智能图像识别单元/智能遮蔽单元返回的图像遮蔽处理后的视频信息，则在本地保存所述图像遮蔽处理后的视频信息；

所述视频信息返回单元还用于在接收到所述视频访问端或另一视频访问端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的所述图像遮蔽处理后的视频信息返回给发出视频获取请求的视频访问端。

4.根据权利要求3所述的图像遮蔽处理系统，其中，所述监控平台具体还包括：

获取请求接收单元，用于接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息；

第一获取请求转发单元，用于经由智能图像管理服务器向所述智能图像识别单元/智能遮蔽单元转发该视频获取请求；

视频信息返回单元，用于将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

所述智能图像识别单元/智能遮蔽单元具体包括：

原始视频获取单元，用于根据所述智能图像管理服务器转发的视频获取请求从所述监控平台获得对应的原始视频信息；

前景/背景抽离单元，用于对所述原始视频信息进行背景图像和前景目标的抽离；

语义分析单元，用于对所述前景目标进行图像语义分析；

规则/模型匹配单元，用于将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

图像遮蔽处理单元，用于在判断所述原始视频信息需要图像遮蔽处理时，通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

处理视频信息返回单元，用于向所述监控平台返回所述图像遮蔽处理后的视频信息。

5.根据权利要求3或4所述的图像遮蔽处理系统，其中，所述监控平台还包括：

设置单元，用于接收客户端发出图像遮蔽设置请求，并根据所述图像遮蔽设置请求对所述监控平台自身或所述智能图像识别单元/智能遮蔽单元进行设置，所述图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

6.一种图像遮蔽处理方法，包括

监控平台接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则将该视频获取请求转发给前端智能单元；

所述前端智能单元根据所述视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息；

所述前端智能单元对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析；

所述前端智能单元将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

如果需要图像遮蔽处理，则所述前端智能单元通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

所述前端智能单元经由所述监控平台向所述视频访问端返回所述图像遮蔽处理后的视频信息；

其中，所述监控平台在接收所述视频获取请求时，还对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理，如果所述视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息，则确定需要对所述被请求的视频信息进行图像遮蔽处理，否则直接将对应的原始视频信息返回给所述视频访问端；

在所述监控平台首次接收到所述前端智能单元返回的图像遮蔽处理后的视频信息，则在本地保存所述图像遮蔽处理后的视频信息，当接收到所述视频访问端或另一视频访问端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的所述图像遮蔽处理后的视频信息返回给发出视频获取请求的视频访问端。

7.根据权利要求6所述的图像遮蔽处理方法，其中，还包括：

所述监控平台接收客户端发出图像遮蔽设置请求，并根据所述图像遮蔽设置请求对所述监控平台自身或所述前端智能单元进行设置，所述图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。

8.一种图像遮蔽处理系统，包括：

监控平台，用于接收视频访问端发出的视频获取请求时，该视频获取请求用于获取需图像遮蔽处理的视频信息，则转发该视频获取请求，以及将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

前端智能单元，用于根据所述监控平台转发的视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息，对所述原始视频信息进行背景图像和前景目标的抽离，并对所述前景目标进行图像语义分析，以及将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理，如果需要图像遮蔽处理，则通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息，以及向所述监控平台返回所述图像遮蔽处理后的视频信息；

其中，所述监控平台还包括：

访问权限判断单元，用于在接收所述视频获取请求时，还对所述视频访问端的访问权限进行判断，根据所述访问权限判断是否需要对被请求的视频信息进行图像遮蔽处理；

敏感信息确认单元，用于在判断所述视频访问端的访问权限不允许访问所述被请求的视频信息中的敏感信息时，确定需要对所述被请求的视频信息进行图像遮蔽处理；

视频信息返回单元用于在判断所述视频访问端的访问权限允许访问所述被请求的视频信息中的敏感信息时，直接将对应的原始视频信息返回给所述视频访问端；

所述监控平台还包括：

本地保存单元，用于在首次接收到所述前端智能单元返回的图像遮蔽处理后的视频信息，则在本地保存所述图像遮蔽处理后的视频信息；

所述视频信息返回单元还用于在接收到所述视频访问端或另一视频访问端发出的获取需图像遮蔽处理的相同视频信息的视频获取请求时，直接将保存的所述图像遮蔽处理后的视频信息返回给发出视频获取请求的视频访问端。

9.根据权利要求8所述的图像遮蔽处理系统，其中，所述监控平台具体还包括：

获取请求接收单元，用于接收视频访问端发出的视频获取请求，该视频获取请求用于获取需图像遮蔽处理的视频信息；

第二获取请求转发单元，用于向所述前端智能单元转发该视频获取请求；

视频信息返回单元，用于将获得的图像遮蔽处理后的视频信息返回给所述视频访问端；

所述前端智能单元具体包括：

原始视频获取单元，用于根据所述监控平台转发的视频获取请求从所述监控平台或所述前端智能单元自身获得对应的原始视频信息；

前景/背景抽离单元，用于对所述原始视频信息进行背景图像和前景目标的抽离；

语义分析单元，用于对所述前景目标进行图像语义分析；

规则/模型匹配单元，用于将图像语义分析得到的目标语义描述信息与预设的遮蔽规则或遮蔽标准模型库进行匹配，并根据匹配结果来识别是否需要对所述原始视频信息进行图像遮蔽处理；

图像遮蔽处理单元，用于在判断所述原始视频信息需要图像遮蔽处理时，通过对所述原始视频信息中的所述前景目标的部分区域进行遮蔽处理，得到图像遮蔽处理后的视频信息；

处理视频信息返回单元，用于向所述监控平台返回所述图像遮蔽处理后的视频信息。

10.根据权利要求8或9所述的图像遮蔽处理系统，其中，所述监控平台还包括：

设置单元，用于接收客户端发出图像遮蔽设置请求，并根据所述图像遮蔽设置请求对所述监控平台自身或所述前端智能单元进行设置，所述图像遮蔽设置请求中包括遮蔽规则、遮蔽标准模型和访问权限中的一种或多种。