CN110266953A - 图像处理方法、装置、服务器及存储介质 - Google Patents

图像处理方法、装置、服务器及存储介质 Download PDF

Info

Publication number
CN110266953A
CN110266953A CN201910579249.5A CN201910579249A CN110266953A CN 110266953 A CN110266953 A CN 110266953A CN 201910579249 A CN201910579249 A CN 201910579249A CN 110266953 A CN110266953 A CN 110266953A
Authority
CN
China
Prior art keywords
image
personage
shooting
identification
surface information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910579249.5A
Other languages
English (en)
Other versions
CN110266953B (zh
Inventor
杜鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910579249.5A priority Critical patent/CN110266953B/zh
Publication of CN110266953A publication Critical patent/CN110266953A/zh
Application granted granted Critical
Publication of CN110266953B publication Critical patent/CN110266953B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Abstract

本申请公开了一种图像处理方法、装置、服务器及存储介质,应用于服务器,服务器与分布于不同位置的多个摄像头通信连接,方法包括:对多个摄像头的拍摄图像中的人物进行人脸识别,根据识别结果获得多个摄像头的拍摄图像中的存在辨识人物的第一图像以及存在非辨识人物的第二图像;将第一图像按照不同的辨识人物进行分组,得到多个第一图像组;将非辨识人物的外部特征信息与辨识人物的外部特征信息进行匹配,得到辨识人物中与非辨识人物匹配的目标人物;将第二图像添加至目标人物所对应的第一图像组,得到多个第二图像组;根据拍摄图像的拍摄时间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物的视频文件。

Description

图像处理方法、装置、服务器及存储介质
技术领域
本申请涉及摄像头技术领域,更具体地,涉及一种图像处理方法、装置、 服务器及存储介质。
背景技术
目前,随着摄像头系统在日常生活中的广泛使用,人们对视频拍摄的需 求越来越多。例如,在监控、科学研究观察等场景下,通过使用摄像头来记 录/监控某个区域的状态和人物活动等。但是,由于摄像头的拍摄区域有限, 即可视角度有限,摄像头只能拍到有限范围内的图像或视频。
发明内容
鉴于上述问题,本申请提出了一种图像处理方法、装置、服务器及存储介 质,能够得到人物在多个范围内移动时的监控视频。
第一方面,本申请实施例提供了一种图像处理方法,应用于服务器, 服务器与多个摄像头通信连接,多个摄像头分布于不同位置,多个摄像头 中相邻两个摄像头的拍摄区域邻接或者存在部分重合,方法包括:对多个 摄像头的拍摄图像中的人物进行人脸识别,根据识别结果获得多个摄像头 的拍摄图像中的第一图像以及第二图像,第一图像中存在识别出的辨识人 物,第二图像中存在未识别出的非辨识人物;将第一图像按照不同的辨识人物进行分组,得到多个第一图像组,第一图像组为包含同一辨识人物的 拍摄图像的集合,每个第一图像组对应的辨识人物不同;获取非辨识人物 的外部特征信息以及辨识人物的外部特征信息,外部特征信息用于表征人 物外部所体现的状态信息中除人脸以外的信息;根据非辨识人物的外部特 征信息以及辨识人物的外部特征信息,将非辨识人物与辨识人物进行匹配, 得到辨识人物中与非辨识人物匹配的目标人物;将第二图像添加至目标人物所对应的第一图像组,得到多个第二图像组;根据拍摄图像的拍摄时间 先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行拼接合 成,得到多个辨识人物对应的视频文件。
第二方面,本申请实施例提供了一种图像处理装置,其特征在于,应 用于服务器,服务器与多个摄像头通信连接,多个摄像头分布于不同位置, 多个摄像头中相邻两个摄像头的拍摄区域邻接或者存在部分重合,装置包 括:图像识别模块、图像分组模块、信息获取模块、信息匹配模块、图像分 配模块以及图像拼接模块。其中,图像识别模块用于对多个摄像头的拍摄 图像中的人物进行人脸识别,根据识别结果获得多个摄像头的拍摄图像中 的第一图像以及第二图像,第一图像中存在识别出的辨识人物,第二图像 中存在未识别出的非辨识人物;图像分组模块用于将第一图像按照不同的 辨识人物进行分组,得到多个第一图像组,第一图像组为包含同一辨识人 物的拍摄图像的集合,每个第一图像组对应的辨识人物不同;信息获取模 块用于获取非辨识人物的外部特征信息以及辨识人物的外部特征信息,外 部特征信息用于表征人物外部所体现的状态信息中除人脸以外的信息;信 息匹配模块用于根据非辨识人物的外部特征信息以及辨识人物的外部特征 信息,将非辨识人物与辨识人物进行匹配,得到辨识人物中与非辨识人物 匹配的目标人物;图像分配模块用于将第二图像添加至目标人物所对应的 第一图像组,得到多个第二图像组;图像拼接模块用于根据拍摄图像的拍 摄时间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行 拼接合成,得到多个辨识人物对应的视频文件。
第三方面,本申请实施例提供了一种服务器,包括一个或多个处理器; 存储器;一个或多个应用程序,其中一个或多个应用程序被存储在存储器 中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行上 述第一方面提供的图像处理方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,计算机可 读取存储介质中存储有程序代码,程序代码可被处理器调用执行上述第一 方面提供的图像处理方法。
本申请实施例提供的一种图像处理方法、装置、服务器及存储介质, 应用于服务器,服务器与多个摄像头通信连接,多个摄像头分布于不同位 置,通过对多个摄像头的拍摄图像中的人物进行人脸识别,以根据识别结 果获得多个摄像头的拍摄图像中存在辨识人物的第一图像以及存在非辨识 人物的第二图像,然后将第一图像按照不同的辨识人物进行分组,得到多 个第一图像组,通过将非辨识人物的外部特征信息与辨识人物的外部特征 信息进行匹配,得到辨识人物中与非辨识人物匹配的目标人物,然后将第 二图像添加至目标人物所对应的第一图像组,得到多个第二图像组,并根 据拍摄图像的拍摄时间先后顺序,将多个第二图像组中的拍摄图像按照不 同的图像组进行拼接合成,得到多个辨识人物对应的视频文件。从而无需 用户从多个拍摄视频中查找,自动精确地将摄像头拍摄到的人物按照个体 整理成多个视频文件,简化了用户操作,提升了信息获取的实时性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所 需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请 的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还 可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的分布式系统的示意图。
图2示出了根据本申请一个实施例的图像处理方法流程图。
图3示出了根据本申请另一个实施例的图像处理方法流程图。
图4示出了本申请的图3所示的图像处理方法的步骤S200的流程示意图。
图5示出了本申请的图3所示的图像处理方法的步骤S280的流程示意图。
图6示出了根据本申请一个实施例的图像处理装置的框图。
图7是本申请实施例的用于执行根据本申请实施例的图像处理方法的服 务器的框图。
图8是本申请实施例的用于保存或者携带实现根据本申请实施例的图像 处理方法的程序代码的存储单元。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请 实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
随着社会的发展和科技的进步,越来越多的地方开始布置监控系统, 并且在通过监控系统进行监控的多数应用场景中,所使用的摄像头往往都 只能对某个固定的区域进行监控。当需要获取某个对象在多个区域内的移 动路径时,需要在多个视频图像中分别查找,且易存在同一对象在不同视 频图像中辨识度高低不一的情况,增加了人物辨识的难度,操作复杂的同 时,降低了信息获取的实时性。
针对上述问题,发明人经过研究,提出了本申请实施例中的图像处理 方法、装置、服务器及存储介质,通过多个分布于不同位置的摄像头进行 监控拍摄,然后根据多个摄像头的拍摄图像中的识别出的辨识人物,对多 个摄像头的拍摄图像进行分组,再根据分组中的拍摄图像进行拼接合成, 得到不同辨识人物的视频文件,从而无需用户从多个拍摄视频中查找,简 化了用户操作。
下面将针对适用于本申请实施例提供的图像处理方法的分布式系统进 行描述。
请参阅图1,图1示出了本申请实施例提供的分布式系统的示意图,其 中,该分布式系统包括服务器100和多个摄像头200(图1所示摄像头200 的数量为4个),其中,服务器100分别和多个摄像头200中的每个摄像 头200连接,用于分别与每个摄像头200进行数据交互,例如,服务器100 接收摄像头200发送的图像、服务器100向摄像头200发送指令等,在此 不做具体的限定。另外,该服务器100可以为云服务器,也可以为传统服 务器,该摄像头200可以为枪式摄像头、半球摄像头、高清智能球形摄像 头、笔筒式摄像头、单板摄像头、飞碟摄像头、手机型摄像头等,且该摄像 头的镜头可以采用广角镜头、标准镜头、长焦镜头、变焦镜头、针孔镜头 等,在此不做具体的限定。
在一些实施方式中,多个摄像头200设置在不同的位置用于拍摄不同 的区域,且多个摄像头200中的每两个相邻的摄像头200的拍摄区域邻接 或部分重合。可以理解的是,每个摄像头200根据其视场角和设置位置的 不同,可以对应拍摄不同的区域,通过设置每两个相邻的摄像头200的拍 摄区域邻接或部分重合,可以使得分布式系统所要拍摄的区域全覆盖。其 中,多个摄像头200可以沿一个长度方向上间隔并排设置,用于拍摄该长 度方向区域的图像,多个摄像头200也可以沿一个环形方向上间隔设置, 用于拍摄该环形区域内的图像,当然,多个摄像头200还可以包括其他的 设置方式,在此不作为限定。
下面结合具体实施例对本申请实施例提供的图像处理方法进行介绍。
请参阅图2,图2示出了本申请一个实施例提供的图像处理方法的流 程示意图。在具体的实施例中,该图像处理方法可应用于如图6所示的图 像处理装置600以及配置有所述图像处理装置600的服务器100(图7)。 下面将以服务器为例,说明本实施例的具体流程,当然,可以理解的,本实 施例所应用的服务器可以为云服务器,也可以为传统服务器,在此不做限 定。该服务器与多个摄像头通信连接,多个摄像头分布于不同位置,多个 摄像头中相邻两个摄像头的拍摄区域邻接或者存在部分重合,下面将针对 图2所示的流程进行详细的阐述,所示图像处理方法具体可以包括以下步 骤:
步骤S110:对多个摄像头的拍摄图像中的人物进行人脸识别,根据识 别结果获得多个摄像头的拍摄图像中的第一图像以及第二图像,第一图像 中存在识别出的辨识人物,第二图像中存在未识别出的非辨识人物。
在本申请实施例中,上述多个摄像头可以是普通摄像头,也可以是具 有更宽拍摄区域的可旋转式的摄像头,在此不作限定。在一些实施方式中, 多个摄像头中每个摄像头可以均处于开启状态,从而可以对多个摄像头所 对应的整个拍摄区域进行拍摄,其中,多个摄像头中每个摄像头可以在设 定时间段或者一直处于开启状态。当然,多个摄像头中的每个摄像头也可 以根据接收到的控制指令,处于开启状态或关闭状态,控制指令可以包括与摄像头连接的服务器自动发送的指令、电子设备通过服务器发送至摄像 头的指令、用户于摄像头触发生成的指令等,在此不做限定。
在本申请实施例中,多个摄像头可实时对所覆盖的拍摄区域进行拍摄, 并将拍摄到的拍摄图像或拍摄视频上传至服务器,从而服务器可以获取到 多个摄像头拍摄的拍摄图像或拍摄视频(拍摄视频可由多帧的拍摄图像组 成)。由于多个摄像头分布于不同位置,且相邻两个摄像头的拍摄区域邻 接或者存在部分重合,从而服务器可以获取到不同拍摄区域的拍摄图像, 且这些拍摄区域可以构成一个完整的区域,也就是说,服务器可以获取到 一个大范围的完整区域的拍摄图像。摄像头上传拍摄图像的方式可以不作 为限定,例如,可以是对拍摄图像按照设定间隔时长进行上传。
服务器接收到多个摄像头上传的拍摄图像时,可对拍摄图像中的所有 人物进行人脸识别,得到每个人物的人脸识别结果,该人脸识别结果可包 括识别出和未识别出两种结果。具体地,在一些场景下,拍摄图像中可能 会存在某些人物的人脸被其他人物遮挡、人物背向摄像头、或者人物的人 脸变形模糊等情况,导致服务器无法准确识别到人物的人脸。因此,服务 器对拍摄图像中的人物进行识别时,可能会存在部分人物的人脸无法识别,部分人物的人脸能够识别。
在本申请实施例中,服务器识别出人脸的人物为辨识人物,服务器未 识别出人脸的人物为非辨识人物。服务器可根据人物识别结果,从多个摄 像头的拍摄图像中筛选出第一图像以及第二图像。其中,第一图像为存在 辨识人物的拍摄图像,第二图像为存在非辨识人物的拍摄图像。需要说明 的是,一张拍摄图像中可既存在辨识人物也存在非辨识人物,也可仅存在 辨识人物,还可仅存在非辨识人物,在此不作限定。当一张拍摄图像中既存在辨识人物也存在非辨识人物时,该拍摄图像可以是第一图像,也可以 是第二图像。因此,在一些场景下,第一图像和第二图像可以是同一张拍 摄图像。
例如,当拍摄图像1仅存在非辨识人物A,拍摄图像2仅存在辨识人 物B,拍摄图像3同时存在非辨识人物C和辨识人物D时,服务器可从拍 摄图像1、2、3中得到存在辨识人物的第一图像,也就是拍摄图像2和拍 摄图像3,得到存在非辩识人物的第二图像,也就是拍摄图像1和拍摄图像 3。
在一些实施方式中,服务器中可以预先存储有多个人物的信息,服务 器可以从本地读取预先存储的多个人物的信息,其中,人物的信息可以包 括人物的人脸图像、人物的特征信息等,在此不作限定。在另一些实施方 式中,多个人物的信息也可以由用户的电子设备发送至服务器,从而服务 器可以根据用户需求对多个摄像头的拍摄图像中进行人脸识别。
步骤S120:将第一图像按照不同的辨识人物进行分组,得到多个第一 图像组,第一图像组为包含同一辨识人物的拍摄图像的集合,每个第一图 像组对应的辨识人物不同。
在本申请实施例中,服务器从多个摄像头的拍摄图像中获取到存在辨 识人物的第一图像后,可以获取第一图像中存在的所有辨识人物。然后根 据不同的辨识人物将第一图像进行实时分组,得到多个第一图像组。多个 第一图像组与多个辨识人物一一对应,即每个第一图像组对应的辨识人物 不同其中。其中,第一图像组为包含同一辨识人物的拍摄图像的集合,从 而服务器可以从多个摄像头的拍摄图像中得到每个人物被拍摄到人脸的所 有拍摄图像。
可以理解的是,当第一图像中存在多个辨识人物时,多个辨识人物一 一对应的多个第一图像组中,每个第一图像组都会包含该第一图像。指定 辨识人物对应的第一图像组中的所有拍摄图像,可以包括只存在指定辨识 人物的拍摄图像,也可以包括同时存在指定辨识人物与其他辨识人物的拍 摄图像,在此不作限定,仅需拍摄图像中存在指定辨识人物,即可归类于 指定辨识人物对应的第一图像组。因此,不同的第一图像组之间可能存在部分拍摄图像是交叉的,即不同的图像组之间可能存在部分的拍摄图像是 相同的。
例如,第一图像为拍摄图像4且存在辨识人物A和辨识人物B时,将 第一图像按照不同的辨识人物进行分组后,得到辨识人物A对应第一图像 组1、辨识人物B对应的第一图像组2,其中,第一图像组1包含拍摄图像 4、第一图像组2也包含拍摄图像4;进一步的,第一图像为拍摄图像5且 存在辨识人物B和辨识人物C时,还可得到辨识人物C对应的第一图像组 3,此时,第一图像组2看包含拍摄图像4和拍摄图像5、第一图像组3包 含拍摄图像5。
步骤S130:获取非辨识人物的外部特征信息以及辨识人物的外部特征 信息,外部特征信息用于表征人物外部所体现的状态信息中除人脸以外的 信息。
在本申请实施例中,服务器得到多个第一图像组后,可以获取非辨识 人物的外部特征信息以及辨识人物的外部特征信息,以根据外部特征信息 确定非辨识人物的身份信息。其中,外部特征信息用于表征人物外部所体 现的状态信息中除人脸以外的信息,可以包括性别特征、穿着特征、体型 特征、步态特征等,穿着特征可以是服装类型、服装颜色等,体型特征可以 是身高特征、体重特征等,步态特征可以是行走姿势、行走速度等,具体的外部特征信息可以不作为限定。
在一些实施方式中,服务器可对第二图像进行分割截取,以从第二图 像中截取每个非辨识人物的图像部分,从而获取到第二图像中存在的所有 非辨识人物。然后服务器可根据每个非辨识人物的图像部分,获取每个非 辨识人物的外部特征信息。作为一种方式,服务器可通过对非辨识人物的 图像部分进行行为习惯分析,得到非辨识人物的行走姿势、行走速度等特 征信息。
由于每个辨识人物对应一个第一图像组,因此,服务器获取辨识人物 的外部特征信息,可以是获取每个第一图像组对应的辨识人物的外部特征 信息。作为一种方式,服务器可先从第一图像组中选取辨识人物的清晰度 最高的拍摄图像,然后根据该拍摄图像,获取到辨识人物的外部特征信息。 作为另一种方式,服务器也可先从第一图像组中选取辨识人物的信息呈现 最多的拍摄图像,然后根据该拍摄图像,获取到辨识人物的外部特征信息。 具体的辨识人物的外部特征信息的方式可以不作为限定。
步骤S140:根据非辨识人物的外部特征信息以及辨识人物的外部特征 信息,将非辨识人物与辨识人物进行匹配,得到辨识人物中与非辨识人物 匹配的目标人物。
服务器在获取到非辨识人物的外部特征信息以及辨识人物的外部特征 信息后,可以将非辨识人物与辨识人物进行匹配,确定出辨识人物中与非 辨识人物匹配的目标人物,从而得到非辨识人物的身份信息。其中,将非 辨识人物与辨识人物进行匹配,是将非辨识人物的外部特征信息与辨识人 物的外部特征信息进行同类型匹配,例如,将非辨识人物的穿着特征与辨 识人物的穿着特征进行匹配。
可以理解的是,虽然某些拍摄图像中存在某些人物的人脸被其他人物 遮挡、人物背向摄像头、或者人物的人脸变形模糊的情况,导致服务器在 这些拍摄图像中无法识别到人物的人脸,但由于人物是可以移动的,同时 分布于不同位置的多个摄像头也在实时拍摄,因此,在之后的某个时刻或 某个区域,摄像头可能会拍摄到该人物的人脸,从而服务器可以在另一个 拍摄图像中识别到该人物的人脸,即在另一个拍摄图像中该人物为辨识人物。从而,在服务器无法识别到非辨识人物的人脸时,可通过将非辨识人 物的外部特征信息与辨识人物的外部特征信息进行匹配,判断辨识人物中 是否存在与非辨识人物匹配的目标人物,即判断该非辨识人物是否在另一 个拍摄图像中属于辨识人物,避免因未识别到人脸而遗漏辨识人物的拍摄 图像,提高了辨识人物的移动路径的完善性。
在一些实施方式中,服务器在获取到每个第一图像组对应的辨识人物 的外部特征信息后,可将非辨识人物的外部特征信息与每个第一图像组对 应的辨识人物的外部特征信息进行匹配。当多个第一图像组中存在一个第 一图像组对应的辨识人物的外部特征信息与非辨识人物的外部特征信息匹 配时,可确定该辨识人物为辨识人物中与非辨识人物匹配的目标人物。可 以理解的是,当多个第一图像组中存在一个第一图像组对应的辨识人物的 外部特征信息与非辨识人物的外部特征信息不匹配时,可以确定服务器获 取到的多个摄像头的拍摄图像中不包括与该非辨识人物匹配的辨识人物, 即服务器目前获取到的多个摄像头的拍摄图像中,没有一张拍摄到该非辨 识人物的人脸的拍摄图像,需持续获取多个摄像头的拍摄图像,持续进行 判断。
步骤S150:将第二图像添加至目标人物所对应的第一图像组,得到多 个第二图像组。
在本申请实施例中,服务器得到辨识人物中与非辨识人物匹配的目标 人物时,可确定该非辨识人物与目标人物为同一人,服务器可将包含该非 辩识人物的第二图像添加至目标人物所对应的第一图像组,得到多个第二 图像组,多个第二图像组与多个辨识人物一一对应,每个辨识人物对应的 第二图像组不同。可以理解的是,辨识人物对应第二图像组中既可包含存 在辨识人物的多个第一图像,也可包含与辨识人物匹配的非辩识人物的第 二图像。从而服务器可从多个摄像头的拍摄图像中得到每个人物被拍摄到 人脸的所有拍摄图像,以及被拍摄到其他特征的所有拍摄图像。
例如,在嫌疑人追踪的场景中,若多个摄像头的拍摄图像中仅有一张 是包含嫌疑人的脸部信息的拍摄图像时,服务器可根据嫌疑人的穿着特征、 行为特征等外部特征,从多个摄像头的拍摄图像中找到多张包含类似嫌疑 人的拍摄图像,其中,类似嫌疑人可以是无法识别出人脸信息,但类似嫌 疑人的外部特征信息与嫌疑人的外部特征信息匹配。
步骤S160:根据拍摄图像的拍摄时间先后顺序,将多个第二图像组中 的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视 频文件。
在本申请实施例中,服务器得到多个第二图像组后,可以根据拍摄图 像的拍摄时间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像 组进行拼接合成,得到多个辨识人物对应的视频文件。
由于指定辨识人物对应的第二图像组中,可包括识别到指定辨识人物 人脸的拍摄图像,也可包括未识别到指定辨识人物人脸但识别到其他特征 的拍摄图像,因此,服务器可完整得到每个人物被拍摄到所有拍摄图像, 拼接合成所有的拍摄图像后,可得到每个人物对应的完整的移动路径视频。 提高人物监控追踪效果。
在一些实施方式中,服务器可以根据存储的拍摄图像的文件信息中获 取拍摄图像的拍摄时间。其中,摄像头可以在上传拍摄图像时将拍摄时间 作为拍摄图像的其中一个描述信息发送至服务器,从而服务器在接收到拍 摄图像时,也可以得到拍摄图像的拍摄时间。当然,服务器获取拍摄图像 的拍摄时间的方式可以不作为限定,例如,也可以是服务器从摄像头查找 拍摄图像的拍摄时间。
在一些实施方式中,服务器在得到多个第二图像组后,可以针对每个 第二图像组,将每个第二图像组中的所有拍摄图像的拍摄时间进行从先到 后的排序。可以理解的是,排序靠前的拍摄图像的拍摄时间早于排序靠后 的拍摄图像的拍摄时间,然后按所有拍摄图像的排序将多个拍摄图像进行 拼接,以生成第二图像组对应的辨识人物的移动路径的视频文件。也就是 说,第二图像组中的拍摄图像构成视频文件中的每帧图像,并且每帧图像 在视频文件中的先后顺序与拍摄时间的先后顺序相同。这样,该移动路径 视频按播放进度的每一帧均可包括该辨识人物,提升了辨识人物的监控效 果。
在一些实施方式中,服务器也可将该视频文件发送至移动终端或第三 方平台(如APP、网页邮箱等),以便用户进行下载查看。从而用户能够 选择任意人物的移动路径视频进行查看,无需用户从多个拍摄视频中查找, 简化了用户操作。
另外,由于人物从一个拍摄区域移动到另一个拍摄区域需要时间,因 此,不同摄像头会先后拍摄到同一人物,导致拍摄图像的拍摄时间具有先 后顺序,从而服务器可以根据拍摄时间的先后顺序,将图像组中的拍摄图 像合理拼接出人物的移动路径视频。可以理解的是,拼接合成的视频中能 反映出人物在多个摄像头构成的拍摄区域中的行为轨迹。并且由于多个摄 像头中相邻两个摄像头的拍摄区域邻接或者存在部分重合,从而多个摄像头构成的拍摄区域为一完整的区域,因此拼接合成的视频文件能反映人物 在一较大的区域内容的活动变化。
本申请提供的图像处理方法,通过对多个摄像头的拍摄图像中的人物 进行人脸识别,以根据识别结果获得多个摄像头的拍摄图像中存在辨识人 物的第一图像以及存在非辨识人物的第二图像,然后将第一图像按照不同 的辨识人物进行分组,得到多个第一图像组,通过将非辨识人物的外部特 征信息与辨识人物的外部特征信息进行匹配,得到辨识人物中与非辨识人 物匹配的目标人物,然后将第二图像添加至目标人物所对应的第一图像组, 得到多个第二图像组,并根据拍摄图像的拍摄时间先后顺序,将多个第二 图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物 对应的视频文件。通过对非辨识人物的外部特征信息与辨识人物的外部特 征信息进行匹配,可完整得到每个人物被拍摄到所有拍摄图像,从而生成 每个人物的完整移动路径视频。从而无需用户从多个拍摄视频中查找,自 动精确地将摄像头拍摄到的人物按照个体整理成多个视频文件,简化了用 户操作,提升了信息获取的实时性。
请参阅图3,图3示出了本申请另一个实施例提供的图像处理方法的 流程示意图。该方法应用于上述服务器,该服务器与多个摄像头通信连接, 所述多个摄像头分布于不同位置,所述多个摄像头中相邻两个摄像头的拍 摄区域邻接或者存在部分重合。下面将针对图3所示的流程进行详细的阐 述,所示图像处理方法具体可以包括以下步骤:
步骤S200:获取多个摄像头的拍摄图像。
在一些实施例中,服务器可根据用户需求选择性获取多个摄像头的拍 摄图像进行本实施例的图像处理方法。具体地,请参阅图4,上述获取多个 摄像头的拍摄图像,包括:
步骤S201:发送多个摄像头对应的多个拍摄区域的数据至移动终端, 其中,多个摄像头与多个拍摄区域一一对应。
在一些实施例中,用户需要选定查看的监控区域时,用户可以从多个 摄像头对应的多个拍摄区域中进行选取。因此,服务器可将多个摄像头对 应的多个拍摄区域的数据发送至移动终端,其中,多个摄像头与多个拍摄 区域一一对应。从而用户可通过移动终端选择出需要查看的监控区域。
步骤S202:接收移动终端发送的对多个拍摄区域中至少部分拍摄区域 的选择指令,选择指令由移动终端根据多个拍摄区域的数据显示选择界面 后,检测到选择界面中对至少部分拍摄区域的选择操作时发送,至少部分 拍摄区域中相邻两个拍摄区域为邻接或者存在部分重合。
在一些实施例中,服务器在将多个摄像头对应的多个拍摄区域的数据 发送至移动终端之后,可实时接收移动终端发送的对多个拍摄区域中至少 部分拍摄区域的选择指令,以确定出用户需要查看的监控区域。其中,至 少部分拍摄区域为上述多个移动对象中被用户选中的监控区域,且至少部 分拍摄区域中相邻两个拍摄区域为邻接或者存在部分重合,以使至少部分 拍摄区域是一个完整且不间断的区域,提升人物的监控效果。
在一些实施例中,移动终端接收到服务器发送的多个摄像头对应的多 个拍摄区域的数据时,可以显示出对应的选择界面,该选择界面可以包括 拍摄区域的图片、位置、名称,也可以包括多个拍摄区域的布局方位信息, 在此不作限定。移动终端可实时检测用户的操作,当检测到用户在选择界 面中,对至少部分拍摄区域进行了选择操作(如点击、画圈圈中等)时,移 动终端可生成对应的选择指令,并将该选择指令发送至服务器,从而服务器可根据该选择指令,确定出用户需要查看的监控区域。
步骤S203:响应选择指令,从多个摄像头中获取至少部分拍摄区域对 应的摄像头的拍摄图像。
在一些实施例中,服务器在接收到移动终端发送的对多个拍摄区域中 至少部分拍摄区域的选择指令之后,可对该选择指令进行响应。服务器可 根据选择的至少部分拍摄区域,从多个摄像头中确定至少部分拍摄区域对 应的摄像头,并获取确定至少部分拍摄区域对应的摄像头的拍摄图像。
在一些实施方式中,服务器可先获取所有摄像头上传的所有拍摄图像, 再根据选择指令,从所有拍摄图像中获取至少部分拍摄区域对应的摄像头 的拍摄图像,并进行本实施例的图像处理。也可以是根据选择指令,从多 个摄像头中确定至少部分拍摄区域对应的摄像头后,直接向该摄像头获取 其拍摄的拍摄图像,在此不作限定。
步骤S210:从多个摄像头的拍摄图像中筛选出存在人物的拍摄图像。
在一些实施方式中,服务器在对多个摄像头的拍摄图像中的人物进行 人脸识别时,可以先从多个摄像头的拍摄图像中确定出存在人物的拍摄图 像。
在一些实施方式中,服务器可以根据人的外表特征(例如体型等),识 别拍摄图像中是否存在人物。作为一种可选的实施方式,用于确定拍摄图 像中是否存在人物的外部特征可以为除人脸图像以外的外表特征,这样确 定拍摄图像中是否存在人物时,无需根据人脸图像进行确定,从而可以提 升确定存在人物的拍摄图像时的效率。当然,具体外表特征可以不作为限 定。
步骤S220:对筛选后的多个摄像头的拍摄图像中的人物的面部特征进 行识别,得到识别结果。
服务器在获取到筛选后的存在人物的拍摄图像之后,则可以对筛选后 的多个摄像头的拍摄图像中的人物的面部特征进行识别,得到识别结果。 在一些实施方式中,服务器可先对筛选后的多个摄像头的拍摄图像中的人 物的人脸图像进行捕捉,然后再对捕捉的人脸图像提取面部特征,并对面 部特征进行识别,得到每个人物的人脸识别结果。从而通过从多个摄像头 的拍摄图像中筛选出存在人物的拍摄图像进行人脸识别,使得服务器无需 将所有拍摄图像均进行人脸识别,可以提升服务器的处理效率。
可以理解的是,人脸图像的扭曲、变形、模糊、不完整都有可能影响服 务器对人脸的面部特征提取,从而影响识别结果,识别结果可包括识别出 和未识别出两种结果。
步骤S230:根据识别结果,得到多个摄像头的拍摄图像中存在识别出 的辨识人物的第一图像,以及多个摄像头的拍摄图像中存在未识别出的非 辨识人物的第二图像。
在一些实施方式中,当拍摄图像中存在某个人物的面部特征无法识别 时,未识别出的人物为非辨识人物,存在非辨识人物的拍摄图像为第二图 像。当拍摄图像中存在某个人物的面部特征识别成功时,识别出的人物为 辨识人物,存在辨识人物的拍摄图像为第一图像。服务器可根据识别结果, 从多个摄像头的拍摄图像中筛选出第一图像以及第二图像。
步骤S250:获取非辨识人物的外部特征信息以及辨识人物的外部特征 信息,外部特征信息用于表征人物外部所体现的状态信息中除人脸以外的 信息。
其中,获取非辨识人物的外部特征信息的具体描述可参阅前述实施例 中的描述,在此不再赘述。
在一些实施例中,服务器可针对每个第一图像组以及其对应的辨识人 物,将第一图像组中所有拍摄图像中的辨识人物的外部特征信息进行整合。 具体地,上述获取辨识人物的外部特征信息,可以包括:
获取辨识人物对应的第一图像组中的所有拍摄图像;提取所有拍摄图 像中每个拍摄图像中辨识人物的外部特征信息,并整合成辨识人物的外部 特征信息集合。
由于摄像头的拍摄角度不同,拍摄同一人物得到的人物图像也不同, 从而人物图像所呈现的外部特征信息也可能不同。因此,服务器可先获取 辨识人物对应的第一图像组中的所有拍摄图像,然后提取所有拍摄图像中 每个拍摄图像中辨识人物的外部特征信息,并整合成辨识人物的外部特征 信息集合。从而服务器可以得到辨识人物的比较完整的外部特征信息,进 而提高非辨识人物识别的准确率。
步骤S260:根据非辨识人物的外部特征信息以及辨识人物的外部特征 信息,将非辨识人物与辨识人物进行匹配,得到辨识人物中与非辨识人物 匹配的目标人物。
在一些实施例中,服务器得到辨识人物的外部特征信息集合后,上述 将非辨识人物与辨识人物进行匹配可以包括:
将非辨识人物的外部特征信息与每个辨识人物的外部特征信息集合进 行匹配,得到外部特征信息匹配的外部特征信息集合,将外部特征信息匹 配的外部特征信息集合所对应的辨识人物作为辨识人物中与非辨识人物匹 配的目标人物。
在一些实施方式中,判断非辨识人物的外部特征信息与辨识人物的外 部特征信息集合匹配,可以是判断服务器提取的非辨识人物的所有外部特 征信息是否都与辨识人物的外部特征信息集合匹配,即当存在一个辨识人 物的外部特征信息集合与服务器提取的非辨识人物的外部特征信息都匹配 时,可以确定该辨识人物为辨识人物中与非辨识人物匹配的目标人物。当 服务器提取的非辨识人物的外部特征信息与一个辨识人物的外部特征信息 集合不完全匹配时,可以确定该辨识人物不为辨识人物中与非辨识人物匹 配的目标人物。
在另一些实施方式中,判断非辨识人物的外部特征信息与辨识人物的 外部特征信息集合是否匹配,可以是判断外部特征信息中预设类型信息是 否匹配,也可以是判断外部特征信息中是否存在预设个数的特征信息匹配 成功,在此不作限定。
步骤S270:将第二图像添加至目标人物所对应的第一图像组,得到多 个第二图像组。
步骤S280:根据拍摄图像的拍摄时间先后顺序,将多个第二图像组中 的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视 频文。
在本申请实施例中,步骤S270以及步骤S280可以参阅前述实施例的 内容,在此不再赘述。
在一些实施例中,当用户可以需要查看指定时间段的监控视频,服务 器可生成辨识人物在指定时间段的视频文件。例如,幼儿园监控场景下, 家长需要查看指定儿童在下午1:00至下午4:00的移动路径视频。因此,在 一些实施例中,该图像处理方法还可以包括:
从多个第二图像组的所有拍摄图像中获取指定时间段内的多个指定拍 摄图像;按照拍摄时间的先后顺序,将多个指定拍摄图像按照不同的图像 组进行拼接合成,得到多个辨识人物对应的视频文件。
服务器可根据用户设定的指定时间段,针对每个第二图像组,从第二 图像组的所有拍摄图像中筛选出处于指定时间段内的指定拍摄图像,得到 每个辨识人物在指定时间段期间被记录的活动图像。服务器可按照拍摄时 间的先后顺序,将每个辨识人物处于指定时间段内的指定拍摄图像进行拼 接合成,得到辨识人物在指定时间段期间的移动路径视频文件。满足了用 户需求的同时,减少服务器的工作量,提高图像处理的智能性。
在一些实施例中,移动终端可以显示有时间选择界面,用户可在该时 间选择界面输入或点击选择指定时间段。移动终端在检测到用户设定好指 定时间段后,可将该指定时间段发送至服务器,从而服务器可以获取到用 户设定的指定时间段。
进一步的,在一些实施例中,请参阅图5,上述根据拍摄图像的拍摄时 间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行拼接 合成,得到多个辨识人物对应的视频文件,可以包括:
步骤S281:从多个第二图像组中获取满足视频合成条件的多个目标图 像组。
在一些实施方式中,服务器在将多个第二图像组中每个图像组的拍摄 图像进行拼接合成时,还可以从多个第二图像组中获取满足视频合成条件 的多个目标图像组,然后对满足视频合成条件的多个目标图像组中的拍摄 图像进行拼接合成。其中,视频合成条件可以包括:目标图像组中包括多 个摄像头中至少存在两个相邻的摄像头的拍摄图像,和/或,目标图像组中 拍摄图像的数量大于指定阈值。
在一些实施方式中,在对第二图像组中的拍摄图像进行拼接合成,得 到辨识人物对应的视频文件时,通常需要辨识人物在一个连续的区域范围 内的活动视频,并且每个摄像头分布的位置不同,且相邻两个摄像头的拍 摄区域邻接或者存在部分重合,即相邻两个摄像头所构成的拍摄区域为一 个连续的拍摄区域,因此满足视频合成条件的目标图像组中可以包括多个 摄像头中至少存在两个相邻的摄像头的拍摄图像,这样可以使得后续拼接 合成的视频文件中至少存在一个连续的区域范围内的视频文件。
在一些实施方式中,在对图像组中的拍摄图像进行拼接合成,也需要 大量的拍摄图像才能构成一个播放时长大于一定时长的视频文件,因此满 足视频合成条件的目标图像组中拍摄图像的数量大于指定阈值,该指定阈 值的具体数值可以不作为限定,可以根据需求视频文件的播放时长而设定。
步骤S282:根据拍摄图像的拍摄时间先后顺序,将多个目标图像组中 的拍摄图像,按照不同的图像组进行拼接合成,得到多个辨识人物对应的 视频文件。
在本申请实施例中,根据拍摄图像的拍摄时间的先后顺序,将多个目 标图像组中的拍摄图像,按照不同的图像组进行拼接合成的方式可以参阅 前述实施例中的内容,在此不再赘述。
在一些实施方式中,服务器在获取到多个辨识人物对应的视频文件后, 可以将多个辨识人物对应的视频文件发送至电子设备。作为一种方式,服 务器可以将多个辨识人物对应的视频文件发送至同一电子设备。作为另一 种方式,将每个辨识人物对应的视频文件发送每个辨识人物所对应的电子 设备。
本申请提供的图像处理方法,通过对多个摄像头的拍摄图像中的人物 进行人脸识别,以根据识别结果获得多个摄像头的拍摄图像中存在辨识人 物的第一图像以及存在非辨识人物的第二图像,然后将第一图像按照不同 的辨识人物进行分组,得到多个第一图像组,通过将非辨识人物的外部特 征信息与辨识人物的外部特征信息进行匹配,得到辨识人物中与非辨识人 物匹配的目标人物,然后将第二图像添加至目标人物所对应的第一图像组, 得到多个第二图像组,并根据拍摄图像的拍摄时间先后顺序,将多个第二 图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物 对应的视频文件。通过对非辨识人物的外部特征信息与辨识人物的外部特 征信息进行匹配,可完整得到每个人物被拍摄到所有拍摄图像,从而生成 每个人物的完整移动路径视频。从而无需用户从多个拍摄视频中查找,自 动精确地将摄像头拍摄到的人物按照个体整理成多个视频文件,简化了用 户操作,提升了信息获取的实时性。
请参阅图6,其示出了本申请实施例提供的一种图像处理装置600的 结构框图,应用于服务器,服务器与多个摄像头通信连接,多个摄像头分 布于不同位置,多个摄像头中相邻两个摄像头的拍摄区域邻接或者存在部 分重合,该装置可以包括:图像识别模块610、图像分组模块620、信息获 取模块630、信息匹配模块640、图像分配模块650以及图像拼接模块660。 其中,图像识别模块610用于对多个摄像头的拍摄图像中的人物进行人脸 识别,根据识别结果获得多个摄像头的拍摄图像中的第一图像以及第二图 像,第一图像中存在识别出的辨识人物,第二图像中存在未识别出的非辨 识人物;图像分组模块620用于将第一图像按照不同的辨识人物进行分组, 得到多个第一图像组,第一图像组为包含同一辨识人物的拍摄图像的集合, 每个第一图像组对应的辨识人物不同;信息获取模块630用于获取非辨识 人物的外部特征信息以及辨识人物的外部特征信息,外部特征信息用于表 征人物外部所体现的状态信息中除人脸以外的信息;信息匹配模块640用 于根据非辨识人物的外部特征信息以及辨识人物的外部特征信息,将非辨 识人物与辨识人物进行匹配,得到辨识人物中与非辨识人物匹配的目标人 物;图像分配模块650用于将第二图像添加至目标人物所对应的第一图像 组,得到多个第二图像组;图像拼接模块660用于根据拍摄图像的拍摄时 间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行拼接 合成,得到多个辨识人物对应的视频文件。
在一些实施例中,信息获取模块630获取辨识人物的外部特征信息可 以包括:图像组获取单元以及信息整合单元。其中,图像组获取单元用于 获取辨识人物对应的第一图像组中的所有拍摄图像;信息整合单元用于提 取所有拍摄图像中每个拍摄图像中辨识人物的外部特征信息,并整合成辨 识人物的外部特征信息集合。信息匹配模块640具体用于将非辨识人物的 外部特征信息与每个辨识人物的外部特征信息集合进行匹配,得到外部特 征信息匹配的外部特征信息集合,将外部特征信息匹配的外部特征信息集 合所对应的辨识人物作为辨识人物中与非辨识人物匹配的目标人物。
在一些实施例中,该图像处理装置600还可以包括:图像获取模块以 及图像筛选模块。其中,图像获取模块用于获取多个摄像头的拍摄图像; 图像筛选模块用于从多个摄像头的拍摄图像中筛选出存在人物的拍摄图像。 图像识别模块610具体用于:对筛选后的多个摄像头的拍摄图像中的人物 的面部特征进行识别,得到识别结果;根据识别结果,得到多个摄像头的 拍摄图像中存在识别出的辨识人物的第一图像,以及多个摄像头的拍摄图 像中存在未识别出的非辨识人物的第二图像。
进一步地,在一些实施例中,图像获取模块可以包括:区域发送单元、 指令接收单元以及指令响应单元。其中,区域发送单元用于发送多个摄像 头对应的多个拍摄区域的数据至移动终端,其中,多个摄像头与多个拍摄 区域一一对应;指令接收单元用于接收移动终端发送的对多个拍摄区域中 至少部分拍摄区域的选择指令,选择指令由移动终端根据多个拍摄区域的 数据显示选择界面后,检测到选择界面中对至少部分拍摄区域的选择操作 时发送,至少部分拍摄区域中相邻两个拍摄区域为邻接或者存在部分重合; 指令响应单元用于响应选择指令,从多个摄像头中获取至少部分拍摄区域 对应的摄像头的拍摄图像。
在一些实施例中,图像拼接模块660可以包括:目标获取单元以及目 标拼接单元。其中,目标获取单元用于从多个第二图像组中获取满足视频 合成条件的多个目标图像组;目标拼接单元用于根据拍摄图像的拍摄时间 先后顺序,将多个目标图像组中的拍摄图像,按照不同的图像组进行拼接 合成,得到多个辨识人物对应的视频文件。
进一步地,在一些实施例中,上述目标获取单元的视频合成条件可以 包括:目标图像组包括多个摄像头中至少存在两个相邻的摄像头对目标移 动对象的拍摄图像;或者目标图像组中拍摄图像的数量大于指定阈值。
在一些实施例中,图像拼接模块660可以具体用于:从多个第二图像 组的所有拍摄图像中获取指定时间段内的多个指定拍摄图像;按照拍摄时 间的先后顺序,将多个指定拍摄图像按照不同的图像组进行拼接合成,得 到多个辨识人物对应的视频文件。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述 描述装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程, 在此不再赘述。
在本申请所提供的几个实施例中,所显示或讨论的模块相互之间的耦 合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或 通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块 中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在 一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软 件功能模块的形式实现。
综上,本申请提供的图像处理方法及装置,应用于服务器,服务器与 多个摄像头通信连接,通过将多个摄像头分布于不同位置,以及对多个摄 像头的拍摄图像中的人物进行人脸识别,以根据识别结果获得多个摄像头 的拍摄图像中存在辨识人物的第一图像以及存在非辨识人物的第二图像, 然后将第一图像按照不同的辨识人物进行分组,得到多个第一图像组,通 过将非辨识人物的外部特征信息与辨识人物的外部特征信息进行匹配,得到辨识人物中与非辨识人物匹配的目标人物,然后将第二图像添加至目标 人物所对应的第一图像组,得到多个第二图像组,并根据拍摄图像的拍摄 时间先后顺序,将多个第二图像组中的拍摄图像按照不同的图像组进行拼 接合成,得到多个辨识人物对应的视频文件。通过对非辨识人物的外部特 征信息与辨识人物的外部特征信息进行匹配,可完整得到每个人物被拍摄 到所有拍摄图像,从而生成每个人物的完整移动路径视频。从而无需用户从多个拍摄视频中查找,自动精确地将摄像头拍摄到的人物按照个体整理 成多个视频文件,简化了用户操作,提升了信息获取的实时性。
请参考图7,其示出了本申请实施例提供的一种服务器的结构框图。该 服务器100可以是数据服务器、网络服务器等能够运行应用程序的服务器。 本申请中的服务器100可以包括一个或多个如下部件:处理器110、存储器 120、以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存 储器120中并被配置为由一个或多个处理器110执行,一个或多个程序配 置用于执行如前述方法实施例所描述的方法。
处理器110可以包括一个或者多个处理核。处理器110利用各种接口 和线路连接整个服务器100内的各个部分,通过运行或执行存储在存储器 120内的指令、程序、代码集或指令集,以及调用存储在存储器120内的数 据,执行服务器100的各种功能和处理数据。可选地,处理器110可以采 用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field -Programmable Gate Array,FPGA)、可编程逻辑阵列(ProgrammableLogic Array,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理 器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit, GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作 系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调 制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集 成到处理器110中,单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(Random Access Memory,RAM), 也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指 令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储 数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至 少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储服务器100 在使用中所创建的数据(比如图像数据、音视频数据、提示数据)等。
请参考图8,其示出了本申请实施例提供的一种计算机可读存储介质 的结构框图。该计算机可读介质800中存储有程序代码,程序代码可被处 理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编 程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地, 计算机可读存储介质800包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上 述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以 从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机 程序产品中。程序代码810可以例如以适当形式进行压缩。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对 其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通 技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改, 或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使 相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种图像处理方法,其特征在于,应用于服务器,所述服务器与多个摄像头通信连接,所述多个摄像头分布于不同位置,所述多个摄像头中相邻两个摄像头的拍摄区域邻接或者存在部分重合,所述方法包括:
对所述多个摄像头的拍摄图像中的人物进行人脸识别,根据识别结果获得所述多个摄像头的拍摄图像中的第一图像以及第二图像,所述第一图像中存在识别出的辨识人物,所述第二图像中存在未识别出的非辨识人物;
将所述第一图像按照不同的辨识人物进行分组,得到多个第一图像组,所述第一图像组为包含同一辨识人物的拍摄图像的集合,每个第一图像组对应的辨识人物不同;
获取所述非辨识人物的外部特征信息以及所述辨识人物的外部特征信息,所述外部特征信息用于表征人物外部所体现的状态信息中除人脸以外的信息;
根据所述非辨识人物的外部特征信息以及所述辨识人物的外部特征信息,将所述非辨识人物与所述辨识人物进行匹配,得到所述辨识人物中与所述非辨识人物匹配的目标人物;
将所述第二图像添加至所述目标人物所对应的第一图像组,得到多个第二图像组;
根据拍摄图像的拍摄时间先后顺序,将所述多个第二图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件。
2.根据权利要求1所述的方法,其特征在于,所述获取所述辨识人物的外部特征信息,包括:
获取所述辨识人物对应的所述第一图像组中的所有拍摄图像;
提取所述所有拍摄图像中每个拍摄图像中所述辨识人物的外部特征信息,并整合成所述辨识人物的外部特征信息集合;
所述根据所述非辨识人物的外部特征信息以及所述辨识人物的外部特征信息,将所述非辨识人物与所述辨识人物进行匹配,得到所述辨识人物中与所述非辨识人物匹配的目标人物,包括:
将所述非辨识人物的外部特征信息与每个辨识人物的所述外部特征信息集合进行匹配,得到所述外部特征信息匹配的外部特征信息集合,将所述外部特征信息匹配的外部特征信息集合所对应的辨识人物作为所述辨识人物中与所述非辨识人物匹配的目标人物。
3.根据权利要求1所述的方法,其特征在于,在所述对所述多个摄像头的拍摄图像中的人物进行人脸识别之前,所述方法还包括:
获取所述多个摄像头的拍摄图像;
从所述多个摄像头的拍摄图像中筛选出存在人物的拍摄图像;
所述对所述多个摄像头的拍摄图像中的人物进行人脸识别,根据识别结果获得所述多个摄像头的拍摄图像中的第一图像以及第二图像,包括:
对筛选后的所述多个摄像头的拍摄图像中的人物的面部特征进行识别,得到识别结果;
根据识别结果,得到所述多个摄像头的拍摄图像中存在识别出的辨识人物的第一图像,以及所述多个摄像头的拍摄图像中存在未识别出的非辨识人物的第二图像。
4.根据权利要求3所述的方法,其特征在于,所述获取所述多个摄像头的拍摄图像,包括:
发送所述多个摄像头对应的多个拍摄区域的数据至移动终端,其中,所述多个摄像头与所述多个拍摄区域一一对应;
接收所述移动终端发送的对所述多个拍摄区域中至少部分拍摄区域的选择指令,所述选择指令由所述移动终端根据所述多个拍摄区域的数据显示选择界面后,检测到所述选择界面中对所述至少部分拍摄区域的选择操作时发送,所述至少部分拍摄区域中相邻两个拍摄区域为邻接或者存在部分重合;
响应所述选择指令,从所述多个摄像头中获取所述至少部分拍摄区域对应的摄像头的拍摄图像。
5.根据权利要求1所述的方法,其特征在于,所述根据拍摄图像的拍摄时间先后顺序,将所述多个第二图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件,包括:
从所述多个第二图像组中获取满足视频合成条件的多个目标图像组;
根据拍摄图像的拍摄时间先后顺序,将所述多个目标图像组中的拍摄图像,按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件。
6.根据权利要求5所述的方法,其特征在于,所述视频合成条件包括:
所述目标图像组包括所述多个摄像头中至少存在两个相邻的摄像头对所述目标图像组对应的辨识人物的拍摄图像;或者
所述目标图像组中拍摄图像的数量大于指定阈值。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述根据拍摄图像的拍摄时间先后顺序,将所述多个第二图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件,包括:
从所述多个第二图像组的所有拍摄图像中获取指定时间段内的多个指定拍摄图像;
按照拍摄时间的先后顺序,将所述多个指定拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件。
8.一种图像处理装置,其特征在于,应用于服务器,所述服务器与多个摄像头通信连接,所述多个摄像头分布于不同位置,所述多个摄像头中相邻两个摄像头的拍摄区域邻接或者存在部分重合,所述装置包括:
图像识别模块,用于对所述多个摄像头的拍摄图像中的人物进行人脸识别,根据识别结果获得所述多个摄像头的拍摄图像中的第一图像以及第二图像,所述第一图像中存在识别出的辨识人物,所述第二图像中存在未识别出的非辨识人物;
图像分组模块,用于将所述第一图像按照不同的辨识人物进行分组,得到多个第一图像组,所述第一图像组为包含同一辨识人物的拍摄图像的集合,每个第一图像组对应的辨识人物不同;
信息获取模块,用于获取所述非辨识人物的外部特征信息以及所述辨识人物的外部特征信息,所述外部特征信息用于表征人物外部所体现的状态信息中除人脸以外的信息;
信息匹配模块,用于根据所述非辨识人物的外部特征信息以及所述辨识人物的外部特征信息,将所述非辨识人物与所述辨识人物进行匹配,得到所述辨识人物中与所述非辨识人物匹配的目标人物;
图像分配模块,用于将所述第二图像添加至所述目标人物所对应的第一图像组,得到多个第二图像组;
图像拼接模块,用于根据拍摄图像的拍摄时间先后顺序,将所述多个第二图像组中的拍摄图像按照不同的图像组进行拼接合成,得到多个辨识人物对应的视频文件。
9.一种服务器,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-7任一项所述的方法。
10.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-7任一项所述的方法。
CN201910579249.5A 2019-06-28 2019-06-28 图像处理方法、装置、服务器及存储介质 Active CN110266953B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910579249.5A CN110266953B (zh) 2019-06-28 2019-06-28 图像处理方法、装置、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910579249.5A CN110266953B (zh) 2019-06-28 2019-06-28 图像处理方法、装置、服务器及存储介质

Publications (2)

Publication Number Publication Date
CN110266953A true CN110266953A (zh) 2019-09-20
CN110266953B CN110266953B (zh) 2021-05-07

Family

ID=67923250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910579249.5A Active CN110266953B (zh) 2019-06-28 2019-06-28 图像处理方法、装置、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN110266953B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110909651A (zh) * 2019-11-15 2020-03-24 腾讯科技(深圳)有限公司 视频主体人物的识别方法、装置、设备及可读存储介质
CN111601080A (zh) * 2020-05-12 2020-08-28 杭州武盛广告制作有限公司 一种小区安防监控视频储存用视频管理系统
CN113536914A (zh) * 2021-06-09 2021-10-22 重庆中科云从科技有限公司 一种对象跟踪识别方法、系统、设备及介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1401109A (zh) * 2000-12-12 2003-03-05 皇家菲利浦电子有限公司 在住所安全监测的出口/入口位置上减少虚警的方法和设备
CN1658670A (zh) * 2004-02-20 2005-08-24 上海银晨智能识别科技有限公司 具有多摄像机的智能跟踪监控系统
CN101359368A (zh) * 2008-09-09 2009-02-04 华为技术有限公司 一种视频图像聚类方法及系统
CN106454107A (zh) * 2016-10-28 2017-02-22 努比亚技术有限公司 一种拍摄终端及拍摄参数设置方法
CN106663196A (zh) * 2014-07-29 2017-05-10 微软技术许可有限责任公司 视频中的计算机显著人物识别
CN106709424A (zh) * 2016-11-19 2017-05-24 北京中科天云科技有限公司 一种优化的监控视频存储系统及设备
CN107566907A (zh) * 2017-09-20 2018-01-09 广东欧珀移动通信有限公司 视频剪辑方法、装置、存储介质及终端
CN107679559A (zh) * 2017-09-15 2018-02-09 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和移动终端
CN108234961A (zh) * 2018-02-13 2018-06-29 欧阳昌君 一种多路摄像机编码与视频流引流方法及系统
CN108460356A (zh) * 2018-03-13 2018-08-28 上海海事大学 一种基于监控系统的人脸图像自动处理系统
CN108471502A (zh) * 2018-06-01 2018-08-31 深圳岚锋创视网络科技有限公司 一种相机的拍摄方法、装置和相机
WO2019046820A1 (en) * 2017-09-01 2019-03-07 Percipient.ai Inc. IDENTIFICATION OF INDIVIDUALS IN A DIGITAL FILE USING MULTIMEDIA ANALYSIS TECHNIQUES

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1401109A (zh) * 2000-12-12 2003-03-05 皇家菲利浦电子有限公司 在住所安全监测的出口/入口位置上减少虚警的方法和设备
CN1658670A (zh) * 2004-02-20 2005-08-24 上海银晨智能识别科技有限公司 具有多摄像机的智能跟踪监控系统
CN101359368A (zh) * 2008-09-09 2009-02-04 华为技术有限公司 一种视频图像聚类方法及系统
CN106663196A (zh) * 2014-07-29 2017-05-10 微软技术许可有限责任公司 视频中的计算机显著人物识别
CN106454107A (zh) * 2016-10-28 2017-02-22 努比亚技术有限公司 一种拍摄终端及拍摄参数设置方法
CN106709424A (zh) * 2016-11-19 2017-05-24 北京中科天云科技有限公司 一种优化的监控视频存储系统及设备
WO2019046820A1 (en) * 2017-09-01 2019-03-07 Percipient.ai Inc. IDENTIFICATION OF INDIVIDUALS IN A DIGITAL FILE USING MULTIMEDIA ANALYSIS TECHNIQUES
CN107679559A (zh) * 2017-09-15 2018-02-09 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和移动终端
CN107566907A (zh) * 2017-09-20 2018-01-09 广东欧珀移动通信有限公司 视频剪辑方法、装置、存储介质及终端
CN108234961A (zh) * 2018-02-13 2018-06-29 欧阳昌君 一种多路摄像机编码与视频流引流方法及系统
CN108460356A (zh) * 2018-03-13 2018-08-28 上海海事大学 一种基于监控系统的人脸图像自动处理系统
CN108471502A (zh) * 2018-06-01 2018-08-31 深圳岚锋创视网络科技有限公司 一种相机的拍摄方法、装置和相机

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110909651A (zh) * 2019-11-15 2020-03-24 腾讯科技(深圳)有限公司 视频主体人物的识别方法、装置、设备及可读存储介质
CN111310731A (zh) * 2019-11-15 2020-06-19 腾讯科技(深圳)有限公司 基于人工智能的视频推荐方法、装置、设备及存储介质
CN110909651B (zh) * 2019-11-15 2023-12-26 腾讯科技(深圳)有限公司 视频主体人物的识别方法、装置、设备及可读存储介质
CN111310731B (zh) * 2019-11-15 2024-04-09 腾讯科技(深圳)有限公司 基于人工智能的视频推荐方法、装置、设备及存储介质
CN111601080A (zh) * 2020-05-12 2020-08-28 杭州武盛广告制作有限公司 一种小区安防监控视频储存用视频管理系统
CN111601080B (zh) * 2020-05-12 2021-08-10 湖北君赞智能科技有限公司 一种小区安防监控视频储存用视频管理系统
CN113536914A (zh) * 2021-06-09 2021-10-22 重庆中科云从科技有限公司 一种对象跟踪识别方法、系统、设备及介质

Also Published As

Publication number Publication date
CN110266953B (zh) 2021-05-07

Similar Documents

Publication Publication Date Title
CN110267008B (zh) 图像处理方法、装置、服务器及存储介质
TWI615776B (zh) 移動物件的虛擬訊息建立方法、搜尋方法與應用系統
CN110166827B (zh) 视频片段的确定方法、装置、存储介质及电子装置
CN110266953A (zh) 图像处理方法、装置、服务器及存储介质
CN104915351B (zh) 图片排序方法及终端
CN113365147B (zh) 基于音乐卡点的视频剪辑方法、装置、设备及存储介质
CN107358175A (zh) 虹膜采集方法及电子装置
CN113627402B (zh) 一种图像识别方法及相关装置
CN112668410B (zh) 分拣行为检测方法、系统、电子装置和存储介质
CN111339831A (zh) 一种照明灯控制方法和系统
CN110267010A (zh) 图像处理方法、装置、服务器及存储介质
CN109670517A (zh) 目标检测方法、装置、电子设备和目标检测模型
CN109727208A (zh) 滤镜推荐方法、装置、电子设备及存储介质
US20230206093A1 (en) Music recommendation method and apparatus
CN112884811A (zh) 一种针对无人机集群的光电探测跟踪方法及系统
CN110198472B (zh) 视频资源的播放方法及装置
CN107479715A (zh) 利用手势控制实现虚拟现实交互的方法和装置
Othman et al. Challenges and Limitations in Human Action Recognition on Unmanned Aerial Vehicles: A Comprehensive Survey.
CN111290751B (zh) 特效生成方法、装置、系统、设备和存储介质
CN103186590A (zh) 一种通过手机获取在逃通缉人员身份信息的方法
CN108076280A (zh) 一种基于图像识别的影像分享方法及装置
KR101738580B1 (ko) 표정 인식 기반 음원 제공 시스템 및 서비스
CN110267011A (zh) 图像处理方法、装置、服务器及存储介质
CN106997449A (zh) 具有人脸识别功能的机器人和人脸识别方法
CN109166057A (zh) 一种景区导游方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant