发明内容
本发明的目的之一是提供一种基于图像的大数据处理方法,其能够全面、准确捕获目标区域和待分析对象,显著提高图像捕获能力,改善人脸识别及其处理效率。
本发明为解决上述技术问题而采取的技术方案为:一种基于图像的大数据处理方法,包括:采集图像,对图像进行处理,提取人脸及其特征,匹配人脸特征,匹配时输出结果,显示结果。
在一个实施例中,该方法具体包括:步骤S1,设置图像采集模块的参数;步骤S2,采集目标区域的图像;步骤S3,确定目标区域的图像参数,判断该图像参数是否满足要求,如果满足则继续执行步骤S4,否则确定需要调节的图像参数的类型和数值,并返回步骤S1进行图像采集模块的参数的设置;步骤S4,将采集的目标区域的图像进行人脸区域检测与分割;步骤S5,在分割的图像中提取人脸信息;步骤S6,对提取的人脸信息进行预处理;步骤S7:对预处理的结果进行特征提取;步骤S8:将特征提取的结果在大数据平台上进行特征匹配;步骤S9,如果符合匹配要求,则进入步骤S10;否则返回步骤S5,提取下一个人脸信息,并以此执行之后的操作,直到完成所有分割的图像中的所有人脸信息;步骤S10:通过音频或视频的方式提醒或显示嫌疑对象的个人信息以及在目标区域中的位置。
在一个实施例中,该图像采集模块包括:第一连接杆1,第一连接轴2,可变长度连接杆3,第二连接轴7,第二连接杆8以及摄像头9,其中可变长度连接杆3包括第一部分4、第二部分6和可变长度部分5,其中可变长度部分5的一端被容纳在第一部分4内,另一端被容纳在第二部分5内;固定在墙壁上的第一连接杆1通过第一连接轴2而与可变长度连接杆3相连接,用于实现图像采集模块的图像采集方向的左右移动;可变长度连接杆3通过第二连接轴7而与第二连接杆8相连接,用于实现图像采集模块的图像采集方向的上下移动;可变长度连接杆3包括的第一部分4连接于第一连接轴2,包括的第二部分6连接于第二连接轴7,其中可变长度部分5是在电或磁信号控制的伸缩部件,用于实现图像采集模块的前后移动;其中第一连接轴1和第二连接轴7既作为轴连接部件,同时内部也包含控制可变长度部分5的长度的电或磁控制部件、以及分别控制第一连接杆1与可变长度连接杆3的相对移动、控制第二连接杆8与可变长度连接杆3的相对移动的调节和设置部件。
在一个实施例中,在步骤S3中,确定目标区域的图像参数,判断该图像参数是否满足要求包括:确定采集的目标区域中有效范围所占的比例和环境光强度是否都满足预设的要求,当不满足要求时,调度器基于当前参数自动调取与当前参数对应的位于映射表中的目标参数,并将目标参数通过传输模块递送给图像采集模块。
在一个实施例中,电或磁信号控制的伸缩部件为电致伸缩、磁致伸缩部件,用于在施加电或磁信号时伸长,在去除电或磁信号时恢复形变。电或磁控制部件、调节和设置部件可通过有线或无线的方式与控制平台通信,用于发送和接收用于设置和调节轴连接的移动角度和方向的数据、进而控制可变长度部分5的长度的数据。
在一个实施例中,在步骤S4和S5中,将采集的目标区域的图像进行人脸区域检测与分割,在分割的图像中提取人脸信息包括:提取采集的目标区域的图像,用滤波器执行平滑操作,获得该图像的卷积值;计算选定的第一部分的多个相邻像素的梯度,判断梯度大于阈值时,分割目标与背景,删除面积小于临界值的区域;计算该图像的剩余像素的概率,判断像素的所述类型,符合要求的类型则更新背景中对应的像素;略去该图像的边缘,在面积大于临界值的区域中将噪声滤除,并提取像素灰度方差大于门限的区域,计算量化的梯度图,根据训练的人脸模型导出梯度图的概率图,用矩形窗口扫描区域,根据训练的模型和概率图分类该图像中的对象,确定对象为人脸的概率,如果该概率超过设定值,则确定对象为人脸,否则不是人脸;将确定的人脸的区域作为分割的第一区域;重复执行上述操作中其它部分的操作,直至完成图像的全部分割;并且将分割的区域中的确定的人脸的区域的像素的集合作为提取的人脸信息;
在一个实施例中,步骤S6,对提取的人脸信息进行预处理包括;步骤S61,对确定的人脸的区域中提取的人脸信息进行对数变换,求取变换结果执行离散小波变换并获得分量,将该分量分解后得到多个不同类型的分量,基于多个不同类型的分量执行离散小波逆变换,获得预处理的人脸信息,求取提取的人脸信息与预处理的人脸信息的差分信号,作为图像增强的人脸信息;步骤S62,对图像增强的人脸信息进行人脸检测,得到人脸的面部器官区域,根据检测的人脸的宽度和高度,依照比例处确定第一区域,并获得第一区域及其上下左右四部分邻近区域的灰度值,移动第一区域,当其灰度值均小于其四部分邻近区域的灰度值的特定比例时,确定移动后的第一区域为眼部区域,遍历区域以获得两个眼部区域,确定这两个眼部区域的中心点的坐标(a1,b1)和(a2,b2),计算变换角度α以及变换值T,α的正切值为两个眼部区域的中心点的纵坐标差与横坐标差的商,T为:将Std除以以下值,两个眼部区域的中心点的纵坐标差的平方与横坐标差的平方的总和的平方根,其中Std为标准的左右眼间距;计算人脸的面部器官区域的每个区域的横坐标乘以Std以及α的余弦值,再计算人脸的面部器官区域的每个区域的纵坐标乘以Std以及α的正弦值,两者的差值作为变换后的人脸的面部器官区域的每个区域的横坐标,之后,计算人脸的面部器官区域的每个区域的横坐标乘以Std以及α的正弦值,再计算人脸的面部器官区域的每个区域的纵坐标乘以Std以及α的余弦值,两者的值大于临界值时输出的总和作为变换后的人脸的面部器官区域的每个区域的纵坐标;通过以上操作,可以获得人脸的面部器官的正面视图。
在一个实施例中,步骤S7:对预处理的结果进行特征提取包括:将预处理的结果二值化,针对两个眼部区域上方的图像,通过边缘检测,获得眉部区域,对该区域中的单元从边缘开始从两个相反的方向进行搜索,获得的第1个黑色像素点为眉部端点的特征,计算两个端点的中间位置的横坐标,沿着横坐标在竖直方向上搜索,获得的第1个白色像素点为眉部外的区域,回退一个搜索点即为眉部区域的点,获得眉部区域的中心位置以及宽度和高度;对于眼部区域,根据之前步骤获得的两个眼部区域的中心点的坐标,沿着其中的横坐标在竖直方向上搜索,获得的第1个白色像素点为眼部外的区域,回退一个搜索点即为眼部区域的点,获得眼部区域的中心位置以及宽度和高度;对于嘴部区域,根据图像增强的步骤,获得嘴部轮廓的特征;对于鼻部区域,在眼部区域的下方中间的方形区域中,从边缘开始从两个相反的方向进行搜索,获得的第1个黑色像素点为鼻部的特征,并对鼻部周围进行搜索,高亮区域的中心为鼻尖的特征。
在一个实施例中,步骤S8:将特征提取的结果在大数据平台上进行特征匹配包括:步骤S81,将步骤S7中获取的面部特征信息分类聚合,根据类别将各类特征传输到大数据平台,并分配存储资源,采用约束条件将大数据平台中的训练的参考图像的特征集关于传输来的特征进行判定,看是否满足约束条件,如果满足条件并且收敛则进入到步骤S82;步骤S82,根据神经网络算法以及大数据平台中的参考图像的特征集,基于传输的特征,计算欧式距离,当该欧式距离小于阈值时则输出第一结果;否则提取传输的特征的集合,提取出多个第一多维向量,然后拼接为维度大于第一多维的第二多维人脸向量,用分析方法对特征降维,将其重新降维到第一多维,计算传输的特征与参考图像的特征的贝叶斯概率,当其值大于临界值时,则输出第二结果,否则输出第一结果。参考图像通过以下的方式训练:将参考图像进行均匀分割,并且提取出对应图像的观察值序列;对参数初始化,确定模型的状态数和观察序列向量的大小;计算更新的参数,将参数调整到最大值;重复执行以上过程,直到满足预设条件;该分析方法为:将初始数据的多维向量创建成矩阵,对矩阵中的元素归一化变换,并进一步计算得到相关系数矩阵,求解相关系数矩阵R的特征方程,得到多个解作为基本元素,对多个基本元素进行加权求和,获得最终的结果,该权值与每个基本元素的方差相关联;在步骤S82中,在值大于临界值,输出第二结果之前,可以进一步执行以下步骤以增强识别准确度:将参考图像的特征和对应的传输的特征投影到空间,并获得其系数,求取欧氏距离,如果大于阈值则输出高电平逻辑,否则输出低电平逻辑,根据值大于临界值时输出的高电平逻辑,如果获得系数求取的欧氏距离与值大于临界值时输出的值进行与逻辑运算,结果为真时输出第二结果。
在一个实施例中,在步骤S9中,如果输出的结果是第二结果,则进入步骤S10;否则返回步骤S5,提取下一个人脸信息,并以此执行之后的操作,直到完成所有分割的图像中的所有人脸信息。步骤S10进一步包括,提取下一张图像,根据对象在图像中的位置的变化来分析嫌疑对象的运动方向,并将嫌疑对象的运动方向显示在屏幕上。进一步地,大数据中心还将该嫌疑对象的数据进行更新;大数据中心将该嫌疑对象的实时移动信息经由无线链路发送给缉捕人员的移动终端,以指导缉捕人员实时掌握嫌疑对象的位置信息,并高效地缉捕嫌疑对象。
具体实施方式
在进行以下具体实施方式之前,阐述贯穿本专利文档所使用的某些词语和短语的定义可能是有利的:术语“包括”和“包含”及其派生词意味着包括而没有限制;术语“或”是包含的,意味着和/或;短语“与...相关联”、“与其相关联”及其派生词可能意味着包括,被包括在...内,与...互连,包含,被包含在...内,连接到...或与...连接,耦合到...或与...耦合,可与...通信,与...合作,交织,并列,接近...,被绑定到...或与...绑定,具有,具有...的属性,等等;而术语“控制器”意味着控制至少一个操作的任何设备、系统或其部件,这样的设备可能以硬件、固件或软件或者其中至少两个的一些组合来实现。应当注意的是:与任何特定的控制器相关联的功能性可能是集中式或分布式的,无论是本地还是远程。贯穿本专利文档提供用于某些词语和短语的定义,本领域技术人员应当理解:如果不是大多数情况下,在许多情况下,这样的定义适用于现有的以及这样定义的词语和短语的未来使用。
在下面的描述中,参考附图并以图示的方式示出几个具体的实施例。将理解的是:可设想并且可做出其他实施例而不脱离本公开的范围或精神。因此,以下详细描述不应被认为具有限制意义。
根据本发明的示范性实施例,基于图像的大数据处理方法包括:采集图像,对图像进行处理,提取人脸及其特征,匹配人脸特征,匹配时输出结果,显示结果。
根据本发明的示范性实施例,图1图示一种基于图像的大数据处理方法的流程简图。具体地,该方法包括:
步骤S1,设置图像采集模块的参数;
步骤S2,采集目标区域的图像;
步骤S3,确定目标区域的图像参数,判断该图像参数是否满足要求,如果满足则继续执行步骤S4,否则确定需要调节的图像参数的类型和数值,并返回步骤S1进行图像采集模块的参数的设置;
步骤S4,将采集的目标区域的图像进行人脸区域检测与分割;
步骤S5,在分割的图像中提取人脸信息;
步骤S6,对提取的人脸信息进行预处理;
步骤S7:对预处理的结果进行特征提取;
步骤S8:将特征提取的结果在大数据平台上进行特征匹配;
步骤S9,如果符合匹配要求,则进入步骤S10;否则返回步骤S5,提取下一个人脸信息,并以此执行之后的操作,直到完成所有分割的图像中的所有人脸信息;
步骤S10:通过音频或视频的方式提醒或显示嫌疑对象的个人信息以及在目标区域中的位置。
根据本发明的示范性实施例,图2图示图像采集模块的结构图。其中该图像采集模块包括:第一连接杆1,第一连接轴2,可变长度连接杆3,第二连接轴7,第二连接杆8以及摄像头9,其中可变长度连接杆3包括第一部分4、第二部分6和可变长度部分5,其中可变长度部分5的一端被容纳在第一部分4内,另一端被容纳在第二部分5内;固定在墙壁上的第一连接杆1通过第一连接轴2而与可变长度连接杆3相连接,用于实现图像采集模块的图像采集方向的左右移动(在垂直于墙壁平面的方向上,从墙壁内向墙壁外看;也就是说,实现可变长度连接杆3相对于第一连接杆1左右移动);可变长度连接杆3通过第二连接轴7而与第二连接杆8相连接,用于实现图像采集模块的图像采集方向的上下移动(在垂直于墙壁平面的方向上,从墙壁内向墙壁外看;也就是说,实现第二连接杆8相对于可变长度连接杆3的上下移动);可变长度连接杆3包括的第一部分4连接于第一连接轴2,包括的第二部分6连接于第二连接轴7,其中可变长度部分5是在电或磁信号控制的伸缩部件(例如,电致伸缩、磁致伸缩部件;例如用于在施加电或磁信号时伸长,在去除电或磁信号时恢复形变),用于实现图像采集模块的前后移动。其中第一连接轴1和第二连接轴7既作为轴连接部件,同时内部也包含控制可变长度部分5的长度的电或磁控制部件、以及分别控制第一连接杆1与可变长度连接杆3的相对移动、控制第二连接杆8与可变长度连接杆3的相对移动的调节和设置部件。电或磁控制部件、调节和设置部件可通过有线或无线的方式与控制平台通信,用于发送和接收用于设置和调节轴连接的移动角度和方向的数据、进而控制可变长度部分5的长度的数据。通过该图像采集模块的特定连接结构,可以实现图像采集模块的图像采集的灵活调节,便于采集有效的目标区域,并且提高图像处理的针对性和处理效率。
优选地,在步骤S3中,确定目标区域的图像参数,判断该图像参数是否满足要求包括:确定采集的目标区域中有效范围所占的比例和环境光强度是否都满足预设的要求,当不满足要求时,调度器基于当前参数自动调取与当前参数对应的位于映射表中的目标参数,并将目标参数通过传输模块递送给图像采集模块。这样做是因为,在采集的目标区域中,往往存在墙壁、反光、玻璃、柱子、显示屏等无效并且影响图像处理的区域,需要进行合理调节以优化采集的图像目标中有效的目标区域所占的比例,进而提高图像处理的针对性和处理效率。
优选地,在步骤S4和S5中,将采集的目标区域的图像进行人脸区域检测与分割,在分割的图像中提取人脸信息包括:提取采集的目标区域的图像,用滤波器执行平滑操作,获得该图像的卷积值;计算选定的第一部分的多个相邻像素的梯度,判断梯度大于阈值时,分割目标与背景,删除面积小于临界值的区域;计算该图像的剩余像素的概率,判断像素的所述类型,符合要求的类型则更新背景中对应的像素;略去该图像的边缘,在面积大于临界值的区域中将噪声滤除,并提取像素灰度方差大于门限的区域,计算量化的梯度图,根据训练的人脸模型导出梯度图的概率图,用矩形窗口扫描区域,根据训练的模型和概率图分类该图像中的对象,确定对象为人脸的概率,如果该概率超过设定值,则确定对象为人脸,否则不是人脸;将确定的人脸的区域作为分割的第一区域;重复执行上述操作中其它部分的操作,直至完成图像的全部分割;并且将分割的区域中的确定的人脸的区域的像素的集合作为提取的人脸信息。
具体地,步骤S6,对提取的人脸信息进行预处理包括;
步骤S61,对确定的人脸的区域中提取的人脸信息进行对数变换,求取变换结果执行离散小波变换并获得分量,将该分量分解后得到多个不同类型的分量,基于多个不同类型的分量执行离散小波逆变换,获得预处理的人脸信息,求取提取的人脸信息与预处理的人脸信息的差分信号,作为图像增强的人脸信息;
步骤S62,对图像增强的人脸信息进行人脸检测,得到人脸的面部器官区域,根据检测的人脸的宽度和高度,依照比例处确定第一区域,并获得第一区域及其上下左右四部分邻近区域的灰度值,移动第一区域,当其灰度值均小于其四部分邻近区域的灰度值的特定比例时,确定移动后的第一区域为眼部区域,遍历区域以获得两个眼部区域,确定这两个眼部区域的中心点的坐标(a1,b1)和(a2,b2),计算变换角度α以及变换值T,α的正切值为两个眼部区域的中心点的纵坐标差与横坐标差的商,T为:将Std除以以下值,两个眼部区域的中心点的纵坐标差的平方与横坐标差的平方的总和的平方根,其中Std为标准的左右眼间距;计算人脸的面部器官区域的每个区域的横坐标乘以Std以及α的余弦值,再计算人脸的面部器官区域的每个区域的纵坐标乘以Std以及α的正弦值,两者的差值作为变换后的人脸的面部器官区域的每个区域的横坐标,之后,计算人脸的面部器官区域的每个区域的横坐标乘以Std以及α的正弦值,再计算人脸的面部器官区域的每个区域的纵坐标乘以Std以及α的余弦值,两者的值大于临界值时输出的总和作为变换后的人脸的面部器官区域的每个区域的纵坐标;通过以上操作,可以获得人脸的面部器官的正面视图。
优选地,步骤S7:对预处理的结果进行特征提取包括:将预处理的结果二值化,针对两个眼部区域上方的图像,通过边缘检测,获得眉部区域,对该区域中的单元从边缘开始从两个相反的方向进行搜索,获得的第1个黑色像素点为眉部端点的特征,计算两个端点的中间位置的横坐标,沿着横坐标在竖直方向上搜索,获得的第1个白色像素点为眉部外的区域,回退一个搜索点即为眉部区域的点,获得眉部区域的中心位置以及宽度和高度;对于眼部区域,根据之前步骤获得的两个眼部区域的中心点的坐标,沿着其中的横坐标在竖直方向上搜索,获得的第1个白色像素点为眼部外的区域,回退一个搜索点即为眼部区域的点,获得眼部区域的中心位置以及宽度和高度;对于嘴部区域,根据图像增强的步骤,获得嘴部轮廓的特征;对于鼻部区域,在眼部区域的下方中间的方形区域中,从边缘开始从两个相反的方向进行搜索,获得的第1个黑色像素点为鼻部的特征,并对鼻部周围进行搜索,高亮区域的中心为鼻尖的特征。
优选地,步骤S8:将特征提取的结果在大数据平台上进行特征匹配包括:
步骤S81,将步骤S7中获取的面部特征信息分类聚合,根据类别将各类特征传输到大数据平台,并分配存储资源,采用约束条件将大数据平台中的训练的参考图像的特征集关于传输来的特征进行判定,看是否满足约束条件,如果满足条件并且收敛则进入到步骤S82;
步骤S82,根据神经网络算法以及大数据平台中的参考图像的特征集,基于传输的特征,计算欧式距离,当该欧式距离小于阈值时则输出第一结果;否则提取传输的特征的集合,提取出多个第一多维向量,然后拼接为维度大于第一多维的第二多维人脸向量,用分析方法对特征降维,将其重新降维到第一多维,计算传输的特征与参考图像的特征的贝叶斯概率,当其值大于临界值时,则输出第二结果,否则输出第一结果。
优选地,参考图像通过以下的方式训练:将参考图像进行均匀分割,并且提取出对应图像的观察值序列;对参数初始化,确定模型的状态数和观察序列向量的大小;计算更新的参数,将参数调整到最大值;重复执行以上过程,直到满足预设条件。
优选地,该分析方法为:将初始数据的多维向量创建成矩阵,对矩阵中的元素归一化变换,并进一步计算得到相关系数矩阵,求解相关系数矩阵R的特征方程,得到多个解作为基本元素,对多个基本元素进行加权求和,获得最终的结果,该权值与每个基本元素的方差相关联。
优选地,在步骤S82中,在值大于临界值,输出第二结果之前,可以进一步执行以下步骤以增强识别准确度:将参考图像的特征和对应的传输的特征投影到空间,并获得其系数,求取欧氏距离,如果大于阈值则输出高电平逻辑,否则输出低电平逻辑,根据值大于临界值时输出的高电平逻辑,如果获得系数求取的欧氏距离与值大于临界值时输出的值进行与逻辑运算,结果为真时输出第二结果。
优选地,在步骤S9中,如果输出的结果是第二结果,则进入步骤S10;否则返回步骤S5,提取下一个人脸信息,并以此执行之后的操作,直到完成所有分割的图像中的所有人脸信息。
优选地,步骤S10进一步包括,提取下一张图像,根据对象在图像中的位置的变化来分析嫌疑对象的运动方向,并将嫌疑对象的运动方向显示在屏幕上。进一步地,大数据中心还将该嫌疑对象的数据进行更新;大数据中心将该嫌疑对象的实时移动信息经由无线链路发送给缉捕人员的移动终端,以指导缉捕人员实时掌握嫌疑对象的位置信息,并高效地缉捕嫌疑对象。
上述的各个技术术语是本领域中的具有通常含义的常规技术术语,为了不模糊本发明的重点,在此不对其进行进一步的解释。
综上,在本发明的技术方案中,通过采用了一种基于图像的大数据处理方法,其能够显著提高图像捕获能力,改善人脸识别及其处理效率。将理解的是:可以硬件、软件或硬件和软件的组合的形式实现本发明的示例和实施例。如上所述,可存储任何执行这种方法的主体,以挥发性或非挥发性存储的形式,例如存储设备,像ROM,无论可抹除或可重写与否,或者以存储器的形式,诸如例如RAM、存储器芯片、设备或集成电路或在光或磁可读的介质上,诸如例如CD、DVD、磁盘或磁带。将理解的是:存储设备和存储介质是适合于存储一个或多个程序的机器可读存储的示例,当被执行时,所述一个或多个程序实现本发明的示例。经由任何介质,诸如通过有线或无线耦合载有的通信信号,可以电子地传递本发明的示例,并且示例适当地包含相同内容。
应当注意的是:因为本发明解决了显著提高图像捕获能力,改善人脸识别及其处理效率的技术问题,采用了计算机技术领域中技术人员在阅读本说明书之后根据其教导所能理解的技术手段,并获取了有益技术效果,所以在所附权利要求中要求保护的方案属于专利法意义上的技术方案。另外,因为所附权利要求要求保护的技术方案可以在工业中制造或使用,因此该方案具备实用性。
以上所述,仅为本发明的较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应包涵在本发明的保护范围之内。除非以其他方式明确陈述,否则公开的每个特征仅是一般系列的等效或类似特征的一个示例。因此,本发明的保护范围应该以权利要求书的保护范围为准。