CN109492532A - 一种图像ai识别的方法、装置和系统 - Google Patents

Abstract

本发明提供了一种图像AI识别方法、装置及系统，其中所述方法包括，录入及处理图像，识别图像中包含的信息，提取识别到的图像信息。本发明用于对图像中包含的信息自动进行准确识别，本发明的方法、装置及系统提高了用户体验，降低了后台人员的人工工作量，保证信息录入的准确性，提升了工作效率。

Description

一种图像AI识别的方法、装置和系统

技术领域

本发明涉及计算机技术，尤其涉及一种图像AI识别的方法、装置和系统。

背景技术

图像识别是指利用计算机对图像进行处理、分析和理解，以识别各种不同模式的目标和对象的技术。随着科技地不断进步，图像识别的使用日益广泛，借助手机、平板电脑等移动终端也可以进行图像识别，不再局限于计算机。

随着使用范围的扩大，对于图像识别的要求也越来越高。某些特定的识别任务已经无法通过传统图像识别方法去实现，如证件图像中文字信息的识别，需要发明新的图像识别方法，以解决图像识别过程中遇到的实际问题。

发明内容

为了克服现有图像包含的信息，特别是证件图像中的信息，难以被快速有效识别的技术问题，本发明提出了一种图像AI识别的方法，采用以下方案：

一种图像AI识别方法，所述方法包括：

录入及处理图像；

识别图像中包含的信息；

提取识别到的图像信息。

进一步地，在所述录入及处理图像中通过移动终端拍摄装置拍摄和/或从已有图像集中上传，完成图像录入。

进一步地，将录入的图像进行自动旋转，校正倾斜的图像。

进一步地，自动判断旋转后图像的边缘，对图像作归一化校正处理。

进一步地，对归一化校正的图像自动进行美化。

进一步地，所述美化图像包括去噪、平滑、灰度等级直方处理、干扰抑制等图像增强处理中的一种或多种操作。

进一步地，在所述识别图像中包含的信息中对美化后的图像进行版面分析。

进一步地，所述版面分析通过分析图像文字块、文字行，提取字符的形态特征进行匹配识别，确定字符对应的具体文字。

进一步地，所述版面分析对图像中文字行进行栏位判断识别，并处理校正。

进一步地，在所述识别图像中包含的信息过程中进行有关身份认证的活体验证过程，包括通过移动终端摄像头实时拍摄活体视频，对视频进行帧率检测、关键点追踪和3D姿态追踪，识别得到视频中的人脸，并且使用交叉对比图像功能，与身份证件图像识别的人脸图片进行对比判定。

本发明还提供一种提供图像AI识别方法的装置，所述装置包括：

图像录入处理模块，用于录入图像并进行图像处理；

图像识别模块，用于识别图像中信息；

提取模块，用于提取图像识别模块识别的图像信息。

本发明还提供一种提供图像AI识别方法的系统，所述系统包括至少一个处理器和至少一个存储器；

所述存储器存储上述方法的计算机程序，所述处理器调用存储器中的所述计算机程序以执行上述的方法。

本发明能够快速准确地识别图像，并且提取出图像中包含的信息；特别地，针对身份证件的识别增加了活体验证，保证录入的身份信息的正确性。本发明提高了用户的体验感受，并且降低了后台人员的工作量，保证了信息录入的准确性，提升了工作效率。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所指出的结构来实现和获得。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本发明实施例的图像AI识别的基本流程图；

图2示出了根据本发明实施例的图像AI识别的进一步流程示意图；

图3示出了根据本发明实施例的活体验证的流程示意图。

图4示出了根据本发明实施例的图像AI识别的装置结构示意图；

图5示出了根据本发明实施例的另一种图像AI识别的装置结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地说明，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1示出了根据本发明实施例的图像AI识别的基本流程图。如图所示，本发明实施例首先需要录入及处理图像；然后识别图像中包含的信息；最后提取识别到的图像信息，将相应信息数据输出。

本发明以针对身份证、营业执照等证件图像的图像AI识别为例进行示例性说明，其中身份证类别包括一代身份证，二代身份证，临时身份证，身份证复印件以及身份证图片，但并非仅仅限于针对证件图像进行识别，针对其他图像的识别均可适用于本发明，包括POS收款机小票、银行卡照片、发票等。

录入及处理图像前，确定录入图像的方法，基于该方法将图像录入至图像AI识别装置进行处理和识别。本发明实施例中，录入图像的方法包括通过终端摄像头拍摄形成图像和从已有图像文件集中上传图像。通过这两种方法可以看出，录入图像时，考虑了图像获取的各种方式，例如直接拍摄和上传，便于进行操作。需要说明的是，本发明并不限于这两种方法，还可以通过其他方法实现图像录入，或者仅仅是上述方法中的一种或多种均可适用于本发明。

由于录入图像的质量、角度以及图像中需要进行识别的位置和范围等都不尽相同，进行图像识别前需要对图像进行处理，包括自动旋转图像，判断图像边缘和美化图像。本发明不限于只以所述三种方式对图像进行处理，还可以通过增加其他方式(例如边缘锐化、伪彩色处理、增加对比度等)进一步实现图像处理，方便进行后续识别。

完成图像处理后，开始识别图像中包含的信息，包括对图像进行版面分析，分析图像内文字块和文字行，按文字行切割图像，识别文字行栏位，切割文字行为字符并进行文字识别，校正文字栏位和具体字符内容，完成图像识别过程。通过以上步骤实现了图像文字信息的识别，但本发明并不仅仅限于识别图像中的文字内容，亦可识别图像中的标志标识、图片和图像背景等内容，使用者可根据具体需要，利用本发明识别图像中一个或多个内容。

图像识别结束，提取识别的内容(例如图像中文字、图片等)，输出格式参照图像识别过程中识别得到的栏位或者根据需要进行调整，并依据识别目标输出图像识别内容，不仅可以输出识别内容至录入终端显示，也可将识别内容输出至另一设备或系统中进行后续处理或显示。本发明不限于使用以上输出方式，使用者可根据具体需要，选择一种或者多种方式输出识别得到的内容。

本发明实施例以电脑中识别营业执照图像为例，示例性说明图像AI识别的步骤：

在电脑端拍摄营业执照照片或上传相册中营业执照图片；

自动旋转录入的营业执照图像，使图像不再倾斜；

自动判断营业执照图像边缘，确定营业执照识别范围，忽略图像边缘背景；

自动美化营业执照图像，对图像进行去噪、平滑和图像增强等处理，提高图像质量；

自动对营业执照图像进行版面分析，对经过上述步骤处理的营业执照图像进行文字块分析；

自动切割文字块为文字行；

自动对图像中文字行进行栏位判断识别，如营业执照标题行、统一社会信用代码行、名称行、类型行、营业场所行、负责人行、成立日期行、营业期限行、经营范围行、登记机关行以及日期行等，并处理校正；

自动切割文字行为字符；

自动提取字符的形态特征；

自动匹配识别，将提取出的字符特征与文字进行匹配，确定字符对应的具体文字；

提取识别到的营业执照图像中与栏位对应的文字信息，如营业执照标题、统一社会信用代码、名称、类型、营业场所、负责人、成立日期、营业期限、经营范围、登记机关以及日期，并输出至电脑屏幕。

如图2示出了根据本发明实施例的图像AI识别的进一步流程示意图，如图2所示，首先录入图像、对图像进行旋转、边缘判断和美化等处理，然后通过版面分析、文字块/文字行分析及字符匹配识别等步骤，对图像中的文字信息进行识别并提取输出。

基于图像AI识别方法可以识别图像中的多种内容，不仅仅局限于识别图像中的文字，根据实际需求，可以采用图像AI识别方法识别图像中的图片。

示例性地，在手机端对身份证件图像进行识别。具体步骤与电脑端识别营业执照图像类似，过程如下：

在手机端拍摄身份证照片或上传相册中身份证图片；

自动旋转录入的身份证图像，使图像不再倾斜；

自动判断身份证图像边缘，确定身份证识别范围，忽略图像边缘背景；

自动美化身份证图像，对图像进行去噪、平滑和图像增强等处理，提高图像质量；

自动对身份证图像进行版面分析及文字块分析；

自动切割文字块为文字行；

自动对图像中文字行进行栏位判断识别，如姓名行、性别民族行、出生行、住址行、公民身份证号码行、签发机关行及有效期限行，并处理校正；

自动切割文字行为字符；

自动提取字符的形态特征；

自动匹配识别，将提取出的字符特征与文字进行匹配，确定字符对应的具体文字；

提取识别得到的身份证文字内容。

除此之外，在身份证识别过程中，不仅要对身份证内上述文字信息进行准确识别，而且还需依据法律法规要求，识别身份证中的证件照图片，对身份证拥有者(例如图像识别操作使用者或办理业务的用户)与拍摄或上传的身份证中证件照是否为同一人进行认证。此时在识别图像包含的信息过程中，不仅需要识别文字内容，还需识别图片内容，并进行活体验证过程，完成对身份证拥有者的身份认证。依旧以上述手机端中识别身份证为例，识别图片内容及活体验证过程如下：

在手机端拍摄身份证照片或上传相册中身份证图片；

自动旋转录入的身份证图像，使图像不再倾斜；

自动判断身份证图像边缘，确定身份证识别范围，忽略图像边缘背景；

自动美化身份证图像，对图像进行去噪、平滑和图像增强等处理，提高图像质量；

自动对身份证图像进行版面分析

自动切割身份证中的证件照图片；

打开手机摄像头拍摄操作人人脸视频；

自动对视频进行15帧/秒的高帧率检测；

自动对视频进行关键点追踪；

自动对视频进行3D姿态追踪；

自动识别视频中人脸；

使用交叉对比图像功能，自动对比判定视频中人脸和身份证中的证件照人脸，确定身份证拥有者身份的真实性；

提取识别到的文字内容，如姓名、性别、民族、出生、住址、公民身份证号码、签发机关及有效期限，以及证件照图片一并输出至手机屏幕，留待后续处理。

如图3示出了根据本发明实施例的身份证识别中活体验证的流程示意图。本发明通过活体验证过程，对比判定身份证拥有者(例如图像识别操作使用者或办理业务的用户)的人脸和录入的身份证件中的证件照人脸图片，可以确定身份证的识别是否为本人进行操作，如非本人无法通过身份认证，保证录入的身份信息的正确性。

在上述方法的基础上，本发明实施例还提供一种图像AI识别的装置，如图4所示，所述装置包括图像录入处理模块、与图像录入处理模块实现数据连接的图像识别模块、与图像识别模块实现数据连接的提取模块。其中：

所述图像录入处理模块，用于录入图像(包括拍摄或者上传等方式)，并进行旋转、边缘判断、美化图像等处理；图像处理完成后，所述图像识别模块通过上述版面分析、文字块/文字行分析和字符匹配识别等步骤开始识别图像中信息；所述提取模块，用于提取图像识别模块识别的图像信息，并将识别到的信息输出终端。

在本发明的方法可以是由计算机或嵌入式程序控制的系统来实现。因此，与之相对应地，本发明的实施例中还提供了一种图像AI识别方法的系统，如图5所示，所述系统包括至少一个处理器以及至少一个存储器；所述存储器存储执行以上本发明任意实施例方法的计算机程序，所述处理器调用存储器中的计算机程序以执行本发明任意实施例方法。

进一步地，所述存储器可与所述一个或多个处理器通信连接，所述存储器中存储有可被所述一个或多个处理器执行的指令，所述指令被所述一个或多个处理器执行，以使所述一个或多个处理器能够实现本发明的方法。

本发明实施例通过上述多重步骤对多种图像进行自动识别，能够秒级准确识别图像中的信息，并且提取从图像中识别的信息输出至终端进行显示，便于进行图像识别完成后的其他处理；同时，针对身份证件的识别增加了活体验证过程，解决身份认证无法做到的“本人意愿”判断，也即通过技术手段解决“你是你”的问题，保证身份信息录入的真实性和可靠性。本发明实施例提供的图像AI技术对图像中包含的信息自动进行准确识别，提高用户体验，并且降低后台人员的人工工作量，保证相关信息录入的准确性，提升了工作效率。

尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种图像AI识别方法，其特征在于，所述图像AI识别方法，包括：

录入及处理图像；

识别图像中包含的信息；

提取识别到的图像信息。

2.根据权利要求1所述的图像AI识别方法，其特征在于，在所述录入及处理图像的步骤中：

通过移动终端拍摄装置拍摄和/或从已有图像集中上传，完成图像录入；

将录入的图像进行自动旋转，校正倾斜的图像；

自动判断旋转后图像的边缘，对图像作归一化校正处理。

3.根据权利要求2所述的图像AI识别方法，其特征在于，对归一化校正的图像自动进行美化。

4.根据权利要求3所述的一种图像AI识别方法，其特征在于，所述美化图像包括去噪、平滑、灰度等级直方处理、干扰抑制等图像增强处理中的一种或多种操作。

5.根据权利要求4所述的一种图像AI识别方法，其特征在于，在所述识别图像中包含的信息步骤中：

对美化后的图像进行版面分析。

6.根据权利要求5所述的一种图像AI识别方法，其特征在于，所述版面分析通过分析图像文字块、文字行，提取字符的形态特征进行匹配识别，确定字符对应的具体文字。

7.根据权利要求6所述的一种图像AI识别方法，其特征在于，所述版面分析对图像中文字行进行栏位判断识别，并处理校正。

8.根据权利要求1所述的一种图像AI识别方法，其特征在于，在所述识别图像中包含的信息过程中进行有关身份认证的活体验证过程，包括：

通过移动终端摄像头实时拍摄活体视频，对视频进行帧率检测、关键点追踪和3D姿态追踪，识别得到视频中的人脸，并且使用交叉对比图像功能，与身份证件图像识别的人脸图片进行对比判定。

9.一种提供图像AI识别方法的装置，其特征在于，所述装置包括：

图像录入处理模块，用于录入图像并进行图像处理；

图像识别模块，用于识别图像中信息；

提取模块，用于提取图像识别模块识别的图像信息。

10.一种提供图像AI识别方法的系统，其特征在于，所述系统包括至少一个处理器和至少一个存储器；

所述存储器存储权利要求1-8任一所述方法的计算机程序，所述处理器调用存储器中的所述计算机程序以执行权利要求1-8任一所述的方法。