JP7165746B2 - Id認証方法および装置、電子機器並びに記憶媒体 - Google Patents

Id認証方法および装置、電子機器並びに記憶媒体 Download PDF

Info

Publication number
JP7165746B2
JP7165746B2 JP2020550841A JP2020550841A JP7165746B2 JP 7165746 B2 JP7165746 B2 JP 7165746B2 JP 2020550841 A JP2020550841 A JP 2020550841A JP 2020550841 A JP2020550841 A JP 2020550841A JP 7165746 B2 JP7165746 B2 JP 7165746B2
Authority
JP
Japan
Prior art keywords
image
face
certificate
detection result
processed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020550841A
Other languages
English (en)
Other versions
JP2021516819A (ja
Inventor
党亮亮
▲張▼瑞
黄攀
▲呉▼立威
▲陳▼▲鵬▼▲輝▼
梁明▲陽▼
▲閻▼俊▲傑▼
Original Assignee
ベイジン・センスタイム・テクノロジー・デベロップメント・カンパニー・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from CN201810918697.9A external-priority patent/CN109255299A/zh
Priority claimed from CN201810918699.8A external-priority patent/CN109359502A/zh
Application filed by ベイジン・センスタイム・テクノロジー・デベロップメント・カンパニー・リミテッド filed Critical ベイジン・センスタイム・テクノロジー・デベロップメント・カンパニー・リミテッド
Publication of JP2021516819A publication Critical patent/JP2021516819A/ja
Application granted granted Critical
Publication of JP7165746B2 publication Critical patent/JP7165746B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/535Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/33User authentication using certificates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45Structures or tools for the administration of authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/19Recognition using electronic means
    • G06V30/191Design or setup of recognition systems or techniques; Extraction of features in feature space; Clustering techniques; Blind source separation
    • G06V30/19173Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/413Classification of content, e.g. text, photographs or tables
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40Spoof detection, e.g. liveness detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Geometry (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Collating Specific Patterns (AREA)
  • Character Input (AREA)

Description

本願は、2018年08月13日に中国特許局に提出された、出願番号がCN201810918697.9である中国特許出願、および2018年08月13日に中国特許局に提出された、出願番号がCN201810918699.8である中国特許出願の優先権を主張し、当該中国特許出願の全ての内容が参照によって本願に組み込まれる。
本開示は、コンピュータビジョン技術に関し、特に、ID認証方法および装置、電子機器並びに記憶媒体に関する。
現在、保険、証券、金融などの多くの分野で、ユーザに対してID認証を実行する必要がある。現在、通常の手段では、画像収集機器によって身分証明書を手に持つユーザの写真を収集し、身分証明書を手に持つ写真をサーバにアップロードして、サーバのバックグラウンドで手動で審査することにより、収集された写真に対して手動でID認証を実行するため、多くの人的資源を必要とし、高コスト、低効率であり、且つ手動処理でエラーが発生しやすく、精度が低いため、サービスニーズを満たすことができない。
本開示の実施例は、ID認証のための技術的解決策を提供する。
本開示の実施例の一態様によれば、ID認証方法を提供し、前記方法は、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得することと、前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定することと、前記処理される画像が有効なID認証画像であるとの決定に応答して、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することと、を含む。
いくつかの実施例において、前記有効なID認証画像は、証明書を手に持つ画像を含む。
いくつかの実施例において、第1機械学習方法によって処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2機械学習方法によって前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
可能な一実施形態では、証明書を手に持つ画像は、身分証明書を手に持つ画像である。
いくつかの実施例において、前記顔検出結果は、前記処理される画像に含まれる顔の数および前記処理される画像での前記顔の位置情報のうちの少なくとも1つを含み。
例えば、顔検出結果は、画像内の顔の数および画像での各顔の位置情報を含み得る。一例では、画像での顔の位置情報は、顔フレームの位置情報を含み得る。
可能な一実施形態では、前記証明書検出結果は、前記処理される画像に含まれる証明書の数および前記処理される画像での前記証明書の位置情報のうちの少なくとも1つを含む。
別の可能な実施形態では、前記証明書検出結果は、証明書の顔情報をさらに含み、一例では、証明書の顔情報は、証明書に含まれる顔の数および/または位置情報を含む。
一例では、前記証明書検出結果は、画像に含まれる証明書の数、各証明書の位置情報および各証明書に含まれる顔の検出情報の組み合わせから選択される少なくとも1つを含む。
別の可能な実施形態では、証明書の顔情報は、証明書検出結果の一部ではなく、顔検出結果および証明書検出結果に基づいて得られたものである。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することは、前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数および/または位置情報を決定することを含む。
一例では、画像での証明書の位置情報は、証明書フレームの位置情報を含み得る。
いくつかの実施例において、前記処理される画像での前記顔の位置情報は、前記処理される画像での前記顔の第1検出フレームの頂点座標を含む。
いくつかの実施例において、前記処理される画像での前記顔の位置情報は、前記処理される画像での前記顔の第1検出フレームの中心の座標、および前記第1検出フレームの長さと幅を含む。
いくつかの実施例において、前記処理される画像での前記証明書の位置情報は、前記処理される画像での前記証明書の第2検出フレームの頂点座標を含む。
前記処理される画像での前記証明書の位置情報は、前記処理される画像での前記証明書の第2検出フレームの中心の座標、および前記第2検出フレームの長さと幅を含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従って前記処理される画像が有効なID認証画像であるか否かを決定することは、
前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することと、
前記証明書の顔情報、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像が有効なID認証画像であるか否かを決定することと、を含む。
いくつかの実施例において、前記証明書の顔情報は、前記処理される画像で検出された証明書に含まれる顔の数、前記証明書に含まれる顔の位置情報のうちの少なくとも1つを含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することは、
前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数および/または位置情報を決定することを含む。
いくつかの実施例において、前記証明書の顔情報、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像が有効なID認証画像であるか否かを決定することは、
前記証明書検出結果における証明書の数が第1プリセット要件を満たし、前記顔検出結果における顔の数が第2プリセット要件を満たし、且つ前記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、前記処理される画像が有効なID認証画像であると決定することを含む。
可能な一実施形態では、画像が有効であるか否かを決定することは、前記画像に含まれる証明書の数が第1プリセット要件を満たすこと、前記画像に含まれる顔の数が第2プリセット要件を満たすこと、且つ前記画像に含まれる証明書中的顔の数が第3プリセット要件を満たすことの3つの判断条件を満たすか否かを決定することを含む。
いくつかの実施例において、証明書検出結果は、顔の数および/または位置情報など、画像に含まれる証明書における顔検出情報を含み得る。
いくつかの実施例において、検出された前記証明書内の顔の数が第3プリセット要件を満たすか否かを決定する前に、前記ID認証方法は、前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数を決定することをさらに含む。一例では、画像内の各顔の位置情報および画像内の証明書の位置情報に基づいて、前記証明書内の顔の数を決定することができる。例えば、証明書が位置する領域内にある顔を、前記証明書内の顔として決定する。
いくつかの実施例において、前記第1プリセット要件は、前記証明書検出結果に含まれる証明書の数が1であることを含む。いくつかの実施例において、前記第2プリセット要件は、前記顔検出結果に含まれる顔の数が2より大きいか等しいことを含む。いくつかの実施例において、前記第3プリセット要件は、検出された前記証明書に含まれる顔の数が1であることを含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行することは、前記顔検出結果および前記証明書検出結果に基づいて、前記証明書に含まれる第1顔と、前記処理される画像内の、前記証明書外にある第2顔と間の類似度を決定することと、前記第1顔と前記第2顔との間の類似度に従って、ID検証結果を取得することとを含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に基づいて、前記証明書内の第1顔の位置情報、および証明書外の第2顔の位置情報を決定することができる。
いくつかの実施例において、第1顔の位置情報に基づいて、処理される画像から第1顔の画像を取得し、第2顔の位置情報に基づいて、処理される画像から第2顔の画像を取得することができる。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に基づいて、前記証明書に含まれる第1顔と、前記処理される画像内の、前記証明書外にある第2顔と間の類似度を決定することは、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像から前記第1顔の画像および前記第2顔の画像を取得することと、前記第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、前記第2顔の画像に対して特徴抽出を実行して、第2特徴を取得することと、前記第1特徴および前記第2特徴に基づいて、前記第1顔と前記第2顔との間の類似度を決定することと、を含む。
いくつかの実施例において、顔検出結果および証明書検出結果に基づいて、証明書外の顔の数が1であると決定した場合、即ち、顔検出結果に含まれる顔の数が2である場合、証明書外の顔を第2顔として決定する。いくつかの実施例において、顔検出結果および証明書検出結果に基づいて、証明書外の顔の数が2より大きいか等しいと決定した場合、即ち、顔検出結果に含まれる顔の数が2より大きい場合、証明書外の少なくとも2つの顔から第2顔を選択する。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行する前に、前記ID認証方法は、前記処理される画像に含まれる顔の数が2より大きい場合、前記処理される画像内の、前記証明書外にある少なくとも2つの顔のうちの最大の顔を前記第2顔として決定することをさらに含む。
いくつかの実施例において、前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、証明書外の少なくとも2つの顔の位置情報を決定し、証明書外の少なくとも2つの顔の位置情報、例えば、少なくとも2つの顔のうちの各顔の検出フレームの位置などに基づいて、少なくとも2つの顔のうちの最大の顔を決定する。
いくつかの実施例において、前記処理される画像内の、前記証明書外にある少なくとも2つの顔のうちの奥行きが最も小さい顔を、前記第2顔として決定する。
いくつかの実施例において、前記第1顔と前記第2顔との間の類似度がプリセットの閾値より小さいか等しいとの決定に応答して、ID検証結果が認証不合格であると決定する。
いくつかの実施例において、前記第1顔と前記第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、ID検証結果が認証合格であると決定する。
本開示の上記の各実施例によるID認証方法において、前記第1顔と前記第2顔との間の類似度に従って、ID検証結果を取得することは、前記第1顔と前記第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、前記証明書に対してテキスト認識を実行して、前記証明書のテキスト情報を取得することであって、前記テキスト情報は、名前および証明書の番号のうちの少なくとも1つの情報を含むことと、ユーザ情報データベースに基づいて前記テキスト情報を認証して、ID検証結果を取得することと、を含む。
いくつかの実施例において、ID認証要求、アカウントログイン要求、またはトランザクション要求の受信に応答して、処理される画像を取得する。本開示の上記の各実施例において、登録要求の受信に応答して、処理される画像を取得する。
いくつかの実施例において、前記ID認証方法は、前記ID検証結果がID認証合格であるとの決定に応答して、ユーザ情報をサービスデータベースに記憶することであって、前記ユーザ情報は、前記証明書のテキスト情報、前記処理される画像、前記第2顔の画像、前記第2顔の特徴情報のうちのいずれか1つまたは複数の情報を含むことをさらに含む。
いくつかの実施例において、前記ID認証方法は、ID認証要求の受信に応答して、認証される顔を含む画像を取得することと、前記サービスデータベースに前記認証される顔の画像と一致するユーザ情報があるか否かを照会することと、前記照会の結果に従って、前記認証される顔の認証結果を決定することと、をさらに含む。
いくつかの実施例において、前記ID認証要求には、前記被認証者のアカウント情報または証明書情報が含まれる。
いくつかの実施例において、前記サービスデータベース内で前記認証される顔の画像と一致するユーザ情報が見つかったことに応答して、前記認証される顔の認証結果が認証合格であると決定する。
いくつかの実施例において、前記サービスデータベース内で前記認証される顔の画像と一致するユーザ情報が見つからなかったことに応答して、前記認証される顔の認証結果が認証不合格であると決定する。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することと、前記偽造防止検出結果および前記ID検証結果に基づいて、前記処理される画像のID認証結果を決定することと、を含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することを含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することは、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像から顔領域画像および証明書領域画像を取得することと、前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することと、前記偽造手掛り検出結果に基づいて、前記処理される画像の偽造防止検出結果を取得することと、を含む。
いくつかの実施例において、前記顔領域画像における、前記顔領域画像に含まれる顔の比率は、第4プリセット要件を満たす。いくつかの実施例において、前記証明書領域画像における、前記証明書領域画像に含まれる証明書の比率は、前記第4プリセット要件を満たす。いくつかの実施例において、前記第4プリセット要件は、前記比率が1/4より大きいか等しく、且つ9/10より小さいか等しいことを含む。
いくつかの実施例において、前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ特徴抽出を実行して、前記処理される画像の特徴、前記顔領域画像の特徴および前記証明書領域画像の特徴を取得することと、前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することと、を含む。
いくつかの実施例において、抽出された前記特徴は、ローカルバイナリパターン特徴、スパースコードのヒストグラム特徴、パノラマ特徴、顔画像特徴、顔詳細画像特徴のうちのいずれか1つまたは複数の特徴を含む。
いくつかの実施例において、前記偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有する。
いくつかの実施例において、前記偽造手掛り情報は、イメージング媒介の偽造手掛り情報、イメージング媒体の偽造手掛り情報、実在の偽の顔の手掛り情報のうちのいずれか1つまたは複数の情報を含む。
いくつかの実施例において、前記イメージング媒介の偽造手掛り情報は、イメージング媒介のエッジ情報、反射情報および/または材料情報を含み、および/または、前記イメージング媒体の偽造手掛り情報は、表示機器の画面のエッジ、画面の反射および/または画面のモアレを含み、前記実在の偽の顔の手掛り情報は、マスクを着用した顔の特徴、マネキンの顔の特徴、および彫刻の顔の特徴を含む。
いくつかの実施例において、前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、前記処理される画像の特徴を検出して、前記処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、前記顔領域画像の特徴を検出して、前記顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、前記証明書領域画像の特徴を検出して、前記証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、を含む。
いくつかの実施例において、前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、前記処理される画像の特徴、前記顔領域画像の特徴および前記証明書領域画像の特徴を接続して、接続特徴を取得することと、前記接続特徴に偽造手掛り情報が含まれているか否かを決定することと、を含む。
いくつかの実施例において、前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、第3ニューラルネットワークによって、前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することを含む。
いくつかの実施例において、前記偽造手掛り検出結果に基づいて、前記処理される画像の偽造防止検出結果を取得することは、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定すること、および/または、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定することを含む。
本開示の実施例の別の態様によれば、ID認証装置を提供し、前記装置は、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成される第1検出モジュールと、第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される第2検出モジュールと、前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定するように構成される第1決定モジュールと、前記処理される画像が有効なID認証画像であるとの決定に応答して、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得するように構成される認証モジュールと、を備える。
本開示の実施例の更に別の態様によれば、電子機器を提供し、前記電子機器は、コンピュータプログラムを記憶するように構成されるメモリと、前記メモリに記憶されたコンピュータプログラムを実行するように構成されるプロセッサであって、前記コンピュータプログラムが実行されるときに、本開示の上記の実施例のいずれか1つに記載のID認証方法を実現するプロセッサと、を備える。
本開示の実施例の更に別の態様によれば、コンピュータプログラムが記憶されたコンピュータ可読記憶媒体を提供し、当該コンピュータプログラムがプロセッサによって実行される時に、本開示の上記の実施例のいずれか1つに記載のID認証方法を実現する。
本開示の実施例の更に別の態様によれば、コンピュータ可読コードを含むコンピュータプログラムを提供し、前記コンピュータ可読コードが機器で実行される時に、前記機器のプロセッサによって、本開示の上記の実施例のいずれか1つに記載のID認証方法における各動作を実現するための命令を実行する。
一代替実施形態において、前記コンピュータプログラム製品は、コンピュータ記憶媒体であってもよく、別の代替実施形態において、前記コンピュータプログラム製品は、ソフトウェア開発キット(SDK:Software Development Kit)などのソフトウェア製品であってもよい。
例えば、本願は以下の項目を提供する。
(項目1)
ID認証方法であって、
第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって、上記処理される画像に対して証明書検出を実行して、証明書検出結果を取得することと、
上記顔検出結果および上記証明書検出結果に従って、上記処理される画像が有効なID認証画像であるか否かを決定することと、
上記処理される画像が有効なID認証画像であるとの決定に応答して、上記顔検出結果および上記証明書検出結果に従ってID認証を実行して、上記処理される画像のID認証結果を取得することと、を含む、上記ID認証方法。
(項目2)
上記有効なID認証画像は、証明書を手に持つ画像を含む、
項目1に記載のID認証方法。
(項目3)
上記顔検出結果は、上記処理される画像に含まれる顔の数および上記処理される画像での上記顔の位置情報のうちの少なくとも1つを含み、および/または、上記証明書検出結果は、上記処理される画像に含まれる証明書の数および上記処理される画像での上記証明書の位置情報のうちの少なくとも1つを含む、
項目1または2に記載のID認証方法。
(項目4)
上記顔検出結果および上記証明書検出結果に従って上記処理される画像が有効なID認証画像であるか否かを決定することは、
上記顔検出結果および上記証明書検出結果に基づいて、証明書の顔情報を決定することと、
上記証明書の顔情報、上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像が有効なID認証画像であるか否かを決定することと、を含む、
項目1ないし3のいずれか一項に記載のID認証方法。
(項目5)
上記証明書の顔情報は、上記処理される画像で検出された証明書に含まれる顔の数、上記証明書に含まれる顔の位置情報のうちの少なくとも1つを含む、
項目4に記載のID認証方法。
(項目6)
上記顔検出結果および上記証明書検出結果に基づいて、証明書の顔情報を決定することは、
上記処理される画像での、上記顔検出結果に含まれる顔の位置情報および上記処理される画像での、上記証明書検出結果に含まれる証明書の位置情報に従って、上記証明書に含まれる顔の数および/または位置情報を決定することを含む、
項目4に記載のID認証方法。
(項目7)
上記証明書の顔情報、上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像が有効なID認証画像であるか否かを決定することは、
上記証明書検出結果における証明書の数が第1プリセット要件を満たし、上記顔検出結果における顔の数が第2プリセット要件を満たし、且つ上記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、上記処理される画像が有効なID認証画像であると決定することを含む、
項目4に記載のID認証方法。
(項目8)
第1プリセット要件が、上記証明書検出結果に含まれる証明書の数が1であることを含むこと、
第2プリセット要件が、上記顔検出結果に含まれる顔の数が2より大きいか等しいことを含むこと、
第3プリセット要件が、上記証明書内の顔の数が1であることを含むことのうちの少なくとも1つが成立する、
項目7に記載のID認証方法。
(項目9)
上記顔検出結果および上記証明書検出結果に従ってID認証を実行することは、
上記顔検出結果および上記証明書検出結果に基づいて、上記証明書に含まれる第1顔と、上記処理される画像内の、上記証明書外にある第2顔と間の類似度を決定することと、
上記第1顔と上記第2顔との間の類似度に従って、ID検証結果を取得することと、を含む、
項目1ないし8のいずれか一項に記載のID認証方法。
(項目10)
上記顔検出結果および上記証明書検出結果に基づいて、上記証明書に含まれる第1顔と、上記処理される画像内の、上記証明書外にある第2顔と間の類似度を決定することは、
上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像から上記第1顔の画像および第2顔の画像を取得することと、
上記第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、上記第2顔の画像に対して特徴抽出を実行して、第2特徴を取得することと、
上記第1特徴および上記第2特徴に基づいて、上記第1顔と上記第2顔との間の類似度を決定することと、を含む、
項目9に記載のID認証方法。
(項目11)
上記証明書に含まれる第1顔と、上記処理される画像内の、上記証明書外にある第2顔と間の類似度を決定する前に、
上記処理される画像に含まれる顔の数が2より大きい場合、上記処理される画像内の、上記証明書外にある少なくとも2つの顔のうちの最大の顔を上記第2顔として決定することをさらに含む、
項目9または10に記載のID認証方法。
(項目12)
上記第1顔と上記第2顔との間の類似度に従って、ID検証結果を取得することは、
上記第1顔と上記第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、上記証明書に対してテキスト認識を実行して、上記証明書のテキスト情報を取得することであって、上記テキスト情報は、名前および証明書の番号のうちの少なくとも1つの情報を含むことと、
ユーザ情報データベースに基づいて上記テキスト情報を認証して、ID検証結果を取得することと、を含む、
項目9ないし11のいずれか一項に記載のID認証方法。
(項目13)
上記ID検証結果がID認証合格であるとの決定に応答して、ユーザ情報をサービスデータベースに記憶することであって、上記ユーザ情報は、上記テキスト情報、上記処理される画像、上記第2顔の画像、上記第2顔の特徴情報のうちのいずれか1つまたは複数の情報を含むことをさらに含む、
項目9ないし12のいずれか一項に記載のID認証方法。
(項目14)
ID認証要求の受信に応答して、認証される顔を含む画像を取得することと、
上記サービスデータベースに上記認証される顔の画像と一致するユーザ情報があるか否かを照会することと、
上記照会の結果に従って、上記認証される顔の認証結果を決定することと、をさらに含む、
項目13に記載のID認証方法。
(項目15)
上記顔検出結果および上記証明書検出結果に従ってID認証を実行して、上記処理される画像のID認証結果を取得することは、
上記顔検出結果および上記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することと、
上記偽造防止検出結果および上記ID検証結果に基づいて、上記処理される画像のID認証結果を決定することと、をさらに含む、
項目9ないし14のいずれか一項に記載のID認証方法。
(項目16)
上記顔検出結果および上記証明書検出結果に従ってID認証を実行して、上記処理される画像のID認証結果を取得することは、
上記顔検出結果および上記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することを含む、
項目1ないし14のいずれか一項に記載のID認証方法。
(項目17)
上記顔検出結果および上記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することは、
上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像から顔領域画像および証明書領域画像を取得することと、
上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することと、
上記偽造手掛り検出結果に基づいて、上記処理される画像の偽造防止検出結果を取得することと、を含む、
項目15または16に記載のID認証方法。
(項目18)
上記顔領域画像における、上記顔領域画像に含まれる顔の比率が、第4プリセット要件を満たし、および/または、
上記証明書領域画像における、上記証明書領域画像に含まれる証明書の比率が、上記第4プリセット要件を満たす、
項目17に記載のID認証方法。
(項目19)
上記第4プリセット要件は、上記比率が1/4より大きいか等しく、且つ9/10より小さいか等しいことを含む、
項目18に記載のID認証方法。
(項目20)
上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、
上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ特徴抽出を実行して、上記処理される画像の特徴、上記顔領域画像の特徴および上記証明書領域画像の特徴を取得することと、
上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することと、を含む、
項目17ないし19のいずれか一項に記載のID認証方法。
(項目21)
上記偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有する、
項目20に記載のID認証方法。
(項目22)
上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、
上記処理される画像の特徴を検出して、上記処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、
上記顔領域画像の特徴を検出して、上記顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、
上記証明書領域画像の特徴を検出して、上記証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、を含む、
項目20または21に記載のID認証方法。
(項目23)
上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、
上記処理される画像の特徴、上記顔領域画像の特徴および上記証明書領域画像の特徴を接続して、接続特徴を取得することと、
上記接続特徴に偽造手掛り情報が含まれているか否かを決定することと、を含む、
項目20または21に記載のID認証方法。
(項目24)
上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、
第3ニューラルネットワークによって、上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することを含む、
項目20ないし23のいずれか一項に記載のID認証方法。
(項目25)
上記偽造手掛り検出結果に基づいて、上記処理される画像の偽造防止検出結果を取得することは、
上記偽造手掛り検出結果が、上記処理される画像、上記顔領域画像および上記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、上記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定すること、および/または、
上記偽造手掛り検出結果が、上記処理される画像、上記顔領域画像および上記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、上記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定することを含む、
項目17ないし24のいずれか一項に記載のID認証方法。
(項目26)
ID認証装置であって、
第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成される第1検出モジュールと、
第2ニューラルネットワークによって、上記処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される第2検出モジュールと、
上記顔検出結果および上記証明書検出結果に従って、上記処理される画像が有効なID認証画像であるか否かを決定するように構成される第1決定モジュールと、
上記処理される画像が有効なID認証画像であるとの決定に応答して、上記顔検出結果および上記証明書検出結果に従ってID認証を実行して、上記処理される画像のID認証結果を取得するように構成される認証モジュールと、を備える、上記ID認証装置。
(項目27)
上記有効なID認証画像は、証明書を手に持つ画像を含む、
項目26に記載のID認証装置。
(項目28)
上記顔検出結果は、上記処理される画像に含まれる顔の数および上記処理される画像での上記顔の位置情報のうちの少なくとも1つを含み、および/または、
上記証明書検出結果は、上記処理される画像に含まれる証明書の数および上記処理される画像での上記証明書の位置情報のうちの少なくとも1つを含む、
項目26または27に記載のID認証装置。
(項目29)
上記第1決定モジュールは、
上記顔検出結果および上記証明書検出結果に基づいて、証明書の顔情報を決定するように構成される証明書決定ユニットと、
上記証明書の顔情報、上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像が有効なID認証画像であるか否かを決定するように構成されるID認証決定ユニットと、を備える、
項目26ないし28のいずれか一項に記載のID認証装置。
(項目30)
上記証明書の顔情報は、上記処理される画像で検出された証明書に含まれる顔の数、上記証明書に含まれる顔の位置情報のうちの少なくとも1つを含む、
項目29に記載のID認証装置。
(項目31)
上記証明書決定ユニットは、
上記処理される画像での、上記顔検出結果に含まれる顔の位置情報および上記処理される画像での、上記証明書検出結果に含まれる証明書の位置情報に従って、上記証明書に含まれる顔の数および/または位置情報を決定するように構成される、
項目29に記載のID認証装置。
(項目32)
上記ID認証決定ユニットは、上記証明書検出結果における証明書の数が第1プリセット要件を満たし、上記顔検出結果における顔の数が第2プリセット要件を満たし、且つ検出された上記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、上記処理される画像が有効なID認証画像であると決定するように構成される、
項目29ないし31のいずれか一項に記載のID認証装置。
(項目33)
第1プリセット要件が、上記証明書検出結果に含まれる証明書の数が1であることを含むこと、
第2プリセット要件が、上記顔検出結果に含まれる顔の数が2より大きいか等しいことを含むこと、
第3プリセット要件が、証明書内の顔の数が1であることを含むことのうちの少なくとも1つが成立する、
項目32に記載のID認証装置。
(項目34)
上記認証モジュールは、上記顔検出結果および上記証明書検出結果に基づいて、上記証明書に含まれる第1顔と、上記処理される画像内の、上記証明書外にある第2顔と間の類似度を決定し、上記第1顔と上記第2顔との間の類似度に従って、ID検証結果を取得するように構成される、
項目26ないし33のいずれか一項に記載のID認証装置。
(項目35)
上記認証モジュールは、
上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像から上記第1顔の画像および上記第2顔の画像を取得するように構成される第1取得ユニットと、
上記第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、上記第2顔の画像に対して特徴抽出を実行して、第2特徴を取得するように構成される特徴抽出ユニットと、
上記第1特徴および上記第2特徴に基づいて、上記第1顔と上記第2顔との間の類似度を決定するように構成される第1決定ユニットと、
上記第1顔と上記第2顔との間の類似度に従って、ID検証結果を取得するように構成される認証ユニットと、を備える、
項目34に記載のID認証装置。
(項目36)
上記処理される画像に含まれる顔の数が2より大きい場合、上記処理される画像内の、上記証明書外にある少なくとも2つの顔のうちの最大の顔を上記第2顔として決定するように構成される第2決定モジュールをさらに備える、
項目34または35に記載のID認証装置。
(項目37)
上記認証モジュールは、
上記第1顔と上記第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、上記証明書に対してテキスト認識を実行して、上記証明書のテキスト情報を取得するように構成されるテキスト認識ユニットであって、上記テキスト情報は、名前および証明書の番号のうちの少なくとも1つの情報を含むテキスト認識ユニットをさらに備え、
上記認証ユニットは、さらに、ユーザ情報データベースに基づいて上記テキスト情報を認証して、ID検証結果を取得するように構成される、
項目35または36に記載のID認証装置。
(項目38)
上記認証モジュールは、
上記ID検証結果がID認証合格であるとの決定に応答して、ユーザ情報をサービスデータベースに記憶するように構成される記憶処理ユニットであって、上記ユーザ情報は、上記テキスト情報、上記処理される画像、上記第2顔の画像、上記第2顔の特徴情報のうちのいずれか1つまたは複数の情報を含む記憶処理ユニットをさらに備える、
項目34ないし37のいずれか一項に記載のID認証装置。
(項目39)
上記認証モジュールは、照会ユニットをさらに備え、
上記第1取得ユニットは、さらに、ID認証要求の受信に応答して、認証される顔を含む画像を取得するように構成され、
上記照会ユニットは、上記サービスデータベースに上記認証される顔の画像と一致するユーザ情報があるか否かを照会するように構成され、
上記第1決定ユニットは、さらに、上記照会の結果に従って、上記認証される顔の認証結果を決定するように構成される、
項目38に記載のID認証装置。
(項目40)
上記認証モジュールは、さらに、上記顔検出結果および上記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得し、上記偽造防止検出結果および上記ID検証結果に基づいて、上記処理される画像のID認証結果を決定するように構成される、
項目26ないし39のいずれか一項に記載のID認証装置。
(項目41)
上記認証モジュールは、さらに、上記顔検出結果および上記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得するように構成される、
項目26ないし39のいずれか一項に記載のID認証装置。
(項目42)
上記認証モジュールは、
上記顔検出結果および上記証明書検出結果に基づいて、上記処理される画像から顔領域画像および証明書領域画像を取得するように構成される第2取得ユニットと、
上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成される偽造手掛り検出ユニットと、
上記偽造手掛り検出結果に基づいて、上記処理される画像の偽造防止検出結果を取得するように構成される第2決定ユニットと、を備える、
項目40または41に記載のID認証装置。
(項目43)
上記顔領域画像における、上記顔領域画像に含まれる顔の比率が、第4プリセット要件を満たし、および/または、
上記証明書領域画像における、上記証明書領域画像に含まれる証明書の比率が、上記第4プリセット要件を満たす、
項目42に記載のID認証装置。
(項目44)
上記第4プリセット要件は、上記比率が1/4より大きいか等しく、且つ9/10より小さいか等しいことを含む、
項目43に記載のID認証装置。
(項目45)
上記偽造手掛り検出ユニットは、上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ特徴抽出を実行して、上記処理される画像の特徴、上記顔領域画像の特徴および上記証明書領域画像の特徴を取得し、および上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成される、
項目42ないし44のいずれか一項に記載のID認証装置。
(項目46)
上記偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有する、
項目45に記載のID認証装置。
(項目47)
上記偽造手掛り検出ユニットが、上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成されることは、上記偽造手掛り検出ユニットが、上記処理される画像の特徴を検出して、上記処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定し、上記顔領域画像の特徴を検出して、上記顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定し、上記証明書領域画像の特徴を検出して、上記証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定するように構成されることを含む、
項目44ないし46のいずれか一項に記載のID認証装置。
(項目48)
上記偽造手掛り検出ユニットが、上記処理される画像の特徴、上記顔領域の特徴および上記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成されることは、上記偽造手掛り検出ユニットが、上記処理される画像の特徴、上記顔領域画像の特徴および上記証明書領域画像の特徴を接続して、接続特徴を取得し、および上記接続特徴に偽造手掛り情報が含まれているか否かを決定するように構成されることを含む、
項目44ないし46のいずれか一項に記載のID認証装置。
(項目49)
上記偽造手掛り検出ユニットが、上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成されることは、上記偽造手掛り検出ユニットが、第3ニューラルネットワークによって、上記処理される画像、上記顔領域画像および上記証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成されることを含む、
項目44ないし46のいずれか一項に記載のID認証装置。
(項目50)
上記第2決定ユニットは、
上記偽造手掛り検出結果が、上記処理される画像、上記顔領域画像および上記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、上記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定するように構成され、および/または、
上記偽造手掛り検出結果が、上記処理される画像、上記顔領域画像および上記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、上記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定するように構成される、
項目42ないし49のいずれか一項に記載のID認証装置。
(項目51)
電子機器であって、
コンピュータプログラムを記憶するように構成されるメモリと、
上記メモリに記憶されたコンピュータプログラムを実行するように構成されるプロセッサであって、上記コンピュータプログラムが実行されるときに、項目1ないし24のいずれか一項に記載のID認証方法を実現するプロセッサと、を備える、上記電子機器。
(項目52)
コンピュータプログラムが記憶されたコンピュータ可読記憶媒体であって、
上記コンピュータプログラムがプロセッサによって実行される時に、項目1ないし24のいずれか一項に記載のID認証方法を実現する、上記コンピュータ可読記憶媒体。
本開示の実施例では、ニューラルネットワークを使用して、深層学習の方式によって、処理される画像が有効なID認証画像であるか否かを判断することにより、ユーザのID認証用の適格な画像を迅速に選別できるため、作業効率を向上させ、有効なID認証画像に基づく、ユーザに対するID認証の実行は、手動審査の必要がないため、コストを節約し、作業効率と処理速度を向上させ、手動審査によるエラーの発生を回避し、認証結果の精度を向上させる。
以下、図面及び実施例を通じて本開示の技術的解決策をさらに詳しく説明する。
明細書の一部を構成する図面は、本開示の実施例を説明し、その説明と共に本開示の原理を解釈することに用いられる。
図面を参照して、以下の詳細な説明に従って、本開示をより明確に理解することができる。
本開示の実施例によるID認証方法のフローチャートである。 本開示の実施例によるID認証方法の別のフローチャートである。 本開示の実施例によるID認証方法の別のフローチャートである。 本開示の実施例の適用シナリオの例の概略図である。 本開示の実施例における、収集された身分証明書を手に持つユーザの写真の概略図である。 本開示の実施例によるID認証方法のフローチャートである。 本開示の実施例によるID認証装置の例示的な構造図である。 本開示の実施例によるID認証装置の別の例示的な構造図である。 本開示の実施例によるID認証方法の別のフローチャートである。 本開示の実施例によるID認証方法の別のフローチャートである。 本開示の実施例によるID認証方法の別のフローチャートである。 本開示の実施例によるID認証装置の例示的な構造図である。 本開示の実施例によるID認証装置の別の例示的な構造図である。 本開示の実施例による電子機器の例示的な構造図である。
ここで、図面を参照して本開示の様々な例示的な実施例を詳細に説明する。これらの実施例で説明されたコンポーネントおよび動作の相対的な配置、数式、および数値は、特に説明されていない限り、本開示の保護範囲を限定しないことに留意されたい。同時に、説明の便宜上、図面に示した各部分の寸法は実際の比率関係に従って描いたものではないことを理解すべきである。以下、少なくとも1つの例示的な実施例の説明は、実際には説明のためなものに過ぎず、本開示およびその応用または使用を制限することを意図するものではない。関連分野の当業者に既知の技術、方法及び機器については、詳細に説明しない場合があるが、場合によって、前記技術、方法及び機器は明細書の一部と見なすべきである。なお、類似する符号及び英文字は以下の図面において類似項目を表し、従って、特定の一項が1つの図面において定義されれば、後続の図面においてそれをさらに説明する必要がないことに注意すべきである。
本開示の実施例は、端末、コンピュータシステム、サーバなどの電子機器に適用されることができ、多くの他の汎用または専用のコンピューティングシステム環境または構成と一緒に動作されることができる。電子機器と一緒に使用することに適用されるよく知られている端末、コンピューティングシステム、環境および/または構成の例は、パーソナルコンピュータシステム、サーバコンピュータシステム、シンクライアント、シッククライアント、ハンドヘルドまたはラップトップ機器、マイクロプロセッサに基づくシステム、セットトップボックス、プログラマブルコンシューマ電子製品、ネットワークパーソナルコンピュータ、小型コンピュータシステム、大型コンピュータシステム、および前記任意のシステムを含む分散クラウドコンピューティングテクノロジー環境などを含むが、これらに限定されない。
電子機器は、コンピュータシステムによって実行されるコンピュータシステム実行可能な命令(プログラムモジュールなど)の一般的なコンテキストで説明することができる。一般的に、プログラムモジュールは、ルーチン、プログラム、ターゲットプログラム、コンポネット、ロジック、データ構造などを含むことができ、これらは特定のタスクを実行し、または特定の抽象データタイプを実行する。コンピュータシステム/サーバは、分散クラウドコンピューティング環境で実施することができ、分散クラウドコンピューティング環境で、タスクは、通信ネットワークを介してリンクされたモート処理機器によって実行される。分散クラウドコンピューティング環境において、プログラムモジュールは、記憶機器を含むローカルまたはリモートコンピューティングシステムの記憶媒体に位置することができる。
本開示の実施例は、ID認証方法を提供する。図1Aに示されるように、当該ID認証方法は、以下のステップを含む。
ステップ102において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって当該処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
本開示の実施例における処理される画像は、カメラによって収集された画像、または他の機器から受信された画像であり得、当該受信された画像は、収集された画像、または収集された画像に対して1つまたは複数の処理を実行することによって取得された画像であり得る。いくつかの実施例において、処理される画像は、静止画像(即ち、別個に収集された画像)、またはビデオ内の画像(即ち、収集されたビデオから、プリセットの標準に従って選択された、またはランダムに選択された画像)であり得、全て本開示の実施例におけるID認証に使用されることができ、本開示の実施例は、画像のソース、性質、サイズなどの属性に限定されない。
当業者は、本開示の実施例の説明に基づいて、第1ニューラルネットワークに加えて、本開示の実施例では、画像処理に基づく顔検出アルゴリズム(例えば、ヒストグラムの大まかなセグメンテーションおよび特異値特徴に基づく顔検出アルゴリズム、2進ウェーブレット変換に基づく顔検出アルゴリズムなど)などを使用して、処理される画像に対して顔検出を実行してもよいが、これらに限定されないことを知ることができる。さらに、第2ニューラルネットワークに加えて、本開示の実施例では、画像処理に基づく証明書検出アルゴリズム(例えば、エッジ検出法、数学的形態学法、テクスチャ分析に基づく位置決め法、ライン検出およびエッジ統計法、遺伝的アルゴリズム、ハフ変換および輪郭法、ウェーブレット変換に基づく方法など)などを使用して、処理される画像に対して証明書検出を実行してもよいが、これらに限定されない。
いくつかの実施例において、例えば、顔検出アルゴリズムを使用して、処理される画像内の顔の位置を決定することができ、証明書検出アルゴリズムを使用して、処理される画像内の証明書の位置を決定することができ、決定された証明書の位置と顔の位置の間の関係に基づいて、処理される画像が身分証明書を手に持つ写真であるが否かを判断し、これにより、作業者は素早く適格な画像を選別することができ、作業効率を向上させる。別の実施例において、処理される画像に含まれる証明書外の顔と証明書内の顔を検出した場合、処理される画像内の2つの顔を比較することによって、写真の2つの顔が同じ人物であるか否かを作業者によって素早く判断できるようにするため、応答時間が短く、リアルタイムで処理でき、作業者の作業効率とユーザ体験が向上し、認識の精度が人の目よりも高くなるため、作業者のミスを回避できる。
本開示の実施例において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行する場合、トレーニングされた第1ニューラルネットワークによって、画像内の顔を効果的に検出できるようにするために、サンプル画像を使用して第1ニューラルネットワークを事前にトレーニングすることができる。本開示の実施例において、第2ニューラルネットワークによって、処理される画像に対して証明書検出を実行する場合、トレーニングされた第2ニューラルネットワークによって、画像内の証明書を効果的に検出できるようにするために、サンプル画像を使用して第2ニューラルネットワークを事前にトレーニングすることができる。
いくつかの実施例において、上記の顔検出結果は、例えば、処理される画像に含まれる顔の数および処理される画像での各顔の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。証明書検出結果は、例えば、処理される画像に含まれる証明書の数および処理される画像での各証明書の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。ここで、処理される画像での顔の位置情報は、例えば、処理される画像での顔の顔検出フレーム(第1検出フレームとも呼ばれる)の4つの頂点の頂点座標として表すことができる。処理される画像での当該顔検出フレームの4つの頂点の頂点座標に基づいて、処理される画像での顔検出フレームの位置を決定でき、これにより、処理される画像での顔の位置を決定することができる。
さらに、処理される画像での顔の位置情報は、処理される画像での顔の顔検出フレーム(即ち、第1検出フレーム)の中心点の座標、および当該顔検出フレームの長さと幅として表すこともできる。処理される画像での当該顔検出フレームの中心点座標、および当該顔検出フレームの長さと幅に基づいて、処理される画像での顔検出フレームの位置を決定でき、これにより、処理される画像での顔の位置を決定することができる。
本開示の実施例における証明書とは、身分証明書、パスポート、学生証、従業員カードなど、ユーザの身元を証明するために使用されるものを指す。同様に、処理される画像での証明書の位置情報は、例えば、処理される画像での証明書の物体検出フレーム(第2検出フレームとも呼ばれる)の4つの頂点の頂点座標として表すことができる。処理される画像での当該物体検出フレームの4つの頂点の頂点座標に基づいて、処理される画像での証明書の物体検出フレームの位置を決定でき、これにより、処理される画像での証明書の位置を決定することができる。
さらに、画像での証明書の位置情報は、処理される画像での証明書の物体検出フレーム(即ち、第2検出フレーム)の中心点の座標、および当該物体検出フレームの長さと幅として表すこともできる。処理される画像での当該物体検出フレームの中心点の座標、および当該物体検出フレームの長さと幅に基づいて、処理される画像での証明書の物体検出フレームの位置を決定でき、これにより、処理される画像での証明書の位置を決定することができる。
ステップ104において、上記の顔検出結果および証明書検出結果に従って、当該処理される画像が、例えば、身分証明書を手に持つ有効な画像などの有効なID認証画像であるか否かを決定する。
ここで、有効なID認証画像とは、例えば、処理される画像に含まれる顔および証明書の位置や数などがプリセット要件を満たす処理される画像など、プリセット要件を満たす画像を指す。例えば、本開示のいくつかの実施形態において、必要なID認証画像が身分証明書を手に持つユーザの写真である場合、有効なID認証画像には、1つの身分証明書が含まれ、身分証明書には、1つの顔が含まれ、身分証明書外の画像には、少なくとも1つの顔が含まれる。例えば、顔検出結果における顔と証明書検出結果における顔の数は合計で2未満である場合、または身分証明書の数が一意ではない場合、または顔および身分証明書の位置検証が間違っている場合(即ち、身分証明書領域内の顔の数が一意であり、身分証明書領域外に少なくとも1つの顔があるという要件を満たさない場合)、有効なID認証画像とは見なされない(即ち、有効な身分証明書を手に持つ写真ではない)。
処理される画像が有効なID認証画像である場合、ステップ106を実行する。そうでなければ、処理される画像が有効なID認証画像ではない場合、後続のプロセスを実行しないか、処理される画像が無効であることを示す提示メッセージを出力する。
ステップ106において、上記の顔検出結果および証明書検出結果に従ってID認証を実行して、処理される画像のID認証結果を取得する。
いくつかの実施例において、ID認証は、ユーザと証明書が一致しているか否か、つまり、該証明書がユーザ本人の証明書であるか否かを決定するためのID検証を含み得る。別のいくつかの実施例において、ID認証は、偽造の有無を決定するための偽造防止検出を含み得る。別のいくつかの実施例において、ID認証は、偽造防止検出およびID検証を含み得る。本開示の実施例は、ID認証の具体的な実現に限定されない。
いくつかの実施形態において、例えば、幾何学的特徴に基づく方法、ローカル顔分析法(Local Face Analysis)、固有顔方法(EigenfaceまたはPCA)、弾性マネキンに基づく方法、ニューラルネットワーク(Neural Networks)法などの方法を採用して、当該処理される画像の顔検出結果および証明書検出結果に従ってユーザID認証を実行してもよいが、これらに限定されない。
本開示の上記の実施例によるID認証方法によれば、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行し、第2ニューラルネットワークによって、処理される画像に対して証明書検出を実行し、取得された顔検出結果および証明書検出結果に従って、処理される画像が有効なID認証画像であるか否かを決定し、処理される画像が有効なID認証画像であるとの決定に応答して、顔検出結果および証明書検出結果に従ってID認証を実行する。本開示の実施例では、ニューラルネットワークを使用して、深層学習によって、処理される画像が有効なID認証画像であるか否かを判断することにより、ユーザのID認証用の適格な画像を迅速に選別できるため、作業効率を向上させ、有効なID認証画像に基づくユーザに対するID認証の実行では、手動審査の必要がないため、コストを節約し、作業効率と処理速度を向上させ、手動審査によるエラーの発生を回避し、認証結果の精度を向上させる。
上記の実施例では、上記の証明書検出結果は、処理される画像で検出された証明書に含まれる顔の数、証明書に含まれる顔の位置情報などのうちの少なくとも1つを含んでもよい。あるいは、上記の実施例では、また、処理される画像での上記の顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、証明書に含まれる顔の数を決定することを含んでもよい。
いくつかの実施例において、ステップ104では、上記の証明書検出結果における証明書の数が第1プリセット要件を満たすか否か、上記の顔検出結果における顔の数が第2プリセット要件を満たすか否か、および、検出された証明書内の顔の数が第3プリセット要件を満たすか否かを決定でき、上記の証明書検出結果における証明書の数が第1プリセット要件を満たし、上記の顔検出結果における顔の数が第2プリセット要件を満たし、且つ証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たす場合、処理される画像が有効なID認証画像であると決定できる。
上記の各実施例において、証明書検出結果における証明書の数が第1プリセット要件を満たし、顔検出結果における顔の数が第2プリセット要件を満たし、証明書内の顔の数が第3プリセット要件を満たすことは、例えば、証明書検出結果における証明書の数が1であり、顔検出結果における顔の数が2より大きいか等しく、証明書内の顔の数が1であることを含み得る。ここで、顔検出結果における顔の数が2より大きいことは、処理される画像内の証明書領域外に含まれる顔の数が1より大きい可能性があることを意味し、この場合、処理される画像には被認証者の顔だけでなく、見物人の顔も含まれている可能性がある。
上記の実施例によれば、顔検出結果における顔の数が2より小さいことは、証明書の数が一意ではないこと、または、顔と証明書の位置関係が間違っている(顔と証明書の正しい位置関係の基準は、証明書領域内の顔の数が一意であり、且つ証明書領域外に少なくとも1つの顔があることである)ことを意味し、処理される画像が有効なID認証画像ではないと見なされる。
適用において、図3Aを参照すると、画像収集機器が、身分証明書を手に持つユーザの写真を収集し、ここで、身分証明書を手に持つユーザの写真は、図3Bに示す通りであり、対応的に、ステップ106において、顔検出結果および証明書検出結果に従ってID認証を実行することは、上記の顔検出結果および証明書検出結果に基づいて、証明書に含まれる顔(第1顔31と称する)と処理される画像内の証明書外の顔(第2顔32と称する)との間の類似度を決定することと、第1顔と第2顔との間の類似度に従って、ID検証結果を取得することとを含む。
例えば、いくつかの可能な例において、上記の顔検出結果および証明書検出結果に基づいて処理される画像から第1顔の画像および第2顔の画像を取得し、
第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、第2顔の画像に対して特徴抽出を実行して、第2特徴を取得することができる。ここで、第2顔は、処理される画像内の証明書外にある、最大の顔である。その可能な一例では、ニューラルネットワークによって特徴抽出を実行し、上記の第1特徴および第2特徴に基づいて、第1顔と第2顔との間の類似度を決定することができる。
例えば、第1特徴と第2特徴との間の類似度を比較することができる。その可能な一例では、ニューラルネットワークによって第1特徴と第2特徴との間の類似度を比較し、第1特徴と第2特徴との間の類似度がプリセットの閾値より大きいか否かに従って、ID検証結果を取得することができる。
ここでのプリセットの閾値は、実際のニーズに応じて設定でき、例えば、ユーザID認証に対する現在のサービスの厳密さ、第1ニューラルネットワークおよび第2ニューラルネットワークのパフォーマンス、画像収集環境などに応じて設定でき、実際のニーズの変化に応じて調整できる。例えば、セキュリティ要件の高い金融サービスでは、第1ニューラルネットワークおよび第2ニューラルネットワークに高いパフォーマンスが要求され、当該プリセットの閾値を高く(例えば、98%など)設定でき、つまり、金融サービスのセキュリティを確保するためには、上記の第1特徴と第2特徴との間の類似度が98%以上に達した場合のみ、当該処理される画像がID認証に合格することができ、セキュリティ要件がそれほど高くなく、画像収集環境が良くないサービスでは、当該プリセットの閾値を低く(例えば、80%など)設定でき、つまり、当該サービスのセキュリティと、当該サービスでの当該処理される画像に基づくユーザID認証の実現可能性を確保するためには、上記の第1特徴と第2特徴との間の類似度が80%以上に達すれば、当該処理される画像がID認証に合格することができる。
本開示の実施例では、ニューラルネットワークによって証明書内の顔の画像および当該証明書外の顔の画像に対して特徴抽出を実行し、抽出された第1特徴と第2特徴との間の類似度を比較する場合、ニューラルネットワークを事前にトレーニングすることにより、トレーニングされたニューラルネットワークによって、証明書内の顔の画像および当該証明書外の顔の画像に対する特徴抽出を効果的に実行でき、類似度を正確に比較できるため、証明書内の顔と当該証明書外の顔が同じ人物の顔であるか否かを正しく識別することができる。
上記の各実施例のいくつかの実施形態では、証明書に含まれる第1顔と処理される画像内の証明書外の第2顔との間の類似度を決定する前に、以下のような方法によって上記の第2顔を取得することができる。
処理される画像に含まれる顔の数が2より大きい場合、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、処理される画像に含まれる少なくとも2つの顔のうちの証明書外の最大の顔を、上記の第2顔として決定する。
処理される画像に含まれる顔の数が2である場合、処理される画像に含まれる2つの顔のうちの証明書外の顔を、上記の第2顔として直接決定する。
処理される画像に含まれる顔の数が2より大きい場合、被認証者の顔に加えて、処理される画像に見物人の顔も含まれている可能性がある。被認証者が画像の収集機器に最も近いため、被認証者の顔が最大であり、他の見物人は画像の収集機器から遠く離れており、他の見物人の顔が被認証者の顔より小さいと見なすことができ、本開示の実施例では、ニューラルネットワークを使用して、証明書内の顔の画像と当該証明書外の最大の顔の画像との間で特徴抽出および類似度比較を実行することにより、両者が同じユーザあるか否かを効果的に識別でき、これにより、2つの顔が同じ人物の顔であるか否かを迅速、且つ正確に判断でき、応答時間が短く、精度が高いため、作業効率とユーザ体験を効果的に向上させ、人の目の認識によるエラーを回避させることができる。
本開示の実施例によるID認証方法によれば、図1Bに示されるように、当該方法は以下のステップを含む。
ステップ102において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって当該処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
ステップ1041において、前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定する。
いくつかの実施例において、前記顔検出結果は、前記処理される画像に含まれる顔の数および前記処理される画像での前記顔の位置情報のうちの少なくとも1つを含み、および/または、前記証明書検出結果は、前記処理される画像に含まれる証明書の数および前記処理される画像での前記証明書の位置情報のうちの少なくとも1つを含む。
いくつかの実施例において、前記証明書の顔情報は、前記処理される画像で検出された証明書に含まれる顔の数、前記証明書に含まれる顔の位置情報のうちの少なくとも1つを含む。
ここで、証明書に含まれる顔の数は、処理される画像に含まれる顔の数より小さいか等しく、証明書に含まれる顔の位置情報は、前記処理される画像での顔の位置情報と部分的に重なり合い、つまり、証明書に含まれる顔の位置情報は、前記処理される画像での顔の位置情報のサブセットである。
ステップ1042において、前記証明書の顔情報、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像が有効なID認証画像であるか否かを決定する。
ステップ106において、前記処理される画像が有効なID認証画像であるとの決定に応答して、上記の顔検出結果および証明書検出結果に従ってID認証を実行して、処理される画像のID認証結果を取得する。
当該実施例におけるステップ1041および1042は、図1Aに示される方法におけるステップ104を実現するための実現方法を提供する。
いくつかの実施例では、ステップ1041において、前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することは、
前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数および/または位置情報を決定することを含む。
適用において、先ず、前記処理される画像での顔の位置情報、および前記処理される画像内の顔の数を決定し、処理される画像での顔の位置情報は、証明書に含まれる顔の位置情報を含み、前記処理される画像内の顔の数は、証明書内の顔の数を含み、例えば、前記処理される画像内の顔の数が2、即ち、顔1と顔2であり、処理される画像での顔1の位置情報がwz1であり、処理される画像での顔2の位置情報がwz2であり、処理される画像での証明書の位置がwz3であり、wz3の範囲にwz2が含まれる場合、証明書に含まれる顔の数が1であり、証明書に含まれる顔の位置情報がwz2であると決定することができる。
いくつかの実施例では、ステップ1042において、前記証明書の顔情報、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像が有効なID認証画像であるか否かを決定することは、
前記証明書検出結果における証明書の数が第1プリセット要件を満たし、前記顔検出結果における顔の数が第2プリセット要件を満たし、且つ前記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、前記処理される画像が有効なID認証画像であると決定する。
本開示の実施例による別のID認証方法によれば、図2に示されるように、当該ID認証方法は以下のステップを含む。
ステップ202において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって当該処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
ステップ204において、上記の顔検出結果および証明書検出結果に従って、当該処理される画像が、例えば、身分証明書を手に持つ有効な画像などの有効なID認証画像であるか否かを決定する。
処理される画像が有効なID認証画像である場合、ステップ206を実行する。そうでなければ、処理される画像が有効なID認証画像ではない場合、後続のプロセスを実行しないか、処理される画像が無効であることを示す提示メッセージを出力する。
ステップ206において、上記の顔検出結果および証明書検出結果に基づいて、証明書に含まれる第1顔と処理される画像内の証明書外にある第2顔との間の類似度を決定する。
ステップ208において、上記の第1顔と第2顔との間の類似度がプリセットの閾値より大きいか否かを決定する。
上記の第1顔と第2顔との間の類似度がプリセットの閾類似度がプリセットの閾値より値より大きい場合、ステップ210を実行する。そうでなければ、上記の第1顔と第2顔との間の大きくない場合、後続のプロセスを実行しないか、当該処理される画像がID認証に不合格したことを示す提示メッセージを出力する。
いくつかの実施形態において、上記のステップ206~208では、ニューラルネットワークを使用して、証明書内の第1顔と証明書外の第2顔との間で特徴抽出および類似度比較を実行することにより、上記の第1顔および証明書外の第2顔が同じユーザの顔であるか否かを確認する。
ステップ210において、光学式文字認識(OCR:Optical Character Recognition)アルゴリズムなどのテキスト認識方法を使用して、当該証明書のテキスト情報を取得し、当該テキスト情報は、例えば、名前、証明書の番号、住所、有効期限などのうちのいずれか1つまたは複数の情報を含むが、これらに限定されない。
図3Bは、本開示の実施例における有効なID認証画像の一例である。
いくつかの実施例において、OCRアルゴリズムを使用して証明書33に対してテキスト認識を実行することにより、証明書のテキスト情報34を素早く読み取ることができ、当該テキスト情報に基づいて作業指示書を自動的に入力できるため、顧客サービスの作業効率を大幅に向上させ、人件費を節約できる。顔認識および証明書OCR技術を採用することにより、従来の業界での身分証明書を手に持つ写真によるID認証における問題を効果的に解決でき、身分証明書を手に持つ写真の選別、身分証明書を手に持つ写真の2つの顔の比較、および身分証明書の情報抽出などの作業をリアルタイムで完了することができる。
図2を参照すると、いくつかの実施例において、証明書のテキスト情報を取得した後、前記ID認証方法は、選択的に、以下のステップを含み得る。
ステップ212において、ユーザ情報データベースに基づいて上記の証明書のテキスト情報を認証して、ID検証結果を取得する。
ここで、ユーザ情報データベースは、ユーザ情報源の信頼性およびユーザ情報の正確さを確保するために、例えば、公安省または他の信頼できる認証機関によって提供される、ユーザ情報が記憶されたユーザ情報データベースであり得る。
上記の証明書のテキスト情報がユーザ情報データベースに記憶されたユーザ情報と一致する場合、ID検証結果はID認証合格であり、そうでなければ、記の証明書のテキスト情報がユーザ情報データベースに記憶されたユーザ情報と一致しない場合、ID検証結果はID認証不合格である。
いくつかの実施例において、図2を参照すると、上記のID検証結果に従って、上記の証明書のテキスト情報がID認証に合格した場合、前記ID認証方法は、選択的に、以下のステップを含み得る。
ステップ214において、ユーザが対応するサービスを使用するための登録情報として、ユーザ情報をサービスデータベースに記憶し、当該ユーザ情報は、上記の証明書のテキスト情報、ID認証画像(即ち、ID認証に合格した処理される画像)、上記の第2顔の画像、上記の第2顔の特徴情報のうちのいずれか1つまたは複数の情報を含み得る。
上記の実施例によれば、ユーザの登録情報が正常に記憶された後、ユーザが対応するサービスに正常に登録した上で、ユーザはサービスを使用することができる。本開示の実施例は、トランザクションサービス、アプリケーション(APP:Application)の使用サービス、アクセス制御サービスなど、本人確認を必要とする任意のサービスに適用されることができる。サービスを利用するプロセスで、サービスデータベースに記憶されたユーザ情報に基づいてユーザに対してID認証を実行する必要があり、ユーザがID認証に合格した場合のみ、当該サービスを引き続き使用することができる。
いくつかの実施例において、顔検出結果および証明書検出結果に基づいて、処理される画像に対して偽造防止検出を実行して、処理される画像の偽造防止検出結果を取得することもできる。この場合、ID認証は、偽造防止検出およびID検証を含む。
いくつかの実施例において、先ず偽造防止検出を実行し、偽造防止検出の結果に基づいてID検証を実行するか否かを決定する。例えば、当該偽造防止検出結果が偽造防止検出合格であることに応答して、顔検出結果および証明書検出結果に従ってID検証の動作を実行する。そうでなければ、当該偽造防止検出結果が偽造防止検出不合格である場合、顔検出結果および証明書検出結果に基づくID検証の動作は実行されない。
別のいくつかの実施例において、偽造防止検出とID検証を並行して実行することができ、処理される画像の偽造防止検出結果およびID検証結果に基づいて、処理される画像のID認証結果を決定する。
いくつかの実施例において、処理される画像の偽造防止検出結果が偽造防止検出合格であり、且つID検証結果がID検証合格である場合、処理される画像がID認証に合格したと決定する。そうでなければ、処理される画像の偽造防止検出結果が偽造防止検出不合格であり、および/またはID検証結果がID検証不合格である場合、処理される画像がID認証に不合格したと決定する。
可能な一例において、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することは、前記顔検出結果および前記証明書検出結果に基づいて、処理される画像から顔領域画像および証明書領域画像を取得することと、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行することと、偽造手掛り検出結果に基づいて、処理される画像の偽造防止検出結果を取得することと、を含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することと、前記偽造防止検出結果および前記ID検証結果に基づいて、前記処理される画像のID認証結果を決定することと、を含む。
いくつかの実施例において、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することを含む。
いくつかの実施例において、前記偽造手掛り検出結果に基づいて、前記処理される画像の偽造防止検出結果を取得することは、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定すること、および/または、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定することを含む。
いくつかの実施例において、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、上記の処理される画像、顔領域画像および証明書領域画像に対して特徴抽出を実行して、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得することと、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出することと、を含む。
いくつかの実施形態において、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴のうちのいずれか1つの特徴から偽造手掛り情報を検出した限り、処理される画像の偽造防止検出結果が偽造防止検出不合格であると決定し、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴のうちのいずれにも偽造手掛り情報が検出されなかった場合にのみ、処理される画像の偽造防止検出結果が偽造防止検出合格したと決定する。
いくつかの可能な例において、処理される画像の特徴を検出して、処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定し、顔領域画像の特徴を検出して、顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定し、証明書領域画像の特徴を検出して、証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定する方法によって、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することができる。
別のいくつかの可能な例において、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を接続して、接続特徴を取得し、当該接続特徴に偽造手掛り情報が含まれているか否かを決定する方法によって、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することができる。
例示的に、第3ニューラルネットワークによって、上記の処理される画像、顔領域画像および証明書領域画像のそれぞれに対する偽造手掛り検出動作を実行することができる。例えば、処理される画像、顔領域画像および証明書領域画像を、第3ニューラルネットワークにそれぞれ入力して処理することによって、前記処理される画像、前記顔領域画像および前記証明書領域画像のそれぞれに偽造手掛り情報が含まれる確率情報または偽造手掛り情報が含まれているか否かを指示する指示情報を取得する。別の例では、処理される画像、顔領域画像および証明書領域画像を同時に第3ニューラルネットワークに入力し、第3ニューラルネットワークは、入力された3つの画像に対してそれぞれ特徴抽出を実行するために使用される、3つのブランチの特徴抽出ネットワークを含み、抽出された特徴を接続して、接続特徴を取得し、最後に、接続特徴に基づいて、処理される画像、顔領域画像および証明書領域画像のうちの少なくとも1つの画像に偽造手掛り情報が含まれる確率または指示情報を取得する。
例示的に、当該第3ニューラルネットワークは、偽造手掛り情報を含むトレーニング用の画像セットに基づいて事前トレーニングされたニューラルネットワークである。当該第3ニューラルネットワークは、深層ニューラルネットワークであり得、前記深層ニューラルネットワークとは、多層畳み込みニューラルネットワークなどの多層ニューラルネットワークを指す。例示的に、本開示の各実施例における抽出された各特徴に含まれる偽造手掛り情報は、第3ニューラルネットワークを事前にトレーニングすることにより、当該第3ニューラルネットワークによって学習でき、その後、これらの偽造手掛り情報を含む任意の画像が当該第3ニューラルネットワークに入力されると、偽造画像として全て検出でき、これにより、検出された画像が偽造画像であると判断でき、偽造防止検出に合格することができなく、そうでなければ、リアル画像であると判断でき、偽造防止検出に合格することができる。ここで、いくつかの実施例において、上記のトレーニング用画像セットは、トレーニング用の正のサンプルとして使用できる複数の画像、およびトレーニング用の負のサンプルとして使用できる複数の画像を含むことができる。ここでの正のサンプル画像は、偽造手掛り情報を含まないリアル画像であり、画像全体、画像全体から抽出された顔領域画像の特徴および証明書領域画像を含むことができ、負のサンプル画像は、偽造手掛り情報を含む偽造画像である。
可能な一例において、顔領域画像における、顔領域画像に含まれる顔の比率が第4プリセット要件を満たすという要件、および/または、証明書領域画像における、証明書領域画像に含まれる証明書の比率が第4プリセット要件を満たすという要件に従って、処理される画像から顔領域画像および証明書領域画像を取得することができる。ここでの第4プリセット要件は、例えば、顔領域画像における顔領域画像に含まれる顔の比率、および証明書領域画像における証明書領域画像に含まれる証明書の比率の値が、例えば、1/2~3/4の範囲にあるなど、当該比率が、1/4より大きいか等しく且つ9/10より小さいか等しいことを含み得る。いくつかの可能な実施形態において、顔領域画像における顔領域画像に含まれる顔の比率、および証明書領域画像における証明書領域画像に含まれる証明書の比率の値の範囲は1/2~3/4であり、顔領域画像の特徴および証明書領域画像に対する偽造防止検出効果を確保してから、偽造防止検出の效率を向上させることができる。
可能な一例において、トレーニング用の正のサンプルとして使用できる複数の画像を取得し、取得された正のサンプルのうちの少なくとも1つの画像の少なくとも一部に対して、偽造手掛り情報をシミュレートするための画像処理を実行して、トレーニング用の負のサンプルとして使用できる少なくとも1つの画像を生成することで、偽造手掛り情報を含むトレーニング用の画像セットを取得することができる。
上記の実施例による処理される画像に対する偽造防止検出は、ユーザID認証のための顔または証明書の偽造の回避に使用されることができ、ユーザID認証のセキュリティを向上させることができる。
上記の各実施例のプロセスの前に、前記ID認証方法は、端末の可視光カメラなどによって、顔および証明書を含む画像シーケンスまたはビデオシーケンスを収集することと、プリセットのフレーム選択条件に基づいて、当該画像シーケンスまたはビデオシーケンスから処理される画像を選択することと、をさらに含むことができる。
ここでのプリセットのフレーム選択条件は、例えば、顔および証明書が画像の中心領域にあるか否か、顔のエッジが画像に完全に含まれているか否か、証明書のエッジが画像に完全に含まれているか否か、画像における顔の比率、画像における証明書の比率、顔の角度(即ち、顔が正面であるか否か)、画像の解像度、画像の露出度などのうちのいずれか1つまたは複数を含むが、これられに限定されない。上記のフレーム選択条件により、総合的な品質の高い画像を選択してID認証を実行することができるため、ID認証結果の精度を向上させることができる。
例示的に、上記のフレーム選択条件に基づいて、ビデオシーケンスから総合的な品質の高い画像を上記の処理される画像として選択することができ、総合的な品質の高い画像の基準は、例えば、顔および証明書が画像の中心領域にあること、顔および証明書のエッジが画像に完全に含まれること、画像における、顔の比率および画像における証明書の比率が約1/2~3/4であり、顔が正面であること、画像の解像度が高く、露出度が高いことのうちのいずれか1つまたは複数の指標を満たす画像であり得る。上記の選択は、プリセットのアルゴリズムによって、顔の画像の向き、解像度、光強度などの指標を自動的に検出でき、プリセットの基準に従って、ビデオシーケンス全体から最良の指標を持つ1つまたは複数の画像を選択する。
いくつかの可能な実施形態において、プリセットの標準を満たさない選択された処理される画像に対して前処理して、前処理された処理される画像を取得することもできる。対応的に、前処理された処理される画像に対してID認証を実行する。
例示的に、上記のプリセットの標準は、例えば、プリセットサイズ、正規(z-score)分布標準、プリセットの画像輝度などのうちのいずれか1つまたは複数を含んでもよいが、これらに限定されない。対応的に、プリセットの標準を満たさない処理される画像に対して前処理することは、プリセットの標準を満たさない処理される画像に対して、サイズ調整またはトリミング、標準正規分布化、輝度調整(例えば、ヒストグラム均等化に基づくダークライトの改善など)などのうちのいずれか1つまたは複数の対応する動作を実行することであり得る。
上記の前処理に基づいて、後続の処理に使用される処理される画像のサイズを統一させることができ、処理された画像データを標準正規分布に適合させ、輝度をプリセット要件に適合させることができる。ここで、標準正規分布化とは、統計学におけるデータ処理方法であり、画像内のピクセルの不均一な分布による画像認識効果への影響を排除するために、画像内のピクセル値を処理して標準正規分布を満たすようにすることを指す。ヒストグラム均等化に基づくダークライトの改善の前処理は、主に実際の証明書を手に持つ被認証者の偽造防止検出シナリオで行われ、当該シナリオでは、顔および証明書がダークライトの条件下にある可能性があるため、顔および証明書の偽造防止の精度に影響を与えやすいので、ダークライトの改善された画像は、画像の輝度分布を再調整でき、これにより、元々ダークライトで撮影された画像がID認証の画像品質要件を満たすことができるため、より正確なID認証結果を取得することができる。
図4に示されるように、いくつかの実施例によるID認証方法は、以下のステップをさらに含み得る。
ステップ302において、認証要求の受信に応答して、認証される顔を含む画像を取得する。
ステップ304において、サービスデータベースに認証される顔の画像と一致するユーザ情報があるか否かを照会する。
いくつかの実施例では、当該操作304において、ニューラルネットワークを使用して当該認証される顔の画像に対してい特徴抽出実行し、サービスデータベースに認証される顔の特徴情報と一致するユーザ情報があるか否かを照会することができる。
ステップ306において、サービスデータベースに認証される顔の画像と一致する照会結果があるか否かに従って、上記の認証される顔の認証結果を決定する。
いくつかの実施例において、照会結果によれば、サービスデータベースに上記の認証される顔の特徴情報と一致するユーザ情報がある場合、認証される顔の認証結果が認証合格であると決定し、そうでなければ、サービスデータベースに認証される顔の特徴情報と一致するユーザ情報が存在しない場合、認証される顔の認証結果が認証不合格であると決定する。
上記の実施例によれば、ユーザが対応するサービスに正常に登録した後に、当該サービスを使用する場合、ユーザの登録情報に基づいてサービスの使用を要求するユーザを認証し、ユーザが認証に合格した場合のみに当該サービスを引き続き使用でき、これにより、サービスのセキュリティを向上させることができる。
また、例示的に、上記の図4に示す実施例において、ステップ302で認証される顔を含む画像を取得した後、前記ID認証方法は、認証される顔を含む画像に対して偽造防止検出を実行して、当該認証される顔を含む画像の偽造防止検出結果を取得することをさらに含むことができる。対応的に、ステップ306において、サービスデータベースに認証される顔の特徴情報と一致する照会結果があるか否か、および認証される顔を含む画像が偽造防止検出に合格したが否かを示す偽造防止検出結果に従って、上記の認証される顔の認証結果を決定する。いくつかの実施例において、サービスデータベースに上記の認証される顔の特徴情報と一致するユーザ情報があり、且つ認証される顔を含む画像が偽造防止検出に合格した場合、認証される顔の認証結果が認証合格であると決定し、そうでなければ、サービスデータベースに認証される顔の特徴情報と一致するユーザ情報が存在せず、および/または認証される顔を含む画像が偽造防止検出に不合格した場合、認証される顔の認証結果が認証不合格であると決定する。
いくつかの実施例において、認証される顔を含む画像に対する偽造防止検出は、上記の認証される顔を含む画像に対する偽造防止検出の方法と同様に、例えば、認証される顔を含む画像から顔領域画像および証明書領域画像を取得し、当該認証される顔を含む画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行し、偽造手掛り検出結果に基づいて、認証される顔を含む画像の偽造防止検出結果を取得する方法を採用することができる。
ここで、当該認証される顔を含む画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、上記の認証される顔を含む画像に対する偽造防止検出の方法と同様に、当該認証される顔を含む画像、顔領域画像および証明書領域画像に対してそれぞれ特徴抽出を実行して、当該認証される顔を含む画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得し、当該認証される顔を含む画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出する方法を採用することができる。
本開示の実施例による認証される顔を含む画像に対する偽造防止検出の実現は、上記の実施例に記載の認証される顔を含む画像に対する偽造防止検出に対応する内容を参照することができ、ここでは繰り返さない。
上記の実施例によれば、当該認証される顔を含む画像に対して偽造防止検出を実行し、当該認証される顔を含む画像の偽造防止検出結果に基づいて、認証される顔の認証結果を決定することにより、ユーザID認証のための顔または証明書の偽造を回避させ、ユーザID認証のセキュリティを向上させることができる。
本開示の上記の各実施例のいくつかの実施形態において、上記の処理される画像または認証される顔を含む画像、顔領域画像および証明書領域画像から抽出された特徴は、例えば、ローカルバイナリパターン(LBP:Local Binary Pattern)特徴、スパースコードのヒストグラム(HSC:Histogram of Sparse Code)特徴、パノラマ(LARGE)特徴、顔の画像(SMALL)特徴、顔詳細画像(TINY)特徴のうちの任意の複数の特徴を含んでもよいが、これらに限定されない。適用において、予想できる偽造手掛り情報に従って、当該抽出された特徴に含まれる特徴アイテムを更新することができる。
ここで、LBP特徴により、画像内のエッジ情報を強調表示でき、HSC特徴により、画像内のゼロ反射とぼかし情報をより明確に反映でき、LARGE特徴は、画像全体の特徴であり、LARGE特徴に基づいて、画像内の最も明白な偽造手掛り(hack)を抽出でき、顔の画像は、顔、および顔と背景との境界部分を含む、画像内の顔フレームのサイズの数倍(例えば、サイズの1.5倍など)の領域のスライスされた画像であり、SMALL特徴に基づいて、反射、リメイク機器の画面のモアレ、マネキンやマスクのエッジなどの偽造手掛りを抽出でき、顔詳細画像は、顔を含む、顔フレームのサイズの領域のスライスされた画像であり、TINY特徴に基づいて、PS処理された画像(画像編集ソフトウェアphotoshopに基づいて編集された画像)、リメイク画面のモアレ、マネキンやマスクのテクスチャなどの偽造手掛りを抽出できる。
本開示の各実施例の可能な一例では、上記の偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有し、即ち、人の目によって、可視光条件下でこれらの偽造手掛り情報を観測することができる。偽造手掛り情報が有する当該特性により、可視光カメラ(赤緑青(RGB:Red Green Blue)カメラなど)によって収集された静止画像または動的ビデオで偽造防止検出を実現でき、追加の特定のカメラの導入を回避し、ハードウェアコストを削減することができる。偽造手掛り情報は、例えば、イメージング媒体の偽造手掛り情報、イメージング媒体の偽造手掛り情報、実在の偽の顔の手掛り情報のうちのいずれか1つまたは複数の情報を含んでもよいが、これらに限定されない。ここで、イメージング媒介の偽造手掛り情報は、二次元(2D:2Dimensions)タイプの偽造手掛り情報とも呼ばれ、イメージング媒体の偽造手掛り情報は、2.5Dタイプの偽造手掛り情報と称することができ、実在の偽の顔の手掛り情報は、三次元(3D:3 Dimensions)タイプの偽造手掛り情報と称することができ、例えば、可能な顔の偽造方法に従って、検出する必要がある偽造手掛り情報を更新する。これらの手掛り情報を検出することで、電子機器は、様々な本物の顔と偽の顔との間の境界を「発見」でき、可視光カメラなどの一般的なハードウェアデバイスの条件下で様々なタイプの偽造防止検出を実現でき、偽の顔の攻撃に抵抗し、セキュリティを向上させることができる。
ここで、イメージング媒介の偽造手掛り情報は、例えば、イメージング媒介のエッジ情報、反射情報および/または材料情報を含んでもよいが、これらに限定されない。イメージング媒体の偽造手掛り情報は、例えば、表示機器の画面のエッジ、画面の反射および/または画面のモアレを含んでもよいが、これらに限定されない。実在の偽の顔の手掛り情報は、例えば、マスクを着用した顔の特徴、マネキンの顔の特徴、および彫刻の顔の特徴を含んでもよいが、これらに限定されない。
本開示の実施例における偽造手掛り情報は、可視光条件下で人の目で観測することができる。偽造手掛り情報は、次元に関して2Dタイプ、2.5Dタイプ、および3Dタイプの偽の顔に分割できる。ここで、2Dタイプの偽の顔とは、紙系素材に印刷された顔の画像を指し、当該2Dタイプの偽造手掛り情報は、例えば、紙の顔のエッジ、紙の素材、紙の表面の反射、および紙のエッジなどの偽造手掛り情報を含むことができる。2.5Dタイプの偽の顔とは、ビデオリメイク機器などのキャリア機器によって保持される顔の画像を指し、当該2.5Dタイプの偽造手掛り情報は、例えば、ビデオリメイク機器などのキャリア機器の画面モアレ、画面の反射、画面エッジなどの偽造手掛り情報を含むことができる。3Dタイプの偽の顔とは、例えば、マスクを着用した顔、マネキンの顔、彫刻の顔、3Dプリントされた顔などの実在の偽の顔を指し、当該3Dタイプの偽の顔も、例えば、マスクのステッチ、マネキンのより抽象的なまたは滑らかすぎるスキンなどの対応する偽造手掛り情報を有する。
本開示の実施例によるID認証方法は、特別なマルチスペクトル機器に依存せずに、可視光条件下での効果的な偽造防止検出を実現でき、特別なハードウェア機器を使用する必要がないため、ハードウェアコストを削減でき、様々な顔検出シナリオ、特に一般的なモバイルアプリケーションに簡単に適用できる。
本開示の実施例による任意のID認証方法は、データ処理能力を有する任意の適切な電子機器によって実行されることができる。あるいは、本開示の実施例による任意のID認証方法は、プロセッサによって実行することができ、例えば、プロセッサは、メモリに記憶された対応する命令を呼び出すことによって、本開示の実施例による任意のID認証方法を実行する。以下では繰り返しない。当業者なら自明であるが、上記の方法の実施例における動作(ステップ)の全てまたは一部が、プログラムによって関連するハードウェアに命令することによって実行されることができ、前述のプログラムが、コンピュータ可読記憶媒体に記憶されることができ、当該プログラムが実行されるとき、上記の方法の実施例における動作が実行され、前述の記憶媒体が、ROM、RAM、磁気ディスクまたは光ディスクなどのプログラムコードを記憶することができる様々な媒体を含むことを理解することができる。
本開示の実施例は、ID認証装置を提供する。いくつかの実施例において、当該ID認証装置は、本開示の上記の各方法実施例を実現するように構成されてもよいが、本開示の実施例はこれに限定されない。図5に示されるように、当該ID認証装置は、第1検出モジュール51と、第2検出モジュール52と、第1決定モジュール53と、認証モジュール54とを備える。
第1検出モジュール51は、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成される。例示的に、当該顔検出結果は、例えば、処理される画像に含まれる顔の数および処理される画像での顔の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。ここで、処理される画像での顔の位置情報は、例えば、処理される画像での顔の第1検出フレームの4つの頂点の頂点座標、または、処理される画像での顔の第1検出フレームの中心点の座標、および当該顔検出フレームの長さと幅として表すことができる。
第2検出モジュール52は、第2ニューラルネットワークによって、処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される。例示的に、当該証明書検出結果は、例えば、処理される画像に含まれる証明書の数および処理される画像での証明書の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。ここで、処理される画像での証明書の位置情報は、例えば、処理される画像での証明書の第2検出フレームの頂点座標、または、処理される画像での証明書の第2検出フレームの中心の座標、および第2検出フレームの長さと幅として表すことができる。
第1決定モジュール53は、顔検出結果および証明書検出結果に従って、処理される画像が、証明書を手に持つ画像などの有効なID認証画像であるか否かを決定するように構成される。
認証モジュール54は、処理される画像が有効なID認証画像であるとの決定に応答して、顔検出結果および証明書検出結果に従ってID認証を実行して、処理される画像のID認証結果を取得するように構成される。
本開示の上記の実施例によるID認証装置によれば、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行し、第2ニューラルネットワークによって、処理される画像に対して証明書検出を実行し、取得された顔検出結果および証明書検出結果に従って、処理される画像が有効なID認証画像であるか否かを決定し、処理される画像が有効なID認証画像であるとの決定に応答して、顔検出結果および証明書検出結果に従ってID認証を実行する。本開示の実施例では、ニューラルネットワークを使用して、深層学習によって処理される画像が有効なID認証画像であるか否かを判断することにより、ユーザのID認証用の適格な画像を迅速に選別できるため、作業効率を向上させ、有効なID認証画像に基づくユーザに対するID認証の実行では、手動審査の必要がないため、コストを節約し、作業効率と処理速度を向上させ、手動審査によるエラーの発生を回避し、認証結果の精度を向上させる。
いくつかの実施例において、前記第1決定モジュールは、
前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定するように構成される証明書決定ユニットと、
前記証明書の顔情報、前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像が有効なID認証画像であるか否かを決定するように構成されるID認証決定ユニットと、を備える、
いくつかの実施例において、前記証明書の顔情報は、前記処理される画像で検出された証明書に含まれる顔の数、前記証明書に含まれる顔の位置情報のうちの少なくとも1つを含む。
いくつかの実施例において、前記証明書決定ユニットは、前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数および/または位置情報を決定するように構成される。
いくつかの実施例において、上記の証明書検出結果は、処理される画像で検出された証明書に含まれる顔の数、証明書に含まれる顔の位置情報などのうちの少なくとも1つを含むこともできる。
別のいくつかの実施形態において、第1決定モジュールは、さらに、顔検出結果における顔の数、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、証明書に含まれる顔の数を決定するように構成される。
いくつかの実施例において、第1決定モジュールは、証明書検出結果における証明書の数が第1プリセット要件を満たし、顔検出結果における顔の数が第2プリセット要件を満たし、且つ証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、処理される画像が有効なID認証画像であると決定するように構成される。
ここで、上記の証明書検出結果における証明書の数が第1プリセット要件を満たし、顔検出結果における顔の数が第2プリセット要件を満たし、証明書内の顔の数が第3プリセット要件を満たすことは、例えば、証明書検出結果における証明書の数が1であり、顔検出結果における顔の数が2より大きいか等しく、検出到的証明書内の顔の数が1であることであり得る。
いくつかの実施例において、認証モジュールは、顔検出結果および証明書検出結果に基づいて、証明書に含まれる第1顔と処理される画像内の証明書外にある第2顔との間の類似度を決定し、第1顔と第2顔との間の類似度に従って、ID検証結果を取得するように構成される。
本開示の実施例は、別のID認証装置を提供する。図6に示されるように、図5に示される構成と比較すると、図6に示される構成において、認証モジュール54は、顔検出結果および証明書検出結果に基づいて、処理される画像から第1顔の画像および第2顔の画像を取得するように構成される第1取得ユニット541と、第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、第2顔の画像に対して特徴抽出を実行して、第2特徴を取得するように構成される特徴抽出ユニット543と、第1特徴および第2特徴に基づいて、第1顔と第2顔との間の類似度を決定するように構成される第1決定ユニット544と、第1顔と第2顔との間の類似度に従って、ID検証結果を取得するように構成される認証ユニット545を、備える。
さらに、図6を参照すると、上記の各実施例によるID認証装置は、処理される画像に含まれる顔の数が2より大きい場合、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、処理される画像に含まれる少なくとも2つの顔のうちの証明書外の最大の顔を、第2顔として決定するように構成される第2決定モジュールをさらに備える。
さらに、図6を参照すると、上記の実施例によるID認証装置において、認証モジュールは、第1顔と第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、証明書のテキスト情報を取得するテキスト認識ユニット547であって、テキスト情報は、名前および証明書の番号のうちの少なくとも1つの情報を含むテキスト認識ユニット547をさらに備える。対応的に、認証ユニット545は、さらに、ユーザ情報データベースに基づいてテキスト情報を認証して、ID検証結果を取得するように構成される。
さらに、図6を参照すると、上記の実施例によるID認証装置において、認証モジュールは、ID検証結果がID認証合格であるとの決定に応答して、ユーザ情報をサービスデータベースに記憶するように構成される記憶処理ユニット546であって、当該ユーザ情報は、例えば、テキスト情報、処理される画像、第2顔の画像、第2顔の特徴情報などのうちのいずれか1つまたは複数の情報を含んでもよいが、これらに限定されない、記憶処理ユニット546をさらに備える。
さらに、図6を参照すると、上記の実施例によるID認証装置において、認証モジュールは、照会ユニット542をさらに備える。当該実施例において、第1取得ユニット541は、さらに、ID認証要求の受信に応答して、認証される顔を含む画像を取得するように構成される。照会ユニット542は、サービスデータベースに認証される顔の画像と一致するユーザ情報があるか否かを照会するように構成される。第1決定ユニット544は、さらに、照会の結果に従って、認証される顔の認証結果を決定するように構成される。さらに、図6を参照すると、上記の各実施例よるID認証装置において、前記認証モジュール54は、さらに、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得し、前記偽造防止検出結果および前記ID検証結果に基づいて、前記処理される画像のID認証結果を決定するように構成される。
いくつかの実施例において、認証モジュール54は、さらに、前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得するように構成される。
さらに、図6を参照すると、いくつかの実施例において、偽造防止検出モジュール55は、前記顔検出結果および前記証明書検出結果に基づいて、処理される画像から顔領域画像および証明書領域画像を取得するように構成される第2取得ユニット551と、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成される偽造手掛り検出ユニット552と、偽造手掛り検出結果に基づいて、処理される画像の偽造防止検出結果を取得するように構成される第2決定ユニット553と、を備える。
ここで、顔領域画像における、顔領域画像に含まれる顔の比率が第4プリセット要件を満たし、および/または、証明書領域画像における、証明書領域画像に含まれる証明書の比率が第4プリセット要件を満たす。ここでの第4プリセット要件は、例えば、比率が1/4より大きいか等しく且つ9/10より小さいか等しいことであり得る。
いくつかの実施例において、前記第2決定ユニットは、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定するように構成され、および/または、前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定するように構成される。
いくつかの実施例において、偽造手掛り検出ユニットは、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ特徴抽出を実行して、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得し、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成される。
いくつかの実施例において、抽出された特徴は、例えば、ローカルバイナリパターン特徴、スパースコードのヒストグラム特徴、パノラマ特徴、顔画像特徴、顔詳細画像特徴などのうちのいずれか1つまたは複数の特徴を含んでもよいが、これらに限定されない。
いくつかの実施例において、偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有する。
いくつかの実施例において、偽造手掛り情報例は、例えば、イメージング媒体の偽造手掛り情報、イメージング媒体の偽造手掛り情報、実在の偽の顔の手掛り情報などのうちのいずれか1つまたは複数の情報を含んでもよいが、これらに限定されない。
いくつかの実施例において、イメージング媒介の偽造手掛り情報は、例えば、イメージング媒介のエッジ情報、反射情報および/または材料情報を含んでもよいが、これらに限定されなく、および/または、イメージング媒体の偽造手掛り情報は、例えば、表示機器の画面のエッジ、画面の反射および/または画面のモアレを含んでもよいが、これらに限定されなく、および/または、実在の偽の顔の手掛り情報は、例えば、マスクを着用した顔の特徴、マネキンの顔の特徴、および彫刻の顔の特徴を含んでもよいが、これらに限定されない。
いくつかの実施例において、偽造手掛り検出ユニットが、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成されることは、偽造手掛り検出ユニットが、処理される画像の特徴を検出して、処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定し、顔領域画像の特徴を検出して、顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定し、証明書領域画像の特徴を検出して、証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定するように構成されることを含む。
いくつかの実施例において、偽造手掛り検出ユニットが、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出するように構成されることは、偽造手掛り検出ユニットが、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を接続して、接続特徴を取得し、接続特徴に偽造手掛り情報が含まれているか否かを決定するように構成されることを含む。
いくつかの実施例において、偽造手掛り検出ユニットが、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成されることは、偽造手掛り検出ユニットが、第3ニューラルネットワークによって、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成されることを含む。さらに、本開示の実施例による電子機器は、コンピュータプログラムを記憶するように構成されるメモリと、前記メモリに記憶されたコンピュータプログラムを実行するように構成されるプロセッサであって、コンピュータプログラムが実行されるときに、本開示の上記の実施例のいずれかに記載のID認証方法を実現するプロセッサと、を備える。
図7は、本開示の実施例によるID認証方法のフローチャートである。図7に示されるように、当該ID認証方法は以下のステップを含む。
ステップ1020において、ステップ102で得られた顔検出結果に基づいて、処理される画像から顔領域画像を取得する。
ステップ1040において、ステップ102で得られた証明書検出結果に基づいて、処理される画像から証明書領域画像を取得する。
ステップ1060において、上記の処理される画像、顔領域画像および証明書領域画像に対して偽造手掛り検出を実行する。
いくつかの実施例において、当該ステップ1060は、上記の処理される画像、顔領域画像および証明書領域画像に対してそれぞれ特徴抽出を実行して、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得することと、抽出された処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出することと、を含む。
いくつかの実施例において、上記の抽出された特徴、即ち、抽出された上記の処理される画像の特徴、顔領域の特徴および証明書領域の特徴は、例えば、LBP特徴、HSCのヒストグラム特徴、LARGE特徴、SMALL特徴、顔TINY特徴のうちのいずれか1つまたは複数の特徴を含んでもよいが、これらに限定されない。
ステップ1080において、偽造手掛り検出結果に従って、上記の処理される画像の偽造防止検出結果を決定する。
いくつかの実施例では、当該ステップ1080において、偽造手掛り検出結果が、処理される画像、顔領域画像および証明書領域画像のうちのいずれにも偽造手掛り情報が含まれていないことを示す場合、処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定し(ID認証に合格したと見なすことができる)、および/または、偽造手掛り検出結果が、処理される画像、顔領域画像および証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛り情報が含まれていることを示す場合、処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定する(ID認証に不合格したと見なすことができる)。
いくつかの実施例におけるID認証は、偽造防止検出および/またはID検証を含み得る。ここで、偽造防止検出(図7に示される方法を参照)は、処理される画像が偽造された画像であるか否かを判断するために使用され、例えば、画像処理技術によって合成された画像は、偽造された画像であるため、偽造防止検出に合格できなく、別の例では、合成画像ではなく、撮影によって得られた、証明書を手に持つユーザ本人の写真である場合、偽造防止検出に合格できる。ID検証(図1A、図1B、図2などに示される方法を参照)は、処理される画像内の顔(顔1と見なすことができる)と処理される画像における証明書内の顔(顔2と見なすことができる)が一致するか否か、つまり、顔1と顔2が同じ人物の顔であるか否かを判断するために使用される。いくつかの実施例において、ID認証が偽造防止検出およびID検証を含む場合、ID認証に合格することは、偽造防止検出に合格すること、およびID検証に合格することを含み、ここで、偽造防止検出およびID検証の実行順番は特定されず、偽造防止検出を実行した後にID検証を実行してもよいし、ID検証を実行した後に偽造防止検出を実行してもよい。
本開示を実現するプロセスにおいて、発明者は、現在の顔の偽造防止および証明書の偽造防止検出技術によるID認証において、通常、顔および証明書を2つの画像に分割して、個別に偽造防止検出し、このような検出方法には、証明書とユーザ本人が同じ時空次元にあることを保証できなく、独立した本物の顔の写真情報および本物の証明書情報の取得が簡単であり、写真の出所の信頼性を保証できなく、本物の顔が偽造された証明書を、偽の顔が本物の証明書を持っている可能性が非常に高いという欠点があることを発見した。
本開示の上記の実施例によるID認証方法によれば、顔および証明書を含む処理される画像を取得し、処理される画像から顔領域画像および証明書領域画像を取得し、処理される画像、顔領域画像および証明書領域画像に対して偽造手掛り検出を実行し、偽造手掛り検出結果に従って、処理される画像の偽造防止検出結果を決定する。本開示の実施例による新しい偽造防止検出方法によれば、顔と証明書を1つの画像に同時に表示し、同時に顔と証明書の偽造防止検出を実行し、同時に顔と証明書の信憑性検証することにより、本物の人が本物の証明書を持つことを保証し、偽造された証明書を持つ本物の顔や本物の証明書を持つ偽の顔などの各種の偽造行為を防止でき、ID認証の信頼性を向上させることができる。
なお、上記の実施例におけるステップ1060で、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行する前に、前記ID認証方法は、処理される画像に対して顔検出および証明書検出をそれぞれ実行して、顔検出結果および証明書検出結果を取得することと、顔検出結果および証明書検出結果に従って、処理される画像が有効な画像であるか否かを決定することと、をさらに含む。対応的に、ステップ1060において、処理される画像、顔領域および証明書領域に対して偽造手掛り検出を実行することは、処理される画像が有効な画像であるとの決定に応答して、処理される画像、顔領域および証明書領域に対して偽造手掛り検出を実行することを含み得る。
いくつかの実施例において、上記の顔検出結果は、例えば、処理される画像に含まれる顔の数および処理される画像での各顔の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。証明書検出結果は、例えば、処理される画像に含まれる証明書の数および処理される画像での各証明書の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。
ここで、処理される画像での顔の位置情報は、例えば、処理される画像での顔の顔検出フレーム(第1検出フレームとも呼ばれる)の4つの頂点の頂点座標として表すことができる。処理される画像での当該顔検出フレームの4つの頂点の頂点座標に基づいて、処理される画像での顔検出フレームの位置を決定でき、これにより、処理される画像での顔の位置を決定することができる。
さらに、処理される画像での顔の位置情報は、処理される画像での顔の顔検出フレーム(即ち、第1検出フレーム)の中心点の座標、および当該顔検出フレームの長さと幅として表すこともできる。処理される画像での当該顔検出フレームの中心点座標、および当該顔検出フレームの長さと幅に基づいて、処理される画像での顔検出フレームの位置を決定でき、これにより、処理される画像での顔の位置を決定することができる。
いくつかの実施例において、顔検出結果および証明書検出結果に従って、処理される画像が有効な画像であるか否かを決定することは、処理される画像に含まれる顔の数が第1プリセット要件を満たすか否か、処理される画像に含まれる証明書の数が第2プリセット要件を満たすか否か、証明書内の顔の数が第3プリセット要件を満たすか否かによって、処理される画像が有効な画像であるか否かを決定することである。処理される画像に含まれる顔の数が第1プリセット要件を満たし、処理される画像に含まれる証明書の数が第2プリセット要件を満たし、且つ証明書内の顔の数が第3プリセット要件を満たす場合、処理される画像が有効な画像であると決定する。
ここで、上記の各実施例において、処理される画像に含まれる顔の数が第1プリセット要件を満たすことは、例えば、処理される画像に含まれる顔の数が2より大きいか等しいことであり得、処理される画像に含まれる証明書の数が第2プリセット要件を満たすことは、例えば、処理される画像に含まれる証明書の数が1であることであり得、証明書内の顔の数が第3プリセット要件を満たすことは、例えば、証明書内の顔の数が1であることであり得る。
ここで、処理される画像内の顔の数が2より大きい場合、処理される画像内の証明書領域外に含まれる顔の数が1より大きい可能性があることを意味し、この場合、処理される画像には被認証者の顔だけでなく、見物人の顔も含まれている可能性がある。
上記の実施例によれば、処理される画像内の顔の数が2より小さいことは、証明書の数が一意ではないこと、または、顔と証明書の位置関係が間違っている(顔と証明書の正しい位置関係の基準は、証明書領域内の顔の数が一意であり、且つ証明書領域外に少なくとも1つの顔があることである)ことを意味し、当該画像が有効な処理される画像ではないと見なされる。
本開示の実施例によれば、処理される画像に対して顔検出および証明書検出をそれぞれ実行して、顔検出結果および証明書検出結果を取得し、顔検出結果および証明書検出結果に従って、処理される画像が有効な画像であるか否かを決定することにより、ユーザのID認証用の適格な画像を迅速に選別できるため、作業効率を向上させ、有効な処理される画像に基づくユーザに対するID認証の実行では、手動審査の必要がないため、コストを節約し、作業効率と処理速度を向上させ、手動審査によるエラーの発生を回避し、認証結果の精度を向上させる。処理される画像が有効な画像であると決定された場合、当該処理される画像、当該処理される画像内の顔領域および証明書領域に対して偽造手掛り検出を実行する。これにより、偽造防止検出の效率を向上させる。
いくつかの実施例において、ステップ1020は、端末機器の可視光カメラなどをによって、ビデオシーケンスを収集することと、プリセットのフレーム選択条件に基づいて、当該ビデオシーケンスから処理される画像を選択することと、を含み得る。
いくつかの実施例において、ステップ1020は、端末機器の可視光カメラによって収集された顔および証明書を含む被検出画像または被検出ビデオを取得し、可視光カメラによって収集された被検出画像または被検出ビデオから処理される画像を取得することを含み得る。
図8は、本開示の実施例によるID認証方法の別のフローチャートであり、図8に示されるように、当該ID認証方法は以下のステップを含む。
ステップ2020において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得する。
ステップ2040において、第2ニューラルネットワークによって当該処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
ステップ2060において、顔検出結果および証明書検出結果に従って、処理される画像が有効な画像であるか否かを決定する。
処理される画像が有効な画像であると決定された場合、ステップ2080を実行する。そうでなければ、処理される画像が無効な画像であると決定された場合、本実施例の後続のプロセスを実行しないか、処理される画像が無効であることを示す提示メッセージを出力する。
ステップ2080において、顔検出結果に基づいて、処理される画像から顔領域画像を取得し、証明書検出結果に基づいて、処理される画像から証明書領域画像を取得する。
一実施形態において、証明書検出結果に含まれる証明書の位置情報に従って、処理される画像から証明書のある領域の画像を取得し、証明書のある領域の画像を証明書領域画像として決定し、顔検出結果に含まれる顔の位置情報および証明書検出結果に含まれる証明書の位置情報に従って、処理される画像内の証明書外にある第2顔を決定し、顔検出結果に含まれる第2顔の位置情報に従って、処理される画像から第2顔のある領域の画像を取得し、第2顔のある領域の画像を顔領域画像として決定する。
可能な一例において、顔領域画像における、顔領域画像に含まれる顔の比率が第4プリセット要件を満たすという要件、および/または、証明書領域画像における、証明書領域画像に含まれる証明書の比率が第4プリセット要件を満たすという要件に従って、処理される画像から顔領域画像および証明書領域画像を取得することができる。
ステップ2100において、上記の処理される画像、顔領域画像および証明書領域画像に対してそれぞれ特徴抽出を実行して、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得する。
ステップ2120において、抽出された処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出する。
いくつかの実施例において、処理される画像の特徴を検出して、処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定し、顔領域画像の特徴を検出して、顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定し、証明書領域画像の特徴を検出して、証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定する方法によって、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出することができる。
例示的に、上記の実施形態において、特徴に偽造手掛り情報が含まれているか否かを検出する場合、ニューラルネットワークにおける3つのバイナリ分類器によって、各分類器に対応する上記の処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かをそれぞれ検出して、検出結果を出力することができる。つまり、ニューラルネットワークには3つのバイナリ分類器が含まれ、1つの分類器によって、上記の処理される画像の特徴に偽造手掛り情報が含まれているか否かを判断して検出結果を出力し、別の1つの分類器によって、上記の顔のある領域の特徴に偽造手掛り情報が含まれているか否かを判断して検出結果を出力し、更に別の1つの分類器によって、上記の証明書のある領域の特徴に偽造手掛り情報が含まれているか否かを判断して検出結果を出力する。対応的に、上記の3つのバイナリ分類器によって出力された検出結果に従って、偽造手掛り検出結果を決定する。上記の3つのバイナリ分類器によって出力された検出結果のいずれにも偽造手掛り情報が含まれていない場合、偽造手掛り検出結果が、偽造手掛り検出合格であると決定し、そうでなければ、上記の3つのバイナリ分類器のいずれか1つまたは複数のバイナリ分類器によって出力された検出結果に偽造手掛り情報が含まれている場合、偽造手掛り検出結果が偽造手掛り検出不合格であると決定する。
別のいくつかの可能な実施形態において、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を接続して、接続特徴を取得し、当該接続特徴に偽造手掛り情報が含まれているか否かを決定する方法によって、処理される画像の特徴、顔領域の特徴および証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することができる。
例示的に、上記の実施形態において、特徴に偽造手掛り情報が含まれているか否かを検出する場合、ニューラルネットワークにおける1つのバイナリ分類器によって、接続特徴に偽造手掛り情報が含まれているか否かを検出して、検出結果を出力することができる。対応的に、当該バイナリ分類器によって出力された検出結果に従って、偽造手掛り検出結果を決定する。当該バイナリ分類器によって出力された検出結果に偽造手掛り情報が含まれていない場合、偽造手掛り検出結果が、偽造手掛り検出合格であると決定し、そうでなければ、当該バイナリ分類器によって出力された検出結果に偽造手掛り情報が含まれている場合、偽造手掛り検出結果が偽造手掛り検出不合格であると決定する。
ステップ2140において、偽造手掛り検出結果に従って、上記の処理される画像の偽造防止検出結果を決定する。
いくつかの実施例において、ニューラルネットワークによって、処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行する。つまり、上記の処理される画像、顔領域画像および証明書領域画像をニューラルネットワークに入力し、ニューラルネットワークによって、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを示す偽造手掛り検出結果を出力することであって、当該ニューラルネットワークは、偽造手掛り情報を含むトレーニング用の画像セットに基づいて事前トレーニングされたニューラルネットワークであることで、ステップ2100およびステップ2120を実現することができる。
本開示の各実施例におけるニューラルネットワークは、深層ニューラルネットワークであり得、前記深層ニューラルネットワークとは、多層畳み込みニューラルネットワークなどの多層ニューラルネットワークを指す。
ここで、上記のトレーニング用画像セットは、トレーニング用の正のサンプルとして使用できる複数の顔および証明書を含む第1画像、およびトレーニング用の負のサンプルとして使用できる複数の第2画像を含むことができる。可能な一例において、
トレーニング用の正のサンプルとして使用できる複数の第1画像を取得することと、
第1画像の少なくとも一部、第1画像内の顔のある領域の少なくとも一部、および第1画像内の証明書のある領域の少なくとも一部のうちの少なくとも1つの画像に対して、偽造手掛り情報をシミュレートするための画像処理を実行して、トレーニング用の負のサンプルとして使用できる少なくとも1つの画像を生成することと、を含む方法で、偽造手掛り情報を含むトレーニング用の画像セットを取得することができる。
本開示の上記の実施例によれば、深層ニューラルネットワークの強力な表現能力によるモデリング、および大規模なトレーニング用の画像セットデータによるトレーニングによって、人の目で観測できる多次元の本物の顔および証明書と偽造された顔および証明書との間の違いを学習して、顔が生体の顔であるか否かを判断し、顔の一部が写真タイプの偽造攻撃である場合、写真の反射または写真のエッジの特徴に基づいて、偽造された顔であると判断でき、同時に、手持ちのリメイクされた証明書、証明書のコピーなどを認識するなど、本物の証明書と偽造された証明書との間の違いを学習し、photoshopなどのソフトウェアによって編集された写真も認識できるため、深層学習フレームワークの使用して証明書の偽造防止の問題を解決し、ニューラルネットワークは、強力な学習能力を有し、リアルタイムで補足トレーニングを実行してパフォーマンスを改善でき、強力なスケーラビリティを有し、実際のニーズの変化に応じて素早く更新し、新しい偽造状況に素早く応答して偽造防止検出を実行でき、これにより、検出結果の精度を効果的に向上させ、偽造防止検出結果の精度を向上させることができる。
本開示の実施例のいくつかの実施形態において、上記のニューラルネットワークは、端末機器に配置された第3ニューラルネットワークを含み、つまり、端末機器に配置された第3ニューラルネットワークによって、上記の各実施例における、処理される画像、顔領域画像および証明書領域画像に対する偽造手掛り検出を実行する。対応的に、当該実施形態において、第3ニューラルネットワークによって出力された偽造手掛り検出結果に従って、端末機器によって、処理される画像の偽造防止検出結果を決定する。例示的に、本開示の各実施例における抽出された各特徴に含まれる偽造手掛り情報は、第3ニューラルネットワークを事前にトレーニングすることにより、当該第3ニューラルネットワークによって学習でき、その後、これらの偽造手掛り情報を含む任意の画像が当該第3ニューラルネットワークに入力されると、偽造画像として全て検出でき、これにより、検出された画像が偽造画像であると判断でき、そうでなければ、リアル画像であると判断できる。
なお、本開示の実施例の別のいくつかの実施形態では、ステップ1020またはステップ2020において、サーバが、端末機器によって送信される処理される画像を受信することを含み得る。
対応的に、当該別のいくつかの実施形態では、上記のニューラルネットワークは、サーバに配置された第4ニューラルネットワークを含み、つまり、サーバに配置された第4ニューラルネットワークによって、上記の各実施例における、処理される画像、顔領域画像および証明書領域画像に対する偽造手掛り検出を実行する。例示的に、本開示の各実施例における抽出された各特徴に含まれる偽造手掛り情報は、第4ニューラルネットワークを事前にトレーニングすることにより、当該第4ニューラルネットワークによって学習でき、その後、これらの偽造手掛り情報を含む任意の画像が当該第4ニューラルネットワークに入力されると、偽造画像として全て検出でき、これにより、検出された画像が偽造画像であると判断でき、そうでなければ、リアル画像であると判断できる。
上記の別のいくつかの実施形態のいくつかの可能な例によれば、ステップ1080は、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、サーバによって、処理される画像の偽造防止検出結果を決定し、処理される画像の偽造防止検出結果を端末機器に返信すること、または、サーバによって、第4ニューラルネットワークによって出力された偽造手掛り検出結果を端末機器に返信し、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、端末機器によって、処理される画像の偽造防止検出結果を決定することを含み得る。
あるいは、上記の別のいくつかの実施形態の別のいくつかの可能な例によれば、上記のニューラルネットワークは、端末機器に配置された第3ニューラルネットワークを含むこともでき、当該第3ニューラルネットワークのスケールは、第4ニューラルネットワークのスケールより小さく、例えば、第3ニューラルネットワークにおけるネットワーク層および/またはパラメータの数が、第4ニューラルネットワーク小さいことであってもよい。図9は、本開示の別の実施例によるID認証方法のフローチャートである。当該実施例では、端末機器に配置された第3ニューラルネットワークおよびサーバに配置された第4ニューラルネットワーク含む、ニューラルネットワークを例として説明し、当該ID認証方法は以下のステップを含む。
ステップ3020において、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって当該処理される画像に対して証明書検出を実行して、証明書検出結果を取得する。
ステップ3040において、顔検出結果に基づいて、処理される画像から顔領域画像を取得し、証明書検出結果に基づいて、処理される画像から証明書領域画像を取得する。
ステップ3060において、上記の処理される画像、顔領域画像および証明書領域画像を、端末機器の第3ニューラルネットワークに入力し、当該第3ニューラルネットワークによって、上記の処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを示す偽造手掛り検出結果を出力する。
いくつかの実施例において、本開示の上記の各実施形態におけるステップと同様に、第3ニューラルネットワークは、上記の処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を抽出し、抽出された処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出して、偽造手掛り検出結果を取得することができる。
第3ニューラルネットワークによって出力された検出結果に従って、上記の抽出された特徴のいずれにも偽造手掛り情報が含まれていない場合、ステップ3080を実行する。そうでなければ、上記の抽出された特徴のいずれかに偽造手掛り情報が含まれている場合、ステップ3120を実行する。
ステップ3080において、端末機器が、上記の処理される画像、顔領域画像および証明書領域画像をサーバに送信する。
ステップ3100において、サーバが、処理される画像、顔領域画像および証明書領域画像を、当該サーバの第4ニューラルネットワークに入力し、第4ニューラルネットワークによって、上記の処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを示す偽造手掛り検出結果を出力する。
いくつかの実施例において、本開示の上記の各実施形態におけるステップと同様に、第4ニューラルネットワークは、上記の処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を抽出し、抽出された処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出して、偽造手掛り検出結果を取得することができる。
ステップ3120において、第3ニューラルネットワークおよび第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、処理される画像の偽造防止検出結果を決定する。
第3ニューラルネットワークおよび第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴のいずれにも偽造手掛り情報が含まれていない場合、処理される画像が偽造防止検出に合格したと決定する。第3ニューラルネットワークおよび/または第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴に偽造手掛り情報が含まれている場合、処理される画像が偽造防止検出に不合格したと決定する。
いくつかの実施例において、第3ニューラルネットワークによって出力された偽造手掛り検出的結果に従って、抽出された特徴に偽造手掛り情報が含まれている場合、処理される画像が個人情報の偽造防止検出に不合格したと決定する。第3ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴に偽造手掛り情報が含まれず、且つ第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴にも偽造手掛り情報が含まれていない場合、処理される画像が偽造防止検出に合格したと決定する。第3ニューラルネットワークによって出力された偽造手掛り検出的結果に従って、抽出された特徴に偽造手掛り情報が含まれていないが、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴に偽造手掛り情報が含まれている場合、処理される画像が偽造防止検出に不合格したと決定する。
いくつかの実施例において、ステップ3100を通じて、第4ニューラルネットワークによって偽造手掛り検出結果を出力した後、サーバは、第4ニューラルネットワークによって出力された偽造手掛り検出結果を端末機器に返信することができ、端末機器によって、上記のステップ3120を実行し、つまり、端末機器は、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、処理される画像が偽造防止検出に合格したか否かを決定する。
別のいくつかの実施形態において、ステップ3100を通じて、第4ニューラルネットワークによって検出結果を出力した後、サーバは、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、処理される画像が偽造防止検出に合格したか否かを決定し、当該処理される画像が偽造防止検出に合格したか否かを示す防止検証結果を端末機器に送信することができる。
ステップ3060を通じて、第3ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴に偽造手掛り情報が含まれていない場合のみ、端末機器が、上記の処理される画像をサーバに送信し、第4ニューラルネットワークによってステップ3100を実行するため、上記の実施形態では、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、処理される画像が偽造防止検出に合格したか否かを直接決定できる。第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴にも偽造手掛り情報が含まれていない場合、処理される画像が偽造防止検出に合格したと決定し、第4ニューラルネットワークによって出力された偽造手掛り検出結果に従って、抽出された特徴に偽造手掛り情報が含まれている場合、処理される画像が偽造防止検出に不合格したと決定する。
端末機器のハードウェアパフォーマンスは通常制限されているため、より多くの特徴の抽出と検出を実行するニューラルネットワークでは、より多くのコンピューティングリソースおよびストレージリソースが必要になるが、端末機器のコンピューティングリソースおよびストレージリソースが、クラウドサーバに比べて比較的制限されており、ニューラルネットワークによって占有される端末機器側のコンピューティングリソースおよびストレージリソースを節約しながら、効果的な顔偽造防止検出を保証するために、本開示の実施例では、より小さい(より少ないネットワーク層および/またはより少ないネットワークパラメータ)第3ニューラルネットワークを端末機器に配置し、処理される画像からLBP特徴および顔SMALLのみを抽出して、対応する偽造手掛り情報を検出するなど、より少ない特徴を統合し、より優れたハードウェアパフォーマンスを備えたクラウドサーバに、より大きい(より多くのネットワーク層および/またはより多くのネットワークパラメータ)第4ニューラルネットワークを配置し、包括的な偽造手掛り特徴統合することにより、当該第4ニューラルネットワークがより堅牢で、より優れた検出パフォーマンスを備えるため、処理される画像からLBP特徴および顔SMALL特徴を抽出するだけでなくHSC特徴、LARGE特徴、TINY特徴などの偽造手掛り情報含む可能性のある他の特徴も抽出でき、第3ニューラルネットワークが、偽造手掛り情報が含まれていないことを示す検出結果を出力した場合、第4ニューラルネットワークによって、より正確で包括的な偽造防止検出を実行することにより、検出結果の精度を向上させ、第3ニューラルネットワークが、偽造手掛り情報が含まれていることを示す検出結果を出力した場合、第4ニューラルネットワークによって偽造防止検出を実行する必要がないため、偽造防止検出の效率を向上させる。
本開示の実施例は、処理される画像に偽造手掛り(即ち、偽造手掛り情報)が含まれているか否かの検出に集中でき、サイレント生体検出と称するほぼ対話なしの方法で生体を認証できる。サイレント生体検出のプロセス全体でほぼ対話がないため、生体検出のプロセスを大幅に簡略化させ、被験者は、ニューラルネットワークが配置されている機器のビデオまたは画像収集機器(可視光カメラなど)に向き、光および位置を調整するだけで十分であり、プロセス全体でアクションのような対話を必要としない。本開示の実施例におけるニューラルネットワークが、学習およびトレーニングの方法を通じて、人の目が多次元で「観測」できる偽造手掛り情報を事前に学習するため、後続の適用で、顔の画像が本物の生体からのものであるか否かを判断できる。処理される画像に任意の偽造手掛り情報が含まれている場合、これらの手掛りは、ニューラルネットワークによってキャプチャされ、当該処理される画像内の顔の画像が偽造された顔の画像であることをユーザに知らせる。例えば、ビデオリメイクタイプの偽造顔の画像において、画像内の画面の反射または画面エッジの特徴を判断することで、画像内の顔が非生体からのものであると判断することができる。
本開示の更に別の実施例によるID認証方法において、前記ID認証方法は、処理される画像の偽造防止検出結果に従って、当該処理される画像のID認証結果を決定することをさらに含み得る。
その可能な一例において、処理される画像が偽造防止検出に合格した場合、当該処理される画像に対してID検証を実行し、ID検証結果に基づいて、当該処理される画像のID認証結果を決定することができる。
上記の各実施例のいくつかの実施形態では、顔検出結果および証明書検出結果に従ってユーザID認証を実行する前に、以下の方法で上記の第2顔を取得することができる。
処理される画像に含まれる顔の数が2より大きい場合、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、処理される画像に含まれる少なくとも2つの顔のうちの証明書外の最大の顔を、上記の第2顔として決定する。
処理される画像に含まれる顔の数が2である場合、処理される画像に含まれる2つの顔のうちの証明書外の顔を、上記の第2顔として直接決定する。
処理される画像に含まれる顔の数が2より大きい場合、被認証者の顔に加えて、処理される画像に見物人の顔も含まれている可能性がある。被認証者が画像の収集機器に最も近いため、被認証者の顔が最大であり、他の見物人は画像の収集機器から遠く離れており、他の見物人の顔が被認証者の顔より小さいと見なすことができ、本開示の実施例では、ニューラルネットワークを使用して、証明書内の顔の画像と当該証明書外の最大の顔の画像との間で特徴抽出および類似度比較を実行することにより、両者が同じユーザあるか否かを効果的に識別でき、これにより、2つの顔が同じ人物の顔であるか否かを迅速、且つ正確に判断でき、応答時間が短く、精度が高いため、作業効率とユーザ体験を効果的に向上させ、人の目の認識によるエラーを回避させることができる。
いくつかの可能な例において、処理される画像に対してID認証を実行することは、処理される画像の顔検出結果および処理される画像の証明書検出結果に基づいて、証明書に含まれる第1顔と処理される画像内の証明書外にある第2顔との間の類似度を決定することと、当該第1顔と第2顔との間の類似度に従って、ID検証結果を取得することと、を含み得る。
例えば、処理される画像から第1顔の画像および第2顔の画像を取得し、第1顔に対して特徴抽出を実行して、第1特徴を取得し、第2顔に対して特徴抽出を実行して、第2特徴を取得し、当該第1特徴および第2特徴に基づいて、上記の第1顔と前記第2顔との間の類似度を決定することができる。
その可能な一例では、第3ニューラルネットワークによって、第1顔に対して特徴抽出を実行して、第1特徴を取得し、第2顔に対して特徴抽出を実行して、第2特徴を取得し、当該第1特徴および第2特徴に基づいて、第1特徴と第2特徴との間の類似度を決定し、第1特徴と第2特徴との間の類似度がプリセットの閾値より大きいか否かに従って、処理される画像がID検証に合格するか否かを決定して、ID検証結果を取得する。
ここでのプリセットの閾値は、実際のニーズに応じて設定でき、例えば、ユーザID認証に対する現在のサービスの厳密さ、第3ニューラルネットワークのパフォーマンス、処理される画像収集環境などに応じて設定でき、実際のニーズの変化に応じて調整できる。
本実施例において、第3ニューラルネットワークによって第1顔および第2顔に対して特徴抽出を実行し、抽出された第1特徴と第2特徴との間の類似度を比較する場合、第3ニューラルネットワークを事前にトレーニングすることにより、トレーニングされた第3ニューラルネットワークによって、証明書内の第1顔および当該証明書外の第2顔に対する特徴抽出を効果的に実行でき、類似度を正確に比較できるため、証明書内の第1顔と当該証明書外の第2顔が同じ人物の顔であるか否かを正しく識別することができる。
本実施例において、証明書内の第1顔および当該証明書外の最大の顔との間で特徴抽出および比較を実行することにより、2つの顔が同じ人物の顔であるか否かを迅速、且つ正確に判断でき、応答時間が短く、精度が高いため、作業効率とユーザ体験を効果的に向上させ、人の目の認識によるエラーを回避させることができる。
上記の実施例において、顔検出結果は、処理される画像に含まれる顔の数および処理される画像での顔の位置情報のうちの少なくとも1つを含み、および/または、証明書検出結果は、処理される画像に含まれる証明書の数および処理される画像での証明書の位置情報のうちの少なくとも1つを含む。対応的に、在上記の実施例のいくつかの実施形態では、処理される画像に対してID認証を実行する前に、以下の方法で上記の第2顔を取得することができる。
処理される画像に含まれる顔の数が2より大きい場合、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、処理される画像に含まれる少なくとも2つの顔のうちの証明書外の最大の顔を、上記の第2顔として決定する。
処理される画像に含まれる顔の数が2である場合、処理される画像に含まれる2つの顔のうちの証明書外の顔を、上記の第2顔として直接決定する。
処理される画像に含まれる顔の数が2より大きい場合、被認証者の顔に加えて、処理される画像に見物人の顔も含まれている可能性がある。被認証者が画像の収集機器に最も近いため、被認証者の顔が最大であり、他の見物人は画像の収集機器から遠く離れており、他の見物人の顔が被認証者の顔より小さいと見なすことができ、本開示の実施例では、ニューラルネットワークを使用して、証明書内の顔の画像と当該証明書外の最大の顔の画像との間で特徴抽出および類似度比較を実行することにより、両者が同じユーザあるか否かを効果的に識別でき、これにより、2つの顔が同じ人物の顔であるか否かを迅速、且つ正確に判断でき、応答時間が短く、精度が高いため、作業効率とユーザ体験を効果的に向上させ、人の目の認識によるエラーを回避させることができる。
いくつかの実施例では、上記の実施例において、処理される画像に対してID認証を実行することは、上記の第1顔と第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、光学式文字認識(OCR)アルゴリズムを使用して、証明書に対してテキスト認識を実行して、当該証明書のテキスト情報を取得することであって、当該テキスト情報は、例えば、名前、証明書の番号、住所、有効期限などのうちのいずれか1つまたは複数の情報を含んでもよいが、これらに限定されないことと、ユーザ情報データベースに基づいて当該テキスト情報を認証して、ID検証結果を取得することと、を含む。
ここで、ユーザ情報データベースは、ユーザ情報源の信頼性およびユーザ情報の正確さを確保するために、例えば、公安省または他の信頼できる認証機関によって提供される、ユーザ情報が記憶されたユーザ情報データベースであり得る。上記の証明書のテキスト情報がユーザ情報データベースに記憶されたユーザ情報と一致する場合、ID検証結果はID認証合格であり、そうでなければ、記の証明書のテキスト情報がユーザ情報データベースに記憶されたユーザ情報と一致しない場合、ID検証結果はID認証不合格である。
本実施例において、OCRアルゴリズムを使用して証明書に対してテキスト認識を実行することにより、証明書のテキスト情報を素早く読み取ることができ、ユーザ情報データベースに基づいて当該テキスト情報を認証することにより、ID認証の結果を素早く取得でき、ID認証の効率を向上させることができる。
上記の実施例によれば、様々な適用において、本開示の実施例に基づいて偽造防止検出およびユーザID検証を実行し、偽造防止検出およびユーザID検証の両方に合格した場合のみ、当該要求されたサービスを使用できるため、サービス使用のセキュリティを向上させることができる。本開示の実施例は、支払いサービス、アプリケーション(APP)の使用サービス、アクセス制御サービスなど、本人確認を必要とする任意のサービスに適用されることができる。
本開示の実施例は、例えば、以下のシナリオなど、ユーザが証明書(身分証明書など)を手に持つ必要がある任意のID認証のシナリオに適用されることができる。
シナリオ1において、ユーザが証明書を手に持つ必要があるID認証を実行する場合、本開示の実施例を実現するために使用される携帯電話端末のアプリケーション(APP)を起動し、携帯電話端末のカメラに向かい、顔と証明書が同時に画面に表示されるように確保し、完了するまで数秒間保持して、証明書を手に持つ被認証者の偽造防止検出に合格する。
シナリオ2において、ユーザが、事前に準備された偽の証明書を手に持つ被認証者のビデオなどを使用してID認証する場合、携帯電話端末のカメラに向けて、ビデオを表示画面で再生すると、指定された時間内に証明書を手に持つ被認証者の偽造防止検出に合格できず、偽造防止検出不合格になる。
本開示の実施例による任意のID認証方法は、端末機器およびサーバなどを含むがこれらに限定されない、データ処理能力を有する任意の適切な機器によって実行されることができる。あるいは、本開示の実施例による任意のID認証方法は、プロセッサによって実行することができ、例えば、プロセッサは、メモリに記憶された対応する命令を呼び出すことによって、本開示の実施例による任意のID認証方法を実行する。以下では繰り返しない。
当業者であれば、上記方法の実施例を実現する全てまたは一部のステップはプログラムによって関連ハードウェアに命令を出すことにより完成できることを理解でき、前記プログラムは、ROM、RAM、磁気ディスクまたは光ディスクなどのプログラムコードを記憶可能である様々な媒体を含むコンピュータ可読記憶媒体に記憶可能であり、該プログラムは実行される時に、上記方法の実施例を含むステップを実行する。
図10は、本開示の実施例によるID認証装置の例示的な構造図である。当該実施例によるID認証装置は、本開示の上記の各実施例によるID認証方法を実現するように構成されることができる。図10に示されるように、当該実施例によるID認証装置は、第1検出モジュール4010と、第2検出モジュール4020と、第1取得モジュール4030と、第3検出モジュール4040と、第3決定モジュール4050と、を備える。ここで、
第1検出モジュール4010は、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成される。
第2検出モジュール4020は、第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される。
いくつかの実施例において、顔検出結果は、例えば、処理される画像に含まれる顔の数および処理される画像での顔の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されなく、および/または、証明書検出結果は、処理される画像に含まれる証明書の数および処理される画像での証明書の位置情報のうちの少なくとも1つを含んでもよいが、これらに限定されない。
第1取得モジュール4030は、顔検出結果に基づいて、処理される画像から顔領域画像を取得し、証明書検出結果に基づいて、処理される画像から証明書領域画像を取得するように構成される。
第3検出モジュール4040は、処理される画像、顔領域画像および証明書領域画像に対して偽造手掛り検出を実行するように構成される。
第3決定モジュール4050は、偽造手掛り検出結果に従って、処理される画像の偽造防止検出結果を決定するように構成される。
本開示の上記の実施例によるID認証装置によれば、顔および証明書を含む処理される画像を取得し、処理される画像から顔領域画像および証明書領域画像を取得し、処理される画像、顔領域画像および証明書領域画像に対して偽造手掛り検出を実行し、偽造手掛り検出結果に従って、処理される画像の偽造防止検出結果を決定する。本開示の実施例による新しい処理される画像の偽造防止検出方法によれば、顔と証明書を1つの画像に同時に表示し、同時に顔と証明書の偽造防止検出を実行し、同時に顔と証明書の信憑性検証することにより、本物の人が本物の証明書を持つことを保証し、偽造された証明書を持つ本物の顔や本物の証明書を持つ偽の顔などの各種の偽造行為を防止でき、ID認証の信頼性を向上させることができる。
図11は、本開示の実施例によるID認証装置の別の例示的な構造図であり、図11に示されるように、図10に示される実施例と比較すると、当該実施例によるID認証装置は、第1決定モジュール4060をさらに備えることができる。ここで、
第1決定モジュール4060は、前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効な画像であるか否かを決定するように構成され、第3検出モジュール4040は、処理される画像が有効な画像であるとの決定に応答して、処理される画像、顔領域および証明書領域に対して偽造手掛り検出を実行するように構成され得る。
いくつかの実施例において、当該ID認証装置は、ビデオシーケンスを収集し、プリセットのフレーム選択条件に基づいて、ビデオシーケンスから処理される画像を選択するように構成され得る第2取得モジュールをさらに備えることができる。
ここでのプリセットのフレーム選択条件は、例えば、顔および証明書が画像の中心領域にあるか否か、顔のエッジが画像に完全に含まれているか否か、証明書のエッジが画像に完全に含まれているか否か、画像における顔の比率、画像における証明書の比率、顔の角度、画像の解像度、画像の露出度などのうちのいずれか1つまたは複数を含むが、これられに限定されない。
なお、上記の実施例にID認証装置は、処理される画像に対して前処理して、前処理された処理される画像を取得するように構成される前処理モジュールをさらに備えることができる。対応的に、第1検出モジュール4010は、第1ニューラルネットワークによって前処理された処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成され、第2検出モジュール4020は、第2ニューラルネットワークによって当該前処理された処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される。第1取得モジュール4030は、顔検出結果に基づいて、前処理された処理される画像から顔領域画像を取得し、証明書検出結果に基づいて、前処理された処理される画像から証明書領域画像を取得するように構成され得る。ここでの前処理は、例えば、サイズ調整、画像トリミング、標準正規分布化、輝度調整などのうちのいずれか1つまたは複数の処理を含んでもよいが、これらに限定されない。
いくつかの実施例において、第1取得モジュール4030は、顔検出結果に含まれる顔の位置情報および証明書検出結果に含まれる証明書の位置情報に従って、処理される画像内の証明書外にある第2顔を決定するように構成され第3決定ユニットと、顔検出結果に含まれる第2顔の位置情報に従って、処理される画像から第2顔のある領域の画像を取得し、第2顔のある領域の画像を顔領域画像として決定するように構成される取得ユニットと、を備えることができる。
なお、例示的に、第1取得モジュール4030は、証明書検出結果に含まれる証明書の位置情報に従って、処理される画像から証明書のある領域の画像を取得し、証明書のある領域の画像を証明書領域画像として決定するように構成される第4決定ユニットをさらに備えることができる。
いくつかの実施例において、顔領域画像における、顔領域画像に含まれる顔の比率が第4プリセット要件を満たし、および/または、証明書領域画像における、証明書領域画像に含まれる証明書の比率が第4プリセット要件を満たす。ここでの第4プリセット要件は、例えば、比率が、1/4より大きいか等しく且つ9/10より小さいか等しいことを含み得る。
いくつかの実施例において、第3検出モジュール4040は、処理される画像の特徴、顔領域画像および証明書領域画像に対してそれぞれ特徴抽出を実行して、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を取得するように構成される偽造防止特徴抽出ユニットと、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを検出するように構成される検出ユニットと、を備えることができる。いくつかの実施例において、抽出された特徴は、例えば、ローカルバイナリパターン特徴、スパースコードのヒストグラム特徴、パノラマ特徴、顔画像特徴、顔詳細画像特徴などのうちのいずれか1つまたは複数の特徴を含んでもよいが、これらに限定されない。
いくつかの実施例において、偽造手掛り情報は、可視光条件下で人の目で観測できる可観測性を有する。
いくつかの実施例において、偽造手掛り情報は、イメージング媒介の偽造手掛り情報、イメージング媒体の偽造手掛り情報、実在の偽の顔の手掛り情報のうちのいずれか1つまたは複数の情報を含む。
いくつかの実施例において、イメージング媒介の偽造手掛り情報は、イメージング媒介のエッジ情報、反射情報および/または材料情報を含み、および/または、イメージング媒体の偽造手掛り情報は、表示機器の画面のエッジ、画面の反射および/または画面のモアレを含み、実在の偽の顔の手掛り情報は、マスクを着用した顔の特徴、マネキンの顔の特徴、および彫刻の顔の特徴を含む。
いくつかの実施例において、上記の検出ユニットは、処理される画像の特徴を検出して、処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定し、顔領域画像の特徴を検出して、顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定し、証明書領域画像の特徴を検出して、証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定するように構成され得る。
別のいくつかの実施形態において、上記の検出ユニットは、処理される画像の特徴、顔領域画像の特徴および証明書領域画像の特徴を接続して、接続特徴を取得し、接続特徴に偽造手掛り情報が含まれているか否かを決定するように構成され得る。
いくつかの実施例において、第3検出モジュール4040は、第3ニューラルネットワークによって処理される画像、顔領域画像および証明書領域画像に対してそれぞれ偽造手掛り検出を実行するように構成され得る。
いくつかの実施例において、第3決定モジュールは、偽造手掛り検出結果が、処理される画像、顔領域画像および証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示す場合、処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定するように構成され、および/または、偽造手掛り検出結果が、処理される画像、顔領域画像および証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示す場合、処理される画像の偽造防止検出結果が、偽造防止検出失敗であると決定するように構成されることができる。
いくつかの実施例において、第1検出モジュールは、サーバに配置され、端末機器よって送信される処理される画像を受信するように構成され得る。なお、上記の実施例によるID認証装置は、処理される画像の偽造防止検出結果に従って、処理される画像のID認証結果を決定するように構成される第4決定モジュールをさらに備えることができる。
いくつかの実施例において、当該第4決定モジュールは、処理される画像の偽造防止検出結果が偽造防止検出合格である場合、処理される画像に対してID検証を実行するように構成されるID認証ユニットと、ID検証結果に基づいて、処理される画像のID認証結果を決定するように構成される第五決定ユニットと、を備える。
いくつかの実施例において、ID認証ユニットは、処理される画像の顔検出結果および処理される画像の証明書検出結果に基づいて、証明書に含まれる第1顔と処理される画像内の証明書外にある第2顔との間の類似度を決定し、第1顔と第2顔との間の類似度に従って、ID検証結果を取得するように構成され得る。
いくつかの実施例において、ID認証ユニットは、処理される画像から第1顔の画像および第2顔の画像を取得し、第1顔の画像に対して特徴抽出を実行して、第1特徴を取得し、第2顔の画像に対して特徴抽出を実行して、第2特徴を取得し、第1特徴および第2特徴に基づいて、第1顔と第2顔との間の類似度を決定するように構成され得る。
いくつかの実施例において、顔検出結果は、処理される画像に含まれる顔の数および処理される画像での顔の位置情報のうちの少なくとも1つを含み、および/または、証明書検出結果は、処理される画像に含まれる証明書の数および処理される画像での証明書の位置情報のうちの少なくとも1つを含む。対応的に、当該実施例において、第3決定モジュールは、処理される画像に含まれる顔の数が2より大きい場合、処理される画像での顔検出結果に含まれる顔の位置情報および処理される画像での証明書検出結果に含まれる証明書の位置情報に従って、処理される画像に含まれる少なくとも2つの顔のうちの証明書外の最大の顔を第2顔として決定するように構成される第3決定ユニットを備える。
いくつかの実施例において、ID認証ユニットは、さらに、第1顔と第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、証明書に対してテキスト認識を実行して、名前および証明書の番号のうちの少なくとも1つの情報を含む証明書のテキスト情報を取得し、ユーザ情報データベースに基づいてテキスト情報を認証して、ID検証結果を取得するように構成される。
なお、本開示の実施例による別の電子機器は、
コンピュータプログラムを記憶するように構成されるメモリと、
メモリに記憶されたコンピュータプログラムを実行するように構成されるプロセッサであって、コンピュータプログラムが実行されるときに、本開示の上記の実施例のいずれかに記載のID認証方法を実現するプロセッサと、を備える。
本開示の実施例は、電子機器を提供する。図12は本開示の実施例の技術的解決策を実現するための電子機器の一例の概略構造図である。図12に示されるように、当該電子機器は1つ又は複数のプロセッサ、通信部などを含み、前記1つ又は複数のプロセッサは、例えば、1つ又は複数の中央処理ユニット(CPU:Central Processing Unit)、及び/又は1つ又は複数の画像プロセッサ(GPU:Graphics Processing Unit)などであり、プロセッサは、読み取り専用メモリ(ROM:Read-Only Memory)に記憶された実行可能命令又は記憶部からランダムアクセスメモリ(RAM:Random Access Memory)にロードされた実行可能命令によって各種の適切な動作及び処理を実現することができる。通信ユニットには、ネットワークカードを含んでもよいが、これに限定されず、前記ネットワークカードは、IB(Infiniband)ネットワークカードを含んでもよいが、これに限定されない。プロセッサは、読み取り専用メモリ及び/又はランダムアクセスメモリと通信して実行可能命令を実行し、通信バスを介して通信ユニットに接続され、通信ユニットを介して他のターゲット機器と通信することができ、これにより、本開示の実施例によるID認証方法のいずれかに対応する動作を実行でき、例えば、第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得すること、前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定すること、前記処理される画像が有効なID認証画像であるとの決定に応答して、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することなどの動作を実行できる。
また、RAMには、装置の動作に必要な様々なプログラムやデータが記憶されいることもできる。CPU、ROMおよびRAMは、バスを介して相互に接続される。RAMを備えた場合、ROMはオプションモジュールである。RAMは実行可能命令を記憶するか、または動作時に実行可能命令をROMに書き込み、実行可能命令は、プロセッサに、本開示の上記のいずれかのID認証方法に対応する動作を実行させる。入力/出力(I/O)インターフェースもバスに接続される。通信ユニットは、統合的に配置されてもよいし、複数のサブモジュール(複数のIBネットワークカードなど)を備え、通信バスに接続されてもよい。
キーボード、マウスなどを含む入力部、ブラウン管(CRT)、液晶ディスプレイ(LCD)など、およびスピーカなどを含む出力部、ハードウェアなどを含む記憶部、およびLANカード、モデムなどのネットワークインターフェースカードを含む通信部は、I/Oインターフェースに接続する。通信部は、インターネットなどのネットワークを介して通信処理を実行する。ドライブも、必要に応じてI/Oインターフェースに接続される。磁気ディスク、光ディスク、光磁気ディスク、半導体メモリなどのリムーバブル媒体は、必要に応じてドライブ上に装着され、そこから読み出されたコンピュータプログラムを必要に応じて記憶部にインストールする。
なお、図12に示す構造は、例示的な実施形態に過ぎず、実施プロセスにおいては、実際の需要に応じて上記図12の部品の数及び種類を選択、削除、追加、または置換することができ、異なる機能部品の設置でも、GPUとCPUを分離設置したり、GPUをCPUに統合したり、通信ユニットを分離設置したり、CPUやGPUに統合したりするなど、分離設置または統合設置などの実施形態を採用できることに留意されたい。これらの置換可能な実施形態はいずれも本開示の保護範囲に含まれる。
特に、本開示の実施例によれば、フローチャートを参照しながら上記のしたプロセスはコンピュータソフトウェアプログラムとして実現できる。特に、本開示の実施形態によれば、以下でフローチャートを参照して説明されるプロセスは、コンピュータソフトウェアプログラムとして実装され得、例えば、本開示の実施形態はコンピュータプログラム製品を含み、それには機械読み取り可能な媒体に具体的に含まれたコンピュータプログラムを含み、コンピュータプログラムは、フローチャートに示されたステップを実行するために使用されるプログラムコードを含み、プログラムコードは、本開示によって提供される方法の対応するステップを実行することに対応する命令を含み得る。このような実施例では、当該コンピュータプログラムは通信部によってネットワークからダウンロード及びインストールされ、及び/又はリムーバブル媒体からインストールされ得る。当該コンピュータプログラムがCPUによって実行される時に、本開示の方法で限定された上記機能を実行する。
さらに、本開示の実施例は、コンピュータ命令を含むコンピュータプログラムを更に提供し、コンピュータ命令が機器のプロセッサによって実行される時に、本開示の上記のいずれかの実施例におけるID認証方法を実現する。一代替実施形態において、前記コンピュータプログラム製品は、SDKなどのソフトウェア製品であり得る。1つまたは複数の代替実施形態において、本開示の実施例は、コンピュータ可読命令を記憶するためのコンピュータプログラムプログラム製品であって、前記命令が実行された時に、上記のいずれかの実施形態に記載のID認証方法をコンピュータに実行させるコンピュータプログラムプログラム製品を更に提供する。前記コンピュータプログラム製品は、ハードウェア、ソフトウェアまたはそれらの組み合わせの方式によって実現されることができる。一例では、前記コンピュータプログラム製品は、コンピュータ記憶媒体として具現化されてもよく、別の例では、前記コンピュータプログラム製品は、SDKなどのソフトウェア製品として具現化されてもよい。
1つまたは複数の可能な実施形態において、本開示の実施例は、ID認証方法およびそれに対応する装置、電子機器、コンピュータ記憶媒体、コンピュータプログラム、コンピュータプログラム製品をさらに提供し、ここで、当該ID認証方法は、第1装置が、ID認証指示を第2装置に送信することであって、当該指示によって、上記のいずれかの可能な実施例におけるID認証方法を第2装置に実行させることと、第1装置が、第2装置によって送信されるID認証結果を取得することと、を含む。
いくつかの実施例において、当該画像処理指示は、呼び出し命令であり得、第1装置は呼び出し方式で、ID認証方法を実行するように第2装置に命令することができ、対応的に、呼び出し命令の受信に応答して、第2装置は、上記の任意の実施例によるID認証方法におけるステップおよび/またはプロセスを実行することができる。なお、本開示の実施例は、コンピュータプログラムが記憶されたコンピュータ可読記憶媒体をさらに提供し、当該コンピュータプログラムがプロセッサによって実行されるときに、本開示の上記の実施例のいずれかに記載のID認証方法を実現する。
本明細書の各実施例は、漸進的に説明されており、各実施例は、他の実施例との違いに焦点を合わせており、各実施例間の同じまたは類似の部分は互いに参照することができる。システムの実施例において、それらは基本的に方法の実施例に対応するため、比較的簡単に説明したが、関連する部分は方法の実施例の説明の部分を参照することができる。
本開示の方法及び装置、機器は、様々な形態で実現され得る。例えば、ソフトウェア、ハードウェア、ファームウェアまたはソフトウェア、ハードウェア、ファームウェアの任意の組合わせによって本開示の方法及び装置、機器を実現することができる。前記方法のステップの前記順序は、単に説明をするためであり、本開示の方法のステップは、時に明記しない限り、以上の説明の順序に限定されない。また、いくつかの実施例では、本開示は記録媒体に記憶されたプログラムとしてもよく、これらのプログラムは本開示の方法を実現するための機械可読命令を含む。したがって、本開示は、本開示に係る方法を実行するために使用されるプログラムを記憶する記憶媒体をさらに覆う。
本開示の説明は、例示及び説明のために提示されたものであり、網羅的なものでありもしくは開示された形式に本開示を限定するというわけでない。当業者にとっては多くの修正及び変形を加えることができるのは明らかであろう。実施例は本開示の原理及び実際応用をより明瞭に説明するため、かつ当業者が本開示を理解して特定用途に適した各種の修正を加えた各種の実施例を設計可能にするように選択され説明されたものである。

Claims (19)

  1. ID認証装置によって実行されるID認証方法であって、
    第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得し、第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得することと、
    前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定することであって、前記有効なID認証画像は、前記顔検出結果および前記証明書検出結果がいずれもブリセツト要件を満たすID認証画像である、ことと、
    前記処理される画像が有効なID認証画像であるとの決定に応答して、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することと
    を含み、
    前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定することは、
    前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することと、
    前記証明書検出結果における証明書の数が第1プリセット要件を満たし、前記顔検出結果における顔の数が第2プリセット要件を満たし、且つ、前記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、前記処理される画像が有効なID認証画像であると決定することと
    を含む、ID認証方法。
  2. 前記有効なID認証画像は、証明書を手に持つ画像を含む、請求項1に記載のID認証方法。
  3. 前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することは、
    前記処理される画像での、前記顔検出結果に含まれる顔の位置情報および前記処理される画像での、前記証明書検出結果に含まれる証明書の位置情報に従って、前記証明書に含まれる顔の数および/または位置情報を決定することを含む、請求項に記載のID認証方法。
  4. 前記顔検出結果および前記証明書検出結果に従ってID認証を実行することは、
    前記顔検出結果および前記証明書検出結果に基づいて、前記証明書に含まれる第1顔と、前記処理される画像内の、前記証明書外にある第2顔と間の類似度を決定することと、
    前記第1顔と前記第2顔との間の類似度に従って、ID検証結果を取得することと
    を含む、請求項1~のいずれか一項に記載のID認証方法。
  5. 前記ID認証方法は、
    前記証明書に含まれる第1顔と、前記処理される画像内の、前記証明書外にある第2顔と間の類似度を決定する前に、
    前記処理される画像に含まれる顔の数が2より大きい場合、前記処理される画像内の、前記証明書外にある少なくとも2つの顔のうちの最大の顔を前記第2顔として決定することをさらに含む、請求項に記載のID認証方法。
  6. 前記第1顔と前記第2顔との間の類似度に従って、ID検証結果を取得することは、
    前記第1顔と前記第2顔との間の類似度がプリセットの閾値より大きいとの決定に応答して、前記証明書に対してテキスト認識を実行して、前記証明書のテキスト情報を取得することであって、前記テキスト情報は、名前および証明書の番号のうちの少なくとも1つの情報を含む、ことと、
    ユーザ情報データベースに基づいて前記テキスト情報を認証して、ID検証結果を取得することと
    を含む、請求項または請求項に記載のID認証方法。
  7. 前記ID認証方法は、
    前記ID検証結果がID認証合格であるとの決定に応答して、ユーザ情報をサービスデータベースに記憶することであって、前記ユーザ情報は、前記テキスト情報、前記処理される画像、前記第2顔の画像、前記第2顔の特徴情報のうちのいずれか1つまたは複数の情報を含む、ことをさらに含む、請求項のいずれか一項に記載のID認証方法。
  8. 前記ID認証方法は、
    ID認証要求の受信に応答して、認証される顔を含む画像を取得することと、
    前記サービスデータベースに前記認証される顔の画像と一致するユーザ情報があるか否かを照会することと、
    前記照会の結果に従って、前記認証される顔の認証結果を決定することと
    をさらに含む、請求項に記載のID認証方法。
  9. 前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、
    前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することと、
    前記偽造防止検出結果および前記ID検証結果に基づいて、前記処理される画像のID認証結果を決定することと
    をさらに含む、請求項のいずれか一項に記載のID認証方法。
  10. 前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得することは、
    前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することを含む、請求項1~のいずれか一項に記載のID認証方法。
  11. 前記顔検出結果および前記証明書検出結果に従って偽造防止検出を実行して、偽造防止検出結果を取得することは、
    前記顔検出結果および前記証明書検出結果に基づいて、前記処理される画像から顔領域画像および証明書領域画像を取得することと、
    前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することと、
    前記偽造手掛り検出結果に基づいて、前記処理される画像の偽造防止検出結果を取得することと
    を含む、請求項または請求項10に記載のID認証方法。
  12. 前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ偽造手掛り検出を実行することは、
    前記処理される画像、前記顔領域画像および前記証明書領域画像に対してそれぞれ特徴抽出を実行して、前記処理される画像の特徴、前記顔領域画像の特徴および前記証明書領域画像の特徴を取得することと、
    前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することと
    を含む、請求項11に記載のID認証方法。
  13. 前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、
    前記処理される画像の特徴を検出して、前記処理される画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、
    前記顔領域画像の特徴を検出して、前記顔領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと、
    前記証明書領域画像の特徴を検出して、前記証明書領域画像の特徴に偽造手掛り情報が含まれているか否かを決定することと
    を含む、請求項12に記載のID認証方法。
  14. 前記処理される画像の特徴、前記顔領域の特徴および前記証明書領域の特徴に偽造手掛り情報が含まれているか否かを検出することは、
    前記処理される画像の特徴、前記顔領域画像の特徴および前記証明書領域画像の特徴を接続して、接続特徴を取得することと、
    前記接続特徴に偽造手掛り情報が含まれているか否かを決定することと
    を含む、請求項12に記載のID認証方法。
  15. 前記偽造手掛り検出結果に基づいて、前記処理される画像の偽造防止検出結果を取得することは、
    前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれにも偽造手掛りが含まれていないことを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出合格であると決定すること、および/または、
    前記偽造手掛り検出結果が、前記処理される画像、前記顔領域画像および前記証明書領域画像のうちのいずれか1つまたは複数の画像に偽造手掛りが含まれていることを示すことに応答して、前記処理される画像の偽造防止検出結果が、偽造防止検出不合格であると決定することを含む、請求項1114のいずれか一項に記載のID認証方法。
  16. ID認証装置であって、
    第1ニューラルネットワークによって、処理される画像に対して顔検出を実行して、顔検出結果を取得するように構成される第1検出モジュールと、
    第2ニューラルネットワークによって、前記処理される画像に対して証明書検出を実行して、証明書検出結果を取得するように構成される第2検出モジュールと、
    前記顔検出結果および前記証明書検出結果に従って、前記処理される画像が有効なID認証画像であるか否かを決定するように構成される第1決定モジュールであって、前記有効なID認証画像は、前記顔検出結果および前記証明書検出結果がいずれもブリセツト要件を満たすID認証画像である、第1決定モジュールと、
    前記処理される画像が有効なID認証画像であるとの決定に応答して、前記顔検出結果および前記証明書検出結果に従ってID認証を実行して、前記処理される画像のID認証結果を取得するように構成される認証モジュールと
    を備え
    前記第1決定モジュールは、
    前記顔検出結果および前記証明書検出結果に基づいて、証明書の顔情報を決定することと、
    前記証明書検出結果における証明書の数が第1プリセット要件を満たし、前記顔検出結果における顔の数が第2プリセット要件を満たし、且つ、前記証明書の顔情報に含まれる証明書内の顔の数が第3プリセット要件を満たすことに応答して、前記処理される画像が有効なID認証画像であると決定することと
    を行うようにさらに構成される、ID認証装置。
  17. 電子機器であって、
    コンピュータプログラムを記憶するように構成されるメモリと、
    前記メモリに記憶されたコンピュータプログラムを実行するように構成されるプロセッサと
    を備え、
    前記プロセッサは、前記コンピュータプログラムが実行されると、請求項1~15のいずれか一項に記載のID認証方法を実現する、電子機器。
  18. コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータプログラムは、プロセッサによって実行されると、請求項1~15のいずれか一項に記載のID認証方法を実現する、コンピュータ読み取り可能な記憶媒体。
  19. コンピュータ読み取り可能な記憶媒体に記憶されているコンピュータプログラムであって、前記コンピュータプログラムは、コンピュータ読み取り可能なコードを含み、
    前記コンピュータ読み取り可能なコードが機器で実行されると、前記機器内のプロセッサは、請求項1~15のいずれか一項に記載のID認証方法を実現するための命令を実行する、コンピュータプログラム。
JP2020550841A 2018-08-13 2019-06-04 Id認証方法および装置、電子機器並びに記憶媒体 Active JP7165746B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
CN201810918699.8 2018-08-13
CN201810918697.9 2018-08-13
CN201810918697.9A CN109255299A (zh) 2018-08-13 2018-08-13 身份认证方法和装置、电子设备和存储介质
CN201810918699.8A CN109359502A (zh) 2018-08-13 2018-08-13 防伪检测方法和装置、电子设备、存储介质
PCT/CN2019/090034 WO2020034733A1 (zh) 2018-08-13 2019-06-04 身份认证方法和装置、电子设备和存储介质

Publications (2)

Publication Number Publication Date
JP2021516819A JP2021516819A (ja) 2021-07-08
JP7165746B2 true JP7165746B2 (ja) 2022-11-04

Family

ID=69525080

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020550841A Active JP7165746B2 (ja) 2018-08-13 2019-06-04 Id認証方法および装置、電子機器並びに記憶媒体

Country Status (5)

Country Link
US (1) US20200410074A1 (ja)
JP (1) JP7165746B2 (ja)
KR (1) KR102406432B1 (ja)
SG (1) SG11202008549SA (ja)
WO (1) WO2020034733A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI725443B (zh) * 2019-06-03 2021-04-21 銓鴻資訊有限公司 用於第三方認證的身分的註冊與存取控制方法
CN111401407B (zh) * 2020-02-25 2021-05-14 浙江工业大学 一种基于特征重映射的对抗样本防御方法和应用
US20210398135A1 (en) * 2020-06-22 2021-12-23 ID Metrics Group Incorporated Data processing and transaction decisioning system
KR102502631B1 (ko) * 2020-11-16 2023-02-23 고큐바테크놀로지 주식회사 사용자를 인증하기 위한 기법
US11972003B2 (en) * 2020-12-03 2024-04-30 Capital One Services, Llc Systems and methods for processing requests for access
KR102561460B1 (ko) * 2020-12-09 2023-07-28 도시공유플랫폼 주식회사 본인 인증을 위해 인공지능 카메라를 활용한 이상행동 감지 시스템
KR102677846B1 (ko) * 2021-05-10 2024-06-21 도시공유플랫폼 주식회사 보스메인중앙서버에 의한 무인매장관리시스템
CN113656843B (zh) * 2021-08-18 2022-08-12 北京百度网讯科技有限公司 信息验证方法、装置、设备和介质
KR102524163B1 (ko) * 2021-09-16 2023-04-21 국민대학교산학협력단 신분증 인식 방법 및 장치
KR102445257B1 (ko) 2022-02-23 2022-09-23 주식회사 룰루랩 인공신경망에 기반하여 모공을 검출하고 검출된 모공을 시각화하는 방법 및 장치
JP7239047B1 (ja) 2022-07-19 2023-03-14 凸版印刷株式会社 認証システム、認証方法、及びプログラム
WO2024044185A1 (en) * 2022-08-23 2024-02-29 SparkCognition, Inc. Face image matching based on feature comparison
CN115375998B (zh) * 2022-10-24 2023-03-17 成都新希望金融信息有限公司 一种证件识别方法、装置、电子设备及存储介质
US11961315B1 (en) * 2023-12-05 2024-04-16 Daon Technology Methods and systems for enhancing detection of a fraudulent identity document in an image

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009211381A (ja) 2008-03-04 2009-09-17 Nec Corp 使用者認証システム、使用者認証方法、および使用者認証プログラム
JP2010079393A (ja) 2008-09-24 2010-04-08 Japan Tobacco Inc データ処理装置、そのコンピュータプログラムおよびデータ処理方法
WO2017205547A1 (en) 2016-05-24 2017-11-30 Martin Brian K Document image quality assessment
CN107844748A (zh) 2017-10-17 2018-03-27 平安科技(深圳)有限公司 身份验证方法、装置、存储介质和计算机设备
CN108229499A (zh) 2017-10-30 2018-06-29 北京市商汤科技开发有限公司 证件识别方法及装置、电子设备和存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5892838A (en) * 1996-06-11 1999-04-06 Minnesota Mining And Manufacturing Company Biometric recognition using a classification neural network
KR20080025243A (ko) * 2006-09-15 2008-03-20 주식회사 닷위저드 신분증 발급 신청 시스템 및 그 방법
WO2010106587A1 (ja) * 2009-03-18 2010-09-23 パナソニック株式会社 ニューラルネットワークシステム
RU2427911C1 (ru) * 2010-02-05 2011-08-27 Фирма "С1 Ко., Лтд." Способ обнаружения лиц на изображении с применением каскада классификаторов
CN104504321B (zh) * 2015-01-05 2017-07-14 湖北微模式科技发展有限公司 一种基于摄像头实现远程用户身份验证的方法与系统
CN105844206A (zh) * 2015-01-15 2016-08-10 北京市商汤科技开发有限公司 身份认证方法及设备
KR102324468B1 (ko) * 2017-03-28 2021-11-10 삼성전자주식회사 얼굴 인증을 위한 장치 및 방법
CN108229120B (zh) * 2017-09-07 2020-07-24 北京市商汤科技开发有限公司 人脸解锁及其信息注册方法和装置、设备、程序、介质
CN109359502A (zh) * 2018-08-13 2019-02-19 北京市商汤科技开发有限公司 防伪检测方法和装置、电子设备、存储介质
CN109255299A (zh) * 2018-08-13 2019-01-22 北京市商汤科技开发有限公司 身份认证方法和装置、电子设备和存储介质
GB201908530D0 (en) * 2019-06-13 2019-07-31 Microsoft Technology Licensing Llc Robutness against manipulations n machine learning
US11449714B2 (en) * 2019-10-30 2022-09-20 Google Llc Efficient convolutional neural networks and techniques to reduce associated computational costs

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009211381A (ja) 2008-03-04 2009-09-17 Nec Corp 使用者認証システム、使用者認証方法、および使用者認証プログラム
JP2010079393A (ja) 2008-09-24 2010-04-08 Japan Tobacco Inc データ処理装置、そのコンピュータプログラムおよびデータ処理方法
WO2017205547A1 (en) 2016-05-24 2017-11-30 Martin Brian K Document image quality assessment
CN107844748A (zh) 2017-10-17 2018-03-27 平安科技(深圳)有限公司 身份验证方法、装置、存储介质和计算机设备
CN108229499A (zh) 2017-10-30 2018-06-29 北京市商汤科技开发有限公司 证件识别方法及装置、电子设备和存储介质

Also Published As

Publication number Publication date
WO2020034733A1 (zh) 2020-02-20
KR20200118842A (ko) 2020-10-16
US20200410074A1 (en) 2020-12-31
KR102406432B1 (ko) 2022-06-08
SG11202008549SA (en) 2020-10-29
JP2021516819A (ja) 2021-07-08

Similar Documents

Publication Publication Date Title
JP7165746B2 (ja) Id認証方法および装置、電子機器並びに記憶媒体
KR102324706B1 (ko) 얼굴인식 잠금해제 방법 및 장치, 기기, 매체
US11669607B2 (en) ID verification with a mobile device
US11482040B2 (en) Face anti-counterfeiting detection methods and systems, electronic devices, programs and media
CN109255299A (zh) 身份认证方法和装置、电子设备和存储介质
US11354917B2 (en) Detection of fraudulently generated and photocopied credential documents
WO2016131083A1 (en) Identity verification. method and system for online users
US11367310B2 (en) Method and apparatus for identity verification, electronic device, computer program, and storage medium
CN109359502A (zh) 防伪检测方法和装置、电子设备、存储介质
EP4109332A1 (en) Certificate authenticity identification method and apparatus, computer-readable medium, and electronic device
US11238271B2 (en) Detecting artificial facial images using facial landmarks
US20230259907A1 (en) Augmented reality-enabled atm for secure augmented reality check realization
US20240005691A1 (en) Validating identification documents
US11449841B1 (en) Information security system and method for augmented reality check realization
CN111767845B (zh) 证件识别方法及装置
CN112434727A (zh) 身份证明文件认证方法和系统
US11893551B2 (en) Information security system and method for augmented reality check generation
Forczmański Web System for Biometric Verification of Facial Portraits

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200918

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200918

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220124

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220826

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220826

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220912

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220913

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221005

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221024

R150 Certificate of patent or registration of utility model

Ref document number: 7165746

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150