JP2019185143A - 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム - Google Patents

生体画像処理装置、生体画像処理方法、および生体画像処理プログラム Download PDF

Info

Publication number
JP2019185143A
JP2019185143A JP2018071161A JP2018071161A JP2019185143A JP 2019185143 A JP2019185143 A JP 2019185143A JP 2018071161 A JP2018071161 A JP 2018071161A JP 2018071161 A JP2018071161 A JP 2018071161A JP 2019185143 A JP2019185143 A JP 2019185143A
Authority
JP
Japan
Prior art keywords
living body
distance
rotation angle
unit
palm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018071161A
Other languages
English (en)
Other versions
JP7230337B2 (ja
Inventor
壮一 ▲浜▼
壮一 ▲浜▼
Soichi Hama
幸弘 安孫子
Yukihiro Abiko
幸弘 安孫子
智司 前田
Tomoji Maeda
智司 前田
聡史 仙波
Satoshi Senba
聡史 仙波
元 名田
Hajime Nada
元 名田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2018071161A priority Critical patent/JP7230337B2/ja
Priority to EP19164304.8A priority patent/EP3550459B1/en
Priority to US16/363,091 priority patent/US11227139B2/en
Publication of JP2019185143A publication Critical patent/JP2019185143A/ja
Application granted granted Critical
Publication of JP7230337B2 publication Critical patent/JP7230337B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1318Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Image Input (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

【課題】認証精度を向上させることができる生体画像処理装置、生体画像処理方法、および生体画像処理プログラムを提供する。【解決手段】生体画像処理装置は、タッチパネル121と、タッチパネル121に接触する生体を撮影する生体センサ111と、生体センサ111と生体との間の距離を算出する距離検出部151と、算出された距離に基づいて、生体の生体センサ111に対する回転角を算出する回転角推定部161と、を備える。【選択図】図4

Description

本発明は、生体画像処理装置、生体画像処理方法、および生体画像処理プログラムに関する。
手のひら静脈等を用いた生体認証は、ビルや部屋等への入退室管理、パーソナルコンピュータ(PC)のアクセス管理、またはスマートフォン等の携帯端末のロック解除など幅広い分野で利用されている。
携帯端末は携帯性が向上して屋外など様々な場面で利用する機会が増えており、セキュリティ機能にも利便性が強く求められている。移動しながら利用される場合、例えば、乗用車、バス、鉄道のように利用者の周囲が揺れているような不安定な利用場面で生体認証を行う場合は携帯端末を固定することが難しい。入力時の生体のぶれにともなって、入力される生体情報の品質が劣化することによって本人拒否が発生しやすくなり、操作時間および操作回数が増大し利便性が大きく損なわれる。
例えば、手のひらの静脈パターンを読み取って本人確認をおこなう手のひら静脈認証は、高いセキュリティを確保でき静止した状態で利用しやすいことが特長である。しかし,手を端末にかざしてセンサと接触せずに利用するため、揺れがある不安定な環境では手とセンサがぶれやすく利用が難しい。
一方、携帯端末の多くは、端末を手で保持して端末に備えられたタッチパネル等を操作する使い方である。そこで、タッチパネルを手で操作すると同時に手のひらの情報を読み取ることにより、端末と読み取る手の相対位置関係を固定し、揺れの影響を軽減する技術がある。
また、携帯端末では大きさの制約上、撮影範囲の広い生体センサの搭載は難しく、また、使い勝手上、生体をセンサから離して広範囲を撮影するのも難しい。そこで、生体をセンサ上で移動させながら複数の画像を撮影する技術がある。
図1に示すように、認証処理時において、携帯端末51はタッチパネル52に指のタッチ場所を示すガイド表示61−i(i=1,2)を表示する。図1では、携帯端末51は、平行な2本のラインのガイド表示61−iをタッチパネル52に表示する。利用者は、親指と人差し指をガイド表示61−iに接触させたまま矢印方向にガイド表示61−iに沿って移動させて手71を移動する。
カメラ等の生体センサ53は、ガイド表示61−iに対するタッチを検出すると、点線で示される撮影範囲54を撮影する。生体センサ53は、指がガイド表示61−iに沿って移動する間、定期的に撮影範囲54を撮影して、複数の撮影画像を撮影する。これにより、手のひらの異なる位置の複数の画像が得られる。携帯端末51は、撮影画像から抽出した特徴量と登録データとを照合して、認証の可否を判定する。
このように利用者が指でなぞるラインをタッチパネル上に表示し、タッチパネル上をスライドする手のひらの画像を撮影することにより、効率よく生体情報が入力できる。
部分認証を静脈認証に適用した場合に、高速で静脈認証を行うことができる技術がしられている(例えば、特許文献1参照)。操作部への入力の検出に応じて、操作部における創始値の指示を出力させ、前記入力の検出後に生体画像を撮像する技術が知られている(例えば、特許文献2参照)。簡易な構成で手のひら静脈認証を行うことが可能な情報処理装置が知られている(例えば、特許文献3参照)。また、特許文献4〜7記載の技術が知られている。
特開2016−173669号公報 特開2016−212636号公報 特開2017−97574号公報 特開2007−233981号公報 特開2010−268989号公報 特開2004−102993号公報 特開2017−136136号公報
ガイド表示61−iに指を置くようにタッチパネル52にタッチした場合、手71の置き方によって手のひらの角度が異なってしまう場合がある。例えば、図2,3に示すように、携帯端末51のタッチパネル52に対して指先がタッチしている位置が同じでも、手71の置き方によって手のひらの角度が異なる。図2の手の角度θに比べて、図3の手の角度θは小さい。
すなわち、同じガイド表示を用いて生体画像を取得しても、登録データの登録時の手のひらの角度と、認証時の手のひらの角度が異なる場合がある。登録データの登録時の手のひらの角度と、認証時の手のひらの角度が異なると、認証精度が低下する。
1つの側面において、本発明は、認証精度を向上させることを目的とする。
実施の形態に係る生体画像処理装置は、タッチパネルと、撮影部と、距離算出部と、回転角算出部と、を備える。
前記撮影部は、前記タッチパネルに接触する生体を撮影する。
前記距離算出部は、前記撮像部と前記生体との間の距離を算出する。
前記回転角算出部は、前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する。
実施の形態によれば、認証精度を向上させることができる。
ガイド表示を用いた携帯端末の操作の例を示す図である。 ガイド表示を用いた携帯端末の操作の例を示す図である。 ガイド表示を用いた携帯端末の操作の例を示す図である。 実施の形態に係る端末装置の構成図である。 実施の形態に係るガイド表示を用いた端末装置の操作の例を示す図である。 手のひらの回転角を示す図である。 手のひらとセンサとの間の距離を示す図である。 手のひらの回転角と手のひらの距離との関係を示す図である。 手のひらの回転角と手のひらの距離との関係を示す図である。 実施の形態に係る登録処理のフローチャートである。 手のひらの回転角と手のひらの距離の関係を示す図である。 登録DBの例である。 実施の形態に係る認証処理のフローチャートである。 ガイド表示の例である。 ガイド表示の例である。 情報処理装置(コンピュータ)の構成図である。
以下、図面を参照しながら実施の形態を説明する。
照合を行う際には、ある程度の回転が発生することを考慮し、回転角を走査しながら照合処理を行うが、想定よりも角度変化が大きい場合には、本人拒否エラーが発生しやすくなる。大きな角度変化に対応するために、照合処理の際、十分な範囲の角度走査を行うことが望ましい。しかしながら、走査する角度範囲が広いほど処理時間が増大し、他人受入れのリスクも増大してしまう。このような問題に対し、従来技術(例えば、特許文献6参照)では手のひらの外形情報(輪郭)から回転角を求め、角度変化に対応している。しかし、タッチパネルにタッチしながら撮影するような非常に近距離で撮影する場合には、手のひらの一部分しか撮影されないため、輪郭情報による角度推定を行うことが困難であるという問題がある。
図4は、実施の形態に係る端末装置の構成図である。
端末装置101は、生体センサ111、タッチパネル121、生体画像取得部131、タッチ位置取得部141、距離検出部151、回転角推定部161、表示制御部171、登録部181、照合部191、および記憶部201を有する。端末装置101は、例えば、タブレットやスマートフォン等の可搬型の情報処理装置(コンピュータ)である。端末装置101は、生体画像処理装置の一例である。
生体センサ111は、利用者(登録者または認証対象者)の手のひら等の生体を撮影する。生体センサ111は、利用者がタッチパネル121を指で操作する際に、利用者の手のひらの少なくとも一部を撮影可能な位置に設けられている。生体センサ111は、撮影した生体の画像(生体画像)を生体画像取得部131に出力する。生体センサ111は、例えば、赤外線カメラである。生体センサ111は、撮影部の一例である。
タッチパネル121は、情報を表示する機能およびタッチパネル121に対する指等の接触を検出する機能を有する。タッチパネル121は、携帯端末の操作に用いられる入力装置である。タッチパネル121は、表示デバイス122および入力デバイス123を有する。
表示デバイス122は、文章、図、または指のタッチ場所を示すガイド表示などを表示する。
入力デバイス123は、ユーザが触れているタッチパネル121(入力デバイス123)上の指の位置(座標)を検出し、検出した位置をタッチ位置取得部141に出力する。
生体画像取得部131は、生体センサ111から生体画像を受信する。
タッチ位置取得部141は、入力デバイス123からユーザが触れているタッチパネル121(入力デバイス123)上の指の位置を受信する。
距離検出部151は、手のひらの距離(詳細には、生体センサ111から手のひらまでの距離)を検出する。例えば、距離検出部151は、生体画像に基づいて、生体センサ111から手のひらまでの距離を算出する。距離検出部151は、距離算出部の一例である。
回転角推定部161は、生体センサ111に対する手のひらの角度(回転角)を推定する。例えば、回転角推定部161は、生体センサ111から手のひらまでの距離に基づいて、生体センサ111に対する手のひらの角度(回転角)を算出する。回転角推定部161は、回転角算出部の一例である。
表示制御部171は、文章、図、またはガイド表示などを表示デバイス122に表示する。
登録部181は、生体画像から特徴量を抽出する。また、登録部181は、回転角推定部161により求めた回転角に基づいて生体画像を補正し、補正した生体画像から特徴量を抽出してもよい。特徴量は、例えば、手のひらの静脈の形状(模様)を示す静脈データ(静脈パターン)である。登録部181は、生体画像が撮影されたときのタッチパネル121上の指の位置、特徴量、および回転角推定部161により求めた回転角を対応付けて、記憶部201の登録データベース(DB)に登録する。登録部181は、補正部の一例である。
照合部191は、回転角推定部161により求めた回転角に基づいて生体画像を補正(例えば、回転)し、補正した生体画像から特徴量を抽出する。照合部191は、認証対象者の生体画像から抽出した特徴量と登録DBの特徴量とを照合する。照合部191は、照合が成功した場合、認証対象者を認証し、端末装置101のロック解除等の所定の処理を行う。照合部191は、補正部の一例である。
記憶部201は、端末装置101で使用されるプログラムやデータ等を記憶する。記憶部201は、登録者の特徴量が登録された登録DBを記憶する。
図5は、実施の形態に係るガイド表示を用いた端末装置の操作の例を示す図である。また、図5は、端末装置101の平面図である。
端末装置101は、略長方形の形状であり、略長方形のタッチパネル121の周辺の一辺に生体センサ111が設けられている。生体センサ111は、点線で示される撮影範囲112を撮影する。
表示制御部171は、タッチパネル121の表示デバイス122に2本の平行なラインをガイド表示125−iとして表示する。図5において、薄いハッチングが施された部分
は、表示されたガイド表示125−iを示し、濃いハッチングが施された部分は、利用者が指先でタッチ済み、即ち、入力済みのタッチ場所を示す。また、白抜きの矢印は、利用者の指先の現在の入力位置と移動方向を示す。
図5では、横方向に延びるガイド表示125−iが2本表示される。利用者は、親指および人差し指で2本のガイド表示125−iを左端から右方向に同時になぞり、生体センサ111はその間、撮影範囲112の手301のてのひらを定期的に撮影する。
図5では、利用者は、親指および人差し指で2本のガイド表示125−iをガイド表示125−iの左端から中央付近までなぞっている。それにより、ガイド表示125−iの左端から中央付近までが濃いハッチングで示されている。
尚、ガイド表示125−iは、一例であり、これに限られるものではない。
ここで、手のひらの角度(回転角)について説明する。
図6は、手のひらの回転角を示す図である。
実施の形態において、手のひらの回転角θは、生体センサ111の基準線Aと、利用者の手301の中指と手首の横幅の中心を通る直線Bと、が成す角度とする。上述のように、端末装置101は、略長方形の外形を有する。実施の形態において、生体センサ111の基準線Aは、端末装置101の外形を示す4辺のうち、生体センサ111が設けられた一辺の輪郭を示す直線とする。
ここで、手のひらの距離について説明する。
図7は、手のひらと生体センサとの間の距離を示す図である。
図7は、端末装置101と利用者の手301が図5に示す状態のときの端末装置101の側面図である。端末装置101は、例えば、机に置かれており、利用者の手301の指302はタッチパネル121にタッチしており、生体センサ111の上方に手のひら303が位置している。
実施の形態において、手のひらの距離hは、生体センサ111と手のひら303との間の距離である。
次に、手のひらの回転角と手のひらの距離との関係について説明する。
図8、9は、手のひらの回転角と手のひらの距離との関係を示す図である。
図8、9の上側は、端末装置101の操作時の平面図、図8、9の下側は、端末装置101の操作時の側面図である。
図8,9は、手301の置き方によって手の回転角が異なる様子を示している。
図8は、手301を自然に開いて指302をガイド表示125−iに置いた場合である。利用者が人差し指と親指で縦に並んだガイド表示125−iにタッチしたとき、人差し指の方が親指より長いため、手の角度は斜めに傾く。図8において、手のひらの回転角はθ、手のひらの距離はhである。
これに対し、図9は指302を立てるようにガイド表示125−iにタッチした場合を示す。指302をタッチパネル121に対して立ててタッチすると、指302の付け根が指先の真上に近くなるため、人差し指と親指の付け根が縦にそろう形になる。それにより生体センサ111の基準線Aと手301の中指と手首の横幅の中心を通る直線Bとが、平行に近く(回転角θ2が0度に近く)なる。このとき、また、指を立てているため、手のひらの距離hは大きくなる。図8,9において、θ>θ、h<hである。
すなわち、手のひらの回転角が大きくなると手のひらの距離は小さくなるという関係がある。言い換えれば、手のひらの回転角が小さくなると手のひらの距離は大きくなる
図10は、実施の形態に係る登録処理のフローチャートである。
ステップS501において、表示制御部171は、ガイド表示を開始する。詳細には、表示制御部171は、図5に示すように表示デバイス122にガイド表示125−iを表示する。登録者は、ガイド表示125−iを親指と人差し指をタッチする。また、図5に示すように生体センサ111の撮影範囲112に、手のひらの少なくとも一部が含まれている。
ステップS502において、入力デバイス123がタッチパネル121上の指の位置(座標)を検出したら、制御はステップS503に進む。
以下のステップS503〜S505において、登録者は、図5に示すように、親指と人差し指をガイド表示125−iに接触させたまま矢印方向にガイド表示125−iに沿ってのガイド表示125−iの左端から右端に移動させる。
ステップS503において、入力デバイス123は、登録者が触れているタッチパネル121上の指の位置(座標)を検出し、検出した位置をタッチ位置取得部141に出力する。タッチ位置取得部141は、入力デバイス123から登録者が触れているタッチパネル121上の指の位置を受信する。
ステップS504において、生体センサ111は、手のひらを撮影し、撮影した画像(生体画像)を生体画像取得部131に出力する。生体画像取得部131は、生体センサ111から生体画像を受信する。また、生体画像取得部131は、生体画像とステップS503で検出した指の位置とを対応付ける。
ステップS505において、表示制御部171は、登録者の指のスライドが完了したか判定する。登録者の指のスライドが完了した場合、制御はステップS506に進み、登録者の指のスライドが完了していない場合、制御はステップS503に戻る。例えば、表示制御部171は、登録者の親指および人差し指のタッチパネル121上の位置がガイド表示125−iの右端にある場合、スライドが完了したと判定する。
ステップS502〜S505に処理により、タッチパネル121上の複数のそれぞれ異なる指の位置に対応する複数の生体画像が撮影される。
ステップS506において、距離検出部151は、複数の生体画像それぞれの撮影時の生体センサ111と手のひらとの間の距離を検出する。距離検出部151は、例えば、生体画像に基づいて、複数の生体画像それぞれの撮影時の生体センサ111と手のひらとの間の距離を算出する。詳細には、距離検出部151は、例えば、タッチパネル121上の指の移動量と生体画像の局所特徴の移動量に基づいて、生体センサ111と手のひらとの間の距離を算出する。生体センサ111と手のひらとの間の距離の算出方法の詳細は、例えば、特許文献7(特開2017−136136号公報)に記載されている。
生体画像を用いて、距離を算出することで、距離センサ等の追加部品が不要となり、コストを削減できる。
尚、端末装置101は、距離センサをさらに備え、複数の生体画像それぞれの撮影時の距離センサと手のひらとの間の距離を検出してもよい。例えば、端末装置101は、距離センサを生体センサ111と同じ位置に設け、距離センサと手のひらとの間の距離を生体センサ111と手のひらとの間の距離として用いる。距離センサを用いることで、距離を正確に検出できる。
ステップS507において、回転角推定部161は、距離検出部151により検出された複数の生体画像それぞれの撮影時の手のひらの距離hに基づいて、複数の生体画像それぞれの撮影時の手のひらの回転角θを推定する。例えば、回転角推定部161は、下式(1)〜(3)を用いて、回転角θを算出する。
θ=θmax (h<hminの場合)・・・(1)
θ=ah+b 但し、係数aは負の実数、定数bは正の実数(hmin≦h≦hmaxの場合)・・・(2)
θ=0 (h>hmaxの場合)・・・(3)
尚、θmax、hmin、hmax、係数a、定数bは、予め設定されている。
図11は、手のひらの回転角と手のひらの距離との関係を示す図である。上式(1)〜(3)をグラフで表すと、図11に示すようになる。図11に示すように、センサと手のひらとの間の距離が大きくなると、回転角θは小さくなる。
図10に戻り説明を続ける。
ステップS508において、登録部181は、登録処理を行う。詳細には、登録部181は、複数の生体画像それぞれから特徴量を抽出する。特徴量は、例えば、手のひらの静脈の形状(模様)を示す静脈データ(静脈パターン)である。登録部181は、生体画像の撮影時のタッチパネル121上の指の位置、特徴量、および回転角推定部161により求めた生体画像の撮影時の回転角を対応付けて、記憶部201の登録DBに登録する。登録処理における生体画像の撮影時の手のひらの回転角を登録することで、後述の認証処理において、登録処理時と認証処理時それぞれで撮影した生体画像の撮影時の手のひらの回転角の差(相対角度)を求めることができる。それにより、生体画像の適切な補正(回転)が可能となる。
図12は、登録DBの例である。
図12の登録DB202は、一人の登録者の登録DBを示す。
登録DB202には、位置P(j=1〜n)、特徴量f、および回転角θが対応付けられて記載されている。
位置Pは、生体画像の撮影時のタッチパネル121に接触している指の位置(座標)である。例えば、図5に示すようなガイド表示125−iが表示された場合、生体画像の撮影時のタッチパネル121に接触している親指および人差し指の少なくとも一方の位置が記載される。
特徴量fは、生体画像から抽出された特徴量である。
回転角θは、生体画像の撮影時の手のひらの回転角である。
尚、端末装置101は、複数の登録者それぞれに対応する登録DBを記憶してもよい。端末装置101は、複数の登録DBを記憶し、1:N認証を行ってもよい。
また、ステップS508において、登録部181は、回転角推定部161により算出された複数の生体画像それぞれの撮影時の回転角θに基づいて、複数の生体画像それぞれを補正(回転)し、補正した複数の生体画像それぞれから特徴量を抽出してもよい。例えば、ある生体画像の撮影時の回転角がθである場合、登録部181は、生体画像を−θ回転して、回転した生体画像から特徴量を抽出してもよい。このとき、登録部181は、位置Pおよび回転した生体画像から抽出された特徴量fを登録DB202に登録し、回転角θは登録しなくてよい。すなわち、予め登録時に回転角を0度に補正した生体画像から特徴量を抽出してもよい。
図13は、実施の形態に係る認証処理のフローチャートである。
ステップS601において、表示制御部171は、ガイド表示を開始する。詳細には、表示制御部171は、図5に示すように表示デバイス122にガイド表示125−iを表示する。認証対象者は、ガイド表示125−iを親指と人差し指をタッチする。また、図5に示すように生体センサ111の撮影範囲112に、手のひらの少なくとも一部が含まれている。
ステップS602において、入力デバイス123がタッチパネル121上の指の位置(座標)を検出したら、制御はステップS603に進む。
以下のステップS603〜S605において、認証対象者は、図5に示すように、親指と人差し指をガイド表示125−iに接触させたまま矢印方向にガイド表示125−iに沿ってのガイド表示125−iの左端から右端に移動させる。
ステップS603において、入力デバイス123は、認証対象者が触れているタッチパネル121上の指の位置(座標)を検出し、検出した位置をタッチ位置取得部141に出力する。タッチ位置取得部141は、入力デバイス123から認証対象者が触れているタッチパネル121上の指の位置を受信する。
ステップS604において、生体センサ111は、手のひらを撮影し、撮影した画像(生体画像)を生体画像取得部131に出力する。生体画像取得部131は、生体センサ111から生体画像を受信する。また、生体画像取得部131は、生体画像とステップS603で検出した指の位置とを対応付ける。
ステップS605において、表示制御部171は、認証対象者の指のスライドが完了したか判定する。認証対象者の指のスライドが完了した場合、制御はステップS606に進み、認証対象者の指のスライドが完了していない場合、制御はステップS603に戻る。例えば、表示制御部171は、認証対象者の親指および人差し指のタッチパネル121上の位置がガイド表示125−iの右端にある場合、スライドが完了したと判定する。
ステップS602〜S605に処理により、タッチパネル121上の複数のそれぞれ異なる指の位置に対応する複数の生体画像が撮影される。
ステップS606において、距離検出部151は、複数の生体画像それぞれの撮影時の生体センサ111と手のひらとの間の距離を検出する。距離検出部151は、例えば、生体画像に基づいて、複数の生体画像それぞれの撮影時の生体センサ111と手のひらとの間の距離を算出する。詳細には、距離検出部151は、例えば、タッチパネル121上の指の移動量と生体画像の局所特徴の移動量に基づいて、生体センサ111と手のひらとの間の距離を算出する。生体センサ111と手のひらとの間の距離の算出方法の詳細は、例えば、特許文献7(特開2017−136136号公報)に記載されている。
生体画像を用いて、距離を算出することで、距離センサ等の追加部品が不要となり、コストを削減できる。
尚、端末装置101は、距離センサをさらに備え、複数の生体画像それぞれの撮影時の距離センサと手のひらとの間の距離を検出してもよい。例えば、端末装置101は、距離センサを生体センサ111と同じ位置に設け、距離センサと手のひらとの間の距離を生体センサ111と手のひらとの間の距離として用いる。距離センサを用いることで、距離を正確に検出できる。
ステップS607において、回転角推定部161は、距離検出部151により検出された複数の生体画像それぞれの撮影時の手のひらの距離hに基づいて、複数の生体画像それぞれの撮影時の手のひらの回転角θを推定する。例えば、回転角推定部161は、下式(1)〜(3)を用いて、回転角θを算出する。
θ=θmax (h<hminの場合)・・・(1)
θ=ah+b 但し、係数aは負の実数、定数bは正の実数(hmin≦h≦hmaxの場合)・・・(2)
θ=0 (h>hmaxの場合)・・・(3)
尚、θmax、hmin、hmax、係数a、定数bは、予め設定されている。
ステップS608において、照合部191は、ステップS604で撮影した生体画像と登録DB202とを用いて照合処理を行う。
ここで、照合部191が、複数の生体画像のうちの一枚の生体画像を照合対象として用いて照合処理を行う場合を説明する。
照合対象の生体画像の撮影時のタッチパネル121上の指の位置がP、生体画像の撮影時の回転角がθであるとする。
照合部191は、登録DB202から位置Pと同じまたは最も近い位置Pを検出する。登録DB202の位置Pに対応する特徴量がf、回転角がθとする。照合部191は、回転角θと回転角θの差(相対角度)θを算出する。照合部191は、照合対象の生体画像を相対角度θ回転する。照合部191は、回転した生体画像から特徴量fを抽出する。
照合部191は、特徴量fを特徴量fとの類似度を算出し、算出した類似度に基づいて、認証の可否を判定する。照合部191は、照合が成功した場合、認証対象者を認証し、端末装置101のロック解除等の所定の処理を行う。
尚、照合部191は、複数の生体画像すべてを用いて照合処理を行ってもよいし、複数の生体画像の一部を用いて照合処理を行ってもよい。すなわち、照合部191は、上記の一枚の生体画像を用いた照合処理を、複数の生体画像それぞれに対して行い、算出した複数の類似度に基づいて、認証の可否を判定してもよい。
尚、登録処理時に回転角が0度に補正されており、回転角θが登録DBに登録されていない場合、照合部191は、回転角θ=0として、相対角度θを算出する。
また、手の大きさの個人差に対応するために、表示制御部171は、2本のガイド表示の間隔が異なる複数種類のガイド表示のいずれかを表示することもできる。この場合、2本のガイド表示の間の間隔が異なると、高さと回転角の関係も異なるため、ガイド表示毎に手のひらの距離と回転角の対応関係を予め求めておき、回転角の推定に用いる。
図14、15は、ガイド表示の例である。
図14において、ガイド表示125−1とガイド表示125−2の間隔はW1であり、図15において、ガイド表示125−1とガイド表示125−2の間隔はW2である。間隔W1は、間隔W2より大きい。
間隔がW1である第1のガイド表示に対応するθmax、hmin、hmax、係数a、定数b、間隔がW2である第2のガイド表示に対応するθmax、hmin、hmax、係数a、定数bがそれぞれ端末装置101に予め設定されている。すなわち、各ガイド表示それぞれに対応する、回転角の算出の際に用いられる閾値、係数、および定数を端末装置101は、予め記憶してもよい。
どのガイド表示を使用するかは、端末装置101に予め利用者が設定できる。例えば、ステップS601において、表示制御部171は、2本のガイド表示の間の間隔が異なる複数のガイド表示のうち、設定されたガイド表示を表示する。
表示制御部171は設定されたガイド表示を回転角推定部161に通知し、ステップS507またはステップS607において、回転角推定部161は、通知されたガイド表示に対応するθmax、hmin、hmax、係数a、定数bを用いて、回転角を推定する。複数種類のガイド表示を表示できることで、手の大きさの個人差に対応することができる。尚、上述の2つのガイド表示は一例であり、端末装置101は、3種類以上のガイド表示を表示してもよい。
実施の形態の端末装置によれば、照合対象の生体画像を登録時と認証時の手の回転角の差(相対角度)で回転することで、登録時の手の回転角と同じ回転角で撮影した場合に相当する生体画像が得られる。これにより生体画像を用いた生体認証において、認証精度が向上する。
実施の形態の端末装置によれば、角度変化による本人拒否エラーを低減でき、また他人受入れのリスクを低減できる。
図16は、情報処理装置(コンピュータ)の構成図である。
実施の形態の端末装置101は、例えば、図16に示すような情報処理装置(コンピュータ)1によって実現可能である。
情報処理装置(コンピュータ)1は、CPU(Central Processing Unit)2、メモリ3、記憶装置4、タッチパネル5、生体センサ6、および記録媒体駆動部7を備え、それらはバス9により互いに接続されている。
CPU2は、情報処理装置1全体を制御する中央処理装置(プロセッサ)である。CPU2は、生体画像取得部131、タッチ位置取得部141、距離検出部151、回転角推定部161、表示制御部171、登録部181、および照合部191として動作する。
メモリ3は、プログラム実行の際に、記憶装置4(あるいは可搬記録媒体10)に記憶されているプログラムあるいはデータを一時的に格納するRAM(Random Access Memory)等のメモリである。CPU2は、メモリ3を利用してプログラムを実行することにより、上述した各種処理を実行する。
記憶装置4は、例えば、磁気ディスク装置、不揮発性メモリ等である。情報処理装置1は、記憶装置4に、上述のプログラムとデータを保存しておき、必要に応じて、それらをメモリ3に読み出して使用する。記憶装置4は、記憶部201に対応する。
タッチパネル5は、情報を表示する機能およびタッチパネル121に対する指等の接触を検出する機能を有する。タッチパネル5は表示デバイス11および入力デバイス12を有する。タッチパネル5はタッチパネル121に対応する。
表示デバイス11は、文章、図、または指のタッチ場所を示すガイド表示などを表示する。表示デバイス11は、表示デバイス122に対応する。
入力デバイス12は、ユーザが触れているタッチパネル5上の指の位置(座標)を検出し、検出した位置をCPU2に出力する。入力デバイス12は、入力デバイス123に対応する。
生体センサ6は、利用者(登録者または認証対象者)の手のひら等の生体を撮影する。生体センサ6は、例えば、赤外線カメラである。生体センサ6は、生体センサ111に対応する。
記録媒体駆動部7は、可搬記録媒体10を駆動し、その記録内容にアクセスする。可搬記録媒体としては、メモリカード、フレキシブルディスク、Compact Disk Read Only Memory(CD−ROM)、光ディスク、光磁気ディスク等、任意のコンピュータ読み取り可能な記録媒体が用いられる。ユーザは、この可搬記録媒体10に上述のプログラムとデータを格納しておき、必要に応じて、それらをメモリ3に読み出して使用する。
なお、情報処理装置1が図16のすべての構成要素を含む必要はなく、用途や条件に応じて一部の構成要素を省略することも可能である。例えば、情報処理装置1が可搬記録媒体10にアクセスしない場合は、記録媒体駆動部7を省略してもよい。また、情報処理装置1は、用途や条件に応じてさらに構成要素を含むことも可能である。例えば、情報処理装置1が通信機能を有する場合には、データの送受信を行う通信部をさらに含んでもよい。
以上の実施の形態に関し、さらに以下の付記を開示する。
(付記1)
タッチパネルと、
前記タッチパネルに接触する生体を撮影する撮影部と、
前記撮像部と前記生体との間の距離を算出する距離算出部と、
前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する回転角算出部と、
備える生体画像処理装置。
(付記2)
前記距離算出部は、前記生体画像を用いて前記距離を算出することを特徴とする付記1記載の生体画像処理装置。
(付記3)
前記回転角に基づいて、前記撮像部により撮影された生体画像を補正する補正部をさらに備える付記1または2記載の生体画像処理装置。
(付記4)
前記生体画像から抽出された特徴量と前記回転角とを対応付けてデータベースに登録する登録部をさらに備えることを特徴とする付記1または2記載の生体画像処理装置。
(付記5)
撮像部とタッチパネルとを有するコンピュータが
前記タッチパネルに接触する生体を撮影し、
前記撮像部と前記生体との間の距離を算出し、
前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する、
ことを特徴とする生体画像処理方法。
(付記6)
前記距離を算出する処理において、前記生体画像を用いて前記距離を算出することを特徴とする付記5記載の生体画像処理方法。
(付記7)
前記回転角に基づいて、前記撮像部により撮影された生体画像を補正する処理をさらに備える付記5または6記載の生体画像処理方法。
(付記8)
前記生体画像から抽出された特徴量と前記回転角とを対応付けてデータベースに登録する処理をさらに備えることを特徴とする付記5または6記載の生体画像処理方法。
(付記9)
撮像部とタッチパネルとを有するコンピュータに
前記タッチパネルに接触する生体を撮影し、
前記撮像部と前記生体との間の距離を算出し、
前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する、
処理を実行させる生体画像処理プログラム。
(付記10)
前記距離を算出する処理において、前記生体画像を用いて前記距離を算出することを特徴とする付記9記載の生体画像処理プログラム。
(付記11)
前記回転角に基づいて、前記撮像部により撮影された生体画像を補正する処理をさらに前記コンピュータに実行させる付記9または10記載の生体画像処理プログラム。
(付記12)
前記生体画像から抽出された特徴量と前記回転角とを対応付けてデータベースに登録する処理をさらに前記コンピュータに実行させることを特徴とする付記9または10記載の生体画像処理プログラム。
101 端末装置
111 生体センサ
121 タッチパネル
122 表示デバイス
123 入力デバイス
131 生体画像取得部
141 タッチ位置取得部
151 距離検出部
161 回転角推定部
171 表示制御部
181 登録部
191 照合部
201 記憶部

Claims (6)

  1. タッチパネルと、
    前記タッチパネルに接触する生体を撮影する撮影部と、
    前記撮像部と前記生体との間の距離を算出する距離算出部と、
    前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する回転角算出部と、
    備える生体画像処理装置。
  2. 前記距離算出部は、前記生体画像を用いて前記距離を算出することを特徴とする請求項1記載の生体画像処理装置。
  3. 前記回転角に基づいて、前記撮像部により撮影された生体画像を補正する補正部をさらに備える請求項1または2記載の生体画像処理装置。
  4. 前記生体画像から抽出された特徴量と前記回転角とを対応付けてデータベースに登録する登録部をさらに備えることを特徴とする請求項1または2記載の生体画像処理装置。
  5. 撮像部とタッチパネルとを有するコンピュータが
    前記タッチパネルに接触する生体を撮影し、
    前記撮像部と前記生体との間の距離を算出し、
    前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する、
    ことを特徴とする生体画像処理方法。
  6. 撮像部とタッチパネルとを有するコンピュータに
    前記タッチパネルに接触する生体を撮影し、
    前記撮像部と前記生体との間の距離を算出し、
    前記距離に基づいて、前記生体の前記撮影部に対する回転角を算出する、
    処理を実行させる生体画像処理プログラム。
JP2018071161A 2018-04-02 2018-04-02 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム Active JP7230337B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018071161A JP7230337B2 (ja) 2018-04-02 2018-04-02 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム
EP19164304.8A EP3550459B1 (en) 2018-04-02 2019-03-21 Apparatus, method, and program for biometric image processing
US16/363,091 US11227139B2 (en) 2018-04-02 2019-03-25 Apparatus, method, and program for biometric image processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018071161A JP7230337B2 (ja) 2018-04-02 2018-04-02 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2019185143A true JP2019185143A (ja) 2019-10-24
JP7230337B2 JP7230337B2 (ja) 2023-03-01

Family

ID=65910951

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018071161A Active JP7230337B2 (ja) 2018-04-02 2018-04-02 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム

Country Status (3)

Country Link
US (1) US11227139B2 (ja)
EP (1) EP3550459B1 (ja)
JP (1) JP7230337B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111898455B (zh) * 2020-07-02 2023-04-07 珠海格力电器股份有限公司 一种静脉图像的匹配方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012234440A (ja) * 2011-05-06 2012-11-29 Fujitsu Ltd 生体認証装置、生体情報処理装置、生体認証システム、生体認証サーバ、生体認証クライアント及び生体認証装置制御方法
US20140003683A1 (en) * 2012-06-29 2014-01-02 Apple Inc. Far-Field Sensing for Rotation of Finger
US20170147151A1 (en) * 2015-11-20 2017-05-25 International Business Machines Corporation Pre-touch localization on a reflective surface

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3558025B2 (ja) 2000-09-06 2004-08-25 株式会社日立製作所 個人認証装置及び方法
JP4389505B2 (ja) 2003-08-11 2009-12-24 株式会社日立製作所 個人認証装置及び血管パターン抽出装置
JP2007233981A (ja) 2006-02-28 2007-09-13 Universal Robot Kk Log−Polar変換を用いた静脈認証画像の補正装置及び方法
JP2010268989A (ja) 2009-05-22 2010-12-02 Sony Ericsson Mobilecommunications Japan Inc 個人認証装置および携帯端末
JP6589309B2 (ja) 2015-03-16 2019-10-16 富士通株式会社 端末装置、生体認証プログラム及び生体認証方法
JP6657593B2 (ja) 2015-05-08 2020-03-04 富士通株式会社 生体撮影装置、生体撮影方法及び生体撮影プログラム
JP6679897B2 (ja) 2015-11-20 2020-04-15 富士通株式会社 情報処理装置、生体認証方法および生体認証プログラム
JP6583025B2 (ja) * 2016-02-01 2019-10-02 富士通株式会社 生体情報処理装置、生体情報処理方法、生体情報処理プログラム、および距離検知装置
US10379632B2 (en) * 2016-06-12 2019-08-13 Apple Inc. Devices and methods for manipulating user interfaces with stylus and non-stylus contacts

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012234440A (ja) * 2011-05-06 2012-11-29 Fujitsu Ltd 生体認証装置、生体情報処理装置、生体認証システム、生体認証サーバ、生体認証クライアント及び生体認証装置制御方法
US20140003683A1 (en) * 2012-06-29 2014-01-02 Apple Inc. Far-Field Sensing for Rotation of Finger
US20170147151A1 (en) * 2015-11-20 2017-05-25 International Business Machines Corporation Pre-touch localization on a reflective surface

Also Published As

Publication number Publication date
US11227139B2 (en) 2022-01-18
JP7230337B2 (ja) 2023-03-01
US20190303649A1 (en) 2019-10-03
EP3550459A1 (en) 2019-10-09
EP3550459B1 (en) 2020-11-11

Similar Documents

Publication Publication Date Title
JP5831018B2 (ja) 生体認証装置及び生体認証装置における利用者の手の位置の調整方法
KR101603469B1 (ko) 생체 인증 장치, 생체 인증 방법 및 생체 인증용 컴퓨터 프로그램
EP2921991B1 (en) Image correction apparatus and image correction method
US11600105B2 (en) Tenrprint card input device, tenrprint card input method and storage medium
KR102137055B1 (ko) 생체 정보 보정 장치, 생체 정보 보정 방법 및 생체 정보 보정용 컴퓨터 프로그램
JP5812109B2 (ja) 生体情報処理装置、生体情報処理方法及び生体情報処理用コンピュータプログラム
JP2006107366A (ja) 生体情報入力装置,生体認証装置,生体情報処理方法,生体情報処理プログラムおよび同プログラムを記録したコンピュータ読取可能な記録媒体
KR20130140893A (ko) 손가락 데이터 수집 및 손가락 움직임 추적 디스플레이 전자 장치 및 관련 방법
US20140121528A1 (en) Information processing apparatus, information processing method and program
US9880634B2 (en) Gesture input apparatus, gesture input method, and program for wearable terminal
JP6988523B2 (ja) 生体認証装置、生体認証プログラム、及び生体認証方法
JP6583025B2 (ja) 生体情報処理装置、生体情報処理方法、生体情報処理プログラム、および距離検知装置
JP6825397B2 (ja) 生体認証装置、生体認証方法及び生体認証プログラム
JP2019185143A (ja) 生体画像処理装置、生体画像処理方法、および生体画像処理プログラム
JP6349817B2 (ja) 位置合わせ装置、位置合わせ方法及び位置合わせ用コンピュータプログラム
JP7092984B2 (ja) 生体画像処理装置、生体画像処理方法、及び生体画像処理プログラム
US20200285724A1 (en) Biometric authentication device, biometric authentication system, and computer program product
JP6364828B2 (ja) 生体認証装置および携帯型電子装置
JP2020102014A (ja) 生体認証装置、生体認証プログラム、及び生体認証方法
JP7161129B1 (ja) 情報処理装置および情報処理プログラム
US20200285874A1 (en) Biometric authentication device and computer program product
JP4759633B2 (ja) 生体情報入力装置,生体情報処理方法および生体情報処理プログラム
JP5979976B2 (ja) 情報処理装置及びその制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220329

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20220329

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20220329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220830

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220922

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230130

R150 Certificate of patent or registration of utility model

Ref document number: 7230337

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150