JP4254330B2 - Image photographing device, image photographing method, and authentication device - Google Patents

Image photographing device, image photographing method, and authentication device Download PDF

Info

Publication number
JP4254330B2
JP4254330B2 JP2003120016A JP2003120016A JP4254330B2 JP 4254330 B2 JP4254330 B2 JP 4254330B2 JP 2003120016 A JP2003120016 A JP 2003120016A JP 2003120016 A JP2003120016 A JP 2003120016A JP 4254330 B2 JP4254330 B2 JP 4254330B2
Authority
JP
Japan
Prior art keywords
image
unit
focus
subject
degree
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003120016A
Other languages
Japanese (ja)
Other versions
JP2004328367A (en
Inventor
芳人 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2003120016A priority Critical patent/JP4254330B2/en
Publication of JP2004328367A publication Critical patent/JP2004328367A/en
Application granted granted Critical
Publication of JP4254330B2 publication Critical patent/JP4254330B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、被写体の画像を撮影する画像撮影装置、および、撮影された画像から取得される認証情報を用いて被写体の本人認証を行う認証装置に関する。
【0002】
【従来の技術】
近年、個人情報や機密情報等の重要な情報へのアクセスを制限したり、セキュリティ性の高い部屋への入退室管理等を行うにあたって、虹彩、指紋、顔または網膜等の人体の個体別に特有の情報(いわゆるバイオメトリクス情報)を認証情報として用いて本人認証を行う認証装置が実用化されてきている。
【0003】
例えば、被写体の眼周辺の画像(以下、眼画像と記す)を撮影し、その眼画像の虹彩部分をコード化することによって認証情報を作成し、その被写体から取得された認証情報とあらかじめ登録された認証情報を比較照合することによって、被写体の本人認証を行う虹彩認証技術が提案され、実用化されてきている(例えば、特許文献1を参照。)。
【0004】
このような虹彩認証技術を用いた認証装置(以下、虹彩認証装置と記す)においては、その用途に応じて据え置き型やハンディ型等様々な装置構成が提案されており、これらの虹彩認証技術を用いた虹彩認証装置においては、いかにして被写体の眼の位置を虹彩認証装置の画像撮影部の画角内に収めるよう適切に誘導するかが大きな課題となっていた。
【0005】
この課題を解決するために、例えばハンディ型の虹彩認証装置において、あらかじめ虹彩認証装置の所定の位置に2枚の鏡が配置されて、被認証者は自分の眼が虹彩認証装置の2枚の鏡に映る位置に自ら装置を手に持って移動させることにより、適切な位置に眼の位置を誘導することができる構成が提案されてきた(例えば、特許文献2を参照。)。
【0006】
【特許文献1】
特許第3307936号公報
【特許文献2】
特開2000−207536号公報
【0007】
【発明が解決しようとする課題】
しかしながら、前述のようなハンディ型の虹彩認証装置においては、被認証者である被写体が眼鏡をかけている場合には、その検知のための有効な対策が図られてこなかった。
【0008】
さらに、一般に虹彩認証装置においては、コントラストの高い虹彩パターンの画像を撮影するため、被写体の眼に近赤外光(波長約700nm〜約1000nm)を照射し、その反射像を撮影する。このため、被写体が眼鏡をかけている場合には、眼に照射された近赤外光が眼鏡レンズの表面および裏面(以下、レンズ面と略記する)で反射してその反射像が映りこみとして撮影される。この映りこみが眼画像の虹彩の部分にも悪影響を及ぼすので、良好な虹彩パターンの画像を確実に撮影することができないという課題があった。
【0009】
本発明はこのような課題に鑑み、ハンディ型の認証装置において、被写体が眼鏡をかけている場合にそれを検知でき、かつ、良好な虹彩パターンの画像を撮影することができる画像撮影装置およびそれを用いた認証装置を提供することを目的とする。
【0010】
【課題を解決するための手段】
本発明の画像撮影装置は、互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影部と、前記画像撮影部で撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出部と、前記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定部と、前記眼鏡着用判定部において前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記被写体に最も近い位置において前記合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定する合焦画像判定部と、前記被写体に光線を照射する光線照射部とを備え、前記光線照射制御部は、前記合焦度算出部において前記合焦度が所定の閾値を超えた場合に、前記光線照射部に対して照射する光線の強さを増大させることを特徴としている。
【0011】
このような構成とすることにより、眼鏡着用判定部を備えているので、被写体が眼鏡を着用しているか否かを判定することができる。さらに、眼鏡着用判定部で被写体が眼鏡を着用していると判定された場合に、合焦度が所定の閾値以上であり、かつ、撮影距離が最も短い画像を合焦画像と判定するので、眼鏡のレンズ面における反射像が眼画像、特に虹彩の画像に及ぼす悪影響を低減でき、良好な虹彩のパターンを有する眼の合焦画像を得ることができる。さらに、光線照射部に対して照射する光線の強さを増大させることができ、合焦度が所定の閾値を超えた後に光線照射部に光線の強度を増大させるので、よりコントラストの高い眼の画像を撮影することができると共に、所定の合焦度が得られるまでは光線の強度が低くてよいので、消費電力の低減を図ることができ、ハンディ型の装置への搭載に適した画像撮影装置が実現できる。
【0012】
次に、本発明の画像撮影装置は、互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影部と、前記画像撮影部で撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出部と、記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定部と、 前記眼鏡着用判定部において前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記撮影距離と前記画像の合焦度との関係において、前記被写体が近づくに従って前記合焦度が第1の極大を示すように変化した後に第2の極大を示すように変化したとき、前記合焦度が所定の閾値以上であり、かつ、前記撮影距離が前記第2の極大に対応する撮影距離よりも近い画像を眼の合焦画像であると判定する合焦画像判定部と
前記被写体に光線を照射する光線照射部とを備え、前記光線照射制御部は、前記合焦度算出部において前記合焦度が所定の閾値を超えた場合に、前記光線照射部に対して照射する光線の強さを増大させることを特徴としている。
【0013】
このような構成とすることにより、眼鏡着用判定部を備えているので、被写体が眼鏡を着用しているか否かを判定することができる。さらに、眼鏡着用判定部で被写体が眼鏡を着用していると判定された場合に、合焦度が所定の閾値以上であり、かつ、撮影距離が第2の極大に対応する撮影距離よりも近い画像を合焦画像と判定するので、眼鏡のレンズ面における反射像が眼画像、特に虹彩の画像に及ぼす悪影響を低減した良好な眼の合焦画像を得ることができる。さらに、光線照射部に対して照射する光線の強さを増大させることができ、合焦度が所定の閾値を超えた後に光線照射部に光線の強度を増大させるので、よりコントラストの高い眼の画像を撮影することができると共に、所定の合焦度が得られるまでは光線の強度が低くてよいので、消費電力の低減を図ることができ、ハンディ型の装置への搭載に適した画像撮影装置が実現できる。
【0014】
また、眼鏡着用判定部において被写体が眼鏡を着用していないと判定された場合に、合焦画像判定部は、複数の画像のうち、被写体から最も離れた位置において合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定する構成によれば、被写体が眼鏡を着用していない裸眼の場合に、良好な虹彩パターンの合焦画像を得ることができ、被写体の眼鏡着用の有無にかかわらず、認証に好適な眼の合焦画像を得ることができる。
【0015】
また、眼鏡着用判定部は、画像撮影部で撮影された画像のうち、所定の輝度以上の画素が所定の数以上存在する場合に、被写体が眼鏡を着用していると判定する構成であってもよい。
【0016】
このような構成によれば、被写体である被認証者が自ら入力等を行うことなく、被認証者が眼鏡を着用しているか否かを判定することができる。
【0017】
また、眼鏡着用判定部に接続された入力部を備え、入力部に所定の入力が行われた場合に、眼鏡着用判定部は被写体が眼鏡を着用していると判定する構成であってもよい。
【0018】
このような構成とすることにより、簡易な構成で眼鏡着用判定を行うことが可能となり、ユーザにとって使いやすい画像撮影装置が実現できる。
【0023】
また、被写体に対して、撮影距離を合焦画像を得られるような距離に誘導する誘導情報を出力する誘導情報出力部を備えた構成であってもよい。
【0024】
このような構成とすることにより、被認証者に対して、合焦画像が得られるような位置に誘導する誘導情報が出力されるので、被認証者が自ら画像撮影装置の位置を合焦画像が得られる位置に移動させる際の負担を小さくすることができる。
【0025】
さらに、誘導情報が音声による情報であり、合焦度算出部で算出された合焦度の高低にもとづいて、誘導情報出力部に音声情報の周波数を変調させて出力させる誘導情報出力制御部を備えた構成であってもよい。
【0026】
このような構成とすることにより、合焦度が高くなるほど音声情報の周波数が高くなる構成や、逆に低くなる構成が実現できるので、より被認証者に負担の少ない誘導方法が実現できる。
【0027】
さらに、光線照射部から照射される照射光が近赤外光である構成であってもよい。
【0028】
このような構成とすることにより、虹彩の高コントラストな画像を撮影することが可能となる。
【0029】
次に本発明の認証装置は、前述の本発明の画像撮影装置と、合焦画像判定部で判定された合焦画像を記憶する合焦画像記憶部と、合焦画像記憶部に記憶された合焦画像から認証情報を作成する認証情報作成部と、あらかじめ登録された登録認証情報と認証情報作成部で作成された認証情報とを比較照合する比較照合部とを備えたことを特徴としている。
【0030】
このような構成により、簡易な構成で被認証者の眼鏡検出が可能であり、眼鏡が着用されている場合にも良好な眼画像の撮影が可能で、認証率の高い、小型の認証装置が実現できる。
【0031】
また、認証情報作成部は、被認証者の画像から得られる虹彩画像をコード化することにより認証情報を作成する構成であってもよい。
【0032】
このような構成により、虹彩画像をコード化した認証情報を用いて高い本人認証率を実現できる。
次に、本願発明の画像撮影方法は、互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影ステップと、前記画像撮影ステップで撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出ステップと、前記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定ステップと、前記眼鏡着用判定ステップにおいて前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記被写体に最も近い位置において前記合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定する合焦画像判定ステップと、前記被写体に光線を照射する光線照射ステップとを備え、前記光線照射制御ステップは、前記合焦度算出ステップにおいて前記合焦度が所定の閾値を超えた場合に、前記光線照射ステップに対して照射する光線の強さを増大させることを特徴としている。
このような構成にすることにより、眼鏡着用判定ステップを備えているので、被写体が眼鏡を着用しているか否かを判定することができる。さらに、眼鏡着用判定ステップで被写体が眼鏡を着用していると判定された場合に、合焦度が所定の閾値以上であり、かつ、撮影距離が最も短い画像を合焦画像と判定するので、眼鏡のレンズ面における反射像が眼画像、特に虹彩の画像に及ぼす悪影響を低減でき、良好な虹彩のパターンを有する眼の合焦画像を得ることができる。さらに、光線照射ステップに対して照射する光線の強さを増大させることができ、合焦度が所定の閾値を超えた後に光線照射ステップに光線の強度を増大させるので、よりコントラストの高い眼の画像を撮影することができると共に、所定の合焦度が得られるまでは光線の強度が低くてよいので、消費電力の低減を図ることができ、ハンディ型の装置への搭載に適した画像撮影方法が実現できる。
【0033】
【発明の実施の形態】
以下、本発明の実施の形態として、本発明の画像撮影装置および認証装置について、図面を用いて説明する。
【0034】
図1は、本発明の実施の形態における画像撮影装置および認証装置の構成を示すブロック図である。また、図2は本発明の実施の形態における認証装置の使い方について説明する図である。さらに、図3は本発明の実施の形態における認証装置を搭載した携帯電話装置の外観を示す図である。
【0035】
まず、本発明の画像撮影装置1は、被認証者の眼2を撮影し、焦点の合った眼画像(以下合焦画像と記す)を出力する。また、本発明の認証装置3は、画像撮影装置1から出力された画像から認証情報として虹彩コードを作成し、あらかじめ記憶された登録認証情報と比較照合することによって、被認証者を本人認証する。また、図2に示したように、本発明の認証装置3は、被認証者が筐体を手に持って接近させながら画像撮影および認証を行う。
【0036】
図1に戻って、本発明の実施の形態における画像撮影装置1は、被認証者の眼画像を一定時間毎、例えば30分の1秒毎に撮影することにより、互いに撮影距離の異なる位置での画像を撮影する画像撮影部4、画像撮影部4で撮影された画像の焦点の合い度合い(以下、合焦度と記す)を算出する合焦度算出部5、画像撮影部4に接続され、撮影された画像中に所定の輝度以上の部分が検出された場合に被認証者が眼鏡を着用していると判定する眼鏡着用判定部6、合焦度算出部5で算出された合焦度が所定の閾値以上にあるか否かによって、画像撮影部4で撮影された画像が合焦画像であるか否かを判定する合焦画像判定部7、被認証者の眼2に近赤外光を照射する光線照射部8、光線照射部8から照射される光線の強度を制御する光線照射制御部9、被認証者に対して後述する誘導情報を出力する誘導情報出力部10、および、誘導情報出力部10から出力される誘導情報の出力制御を行う誘導情報出力制御部11を備える。
【0037】
画像撮影部4は、光学系を用いて、一定時間毎に画像を撮影できる公知の装置で実現可能である。
【0038】
合焦度算出部5は、画像撮影部4で撮影された画像毎の高周波数成分を取り出して積分するいわゆるハイパスフィルタを用いることができる。
【0039】
眼鏡着用判定部6は、画像撮影部4で撮影された画像のうち、眼鏡のフレーム等での反射光の影響により、所定の輝度以上の画素が所定の数以上存在する場合に被写体である被認証者が眼鏡をかけていると判定する構成であってもよいし、入力部(図示せず)が眼鏡着用判定部6に接続され、入力部から所定の入力があった場合に被認証者が眼鏡をかけていると判定する構成であってもよい。ここで、所定の入力の方法としては例えば、所定のダイレクトキーの長押しや、スタートキーの二度押し等の各種ユーザが覚えやすい操作を行わせるという方法が実際的である。
【0040】
合焦画像判定部7は、合焦度算出部5で算出された画像毎の合焦度が所定の閾値以上であれば合焦画像であると判定し、所定の閾値以下であれば、合焦画像でないと判定して、合焦画像を出力する。
【0041】
なお、合焦度算出部5、眼鏡着用判定部6および合焦画像判定部7の機能はソフトウェアによっても実現することができる。
【0042】
光線照射部8としては、例えば近赤外光線を発生する公知の発光ダイオード(LED)を用いることができる。
【0043】
誘導情報出力部10は、被認証者に対して、後述のように音や光線等を用いて被認証者の眼2の位置を所定の位置に誘導させる。
【0044】
次に、本発明の認証装置3は、前述した本発明の画像撮影装置1、画像撮影装置1の合焦画像判定部7から出力された合焦画像を記憶する合焦画像記憶部12、合焦画像記憶部12に記憶された画像を用いて公知の方法(例えば、特許文献1に記載の方法を参照。)で認証情報である虹彩コードを作成する認証情報作成部13、記憶部14に記憶された登録認証情報15と認証情報作成部13で作成された認証情報とを比較照合する比較照合部16、および、比較照合部16で比較照合された結果、すなわち一致または不一致のいずれかを表示する表示部17とを備える。
【0045】
合焦画像記憶部12としては公知のフレームメモリ等を用いることができ、記憶部14としては、公知のディスク装置やメモリ等を適宜用いることができる。
【0046】
また、認証情報作成部13における画像からの虹彩コードの作成方法、および、比較照合部16における認証情報同士の比較照合方法については、例えば前述の特許文献1に記載された方法を用いることが可能であるが、本発明の認証装置3はこの方法に限定されるものではなく、パターンマッチング等あらゆる公知の方法を用いて認証情報の作成および照合を行うことができる。
【0047】
さらに、表示部17には、公知の表示手段、例えば液晶ディスプレイやLED等を用いることができる。
【0048】
次に、本発明の認証装置3の各構成は、例えば図3に示す携帯電話装置20の内部に組み込まれて使用される。
【0049】
ここで携帯電話装置20は、音声通話時に使用するマイクロフォン部21およびスピーカ部22、相手先の電話番号の入力、メール等のテキスト情報の入力およびURL等のキー入力を行う入力部であるキー部23、電波の送受信を行うアンテナ部24、液晶ディスプレイ、EL、LED等の表示部17を備えた公知の携帯電話装置に、本発明の実施の形態における認証装置3が搭載されている。なお、本発明の実施の形態における携帯電話装置20として、上側筐体28と下側筐体29とが蝶番部27で折りたたみ自在に連結された構成を示したが、本発明はその形態を限定するものではない。
【0050】
本発明の実施の形態における携帯電話装置20においては、上側筐体28の表示部17の図3において下側に一対の光線照射部8、および、光線照射部8の間に孔部25を有する鏡部26を備え、さらに、孔部25を介して画像撮影部4の光学系が見える構成となっている。ここで一対の光線照射部8を設けたのは、虹彩コードを作成するに充分なコントラストの高い、ぶれの少ない眼画像を撮影するためである。
【0051】
鏡部26は後述するように、被認証者の眼2の位置を所定の位置に誘導するために用いられる。
【0052】
前述したような本発明の実施の形態における認証装置3の動作について、図面を用いて順を追って説明する。
【0053】
図4は、本発明の実施の形態における認証装置3の動作ステップを示すフローチャートである。
【0054】
まず、被認証者がキー部23を操作することによって認証装置3による認証が開始されると、光線照射制御部9は光線照射部8に光線を照射させる。これにより、被認証者の眼2は近赤外光によって照射される(S1)。
【0055】
ここで、被認証者は自分の眼2が鏡部26に映るような位置で黒眼、すなわち眼2の虹彩の部分が孔部25にちょうど重なる位置に、認証装置3を移動させる。これにより、被認証者は、自分の眼2を画像撮影部4の光学系の光軸上に配置することが可能となる。すなわち眼2の位置を、図2におけるX軸方向およびY軸方向に認識可能な位置関係となるよう誘導することができる。さらに被認証者は、図2におけるZ軸方向(紙面に向かって右方向)、すなわち自分に近づけるように認証装置3を移動させる。
【0056】
次に、画像撮影部4は、被認証者が認証装置3を自分に近づけるように移動させる間、一定時間毎、すなわち間欠的に画像の撮影を行う(S2)。
【0057】
撮影された画像は画像撮影部4から合焦度算出部5および眼鏡着用判定部6に送られて、合焦度算出部5においては前述のように画像から高周波数成分を取り出すことによって、合焦度を算出する(S3)。
【0058】
眼鏡着用判定部6では、送られた画像中に所定の輝度以上の画素数をカウントして、カウントされた画素数が所定の閾値以上であった場合に、被認証者が眼鏡を着用していると判定する(S4)。一方、画像は合焦画像判定部7に送られ、後述のように合焦画像であるか否かが判定される。
【0059】
なお、眼鏡着用判定部6として、前述のように接続された入力部からの所定のキー入力が行われた場合に被写体が眼鏡を着用していると判定する構成である場合には、ステップS4において、入力部から所定のキー入力が行われた場合に被写体が眼鏡を着用していると判定する。
【0060】
眼鏡着用判定部6において被認証者が眼鏡を着用しているか否かが判定された結果は合焦画像判定部7に送られ、眼鏡着用の有無に応じて異なる合焦画像の判定がなされる(S5、S6)。
【0061】
次に、本発明の認証装置3の合焦画像判定部7における合焦画像の判定処理内容について、詳細に説明する。
【0062】
図5は、本発明の実施の形態における認証装置3の合焦画像判定部7の機能を説明するための図である。ここでは、被認証者が認証装置3を手に持ち、近づけながら認証を行う場合を例として示す。
【0063】
図5に示したグラフは、画像が撮影された時刻に対する合焦度の関係(以下、合焦度曲線と記す)を示すグラフである。図5に示したグラフにおいては、縦軸は画像毎に合焦度算出部5において、装置を近づけながら所定の時間間隔で撮影した画像の合焦度であり、横軸は画像が撮影された時刻である。なお、ここでは被認証者が認証装置3を近づけながら所定の時間間隔で撮影を行うので横軸は、すなわち撮影距離を示し、向かって右方向(時間が経過する方向)に行くに従って撮影距離は近くなる。
【0064】
図5に示すように、まず、被認証者が眼鏡を着用していない場合、すなわち裸眼の場合には、被認証者が認証装置3を近づけるに従って、破線で示すように、合焦度が徐々に高くなり、虹彩にピントが合った(合焦)状態で極大41を示して、さらに近づけると低下していく。このように、被験者が眼鏡を着用していない裸眼の状態においては、距離の変化にともなう合焦度が示す極大41となる値の数は1つである。
【0065】
このような場合、合焦画像判定部7は図5における破線の合焦度曲線において、初めて所定の閾値TH以上に達した合焦度P1が得られた画像を合焦画像であると判定する(S6)。
【0066】
このようにして合焦画像であると判定された画像の一例を図6(a)に示す。図6(a)に示すように、裸眼における合焦画像51においては、光線照射部8の角膜における反射像30は瞳孔の部分に映りこんでおり、虹彩の領域にはかからない。よって、良好な虹彩の画像を撮影することができる。
【0067】
なお、被認証者が裸眼である場合には、合焦画像判定部7は図5における閾値THの範囲内、すなわち合焦度P1から合焦度P2までの間に撮影された画像を眼の合焦画像51とすればよい。さらに被認証者が認証装置3を近づけながら撮影を行う構成においては、合焦度P1において撮影された画像を眼の合焦画像51としたほうが、眼の合焦画像51の判定を迅速に行うことができる。
【0068】
このように、眼鏡着用判定部6において、被認証者が眼鏡を着用していないと判定された場合には、合焦画像判定部7は、前述の合焦度P1において撮影された画像を合焦画像51とする。なお、被認証者が認証装置3を遠ざけながら撮影を行う構成の場合には、合焦度P2において撮影された画像を眼の合焦画像51としたほうが、合焦画像51の判定を迅速に行うことができることはいうまでもない。このような場合には、合焦画像判定部7は、合焦度P2において撮影された画像を合焦画像51とする。
【0069】
一方、図5に実線で示したように、被認証者が眼鏡を着用している場合においては、被認証者が認証装置3を近づけた場合、合焦度が徐々に高くなり、第1の極大42を超えて低くなった後に極小44を超えると再び高くなり、第2の極大43を示し、その後、低下する。距離を近づけるに従って現れる第1の極大42は眼鏡のフレームやレンズ面等に合焦したことを示す極大であり、次に現れる第2の極大43は虹彩に合焦することによって現れるピークである。
【0070】
よって、前述のステップS4において、眼鏡着用判定部6から合焦画像判定部7に対して、被写体が眼鏡を着用していることを示す信号が送られてきた場合には、合焦画像判定部7は、図5における実線の合焦度曲線において、所定の閾値TH以上の合焦度である画像のうち、第2の極大43における紙面に向かって右側、すなわち距離の近い側の合焦度P5に対応する画像を合焦画像であるとして判定する(S5)。
【0071】
この理由について説明する。図6(b)〜図6(d)は、撮影された眼画像の一例である。
【0072】
図6(b)は、図5における第1の極大42の距離が遠い側(図5における左側)において合焦度が所定の閾値THを超える合焦度P3に対応する画像52である。図6(b)に示したように、画像52は、眼鏡のレンズ面やフレーム等にピントが合っている(合焦している)ために合焦度が高くなっており、虹彩にはピントが合っていない。さらに画像52においては、光線照射部8のレンズ面における映りこみ31が虹彩周辺にかかっており、この影響で虹彩の画像を取得することが難しい。
【0073】
次に、図6(c)は、図5における第2の極大43の遠い側(図5における左側)において合焦度が所定の閾値THを超える合焦度P4に対応する画像53である。画像53においては、虹彩にピントが合っているものの、光線照射部8のレンズ面における映りこみ31が、まだ虹彩付近にかかっており、この影響で虹彩の良好な画像を取得することが難しい。
【0074】
さらに、図6(d)は、被認証者が認証装置3をさらに近づけて、図5における第2の極大43の近い側(図5における右側)において合焦度が閾値THを超えている合焦度P5に対応する画像54である。画像54においては、虹彩にピントが合っていると共に、光線照射部8の映りこみ31は虹彩領域よりも外側の白眼の領域にかかっている。
【0075】
このような、図5における第2の極大43の近い側(図5における右側)における合焦度が閾値THを超える合焦度P5に対応する画像54を合焦画像とすることで、良好な虹彩の画像を撮影することが可能となる。なお、被認証者が認証装置3を近づけながら撮影を行う構成または遠ざけながら撮影を行う構成のいずれの構成においても、前述の合焦度P5に対応する画像54を合焦画像とすることが望ましい。
【0076】
図4に戻って、前述のステップS5およびS6における合焦画像判定が行われた際に、合焦画像が得られていない間には、ステップS2に戻って、さらに画像の撮影が行われる。一方、合焦画像が得られた場合には、合焦画像判定部7から合焦画像記憶部12に合焦画像が送られる(S7)。
【0077】
合焦画像記憶部12に記憶された合焦画像は、認証情報作成部13に送られて、あらかじめ記憶部14に記憶された登録認証情報15と認証情報作成部13で作成された認証情報とが比較照合部16において比較認証されて、その結果が表示部17に表示される(S8)。
【0078】
なお、このステップS8での認証処理については、例えば特許文献1に記載された方法の他、各種公知の方法を用いることができる。
【0079】
なお、光線照射制御部9は、合焦度算出部5において算出された合焦度が所定の閾値LTHを超えた場合に、光線照射部に対して照射する光線の強度を増大させる構成であってもよい。このような構成とすることにより、合焦度が所定の閾値LTH以下である場合には比較的低い強度の光線を照射させるので、装置全体の低消費電力化を図ることが可能となる。
【0080】
また、誘導情報出力制御部11が、合焦度算出部5において算出された合焦度の変化にともなって、異なる誘導情報を出力するように誘導情報出力部10を制御する構成であってもよい。例えば、誘導情報が音である場合に、合焦度が高くなるほど、誘導音の周波数を上げたり、逆に下げたりすれば、被認証者が、自らの距離を誘導しやすい構成が実現できる。
【0081】
なお、本発明の実施の形態の画像撮影装置1は、認証装置3の内部に搭載された構成を用いて説明を行ったが、本発明の画像撮影装置1はこれに限定されず、画像撮影装置単独で用いられたり、他の情報装置等に搭載される構成であってもよいことはいうまでもない。
【0082】
さらに、本発明の実施の形態における画像撮影装置1においては、被認証者が画像撮影装置1を自ら動かして撮影を行う構成を示したが、本発明の画像撮影装置1はこれに限定されず、公知の移動手段によって画像撮影装置1が被写体に対して移動する構成も本発明の画像撮影装置に含まれることはいうまでもない。
【0083】
なお、本発明の実施の形態における画像撮影装置1においては、その被写体が眼鏡をかけている場合にも、良好な眼画像を得ることができる。よって、本発明の実施の形態における認証装置3では、その認証情報を眼画像から作成した虹彩コードであるとして説明を行ったが、本発明の認証装置はこれに限定されず、例えば眼底の血管パターン等、人の眼画像から作成されるあらゆる認証情報を用いることができるのはいうまでもない。
【0084】
【発明の効果】
以上述べたように、本発明によれば、ハンディ型の認証装置において、眼鏡着用判定部を備えているので、被写体が眼鏡を着用しているか否かを判定することができる。さらに、眼鏡着用判定部で被写体が眼鏡を着用していると判定された場合に、合焦度が所定の閾値以上であり、かつ、撮影距離が最も短い画像を合焦画像と判定するので、眼鏡のレンズ面における反射像が眼画像、特に虹彩の画像に及ぼす悪影響を低減でき、良好な虹彩のパターンを有する認証に適した合焦画像を得ることができる画像撮影装置およびそれを用いた認証装置を提供できる。
【図面の簡単な説明】
【図1】本発明の実施の形態における画像撮影装置および認証装置の構成を示すブロック図
【図2】本発明の実施の形態における認証装置の使い方について説明する図
【図3】本発明の実施の形態における認証装置を搭載した携帯電話装置の外観を示す図
【図4】本発明の実施の形態における認証装置の動作ステップを示すフローチャート
【図5】本発明の実施の形態における認証装置の合焦画像判定部の機能を説明するための図
【図6】(a)は本発明の実施の形態における合焦画像であると判定された画像の一例を示す図(b)〜(d)は本発明の実施の形態における実際に撮影された眼画像の一例を示す図
【符号の説明】
1 画像撮影装置
2 (被認証者の)眼
3 認証装置
4 画像撮影部
5 合焦度算出部
6 眼鏡着用判定部
7 合焦画像判定部
8 光線照射部
9 光線照射制御部
10 誘導情報出力部
11 誘導情報出力制御部
12 合焦画像記憶部
13 認証情報作成部
14 記憶部
15 登録認証情報
16 比較照合部
17 表示部
20 携帯電話装置
21 マイクロフォン部
22 スピーカ部
23 キー部
24 アンテナ部
25 孔部
26 鏡部
27 蝶番部
28 上側筐体
29 下側筐体
30 反射像
31 映りこみ
41 極大
42 第1の極大
43 第2の極大
44 極小
51 合焦画像
52〜54 画像
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image capturing apparatus that captures an image of a subject, and an authentication apparatus that authenticates the subject using authentication information acquired from the captured image.
[0002]
[Prior art]
In recent years, when restricting access to important information such as personal information and confidential information, and managing entry / exit to highly secure rooms, it is unique to each human body such as iris, fingerprint, face or retina Authentication apparatuses that perform personal authentication using information (so-called biometric information) as authentication information have been put into practical use.
[0003]
For example, an image of an object around the eye (hereinafter referred to as an eye image) is taken, and authentication information is created by encoding the iris portion of the eye image. The authentication information acquired from the object is registered in advance. An iris authentication technique for authenticating a subject by comparing and verifying the authentication information has been proposed and put into practical use (see, for example, Patent Document 1).
[0004]
In such an authentication device using the iris authentication technology (hereinafter referred to as an “iris authentication device”), various device configurations such as a stationary type and a handy type have been proposed depending on the application. In the iris authentication device used, how to properly guide the position of the eye of the subject to fall within the angle of view of the image capturing unit of the iris authentication device has been a major issue.
[0005]
In order to solve this problem, for example, in a hand-held iris authentication apparatus, two mirrors are arranged in advance at a predetermined position of the iris authentication apparatus, and the person to be authenticated has two eyes of the iris authentication apparatus. There has been proposed a configuration in which the position of the eye can be guided to an appropriate position by moving the apparatus by itself in a position reflected in the mirror (see, for example, Patent Document 2).
[0006]
[Patent Document 1]
Japanese Patent No. 3307936
[Patent Document 2]
JP 2000-207536 A
[0007]
[Problems to be solved by the invention]
However, in the handy type iris authentication apparatus as described above, when the subject who is the person to be authenticated wears glasses, no effective countermeasure has been taken for the detection.
[0008]
Further, in general, in an iris authentication apparatus, in order to capture an image of an iris pattern with high contrast, the eye of the subject is irradiated with near infrared light (wavelength of about 700 nm to about 1000 nm), and a reflection image thereof is captured. For this reason, when the subject wears spectacles, near-infrared light applied to the eye is reflected by the front and back surfaces of the spectacle lens (hereinafter abbreviated as the lens surface) and the reflected image is reflected. Taken. Since this reflection has an adverse effect on the iris portion of the eye image, there is a problem that an image having a good iris pattern cannot be reliably captured.
[0009]
In view of such a problem, the present invention provides an image capturing apparatus capable of detecting when a subject is wearing glasses and capturing a good iris pattern image in a handy type authentication apparatus, and the same An object of the present invention is to provide an authentication device using the.
[0010]
[Means for Solving the Problems]
  An image capturing apparatus according to the present invention includes an image capturing unit that captures an image of a subject at a position where shooting distances are different from each other, and an in-focus degree that calculates a degree of focus of each of a plurality of images captured by the image capturing unit. The plurality of images when the calculation unit, the spectacle wear determination unit that determines whether or not the subject wears spectacles, and the spectacle wear determination unit determine that the subject wears spectacles Among them, an in-focus image determination unit that determines that an image in which the degree of focus is equal to or greater than a predetermined threshold at a position closest to the subject is an in-focus image of the eye, and a light beam irradiation unit that irradiates the subject with a light beam The light beam irradiation control unit increases the intensity of the light beam applied to the light beam irradiation unit when the focus level exceeds a predetermined threshold in the focus level calculation unit. It is a feature.
[0011]
  With such a configuration, since the glasses wearing determination unit is provided, it can be determined whether or not the subject is wearing glasses. Furthermore, when it is determined that the subject wears spectacles in the spectacle wearing determination unit, the degree of focus is equal to or greater than a predetermined threshold and the image with the shortest shooting distance is determined as the focused image. The adverse effect of the reflection image on the lens surface of the spectacles on the eye image, particularly the iris image, can be reduced, and an in-focus image of the eye having a good iris pattern can be obtained. Furthermore, the intensity of the light beam applied to the light beam irradiation unit can be increased, and the intensity of the light beam is increased in the light beam irradiation unit after the degree of focus exceeds a predetermined threshold. It is possible to shoot an image and the intensity of the light beam may be low until a predetermined degree of focus is obtained, so that power consumption can be reduced, and image shooting suitable for mounting on a handheld device. A device can be realized.
[0012]
  Next, the image capturing apparatus of the present invention calculates an in-focus level of an image capturing unit that captures an image of a subject at a position where the shooting distance is different from each other, and a plurality of images captured by the image capturing unit. A degree-of-focus calculation unit, a spectacle wearing determination unit that determines whether or not the subject is wearing spectacles, and when the spectacle wearing determination unit determines that the subject is wearing spectacles, Among the plurality of images, the relationship between the shooting distance and the degree of focus of the image is such that the focus degree changes to show the first maximum as the subject approaches, and then shows the second maximum. A focused image that, when changed, determines that an image in which the degree of focus is equal to or greater than a predetermined threshold and the shooting distance is closer than the shooting distance corresponding to the second maximum is the focused image of the eye. Judgment part and,
A light beam irradiation unit configured to irradiate the subject with a light beam, and the light beam irradiation control unit irradiates the light beam irradiation unit when the focus level exceeds a predetermined threshold in the focus level calculation unit. It is characterized by increasing the intensity of light rays.
[0013]
  With such a configuration, since the glasses wearing determination unit is provided, it can be determined whether or not the subject is wearing glasses. Further, when the spectacle wearing determination unit determines that the subject wears spectacles, the degree of focus is equal to or greater than a predetermined threshold, and the shooting distance is closer than the shooting distance corresponding to the second maximum. Since the image is determined to be an in-focus image, it is possible to obtain a good eye-focused image in which the adverse effect of the reflected image on the lens surface of the spectacles on the eye image, particularly the iris image, is reduced. Furthermore, the intensity of the light beam applied to the light beam irradiation unit can be increased, and the intensity of the light beam is increased in the light beam irradiation unit after the degree of focus exceeds a predetermined threshold. It is possible to shoot an image and the intensity of the light beam may be low until a predetermined degree of focus is obtained, so that power consumption can be reduced, and image shooting suitable for mounting on a handheld device. A device can be realized.
[0014]
In addition, when the spectacle wearing determination unit determines that the subject does not wear spectacles, the in-focus image determination unit has a degree of focus equal to or greater than a predetermined threshold at a position farthest from the subject among the plurality of images. According to the configuration in which it is determined that the image to be an in-focus image is an eye-focused image, it is possible to obtain a focused image with a good iris pattern when the subject is a naked eye who is not wearing glasses. Regardless of the presence or absence of the image, it is possible to obtain a focused image of the eye suitable for authentication.
[0015]
The glasses wearing determination unit is configured to determine that the subject is wearing glasses when there are a predetermined number or more of pixels having a predetermined luminance or higher among images captured by the image capturing unit. Also good.
[0016]
According to such a configuration, it is possible to determine whether or not the person to be authenticated wears glasses without performing input or the like by the person to be authenticated who is the subject.
[0017]
Further, an input unit connected to the spectacle wearing determination unit may be provided, and the spectacle wearing determination unit may determine that the subject wears spectacles when a predetermined input is made to the input unit. .
[0018]
By adopting such a configuration, it is possible to determine wearing of glasses with a simple configuration, and an image capturing apparatus that is easy for the user to use can be realized.
[0023]
Moreover, the structure provided with the guidance information output part which outputs the guidance information which guide | induces a photographing distance to the distance which can obtain a focused image with respect to a to-be-photographed object may be sufficient.
[0024]
With such a configuration, guidance information for guiding the person to be authenticated to a position where a focused image can be obtained is output. The burden at the time of moving to the position where can be obtained can be reduced.
[0025]
Further, a guidance information output control unit that causes the guidance information output unit to modulate and output the frequency of the voice information based on the level of the focus degree calculated by the focus degree calculation unit is information by voice. The structure provided may be sufficient.
[0026]
By adopting such a configuration, it is possible to realize a configuration in which the frequency of the voice information increases as the degree of focus increases, and conversely, a configuration in which the frequency decreases. Therefore, a guidance method with less burden on the person to be authenticated can be realized.
[0027]
Furthermore, the structure by which the irradiation light irradiated from a light irradiation part is near infrared light may be sufficient.
[0028]
With such a configuration, it is possible to capture a high-contrast image of the iris.
[0029]
Next, the authentication device of the present invention is stored in the above-described image photographing device of the present invention, the focused image storage unit that stores the focused image determined by the focused image determination unit, and the focused image storage unit. An authentication information creation unit that creates authentication information from a focused image, and a comparison / collation unit that compares and collates pre-registered registration authentication information and authentication information created by the authentication information creation unit. .
[0030]
With such a configuration, it is possible to detect the eyeglasses of the person to be authenticated with a simple configuration, and it is possible to capture a good eye image even when the glasses are worn, and a small authentication device with a high authentication rate. realizable.
[0031]
The authentication information creation unit may be configured to create authentication information by coding an iris image obtained from the image of the person to be authenticated.
[0032]
  With such a configuration, a high authentication rate can be realized using authentication information obtained by encoding an iris image.
  Next, according to the image capturing method of the present invention, an image capturing step of capturing an image of a subject at a position where the capturing distance is different from each other, and a degree of focus of each of the plurality of images captured in the image capturing step are calculated. When it is determined that the subject wears spectacles in the in-focus degree calculation step, the spectacle wear determination step that determines whether or not the subject wears spectacles, and the spectacle wear determination step, Of the plurality of images, an in-focus image determination step for determining that an in-focus image is equal to or greater than a predetermined threshold at a position closest to the subject is an eye-focused image, and irradiating the subject with light rays A light beam irradiation step, wherein the light beam irradiation control step is performed when the focus degree exceeds a predetermined threshold in the focus degree calculation step. It is characterized by increasing the intensity of the irradiated light.
With such a configuration, since the glasses wearing determination step is provided, it can be determined whether or not the subject wears glasses. Furthermore, when it is determined in the spectacle wearing determination step that the subject is wearing spectacles, the degree of focus is equal to or greater than a predetermined threshold and the image with the shortest shooting distance is determined as the focused image. The adverse effect of the reflection image on the lens surface of the spectacles on the eye image, particularly the iris image, can be reduced, and an in-focus image of the eye having a good iris pattern can be obtained. Furthermore, the intensity of the light beam applied to the light beam irradiation step can be increased, and the intensity of the light beam is increased in the light beam irradiation step after the in-focus degree exceeds a predetermined threshold value. It is possible to shoot an image and the intensity of the light beam may be low until a predetermined degree of focus is obtained, so that power consumption can be reduced, and image shooting suitable for mounting on a handheld device. A method can be realized.
[0033]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, as an embodiment of the present invention, an image photographing device and an authentication device of the present invention will be described with reference to the drawings.
[0034]
FIG. 1 is a block diagram showing a configuration of an image capturing device and an authentication device according to an embodiment of the present invention. FIG. 2 is a diagram for explaining how to use the authentication apparatus according to the embodiment of the present invention. Further, FIG. 3 is a diagram showing an external appearance of a mobile phone device equipped with the authentication device according to the embodiment of the present invention.
[0035]
First, the image photographing device 1 of the present invention photographs the eye 2 of the person to be authenticated and outputs a focused eye image (hereinafter referred to as a focused image). Further, the authentication device 3 of the present invention authenticates the person to be authenticated by creating an iris code as authentication information from the image output from the image capturing device 1 and comparing it with registered authentication information stored in advance. . As shown in FIG. 2, the authentication device 3 of the present invention performs image shooting and authentication while the person to be authenticated holds the casing in his hand.
[0036]
Returning to FIG. 1, the image capturing apparatus 1 according to the embodiment of the present invention captures an eye image of a person to be authenticated at a fixed time, for example, every 1/30 second, at a position where the shooting distance is different from each other. Connected to the image photographing unit 4 for photographing the image, the focus degree calculating unit 5 for calculating the degree of focus of the image photographed by the image photographing unit 4 (hereinafter referred to as the degree of focus), and the image photographing unit 4. The focus calculated by the eyeglass wear determination unit 6 and the focus degree calculation unit 5 that determines that the person to be authenticated wears the glasses when a portion having a predetermined luminance or higher is detected in the captured image. The in-focus image determination unit 7 that determines whether the image captured by the image capturing unit 4 is a focused image, depending on whether or not the degree is equal to or greater than a predetermined threshold value. A light beam irradiating unit 8 for irradiating external light, and a light beam controlling the intensity of the light beam emitted from the light beam irradiating unit 8 Control unit 9, the guidance information output unit 10 for outputting guidance information to be described later with respect to the person to be authenticated, and includes a guidance information output control section 11 for controlling the output of the guide information outputted from the guide information output section 10.
[0037]
The image photographing unit 4 can be realized by a known device capable of photographing an image at regular intervals using an optical system.
[0038]
The in-focus degree calculation unit 5 can use a so-called high-pass filter that extracts and integrates a high-frequency component for each image captured by the image capturing unit 4.
[0039]
The spectacle wearing determination unit 6 is a subject to be detected when there are a predetermined number or more of pixels having a predetermined luminance or higher due to the influence of reflected light from a frame of the spectacles or the like in the image captured by the image capturing unit 4. The configuration may be such that it is determined that the certifier is wearing glasses, or the input unit (not shown) is connected to the spectacle wear determination unit 6 and a predetermined input is received from the input unit May be configured to determine that the user is wearing glasses. Here, as a predetermined input method, for example, a method of causing various users to easily perform operations such as long press of a predetermined direct key or double press of a start key is practical.
[0040]
The in-focus image determining unit 7 determines that the image is an in-focus image if the in-focus degree calculated by the in-focus level calculating unit 5 is equal to or greater than a predetermined threshold value. It is determined that the image is not a focused image, and the focused image is output.
[0041]
Note that the functions of the in-focus degree calculation unit 5, the spectacle wearing determination unit 6, and the in-focus image determination unit 7 can also be realized by software.
[0042]
As the light irradiation unit 8, for example, a known light emitting diode (LED) that generates near infrared light can be used.
[0043]
The guidance information output unit 10 causes the person to be authenticated to guide the position of the eye 2 of the person to be authenticated to a predetermined position using sound, light, or the like as will be described later.
[0044]
Next, the authentication device 3 of the present invention includes an image capturing device 1 according to the present invention, a focused image storage unit 12 that stores a focused image output from the focused image determination unit 7 of the image capturing device 1, and an in-focus image storage unit 12. Using the image stored in the focal image storage unit 12, the authentication information generation unit 13 that generates an iris code as authentication information by a known method (see, for example, the method described in Patent Document 1), and the storage unit 14 A comparison / collation unit 16 for comparing and collating the stored registration authentication information 15 and the authentication information created by the authentication information creating unit 13, and a result of comparison / collation by the comparison / collation unit 16, that is, either match or mismatch And a display unit 17 for displaying.
[0045]
A known frame memory or the like can be used as the focused image storage unit 12, and a known disk device or memory can be used as the storage unit 14 as appropriate.
[0046]
For the method for creating an iris code from an image in the authentication information creating unit 13 and the method for comparing and collating authentication information with each other in the comparison and collation unit 16, for example, the method described in Patent Document 1 can be used. However, the authentication device 3 of the present invention is not limited to this method, and authentication information can be created and verified using any known method such as pattern matching.
[0047]
Furthermore, a well-known display means, for example, a liquid crystal display, LED, etc. can be used for the display part 17. FIG.
[0048]
Next, each configuration of the authentication device 3 of the present invention is used by being incorporated in, for example, the mobile phone device 20 shown in FIG.
[0049]
Here, the cellular phone device 20 includes a microphone unit 21 and a speaker unit 22 used during a voice call, a key unit which is an input unit for inputting a destination telephone number, inputting text information such as mail, and inputting a key such as a URL. 23. The authentication device 3 according to the embodiment of the present invention is mounted on a known mobile phone device that includes a display unit 17 such as an antenna unit 24 that transmits and receives radio waves, a liquid crystal display, an EL, and an LED. Although the mobile phone device 20 according to the embodiment of the present invention has a configuration in which the upper housing 28 and the lower housing 29 are foldably connected to each other by the hinge portion 27, the present invention is limited in its form. Not what you want.
[0050]
In the mobile phone device 20 according to the embodiment of the present invention, a pair of light beam irradiation units 8 is provided on the lower side of the display unit 17 of the upper housing 28 in FIG. 3, and a hole 25 is provided between the light beam irradiation units 8. A mirror unit 26 is provided, and the optical system of the image capturing unit 4 can be seen through the hole 25. Here, the pair of light beam irradiation units 8 is provided in order to capture an eye image with high contrast and less blur sufficient to create an iris code.
[0051]
As will be described later, the mirror unit 26 is used to guide the position of the eye 2 of the person to be authenticated to a predetermined position.
[0052]
The operation of the authentication device 3 in the embodiment of the present invention as described above will be described in order with reference to the drawings.
[0053]
FIG. 4 is a flowchart showing the operation steps of the authentication device 3 in the embodiment of the present invention.
[0054]
First, when authentication by the authentication device 3 is started by the person to be authenticated operating the key unit 23, the light irradiation control unit 9 causes the light irradiation unit 8 to emit light. Accordingly, the eye 2 of the person to be authenticated is irradiated with near infrared light (S1).
[0055]
Here, the person to be authenticated moves the authentication device 3 to a position where his / her eye 2 is reflected on the mirror part 26 to a position where the iris part of the eye 2 just overlaps the hole 25. As a result, the person to be authenticated can place his / her eye 2 on the optical axis of the optical system of the image photographing unit 4. That is, the position of the eye 2 can be guided so as to be in a positional relationship that can be recognized in the X-axis direction and the Y-axis direction in FIG. Further, the person to be authenticated moves the authentication device 3 so as to approach the Z-axis direction in FIG.
[0056]
Next, the image capturing unit 4 captures an image at regular time intervals, that is, intermittently while the authentication subject moves the authentication device 3 so as to approach the user (S2).
[0057]
The photographed image is sent from the image photographing unit 4 to the in-focus degree calculating unit 5 and the spectacle wearing determining unit 6, and the in-focus degree calculating unit 5 extracts the high frequency component from the image as described above. The degree of focus is calculated (S3).
[0058]
The glasses wear determination unit 6 counts the number of pixels having a predetermined luminance or higher in the sent image, and if the counted number of pixels is equal to or greater than a predetermined threshold, the person to be authenticated wears glasses. (S4). On the other hand, the image is sent to the focused image determination unit 7, and it is determined whether or not it is a focused image as will be described later.
[0059]
When the spectacle wearing determination unit 6 is configured to determine that the subject is wearing spectacles when a predetermined key input is performed from the input unit connected as described above, the step S4 is performed. When the predetermined key input is performed from the input unit, it is determined that the subject wears glasses.
[0060]
The result of determining whether or not the person to be authenticated is wearing glasses is sent to the focused image determination unit 7 in the glasses wearing determination unit 6, and different focused images are determined depending on whether or not glasses are worn. (S5, S6).
[0061]
Next, the details of the focused image determination process in the focused image determination unit 7 of the authentication device 3 of the present invention will be described in detail.
[0062]
FIG. 5 is a diagram for explaining the function of the focused image determination unit 7 of the authentication device 3 according to the embodiment of the present invention. Here, as an example, a case where the person to be authenticated holds the authentication apparatus 3 in his hand and performs authentication while approaching the authentication apparatus 3 is shown.
[0063]
The graph shown in FIG. 5 is a graph showing the relationship of the degree of focus with respect to the time when the image was taken (hereinafter referred to as the focus degree curve). In the graph shown in FIG. 5, the vertical axis represents the degree of focus of an image photographed at a predetermined time interval while bringing the device close to the focus degree calculation unit 5 for each image, and the horizontal axis represents the image photographed. It's time. Here, since the person to be authenticated performs photographing at a predetermined time interval while bringing the authentication device 3 closer, the horizontal axis indicates the photographing distance, and the photographing distance increases in the right direction (the direction in which time elapses). Get closer.
[0064]
As shown in FIG. 5, first, when the person to be authenticated does not wear glasses, that is, in the case of the naked eye, the degree of focus gradually increases as the person to be authenticated moves closer to the authentication device 3 as shown by the broken line. The maximum 41 is shown in a state where the iris is in focus (focused), and decreases as the iris approaches further. Thus, in the state of the naked eye where the subject is not wearing glasses, the number of values that becomes the maximum 41 indicated by the degree of focus with the change in distance is one.
[0065]
In such a case, the in-focus image determination unit 7 determines that the image obtained with the in-focus degree P1 that has reached the predetermined threshold value TH for the first time on the in-focus level curve in FIG. 5 is the in-focus image. (S6).
[0066]
An example of an image determined as a focused image in this way is shown in FIG. As shown in FIG. 6A, in the focused image 51 with the naked eye, the reflection image 30 on the cornea of the light irradiation unit 8 is reflected in the pupil portion and does not cover the iris region. Therefore, a good iris image can be taken.
[0067]
When the person to be authenticated is naked eye, the in-focus image determination unit 7 captures images taken within the range of the threshold TH in FIG. 5, that is, between the in-focus level P1 and the in-focus level P2. The focused image 51 may be used. Further, in the configuration in which the person to be authenticated takes a picture while approaching the authentication device 3, the eye-focused image 51 is more quickly determined when the image shot at the focus P <b> 1 is the eye-focused image 51. be able to.
[0068]
As described above, when the spectacle wear determination unit 6 determines that the person to be authenticated does not wear spectacles, the focused image determination unit 7 matches the image captured at the above-described focus degree P1. A focused image 51 is assumed. In the case where the person to be authenticated is configured to take an image while moving away from the authentication device 3, the in-focus image 51 can be determined more quickly if the image taken at the in-focus degree P <b> 2 is the in-focus image 51. It goes without saying that it can be done. In such a case, the focused image determination unit 7 sets the image captured at the focus level P2 as the focused image 51.
[0069]
On the other hand, as shown by a solid line in FIG. 5, when the person to be authenticated wears glasses, when the person to be authenticated brings the authentication device 3 closer, the degree of focus gradually increases, and the first When the value exceeds the minimum 42 and then exceeds the minimum 44, the value increases again, indicating the second maximum 43, and then decreases. The first maximum 42 that appears as the distance is reduced is a maximum that indicates that the frame or lens surface of the glasses is in focus, and the second maximum 43 that appears next is a peak that appears when the iris is focused.
[0070]
Therefore, in the above-described step S4, when a signal indicating that the subject is wearing glasses is sent from the glasses wearing determination unit 6 to the focused image determining unit 7, the focused image determining unit 7 is a solid line focus degree curve in FIG. 5, and among the images having a focus degree equal to or greater than a predetermined threshold TH, the focus degree on the right side, that is, the side closer to the distance in the second maximum 43. It is determined that the image corresponding to P5 is a focused image (S5).
[0071]
The reason for this will be described. 6B to 6D are examples of photographed eye images.
[0072]
FIG. 6B is an image 52 corresponding to the focus degree P3 in which the focus degree exceeds the predetermined threshold TH on the side where the distance of the first maximum 42 in FIG. 5 is far (the left side in FIG. 5). As shown in FIG. 6B, the image 52 has a high degree of focus because it is in focus (focused) on the lens surface of the glasses, the frame, etc., and is not in focus on the iris. Is not right. Further, in the image 52, the reflection 31 on the lens surface of the light irradiation unit 8 is applied to the periphery of the iris, and it is difficult to acquire an iris image due to this influence.
[0073]
Next, FIG. 6C is an image 53 corresponding to the focus degree P4 at which the focus degree exceeds the predetermined threshold TH on the far side (left side in FIG. 5) of the second maximum 43 in FIG. In the image 53, although the iris is in focus, the reflection 31 on the lens surface of the light irradiation unit 8 is still in the vicinity of the iris, and it is difficult to obtain a good image of the iris due to this influence.
[0074]
Further, FIG. 6D shows that the person to be authenticated brings the authentication device 3 closer and the degree of focus exceeds the threshold TH on the side closer to the second maximum 43 in FIG. 5 (right side in FIG. 5). It is the image 54 corresponding to the degree of focus P5. In the image 54, the iris is in focus and the reflection 31 of the light irradiation unit 8 covers the white-eye area outside the iris area.
[0075]
Such an image 54 corresponding to the degree of focus P5 in which the degree of focus on the near side (right side in FIG. 5) of the second maximum 43 in FIG. An iris image can be taken. It should be noted that the image 54 corresponding to the above-described focus degree P5 is preferably used as the in-focus image in any of the configurations in which the person to be authenticated performs shooting while approaching the authentication device 3 or performs shooting while moving away. .
[0076]
Returning to FIG. 4, when the focused image determination in steps S5 and S6 described above is performed, while the focused image is not obtained, the process returns to step S2 to further shoot an image. On the other hand, when a focused image is obtained, the focused image is sent from the focused image determination unit 7 to the focused image storage unit 12 (S7).
[0077]
The in-focus image stored in the in-focus image storage unit 12 is sent to the authentication information creation unit 13, and the registration authentication information 15 stored in the storage unit 14 in advance and the authentication information created in the authentication information creation unit 13 Is compared and authenticated by the comparison / collation unit 16, and the result is displayed on the display unit 17 (S8).
[0078]
In addition, about the authentication process in this step S8, various well-known methods other than the method described in patent document 1 can be used, for example.
[0079]
The light beam irradiation control unit 9 is configured to increase the intensity of the light beam applied to the light beam irradiation unit when the focus level calculated by the focus level calculation unit 5 exceeds a predetermined threshold LTH. May be. With such a configuration, when the in-focus degree is equal to or less than the predetermined threshold value LTH, a light beam having a relatively low intensity is irradiated, so that the power consumption of the entire apparatus can be reduced.
[0080]
Moreover, even if the guidance information output control unit 11 controls the guidance information output unit 10 to output different guidance information in accordance with the change in the degree of focus calculated by the focus degree calculation unit 5. Good. For example, when the guidance information is sound, a configuration in which the person to be authenticated can easily guide his / her distance can be realized by increasing or decreasing the frequency of the guidance sound as the degree of focus increases.
[0081]
Note that the image capturing device 1 according to the embodiment of the present invention has been described using the configuration mounted inside the authentication device 3, but the image capturing device 1 of the present invention is not limited to this, and the image capturing is performed. Needless to say, the device may be used alone or mounted on another information device or the like.
[0082]
Furthermore, in the image photographing device 1 according to the embodiment of the present invention, the configuration in which the person to be authenticated performs photographing by moving the image photographing device 1 by himself / herself is shown, but the image photographing device 1 of the present invention is not limited to this. Needless to say, the image photographing apparatus of the present invention also includes a configuration in which the image photographing apparatus 1 is moved relative to the subject by a known moving means.
[0083]
It should be noted that the image photographing apparatus 1 according to the embodiment of the present invention can obtain a good eye image even when the subject is wearing glasses. Therefore, in the authentication device 3 according to the embodiment of the present invention, the authentication information has been described as an iris code created from an eye image. However, the authentication device of the present invention is not limited to this, for example, blood vessels in the fundus It goes without saying that any authentication information created from a human eye image such as a pattern can be used.
[0084]
【The invention's effect】
As described above, according to the present invention, the hand-held type authentication device includes the spectacle wearing determination unit, so that it can be determined whether or not the subject is wearing spectacles. Furthermore, when it is determined that the subject wears spectacles in the spectacle wearing determination unit, the degree of focus is equal to or greater than a predetermined threshold and the image with the shortest shooting distance is determined as the focused image. Image photographing apparatus capable of reducing adverse effect of reflected image on lens surface of eyeglass on eye image, particularly iris image, and obtaining focused image suitable for authentication having good iris pattern, and authentication using the same Equipment can be provided.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration of an image capturing device and an authentication device according to an embodiment of the present invention.
FIG. 2 is a diagram for explaining how to use the authentication device according to the embodiment of the present invention;
FIG. 3 is a diagram showing an external appearance of a mobile phone device equipped with an authentication device according to an embodiment of the present invention.
FIG. 4 is a flowchart showing operation steps of the authentication device in the embodiment of the present invention.
FIG. 5 is a diagram for explaining a function of a focused image determination unit of the authentication device according to the embodiment of the present invention;
6A is a diagram illustrating an example of an image determined to be a focused image in the embodiment of the present invention. FIGS. 6B to 6D are actually taken in the embodiment of the present invention. The figure which shows an example of an eye image
[Explanation of symbols]
1 Image capture device
2 Eyes of the person to be authenticated
3 Authentication device
4 Image shooting unit
5 Degree of focus calculation unit
6 Glasses wear determination part
7 Focused image determination unit
8 Light irradiation part
9 Light irradiation control unit
10 Guidance information output section
11 Guide information output controller
12 Focused image storage unit
13 Authentication information generator
14 Storage unit
15 Registration Authentication Information
16 Comparison verification part
17 Display
20 Mobile phone device
21 Microphone part
22 Speaker section
23 Key part
24 Antenna section
25 holes
26 mirror part
27 Hinge
28 Upper case
29 Lower housing
30 Reflected image
31 Reflection
41 maximum
42 First maximum
43 Second maximum
44 Minimal
51 Focused image
52-54 images

Claims (11)

互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影部と、
前記画像撮影部で撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出部と、
前記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定部と、
前記眼鏡着用判定部において前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記被写体に最も近い位置において前記合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定する合焦画像判定部と
前記被写体に光線を照射する光線照射部とを備え、
前記光線照射制御部は、前記合焦度算出部において前記合焦度が所定の閾値を超えた場合に、前記光線照射部に対して照射する光線の強さを増大させることを特徴とする画像撮影装置。
An image capturing unit that captures an image of a subject at a position where the shooting distance differs from each other;
A degree-of-focus calculator that calculates the degree of focus of each of the plurality of images captured by the image capturing unit;
A spectacle wearing determination unit for determining whether the subject is wearing spectacles;
When the spectacle wearing determination unit determines that the subject is wearing spectacles, among the plurality of images, an image whose focus is equal to or greater than a predetermined threshold at a position closest to the subject is viewed An in-focus image determining unit that determines that the image is an in-focus image ;
A light irradiation unit for irradiating the subject with light,
The light irradiation control unit increases the intensity of light irradiated to the light beam irradiation unit when the focus level exceeds a predetermined threshold in the focus level calculation unit. Shooting device.
互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影部と、
前記画像撮影部で撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出部と、
前記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定部と、
前記眼鏡着用判定部において前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記撮影距離と前記画像の合焦度との関係において、前記被写体が近づくに従って前記合焦度が第1の極大を示すように変化した後に第2の極大を示すように変化したとき、前記合焦度が所定の閾値以上であり、かつ、前記撮影距離が前記第2の極大に対応する撮影距離よりも近い画像を眼の合焦画像であると判定する合焦画像判定部と
前記被写体に光線を照射する光線照射部とを備え、
前記光線照射制御部は、前記合焦度算出部において前記合焦度が所定の閾値を超えた場合に、前記光線照射部に対して照射する光線の強さを増大させることを特徴とする画像撮影装置。
An image capturing unit that captures an image of a subject at a position where the shooting distance differs from each other;
A degree-of-focus calculator that calculates the degree of focus of each of the plurality of images captured by the image capturing unit;
A spectacle wearing determination unit for determining whether the subject is wearing spectacles;
When the subject wear determination unit determines that the subject is wearing eyeglasses, the relationship between the shooting distance and the degree of focus of the image among the plurality of images increases as the subject approaches. When the degree of focus changes to show the first maximum and then changes to show the second maximum, the degree of focus is equal to or greater than a predetermined threshold, and the shooting distance is the second maximum. An in-focus image determining unit that determines that an image closer than the shooting distance corresponding to is an in-focus image of the eye ;
A light irradiation unit for irradiating the subject with light,
The light irradiation control unit increases the intensity of light irradiated to the light beam irradiation unit when the focus level exceeds a predetermined threshold in the focus level calculation unit. Shooting device.
前記眼鏡着用判定部において前記被写体が眼鏡を着用していないと判定された場合に、前記合焦画像判定部は、前記複数の画像のうち、前記被写体から最も離れた位置において前記合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定することを特徴とする請求項1または請求項2に記載の画像撮影装置。  When it is determined in the glasses wearing determination unit that the subject does not wear glasses, the in-focus image determining unit has the focus degree at a position farthest from the subject among the plurality of images. The image capturing apparatus according to claim 1, wherein an image having a predetermined threshold value or more is determined to be an in-focus image of the eye. 前記眼鏡着用判定部は、前記画像撮影部で撮影された画像のうち、所定の輝度以上の画素が所定の数以上存在する場合に、前記被写体が眼鏡を着用していると判定することを特徴とする請求項1から請求項3までのいずれか1項に記載の画像撮影装置。  The glasses wearing determination unit determines that the subject is wearing glasses when there are a predetermined number or more of pixels having a predetermined luminance or higher among images captured by the image capturing unit. The image photographing device according to any one of claims 1 to 3. 前記眼鏡着用判定部に接続された入力部を備え、前記入力部に所定の入力が行われた場合に、前記眼鏡着用判定部は前記被写体が眼鏡を着用していると判定することを特徴とする請求項1から請求項3までのいずれか1項に記載の画像撮影装置。  An input unit connected to the glasses wearing determination unit, and when a predetermined input is made to the input unit, the glasses wearing determination unit determines that the subject is wearing glasses; The image photographing device according to any one of claims 1 to 3. 前記被写体に対して、前記撮影距離を前記合焦画像を得られるような距離に誘導する誘導情報を出力する誘導情報出力部を備えたことを特徴とする請求項1から請求項までのいずれか1項に記載の画像撮影装置。With respect to the subject, any of the object distance from claim 1, characterized in that with a guidance information output unit for outputting the guidance information to guide a distance as obtained with the focusing image to claim 5 The image capturing device according to claim 1. 前記誘導情報が音声による情報であり、前記合焦度算出部で算出された合焦度の高低にもとづいて、前記誘導情報出力部に前記音声情報の周波数を変調させて出力させる誘導情報出力制御部を備えたことを特徴とする請求項に記載の画像撮影装置。Guidance information output control for causing the guidance information output unit to modulate and output the frequency of the voice information based on the degree of focus calculated by the focus degree calculation unit, wherein the guidance information is information by voice. The image photographing device according to claim 6 , further comprising a unit. 前記光線照射部から照射される照射光が近赤外光であることを特徴とする請求項に記載の画像撮影装置。The image photographing apparatus according to claim 7 , wherein the irradiation light irradiated from the light beam irradiation unit is near infrared light. 請求項1から請求項までのいずれか1項に記載の画像撮影装置と、
前記合焦画像判定部で判定された前記合焦画像を記憶する合焦画像記憶部と、
前記合焦画像記憶部に記憶された前記合焦画像から認証情報を作成する認証情報作成部と、
あらかじめ登録された登録認証情報と前記認証情報作成部で作成された前記認証情報とを比較照合する比較照合部とを備えたことを特徴とする認証装置。
The image photographing device according to any one of claims 1 to 8 ,
A focused image storage unit for storing the focused image determined by the focused image determination unit;
An authentication information creating unit that creates authentication information from the focused image stored in the focused image storage unit;
An authentication apparatus comprising: a comparison / collation unit that compares and collates pre-registered registration authentication information and the authentication information created by the authentication information creation unit.
前記認証情報作成部は、前記被写体の画像から得られる虹彩画像をコード化することにより前記認証情報を作成することを特徴とする請求項に記載の認証装置。The authentication apparatus according to claim 9 , wherein the authentication information creating unit creates the authentication information by encoding an iris image obtained from the image of the subject. 互いに撮影距離の異なる位置での被写体の画像を撮影する画像撮影ステップと、An image capturing step for capturing images of the subject at different shooting distances;
前記画像撮影ステップで撮影された複数の画像のそれぞれの合焦度を算出する合焦度算出ステップと、  A degree-of-focus calculation step of calculating the degree of focus of each of the plurality of images photographed in the image photographing step;
前記被写体が眼鏡を着用しているか否かを判定する眼鏡着用判定ステップと、  Glasses wearing determination step for determining whether or not the subject is wearing glasses;
前記眼鏡着用判定ステップにおいて前記被写体が眼鏡を着用していると判定された場合に、前記複数の画像のうち、前記被写体に最も近い位置において前記合焦度が所定の閾値以上となる画像を眼の合焦画像であると判定する合焦画像判定ステップと、  When it is determined in the spectacle wearing determination step that the subject wears spectacles, an image of which the in-focus level is equal to or greater than a predetermined threshold at the position closest to the subject among the plurality of images. A focused image determination step for determining that the image is a focused image of
前記被写体に光線を照射する光線照射ステップとを備え、  A light beam irradiation step for irradiating the subject with a light beam,
前記光線照射制御ステップは、前記合焦度算出ステップにおいて前記合焦度が所定の閾値を超えた場合に、前記光線照射ステップに対して照射する光線の強さを増大させることを特徴とする画像撮影方法。  The light irradiation control step increases the intensity of light irradiated to the light beam irradiation step when the focus level exceeds a predetermined threshold in the focus level calculation step. Shooting method.
JP2003120016A 2003-04-24 2003-04-24 Image photographing device, image photographing method, and authentication device Expired - Fee Related JP4254330B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003120016A JP4254330B2 (en) 2003-04-24 2003-04-24 Image photographing device, image photographing method, and authentication device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003120016A JP4254330B2 (en) 2003-04-24 2003-04-24 Image photographing device, image photographing method, and authentication device

Publications (2)

Publication Number Publication Date
JP2004328367A JP2004328367A (en) 2004-11-18
JP4254330B2 true JP4254330B2 (en) 2009-04-15

Family

ID=33499061

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003120016A Expired - Fee Related JP4254330B2 (en) 2003-04-24 2003-04-24 Image photographing device, image photographing method, and authentication device

Country Status (1)

Country Link
JP (1) JP4254330B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006338236A (en) * 2005-06-01 2006-12-14 Matsushita Electric Ind Co Ltd Eye image imaging device and authentication device using the same
JP2008015884A (en) * 2006-07-07 2008-01-24 Oki Electric Ind Co Ltd Iris authentication system
JP2017134657A (en) * 2016-01-28 2017-08-03 富士通株式会社 Iris authentication control device, iris authentication control method, and iris authentication control program
JP7306901B2 (en) 2019-07-12 2023-07-11 株式会社ディスコ Camera tilt adjustment method
JPWO2022208606A1 (en) * 2021-03-29 2022-10-06

Also Published As

Publication number Publication date
JP2004328367A (en) 2004-11-18

Similar Documents

Publication Publication Date Title
US9798927B2 (en) Mobile terminal iris recognition method and device having human-computer interaction mechanism
JP2006338236A (en) Eye image imaging device and authentication device using the same
JP3642336B2 (en) Eye imaging device
JP3562970B2 (en) Biological identification device
JPWO2006088042A1 (en) Biometric device, authentication device, and biometric method
US20060039686A1 (en) Line-of-sight-based authentication apparatus and method
EP2005888A9 (en) Imaging device and authentication device using the same
JP3879719B2 (en) Image input device and authentication device using the same
US11238143B2 (en) Method and system for authenticating a user on a wearable heads-up display
KR20150033572A (en) Tracking optics system for a mobile device
MXPA01005027A (en) Iris imaging telephone security module and method.
JP2017129981A (en) Biometric authentication device and control method thereof
JP2007135149A (en) Mobile portable terminal
EP3227816A1 (en) System and method for mobile device biometric add-on
JP2007319175A (en) Photographing device and authentication device using the same
JP2006212185A (en) Living body discrimination device, authentication apparatus and living body discrimination method
JP4254330B2 (en) Image photographing device, image photographing method, and authentication device
JP2007159610A (en) Registration device, authentication device, registration authentication device, registration method, authentication method, registration program, and authentication program
JP2007159762A (en) Distance measuring equipment for biometric authentication system and biometric authentication system
JP2006318374A (en) Glasses determination device, authentication device, and glasses determination method
JP2006141589A (en) Personal authentication device and method
JP3848953B2 (en) Living body eye determination method and living body eye determination device
JP2010267121A (en) Iris imaging device
JP2008052317A (en) Authentication apparatus and authentication method
JP2007209646A (en) Guiding device, imaging device, authentication device and guiding method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060309

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080916

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090106

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090119

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120206

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120206

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees