JP2017134662A - Iris authentication control device, iris authentication control method, and iris authentication control program - Google Patents
Iris authentication control device, iris authentication control method, and iris authentication control program Download PDFInfo
- Publication number
- JP2017134662A JP2017134662A JP2016014469A JP2016014469A JP2017134662A JP 2017134662 A JP2017134662 A JP 2017134662A JP 2016014469 A JP2016014469 A JP 2016014469A JP 2016014469 A JP2016014469 A JP 2016014469A JP 2017134662 A JP2017134662 A JP 2017134662A
- Authority
- JP
- Japan
- Prior art keywords
- display
- iris authentication
- infrared camera
- iris
- authentication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 49
- 210000000554 iris Anatomy 0.000 description 142
- 230000008569 process Effects 0.000 description 37
- 208000016339 iris pattern Diseases 0.000 description 18
- 238000010586 diagram Methods 0.000 description 11
- 238000003384 imaging method Methods 0.000 description 10
- 238000013500 data storage Methods 0.000 description 8
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000881 depressing effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 208000008918 voyeurism Diseases 0.000 description 1
Images
Abstract
Description
本発明は、虹彩認証制御装置、虹彩認証制御方法、及び、虹彩認証制御プログラムに関する。 The present invention relates to an iris authentication control device, an iris authentication control method, and an iris authentication control program.
虹彩認証は、虹彩の模様が個体によって違うことを利用した生体認証方法の一つである。虹彩認証では、カメラで撮像した画像から抽出された虹彩パターンと、予め登録された虹彩パターンとを比較することによって、認証が行われる。 Iris authentication is one of the biometric authentication methods that utilizes the fact that the pattern of the iris varies from individual to individual. In iris authentication, authentication is performed by comparing an iris pattern extracted from an image captured by a camera with an iris pattern registered in advance.
図１２は、携帯端末による虹彩認証の一例を示す図である。虹彩認証では、より鮮明な虹彩の画像を取得するために、眼に赤外線照明を照射した状態で赤外線カメラによって虹彩部を撮影する方法が用いられている。より鮮明な虹彩の画像を取得するためには、赤外線カメラの画角内において、眼が適切な位置に配置されることが求められる。 FIG. 12 is a diagram illustrating an example of iris authentication by the mobile terminal. In the iris authentication, in order to acquire a clearer image of the iris, a method is used in which the iris part is photographed by an infrared camera while the eye is irradiated with infrared illumination. In order to acquire a clearer image of the iris, it is required that the eye be placed at an appropriate position within the angle of view of the infrared camera.
携帯端末では、虹彩認証が行われる場合には、例えば、画面に両眼の位置合わせ用のガイド枠と、赤外線カメラの撮像画像とを重ね合せた画像が連続的に出力される。被認証者は、携帯端末の画面に表示される赤外線カメラの撮像画像を見ながら、眼の表示位置がガイド枠内に収まるように、携帯端末の保持角度等を微調整する。 In the mobile terminal, when iris authentication is performed, for example, an image obtained by superimposing a guide frame for binocular alignment on a screen and a captured image of an infrared camera is continuously output. The person to be authenticated fine-adjusts the holding angle of the mobile terminal and the like so that the display position of the eye is within the guide frame while viewing the captured image of the infrared camera displayed on the screen of the mobile terminal.
しかしながら、虹彩認証において、赤外線カメラの撮像画像が表示されることが、被認証者に好まれない場合がある。例えば、赤外線カメラの撮像画像は、コントラストや色彩が実物とは異なる状態で映り、そのような状態で自分の顔の画像が表示されることが好まれないからである。また、例えば、電車内等の公共の場所で虹彩認証を行う際に、画面に赤外線カメラの撮像画像が表示されている状態が、他人に盗撮等の疑いを持たれることへの不安感があるからである。 However, in the iris authentication, it may not be preferred by the person to be authenticated that the image captured by the infrared camera is displayed. For example, a captured image of an infrared camera is reflected in a state where contrast and color are different from the real thing, and it is not preferable that an image of one's face is displayed in such a state. In addition, for example, when performing iris authentication in a public place such as a train, there is anxiety that the state that the image captured by the infrared camera is displayed on the screen may be suspected of voyeurism etc. Because.
本発明の一態様は、被認証者の眼の位置を虹彩認証に適正な位置に誘導可能な虹彩認証制御装置、虹彩認証制御方法、及び、虹彩認証制御プログラムを提供することを目的とする。 An object of one aspect of the present invention is to provide an iris authentication control device, an iris authentication control method, and an iris authentication control program capable of guiding the position of the eye of the person to be authenticated to a position appropriate for iris authentication.
本発明の態様の一つは、視野角の制御可能な表示装置と、表示装置の表示方向に向いている赤外線カメラと、制御部と、を備える虹彩認証制御装置である。制御部は、虹彩認証時に、表示装置に所定のデータを表示させ、表示装置の視野角を、赤外線カメラの画角内で所定のデータが視認可能となるように設定する。 One aspect of the present invention is an iris authentication control device including a display device capable of controlling a viewing angle, an infrared camera facing a display direction of the display device, and a control unit. The control unit displays predetermined data on the display device at the time of iris authentication, and sets the viewing angle of the display device so that the predetermined data is visible within the angle of view of the infrared camera.
開示の虹彩認証制御装置、虹彩認証制御方法、及び、虹彩認証制御プログラムによれば、被認証者の眼の位置を虹彩認証に適正な位置に誘導可能な虹彩認証を行うことができる
。
According to the disclosed iris authentication control device, iris authentication control method, and iris authentication control program, it is possible to perform iris authentication that can guide the position of the eye of the person to be authenticated to a position appropriate for iris authentication.
以下、図面に基づいて、本発明の実施の形態を説明する。以下の実施形態の構成は例示であり、本発明は実施形態の構成に限定されない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. The configuration of the following embodiment is an exemplification, and the present invention is not limited to the configuration of the embodiment.
＜第１実施形態＞
第１実施形態では、携帯端末は、視野角の制御可能な表示装置を備え、虹彩認証が開始されると、表示装置の視野角を通常よりも狭めるように設定する。虹彩認証が実行されている間は、携帯端末は、赤外線カメラの撮像画像を表示装置に表示せず、代わりに、表示装置に所定の画像を表示させる。表示装置の視野角が通常よりも狭いため、ユーザは、所定の画像が良好に視認できるように携帯端末の保持角度等を微調整することになり、赤外線カメラの画角内に眼が含まれるようにユーザを誘導することができる。
<First Embodiment>
In the first embodiment, the mobile terminal includes a display device capable of controlling the viewing angle, and sets the viewing angle of the display device to be narrower than usual when iris authentication is started. While the iris authentication is being performed, the mobile terminal does not display the captured image of the infrared camera on the display device, but instead displays a predetermined image on the display device. Since the viewing angle of the display device is narrower than usual, the user finely adjusts the holding angle of the mobile terminal so that the predetermined image can be viewed well, and the eye is included in the angle of view of the infrared camera. So that the user can be guided.
＜装置構成＞
図１は、携帯端末１の前面の外観の一例を示す図である。携帯端末１の前面には、表示装置１０４の表示画面が配置される。また、携帯端末１の前面には、表示画面の上方の中央に、赤外線カメラ１１３と赤外線ＬＥＤ（Light Emitting Diode）１１４が配置される。すなわち、赤外線カメラ１１３は、表示装置１０４の表示方向を向いている。
<Device configuration>
FIG. 1 is a diagram illustrating an example of the appearance of the front surface of the
また、携帯端末１の前面には、表示画面の下方に、ロック解除ボタン１１５が配置される。ロック解除ボタン１１５は、携帯端末１のロック状態を解除するボタンである。携帯端末１のロック状態とは、表示装置１０４やタッチパネルがＯＦＦ状態となり、画面表示がなく、タッチパネルの操作が受け付けられない状態である。ロック解除ボタン１１５が押下されると、表示装置１０４やタッチパネルがＯＮ状態になる。セキュリティのために、認証が設定されている場合には、ロック解除ボタン１１５が押下されると、認証画面が表示される。第１実施形態では、携帯端末１は、ロック解除ボタン１１５が押下されると、虹彩認証による認証が設定されていることを想定する。
Further, an
なお、図１に示される赤外線カメラ１１３、赤外線ＬＥＤ１１４、ロック解除ボタン１１５の配置は一例であって、これに限定されない。赤外線カメラ１１３は、表示装置１０４の表示方向に向いているのであれば、例えば、表示画面の上方の左右いずれかの端、表示画面の下方に配置されてもよい。また、ロック解除ボタン１１５は、携帯端末１の前面ではなく、側面、背面等に配置されてもよい。また、ロック解除ボタン１１５は、押下によってロック状態に移行させるロック移行ボタンとして兼用されてもよい。
The arrangement of the
図２は、携帯端末１のハードウェア構成の一例を示す図である。携帯端末１は、例えば、スマートフォン、タブレット端末等である。携帯端末１は、ＣＰＵ（Central Processing Unit）１０１、記憶部１０２、タッチパネル１０３、ディスプレイ１０４、無線部１
０５、オーディオ入出力部１０６、スピーカー１０７、マイクロフォン１０８、アンテナ１１０、カメラ１１２、赤外線カメラ１１３、赤外線ＬＥＤ１１４、ロック解除ボタン１１５を備える。
FIG. 2 is a diagram illustrating an example of a hardware configuration of the
05, audio input /
記憶部１０２は、ＲＯＭ（Read Only Memory）１０２Ａ、ＲＡＭ（Random Access Memory）１０２Ｂ、不揮発性メモリ１０２Ｃを含む。ＲＡＭ １０２Ｂは、揮発性メモリであり、ＣＰＵ １０１に作業領域を提供する。ＲＯＭ １０２Ａは、不揮発性であり、ＯＳ、プリインストールのアプリケーション、システムデータ等を記憶する。不揮発性メモリ１０２Ｃは、例えば、フラッシュメモリである。
The
不揮発性メモリ１０２Ｃは、各種ドライバ、虹彩認証制御プログラム、虹彩認証エンジン、その他アプリケーション等が格納されている。虹彩認証エンジンは、登録されている虹彩パターンと、赤外線カメラ１１３によって撮像された画像から抽出される虹彩パターンとのパターンマッチを行うプログラムである。虹彩認証制御プログラムは、虹彩認証を制御するプログラムである。
The
タッチパネル１０３は、位置入力装置の１つであって、ディスプレイ１０４の表面に配置されており、ディスプレイ１０４の画面に対応する指のタッチ位置の座標を入力する。タッチパネル１０３は、静電容量方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式等のいずれであってもよい。
The
ディスプレイ１０４は、例えば、視野角の制御可能な液晶ディスプレイ（Liquid Crystal Display，ＬＣＤ）である。ディスプレイ１０４は、例えば、メイン液晶と、メイン液晶の前面に配置されるスイッチ液晶とを備える。ディスプレイ１０４は、スイッチ液晶に電圧を印加することによって、スイッチ液晶内の配向を変化させて光の進行方向を制御することで、視野角を制御可能である。ディスプレイ１０４は、ＣＰＵ １０１から入力される信号に従って、画面データを表示したり、視野角を制御したりする。ディスプレイ１０４は、「表示装置」の一例である。
The
無線部１０５は、アンテナ１１０と接続しており、アンテナ１１０を通じて受信した無線信号を電気信号に変換してＣＰＵ １０１に出力したり、ＣＰＵ １０１から入力される電気信号を無線信号に変換してアンテナ１１０を通じて送信したりする。無線部１０５は、例えば、ＷｉＦｉ（Wireless Fidelity）、第３世代移動通信システム、第４世代移
動通信システム（ＬＴＥ（Long Term Evolution））、又は、第４世代以上の移動通信シ
ステムのうちのいずれか１つ又は複数に対応する電子回路である。
The
オーディオ入出力部１０６は、音声出力装置としてのスピーカー１０７と、音声入力装置としてのマイクロフォン１０８と、接続する。オーディオ入出力部１０６は、マイクロフォン１０８から入力された音声信号を電気信号に変換してＣＰＵ １０１に出力したり、ＣＰＵ １０１から入力された電気信号を音声信号に変換してスピーカー１０７に出力
したりする。
The audio input /
カメラ１１２、赤外線カメラ１１３は、ＣＰＵ １０１を通じてタッチパネル１０３から入力されるシャッター操作に応じて撮像し、撮像画像データをＣＰＵ １０１に出力する。カメラ１１２及び赤外線カメラ１１３の画角は、第１実施形態では、固定値であるとする。ただし、これに限られず、カメラ１１２及び赤外線カメラ１１３の画角は、可変であってもよい。赤外線カメラ１１３は、「赤外線カメラ」の一例である。
The
赤外線ＬＥＤ １１４は、赤外線を発光する。赤外線ＬＥＤ １１４は、赤外線カメラ１１３の起動及び動作停止に応じて起動及び動作停止する。赤外線ＬＥＤ １１４は、照射方向は赤外線カメラ１１３の撮像方向と一致するように配置される。
The
ロック解除ボタン１１５が押下されると、押下信号がＣＰＵ １０１に入力される。ユーザ認証が設定されている場合には、ロック解除ボタン１１５の押下信号がＣＰＵ １０１に入力されると、ＣＰＵ １０１は、認証処理を開始する。ユーザ認証が設定されていない場合には、ＣＰＵ １０１は、ディスプレイ１０４にホーム画面を表示させる。
When the
ＣＰＵ １０１は、ＲＯＭ １０２Ａ又は不揮発性メモリ１０２Ｃに格納されるプログラムをＲＡＭ １０２Ｂに展開し、展開された命令を実行することによって様々な処理を行う。ＣＰＵ １０１は、タッチパネル１０３、無線部１０５、オーディオ入出力部１０６、カメラ１１２、赤外線カメラ１１３、ロック解除ボタン１１５のいずれかからの入力を受け、所定の処理を実行し、処理の結果を、記憶部１０２、ディスプレイ１０４、無線部１０５、オーディオ入出力部１０６のいずれかへ出力する。ＣＰＵ １０１は、「制御部」の一例である。
The
なお、携帯端末１のハードウェア構成は、図２に示されるものに限定されず、適宜、追加、置換、削除等の変更が可能である。例えば、携帯端末１は、図２に示される構成に加えて、可搬記録媒体を駆動する可搬記録媒体駆動装置を備えてもよい。可搬記録媒体は、例えば、ＳＤカード、ｍｉｃｒｏＳＤカード等である。また、携帯端末１に備えられるプロセッサは、ＣＰＵ １０１の１つに限定されず、複数のプロセッサが備えられてもよい。例えば、携帯端末１は、各デバイスについて制御する複数のマイクロプロセッサと、アプリケーションの処理を行うアプリケーションプロセッサと、を備える構成であってもよい。携帯端末１は、「虹彩認証制御装置」の一例である。なお、「虹彩認証制御装置」は、例えば、据え置き型の装置であってもよい。
Note that the hardware configuration of the
図３は、携帯端末１の機能構成の一例を示す図である。携帯端末１は、機能構成として、表示制御部１１、赤外線カメラ制御部１２、虹彩認証部１３、認証制御部１４、認証用画像データ格納部１５を備える。
FIG. 3 is a diagram illustrating an example of a functional configuration of the
表示制御部１１は、ＣＰＵ １０１がディスプレイ１０４のドライバを実行することによって達成される機能構成である。表示制御部１１は、認証制御部１４の指示に従って、ディスプレイ１０４に画像を表示させる。また、表示制御部１１は、認証制御部１４からの指示に従って、ディスプレイ１０４の視野角の制御を行う。
The
赤外線カメラ制御部１２は、ＣＰＵ １０１が赤外線カメラ１１３のドライバを実行することによって達成される機能構成である。赤外線カメラ制御部１２は、認証制御部14の指示にしたがって、赤外線カメラ１１３を起動及び動作停止させる。赤外線カメラ制御部１２は、所定のフレームレートで赤外線カメラ１１３によって撮像される撮像画像データを虹彩認証部１３に出力する。赤外線カメラ１１３のフレームレートは、例えば、６０ｆｐｓである。
The infrared
虹彩認証部１３は、ＣＰＵ １０１が虹彩認証エンジンを実行することによって達成される機能構成である。虹彩認証部１３は、虹彩認証処理を行う。より具体的には、虹彩認証部１３は、赤外線カメラ制御部１２から入力される赤外線カメラの撮像画像データから虹彩パターンを抽出し、抽出した虹彩パターンと、認証用画像データ格納部１５に格納される虹彩パターンとのパターンマッチングを行う。虹彩認証部１３は、パターンマッチングを、所定のフレームレートで入力される赤外線カメラ１１３の撮像画像データごとに行う。
The
虹彩認証部１３は、認証制御部１４によって起動及び動作停止される。赤外線カメラ１１３の撮像画像データから抽出された虹彩パターンと認証用画像データ格納部１５に格納される虹彩パターンとが一致した場合には、虹彩認証部１３は、認証制御部１４に、認証成功を通知する。
The
認証制御部１４は、ＣＰＵ １０１が虹彩認証制御プログラムを実行することによって達成される機能構成である。認証制御部１４は、例えば、ロック解除ボタン１１５の押下時のユーザ認証に虹彩認証が設定されている場合に、ロック解除ボタン１１５の押下信号の入力によって起動される。ただし、認証制御部１４の起動トリガはこれに限定されない。
The
認証制御部１４は、虹彩認証処理を制御する。より具体的には、認証制御部１４は、虹彩認証時の赤外線カメラ１１３の撮像画像の表示又は非表示の設定に応じて、表示制御部１１、赤外線カメラ制御部１２、虹彩認証部１３の制御処理を行う。虹彩認証時の赤外線カメラ１１３の撮像画像の表示又は非表示の設定は、予めユーザによって行われる。
The
虹彩認証時の赤外線カメラ１１３の撮像画像の表示が設定されている場合には、認証制御部１４は、第１の虹彩認証制御処理を実行する。第１の虹彩認証制御処理は、通常の虹彩認証制御処理である。第１の虹彩認証制御処理では、虹彩認証制御部１４は、虹彩認証部１３に虹彩認証処理をさせる一方で、虹彩表示制御部１１に、ディスプレイ１０４の視野角を通常の値に設定させ、赤外線カメラ１１３の撮像画像と両眼のガイド枠画像とを重畳表示させる。
If the display of the captured image of the
虹彩認証時の赤外線カメラ１１３の撮像画像の非表示が設定されている場合には、認証制御部１４は、第２の虹彩認証制御処理を実行する。第２の虹彩認証制御処理では、虹彩認証制御部１４は、虹彩認証部１３に虹彩認証処理をさせる一方で、虹彩表示制御部１１に、ディスプレイ１０４の視野角を通常より小さい値に設定させ、赤外線カメラ１１３の撮像画像の代わりに代替画像を表示させる。虹彩制御部１４は、「制御部」の一例である。第２の虹彩認証制御処理は、「表示装置の視野角を、前記赤外線カメラの画角内で前記所定のデータが視認可能となるように設定」する処理の一例である。
When the non-display of the captured image of the
認証用画像データ格納部１５は、不揮発性メモリ１０２Ｃ内に作成される。認証用画像データ格納部１５は、認証用虹彩パターン画像データ、ガイド枠画像データ、代替画像データを格納する。認証用虹彩パターン画像データは、ユーザの虹彩パターン画像である。認証用虹彩パターン画像データは、例えば、虹彩認証の初期設定時に、認証制御部１４の制御によって、赤外線カメラ制御部１２がユーザの虹彩を含む赤外線カメラ１１３の撮像画像を取得し、虹彩認証部１３が該撮像装置から抽出することによって、作成される。
The authentication image
ガイド枠画像データは、第１の虹彩認証制御処理において、赤外線カメラ１１３による撮像画像と重畳して表示される画像データである。ガイド枠画像データは、ユーザの両眼の位置合わせのためのガイド画像を含む。ただし、ガイド枠画像データは、両眼の位置合
わせのためのガイド画像に限定されず、片眼での認証の場合には、片目の位置合わせのためのガイド画像であってもよい。
The guide frame image data is image data that is displayed superimposed on the image captured by the
代替画像データは、第２の虹彩認証制御処理において、ディスプレイ１０４に表示される代替画像である。代替画像は、例えば、「虹彩認証中」等のメッセージを含む画像である。ただし、代替画像は、メッセージを含む画像に限定されず、風景、キャラクタ、人物等の画像であってもよい。また、第２の虹彩認証制御処理において、ディスプレイ１０４に表示されるのは、静止画像に限定されず、動画像であってもよい。代替画像データは、「所定のデータ」の一例である。
The substitute image data is a substitute image displayed on the
＜ディスプレイの視野角の制御＞
ディスプレイ１０４の視野角とは、例えば、コントラストが所定の値以上で見える範囲を定義する角度である。ディスプレイ１０４の視野角は、最小値θｎから最大値θｗまで変化させることができる。ただし、視野角の最大値θｗ及び最小値θｎの値は、ディスプレイ１０４の仕様によって異なる。
<Control of display viewing angle>
The viewing angle of the
図４は、ディスプレイ１０４の最大視野角θｗにおける、画面の視認範囲の一例を示す図である。ディスプレイ１０４の視認可能範囲は、図４に示されるように、ディスプレイ１０４の各画素を中心とした扇形である。視野角は、ディスプレイ１０４の画面の視認可能範囲の扇形の中心角である。図４では、便宜上、ディスプレイ１０４の表示画面の中心点の視認可能範囲が抽出して表示されている。
FIG. 4 is a diagram illustrating an example of a screen viewing range at the maximum viewing angle θw of the
ディスプレイ１０４の視野角が最大値θｗである場合には、Ａ、Ｂ、Ｃの位置は視認可能範囲に含まれるので、Ａ、Ｂ、Ｃのいずれの位置であっても、ディスプレイ１０４の画面を良好に視認することができる。
When the viewing angle of the
図５は、ディスプレイ１０４の最小視野角θｎにおける、画面の視認範囲の一例を示す図である。図５においても、便宜上、ディスプレイ１０４の表示画面の中心点の視認可能範囲が抽出して表示されている。
FIG. 5 is a diagram illustrating an example of a screen viewing range at the minimum viewing angle θn of the
ディスプレイ１０４の最小視野角θｎにおいては、視認可能範囲の中心角が小さくなるので、視認可能範囲が狭くなる。図５に示される例では、携帯端末１の正面のＢの位置は、視認可能範囲に含まれるので、ディスプレイ１０４の画面を視認可能である。一方、Ａ、Ｃの位置は、視認可能範囲から外れるので、ディスプレイ１０４の画面を視認できない。
At the minimum viewing angle θn of the
なお、図４及び図５では、携帯端末１の水平方向の視野角の例について示されているが、垂直方向の視認角についても、同様に設定可能である。
4 and 5 show an example of the viewing angle in the horizontal direction of the
ディスプレイ１０４の通常時及び第１の虹彩認証制御処理の際の視野角をθ１とする。ディスプレイ１０４の第２の虹彩認証制御処理の際の視野角をθ２とする。また、赤外線カメラ１１３の画角をθｐとする。ディスプレイ１０４の視野角θ１、θ２、θｎ、θｗと、赤外線カメラ１１３の画角θｐとの関係は、θｎ≦θ２≦θｐ＜θ１≦θｗである。第２の虹彩認証制御処理の視野角θ２は、赤外線カメラ１１３の撮像可能範囲内に虹彩が含まれる確実性を高めるために、赤外線カメラ１１３の画角θｐ以下の値に設定される。
The viewing angle at the normal time of the
図６は、ディスプレイ１０４の通常時の視野角θ１の視認可能範囲と虹彩との位置関係の一例を示す図である。ディスプレイ１０４の画面の正面から外れた位置でも視認できる方が利便性が高くなるため、通常時の視野角θ１は、最大視野角θｗに近い値に設定されることが多い。
FIG. 6 is a diagram illustrating an example of the positional relationship between the visible range of the viewing angle θ1 in the normal state of the
ディスプレイ１０４の通常時の視野角θ１の場合、図６に示される例のように、両眼がディスプレイ１０４の画面の正面から外れていても、ディスプレイ１０４の画面の視認可能範囲には含まれている。そのため、ディスプレイ１０４の通常時の視野角θ１の場合には、画面の視認性に問題はない。
In the case of the normal viewing angle θ1 of the
図７は、ディスプレイ１０４の第２の虹彩認証制御処理時の視野角θ２の視認可能範囲と虹彩との位置関係、及び、撮像される虹彩の画像の一例を示す図である。図７では、ディスプレイ１０４の視認可能範囲は直線で、赤外線カメラ１１３の撮像範囲は点線で示されている。図７に示される例では、ユーザの視線は、ディスプレイ１０４の画面の正面からずれており、左眼の位置が赤外線カメラ１１３の画角θｐの撮像範囲内に収まっていない。
FIG. 7 is a diagram illustrating an example of the positional relationship between the visible range of the viewing angle θ2 and the iris at the time of the second iris authentication control process of the
撮像画像ＳＣ１は、図７に示される状態で撮像された赤外線カメラ１１３の撮像画像である。撮像画像ＳＣ１では、ユーザの左眼の虹彩が欠損しているため、虹彩認証が不可能であるか、又は、右眼の虹彩画像での認証となるために認証精度が低下する問題が生じる。
The captured image SC1 is a captured image of the
なお、図７に示される例では、ディスプレイ１０４の視認可能範囲の中心点と、赤外線カメラ１１３の撮像範囲の中心点とが同じ位置にあるものとして示されている。実際には、ディスプレイ１０４の視認可能範囲は、各画素が中心点となる扇形が画素分集まって形成されるので、明確に定義することが難しい。しかしながら、ディスプレイ１０４の画面の中心点と赤外線カメラ１１３との距離は、ディスプレイ１０４の画面とユーザの眼との距離に比べると小さい。そのため、ディスプレイ１０４の視認可能範囲の中心点と、赤外線カメラ１１３の撮像範囲の中心点とが同じ位置にあるとみなすことができる。
In the example shown in FIG. 7, the center point of the visible range of the
図８は、図７に示される状態において、ユーザの左右のそれぞれの眼から見えるディスプレイ１０４の画面の一例を示す図である。図７では、第２の虹彩認証制御処理における状態が示されているので、図８においてディスプレイ１０４の画面には、代替画像が表示されている。図８に示される例において、代替画像は、「虹彩認証中 画面の文字が良く見えるように目の位置を合わせてください」というメッセージを含む画像である。
FIG. 8 is a diagram showing an example of the screen of the
画面ＲＥ１は、図７に示される状態におけるユーザの右眼から見える画面である。図７において、ユーザの右眼は、ディスプレイ１０４の視認可能範囲内に収まっているため、ユーザの右眼からは、画面ＲＥ１に表示されている文字を読み取ることができる。
The screen RE1 is a screen that can be seen from the right eye of the user in the state shown in FIG. In FIG. 7, since the user's right eye is within the visible range of the
画面ＬＥ１は、図７に示される状態において、ユーザの左眼から見える画面である。図７において、ユーザの左眼は、ディスプレイ１０４の視認可能範囲から外れているため、ユーザの左眼からは、ディスプレイ１０４に表示されている文字を読み取ることができない。
The screen LE1 is a screen that can be seen from the left eye of the user in the state shown in FIG. In FIG. 7, since the user's left eye is out of the visible range of the
図８に示される例のように、左右の眼で視認しているものが異なる状態では、ユーザは違和感を覚える。そのため、ユーザは画面表示を違和感なく視認するように、携帯端末１の保持角度や、自身の顔の位置等を調整する。
As in the example shown in FIG. 8, the user feels uncomfortable in a state where what is visually recognized by the left and right eyes is different. Therefore, the user adjusts the holding angle of the
図９は、ディスプレイ１０４の第２の虹彩認証制御処理時の視野角θ２の視認可能範囲と虹彩との位置関係、及び、撮像される虹彩の画像の一例を示す図である。図９に示される例では、ユーザの顔の位置と携帯端末１の保持角度等とが適正に調整されており、両眼ともディスプレイ１０４の視認可能範囲内に収まっている。
FIG. 9 is a diagram illustrating an example of the positional relationship between the visible range of the viewing angle θ2 and the iris during the second iris authentication control process of the
撮像画像ＳＣ２は、図９に示される状態で撮像された赤外線カメラ１１３の撮像画像である。第２の虹彩認証制御処理時の視野角θ２は赤外線カメラ１１３の画角θｐ以下に設定されているので、両眼の虹彩は、赤外線カメラ１１３の撮像範囲内に収まっている。そのため、撮像画像ＳＣ２には、ユーザの両眼の虹彩が含まれている。
The captured image SC2 is a captured image of the
図１０は、図９に示される状態において、ユーザの左右のそれぞれの眼から見えるディスプレイ１０４の画面の一例を示す図である。図９では、第２の虹彩認証制御処理における状態が示されているので、図１０においてディスプレイ１０４の画面には、図８に示される例と同様の代替画像が表示されていることとする。
FIG. 10 is a diagram illustrating an example of the screen of the
画面ＲＥ２は、図９に示される状態におけるユーザの右眼から見える画面である。画面ＬＥ２は、図９に示される状態において、ユーザの左眼から見える画面である。図９において、ユーザの左右の眼は、ディスプレイ１０４の視認可能範囲内に収まっているため、ユーザの右眼及び左眼は、それぞれ、画面ＲＥ２、画面ＬＥ２に表示されている文字を読み取ることができる。
The screen RE2 is a screen that can be seen from the right eye of the user in the state shown in FIG. The screen LE2 is a screen that can be seen from the left eye of the user in the state shown in FIG. In FIG. 9, since the left and right eyes of the user are within the visible range of the
図１０に示される例のように、左右の眼で視認するものが一致している場合には、ユーザは、違和感なく視認することができる。したがって、虹彩認証時にディスプレイ１０４の視野角を狭くすることで、ユーザは、図７の画面の視認に違和感のある状態から、画面を違和感なく視認できる状態になるように、携帯端末１の保持角度や顔の位置等を調整する。調整の結果、画面を違和感なく視認できる状態になると、自然と、両眼が赤外線カメラ１１３の撮像範囲内に収まる。
As shown in the example shown in FIG. 10, when the items visually recognized by the left and right eyes match, the user can visually recognize without a sense of incongruity. Therefore, by narrowing the viewing angle of the
ユーザが調整している一方で、携帯端末１では、赤外線カメラ１１３の撮像画像と認証用虹彩パターン画像とのパターンマッチングが行われている。ユーザの両眼が赤外線カメラ１１３の撮像範囲内に収まると、両眼の虹彩を含む画像が取得され、虹彩認証が成功する。
While the user is adjusting, the
＜処理の流れ＞
図１１は、認証制御部１４の虹彩認証制御処理のフローチャートの一例である。図１１に示される処理は、ロック解除ボタン１１５の押下信号が認証制御部１４に入力されると開始される。なお、図１１に示される処理の実行主体は、虹彩認証制御プログラムを実行するＣＰＵ １０１であるが、便宜上、機能構成である認証制御部１４を主体として説明する。
<Process flow>
FIG. 11 is an example of a flowchart of iris authentication control processing of the
ＯＰ１では、認証制御部１４は、ロック解除ボタン１１５の押下信号の入力の待機状態である。ロック解除ボタン１１５の押下信号が入力された場合は（ＯＰ１：ＹＥＳ）、処理がＯＰ２に進む。
In OP <b> 1, the
ＯＰ２では、認証制御部１４は、赤外線カメラ１１３の撮像画像の表示設定が「非表示」であるか否かを判定する。赤外線カメラ１１３の撮像画像の表示設定が「表示」である場合には（ＯＰ２：ＮＯ）、処理がＯＰ３に進む。赤外線カメラ１１３の撮像画像の表示設定が「表示」である場合には（ＯＰ２：ＹＥＳ）、処理がＯＰ４に進む。
In OP2, the
ＯＰ３では、認証制御部１４は、赤外線カメラ１１３の撮像画像の表示設定が「表示」であるので、第１の虹彩認証制御処理を行う。認証制御部１４は、赤外線カメラ１１３の撮像画像と、認証用画像データ格納部１５内のガイド枠画像とを重畳した画像を、ディスプレイ１０４に表示させるように、表示制御部１１に指示する。
In OP3, since the display setting of the captured image of the
ＯＰ４及びＯＰ５では、認証制御部１４は、赤外線カメラ１１３の撮像画像の表示設定
が「非表示」であるので、第２の虹彩認証制御処理を行う。ＯＰ４では、認証制御部１４は、ディスプレイ１０４の視野角をθ２に設定するように、表示制御部１１に指示する。これによって、ディスプレイ１０４の視野角が狭くなる。
In OP4 and OP5, the
ＯＰ５では、認証制御部１４は、認証用画像データ格納部１５内の代替画像を、ディスプレイ１０４に表示させるように、表示制御部１１に指示する。また、認証制御部１４は、赤外線カメラ１１３の撮像画像が表示されないように処理を行う。具体的には、例えば、認証制御部１４は、表示制御部１１に、赤外線カメラ１１３の撮像画像の表示の停止を指示したり、又は、赤外線カメラ制御部１２に、赤外線カメラ１１３の撮像画像の表示制御部１１への出力の停止を指示したりする。
In OP5, the
ＯＰ６では、認証制御部１４は、虹彩認証部１３に虹彩認証処理を開始させる。ＯＰ７では、認証制御部１４は、認証成功の通知の待機状態となる。認証成功の通知が虹彩認証部１３から通知された場合には（ＯＰ７：ＹＥＳ）、処理がＯＰ８に進む。認証失敗の通知が虹彩認証部１３から通知された場合には（ＯＰ７：ＮＯ）、処理がＯＰ９に進む。例えば、虹彩認証部１３による虹彩認証処理の開始から所定時間経過しても認証成功しない場合には、虹彩認証部１３は認証失敗と判定し、認証失敗を認証制御部１４に通知する。
In OP6, the
ＯＰ８では、虹彩認証が成功したので、認証制御部１４は、ディスプレイ１０４の視野角を通常時のθ１に設定する。これによって、第２の虹彩認証制御処理が行われた場合の狭く設定されていたディスプレイ１０４の視野角が広く設定される。その後、図１１に示される処理が終了する。
In OP8, since the iris authentication has succeeded, the
ＯＰ９では、虹彩認証処理が失敗したので、認証制御部１４は、ディスプレイ１０４の視野角を通常時のθ１に設定する。その後、認証制御部１４は、例えば、虹彩認証失敗のメッセージを表示制御部１１を通じてディスプレイ１０４に表示させ、図１１に示され留処理が終了する。ＯＰ９では、認証制御部１４は、再度虹彩認証を開始させたり、別の認証処理を開始させたりしてもよい。別の認証処理には、例えば、パスワード認証がある。
In OP9, since the iris authentication process has failed, the
＜第１実施形態の作用効果＞
第１実施形態では、携帯端末１は、虹彩認証時に、代替画像をディスプレイ１０４に表示しつつ、ディスプレイ１０４の視野角を赤外線カメラ１１３の画角以下に設定する。これによって、ユーザを、ディスプレイ１０４に表示された代替画像が視認可能になるように携帯端末１の保持角度や顔の位置を調整するよう誘導し、調整の結果、ユーザが代替画像を視認できる状態になると、両眼が赤外線カメラの撮像範囲内に収まる。したがって、第１実施形態によれば、ユーザの眼の位置を虹彩認証に適正な位置に誘導することができる。
<Operational effects of the first embodiment>
In the first embodiment, the
また、携帯端末１は、虹彩認証時に、ディスプレイ１０４の視野角を赤外線カメラ１１３の画角以下に設定する場合には、赤外線カメラ１１３の撮像画像の表示を停止する。これによって、ユーザは、赤外線カメラ１１３の撮像画像に含まれる自分の顔を見ずに虹彩認証を行うことができ、虹彩認証に対する抵抗感を低減させることができる。
Further, when the
また、携帯端末１は、虹彩認証が終了すると、ディスプレイ１０４の視野角の設定を通常の値に戻す。すなわち、画面が見づらくなるのは、虹彩認証の間に限定されるので、ユーザに与える違和感や不快感を虹彩認証の間に抑えることができる。
In addition, when the iris authentication is completed, the
＜その他＞
第１実施形態では、虹彩認証時の赤外線カメラ１１３の撮像画像の表示設定が「非表示」である場合には、虹彩認証時には、赤外線カメラ１１３の撮像画像の代わりに代替画像
が表示され、ディスプレイ１０４の視野角が狭く設定される。これに代えて、虹彩認証時の赤外線カメラ１１３の撮像画像の表示設定が「表示」である場合でも、虹彩認証時に、ディスプレイ１０４の視野角が狭く設定されるようにしてもよい。この場合には、例えば、ユーザは、まず、ディスプレイ１０４の画面が視認できるように、携帯端末１の保持角度や顔の位置等の大まかな調整を行ってから、次に、ディスプレイ１０４に表示される自分の顔とガイド枠を見ながら微調整を行うことができるようになる。これによって、虹彩認証を効率よく行うことができる。
<Others>
In the first embodiment, when the display setting of the captured image of the
第１実施形態では、両眼の虹彩パターンを用いて認証が行われることを前提として説明されたが、これに限られず、第１実施形態で説明された技術は、片眼の虹彩パターンによる虹彩認証に対しても適用可能である。片眼の虹彩認証の場合には、虹彩認証時に、ディスプレイ１０４の視野角が狭く設定される間は、例えば、携帯端末１は、認証対象でない方の眼をつむるよう促すメッセージを表示するなどして、ユーザに認証対象の方の眼で画面を見るよう促す。
The first embodiment has been described on the assumption that authentication is performed using the binocular iris pattern. However, the present invention is not limited to this, and the technique described in the first embodiment is based on the iris pattern of one eye. It can also be applied to authentication. In the case of one-eye iris authentication, for example, when the viewing angle of the
また、第１実施形態では、携帯端末１には虹彩認証エンジンが備えられ、携帯端末１自身が虹彩のパターンマッチング処理を行うが、これに限定されない。例えば、携帯端末１は虹彩認証エンジンを備えず、赤外線カメラ１１３の撮像画像を虹彩認識エンジンを備えるサーバに送信し、該サーバにおいて、予め登録される虹彩パターンとのパターンマッチングが行われてもよい。
In the first embodiment, the
＜記録媒体＞
コンピュータその他の機械、装置（以下、コンピュータ等）に上記いずれかの機能を実現させるプログラムをコンピュータ等が読み取り可能な記録媒体に記録することができる。コンピュータ等に、この記録媒体のプログラムを読み込ませて実行させることにより、その機能を提供させることができる。
<Recording medium>
A program for causing a computer or other machine or device (hereinafter, a computer or the like) to realize any of the above functions can be recorded on a recording medium that can be read by the computer or the like. The function can be provided by causing a computer or the like to read and execute the program of the recording medium.
ここで、コンピュータ等が読み取り可能な記録媒体とは、データやプログラム等の情報を電気的、磁気的、光学的、機械的、または化学的作用によって蓄積し、コンピュータ等から読み取ることができる非一時的な記録媒体をいう。このような記録媒体のうちコンピュータ等から取り外し可能なものとしては、例えばフレキシブルディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ／Ｗ、ＤＶＤ、ブルーレイディスク、ＤＡＴ、８ｍｍテープ、フラッシュメモリなどのメモリカード等がある。また、コンピュータ等に固定された記録媒体としてハードディスク、ＲＯＭ（リードオンリーメモリ）等がある。さらに、ＳＳＤ（Solid State Drive）は、コンピュータ等から取り外し可能な記録媒体としても、コ
ンピュータ等に固定された記録媒体としても利用可能である。
Here, a computer-readable recording medium is a non-temporary recording medium in which information such as data and programs is accumulated by electrical, magnetic, optical, mechanical, or chemical action and can be read from a computer or the like. A typical recording medium. Examples of such a recording medium that can be removed from a computer or the like include a flexible disk, a magneto-optical disk, a CD-ROM, a CD-R / W, a DVD, a Blu-ray disk, a DAT, an 8 mm tape, a flash memory, and the like. There are cards. In addition, as a recording medium fixed to a computer or the like, there are a hard disk, a ROM (read only memory) and the like. Further, an SSD (Solid State Drive) can be used as a recording medium removable from a computer or the like, or as a recording medium fixed to the computer or the like.
１ 携帯端末
１１ 表示制御部
１２ 赤外線カメラ制御部
１３ 虹彩認証部
１４ 認証制御部
１５ 認証用画像データ格納部
１０１ ＣＰＵ
１０２ 記憶部
１０２Ａ ＲＯＭ
１０２Ｂ ＲＡＭ
１０２Ｃ 不揮発性メモリ
１０４ ディスプレイ
１１３ 赤外線カメラ
１１４ 赤外線ＬＥＤ
DESCRIPTION OF
102
102B RAM
102C
Claims (5)
前記表示装置の表示方向に向いている赤外線カメラと、
虹彩認証時に、前記表示装置に所定のデータを表示させ、前記表示装置の視野角を、前記赤外線カメラの画角内で前記所定のデータが視認可能となるように設定する制御部と、を備える虹彩認証制御装置。 A display device with controllable viewing angle;
An infrared camera facing the display direction of the display device;
A controller configured to display predetermined data on the display device at the time of iris authentication, and to set a viewing angle of the display device so that the predetermined data is visible within an angle of view of the infrared camera. Iris authentication control device.
請求項１に記載の虹彩認証制御装置。 The control unit sets the viewing angle of the display device to be equal to or smaller than the angle of view of the infrared camera.
The iris authentication control apparatus according to claim 1.
請求項１又は２に記載の虹彩認証制御装置。 The control unit causes the display device to display data other than the captured image of the infrared camera as the predetermined data.
The iris authentication control apparatus according to claim 1 or 2.
虹彩認証時に、
視野角の制御可能な表示装置に所定のデータを表示させ、
前記表示装置の視野角を、前記表示装置の表示方向に向いている赤外線カメラの画角内で前記所定のデータが視認可能となるように設定する、
虹彩認証制御方法。 Iris authentication control device
During iris authentication,
Display predetermined data on a display device with controllable viewing angle,
A viewing angle of the display device is set so that the predetermined data is visible within an angle of view of an infrared camera facing the display direction of the display device;
Iris authentication control method.
虹彩認証時に、
視野角の制御可能な表示装置に所定のデータの表示を指示させ、
前記表示装置の視野角を、前記表示装置の表示方向を向いている赤外線カメラの画角内で前記所定のデータが視認可能となるように設定させる、
虹彩認証制御プログラム。 On the computer,
During iris authentication,
Instruct the display device that can control the viewing angle to display the specified data,
The viewing angle of the display device is set so that the predetermined data is visible within an angle of view of an infrared camera facing the display direction of the display device.
Iris authentication control program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016014469A JP6610293B2 (en) | 2016-01-28 | 2016-01-28 | Iris authentication control device, iris authentication control method, and iris authentication control program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016014469A JP6610293B2 (en) | 2016-01-28 | 2016-01-28 | Iris authentication control device, iris authentication control method, and iris authentication control program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017134662A true JP2017134662A (en) | 2017-08-03 |
| JP6610293B2 JP6610293B2 (en) | 2019-11-27 |
Family
ID=59503696
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016014469A Active JP6610293B2 (en) | 2016-01-28 | 2016-01-28 | Iris authentication control device, iris authentication control method, and iris authentication control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6610293B2 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001215109A (en) * | 2000-01-31 | 2001-08-10 | Sky Com:Kk | Iris image input apparatus |
| JP2006048266A (en) * | 2004-08-03 | 2006-02-16 | Matsushita Electric Ind Co Ltd | Eye image photographing device and authenticating device using the same |
| WO2012153499A1 (en) * | 2011-05-10 | 2012-11-15 | パナソニック株式会社 | Display device, display method, integrated circuit, program |
-
2016
- 2016-01-28 JP JP2016014469A patent/JP6610293B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001215109A (en) * | 2000-01-31 | 2001-08-10 | Sky Com:Kk | Iris image input apparatus |
| JP2006048266A (en) * | 2004-08-03 | 2006-02-16 | Matsushita Electric Ind Co Ltd | Eye image photographing device and authenticating device using the same |
| WO2012153499A1 (en) * | 2011-05-10 | 2012-11-15 | パナソニック株式会社 | Display device, display method, integrated circuit, program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6610293B2 (en) | 2019-11-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10341113B2 (en) | Password management | |
| US10678897B2 (en) | Identification, authentication, and/or guiding of a user using gaze information | |
| EP3143477B1 (en) | System and method for providing haptic feedback to assist in capturing images | |
| US10646966B2 (en) | Object recognition and presentation for the visually impaired | |
| CN105093526B (en) | Glasses type terminal and control method thereof | |
| CN110114777B (en) | Identification, authentication and/or guidance of a user using gaze information | |
| US10733275B1 (en) | Access control through head imaging and biometric authentication | |
| CN110070054A (en) | Subscriber terminal equipment and its iris identification method | |
| US10956544B1 (en) | Access control through head imaging and biometric authentication | |
| JP5971733B2 (en) | Hand-held eye control / eyepiece device, encryption input device, method, computer-readable storage medium, and computer program product | |
| JP2012216953A (en) | Information processing apparatus, display control method, and display controller | |
| JP2009211370A (en) | Iris authentication apparatus | |
| KR20170039506A (en) | Apparatus and method for controlling mobile terminal | |
| JP6610293B2 (en) | Iris authentication control device, iris authentication control method, and iris authentication control program | |
| JP5796052B2 (en) | Screen display control method, screen display control method, electronic device, and program | |
| JP2017134657A (en) | Iris authentication control device, iris authentication control method, and iris authentication control program | |
| CN114616585A (en) | Iris authentication apparatus and iris authentication method | |
| WO2021245823A1 (en) | Information acquisition device, information acquisition method, and recording medium | |
| WO2024021251A1 (en) | Identity verification method and apparatus, and electronic device and storage medium | |
| WO2015093221A1 (en) | Electronic device and program | |
| KR20180031240A (en) | Mobile terminal and method for controlling the same | |
| KR101698107B1 (en) | Mobile terminal and method for controlling the same | |
| KR101561768B1 (en) | Image photographing apparuatus and operating method thereof | |
| JP2022150415A (en) | Iris imaging device, iris authentication device, iris imaging method, iris authentication method, program, and recording medium | |
| JP2023127467A (en) | Identity confirmation device and identity confirmation method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20180725 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181019 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181102 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190920 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191001 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191014 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6610293 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |