JP2016167755A - Electronic apparatus and organism authentication program - Google Patents
Electronic apparatus and organism authentication program Download PDFInfo
- Publication number
- JP2016167755A JP2016167755A JP2015047300A JP2015047300A JP2016167755A JP 2016167755 A JP2016167755 A JP 2016167755A JP 2015047300 A JP2015047300 A JP 2015047300A JP 2015047300 A JP2015047300 A JP 2015047300A JP 2016167755 A JP2016167755 A JP 2016167755A
- Authority
- JP
- Japan
- Prior art keywords
- processor
- correlation
- movement pattern
- pattern
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000033001 locomotion Effects 0.000 claims abstract description 105
- 230000004424 eye movement Effects 0.000 claims abstract description 22
- 238000003384 imaging method Methods 0.000 claims abstract description 20
- 238000000034 method Methods 0.000 claims description 19
- 241001469893 Oxyzygonectes dovii Species 0.000 claims description 15
- 235000002673 Dioscorea communis Nutrition 0.000 claims description 2
- 241000544230 Dioscorea communis Species 0.000 claims description 2
- 208000035753 Periorbital contusion Diseases 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 27
- 208000016339 iris pattern Diseases 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000007423 decrease Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 210000000744 eyelid Anatomy 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Abstract
Description
本発明は、電子機器及び生体認証プログラムに関する。 The present invention relates to an electronic device and a biometric authentication program.
個人情報の漏洩防止等を目的として、近年、携帯端末等の多くの電子機器に個人認証機能が搭載されている。また、個人認証方法として、虹彩等の生体情報を用いる方法がある。 In recent years, a personal authentication function has been installed in many electronic devices such as portable terminals for the purpose of preventing leakage of personal information. As a personal authentication method, there is a method using biometric information such as an iris.
例えば、個人認証機能を有する携帯端末は、生体情報に基づく認証に成功した場合にのみ「処理制限」を解除する。「処理制限」としては、例えば、携帯端末の表示状態を、待ち受け画面状態から次の画面状態へ移行させる制限を挙げることができる。 For example, a portable terminal having a personal authentication function releases “processing restriction” only when authentication based on biometric information is successful. As the “processing restriction”, for example, a restriction for shifting the display state of the mobile terminal from the standby screen state to the next screen state can be given.
ところで、待ち受け画面状態の表示部に、現在時刻や着信通知等の表示情報、つまり「オブジェクト」が表示されることがある。すなわち、「処理制限」が適用されている携帯端末の画面に、「オブジェクト」が表示されていることがある。 By the way, display information such as current time and incoming call notification, that is, “object” may be displayed on the display unit in the standby screen state. That is, “object” may be displayed on the screen of the mobile terminal to which “processing restriction” is applied.
このとき、ユーザはただ「オブジェクト」を見ているだけであっても、個人認証機能が例えばユーザの虹彩の情報に基づいて認証処理を実行し、処理制限を解除してしまう可能性がある。すなわち、ユーザの意図に反して処理制限が解除されてしまう可能性がある。 At this time, even if the user is merely looking at the “object”, there is a possibility that the personal authentication function executes the authentication process based on the user's iris information, for example, and releases the process restriction. That is, there is a possibility that the processing restriction is released against the user's intention.
開示の技術は、上記に鑑みてなされたものであって、ユーザの意図に反した制限解除を防止することができる、電子機器及び生体認証プログラムを提供することを目的とする。 The disclosed technology has been made in view of the above, and an object thereof is to provide an electronic device and a biometric authentication program that can prevent restriction cancellation against a user's intention.
開示の態様では、電子機器は、生体情報に基づく認証の結果を用いて処理制限を解除する。また、前記電子機器は、メモリと、前記メモリと接続されたプロセッサと、を具備する。前記プロセッサは、表示部でのオブジェクトの表示変更パターンに従って時間とともに前記オブジェクトの表示を変更し、撮像部で撮像対象を撮像して得られた撮像画像内の目の動きパターンと前記表示変更パターンとの相関が所定レベルよりも低いか否かを判定し、前記相関が前記所定レベルよりも低く且つ前記認証が成功した場合、前記処理制限を解除し、前記相関が前記所定レベルよりも高い場合、前記認証の成否に関わらず、前記処理制限を継続する。 In the disclosed aspect, the electronic device releases the processing restriction using the authentication result based on the biometric information. The electronic device includes a memory and a processor connected to the memory. The processor changes the display of the object with time according to the display change pattern of the object on the display unit, and the eye movement pattern in the captured image obtained by imaging the imaging target by the imaging unit and the display change pattern If the correlation is lower than the predetermined level, and if the correlation is lower than the predetermined level and the authentication is successful, the processing restriction is released, and if the correlation is higher than the predetermined level, Regardless of the success or failure of the authentication, the processing restriction is continued.
開示の態様によれば、ユーザの意図に反した制限解除を防止することができる。 According to the disclosed aspect, it is possible to prevent the restriction from being released against the user's intention.
以下に、本願の開示する電子機器及び生体認証プログラムの実施形態を図面に基づいて詳細に説明する。なお、この実施形態により本願の開示する電子機器及び生体認証プログラムが限定されるものではない。また、実施形態において同一の機能を有する構成には同一の符号を付し、重複する説明は省略される。 Embodiments of an electronic device and a biometric authentication program disclosed in the present application will be described below in detail with reference to the drawings. The electronic device and biometric authentication program disclosed in the present application are not limited by this embodiment. Moreover, the same code | symbol is attached | subjected to the structure which has the same function in embodiment, and the overlapping description is abbreviate | omitted.
［実施例１］
［電子機器の構成例］
図１は、実施例１の電子機器の一例を示す図である。電子機器１０は、例えば、携帯端末であり、以下では、電子機器１０が携帯端末であることを前提として説明する。図１において、電子機器１０は、ＲＦ（Radio Frequency）回路１１と、撮像装置１２と、表示部１３と、プロセッサ１４と、メモリ１５とを有する。電子機器１０は、「生体情報」に基づく認証に成功した場合に「処理制限」を解除する。「生体情報」は、例えば、顔情報、虹彩情報等である。「処理制限」は、例えば、電子機器１０の表示部の表示状態を、待ち受け画面状態から次の画面状態へ移行させることに対する制限である。なお、以下では、「生体情報」が虹彩情報であることを前提として説明する。
[Example 1]
[Configuration example of electronic equipment]
FIG. 1 is a diagram illustrating an example of an electronic apparatus according to the first embodiment. The
ＲＦ回路１１は、通信相手の通信装置から送信された無線信号をアンテナを介して受信し、受信した無線信号に対して所定の無線受信処理（ダウンコンバート、アナログデジタル変換等）を施し、得られた受信信号をプロセッサ１４へ出力する。また、ＲＦ回路１１は、プロセッサ１４から受け取る送信信号に対して所定の無線送信処理（デジタルアナログ変換、アップコンバート等）を施し、得られた無線信号をアンテナを介して送信する。 The RF circuit 11 is obtained by receiving a radio signal transmitted from a communication device of a communication partner via an antenna, and performing predetermined radio reception processing (down-conversion, analog-digital conversion, etc.) on the received radio signal. The received signal is output to the processor 14. The RF circuit 11 performs predetermined wireless transmission processing (digital / analog conversion, up-conversion, etc.) on the transmission signal received from the processor 14 and transmits the obtained wireless signal via the antenna.
撮像装置１２は、撮像対象を撮像して撮像画像を生成し、生成した撮像画像をプロセッサ１４へ出力する。例えば、撮像装置１２は、可視光を利用する通常のカメラ（図示せず）と赤外線ＬＥＤ（図示せず）とＩＲカメラ（図示せず）とを有する。
The
表示部１３は、プロセッサ１４による制御に基づいて、プロセッサ１４から受け取る表示データに対応する表示画像を表示する。 The display unit 13 displays a display image corresponding to display data received from the processor 14 based on control by the processor 14.
プロセッサ１４は、電子機器１０の処理全般を制御する。例えば、プロセッサ１４は、通信処理、表示処理、処理制限処理、制限解除処理、及び、認証処理等を制御する。プロセッサ１４によって実現される各種処理機能は、各処理に対応するプログラムがメモリ１５に記録され、各プログラムがプロセッサ１４で実行されることにより実現される。プロセッサ１４の一例としては、ＣＰＵ、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field Programmable Gate Array）等が挙げられる。
The processor 14 controls the overall processing of the
例えば、プロセッサ１４は、表示部１３での「オブジェクト」の表示位置を「移動パターン」に従って時間とともに移動させる。これと同時期に撮像装置１２で生成された複数の撮像画像を用いて、プロセッサ１４は、撮像画像内の目の「動きパターン」を特定する。なお、以下では、「オブジェクト」が現在時刻情報であることを前提として説明する。
For example, the processor 14 moves the display position of the “object” on the display unit 13 with time according to the “movement pattern”. At the same time, the processor 14 identifies a “movement pattern” of the eye in the captured image using a plurality of captured images generated by the
「移動パターン」は、例えば、図２に示すように、「オブジェクト（ここでは、時刻情報）」を、表示部１３を見つめるユーザにとって表示部１３内で左右方向に動くように、表示位置を移動させるパターンである。すなわち、この「移動パターン」では、表示部１３内の右端部を出発点としてオブジェクトの表示位置が徐々に左に移動し、表示位置が左端部に到達すると今度はオブジェクトの表示位置が左端部から表示位置を徐々に右に移動する。つまり、「移動パターン」は、図３に示すように表示部１３内の左右方向にｘ軸を規定した場合、ｘ軸座標の増減パターンによって表すことができる。図２は、実施例１の移動パターンの一例を示す図である。図３は、実施例１の表示部内に規定する座標の一例を示す図である。 For example, as shown in FIG. 2, the “movement pattern” moves the display position so that the “object (in this case, time information)” moves in the left-right direction within the display unit 13 for the user looking at the display unit 13. It is a pattern to be made. That is, in this “movement pattern”, the display position of the object gradually moves to the left starting from the right end portion in the display unit 13, and when the display position reaches the left end portion, the display position of the object is now shifted from the left end portion. Move the display position gradually to the right. That is, the “movement pattern” can be represented by an increase / decrease pattern of the x-axis coordinates when the x-axis is defined in the left-right direction in the display unit 13 as shown in FIG. FIG. 2 is a diagram illustrating an example of a movement pattern according to the first embodiment. FIG. 3 is a diagram illustrating an example of coordinates defined in the display unit according to the first embodiment.
また、撮像画像内の目の「動きパターン」の特定に用いられる「動きパラメータ」としては、例えば、図４に示すように、撮像画像内の「目画像領域」において、「黒目画像領域」の左右に存在する２つの「白目画像領域」のうちの一方の面積（以下では、「白目領域面積」と呼ぶことがある）を利用することができる。図４は、白目画像領域及び白目領域面積の説明に供する図である。ここで、目が左右に動く場合、白目領域面積は増減するので、「動きパターン」は白目領域面積の増減パターンとして現れる。このため、プロセッサ１４は、十分に短いサンプルタイミング周期で撮像画像を取得し、各サンプルタイミングで白目領域面積を算出し、この結果を用いて「動きパターン」を特定する。 Further, as the “motion parameter” used for specifying the “movement pattern” of the eye in the captured image, for example, as shown in FIG. 4, in the “eye image region” in the captured image, the “black eye image region” The area of one of the two “white-eye image regions” existing on the left and right sides (hereinafter, sometimes referred to as “white-eye region area”) can be used. FIG. 4 is a diagram for explaining the white eye image area and the white eye area. Here, when the eye moves left and right, the area of the white eye area increases and decreases, so the “movement pattern” appears as an increase and decrease pattern of the white eye area. For this reason, the processor 14 acquires a captured image at a sufficiently short sample timing period, calculates a white eye area at each sample timing, and specifies a “motion pattern” using the result.
そして、プロセッサ１４は、上記の「移動パターン」と特定した「動きパターン」との相関を算出する。例えば、「移動パターンと動きパターンとの相関」を表す「相関パラメータ」としては、移動パターンの周期Ｎ[frames]と動きパターンの周期Ｍ[frames]とのズレ（つまり、差分）を利用することができる。このため、プロセッサ１４は、例えば、移動パターンの周期と動きパターンの周期とのズレ量を算出する。 Then, the processor 14 calculates a correlation between the “movement pattern” and the identified “motion pattern”. For example, as a “correlation parameter” representing “correlation between a movement pattern and a motion pattern”, a shift (that is, a difference) between the cycle N [frames] of the movement pattern and the cycle M [frames] of the motion pattern is used. Can do. For this reason, for example, the processor 14 calculates the amount of deviation between the period of the movement pattern and the period of the motion pattern.
そして、プロセッサ１４は、算出した相関が所定レベルより低いか否かを判定する。例えば、プロセッサ１４は、上記の算出したズレ量と所定の閾値とを比較することで、算出した相関が所定レベルより低いか否かを判定する。すなわち、プロセッサ１４は、算出したズレ量が所定の閾値以上である場合、算出した相関が所定レベルより低いと判定する一方、算出したズレ量が所定の閾値より小さい場合、算出した相関が所定レベルより高いと判定する。 Then, the processor 14 determines whether or not the calculated correlation is lower than a predetermined level. For example, the processor 14 determines whether or not the calculated correlation is lower than a predetermined level by comparing the calculated deviation amount with a predetermined threshold value. That is, the processor 14 determines that the calculated correlation is lower than the predetermined level when the calculated deviation amount is equal to or larger than the predetermined threshold, while the calculated correlation is lower than the predetermined level when the calculated deviation amount is smaller than the predetermined threshold. Determine higher.
また、プロセッサ１４は、撮像装置１２で生成された撮像画像を用いて、生体情報（つまり、虹彩情報）に基づく認証処理を実行する。例えば、プロセッサ１４は、認証処理において、撮像画像から虹彩パターンを抽出し、抽出した虹彩パターンと、メモリ１５に記憶されているユーザの虹彩パターンとを比較し、両虹彩パターンが一致すると判定できるときに認証成功とする。一方、両虹彩パターンが一致しないと判定される場合、プロセッサ１４は、認証失敗とする。
Further, the processor 14 executes an authentication process based on biological information (that is, iris information) using the captured image generated by the
そして、プロセッサ１４は、算出した相関が所定レベルよりも低く且つ認証が成功した場合、処理制限を解除する。これに対して、プロセッサ１４は、算出した相関が所定レベルよりも高い場合、認証の成否に関わらず、処理制限を継続する。ここで、「移動パターンと動きパターンとの相関が高い」ということは、ユーザが表示画面内で移動しているオブジェクトを目で追っていることを意味している。すなわち、移動パターンと動きパターンとの相関が高い場合、ユーザは処理制限を解除する意図を有していないと推定することができる。従って、「算出した相関が所定レベルよりも高い場合、認証の成否に関わらず、処理制限を継続する」制御を行うことにより、ユーザの意図に反して処理制限が解除されることを防止することができる。この結果として、ユーザの利便性を向上させることができる。 Then, when the calculated correlation is lower than the predetermined level and the authentication is successful, the processor 14 releases the processing restriction. On the other hand, when the calculated correlation is higher than a predetermined level, the processor 14 continues the process restriction regardless of the success or failure of the authentication. Here, “the correlation between the movement pattern and the movement pattern is high” means that the user is following the moving object in the display screen. That is, when the correlation between the movement pattern and the motion pattern is high, it can be estimated that the user does not intend to release the processing restriction. Therefore, it is possible to prevent the processing restriction from being released against the user's intention by performing the control to “continue the processing restriction regardless of the success or failure of the authentication when the calculated correlation is higher than the predetermined level”. Can do. As a result, user convenience can be improved.
メモリ１５の一例としては、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等のＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ等が挙げられる。 Examples of the memory 15 include a RAM (Random Access Memory) such as SDRAM (Synchronous Dynamic Random Access Memory), a ROM (Read Only Memory), a flash memory, and the like.
［電子機器の動作例］
以上の構成を有する電子機器１０の処理動作の一例について説明する。図５及び図６は、実施例１の電子機器の処理動作の一例を示すフローチャートである。図５及び図６に示すフローチャートは、例えば、電子機器１０のスリープモードが解除されたときにスタートする。
[Operation example of electronic equipment]
An example of the processing operation of the
プロセッサ１４は、初期化処理を実行する（ステップＳ１０１）。すなわち、パラメータｎ及びパラメータｋがゼロに設定される。パラメータｎは、タイミングを規定するパラメータである。また、パラメータｋは、極大又は極小の検出個数を管理するためのパラメータである。 The processor 14 executes an initialization process (step S101). That is, the parameter n and the parameter k are set to zero. The parameter n is a parameter that defines timing. The parameter k is a parameter for managing the maximum or minimum number of detections.
プロセッサ１４は、設定タイミングｎをタイミング１に設定する（ステップＳ１０２）。すなわち、設定タイミングｎが１つインクリメントされる。 The processor 14 sets the setting timing n to timing 1 (step S102). That is, the setting timing n is incremented by one.
プロセッサ１４は、オブジェクトの表示位置を移動パターンに従って１ステップ進める（ステップＳ１０３）。 The processor 14 advances the display position of the object by one step according to the movement pattern (step S103).
プロセッサ１４は、設定タイミングｎの撮像画像を取得する（ステップＳ１０４）。 The processor 14 acquires a captured image at the setting timing n (step S104).
プロセッサ１４は、設定タイミングｎの撮像画像において、白目画像領域を特定する（ステップＳ１０５）。 The processor 14 specifies a white-eye image region in the captured image at the setting timing n (step S105).
プロセッサ１４は、特定した白目画像領域の白目領域面積Ｓを算出する（ステップＳ１０６）。 The processor 14 calculates the white eye area S of the identified white eye image area (step S106).
プロセッサ１４は、１つ前の設定タイミングｎ−１の白目領域面積Ｓｎ−１から設定タイミングｎの白目領域面積Ｓｎへの増加量ΔＳを算出する（ステップＳ１０７）。すなわち、次の式が算出される。
ΔＳ＝Ｓｎ−Ｓｎ−１
Processor 14 calculates one increment ΔS from the previous setting the timing n-1 of the white eye region area S n-1 to the white eye region area S n of setting timing n (step S107). That is, the following formula is calculated.
ΔS = S n −S n−1
プロセッサ１４は、増加量ΔＳが正かそれ以外かを特定する（ステップＳ１０８）。すなわち、プロセッサ１４は、増加量ΔＳの符号を特定する。例えば、プロセッサ１４は、増加量ΔＳの符号が正の場合、一次微分パラメータＳｉｇｎをゼロに設定し、増加量ΔＳの符号が負の場合、一次微分パラメータＳｉｇｎを１に設定する。 The processor 14 specifies whether the increase amount ΔS is positive or not (step S108). That is, the processor 14 specifies the sign of the increase amount ΔS. For example, the processor 14 sets the primary differential parameter Sign n to zero when the sign of the increase amount ΔS is positive, and sets the primary differential parameter Sign n to 1 when the sign of the increase amount ΔS is negative.
プロセッサ１４は、設定タイミングｎでの増加量ΔＳの符号と設定タイミングｎ−１での増加量ΔＳの符号とが等しいか否かを判定する（ステップＳ１０９）。設定タイミングｎでの増加量ΔＳの符号と設定タイミングｎ−１での増加量ΔＳの符号とが等しい場合（ステップＳ１０９肯定）、処理ステップは、ステップＳ１０２へ戻る。 The processor 14 determines whether or not the sign of the increase amount ΔS at the setting timing n is equal to the sign of the increase amount ΔS at the setting timing n−1 (step S109). When the sign of the increase amount ΔS at the setting timing n is equal to the sign of the increase amount ΔS at the setting timing n−1 (Yes at Step S109), the processing step returns to Step S102.
設定タイミングｎでの増加量ΔＳの符号と設定タイミングｎ−１での増加量ΔＳの符号とが等しくない場合（ステップＳ１０９否定）、プロセッサ１４は、設定タイミングｎを極大又は極小に対応するタイミングとして保持する（ステップＳ１１０）。すなわち、ｍ０として設定タイミングｎを保持する。そして、ｋを１つインクリメントする。 When the sign of the increase amount ΔS at the setting timing n is not equal to the sign of the increase amount ΔS at the setting timing n−1 (No at Step S109), the processor 14 sets the setting timing n as a timing corresponding to the maximum or minimum. Hold (step S110). That is, to hold the set timing n as m 0. Then, k is incremented by one.
プロセッサ１４は、ｋが２であるか否かを判定する（ステップＳ１１１）。極大又は極小のタイミングの最初の特定では、ｋ＝１であるので、処理ステップは、ステップＳ１０２に戻ることになる。再度、ステップＳ１０２からステップＳ１１０の処理が繰り返され、ステップＳ１１０でｍ１としての設定タイミングｎが保持されると、ｋ＝２となる。 The processor 14 determines whether k is 2 (step S111). In the first specification of the maximum or minimum timing, since k = 1, the processing step returns to step S102. If the processing from step S102 to step S110 is repeated again and the setting timing n as m 1 is held in step S110, k = 2.
このとき、ｋが２となる（ステップＳ１１１肯定）ので、プロセッサ１４は、目の動きパターンの周期Ｍを算出する（ステップＳ１１２）。ここで、ｍ１−ｍ０は半周期Ｍ／２に相当するので、次の式によって、周期Ｍを算出することができる。
Ｍ＝２×（ｍ１−ｍ０）
At this time, k becomes 2 (Yes in step S111), so the processor 14 calculates the period M of the eye movement pattern (step S112). Here, since m 1 -m 0 corresponds to a half cycle M / 2, the cycle M can be calculated by the following equation.
M = 2 × (m 1 −m 0 )
プロセッサ１４は、移動パターンの周期Ｎと動きパターンの周期Ｍとのズレ量、つまり、｜Ｎ−Ｍ｜を算出し、算出したズレ量が所定の閾値ＴＨより小さいか否かを判定する（ステップＳ１１３）。算出したズレ量が所定の閾値より小さい場合（ステップＳ１１３肯定）、つまり、移動パターンと動きパターンとの相関が所定レベルよりも高い場合、処理ステップは、ステップＳ１０１へ戻る。 The processor 14 calculates the amount of deviation between the period N of the movement pattern and the period M of the motion pattern, that is, | N−M |, and determines whether or not the calculated amount of deviation is smaller than a predetermined threshold value TH (step S1). S113). When the calculated deviation amount is smaller than the predetermined threshold (Yes at Step S113), that is, when the correlation between the movement pattern and the motion pattern is higher than the predetermined level, the processing step returns to Step S101.
算出したズレ量が所定の閾値ＴＨ以上の場合（ステップＳ１１３否定）、つまり、移動パターンと動きパターンとの相関が所定レベルよりも低い場合、プロセッサ１４は、生体情報に基づく認証が成功したか否かを判定する（ステップＳ１１４）。なお、ここでは、生体認証に基づく認証処理がステップＳ１０１からステップＳ１１３までの処理と並列に、又は、ステップＳ１０１の前に行われていることを前提としている。 If the calculated amount of deviation is greater than or equal to a predetermined threshold TH (No in step S113), that is, if the correlation between the movement pattern and the motion pattern is lower than a predetermined level, the processor 14 determines whether authentication based on biometric information has succeeded. Is determined (step S114). Here, it is assumed that authentication processing based on biometric authentication is performed in parallel with the processing from step S101 to step S113 or before step S101.
生体情報に基づく認証が成功している場合（ステップＳ１１４肯定）、プロセッサ１４は、処理制限を解除する（ステップＳ１１５）。すなわち、例えば、上記の通り、処理制限が電子機器１０の表示部の表示状態を待ち受け画面状態から次の画面状態へ移行させることに対する制限である場合、プロセッサ１４は、次の画面状態へ移行させる。
When the authentication based on the biometric information is successful (Yes at Step S114), the processor 14 releases the processing restriction (Step S115). That is, for example, as described above, when the processing limitation is a limitation on shifting the display state of the display unit of the
生体情報に基づく認証が成功していない場合（ステップＳ１１４否定）、プロセッサ１４は、処理制限を継続する（ステップＳ１１６）。 When the authentication based on the biometric information is not successful (No at Step S114), the processor 14 continues the process restriction (Step S116).
ここで、具体例について説明する。図７は、実施例１のオブジェクトの表示位置の移動パターンと目の動きの第１の例を示す図である。図８は、第１の例のときの、オブジェクトの表示位置の移動パターンと目の動きパターンとを示す図である。図９は、実施例１のオブジェクトの表示位置の移動パターンと目の動きの第２の例を示す図である。図１０は、第２の例のときの、オブジェクトの表示位置の移動パターンと目の動きパターンとを示す図である。図７及び図８には、移動パターンと動きパターンとの相関が高い場合の例が示され、図９及び図１０には、移動パターンと動きパターンとの相関が低い場合の例が示されている。 Here, a specific example will be described. FIG. 7 is a diagram illustrating a first example of the movement pattern of the display position of the object and the eye movement according to the first embodiment. FIG. 8 is a diagram illustrating a movement pattern of an object display position and an eye movement pattern in the first example. FIG. 9 is a diagram illustrating a second example of the movement pattern of the display position of the object and the eye movement according to the first embodiment. FIG. 10 is a diagram illustrating a movement pattern of an object display position and an eye movement pattern in the second example. FIGS. 7 and 8 show examples when the correlation between the movement pattern and the motion pattern is high, and FIGS. 9 and 10 show examples when the correlation between the movement pattern and the motion pattern is low. Yes.
図７及び図８に示すように、移動パターンと動きパターンとの相関が高い場合、移動パターンの周期Ｎと動きパターンの周期Ｍとが理想的には一致する。この場合、ユーザが表示画面内で移動しているオブジェクトを目で追っていると推定することができる。一方、図９及び図１０に示すように、移動パターンと動きパターンとの相関が低い場合、移動パターンの周期Ｎと動きパターンの周期Ｍとが大きく異なる。この場合、ユーザは表示されているオブジェクトを見ているのではなく、認証を受けて処理制限の解除を望んでいるものと推定することができる。 As shown in FIGS. 7 and 8, when the correlation between the movement pattern and the motion pattern is high, the period N of the movement pattern and the period M of the movement pattern ideally match. In this case, it can be estimated that the user is following the moving object in the display screen. On the other hand, as shown in FIGS. 9 and 10, when the correlation between the movement pattern and the motion pattern is low, the period N of the movement pattern and the period M of the movement pattern are greatly different. In this case, it can be presumed that the user does not look at the displayed object but desires to remove the processing restriction after receiving authentication.
以上のように本実施例によれば、電子機器１０において、プロセッサ１４は、撮像装置１２で撮像された撮像画像内の目の動きパターンとオブジェクトの表示位置の移動パターンとの相関が所定レベルよりも低いか否かを判定する。そして、プロセッサ１４は、相関が所定レベルよりも低く且つ認証が成功した場合、処理制限を解除し、相関が所定レベルよりも高い場合、認証の成否に関わらず、処理制限を継続する。
As described above, according to the present embodiment, in the
この電子機器１０の構成により、ユーザが表示画面内で移動しているオブジェクトを目で追っている場合、つまりユーザの興味がオブジェクトにあり且つ処理制限を解除する意図を有していない場合、処理制限を継続することができる。すなわち、ユーザの意図に反して処理制限が解除されることを防止することができ、この結果として、ユーザの利便性を向上させることができる。
Due to the configuration of the
なお、以上の説明では、「オブジェクトの表示変更パターン」として、オブジェクトの表示位置の移動パターンを用いているが、これに限定されるものではなく、ユーザがオブジェクトを見ている場合に、オブジェクトの表示変更パターンと目の動きパターンとの間の相関が高くなるものであればよい。 In the above description, the movement pattern of the object display position is used as the “object display change pattern”. However, the present invention is not limited to this, and when the user is looking at the object, It is sufficient if the correlation between the display change pattern and the eye movement pattern is high.
［実施例２］
実施例２は、移動パターン、動きパラメータ、動きパターンの特定方法等のバリエーションに関する。実施例２の電子機器の基本構成は、実施例１の電子機器１０と共通するので、図１を用いて説明する。
[Example 2]
The second embodiment relates to variations such as a movement pattern, a motion parameter, and a motion pattern specifying method. Since the basic configuration of the electronic device according to the second embodiment is the same as that of the
［電子機器の構成例］
実施例２の電子機器１０において、プロセッサ１４は、実施例１と同様に、電子機器１０の処理全般を制御する。例えば、プロセッサ１４は、通信処理、表示処理、処理制限処理、制限解除処理、及び、認証処理等を制御する。プロセッサ１４によって実現される各種処理機能は、各処理に対応するプログラムがメモリ１５に記録され、各プログラムがプロセッサ１４で実行されることにより実現される。
[Configuration example of electronic equipment]
In the
例えば、プロセッサ１４は、表示部１３での「オブジェクト」の表示位置を「移動パターン」に従って時間とともに移動させる。これと同時期に撮像装置１２で生成された複数の撮像画像を用いて、プロセッサ１４は、撮像画像内の目の「動きパターン」を特定する。なお、以下では、「オブジェクト」が現在時刻情報であることを前提として説明する。
For example, the processor 14 moves the display position of the “object” on the display unit 13 with time according to the “movement pattern”. At the same time, the processor 14 identifies a “movement pattern” of the eye in the captured image using a plurality of captured images generated by the
実施例２における「移動パターン」は、図１１に示すように、「オブジェクト（ここでは、時刻情報）」を、表示部１３を見つめるユーザにとって表示部１３内で上下方向に動くように、表示位置を移動させるパターンである。この「移動パターン」では、表示部１３内の上端部を出発点としてオブジェクトの表示位置が徐々に下に移動し、表示位置が下端部に到達すると今度はオブジェクトの表示位置が下端部から表示位置を徐々に上に移動する。つまり、「移動パターン」は、図１２に示すように表示部１３内の上下方向にｙ軸を規定した場合、ｙ軸座標の増減パターンによって表すことができる。図１１は、実施例２の移動パターンの一例を示す図である。図１２は、実施例２の表示部内に規定する座標の一例を示す図である。 As shown in FIG. 11, the “movement pattern” in the second embodiment displays the “object (here, time information)” so that the user who looks at the display unit 13 moves up and down in the display unit 13. It is a pattern to move. In this “movement pattern”, the display position of the object gradually moves downward from the upper end portion in the display unit 13 and when the display position reaches the lower end portion, the display position of the object is now changed from the lower end portion to the display position. Move up gradually. That is, the “movement pattern” can be represented by an increase / decrease pattern of the y-axis coordinates when the y-axis is defined in the vertical direction in the display unit 13 as shown in FIG. FIG. 11 is a diagram illustrating an example of a movement pattern according to the second embodiment. FIG. 12 is a diagram illustrating an example of coordinates defined in the display unit according to the second embodiment.
また、撮像画像内の目の「動きパターン」の特定に用いられる「動きパラメータ」としては、例えば、図１３に示すように、撮像画像内の「目画像領域」に含まれる「虹彩画像領域」の面積（以下では、「虹彩領域面積」と呼ぶことがある）を利用することができる。なお、「虹彩画像領域」としては、虹彩画像領域の外周、上まぶた、及び／又は下まぶたで囲まれる領域全てとしてもよいし、虹彩画像領域の外周、上まぶた、及び／又は下まぶたで囲まれる領域から「瞳孔画像領域」を除いた部分としてもよい。図１３は、虹彩画像領域及び虹彩領域面積の説明に供する図である。ここで、目が上下に動く場合、虹彩領域面積は増減するので、「動きパターン」は虹彩領域面積の増減パターンとして現れる。このため、プロセッサ１４は、十分に短いサンプルタイミング周期で撮像画像を取得し、各サンプルタイミングで虹彩領域面積を算出し、この結果を用いて「動きパターン」を特定する。 Further, as the “motion parameter” used for specifying the “movement pattern” of the eye in the captured image, for example, as shown in FIG. 13, an “iris image region” included in the “eye image region” in the captured image. (Hereinafter, sometimes referred to as “iris region area”). The “iris image area” may be the entire area surrounded by the outer periphery, upper eyelid, and / or lower eyelid of the iris image area, or surrounded by the outer periphery, upper eyelid, and / or lower eyelid of the iris image area. A portion obtained by excluding the “pupil image region” from the region to be displayed may be used. FIG. 13 is a diagram for explaining the iris image region and the iris region area. Here, when the eye moves up and down, the area of the iris area increases and decreases, so the “movement pattern” appears as an increase and decrease pattern of the area of the iris area. For this reason, the processor 14 acquires a captured image at a sufficiently short sample timing period, calculates an iris region area at each sample timing, and specifies a “motion pattern” using the result.
そして、プロセッサ１４は、上記の「移動パターン」と特定した「動きパターン」との相関を算出する。例えば、「移動パターンと動きパターンとの相関」を表す「相関パラメータ」としては、移動パターンの周期Ｎ[frames]と動きパターンの周期Ｍ[frames]とのズレ（つまり、差分）を利用することができる。このため、プロセッサ１４は、例えば、移動パターンの周期と動きパターンの周期とのズレ量を算出する。 Then, the processor 14 calculates a correlation between the “movement pattern” and the identified “motion pattern”. For example, as a “correlation parameter” representing “correlation between a movement pattern and a motion pattern”, a shift (that is, a difference) between the cycle N [frames] of the movement pattern and the cycle M [frames] of the motion pattern is used. Can do. For this reason, for example, the processor 14 calculates the amount of deviation between the period of the movement pattern and the period of the motion pattern.
そして、プロセッサ１４は、算出した相関が所定レベルより低いか否かを判定する。例えば、プロセッサ１４は、上記の算出したズレ量と所定の閾値とを比較することで、算出した相関が所定レベルより低いか否かを判定する。すなわち、プロセッサ１４は、算出したズレ量が所定の閾値以上である場合、算出した相関が所定レベルより低いと判定する一方、算出したズレ量が所定の閾値より小さい場合、算出した相関が所定レベルより高いと判定する。 Then, the processor 14 determines whether or not the calculated correlation is lower than a predetermined level. For example, the processor 14 determines whether or not the calculated correlation is lower than a predetermined level by comparing the calculated deviation amount with a predetermined threshold value. That is, the processor 14 determines that the calculated correlation is lower than the predetermined level when the calculated deviation amount is equal to or larger than the predetermined threshold, while the calculated correlation is lower than the predetermined level when the calculated deviation amount is smaller than the predetermined threshold. Determine higher.
また、プロセッサ１４は、撮像装置１２で生成された撮像画像を用いて、生体情報（つまり、虹彩情報）に基づく認証処理を実行する。例えば、プロセッサ１４は、認証処理において、撮像画像から虹彩パターンを抽出し、抽出した虹彩パターンと、メモリ１５に記憶されているユーザの虹彩パターンとを比較し、両虹彩パターンが一致すると判定できるときに認証成功とする。一方、両虹彩パターンが一致しないと判定される場合、プロセッサ１４は、認証失敗とする。
Further, the processor 14 executes an authentication process based on biological information (that is, iris information) using the captured image generated by the
そして、プロセッサ１４は、算出した相関が所定レベルよりも低く且つ認証が成功した場合、処理制限を解除する。これに対して、プロセッサ１４は、算出した相関が所定レベルよりも高い場合、認証の成否に関わらず、処理制限を継続する。ここで、「移動パターンと動きパターンとの相関が高い」ということは、ユーザが表示画面内で移動しているオブジェクトを目で追っていることを意味している。すなわち、移動パターンと動きパターンとの相関が高い場合、ユーザは処理制限を解除する意図を有していないと推定することができる。従って、「算出した相関が所定レベルよりも高い場合、認証の成否に関わらず、処理制限を継続する」制御を行うことにより、ユーザの意図に反して処理制限が解除されることを防止することができる。この結果として、ユーザの利便性を向上させることができる。 Then, when the calculated correlation is lower than the predetermined level and the authentication is successful, the processor 14 releases the processing restriction. On the other hand, when the calculated correlation is higher than a predetermined level, the processor 14 continues the process restriction regardless of the success or failure of the authentication. Here, “the correlation between the movement pattern and the movement pattern is high” means that the user is following the moving object in the display screen. That is, when the correlation between the movement pattern and the motion pattern is high, it can be estimated that the user does not intend to release the processing restriction. Therefore, it is possible to prevent the processing restriction from being released against the user's intention by performing the control to “continue the processing restriction regardless of the success or failure of the authentication when the calculated correlation is higher than the predetermined level”. Can do. As a result, user convenience can be improved.
［電子機器の動作例］
上記の通り、実施例２は、実施例１と比べて、基本的には、移動パターン及び動きパラメータが異なっている。このため、移動パターンをｙ軸方向とし、動きパラメータを虹彩領域面積Ｓとするだけで、実施例２の電子機器１０は、図５及び図６のフローチャートに示した処理動作を実行することができる。
[Operation example of electronic equipment]
As described above, the second embodiment basically differs from the first embodiment in the movement pattern and the motion parameter. For this reason, the
ここで、実施例１と同様に、図１４及び図１５に示すように、移動パターンと動きパターンとの相関が高い場合、移動パターンの周期Ｎと動きパターンの周期Ｍとが理想的には一致する。この場合、ユーザが表示画面内で移動しているオブジェクトを目で追っていると推定することができる。図１４は、実施例２のオブジェクトの表示位置の移動パターンと目の動きの例を示す図である。図１５は、図１４の例のときの、オブジェクトの表示位置の移動パターンと目の動きパターンとを示す図である。 Here, as in the first embodiment, as shown in FIGS. 14 and 15, when the correlation between the movement pattern and the motion pattern is high, the period N of the movement pattern and the period M of the movement pattern ideally match. To do. In this case, it can be estimated that the user is following the moving object in the display screen. FIG. 14 is a diagram illustrating an example of the movement pattern of the display position of the object and the movement of the eyes according to the second embodiment. FIG. 15 is a diagram illustrating a movement pattern of an object display position and an eye movement pattern in the example of FIG.
以上のように本実施例によれば、移動パターンをｙ軸方向とし、動きパラメータを虹彩領域面積Ｓとしても、実施例１と同等の効果を得ることができる。 As described above, according to the present embodiment, the same effect as that of the first embodiment can be obtained even when the movement pattern is the y-axis direction and the motion parameter is the iris region area S.
なお、以上の説明では、「オブジェクトの表示変更パターン」として、オブジェクトの表示位置の移動パターンを用いているが、これに限定されるものではなく、ユーザがオブジェクトを見ている場合に、オブジェクトの表示変更パターンと目の動きパターンとの間の相関が高くなるものであればよい。 In the above description, the movement pattern of the object display position is used as the “object display change pattern”. However, the present invention is not limited to this, and when the user is looking at the object, It is sufficient if the correlation between the display change pattern and the eye movement pattern is high.
［実施例３］
実施例３は、「移動パターンと動きパターンとの相関」の他の利用態様に関する。実施例３の電子機器の基本構成は、実施例１と共通するので、図１を参照して説明する。
[Example 3]
Example 3 relates to another usage mode of “correlation between a movement pattern and a motion pattern”. Since the basic configuration of the electronic device of the third embodiment is common to that of the first embodiment, it will be described with reference to FIG.
例えば、実施例１又は実施例２で説明した処理によって、処理制限が解除されて「第１の表示画像」が表示されているとする。ユーザがこの第１の表示画像の内容を見ている場合でも、最後に操作されてから所定時間の間に次の操作が為されないときには、表示部１３がオン状態（つまり、第１の表示画像の表示状態）からスリープ状態に移行する制御が行われることがある。これによって、ユーザの利便性を損なう可能性がある。 For example, it is assumed that the processing restriction is released and the “first display image” is displayed by the processing described in the first or second embodiment. Even when the user is viewing the contents of the first display image, if the next operation is not performed within a predetermined time since the last operation, the display unit 13 is in the on state (that is, the first display image). Control from the display state to the sleep state may be performed. This may impair user convenience.
そこで、電子機器１０に、実施例１又は実施例２の機能に加えて、又は、実施例１又は実施例２の機能とは別に、以下で説明する機能が適用されてもよい。
Therefore, in addition to the function of the first embodiment or the second embodiment, the function described below may be applied to the
実施例３の電子機器１０において、プロセッサ１４は、上記の「第１の表示画像」において「オブジェクト」の表示位置を「移動パターン」に従って時間とともに移動させる。
In the
また、これと同時期に撮像装置１２で生成された複数の撮像画像を用いて、プロセッサ１４は、撮像画像内の目の「動きパターン」を特定する。
Further, using the plurality of captured images generated by the
そして、プロセッサ１４は、上記の「移動パターン」と特定した「動きパターン」との相関を算出する。 Then, the processor 14 calculates a correlation between the “movement pattern” and the identified “motion pattern”.
そして、プロセッサ１４は、算出した相関が所定レベルより低いか否かを判定する。 Then, the processor 14 determines whether or not the calculated correlation is lower than a predetermined level.
そして、プロセッサ１４は、算出した相関が所定レベルよりも低い場合、最後に操作されてから所定時間経過したときに表示部１３をスリープ状態に移行させる。一方、プロセッサ１４は、算出した相関が所定レベルよりも高い場合、最後に操作されてから所定時間経過しても、表示部１３にオン状態を継続させる。 When the calculated correlation is lower than the predetermined level, the processor 14 shifts the display unit 13 to the sleep state when a predetermined time has elapsed since the last operation. On the other hand, when the calculated correlation is higher than a predetermined level, the processor 14 causes the display unit 13 to continue the on state even after a predetermined time has elapsed since the last operation.
以上のように本実施例によれば、電子機器１０において、プロセッサ１４は、撮像装置１２で撮像された撮像画像内の目の動きパターンとオブジェクトの表示位置の移動パターンとの相関が所定レベルよりも低いか否かを判定する。そして、プロセッサ１４は、相関が所定レベルよりも低い場合、表示部１３の状態がオン状態からスリープ状態へ移行することを許容する。一方、プロセッサ１４は、相関が所定レベルよりも高い場合、表示部１３の状態がオン状態からスリープ状態へ移行することを許容しない。すなわち、プロセッサ１４は、相関が所定レベルよりも低い場合、所定の処理を許容する一方、相関が所定レベルよりも高い場合、所定の処理を制限する。
As described above, according to the present embodiment, in the
この電子機器１０の構成により、ユーザが表示部１３に表示されている画像の内容を見ている状況で表示部１３がスリープ状態へ移行してしまう不都合を防止することができる。この結果として、ユーザの利便性を向上させることができる。
With the configuration of the
１０ 電子機器
１１ ＲＦ回路
１２ 撮像装置
１３ 表示部
１４ プロセッサ
１５ メモリ
DESCRIPTION OF
Claims (5)
メモリと、
前記メモリと接続されたプロセッサと、
を具備し、
前記プロセッサは、
表示部でのオブジェクトの表示変更パターンに従って時間とともに前記オブジェクトの表示を変更し、
撮像部で撮像対象を撮像して得られた撮像画像内の目の動きパターンと前記表示変更パターンとの相関が所定レベルよりも低いか否かを判定し、
前記相関が前記所定レベルよりも低く且つ前記認証が成功した場合、前記処理制限を解除し、前記相関が前記所定レベルよりも高い場合、前記認証の成否に関わらず、前記処理制限を継続する、
ことを特徴とする電子機器。 An electronic device that removes the processing restriction using a result of authentication based on biometric information,
Memory,
A processor connected to the memory;
Comprising
The processor is
Change the display of the object over time according to the display change pattern of the object on the display,
Determining whether the correlation between the eye movement pattern in the captured image obtained by imaging the imaging target in the imaging unit and the display change pattern is lower than a predetermined level;
When the correlation is lower than the predetermined level and the authentication is successful, the processing restriction is canceled, and when the correlation is higher than the predetermined level, the processing restriction is continued regardless of success or failure of the authentication.
An electronic device characterized by that.
前記表示変更パターンとして前記オブジェクトの表示位置を左右方向に動かす移動パターンを用い、
前記目の動きパターンのパラメータとして、前記撮像画像内の目画像領域において黒目画像領域の左右に存在する２つの白目画像領域のうちの一方の面積を用いる、
ことを特徴とする請求項１に記載の電子機器。 The processor is
Using a movement pattern that moves the display position of the object in the left-right direction as the display change pattern,
As the parameter of the eye movement pattern, an area of one of the two white-eye image regions existing on the left and right of the black-eye image region in the eye image region in the captured image is used.
The electronic device according to claim 1.
前記表示変更パターンとして前記オブジェクトの表示位置を上下方向に動かす移動パターンを用い、
前記目の動きパターンのパラメータとして、前記撮像画像内の目画像領域に含まれる虹彩画像領域の面積を用いる、
ことを特徴とする請求項１に記載の電子機器。 The processor is
Using a movement pattern that moves the display position of the object up and down as the display change pattern,
Using the area of the iris image area included in the eye image area in the captured image as a parameter of the eye movement pattern,
The electronic device according to claim 1.
ことを特徴とする請求項１から３のいずれか一項に記載の電子機器。 The processor determines that the correlation is lower than the predetermined level when a difference between a first period obtained from the eye movement pattern and a second period of the display change pattern is equal to or greater than a threshold;
The electronic device according to any one of claims 1 to 3, wherein
表示部でのオブジェクトの表示変更パターンに従って時間とともに前記オブジェクトの表示を変更し、
撮像部で撮像された撮像画像内の目の動きパターンと前記表示変更パターンとの相関が所定レベルよりも低いか否かを判定し、
前記相関が前記所定レベルよりも低く且つ前記認証が成功した場合、前記処理制限を解除し、前記相関が前記所定レベルよりも高い場合、前記認証の成否に関わらず、前記処理制限を継続する、
処理を実行させる、
ことを特徴とする生体認証プログラム。 An electronic device that removes processing restrictions using the result of authentication based on biometric information.
Change the display of the object over time according to the display change pattern of the object on the display,
Determining whether the correlation between the eye movement pattern in the captured image captured by the imaging unit and the display change pattern is lower than a predetermined level;
When the correlation is lower than the predetermined level and the authentication is successful, the processing restriction is canceled, and when the correlation is higher than the predetermined level, the processing restriction is continued regardless of success or failure of the authentication.
To execute the process,
A biometric authentication program characterized by that.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015047300A JP6456731B2 (en) | 2015-03-10 | 2015-03-10 | Electronic device and biometric authentication program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015047300A JP6456731B2 (en) | 2015-03-10 | 2015-03-10 | Electronic device and biometric authentication program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016167755A true JP2016167755A (en) | 2016-09-15 |
| JP6456731B2 JP6456731B2 (en) | 2019-01-23 |
Family
ID=56898749
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015047300A Active JP6456731B2 (en) | 2015-03-10 | 2015-03-10 | Electronic device and biometric authentication program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6456731B2 (en) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012022713A (en) * | 2011-10-19 | 2012-02-02 | Panasonic Electric Works Co Ltd | User identifying apparatus |
| US8594374B1 (en) * | 2011-03-30 | 2013-11-26 | Amazon Technologies, Inc. | Secure device unlock with gaze calibration |
| JP2014092940A (en) * | 2012-11-02 | 2014-05-19 | Sony Corp | Image display device and image display method and computer program |
| US20140247208A1 (en) * | 2013-03-01 | 2014-09-04 | Tobii Technology Ab | Invoking and waking a computing device from stand-by mode based on gaze detection |
| US8856541B1 (en) * | 2013-01-10 | 2014-10-07 | Google Inc. | Liveness detection |
| US20140351926A1 (en) * | 2013-05-23 | 2014-11-27 | Honeywell International Inc. | Athentication of device users by gaze |
-
2015
- 2015-03-10 JP JP2015047300A patent/JP6456731B2/en active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8594374B1 (en) * | 2011-03-30 | 2013-11-26 | Amazon Technologies, Inc. | Secure device unlock with gaze calibration |
| JP2012022713A (en) * | 2011-10-19 | 2012-02-02 | Panasonic Electric Works Co Ltd | User identifying apparatus |
| JP2014092940A (en) * | 2012-11-02 | 2014-05-19 | Sony Corp | Image display device and image display method and computer program |
| US8856541B1 (en) * | 2013-01-10 | 2014-10-07 | Google Inc. | Liveness detection |
| US20140247208A1 (en) * | 2013-03-01 | 2014-09-04 | Tobii Technology Ab | Invoking and waking a computing device from stand-by mode based on gaze detection |
| US20140351926A1 (en) * | 2013-05-23 | 2014-11-27 | Honeywell International Inc. | Athentication of device users by gaze |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6456731B2 (en) | 2019-01-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11070743B2 (en) | Photographing using night shot mode processing and user interface | |
| US10628670B2 (en) | User terminal apparatus and iris recognition method thereof | |
| US9674395B2 (en) | Methods and apparatuses for generating photograph | |
| EP3270583B1 (en) | Electronic device having camera module, and image processing method for electronic device | |
| US9426187B2 (en) | Device with TV phone function, non-transitory computer readable storage medium, and control method of device with TV phone function | |
| US20170103252A1 (en) | Fingerprint recognition using a liquid crystal display including fingerprint recognition sensors | |
| US9794472B2 (en) | Imaging device and focusing control method | |
| CN103400108A (en) | Face identification method and device as well as mobile terminal | |
| EP3143545A1 (en) | Electronic device and method for controlling access to same | |
| US9924090B2 (en) | Method and device for acquiring iris image | |
| KR102469426B1 (en) | Image processing apparatus and operating method thereof | |
| EP2922212B1 (en) | Method, apparatus and system for controlling emission | |
| JP6924901B2 (en) | Photography method and electronic equipment | |
| KR20160125872A (en) | Method and device for awaking element | |
| CN107800955B (en) | Communication apparatus, control method of communication apparatus, and storage medium | |
| US9794471B2 (en) | Imaging device and focusing control method | |
| KR20200035299A (en) | Method for overheat protection of user equipment, device, user equipment and base station | |
| US10205868B2 (en) | Live view control device, live view control method, live view system, and program | |
| US9819853B2 (en) | Imaging device and focusing control method | |
| US9699372B2 (en) | Imaging device and focusing control method | |
| KR20220137053A (en) | Exposure Data Acquisition Methods and Electronic Devices | |
| JP2017068330A (en) | Electronic device and operation method thereof | |
| US9547217B2 (en) | Device and, method for controlling a focusing operation | |
| KR20180096622A (en) | Information processing apparatus, information processing method, and program | |
| JP6456731B2 (en) | Electronic device and biometric authentication program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180115 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180405 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20180409 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20180725 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181019 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181109 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181120 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181219 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6456731 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |