JP2017138846A - Information processing apparatus, display method by the same, and computer-executable program - Google Patents

Information processing apparatus, display method by the same, and computer-executable program Download PDF

Info

Publication number
JP2017138846A
JP2017138846A JP2016019962A JP2016019962A JP2017138846A JP 2017138846 A JP2017138846 A JP 2017138846A JP 2016019962 A JP2016019962 A JP 2016019962A JP 2016019962 A JP2016019962 A JP 2016019962A JP 2017138846 A JP2017138846 A JP 2017138846A
Authority
JP
Japan
Prior art keywords
authentication
display
iris
processing apparatus
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016019962A
Other languages
Japanese (ja)
Inventor
藤井　一男
Kazuo Fujii
一男 藤井
幸司 川北
Koji Kawakita
幸司 川北
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Singapore Pte Ltd
Original Assignee
Lenovo Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Singapore Pte Ltd filed Critical Lenovo Singapore Pte Ltd
Priority to JP2016019962A priority Critical patent/JP2017138846A/en
Publication of JP2017138846A publication Critical patent/JP2017138846A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an information processing apparatus that enables a user to easily grasp the position of an iris camera when acquiring an image for iris authentication, a display method by the same, and a computer-executable program.SOLUTION: An information processing apparatus comprises: a display part; an image for authentication acquisition part including an iris camera for acquiring an image for authentication including the iris of a user's eye; and display control means that, when acquiring the image for authentication, displays a UI for authentication including display for notifying the user of the position of the iris camera at a position of the display part corresponding to an arrangement position of the iris camera.SELECTED DRAWING: Figure 1

Description

本発明は、情報処理装置、その表示方法、及びコンピュータが実行可能なプログラムに関する。   The present invention relates to an information processing apparatus, a display method thereof, and a computer-executable program.

近時、各種の生体認証技術が実用化されている。例えば、生体認証技術の１つとして、虹彩認証（Iris authentication）がある。かかる虹彩認証は、個人の眼の虹彩の高解像度の画像にパターン認識技術を応用して行われる。虹彩認証は、誤認率が極めて低く、認証精度が高いものとなっている。   Recently, various biometric authentication technologies have been put into practical use. For example, as one of the biometric authentication technologies, there is iris authentication. Such iris authentication is performed by applying a pattern recognition technique to a high-resolution image of the iris of an individual's eyes. Iris authentication has a very low false positive rate and high authentication accuracy.

虹彩認証は、当初、銀行、政府機関、及び軍隊等で使用されていたが、近時、スマートフォンやＰＣ等にも使用されており、広く普及しつつある。   Iris authentication was originally used by banks, government agencies, and the military, but recently it has also been used for smartphones and PCs and is becoming widespread.

虹彩認証においては、虹彩の複雑な模様を画像として得るため、角膜からの鏡面反射をなるべく起こさないよう、かすかな赤外線照明を用いて高画素なカメラで撮影する必要がある。このように、虹彩認証に使用する虹彩カメラは、赤外線を使用する必要があるため画角が狭く、且つ、高画質な画像を取得する必要があるため、望ましいユーザの眼の撮影範囲は狭い範囲となる。そのため、虹彩認証を行う場合には、ユーザは、虹彩カメラを見て自分の眼が好適な撮影位置となるようにする必要がある。ユーザが虹彩カメラの位置が分からないと、どこを見ればよいのか分からず、ユーザの使い勝手が悪くなってしまう。そのため、ユーザが虹彩カメラの位置を正確に把握できるようにすることが望まれる。   In iris authentication, in order to obtain an intricate pattern of an iris as an image, it is necessary to photograph with a high-pixel camera using faint infrared illumination so as not to cause specular reflection from the cornea as much as possible. As described above, since the iris camera used for iris authentication needs to use infrared rays, the angle of view is narrow and a high-quality image needs to be acquired. It becomes. Therefore, when performing iris authentication, the user needs to look at the iris camera so that his / her eyes are in a suitable photographing position. If the user does not know the position of the iris camera, the user cannot know where to look, and the user's usability deteriorates. Therefore, it is desired that the user can accurately grasp the position of the iris camera.

他方、例えば、ノートＰＣやスマートフォン等では、通常、自分撮りやビデオ通話等に使用する通常の撮影に使用するカメラ（「通常のカメラ」と称する）を備えており、虹彩カメラを搭載する場合は、２台のカメラが搭載されることになる。この場合は、ユーザは虹彩カメラがどこにあるのかより分からなくなって、誤って通常のカメラを見てしまう場合もある。   On the other hand, for example, a notebook PC, a smartphone, or the like usually includes a camera (referred to as a “normal camera”) used for normal shooting used for self-portrait, video call, and the like, and is equipped with an iris camera. Two cameras will be installed. In this case, the user may not know where the iris camera is, and may mistakenly look at the normal camera.

特開２０１２−１４７３０６号公報JP 2012-147306 A

本発明は、上記に鑑みてなされたものであり、虹彩認証用の画像を取得する際に、ユーザが容易に虹彩カメラの位置を把握することが可能な情報処理装置、その表示方法、及びコンピュータが実行可能なプログラムを提供することを目的とする。   The present invention has been made in view of the above, and an information processing apparatus that allows a user to easily grasp the position of an iris camera when acquiring an image for iris authentication, a display method thereof, and a computer The purpose is to provide an executable program.

上述した課題を解決し、目的を達成するために、本発明は、表示部と、ユーザの眼の虹彩を含む認証用画像を取得するための虹彩カメラを含む認証用画像取得部と、前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、前記表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御手段と、を備えたことを特徴とする。   In order to solve the above-described problem and achieve the object, the present invention provides a display unit, an authentication image acquisition unit including an iris camera for acquiring an authentication image including an iris of a user's eye, and the authentication Display control means for displaying an authentication UI including a display for notifying the user of the position of the iris camera when acquiring the image, at a position corresponding to the arrangement position of the iris camera on the display unit; It is provided with.

また、本発明の好ましい態様によれば、前記認証用ＵＩは、前記虹彩カメラで撮影した画像のモニタリング用画面を含むことが望ましい。   Also, according to a preferred aspect of the present invention, it is desirable that the authentication UI includes a monitoring screen for images taken by the iris camera.

また、本発明の好ましい態様によれば、前記認証用ＵＩは、ユーザの眼の位置を適正な撮影位置とするためのガイダンス表示を含むことが望ましい。   According to still another preferable aspect of the present invention, it is desirable that the authentication UI includes a guidance display for setting a user's eye position to an appropriate photographing position.

また、本発明の好ましい態様によれば、前記認証用ＵＩは、前記虹彩カメラの位置を指し示す指示表示を含むことが望ましい。   According to a preferred aspect of the present invention, it is desirable that the authentication UI includes an instruction display indicating the position of the iris camera.

また、本発明の好ましい態様によれば、前記表示部の画面の向きを検出するための検出手段を備え、前記表示制御手段は、前記表示部の画面の向きに応じて、前記表示部に表示させる前記認証用ＵＩの表示位置及び表示方向を変更することが望ましい。   Further, according to a preferred aspect of the present invention, there is provided detection means for detecting the orientation of the screen of the display section, and the display control means displays on the display section in accordance with the orientation of the screen of the display section. It is desirable to change the display position and display direction of the authentication UI to be made.

また、本発明の好ましい態様によれば、前記虹彩カメラの配置位置を示す虹彩カメラ配置位置情報を格納する格納手段を備え、前記表示制御手段は、前記格納手段に格納されている前記虹彩カメラ配置位置情報に基づいて、前記認証用ＵＩを、前記表示部の、前記虹彩カメラの配置位置に対応する位置に表示させることが望ましい。   According to a preferred aspect of the present invention, the image processing apparatus further comprises storage means for storing iris camera arrangement position information indicating an arrangement position of the iris camera, and the display control means comprises the iris camera arrangement stored in the storage means. It is desirable that the authentication UI is displayed at a position corresponding to the arrangement position of the iris camera on the display unit based on the position information.

また、本発明の好ましい態様によれば、前記表示制御手段は、ユーザによるＵＩの操作に応じて、前記認証用ＵＩの表示をＯＮ／ＯＦＦすることが望ましい。   Further, according to a preferred aspect of the present invention, it is desirable that the display control means turns on / off the display of the authentication UI in accordance with a UI operation by a user.

また、本発明の好ましい態様によれば、更に、他のカメラを備えることが望ましい。   Moreover, according to the preferable aspect of this invention, it is desirable to provide another camera further.

また、上述した課題を解決し、目的を達成するために、本発明は、情報処理装置により実行される表示方法であって、虹彩カメラで撮影したユーザの画像からユーザの眼の虹彩を含む認証用画像を取得する認証用画像取得工程と、前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御工程と、を含むことを特徴とする。   In order to solve the above-described problems and achieve the object, the present invention is a display method executed by an information processing apparatus, and includes authentication including an iris of a user's eye from a user's image captured by an iris camera. An authentication image acquisition step for acquiring an image for authentication, and an authentication UI including a display for notifying the user of the position of the iris camera when acquiring the authentication image, an arrangement of the iris camera on the display unit A display control step of displaying at a position corresponding to the position.

また、上述した課題を解決し、目的を達成するために、本発明は、情報処理装置に搭載されたプログラムであって、虹彩カメラで撮影したユーザの画像からユーザの眼の虹彩を含む認証用画像を取得する認証用画像取得工程と、前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御工程と、をコンピュータに実行させることを特徴とする。   In order to solve the above-described problems and achieve the object, the present invention is a program installed in an information processing apparatus for authentication including an iris of a user's eye from a user's image taken by an iris camera. An authentication image acquisition step for acquiring an image, and an authentication UI including a display for notifying the user of the position of the iris camera when acquiring the authentication image, and an arrangement position of the iris camera on the display unit And a display control step of causing the computer to execute the display control process.

本発明によれば、認証用画像を取得する際に、ユーザが容易に虹彩カメラの位置を把握することが可能になるという効果を奏する。   According to the present invention, there is an effect that the user can easily grasp the position of the iris camera when acquiring the authentication image.

図１は、本実施の形態に係る情報処理装置の概念図である。FIG. 1 is a conceptual diagram of the information processing apparatus according to the present embodiment. 図２は、表示部の画面に向きに応じて、認証用ＵＩの表示位置及び表示方向を変更した場合の表示例を示す図である。FIG. 2 is a diagram illustrating a display example when the display position and the display direction of the authentication UI are changed according to the orientation of the screen of the display unit. 図３は、本実施の形態に係る情報処理装置の虹彩認証処理の一例を説明するためのフローチャートである。FIG. 3 is a flowchart for explaining an example of the iris authentication process of the information processing apparatus according to the present embodiment. 図４は、認証用ＵＩの表示例を説明するための図である。FIG. 4 is a diagram for explaining a display example of the authentication UI. 図５は、本実施例に係る情報処理装置の外観構成を示す模式的な斜視図である（クラムシェル状態）。FIG. 5 is a schematic perspective view showing an external configuration of the information processing apparatus according to the present embodiment (clamshell state). 図６は、本実施例に係る情報処理装置がタブレット状態にある場合を示す模式的な斜視図である（タッチ表示部が上向きの状態にある場合を示す）。FIG. 6 is a schematic perspective view showing a case where the information processing apparatus according to the present embodiment is in a tablet state (showing a case where the touch display unit is in an upward state). 図７は、本実例に係る情報処理装置がテント状態にある場合を示す模式的な斜視図である。FIG. 7 is a schematic perspective view illustrating a case where the information processing apparatus according to the present example is in a tent state. 図８は、本実施例に係る情報処理装置の概略のハードウェア構成例を示す図である。FIG. 8 is a diagram illustrating a schematic hardware configuration example of the information processing apparatus according to the present embodiment. 図９は、認証用アプリにより実行される虹彩認証処理を説明するためのフローチャートである。FIG. 9 is a flowchart for explaining iris authentication processing executed by the authentication application.

以下に、この発明にかかる情報処理装置、その表示方法、及びコンピュータが実行可能なプログラムを図面に基づいて詳細に説明する。本発明の構成要素は、本明細書の図面に一般に示してあるが、様々な構成で広く多様に配置し設計してもよいことは容易に理解できる。従って、本発明の装置、システム及び方法の実施形態についての以下のより詳細な説明は、特許請求の範囲に示す本発明の範囲を限定するものではなく、単に本発明の選択した実施形態の一例を示すものであって、本明細書の特許請求の範囲に示す本発明と矛盾無く装置、システム及び方法についての選択した実施形態を単に示すものである。当業者は、特定の細目の１つ以上が無くても、又は他の方法、部品、材料でも本発明を実現できることが理解できる。なお、この実施の形態によりこの発明が限定されるものではない。また、下記実施の形態における構成要素には、当業者が容易に想定できるもの又は実質的に同一のものが含まれる。   Hereinafter, an information processing apparatus, a display method thereof, and a computer-executable program according to the present invention will be described in detail with reference to the drawings. Although the components of the present invention are generally illustrated in the drawings herein, it can be readily understood that they may be arranged and designed in a wide variety of configurations with various configurations. Accordingly, the following more detailed description of the apparatus, system and method embodiments of the present invention is not intended to limit the scope of the invention as set forth in the claims, but merely as an example of selected embodiments of the invention. It is intended merely to illustrate selected embodiments of apparatus, systems and methods consistent with the present invention as set forth in the claims herein. Those skilled in the art will appreciate that the present invention may be implemented without one or more of the specific details or with other methods, components, and materials. Note that the present invention is not limited to the embodiments. In addition, constituent elements in the following embodiments include those that can be easily assumed by those skilled in the art or that are substantially the same.

（実施の形態）
図１〜図４を参照して、本実施の形態に係る情報処理装置を説明する。図１は、本実施の形態に係る情報処理装置の一例を示す概念図である。本実施の形態に係る情報処理装置１は、例えば、ノート型ＰＣ、デスクトップ型ＰＣ、スマートフォン、タブレット、携帯電話、ＰＤＡ、並びに、ＡＴＭ及びセキュリティドア等の認証が要求される装置等である。 (Embodiment)
The information processing apparatus according to the present embodiment will be described with reference to FIGS. FIG. 1 is a conceptual diagram illustrating an example of an information processing apparatus according to the present embodiment. The information processing apparatus 1 according to the present embodiment is, for example, a notebook PC, a desktop PC, a smartphone, a tablet, a mobile phone, a PDA, and an apparatus that requires authentication such as an ATM and a security door.

情報処理装置１は、図１に示すように、認証用画像取得部１１と、表示制御部１２と、認証部１３と、表示部１４とを備えている。   As illustrated in FIG. 1, the information processing apparatus 1 includes an authentication image acquisition unit 11, a display control unit 12, an authentication unit 13, and a display unit 14.

表示部１４は、例えば、ＬＣＤや有機ＥＬディスプレイで構成することができる。表示部１４は、例えば、情報処理装置１の筐体１０に配置することができる。図１に示す例では、表示部１４は、筐体１０の略中央位置に配置されている。表示部１４は、表示制御部１２の制御に従って各種情報が表示され、例えば、認証用ＵＩ２０が表示される。   The display unit 14 can be configured by, for example, an LCD or an organic EL display. For example, the display unit 14 can be disposed in the housing 10 of the information processing apparatus 1. In the example illustrated in FIG. 1, the display unit 14 is disposed at a substantially central position of the housing 10. Various information is displayed on the display unit 14 according to the control of the display control unit 12, and for example, an authentication UI 20 is displayed.

認証用画像取得部１１は、例えば、虹彩カメラ１１Ａを備え、虹彩カメラ１１Ａで認証対象ユーザを撮影し、認証対象ユーザの眼の虹彩を含む認証用画像を取得する。虹彩カメラ１１Ａは、赤外線を被写体に照射してその反射光に応じた画像を取得する。虹彩カメラ１１Ａは、例えば、情報処理装置１の筐体１０に配置することができる。図１に示す例では、虹彩カメラ１１Ａは、筐体１０の右上位置に配置されている。   The authentication image acquisition unit 11 includes, for example, an iris camera 11A, images the authentication target user with the iris camera 11A, and acquires an authentication image including the iris of the authentication target user's eyes. The iris camera 11A irradiates the subject with infrared rays and acquires an image corresponding to the reflected light. The iris camera 11 </ b> A can be disposed in the housing 10 of the information processing apparatus 1, for example. In the example shown in FIG. 1, the iris camera 11 </ b> A is disposed at the upper right position of the housing 10.

より具体的には、認証用画像取得部１１は、虹彩カメラ１１Ａで撮影した画像から、眼の瞳孔及び虹彩を抽出して、眼の虹彩を含む認証用画像を取得する。例えば、認証用画像取得部１１は、画像に含まれる眼から、黒目部分（瞳孔）と白目部分とを特定し、瞳孔の境界部分と白目の内境界部分とにより虹彩を特定して認証用画像として抽出してもよい。   More specifically, the authentication image acquisition unit 11 extracts the pupil and iris of the eye from the image captured by the iris camera 11A, and acquires the authentication image including the iris of the eye. For example, the authentication image acquisition unit 11 specifies a black eye part (pupil) and a white eye part from the eyes included in the image, specifies an iris based on the boundary part of the pupil and the inner boundary part of the white eye, and performs the authentication image. May be extracted as

表示制御部１２は、表示部１４の表示制御を行う。表示制御部１２は、認証用画像を取得する際に、虹彩カメラ１１Ａの位置をユーザに知らせるための指示表示２１を含む認証用ＵＩ２０を、表示部１４の、虹彩カメラ１１Ａの配置位置に対応する位置に表示させる。この認証用ＵＩ２０は、認証対象のユーザが虹彩認証を容易に行うためのものである。図１に示す例では、虹彩カメラ１１Ａの位置をユーザに知らせるための指示表示２１は、矢印で虹彩カメラ１１Ａの位置を指し示している。ユーザは虹彩カメラ１１Ａの位置が分からないと適正な撮影位置を把握できなくなるため、指示表示２１は、ユーザに虹彩カメラ１１Ａの位置を把握させるためのものである。なお、指示表示２１は、矢印に限られるものではなく、他の記号や文字等を使用してもよい。   The display control unit 12 performs display control of the display unit 14. The display control unit 12 corresponds to the arrangement position of the iris camera 11A on the display unit 14 with the authentication UI 20 including the instruction display 21 for notifying the user of the position of the iris camera 11A when acquiring the authentication image. Display in position. This authentication UI 20 is for the user to be authenticated to easily perform iris authentication. In the example shown in FIG. 1, the instruction display 21 for notifying the user of the position of the iris camera 11A indicates the position of the iris camera 11A with an arrow. Since the user cannot grasp the proper photographing position unless the position of the iris camera 11A is known, the instruction display 21 is for causing the user to grasp the position of the iris camera 11A. The instruction display 21 is not limited to the arrow, and other symbols, characters, etc. may be used.

また、表示制御部１２は、筐体１０上の虹彩カメラ１１Ａの配置位置を記憶しておき、記憶しているカメラ１１Ａの配置位置に基づいて、認証用ＵＩ２０を虹彩カメラ１１Ａに対応する表示部１４上の位置に表示することにしてもよい。   Further, the display control unit 12 stores the arrangement position of the iris camera 11A on the housing 10, and displays the authentication UI 20 on the display unit corresponding to the iris camera 11A based on the stored arrangement position of the camera 11A. 14 may be displayed at a position on the screen.

また、認証用ＵＩ２０は、ユーザに撮影される眼を確認してもらうために、虹彩カメラ１１Ａで撮影した画像のモニタリング用画面２０Ｂを含んでいてもよい。ユーザは、このモニタリング用画面２２の画像を見て適正な撮影位置を把握することができる。また、認証用ＵＩ２０は、ユーザの眼の位置を適正な撮影位置（撮影範囲）とするためのガイダンス表示２３を含んでいてもよい。ガイダンス表示２３では、例えば、「”虹彩認証を開始します。虹彩カメラを見て下さい”、”撮影範囲に入るように、右又は左によって下さい”、”近すぎますもっと離れて下さい”、”遠すぎますもっと近づいて下さい”、”暗すぎますもっと明るい場所で撮影して下さい”、”明るすぎますもっと暗い場所で撮影して下さい”」等を表示してもよい。図１に示す例では、ガイダンス表示２３として、「虹彩認証を開始します。虹彩カメラを見て下さい」が表示されている。   Further, the authentication UI 20 may include a monitoring screen 20B for an image photographed by the iris camera 11A so that the user can confirm the eye photographed. The user can grasp an appropriate photographing position by viewing the image on the monitoring screen 22. Further, the authentication UI 20 may include a guidance display 23 for setting the position of the user's eyes to an appropriate shooting position (shooting range). In the guidance display 23, for example, "" Iris authentication starts. Look at the iris camera ”,“ Right or left to enter the shooting range ”,“ Too far away, ”“ Too far away, get closer ”,“ Too dark, brighter place "Please shoot with", "It is too bright, please shoot in a darker place", etc. may be displayed. In the example shown in FIG. 1, “Iris authentication starts. Look at the iris camera” is displayed as the guidance display 23.

また、表示制御部１２は、表示部１４の画面の向きに応じて表示部１４に表示する表示情報を回転して縦表示又は横表示を行う構成としてもよい。例えば、表示制御部１２は、表示部１４の画面の向きを検出するための検出手段を備え、検出手段で検出した表示部１４の画面の向き、すなわち画面の上下左右方向に対する虹彩カメラ１１Ａの位置に応じて、表示情報を回転するとともに、認証用ＵＩ２０の表示位置及び表示方向を変更することにしてもよい。検出手段としては、公知の構成を使用することができ、例えば、加速度センサやジャイロセンサ等を使用することができる。   Further, the display control unit 12 may be configured to perform vertical display or horizontal display by rotating display information displayed on the display unit 14 according to the screen orientation of the display unit 14. For example, the display control unit 12 includes detection means for detecting the orientation of the screen of the display unit 14, and the orientation of the screen of the display unit 14 detected by the detection unit, that is, the position of the iris camera 11 </ b> A with respect to the vertical and horizontal directions of the screen. Accordingly, the display information may be rotated and the display position and display direction of the authentication UI 20 may be changed. As the detection means, a known configuration can be used. For example, an acceleration sensor, a gyro sensor, or the like can be used.

図２は、表示部１４の画面に向きに応じて、認証用ＵＩ２０の表示位置及び表示方向を変更した場合の表示例を示す図である。図２（Ａ）は、虹彩カメラ１１Ａが表示部１４に対して上方向に位置するように表示部１４を横方向とした場合を示しており、右上に位置する虹彩カメラ１１Ａの近傍に認証用ＵＩ２０を表示した例を示している。図２（Ｂ）は、虹彩カメラ１１Ａが表示部１４に対して下方向に位置するように表示部１４を横方向とした場合を示しており、左下に位置する虹彩カメラ１１Ａの近傍に認証用ＵＩ２０を表示した例を示している。図２（Ｃ）は、虹彩カメラ１１Ａが表示部１４に対して左上方向に位置するように表示部１４を縦方向とした場合を示しており、左上方向に位置する虹彩カメラ１１Ａの近傍に認証用ＵＩ２０を表示した例を示している。図２（Ｄ）は、虹彩カメラ１１Ａが表示部１４に対して右下方向に位置するように表示部１４を縦方向とした場合を示しており、右下方向に位置する虹彩カメラ１１Ａの近傍に認証用ＵＩ２０を表示した例を示している。それぞれの表示部１４に対する虹彩カメラ１１Ａの相対位置に応じて、認証用ＵＩ２０の表示位置を表示部１４に対する虹彩カメラ１１Ａの近傍位置に変更し、指示表示２１の向きを上下左右に変更している。   FIG. 2 is a diagram illustrating a display example when the display position and the display direction of the authentication UI 20 are changed according to the orientation of the screen of the display unit 14. FIG. 2A shows a case where the display unit 14 is in the horizontal direction so that the iris camera 11A is positioned upward with respect to the display unit 14, and authentication is performed near the iris camera 11A located in the upper right. The example which displayed UI20 is shown. FIG. 2B shows a case where the display unit 14 is set in the horizontal direction so that the iris camera 11A is positioned downward with respect to the display unit 14, and authentication is performed in the vicinity of the iris camera 11A located in the lower left. The example which displayed UI20 is shown. FIG. 2C shows a case where the display unit 14 is set in the vertical direction so that the iris camera 11A is positioned in the upper left direction with respect to the display unit 14, and authentication is performed in the vicinity of the iris camera 11A positioned in the upper left direction. An example in which the UI 20 is displayed is shown. FIG. 2D shows a case where the display unit 14 is set in the vertical direction so that the iris camera 11A is positioned in the lower right direction with respect to the display unit 14, and in the vicinity of the iris camera 11A positioned in the lower right direction. An example in which the authentication UI 20 is displayed is shown in FIG. In accordance with the relative position of the iris camera 11A with respect to each display unit 14, the display position of the authentication UI 20 is changed to a position near the iris camera 11A with respect to the display unit 14, and the direction of the instruction display 21 is changed to up, down, left, and right. .

また、表示制御部１２は、ユーザによるＵＩ（例えば、メカボタンやソフトウェアボタン等）の操作に応じて、認証用ＵＩ２０の表示をＯＮ／ＯＦＦさせることにしてもよい。   Further, the display control unit 12 may turn on / off the display of the authentication UI 20 in accordance with the operation of the UI (for example, a mechanical button, a software button, etc.) by the user.

図１に戻り、認証部１３は、認証情報格納部１３Ａを備えている。認証部１３は、認証用画像取得部１１で取得した認証用画像に基づいて虹彩認証を行う。認証部１３は、情報処理装置１が備えていてもよいし、情報処理装置１にネットワークを介して接続されるＷｅｂサーバ等に搭載されていてもよい。すなわち、情報処理装置１は認証部１３を搭載して、ローカルでユーザ認証を行うことにしてもよい（例えば、情報処理装置１の起動時やスリープ状態からの復帰時等に認証部１３がユーザ認証を行う。）。また、所定のサービスを提供するＷｅｂサーバが認証部１３を備え、情報処理装置１から認証用画像をＷｅｂサーバに送信し、Ｗｅｂサーバの認証部１３がユーザ認証を行ってもよい。ここでは、
情報処理装置１が認証部１３を搭載している場合について説明する。 Returning to FIG. 1, the authentication unit 13 includes an authentication information storage unit 13A. The authentication unit 13 performs iris authentication based on the authentication image acquired by the authentication image acquisition unit 11. The authentication unit 13 may be included in the information processing apparatus 1 or may be mounted on a Web server or the like connected to the information processing apparatus 1 via a network. That is, the information processing apparatus 1 may be equipped with the authentication unit 13 and perform user authentication locally (for example, when the information processing apparatus 1 is activated or when returning from the sleep state, the authentication unit 13 may be the user). Authenticate.) In addition, a Web server that provides a predetermined service may include the authentication unit 13, send an authentication image from the information processing apparatus 1 to the Web server, and the authentication unit 13 of the Web server may perform user authentication. here,
A case where the information processing apparatus 1 includes the authentication unit 13 will be described.

認証情報格納部１３Ａは、予め撮影し取得された各ユーザの片眼又は両眼の虹彩の登録画像を記憶する。登録画像は、各ユーザの少なくとも一方の眼の虹彩を含む画像である。認証情報格納部１３Ａに記憶されている登録画像は、認証用画像の虹彩認証処理の際、認証部１３により参照される。認証部１３は、認証情報格納部１３Ａに記憶された虹彩の登録画像を用いて、認証用画像取得部１１で抽出した認証用画像の虹彩についてマッチング処理を行う。この虹彩認証処理には、公知の虹彩認証アルゴリズムを用いることができる。   The authentication information storage unit 13A stores a registered image of the iris of one or both eyes of each user that is captured and acquired in advance. The registered image is an image including an iris of at least one eye of each user. The registered image stored in the authentication information storage unit 13A is referred to by the authentication unit 13 during the iris authentication process of the authentication image. The authentication unit 13 performs matching processing on the iris of the authentication image extracted by the authentication image acquisition unit 11 using the iris registration image stored in the authentication information storage unit 13A. A known iris authentication algorithm can be used for the iris authentication process.

上記構成において、認証用画像取得部１１、表示制御部１２、及び認証部１３は、ハードウェアやソフトウェアのモジュール、又は、その組み合わせで構成することができる。また、コンピュータがプログラムを実行することにより、認証用画像取得部１１、表示制御部１２、及び認証部１３の機能を実現することにしてもよい。   In the above configuration, the authentication image acquisition unit 11, the display control unit 12, and the authentication unit 13 can be configured by hardware or software modules, or a combination thereof. Further, the functions of the authentication image acquisition unit 11, the display control unit 12, and the authentication unit 13 may be realized by a computer executing a program.

図３は、本実施の形態に係る情報処理装置１により実行される虹彩認証処理の一例を説明するためのフローチャートである。図４は、認証用ＵＩ２０の表示例を説明するための図である。本実施の形態に係る情報処理装置１により実行される虹彩認証処理を図３のフローチャートに従って、図４の表示例を参照しつつ説明する。   FIG. 3 is a flowchart for explaining an example of the iris authentication process executed by the information processing apparatus 1 according to the present embodiment. FIG. 4 is a diagram for explaining a display example of the authentication UI 20. The iris authentication process executed by the information processing apparatus 1 according to the present embodiment will be described according to the flowchart of FIG. 3 with reference to the display example of FIG.

本実施の形態に係る情報処理装置１は、ユーザの個人識別が必要となったタイミングで虹彩認証処理を実行する。例えば、情報処理装置１の電源が投入された場合（システムを起動する際）、スリープ状態から復帰する場合等のタイミングで虹彩認証処理が開始される。   The information processing apparatus 1 according to the present embodiment executes iris authentication processing at a timing when the user's personal identification is required. For example, when the information processing apparatus 1 is turned on (when the system is activated), the iris authentication process is started at a timing such as when returning from the sleep state.

まず、表示制御部１２は、表示部１４に認証用ＵＩ２０を表示する（ステップＳ１）。例えば、表示制御部１２は、図４（Ａ）に示すように、認証用ＵＩ２０として、虹彩カメラ１１Ａの位置をユーザに知らせるための矢印２１、「虹彩認証を行います。虹彩カメラを見て下さい。」のガイダンス表示２３、モニタリング用画面２２を表示する。これにより、ユーザは虹彩カメラ１１Ａの方を見ることができる。   First, the display control unit 12 displays the authentication UI 20 on the display unit 14 (step S1). For example, as shown in FIG. 4A, the display control unit 12 performs an iris authentication 21 as an authentication UI 20 to notify the user of the position of the iris camera 11A, “Iris authentication. Look at the iris camera. . ”And a monitoring screen 22 are displayed. Thereby, the user can see the iris camera 11A.

次に、虹彩カメラ１１Ａは、被写体の撮影を開始する（ステップＳ２）。これに応じて、例えば、表示制御部１２は、図４（Ｂ）に示すように、モニタリング用画面２２に、虹彩カメラ１１Ａで撮影された画像（動画）を順次表示する。これにより、ユーザは、モニタリング用画面２２を見ながら眼の撮影位置を調整することができる。   Next, the iris camera 11A starts photographing the subject (step S2). In response to this, for example, as shown in FIG. 4B, the display control unit 12 sequentially displays images (moving images) captured by the iris camera 11A on the monitoring screen 22. Thereby, the user can adjust the photographing position of the eye while viewing the monitoring screen 22.

認証用画像取得部１１は、虹彩カメラ１１Ａで撮影した画像から虹彩を含む認証用画像を抽出する（ステップＳ３）。認証用画像は複数枚抽出してもよい。認証用画像取得部１１は、適正な（例えば、大きさ、明るさ、鮮明度等が適正）認証用画像を抽出できたか否かを判断する（ステップＳ４）。適切な認証用画像を抽出できなかった場合には（ステップＳ４の「Ｎｏ」）、例えば、認証用画像取得部１１は、その理由を表示制御部１２に通知し、表示制御部１２は、この理由に応じて、適正な認証用画像を抽出するために、認証用ＵＩ２０のガイダンス表示を変更して（ステップＳ６）、ステップＳ３に戻る。例えば、表示制御部１２は、図４（Ｃ）に示すように、撮影した画像の眼が小さすぎる場合は、「遠すぎます、もっと虹彩カメラに近づいて下さい」のガイダンス表示２３に変更する。ユーザは、このガイダンス表示２３に従って虹彩カメラ１１Ａに近づくことができる。   The authentication image acquisition unit 11 extracts an authentication image including an iris from an image photographed by the iris camera 11A (step S3). A plurality of authentication images may be extracted. The authentication image acquisition unit 11 determines whether or not an appropriate authentication image (for example, size, brightness, and definition are appropriate) has been extracted (step S4). If an appropriate authentication image cannot be extracted (“No” in step S4), for example, the authentication image acquisition unit 11 notifies the display control unit 12 of the reason, and the display control unit 12 Depending on the reason, in order to extract an appropriate authentication image, the guidance display of the authentication UI 20 is changed (step S6), and the process returns to step S3. For example, as shown in FIG. 4C, the display control unit 12 changes to a guidance display 23 of “too far, please get closer to the iris camera” when the eye of the captured image is too small. The user can approach the iris camera 11A according to the guidance display 23.

適切な認証用画像を抽出できた場合には（ステップＳ４の「Ｙｅｓ」）、認証部１３は、抽出した認証用画像に基づき虹彩認証を行う（ステップＳ５）。具体的には、認証部１３は、認証情報格納部１３Ａに格納されている虹彩の登録画像と抽出した認証用画像とのマッチング処理を行って両者が一致するかを認証する。   When an appropriate authentication image has been extracted (“Yes” in step S4), the authentication unit 13 performs iris authentication based on the extracted authentication image (step S5). Specifically, the authentication unit 13 performs matching processing between the iris registration image stored in the authentication information storage unit 13A and the extracted authentication image to authenticate whether they match.

情報処理装置１は、虹彩認証に成功した場合は、所定の処理（システムの起動、復帰等）を行う。また、情報処理装置１は、虹彩認証に失敗した場合は、ユーザに対して認証失敗のメッセージを通知してもよい。例えば、表示制御部１２は、図４（Ｄ）に示すように、ユーザが好適な撮影位置となり、適正な認証用画像を抽出できて虹彩認証に成功した場合は、「虹彩認証に成功しました」というガイダンス表示２３を表示してもよい。   If the iris authentication is successful, the information processing apparatus 1 performs predetermined processing (system activation, restoration, etc.). Further, when the iris authentication fails, the information processing apparatus 1 may notify the user of an authentication failure message. For example, as shown in FIG. 4D, the display control unit 12 indicates that the user is in a suitable shooting position, can extract an appropriate authentication image, and succeeds in iris authentication. May be displayed.

以上説明したように、本実施の形態によれば、ユーザの眼の虹彩を含む認証用画像を取得するための虹彩カメラ１１Ａを含む認証用画像取得部１１と、認証用画像を取得する際に、虹彩カメラ１１Ａの位置をユーザに知らせるための指示表示２１を含む認証用ＵＩ２０を、表示部１４の、虹彩カメラ１１Ａの配置位置に対応する位置に表示させる表示制御部１２と、を備えているので、認証用画像を取得する際に、ユーザが容易に虹彩カメラの位置を把握することが可能になる。   As described above, according to the present embodiment, when the authentication image acquisition unit 11 including the iris camera 11A for acquiring the authentication image including the iris of the user's eye and the authentication image are acquired. And a display control unit 12 for displaying an authentication UI 20 including an instruction display 21 for notifying the user of the position of the iris camera 11A at a position corresponding to the arrangement position of the iris camera 11A. Therefore, when acquiring the authentication image, the user can easily grasp the position of the iris camera.

また、認証用ＵＩ２０は、虹彩カメラ１１Ａで撮影した画像のモニタリング用画面２２を含むこととしたので、ユーザは、モニタリング用画面を見ながら眼の撮影位置を調整することが可能となる。   Further, since the authentication UI 20 includes the monitoring screen 22 for the image captured by the iris camera 11A, the user can adjust the imaging position of the eye while viewing the monitoring screen.

また、認証用ＵＩ２０は、ユーザの眼の位置を適正な撮影位置とするためのガイダンス表示２３を含むこととしたので、ユーザの眼の位置を適正な撮影位置に案内することが可能となる。   Further, since the authentication UI 20 includes the guidance display 23 for setting the position of the user's eyes to an appropriate shooting position, it is possible to guide the position of the user's eyes to the appropriate shooting position.

また、表示部１４の画面の向きを検出するための検出手段を備え、表示制御部１２は、表示部１４の画面の向きに応じて、表示部１４に表示させる認証用ＵＩの表示位置及び表示方向を変更することとしたので、画面の向きが変わってもユーザは虹彩カメラの位置を容易に把握することが可能となる。   The display control unit 12 also includes detection means for detecting the orientation of the screen of the display unit 14, and the display control unit 12 displays and displays the authentication UI displayed on the display unit 14 according to the orientation of the screen of the display unit 14. Since the direction is changed, the user can easily grasp the position of the iris camera even if the orientation of the screen changes.

なお、情報処理装置１は、更に、他のカメラ（通常のカメラ）を備えることにしてもよい。カメラが複数台搭載されている場合は、ユーザは虹彩カメラ１１Ａの位置を把握することがより難しくなるので、本実施の形態のような認証用ＵＩ２０の表示がより効果的になる。   Note that the information processing apparatus 1 may further include another camera (normal camera). When a plurality of cameras are mounted, it becomes more difficult for the user to grasp the position of the iris camera 11A, so that the display of the authentication UI 20 as in the present embodiment becomes more effective.

（実施例）
図５〜図９を参照して、本実施の形態に係る情報処理装置をノート型ＰＣに適用した例を説明する。まず、図５〜図７を参照して、本実施例に係る情報処理装置の外観構成を説明する。本実施例の情報処理装置は、いわゆるコンバーチブル型ＰＣであり、ノートＰＣ及びタブレットＰＣとして使用することができる。 (Example)
An example in which the information processing apparatus according to the present embodiment is applied to a notebook PC will be described with reference to FIGS. First, the external configuration of the information processing apparatus according to the present embodiment will be described with reference to FIGS. The information processing apparatus of this embodiment is a so-called convertible PC, and can be used as a notebook PC and a tablet PC.

図５は、本実施例に係る情報処理装置の外観構成を示す模式的な斜視図である（クラムシェル状態）。図６は、本実施例に係る情報処理装置がタブレット状態にある場合を示す模式的な斜視図である（タッチ表示部が上向きの状態にある場合を示す）。図７は、本実例に係る情報処理装置がテント状態にある場合を示す模式的な斜視図である。   FIG. 5 is a schematic perspective view showing an external configuration of the information processing apparatus according to the present embodiment (clamshell state). FIG. 6 is a schematic perspective view showing a case where the information processing apparatus according to the present embodiment is in a tablet state (showing a case where the touch display unit is in an upward state). FIG. 7 is a schematic perspective view illustrating a case where the information processing apparatus according to the present example is in a tent state.

図５に示すように、情報処理装置１００は、第１の筐体１１０と、第２の筐体１２０とを備えている。また、情報処理装置１００は、第１の筐体１１０と第２の筐体１２０との間にヒンジ（連結部）１２５を備えている。   As illustrated in FIG. 5, the information processing apparatus 100 includes a first casing 110 and a second casing 120. In addition, the information processing apparatus 100 includes a hinge (connection unit) 125 between the first housing 110 and the second housing 120.

第１の筐体１１０は、略矩形形状を呈し、表示部１１１Ｂと表示部１１１Ｂ上に配置されたタッチセンサ１１１Ａとで構成されるタッチ表示部１１１と、タッチ表示部１１１の上方の略中央位置に配置されたカメラ１１４と、タッチ表示部１１１の下方の左寄りの位置に配置された虹彩カメラ１１５と、が配置されている。   The first casing 110 has a substantially rectangular shape, and includes a touch display unit 111 including a display unit 111B and a touch sensor 111A disposed on the display unit 111B, and a substantially central position above the touch display unit 111. And an iris camera 115 disposed at a position on the left side below the touch display unit 111 are disposed.

タッチ表示部１１１は、文字、図形、画像等の情報を表示するとともに、指、スタイラス、ペン等（以下、「指示体」と称する）を用いてタッチセンサ１１１Ａに対して行われる各種操作を検出する。表示部１１１Ｂには、アイコン、バー、文字、及び画像等の各種情報が表示される。図５に示す例では、ユーザが虹彩認証を容易に実行するための認証用ＵＩ２０が表示部１１１Ｂの左下に表示されている。認証用ＵＩ２０は、虹彩カメラ１１５の位置をユーザに知らせるための表示（矢印）２１、「虹彩認証を行います。虹彩カメラを見て下さい。」のガイダンス表示２３、モニタリング用画面２２が表示されている。また、表示部１１１Ｂには、パスワード入力欄２１０が表示されている。   The touch display unit 111 displays information such as characters, graphics, and images, and detects various operations performed on the touch sensor 111A using a finger, stylus, pen, or the like (hereinafter referred to as “indicator”). To do. Various information such as icons, bars, characters, and images are displayed on the display unit 111B. In the example illustrated in FIG. 5, an authentication UI 20 for allowing the user to easily perform iris authentication is displayed on the lower left of the display unit 111B. The authentication UI 20 displays a display (arrow) 21 for notifying the user of the position of the iris camera 115, a guidance display 23 for “Perform iris authentication. Look at the iris camera”, and a monitoring screen 22. Yes. In addition, a password input field 210 is displayed on the display unit 111B.

タッチセンサ１１１Ａが各種操作を検出する方式は、静電容量式、感圧式等の方式を採用することができる。カメラ１１４は、可視光カメラであり、通常の撮影に使用される。虹彩カメラ１１５は、赤外線カメラであり、虹彩認証を行う際に使用される。   As a method for detecting various operations by the touch sensor 111A, a capacitance type, a pressure sensitive type, or the like can be adopted. The camera 114 is a visible light camera and is used for normal shooting. The iris camera 115 is an infrared camera and is used when performing iris authentication.

また、第１の筐体１１０の内部には、第１の加速度センサ１１３が配置されている。第１の加速度センサ１１３は、第１の筐体１１０（タッチ表示部１１１）に対して、その長手方向に平行なＹ１方向、その短手方向に平行なＸ１方向、Ｘ１及びＹ１方向に垂直なＺ１方向の加速度を検出する。 A first acceleration sensor 113 is disposed inside the first housing 110. The first acceleration sensor 113 has a Y 1 direction parallel to its longitudinal direction, an X 1 direction parallel to its short direction, X 1 and Y 1 with respect to the first casing 110 (touch display unit 111). detecting a vertical Z 1 direction of the acceleration in the direction.

第２の筐体１２０は、略矩形を呈し、キーボード１２２と、キーボード１２２の下方に配置されたタッチパッド１２６とが配置されている。また、第２の筐体１２０の内部には、第２の加速度センサ１２３が配置されている。第２の加速度センサ１２３は、第２の筐体１２０に対して、その長手方向に平行なＹ２方向、その短手方向に平行なＸ２方向、Ｘ２及びＹ２方向に垂直なＺ２方向の加速度を検出する。 The second housing 120 has a substantially rectangular shape, and includes a keyboard 122 and a touch pad 126 disposed below the keyboard 122. A second acceleration sensor 123 is disposed inside the second housing 120. The second acceleration sensor 123 has a Y 2 direction parallel to its longitudinal direction, a X 2 direction parallel to its short direction, and a Z 2 perpendicular to the X 2 and Y 2 directions with respect to the second casing 120. Detect direction acceleration.

ヒンジ１２５は、第１の筐体１１０と第２の筐体１２０とを回転可能に連結する。回転軸δに対する第１の筐体１１０と第２の筐体１２０との角度（第２の筐体１２０に対する第１の筐体１１０の角度）を「θ」と規定する。より詳細には、ヒンジ１２５は、第１の筐体１１０と第２の筐体１２０とを回転軸δを中心に実質的に３６０度回転可能に連結する。情報処理装置１００は、ヒンジ１２５により各種状態（構成）を取ることが可能となっている。   The hinge 125 couples the first housing 110 and the second housing 120 in a rotatable manner. An angle between the first housing 110 and the second housing 120 with respect to the rotation axis δ (an angle of the first housing 110 with respect to the second housing 120) is defined as “θ”. More specifically, the hinge 125 connects the first housing 110 and the second housing 120 so as to be able to rotate substantially 360 degrees about the rotation axis δ. The information processing apparatus 100 can take various states (configurations) by the hinge 125.

次に、情報処理装置１００の各種状態（構成）を説明する。情報処理装置１００は、第２の筐体１２０に対する第１の筐体１１０の角度θで規定される各種状態を取ることができる。   Next, various states (configurations) of the information processing apparatus 100 will be described. The information processing apparatus 100 can take various states defined by the angle θ of the first housing 110 with respect to the second housing 120.

角度θ＝０度をクローズ（Ｃｌｏｓｅ）状態、０度＜θ＜１８０度をクラムシェル（Ｃｌａｍｓｈｅｌｌ）状態（図５参照）、１８０度＜θ＜３６０度をテント（Ｔｅｎｔ）状態（図７参照）、角度θ＝３６０度をタブレット（Ｔａｂｌｅｔ）状態（図６参照）と称する。   Angle θ = 0 degree is a closed state, 0 degree <θ <180 degree is a clamshell state (see FIG. 5), 180 degree <θ <360 degree is a tent state (see FIG. 7) The angle θ = 360 degrees is referred to as a tablet state (see FIG. 6).

情報処理装置１００では、第１の加速度センサ１３及び第２の加速度センサ２３の検出結果に基づいて、上述の角度θで規定される各種状態及び画面の向きを検出することが可能に構成されている。情報処理装置１００では、表示部１１１Ｂの画面の向きに応じて表示画面を回転させることにより、縦方向表示及び横方向表示を行うことが可能に構成されている。   The information processing apparatus 100 is configured to be able to detect various states and screen orientations defined by the angle θ based on the detection results of the first acceleration sensor 13 and the second acceleration sensor 23. Yes. The information processing apparatus 100 is configured to perform vertical display and horizontal display by rotating the display screen according to the screen orientation of the display unit 111B.

また、情報処理装置１００は、表示部１１１Ｂの画面の向きに応じて、認証用ＵＩ２０の表示位置及び表示方向を変更可能に構成されている。例えば、図６に示すようなタブレット状態において、縦方向表示を行う場合は、認証用ＵＩ２０は表示部１１１Ｂの画面上の右下に表示される。また、図７に示すようなクラムシェル状態において、横方向表示を行う場合は、認証用ＵＩ２０は表示部１１１Ｂの画面上の右上に表示される。   The information processing apparatus 100 is configured to be able to change the display position and display direction of the authentication UI 20 according to the orientation of the screen of the display unit 111B. For example, in the tablet state as shown in FIG. 6, when performing the vertical display, the authentication UI 20 is displayed on the lower right on the screen of the display unit 111B. Further, in the clamshell state as shown in FIG. 7, when performing the horizontal display, the authentication UI 20 is displayed on the upper right on the screen of the display unit 111B.

図８は、上記図５の情報処理装置１００の概略のハードウェア構成例を示す図である。情報処理装置１００は、図８に示すように、ＣＰＵ１０１、ＢＩＯＳ−ＲＯＭ１０２、メモリ１０３、ＨＤＤ（ハードディスク）１０４、ＧＰＵ１０５、表示部１１１Ｂ、通信制御部１０７、電源回路１０８、エンベデッド・コントローラ１０９、入力ユニット１２４、電源回路１０８、カメラモジュール１３０、虹彩カメラモジュール１４０を備えており、各部はバスを介して直接又は間接的に接続されている。   FIG. 8 is a diagram showing a schematic hardware configuration example of the information processing apparatus 100 of FIG. As shown in FIG. 8, the information processing apparatus 100 includes a CPU 101, a BIOS-ROM 102, a memory 103, an HDD (hard disk) 104, a GPU 105, a display unit 111B, a communication control unit 107, a power supply circuit 108, an embedded controller 109, and an input unit. 124, a power supply circuit 108, a camera module 130, and an iris camera module 140, each part being directly or indirectly connected via a bus.

ＣＰＵ１０１は、バスを介して接続されたＨＤＤ１０４に格納されたＯＳ１０４Ａにより情報処理装置１００全体の制御を行うとともに、ＨＤＤ１０４に格納された各種のプログラムに基づいて処理を実行する機能を司る。ＢＩＯＳ−ＲＯＭ１０２は、ＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ：基本入出力システム）１０２ａを格納している。ＢＩＯＳ１０２ａは、虹彩カメラ１１５の第１の筐体１１０上の配置位置を示す虹彩カメラ配置位置情報を格納している。この虹彩カメラ配置位置情報は、認証用ＵＩ２０を表示する際に参照される。   The CPU 101 controls the entire information processing apparatus 100 by the OS 104A stored in the HDD 104 connected via the bus, and controls the function of executing processing based on various programs stored in the HDD 104. The BIOS-ROM 102 stores a BIOS (Basic Input / Output System: basic input / output system) 102a. The BIOS 102 a stores iris camera arrangement position information indicating the arrangement position of the iris camera 115 on the first housing 110. This iris camera arrangement position information is referred to when displaying the authentication UI 20.

メモリ１０３は、キャッシュメモリやＲＡＭで構成されており、ＣＰＵ１０１の実行プログラムの読み込み領域として、実行プログラムの処理データを書き込む作業領域として利用される書き込み可能メモリである。   The memory 103 is composed of a cache memory and a RAM, and is a writable memory used as a work area for writing processing data of the execution program as a read area for the execution program of the CPU 101.

ＨＤＤ１０４は、情報処理装置１００全体の制御を行うためのＯＳ１０４Ａ、周辺機器類をハードウェア操作するための各種ドライバ１０４Ｂ、認証用アプリ１０４Ｃ、及び特定業務に向けられた他のアプリ１０４Ｄ等を記憶する機能を有する。認証用アプリ１０４Ｃは、虹彩認証処理を実行するためのアプリである。   The HDD 104 stores an OS 104A for controlling the information processing apparatus 100 as a whole, various drivers 104B for operating peripheral devices in hardware, an authentication application 104C, and other applications 104D directed to a specific task. It has a function. The authentication application 104C is an application for executing iris authentication processing.

ＧＰＵ１０５は、ＣＰＵ１０１の制御に従って、表示情報をビデオ信号に変換し、変換したビデオ信号を表示部１１１Ｂに出力して表示させる。表示部１１１Ｂは、例えば、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（Organic Electro−Luminescence）パネルなどで構成され、ＣＰＵ１０１の制御に従って、各種情報を表示する機能を有している。通信制御部１０７は、ネットワークを介して通信を行うためのユニットである。   The GPU 105 converts display information into a video signal under the control of the CPU 101, and outputs the converted video signal to the display unit 111B for display. The display unit 111 </ b> B includes, for example, a liquid crystal display (LCD), an organic EL (Organic Electro-Luminescence) panel, and the like, and has a function of displaying various information according to the control of the CPU 101. The communication control unit 107 is a unit for performing communication via a network.

エンベデッド・コントローラ１０９は、ＭＰＵ、メモリ、プログラムを格納したＲＯＭ、Ａ／Ｄ変換器、Ｄ／Ａ変換器等で構成されている。エンベデッド・コントローラ１０９は、入力ユニット１２４、タッチセンサ１１１Ａ、電源回路１０８、第１及び第２の加速度センサ１１３、１２３が接続されており、入力ユニット１２４、タッチセンサ１１１Ａ、電源回路１０８、第１及び第２の加速度センサ１１３、１２３の動作を制御する。また、エンベデッド・コントローラ１０９は、第１の加速度センサ１１３及び第２の加速度センサ１２３の検出結果に基づいて、情報処理装置１００の各種状態及び表示部１１１Ｂの画面の向きを検出する。   The embedded controller 109 includes an MPU, a memory, a ROM storing a program, an A / D converter, a D / A converter, and the like. The embedded controller 109 is connected to the input unit 124, the touch sensor 111A, the power supply circuit 108, and the first and second acceleration sensors 113 and 123. The input unit 124, the touch sensor 111A, the power supply circuit 108, the first and second The operation of the second acceleration sensors 113 and 123 is controlled. The embedded controller 109 detects various states of the information processing apparatus 100 and the orientation of the screen of the display unit 111B based on the detection results of the first acceleration sensor 113 and the second acceleration sensor 123.

第１の加速度センサ１１３は、第１の筐体１１０（タッチ表示部１１１）に対して、その長手方向に平行なＹ１方向、その短手方向に平行なＸ１方向、Ｘ１及びＹ１方向に垂直なＺ１方向の加速度を検出して、エンベデッド・コントローラ１０９に出力する。 The first acceleration sensor 113 has a Y 1 direction parallel to its longitudinal direction, an X 1 direction parallel to its short direction, X 1 and Y 1 with respect to the first casing 110 (touch display unit 111). The acceleration in the Z1 direction perpendicular to the direction is detected and output to the embedded controller 109.

第２の加速度センサ１２３は、第２の筐体１２０に対して、その長手方向に平行なＹ２方向、その短手方向に平行なＸ２方向、Ｘ２及びＹ２方向に垂直なＺ２方向の加速度を検出して、エンベデッド・コントローラ１０９に出力する。 The second acceleration sensor 123, the second relative to the housing 120, Y2 direction parallel to the longitudinal direction, the shorter parallel X 2 in the direction, X 2 and Y 2 perpendicular Z 2 in the direction Is detected and output to the embedded controller 109.

入力ユニット１２４は、ユーザ入力を行うためのユーザ・インターフェース・デバイスであり、文字、コマンド等を入力するための各種キーより構成されるキーボード１２２、画面上のカーソルを移動させたり、各種メニューを選択するためのタッチパッド１２６等である。   The input unit 124 is a user interface device for performing user input. The keyboard 122 includes various keys for inputting characters, commands, and the like. The cursor on the screen is moved and various menus are selected. For example, a touch pad 126.

タッチセンサ１１１Ａは、指やペン等の指示体を用いてタッチセンサ１１１Ａに対して行われた各種操作を、操作が行われた場所のタッチセンサ１１１Ａ上での位置とともに検出し、エンベデッド・コントローラ１０９に通知する。タッチセンサ１１１Ａによって検出される操作には、タッチ操作、スライド操作、及びピッチ操作が含まれる。   The touch sensor 111A detects various operations performed on the touch sensor 111A using an indicator such as a finger or a pen together with the position on the touch sensor 111A where the operation is performed, and the embedded controller 109 Notify The operations detected by the touch sensor 111A include a touch operation, a slide operation, and a pitch operation.

電源回路１０８は、ＡＣアダプタ、インテリジェント電池、インテリジェント電池を充電するための充電器、及びＤＣ／ＤＣコンバータ等を備えている。   The power supply circuit 108 includes an AC adapter, an intelligent battery, a charger for charging the intelligent battery, a DC / DC converter, and the like.

カメラモジュール１３０は、通常の撮影に使用される可視光用のカメラ１１４と、カメラ１１４で撮像された画像に対して信号処理を行う信号処理部１３１とを備えている。カメラ１１４は、レンズや撮像素子等を有し、被写体光を電気信号に変換してＲ、Ｇ、Ｂの画像信号として信号処理部１３１に出力する。信号処理部１３１は、Ａ／Ｄ変換器、画像処理用ＬＳＩ、メモリ等を備え、撮像素子の駆動タイミングや露出制御等を行うと共に、カメラ１１４で得られたＲＧＢの画像信号に対して各種信号処理を行った後、ＣＰＵ１０１に出力する。   The camera module 130 includes a visible light camera 114 used for normal photographing, and a signal processing unit 131 that performs signal processing on an image captured by the camera 114. The camera 114 includes a lens, an image sensor, and the like, converts subject light into an electrical signal, and outputs the signal to the signal processing unit 131 as R, G, and B image signals. The signal processing unit 131 includes an A / D converter, an image processing LSI, a memory, and the like. The signal processing unit 131 performs drive timing and exposure control of the image sensor, and various signals for the RGB image signal obtained by the camera 114. After processing, it outputs to CPU101.

虹彩カメラモジュール１４０は、虹彩認証に使用される赤外線用の虹彩カメラ１１５と、虹彩カメラ１１５で撮像された画像に対して信号処理を行う信号処理部１４１とを備えている。虹彩カメラ１１５は、レンズ、撮像素子、及び赤外線発光部等を有し、赤外線発光部から発光される赤外光の反射光を電気信号に変換して画像信号として信号処理部１４１に出力する。信号処理部１４１は、Ａ／Ｄ変換器、画像処理用ＬＳＩ、メモリ等を備え、虹彩カメラ１１５の撮像素子の駆動タイミングや露出制御等を行うと共に、虹彩カメラ１１５で得られた画像信号に対して各種信号処理を行った後、ＣＰＵ１０１に出力する。   The iris camera module 140 includes an infrared iris camera 115 used for iris authentication and a signal processing unit 141 that performs signal processing on an image captured by the iris camera 115. The iris camera 115 includes a lens, an image sensor, an infrared light emitting unit, and the like, converts the reflected light of the infrared light emitted from the infrared light emitting unit into an electrical signal, and outputs it as an image signal to the signal processing unit 141. The signal processing unit 141 includes an A / D converter, an image processing LSI, a memory, and the like. The signal processing unit 141 performs drive timing and exposure control of the image sensor of the iris camera 115, and processes image signals obtained by the iris camera 115. After performing various signal processing, the data is output to the CPU 101.

次に、上記情報処理装置１００の虹彩認証処理について説明する。ＣＰＵ１０１は認証用アプリ１０４Ｃを実行して、虹彩認証処理を実行する。以下、ＣＰＵ１０１が認証用アプリ１０４Ｃを実行することにより実現する処理を、認証用アプリ１０４Ｃを動作主体として説明する。認証用アプリ１０４Ｃは、予め登録してある虹彩画像と、虹彩カメラ１１５で撮影した画像から抽出した虹彩を含む認証用画像とが一致するか否かの虹彩認証を実行する。認証用アプリ１０４Ｃは、ユーザによる虹彩認証を容易にするために、認証用画像を取得する際に、虹彩カメラ１１５の位置をユーザに知らせるための指示表示２１を含む認証用ＵＩ２０を表示部１１１Ｂの、虹彩カメラ１１５の配置位置に対応する位置に表示させる。   Next, the iris authentication process of the information processing apparatus 100 will be described. The CPU 101 executes the authentication application 104C to execute iris authentication processing. Hereinafter, processing realized by the CPU 101 executing the authentication application 104C will be described with the authentication application 104C as an operating subject. The authentication application 104 </ b> C performs iris authentication to determine whether or not an iris image registered in advance matches an authentication image including an iris extracted from an image captured by the iris camera 115. In order to facilitate iris authentication by the user, the authentication application 104C displays an authentication UI 20 including an instruction display 21 for notifying the user of the position of the iris camera 115 when the authentication image is acquired. The image is displayed at a position corresponding to the arrangement position of the iris camera 115.

図９は、認証用アプリ１０４Ｃにより実行される虹彩認証処理を説明するためのフローチャートである（表示例については上記図４参照）。認証用アプリ１０４Ｃは、例えば、電源ＯＮ時や休止状態からの復帰時等の認証が必要なタイミングで虹彩認証処理を実行する。   FIG. 9 is a flowchart for explaining the iris authentication process executed by the authentication application 104C (see FIG. 4 for a display example). For example, the authentication application 104C executes the iris authentication process at a timing when authentication is required, for example, when the power is turned on or when returning from the hibernation state.

図９において、まず、認証用アプリ１０４Ｃは、ＢＩＯＳ１０２ａから虹彩カメラ配置位置情報を取得すると共に（ステップＳ１０）、エンベデッド・コントローラ１０９から表示部１１Ｂの画面の向きの情報を取得する（ステップＳ１１）。認証用アプリ１０４Ｃは、虹彩カメラ配置位置情報及び画面の向きに基づいて、認証用ＵＩ２０の表示位置及び表示方向を決定する（ステップＳ１２）。認証用アプリ１０４Ｃは、決定した表示位置及び表示方向で認証用ＵＩ２０を表示部１１１Ｂに表示する（ステップＳ１３）。   In FIG. 9, first, the authentication application 104C acquires iris camera arrangement position information from the BIOS 102a (step S10), and acquires information on the screen orientation of the display unit 11B from the embedded controller 109 (step S11). The authentication application 104C determines the display position and display direction of the authentication UI 20 based on the iris camera arrangement position information and the screen orientation (step S12). The authentication application 104C displays the authentication UI 20 on the display unit 111B at the determined display position and display direction (step S13).

認証用ＵＩ２０は、例えば、図５に示すように、ユーザに虹彩カメラ１１５の位置を知らせるための指示表示２１と、虹彩カメラ１１５で撮影した画像のモニタリング用画面２０２と、ガイダンス表示２３とを含んでいてもよい。また、認証用アプリ１０４Ｃは、パスワード入力欄を２１０を表示して、虹彩認証とパスワード認証の両方が可能な構成としてもよい。   For example, as shown in FIG. 5, the authentication UI 20 includes an instruction display 21 for informing the user of the position of the iris camera 115, a monitoring screen 202 for an image captured by the iris camera 115, and a guidance display 23. You may go out. Further, the authentication application 104C may be configured such that both the iris authentication and the password authentication can be performed by displaying the password input field 210.

次に、認証用アプリ１０４Ｃは、虹彩カメラモジュール１４０の虹彩カメラ１１５に被写体の撮影を開始させる（ステップＳ１４）。虹彩カメラ１１５で撮影された画像は信号処理部１４１で信号処理された後、順次、認証用アプリ１０４Ｃに入力される。認証用アプリ１０４Ｃは、認証用ＵＩ２０のモニタリング用画面２２に、虹彩カメラ１１５で撮影された画像（動画）を順次表示する。ユーザは、モニタリング用画面２２を見ながら眼の撮影位置を調整することができる。   Next, the authentication application 104C causes the iris camera 115 of the iris camera module 140 to start photographing the subject (step S14). The images captured by the iris camera 115 are subjected to signal processing by the signal processing unit 141 and then sequentially input to the authentication application 104C. The authentication application 104 </ b> C sequentially displays images (moving images) captured by the iris camera 115 on the monitoring screen 22 of the authentication UI 20. The user can adjust the photographing position of the eye while viewing the monitoring screen 22.

認証用アプリ１０４Ｃは、所定のタイミングで、虹彩カメラ１１５で撮影した画像から虹彩を含む認証用画像を抽出する（ステップＳ１５）。認証用アプリ１０４Ｃは、適正な認証用画像を抽出できたか否かを判断する（ステップＳ１６）。適切な認証用画像を抽出できなかった場合には（ステップＳ１６の「Ｎｏ」）、認証用アプリ１０４Ｃは、適正な認証用画像を抽出するために、認証用ＵＩ２０のガイダンス表示２３を変更し（ステップＳ１８）、ステップＳ１５に戻る。なお、認証用アプリ１０４Ｃが認証用画像を抽出することとしたが、虹彩カメラモジュール１４０の信号処理部１４１が認証用画像を抽出してもよい。   The authentication application 104C extracts an authentication image including an iris from an image photographed by the iris camera 115 at a predetermined timing (step S15). The authentication application 104C determines whether or not a proper authentication image has been extracted (step S16). If an appropriate authentication image cannot be extracted (“No” in step S16), the authentication application 104C changes the guidance display 23 of the authentication UI 20 in order to extract an appropriate authentication image ( Step S18), the process returns to step S15. Although the authentication application 104C extracts the authentication image, the signal processing unit 141 of the iris camera module 140 may extract the authentication image.

適切な認証用画像を抽出できた場合には（ステップＳ１６の「Ｙｅｓ」）、認証用アプリ１０４Ｃは、認証用画像に基づき虹彩認証を行う（ステップＳ１７）。具体的には、記憶している虹彩の登録画像と抽出した認証用画像とのマッチング処理を行って両者が一致するか否かを認証する。例えば、情報処理装置１００は、認証に成功した場合は、所定の処理（システムやＯＳ１０４Ａの起動、システムの復帰等）を行う。また、認証用アプリ１０４Ｃは、認証に失敗した場合は、ユーザに対して認証失敗のメッセージを表示してもよい。   If an appropriate authentication image can be extracted (“Yes” in step S16), the authentication application 104C performs iris authentication based on the authentication image (step S17). Specifically, a matching process between the stored iris registration image and the extracted authentication image is performed to authenticate whether or not they match. For example, when authentication is successful, the information processing apparatus 100 performs predetermined processing (such as activation of the system or the OS 104A, restoration of the system). Further, the authentication application 104C may display an authentication failure message to the user when the authentication fails.

なお、上記実施例では、認証アプリ１０４Ｃが虹彩認証処理を実行することにしたが、ＯＳ１０４Ａやハードウェアで構成される認証モジュール（認証用チップ）が虹彩認証処理を実行することにしてもよい。   In the above embodiment, the authentication application 104C executes the iris authentication process. However, an authentication module (authentication chip) constituted by the OS 104A or hardware may execute the iris authentication process.

１ 情報処理装置
１０ 筐体
１１ 認証用画像取得部
１１Ａ 虹彩カメラ
１２ 表示制御部
１３ 認証部
１４ 認証情報格納部
２０ 認証用ＵＩ
１００ 情報処理装置
１００ 制御部
１０１ ＣＰＵ
１０２ ＲＯＭ
１０２ａ ＢＩＯＳ
１０３ メモリ
１０４ ＨＤＤ
１０４Ａ ＯＳ
１０４Ｃ 認証用アプリ
１０５ ＧＰＵ
１０７ 通信制御部
１０８ 電源回路
１０９ エンベデッド・コントローラ
１１４ カメラ
１１５ 虹彩カメラ
１３０ カメラモジュール
１４０ 虹彩カメラモジュール DESCRIPTION OF SYMBOLS 1 Information processing apparatus 10 Housing | casing 11 Authentication image acquisition part 11A Iris camera 12 Display control part 13 Authentication part 14 Authentication information storage part 20 Authentication UI
DESCRIPTION OF SYMBOLS 100 Information processing apparatus 100 Control part 101 CPU
102 ROM
102a BIOS
103 Memory 104 HDD
104A OS
104C Authentication application 105 GPU
107 communication control unit 108 power supply circuit 109 embedded controller 114 camera 115 iris camera 130 camera module 140 iris camera module

Claims (10)

表示部と、
ユーザの眼の虹彩を含む認証用画像を取得するための、虹彩カメラを含む認証用画像取得部と、
前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、前記表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御手段と、
を備えたことを特徴とする情報処理装置。 A display unit;
An authentication image acquisition unit including an iris camera for acquiring an authentication image including an iris of a user's eye;
Display control means for displaying an authentication UI including a display for notifying the user of the position of the iris camera when acquiring the authentication image at a position corresponding to the arrangement position of the iris camera on the display unit. When,
An information processing apparatus comprising: 前記認証用ＵＩは、前記虹彩カメラで撮影した画像のモニタリング用画面を含むことを特徴とする請求項１に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the authentication UI includes a monitoring screen for an image captured by the iris camera. 前記認証用ＵＩは、ユーザの眼の位置を適正な撮影位置とするためのガイダンス表示を含むことを特徴とする請求項１又は請求項２に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the authentication UI includes a guidance display for setting a user's eye position to an appropriate photographing position. 前記認証用ＵＩは、前記虹彩カメラの位置を指し示す指示表示を含むことを特徴とする請求項１〜３のいずれか１つに記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the authentication UI includes an instruction display indicating a position of the iris camera. 前記表示部の画面の向きを検出するための検出手段を備え、
前記表示制御手段は、前記表示部の画面の向きに応じて、前記表示部に表示させる前記認証用ＵＩの表示位置及び表示方向を変更することを特徴とする請求項１〜４のいずれか１つに記載の情報処理装置。 A detecting means for detecting a screen orientation of the display unit;
5. The display control unit according to claim 1, wherein the display control unit changes a display position and a display direction of the authentication UI displayed on the display unit according to a screen orientation of the display unit. Information processing apparatus described in one. 前記虹彩カメラの配置位置を示す虹彩カメラ配置位置情報を格納する格納手段を備え、
前記表示制御手段は、前記格納手段に格納されている前記虹彩カメラ配置位置情報に基づいて、前記認証用ＵＩを、前記表示部の、前記虹彩カメラの配置位置に対応する位置に表示させることを特徴とする請求項１〜請求項５のいずれか１つに記載の情報処理装置。 Storing means for storing iris camera arrangement position information indicating the arrangement position of the iris camera;
The display control means displays the authentication UI at a position corresponding to the arrangement position of the iris camera on the display unit based on the iris camera arrangement position information stored in the storage means. The information processing apparatus according to any one of claims 1 to 5, wherein the information processing apparatus is characterized. 前記表示制御手段は、ユーザによるＵＩの操作に応じて、前記認証用ＵＩの表示をＯＮ／ＯＦＦすることを特徴とする請求項１〜請求項６のいずれか１つに記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the display control unit turns on / off the display of the authentication UI according to a UI operation by a user. 更に、他のカメラを備えたことを特徴とする請求項１〜７のいずれか１つに記載の情報処理装置。   The information processing apparatus according to claim 1, further comprising another camera. 情報処理装置により実行される表示方法であって、
虹彩カメラで撮影したユーザの画像からユーザの眼の虹彩を含む認証用画像を取得する認証用画像取得工程と、
前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御工程と、
を含むことを特徴とする情報処理装置の表示方法。 A display method executed by an information processing apparatus,
An authentication image acquisition step of acquiring an authentication image including an iris of the user's eye from the user's image captured by an iris camera;
A display control step of displaying an authentication UI including a display for notifying the user of the position of the iris camera at a position corresponding to the arrangement position of the iris camera when acquiring the authentication image; ,
A display method for an information processing apparatus. 情報処理装置に搭載されたプログラムであって、
虹彩カメラで撮影したユーザの画像からユーザの眼の虹彩を含む認証用画像を取得する認証用画像取得工程と、
前記認証用画像を取得する際に、前記虹彩カメラの位置をユーザに知らせるための表示を含む認証用ＵＩを、表示部の、前記虹彩カメラの配置位置に対応する位置に表示させる表示制御工程と、
をコンピュータに実行させることを特徴とするコンピュータが実行可能なプログラム。 A program installed in an information processing apparatus,
An authentication image acquisition step of acquiring an authentication image including an iris of the user's eye from the user's image captured by an iris camera;
A display control step of displaying an authentication UI including a display for notifying the user of the position of the iris camera at a position corresponding to the arrangement position of the iris camera when acquiring the authentication image; ,
A computer-executable program characterized by causing a computer to execute.
JP2016019962A 2016-02-04 2016-02-04 Information processing apparatus, display method by the same, and computer-executable program Pending JP2017138846A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016019962A JP2017138846A (en) 2016-02-04 2016-02-04 Information processing apparatus, display method by the same, and computer-executable program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016019962A JP2017138846A (en) 2016-02-04 2016-02-04 Information processing apparatus, display method by the same, and computer-executable program

Publications (1)

Publication Number Publication Date
JP2017138846A true JP2017138846A (en) 2017-08-10

Family

ID=59566829

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016019962A Pending JP2017138846A (en) 2016-02-04 2016-02-04 Information processing apparatus, display method by the same, and computer-executable program

Country Status (1)

Country Link
JP (1) JP2017138846A (en)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019204494A (en) * 2017-09-09 2019-11-28 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． Execution of biometric authentication
JP2019215274A (en) * 2018-06-13 2019-12-19 レノボ・シンガポール・プライベート・リミテッド Information processing device and method for controlling information processing device
US10749967B2 (en) 2016-05-19 2020-08-18 Apple Inc. User interface for remote authorization
US10748153B2 (en) 2014-05-29 2020-08-18 Apple Inc. User interface for payments
US10783227B2 (en) 2017-09-09 2020-09-22 Apple Inc. Implementation of biometric authentication
US10783576B1 (en) 2019-03-24 2020-09-22 Apple Inc. User interfaces for managing an account
US10803281B2 (en) 2013-09-09 2020-10-13 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US10872256B2 (en) 2017-09-09 2020-12-22 Apple Inc. Implementation of biometric authentication
US10956550B2 (en) 2007-09-24 2021-03-23 Apple Inc. Embedded authentication systems in an electronic device
JP2021512404A (en) * 2018-01-29 2021-05-13 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Authentication window display method and device
US11037150B2 (en) 2016-06-12 2021-06-15 Apple Inc. User interfaces for transactions
US11074572B2 (en) 2016-09-06 2021-07-27 Apple Inc. User interfaces for stored-value accounts
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
US11200309B2 (en) 2011-09-29 2021-12-14 Apple Inc. Authentication with secondary approver
US11321731B2 (en) 2015-06-05 2022-05-03 Apple Inc. User interface for loyalty accounts and private label accounts
US11481769B2 (en) 2016-06-11 2022-10-25 Apple Inc. User interface for transactions
US20220406095A1 (en) * 2019-12-04 2022-12-22 Nec Corporation Information presenting system, information presenting method, computer program, and authentication system
US11574041B2 (en) 2016-10-25 2023-02-07 Apple Inc. User interface for managing access to credentials for use in an operation
US11676373B2 (en) 2008-01-03 2023-06-13 Apple Inc. Personal computing device control using face detection and recognition
US11783305B2 (en) 2015-06-05 2023-10-10 Apple Inc. User interface for loyalty accounts and private label accounts for a wearable device
US11816194B2 (en) 2020-06-21 2023-11-14 Apple Inc. User interfaces for managing secure operations
US12002042B2 (en) 2016-06-11 2024-06-04 Apple, Inc User interface for transactions
US12079458B2 (en) 2016-09-23 2024-09-03 Apple Inc. Image data for enhanced user interactions
US12099586B2 (en) 2022-01-28 2024-09-24 Apple Inc. Implementation of biometric authentication

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000341560A (en) * 1999-05-31 2000-12-08 Sony Corp Video photographing device
JP2008107942A (en) * 2006-10-24 2008-05-08 Omron Corp Impersonation detection device
JP2009130539A (en) * 2007-11-21 2009-06-11 Canon Inc Image pickup apparatus and display controlling method therefor
JP2009211370A (en) * 2008-03-04 2009-09-17 Oki Electric Ind Co Ltd Iris authentication apparatus
JP2009273699A (en) * 2008-05-15 2009-11-26 Sankyo Co Ltd System for game, game machine, mobile terminal, program for mobile terminal and program for game system
JP2013239100A (en) * 2012-05-17 2013-11-28 Sharp Corp Information input device
JP2015097379A (en) * 2013-10-08 2015-05-21 パナソニックＩｐマネジメント株式会社 Imaging apparatus
JP2015099473A (en) * 2013-11-19 2015-05-28 シャープ株式会社 Display unit with device
JP2015142317A (en) * 2014-01-30 2015-08-03 シャープ株式会社 Electronic apparatus
JP2015170314A (en) * 2014-03-10 2015-09-28 パナソニックＩｐマネジメント株式会社 Settlement terminal apparatus, settlement processing method, settlement processing program and recording medium
JP2015187783A (en) * 2014-03-26 2015-10-29 富士通株式会社 Portable information processing apparatus and program
JP2015220650A (en) * 2014-05-19 2015-12-07 株式会社コナミデジタルエンタテインメント Photographing system for user image, guidance method for shutter timing, and computer program

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000341560A (en) * 1999-05-31 2000-12-08 Sony Corp Video photographing device
JP2008107942A (en) * 2006-10-24 2008-05-08 Omron Corp Impersonation detection device
JP2009130539A (en) * 2007-11-21 2009-06-11 Canon Inc Image pickup apparatus and display controlling method therefor
JP2009211370A (en) * 2008-03-04 2009-09-17 Oki Electric Ind Co Ltd Iris authentication apparatus
JP2009273699A (en) * 2008-05-15 2009-11-26 Sankyo Co Ltd System for game, game machine, mobile terminal, program for mobile terminal and program for game system
JP2013239100A (en) * 2012-05-17 2013-11-28 Sharp Corp Information input device
JP2015097379A (en) * 2013-10-08 2015-05-21 パナソニックＩｐマネジメント株式会社 Imaging apparatus
JP2015099473A (en) * 2013-11-19 2015-05-28 シャープ株式会社 Display unit with device
JP2015142317A (en) * 2014-01-30 2015-08-03 シャープ株式会社 Electronic apparatus
JP2015170314A (en) * 2014-03-10 2015-09-28 パナソニックＩｐマネジメント株式会社 Settlement terminal apparatus, settlement processing method, settlement processing program and recording medium
JP2015187783A (en) * 2014-03-26 2015-10-29 富士通株式会社 Portable information processing apparatus and program
JP2015220650A (en) * 2014-05-19 2015-12-07 株式会社コナミデジタルエンタテインメント Photographing system for user image, guidance method for shutter timing, and computer program

Cited By (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11468155B2 (en) 2007-09-24 2022-10-11 Apple Inc. Embedded authentication systems in an electronic device
US10956550B2 (en) 2007-09-24 2021-03-23 Apple Inc. Embedded authentication systems in an electronic device
US11676373B2 (en) 2008-01-03 2023-06-13 Apple Inc. Personal computing device control using face detection and recognition
US11755712B2 (en) 2011-09-29 2023-09-12 Apple Inc. Authentication with secondary approver
US11200309B2 (en) 2011-09-29 2021-12-14 Apple Inc. Authentication with secondary approver
US11287942B2 (en) 2013-09-09 2022-03-29 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces
US11494046B2 (en) 2013-09-09 2022-11-08 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on unlock inputs
US10803281B2 (en) 2013-09-09 2020-10-13 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US11768575B2 (en) 2013-09-09 2023-09-26 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on unlock inputs
US10902424B2 (en) 2014-05-29 2021-01-26 Apple Inc. User interface for payments
US10796309B2 (en) 2014-05-29 2020-10-06 Apple Inc. User interface for payments
US10977651B2 (en) 2014-05-29 2021-04-13 Apple Inc. User interface for payments
US11836725B2 (en) 2014-05-29 2023-12-05 Apple Inc. User interface for payments
US10748153B2 (en) 2014-05-29 2020-08-18 Apple Inc. User interface for payments
US11321731B2 (en) 2015-06-05 2022-05-03 Apple Inc. User interface for loyalty accounts and private label accounts
US11734708B2 (en) 2015-06-05 2023-08-22 Apple Inc. User interface for loyalty accounts and private label accounts
US11783305B2 (en) 2015-06-05 2023-10-10 Apple Inc. User interface for loyalty accounts and private label accounts for a wearable device
US10749967B2 (en) 2016-05-19 2020-08-18 Apple Inc. User interface for remote authorization
US11206309B2 (en) 2016-05-19 2021-12-21 Apple Inc. User interface for remote authorization
US11481769B2 (en) 2016-06-11 2022-10-25 Apple Inc. User interface for transactions
US12002042B2 (en) 2016-06-11 2024-06-04 Apple, Inc User interface for transactions
US11037150B2 (en) 2016-06-12 2021-06-15 Apple Inc. User interfaces for transactions
US11900372B2 (en) 2016-06-12 2024-02-13 Apple Inc. User interfaces for transactions
US11074572B2 (en) 2016-09-06 2021-07-27 Apple Inc. User interfaces for stored-value accounts
US12079458B2 (en) 2016-09-23 2024-09-03 Apple Inc. Image data for enhanced user interactions
US11995171B2 (en) 2016-10-25 2024-05-28 Apple Inc. User interface for managing access to credentials for use in an operation
US11574041B2 (en) 2016-10-25 2023-02-07 Apple Inc. User interface for managing access to credentials for use in an operation
JP2019204494A (en) * 2017-09-09 2019-11-28 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． Execution of biometric authentication
US11386189B2 (en) 2017-09-09 2022-07-12 Apple Inc. Implementation of biometric authentication
US11393258B2 (en) 2017-09-09 2022-07-19 Apple Inc. Implementation of biometric authentication
US10783227B2 (en) 2017-09-09 2020-09-22 Apple Inc. Implementation of biometric authentication
US11765163B2 (en) 2017-09-09 2023-09-19 Apple Inc. Implementation of biometric authentication
US10872256B2 (en) 2017-09-09 2020-12-22 Apple Inc. Implementation of biometric authentication
JP2021512404A (en) * 2018-01-29 2021-05-13 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Authentication window display method and device
EP3736691B1 (en) * 2018-01-29 2024-06-26 Huawei Technologies Co., Ltd. Display method and apparatus for authentication window
JP7148045B2 (en) 2018-01-29 2022-10-05 ホアウェイ・テクノロジーズ・カンパニー・リミテッド AUTHENTICATION WINDOW DISPLAY METHOD, TERMINAL, COMPUTER-READABLE STORAGE MEDIUM AND COMPUTER PROGRAM
JP7532720B2 (en) 2018-01-29 2024-08-14 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Terminal, method, computer-readable storage medium and computer program
JP2022116117A (en) * 2018-01-29 2022-08-09 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Authentication window display method and apparatus
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
US11928200B2 (en) 2018-06-03 2024-03-12 Apple Inc. Implementation of biometric authentication
JP2019215274A (en) * 2018-06-13 2019-12-19 レノボ・シンガポール・プライベート・リミテッド Information processing device and method for controlling information processing device
US11494471B2 (en) 2018-06-13 2022-11-08 Lenovo (Singapore) Pte. Ltd. Display controller for detecting the presence of a user
US11619991B2 (en) 2018-09-28 2023-04-04 Apple Inc. Device control using gaze information
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11809784B2 (en) 2018-09-28 2023-11-07 Apple Inc. Audio assisted enrollment
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US11328352B2 (en) 2019-03-24 2022-05-10 Apple Inc. User interfaces for managing an account
US10783576B1 (en) 2019-03-24 2020-09-22 Apple Inc. User interfaces for managing an account
US11688001B2 (en) 2019-03-24 2023-06-27 Apple Inc. User interfaces for managing an account
US11610259B2 (en) 2019-03-24 2023-03-21 Apple Inc. User interfaces for managing an account
US11669896B2 (en) 2019-03-24 2023-06-06 Apple Inc. User interfaces for managing an account
US20220406095A1 (en) * 2019-12-04 2022-12-22 Nec Corporation Information presenting system, information presenting method, computer program, and authentication system
US11816194B2 (en) 2020-06-21 2023-11-14 Apple Inc. User interfaces for managing secure operations
US12099586B2 (en) 2022-01-28 2024-09-24 Apple Inc. Implementation of biometric authentication
US12105874B2 (en) 2023-02-02 2024-10-01 Apple Inc. Device control using gaze information

Similar Documents

Publication Publication Date Title
JP2017138846A (en) Information processing apparatus, display method by the same, and computer-executable program
USRE49323E1 (en) Mobile client device, operation method, and recording medium
RU2639648C1 (en) Method and device for recognizing fingerprints
US20190108620A1 (en) Information processing apparatus, information processing method and computer program
KR102570777B1 (en) Electronic device including a plurality of touch displays and method for changing status thereof
US11182461B2 (en) Apparatus, systems, and method for determining authentication
US20150124069A1 (en) Information processing device and information processing method
JP6376246B2 (en) Authentication device, authentication method, control program, and recording medium
US11356607B2 (en) Electing camera modes for electronic devices having multiple display panels
KR20200045198A (en) Electronic apparatus and controlling method thereof
US11119646B2 (en) Electronic device and control method
WO2021068775A1 (en) Method and apparatus for starting application in terminal device, and terminal and storage medium
US11250759B1 (en) Systems and methods for adaptive color accuracy with multiple sensors to control a display&#39;s white point and to calibrate the display using pre-boot diagnostics
WO2018135466A1 (en) Terminal device and display control program
KR20140037575A (en) Method and apparatus for authenticating password using sensing information
JP6616379B2 (en) Electronics
JP6325369B2 (en) Electronic device, control method and program
US11842119B2 (en) Display system that displays virtual object, display device and method of controlling same, and storage medium
EP4362481A1 (en) Method for displaying guide for position of camera, and electronic device
EP4418255A1 (en) Information processing apparatus and control method
JP5513465B2 (en) Authentication method, authentication device, and computer executable program
US10489571B2 (en) Information processing apparatus determining propriety of use based on authentication result of fingerprint authentication process, control method therefor, and storage medium storing control program therefor
US20210382615A1 (en) Device and method for providing feedback for user input in electronic device
US20190302998A1 (en) Terminal Device, Display Position Control Program, And Display Position Control Method
CN116414208A (en) Electronic device and control method

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170530

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180109