WO2016080031A1 - 制御システム、情報処理装置、制御方法、およびプログラム - Google Patents

制御システム、情報処理装置、制御方法、およびプログラム Download PDF

Info

Publication number
WO2016080031A1
WO2016080031A1 PCT/JP2015/073088 JP2015073088W WO2016080031A1 WO 2016080031 A1 WO2016080031 A1 WO 2016080031A1 JP 2015073088 W JP2015073088 W JP 2015073088W WO 2016080031 A1 WO2016080031 A1 WO 2016080031A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
eye
iris
illumination
control
Prior art date
Application number
PCT/JP2015/073088
Other languages
English (en)
French (fr)
Inventor
崇史 安倍
竹雄 塚本
宗一 小波
伊藤　智行
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US15/519,568 priority Critical patent/US10592740B2/en
Priority to EP15860741.6A priority patent/EP3223232B1/en
Priority to JP2016560081A priority patent/JP6819291B2/ja
Publication of WO2016080031A1 publication Critical patent/WO2016080031A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0008—Apparatus for testing the eyes; Instruments for examining the eyes provided with illuminating means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/112—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring diameter of pupils
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1075—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions by non-invasive methods, e.g. for determining thickness of tissue layer
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor

Definitions

  • the present disclosure relates to a control system, an information processing apparatus, a control method, and a program.
  • Patent Document 2 listed below discloses an iris code generation method for such an iris feature analysis method. Specifically, the iris existing in the captured image is recognized, the inner boundary of the iris (circular boundary with the pupil) and the outer boundary of the iris are determined, and the circular iris is separated. Next, a polar coordinate system is set on the separated iris image.
  • the origin of the coordinate system is placed at the center of the circular boundary with the pupil. Thereafter, the feature value of the iris image that has been subjected to polar coordinate conversion is extracted, and an iris code having a fixed length having a universal format is generated for all irises.
  • the iris code generated in this way is stored as a reference code, and at the time of authentication, it is determined whether or not they are the same individual by comparing the similarly encoded iris code with a previously stored reference code.
  • Patent Document 3 There has been proposed a system for continuously taking images of a plurality of eyes having different pupil sizes by changing the size of the pupil of the eye.
  • Patent Document 4 has a problem that the field of view is obstructed because the camera must be arranged in front of the line of sight.
  • the present disclosure proposes a control system, an information processing apparatus, a control method, and a program capable of capturing a clear iris image in which reflected light from illumination is not reflected without disturbing the user's view.
  • an illumination unit that emits light toward one of the left and right eyes, an imaging unit that images the other eye different from the one, and the illumination unit that directs light toward the one eye
  • a control system includes a control unit that controls the other eye to be imaged by the imaging unit during irradiation.
  • an imaging unit that images one of the left and right eyes, an illumination unit that irradiates light toward the other eye different from the one, and the illumination unit that emits light toward the other eye
  • An information processing apparatus includes a control unit that controls the one eye to be imaged by the imaging unit during irradiation.
  • control method including controlling the other eye different from the one to be imaged by the imaging unit when the illumination unit irradiates light toward the left or right eye. suggest.
  • the computer functions as a control unit that controls the imaging unit to image the other eye different from the one when the illumination unit irradiates light toward the left or right eye.
  • the information processing system according to the present embodiment may be an information processing apparatus 1 realized by, for example, a glasses-type wearable device (smart eyeglass).
  • the information processing apparatus 1 includes a right-eye lens unit 2 ⁇ / b> R that is positioned in front of the user's right eye when worn by the user, and a left-eye lens that is positioned in front of the user's left eye. Part 2L.
  • An illumination unit 16 that irradiates light toward the right eye is provided at the edge of the right-eye lens unit 2R, and the imaging unit 10 that captures the left eye is disposed at the edge of the left-eye lens unit 2L. Is provided.
  • the installation positions of the illumination unit 16 and the imaging unit 10 are not limited to the example illustrated in FIG. 1, and the illumination unit 16 may be provided so as to irradiate light toward one of the left and right eyes. 10 should just be provided so that the other eye different from the one eye which the illumination part 16 illuminates may be imaged.
  • the pupil size is adjusted by illuminating the eye as a general method. This is because the pupil shrinks when the illumination is strengthened due to biological reflection and expands when the illumination is weakened.
  • FIG. 2 is a diagram for explaining a captured image of an iris imaged by a conventional method.
  • the eye 3 is illuminated by the illumination unit 160 to adjust the size of the pupil 31, and the eye 3 is imaged by the imaging unit 100.
  • the captured image 40 there is a problem that light from illumination is reflected by the cornea in front of the iris 30 and reflected as a bright spot 33. If the bright spot 33 overlaps with the iris 30, a part of the feature information of the iris 30 is lost, and the recognition rate of the iris authentication is significantly adversely affected.
  • the reflection of illumination is performed by imaging the eye that is not illuminated while adjusting the size of the pupil by applying illumination to one eye and using sympathetic light reflection.
  • EW Edinger Westphal
  • the left and right anterior optic nucleus are connected via posterior commissure, the signal from one optic nerve is transmitted to the anterior optic nucleus on both sides, and even when only one eye is illuminated, the pupils of both eyes Contracts. Such reduction of the pupil on the side not exposed to light is generally referred to as sympathetic light reflection.
  • FIG. 3 is a diagram for explaining a captured image of the iris imaged by the method of the present embodiment.
  • the pupil of the right eye 3R on the opposite side is also similarly affected by the sympathetic light reflection. Since the size changes, the right eye 3R is imaged by the imaging unit 100.
  • FIG. 1 shows the case where the information processing apparatus 1 is realized by a glasses-type wearable device (smart eyeglass), the present disclosure is not limited to this, and the information processing apparatus 1 includes goggles, binoculars, full It may be realized by a face helmet, a hat with a brim, or a sun visor. For example, when realized by binoculars, various settings of binoculars can be customized for the individual based on personal authentication by iris.
  • the information processing apparatus 1 may be of a type installed and looked into like a binocular stereomicroscope, or of a fixed type such as being embedded in a wall or the like.
  • FIG. 4 is a block diagram illustrating an example of the configuration of the information processing apparatus 1 according to the present embodiment.
  • the information processing apparatus 1 includes an imaging unit 10, an image acquisition unit 11, a pupil size detection unit 12, a pupil size comparison unit 13, an iris code storage unit 14, an illumination control unit 15, an illumination unit 16, and imaging.
  • a control unit 17, an iris recognition unit 18, and an iris authentication unit 19 are included.
  • the imaging unit 10 is a device that images the user's eyes.
  • the imaging unit 10 has an edge of the lens unit so as to capture one of the left and right eyes of the user when worn by the user. At the inside.
  • the image acquisition unit 11 acquires an eye image captured by the imaging unit 10.
  • the pupil size detection unit 12 detects the pupil size from the eye image acquired by the image acquisition unit 11. Specifically, for example, an eye image is analyzed to determine a pupil boundary, and its size (pupil diameter) is detected.
  • the pupil size comparison unit 13 determines whether or not the pupil size detected by the pupil size detection unit 12 is the target pupil size.
  • the target pupil size is a default pupil size for registration in the case of iris registration, and a registered pupil size in the case of iris authentication.
  • the registered pupil size is acquired from the iris code storage unit 14.
  • the iris code storage unit 14 stores a registered iris code, a pupil size when the iris code is acquired, and a user ID in association with each other.
  • the illumination control unit 15 controls the illumination unit 16 that irradiates the user's eyes with light in order to adjust the size of the pupil based on the comparison result of the pupil size comparison unit 13. For example, the illumination control unit 15 performs ON / OFF of the illumination unit 16 and adjustment of illuminance (illuminance UP / DOWN). As described above, when the illumination is strengthened by biological reflection, the pupil is reduced, and when the illumination is weakened, the pupil is enlarged. Therefore, the illumination control unit 15 controls to increase the illuminance when the detected pupil size is larger than the target pupil size. If the size is smaller than the target pupil size, the illuminance is controlled to be lowered.
  • the illumination unit 16 is a device that irradiates the user's eyes with visible light.
  • the illumination unit 16 is realized by, for example, an LED (light emitting diode).
  • the illumination unit 16 is configured to illuminate the left or right eye of the user when worn by the user. At the inside. Further, the illumination unit 16 illuminates a different eye from the eye imaged by the imaging unit 10.
  • the imaging control unit 17 controls imaging by the imaging unit 10. For example, the imaging control unit 17 controls the pupil size comparison unit 13 to perform imaging again when the detected pupil size does not match the target pupil size. In addition, the imaging control unit 17 performs control so that imaging is performed when light is emitted to the eye by the illumination control unit 15.
  • the iris recognition unit 18 recognizes the iris from the eye image acquired by the image acquisition unit 11. Specifically, the iris recognition unit 18 determines the inner boundary of the iris (circular boundary with the pupil) and the outer boundary of the iris from the eye image, separates the circular iris, and performs a polar coordinate conversion on the separated iris image. Thus, it is possible to extract the feature amount and generate an iris code by a predetermined encoding process.
  • the iris recognition unit 18 outputs the iris code generated from the iris image at that time to the iris code storage unit 14 when the pupil size comparison unit 13 determines that the target pupil size is at the time of iris registration. At the time of iris authentication, if the pupil size comparison unit 13 determines that the target pupil size is the target, the iris code generated from the iris image at that time is output to the iris authentication unit 19.
  • the iris authentication unit 19 compares the iris code output from the iris recognition unit 18 with the iris code registered in advance in the iris code storage unit 14 to authenticate whether or not they are the same individual.
  • the configuration of the information processing apparatus 1 according to this embodiment has been described above.
  • the information processing apparatus 1 described above includes a microcomputer having a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and a nonvolatile memory. To control.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the configuration of the information processing apparatus 1 illustrated in FIG. 4 is an example, and the present disclosure is not limited thereto.
  • the configuration other than the imaging unit 10 and the illumination unit 16 is provided separately from a glasses-type wearable device (smartphone or the like), and both perform data transmission / reception by wireless / wired communication, thereby enabling illumination control and imaging control, Acquisition of a captured image may be performed.
  • FIG. 5 is a flowchart showing an iris code registration process according to this embodiment.
  • the illumination control unit 15 controls the illumination unit 16 to turn off the illumination.
  • the entire imaging time is shortened when the pupil is expanded when imaging an iris image, that is, when the illumination is turned off. Therefore, in this embodiment, as an example, the registration process is started from the illumination OFF state.
  • step S106 the imaging control unit 17 controls the imaging unit 10 to perform imaging of the iris.
  • step S109 the pupil size detection unit 12 detects the pupil size based on the captured image of the iris imaged by the imaging unit 10 and acquired by the image acquisition unit 11.
  • the pupil size comparison unit 13 confirms whether or not the pupil size detected by the pupil size detection unit 12 is the target pupil size.
  • the pupil size is suitable for iris authentication.
  • step S115 the illumination control unit 15 determines whether or not the current illuminance is the maximum illuminance.
  • the illumination control unit 15 performs illumination ON or illuminance UP (increasing illumination intensity) control in step S118.
  • the maximum illuminance is a limit illuminance of the illumination unit 16 set in advance.
  • the limit illuminance of the illuminating unit 16 is set in consideration of a predetermined standard (a value that does not harm the human body) relating to the intensity of light applied to the human eye.
  • the above-described S103 to S118 can be repeated to adjust the target pupil size.
  • the pupil is reduced when the illumination is strengthened by biological reflection, and is enlarged when the illumination is weakened. Therefore, the pupil size can be adjusted to the target pupil size by gradually increasing the illuminance from the illumination OFF state.
  • step S121 when the target pupil size can be adjusted (“Yes” in S112), in step S121, the pupil size detected by the pupil size detection unit 12 and the iris code recognized and generated by the iris recognition unit 18 are generated. , Stored in the iris code storage unit 14. At this time, the user ID is also stored. In this way, the iris code is registered.
  • step S124 it is determined whether or not the iris code has been stored (obtained) for the desired number of times. This is because storing iris codes based on a plurality of different pupil sizes makes it possible to improve the accuracy of iris authentication.
  • the illumination control unit 15 determines whether or not the maximum illuminance is reached (S115), and if not the maximum illuminance, the illuminance of the illumination unit 16 is increased (S118). ) The iris code is acquired again (S106 to S121).
  • the iris code registration process according to this embodiment has been specifically described above. Next, the iris authentication process according to the present embodiment will be described with reference to FIG.
  • FIG. 6 is a flowchart showing iris authentication processing according to the present embodiment. As shown in FIG. 6, first, in step S ⁇ b> 203, the illumination control unit 15 controls to turn off the illumination of the illumination unit 16.
  • step S206 the imaging control unit 17 controls the imaging unit 10 to perform imaging of the iris.
  • the pupil size detection unit 12 detects the pupil size based on the captured image of the iris imaged by the imaging unit 10 and acquired by the image acquisition unit 11.
  • step S212 the pupil size comparison unit 13 compares the pupil size detected by the pupil size detection unit 12 with the recorded pupil size, and sets the pupil size suitable for authentication as the target pupil size. .
  • step S218 the illumination control unit 15 performs illumination ON or illuminance control (illuminance UP / DOWN) control. That is, the illumination control unit 15 adjusts the intensity of illumination so that the pupil size approaches the target pupil size.
  • the iris authentication unit 19 performs iris authentication. That is, the iris authenticating unit 19 generates an iris code generated by the iris recognizing unit 18 based on an iris image with a matching pupil size, and an iris code stored in the iris code storage unit 14 and having a certain pupil size. In comparison, authentication as to whether they are the same individual is performed.
  • the iris authentication processing has been specifically described above.
  • the iris authentication unit 19 sets the iris code for each one or a plurality of pupil sizes. Authentication may be performed.
  • the illumination control unit 15 can adjust the overall illuminance depending on the number of illumination units 16 to be lit and the intensity of each illumination.
  • the imaging control unit 17 may perform control so as to perform imaging in conjunction with the illumination control unit 15. For example, when the illumination unit 16 performs illumination, the imaging control unit 17 performs imaging after a predetermined time from the start of illumination. When human eyes are irradiated with light, it takes a certain amount of time until light reflection and sympathetic light reflection that change the pupil of the eye (the pupil that is not irradiated with light also changes similarly). is there.
  • the illumination unit 16 and the imaging unit 10 are arranged so as to irradiate one of the left and right eyes and image the opposite eye. Is not limited to this.
  • FIG. 7 is a diagram for explaining an information processing apparatus 1 ′ according to a modification of the present embodiment.
  • the information processing apparatus 1 ′ is realized by a glasses-type wearable device, like the information processing apparatus 1 shown in FIG. 1, and is positioned in front of the user's right eye when worn by the user. It has a right-eye lens unit 2R and a left-eye lens unit 2L located in front of the user's left eye.
  • illumination units 16R and 16L are provided at the edges of the right-eye lens unit 2R and the left-eye lens unit 2L, respectively, and the edges of the right-eye lens unit 2R and the left-eye lens unit 2L are provided.
  • the imaging units 10R and 10L are provided in the units.
  • the information processing apparatus 1 ′ can acquire both iris images of the right eye and the left eye in a clear state. That is, when acquiring the iris image of the right eye, the information processing apparatus 1 ′ irradiates the left eye with the illumination unit 16L provided at the edge of the left-eye lens unit 2L, and the edge of the right-eye lens unit 2R. The right eye is imaged by the imaging unit 10R provided in the unit. Further, when acquiring the iris image of the left eye, the information processing apparatus 1 ′ irradiates the right eye with the illumination unit 16R provided at the edge of the right-eye lens unit 2R, and the edge of the left-eye lens unit 2L.
  • the left eye is imaged by the imaging unit 10L provided in the unit.
  • the other eye is irradiated, and the other eye that is not irradiated is imaged so that a reflected iris (bright spot) is not reflected. Images can be acquired.
  • the right eye iris code is required if the registered iris code is the right eye
  • the left eye iris code is required if the registered iris code is the left eye Therefore, convenience is improved by making it possible to clearly obtain the iris image of either the left or right eye. Further, according to the information processing apparatus 1 ′, it is possible to register and authenticate iris codes for both eyes.
  • the imaging unit 10 and the illumination unit 16 are provided in the same body, but the imaging unit 10 and the illumination unit 16 may be provided separately.
  • a system in which the imaging unit 10 is provided in a one-eye wearable device and the illumination unit 16 is provided in an installation / fixed type device may be used.
  • the illumination unit 16 irradiates light on one eye of the user with a super-directional spotlight, and the other eye is imaged by the imaging unit 10 of a one-eye type wearable device.
  • a system in which the imaging unit 10 and the illumination unit 16 are separately provided in a wearable device such as a smart band, smart watch, or smart eyeglass
  • a wearable device such as a smart band, smart watch, or smart eyeglass
  • the imaging units 10L and 10R and the illumination units 16L and 16R are provided in the same body.
  • the imaging unit 10L and the illumination unit 16L, and the imaging unit 10R and the illumination unit are provided.
  • 16R may be provided separately from each other.
  • this technique can also take the following structures.
  • An illumination unit that emits light toward either the left or right eye;
  • An imaging unit that images the other eye different from the one;
  • a control unit that controls the other eye to be imaged by the imaging unit when illuminating light toward the one eye by the illumination unit;
  • a control system comprising: (2)
  • the control system includes: The control system according to (1), further including an iris recognition unit that recognizes an iris image from the captured image captured by the imaging unit.
  • the control system includes: Further comprising a pupil size detector for detecting the size of the pupil recognized from the captured image;
  • the control system according to (2) wherein the control unit performs illumination control so as to obtain a target pupil size in accordance with the detected pupil size.
  • the control system according to (3) wherein when the detected pupil size is larger than a target pupil size, the control unit performs illumination control to increase illuminance.
  • the control system according to (3) wherein when the detected pupil size is smaller than a target pupil size, the control unit performs illumination control to reduce illuminance.
  • the control unit controls to store an iris code based on the recognized iris image, a pupil size when the iris image is recognized, and a user ID in association with each other.
  • the control system includes: The control system according to any one of (2) to (6), further including an iris authentication unit that performs iris authentication based on the recognized iris image.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Input (AREA)
  • Collating Specific Patterns (AREA)

Abstract

【課題】ユーザの視界を妨げることなく、照明による反射光が映り込まない鮮明な虹彩画像を撮像することが可能な制御システム、情報処理装置、制御方法、およびプログラムを提供する。 【解決手段】左右いずれか一方の眼に向けて光を照射する照明部と、前記一方と異なる他方の眼を撮像する撮像部と、前記照明部により前記一方の眼に向けて光を照射している際に前記他方の眼を前記撮像部により撮像するよう制御する制御部と、を備える、制御システム。

Description

制御システム、情報処理装置、制御方法、およびプログラム
　本開示は、制御システム、情報処理装置、制御方法、およびプログラムに関する。
　従来、人間の身体的特徴から個人を識別する生体認証技術が提案されている。例えば、指紋、掌形、網膜、顔、音声等が生体認証に利用されている。また、人間の眼球にある虹彩も個人で異なる特徴を持つため、虹彩の特徴を利用した虹彩認証システムが、例えば下記特許文献１で提案されている。
　全ての人間の眼の虹彩は、高度に複雑な特有の組織を有し、それは本質的に不変であることが判明している。同じ人物でさえ、両虹彩の組織またはディテールは同じではない。虹彩は光に反応して瞳孔の寸法を調節するために伸長および収縮する。この際、虹彩パターンがわずかに変化し、この変化が認証時の精度に影響を与えることがある。また、このような虹彩の特徴の解析方法について、例えば下記特許文献２では虹彩コードの生成方法が開示されている。具体的には、撮像画像内に存在する虹彩を認識し、虹彩の内側境界（瞳孔との円形境界）と虹彩の外側境界を決定し、円形の虹彩を分離する。次いで、分離された虹彩イメージ上に極座標系を設定する。座標系の原点は瞳孔との円形境界の中心に置かれる。その後、極座標変換した虹彩イメージの特徴量抽出を行い、全ての虹彩に対して普遍的なフォーマットを有する固定された長さの虹彩コードを生成する。このように生成した虹彩コードを基準コードとして記憶し、認証の際は、同様にコード化した虹彩コードと予め記憶した基準コードとを比較して同一個人であるか否かが判断される。
　また、虹彩認証の際、登録時の瞳孔の大きさと同じ大きさの瞳孔にすることが認証精度を上げることにつながるため、下記特許文献３では、照明の強度を経時的に緩やかに変化させて眼の瞳孔の大きさを変化させ、瞳孔の大きさが異なる複数の眼の画像を連続的に撮影するシステムが提案されている。
　また、瞳孔の大きさを調節して虹彩を撮像する場合、一般的な方法として眼に照明を当てて調節するが、このとき照明光が虹彩の手前にある角膜で反射し、輝点となって虹彩画像に重なってしまう場合がある。輝点が虹彩のパターンの一部を隠すように映り込んでしまうと認証精度に著しく悪影響があるため、照明による反射光が虹彩を隠さないように撮像する必要がある。例えば下記特許文献４では、撮像の方向と照明の光軸を一致させることによって、輝点が虹彩を隠してしまうことを回避している。
特公平５－８４１６６号公報 特許第３３０７９３６号公報 特開２０００－１９４８５５号公報 特許第４５２７０８８号公報
　しかしながら、上記特許文献４に記載の方法では、カメラを視線の正面に配置しなければならないため、視野が遮られてしまう問題があった。
　そこで、本開示では、ユーザの視界を妨げることなく、照明による反射光が映り込まない鮮明な虹彩画像を撮像することが可能な制御システム、情報処理装置、制御方法、およびプログラムを提案する。
　本開示によれば、左右いずれか一方の眼に向けて光を照射する照明部と、前記一方と異なる他方の眼を撮像する撮像部と、前記照明部により前記一方の眼に向けて光を照射している際に前記他方の眼を前記撮像部により撮像するよう制御する制御部と、を備える、制御システムを提案する。
　本開示によれば、左右いずれか一方の眼を撮像する撮像部と、前記一方と異なる他方の眼に向けて光を照射する照明部と、前記照明部により前記他方の眼に向けて光を照射している際に前記一方の眼を前記撮像部により撮像するよう制御する制御部と、を備える、情報処理装置を提案する。
　本開示によれば、照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御することを含む、制御方法を提案する。
　本開示によれば、コンピュータを、照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御する制御部として機能させるための、プログラムを提案する。
　以上説明したように本開示によれば、ユーザの視界を妨げることなく、照明による反射光が映り込まない鮮明な虹彩画像を撮像することが可能となる。
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態による情報処理システムの概要を説明する図である。 従来の手法により撮像した虹彩の撮像画像について説明する図である。 本実施形態の手法により撮像した虹彩の撮像画像について説明する図である。 本実施形態による情報処理装置の構成の一例を示すブロック図である。 本実施形態による虹彩コードの登録処理を示すフローチャートである。 本実施形態による虹彩認証処理を示すフローチャートである。 本実施形態の変形例による情報処理装置を説明する図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　また、説明は以下の順序で行うものとする。
　１．本開示の一実施形態による情報処理システムの概要
　２．構成
　３．動作処理
　　３－１．登録処理
　　３－２．認証処理
　４．補足
　５．まとめ
　　＜＜１．本開示の一実施形態による情報処理システムの概要＞＞
　まず、本開示の一実施形態による情報処理システムの概要を図１に示して説明する。図１に示すように、本実施形態による情報処理システムは、例えばメガネ型ウェアラブルデバイス（スマートアイグラス）により実現される情報処理装置１であってもよい。
　情報処理装置１は、図１に示すように、ユーザに装着された際にユーザの右眼の前に位置する右眼用レンズ部２Ｒと、ユーザの左眼の前に位置する左眼用レンズ部２Ｌとを有する。また、右眼用レンズ部２Ｒの縁部には、右眼に向けて光を照射する照明部１６が設けられ、左眼用レンズ部２Ｌの縁部には、左眼を撮像する撮像部１０が設けられている。なお、照明部１６および撮像部１０の設置位置は図１に示す例に限定されず、照明部１６は左右いずれか一方の眼に向けて光を照射するよう設けられればよく、また、撮像部１０は照明部１６が照明する一方の眼とは異なる他方の眼を撮像するよう設けられればよい。
　（背景）
　従来、虹彩認証または登録の際に、瞳孔の大きさを調節して虹彩を撮像する場合、一般的な方法として眼に照明を当てて瞳孔の大きさが調節されていた。瞳孔は、生体反射により照明を強くすると縮小し、弱めると拡大するためである。
　しかしながら、照明を当てて撮像を行うと、照明光が虹彩の手前にある角膜で反射し、輝点となって虹彩画像に重なってしまう場合があり、輝点が虹彩のパターンの一部を隠すように映り込んでしまうと認証精度に著しく悪影響があった。図２は、従来の手法により撮像した虹彩の撮像画像について説明する図である。図２に示すように、従来は、眼３に対して照明部１６０により照明を当てて瞳孔３１の大きさを調節し、撮像部１００で眼３を撮像していた。この場合、撮像画像４０に示すように、照明からの光が虹彩３０の手前にある角膜で反射し、輝点３３として映り込んでしまうという問題があった。輝点３３が虹彩３０の上に重なってしまうと、虹彩３０の特徴情報が一部欠けてしまい、虹彩認証の認識率に著しい悪影響を及ぼすことになる。
　そこで、本実施形態では、共感性対光反射を利用し、片方の眼に照明を当てて瞳孔の大きさを調節しながら、照明が当たっていない方の眼を撮像することで、照明の反射光に影響されることなく鮮明な虹彩画像を取得するシステムを提案する。光が網膜に当たると、この刺激が視神経を通って視蓋前核に達し、介在ニューロンを介してエディンガー・ウェストファル（Ｅ－Ｗ）核で中継され、動眼神経の副交感性線維に伝わる。また、左右の視蓋前核は後交連を介してつながっているため、片側の視神経から来た信号が両側の視蓋前核に伝わり、片眼だけに光を当てた場合でも両眼の瞳孔が収縮する。このように光を当てていない側の瞳孔が縮小することを、一般に共感性対光反射と称す。
　本実施形態では、上述した共感性対光反射を利用して、例えば図３に示すように、輝点が映り込まない虹彩画像を取得する。図３は、本実施形態の手法により撮像した虹彩の撮像画像について説明する図である。図３に示すように、本実施形態では、片方の眼、例えば左眼３Ｌに照明を当てて瞳孔の大きさを調節すると、共感性対光反射により反対側の右眼３Ｒの瞳孔も同様に大きさが変化するため、撮像部１００により右眼３Ｒを撮像する。照明が当たっていない方の眼を撮像することにより、撮像画像４２に示すように、照明の反射光に影響されることなく鮮明な虹彩３０の画像を取得することができる。
　以上、本開示の一実施形態による情報処理システムの概要について説明した。
なお、図１では、情報処理装置１がメガネ型ウェアラブルデバイス（スマートアイグラス）により実現される場合について示したが、本開示はこれに限定されず、情報処理装置１は、ゴーグル、双眼鏡、フルフェイスのヘルメット、ツバ付きの帽子、またはサンバイザー等により実現されてもよい。例えば双眼鏡により実現される場合、虹彩による個人認証に基づいて、双眼鏡の各種設定が当該個人用にカスタマイズされ得る。また、情報処理装置１は、双眼実体顕微鏡のように設置され覗き込むタイプであってもよいし、壁等に埋め込まれる等固定されているタイプであってもよい。
　続いて、本実施形態による情報処理システムを実現する情報処理装置１の構成について図４を参照して説明する。
　　＜＜２．構成＞＞
　図４は、本実施形態による情報処理装置１の構成の一例を示すブロック図である。図４に示すように、情報処理装置１は、撮像部１０、画像取得部１１、瞳孔サイズ検出部１２、瞳孔サイズ比較部１３、虹彩コード記憶部１４、照明制御部１５、照明部１６、撮像制御部１７、虹彩認識部１８、および虹彩認証部１９を有する。
　撮像部１０は、ユーザの眼を撮像するデバイスである。例えば、撮像部１０は、情報処理装置１が図１に示すようにメガネ型ウェアラブルデバイスである場合、ユーザに装着された際にユーザの左右いずれか一方の眼を撮像するようレンズ部の縁部において内側に向けて設けられる。
　画像取得部１１は、撮像部１０により撮像された眼の画像を取得する。
　瞳孔サイズ検出部１２は、画像取得部１１により取得された眼の画像から瞳孔サイズを検出する。具体的には、例えば眼の画像を解析して瞳孔境界を決定し、その大きさ（瞳孔径）を検出する。
　瞳孔サイズ比較部１３は、瞳孔サイズ検出部１２により検出された瞳孔サイズが目的の瞳孔サイズであるか否かを判断する。目的の瞳孔サイズとは、虹彩登録時の場合は登録用の既定の瞳孔サイズであって、また、虹彩認証時の場合は登録済みの瞳孔サイズである。登録済みの瞳孔サイズは、虹彩コード記憶部１４から取得される。
　虹彩コード記憶部１４は、登録された虹彩コード、当該虹彩コード取得時の瞳孔サイズ、およびユーザＩＤが対応付けて記憶されている。
　照明制御部１５は、瞳孔サイズ比較部１３の比較結果に基づいて、瞳孔の大きさを調節するためにユーザの眼に光を照射する照明部１６を制御する。例えば照明制御部１５は、照明部１６のＯＮ／ＯＦＦや、照度の調整（照度ＵＰ／ＤＯＷＮ）を行う。上述したように、生体反射により照明を強くすると瞳孔は縮小し、弱めると瞳孔は拡大するため、照明制御部１５は、検出された瞳孔サイズが目的の瞳孔サイズより大きい場合は照度を上げるよう制御し、目的の瞳孔サイズより小さい場合は照度を下げるよう制御する。
　照明部１６は、ユーザの眼に可視光を照射するデバイスである。照明部１６は、例えばＬＥＤ（light emitting diode）により実現される。また、照明部１６は、情報処理装置１が図１に示すようにメガネ型ウェアラブルデバイスである場合、ユーザに装着された際にユーザの左右いずれか一方の眼を照明するようレンズ部の縁部において内側に向けて設けられる。また、照明部１６は、撮像部１０が撮像する眼とは異なる方の眼を照明する。
　撮像制御部１７は、撮像部１０による撮像を制御する。例えば撮像制御部１７は、瞳孔サイズ比較部１３により、検出された瞳孔サイズが目的の瞳孔サイズと一致しない場合、再度撮像するよう制御する。また、撮像制御部１７は、照明制御部１５により眼に光が照射されている際に、撮像を行うよう制御する。
　虹彩認識部１８は、画像取得部１１により取得された眼の画像から虹彩を認識する。具体的には、虹彩認識部１８は、眼の画像から虹彩の内側境界（瞳孔との円形境界）と虹彩の外側境界を決定して円形の虹彩を分離し、分離した虹彩イメージを極座標変換して特徴量抽出を行い、所定の符号化処理により虹彩コードを生成することが可能である。そして、虹彩認識部１８は、虹彩登録時には、瞳孔サイズ比較部１３により目的の瞳孔サイズと判断された場合、その時の虹彩画像から生成した虹彩コードを虹彩コード記憶部１４に出力する。また、虹彩認証時には、瞳孔サイズ比較部１３により目的の瞳孔サイズと判断された場合、その時の虹彩画像から生成した虹彩コードを虹彩認証部１９に出力する。
　虹彩認証部１９は、虹彩認識部１８から出力された虹彩コードと、虹彩コード記憶部１４に予め登録された虹彩コードとを比較して、同一個人であるか否かの認証を行う。
　以上、本実施形態による情報処理装置１の構成について説明した。上述した情報処理装置１には、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、および不揮発性メモリを備えたマイクロコンピュータが搭載され、情報処理装置１の各構成を制御する。
　また、図４に示す情報処理装置１の構成は一例であって、本開示はこれに限定されない。例えば、撮像部１０および照明部１６以外の構成がメガネ型ウェアラブルデバイスとは別体（スマートフォン等）に設けられ、両者が無線／有線通信によりデータの送受信を行うことで、照明制御や撮像制御、撮像画像の取得が行われてもよい。
　　＜＜３．動作処理＞＞
　次に、本実施形態の動作処理について図５～図６を参照して説明する。
　　＜３－１．登録処理＞
　図５は、本実施形態による虹彩コードの登録処理を示すフローチャートである。図５に示すように、まず、ステップＳ１０３において、照明制御部１５は、照明部１６の照明をＯＦＦにするよう制御する。なお、人間の眼は瞳孔が縮小する速度の方が拡大する速度より速いため、虹彩画像を撮像するにあたり瞳孔が拡大した状態、すなわち照明が消灯した状態から開始する方が全体の撮像時間を短縮することができるため、本実施形態では一例として照明ＯＦＦの状態から登録処理を開始している。
　次に、ステップＳ１０６において、撮像制御部１７は、撮像部１０により虹彩の撮像を行うよう制御する。
　次いで、ステップＳ１０９において、瞳孔サイズ検出部１２は、撮像部１０により撮像され、画像取得部１１により取得された虹彩の撮像画像に基づいて、瞳孔サイズの検出を行う。
　次に、ステップＳ１１２において、瞳孔サイズ比較部１３は、瞳孔サイズ検出部１２により検出された瞳孔サイズが目的の瞳孔サイズであるか否かを確認する。ここでは、例えば予め規定された、虹彩認証に適した瞳孔の大きさであるか否かを確認する。
　次いで、目的の瞳孔サイズでは無い場合（Ｓ１１２において「Ｎｏ」）、ステップＳ１１５において、照明制御部１５は、現在の照度が最大照度か否かを判断する。
　続いて、最大照度では無い場合（Ｓ１１５において「Ｎｏ」）、ステップＳ１１８において、照明制御部１５は、照明ＯＮまたは照度ＵＰ（照明の強度を大きくする）制御を行う。最大照度とは、予め設定されている照明部１６の限界照度である。また、照明部１６の限界照度は、人間の眼に対して照射する光の強度に関する所定の規格（人体に害を及ぼさない値）を考慮して設定される。
　以上説明したＳ１０３～Ｓ１１８を繰り返し、目的の瞳孔サイズに調節することができる。上述したように、瞳孔は、生体反射により照明を強くすると縮小し、弱めると拡大するため、照明ＯＦＦの状態から段階的に照度を上げることで目的の瞳孔サイズに調節することができる。
　一方、最大照度に達した場合（Ｓ１１５において「Ｙｅｓ」）、登録処理を終了する。
　次に、目的の瞳孔サイズに調節できた場合（Ｓ１１２において「Ｙｅｓ」）、ステップＳ１２１において、瞳孔サイズ検出部１２により検出した瞳孔サイズと、虹彩認識部１８により認識され、生成された虹彩コードが、虹彩コード記憶部１４に記憶される。この際、ユーザＩＤも併せて記憶される。このようにして、虹彩コードの登録が行われる。
　次いで、ステップＳ１２４において、虹彩コードを目的の回数だけ記憶（取得）したか否かを判断する。複数の異なる瞳孔サイズに基づく虹彩コードを記憶しておくことで、虹彩認証の精度を上げることが可能となるためである。
　そして、目的の回数に達していない場合（Ｓ１２４において「Ｎｏ」）、照明制御部１５は最大照度か否かを判断し（Ｓ１１５）、最大照度でなければ照明部１６の照度を上げて（Ｓ１１８）、再度虹彩コードの取得を行う（Ｓ１０６～Ｓ１２１）。
　一方、目的の回数に達した場合（Ｓ１２４において「Ｙｅｓ」）、登録処理を終了する。
　以上、本実施形態による虹彩コードの登録処理について具体的に説明した。続いて、図６を参照して本実施形態による虹彩認証処理について説明する。
　　＜３－２．認証処理＞
　図６は、本実施形態による虹彩認証処理を示すフローチャートである。図６に示すように、まず、ステップＳ２０３において、照明制御部１５は、照明部１６の照明をＯＦＦにするよう制御する。
　次に、ステップＳ２０６において、撮像制御部１７は、撮像部１０により虹彩の撮像を行うよう制御する。
　次いで、ステップＳ２０９において、瞳孔サイズ検出部１２は、撮像部１０により撮像され、画像取得部１１により取得された虹彩の撮像画像に基づいて、瞳孔サイズの検出を行う。
　次に、ステップＳ２１２において、瞳孔サイズ比較部１３は、瞳孔サイズ検出部１２により検出された瞳孔サイズを、記録された瞳孔サイズと比較して、認証に適した瞳孔サイズを目的の瞳孔サイズとする。
　次いで、瞳孔サイズが合っていない（目的の瞳孔サイズと異なる）場合（Ｓ２１５において「Ｎｏ」）、ステップＳ２１８において、照明制御部１５は、照明ＯＮまたは照度制御（照度ＵＰ／ＤＯＷＮ）制御を行う。すなわち、照明制御部１５は、瞳孔サイズを目的の瞳孔サイズに近づけるため照明の強さを調節する。
　一方、瞳孔サイズが合っている場合（Ｓ２１５において「Ｙｅｓ」）、ステップＳ２２１において、虹彩認証部１９は、虹彩認証を行う。すなわち、虹彩認証部１９は、瞳孔サイズが合っている虹彩画像に基づいて虹彩認識部１８が生成した虹彩コードと、虹彩コード記憶部１４に記憶された、瞳孔サイズがある程度一致する虹彩コードとを比較して、同一個人であるかの認証を行う。
　以上、本実施形態による虹彩認証処理について具体的に説明した。なお、一個人に対応する登録虹彩コードが複数ある場合、すなわち複数の瞳孔サイズ各々について虹彩コードが生成されて登録されていた場合、虹彩認証部１９は、一または複数の瞳孔サイズ毎に虹彩コードの認証を行ってもよい。
　また、上記Ｓ２１８において、照度制御を行う場合、照明部１６による照明強度の大きさだけではなく、メガネ型ウェアラブルデバイスのレンズ部が遮光フィルターを備えている場合、当該遮光フィルターを制御することにより眼に照射される光の量を調整することも可能である。
　また、照明部１６が複数設けられている場合、照明制御部１５は、点灯する照明部１６の数や、それぞれの照明の強度により、全体の照度を調整することが可能である。
　また、撮像制御部１７は、照明制御部１５と連動して撮像するよう制御してもよい。例えば、撮像制御部１７は、照明部１６による照明が行われる際に、照明を開始してから所定時間後に撮像を行う。人間の眼に光が照射された場合に、眼の瞳孔が変化する対光反射および共感性対光反射（光が照射されていない方の瞳孔も同様に変化すること）まで所定時間かかるためである。
　　＜＜４．補足＞＞
　続いて、本実施形態による情報処理システムについて補足の説明を行う。図１を参照して説明した情報処理装置１は、左右いずれか一方の眼に光を照射し、反対側の眼を撮像するよう照明部１６と撮像部１０が配置されているが、本開示はこれに限定されない。
　図７は、本実施形態の変形例による情報処理装置１’を説明する図である。図７に示すように、情報処理装置１’は、図１に示す情報処理装置１と同様に、メガネ型ウェアラブルデバイスにより実現され、ユーザに装着された際にユーザの右眼の前に位置する右眼用レンズ部２Ｒと、ユーザの左眼の前に位置する左眼用レンズ部２Ｌとを有する。本変形例では、右眼用レンズ部２Ｒおよび左眼用レンズ部２Ｌの縁部に、それぞれ照明部１６Ｒ、１６Ｌが設けられ、また、右眼用レンズ部２Ｒおよび左眼用レンズ部２Ｌの縁部に、それぞれ撮像部１０Ｒ、１０Ｌが設けられている。
　このような構造を有することで、情報処理装置１’は、右眼および左眼のいずれの虹彩画像も鮮明な状態で取得することができる。すなわち、右眼の虹彩画像を取得する場合、情報処理装置１’は、左眼用レンズ部２Ｌの縁部に設けられた照明部１６Ｌで左眼を照射し、右眼用レンズ部２Ｒの縁部に設けられた撮像部１０Ｒで右眼を撮像する。また、左眼の虹彩画像を取得する場合、情報処理装置１’は、右眼用レンズ部２Ｒの縁部に設けられた照明部１６Ｒで右眼を照射し、左眼用レンズ部２Ｌの縁部に設けられた撮像部１０Ｌで左眼を撮像する。これにより、左右一方の眼の虹彩画像を取得する場合には他方の眼を照射して、照射していない一方の眼を撮像することで、反射光（輝点）が映り込まない鮮明な虹彩画像を取得することができる。
　人間の眼の虹彩は、左右で異なるため、登録された虹彩コードが右眼である場合は右眼の虹彩コード、登録された虹彩コードが左眼である場合は左眼の虹彩コードが必要になるため、左右いずれの眼の虹彩画像も鮮明に取得できるようにすることで、利便性が向上する。また、情報処理装置１’によれば、両目の虹彩コードの登録や認証も可能となる。
　　＜＜５．まとめ＞＞
　上述したように、本開示の実施形態による情報処理システムでは、ユーザの視界を妨げることなく、照明による反射光が映り込まない鮮明な虹彩画像を撮像することが可能となる。これにより、虹彩コード登録時における虹彩画像不鮮明による撮り直しを防止し、また、認証時における認証の精度を向上させることができる。
　また、装置の小型化を実現することができる。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　例えば、図１に示す情報処理装置１では、撮像部１０と照明部１６が同一体に設けられているが、撮像部１０と照明部１６は各々別体に設けられていてもよい。例えば、片眼タイプのウェアラブルデバイスに撮像部１０が設けられ、設置／固定タイプの装置に照明部１６が設けられているシステムであってもよい。この場合、照明部１６は超指向性のスポットライトでユーザの片方の眼に光を照射し、他方の眼を片眼タイプのウェアラブルデバイスの撮像部１０で撮像する。また、ユーザが装着するウェアラブルデバイス（スマートバンド、スマートウォッチ、またはスマートアイグラス等）やスマートフォン等に撮像部１０と照明部１６が夫々別に設けられるシステムであってもよい。
　また、図７に示す情報処理装置１’では、撮像部１０Ｌ、１０Ｒ、および照明部１６Ｌ、１６Ｒが同一体に設けられているが、撮像部１０Ｌおよび照明部１６Ｌと、撮像部１０Ｒおよび照明部１６Ｒは、各々別体に設けられていてもよい。
　また、上述した情報処理装置１、１’に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、情報処理装置１、１’の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、本技術は以下のような構成も取ることができる。
（１）
　左右いずれか一方の眼に向けて光を照射する照明部と、
　前記一方と異なる他方の眼を撮像する撮像部と、
　前記照明部により前記一方の眼に向けて光を照射している際に前記他方の眼を前記撮像部により撮像するよう制御する制御部と、
を備える、制御システム。
（２）
　前記制御システムは、
　前記撮像部により撮像された撮像画像から虹彩画像を認識する虹彩認識部をさらに備える、前記（１）に記載の制御システム。
（３）
　前記制御システムは、
　前記撮像画像から認識される瞳孔のサイズを検出する瞳孔サイズ検出部をさらに備え、
　前記制御部は、前記検出された瞳孔サイズに応じて、目的の瞳孔サイズを取得するよう照明制御を行う、前記（２）に記載の制御システム。
（４）
　前記制御部は、前記検出された瞳孔サイズが目的の瞳孔サイズより大きい場合、照度を上げるよう照明制御する、前記（３）に記載の制御システム。
（５）
　前記制御部は、前記検出された瞳孔サイズが目的の瞳孔サイズより小さい場合、照度を下げるよう照明制御する、前記（３）に記載の制御システム。
（６）
　前記制御部は、前記認識された虹彩画像に基づく虹彩コード、当該虹彩画像を認識した際の瞳孔サイズ、およびユーザＩＤを対応付けて記憶するよう制御する、前記（２）～（５）のいずれか１項に記載の制御システム。
（７）
　前記制御システムは、
　前記認識された虹彩画像に基づいて虹彩認証を行う虹彩認証部をさらに備える、前記（２）～（６）のいずれか１項に記載の制御システム。
（８）
　前記制御部は、前記照明部による照明がＯＦＦの状態から撮像を開始するよう制御する、前記（１）～（７）のいずれか１項に記載の制御システム。
（９）
　左右いずれか一方の眼を撮像する撮像部と、
　前記一方と異なる他方の眼に向けて光を照射する照明部と、
　前記照明部により前記他方の眼に向けて光を照射している際に前記一方の眼を前記撮像部により撮像するよう制御する制御部と、
を備える、情報処理装置。
（１０）
　照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御することを含む、制御方法。
（１１）
　コンピュータを、
　照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御する制御部として機能させるための、プログラム。
　１　　情報処理装置
　１０　　撮像部
　１１　　画像取得部
　１２　　瞳孔サイズ検出部
　１３　　瞳孔サイズ比較部
　１４　　虹彩コード記憶部
　１５　　照明制御部
　１６　　照明部
　１７　　撮像制御部
　１８　　虹彩認識部
　１９　　虹彩認証部
　２Ｒ　　右眼用レンズ部
　２Ｌ　　左眼用レンズ部
　３Ｒ　　右眼
　３Ｌ　　左眼
　３０　　虹彩
　３１　　瞳孔
　３３　　輝点
　４０、４１　　撮像画像
　１００　　撮像部
　１６０　　照明部

Claims (11)

  1. 　左右いずれか一方の眼に向けて光を照射する照明部と、
    　前記一方と異なる他方の眼を撮像する撮像部と、
    　前記照明部により前記一方の眼に向けて光を照射している際に前記他方の眼を前記撮像部により撮像するよう制御する制御部と、
    を備える、制御システム。
  2. 　前記制御システムは、
    　前記撮像部により撮像された撮像画像から虹彩画像を認識する虹彩認識部をさらに備える、請求項１に記載の制御システム。
  3. 　前記制御システムは、
    　前記撮像画像から認識される瞳孔のサイズを検出する瞳孔サイズ検出部をさらに備え、
    　前記制御部は、前記検出された瞳孔サイズに応じて、目的の瞳孔サイズを取得するよう照明制御を行う、請求項２に記載の制御システム。
  4. 　前記制御部は、前記検出された瞳孔サイズが目的の瞳孔サイズより大きい場合、照度を上げるよう照明制御する、請求項３に記載の制御システム。
  5. 　前記制御部は、前記検出された瞳孔サイズが目的の瞳孔サイズより小さい場合、照度を下げるよう照明制御する、請求項３に記載の制御システム。
  6. 　前記制御部は、前記認識された虹彩画像に基づく虹彩コード、当該虹彩画像を認識した際の瞳孔サイズ、およびユーザＩＤを対応付けて記憶するよう制御する、請求項２に記載の制御システム。
  7. 　前記制御システムは、
    　前記認識された虹彩画像に基づいて虹彩認証を行う虹彩認証部をさらに備える、請求項２に記載の制御システム。
  8. 　前記制御部は、前記照明部による照明がＯＦＦの状態から撮像を開始するよう制御する、請求項１に記載の制御システム。
  9. 　左右いずれか一方の眼を撮像する撮像部と、
    　前記一方と異なる他方の眼に向けて光を照射する照明部と、
    　前記照明部により前記他方の眼に向けて光を照射している際に前記一方の眼を前記撮像部により撮像するよう制御する制御部と、
    を備える、情報処理装置。
  10. 　照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御することを含む、制御方法。
  11. 　コンピュータを、
    　照明部により左右いずれか一方の眼に向けて光を照射している際に、前記一方と異なる他方の眼を撮像部により撮像するよう制御する制御部として機能させるための、プログラム。
PCT/JP2015/073088 2014-11-20 2015-08-18 制御システム、情報処理装置、制御方法、およびプログラム WO2016080031A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/519,568 US10592740B2 (en) 2014-11-20 2015-08-18 Control system, information processing device, control method, and program
EP15860741.6A EP3223232B1 (en) 2014-11-20 2015-08-18 Glasses-type wearable device for capturing an image of a wearer's iris
JP2016560081A JP6819291B2 (ja) 2014-11-20 2015-08-18 制御システム、情報処理装置、制御方法、およびプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-235486 2014-11-20
JP2014235486 2014-11-20

Publications (1)

Publication Number Publication Date
WO2016080031A1 true WO2016080031A1 (ja) 2016-05-26

Family

ID=56013594

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/073088 WO2016080031A1 (ja) 2014-11-20 2015-08-18 制御システム、情報処理装置、制御方法、およびプログラム

Country Status (4)

Country Link
US (1) US10592740B2 (ja)
EP (1) EP3223232B1 (ja)
JP (1) JP6819291B2 (ja)
WO (1) WO2016080031A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018073369A (ja) * 2016-11-04 2018-05-10 富士通株式会社 虹彩データ登録装置、虹彩データ登録方法および虹彩データ登録プログラム
WO2018185744A1 (en) * 2017-04-05 2018-10-11 Koch Robin A system and method for capturing an iris of a subject
WO2020065851A1 (ja) * 2018-09-27 2020-04-02 日本電気株式会社 虹彩認証装置、虹彩認証方法および記憶媒体
WO2021044540A1 (ja) * 2019-09-04 2021-03-11 日本電気株式会社 制御装置、制御方法及び記憶媒体
WO2021186990A1 (ja) * 2020-03-17 2021-09-23 ソニーグループ株式会社 プログラム、情報処理装置及び端末装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10515284B2 (en) 2014-09-30 2019-12-24 Qualcomm Incorporated Single-processor computer vision hardware control and application execution
US20170132466A1 (en) 2014-09-30 2017-05-11 Qualcomm Incorporated Low-power iris scan initialization
US9495590B1 (en) * 2015-04-23 2016-11-15 Global Bionic Optics, Ltd. Extended depth-of-field biometric system
US10984235B2 (en) 2016-12-16 2021-04-20 Qualcomm Incorporated Low power data generation for iris-related detection and authentication
US10614332B2 (en) * 2016-12-16 2020-04-07 Qualcomm Incorportaed Light source modulation for iris size adjustment
US10810773B2 (en) * 2017-06-14 2020-10-20 Dell Products, L.P. Headset display control based upon a user's pupil state
WO2020261424A1 (ja) * 2019-06-26 2020-12-30 日本電気株式会社 虹彩認証装置、虹彩認証方法、コンピュータプログラム及び記録媒体

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0368333A (ja) * 1989-08-09 1991-03-25 Utsugi Kogaku Kenkyusho:Kk 瞳孔対光反応検診器械装置
JPH0584166B2 (ja) * 1985-02-20 1993-12-01 Leonard Flom
JP2013518319A (ja) * 2010-01-22 2013-05-20 イリテック インコーポレイテッド 虹彩サイズの異なる複数の虹彩イメージを用いた虹彩認識装置及び方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003016435A (ja) * 2001-06-27 2003-01-17 Matsushita Electric Ind Co Ltd 個体認証装置及び方法
US8750575B2 (en) * 2009-08-04 2014-06-10 International Business Machines Corporation Reflexive iris template
KR101417415B1 (ko) * 2012-11-19 2014-07-08 아이리텍 잉크 살아있는 눈 식별 방법 및 장치
WO2014127134A1 (en) * 2013-02-13 2014-08-21 Massachusetts Institute Of Technology Methods and apparatus for retinal imaging
US20150234206A1 (en) * 2014-02-18 2015-08-20 Aliphcom Configurable adaptive optical material and device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0584166B2 (ja) * 1985-02-20 1993-12-01 Leonard Flom
JPH0368333A (ja) * 1989-08-09 1991-03-25 Utsugi Kogaku Kenkyusho:Kk 瞳孔対光反応検診器械装置
JP2013518319A (ja) * 2010-01-22 2013-05-20 イリテック インコーポレイテッド 虹彩サイズの異なる複数の虹彩イメージを用いた虹彩認識装置及び方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3223232A4 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018073369A (ja) * 2016-11-04 2018-05-10 富士通株式会社 虹彩データ登録装置、虹彩データ登録方法および虹彩データ登録プログラム
WO2018185744A1 (en) * 2017-04-05 2018-10-11 Koch Robin A system and method for capturing an iris of a subject
WO2020065851A1 (ja) * 2018-09-27 2020-04-02 日本電気株式会社 虹彩認証装置、虹彩認証方法および記憶媒体
US11568681B2 (en) 2018-09-27 2023-01-31 Nec Corporation Iris authentication device, iris authentication method and recording medium
US11682236B2 (en) 2018-09-27 2023-06-20 Nec Corporation Iris authentication device, iris authentication method and recording medium
US11682235B2 (en) 2018-09-27 2023-06-20 Nec Corporation Iris authentication device, iris authentication method and recording medium
US11704937B2 (en) 2018-09-27 2023-07-18 Nec Corporation Iris authentication device, iris authentication method and recording medium
US11961329B2 (en) 2018-09-27 2024-04-16 Nec Corporation Iris authentication device, iris authentication method and recording medium
WO2021044540A1 (ja) * 2019-09-04 2021-03-11 日本電気株式会社 制御装置、制御方法及び記憶媒体
WO2021186990A1 (ja) * 2020-03-17 2021-09-23 ソニーグループ株式会社 プログラム、情報処理装置及び端末装置
EP4122376A4 (en) * 2020-03-17 2023-08-09 Sony Group Corporation PROGRAM, INFORMATION PROCESSING DEVICE AND TERMINAL DEVICE

Also Published As

Publication number Publication date
EP3223232A1 (en) 2017-09-27
EP3223232A4 (en) 2018-07-18
US20170255823A1 (en) 2017-09-07
EP3223232B1 (en) 2022-05-25
JPWO2016080031A1 (ja) 2017-08-31
US10592740B2 (en) 2020-03-17
JP6819291B2 (ja) 2021-01-27

Similar Documents

Publication Publication Date Title
WO2016080031A1 (ja) 制御システム、情報処理装置、制御方法、およびプログラム
JP6837142B2 (ja) 視線追跡装置および頭部装着型表示装置
JP7479440B2 (ja) 傾斜シフト虹彩撮像
CN104573667B (zh) 一种提高移动终端的虹膜图像质量的虹膜识别装置
ES2245806T3 (es) Metodo para la iluminacion y la formacion de imagenes de los ojos a traves de gafas utilizando fuentes multiples de iluminacion.
WO2008039252A3 (en) Multimodal ocular biometric system
KR20140064080A (ko) 살아있는 눈 식별 방법 및 장치
WO2012158825A2 (en) Systems and methods for illuminating an iris with visible light for biometric acquisition
US9138140B2 (en) Compact iris imaging system
CN103530617B (zh) 虹膜对准与采集装置
EP3024377B1 (en) Apparatus and method for determining the orientation of anatomical cornea structures
KR102267162B1 (ko) 인지 장애인을 위한 시선 추적 장치 및 방법
JP6381654B2 (ja) 視線検出装置
CN110996761B (zh) 用于执行眼睛的宽视野眼底照相成像的非散瞳、非接触系统和方法
JP2006136450A (ja) 虹彩認証装置
JP5206190B2 (ja) ドライバー監視装置
US20210076926A1 (en) Retinal camera with dynamic illuminator for expanding eyebox
KR101762852B1 (ko) 홍채 인식 장치
CN210295122U (zh) 接触式双目虹膜采集设备
CN217739940U (zh) 基于多模态生物信息的身份识别和认证系统
WO2021171505A1 (ja) 撮像システム、撮像方法及びコンピュータ可読媒体
JP2008027062A (ja) 認証装置
KR200327692Y1 (ko) 홍채영상 인식장치
CZ305278B6 (cs) Oftalmologické diagnostické zařízení a způsob jeho činnosti
Hájek et al. Bimodal eye imaging system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15860741

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2015860741

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015860741

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2016560081

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15519568

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE