WO2022230117A1 - 情報処理システム、情報処理方法、及び記録媒体 - Google Patents

情報処理システム、情報処理方法、及び記録媒体 Download PDF

Info

Publication number
WO2022230117A1
WO2022230117A1 PCT/JP2021/017010 JP2021017010W WO2022230117A1 WO 2022230117 A1 WO2022230117 A1 WO 2022230117A1 JP 2021017010 W JP2021017010 W JP 2021017010W WO 2022230117 A1 WO2022230117 A1 WO 2022230117A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
information processing
processing system
line
score
Prior art date
Application number
PCT/JP2021/017010
Other languages
English (en)
French (fr)
Inventor
陽稀 今井
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to PCT/JP2021/017010 priority Critical patent/WO2022230117A1/ja
Priority to US18/272,564 priority patent/US20240078704A1/en
Priority to EP21939278.4A priority patent/EP4332880A4/en
Priority to JP2023516960A priority patent/JPWO2022230117A1/ja
Priority to CN202180097472.1A priority patent/CN117256007A/zh
Publication of WO2022230117A1 publication Critical patent/WO2022230117A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/77—Determining position or orientation of objects or cameras using statistical methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/167—Detection; Localisation; Normalisation using comparisons between temporally consecutive images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G06V40/45—Detection of the body part being alive
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Definitions

  • This disclosure relates to the technical field of an information processing system, an information processing method, and a recording medium for making user-related decisions.
  • Japanese Patent Application Laid-Open No. 2002-200002 discloses that authentication fails when the orientation of the detected face is greater than or equal to a predetermined angle.
  • Patent Document 2 discloses analyzing the positional relationship between the estimated line of sight and the display to determine whether or not the image is a spoofed image.
  • Patent Document 3 discloses that when the detected line-of-sight direction is the authentication-permitted line-of-sight direction, it is determined that authentication has been performed correctly.
  • Patent Literature 4 discloses determining the possibility that a face represented by a face image sequence is impersonation based on information on changes in line of sight over time.
  • JP 2007-148968 A Japanese Patent Application Laid-Open No. 2008-015800 JP 2017-142859 A Japanese Patent Application Laid-Open No. 2020-194608
  • the purpose of this disclosure is to improve the technology disclosed in prior art documents.
  • One aspect of the information processing system disclosed herein includes face orientation obtaining means for obtaining a face orientation of a user, sight line direction obtaining means for obtaining a sight line direction of the user, and when the face orientation is equal to or greater than a predetermined threshold, , determination means for determining whether or not the user is a living body based on the difference between the face direction and the line-of-sight direction; and an output means for outputting the result of the determination.
  • face orientation acquisition means for acquiring the face orientation of a user
  • line-of-sight direction acquisition means for acquiring the line-of-sight direction of the user, and the difference between the face direction and the line-of-sight direction.
  • a calculating means for calculating a score indicating the bio-likeness of the user
  • a correcting means for correcting the score according to the size of the face orientation
  • an output means for outputting the result of the determination.
  • One aspect of the information processing method of this disclosure acquires a user's face direction, acquires the user's line-of-sight direction, and, if the face direction is equal to or greater than a predetermined threshold, determines whether the face direction and the line-of-sight direction Based on the difference, it is determined whether or not the user is a living body, and the result of the determination is output.
  • a computer acquires a user's face direction, acquires the user's line-of-sight direction, and if the face direction is equal to or greater than a predetermined threshold, the face direction and the line-of-sight direction and a computer program for executing an information processing method for determining whether or not the user is a living body based on the difference between and outputting the result of the determination.
  • FIG. 2 is a block diagram showing the hardware configuration of the information processing system according to the first embodiment
  • FIG. 1 is a block diagram showing a functional configuration of an information processing system according to a first embodiment
  • FIG. 4 is a flowchart showing the flow of operations of the information processing system according to the first embodiment
  • It is a block diagram which shows the functional structure of the information processing system which concerns on 2nd Embodiment
  • 9 is a flowchart showing the flow of operations of an information processing system according to the second embodiment; It is a graph which shows the distribution example of the score calculated by the information processing system which concerns on 3rd Embodiment. It is a graph which shows an example of the correction method of the score in the information processing system which concerns on 3rd Embodiment.
  • FIG. 1 is a block diagram showing a functional configuration of an information processing system according to a first embodiment
  • FIG. 4 is a flowchart showing the flow of operations of the information processing system according to the first embodiment
  • It is a block diagram which shows the functional structure of
  • FIG. 12 is a block diagram showing a functional configuration of an information processing system according to a fourth embodiment
  • FIG. 14 is a flow chart showing the flow of operations of an information processing system according to the fourth embodiment
  • FIG. FIG. 12 is a block diagram showing a functional configuration of an information processing system according to a fifth embodiment
  • FIG. 14 is a flow chart showing the flow of operations of an information processing system according to the fifth embodiment
  • It is a figure which shows the example of a display by the information processing system which concerns on 5th Embodiment.
  • FIG. 16 is a graph showing acquisition timings of the face direction and line-of-sight direction by the information processing system according to the sixth embodiment
  • FIG. FIG. 11 is a conceptual diagram showing a score calculation method by an information processing system according to a sixth embodiment;
  • FIG. 22 is a block diagram showing a functional configuration of an information processing system according to a seventh embodiment
  • FIG. FIG. 16 is a flow chart showing the flow of operations of an information processing system according to the seventh embodiment
  • FIG. FIG. 21 is a diagram (part 1) showing a display example by the information processing system according to the seventh embodiment
  • FIG. 21 is a diagram (part 2) showing a display example by the information processing system according to the seventh embodiment
  • FIG. 22 is a block diagram showing a functional configuration of an information processing system according to an eighth embodiment
  • FIG. FIG. 21 is a flow chart showing the flow of operations of an information processing system according to the eighth embodiment
  • FIG. 1 is a block diagram showing the hardware configuration of an information processing system according to the first embodiment.
  • an information processing system 10 includes a processor 11, a RAM (Random Access Memory) 12, a ROM (Read Only Memory) 13, and a storage device .
  • Information processing system 10 may further include input device 15 , output device 16 and camera 20 .
  • Processor 11 , RAM 12 , ROM 13 , storage device 14 , input device 15 , output device 16 and camera 20 are connected via data bus 17 .
  • the processor 11 reads a computer program.
  • processor 11 is configured to read a computer program stored in at least one of RAM 12, ROM 13 and storage device .
  • the processor 11 may read a computer program stored in a computer-readable recording medium using a recording medium reader (not shown).
  • the processor 11 may acquire (that is, read) a computer program from a device (not shown) arranged outside the information processing system 10 via a network interface.
  • the processor 11 controls the RAM 12, the storage device 14, the input device 15 and the output device 16 by executing the read computer program.
  • a functional block for determining whether or not the user is a living body is implemented within the processor 11 .
  • the processor 11 may be configured as, for example, a CPU (Central Processing Unit), GPU (Graphics Processing Unit), FPGA (Field-Programmable Gate Array), DSP (Demand-Side Platform), and ASIC (Application Specific Integrate).
  • the processor 11 may be configured with one of these, or may be configured to use a plurality of them in parallel.
  • the RAM 12 temporarily stores computer programs executed by the processor 11.
  • the RAM 12 temporarily stores data temporarily used by the processor 11 while the processor 11 is executing the computer program.
  • the RAM 12 may be, for example, a D-RAM (Dynamic RAM).
  • the ROM 13 stores computer programs executed by the processor 11 .
  • the ROM 13 may also store other fixed data.
  • the ROM 13 may be, for example, a P-ROM (Programmable ROM).
  • the storage device 14 stores data that the information processing system 10 saves for a long period of time.
  • Storage device 14 may act as a temporary storage device for processor 11 .
  • the storage device 14 may include, for example, at least one of a hard disk device, a magneto-optical disk device, an SSD (Solid State Drive), and a disk array device.
  • the input device 15 is a device that receives input instructions from the user of the information processing system 10 .
  • Input device 15 may include, for example, at least one of a keyboard, mouse, and touch panel.
  • the output device 16 is a device that outputs information about the information processing system 10 to the outside.
  • the output device 16 may be a display device (eg, display) capable of displaying information regarding the information processing system 10 .
  • the camera 20 is a camera installed at a location where an image of the user (for example, an image including the user's face) can be captured.
  • the camera 20 may be a camera that captures still images, or may be a camera that captures moving images.
  • the camera 20 may be configured as a visible light camera or as a near-infrared camera.
  • FIG. 2 is a block diagram showing the functional configuration of the information processing system according to the first embodiment.
  • the information processing system 10 includes, as processing blocks for realizing the functions thereof, a face orientation acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, an output and a part 140 .
  • the user information database 110 may be configured including, for example, the storage device 14 (see FIG. 1) described above.
  • Each of the face orientation acquisition unit 110, the line-of-sight direction acquisition unit 120, the determination unit 130, and the output unit 140 may be implemented by, for example, the above-described processor 11 (see FIG. 1).
  • the output unit 140 may be configured to output its output via the output device 16 (see FIG. 1) described above.
  • the face direction acquisition unit 110 is configured to be able to acquire the user's face direction (that is, the direction in which the user's face is facing).
  • the user's face orientation may be acquired as information indicating, for example, how many degrees it deviates from a reference direction.
  • the state in which the user is facing the camera may be assumed to be the front, and may be acquired as information indicating how many times the camera is deviated from the front.
  • the face orientation acquisition unit 110 may be configured, for example, to acquire (estimate) the user's face orientation from the user's face image. Note that existing techniques can be appropriately adopted for a specific method of acquiring the face orientation from the image, so detailed description thereof will be omitted here.
  • the line-of-sight direction acquisition unit 120 is configured to be able to acquire the user's line-of-sight direction (that is, the direction in which the user's line of sight is directed).
  • the user's line-of-sight direction may be acquired as information indicating how many degrees it deviates from a reference direction, for example, in the same way as the face orientation.
  • the state in which the user is facing the camera may be assumed to be the front, and may be acquired as information indicating how many times the camera is deviated from the front.
  • the line-of-sight direction acquisition unit 120 may be configured to acquire (estimate) the user's line-of-sight direction from, for example, the user's face image (more specifically, an image including the eye area). It should be noted that existing techniques can be appropriately adopted for a specific method of acquiring the line-of-sight direction from the image, so detailed description thereof will be omitted here.
  • the determining unit 130 determines whether the user is a living body (in other words, , whether spoofing is performed) can be determined.
  • the determination section 130 includes a threshold determination section 131 and a difference calculation section 132 .
  • the threshold determination unit 131 is configured to be able to determine whether or not the user's face orientation acquired by the face orientation acquisition unit 110 is greater than or equal to a predetermined threshold.
  • the "predetermined threshold” is a threshold for determining whether the face orientation is large enough to determine whether or not the user is a living body (that is, the user is facing sideways). It is sufficient if the optimum value is obtained by simulation or the like. Further, the predetermined threshold may be set as a threshold that can determine not only the size of the user's face orientation, but also whether or not the direction of the user's face orientation is in a predetermined direction.
  • the threshold when the user is instructed to look to the right, the threshold may be set so that it can be determined that the user is not looking to another direction but to the right.
  • the determination unit 130 is configured to determine whether or not the user is a living body when the threshold value determination unit 131 determines that the face orientation of the user is greater than or equal to a predetermined threshold value. In other words, the determination unit 130 is configured not to determine whether or not the user is a living body when it is determined that the face direction of the user is less than the predetermined threshold.
  • the difference calculation unit 132 is configured to be able to calculate the difference between the user's face direction acquired by the face direction acquisition unit 110 and the user's line-of-sight direction acquired by the line-of-sight direction acquisition unit 120 .
  • the determination unit 130 is configured to determine whether the user is a living body based on the difference between the face direction and the line-of-sight direction. A specific information processing method using the difference between the face direction and the line-of-sight direction will be described in detail in another embodiment described later.
  • the output unit 140 is configured to be able to output the determination result of the determination unit 130 (that is, the determination result as to whether or not the user is a living body).
  • the output mode of the output unit 140 is not particularly limited, but the output unit 140 may output an image using, for example, a display. Alternatively, the output unit 140 may output audio using a speaker.
  • FIG. 3 is a flow chart showing the operation flow of the information processing system according to the first embodiment.
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S101). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S102). Note that the processes of steps S101 and S102 may be executed in sequence with each other, or may be executed in parallel at the same time.
  • the threshold determination unit 131 determines whether or not the user's face orientation acquired by the face orientation acquisition unit 110 is equal to or greater than a predetermined threshold (step S103). Note that if it is determined that the user's face orientation is not equal to or greater than the predetermined threshold (step S103: NO), subsequent processing is omitted, and the series of processing ends. On the other hand, when it is determined that the user's face orientation is greater than or equal to the predetermined threshold (step S103: YES), the difference calculation unit 132 calculates the difference between the user's face orientation and the line-of-sight direction (step S104).
  • the determination unit 130 determines whether or not the user is a living body, based on the difference between the user's face orientation and line-of-sight direction (step S105). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S106).
  • the information processing system 10 it is determined whether or not the user is a living body when the face orientation is greater than or equal to a predetermined threshold. In this way, it is possible to prevent an erroneous determination result from being output due to a small face orientation of the user. Therefore, it is possible to more accurately determine whether or not the user is a living body.
  • FIG. 4 An information processing system 10 according to the second embodiment will be described with reference to FIGS. 4 and 5.
  • FIG. The second embodiment may differ from the above-described first embodiment only in a part of configuration and operation, and the other parts may be the same as those of the first embodiment. For this reason, in the following, portions different from the already described first embodiment will be described in detail, and descriptions of overlapping portions will be omitted as appropriate.
  • FIG. 4 is a block diagram showing the functional configuration of an information processing system according to the second embodiment.
  • the same reference numerals are given to the same elements as those shown in FIG.
  • the information processing system 10 includes processing blocks for realizing the functions thereof, including a face orientation acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, an output and a part 140 .
  • the determination unit 130 according to the second embodiment particularly includes a threshold determination unit 131 , a difference calculation unit 132 , a score calculation unit 133 , a score correction unit 134 and a determination processing unit 135 . That is, the determination unit 130 according to the second embodiment further includes a score calculation unit 133, a score correction unit 134, and a determination processing unit 135 in addition to the configuration of the first embodiment (see FIG. 2). there is
  • the score calculation unit 133 is configured to be able to calculate a score indicating the user's bio-likeness from the difference between the user's face orientation and line-of-sight direction. For example, the higher the score, the higher the possibility that the user is a living organism. A specific score calculation method will be described in detail in another embodiment described later.
  • the score correction unit 134 is configured to be able to correct the score calculated by the score calculation unit 133 according to the size of the user's face orientation. Correction of the score is performed so that an erroneous determination result is less likely to be obtained in the determination unit 130 . A specific method for correcting the score will be described in detail in another embodiment described later.
  • the determination processing unit 135 is configured to be able to determine whether or not the user is a living body based on the score corrected by the score correction unit 134 .
  • the determination processing unit 135 stores, for example, a determination threshold value (that is, a threshold value for determining whether or not the user is a living body), and compares the corrected score with the determination threshold value to determine whether the user is a living body. It may be determined whether
  • FIG. 5 is a flow chart showing the operation flow of the information processing system according to the second embodiment.
  • the same reference numerals are assigned to the same processes as those shown in FIG.
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S101). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S102).
  • the threshold determination unit 131 determines whether or not the user's face orientation acquired by the face orientation acquisition unit 110 is equal to or greater than a predetermined threshold (step S103). Note that if it is determined that the user's face orientation is not equal to or greater than the predetermined threshold (step S103: NO), subsequent processing is omitted, and the series of processing ends. On the other hand, when it is determined that the user's face orientation is greater than or equal to the predetermined threshold (step S103: YES), the difference calculation unit 132 calculates the difference between the user's face orientation and the line-of-sight direction (step S104).
  • the score calculation unit 133 calculates a score from the difference between the user's face orientation and line-of-sight direction (step S201). Then, the score correction unit 134 corrects the score according to the size of the user's face orientation (step S202). After that, the determination processing unit 135 determines whether or not the user is a living body based on the corrected score (step S203). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S106).
  • the score calculated from the difference between the face orientation and the line-of-sight direction is corrected according to the size of the face orientation. Based on the obtained score, it is determined whether or not the user is a living body. By doing so, it is possible to determine whether or not the user is a living body more accurately than when the score is not corrected.
  • FIG. 6 An information processing system 10 according to the third embodiment will be described with reference to FIGS. 6 and 7.
  • FIG. The third embodiment describes a specific correction example of the above-described second embodiment, and other configurations and operations may be the same as those of the first and second embodiments. Therefore, in the following, portions different from the already described embodiments will be described in detail, and descriptions of other overlapping portions will be omitted as appropriate.
  • FIG. 6 is a graph showing an example distribution of scores calculated by the information processing system according to the third embodiment.
  • the biometric score is calculated to be a positive value
  • the 3D mask (that is, spoofing) score is calculated to be a negative value. be.
  • the higher the user's face orientation the higher the score tends to be. For this reason, as can be seen from the figure, when the face direction is relatively small, the score may become a negative value even for a living body. In addition, the score may become a positive value even if the subject is not a living body due to an estimation error of the direction of the face and the direction of the line of sight.
  • the information processing system 10 corrects the score according to the size of the face orientation.
  • FIG. 7 is a graph showing an example of a score correction method in the information processing system according to the third embodiment.
  • correction is performed such that the larger the face direction, the larger the correction amount to be subtracted from the score. Therefore, the score when the face direction is small is corrected to be slightly smaller, and the score when the face direction is large is corrected to be much smaller.
  • Such correction can be performed using, for example, the following correction formula (1).
  • Score after correction ⁇ A ⁇ face orientation angle+B ⁇ score before correction+C (1) It should be noted that A, B, and C in the above formula are predetermined coefficients and are obtained in advance.
  • the scores for non-living bodies are all negative values. Therefore, it is possible to prevent a user who is not a living body from being erroneously determined to be a living body.
  • the score in the case of a living body is a negative value in some parts with small face orientations, but the determination target region (that is, the region to be determined by the threshold value determination unit 131) that is equal to or greater than the predetermined threshold value ) are all positive values. Therefore, it is possible to prevent the user, who is a living body, from being erroneously determined not to be a living body.
  • the larger the user's face orientation the larger the correction amount to be subtracted from the score (that is, the smaller the score). ) is corrected.
  • the calculated score is corrected to an appropriate value, so it is possible to more accurately determine whether or not the user is a living body.
  • FIG. 8 An information processing system 10 according to the fourth embodiment will be described with reference to FIGS. 8 and 9.
  • FIG. 8 It should be noted that the fourth embodiment may differ from the above-described first to third embodiments only in a part of configuration and operation, and other parts may be the same as those of the first to third embodiments. Therefore, in the following description, descriptions of portions that overlap with the already described embodiments will be omitted as appropriate.
  • FIG. 8 is a block diagram showing the functional configuration of an information processing system according to the fourth embodiment.
  • elements similar to those shown in FIGS. 2 and 4 are given the same reference numerals.
  • the information processing system 10 includes processing blocks for realizing the functions thereof, including a face orientation acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, an output and a part 140 .
  • the score correction unit 134 particularly includes a correction formula storage unit 1341 and a correction formula selection unit 1342 .
  • the correction formula storage unit 1341 stores a plurality of correction formulas for correcting scores.
  • the correction formula storage unit 1341 may store a plurality of correction formulas such as the above formula (1) with different coefficients.
  • the correction formula selection unit 1342 is configured to be able to select one correction formula to be used for score correction from a plurality of correction formulas stored in the correction formula storage unit 1341 .
  • the correction formula selection unit 1342 selects a correction formula according to information related to the user.
  • Information related to the user is information related to the user, such as information indicating characteristics, attributes, and states of the user.
  • the information related to the user may be, for example, information including numerical values such as the position of the eyes (for example, how far apart the eyes are), or information indicating facial tendencies (for example, information on race). There may be.
  • the information related to the user may be information including the sex of the user, the size of the face, and the like. Information related to the user may be obtained from the user's image, or may be obtained from other means (eg, input by the user, pre-registration information, etc.).
  • FIG. 9 is a flow chart showing the operation flow of the information processing system according to the fourth embodiment.
  • the same reference numerals are assigned to the same processes as those shown in FIGS.
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S101). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S102).
  • the threshold determination unit 131 determines whether or not the user's face orientation acquired by the face orientation acquisition unit 110 is equal to or greater than a predetermined threshold (step S103). Note that if it is determined that the user's face orientation is not equal to or greater than the predetermined threshold (step S103: NO), subsequent processing is omitted, and the series of processing ends. On the other hand, when it is determined that the user's face orientation is greater than or equal to the predetermined threshold (step S103: YES), the difference calculation unit 132 calculates the difference between the user's face orientation and the line-of-sight direction (step S104).
  • the score calculation unit 133 calculates a score from the difference between the user's face orientation and line-of-sight direction (step S201).
  • the correction formula selection unit 1342 selects one correction formula to be used for score correction from a plurality of correction formulas stored in the correction formula storage unit 1341 (step S401).
  • the score correction unit 134 corrects the score using the correction formula selected by the correction formula selection unit 1342 (step S402).
  • the determination processing unit 135 determines whether or not the user is a living body based on the corrected score (step S203). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S106).
  • the score correction unit stores a plurality of correction formulas, and selects a correction formula according to the user (i.e., Correction formula) to correct the score.
  • Correction formula a correction formula according to the user
  • FIG. 10 An information processing system 10 according to the fifth embodiment will be described with reference to FIGS. 10 to 12.
  • FIG. 10 It should be noted that the fifth embodiment may differ from the first to fourth embodiments described above only in a part of the configuration and operation, and the other parts may be the same as those of the first to fourth embodiments. Therefore, in the following, portions different from the respective embodiments already described will be described in detail, and descriptions of other overlapping portions will be omitted as appropriate.
  • FIG. 10 is a block diagram showing the functional configuration of an information processing system according to the fifth embodiment.
  • symbol is attached
  • the information processing system 10 includes processing blocks for realizing the functions thereof, including a face direction acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, an output It is configured with a unit 140 and a notification unit 150 . That is, the information processing system 10 according to the fifth embodiment further includes a notification unit 150 in addition to the configuration of the second embodiment (see FIG. 4).
  • the notification unit 150 is configured to be able to make a notification according to the determination result of the determination processing unit 135. More specifically, when the determination result of the determination processing unit 135 changes before and after the score is corrected, the notification unit 150 is configured to be able to notify that effect.
  • the determination processing unit 135 according to the fifth embodiment is configured to perform not only determination based on the corrected score but also determination based on the score before correction (hereinafter referred to as “provisional determination” as appropriate).
  • FIG. 11 is a flow chart showing the operation flow of the information processing system according to the fifth embodiment.
  • symbol is attached
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S101). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S102).
  • the threshold determination unit 131 determines whether or not the user's face orientation acquired by the face orientation acquisition unit 110 is equal to or greater than a predetermined threshold (step S103). Note that if it is determined that the user's face orientation is not equal to or greater than the predetermined threshold (step S103: NO), subsequent processing is omitted, and the series of processing ends. On the other hand, when it is determined that the user's face orientation is greater than or equal to the predetermined threshold (step S103: YES), the difference calculation unit 132 calculates the difference between the user's face orientation and the line-of-sight direction (step S104).
  • the score calculation unit 133 calculates a score from the difference between the user's face orientation and line-of-sight direction (step S201).
  • the determination processing unit 135 temporarily determines whether or not the user is a living body based on the score before correction (step S501).
  • the score correction unit 134 corrects the score according to the size of the user's face orientation (step S202). Then, the determination processing unit 135 determines whether or not the user is a living body based on the corrected score (step S203).
  • the notification unit 150 determines whether the determination result of the determination processing unit 135 has changed before and after the score is corrected (step S502). If it is determined that the determination result has changed before and after the score correction (step S502: YES), the notification unit 150 notifies that the determination result has changed due to the correction (step S503). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S106).
  • the notification by the notification unit 150 may be performed together with the output by the output unit 140.
  • the notification by the notification unit 150 and the output by the output unit 140 may be performed using, for example, a common display.
  • the notification by the notification unit 150 may be made to the user, or may be made to the system administrator or the like.
  • FIG. 12 is a diagram showing a display example by the information processing system according to the fifth embodiment.
  • the determination result by the determination unit 130 (that is, the output by the output unit 140) may be displayed together with the user's face image.
  • the user's determination result is output as "OK" (that is, living body).
  • a notification by the notification unit 150 may be displayed in addition to the determination result.
  • a message "Results have changed due to score correction" is displayed below the judgment results. Note that instead of such a message, for example, a message suggesting that the reliability is low or a message prompting redoing the determination may be displayed.
  • the A process is executed to notify that In this way, the notification will be made in a situation where the original score is near the judgment threshold. It is possible to know that there is a low possibility).
  • FIG. 13 and 14 An information processing system 10 according to the sixth embodiment will be described with reference to FIGS. 13 and 14.
  • FIG. 13 It should be noted that the sixth embodiment may differ from the first to fifth embodiments described above only in a part of the configuration and operation, and the other parts may be the same as those of the first to fifth embodiments. Therefore, in the following, portions different from the respective embodiments already described will be described in detail, and descriptions of other overlapping portions will be omitted as appropriate.
  • FIG. 13 is a graph showing acquisition timings of the face direction and line-of-sight direction by the information processing system according to the sixth embodiment.
  • the face direction and line-of-sight direction of the user are acquired. More specifically, a plurality of images are captured while the user is shaking his or her head, and the user's face orientation and line-of-sight direction are acquired (estimated) from these images.
  • the user's face direction and line-of-sight direction are acquired at the timings (P1, P2, P3, and P4 in the figure) when the user's face direction peaks.
  • the user's face orientation and line-of-sight direction are obtained four times in total, two times at the peak in the right direction and two times at the peak in the left direction.
  • the number of acquisitions here is an example, and the user's face direction and line-of-sight direction may be acquired, for example, four times or more.
  • FIG. 14 is a conceptual diagram showing a score calculation method by the information processing system according to the sixth embodiment.
  • a plurality of differences are calculated from face orientations and line-of-sight directions obtained at a plurality of timings. Therefore, as shown in FIG. 13, when the user's face direction and line-of-sight direction are obtained four times, P1, P2, P3, and P4, the difference between them is four points corresponding to P1, P2, P3, and P4. It is computed as containing one value (eg, a four-dimensional vector).
  • the difference calculated in this manner is input to the score calculation unit 133, and the score is calculated as its output.
  • the score calculation unit 133 in this case may be configured as a learned SVM (Support Vector Machine), for example.
  • the face direction and line-of-sight direction are acquired at the timing of the number of seals from a plurality of images captured while the user is shaking his/her head. be done. By doing so, it is possible to determine whether or not the user is a living body more accurately than when the face direction and line-of-sight direction are obtained only once.
  • FIG. 15 to 18 An information processing system 10 according to the seventh embodiment will be described with reference to FIGS. 15 to 18.
  • FIG. It should be noted that the seventh embodiment may be different from the sixth embodiment described above only in part of the operation, and the other parts may be the same as those of the first to sixth embodiments. Therefore, in the following, portions different from the respective embodiments already described will be described in detail, and descriptions of other overlapping portions will be omitted as appropriate.
  • FIG. 15 is a block diagram showing the functional configuration of an information processing system according to the seventh embodiment.
  • symbol is attached
  • the information processing system 10 according to the seventh embodiment includes processing blocks for realizing the functions thereof, including a face direction acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, an output 140 and a swing instruction section 160.
  • the information processing system 10 according to the seventh embodiment further includes a swing instruction section 160 in addition to the configuration of the first embodiment (see FIG. 2).
  • the determination unit 130 according to the seventh embodiment includes a swing determination unit 136 in addition to the threshold value determination unit 131 and the difference calculation unit 132 .
  • the head swing determination unit 136 is configured to be able to determine whether or not the head swing (sixth embodiment: see FIG. 13) is performed appropriately when acquiring the user's face direction and gaze direction.
  • the head shaking determination unit 136 determines, for example, whether the user is shaking his head sufficiently (for example, whether the peak face direction exceeds a predetermined angle), or whether the user is shaking his head in an appropriate direction (for example, , whether or not the head is swung in another direction (for example, downward) at the timing when the head should be swung in the right direction).
  • the head swing instruction section 160 is configured to be capable of outputting an instruction to the user to perform appropriate head swings when the head swing determination section 136 determines that the user's head swings are inappropriate.
  • the instruction by the swing instruction unit 160 may be performed together with the output by the output unit 140 .
  • the instruction by the swing instruction unit and the output by the output unit 140 may be performed using, for example, a common display.
  • instructions may be output for only some of the motions. For example, out of P1, P2, P3, and P4 in FIG. 14, if only the face orientation obtained at P3 is not appropriate ), the swing instruction unit 160 may output only the instruction for the swing motion corresponding to P3. Specifically, an instruction to shake the head more greatly in the direction corresponding to the action of P3 may be output.
  • FIG. 16 is a flow chart showing the operation flow of the information processing system according to the seventh embodiment.
  • the same reference numerals are given to the same processes as those shown in FIG.
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S101). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S102).
  • the swing determination unit 136 determines whether or not the user has properly swung his/her head (step S701). Then, when it is determined that the user is not properly swinging his head (step S701: NO), the head swing instruction unit 160 outputs an instruction to the user to properly swing his head. Then, the processing of steps S101 and S102 (that is, acquisition of face direction and line-of-sight direction) is executed again.
  • the threshold determination unit 131 determines that the user's face orientation acquired by the face orientation acquisition unit 110 is equal to or greater than the predetermined threshold. It is determined whether or not (step S103). Note that if it is determined that the user's face orientation is not equal to or greater than the predetermined threshold (step S103: NO), subsequent processing is omitted, and the series of processing ends. On the other hand, when it is determined that the user's face orientation is greater than or equal to the predetermined threshold (step S103: YES), the difference calculation unit 132 calculates the difference between the user's face orientation and the line-of-sight direction (step S104).
  • the determination unit 130 determines whether or not the user is a living body, based on the difference between the user's face orientation and line-of-sight direction (step S105). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S106).
  • FIG. 17 is a diagram (Part 1) showing a display example by the information processing system according to the seventh embodiment.
  • FIG. 18 is a diagram (part 2) showing a display example by the information processing system according to the seventh embodiment.
  • a message prompting the user to shake his or her head more greatly may be displayed together with the image of the user. For example, as in the example of FIG. 17, a message "Please shake your head a little more" may be displayed. In this way, it can be expected that the user will shake his/her head greatly, and as a result, it is possible to acquire the user's face orientation and line-of-sight direction in a state in which the face orientation is sufficiently large.
  • a message indicating the direction in which the user should shake his/her head may be displayed together with the image of the user. For example, as in the example of FIG. 18, the message "Please shake your head a little more to the left” may be displayed. In this way, for example, when the right side swing is sufficiently large, but the left side swing is insufficient, the user can issue a more accurate instruction.
  • FIG. 19 An information processing system 10 according to the eighth embodiment will be described with reference to FIGS. 19 and 20.
  • FIG. It should be noted that the information processing system 10 according to the eighth embodiment differs from the above-described first to seventh embodiments only in some operations, and other parts are the same as those in the first to seventh embodiments. can be Therefore, in the following, portions different from the respective embodiments already described will be described in detail, and descriptions of other overlapping portions will be omitted as appropriate.
  • FIG. 19 is a block diagram showing the functional configuration of an information processing system according to the eighth embodiment.
  • symbol is attached
  • the information processing system 10 includes processing blocks for realizing the functions thereof, including a face direction acquisition unit 110, a line-of-sight direction acquisition unit 120, a determination unit 130, and an output and a part 140 .
  • the determination unit 130 according to the eighth embodiment particularly includes a difference calculation unit 132 , a score calculation unit 133 , a score correction unit 134 and a determination processing unit 135 .
  • the information processing system 10 is not provided with the threshold determination unit 131, unlike the first to seventh embodiments described above. Therefore, determination by the determining unit 130 is performed regardless of whether the face direction of the user is equal to or greater than the predetermined threshold. A specific operation of the determination unit 130 will be described in detail below.
  • FIG. 20 is a flow chart showing the operation flow of the information processing system according to the eighth embodiment.
  • the same reference numerals are given to the same processes as those shown in FIGS.
  • the face orientation acquisition unit 110 first acquires the user's face orientation (step S801). Also, the line-of-sight direction acquisition unit 120 acquires the line-of-sight direction of the user (step S802).
  • the difference calculation unit 132 calculates the difference between the user's face orientation and line-of-sight direction (step S803). Then, the score calculation unit 133 calculates a score from the difference between the user's face orientation and line-of-sight direction (step S804). After that, the score correction unit 134 corrects the score according to the size of the user's face orientation (step S805).
  • the determination processing unit 135 determines whether or not the user is a living body based on the corrected score (step S806). Then, the output unit 140 outputs the determination result of the determination unit 130 (step S807).
  • the score calculated from the difference between the face direction and the line-of-sight direction is corrected according to the size of the face direction. Then, it is determined whether or not the user is a living body based on the corrected score. In this way, since the score becomes an appropriate value by correction, it becomes possible to more accurately determine whether or not the user is a living body.
  • a processing method of recording a program for operating the configuration of each embodiment so as to realize the functions of each embodiment described above on a recording medium, reading the program recorded on the recording medium as a code, and executing it on a computer is also implemented. Included in the category of form. That is, a computer-readable recording medium is also included in the scope of each embodiment. In addition to the recording medium on which the above program is recorded, the program itself is also included in each embodiment.
  • a floppy (registered trademark) disk, hard disk, optical disk, magneto-optical disk, CD-ROM, magnetic tape, non-volatile memory card, and ROM can be used as recording media.
  • the program recorded on the recording medium alone executes the process, but also the one that operates on the OS and executes the process in cooperation with other software and functions of the expansion board. included in the category of
  • the information processing system includes: face orientation acquisition means for acquiring a face orientation of a user; gaze direction acquisition means for acquiring a gaze direction of the user; The information processing system includes: determination means for determining whether or not the user is a living body based on the difference between the face orientation and the line-of-sight direction; and an output means for outputting the result of the determination.
  • the determination means includes calculation means for calculating a score indicating the bio-likeness of the user from the difference between the face orientation and the line-of-sight direction, and The information processing system according to Supplementary Note 1, further comprising correcting means for correcting the score by using the score, and determination processing means for determining whether or not the user is a living body based on the corrected score.
  • the information processing system according to Supplementary Note 3 is the information processing system according to Supplementary Note 2, wherein the correcting means corrects such that the larger the face direction, the larger the correction amount to be subtracted from the score.
  • the correction means stores a plurality of correction formulas for correcting the score, selects the correction formula according to information related to the user, and corrects the score
  • the determination processing means determines whether or not the user is a living body based on the corrected score, and based on the score before correction, 4.
  • Supplementary notes 2 to 4 further comprising notification means for determining whether or not the user is a living body, and notifying that the determination result has changed when the determination result of the determination processing means has changed before and after the correction.
  • the information processing system according to any one of the items.
  • the face direction obtaining means and the line-of-sight direction obtaining means obtain the face direction and the line of sight direction at a plurality of timings from a plurality of images captured while the user shakes his or her head sideways. 6.
  • Appendix 7 The information processing system according to appendix 7, according to appendix 6, further comprising instruction means for instructing the user to swing his or her head appropriately when it is detected that the user's head swing is not appropriate. information processing system.
  • the information processing system includes: face orientation acquisition means for acquiring a face orientation of a user; line-of-sight direction acquisition means for acquiring a line-of-sight direction of the user; Calculation means for calculating a score indicating the biolikeness of the user; Correction means for correcting the score according to the size of the face orientation; and Judgment as to whether the user is a living body based on the corrected score. and output means for outputting the result of the determination.
  • the information processing method acquires a user's face direction, acquires the user's line-of-sight direction, and, if the face direction is equal to or greater than a predetermined threshold, determines the difference between the face direction and the line-of-sight direction. Based on this, it is determined whether the user is a living body or not, and the information processing method outputs the result of the determination.
  • a computer acquires a user's face orientation, acquires the user's line-of-sight direction, and, when the face orientation is equal to or greater than a predetermined threshold value, calculates the relationship between the face orientation and the line-of-sight direction.
  • the recording medium stores a computer program for executing an information processing method for determining whether or not the user is a living body based on the difference and outputting the result of the determination.
  • the computer program according to Supplementary Note 11 acquires the user's face orientation, acquires the user's line-of-sight direction, and, if the face orientation is equal to or greater than a predetermined threshold value, determines the difference between the face orientation and the line-of-sight direction.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Probability & Statistics with Applications (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

情報処理システム（１０）は、ユーザの顔向きを取得する顔向き取得手段（１１０）と、ユーザの視線方向を取得する視線方向取得手段（１２０）と、顔向きが所定閾値以上である場合に、顔向きと視線方向との差分に基づいて、ユーザが生体か否かの判定を行う判定手段（１３０）と、判定の結果を出力する出力手段（１４０）と、を備える。このような情報処理システムによれば、ユーザが生体であるか否かを精度よく判定することが可能である。

Description

情報処理システム、情報処理方法、及び記録媒体
　この開示は、ユーザに関する判定を行う情報処理システム、情報処理方法、及び記録媒体の技術分野に関する。
　この種のシステムとして、生体認証する際になりすまし検知を行うものが知られている。例えば特許文献１では、検出された顔の向きが所定の角度以上である場合には、認証を失敗させることが開示されている。特許文献２では、推定した視線とディスプレイとの位置関係を解析してなりすまし画像であるか否かを判定することが開示されている。特許文献３では、検出した視線方向が認証許可視線方向である場合に、正しく認証が行われたものと判定することが開示されている。特許文献４では、視線の時間変化の情報に基づいて、顔画像列の表す顔がなりすましである可能性を判定することが開示されている。
特開２００７－１４８９６８号公報 特開２００８－０１５８００号公報 特開２０１７－１４２８５９号公報 特開２０２０－１９４６０８号公報
　この開示は、先行技術文献に開示された技術を改善することを目的とする。
　この開示の情報処理システムの一の態様は、ユーザの顔向きを取得する顔向き取得手段と、前記ユーザの視線方向を取得する視線方向取得手段と、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行う判定手段と、前記判定の結果を出力する出力手段と、を備える。
　この開示の情報処理システムの他の態様は、ユーザの顔向きを取得する顔向き取得手段と、前記ユーザの視線方向を取得する視線方向取得手段と、前記顔向きと前記視線方向との差分から、前記ユーザの生体らしさを示すスコアを算出する算出手段と、前記顔向きの大きさに応じて前記スコアを補正する補正手段と、補正された前記スコアに基づいて、前記ユーザが生体か否かの判定を行う判定処理手段と、前記判定の結果を出力する出力手段と、を備える。
　この開示の情報処理方法の一の態様は、ユーザの顔向きを取得し、前記ユーザの視線方向を取得し、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、前記判定の結果を出力する。
　この開示の記録媒体の一の態様は、コンピュータに、ユーザの顔向きを取得し、前記ユーザの視線方向を取得し、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、前記判定の結果を出力する情報処理方法を実行させるコンピュータプログラムが記録されている。
第１実施形態に係る情報処理システムのハードウェア構成を示すブロック図である。 第１実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第１実施形態に係る情報処理システムの動作の流れを示すフローチャートである。 第２実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第２実施形態に係る情報処理システムの動作の流れを示すフローチャートである。 第３実施形態に係る情報処理システムで算出されるスコアの分布例を示すグラフである。 第３実施形態に係る情報処理システムにおけるスコアの補正方法の一例を示すグラフである。 第４実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第４実施形態に係る情報処理システムの動作の流れを示すフローチャートである。 第５実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第５実施形態に係る情報処理システムの動作の流れを示すフローチャートである。 第５実施形態に係る情報処理システムによる表示例を示す図である。 第６実施形態に係る情報処理システムによる顔向き及び視線方向の取得タイミングを示すグラフである。 第６実施形態に係る情報処理システムによるスコアの算出方法を示す概念図である。 第７実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第７実施形態に係る情報処理システムの動作の流れを示すフローチャートである。 第７実施形態に係る情報処理システムによる表示例を示す図（その１）である。 第７実施形態に係る情報処理システムによる表示例を示す図（その２）である。 第８実施形態に係る情報処理システムの機能的構成を示すブロック図である。 第８実施形態に係る情報処理システムの動作の流れを示すフローチャートである。
　以下、図面を参照しながら、情報処理システム、情報処理方法、及び記録媒体の実施形態について説明する。
　＜第１実施形態＞
　第１実施形態に係る情報処理システムについて、図１から図３を参照して説明する。
　（ハードウェア構成）
　まず、図１を参照しながら、第１実施形態に係る情報処理システム１０のハードウェア構成について説明する。図１は、第１実施形態に係る情報処理システムのハードウェア構成を示すブロック図である。
　図１に示すように、第１実施形態に係る情報処理システム１０は、プロセッサ１１と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１２と、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１３と、記憶装置１４とを備えている。情報処理システム１０は更に、入力装置１５と、出力装置１６と、カメラ２０とを備えていてもよい。プロセッサ１１と、ＲＡＭ１２と、ＲＯＭ１３と、記憶装置１４と、入力装置１５と、出力装置１６と、カメラ２０とは、データバス１７を介して接続されている。
　プロセッサ１１は、コンピュータプログラムを読み込む。例えば、プロセッサ１１は、ＲＡＭ１２、ＲＯＭ１３及び記憶装置１４のうちの少なくとも一つが記憶しているコンピュータプログラムを読み込むように構成されている。或いは、プロセッサ１１は、コンピュータで読み取り可能な記録媒体が記憶しているコンピュータプログラムを、図示しない記録媒体読み取り装置を用いて読み込んでもよい。プロセッサ１１は、ネットワークインタフェースを介して、情報処理システム１０の外部に配置される不図示の装置からコンピュータプログラムを取得してもよい（つまり、読み込んでもよい）。プロセッサ１１は、読み込んだコンピュータプログラムを実行することで、ＲＡＭ１２、記憶装置１４、入力装置１５及び出力装置１６を制御する。本実施形態では特に、プロセッサ１１が読み込んだコンピュータプログラムを実行すると、プロセッサ１１内には、ユーザが生体か否かを判定するための機能ブロックが実現される。
　プロセッサ１１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＧＡ（ｆｉｅｌｄ－ｐｒｏｇｒａｍｍａｂｌｅ　ｇａｔｅ　ａｒｒａｙ）、ＤＳＰ（Ｄｅｍａｎｄ－Ｓｉｄｅ　Ｐｌａｔｆｏｒｍ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）として構成されてよい。プロセッサ１１は、これらのうち一つで構成されてもよいし、複数を並列で用いるように構成されてもよい。
　ＲＡＭ１２は、プロセッサ１１が実行するコンピュータプログラムを一時的に記憶する。ＲＡＭ１２は、プロセッサ１１がコンピュータプログラムを実行している際にプロセッサ１１が一時的に使用するデータを一時的に記憶する。ＲＡＭ１２は、例えば、Ｄ－ＲＡＭ（Ｄｙｎａｍｉｃ　ＲＡＭ）であってもよい。
　ＲＯＭ１３は、プロセッサ１１が実行するコンピュータプログラムを記憶する。ＲＯＭ１３は、その他に固定的なデータを記憶していてもよい。ＲＯＭ１３は、例えば、Ｐ－ＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ　ＲＯＭ）であってもよい。
　記憶装置１４は、情報処理システム１０が長期的に保存するデータを記憶する。記憶装置１４は、プロセッサ１１の一時記憶装置として動作してもよい。記憶装置１４は、例えば、ハードディスク装置、光磁気ディスク装置、ＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｒｉｖｅ）及びディスクアレイ装置のうちの少なくとも一つを含んでいてもよい。
　入力装置１５は、情報処理システム１０のユーザからの入力指示を受け取る装置である。入力装置１５は、例えば、キーボード、マウス及びタッチパネルのうちの少なくとも一つを含んでいてもよい。
　出力装置１６は、情報処理システム１０に関する情報を外部に対して出力する装置である。例えば、出力装置１６は、情報処理システム１０に関する情報を表示可能な表示装置（例えば、ディスプレイ）であってもよい。
　カメラ２０は、ユーザの画像（例えば、ユーザの顔を含む画像）を撮像可能な箇所に設置されたカメラである。カメラ２０は、静止画を撮像するカメラであってもよいし、動画を撮像するカメラであってもよい。カメラ２０は、可視光カメラとして構成されてもよいし、近赤外線カメラとして構成されてよい。
　（機能的構成）
　次に、図２を参照しながら、第１実施形態に係る情報処理システム１０の機能的構成について説明する。図２は、第１実施形態に係る情報処理システムの機能的構成を示すブロック図である。
　図２に示すように、第１実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、を備えて構成されている。ユーザ情報データベース１１０は、例えば上述した記憶装置１４（図１参照）を含んで構成されてよい。顔向き取得部１１０、視線方向取得部１２０、判定部１３０、及び出力部１４０の各々は、例えば上述したプロセッサ１１（図１参照）によって実現されてもよい。出力部１４０は、その出力を、上述した出力装置１６（図１参照）を介して出力可能に構成されてよい。
　顔向き取得部１１０は、ユーザの顔向き（即ち、ユーザの顔が向いている方向）を取得可能に構成されている。ユーザの顔向きは、例えば基準とする方向から何度ずれているかを示す情報として取得されてよい。具体的には、例えばユーザがカメラを向いている状態が正面であるとして、正面から何度ずれているかを示す情報として取得されてよい。顔向き取得部１１０は、例えばユーザの顔画像からユーザの顔向きを取得（推定）するように構成されてよい。なお、画像から顔向きを取得する具体的な手法については、既存の技術を適宜採用することができるため、ここでの詳細な説明は省略する。
　視線方向取得部１２０は、ユーザの視線方向（即ち、ユーザの視線が向いている方向）を取得可能に構成されている。ユーザの視線方向は、顔向きと同様に、例えば基準とする方向から何度ずれているかを示す情報として取得されてよい。具体的には、例えばユーザがカメラを向いている状態が正面であるとして、正面から何度ずれているかを示す情報として取得されてよい。視線方向取得部１２０は、例えばユーザの顔画像（より具体的には、目周辺を含む画像）からユーザの視線方向を取得（推定）するように構成されてよい。なお、画像から視線方向を取得する具体的な手法については、既存の技術を適宜採用することができるため、ここでの詳細な説明は省略する。
　判定部１３０は、顔向き取得部１１０で取得されたユーザの顔向きと、視線方向取得部１２０で取得されたユーザの視線方向と、に基づいて、ユーザが生体であるか否か（言い換えれば、なりすましを行っていないか）を判定可能に構成されている。判定部１３０は、閾値判定部１３１と、差分算出部１３２と、を備えている。
　閾値判定部１３１は、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定可能に構成されている。ここでの「所定の閾値」は、ユーザが生体であるか否かを判定できる程度に顔向きが大きい（即ち、横を向いている）ことを判定するための閾値であり、事前の実験やシミュレーション等によって最適な値が求められていればよい。また、所定の閾値は、ユーザの顔向きの大きさだけでなく、顔向きの方向が所定の方向であるか否かを判定可能な閾値として設定されていてもよい。例えば、ユーザに対して右方向を向くように指定されている場合に、ユーザが他の方向ではなく右方向を向いていることを判定可能な閾値として設定されてよい。判定部１３０は、閾値判定部１３１において、ユーザの顔向きが所定の閾値以上であると判定された場合に、ユーザが生体であるか否かの判定を行うように構成されている。言い換えれば、判定部１３０は、ユーザの顔向きが所定の閾値未満であると判定された場合に、ユーザが生体であるか否かの判定を行わないように構成されている。
　差分算出部１３２は、顔向き取得部１１０で取得されたユーザの顔向きと、視線方向取得部１２０で取得されたユーザの視線方向と、の差分を算出可能に構成されている。判定部１３０は、顔向きと視線方向との差分に基づいて、ユーザが生体であるか否かの判定を行うように構成されている。顔向きと視線方向との差分を用いた具体的な情報処理方法については、後述する他の実施形態で詳しく説明する。
　出力部１４０は、判定部１３０の判定結果（即ち、ユーザが生体であるか否かの判定結果）を出力可能に構成されている。出力部１４０の出力態様は、特に限定されるものではないが、出力部１４０は、例えばディスプレイを用いて画像出力を行うようにしてもよい。或いは、出力部１４０は、スピーカーを用いて音声出力を行うようにしてもよい。
　（動作の流れ）
　次に、図３を参照しながら、第１実施形態に係る情報処理システム１０の動作の流れについて説明する。図３は、第１実施形態に係る情報処理システムの動作の流れを示すフローチャートである。
　図３に示すように、第１実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ１０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ１０２）。なお、ステップＳ１０１及びＳ１０２の処理は、互いに前後して実行されてもよいし、並行して同時に実行されてもよい。
　続いて、閾値判定部１３１が、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定する（ステップＳ１０３）。なお、ユーザの顔向きが所定の閾値以上でないと判定された場合（ステップＳ１０３：ＮＯ）、以降の処理は省略され、一連の処理は終了することになる。一方、ユーザの顔向きが所定の閾値以上であると判定された場合（ステップＳ１０３：ＹＥＳ）、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ１０４）。
　続いて、判定部１３０は、ユーザの顔向きと視線方向との差分に基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ１０５）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ１０６）。
　（技術的効果）
　次に、第１実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図１から図３で説明したように、第１実施形態に係る情報処理システム１０では、顔向きが所定の閾値以上となる場合に、ユーザが生体であるか否かの判定が行われる。このようにすれば、ユーザの顔向きが小さいことに起因して、誤った判定結果が出力されてしまうことを防止することができる。よって、ユーザが生体であるか否かを、より精度よく判定することが可能である。
　本願発明者の研究するところによれば、ユーザの顔向きが小さい場合には、生体であるにもかかわらず、生体でないと判定されてしまう可能性が高くなることが判っている。よって、ユーザの顔向きが小さい場合に判定を行わないようにすれば、ユーザが誤って生体でないと判定されてしまうことを抑制することが可能である。
　＜第２実施形態＞
　第２実施形態に係る情報処理システム１０について、図４及び図５を参照して説明する。なお、第２実施形態は、上述した第１実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１実施形態と同一であってよい。このため、以下では、すでに説明した第１実施形態と異なる部分について詳細に説明し、重複する部分については適宜説明を省略するものとする。
　（機能的構成）
　まず、図４を参照しながら、第２実施形態に係る情報処理システム１０の機能的構成について説明する。図４は、第２実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図４では、図２で示した要素と同様のものに同一の符号を付している。
　図４に示すように、第２実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、を備えて構成されている。そして、第２実施形態に係る判定部１３０は特に、閾値判定部１３１と、差分算出部１３２と、スコア算出部１３３と、スコア補正部１３４と、判定処理部１３５と、を備えている。即ち、第２実施形態に係る判定部１３０は、第１実施形態の構成（図２参照）に加えて、スコア算出部１３３、スコア補正部１３４、及び判定処理部１３５を更に備えて構成されている。
　スコア算出部１３３は、ユーザの顔向きと視線方向との差分から、ユーザの生体らしさを示すスコアを算出可能に構成されている。スコアは、例えば高ければ高いほど、そのユーザが生体である可能性が高いことを示すものである。スコアの具体的な算出方法については、後述する他の実施形態において詳しく説明する。
　スコア補正部１３４は、スコア算出部１３３で算出されたスコアを、ユーザの顔向きの大きさに応じて補正可能に構成されている。スコアの補正は、判定部１３０において誤った判定結果が出難くなるように行われるものである。スコアの具体的な補正方法については、後述する他の実施形態において詳しく説明する。
　判定処理部１３５は、スコア補正部１３４で補正されたスコアに基づいて、ユーザが生体であるか否かを判定可能に構成されている。判定処理部１３５は、例えば判定しきい値（即ち、生体であるか否かを判定する閾値）を記憶しており、補正されたスコアと判定閾値とを比較することで、ユーザが生体であるか否かを判定してよい。
　（動作の流れ）
　次に、図５を参照しながら、第２実施形態に係る情報処理システム１０の動作の流れについて説明する。図５は、第２実施形態に係る情報処理システムの動作の流れを示すフローチャートである。なお、図５では、図３で示した処理と同様の処理に同一の符号を付している。
　図５に示すように、第２実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ１０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ１０２）。
　続いて、閾値判定部１３１が、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定する（ステップＳ１０３）。なお、ユーザの顔向きが所定の閾値以上でないと判定された場合（ステップＳ１０３：ＮＯ）、以降の処理は省略され、一連の処理は終了することになる。一方、ユーザの顔向きが所定の閾値以上であると判定された場合（ステップＳ１０３：ＹＥＳ）、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ１０４）。
　続いて、スコア算出部１３３が、ユーザの顔向きと視線方向との差分からスコアを算出する（ステップＳ２０１）。そして、スコア補正部１３４が、ユーザの顔向きの大きさに応じてスコアを補正する（ステップＳ２０２）。その後、判定処理部１３５は、補正されたスコアに基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ２０３）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ１０６）。
　（技術的効果）
　次に、第２実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図４で説明したように、第２実施形態に係る情報処理システム１０では、顔向きと視線方向との差分から算出されたスコアに対して顔向きの大きさに応じた補正が行われ、補正されたスコアに基づいてユーザが生体であるか否かの判定が行われる。このようにすれば、スコアを補正しない場合と比べて、より精度よくユーザが生体であるか否かを判定することが可能である。
　＜第３実施形態＞
　第３実施形態に係る情報処理システム１０について、図６及び図７を参照して説明する。なお、第３実施形態は、上述した第２実施形態の具体的な補正例を説明するものであり、その他の構成や動作については第１及び第２実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、他の重複する部分について適宜説明を省略するものとする。
　（補正前のスコア）
　まず、図６を参照しながら、第３実施形態に係る情報処理システム１０において算出されるスコアについて具体的に説明する。図６は、第３実施形態に係る情報処理システムで算出されるスコアの分布例を示すグラフである。
　図６に示すように、第３実施形態に係る情報処理システム１０では、生体のスコアは正の値となるように、３Ｄマスク（即ち、なりすまし）のスコアは負の値となるように算出される。ただし、ユーザの顔向きが大きくなるほど、スコアは高い値となる傾向がある。このため、図を見ても分かるように、顔向きが比較的小さい場合には、生体であってもスコアが負の値となってしまうことがある。また、顔向き・視線の向きの推定誤差などによって、生体でなくても、スコアが正の値となってしまうことがある。このようなスコアをそのまま用いて判定すると（例えば、“０”を判定閾値として判定すると）、誤った判定結果が出てしまうおそれがある。このような誤判定を防ぐために、第３実施形態に係る情報処理システム１０では、顔向きの大きさに応じたスコアの補正が行われる。
　（補正後のスコア）
　次に、図７を参照しながら、第３実施形態に係る情報処理システム１０におけるスコアの補正について具体的に説明する。図７は、第３実施形態に係る情報処理システムにおけるスコアの補正方法の一例を示すグラフである。
　図７に示すように、第３実施形態に係る情報処理システム１０では、顔向きが大きいほど、スコアから差し引く補正量が大きくなるような補正が行われる。よって、顔向きが小さい場合のスコアは、少しだけ小さくなるように補正され、顔向きが大きい場合のスコアは、多めに小さくなるように補正される。このような補正は、例えば、下記のような補正式（１）を用いて行うことができる。
　　補正後スコア＝－Ａ×顔向き角度＋Ｂ×補正前スコア＋Ｃ　・・・（１）
　なお、上記式のＡ、Ｂ、Ｃは所定の係数であり、予め求められているとする。
　補正後のスコアを見ると、生体でない場合のスコアがすべて負の値になっている。よって、生体でないユーザが、誤って生体であると判定されてしまうことを防止できる。一方で、生体である場合のスコアは顔向きが小さい一部で負の値になっているが、所定の閾値以上である判定対象領域（即ち、閾値判定部１３１で判定を行うとされる領域）については、いずれも正の値となっている。よって、生体であるユーザが、誤って生体でないと判定されてしまうことを防止できる。
　（技術的効果）
　次に、第３実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図６及び図７で説明したように、第３実施形態に係る情報処理システム１０では、ユーザの顔向きが大きいほど、スコアから差し引く補正量が大きくなるように（即ち、スコアが小さくなるように）補正される。このようにすれば、算出されたスコアが適切な値に補正されることになるため、より精度よくユーザが生体であるか否かを判定することが可能である。
　＜第４実施形態＞
　第４実施形態に係る情報処理システム１０について、図８及び図９を参照して説明する。なお、第４実施形態は、上述した第１から第３実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１から第３実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と重複する部分については適宜説明を省略するものとする。
　（機能的構成）
　まず、図８を参照しながら、第４実施形態に係る情報処理システム１０の機能的構成について説明する。図８は、第４実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図８では、図２及び図４で示した要素と同様のものに同一の符号を付している。
　図８に示すように、第４実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、を備えて構成されている。そして、第２実施形態に係る判定部１３０は特に、スコア補正部１３４が、補正式記憶部１３４１と、補正式選択部１３４２と、を備えている。
　補正式記憶部１３４１は、スコアを補正するための補正式を複数記憶している。補正式記憶部１３４１は、例えば上述した式（１）のような補正式を、各係数が異なるものとして複数記憶していればよい。
　補正式選択部１３４２は、補正式記憶部１３４１に記憶されている複数の補正式の中から、スコアの補正に用いる補正式を１つ選択可能に構成されている。補正式選択部１３４２は、ユーザに関連する情報に応じて補正式を選択する。なお、「ユーザに関連する情報」とは、ユーザに関連づいた情報であり、例えば、ユーザの特徴、属性、状態を示す情報である。ユーザに関連する情報は、例えば、目の位置（例えば、目がどれくらい離れているか）等の数値を含む情報であってもよいし、顔立ちの傾向を示す情報（例えば、人種に関する情報）であってもよい。また、ユーザに関連する情報は、ユーザの性別や顔の大きさ等を含む情報であってもよい。ユーザに関連する情報は、ユーザの画像から取得されてもよいし、その他の手段（例えば、ユーザによる入力や事前登録情報等）から取得されてもよい。
　（動作の流れ）
　次に、図９を参照しながら、第４実施形態に係る情報処理システム１０の動作の流れについて説明する。図９は、第４実施形態に係る情報処理システムの動作の流れを示すフローチャートである。なお、図９では、図３及び図５で示した処理と同様の処理に同一の符号を付している。
　図９に示すように、第４実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ１０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ１０２）。
　続いて、閾値判定部１３１が、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定する（ステップＳ１０３）。なお、ユーザの顔向きが所定の閾値以上でないと判定された場合（ステップＳ１０３：ＮＯ）、以降の処理は省略され、一連の処理は終了することになる。一方、ユーザの顔向きが所定の閾値以上であると判定された場合（ステップＳ１０３：ＹＥＳ）、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ１０４）。
　続いて、スコア算出部１３３が、ユーザの顔向きと視線方向との差分からスコアを算出する（ステップＳ２０１）。ここで第４実施形態では特に、補正式選択部１３４２が、補正式記憶部１３４１に記憶されている複数の補正式の中から、スコアの補正に用いる補正式を１つ選択する（ステップＳ４０１）。そして、スコア補正部１３４は、補正式選択部１３４２が選択した補正式を用いてスコアを補正する（ステップＳ４０２）。
　続いて、判定処理部１３５は、補正されたスコアに基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ２０３）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ１０６）。
　（技術的効果）
　次に、第４実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図８及び図９で説明したように、第４実施形態に係る情報処理システム１０では、スコア補正部が複数の補正式を記憶しており、ユーザに応じて補正式を選択して（即ち、補正式を使い分けて）、スコアを補正する。このようにすれば、常に同じように補正する場合と比べて、より適切な値にスコアを補正することが可能となる。その結果、より精度よくユーザが生体であるか否かを判定することが可能となる。
　＜第５実施形態＞
　第５実施形態に係る情報処理システム１０について、図１０から図１２を参照して説明する。なお、第５実施形態は、上述した第１から第４実施形態と比べて一部の構成及び動作が異なるのみで、その他の部分については第１から第４実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、他の重複する部分については適宜説明を省略するものとする。
　（機能的構成）
　まず、図１０を参照しながら、第５実施形態に係る情報処理システム１０の機能的構成について説明する。図１０は、第５実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図１０では、図４で示した構成要素と同様の要素に同一の符号を付している。
　図１０に示すように、第５実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、通知部１５０と、を備えて構成されている。即ち、第５実施形態に係る情報処理システム１０は、第２実施形態の構成（図４参照）に加えて、通知部１５０を更に備えて構成されている。
　通知部１５０は、判定処理部１３５の判定結果に応じて、通知を行うことが可能に構成されている。より具体的には、通知部１５０は、スコアを補正する前後で判定処理部１３５の判定結果が変わった場合に、その旨を通知可能に構成されている。なお、第５実施形態に係る判定処理部１３５は、補正されたスコアに基づく判定だけでなく、補正前のスコアに基づく判定（以下、適宜「仮判定」と称する）を行うように構成されている。
　（動作の流れ）
　次に、図１１を参照しながら、第５実施形態に係る情報処理システム１０の動作の流れについて説明する。図１１は、第５実施形態に係る情報処理システムの動作の流れを示すフローチャートである。なお、図１１では、図５で示した処理と同様の処理に同一の符号を付している。
　図１１に示すように、第５実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ１０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ１０２）。
　続いて、閾値判定部１３１が、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定する（ステップＳ１０３）。なお、ユーザの顔向きが所定の閾値以上でないと判定された場合（ステップＳ１０３：ＮＯ）、以降の処理は省略され、一連の処理は終了することになる。一方、ユーザの顔向きが所定の閾値以上であると判定された場合（ステップＳ１０３：ＹＥＳ）、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ１０４）。
　続いて、スコア算出部１３３が、ユーザの顔向きと視線方向との差分からスコアを算出する（ステップＳ２０１）。ここで第５実施形態では特に、判定処理部１３５が、補正前のスコアに基づいて、ユーザが生体であるか否かの仮判定を行う（ステップＳ５０１）。その後、スコア補正部１３４が、ユーザの顔向きの大きさに応じてスコアを補正する（ステップＳ２０２）。そして、判定処理部１３５は、補正されたスコアに基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ２０３）。
　続いて、通知部１５０は、判定処理部１３５の判定結果が、スコアを補正する前後で変わったか否かを判定する（ステップＳ５０２）。そして、スコアを補正する前後で判定結果が変わったと判定した場合（ステップＳ５０２：ＹＥＳ）、通知部１５０は、補正によって判定結果が変わったことを通知する（ステップＳ５０３）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ１０６）。
　なお、通知部１５０による通知は、出力部１４０による出力と併せて行われてよい。例えば、通知部１５０による通知と出力部１４０による出力とは、例えば共通するディスプレイを用いて行われてよい。また、通知部１５０による通知は、ユーザに対して行われてもよいし、システム管理者等に対して行われてもよい。
　（表示例）
　次に、図１２を参照しながら、第５実施形態に係る情報処理システム１０における表示例（具体的には、通知部１５０による通知を反映した表示例）について説明する。図１２は、第５実施形態に係る情報処理システムによる表示例を示す図である。
　図１２に示すように、第５実施形態に係る情報処理システム１０では、ユーザの顔画像と共に、判定部１３０による判定結果（即ち、出力部１４０による出力）が表示されてもよい。なお、ここでは、ユーザの判定結果が「ＯＫ」（即ち、生体である）と出力されている。そして第５実施形態では特に、判定結果に加えて、通知部１５０による通知が表示されてよい。ここでは、判定結果の下に「スコア補正で結果が変化しました」というメッセージが表示されている。なお、このようなメッセージに代えて、例えば、信頼性が低いことを示唆するメッセージや、判定のやり直しを促すメッセージが表示されてもよい。
　（技術的効果）
　次に、第５実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図１０から図１２で説明したように、第５実施形態に係る情報処理システム１０では、スコアを補正する前後で、ユーザが生体であるか否かの判定結果が変わってしまった場合に、そのことを通知する処理が実行される。このようにすれば、本来のスコアが判定閾値の付近にあるような状況において通知が行われることになるため、例えば、今回の判定が難しいものであったこと（言い換えれば、判定の信頼性が低い可能性があること）を知ることが可能となる。
　＜第６実施形態＞
　第６実施形態に係る情報処理システム１０について、図１３及び図１４を参照して説明する。なお、第６実施形態は、上述した第１から第５実施形態と比べて一部の構成及び動作が異なるのみで、その他の部分については第１から第５実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、他の重複する部分については適宜説明を省略するものとする。
　（顔向き及び視線方向の取得）
　まず、図１３を参照しながら、第６実施形態に係る情報処理システム１０における顔向き及び先方向の取得方法について具体的に説明する。図１３は、第６実施形態に係る情報処理システムによる顔向き及び視線方向の取得タイミングを示すグラフである。
　図１３に示すように、第６実施形態に係る情報処理システム１０では、ユーザが首を横に振っている動作中（即ち、顔を右に向ける動作と左に向ける動作を繰り返している間）に、ユーザの顔向き及び視線方向が取得される。より具体的には、ユーザが首を振っている動作中に複数の画像が撮像され、それらの画像からユーザの顔向き及び視線方向が取得（推定）される。
　ユーザの顔向き及び視線方向は、ユーザの顔の向きがピークとなったタイミング（図中の、Ｐ１、Ｐ２、Ｐ３、Ｐ４）のタイミングで取得される。この場合、ユーザの顔向き及び視線方向は、右方向のピークで２回、左方向のピークで２回の計４回取得されることになる。なお、ここでの取得回数は一例であり、例えば４回以上、ユーザの顔向き及び視線方向を取得するようにしてもよい。
　（スコアの算出例）
　次に、図１４を参照しながら、第６実施形態に係る情報処理システム１０におけるスコアの算出方法について具体的に説明する。図１４は、第６実施形態に係る情報処理システムによるスコアの算出方法を示す概念図である。
　図１４に示すように、第６実施形態に係る情報処理システム１０では、複数タイミングで取得した顔向き及び視線方向から、複数の差分が算出される。よって、図１３で示したように、Ｐ１、Ｐ２、Ｐ３、Ｐ４の４回で、ユーザの顔向き及び視線方向が取得された場合、それらの差分はＰ１、Ｐ２、Ｐ３、Ｐ４に対応する４つの値を含むもの（例えば、４次元のベクトル）として算出される。このようにして算出された差分は、スコア算出部１３３に入力されて、その出力としてスコアが算出される。なお、この場合のスコア算出部１３３は、例えば学習済みのＳＶＭ（Ｓｕｐｐｏｒｔ　Ｖｅｃｔｏｒ　Ｍａｃｈｉｎｅ）として構成されていてよい。
　（技術的効果）
　次に、第６実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図１３及び図１４で説明したように、第６実施形態に係る情報処理システム１０では、ユーザが首を振る動作中に撮像される複数の画像から、封数タイミングで顔向き及び視線方向が取得される。このようにすれば、顔向き及び視線方向を１回だけしか取得しない場合と比べて、より精度よくユーザが生体であるか否かを判定することが可能となる。
　＜第７実施形態＞
　第７実施形態に係る情報処理システム１０について、図１５から図１８を参照して説明する。なお、第７実施形態は、上述した第６実施形態と比べて一部の動作が異なるのみであり、その他の部分については第１から第６実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、他の重複する部分については適宜説明を省略するものとする。
　（機能的構成）
　まず、図１５を参照しながら、第７実施形態に係る情報処理システム１０の機能的構成について説明する。図１５は、第７実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図１５では、図２で示した構成要素と同様の要素に同一の符号を付している。
　図１５に示すように、第７実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、首振り指示部１６０と、を備えて構成されている。即ち、第７実施形態に係る情報処理システム１０は、第１実施形態の構成（図２参照）に加えて、首振り指示部１６０を更に備えて構成されている。また、第７実施形態に係る判定部１３０は、閾値判定部１３１及び差分算出部１３２に加えて、首振り判定部１３６を備えている。
　首振り判定部１３６は、ユーザの顔向き及び視線方向を取得する際の首振り（第６実施形態：図１３参照）が適切に行われているか否かを判定可能に構成されている。首振り判定部１３６は、例えばユーザが十分に大きく首を振っているか（例えば、顔向きのピークが所定角度を超えているか否か）、或いはユーザが適切な方向に首を振っているか（例えば、右方向に首を振るべきタイミングで、別の方向（例えば、下方向）に首を振っていないか）によって、首振りが適切であるかを判定してよい。
　首振り指示部１６０は、首振り判定部１３６においてユーザの首振りが適切でないと判定された場合に、ユーザに対して適切な首振りを行うように指示を出力可能に構成されている。なお、首振り指示部１６０による指示は、出力部１４０による出力と併せて行われてよい。例えば、首振り指示部による指示と出力部１４０による出力とは、例えば共通するディスプレイを用いて行われてよい。また、ユーザが複数回首を振るような場合、その一部の動作に対してのみ指示が出力されてもよい。例えば、図１４におけるＰ１、Ｐ２、Ｐ３、Ｐ４のうち、Ｐ３で取得される顔向きのみが適切でない場合（例えば、Ｐ１、Ｐ２、Ｐ４の角度は十分である一方で、Ｐ３だけ角度が小さい場合）、首振り指示部１６０は、Ｐ３に対応する首振り動作に対する指示のみを出力するようにしてもよい。具体的には、Ｐ３の動作に対応する方向に、より大きく首を振るように指示を出力してもよい。
　（動作の流れ）
　次に、図１６を参照しながら、第７実施形態に係る情報処理システム１０の動作の流れについて説明する。図１６は、第７実施形態に係る情報処理システムの動作の流れを示すフローチャートである。なお、図１６では、図３で示した処理と同様の処理に同一の符号を付している。
　図１６に示すように、第７実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ１０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ１０２）。
　続いて、首振り判定部１３６が、ユーザの首振りが適切に行われていたか否かを判定する（ステップＳ７０１）。そして、ユーザの首振りが適切に行われていないと判定された場合（ステップＳ７０１：ＮＯ）、首振り指示部１６０が、ユーザに対して適切な首振りを行うように指示を出力する。そして、再びステップＳ１０１及びＳ１０２の処理（即ち、顔向き及び視線方向の取得）が実行されることになる。
　一方、ユーザの首振りが適切に行われていたと判定された場合（ステップＳ７０１：ＹＥＳ）、閾値判定部１３１が、顔向き取得部１１０で取得されたユーザの顔向きが所定の閾値以上であるか否かを判定する（ステップＳ１０３）。なお、ユーザの顔向きが所定の閾値以上でないと判定された場合（ステップＳ１０３：ＮＯ）、以降の処理は省略され、一連の処理は終了することになる。一方、ユーザの顔向きが所定の閾値以上であると判定された場合（ステップＳ１０３：ＹＥＳ）、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ１０４）。
　続いて、判定部１３０は、ユーザの顔向きと視線方向との差分に基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ１０５）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ１０６）。
　（表示例）
　次に、図１７及び図１８を参照しながら、第７実施形態に係る情報処理システム１０における表示例（具体的には、首振り指示部１６０による指示を反映した表示例）について説明する。図１７は、第７実施形態に係る情報処理システムによる表示例を示す図（その１）である。図１８は、第７実施形態に係る情報処理システムによる表示例を示す図（その２）である。
　図１７に示すように、第７実施形態に係る情報処理システム１０では、ユーザの画像と共に、ユーザにもっと大きく首を振ることを促すメッセージが表示されてよい。例えば、図１７の例のように、「もう少し首を大きく振ってください」というメッセージが表示されてよい。このようにすれば、ユーザが首を大きく振るようになることが期待でき、結果として、顔向きが十分に大きい状態で、ユーザの顔向き及び視線方向を取得することが可能となる。
　図１８に示すように、第７実施形態に係る情報処理システム１０では、ユーザの画像と共に、ユーザが首を大きく振るべき方向を示すメッセージが表示されてよい。例えば、図１８の例のように、「左側にもう少し首を大きく振ってください」というメッセージが表示されてよい。このようにすれば、例えば右側の首振りは十分な大きさとなっているが、左側の首振りが不十分な場合に、ユーザにより的確な指示を出すことができる。
　（技術的効果）
　次に、第７実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図１５から図１８で説明したように、第７実施形態に係る情報処理システム１０では、ユーザの首振りが不適切であった場合に、ユーザに対して適切に首を振るように指示が出力される。このようにすれば、ユーザの首振りを適切なものとし、ユーザの顔向き及び視線方向を適切に取得することが可能となるため、より精度よくユーザが生体であるか否かを判定することが可能となる。
　＜第８実施形態＞
　第８実施形態に係る情報処理システム１０について、図１９及び図２０を参照して説明する。なお、第８実施形態に係る情報処理システム１０は、上述した第１から第７実施形態と比べて一部の動作が異なるのみであり、その他の部分については第１から第７実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、他の重複する部分については適宜説明を省略するものとする。
　（機能的構成）
　まず、図１９を参照しながら、第８実施形態に係る情報処理システム１０の機能的構成について説明する。図１９は、第８実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図１９では、図２及び図４で示した構成要素と同様の要素に同一の符号を付している。
　図１９に示すように、第８実施形態に係る情報処理システム１０は、その機能を実現するための処理ブロックとして、顔向き取得部１１０と、視線方向取得部１２０と、判定部１３０と、出力部１４０と、を備えて構成されている。そして、第８実施形態に係る判定部１３０は特に、差分算出部１３２と、スコア算出部１３３と、スコア補正部１３４と、判定処理部１３５と備えている。
　なお、第８実施形態に係る情報処理システム１０は、上述した第１から第７実施形態とは違い、閾値判定部１３１が備えられていない。このため、ユーザの顔向きが所定の閾値以上であるか否かによらず、判定部１３０による判定が行われることになる。なお、判定部１３０の具体的な動作については、以下で詳しく説明する。
　（動作の流れ）
　次に、図２０を参照しながら、第８実施形態に係る情報処理システム１０の動作の流れについて説明する。図２０は、第８実施形態に係る情報処理システムの動作の流れを示すフローチャートである。なお、図２０では、図３及び図５で示した処理と同様の処理に同一の符号を付している。
　図２０に示すように、第８実施形態に係る情報処理システム１０が動作する際には、まず顔向き取得部１１０が、ユーザの顔向きを取得する（ステップＳ８０１）。また、視線方向取得部１２０が、ユーザの視線方向を取得する（ステップＳ８０２）。
　続いて、差分算出部１３２が、ユーザの顔向きと視線方向との差分を算出する（ステップＳ８０３）。そして、スコア算出部１３３が、ユーザの顔向きと視線方向との差分からスコアを算出する（ステップＳ８０４）。その後、スコア補正部１３４が、ユーザの顔向きの大きさに応じてスコアを補正する（ステップＳ８０５）。
　続いて、判定処理部１３５は、補正されたスコアに基づいて、ユーザが生体であるか否かの判定を行う（ステップＳ８０６）。そして、出力部１４０が、判定部１３０の判定結果を出力する（ステップＳ８０７）。
　（技術的効果）
　次に、第８実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。
　図１９及び図２０で説明したように、第８実施形態に係る情報処理システム１０では、顔向きと視線方向との差分から算出されたスコアに対して顔向きの大きさに応じた補正が行われ、補正されたスコアに基づいてユーザが生体であるか否かの判定が行われる。このようにすれば、補正によってスコアが適切な値となるため、より精度よくユーザが生体であるか否かを判定することが可能となる。
　上述した各実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体はもちろん、そのプログラム自体も各実施形態に含まれる。
　記録媒体としては例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ、磁気テープ、不揮発性メモリカード、ＲＯＭを用いることができる。また該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ上で動作して処理を実行するものも各実施形態の範疇に含まれる。
　この開示は、請求の範囲及び明細書全体から読み取ることのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う情報処理システム、情報処理方法、及び記録媒体もまたこの開示の技術思想に含まれる。
　＜付記＞
　以上説明した実施形態に関して、更に以下の付記のようにも記載されうるが、以下には限られない。
　（付記１）
　付記１に記載の情報処理システムは、ユーザの顔向きを取得する顔向き取得手段と、前記ユーザの視線方向を取得する視線方向取得手段と、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行う判定手段と、前記判定の結果を出力する出力手段と、を備える情報処理システムである。
　（付記２）
　付記２に記載の情報処理システムは、前記判定手段は、前記顔向きと前記視線方向との差分から、前記ユーザの生体らしさを示すスコアを算出する算出手段と、前記顔向きの大きさに応じて前記スコアを補正する補正手段と、補正された前記スコアに基づいて、前記ユーザが生体か否かを判定する判定処理手段と、を有する付記１に記載の情報処理システムである。
　（付記３）
　付記３に記載の情報処理システムは、前前記補正手段は、前記顔向きが大きいほど、前記スコアから差し引く補正量が大きくなるように補正する付記２に記載の情報処理システムである。
　（付記４）
　付記４に記載の情報処理システムは、前記補正手段は、前記スコアを補正するための補正式を複数記憶しており、前記ユーザに関連する情報に応じて前記補正式を選択して、前記スコアを補正する付記２又は３に記載の情報処理システムである。
　（付記５）
　付記５に記載の情報処理システムは、前記判定処理手段は、補正された前記スコアに基づいて、前記ユーザが生体か否かの判定を行うことに加え、補正される前の前記スコアに基づいて、前記ユーザが生体か否かの判定を行い、補正の前後で前記判定処理手段の判定結果が変わった場合に、前記判定結果が変わったことを通知する通知手段を更に備える付記２から４のいずれか一項に記載の情報処理システムである。
　（付記６）
　付記６に記載の情報処理システムは、前記顔向き取得手段及び前記視線方向取得手段は、前記ユーザが首を横に振る動作中に撮像される複数の画像から、複数タイミングの前記顔向き及び前記視線方向を取得し、前記判定手段は、複数タイミングにおける前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かを判定する付記１から５のいずれか一項に記載の情報処理システムである。
　（付記７）
　付記７に記載の情報処理システムは、前記ユーザの首の振り方が適切でないことを検知した場合に、前記ユーザに対して適切な首の振り方を指示する指示手段を更に備える付記６に記載の情報処理システムである。
　（付記８）
　付記８に記載の情報処理システムは、ユーザの顔向きを取得する顔向き取得手段と、前記ユーザの視線方向を取得する視線方向取得手段と、前記顔向きと前記視線方向との差分から、前記ユーザの生体らしさを示すスコアを算出する算出手段と、前記顔向きの大きさに応じて前記スコアを補正する補正手段と、補正された前記スコアに基づいて、前記ユーザが生体か否かの判定を行う判定処理手段と、前記判定の結果を出力する出力手段と、を備える情報処理システムである。
　（付記９）
　付記９に記載の情報処理方法は、ユーザの顔向きを取得し、前記ユーザの視線方向を取得し、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、前記判定の結果を出力する情報処理方法である。
　（付記１０）
　付記１０に記載の記録媒体は、コンピュータに、ユーザの顔向きを取得し、前記ユーザの視線方向を取得し、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、前記判定の結果を出力する情報処理方法を実行させるコンピュータプログラムが記録された記録媒体である。
　（付記１１）
　付記１１に記載のコンピュータプログラムは、ユーザの顔向きを取得し、前記ユーザの視線方向を取得し、前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、前記判定の結果を出力する情報処理方法を実行させるコンピュータプログラムである。
　１０　情報処理システム
　１１　プロセッサ
　１６　出力装置
　２０　カメラ
　１１０　顔向き取得部
　１２０　視線方向取得部
　１３０　判定部
　１３１　閾値判定部
　１３２　差分算出部
　１３３　スコア算出部
　１３４　スコア補正部
　１３４１　補正式記憶部
　１３４２　補正式選択部
　１３５　判定処理部
　１３６　首振り判定部
　１４０　出力部
　１５０　通知部
　１６０　首振り指示部

Claims (10)

  1. 　ユーザの顔向きを取得する顔向き取得手段と、
    　前記ユーザの視線方向を取得する視線方向取得手段と、
    　前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行う判定手段と、
    　前記判定の結果を出力する出力手段と、
    　を備える情報処理システム。
  2. 　前記判定手段は、
    　前記顔向きと前記視線方向との差分から、前記ユーザの生体らしさを示すスコアを算出する算出手段と、
    　前記顔向きの大きさに応じて前記スコアを補正する補正手段と、
    　補正された前記スコアに基づいて、前記ユーザが生体か否かを判定する判定処理手段と、
    　を有する請求項１に記載の情報処理システム。
  3. 　前記補正手段は、前記顔向きが大きいほど、前記スコアから差し引く補正量が大きくなるように補正する請求項２に記載の情報処理システム。
  4. 　前記補正手段は、前記スコアを補正するための補正式を複数記憶しており、前記ユーザに関連する情報に応じて前記補正式を選択して、前記スコアを補正する請求項２又は３に記載の情報処理システム。
  5. 　前記判定処理手段は、補正された前記スコアに基づいて、前記ユーザが生体か否かの判定を行うことに加え、補正される前の前記スコアに基づいて、前記ユーザが生体か否かの判定を行い、
    　補正の前後で前記判定処理手段の判定結果が変わった場合に、前記判定結果が変わったことを通知する通知手段を更に備える
    　請求項２から４のいずれか一項に記載の情報処理システム。
  6. 　前記顔向き取得手段及び前記視線方向取得手段は、前記ユーザが首を横に振る動作中に撮像される複数の画像から、複数タイミングの前記顔向き及び前記視線方向を取得し、
    　前記判定手段は、複数タイミングにおける前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かを判定する
    　請求項１から５のいずれか一項に記載の情報処理システム。
  7. 　前記ユーザの首の振り方が適切でないことを検知した場合に、前記ユーザに対して適切な首の振り方を指示する指示手段を更に備える請求項６に記載の情報処理システム。
  8. 　ユーザの顔向きを取得する顔向き取得手段と、
    　前記ユーザの視線方向を取得する視線方向取得手段と、
    　前記顔向きと前記視線方向との差分から、前記ユーザの生体らしさを示すスコアを算出する算出手段と、
    　前記顔向きの大きさに応じて前記スコアを補正する補正手段と、
    　補正された前記スコアに基づいて、前記ユーザが生体か否かの判定を行う判定処理手段と、
    　前記判定の結果を出力する出力手段と、
    　を備える情報処理システム。
  9. 　ユーザの顔向きを取得し、
    　前記ユーザの視線方向を取得し、
    　前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、
    　前記判定の結果を出力する
    　情報処理方法。
  10. 　コンピュータに、
    　ユーザの顔向きを取得し、
    　前記ユーザの視線方向を取得し、
    　前記顔向きが所定閾値以上である場合に、前記顔向きと前記視線方向との差分に基づいて、前記ユーザが生体か否かの判定を行い、
    　前記判定の結果を出力する
    　情報処理方法を実行させるコンピュータプログラムが記録された記録媒体。
PCT/JP2021/017010 2021-04-28 2021-04-28 情報処理システム、情報処理方法、及び記録媒体 WO2022230117A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
PCT/JP2021/017010 WO2022230117A1 (ja) 2021-04-28 2021-04-28 情報処理システム、情報処理方法、及び記録媒体
US18/272,564 US20240078704A1 (en) 2021-04-28 2021-04-28 Information processing system, information processing method, and recording medium
EP21939278.4A EP4332880A4 (en) 2021-04-28 2021-04-28 INFORMATION PROCESSING SYSTEM, INFORMATION PROCESSING METHOD AND RECORDING MEDIUM
JP2023516960A JPWO2022230117A1 (ja) 2021-04-28 2021-04-28
CN202180097472.1A CN117256007A (zh) 2021-04-28 2021-04-28 信息处理系统、信息处理方法及记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/017010 WO2022230117A1 (ja) 2021-04-28 2021-04-28 情報処理システム、情報処理方法、及び記録媒体

Publications (1)

Publication Number Publication Date
WO2022230117A1 true WO2022230117A1 (ja) 2022-11-03

Family

ID=83847902

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/017010 WO2022230117A1 (ja) 2021-04-28 2021-04-28 情報処理システム、情報処理方法、及び記録媒体

Country Status (5)

Country Link
US (1) US20240078704A1 (ja)
EP (1) EP4332880A4 (ja)
JP (1) JPWO2022230117A1 (ja)
CN (1) CN117256007A (ja)
WO (1) WO2022230117A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007148968A (ja) 2005-11-30 2007-06-14 Omron Corp 顔認証装置、セキュリティ強度変更方法およびプログラム
JP2008015800A (ja) 2006-07-06 2008-01-24 Omron Corp なりすまし検知装置
JP2014206932A (ja) * 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
WO2016059786A1 (ja) * 2014-10-15 2016-04-21 日本電気株式会社 なりすまし検知装置、なりすまし検知方法、および、記憶媒体
JP2017142859A (ja) 2017-05-11 2017-08-17 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2495425T3 (es) * 2011-07-11 2014-09-17 Accenture Global Services Limited Detección de vida
US10997396B2 (en) * 2019-04-05 2021-05-04 Realnetworks, Inc. Face liveness detection systems and methods

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007148968A (ja) 2005-11-30 2007-06-14 Omron Corp 顔認証装置、セキュリティ強度変更方法およびプログラム
JP2008015800A (ja) 2006-07-06 2008-01-24 Omron Corp なりすまし検知装置
JP2014206932A (ja) * 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
WO2016059786A1 (ja) * 2014-10-15 2016-04-21 日本電気株式会社 なりすまし検知装置、なりすまし検知方法、および、記憶媒体
JP2020194608A (ja) 2014-10-15 2020-12-03 日本電気株式会社 生体検知装置、生体検知方法、および、生体検知プログラム
JP2017142859A (ja) 2017-05-11 2017-08-17 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4332880A4

Also Published As

Publication number Publication date
JPWO2022230117A1 (ja) 2022-11-03
EP4332880A4 (en) 2024-05-29
US20240078704A1 (en) 2024-03-07
EP4332880A1 (en) 2024-03-06
CN117256007A (zh) 2023-12-19

Similar Documents

Publication Publication Date Title
KR101365789B1 (ko) 얼굴 특징점 위치 보정 장치, 얼굴 특징점 위치 보정 방법, 및 얼굴 특징점 위치 보정 프로그램을 기록한 컴퓨터 판독가능 기록 매체
US9652861B2 (en) Estimating device and estimation method
US20180075291A1 (en) Biometrics authentication based on a normalized image of an object
JP2007042072A (ja) 追跡装置
JPWO2019003973A1 (ja) 顔認証装置、顔認証方法およびプログラム
JP2006245677A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP6065842B2 (ja) 辞書学習装置、パターン照合装置、辞書学習方法およびコンピュータプログラム
US11036974B2 (en) Image processing apparatus, image processing method, and storage medium
JPWO2019123554A1 (ja) 画像処理装置、画像処理方法、及び、プログラム
WO2022230117A1 (ja) 情報処理システム、情報処理方法、及び記録媒体
EP4252187A1 (en) Enhanced video stabilization based on machine learning models
JP2021144359A (ja) 学習装置、推定装置、学習方法、及びプログラム
JPWO2019065784A1 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2016149678A (ja) カメラ校正ユニット、カメラ校正方法、およびカメラ校正プログラム
US20220309704A1 (en) Image processing apparatus, image processing method and recording medium
WO2023007730A1 (ja) 情報処理システム、情報処理装置、情報処理方法、及び記録媒体
JP2021114111A (ja) 撮像支援装置、撮像支援方法、及びプログラム
JP7276968B2 (ja) ３次元データ更新装置、顔向き推定装置、３次元データ更新方法およびプログラム
WO2022176323A1 (ja) 生体認証システム、生体認証方法、及び記録媒体
JP2019205002A (ja) 監視方法
JPWO2020095400A1 (ja) 特徴点抽出装置、特徴点抽出方法およびコンピュータプログラム
JP6255968B2 (ja) 画像処理装置、陽炎補正方法及びプログラム
WO2024111113A1 (ja) 情報処理装置、情報処理方法及び記録媒体
WO2022181252A1 (ja) 関節点検出装置、学習モデル生成装置、関節点検出方法、学習モデル生成方法、及びコンピュータ読み取り可能な記録媒体
WO2023157070A1 (ja) 情報処理装置、情報処理方法、及び記録媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21939278

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2023516960

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 18272564

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 202180097472.1

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2021939278

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2021939278

Country of ref document: EP

Effective date: 20231128