KR20200130042A - Control device and control method for face diistinction - Google Patents
Control device and control method for face diistinction Download PDFInfo
- Publication number
- KR20200130042A KR20200130042A KR1020190075049A KR20190075049A KR20200130042A KR 20200130042 A KR20200130042 A KR 20200130042A KR 1020190075049 A KR1020190075049 A KR 1020190075049A KR 20190075049 A KR20190075049 A KR 20190075049A KR 20200130042 A KR20200130042 A KR 20200130042A
- Authority
- KR
- South Korea
- Prior art keywords
- face
- user
- exposure value
- camera
- recognized
- Prior art date
Links
Images
Classifications
-
- G06K9/00228—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G06K9/00288—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H04N5/23219—
-
- H04N5/2353—
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Collating Specific Patterns (AREA)
Abstract
Description
본 발명은, 사용자 얼굴 기반의 안면 인식 기술과 관련된 것으로, 보다 구체적으로 안면 인식 기술이 갖는 취약점을 해결하기 위한 기술에 관한 것이다.The present invention relates to a facial recognition technology based on a user's face, and more particularly, to a technology for solving a weakness of the facial recognition technology.
스마트폰 기술이 발전하고 스마트폰 사용이 일반화되면서, 현재는 한 명의 사용자 당 1개 이상의 스마트폰을 보유/소지하고 있는 시대라고 할 수 있다.With the development of smart phone technology and the generalization of smart phone use, it can be said that the present age is the era of having/possessing more than one smart phone per user.
이처럼 스마트폰이 사용이 일상화 되면서, 금융 분야 등 개인 인증이 필수적인 서비스 분야에서는 보안 기술로서 공인인증서를 기반으로 사용자를 인증하는 방식에서 지문/홍채/안면(사용자 얼굴) 인식을 기반으로 사용자를 인증하는 방식을 채택하는 추세이다.As such smartphones become more commonplace, in the service field where personal authentication is essential, such as finance, as a security technology, users are authenticated based on fingerprint/iris/face (user face) recognition as a security technology. The trend is to adopt the method.
지문/홍채 인식 기반의 인증 방식의 경우, 지문/홍채 인식 기술에서 복사한 지문/홍채를 구별해내기 어려운 취약점이 있다.In the case of fingerprint/iris recognition-based authentication, there is a vulnerability that makes it difficult to distinguish the copied fingerprint/iris from the fingerprint/iris recognition technology.
한편, 안면 인식 기반의 인증 방식의 경우, 안면 인식 기술에서 이미지 형태의 가짜 사용자 얼굴을 구별해내기 어려운 취약점이 있다.On the other hand, in the case of the authentication method based on facial recognition, there is a vulnerability that it is difficult to distinguish a fake user face in the form of an image in the facial recognition technology.
이에, 최근에는 안면 인식 기술이 갖는 취약점을 극복하기 위해, TOF(Time of Flight) 방식 3D 카메라 인식 기술이 등장하였다.Accordingly, recently, in order to overcome the weaknesses of facial recognition technology, a TOF (Time of Flight) 3D camera recognition technology has appeared.
하지만, TOF 방식 3D 카메라 인식 기술은, TOF 센서와 TOF 센서의 센싱값을 입력/처리할 수 있는 고성능 카메라가 있어야 하기 때문에, 일반 카메라를 구비한 일반 스마트폰으로는 이용할 수 없다.However, the TOF type 3D camera recognition technology cannot be used with a general smartphone equipped with a general camera because a TOF sensor and a high-performance camera capable of inputting/processing the sensing value of the TOF sensor are required.
이에, 본 발명에서는, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점 즉 이미지 형태의 가짜 사용자 얼굴을 구별해내기 어려운 취약점을 해결할 수 있는 방안을 제안하고자 한다.Accordingly, the present invention proposes a method for solving a vulnerability in facial recognition that may occur when a general camera is used, that is, a vulnerability in which it is difficult to distinguish a fake user face in the form of an image.
본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 목적은, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점 즉 이미지 형태의 가짜 사용자 얼굴을 구별해내기 어려운 취약점을 해결할 수 있는 방안을 실현하는데 있다.The present invention was created in view of the above circumstances, and the object of the present invention is to solve the vulnerability of facial recognition that may occur when using a general camera, that is, a vulnerability that is difficult to distinguish a fake user face in the form of an image. It is in realizing the way there is.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 사용자 얼굴 판별 방법은, 카메라를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식하는 인식단계; 사용자 얼굴이 인식되면, 상기 카메라의 노출값을 조정하는 조정단계; 및 상기 카메라의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 사용자 얼굴을 판별하는 판별단계를 포함한다.A method for determining a user's face according to an embodiment of the present invention for achieving the above object includes: a recognition step of recognizing a user's face in a photographing screen photographed by a camera; An adjustment step of adjusting the exposure value of the camera when the user's face is recognized; And a determination step of determining a user's face to be used for the facial recognition function from the recognition result of recognizing the user's face on the shooting screen taken after adjusting the exposure value of the camera, based on the recognition result of recognizing the user's face before the exposure value adjustment. Includes.
구체적으로, 상기 조정단계는, 상기 카메라의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정하며, 상기 제1노출값은 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식시점의 노출값 보다 낮고, 상기 제2노출값은 상기 인식시점의 노출값 보다 높을 수 있다.Specifically, in the adjusting step, the exposure value of the camera is adjusted to a preset first exposure value and a second exposure value, and the first exposure value is lower than the exposure value at the recognition time when the user's face is recognized before the exposure value adjustment, and the first exposure value is 2 The exposure value may be higher than the exposure value at the time of recognition.
구체적으로, 상기 판별단계는, 상기 노출값 조정 이전에 인식된 사용자 얼굴 중, 상기 카메라의 노출값을 낮추는 조정 후 촬영되는 촬영 화면에서 인식되지 않고 상기 카메라의 노출값을 높이는 조정 후 촬영되는 촬영 화면에서 인식되는 특정 사용자 얼굴을, 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별할 수 있다.Specifically, in the determining step, among the user faces recognized before the exposure value adjustment, the user's face is not recognized in the photographing screen photographed after adjustment to lower the exposure value of the camera, but recognized in the photographing screen photographed after adjusting the exposure value of the camera. A specific user's face may be identified as a user's face to be used for the face recognition function.
구체적으로, 상기 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패하는 경우, 사용자 얼굴 방향으로 특정 이미지를 조사하는 단계; 상기 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 상기 특정 이미지의 왜곡 여부를 판단하는 단계; 및 상기 노출값 조정 이전에 인식된 사용자 얼굴 중 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 단계를 더 포함할 수 있다. Specifically, when it fails to determine the user's face to be used for the facial recognition function, irradiating a specific image in the direction of the user's face; Determining whether the specific image is distorted on a user's face recognized on a photographing screen photographed after the specific image is irradiated; And determining a specific user face formed by distorting the specific image among user faces recognized before the exposure value adjustment as a user face to be used for the facial recognition function.
구체적으로, 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 상기 카메라의 노출값을 조정하여 촬영 화면에서 상기 특정 사용자 얼굴이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출하는 단계; 및 상기 최저 노출값 및 최고 노출값을, 이후 사용자 얼굴 판별을 위해 상기 카메라의 노출값 조정 시 사용되도록 설정하는 단계를 더 포함할 수 있다.Specifically, when determining a specific user's face formed by distorting the specific image as a user's face to be used for the facial recognition function, the exposure value of the camera is adjusted and the minimum exposure value at a point in time when the specific user's face is not recognized on the shooting screen, and Detecting the highest exposure value; And setting the minimum exposure value and the maximum exposure value to be used when adjusting the exposure value of the camera to determine a user's face later.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 사용자 얼굴 판별장치는, 카메라를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식하는 인식부; 사용자 얼굴이 인식되면, 상기 카메라의 노출값을 조정하는 조정부; 및 상기 카메라의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 사용자 얼굴을 판별하는 판별부를 포함한다.In order to achieve the above object, an apparatus for determining a user's face according to an embodiment of the present invention includes: a recognition unit for recognizing a user's face on a photographing screen photographed through a camera; An adjustment unit for adjusting the exposure value of the camera when the user's face is recognized; And a determination unit for determining a user's face to be used for a face recognition function from a recognition result of recognizing a user's face before adjusting the exposure value, based on a recognition result of recognizing a user's face on a shooting screen taken after adjusting the exposure value of the camera. Include.
구체적으로, 상기 조정부는, 상기 카메라의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정하며, 상기 제1노출값은 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식시점의 노출값 보다 낮고, 상기 제2노출값은 상기 인식시점의 노출값 보다 높을 수 있다. Specifically, the adjustment unit adjusts the exposure value of the camera to a preset first exposure value and a second exposure value, and the first exposure value is lower than the exposure value at the recognition time when the user's face was recognized before the exposure value adjustment, and the second exposure value The exposure value may be higher than the exposure value at the recognition point.
구체적으로, 상기 판별부는, 상기 노출값 조정 이전에 인식된 사용자 얼굴 중, 상기 카메라의 노출값을 낮추는 조정 후 촬영되는 촬영 화면에서 인식되지 않고 상기 카메라의 노출값을 높이는 조정 후 촬영되는 촬영 화면에서 인식되는 특정 사용자 얼굴을, 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별할 수 있다. Specifically, the determination unit, among the user's faces recognized before the exposure value adjustment, is not recognized on the photographing screen photographed after the adjustment to lower the exposure value of the camera, but is recognized on the photographing screen photographed after adjusting the exposure value of the camera. The user's face may be identified as the user's face to be used for the facial recognition function.
구체적으로, 상기 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패하는 경우, 사용자 얼굴 방향으로 특정 이미지를 조사하는 조사부를 더 포함하며; 상기 판별부는, 상기 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 상기 특정 이미지의 왜곡 여부를 판단하고, 상기 노출값 조정 이전에 인식된 사용자 얼굴 중 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별할 수 있다.Specifically, when it fails to determine the user's face to be used for the facial recognition function, further comprising an irradiation unit for irradiating a specific image in the direction of the user's face; The determination unit determines whether or not the specific image is distorted on the user's face recognized on the photographing screen photographed after the specific image is irradiated, and the specific image is distorted among the user's faces recognized before adjusting the exposure value. A face can be identified as a user's face to be used for the facial recognition function.
구체적으로, 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 상기 카메라의 노출값을 조정하여 촬영 화면에서 상기 특정 사용자 얼굴이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출하는 검출부를 더 포함하며; 상기 조정부에는, 상기 최저 노출값 및 최고 노출값이, 이후 사용자 얼굴 판별을 위해 상기 카메라의 노출값 조정 시 사용되도록 설정될 수 있다.Specifically, when determining a specific user's face formed by distorting the specific image as a user's face to be used for the facial recognition function, the exposure value of the camera is adjusted and the minimum exposure value at a point in time when the specific user's face is not recognized on the shooting screen, and Further comprising a detection unit for detecting the highest exposure value; In the adjustment unit, the minimum exposure value and the maximum exposure value may be set to be used when adjusting the exposure value of the camera to determine a user's face.
이에, 본 발명에 따른 사용자 얼굴 판별 방법에 의하면, 일반 카메라를 이용하는 경우에도 이미지 형태의 가짜 사용자 얼굴이 아닌 실제 사용자 얼굴을 판별해낼 수 있기 때문에, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점을 해결하는 효과를 기대할 수 있다.Accordingly, according to the method for determining a user's face according to the present invention, even when using a general camera, it is possible to determine the real user's face rather than a fake user face in the form of an image. You can expect the effect of solving it.
도 1은 본 발명의 일 실시예에 따른 사용자 얼굴 판별 환경을 보여주는 예시도이다.
도 2는 본 발명의 일 실시예에 따른 사용자 얼굴 판별장치의 구성을 보여주는 구성도이다.
도 3은 촬영 화면에서 사용자 얼굴이 인식되는 일 실시예를 보여주는 예시도.
도 4 및 도 5는 본 발명의 일 실시예에 따라 카메라 노출값을 조정한 후 촬영되는 촬영 화면 및 사용자 얼굴이 인식되는 결과를 보여주는 예시도.
도 6은 본 발명의 일 실시예에 따른 사용자 얼굴 판별 방법의 동작 흐름을 보여주는 흐름도이다.1 is an exemplary diagram showing an environment for determining a user's face according to an embodiment of the present invention.
2 is a block diagram showing the configuration of an apparatus for determining a user's face according to an embodiment of the present invention.
3 is an exemplary view showing an embodiment in which a user's face is recognized on a photographing screen.
4 and 5 are exemplary views showing a photographing screen photographed after adjusting an exposure value of a camera and a result of recognizing a user's face according to an embodiment of the present invention.
6 is a flowchart illustrating an operation flow of a method for determining a user's face according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명의 일 실시예에 대하여 설명한다.Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings.
최근, 스마트폰이 사용이 일상화 되면서, 금융 분야 등 개인 인증이 필수적인 서비스 분야에서는 보안 기술로서 공인인증서를 기반으로 사용자를 인증하는 방식에서 지문/홍채/안면(사용자 얼굴) 인식을 기반으로 사용자를 인증하는 방식을 채택하는 추세이다.Recently, with the use of smartphones in everyday life, in the field of services where personal authentication is essential, such as finance, users are authenticated based on fingerprint/iris/face (user face) recognition in a way that authenticates users based on public certificates as a security technology. There is a trend of adopting the way of doing it.
지문/홍채 인식 기반의 인증 방식의 경우, 지문/홍채 인식 기술에서 복사한 지문/홍채를 구별해내기 어려운 취약점이 있다.In the case of fingerprint/iris recognition-based authentication, there is a vulnerability that makes it difficult to distinguish the copied fingerprint/iris from the fingerprint/iris recognition technology.
한편, 안면 인식 기반의 인증 방식의 경우, 안면 인식 기술에서 이미지 형태의 가짜 사용자 얼굴을 구별해내기 어려운 취약점이 있다.On the other hand, in the case of the authentication method based on facial recognition, there is a vulnerability that it is difficult to distinguish a fake user face in the form of an image in the facial recognition technology.
이에, 최근에는 안면 인식 기술이 갖는 취약점을 극복하기 위해, TOF(Time of Flight) 방식 3D 카메라 인식 기술이 등장하였다.Accordingly, recently, in order to overcome the weaknesses of facial recognition technology, a TOF (Time of Flight) 3D camera recognition technology has appeared.
하지만, TOF 방식 3D 카메라 인식 기술은, TOF 센서와 TOF 센서의 센싱값을 입력/처리할 수 있는 고성능 카메라가 있어야 하기 때문에, 일반 카메라를 구비한 일반 스마트폰으로는 이용할 수 없다.However, the TOF type 3D camera recognition technology cannot be used with a general smartphone equipped with a general camera because a TOF sensor and a high-performance camera capable of inputting/processing the sensing value of the TOF sensor are required.
이에, 본 발명에서는, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점 즉 이미지 형태의 가짜 사용자 얼굴을 구별해내기 어려운 취약점을 해결할 수 있는 방안을 실현하고자 한다.Accordingly, in the present invention, it is intended to realize a method for solving a vulnerability in facial recognition that may occur when a general camera is used, that is, a vulnerability in which it is difficult to distinguish a fake user face in the form of an image.
보다 구체적으로, 본 발명에서는, 위 실현하고자 하는 방안을 구현해 내는 사용자 얼굴 판별 방법 및 사용자 얼굴 판별장치를 제안하고자 한다.More specifically, in the present invention, it is intended to propose a user face identification method and a user face identification device that implement the method to be realized above.
도 1은, 본 발명의 일 실시예에 따른 사용자 얼굴 판별 환경을 보여주고 있다.1 shows an environment for determining a user's face according to an embodiment of the present invention.
도 1에 도시된 바와 같이, 사용자(1)가 자신의 얼굴(사용자 얼굴)을 기반으로 안면 인식 기능을 통해 보안을 요구하는 접근(예: 은행 서비스, 출입 통제 서비스 등)을 시도하고자 하는 경우, 사용자(1)는 카메라(10)를 통해 자신의 얼굴(사용자 얼굴)이 촬영될 수 있도록 한다.As shown in Fig. 1, when a user 1 attempts to access a security request (eg, bank service, access control service, etc.) through a face recognition function based on his or her face (user face), The user 1 allows his or her face (user face) to be photographed through the
본 발명에서 제안하는 사용자 얼굴 판별장치(100)는, 카메라(10)를 통해 촬영된 촬영 화면에서 사용자 얼굴을 인식한다.The user
이때, 카메라(10)는, TOF(Time of Flight) 센서를 구비하거나 TOF 센서의 센싱값을 입력/처리할 수 있는 고성능 카메라가 아닌, 일반적인 카메라를 의미한다.In this case, the
그리고, 이러한 카메라(10)는, 기 등록된 디바이스(예: 스마트폰)에 탑재된 카메라일 수 있고 보안장치(예: 출입문 통제장치 등)와 유선 또는 무선 통신을 통해 연동하는 카메라일 수 있다.In addition, the
즉, 본 발명에 따른 사용자 얼굴 판별장치(방법)은, 일반 카메라를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식한다.That is, the user face determination apparatus (method) according to the present invention recognizes the user's face on a photographing screen photographed by a general camera.
한편, 도 1에서는 본 발명의 사용자 얼굴 판별장치(100)가 카메라(10)를 구비하는 디바이스(예: 스마트폰)에 구현되는 구조로 도시하고 있으나 이는 일 실시예일 뿐이며, 사용자 얼굴 판별장치(100)가 카메라(10)와 유선 또는 무선 통신을 통해 연동하는 보안장치(예: 출입문 통제장치 등)에 구현되는 구조일 수도 있다.Meanwhile, in FIG. 1, the user
본 발명에서 제안하는 사용자 얼굴 판별장치(100)는, 카메라(10)를 통해 촬영된 촬영 화면에서 사용자 얼굴이 인식되면, 카메라(10)의 노출값을 조정하면서 카메라(10)의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 진짜 사용자 얼굴을 판별한다.When the user's face is recognized on the photographing screen photographed by the
이하에서는, 도 2를 참조하여 본 발명의 실시예에 따른 사용자 얼굴 판별장치(100)의 각 기능부를 구체적으로 설명하겠다. Hereinafter, each functional unit of the user
도 2에 도시된 바와 같이, 본 발명의 실시예에 따른 사용자 얼굴 판별장치(100)는, 인식부(30), 조정부(40), 판별부(50)를 포함한다.As shown in FIG. 2, the user
도 2는, 사용자 얼굴 판별장치(100)가 카메라(10)를 구비하는 디바이스(예: 스마트폰)에 구현되는 경우를 실시예로서 도시하고 있으며, 이러한 실시예에 따라 사용자 얼굴 판별장치(100)는, 카메라(10)를 포함할 수 있다.FIG. 2 illustrates a case where the user
더 나아가 본 발명의 실시예에 따른 사용자 얼굴 판별장치(100)는, 조사부(60), 검출부(70)를 더 포함할 수 있다.Furthermore, the user
이러한 사용자 얼굴 판별장치(100)의 구성 전체 내지는 적어도 일부는 하드웨어 모듈 형태 또는 소프트웨어 모듈 형태로 구현되거나, 하드웨어 모듈과 소프트웨어 모듈이 조합된 형태로도 구현될 수 있다.All or at least a part of the configuration of the user
여기서, 소프트웨어 모듈이란, 예컨대, 사용자 얼굴 판별장치(100) 내에서 연산을 제어하는 프로세서에 의해 실행되는 명령어로 이해될 수 있으며, 이러한 명령어는 사용자 얼굴 판별장치(100) 내 메모리에 탑재된 형태를 가질 수 있을 것이다.Here, the software module may be understood as, for example, a command executed by a processor that controls an operation in the user
결국, 본 발명의 일 실시예에 따른 사용자 얼굴 판별장치(100)는 전술한 구성을 통해, 본 발명에서 제안하는 방안 즉 일반 카메라를 이용하는 경우 발생할 수 있는 취약점(가짜 사용자 얼굴을 구별해내기 어려운 취약점)을 해결할 수 있는 방안을 실현하며, 이하에서는 이를 실현하기 위한 사용자 얼굴 판별장치(100) 내 각 구성에 대해 보다 구체적으로 설명하기로 한다.As a result, the user
인식부(30)는, 카메라(10)를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식한다.The
예를 들면, 인식부(30)는, 안면 인식 기능을 통해 보안 접근(예: 은행 서비스, 출입 통제 서비스 등)을 시도하는 이벤트가 인지되는 경우, 카메라(10)를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식할 수 있다. For example, when an event attempting a security access (eg, bank service, access control service, etc.) is recognized through the face recognition function, the
이때, 촬영 화면에서 사용자 얼굴을 인식해내는 기술은, 기존의 인식 기술을 채택할 수 있다. In this case, as a technology for recognizing a user's face on a photographing screen, an existing recognition technology may be employed.
일 예를 들면, 인식부(30)는, 카메라(10)를 통해 촬영되는 촬영 화면에서, 눈 또는 피부색 등을 검출하는 검출 과정을 거쳐 얼굴영역을 구분하고, 구분한 얼굴영역의 이미지를 사용자 얼굴로 인식할 수 있다. For example, the
조정부(40)는, 인식부(30)에서 사용자 얼굴이 인식되면, 카메라(10)의 노출값을 조정한다.The
즉, 조정부(40)는, 인식부(30)에서 사용자 얼굴이 인식되면, 인식 시점부터 카메라(10)의 노출값을 커스텀으로 조정하기 시작한다.That is, when the user's face is recognized by the
도 3은 촬영 화면에서 사용자 얼굴이 인식되는 일 실시예를 보여주고 있다.3 shows an embodiment in which a user's face is recognized on a photographing screen.
본 발명의 특징을 잘 보여주기 위해, 도 3에서는 촬영 화면에는 실제 사용자 얼굴 외에도 이미지 형태의 가짜 사용자 얼굴이 포함된 상황을 보여주고 있다. In order to better illustrate the features of the present invention, FIG. 3 shows a situation in which a fake user face in the form of an image is included in the photographing screen in addition to the real user face.
도 3과 같은 상황에서, TOF 방식 3D 카메라 인식 기술을 활용하지 않는다면, 사용자 얼굴(a)와 사용자 얼굴(b)를 인식하게 될 것이다.In the situation as shown in FIG. 3, if the TOF type 3D camera recognition technology is not used, the user face (a) and the user face (b) will be recognized.
즉, 본 발명에서는, TOF(Time of Flight) 센서를 구비하거나 TOF 센서의 센싱값을 입력/처리할 수 있는 고성능 카메라가 아닌 일반 카메라(10)를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과이므로, 사용자 얼굴(a)와 사용자 얼굴(b)를 인식하게 될 것이다. That is, in the present invention, recognition by recognizing a user's face in a shooting screen photographed through a
이하에서는, 설명의 편의 상, 후술의 카메라 노출값 조정 이전(시작 전)에 사용자 얼굴을 인식한 인식 결과를, 초기 인식 결과라 명명하겠다.Hereinafter, for convenience of explanation, a recognition result of recognizing a user's face before (before starting) adjustment of the camera exposure value described later will be referred to as an initial recognition result.
구체적인 실시예를 설명하면, 조정부(40)는, 인식부(30)에서 사용자 얼굴 예컨대 사용자 얼굴(a) 및 사용자 얼굴(b)를 인식하면, 인식 시점부터 카메라(10)의 노출값을 커스텀으로 조정하기 시작한다.Explaining a specific embodiment, when the
구체적인 실시예에 따르면, 조정부(40)는, 카메라(10)의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정할 수 있다. According to a specific embodiment, the
이에, 조정부(40)는, 카메라(10)의 노출값을 기 설정된 제1노출값까지 줄이고 이후 카메라(10)의 노출값을 기 설정된 제2노출값(제1노출값<제2노출값)까지 높이는 방식으로, 노출값을 조정할 수 있다.Accordingly, the
또는, 조정부(40)는, 카메라(10)의 노출값을 기 설정된 제2노출값까지 높이고 이후 카메라(10)의 노출값을 기 설정된 제1노출값(제1노출값<제2노출값)까지 낮추는 방식으로, 노출값을 조정할 수 있다.Alternatively, the
이때, 제1노출값은 노출값 조정 이전에 사용자 얼굴을 인식한 인식 시점의 노출값 보다 낮고, 제2노출값은 노출값 조정 이전에 사용자 얼굴을 인식한 인식 시점의 노출값 보다 높은 노출값일 수 있다.In this case, the first exposure value may be lower than the exposure value at the recognition time point when the user face is recognized before the exposure value adjustment, and the second exposure value may be an exposure value higher than the exposure value at the recognition time point when the user face is recognized before the exposure value adjustment.
일 실시예에 따르면, 본 발명에서는, 제1노출값으로서 카메라(10)의 사양에서 조정 가능한 최소 노출값을 설정할 수 있고, 제2노출값으로서 카메라(10)의 사양에서 조정 가능한 최대 노출값을 설정할 수 있다. According to an embodiment, in the present invention, a minimum exposure value adjustable in the specifications of the
다른 실시예에 따르면, 본 발명에서는, 카메라(10)의 사양에서 조정 가능한 노출값 범위 중에서, 후술 예정인 학습 과정을 거쳐 최적으로 검출되는 최소 노출값을 제1노출값으로서 설정할 수 있고 최적으로 검출되는 최고 노출값을 제2노출값으로서 설정할 수도 있다.According to another embodiment, in the present invention, from among the range of exposure values adjustable in the specifications of the
판별부(50)는, 카메라(10)의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 사용자 얼굴을 판별하는 기능부이다.Based on the recognition result of recognizing the user's face on the shooting screen taken after adjusting the exposure value of the
구체적으로, 판별부(50)는, 조정부(40)에서의 노출값 조정 이전에 인식된 초기 인식 결과의 사용자 얼굴 중, 카메라(10)의 노출값을 낮추는 조정 후 촬영되는 촬영 화면에서 인식되지 않고 카메라(10)의 노출값을 높이는 조정 후 촬영되는 촬영 화면에서 인식되는 특정 사용자 얼굴을, 안면 인식 기능에 사용할 사용자 얼굴로 판별할 수 있다.Specifically, the
예를 들면, 본 발명의 사용자 얼굴 판별장치(100, 구체적으로 조정부(40), 인식부(30))는, 카메라(10)의 노출값을 기 설정된 제1노출값까지 줄이는 조정을 하고 이때 촬영 화면에서 사용자 얼굴을 인식할 수 있다. For example, the user
그리고, 본 발명의 사용자 얼굴 판별장치(100, 구체적으로 조정부(40), 인식부(30))는, 카메라(10)의 노출값을 기 설정된 제2노출값까지 높이는 조정을 하고 이때 촬영 화면에서 사용자 얼굴을 인식할 수 있다.In addition, the user
이하에서는, 설명의 편의 상, 카메라 노출값을 제1노출값까지 조정한 후의 사용자 얼굴 인식 결과는 제1인식 결과, 카메라 노출값을 제2노출값까지 조정한 후의 사용자 얼굴 인식 결과는 제2인식 결과라 명명하겠다.Hereinafter, for convenience of explanation, the user face recognition result after adjusting the camera exposure value to the first exposure value will be referred to as a first recognition result, and the user face recognition result after adjusting the camera exposure value to the second exposure value will be referred to as the second recognition result. .
도 4 및 도 5는 본 발명의 일 실시예에 따라 카메라 노출값을 조정한 후 촬영되는 촬영 화면 및 사용자 얼굴이 인식되는 결과를 보여주는 예시도이다.4 and 5 are exemplary views showing a photographing screen photographed after adjusting an exposure value of a camera and a result of recognizing a user's face according to an embodiment of the present invention.
더 구체적으로, 도 4는 도 3에서와 같이 촬영 화면에 실제 사용자 얼굴 외에도 이미지 형태의 가짜 사용자 얼굴이 포함된 상황에서, 카메라의 노출값을 기 설정된 제1노출값까지 줄인 후 촬영된 촬영 화면을 보여주고 있다.More specifically, FIG. 4 shows a photographing screen taken after reducing the exposure value of the camera to a preset first exposure value in a situation where a fake user's face in an image form is included in the shooting screen in addition to the actual user's face as shown in FIG. 3. have.
도 4에 도시된 바와 같이, 카메라 노출값을 줄여 카메라로 받아들여지는 빛의 양을 줄이면, 촬영 화면에 포함된 실제 사용자 얼굴은 인식되지 못하지만, 기기 화면에 표시된 이미지 형태의 가짜 사용자 얼굴은 기기의 화면 밝기 때문에 일정수준 이상 카메라 노출값을 줄여도 인식될 수 있다.As shown in FIG. 4, if the camera exposure value is reduced to reduce the amount of light received by the camera, the actual user face included in the shooting screen cannot be recognized, but the fake user face in the form of an image displayed on the device screen is Because of the brightness, it can be recognized even if the camera exposure value is reduced over a certain level.
이에, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 카메라 노출값을 제1노출값까지 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과 즉 제1인식 결과로서, 이미지 형태의 가짜 사용자 얼굴(b) 만을 인식하게 될 것이다. Accordingly, the user
한편, 도 5는 도 3에서와 같이 촬영 화면에 실제 사용자 얼굴 외에도 이미지 형태의 가짜 사용자 얼굴이 포함된 상황에서, 카메라의 노출값을 기 설정된 제2노출값까지 높인 후 촬영된 촬영 화면을 보여주고 있다.Meanwhile, as shown in FIG. 3, in a situation in which a fake user's face in an image form is included in the photographing screen in addition to the real user's face, as shown in FIG. 3, a photographed screen is shown after increasing the exposure value of the camera to a preset second exposure value.
도 5에 도시된 바와 같이, 카메라 노출값을 높여 카메라로 받아들여지는 빛의 양을 많아지도록 하면, 촬영 화면에 포함된 실제 사용자 얼굴은 인식될 수 있으나, 기기 화면에 표시된 이미지 형태의 가짜 사용자 얼굴은 기기의 화면 밝기로 인해 인식되지 못할 것이다.As shown in FIG. 5, if the camera exposure value is increased to increase the amount of light received by the camera, the actual user face included in the shooting screen can be recognized, but the fake user face in the form of an image displayed on the device screen It will not be recognized due to the device's screen brightness.
이에, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 카메라 노출값을 제2노출값까지 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과 즉 제2인식 결과로서, 실제 사용자 얼굴(a) 만을 인식하게 될 것이다. Accordingly, the user
이에 판별부(50)는, 전술과 같이 카메라(10)의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과 즉 제1,2인식 결과와, 카메라(10)의 노출값 조정 이전에 인식된 초기 인식 결과를 비교하여, 초기 인식 결과에서 안면 인식 기능에 사용할 진짜 사용자 얼굴 만을 판별해낼 수 있다.Accordingly, the
구체적인 실시예에 따르면, 판별부(50)는, 초기 인식 결과에서 인식된 사용자 얼굴(a) 및 사용자 얼굴(b) 중, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과에서는 인식되지 않고 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과에서는 인식된 사용자 얼굴(a)를, 실제 사용자 얼굴로서 판별할 수 있다.According to a specific embodiment, the
또 다른 실시예에 따르면, 판별부(50)는, 초기 인식 결과에서 인식된 사용자 얼굴(a) 및 사용자 얼굴(b) 중, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과에서는 인식되고 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과에서는 인식되지 않은 사용자 얼굴(b)를 가짜 사용자 얼굴로 구별 및 이를 제외한 나머지 사용자 얼굴(a)을, 실제 사용자 얼굴로서 판별할 수 있다.According to another embodiment, the
이에, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 초기 인식 결과에서 인식된 사용자 얼굴(a) 및 사용자 얼굴(b) 중 실제 사용자 얼굴로 판별한 사용자 얼굴(a)을 안면 인식 기능에 사용할 수 있다.Accordingly, the user
즉, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 초기 인식 결과에서 사용자 얼굴(a)을 실제 사용자 얼굴로서 판별하면, 판별한 사용자 얼굴(a)를 사용하여 안면 인식 기능(프로세스)를 시작할 수 있다.That is, when the user
예를 들면, 사용자 얼굴 판별장치(100)는, 촬영하여 인식한 사용자 얼굴과 기 저장된 정당한 사용자의 얼굴 이미지를 비교하여 정당한 사용자인지 여부를 인증하는 방식의 안면 인식 프로세스(기술)에서, 금번 판별한 사용자 얼굴(a)을 사용하도록 제공할 수 있다.For example, in the face recognition process (technology) of a method of authenticating whether the user is a legitimate user by comparing the user face captured and recognized with a previously stored face image of a legitimate user, It can be provided to use the user's face (a).
한편, 전술의 설명에서는, 본 발명의 특징을 잘 보여주기 위해 촬영 화면에 실제 사용자 얼굴 외에도 이미지 형태의 가짜 사용자 얼굴이 포함된 상황을 가정하여 설명하였다.Meanwhile, in the above description, in order to better show the features of the present invention, a situation in which a fake user's face in an image form is included in the photographing screen in addition to the real user's face has been assumed.
만약, 촬영 화면에 실제 사용자 얼굴(a) 만이 포함된 상황이라면, 본 발명의 사용자 얼굴 판별장치(100, 특히 판별부(50))에서는, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과에서 사용자 얼굴(a)이 인식되지 않고 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과에서 사용자 얼굴(a)이 인식될 것이므로, 초기 인식 결과에서 인식된 사용자 얼굴(a)를 실제 사용자 얼굴로서 판별할 것이다.If only the real user's face (a) is included in the photographing screen, the user face determination apparatus 100 (in particular, the determination unit 50) of the present invention lowers the camera exposure value (first exposure value) and then recognizes the first In the recognition result, the user face (a) is not recognized, and the user face (a) will be recognized in the second recognition result recognized after increasing the camera exposure value (second exposure value). Will be identified as the real user face.
한편, 촬영 화면에 가짜 사용자 얼굴(b) 만이 포함된 상황이라면, 본 발명의 사용자 얼굴 판별장치(100, 특히 판별부(50))에서는, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과에서 사용자 얼굴(b)이 인식되고 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과에서 사용자 얼굴(b)이 인식되지 않을 것이므로, 초기 인식 결과에서 인식된 사용자 얼굴(b)를 가짜 사용자 얼굴로 구별하고, 초기 인식 결과에서 진짜 사용자 얼굴이 없다고 판별할 것이다.On the other hand, if only the fake user's face (b) is included in the photographing screen, the user face determination apparatus 100 (especially the determination unit 50) of the present invention lowers the camera exposure value (first exposure value) and then recognizes the first Since the user face (b) will be recognized in the recognition result and the user face (b) will not be recognized in the second recognition result recognized after increasing the camera exposure value (second exposure value), the user face (b) recognized in the initial recognition result Is identified as a fake user face, and it is determined that there is no real user face from the initial recognition result.
이상 설명한 바와 같이, 본 발명에 따르면, 고성능/고가의 TOF 방식 3D 카메라 인식 기술을 사용하지 않고 일반 카메라를 이용하는 경우에도, 사진이나 영상 등 이미지 형태의 가짜 사용자 얼굴이 아닌 실제 사용자 얼굴을 판별해내는 기술을 실현함으로써, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점을 해결할 수 있다.As described above, according to the present invention, even when a general camera is used without using a high-performance/expensive TOF type 3D camera recognition technology, the real user face is determined instead of a fake user face in the form of an image such as a photo or video. By realizing the technology, it is possible to solve the vulnerability of facial recognition that may occur when using a general camera.
더 나아가, 본 발명의 사용자 얼굴 판별장치(100, 특히 판별부(50))에서는, 초기 인식 결과의 사용자 얼굴이, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과 및 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과 모두에서 인식되거나 또는 모두에서 인식되지 않는 경우, 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패한 것으로 판단할 수 있다.Furthermore, in the user face determination apparatus 100 (in particular, the determination unit 50) of the present invention, the user face of the initial recognition result is the first recognition result and the camera exposure value recognized after lowering the camera exposure value (first exposure value). When the second recognition result recognized after the increase (second exposure value) is recognized in all or not recognized in all, it may be determined that the user's face to be used for the facial recognition function has failed.
이하에서는 설명의 편의 상, 도 3에 도시된 바와 같이 초기 인식 결과에 사용자 얼굴(a) 및 사용자 얼굴(b)가 포함되지만, 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패한 경우로 가정하여 설명하겠다.Hereinafter, for convenience of explanation, as illustrated in FIG. 3, the user face (a) and the user face (b) are included in the initial recognition result, but it is assumed that the user face to be used for the facial recognition function has failed to be determined.
조사부(60)는, 전술과 같이 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패하는 경우, 사용자 얼굴(a) 및 (b) 방향으로 특정 이미지를 조사하는 기능을 담당한다.The
이를 위해, 본 발명의 사용자 얼굴 판별장치(100)는, 판별장치(100) 전방에 위치하는 사용자 얼굴(a) 및 (b) 방향으로 특정 이미지를 조사하는 역할의 조사부(60)를 더 구비할 수도 있고, 별도 구비된 조사부(60)와의 유선 또는 무선 통신으로 조사부(60)를 제어할 수도 있다. To this end, the user
여기서, 조사부(60)는, 사용자 얼굴(a) 및 (b) 방향으로 특정 이미지를 조사할 때, 사용자 얼굴 특징을 기반으로 굴곡이 상대적으로 큰 포인트 사이(예: 양볼-콧대)를 타겟 방향으로 하여, 특정 이미지를 조사할 수 있다.Here, when irradiating a specific image in the direction of the user's face (a) and (b), the
또한, 조사부(60)는, 사용자 얼굴(a) 및 (b) 방향으로 이미지를 조사할 때, 굴곡이 상대적으로 큰 포인트 사이(예: 양볼-콧대)에 조사되어 맺히는 경우 이미지 왜곡이 나타날 수 있는 특징(패턴)를 갖는 특정 이미지를 조사할 수 있다.In addition, when irradiating the image in the direction of the user's face (a) and (b), the
이러한 특정 이미지로서의 특징(패턴)은, 굴곡이 상대적으로 큰 포인트 사이(예: 양볼-콧대)를 타겟으로, 포인트들을 가로지르도록 조사되는 직선 또는 곡선의 단일 패턴 형태일 수 있고, 포인트들을 가로지르도록 조사되는 직선 및 곡선의 복수 패턴이 조합된 형태일 수 있고, 포인트들 상에 조사되는 단일의 도형 패턴 형태일 수 있고 또는 복수의 도형 패턴이 조합된 형태일 수도 있고, 포인트들 상에 조사되는 캐릭터 패턴 형태일 수 있다.The characteristic (pattern) as such a specific image may be in the form of a single pattern of straight or curved lines that are irradiated to cross the points, targeting between points with relatively large curvature (eg, both cheeks and nose bridges). It may be in the form of a combination of multiple patterns of straight lines and curves that are irradiated so that it may be in the form of a single figure pattern that is irradiated on the points, or a form in which a plurality of figure patterns are combined, or that it is irradiated on the points. It may be in the form of a character pattern.
판별부(50)는, 전술과 같이 특정 이미지를 조사한 후, 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 특정 이미지의 왜곡 여부를 판단한다.The
즉, 판별부(50)는, 조사부(60)가 조사한 특정 이미지의 특징(패턴)을 알고 있으므로, 특정 이미지를 조사한 상태에서 촬영되는 촬영 화면에서 인식되는 사용자 얼굴(a) 및 (b) 상에 맺히는 특정 이미지와 비교하면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되었는지 여부를 판단할 수 이다.That is, since the
만약, 특정 이미지가 맺힌 사용자 얼굴이 이미지 형태의 가짜 사용자 얼굴(b)이라면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되는 일은 없을 것이다.If the user face with a specific image is a fake user face (b) in the form of an image, the specific image formed on the user's face will not be distorted.
반면, 특정 이미지가 맺힌 사용자 얼굴이 진짜 사용자 얼굴(a)이라면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되는 일은 없을 것이다.On the other hand, if the user face on which a specific image is formed is a real user face (a), the specific image formed on the user's face will not be distorted.
이에, 판별부(50)는, 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴(a) 및 (b) 상에 맺히는 특정 이미지의 왜곡 여부를 판단하고, 노출값 조정 이전에 인식된 사용자 얼굴(a) 및 (b) 중 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 진짜 사용자 얼굴로 판별할 수 있다. Accordingly, the
이에, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 초기 인식 결과에서 인식된 사용자 얼굴(a) 및 사용자 얼굴(b) 중 실제 사용자 얼굴로 판별한 사용자 얼굴(a)을 안면 인식 기능에 사용할 수 있다.Accordingly, the user
검출부(70)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 카메라(10)의 노출값을 조정하여 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출할 수 있다. When the
즉, 검출부(70)는, 앞서 실패한 사용자 얼굴 판별 시 카메라(10)의 노출값을 조정하는데 이용한 제1,제2노출값을 최적의 노출값으로 재 설정하기 위해, 최저/최고 노출값을 검출하는 것이다.That is, the
예를 들면, 검출부(70)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점까지 카메라(10)의 노출값을 낮춰가면서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 노출값을 최저 노출값으로서 검출할 수 있다. For example, when the
또한, 검출부(70)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점까지 카메라(10)의 노출값을 높여가면서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 노출값을 최고 노출값으로서 검출할 수 있다.In addition, when the
이렇게 검출부(70)에 의해 검출된 최저 노출값 및 최고 노출값은, 학습 과정을 거쳐 검출되는 최적의 노출값으로 간주할 수 있다.In this way, the minimum exposure value and the maximum exposure value detected by the
이후, 조정부(40)에는, 검출부(70)에 의해 최적으로 검출되는 최저 노출값(제1노출값) 및 최고 노출값(제2노출값)이, 이후 사용자 얼굴 판별을 위해 카메라(10)의 노출값 조정 시 사용되도록 설정될 수 있다. Thereafter, in the
이상 설명한 바와 같이, 본 발명에 따르면, 고성능/고가의 TOF 방식 3D 카메라 인식 기술을 사용하지 않고 일반 카메라를 이용하는 경우에도 실제 사용자 얼굴을 판별해내는 기술을 실현함에 있어서, 판별 시 이용하는 파라미터(노출값)을 최적으로 설정/유지하여 판별 실패율을 현저히 낮출 수 있기 때문에, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점을 보다 효율적으로 해결할 수 있다.As described above, according to the present invention, in realizing the technology to determine the real user's face even when using a general camera without using a high-performance/expensive TOF type 3D camera recognition technology, the parameter (exposure value) used in the determination Since the discrimination failure rate can be significantly lowered by optimally setting/maintaining, the vulnerability of facial recognition that may occur when using a general camera can be more efficiently resolved.
이하에서는, 도 6을 참조하여 본 발명의 실시예에 따른 사용자 얼굴 판별 방법의 동작 흐름을 구체적으로 설명하겠다.Hereinafter, an operation flow of a method for determining a user's face according to an embodiment of the present invention will be described in detail with reference to FIG. 6.
먼저, 본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, 안면 인식 기능을 통해 보안 접근(예: 은행 서비스, 출입 통제 서비스 등)을 시도하는 이벤트가 인지되는 경우, 카메라(10)를 통해 촬영되는 촬영 화면에서 사용자 얼굴을 인식할 수 있다(S10). First, according to the user face recognition method of the present invention, when an event of attempting a security access (eg, bank service, access control service, etc.) is recognized through the face recognition function, the user
본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, S10단계에서 사용자 얼굴이 인식되면, 카메라(10)의 노출값을 조정한다(S20).According to the user face recognition method of the present invention, when the user face is recognized in step S10, the user
구체적으로, 사용자 얼굴 판별장치(100)는, S10단계에서 사용자 얼굴이 인식되면, 카메라(10)의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정할 수 있다. Specifically, when the user face is recognized in step S10, the user
이에, 본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, S20단계에서 수행하는 카메라(10)의 노출값 조정에 따른 촬영 화면에서 사용자 얼굴을 인식한다(S30).Accordingly, according to the user face recognition method of the present invention, the user
이하에서는, 설명의 편의 상, 카메라 노출값을 제1노출값까지 조정한 후의 사용자 얼굴 인식 결과는 제1인식 결과, 카메라 노출값을 제2노출값까지 조정한 후의 사용자 얼굴 인식 결과는 제2인식 결과라 명명하겠다.Hereinafter, for convenience of explanation, the user face recognition result after adjusting the camera exposure value to the first exposure value will be referred to as a first recognition result, and the user face recognition result after adjusting the camera exposure value to the second exposure value will be referred to as the second recognition result. .
그리고, 본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, S30단계에서 인식한 제1,제2 인식 결과를 근거로, 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과 즉 S10단계의 초기 인식 결과에서 인식한 사용자 얼굴 중 안면 인식 기능에 사용할 사용자 얼굴을 판별한다(S40).And, according to the user face recognition method of the present invention, the user
구체적으로, 사용자 얼굴 판별장치(100)는, S30단계에서 인식한 제1,제2 인식 결과를 근거로, S10단계의 초기 인식 결과에서 인식한 사용자 얼굴 중 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과에서는 인식되지 않고 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과에서는 인식된 사용자 얼굴을, 실제 사용자 얼굴로서 판별할 수 있다(S40).Specifically, the user
그리고, 본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, S40단계에서 실제 사용자 얼굴로 판별한 사용자 얼굴(예: 도 3의 (a))을 안면 인식 기능에 사용할 수 있다(S100).Further, according to the user face recognition method of the present invention, the user
즉, 사용자 얼굴 판별장치(100)는, 초기 인식 결과에서 사용자 얼굴(a)을 실제 사용자 얼굴로서 판별하면(S50 No), 판별한 사용자 얼굴(a)를 사용하여 안면 인식 기능(프로세스)를 시작할 수 있다(S100).That is, when the user
한편, 본 발명의 사용자 얼굴 인식 방법에 따르면, 초기 인식 결과의 사용자 얼굴이, 카메라 노출값을 낮춘(제1노출값) 후 인식한 제1인식 결과 및 카메라 노출값을 높인(제2노출값) 후 인식한 제2인식 결과 모두에서 인식되거나 또는 모두에서 인식되지 않는 경우, 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패한 것으로 판단할 수 있다(S50 Yes).Meanwhile, according to the user face recognition method of the present invention, the user face of the initial recognition result is the first recognition result recognized after lowering the camera exposure value (first exposure value) and the first recognition result recognized after increasing the camera exposure value (second exposure value). If the two recognition results are recognized in all or not in all, it may be determined that the user's face to be used for the facial recognition function has failed (S50 Yes).
이하에서는 설명의 편의 상, 도 3에 도시된 바와 같이 초기 인식 결과에 사용자 얼굴(a) 및 사용자 얼굴(b)가 포함되지만, 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패한 경우로 가정하여 설명하겠다.Hereinafter, for convenience of explanation, as illustrated in FIG. 3, the user face (a) and the user face (b) are included in the initial recognition result, but it is assumed that the user face to be used for the facial recognition function has failed to be determined.
본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, 사용자 얼굴 판별에 실패하는 경우(S50 Yes), 사용자 얼굴(a) 및 (b) 방향으로 특정 이미지를 조사할 수 있다(S60).According to the user face recognition method of the present invention, when the user face determination fails (S50 Yes), the user
여기서, 사용자 얼굴 판별장치(100)는, 사용자 얼굴(a) 및 (b) 방향으로 특정 이미지를 조사할 때, 사용자 얼굴 특징을 기반으로 굴곡이 상대적으로 큰 포인트 사이(예: 양볼-콧대)를 타겟 방향으로 하여, 특정 이미지를 조사할 수 있다.Here, the user
또한, 사용자 얼굴 판별장치(100)는, 사용자 얼굴(a) 및 (b) 방향으로 이미지를 조사할 때, 굴곡이 상대적으로 큰 포인트 사이(예: 양볼-콧대)에 조사되어 맺히는 경우 이미지 왜곡이 나타날 수 있는 특징(패턴)를 갖는 특정 이미지를 조사할 수 있다.In addition, the user
본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, 전술과 같이 특정 이미지를 조사한 후, 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 특정 이미지의 왜곡 여부를 판단한다(S70).According to the user face recognition method of the present invention, the user
즉, 사용자 얼굴 판별장치(100)는, S60단계에서 조사한 특정 이미지의 특징(패턴)을 알고 있으므로, 특정 이미지를 조사한 상태에서 촬영되는 촬영 화면에서 인식되는 사용자 얼굴(a) 및 (b) 상에 맺히는 특정 이미지와 비교하면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되었는지 여부를 판단할 수 이다.That is, since the user
만약, 특정 이미지가 맺힌 사용자 얼굴이 이미지 형태의 가짜 사용자 얼굴(b)이라면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되는 일은 없을 것이다.If the user face with a specific image is a fake user face (b) in the form of an image, the specific image formed on the user's face will not be distorted.
반면, 특정 이미지가 맺힌 사용자 얼굴이 진짜 사용자 얼굴(a)이라면, 사용자 얼굴 상에 맺히는 특정 이미지가 왜곡되는 일은 없을 것이다.On the other hand, if the user face on which a specific image is formed is a real user face (a), the specific image formed on the user's face will not be distorted.
이에, 사용자 얼굴 판별장치(100)는, 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴(a) 및 (b) 상에 맺히는 특정 이미지의 왜곡 여부를 판단하고(S70), 특정 이미지의 왜곡이 없다고 판단되면(S70 No) 금번 판별을 실패로 확정할 수 있다(S75).Accordingly, the user
한편, 사용자 얼굴 판별장치(100)는, 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴(a) 및 (b) 상에 맺히는 특정 이미지의 왜곡 여부를 판단하고(S70), 특정 이미지의 왜곡이 판단되면(S70 Yes), 왜곡이 판단된 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴 예컨대 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 진짜 사용자 얼굴로 판별할 수 있다(S80). On the other hand, the user
이에, 본 발명에 따른 사용자 얼굴 판별장치(100)는, 초기 인식 결과에서 인식된 사용자 얼굴(a) 및 사용자 얼굴(b) 중 실제 사용자 얼굴로 판별한 사용자 얼굴(a)을 안면 인식 기능에 사용할 수 있다(S100).Accordingly, the user
그리고, 본 발명의 사용자 얼굴 인식 방법에 따르면, 사용자 얼굴 판별장치(100)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우(S80), 카메라(10)의 노출값을 조정하여 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출할 수 있다(S90). And, according to the user face recognition method of the present invention, when the user
즉, 사용자 얼굴 판별장치(100)는, 앞서 실패한 사용자 얼굴 판별 시 카메라(10)의 노출값을 조정하는데 이용한 제1,제2노출값을 최적의 노출값으로 재 설정하기 위해, 최저/최고 노출값을 검출하는 것이다.That is, the user
예를 들면, 사용자 얼굴 판별장치(100)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점까지 카메라(10)의 노출값을 낮춰가면서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 노출값을 최저 노출값으로서 검출할 수 있다. For example, when the user
또한, 사용자 얼굴 판별장치(100)는, 전술과 같이 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴(a)을 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 촬영 화면에서 특정 사용자 얼굴(a)이 인식되지 않는 시점까지 카메라(10)의 노출값을 높여가면서 특정 사용자 얼굴(a)이 인식되지 않는 시점의 노출값을 최고 노출값으로서 검출할 수 있다.In addition, when the user
이렇게 검출된 최저 노출값 및 최고 노출값은, 학습 과정을 거쳐 검출되는 최적의 노출값으로 간주할 수 있다.The minimum exposure value and the maximum exposure value detected in this way can be regarded as an optimal exposure value detected through a learning process.
이후, 사용자 얼굴 판별장치(100)는, 최적으로 검출되는 최저 노출값(제1노출값) 및 최고 노출값(제2노출값)이, 이후 사용자 얼굴 판별을 위해 카메라(10)의 노출값 조정 시 사용되도록 설정할 수 있다(S90). Thereafter, the user
이상 설명한 바와 같이, 본 발명에 따르면, 고성능/고가의 TOF 방식 3D 카메라 인식 기술을 사용하지 않고 일반 카메라를 이용하는 경우에도, 사진이나 영상 등 이미지 형태의 가짜 사용자 얼굴이 아닌 실제 사용자 얼굴을 판별해내는 기술을 실현함으로써, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점을 해결할 수 있다.As described above, according to the present invention, even when a general camera is used without using a high-performance/expensive TOF type 3D camera recognition technology, the real user face is determined instead of a fake user face in the form of an image such as a photo or video. By realizing the technology, it is possible to solve the vulnerability of facial recognition that may occur when using a general camera.
더 나아가, 본 발명에 따르면, 고성능/고가의 TOF 방식 3D 카메라 인식 기술을 사용하지 않고 일반 카메라를 이용하는 경우에도 실제 사용자 얼굴을 판별해내는 기술을 실현함에 있어서, 판별 시 이용하는 파라미터(노출값)을 최적으로 설정/유지하여 판별 실패율을 현저히 낮출 수 있기 때문에, 일반 카메라를 이용하는 경우 발생할 수 있는 안면 인식의 취약점을 보다 효율적으로 해결할 수 있다.Furthermore, according to the present invention, in realizing the technology to determine the real user's face even when using a general camera without using a high-performance/expensive TOF type 3D camera recognition technology, the parameter (exposure value) used at the time of identification is optimized. Since the discrimination failure rate can be significantly reduced by setting/maintaining it, the vulnerability of facial recognition that may occur when using a general camera can be more efficiently solved.
한편, 본 명세서에서 설명하는 사용자 얼굴 판별 방법의 기능적인 동작과 주제의 구현물들은 디지털 전자 회로로 구현되거나, 본 명세서에서 개시하는 구조 및 그 구조적인 등가물들을 포함하는 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나, 이들 중 하나 이상의 결합으로 구현 가능하다. 본 명세서에서 설명하는 주제의 구현물들은 하나 이상의 컴퓨터 프로그램 제품, 다시 말해 제어 시스템의 동작을 제어하기 위하여 혹은 이것에 의한 실행을 위하여 유형의 프로그램 저장매체 상에 인코딩된 컴퓨터 프로그램 명령에 관한 하나 이상의 모듈로서 구현될 수 있다.On the other hand, the functional operations of the method for determining a user's face described in this specification and implementations of the subject may be implemented as digital electronic circuits, or as computer software, firmware, or hardware including the structures disclosed in this specification and structural equivalents thereof. , It can be implemented by combining one or more of these. Implementations of the subject matter described herein are one or more computer program products, i.e., one or more modules relating to computer program instructions encoded on a tangible program storage medium for controlling or executing by the control system. Can be implemented.
컴퓨터로 판독 가능한 매체는 기계로 판독 가능한 저장 장치, 기계로 판독 가능한 저장 기판, 메모리 장치, 기계로 판독 가능한 전파형 신호에 영향을 미치는 물질의 조성물 혹은 이들 중 하나 이상의 조합일 수 있다.The computer-readable medium may be a machine-readable storage device, a machine-readable storage substrate, a memory device, a composition of materials that affect a machine-readable radio wave signal, or a combination of one or more of them.
본 명세서에서 "시스템"이나 "장치"라 함은 예컨대 프로그래머블 프로세서, 컴퓨터 혹은 다중 프로세서나 컴퓨터를 포함하여 데이터를 제어하기 위한 모든 기구, 장치 및 기계를 포괄한다. 제어 시스템은, 하드웨어에 부가하여, 예컨대 프로세서 펌웨어를 구성하는 코드, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제 혹은 이들 중 하나 이상의 조합 등 요청 시 컴퓨터 프로그램에 대한 실행 환경을 형성하는 코드를 포함할 수 있다.In the present specification, the term "system" or "device" encompasses all devices, devices and machines for controlling data, including, for example, a programmable processor, a computer, or multiple processors or computers. The control system may include, in addition to hardware, code that forms an execution environment for a computer program upon request, such as a code constituting a processor firmware, a protocol stack, a database management system, an operating system, or a combination of one or more of them. .
컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 어플리케이션, 스크립트 혹은 코드로도 알려져 있음)은 컴파일되거나 해석된 언어나 선험적 혹은 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 혹은 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 반드시 대응하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 혹은 다중의 상호 작용하는 파일(예컨대, 하나 이상의 모듈, 하위 프로그램 혹은 코드의 일부를 저장하는 파일) 내에, 혹은 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상의 스크립트) 내에 저장될 수 있다. 컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.Computer programs (also known as programs, software, software applications, scripts, or code) can be written in any form of a compiled or interpreted language or a programming language, including a priori or procedural language, and can be written as a standalone program or module, It can be deployed in any form, including components, subroutines, or other units suitable for use in a computer environment. Computer programs do not necessarily correspond to files in the file system. A program may be in a single file provided to the requested program, or in multiple interactive files (e.g., files that store one or more modules, subprograms, or portions of code), or part of a file that holds other programs or data. (Eg, one or more scripts stored within a markup language document). A computer program may be deployed to run on a single computer or multiple computers located at one site or distributed across a plurality of sites and interconnected by a communication network.
한편, 컴퓨터 프로그램 명령어와 데이터를 저장하기에 적합한 컴퓨터로 판독 가능한 매체는, 예컨대 EPROM, EEPROM 및 플래시메모리 장치와 같은 반도체 메모리 장치, 예컨대 내부 하드디스크나 외장형 디스크와 같은 자기 디스크, 자기광학 디스크 및 CD-ROM과 DVD-ROM 디스크를 포함하여 모든 형태의 비휘발성 메모리, 매체 및 메모리 장치를 포함할 수 있다. 프로세서와 메모리는 특수 목적의 논리 회로에 의해 보충되거나, 그것에 통합될 수 있다.On the other hand, computer-readable media suitable for storing computer program instructions and data include, for example, semiconductor memory devices such as EPROM, EEPROM, and flash memory devices, such as magnetic disks such as internal hard disks or external disks, magneto-optical disks, and CDs. -May contain all types of nonvolatile memory, media and memory devices, including ROM and DVD-ROM disks. The processor and memory can be supplemented by special purpose logic circuits or incorporated into it.
본 명세서에서 설명한 주제의 구현물은 예컨대 데이터 서버와 같은 백엔드 컴포넌트를 포함하거나, 예컨대 어플리케이션 서버와 같은 미들웨어 컴포넌트를 포함하거나, 예컨대 사용자가 본 명세서에서 설명한 주제의 구현물과 상호 작용할 수 있는 웹 브라우저나 그래픽 유저 인터페이스를 갖는 클라이언트 컴퓨터와 같은 프론트엔드 컴포넌트 혹은 그러한 백엔드, 미들웨어 혹은 프론트엔드 컴포넌트의 하나 이상의 모든 조합을 포함하는 연산 시스템에서 구현될 수도 있다. 시스템의 컴포넌트는 예컨대 통신 네트워크와 같은 디지털 데이터 통신의 어떠한 형태나 매체에 의해서도 상호 접속 가능하다.Implementations of the subject matter described herein include a backend component, such as a data server, or a middleware component such as an application server, or, for example, a web browser or graphic user that allows a user to interact with an implementation of the subject matter described herein. It may be implemented in a front-end component, such as a client computer having an interface, or a computing system that includes all of one or more combinations of such back-end, middleware, or front-end components. The components of the system can be interconnected by any form or medium of digital data communication, for example a communication network.
본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다. 마찬가지로, 개별적인 실시형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시형태에서 구현 가능하다. 나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.While this specification includes details of a number of specific implementations, these should not be construed as limiting to the scope of any invention or claim, but rather as a description of features that may be peculiar to a particular embodiment of a particular invention. It must be understood. Likewise, certain features described herein in the context of separate embodiments may be implemented in combination in a single embodiment. Conversely, various features described in the context of a single embodiment can also be implemented in multiple embodiments individually or in any suitable sub-combination. Furthermore, although features operate in a particular combination and may be initially described as so claimed, one or more features from a claimed combination may in some cases be excluded from the combination, and the claimed combination may be a subcombination. Or sub-combination variations.
또한, 본 명세서에서는 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안 된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징될 수 있다는 점을 이해하여야 한다In addition, although the present specification describes the operations in the drawings in a specific order, it is not understood that such operations must be performed in the specific order or sequential order shown in order to obtain a desirable result, or that all illustrated operations must be performed. Can not be done. In certain cases, multitasking and parallel processing can be advantageous. In addition, separation of the various system components of the above-described embodiments should not be understood as requiring such separation in all embodiments, and the program components and systems described are generally integrated together into a single software product or packaged in multiple software products. It should be understood that you can
이와 같이, 본 명세서는 그 제시된 구체적인 용어에 본 발명을 제한하려는 의도가 아니다. 따라서, 상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As such, this specification is not intended to limit the invention to the specific terms presented. Accordingly, although the present invention has been described in detail with reference to the above-described examples, those skilled in the art can make modifications, changes, and modifications to these examples without departing from the scope of the present invention. The scope of the present invention is indicated by the claims to be described later rather than the detailed description, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.
100 : 사용자 얼굴 판별장치
10 : 카메라 30 : 인식부
40 : 조정부 50 : 판별부
60 : 조사부 70 : 검출부100: user face identification device
10: camera 30: recognition unit
40: adjustment unit 50: discrimination unit
60: irradiation unit 70: detection unit
Claims (10)
사용자 얼굴이 인식되면, 상기 카메라의 노출값을 조정하는 조정단계; 및
상기 카메라의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 사용자 얼굴을 판별하는 판별단계를 포함하는 것을 특징으로 하는 사용자 얼굴 판별 방법.A recognition step of recognizing a user's face on a photographing screen photographed by a camera;
An adjustment step of adjusting the exposure value of the camera when the user's face is recognized; And
Based on the recognition result of recognizing the user's face on the shooting screen taken after adjusting the exposure value of the camera, a determination step of determining the user's face to be used for the facial recognition function from the recognition result of recognizing the user's face before the exposure value adjustment is performed. A method for determining a user's face, comprising: a.
상기 조정단계는,
상기 카메라의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정하며,
상기 제1노출값은 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식시점의 노출값 보다 높고, 상기 제2노출값은 상기 인식시점의 노출값 보다 낮은 것을 특징으로 하는 사용자 얼굴 판별 방법.The method of claim 1,
The adjustment step,
Adjusting the exposure value of the camera to a preset first exposure value and a second exposure value,
The first exposure value is higher than an exposure value at a recognition time when the user's face is recognized before adjusting the exposure value, and the second exposure value is lower than an exposure value at the recognition time.
상기 판별단계는,
상기 노출값 조정 이전에 인식된 사용자 얼굴 중, 상기 카메라의 노출값을 낮추는 조정 후 촬영되는 촬영 화면에서 인식되지 않고 상기 카메라의 노출값을 높이는 조정 후 촬영되는 촬영 화면에서 인식되는 특정 사용자 얼굴을, 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 것을 특징으로 하는 사용자 얼굴 판별 방법.The method of claim 1,
The determination step,
Among the user faces recognized before the exposure value adjustment, a specific user face recognized on a photographing screen photographed after adjusting to increase the exposure value of the camera without being recognized on a photographing screen photographed after adjustment of lowering the exposure value of the camera, the face recognition A method for determining a user's face, characterized in that the user's face is determined to be used for the function.
상기 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패하는 경우, 사용자 얼굴 방향으로 특정 이미지를 조사하는 단계;
상기 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 상기 특정 이미지의 왜곡 여부를 판단하는 단계; 및
상기 노출값 조정 이전에 인식된 사용자 얼굴 중 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 단계를 더 포함하는 것을 특징으로 하는 사용자 얼굴 판별 방법.The method of claim 1,
If it fails to determine the user's face to be used for the facial recognition function, irradiating a specific image in the direction of the user's face;
Determining whether the specific image is distorted on a user's face recognized on a photographing screen photographed after the specific image is irradiated; And
And determining a specific user face formed by distorting the specific image among the user faces recognized before adjusting the exposure value as a user face to be used for the face recognition function.
상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 상기 카메라의 노출값을 조정하여 촬영 화면에서 상기 특정 사용자 얼굴이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출하는 단계; 및
상기 최저 노출값 및 최고 노출값을, 이후 사용자 얼굴 판별을 위해 상기 카메라의 노출값 조정 시 사용되도록 설정하는 단계를 더 포함하는 것을 특징으로 하는 사용자 얼굴 판별 방법.The method of claim 4,
When the specific user face formed by distorting the specific image is determined as the user's face to be used for the face recognition function, the minimum exposure value and the maximum exposure value at a point in time when the specific user face is not recognized on the shooting screen are adjusted by adjusting the exposure value of the camera. Detecting; And
And setting the minimum exposure value and the maximum exposure value to be used when adjusting the exposure value of the camera to determine the user's face.
사용자 얼굴이 인식되면, 상기 카메라의 노출값을 조정하는 조정부; 및
상기 카메라의 노출값을 조정한 후 촬영되는 촬영 화면에서 사용자 얼굴을 인식한 인식 결과를 근거로, 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식 결과에서 안면 인식 기능에 사용할 사용자 얼굴을 판별하는 판별부를 포함하는 것을 특징으로 하는 사용자 얼굴 판별장치.A recognition unit for recognizing a user's face on a photographing screen photographed by the camera;
An adjustment unit for adjusting the exposure value of the camera when the user's face is recognized; And
Based on the recognition result of recognizing the user's face on the shooting screen taken after adjusting the exposure value of the camera, including a determination unit for determining the user's face to be used for the facial recognition function from the recognition result of recognizing the user's face before the exposure value adjustment User face identification device, characterized in that.
상기 조정부는,
상기 카메라의 노출값을 기 설정된 제1노출값 및 제2노출값으로 조정하며,
상기 제1노출값은 상기 노출값 조정 이전에 사용자 얼굴을 인식한 인식시점의 노출값 보다 높고, 상기 제2노출값은 상기 인식시점의 노출값 보다 낮은 것을 특징으로 하는 사용자 얼굴 판별장치.The method of claim 6,
The adjustment unit,
Adjusting the exposure value of the camera to a preset first exposure value and a second exposure value,
The first exposure value is higher than the exposure value at the recognition time when the user's face is recognized before the exposure value adjustment, and the second exposure value is lower than the exposure value at the recognition time.
상기 판별부는,
상기 노출값 조정 이전에 인식된 사용자 얼굴 중, 상기 카메라의 노출값을 낮추는 조정 후 촬영되는 촬영 화면에서 인식되지 않고 상기 카메라의 노출값을 높이는 조정 후 촬영되는 촬영 화면에서 인식되는 특정 사용자 얼굴을, 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 것을 특징으로 하는 사용자 얼굴 판별장치.The method of claim 6,
The determination unit,
Among the user faces recognized before the exposure value adjustment, a specific user face recognized on a photographing screen photographed after adjusting to increase the exposure value of the camera without being recognized on a photographing screen photographed after adjustment of lowering the exposure value of the camera, the face recognition User face identification device, characterized in that to determine the user face to be used for the function.
상기 안면 인식 기능에 사용할 사용자 얼굴 판별에 실패하는 경우, 사용자 얼굴 방향으로 특정 이미지를 조사하는 조사부를 더 포함하며;
상기 판별부는,
상기 특정 이미지 조사 후 촬영되는 촬영 화면에서 인식되는 사용자 얼굴 상에 맺히는 상기 특정 이미지의 왜곡 여부를 판단하고, 상기 노출값 조정 이전에 인식된 사용자 얼굴 중 상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 것을 특징으로 하는 사용자 얼굴 판별장치.The method of claim 6,
Further comprising an irradiation unit for irradiating a specific image in the direction of the user's face when it fails to determine the user's face to be used for the facial recognition function;
The determination unit,
It is determined whether the specific image is distorted on the user's face recognized on the photographing screen taken after the specific image is irradiated, and the specific user's face formed by distorting the specific image among the user's faces recognized before the exposure value adjustment is selected. User face identification device, characterized in that to determine the user face to be used for the recognition function.
상기 특정 이미지가 왜곡되어 맺히는 특정 사용자 얼굴을 상기 안면 인식 기능에 사용할 사용자 얼굴로 판별하는 경우, 상기 카메라의 노출값을 조정하여 촬영 화면에서 상기 특정 사용자 얼굴이 인식되지 않는 시점의 최저 노출값 및 최고 노출값을 검출하는 검출부를 더 포함하며;
상기 조정부에는,
상기 최저 노출값 및 최고 노출값이, 이후 사용자 얼굴 판별을 위해 상기 카메라의 노출값 조정 시 사용되도록 설정되는 것을 특징으로 하는 사용자 얼굴 판별장치.The method of claim 9,
When the specific user face formed by distorting the specific image is determined as the user's face to be used for the face recognition function, the minimum exposure value and the maximum exposure value at a point in time when the specific user face is not recognized on the shooting screen are adjusted by adjusting the exposure value of the camera. Further comprising a detection unit to detect;
In the adjustment unit,
The user face identification device, characterized in that the minimum exposure value and the maximum exposure value are set to be used when the exposure value of the camera is adjusted to determine the user's face.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210052658A KR102443137B1 (en) | 2019-06-24 | 2021-04-22 | Control device and control method for face diistinction |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20190055076 | 2019-05-10 | ||
KR1020190055076 | 2019-05-10 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210052658A Division KR102443137B1 (en) | 2019-06-24 | 2021-04-22 | Control device and control method for face diistinction |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20200130042A true KR20200130042A (en) | 2020-11-18 |
Family
ID=73698186
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190075049A KR20200130042A (en) | 2019-05-10 | 2019-06-24 | Control device and control method for face diistinction |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20200130042A (en) |
-
2019
- 2019-06-24 KR KR1020190075049A patent/KR20200130042A/en not_active IP Right Cessation
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102324468B1 (en) | Method and apparatus for face verification | |
KR102477923B1 (en) | Systems and methods using focus stacks for image-based spoof detection | |
KR101241625B1 (en) | Method, apparatus for informing a user of various circumstances of face recognition, and computer-readable recording medium for executing the method | |
EP3213245B1 (en) | Systems and methods for spoof detection in iris based biometric systems | |
CN110555359B (en) | Automatic retry of facial recognition | |
US9613200B2 (en) | Ear biometric capture, authentication, and identification method and system | |
JP4826234B2 (en) | Face authentication apparatus, security strength changing method and program | |
US11314966B2 (en) | Facial anti-spoofing method using variances in image properties | |
JP5045128B2 (en) | Face recognition device | |
US10708467B2 (en) | Information processing apparatus that performs authentication processing for approaching person, and control method thereof | |
US8379936B2 (en) | Authentication apparatus and authentication system | |
US11238143B2 (en) | Method and system for authenticating a user on a wearable heads-up display | |
CN112825128A (en) | Method and apparatus for liveness testing and/or biometric verification | |
KR102534582B1 (en) | Method and apparatus of active identity verification based on gaze path analysis | |
KR101941966B1 (en) | Apparatus, method and program for access control based on pattern recognition | |
WO2020113571A1 (en) | Face recognition data processing method and apparatus, mobile device and computer readable storage medium | |
JP4833115B2 (en) | Palmprint authentication device, mobile phone terminal, program, and palmprint authentication method | |
KR102443137B1 (en) | Control device and control method for face diistinction | |
KR20200130042A (en) | Control device and control method for face diistinction | |
KR102274370B1 (en) | Facial recognition device and facial recognition control method | |
CN112417998A (en) | Method and device for acquiring living body face image, medium and equipment | |
KR101642035B1 (en) | Apparatus and method for generating authentication information using iris data, authentication system with the same | |
WO2023119560A1 (en) | Authentication device, authentication method, and recording medium | |
KR102126652B1 (en) | Image certificating system for anti-hacking and method of the same | |
US20230245493A1 (en) | System and method for detecting liveness of biometric information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
X601 | Decision of rejection after re-examination |