KR20120002110A - Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof - Google Patents

Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof Download PDF

Info

Publication number
KR20120002110A
KR20120002110A KR1020100062831A KR20100062831A KR20120002110A KR 20120002110 A KR20120002110 A KR 20120002110A KR 1020100062831 A KR1020100062831 A KR 1020100062831A KR 20100062831 A KR20100062831 A KR 20100062831A KR 20120002110 A KR20120002110 A KR 20120002110A
Authority
KR
South Korea
Prior art keywords
image
computer
user
hand gesture
matching rate
Prior art date
Application number
KR1020100062831A
Other languages
Korean (ko)
Other versions
KR101669623B1 (en
Inventor
김응주
Original Assignee
엘지이노텍 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지이노텍 주식회사 filed Critical 엘지이노텍 주식회사
Priority to KR1020100062831A priority Critical patent/KR101669623B1/en
Publication of KR20120002110A publication Critical patent/KR20120002110A/en
Application granted granted Critical
Publication of KR101669623B1 publication Critical patent/KR101669623B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/36User authentication by graphic or iconic representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/44Program or device authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82Protecting input, output or interconnection devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm

Abstract

PURPOSE: A computer security device using a hand action image, a computer security method using a hand action image, and a recording medium thereof are provided to determine whether to unlock by recognizing a user image photographed by a camera module, thereby enhancing security. CONSTITUTION: A camera module(10) is connected to a computer to photograph a user image. An image recognizing unit(20) applies a skin color detecting algorithm based on a user image signal corresponding to the user image to recognize the user image. An image analyzing unit(30) calculates an image matching rate by comparing the user image with a target image stored in a memory. An image control unit(40) controls locking or unlocking of the computer based on the image matching rate. The user image is an image based on hand actions of a user.

Description

손동작 화상을 이용한 컴퓨터 보안 장치, 손동작 화상을 이용한 컴퓨터 보안 방법 및 그 기록매체{COMPUTER SECURITY SYSTEM USING HAND SHAPE IMAGE, COMPUTER SECURITY METHOD USING HAND SHAPE IMAGE AND RECORDING MEDIUM THEREOF}COMPUTER SECURITY SYSTEM USING HAND SHAPE IMAGE, COMPUTER SECURITY METHOD USING HAND SHAPE IMAGE AND RECORDING MEDIUM THEREOF}

본 발명은 컴퓨터 보안 장치 및 보안 방법에 관한 것이다. 보다 상세하게는 손동작 화상을 이용한 컴퓨터 보안 장치, 손동작 화상을 이용한 컴퓨터 보안 방법 및 그 기록매체에 관한 것이다.The present invention relates to a computer security device and a security method. More particularly, the present invention relates to a computer security apparatus using a hand gesture image, a computer security method using a hand gesture image, and a recording medium thereof.

도 1은 종래 컴퓨터 보안을 위해 비밀번호 입력창을 띄운 상태의 예시화면이다. 도 1에 도시된 바와 같이, 기존 개인 컴퓨터 및 노트북 보안은 화면에 비밀번호 입력창을 띄우고 비밀번호를 키보드로 입력하게 되어 있다. 따라서, 주변 사람들에게 쉽게 노출될 수 있어 보안에 취약한 문제점이 있다.1 is an exemplary screen showing a password input window for conventional computer security. As shown in Figure 1, the existing personal computer and laptop security is to open a password input window on the screen and enter the password using a keyboard. Therefore, there is a problem that can be easily exposed to the people around it vulnerable to security.

그리고, 개인 컴퓨터 등의 잠금 해제를 위해 비밀번호를 입력하는 경우, 컴퓨터 사용자는 빈번히 발생할 수 있는 컴퓨터 잠금 상황에서 그때마다 직접 키보드를 이용하여 비밀번호를 입력함으로써 컴퓨터 잠금 해제를 수행해야 하는 번거로움이 있다.In addition, in the case of inputting a password for unlocking a personal computer, a computer user may have to perform a computer unlock by directly inputting a password using a keyboard every time in a computer lock situation that may occur frequently.

한편, 최근에는 개인 컴퓨터 또는 노트북 등에 디지털 카메라가 장착되는 것이 일반화되어 가고 있으며, 디지털 카메라를 이용하여 촬상된 화상에 대한 화상 인식 및 처리 기술이 다양해져 가고 있다.On the other hand, in recent years, it has become common to mount a digital camera on a personal computer or a laptop and the like, and image recognition and processing techniques for images captured using the digital camera have been diversified.

따라서, 컴퓨터에 기 장착된 디지털 카메라를 손쉽게 이용해 보안을 수행하고 기존의 비밀번호 또는 패스워드의 키보드 입력 방식을 대체할 수 있는 컴퓨터 보안 장치 또는 컴퓨터 보안 방법의 필요성이 있다.Therefore, there is a need for a computer security device or a computer security method that can easily perform security using a digital camera mounted on the computer and replace the existing password or password keyboard input method.

본 발명은 상기와 같은 필요성에 의해 안출된 것으로서, 본 발명의 목적은 개인 컴퓨터 또는 노트북의 사용시 카메라 모듈에 의해 촬상된 사용자 화상의 인식으로 컴퓨터 잠금 해제를 수행할 수 있는 손동작 화상을 이용한 컴퓨터 보안 장치 및 컴퓨터 보안 방법을 제공하는 데 있다.The present invention has been made in view of the above necessity, and an object of the present invention is a computer security device using a hand gesture image that can perform computer unlocking by recognizing a user image captured by a camera module when using a personal computer or a notebook. And computer security methods.

상기와 같은 본 발명의 목적은, 컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상하는 카메라 모듈; 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신하고, 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 사용자 화상을 인식하는 화상 인식 수단; 인식된 사용자 화상과 메모리 수단에 저장되어 있는 목적 화상을 비교하여 화상 매칭율을 연산하는 화상 분석 수단; 및 연산된 화상 매칭율에 기반하여 보안을 위해 컴퓨터의 잠금 또는 잠금 해제를 제어하는 화상 제어 수단;을 포함하되, An object of the present invention as described above, the camera module is connected to a computer for capturing a user image in a certain image area; Image recognition means for receiving a user image signal corresponding to the captured user image and recognizing the user image by applying a skin color detection algorithm based on the received user image signal; Image analysis means for comparing the recognized user image with the target image stored in the memory means to calculate an image matching rate; And image control means for controlling the locking or unlocking of the computer for security based on the calculated image matching rate.

사용자 화상은 컴퓨터 사용자의 손동작에 기반한 손동작 화상이며, 목적 화상은 컴퓨터의 잠금 해제에 대응하는 손동작 화상인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치를 제공함으로써 달성될 수 있다. The user image may be a hand gesture image based on a hand gesture of a computer user, and the target image may be achieved by providing a computer security device using a hand gesture image, characterized in that a hand gesture image corresponding to unlocking of a computer.

카메라 모듈은 키보드 또는 마우스를 통해 활성화되는 것이 바람직하다.The camera module is preferably activated via a keyboard or mouse.

카메라 모듈은 전하 결합 소자 또는 CMOS 이미지 센서를 포함하는 것이 바람직하다.The camera module preferably includes a charge coupled device or a CMOS image sensor.

일정 화상영역은 손동작 화상과 배경화상을 포함하는 것이 바람직하다.The predetermined image area preferably includes a hand gesture image and a background image.

피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 배경화상으로부터 손동작 화상을 분리하는 알고리즘인 것이 바람직하다.The skin color detection algorithm is preferably an algorithm for separating the hand gesture image from the background image based on the color value information of the skin color preset in the YCbCr space.

배경화상은 화상 인식 수단이 손동작 화상을 인식하는 일정 화상영역인 것이 바람직하다.Preferably, the background image is a constant image area in which the image recognition means recognizes the hand gesture image.

연산된 화상 매칭율은 손동작 화상과 목적 화상의 형상 매칭율인 것이 바람직하다.The calculated image matching rate is preferably the shape matching rate of the hand gesture image and the target image.

한편, 본 발명의 목적은 다른 카테고리로서, 카메라 모듈이 컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상하는 단계(S110); 화상 인식 수단이 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신하는 단계(S120); 화상 인식 수단이 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 사용자 화상을 인식하는 단계(S130); 화상 분석 수단이 인식된 사용자 화상을 메모리 수단에 저장되어 있는 목적 화상과 비교하여 화상 매칭율을 연산하는 단계(S140); 및 화상 제어 수단이 연산된 화상 매칭율에 기반하여 보안을 위해 컴퓨터의 잠금 또는 잠금 해제를 제어하는 단계(S150);를 포함하되,On the other hand, an object of the present invention is another category, the camera module is connected to the computer to capture a user image in a certain image area (S110); Receiving, by the image recognition means, a user image signal corresponding to the captured user image (S120); Recognizing, by the image recognition means, a user image by applying a skin color detection algorithm based on the received user image signal (S130); Calculating image matching rates by comparing the recognized user image with the image of the target image stored in the memory means (S140); And controlling, by the image control means, locking or unlocking the computer for security based on the calculated image matching rate (S150).

사용자 화상은 컴퓨터 사용자의 손동작에 기반한 손동작 화상이며, 목적 화상은 컴퓨터의 잠금 해제에 대응하는 손동작 화상인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 방법을 제공함으로써 달성될 수 있다. The user image may be a hand gesture image based on a hand gesture of a computer user, and the target image may be achieved by providing a computer security method using a hand gesture image, characterized in that a hand gesture image corresponding to unlocking of a computer.

카메라 모듈의 촬상단계(S110) 이전에, 카메라 모듈이 키보드 또는 마우스를 통해 활성화되는 단계(S105);를 더 포함하는 것이 바람직하다.Before the imaging step S110 of the camera module, the camera module is activated through a keyboard or a mouse (S105).

화상 제어 수단의 제어단계(S150)에서, 연산된 화상 매칭율이 일정값 미만인 경우, 컴퓨터는 잠금 상태를 유지하며 카메라 모듈 촬상단계(S110) 내지 화상 분석 수단의 화상 매칭율 연산단계(S140)가 반복 수행되고, 그리고In the control step S150 of the image control means, when the calculated image matching rate is less than a predetermined value, the computer keeps a locked state and the camera module imaging step S110 to the image matching rate calculation step S140 of the image analyzing means are performed. Is performed repeatedly, and

화상 제어 수단의 제어단계(S150)에서, 연산된 화상 매칭율이 일정값 이상인 경우, 컴퓨터는 잠금 해제되는 것이 바람직하다.In the control step S150 of the image control means, when the calculated image matching rate is equal to or greater than a predetermined value, the computer is preferably unlocked.

화상 인식 수단의 사용자 화상 인식단계(S130)에서, 피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 배경화상으로부터 손동작 화상을 분리하는 알고리즘인 것이 바람직하다.In the user image recognition step (S130) of the image recognition means, the skin color detection algorithm is preferably an algorithm for separating the hand gesture image from the background image based on the color value information of the skin color set in the YCbCr space.

한편, 본 발명의 목적은 다른 카테고리로서, 손동작을 이용한 컴퓨터 보안 방법을 실행할 수 있는 컴퓨터 판독가능한 프로그램이 기록된 기록매체를 제공함으로써 달성될 수 있다.On the other hand, the object of the present invention can be achieved in another category by providing a recording medium on which a computer readable program capable of executing a computer security method using hand gestures is recorded.

상기와 같은 본 발명의 일 실시예에 의하면, 개인 컴퓨터 또는 노트북의 사용시 카메라 모듈에 의해 촬상된 사용자 화상의 인식으로 컴퓨터 잠금 해제 여부를 결정할 수 있어 사용자 편의성을 제고하고, 보안을 강화할 수 있는 효과가 있다.According to an embodiment of the present invention as described above, it is possible to determine whether to unlock the computer by recognizing the user image captured by the camera module when using a personal computer or a notebook, thereby improving user convenience and enhancing security. have.

또한, 기 설치된 카메라 모듈을 활용할 수 있고 적용 알고리즘이 간단하여 저비용으로도 컴퓨터 보안을 수행할 수 있는 효과가 있다.In addition, it is possible to utilize the pre-installed camera module and the application algorithm is simple, it is possible to perform computer security at low cost.

도 1은 종래 컴퓨터 보안을 위해 비밀번호 입력창을 띄운 상태의 예시화면,
도 2는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따른 구성을 나타낸 구성도,
도 3은 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따른 손동작의 예시를 나타낸 도면,
도 4a는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따라 손동작 영상이 촬상된 예시화면,
도 4b 및 도 4c는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따라 촬상된 손동작 화상의 형상 및 기 저장된 목적 화상의 형상을 나타낸 예시화면,
도 5는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 방법의 일 실시예를 순차적으로 나타낸 순서도이다.
1 is an exemplary screen showing a password input window for conventional computer security;
2 is a block diagram showing a configuration according to an embodiment of a computer security device using the present invention gesture image,
3 is a view showing an example of a hand gesture according to an embodiment of the computer security device using the hand gesture image of the present invention,
4A is an exemplary screen shot of a hand gesture image according to an embodiment of a computer security apparatus using a hand gesture image of the present invention;
4B and 4C are exemplary screens showing a shape of a hand gesture image captured and a shape of a pre-stored target image according to an embodiment of the computer security apparatus using the hand gesture image of the present invention;
5 is a flowchart sequentially showing an embodiment of a computer security method using a hand gesture image of the present invention.

<컴퓨터 보안 장치 구성><Computer Security Device Configuration>

도 2는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따른 구성을 나타낸 구성도이다. 도 2에 도시된 바와 같이, 본 실시예는 카메라 모듈(10), 화상 인식 수단(20), 화상 분석 수단(30) 및 화상 제어 수단(40)을 포함한다.2 is a block diagram showing a configuration according to an embodiment of the computer security device using the present invention gesture image. As shown in FIG. 2, this embodiment includes a camera module 10, an image recognition means 20, an image analysis means 30, and an image control means 40.

본 실시예는 개인 컴퓨터(PC: Personal Computer) 또는 노트북(laptop computer)과 같은 컴퓨터의 사용 보안을 위해 카메라 모듈(10)이 소정 사용자의 사용자 화상을 촬상하면, 화상 인식 수단(20)이 사용자 화상을 인식하고, 화상 분석 수단(30)이 기 저장된 목적 화상과의 화상 매칭율을 비교하며, 화상 제어 수단(40)이 화상 매칭율을 기초로 컴퓨터의 잠금 해제를 제어토록 하여 컴퓨터 사용 보안을 수행하게 된다.According to the present embodiment, when the camera module 10 captures a user image of a predetermined user for use security of a computer such as a personal computer (PC) or a laptop computer, the image recognition means 20 receives a user image. Image recognition means 30 compares the image matching rate with the previously stored target image, and causes the image control means 40 to control the unlocking of the computer based on the image matching rate to perform computer security. Done.

여기서, 카메라 모듈(10)은 컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상하는 역할을 하며, CCD(Charge-Coupled Device, 전하 결합 소자) 또는 CMOS(Complementary Metal-Oxide-Semiconductor) 이미지 센서 등이 사용될 수 있다. 여기서, 일정 화상영역은 사용자 화상이 있어야 할 위치를 특정하여 화상 인식 및 분석이 용이할 수 있도록 하기 위함이며, 컴퓨터 잠금 해제를 목적으로 하지 않는 사용자 화상 등과 구별하기 위함이다. 또한, 사용자 화상은 보안의 목적을 충실히 달성하기 위해 다양성 및 안정성이 고려되는 화상이어야 하는데, 컴퓨터 사용자의 손동작에 기반한 손동작 화상이 적합하다.In this case, the camera module 10 is connected to a computer to capture a user image in a certain image area, and a charge-coupled device (CCD) or a complementary metal-oxide-semiconductor (CMOS) image sensor is used. Can be used. In this case, the predetermined image area is used to identify a location where the user image should be located so that image recognition and analysis can be easily performed, and to distinguish it from a user image that is not intended to unlock a computer. In addition, the user image should be an image in which diversity and stability are considered in order to faithfully achieve the purpose of security, and a hand gesture image based on the hand gesture of a computer user is suitable.

화상 인식 수단(20)은 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신하고, 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 사용자 화상을 인식하는 역할을 한다. 화상 인식 수단(20)은 컴퓨터 프로그램화된 피부색 검출 알고리즘을 중앙처리장치(CPU, Central Processing Unit) 및 메모리(memory)에 적용하여 수행될 수 있다. 이러한 중앙처리장치(미도시) 및 메모리(미도시)는 보안의 대상이 되는 컴퓨터의 중앙처리장치 및 메모리를 사용하는 것이 직접적인 방법으로서 적합하다.The image recognizing means 20 receives a user image signal corresponding to the captured user image, and serves to recognize the user image by applying a skin color detection algorithm based on the received user image signal. The image recognition means 20 may be performed by applying a computer programmed skin color detection algorithm to a central processing unit (CPU) and a memory. Such a central processing unit (not shown) and memory (not shown) are suitable as a direct method to use the central processing unit and the memory of the computer to be secured.

또한, 피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 배경화상으로부터 손동작 화상을 분리하는 알고리즘으로서, 상술하였듯이 컴퓨터 프로그램화하여 적용된다. 여기서, YCbCr은 영상 시스템에서 사용되는 색공간의 일종으로서 Y는 휘도 성분이며 Cb와 Cr은 색차 성분이다. RGB(적녹청)는 명암의 영향을 많이 받아 알고리즘에 적용하기 곤란하고, 카메라의 YCbCr 신호 중 색차 성분인 Cb와 Cr은 조명 변화에 덜 민감하므로 이를 사용하여 손동작 화상을 분리하는 것이 바람직하다.In addition, the skin color detection algorithm is an algorithm that separates the hand motion image from the background image based on the color value information of the skin color preset in the YCbCr space, and is applied by computer programming as described above. Here, YCbCr is a type of color space used in an imaging system, where Y is a luminance component and Cb and Cr are color difference components. RGB (red cyan) is difficult to apply to the algorithm due to the influence of contrast, and since the color difference components Cb and Cr of the camera's YCbCr signal are less sensitive to changes in illumination, it is preferable to use this to separate the hand motion image.

따라서, YCbCr을 사용하는 경우에도 색차 성분만을 사용하며 피부색의 색상값(예: 77 < Cr < 127, 133 ≤ Cb ≤ 173)을 모델링하여 사용할 수 있다.Therefore, even when using YCbCr, only the color difference component is used, and color values of skin color (for example, 77 <Cr <127, 133 ≤ Cb ≤ 173) may be used as a model.

화상 분석 수단(30)은 인식된 사용자 화상과 메모리 수단(미도시)에 저장되어 있는 목적 화상을 비교하여 화상 매칭율을 연산하는 역할을 한다. 이 경우 연산된 화상 매칭율은 손동작 화상과 목적 화상의 형상을 대비하는 형상 매칭율을 사용할 수 있다. 즉, 화상 인식 수단(20)이 일정 화상영역에서 손동작 화상을 인식하게 되면, 배경 화상과의 관계에서 손동작 화상이 위치하는 픽셀 정보와 대응되는 형상 정보가 생성되는데 기 저장된 목적 화상의 형상 정보와 비교하여 형상 매칭율을 연산할 수 있다. 여기서, 목적 화상은 컴퓨터의 잠금 해제에 대응하는 손동작 화상으로서 보안을 위해 미리 설정해둔 화상이다.The image analyzing means 30 calculates an image matching rate by comparing the recognized user image with the target image stored in the memory means (not shown). In this case, the calculated image matching ratio may use a shape matching ratio that contrasts the shape of the hand gesture image and the target image. That is, when the image recognizing means 20 recognizes the hand gesture image in a certain image area, shape information corresponding to pixel information where the hand gesture image is located in relation to the background image is generated, and compared with the shape information of the previously stored target image. Shape matching ratio can be calculated. Here, the target image is a hand gesture image corresponding to unlocking of the computer, and is an image set in advance for security.

또한, 배경화상은 화상 인식 수단(20)이 손동작 화상을 인식하는 범위이므로 제한된 일정 화상영역으로 작용하게 되며, 컴퓨터 사용자가 미리 설정해둔 일정 화상영역에 손동작 화상과 배경화상이 포함되게 된다.In addition, since the background image is a range in which the image recognition means 20 recognizes the hand gesture image, the background image serves as a limited constant image region, and the hand gesture image and the background image are included in the predetermined image region preset by the computer user.

화상 제어 수단(40)은 연산된 화상 매칭율에 기반하여 보안을 위해 컴퓨터의 잠금 또는 잠금 해제를 제어하는 역할을 한다. 여기서, 화상 매칭율은 사용자 화상과 목적 화상간의 화상 매칭율로서, 본 실시예는 각각의 화상이 차지하는 픽셀 정보에 기반한 형상 매칭율임은 상술하였다.The image control means 40 serves to control the locking or unlocking of the computer for security based on the calculated image matching rate. Here, the image matching rate is an image matching rate between the user image and the target image, and the present embodiment has been described above as the shape matching rate based on the pixel information occupied by each image.

화상 매칭율은 설정에 의해 가변적인 값을 가질 수 있으며, 예를 들어 임계값을 95%로 정하는 경우 그 이상에서만 컴퓨터 잠금이 해제되고, 그 미만인 경우 카메라 모듈(10)의 촬상과 화상 인식 수단(20)의 사용자 화상 인식, 화상 분석 수단(30)의 화상 매칭율 연산이 반복해서 수행된다.The image matching rate may have a variable value by setting. For example, when the threshold value is set to 95%, the computer is unlocked only at a higher level, and when it is lower than that, the image matching means and the image recognition means of the camera module 10 ( The user image recognition of 20) and the image matching rate calculation of the image analysis means 30 are repeatedly performed.

도 3은 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따른 손동작의 예시를 나타낸 도면이다. 도 3에 도시된 바와 같이, 컴퓨터(1)의 사용 보안을 위해 장착된 카메라 모듈(10)의 전면에 임의의 손동작을 취하면, 기 저장된 목적 화상과 비교로 컴퓨터(1)의 사용이 허락 또는 불허된다.3 is a view showing an example of a hand gesture according to an embodiment of the computer security device using the hand gesture image of the present invention. As shown in Fig. 3, if any hand gesture is made on the front of the camera module 10 mounted for the use security of the computer 1, the use of the computer 1 is allowed or compared with the previously stored target image. Disallowed.

도 4a는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따라 손동작 영상이 촬상된 예시화면이며, 도 4b 및 도 4c는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 장치의 일 실시예에 따라 촬상된 손동작 화상의 형상 및 기 저장된 목적 화상의 형상을 나타낸 예시화면이다. 도 4a에 도시된 바와 같이, 일정한 화상 영역(D1)을 손동작 인식 영역으로 설정하였으며, 손동작 인식 영역에서 촬상된 사용자 화상을 컴퓨터 잠금 해제를 위한 사용자 화상으로 사용하게 된다.4A is an exemplary screen shot of a hand gesture image according to an embodiment of a computer security apparatus using a hand gesture image of the present invention, and FIGS. 4B and 4C are images captured according to an embodiment of the computer security apparatus using a hand gesture image of the present invention. It is an example screen showing the shape of a hand gesture image and the shape of a previously stored target image. As shown in FIG. 4A, a certain image area D1 is set as a hand gesture recognition area, and a user image captured in the hand gesture recognition area is used as a user image for unlocking a computer.

그리고, 도 4b 및 도 4c에 도시된 바와 같이, 피부색 검출 알고리즘에 의해 검출된 손동작 화상(D2)이 목적 화상(D3)의 형상과 동일한 경우(예: 화상 매칭율 95% 이상) 컴퓨터의 잠금은 해제된다.
4B and 4C, when the hand gesture image D2 detected by the skin color detection algorithm is the same as the shape of the target image D3 (eg, 95% or more of image matching rate), the lock of the computer is performed. Is released.

<컴퓨터 보안 방법><How to secure your computer>

도 5는 본 발명인 손동작 화상을 이용한 컴퓨터 보안 방법의 일 실시예를 순차적으로 나타낸 순서도이다. 도 5를 참조하면, 본 실시예는 우선, 카메라 모듈(10)이 컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상한다(S110). 이 경우, 화상 촬상단계(S110) 이전에, 카메라 모듈(10)은 대기 상태에 있을 수 있으며 따라서, 키보드(미도시) 또는 마우스(미도시)를 통해 카메라 모듈(10)을 활성화 하는 단계(S105)가 선행될 수 있다.5 is a flowchart sequentially showing an embodiment of a computer security method using a hand gesture image of the present invention. Referring to FIG. 5, in the present embodiment, first, the camera module 10 is connected to a computer to capture a user image in a predetermined image area (S110). In this case, before the image capturing step S110, the camera module 10 may be in a standby state, and thus, activating the camera module 10 through a keyboard (not shown) or a mouse (not shown) (S105). ) May be preceded.

다음, 화상 인식 수단(20)이 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신한다(S120).Next, the image recognition means 20 receives a user image signal corresponding to the picked-up user image (S120).

다음, 화상 인식 수단(20)이 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 사용자 화상을 인식한다(S130). 여기서, 피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 배경화상으로부터 손동작 화상을 분리하는 알고리즘이다.Next, the image recognition means 20 recognizes the user image by applying the skin color detection algorithm based on the received user image signal (S130). Here, the skin color detection algorithm is an algorithm for separating the hand gesture image from the background image based on the color value information of the skin color preset in the YCbCr space.

다음, 화상 분석 수단(30)이 인식된 사용자 화상을 메모리 수단에 저장되어 있는 목적 화상과 비교하여 화상 매칭율을 연산한다(S140).Next, the image analyzing means 30 compares the recognized user image with the target image stored in the memory means to calculate an image matching rate (S140).

마지막으로, 화상 제어 수단(40)이 연산된 화상 매칭율에 기반하여 보안을 위해 컴퓨터의 잠금 또는 잠금 해제를 제어함으로써(S150) 손동작 화상을 이용한 컴퓨터 보안 방법이 수행된다.Finally, the computer control method using the hand gesture image is performed by the image control means 40 controlling the locking or unlocking of the computer for security based on the calculated image matching rate (S150).

여기서, 화상 제어 수단(40)의 제어단계(S150)에서, 연산된 화상 매칭율이 일정값 미만인 경우, 컴퓨터는 잠금 상태를 유지하며 카메라 모듈 촬상단계(S110) 내지 화상 분석 수단의 화상 매칭율 연산단계(S140)가 반복 수행되고, 그리고Here, in the control step (S150) of the image control means 40, if the calculated image matching rate is less than a predetermined value, the computer keeps the lock state and calculates the image matching rate of the camera module imaging step (S110) to image analysis means. Step S140 is repeatedly performed, and

화상 제어 수단의 제어단계(S150)에서, 연산된 화상 매칭율이 일정값 이상인 경우, 컴퓨터는 잠금 해제됨으로써 컴퓨터 보안 방법이 종료될 수 있다.In the control step S150 of the image control means, when the calculated image matching rate is equal to or greater than a predetermined value, the computer may be unlocked to terminate the computer security method.

이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 상술한 본 발명의 기술적 구성은 본 발명이 속하는 기술 분야의 당업자가 본 발명의 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해되어야 한다. 아울러, 본 발명의 범위는 상기의 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어진다. 또한, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, It will be understood that the invention may be practiced. Therefore, the embodiments described above are to be understood as illustrative and not restrictive in all aspects. In addition, the scope of the present invention is indicated by the appended claims rather than the detailed description above. Also, it is to be construed that all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts are included in the scope of the present invention.

1: 컴퓨터
10: 카메라 모듈
20: 화상 인식 수단;
30: 화상 분석 수단
40: 화상 제어 수단
1: computer
10: camera module
20: image recognition means;
30: image analysis means
40: image control means

Claims (12)

컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상하는 카메라 모듈;
상기 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신하고, 상기 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 상기 사용자 화상을 인식하는 화상 인식 수단;
상기 인식된 사용자 화상과 메모리 수단에 저장되어 있는 목적 화상을 비교하여 화상 매칭율을 연산하는 화상 분석 수단; 및
상기 연산된 화상 매칭율에 기반하여 보안을 위해 상기 컴퓨터의 잠금 또는 잠금 해제를 제어하는 화상 제어 수단;을 포함하되,
상기 사용자 화상은 컴퓨터 사용자의 손동작에 기반한 손동작 화상이며,
상기 목적 화상은 상기 컴퓨터의 상기 잠금 해제에 대응하는 상기 손동작 화상인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
A camera module connected to the computer to capture a user image in a certain image area;
Image recognition means for receiving a user image signal corresponding to the captured user image and recognizing the user image by applying a skin color detection algorithm based on the received user image signal;
Image analysis means for comparing the recognized user image with the target image stored in the memory means to calculate an image matching rate; And
And image control means for controlling the locking or unlocking of the computer for security based on the calculated image matching rate.
The user image is a hand gesture image based on a hand gesture of a computer user.
And the target image is the hand gesture image corresponding to the unlocking of the computer.
제 1항에 있어서,
상기 카메라 모듈은 키보드 또는 마우스를 통해 활성화되는 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 1,
And the camera module is activated through a keyboard or a mouse.
제 1항에 있어서,
상기 카메라 모듈은 전하 결합 소자 또는 CMOS 센서를 포함하는 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 1,
And the camera module comprises a charge coupled device or a CMOS sensor.
제 1항에 있어서,
상기 일정 화상영역은 상기 손동작 화상과 배경화상을 포함하는 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 1,
And the predetermined image area includes the hand gesture image and a background image.
제 4항에 있어서,
상기 피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 상기 배경화상으로부터 상기 손동작 화상을 분리하는 알고리즘인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 4, wherein
The skin color detection algorithm is an algorithm for separating the hand gesture image from the background image based on color value information of skin color preset in a YCbCr space.
제 4항에 있어서,
상기 배경화상은 상기 화상 인식 수단이 상기 손동작 화상을 인식하는 일정 화상영역인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 4, wherein
And the background image is a predetermined image area in which the image recognition means recognizes the hand gesture image.
제 1항에 있어서,
상기 연산된 화상 매칭율은 상기 손동작 화상과 상기 목적 화상의 형상 매칭율인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 장치.
The method of claim 1,
And the calculated image matching rate is a shape matching rate of the hand gesture image and the target image.
카메라 모듈이 컴퓨터와 연결되어 일정 화상영역 내의 사용자 화상을 촬상하는 단계(S110);
화상 인식 수단이 상기 촬상된 사용자 화상에 대응하는 사용자 화상 신호를 수신하는 단계(S120);
상기 화상 인식 수단이 상기 수신된 사용자 화상 신호를 기초로 피부색 검출 알고리즘을 적용하여 상기 사용자 화상을 인식하는 단계(S130);
화상 분석 수단이 상기 인식된 사용자 화상을 메모리 수단에 저장되어 있는 목적 화상과 비교하여 화상 매칭율을 연산하는 단계(S140); 및
화상 제어 수단이 상기 연산된 화상 매칭율에 기반하여 보안을 위해 상기 컴퓨터의 잠금 또는 잠금 해제를 제어하는 단계(S150);를 포함하되,
상기 사용자 화상은 컴퓨터 사용자의 손동작에 기반한 손동작 화상이며,
상기 목적 화상은 상기 컴퓨터의 상기 잠금 해제에 대응하는 상기 손동작 화상인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 방법.
A camera module connected to a computer to capture a user image in a predetermined image area (S110);
An image recognition means receiving a user image signal corresponding to the picked up user image (S120);
Recognizing, by the image recognizing means, the user image by applying a skin color detection algorithm based on the received user image signal (S130);
Calculating image matching rates by comparing the recognized user image with the target image stored in the memory means (S140); And
And controlling, by the image control means, locking or unlocking the computer for security based on the calculated image matching rate (S150).
The user image is a hand gesture image based on a hand gesture of a computer user.
And the target image is the hand gesture image corresponding to the unlocking of the computer.
제 8항에 있어서,
상기 카메라 모듈의 촬상단계(S110) 이전에,
상기 카메라 모듈이 키보드 또는 마우스를 통해 활성화되는 단계(S105);를 더 포함하는 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 방법.
The method of claim 8,
Before the imaging step (S110) of the camera module,
The camera module is activated via a keyboard or a mouse (S105); Computer security method using a gesture image further comprising a.
제 8항에 있어서,
상기 화상 제어 수단의 제어단계(S150)에서, 상기 연산된 화상 매칭율이 일정값 미만인 경우, 상기 컴퓨터는 잠금 상태를 유지하며 상기 카메라 모듈 촬상단계(S110) 내지 상기 화상 분석 수단의 화상 매칭율 연산단계(S140)가 반복 수행되고, 그리고
상기 화상 제어 수단의 제어단계(S150)에서, 상기 연산된 화상 매칭율이 일정값 이상인 경우, 상기 컴퓨터는 잠금 해제되는 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 방법.
The method of claim 8,
In the control step (S150) of the image control means, when the calculated image matching rate is less than a predetermined value, the computer maintains a locked state and calculates the image matching rate of the camera module imaging step (S110) to the image analysis means. Step S140 is repeatedly performed, and
And in the controlling step (S150) of the image control means, when the calculated image matching rate is equal to or greater than a predetermined value, the computer is unlocked.
제 8항에 있어서,
상기 화상 인식 수단의 사용자 화상 인식단계(S130)에서,
상기 피부색 검출 알고리즘은 YCbCr 공간에서 기 설정된 피부색의 색상값 정보에 기반하여 상기 배경화상으로부터 상기 손동작 화상을 분리하는 알고리즘인 것을 특징으로 하는 손동작 화상을 이용한 컴퓨터 보안 방법.
The method of claim 8,
In the user image recognition step (S130) of the image recognition means,
The skin color detection algorithm is an algorithm for separating the hand gesture image from the background image based on color value information of a preset skin color in a YCbCr space.
제 8항 내지 제 11항 중 어느 한 항의 컴퓨터 보안 방법을 실행할 수 있는 컴퓨터 판독가능한 프로그램이 기록된 기록매체.12. A recording medium having recorded thereon a computer readable program for executing the computer security method of any one of claims 8-11.
KR1020100062831A 2010-06-30 2010-06-30 Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof KR101669623B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100062831A KR101669623B1 (en) 2010-06-30 2010-06-30 Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100062831A KR101669623B1 (en) 2010-06-30 2010-06-30 Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof

Publications (2)

Publication Number Publication Date
KR20120002110A true KR20120002110A (en) 2012-01-05
KR101669623B1 KR101669623B1 (en) 2016-11-09

Family

ID=45609577

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100062831A KR101669623B1 (en) 2010-06-30 2010-06-30 Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof

Country Status (1)

Country Link
KR (1) KR101669623B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104598011A (en) * 2013-10-31 2015-05-06 鸿富锦精密工业(武汉)有限公司 Electronic device screen unlocking method and system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080029222A (en) * 2006-09-28 2008-04-03 한국전자통신연구원 Hand shafe recognition method and apparatus for thereof
KR20080099389A (en) * 2007-05-09 2008-11-13 고종옥 Method to store and search personal information using color
JP2009009280A (en) * 2007-06-27 2009-01-15 Toyota Infotechnology Center Co Ltd Three-dimensional signature authentication system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080029222A (en) * 2006-09-28 2008-04-03 한국전자통신연구원 Hand shafe recognition method and apparatus for thereof
KR20080099389A (en) * 2007-05-09 2008-11-13 고종옥 Method to store and search personal information using color
JP2009009280A (en) * 2007-06-27 2009-01-15 Toyota Infotechnology Center Co Ltd Three-dimensional signature authentication system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104598011A (en) * 2013-10-31 2015-05-06 鸿富锦精密工业(武汉)有限公司 Electronic device screen unlocking method and system

Also Published As

Publication number Publication date
KR101669623B1 (en) 2016-11-09

Similar Documents

Publication Publication Date Title
US9652663B2 (en) Using facial data for device authentication or subject identification
Boulkenafet et al. Oulu-npu: A mobile face presentation attack database with real-world variations
US10452894B2 (en) Systems and method for facial verification
JP6287047B2 (en) Image processing apparatus, image processing method, and image processing program
US8943581B2 (en) Controlled access to functionality of a wireless device
US20160182505A1 (en) System and method for determining liveness
US20150334567A1 (en) Sensor-assisted biometric authentication for smartphones
US9813643B2 (en) Thermal recognition systems and methods
US10108793B2 (en) Systems and methods for secure biometric processing
US9258481B2 (en) Object area tracking apparatus, control method, and program of the same
US11527103B2 (en) Auxtiliary filtering device of electronic device and cellphone
JP2011165008A (en) Image recognition apparatus and method
CN110188658A (en) Personal identification method, device, electronic equipment and storage medium
KR20120112359A (en) Gesture recognition using chroma-keying
WO2016033184A1 (en) System and method for determining liveness
KR20130133676A (en) Method and apparatus for user authentication using face recognition througth camera
KR101669623B1 (en) Computer security system using hand shape image, computer security method using hand shape image and recording medium thereof
KR20210024877A (en) Method and apparatus for determining liveness
KR101629553B1 (en) Display screen controlling apparatus in mobile terminal and method thereof
EP4209940A1 (en) Electronic device
CN109040420A (en) Unlocking terminal equipment method, apparatus, electronic equipment and storage medium
KR20190026582A (en) Method and apparatus for preventing other people from photographing identification
JP6103706B2 (en) Authentication processing apparatus and authentication processing method
JP2023079948A (en) Information processing apparatus and method for controlling the same, and program
KR20040098134A (en) Embedded method of intelligent automated teller machine by digital image processing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190916

Year of fee payment: 4