KR20130050670A - 카메라를 이용한 손동작 인식 방법 및 장치 - Google Patents

카메라를 이용한 손동작 인식 방법 및 장치 Download PDF

Info

Publication number
KR20130050670A
KR20130050670A KR1020110115872A KR20110115872A KR20130050670A KR 20130050670 A KR20130050670 A KR 20130050670A KR 1020110115872 A KR1020110115872 A KR 1020110115872A KR 20110115872 A KR20110115872 A KR 20110115872A KR 20130050670 A KR20130050670 A KR 20130050670A
Authority
KR
South Korea
Prior art keywords
hand
reference point
trajectory
detected
movement
Prior art date
Application number
KR1020110115872A
Other languages
English (en)
Other versions
KR101269107B1 (ko
Inventor
손명규
이상헌
김병민
이장우
Original Assignee
재단법인대구경북과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 재단법인대구경북과학기술원 filed Critical 재단법인대구경북과학기술원
Priority to KR1020110115872A priority Critical patent/KR101269107B1/ko
Publication of KR20130050670A publication Critical patent/KR20130050670A/ko
Application granted granted Critical
Publication of KR101269107B1 publication Critical patent/KR101269107B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/251—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30241—Trajectory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00381—Input by recognition or interpretation of visible user gestures

Abstract

본 발명은 카메라를 이용한 손동작 인식 방법 및 장치에 관한 것이다. 본 발명에 따르면, 카메라를 통해 촬영된 손의 기준점을 검출하는 단계와, 상기 기준점이 검출된 손으로부터 움직임이 감지되면, 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장하는 단계와, 상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교하는 단계와, 상기 차이값이 상기 제1 임계치 이상인 경우, 상기 감지된 움직임에 대응되는 손의 궤적 정보와 기 저장된 손동작 별 궤적 DB를 비교하는 단계, 및 상기 궤적 DB로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하는 단계를 포함하는 카메라를 이용한 손동작 인식 방법 및 장치를 제공한다.
상기 카메라를 이용한 손동작 인식 방법 및 장치에 따르면, 손이 기준점으로부터 멀어진 정도를 일차적으로 판단한 다음, 손이 움직인 궤적 정보와 기 저장된 손동작 별 궤적 DB를 재차 비교하여 검증함에 따라 손동작의 인식률을 높일 수 있는 이점이 있다.

Description

카메라를 이용한 손동작 인식 방법 및 장치{Method for recognizing hand gesture using camera and thereof apparatus}
본 발명은 카메라를 이용한 손동작 인식 방법 및 장치에 관한 것으로서, 보다 상세하게는 카메라를 이용하여 사람의 손을 추적하여 손동작을 판별할 수 있는 카메라를 이용한 손동작 인식 방법 및 장치에 관한 것이다.
종래에 사용자의 움직임을 인식하여 이를 처리하는 방법은 다양하게 개시되어 있다. 그 예로서 한국공개특허 제10-2007-0082773호는 사용자의 손 또는 손가락에 센서가 부착된 상태에서 사용자의 동작을 촬영하고, 센서의 위치를 바탕으로 촬영된 이미지를 처리한 다음 이를 기 저장된 이미지 데이터와 비교하여 사용자의 명령을 인지하는 구성이다.
이러한 종래의 발명에 따르면, 동작 시에 획득되는 이미지를 기존의 저장된 패턴과 비교하여 동작 명령을 인식하는 기술로서, 정해진 동작에 대한 패턴을 미리 획득하여 저장해 놓아야 하므로 손동작 별로 많은 샘플과 데이터가 필요하다. 또한, 손에 별도의 센서가 설치되어야 하므로 사용이 번거로우며 센서의 위치를 분석해야 하는 단점이 있다.
본 발명은 손이 기준점으로부터 멀어진 정도 및 손이 움직이는 궤적 정보를 이용하여 손동작을 용이하게 인지할 수 있는 카메라를 이용한 손동작 인식 방법 및 장치를 제공하는데 목적이 있다.
본 발명은, 카메라를 통해 촬영된 손의 기준점을 검출하는 단계와, 상기 기준점이 검출된 손으로부터 움직임이 감지되면, 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장하는 단계와, 상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교하는 단계와, 상기 차이값이 상기 제1 임계치 이상인 경우, 상기 감지된 움직임에 대응되는 손의 궤적 정보와 기 저장된 손동작 별 궤적 DB를 비교하는 단계, 및 상기 궤적 DB로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하는 단계를 포함하는 카메라를 이용한 손동작 인식 방법을 제공한다.
여기서, 상기 손의 기준점을 검출하는 단계는, 이전 시점에 대한 현재 시점의 손의 위치의 변화량을 기 설정된 제2 임계치와 비교하는 단계와, 상기 변화량이 상기 제2 임계치 미만인 경우, 현재까지 누적된 손의 위치 정보들의 분산값을 기 설정된 제3 임계치와 비교하는 단계와, 상기 분산값이 상기 제3 임계치 미만인 경우, 상기 손이 정지된 상태인 것으로 판단하는 단계, 및 상기 정지된 상태의 시간이 일정 시간을 경과한 시점에 대응되는 손의 최종 위치를 상기 기준점으로 검출하는 판단하는 단계를 포함할 수 있다.
여기서, 상기 카메라를 이용한 손동작 인식 방법은, 상기 기준점이 검출된 결과를 소리 또는 화면으로 출력하는 단계를 더 포함할 수 있다.
또한, 상기 손이 검출되면, 상기 촬영된 손의 영상에 대응되는 아이콘이 상기 손의 움직임을 따라 이동하도록 상기 화면 상에 제공할 수 있다.
또한, 상기 기준점이 검출되면, 상기 아이콘을 상기 기준점이 검출되기 이전과 다른 형태로 표시할 수 있다.
또한, 상기 궤적을 비교하는 단계는, 상기 차이값이 상기 제1 임계치 이상인 경우, 상기 궤적 DB 내의 손동작 별 궤적 목록 중에서 상기 제1 임계치를 초과하는 손의 이동 방향과 유사성 있는 적어도 하나의 손동작 후보군을 추출하고, 추출된 손동작 후보군의 궤적과 상기 손의 궤적 정보를 상호 비교할 수 있다.
그리고, 본 발명은 카메라를 통해 촬영된 손의 기준점을 검출하는 기준점 검출부와, 상기 기준점이 검출된 손으로부터 움직임이 감지되면, 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장하는 저장부와, 상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교하는 위치 비교부와, 상기 차이값이 상기 제1 임계치 이상인 경우, 상기 감지된 움직임에 대응되는 손의 궤적 정보와 기 저장된 손동작 별 궤적 DB를 비교하는 궤적 비교부, 및 상기 궤적 DB로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하는 동작 판별부를 포함하는 카메라를 이용한 손동작 인식 장치를 제공한다.
본 발명에 따른 카메라를 이용한 손동작 인식 방법 및 장치에 따르면, 손이 기준점으로부터 멀어진 정도를 일차적으로 판단한 다음, 손이 움직인 궤적 정보와 기 저장된 손동작 별 궤적 DB를 재차 비교하여 검증함에 따라 손동작의 인식률을 높일 수 있는 이점이 있다.
도 1은 본 발명의 실시예에 따른 카메라를 이용한 손동작 인식 장치의 구성도이다.
도 2는 도 1을 이용한 손동작 인식 방법의 흐름도이다.
도 3은 도 1에 의한 손동작 인지의 종류를 나타내는 예시도이다.
도 4는 도 2의 S230 내지 S250 단계를 설명하는 참고도이다.
도 5는 도 1의 S210 단계를 설명하는 상세 흐름도이다.
그러면 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.
도 1은 본 발명의 실시예에 따른 카메라를 이용한 손동작 인식 장치의 구성도이다. 상기 손동작 인식 장치(100)는 기준점 검출부(110), 저장부(120), 위치 비교부(130), 궤적 비교부(140), 궤적 DB(150), 동작 판별부(160), 디스플레이부(170)를 포함한다.
도 2는 도 1을 이용한 손동작 인식 방법의 흐름도이다. 이하에서는 도 1 및 도 2를 참조로 하여 상기 카메라를 이용한 손동작 인식 방법에 관하여 상세히 알아본다.
먼저, 기준점 검출부(110)에는 카메라(미도시)를 통해 촬영된 손의 기준점을 검출한다(S210). 여기서, 카메라는 상기 장치(100)에 내장된 형태, 또는 유무선 연결된 형태일 수 있다. 상기 기준점이란 손바닥의 중심부에 해당될 수 있는데 본 발명이 반드시 이에 한정되는 것은 아니다. 이러한 S110 단계에 따른 기준점 검출의 구체적인 실시예는 후술하기로 한다.
이후, 상기 기준점이 검출된 손으로부터 움직임이 감지되면, 저장부(120)에서는 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장한다(S220).
이후, 상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교한다(S230). 이러한 S230 단계는 위치 비교부(130)에서 수행한다.
여기서, 상기 차이값은 기준점으로부터 현재 손의 위치까지의 거리차에 해당될 수 있으며, 또한 기준점으로부터 이동한 손의 변위나 이동 방향 정보를 포함할 수 있다. 또한, 상기 차이값은 (x,y,z) 좌표 각각 별로 또는 조합으로 계산될 수도 있다.
만약, 거리차가 제1 임계치 미만인 경우에는 손동작이 수행되지 않은 것으로 가정한다. 반대로, 상기 차이값이 상기 제1 임계치 이상인 경우에는, 상기 감지된 움직임에 대응되는 손의 궤적 정보와, 기 저장된 손동작 별 궤적 DB(150) 내의 정보를 비교한다(S240). 이러한 S240 단계는 상기 궤적 비교부(140)에서 수행한다.
여기서, 상기 차이값이 상기 제1 임계치 이상인 경우란, 거리차가 제1 임계치보다 커진 경우, 또는 커졌다가 작아진 경우를 모두 포괄하는 것으로서, 이 모든 경우를 손동작이 시작되어 끝이 난 것으로 판단한다.
상기 궤적 DB(150)에는 다양한 손동작 별로 그에 대응되는 손의 궤적 정보가 서로 매핑되어 저장되어 있다. 따라서, S230 단계에 의하면, 현재 손의 움직임에 따라 저장부(120)에 저장된 손의 궤적 정보와, 기 저장된 궤적 DB(150) 내의 손동작별 궤적 정보들을 서로 비교하여, 현재 움직임이 어떠한 손동작에 해당되는지 정확하게 확인할 수 있게 한다.
즉, 상기 동작 판별부(160)에서는 상기 궤적 DB(150)로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하게 된다(S250).
예를 들어, 현재의 감지된 움직임에 따른 손의 궤적 정보가, 상기 궤적 DB(150)에 포함된 여러 가지 궤적 정보들 중에서 제1 궤적 정보와 임의 오차 범위 내로 일치할 경우(혹은 제1 궤적 정보와 가장 일치할 경우), 현재 손의 움직임은 제1 궤적 정보에 대응되는 제1 손동작인 것으로 판별할 수 있다. 여기서, 궤적 정보를 서로 비교하는 것은 여러 궤적 정보들 중에서도 궤적이 가장 일치하는 궤적 정보에 대응되는 해당 손동작을 현재의 손동작으로 판별하도록 한다.
이상과 같이 본 발명은 손의 움직임 시에 기준점에서 멀어진 정도와 손이 움직이는 궤적 정보를 모두 고려하여 손동작을 인식한다.
도 3은 도 1에 의한 손동작 인지의 종류를 나타내는 예시도이다. 이러한 도 3은 손을 오른쪽(①), 왼쪽(②), 위쪽(③), 아래쪽(④), 카메라 쪽(⑤) 방향으로 움직이는 동작을 예시한 것이다. 물론, 이러한 도 3은 설명의 편의를 위해 간단한 다섯 가지 동작만을 예시한 것일 뿐, 본 발명이 적용되는 손동작이 반드시 이에 한정되는 것은 아니다.
도 4는 도 2의 S230 내지 S250 단계를 설명하는 참고도이다. 이러한 도 4는 움직임이 감지된 손의 현재 위치와, 기준점 사이의 차이 값이 x축의 양의 방향으로 제1 임계치를 벗어난 경우를 도시한 것이다. 이를 통해 현재 손동작은 제1 손동작이라고 임의로 가정할 수 있다.
이후, 상기 제1 손동작을 정의하는 궤적 DB(150) 내의 제1 궤적 정보와, 현재 움직임에 따른 손의 궤적 정보를 비교한다. 만약, 현재 움직임에 따른 손의 궤적 정보가 기 저장된 궤적 정보들 중에서도 상기 제1 궤적 정보와 일치하면, 현재의 손동작을 앞서 가정한 제1 손동작이 맞는 것으로 최종 판단할 수 있다.
이렇게 제1 임계치와 궤적 정보를 함께 비교해야 하는 이유는 다음과 같다.
예를 들어, 손의 움직임이 Z축 방향으로는 거의 변화가 없고 X와 Y 방향에 대해 대각선으로 진행되다가 다시 X축 방향으로 진행되어 제1 임계치를 초과하는 경우, 현재의 상황으로는 상기 제1 손동작( X축 방향으로만 이동하는 동작)인 것으로 잘못 판단할 수 있다. 그러나, 이후 궤적 DB(150)와 상호 비교하는 것에 의해, 단순히 x축 방향으로만 움직인 제1 손동작이 아닌, 대각선 방향과 x축 방향이 결합된 형태의 다른 손동작(ex, 제2 손동작)인 것을 정확하게 판별할 수 있는 것이다.
이러한 과정을 구체적으로 적용하기 위하여, 상기 궤적 비교부(140)에서는 상기 차이값이 상기 제1 임계치 이상인 경우, 상기 궤적 DB(150) 내의 손동작 별 궤적 목록 중에서 상기 제1 임계치를 초과하는 손의 이동 방향과 유사성 있는 적어도 하나의 손동작 후보군(ex, 제1 손동작, 제2 손동작)을 추출한다. 여기서, 손의 이동 방향은 기준점으로부터 이동한 현재 손의 위치정보로부터 손쉽게 획득될 수 있으며, 이는 앞서 차이값의 획득 시에 함께 획득될 수 있다.
또한, 궤적 DB(150)에는 손동작별 궤적 정보가 포함되어 있고 궤적 정보를 알면 해당 손동작이 이동하는 방향 정보(ex, 손동작의 시작 지점으로부터 끝 지점에 이르는 방향 정보) 또한 알 수 있으므로, 상기 손의 이동 방향과 유사성 있는 해당 손동작 후보군을 상기 궤적 DB(150)로부터 추출할 수 있다. 여기서, 유사성 정도를 판단할 때에는 X,Y,Z 축에 대한 손의 이동 방향에 대한 정보 또는 손이 이동되는 방향이 X,Y,Z 축에 대해 기울어진 정도 등이 사용될 수 있다. 이러한 유사성 비교 판단은 상술한 예시 이외에도 기 공지된 다양한 방법이 사용될 수 있다.
이후, 궤적 비교부(140)는 상기 추출된 손동작 후보군의 궤적과 상기 움직임이 감지된 손의 궤적 정보를 상호 비교하도록 한다. 이에 따라, 동작 판별부(160)에서는 상기 추출된 손동작 후보군(ex, 제1 손동작, 제2 손동작) 중에서도 제2 손동작이 실제 손의 동작임을 정확하게 판단할 수 있다.
이러한 본 발명의 구성에 따르면, 1차적으로 임계치를 초과한 해당 방향의 손동작 후보군을 추출한 다음, 2차적으로 궤적 정보가 일치하는 손동작을 최종 추출함에 따라, 손동작 인식의 신뢰성을 높일 수 있으며, 유사성 있는 손동작 후보군 만을 궤적 비교의 대상으로 하여 연산 시간을 줄일 수 있는 이점이 있다.
그리고, 상기 동작의 판별을 위해서는 그 궤적 구간마다 X,Y,Z 방향의 이동하는 비율을 고려하여, 그 비율이 적절한 범위 내에 들면 해당 동작인 것으로 판단할 수 있다. 이러한 동작 판별의 예는 다양한 실시예가 존재할 수 있다.
도 5는 도 1의 S210 단계를 설명하는 상세 흐름도이다. 상기 기준점 검출부(110)에 따른 손의 기준점 검출 방법은 다음과 같다.
우선, 촬영되는 손의 위치를 실시간 Queue에 저장한다. 그리고, 이전 시점에 촬영된 손의 위치에 대한 현재 시점에 촬영된 손의 위치의 변화량을 기 설정된 제2 임계치와 비교한다(S510). 이러한 위치 변화량의 연산 과정은 촬영된 영상으로부터 대상물의 위치 변화 또는 움직임을 검출하는 공지된 다양한 방법이 사용될 수 있다.
만약, 상기 변화량이 제2 임계치 이상이면 손이 움직이는 것으로 판단하고 다시 S510 단계로 환원한다. 이는 기준점이 미검출된 것을 나타내는 것으로서, 손이 한계범위 이상으로 움직이는 경우 손의 기준점을 정확하게 검출할 수 없기 때문이다. 상기 S510의 환원 시에는 Queue를 리셋하여 진행한다.
그리고 상기 변화량이 상기 제2 임계치 미만인 경우, 현재까지 누적된 손의 위치 정보들의 분산값을 기 설정된 제3 임계치와 비교한다(S520). 여기서, 상기 분산값이 제3 임계치 이상인 경우에는 앞서와 같이 손의 기준점을 정확하게 검출할 수 없으므로 Queue를 리셋하고 상기 S510단계를 재진행한다.
그리고, 상기 분산값이 상기 제3 임계치 미만인 경우, 상기 손이 정지된 상태 즉, 움직임이 없는 상태인 것으로 판단한다(S530). 이후, 상기 정지된 상태의 시간을 기 설정된 임계 시간과 비교한다(S540). 만약, 상기 정지된 상태가 임계 시간 이상이 되면 기준점을 검출할 수 있는 상황에 도달한 것으로 판단한다. 즉, 이에 따라 상기 정지된 상태의 시간이 상기 일정 시간을 경과한 시점에 대응되는 손의 최종 위치를 상기 기준점으로 검출한다(S550). 이때, 손의 최종 위치 중에서도 손의 손바닥 중앙부를 기준점으로 설정할 수 있는데, 본 발명에 반드시 이에 한정되는 것은 아니다.
만약, 상기 정지된 상태의 시간이 임계 시간 미만인 경우에는 기준점의 검출이 정확하게 이루어지지 않을 수 있으므로 Queue를 리셋하고 상기 S510단계를 재실행한다.
여기서, 손의 실시간 위치와 상기 기준점이 검출된 결과는 상기 디스플레이부(170)의 화면 상에 출력되도록 하여, 사용자로 하여금 준점의 검출 시점을 쉽고 빠르게 인지할 수 있도록 한다. 상기 디스플레이부(170)는 TV, 모니터 등에 해당될 수 있다. 이때, 디스플레이부(170)는 화면 상에 이미지, 문구 등으로 기준점이 검출되었음을 알릴 수 있으며 이외에도 별도의 스피커를 구비하여 소리로 출력하여 알릴 수 있다.
또한, 상기 디스플레이부(170)는 상기 손이 검출되면, 상기 촬영된 손의 영상에 대응되는 아이콘(ex, 손 모양의 아이콘)이 상기 손의 움직임을 따라 이동하도록 상기 화면 상에 제공할 수 있다. 즉, 손의 기준점이 검출되기 이전과 이후에도 손의 움직임 동작 시에 이에 동기화된 아이콘이 디스플레이부(170) 상에 함께 표시되도록 하여, 인식된 손의 움직임을 편리하게 보여줄 수 있다. 이에 따르면, 현재 취하고 있는 손 동작을 눈으로 확인하여 원하는 손동작이 제대로 수행되고 있는지 쉽게 알 수 있도록 한다.
이외에도, 상기 디스플레이부(170)는 상기 기준점이 검출되면, 상기 아이콘을 상기 기준점이 검출되기 이전과 다른 형태로 표시할 수 있다. 예를 들어, 상기 디스플레이부(170)는 상기 손의 영상에 대응되는 아이콘을 상기 기준점 검출 과정 중에도 표시할 수 있다. 기준점 검출 중에는 아이콘의 형상을 희미하게 또는 점선으로 표시하다가 기준점이 검출되는 즉시 아이콘을 또렷하고 진한 형태로 표시하여 기준점의 검출 결과를 쉽게 확인할 수 있게 한다. 이외에도, 기준점 검출 전후에 대해 아이콘의 색상을 달리 표현하여 알리는 것도 가능하다.
이상과 같은 본 발명에 따르면, 확률적인 방법이 아닌 직관적이고 간단한 알고리즘을 사용하여 동작을 인식한다. 즉, 본 발명에 따른 카메라를 이용한 손동작 인식 방법 및 장치에 따르면, 손이 기준점으로부터 멀어진 정도를 일차적으로 판단한 다음, 손이 움직인 궤적 정보와 기 저장된 손동작 별 궤적 DB를 재차 비교하여 검증함에 따라 손동작의 인식률을 높일 수 있는 이점이 있다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
100: 카메라를 이용한 손동작 인식 장치
110: 기준점 검출부 120: 저장부
130: 위치 비교부 140: 궤적 비교부
150: 궤적 DB 160: 동작 판별부
170: 디스플레이부

Claims (12)

  1. 카메라를 통해 촬영된 손의 기준점을 검출하는 단계;
    상기 기준점이 검출된 손으로부터 움직임이 감지되면, 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장하는 단계;
    상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교하는 단계;
    상기 차이값이 상기 제1 임계치 이상인 경우, 상기 감지된 움직임에 대응되는 손의 궤적 정보와 기 저장된 손동작 별 궤적 DB를 비교하는 단계; 및
    상기 궤적 DB로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하는 단계를 포함하는 카메라를 이용한 손동작 인식 방법.
  2. 청구항 1에 있어서,
    상기 손의 기준점을 검출하는 단계는,
    이전 시점에 대한 현재 시점의 손의 위치의 변화량을 기 설정된 제2 임계치와 비교하는 단계;
    상기 변화량이 상기 제2 임계치 미만인 경우, 현재까지 누적된 손의 위치 정보들의 분산값을 기 설정된 제3 임계치와 비교하는 단계;
    상기 분산값이 상기 제3 임계치 미만인 경우, 상기 손이 정지된 상태인 것으로 판단하는 단계; 및
    상기 정지된 상태의 시간이 일정 시간을 경과한 시점에 대응되는 손의 최종 위치를 상기 기준점으로 검출하는 판단하는 단계를 포함하는 카메라를 이용한 손동작 인식 방법.
  3. 청구항 2에 있어서,
    상기 기준점이 검출된 결과를 소리 또는 화면으로 출력하는 단계를 더 포함하는 카메라를 이용한 손동작 인식 방법.
  4. 청구항 2에 있어서,
    상기 손이 검출되면, 상기 촬영된 손의 영상에 대응되는 아이콘이 상기 손의 움직임을 따라 이동하도록 상기 화면 상에 제공하는 카메라를 이용한 손동작 인식 방법.
  5. 청구항 2에 있어서,
    상기 기준점이 검출되면, 상기 아이콘을 상기 기준점이 검출되기 이전과 다른 형태로 표시하는 카메라를 이용한 손동작 인식 방법.
  6. 청구항 1에 있어서,
    상기 궤적을 비교하는 단계는,
    상기 차이값이 상기 제1 임계치 이상인 경우, 상기 궤적 DB 내의 손동작 별 궤적 목록 중에서 상기 제1 임계치를 초과하는 손의 이동 방향과 유사성 있는 적어도 하나의 손동작 후보군을 추출하고, 추출된 손동작 후보군의 궤적과 상기 손의 궤적 정보를 상호 비교하는 카메라를 이용한 손동작 인식 방법.
  7. 카메라를 통해 촬영된 손의 기준점을 검출하는 기준점 검출부;
    상기 기준점이 검출된 손으로부터 움직임이 감지되면, 상기 감지된 움직임에 대응되는 손의 궤적 정보를 저장하는 저장부;
    상기 움직임이 감지된 손의 현재 위치와 상기 기준점 사이의 차이값을 연산하여 기 설정된 제1 임계치와 비교하는 위치 비교부;
    상기 차이값이 상기 제1 임계치 이상인 경우, 상기 감지된 움직임에 대응되는 손의 궤적 정보와 기 저장된 손동작 별 궤적 DB를 비교하는 궤적 비교부; 및
    상기 궤적 DB로부터 상기 손의 궤적 정보와 일치하는 손동작을 판별하는 동작 판별부를 포함하는 카메라를 이용한 손동작 인식 장치.
  8. 청구항 7에 있어서,
    상기 기준점 검출부는,
    이전 시점에 대한 현재 시점의 손의 위치의 변화량을 기 설정된 제2 임계치와 비교하고,
    상기 변화량이 상기 제2 임계치 미만인 경우, 현재까지 누적된 손의 위치 정보들의 분산값을 기 설정된 제3 임계치와 비교하고,
    상기 분산값이 상기 제3 임계치 미만인 경우, 상기 손이 정지된 상태인 것으로 판단한 다음,
    상기 정지된 상태의 시간이 일정 시간을 경과한 시점에 대응되는 손의 최종 위치를 상기 기준점으로 검출하는 카메라를 이용한 손동작 인식 장치.
  9. 청구항 8에 있어서,
    상기 기준점이 검출된 결과를 소리 또는 화면으로 출력하는 디스플레이부를 더 포함하는 카메라를 이용한 손동작 인식 장치.
  10. 청구항 8에 있어서,
    상기 디스플레이부는,
    상기 손이 검출되면, 상기 촬영된 손의 영상에 대응되는 아이콘이 상기 손의 움직임을 따라 이동하도록 상기 화면 상에 제공하는 카메라를 이용한 손동작 인식 장치.
  11. 청구항 8에 있어서,
    상기 디스플레이부는,
    상기 기준점이 검출되면, 상기 아이콘을 상기 기준점이 검출되기 이전과 다른 형태로 표시하는 카메라를 이용한 손동작 인식 장치.
  12. 청구항 7에 있어서,
    상기 궤적 비교부는,
    상기 차이값이 상기 제1 임계치 이상인 경우, 상기 궤적 DB 내의 손동작 별 궤적 목록 중에서 상기 제1 임계치를 초과하는 손의 이동 방향과 유사성 있는 적어도 하나의 손동작 후보군을 추출하고, 추출된 손동작 후보군의 궤적과 상기 손의 궤적 정보를 상호 비교하는 카메라를 이용한 손동작 인식 장치.
KR1020110115872A 2011-11-08 2011-11-08 카메라를 이용한 손동작 인식 방법 및 장치 KR101269107B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110115872A KR101269107B1 (ko) 2011-11-08 2011-11-08 카메라를 이용한 손동작 인식 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110115872A KR101269107B1 (ko) 2011-11-08 2011-11-08 카메라를 이용한 손동작 인식 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20130050670A true KR20130050670A (ko) 2013-05-16
KR101269107B1 KR101269107B1 (ko) 2013-05-29

Family

ID=48660972

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110115872A KR101269107B1 (ko) 2011-11-08 2011-11-08 카메라를 이용한 손동작 인식 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101269107B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016024698A1 (ko) * 2014-08-11 2016-02-18 주식회사 에스.제이테크 파노라마 영상을 이용한 동작패턴 분석방법
KR20180101313A (ko) * 2018-09-06 2018-09-12 에스케이텔레콤 주식회사 손 모양 및 동작 인식장치 및 방법
CN114120761A (zh) * 2021-11-29 2022-03-01 海南安博教育科技有限公司 实训操作的培训方法、装置、介质和电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007042020A (ja) 2005-08-05 2007-02-15 Nec Corp 携帯端末及びプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016024698A1 (ko) * 2014-08-11 2016-02-18 주식회사 에스.제이테크 파노라마 영상을 이용한 동작패턴 분석방법
KR20180101313A (ko) * 2018-09-06 2018-09-12 에스케이텔레콤 주식회사 손 모양 및 동작 인식장치 및 방법
CN114120761A (zh) * 2021-11-29 2022-03-01 海南安博教育科技有限公司 实训操作的培训方法、装置、介质和电子设备

Also Published As

Publication number Publication date
KR101269107B1 (ko) 2013-05-29

Similar Documents

Publication Publication Date Title
KR101696602B1 (ko) 제스처를 이용한 생체 인증
US10737158B2 (en) Method and device for recognizing movement of tennis racket
CN106951871B (zh) 操作体的运动轨迹识别方法、装置和电子设备
US11294470B2 (en) Human-to-computer natural three-dimensional hand gesture based navigation method
EP2708981B1 (en) Gesture recognition apparatus, control method thereof, display instrument, and computer readable medium
US20110299737A1 (en) Vision-based hand movement recognition system and method thereof
JP5264007B1 (ja) コントローラ
US20130279756A1 (en) Computer vision based hand identification
US20150077329A1 (en) Eye tracking-based user interface method and apparatus
JP2004504675A (ja) ビデオ会議及び他のカメラベースのシステム適用におけるポインティング方向の較正方法
WO2013123738A1 (zh) 一种屏幕的解锁系统和方法
US9035889B2 (en) Information processing apparatus and information processing method
KR101360149B1 (ko) 센서리스 기반 손가락 모션 트래킹 방법 및 그 장치
WO2013008236A1 (en) System and method for computer vision based hand gesture identification
CN107608508B (zh) 一种信息处理方法及电子设备
US20160104037A1 (en) Method and device for generating motion signature on the basis of motion signature information
KR20120035604A (ko) 영상 기반의 손 검출 장치 및 그 방법
TWI431538B (zh) 基於影像之動作手勢辨識方法及系統
KR101269107B1 (ko) 카메라를 이용한 손동작 인식 방법 및 장치
CN106980527A (zh) 启动指纹识别的方法、装置以及智能终端
CN106648042B (zh) 一种识别控制方法以及装置
US8970479B1 (en) Hand gesture detection
JP6060501B2 (ja) 筆跡管理プログラム及び記録表示装置
CN104063041A (zh) 一种信息处理方法及电子设备
JP2017191426A (ja) 入力装置、入力制御方法、コンピュータプログラム、及び記憶媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160419

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170328

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180406

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190325

Year of fee payment: 7