KR101609263B1 - 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법 - Google Patents

적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법 Download PDF

Info

Publication number
KR101609263B1
KR101609263B1 KR1020140173032A KR20140173032A KR101609263B1 KR 101609263 B1 KR101609263 B1 KR 101609263B1 KR 1020140173032 A KR1020140173032 A KR 1020140173032A KR 20140173032 A KR20140173032 A KR 20140173032A KR 101609263 B1 KR101609263 B1 KR 101609263B1
Authority
KR
South Korea
Prior art keywords
gesture
recognition
recognition mode
predetermined
user
Prior art date
Application number
KR1020140173032A
Other languages
English (en)
Inventor
박찬희
Original Assignee
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대모비스 주식회사 filed Critical 현대모비스 주식회사
Priority to KR1020140173032A priority Critical patent/KR101609263B1/ko
Priority to US14/621,172 priority patent/US9671871B2/en
Priority to CN201510217451.5A priority patent/CN106200883B/zh
Application granted granted Critical
Publication of KR101609263B1 publication Critical patent/KR101609263B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation

Abstract

본 발명에 의한 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법이 개시된다. 본 발명에 따른 제스쳐를 인식하기 위한 장치는 적외선 센서를 이용하여 제스쳐를 감지하여 그 감지한 결과로 센싱값을 획득하는 센싱부; 획득된 상기 센싱값을 기반으로 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하되, 기 설정된 영역 내에서 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제어부; 및 사용자에 의해 기 설정된 제스쳐 인식을 수행하는 인식 모드를 저장하는 저장부를 포함하되, 상기 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함하는 것을 특징으로 한다.

Description

적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법{APPARATUS FOR RECOGNIZING GESTURE USING INFRARED RAY AND METHOD THEREOF}
본 발명은 제스쳐 인식 기술에 관한 것으로서, 특히, 차량 내에서 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법에 관한 것이다.
적외선 방식을 기반으로 하는 제스쳐 인식은 적외선의 발광 및 수광에 의한 빛의 크기, 거리, 변화량을 기준으로 동작한다. 이러한 제스쳐 인식은 사전 동작 없이 바로 모션을 인식하는 하게 된다. 그러므로 원래의 옳은 동작 즉, 사용자의 의도가 반영된 동작을 위한 적외선 다이오드의 오동작에 대한 방지책이 없는 실정이다.
사용자의 제스쳐 의지가 반영되지 않은 오동작이 발생되어 차량 내 모듈이 이를 인지하고 동작하게 되면 운전자의 시야를 뺏는 것과 같이 운전자의 집중력을 뺏는 큰 위험이 발생할 수 있다.
따라서 차량 내에 장착된 모듈은 이러한 오동작에 대한 안전한 알고리즘을 요구한다. 즉, 기존의 제스쳐 인식 방식은 사전 동작 없이 바로 모션을 인식하는 방식이기 때문에 반드시 고품질의 제스쳐 인식 방식의 개발 시 한계에 부딪히게 된다.
공개특허공보 제10-2012-0025904호, 2012.03.16. 공개
따라서 이러한 종래 기술의 문제점을 해결하기 위한 것으로, 본 발명의 목적은 x축 또는 y축의 변화량을 기반으로 좌우 또는 상하로의 제스쳐를 인식하되, 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 추가하여 그 추가된 홀드 모션을 인식한 후에 제스쳐 인식을 수행하도록 하는 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법을 제공하는데 있다.
그러나 본 발명의 목적은 상기에 언급된 사항으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 목적들을 달성하기 위하여, 본 발명의 한 관점에 따른 제스쳐를 인식하기 위한 장치는 적외선 센서를 이용하여 제스쳐를 감지하여 그 감지한 결과로 센싱값을 획득하는 센싱부; 획득된 상기 센싱값을 기반으로 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하되, 기 설정된 영역 내에서 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제어부; 및 사용자에 의해 기 설정된 제스쳐 인식을 수행하는 인식 모드를 저장하는 저장부를 포함하되, 상기 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함하는 것을 특징으로 한다.
바람직하게, 상기 제어부는 기 설정된 제2 인식 모드에 따라 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 홀드 모션을 인식하는 것을 특징으로 한다.
바람직하게, 상기 기 설정된 홀드 영역, 상기 일정 속도, 상기 일정 시간은 각각 사용자에 의해 설정 또는 변경되는 것을 특징으로 한다.
바람직하게, 상기 제어부는 입력 받은 상기 센싱값을 기반으로 x축 또는 y축의 변화량을 산출하여 그 산출된 x축 또는 y축의 변화량에 따라 좌우 또는 상하로의 움직임을 판단하고 그 판단한 결과로 제스쳐를 인식하는 것을 특징으로 한다.
바람직하게, 상기 제어부는 입력 받은 상기 센싱값을 기반으로 산출된 x축 또는 y축의 변화량의 속도가 기 설정된 임계치 이상인 경우 사용자의 의지가 반영된 제스쳐라고 판단하게 되고, 산출된 상기 x축 또는 y축의 변화량의 속도가 상기 기 설정된 임계치 미만인 경우 배경이라고 판단하게 되는 것을 특징으로 한다.
바람직하게, 상기 제어부는 획득된 상기 센싱값을 기반으로 기 설정된 제1 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 제어부는 입력 받은 상기 센싱값으로부터 배경에 상응하는 값을 차감하여 그 차감한 결과로서 보정 센싱값을 산출하고, 산출된 상기 보정 센싱값을 기반으로 전체 신호 합을 산출하여 그 산출된 전체 신호 합을 기반으로 현재의 상태 정보를 변경하며, 상기 현재의 상태 정보를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 제어부는 상기 전체 신호 합이 0이 아니면, 상기 현재의 상태 정보를 근접한 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 제어부는 상기 전체 신호 합이 0이면, 상기 현재의 상태 정보를 멀리 떨어져 있는 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
본 발명의 다른 한 관점에 따른 제스쳐를 인식하기 위한 방법은 사용자에 의해 기 설정된 제스쳐 인식을 수행하는 인식 모드를 저장하는 단계; 적외선 센서를 이용하여 제스쳐를 감지하여 그 감지한 결과로 센싱값을 획득하는 단계; 및 획득된 상기 센싱값을 기반으로 상기 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하되, 기 설정된 영역 내에서 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 단계를 포함하되, 상기 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함하는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 기 설정된 제2 인식 모드에 따라 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 홀드 모션을 인식하는 것을 특징으로 한다.
바람직하게, 상기 기 설정된 홀드 영역, 상기 일정 속도, 상기 일정 시간은 각각 사용자에 의해 설정 또는 변경되는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 입력 받은 상기 센싱값을 기반으로 x축 또는 y축의 변화량을 산출하여 그 산출된 x축 또는 y축의 변화량에 따라 좌우 또는 상하로의 움직임을 판단하고 그 판단한 결과로 제스쳐를 인식하는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 입력 받은 상기 센싱값을 기반으로 산출된 x축 또는 y축의 변화량의 속도가 기 설정된 임계치 이상인 경우 사용자의 의지가 반영된 제스쳐라고 판단하게 되고, 산출된 상기 x축 또는 y축의 변화량의 속도가 상기 기 설정된 임계치 미만인 경우 배경이라고 판단하게 되는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 획득된 상기 센싱값을 기반으로 기 설정된 제1 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 입력 받은 상기 센싱값으로부터 배경에 상응하는 값을 차감하여 그 차감한 결과로서 보정 센싱값을 산출하고, 산출된 상기 보정 센싱값을 기반으로 전체 신호 합을 산출하여 그 산출된 전체 신호 합을 기반으로 현재의 상태 정보를 변경하며, 상기 현재의 상태 정보를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 상기 전체 신호 합이 0이 아니면, 상기 현재의 상태 정보를 근접한 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
바람직하게, 상기 수행하는 단계는 상기 전체 신호 합이 0이면, 상기 현재의 상태 정보를 멀리 떨어져 있는 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 한다.
이를 통해, 본 발명은 x축 또는 y축의 변화량을 기반으로 좌우 또는 상하로의 제스쳐를 인식하되, 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 추가하여 그 추가된 홀드 모션을 인식한 후에 제스쳐 인식을 수행하도록 함으로써, 제스쳐 인식의 오동작을 방지할 수 있는 효과가 있다.
또한 본 발명은 홀드 모션을 추가하여 제스쳐 인식의 오동작을 미연에 방지하는 것이 가능하기 때문에 사용자의 편의성을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 제스쳐를 인식하기 위한 장치를 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 제스쳐를 인식하기 위한 방법을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 홀드 모션 인식을 위한 영역을 나타내는 도면이다.
도 4는 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제1 도면이다.
도 5는 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제2 도면이다.
도 6은 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제3 도면이다.
도 7은 본 발명의 일 실시예에 따른 센싱값 입력 과정을 상세히 나타내는 도면이다.
이하에서는, 본 발명의 실시예에 따른 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법을 첨부한 도면을 참조하여 설명한다. 본 발명에 따른 동작 및 작용을 이해하는 데 필요한 부분을 중심으로 상세히 설명한다.
또한, 본 발명의 구성 요소를 설명하는 데 있어서, 동일한 명칭의 구성 요소에 대하여 도면에 따라 다른 참조부호를 부여할 수도 있으며, 서로 다른 도면임에도 불구하고 동일한 참조부호를 부여할 수도 있다. 그러나, 이와 같은 경우라 하더라도 해당 구성 요소가 실시예에 따라 서로 다른 기능을 갖는다는 것을 의미하거나, 서로 다른 실시예에서 동일한 기능을 갖는다는 것을 의미하는 것은 아니며, 각각의 구성 요소의 기능은 해당 실시예에서의 각각의 구성 요소에 대한 설명에 기초하여 판단하여야 할 것이다.
특히, 본 발명에서는 x축 또는 y축의 변화량을 기반으로 좌우 또는 상하로의 제스쳐를 인식하되, 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 추가하여 그 추가된 홀드 모션을 인식한 후에 제스쳐 인식을 수행하도록 하는 새로운 방안을 제안한다.
도 1은 본 발명의 일 실시예에 따른 제스쳐를 인식하기 위한 장치를 나타내는 도면이다.
도 1에 도시한 바와 같이, 본 발명에 따른 제스쳐를 인식하기 위한 장치는 통신부(110), 입력부(120), 센싱부(130), 제어부(140), 표시부(150), 저장부(160)를 포함할 수 있다.
통신부(110)는 차량 내 설치된 전자기기와 연동하여 각종 정보를 송수신할 수 있다.
입력부(120)는 사용자의 메뉴 또는 키 조작에 따라 정보를 입력 받을 수 있다. 예컨대, 입력부(120)는 사용자의 메뉴 조작에 따라 제스쳐 인식을 위한 각종 파라미터를 설정하거나 인식 모드를 설정하기 위한 정보를 입력 받을 수 있다.
센싱부(130)는 적외선을 발광하고 물체에 반사되어 돌아오는 적외선을 수광할 수 있다. 센싱부(130)는 다수의 발광 센서와 다수의 수광 센서를 포함할 수 있다.
제어부(140)는 센싱부(130)로부터 감지된 센싱값을 기반으로 사용자의 의도가 반영된 제스쳐를 인식할 수 있다. 예컨대, 제어부(140)는 감지된 센싱값의 변화량이 크면 사용자의 의지가 반영된 제스쳐로 인식하게 되고 감지된 센싱값의 변화량이 작으면 사용자의 의지가 반영되지 않은 배경으로 인식하게 된다.
이때, 제어부(140)는 기 설정된 인식 모드에 따라 제스쳐 인식을 수행할 수 있다. 여기서, 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함할 수 있다.
예컨대, 제어부(140)는 제2 인식 모드에 따라 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하게 된다.
이러한 인식 모드는 사용자의 목적이나 필요에 따라 설정 또는 변경될 수 있다. 즉, 사용자의 설정 또는 변경에 따라 제1 인식 모드와 제2 인식 모드를 선택적으로 수행 가능하다.
표시부(150)는 제스쳐 인식을 이용하여 수행될 각종 기능들을 표시할 수 있다.
저장부(160)는 제스쳐 인식에 관련된 각종 정보, 인식 모드 등을 저장할 수 있다.
도 2는 본 발명의 일 실시예에 따른 제스쳐를 인식하기 위한 방법을 나타내는 도면이다.
도 2에 도시한 바와 같이, 본 발명에 따른 제스쳐를 인식하기 위한 장치(이하 제스쳐 인식장치라고 한다)는 센서에 의해 감지된 센싱값을 입력 받을 수 있다.
다음으로, 제스쳐 인식장치는 센싱값을 입력 받으면 기 설정된 인식 모드를 확인할 수 있다. 즉, 제스쳐 인식 장치는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드 또는 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드인지를 확인하게 된다.
다음으로, 제스쳐 인식장치는 그 확인한 결과로 제1 인식 모드가 설정되어 있으면 입력 받은 센싱값을 기반으로 사용자의 의도가 반영된 제스쳐를 인식할 수 있다.
반면 제스쳐 인식장치는 그 확인한 결과로 제2 인식 모드가 설정되어 있으면 입력 받은 센싱값을 기반으로 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식할 수 있다.
이때, 제스쳐 인식장치는 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 홀드 모션을 인식하게 된다.
도 3은 본 발명의 일 실시예에 따른 홀드 모션 인식을 위한 영역을 나타내는 도면이다.
도 3을 참조하면, 가로세로 대비 가로가 긴 디스플레이를 기준으로 디스플레이의 중앙에 마름모 형태로 홀드 모션을 인식하기 위한 홀드 영역이 기 설정되어 있는 것을 볼 수 있다.
이러한 기 설정된 홀드 영역, 일정 시간은 모두 튜닝 변수로서 사용자에 의해 설정된다.
즉, 제스쳐 인식장치는 좌표 추적을 통해 디스플레이의 전체 영역 중 사용자에 의해 기 설정된 홀드 영역 내에 들어와서 일정 시간 유지하면 홀드 모션을 인지하게 된다.
다음으로, 제스쳐 인식장치는 홀드 모션을 인식하게 되면 홀드 모션 이후에 입력 받은 센싱값을 기반으로 사용자의 의도가 반영된 제스쳐를 인식할 수 있다.
이때, 제스쳐 인식장치는 입력 받은 센싱값을 기반으로 x축 또는 y축의 변화량을 산출하여 그 산출된 변화량에 따라 좌우 또는 상하로의 움직임을 판단하게 된다.
도 4는 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제1 도면이다.
도 4에 도시한 바와 같이, 홀드 모션이 발생한 좌표에서 현재 좌표가 기 설정된 홀드 영역을 벗어나게 되면 x축 방향 또는 y축 방향으로의 움직임을 판단한다. 이렇게 움직임을 판단하기 위한 소스 코드를 그 일 예로 보여주고 있다.
예컨대, |dx/dy|가 2 이상인 경우에는 x축 방향으로의 움직임으로 판단하고 그 이외의 경우에는 y축 방향으로의 움직임으로 판단하게 된다. 이때, x축 변화량 dx, y축 변화량 dy의 부호를 보고 좌/우 또는 상/하인지를 판단하게 된다.
도 5는 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제2 도면이다.
도 5에 도시한 바와 같이, x축, y축에 대하여 인식하기 쉬운 축이 있는 반면 인식하기 어려운 축이 있다. 예컨대, 가로가 긴 LCD 화면에서 사람의 손이 화면의 가운데에 있을지라도 손목에 의해 하단의 센서들은 손목과 팔목의 반사량값들을 인지한다. 그래서 하단으로의 움직임을 했지만 이미 손목과 팔목에 의한 적외선 값들로 인해 하단으로의 움직임이 제대로 인지되지 않을 수 있다.
또한 인식하는 범위가 그림처럼 적은 축의 제스쳐에 대해서는 움직임에 따라 사용자의 손이 사라지고 순간적으로 뒤의 배경값들이 들어와 오인식을 유발할 수 있다.
도 6은 본 발명의 일 실시예에 따른 움직임을 판단하는 원리를 설명하기 위한 제3 도면이다.
도 6에 도시한 바와 같이, 상단으로 움직이는 경우 도 5와 같이 위쪽 신호는 증가하고 아래쪽 신호는 반대로 감소해야 한다. 이를 이용하여 상/하로의 움직임을 판단하는 조건에 각 상단/하단의 신호의 합의 변화 추이를 비교하여 서로 반대의 성향을 보이면서 그 이동 방향이 좌표로 판단되는 상/하 신호와 일치하는 경우에만 상/하로의 움직임으로 판단한다. 이를 통해 오동작이 줄어들게 된다. 이렇게 움직임을 판단하기 위한 소스 코드를 그 일 예로 보여주고 있다.
예컨대, 상단/하단의 신호량 합산의 상대적 비율을 maxDiff 변수에 저장하여 그 상대적 변화 추이와 dy의 변화 부호를 보고 상/하로의 움직임을 결정한다.
도 7은 본 발명의 일 실시예에 따른 센싱값 입력 과정을 상세히 나타내는 도면이다.
도 7에 도시한 바와 같이, 본 발명에 따른 제스쳐를 인식하기 위한 장치(이하 제스쳐 인식장치라고 한다)는 센싱부로부터 감지된 센싱값 Add_signal을 입력 받을 수 있다. 여기서 Add_signal은 수광 센서로 들어온 신호의 합을 나타낸다.
다음으로, 제스쳐 인식장치는 센싱값을 입력 받으면, 기 설정된 인식 모드를 확인할 수 있다.
다음으로, 제스쳐 인식장치는 그 확인한 결과로 제1 인식 모드이면, 입력 받은 센싱값을 기반으로 자동 보정(autocalibration)을 통해 배경에 의한 값인지 사용자의 의지가 반영된 제스쳐에 의한 값인지를 판단할 수 있다.
이때, 제스쳐 인식장치는 센싱값을 기반으로 그 변화량의 속도가 기 설정된 임계치 이상이면 사용자의 의지가 반영된 제스쳐라고 판단하게 되고 반대로 그 변화량의 속도가 기 설정된 임계치 미만이면 배경이라고 판단하게 된다.
다음으로, 제스쳐 인식장치는 입력 받은 센싱값으로부터 보정 센싱값 Effective_signal을 산출할 수 있다. 즉, 제스쳐 인식장치는 입력 받은 센싱값으로부터 배경에 상응하는 값을 차감하여 그 차감한 결과로서 보정 센싱값을 산출하게 된다.
다음으로, 제스쳐 인식장치는 보정 센싱값을 산출하게 되면, 이전 주기에서 판단한 상태 즉, 터치(touch) 또는 호버링(hovering) 상태를 확인할 수 있다.
다음으로, 제스쳐 인식장치는 산출된 보정 센싱값을 기반으로 전체 신호 합을 산출하고 그 산출된 전체 신호 합 Sum_of_signal이 0인지를 확인할 수 있다.
다음으로, 제스쳐 인식장치는 전체 신호 합이 0이 아니면, 좌표추적을 통해 좌표값을 획득하고, 이전 주기의 상태가 멀리 떨어진 상태(far)였는지를 확인할 수 있다.
다음으로 제스쳐 인식장치는 그 확인한 결과로 이전 주기의 상태가 멀리 떨어진 상태였다면 상태 정보를 근접한 상태(near)로 변경한 후 제스쳐 인식을 수행하고, 이전 주기의 상태가 멀리 떨어진 상태가 아니라면 제스쳐 인식을 수행할 수 있다.
이때, 전체 신호 합이 0이 아니면 센싱값의 크기, 변화량이 생긴 것이라고 판단한다. 따라서 좌표 추적과 함께 현재의 상태 정보를 근접한 상태로 변경하는 것이다.
반면, 제스쳐 인식장치는 전체 신호 합이 0이면, 이전 상태가 근접한 상태였는지를 확인하고 그 확인한 결과로 이전 상태가 근접한 상태였다면 상태 정보를 멀리 떨어진 상태로 변경한 후 그 변경된 상태 정보를 고려하여 제스쳐 인식을 수행하고, 이전 주기의 상태가 근접한 상태가 아니라면 이후의 제스쳐 인식 과정을 모두 종료할 수 있다.
한편, 이상에서 설명한 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 기재되어 있다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 또한, 이와 같은 컴퓨터 프로그램은 USB 메모리, CD 디스크, 플래쉬 메모리 등과 같은 컴퓨터가 읽을 수 있는 저장매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 저장매체로서는 자기 기록매체, 광 기록매체, 캐리어 웨이브 매체 등이 포함될 수 있다.
이상에서 설명한 실시예들은 그 일 예로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
110: 통신부
120: 입력부
130: 센싱부
140: 제어부
150: 표시부
160: 저장부

Claims (18)

  1. 적외선 센서를 이용하여 제스쳐를 감지하여 그 감지한 결과로 센싱값을 획득하는 센싱부;
    획득된 상기 센싱값을 기반으로 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하되, 기 설정된 영역 내에서 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제어부; 및
    사용자에 의해 기 설정된 제스쳐 인식을 수행하는 인식 모드를 저장하는 저장부;
    를 포함하되, 상기 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함하고,
    상기 제어부는 상기 획득된 센싱값을 입력 받으면 상기 기 설정된 인식 모드를 확인하여 그 확인한 결과로 상기 제1 인식 모드 또는 상기 제2 인식 모드에 따라 상기 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  2. 제1 항에 있어서,
    상기 제어부는,
    기 설정된 제2 인식 모드에 따라 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 홀드 모션을 인식하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  3. 제2 항에 있어서,
    상기 기 설정된 홀드 영역, 상기 일정 속도, 상기 일정 시간은 각각 사용자에 의해 설정 또는 변경되는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  4. 제1 항에 있어서,
    상기 제어부는,
    입력 받은 상기 센싱값을 기반으로 x축 또는 y축의 변화량을 산출하여 그 산출된 x축 또는 y축의 변화량에 따라 좌우 또는 상하로의 움직임을 판단하고 그 판단한 결과로 제스쳐를 인식하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  5. 제4 항에 있어서,
    상기 제어부는,
    입력 받은 상기 센싱값을 기반으로 산출된 x축 또는 y축의 변화량의 속도가 기 설정된 임계치 이상인 경우 사용자의 의지가 반영된 제스쳐라고 판단하게 되고,
    산출된 상기 x축 또는 y축의 변화량의 속도가 상기 기 설정된 임계치 미만인 경우 배경이라고 판단하게 되는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  6. 제1 항에 있어서,
    상기 제어부는,
    획득된 상기 센싱값을 기반으로 기 설정된 제1 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  7. 제1 항에 있어서,
    상기 제어부는,
    입력 받은 상기 센싱값으로부터 배경에 상응하는 값을 차감하여 그 차감한 결과로서 보정 센싱값을 산출하고,
    산출된 상기 보정 센싱값을 기반으로 전체 신호 합을 산출하여 그 산출된 전체 신호 합을 기반으로 현재의 상태 정보를 변경하며,
    상기 현재의 상태 정보를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  8. 제7 항에 있어서,
    상기 제어부는,
    상기 전체 신호 합이 0이 아니면, 상기 현재의 상태 정보를 근접한 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  9. 제7 항에 있어서,
    상기 제어부는,
    상기 전체 신호 합이 0이면, 상기 현재의 상태 정보를 멀리 떨어져 있는 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 장치.
  10. 사용자에 의해 기 설정된 제스쳐 인식을 수행하는 인식 모드를 저장하는 단계;
    적외선 센서를 이용하여 제스쳐를 감지하여 그 감지한 결과로 센싱값을 획득하는 단계; 및
    획득된 상기 센싱값을 기반으로 상기 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하되, 기 설정된 영역 내에서 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 단계;
    를 포함하되, 상기 인식 모드는 곧바로 제스쳐 인식을 수행하는 제1 인식 모드와 제스쳐 인식의 시작을 판단하기 위한 홀드 모션을 인식한 후 제스쳐 인식을 수행하는 제2 인식 모드를 포함하고,
    상기 수행하는 단계는 상기 획득된 센싱값을 입력 받으면 상기 기 설정된 인식 모드를 확인하여 그 확인한 결과로 상기 제1 인식 모드 또는 상기 제2 인식 모드에 따라 상기 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  11. 제10 항에 있어서,
    상기 수행하는 단계는,
    기 설정된 제2 인식 모드에 따라 기 설정된 홀드 영역 내에서 일정 속도 이상의 변화량을 가진 센싱값이 들어와 일정 시간을 유지하는 경우 홀드 모션을 인식하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  12. 제11 항에 있어서,
    상기 기 설정된 홀드 영역, 상기 일정 속도, 상기 일정 시간은 각각 사용자에 의해 설정 또는 변경되는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  13. 제10 항에 있어서,
    상기 수행하는 단계는,
    입력 받은 상기 센싱값을 기반으로 x축 또는 y축의 변화량을 산출하여 그 산출된 x축 또는 y축의 변화량에 따라 좌우 또는 상하로의 움직임을 판단하고 그 판단한 결과로 제스쳐를 인식하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  14. 제13 항에 있어서,
    상기 수행하는 단계는,
    입력 받은 상기 센싱값을 기반으로 산출된 x축 또는 y축의 변화량의 속도가 기 설정된 임계치 이상인 경우 사용자의 의지가 반영된 제스쳐라고 판단하게 되고,
    산출된 상기 x축 또는 y축의 변화량의 속도가 상기 기 설정된 임계치 미만인 경우 배경이라고 판단하게 되는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  15. 제10 항에 있어서,
    상기 수행하는 단계는,
    획득된 상기 센싱값을 기반으로 기 설정된 제1 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  16. 제10 항에 있어서,
    상기 수행하는 단계는,
    입력 받은 상기 센싱값으로부터 배경에 상응하는 값을 차감하여 그 차감한 결과로서 보정 센싱값을 산출하고,
    산출된 상기 보정 센싱값을 기반으로 전체 신호 합을 산출하여 그 산출된 전체 신호 합을 기반으로 현재의 상태 정보를 변경하며,
    상기 현재의 상태 정보를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  17. 제16 항에 있어서,
    상기 수행하는 단계는,
    상기 전체 신호 합이 0이 아니면, 상기 현재의 상태 정보를 근접한 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
  18. 제16 항에 있어서,
    상기 수행하는 단계는,
    상기 전체 신호 합이 0이면, 상기 현재의 상태 정보를 멀리 떨어져 있는 상태로 변경하고 그 변경된 상태를 고려하여 기 설정된 인식 모드에 따라 사용자의 의도가 반영된 제스쳐 인식을 수행하는 것을 특징으로 하는 제스쳐를 인식하기 위한 방법.
KR1020140173032A 2014-12-04 2014-12-04 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법 KR101609263B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140173032A KR101609263B1 (ko) 2014-12-04 2014-12-04 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법
US14/621,172 US9671871B2 (en) 2014-12-04 2015-02-12 Apparatus for recognizing gesture using infrared ray and method thereof
CN201510217451.5A CN106200883B (zh) 2014-12-04 2015-04-30 利用红外线识别手势的装置及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140173032A KR101609263B1 (ko) 2014-12-04 2014-12-04 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR101609263B1 true KR101609263B1 (ko) 2016-04-05

Family

ID=55800384

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140173032A KR101609263B1 (ko) 2014-12-04 2014-12-04 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법

Country Status (3)

Country Link
US (1) US9671871B2 (ko)
KR (1) KR101609263B1 (ko)
CN (1) CN106200883B (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106447864A (zh) * 2016-10-14 2017-02-22 郑州云海信息技术有限公司 一种非接触式解锁方法及系统
CN108459723B (zh) * 2018-06-12 2024-03-15 上海永亚智能科技有限公司 一种红外手势识别装置和识别方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8745541B2 (en) * 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
US8971565B2 (en) * 2008-05-29 2015-03-03 Hie-D Technologies, Llc Human interface electronic device
JP4318056B1 (ja) * 2008-06-03 2009-08-19 島根県 画像認識装置および操作判定方法
US7872578B2 (en) * 2008-06-20 2011-01-18 Sher Yevgeniy Il Ich Tracking, identification, and security system for a portable device
US8514251B2 (en) * 2008-06-23 2013-08-20 Qualcomm Incorporated Enhanced character input using recognized gestures
CN102906671B (zh) * 2010-07-20 2016-03-02 松下电器（美国）知识产权公司 手势输入装置及手势输入方法
KR101257303B1 (ko) 2010-09-08 2013-05-02 인테니움 인코퍼레이션 언터치 방식의 제스쳐 인식 방법 및 장치
WO2012039140A1 (ja) * 2010-09-22 2012-03-29 島根県 操作入力装置および方法ならびにプログラム
JP5617581B2 (ja) * 2010-12-08 2014-11-05 オムロン株式会社 ジェスチャ認識装置、ジェスチャ認識方法、制御プログラム、および、記録媒体
KR101858531B1 (ko) * 2011-01-06 2018-05-17 삼성전자주식회사 모션에 의해 제어되는 디스플레이 장치 및 그 모션 제어 방법
US8830302B2 (en) * 2011-08-24 2014-09-09 Lg Electronics Inc. Gesture-based user interface method and apparatus
DE102012000201A1 (de) * 2012-01-09 2013-07-11 Daimler Ag Verfahren und Vorrichtung zum Bedienen von auf einer Anzeigeeinheit eines Fahrzeugs angezeigten Funktionen unter Verwendung von im dreidimensionalen Raum ausgeführten Gesten sowie betreffendes Computerprogrammprodukt
US20130308856A1 (en) * 2012-01-12 2013-11-21 Google Inc. Background Detection As An Optimization For Gesture Recognition
JP2013250637A (ja) * 2012-05-30 2013-12-12 Toshiba Corp 認識装置
US20140022158A1 (en) * 2012-07-18 2014-01-23 Samsung Electronics Co., Ltd. Apparatus and method for controlling operation mode of device using gesture recognition
US9829984B2 (en) * 2013-05-23 2017-11-28 Fastvdo Llc Motion-assisted visual language for human computer interfaces

Also Published As

Publication number Publication date
CN106200883B (zh) 2019-10-11
US20160162033A1 (en) 2016-06-09
US9671871B2 (en) 2017-06-06
CN106200883A (zh) 2016-12-07

Similar Documents

Publication Publication Date Title
US8760432B2 (en) Finger pointing, gesture based human-machine interface for vehicles
US20150268789A1 (en) Method for preventing accidentally triggering edge swipe gesture and gesture triggering
US20120249461A1 (en) Dedicated user interface controller for feedback responses
EP3062208B1 (en) Electronic device and control method thereof
US10394370B2 (en) Apparatus and method for recognizing touch input using interpolation
US20140198030A1 (en) Image projection device, image projection system, and control method
US20140168065A1 (en) Motion detection system
CN102165381A (zh) 双视图触摸屏显示器系统及操作方法
US20160239097A1 (en) Control system for a gesture sensing arrangement and method for controlling a gesture sensing arrangement
EP2693313A2 (en) Electronic pen input recognition apparatus and method using capacitive-type touch screen panel (tsp)
WO2017131891A2 (en) Mitigating common mode display noise using hybrid estimation approach
US10712868B2 (en) Hybrid baseline management
US20150338996A1 (en) Touch detection method and related optical touch system
KR101609263B1 (ko) 적외선을 이용하여 제스쳐를 인식하기 위한 장치 및 그 방법
WO2017107813A1 (zh) 智能设备的操控装置、智能设备、操作控制方法及装置
US20150355819A1 (en) Information processing apparatus, input method, and recording medium
US8952934B2 (en) Optical touch systems and methods for determining positions of objects using the same
KR20130109817A (ko) 손가락 패턴을 이용한 손 모양 인식 장치 및 방법
KR20090076124A (ko) 가전 기기 제어 방법 및 이를 이용한 장치
US20140320430A1 (en) Input device
CN109510896B (zh) 接近传感器的选择方法、装置、存储介质及电子设备
KR20110133086A (ko) 모바일 기기 인터페이스 장치, 방법 및 이를 위한 기록매체
CN103941922A (zh) 光学触控系统、触控检测方法以及电脑程序产品
US20170208165A1 (en) Information Input Processing Method and Mobile Terminal
KR102637527B1 (ko) 테이블 탑 디스플레이 장치 및 그 터치 인식 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190312

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200302

Year of fee payment: 5