KR101710972B1

KR101710972B1 - 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법 및 장치

Info

Publication number: KR101710972B1
Application number: KR1020157007776A
Authority: KR
Inventors: 치앙 딩; 리 리
Original assignee: 후아웨이 테크놀러지 컴퍼니 리미티드
Priority date: 2012-09-29
Filing date: 2013-08-13
Publication date: 2017-03-13
Also published as: EP2884383A4; KR20150046304A; CN103713735B; EP2884383A1; JP2015530669A; CN103713735A; WO2014048104A1; US20150205521A1; WO2014048180A1; JP6114827B2

Abstract

비접촉 제스처를 사용하여 단말 기기를 제어하는 방법 및 장치가 개시된다. 상기 단말 장치는 하나 이상의 포인트 광센서를 포함한다. 상기 단말 장치는 상기 포인트 광센서가 논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지할 때 상기 복수의 포인트 광센서에 의해 출력된 복수의 광 강도 신호를 수신한다. 상기 단말 장치는 광 강도 신호의 변화 패턴을 결정하고, 상기 변화 패턴에 기초하여, 상기 논-터치 사용자 제스처의 이동 방향을 식별하는 것을 포함하여, 상기 논-터치 사용자 제스처를 식별한다. 그런 다음, 상기 단말 장치는 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행한다. 본 발명의 실시예는 소프트웨어를 통해 간단하고 효과적으로 논-터치 제스처를 사용하여 단말 기기를 제어할 수 있고, 사용자 경험을 향상시킬 수 있다.

Description

논-터치 제스처를 사용하여 단말 기기를 제어하는 방법 및 장치{METHOD AND APPARATUS FOR CONTROLLING TERMINAL DEVICE BY USING NON-TOUCH GESTURE}

본 출원은 국제출원 No. PCT/CN2013/081387의 연속이며, 상기 문헌은 2012년 9월 29일에 중국특허청에 출원된 중국특허출원 No. 201210375886.9 및 2012년 10월 12일에 중국특허청에 출원된 중국특허출원 No. 201210387215.4에 대한 우선권을 주장하는 바이며, 상기 문헌 모두는 본 명세서에 원용되어 병합된다.

본 발명은 통신 기술 분야에 관한 것이며, 특히 비접촉 제스처를 사용하여 단말 기기를 제어하는 방법 및 장치에 관한 것이다.

스마트 단말 기기의 성능의 지속적인 발전에 따라. 사람들은 스마트폰 및 태블릿 컴퓨터(태블릿 PC)와 같은 스마트 단말로 복잡한 작업을 처리할 수 있는데, 예를 들어, 전자책을 읽을 수 있고, 멀티미디어 픽처를 브라우징할 수 있고, 음악 및 영상을 재생할 수 있으며, 웹 페이지를 브라우징할 수 있다. 그러므로 사용자는 모바일 스마트 단말과 빈번하게 정보를 교환해야 하는데, 예를 들어 픽처 전환 및 줌, 음악 및 영상의 일시정지 및 재생, 그리고 웹 브라우징에서의 페이지 드래그와 같은 기본적인 동작을 수행한다.

대부분의 기존의 스마트 단말은 일반적으로 싱글-포인트 또는 멀티포인트 터치를 입력하는 터치 제스처 인식을 채택하거나 터치스크린 상에서의 손가락 또는 손바닥의 동작이 터치스크린을 통해 감지되고 대응하는 동작 명령에 맵핑된다. 그렇지만, 이러한 입력 방식은 사용자가 터치스크린 상에서 손으로 동작을 수행해야 하며; 사용자에게는 많은 제약이 있고, 맨-머신 상호작용의 경험이 충분히 자연스럽지 않다.

종래의 터치 제스처 동작과 비교하여, 논-터치 제스처 동작, 및 특히 모바일 스마트 단말을 손이나 팔로 단말을 터치하지 않고 제어하는 것은 더 부드럽고 자연스런 경험을 달성할 수 있고 사용자가 스크린상에서 손으로 동작을 수행하는 불편한 경우(예를 들어, 사용자가 부엌에서 요리할 때나 겨울에 밖에 있을 때)의 시나리오에서 사용자를 매우 편하게 한다.

기존의 논-터치 제스처 인식 기술은 2차원 및 3차원 광 이미지 인식 방법 등을 주로 포함한다. 본 발명을 실시하는 중에, 발명자들은 종래기술은 알고리즘이 매우 복잡하고 전력 소비가 크며 스마트 단말의 하드웨어 구성상에 특별한 제약이 따른다는 것을 알고 있다. 스마트 단말은 기존의 스마트 단말의 하드웨어 구성에 기초한 소프트웨어로는 논-터치 제스처를 사용하여 간단하고 효과적으로 제어될 수 없다.

이를 감안하여, 본 발명의 실시예는 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법 및 장치를 제공하여, 기존의 스마트 단말의 하드웨어 구성에 기초한 소프트웨어를 통해 논-터치 제스처를 사용하여 간단하고 효과적으로 제어한다.

제1 관점에 따라, 본 발명의 실시예는 단말 기기를 제공한다. 단말 기기는, 포인트 광센서; 및 상기 포인트 광센서에 결합되어 있는 프로세서를 포함하며, 상기 포인트 광센서는, 논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지하고; 상기 감지된 가시광 강도 변동에 대응하는 복수의 광 강도 신호를 출력하도록 구성되어 있으며, 상기 프로세서는, 상기 복수의 광 강도 신호를 수신하고;
상기 복수의 광 강도 신호의 변화 패턴을 결정하고; 상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하며; 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하도록 구성되어 있다.
제2 관점에 따라, 본 발명의 실시예는 단말 기기를 제공한다. 상기 단말 기기는, 상기 단말 기기의 본체 상의 상이한 위치에 위치하는 제1 포인트 광센서 및 제2 포인트 광센서; 및 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 결합되어 있는 프로세서를 포함하며, 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서 각각은, 논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지하고; 상기 감지된 가시광 강도 변동에 대응하는 복수의 광 강도 신호를 출력하도록 구성되어 있으며; 상기 프로세서는, 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 광 강도 신호를 수신하고; 상기 광 강도 신호의 변화 패턴을 결정하고; 상기 변화 패턴에 기초하여, 상기 논-터치 사용자 제스처의 이동 방향을 식별하는 것을 포함하여, 상기 논-터치 사용자 제스처를 식별하며; 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하도록 구성되어 있다.
제3 관점에 따라, 본 발명의 실시예는 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공한다. 상기 단말 기기는 포인트 광센서를 포함한다. 상기 방법에서, 상기 단말 기기는 상기 포인트 광센서가 상기 논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지할 때 상기 포인트 광센서에 의해 출력된 복수의 광 강도 신호를 수신하고, 상기 복수의 광 강도 신호의 변화 패턴을 결정한다. 그런 다음, 상기 단말 기기는, 상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하고; 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행한다.
제4 관점에 따라, 본 발명의 실시예는 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공한다. 상기 단말 기기는, 상기 단말 기기의 본체 상의 상이한 위치에 위치하는 제1 포인트 광센서 및 제2 포인트 광센서를 포함한다. 상기 방법에서, 상기 단말 기기는, 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서가 상기 논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지할 때 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 광 강도 신호를 수신하고, 상기 광 강도 신호의 변화 패턴을 결정한다. 그런 다음, 상기 단말 기기는, 상기 변화 패턴에 기초하여, 상기 논-터치 사용자 제스처의 이동 방향을 식별하는 단계를 포함하는, 상기 논-터치 사용자 제스처를 식별하고, 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행한다.

삭제

전술한 기술적 솔루션은 다음과 같은 이점이 있다:

알고리즘 복잡도가 낮고, 전력 소비가 적고, 스마트 단말의 하드웨어 구성에 대한 특별한 조건이 없으며, 소프트웨어를 통해 단말 기기 상에서 간단하고 효과적으로 논-터치 제스처를 사용하여 단말 기기를 제어할 수 있으며 사용자 경험을 향상시킨다.

본 발명의 실시예의 기술적 솔루션을 더 명확하게 설명하기 위해, 이하에서는 실시예를 설명하는 데 필요한 첨부된 도면에 대해 간략하게 설명한다. 당연히, 이하의 실시예의 첨부된 도면은 본 발명의 일부의 실시예에 지나지 않는다.
도 1은 본 발명의 실시예 1에 대한 개략적인 흐름도이다.
도 2a는 본 발명의 실시예 2에 따른 스와이프 제스처에 대한 개략도이다.
도 2b는 본 발명의 실시예 2에 따른 스와이프 제스처에 의해 생성된 광 강도 변화 규칙에 대한 개략도이다.
도 3a는 본 발명의 실시예 3에 따른 상향 제스처에 대한 개략도이다.
도 3b는 본 발명의 실시예 3에 따른 상향 제스처에 의해 생성된 광 강도 변화 규칙에 대한 개략도이다.
도 4a는 본 발명의 실시예 3에 따른 압력 제스처에 대한 개략도이다.
도 4b는 본 발명의 실시예 3에 따른 압력 제스처에 의해 생성된 광 강도 변화 규칙에 대한 개략도이다.
도 5는 본 발명의 실시예 3에 따른 지속적인 압력 제스처, 상향 제스처, 및 그런 다음 압력 제스처에 의해 생성된 광 강도 변화 규칙에 대한 개략도이다.
도 6은 본 발명의 실시예 4에 따라 단말 기기가 2개의 광센서를 포함할 때 최대 수직 투사 거리를 지원하는 권장 배치 위치에 대한 개략도이다.
도 7은 본 발명의 실시예 4에 따라 단말 기기가 2개의 광센서를 포함할 때 최대 수평 투사 거리를 지원하는 권장 배치 위치에 대한 개략도이다.
도 8은 본 발명의 실시예 4에 따라 단말 기기가 3개의 광센서를 포함할 때 권장 배치 위치에 대한 개략도이다.
도 9a는 본 발명의 실시예 5에 따라 상이한 단말 애플리케이션에 대한 논-터치 제스터에 제어 동작을 맵핑하는 것에 대한 개략도이다.
도 9b는 본 발명의 실시예 5에 따라 상이한 단말 애플리케이션에 대한 논-터치 제스터에 다른 제어 동작을 맵핑하는 것에 대한 개략도이다.
도 10은 본 발명의 실시예 6에 따른 장치에 대한 개략도이다.
도 11은 본 발명의 실시예 6에 따른 다른 장치에 대한 개략적인 구조도이다.
도 12는 본 발명의 실시예 7에 따른 단말 장치에 대한 개략도이다.

본 발명의 실시예의 목적, 기술적 솔루션, 및 이점을 더 잘 이해할 수 있도록 하기 위해, 이하에서는 본 발명의 실시예의 첨부된 도면을 참조하여 본 발명의 실시예에 따른 기술적 솔루션에 대해 명확하고 상세히 설명한다.

실시예 1

본 발명의 실시예 1은 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공하며, 상기 방법은 하나 또는 복수의 광센서를 포함하는 단말 기기에 적용 가능하다. 본 실시예에서의 단말 기기는 스마트폰, 태블릿 컴퓨터, 노트북 컴퓨터 등이 될 수 있으며; 본 실시예에서의 광센서(근접센서라고도 한다)는 가시광 강도를 감지하는 센서이다. 광센서는 스마트폰이나 태블릿 컴퓨터에서 폭넓게 사용되고 있고, 현재, 대부분의 스마트 단말은 광센서를 구비하며 이 광센서는 이동전화의 전면 스크린의 상부, 태블릿 컴퓨터의 전면 스크린의 상부 또는 우측에 통상적으로 위치하며 단말 기기가 화면 밝기를 자동으로 조정하도록 주위의 가시광 강도를 감지하는 데 주로 사용된다. 예를 들어, 실외 사용자가 단말 기기를 낮에 사용할 때는, 화면 밝기가 자동으로 최대로 조정되어 강렬한 광에 저항하고, 사용자가 주위가 어두운 건물로 되돌아오면, 화면 밝기가 자동으로 감소한다.

도 1에 도시된 바와 같이, 본 발명의 실시예는 이하의 단계를 포함한다:

S11. 시간 주기 내의 광 강도 변화에 따라 광센서에 의해 출력되는 복수의 광 강도 신호를 수신하고 상기 광 강도 변화를 반영하며, 상기 광 강도 변화는 상기 논-터치 제스처에 의해 생성된다.

본 실시예에서, 시간 주기는 하나 이상의 논-터치 제스처를 완료하기 위한 지속시간일 수 있으며; 광 강도를 반영하는 광 강도 신호는 조명일 수 있으며, 이의 물리적 의미는 단위 면적에 조명되는 휘도 플럭스이고, 이 휘도 플럭스는 기준 광에 대한 인간의 눈의 감도를 사용하며; 조명의 단위는 평방 미터 당 루멘(Lm)이고, Lux라고도 하며, 1 Lux = 1 Lm/square meter이다.

S12. 출력된 복수의 광 강도 신호의 변화 규칙이 논-터치 제스처에 대응하는 사전설정된 변화 규칙을 준수하는지를 판정하고, 준수하면, 복수의 광 강도 신호에 대응하는 논-터치 제스처를 인식한다.

본 실시예에서, 복수의 광 강도 신호의 변화 규칙은 다음과 같다: 복수의 광 강도 신호에 의해 반영되는 (조명에 의해 정량화된) 광 강도는 시간 주기 동안 고(high)에서 저(low)로 변하거나, 시간 주기 동안 저에서 고로 변하거나, 시간 주기 동안 불변으로 유지되거나, 변화 규칙이 수 개의 변화 규칙성의 조합일 수 있다. 본 실시예에서, 논-터치 제스처는 스와이프 제스처, 올림 제스처, 압력 제스처, 또는 수 개의 제스처의 조합일 수 있으며, 스와이프 제스처는 상-스와이프 제스처, 하-스와이프 제스처, 좌-스와이프 제스처, 또는 우-스와이프 제스처를 포함할 수 있다. 논-터치 제스처에 대응하는 사전설정된 변화 규칙은 또한 사전에 다양한 제스처를 훈련함으로써 획득될 수 있다. 예를 들어, 스와이프 제스처가 사용되면, 동작 대상(예를 들어 손)이 광센서를 스와이프할 때, 광센서에 의해 출력되는 광 강도가 변하고(예를 들어, 광 강도는 고에서 저로 변하고, 그런 다음 저에서 고로 변한다); 이 경우, 변화 규칙은 기록될 수 있고, 논-터치 제스처에 대응하는 변화 규칙이 획득된다. 변화 규칙은 고정되어 있지 않고, 실제 사용 시에 조정될 수 있으며, 변화 규칙과 관련된 파라미터, 예를 들어, 광 강도 값 및 검출 시간이 조정된다는 것에 유의해야 한다. 특정한 조정 동안, 파라미터는 파라미터를 직접 입력하여 사용자가 조정하거나(구성 메뉴에 의해 수신하거나) 사용자가 학습에 의해 조정하거나, 실행 과정 중에 주위 광 강도에 따라 조정될 수 있거나 등등이다.

S13. 단말 애플리케이션에서, 인식된 논-터치 제스처에 대응하는 제어 동작을 실행한다.

본 실시예에서, 단말 애플리케이션은 전자책 읽기, 웹 페이지 브라우징, 픽처 브라우징, 음악 재생, 및 영상 재생과 같은 애플리케이션일 수 있다. 대응하는 제어 동작은 페이지 넘기기, 상하 끌어오기, 픽처 줌, 음량 조절, 재생 또는 일시정지 등일 수 있다. 특정한 동작 및 대응하는 애플리케이션은 여기서 제한되지 않으며, 예를 들어, 페이지 넘기기는 전자책, 브라우징 웹페이지, 및 픽처와 같은 애플리케이션에 관한 것일 수 있고, 재생 또는 일시정지는 음악 및 영상을 재생하는 것과 같은 애플리케이션에 관한 것일 수 있다. 본 실시예에서, 단말 애플리케이션을 위한 논-터치에 대응하는 제어 동작의 방법은 사전에 구성될 수도 있고 사용자에 의해 규정될 수도 있다.

또한, 본 발명의 실시예에서, 출력된 복수의 광 강도 신호의 변화 값이 논-터치 제스처에 대응하는 사전설정된 변화 값을 준수하는지를 판정하는 단계는 구체적으로:

광 강도 신호를 수신하는 동안, 최후에 또는 복수 회 수신되는 광 강도 신호에 따라, 광 강도의 변화가 논-터치 제스처에 대응하는 사전설정된 변화 값을 준수하는지를 판정하는 단계

를 포함한다. 수신하는 동안 처리하는 방법은 논-터치 제스처를 판정하고 가능한 빨리 대응하는 동작을 실행할 수 있다. 선택적으로, 본 실시예는 또한 광 강도 신호를 수신하고 버퍼링한 후, 광 강도의 변화가 논-터치 제스처에 대응하는 사전설정된 변화 규칙을 준수하는지를 판정하거나, 신호 중 일부를 버퍼링한 후 신호 중 일부를 판정한 다음, 수신하는 동안 처리하는 방법을 사용하여, 판정을 필요로 하는 남아 있는 신호를 판정할 수 있다.

또한, 단말의 흔들림 역시 제스처 동작을 부정확하게 촉발할 수 있는 광 변화를 야기할 수 있으며, 단말 기기의 흔들림으로 인해 오동작이 야기되는 것을 피하기 위해서는, 단말 기기가 현재 상대적으로 안정한 상태에 있는지를 먼저 판정해야 하며, 이에 의해 논-터치 제스처의 인식을 촉발할지를 판정한다. 본 발명의 실시예는 모션 센서 또는 방향 센서를 사용하여 단말 기기가 상대적으로 안정한 상태에 있는지를 판정하며, 제스처는 단말 기기가 상대적으로 안정한 상태에 있을 때에만 인식된다. 단말 기기가 상대적으로 안정한 상태에 있지 않으면, 수신된 광 강도의 변화 규칙이 논-터치 제스처에 대응하는 변화 규칙을 준수하는지를 판정하지 않아도 된다.

구체적으로, 단말 기기의 상태는 대부분의 현재의 단말 기기의 내장형 모션 센서(Motion Sensor) 또는 방향 센서(Orientation Sensor)에 의해 결정될 수 있으며, 여기서 모션 센서는 가속도계(Accelerometer), 선형 가속도계(linear Accelerometer), 중력 센서(Gravity Sensor), 자이로스코프(Gyroscope), 및 회전 벡터 센서(Rotation Vector Sensor)를 포함한다.

모션 센서의 출력은 단말 기기의 3개의 좌표축에 대응하는 움직임 고윳값, 예를 들어, 선형 가속도 및 각 가속도이며; 방향 센서는 3개의 좌표축을 따라 단말 기기의 회전 각을 출력하며; 단말 기기의 상태는 3차원 벡터 차이를 사용하여 시간 순서로 결정될 수 있다. 이하에서는 가속도계만을 예로 사용하여 판정하는 방법을 설명하며, 다른 모션 센서 또는 방향 센서를 사용하여 판정하는 방법은 유사하다.

가속도계를 사용하여 판정하는 방법은: 연속적인 시간 주기 내에서 수 개의 3-축 가속도 샘플 값의 벡터 차이를 계산하고, 이 시간 주기 내에서의 모든 벡터 차이가 임계값보다 작거나, 벡터값의 평균값이 임계값보다 작으면, 단말 기기는 상대적으로 안정한 상태에 있는 것으로 간주한다. 임계값은 센서의 감도 및 정밀도와 관련되어 있으며; 사용자가 약간 흔들면, 제스처 인식을 촉발하는 부정확한 판정에 대응하는 벡터 차이가 획득될 수 있고, 평균값은 통계값이 수 회 수집된 후 사용된다.

전술한 벡터 차이는 다음의 공식으로 표현되며:

여기서, (x_i, y_i, z_i)는 시간 T_i에서 가속도계에 의해 출력된 3-축 가속도 값이고, (x_i-1, y_i _-1, z_i _-1)는 시간 T_i _-1에서 가속도계에 의해 출력된 3-축 가속도 값이다.

바람직하게는, 판정 정확도를 높이기 위해, 전술한 복수의 센서를 동시에 사용하여 종합적으로 판정할 수 있다.

선택적으로, 제스처 인식 스위치가 설정될 수 있으며; 스위치가 턴 온되면, 논-터치 제스처의 인식이 촉발되고; 스위치가 턴 온되지 않으면, 논-터치 제스처의 인식은 촉발되지 않는다.

본 실시예는 광센서에 의해 출력되는 광 강도 신호의 변화를 판정함으로써 논-터치 제스처를 인식하므로, 복잡한 2차원 또는 3차원 광학 구성소자를 도입하지 않아도 되며, 간단하게 실행하면서도 사용자 경험을 향상시킬 수 있다.

실시예 2

본 실시예는 실시예 1에 기초하여 논-터치 제스처를 사용함으로써 단말 기기를 제어하는 방법을 제공하며, 여기서 구체적으로 방법은 스와이프 제스처를 사용하여 단말 기기를 제어한다.

본 실시예는 하나 이상의 광센서에 기초할 수 있다. 구체적으로, 하나의 광센서가 있을 때, 본 실시예에서, 논-터치 제스처에 대응하는 사전설정된 변화 규칙은: 광 강도가 감소하는 변화를 준수하고 그런 다음 제1 미리 정해진 시간 주기에서 증가하는 변화를 준수하는 것을 포함한다. 광센서에 의해 출력되는 그 획득된 복수의 광 강도 신호가 이 변화를 준수하면, 스와이프 제스처는 인식된다.

감소하는 변화는:

복수의 시간 강도 신호 중에서 제2 광 강도 신호에 의해 반영된 신호 강도가 제1 광 강도 신호에 의해 반영된 신호 강도보다 작다는 것을 포함하며, 감소는 제1 임계값보다 작지 않으며, 여기서 제1 광 강도 신호 및 제2 광 강도 신호는 복수의 시간 강도 신호 중 광 강도 신호이며, 제2 광 강도 신호를 수신하는 시간은 제1 광 강도 신호를 수신하는 시간보다 늦다.

증가하는 변화는:

복수의 시간 강도 신호 중에서 제3 광 강도 신호에 의해 반영된 신호 강도가 제2 광 강도 신호에 의해 반영된 신호 강도보다 크다는 것을 포함하며, 증가는 제2 임계값보다 작지 않으며, 여기서 제1 광 강도 신호 및 제2 광 강도 신호는 복수의 시간 강도 신호 중 광 강도 신호이며, 제3 광 강도 신호를 수신하는 시간은 제2 광 강도 신호를 수신하는 시간보다 늦다.

제1 임계값은 광센서가 스와이프 제스처를 생성하는 동작 대상에 의해 차단될 때의 광 강도의 통상적인 감소이고; 상기 제2 임계값은 광센서가 차단된 후 스와이프 제스처를 생성하는 동작 대상이 떠날 때의 광 강도의 통상적인 증가이다.

예를 들어, 광 강도 신호 A, B, C가 올림 차순으로 수신되고(설명의 편의상, 3개의 대문자는 광 강도의 값도 나타낸다); 3개의 신호의 광 강도가 다음의 조건: B < A, 감소는 제1 임계값보다 작지 않고, C > B, 증가는 제2 임계값보다 크지 않다는 것을 만족하면, 이것은 광 강도가 고에서 저로 변환 다음 저에서 고로 변하는 것을 나타내고, 스와이프 제스처가 발생한 것으로 간주될 수 있다. 물론, 실제로, 판정하는 것은 3개의 신호에 엄격하게 제한되지 않는다. 예를 들어, B 신호 후에 단시간 내에 B1 신호가 있으면, 저에서 고로 변하는 프로세스가 있는지는, 증가가 제2 임계값보다 작지 않은 상태에서, C가 B1보다 큰지를 판정하는 것에 의해 판정될 수도 있다. 이 경우, B1은 B를 밀접하게 따르기 때문에, 2개의 값은 매우 밀접한 것으로 간주될 수 있으며, B1은 B 대신 사용될 수 있다. 본 실시예의 최종 목적은 최상의 알고리즘을 사용하여 부정확한 판정을 감소하는 것이다. 당업자라면 본 실시예를 참조하여 판정하는 데 적절한 신호 값을 선택할 수 있을 것이며, 상세한 설명에 대해서는 여기서 하지 않는다.

구체적으로, 도 2a에 도시된 바와 같이, 스와이프 제스처는 광센서의 감지 범위에서 동작 대상의 단방향 스와이프를 말하며; 예를 들어, 단말의 전면은 광센서(21)를 포함하고, 동작 대상은 단말 화면을 가로질러 한쪽에서 다른 쪽으로 이동하며; 여기서, 동작 대상은 사용자의 손이나 팔을 포함하며, 광의 변화를 일으킬 수 있는 사용자 손 안의 다른 대상, 예를 들어, 책이나 펜을 포함하기도 한다. 스와이프 제스처로부터 화면까지의 광학적 거리는 약 5cm 내지 30cm이다. 광학적 거리 범위 정보는 화면에 표시되어 사용자에게 알려주며; 한편, 광학적 거리 범위는 또한, 실제의 광 강도에 따라 적응적으로 조정될 수 있는데, 예를 들어, 광이 약하면, 광학적 거리의 상한이 적절하게 감소될 수 있다.

도 2b에 도시된 바와 같이, 논-터치 제스처에 대응하는 사전설정된 변화 규칙은: 제1 미리 정해진 시간 주기에서, 광 강도는 고에서 저로 변하고, 그런 다음 저에서 고로 변하는 것을 포함한다. 구체적으로, 시간 T_i에서 수신된 광센서의 광 강도는 시간 T_i _-1에서 수신된 광 강도보다 작으며, 하강량(falling extent)은 설정된 제1 임계값 Dec_1보다 작지 않으며; 이 스테이지를 강하 스테이지라 하며; 시간 T_k ₊₁에서 수신된 광센서의 광 강도는 시간 T_k에서 수신된 광 강도보다 작으며, 상승량(rising extent)은 설정된 제1 임계값 Inc_1보다 작지 않으며; 이 스테이지를 상승 스테이지라 하며; 제1 임계값 및 제2 임계값은 오류를 감소하도록 설정되어 있으며; 판정하는 단계가 임계값을 설정하지 않고 수행되면, 약간의 광 강도 변화도 고에서 저로의 변화 그리고 저에서 고로의 변화로 간주되며(예를 들어, 단말 장치가 회전하는 것), 이에 의해 판정이 부정확하게 된다.

T_i _-1로부터 T_i ₊₁까지의 시간 길이가 설정된 제1 임계값 T_1보다 크지 않으면, 스와이프 액션이 발생한 것으로 간주한다.

구체적으로, 하강 스테이지에서, 하강량 Dec_i는 현재 시간에서의 광 강도 L_i와 이전 시간에서의 광 강도 L_i _-1 간의 감소의 절댓값으로 표현될 수 있으며, 즉,

Dec_i = L_i _-1 - L_i

하강량 Dec_i는 현재 시간에서의 광 강도 L_i와 이전 시간에서의 광 강도 L_i _-1 간의 감소의 비율로 표현될 수 있으며, 즉,

마찬가지로, 상승 스테이지에서, 상승량 Inc_i는 현재 시간에서의 광 강도 L_i와 이전 시간에서의 광 강도 L_i _-1 간의 증가의 절댓값으로 표현될 수 있으며, 즉,

Inc_i = L_k ₊₁ - L_k

상승량 Inc_i는 이전 시간에서의 광 강도에 대한, 현재 시간에서의 광 강도 L_i와 이전 시간에서의 광 강도 L_i _-1 간의 증가의 비율로 표현될 수 있으며, 즉,

바람직하게, 광 지터(light jitter)에 의해 야기되는 스와이프를 복수의 연속적인 스와이프로 부정확하게 판정하는 것을 회피하기 위해, 2개의 스와이프 제스처가 제2 미리 정해진 시간 주기 내에서 인식되면, 제2 인식된 스와이프 제스처에 대응하는 제어 동작은 촉발되지 않으며, 즉, 2개의 스와이프 간의 시간 간격은 임계값보다 크게 되도록 설정되며, 시간 간격 내의 복수의 스와이프는 하나의 스와이프 액션으로 간주된다.

구체적으로, 제1 임계값은 광센서가 스와이프 제스처를 생성하는 동작 대상에 의해 차단될 때의 광 강도의 통상적인 감소이고; 제2 임계값은 광센서가 차단된 후 스와이프 제스처를 생성하는 동작 대상이 떠날 때의 광 강도의 통상적인 증가이다. 제1 미리 정해진 시간 주기는 사용자가 스와이프 제스처를 완료할 때 소비되는 통상적인 시간 값이다. 제2 미리 정해진 시간 주기는 사용자에 의해 연속적으로 수행되는 2개의 스와이프 제스처 간의 시간 간격의 통상적인 값이다.

선택적으로, 동작 대상에 의해 차단되는 것은 동작 대상에 의해 완전하게 차단되는 것, 부분적으로 차단되는 것, 또는 동작 대상의 그림자에 의해 차단되는 것을 포함한다.

바람직하게, 주변의 주위 광 상태가 상이한 제스처 액션에 대응하는 광 변화 특성에 영향을 주는 것을 고려하여, 변화 규칙의 제1 임계값 및 제2 임계값은 주변의 주위 광 강도에 따라 적응적으로 조정될 수 있다. 예를 들어, 주변의 주위 광이 강하면, 제1 임계값 및 제2 임계값은 적절하게 증가되어 광 지터에 의해 야기되는 부정확한 판정을 감소시킨다.

제1 임계값, 제2 임계값, 제1 미리 정해진 시간 주기, 및 제2 미리 정해진 시간 주기는 또한 자기 학습에 의해 사용자의 제스처 습관으로부터 획득될 수 있으며, 이에 따라 단말 기기는 사용자의 동작 습관에 능동적으로 적응할 수 있다. 예를 들어, 제스처 인식 기능이 사용되기 전에, 사용자는 특정한 시간 주기 내에 수 개의 스와이프 제스처를 완료해야 한다. 광센서의 출력 값은 일련의 광 강도 신호를 포함한다. 특정한 시간 주기가 종료된 후, 모든 스와이프 제스처에 대응하는 제1 임계값 및 제2 임계값, 스와이프 제스처의 모든 지속시간, 및 2개의 스와이프 간의 시간 간격이 각각 평균화된다. 대응하는 평균값을 제1 임계값, 제2 임계값, 제1 미리 정해진 시간 주기, 및 제2 미리 정해진 시간 주기로 사용한다.

선택적으로, 제1 미리 정해진 시간 주기 및 제2 미리 정해진 시간 주기는 또한 사용자가 인터페이스상에서 선택한 제스처 동작 속도에 따라 적응적으로 조정될 수도 있다. 예를 들어, 3개의 동작 모드 "고속, 중간, 저속"이 인터페이스에 제공되어 사용자가 선택하며; 각각의 동작 모드는 시간 임계값의 집합에 대응하며; 사용자는 사용자의 동작 습관에 따라 모드를 선택한 후 사용된 시간 임계값을 결정한다. 일반적으로, 대응하는 시간 임계값은 그 선택된 제스처 동작 속도가 높을수록 작다.

실시예 3

본 실시예는 실시예 1에 기초하여 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공하며, 여기서 구체적으로 방법은 올림 제스처, 압력 제스처, 또는 적어도 하나의 올림 또는 압력 제스처를 사용하여 단말 기기를 제어한다.

도 3a에 도시된 바와 같이, 올림 제스처는 광센서로부터 멀어지는 방향으로 광센서의 감지 범위에서 동작 대상의 진행 움직임을 말하며; 도 4a에 도시된 바와 같이, 압력 제스처는 광센서로 다가오는 방향으로 광센서의 감지 범위에서 동작 대상의 진행 방향을 말하며, 여기서 동작 대상은 사용자의 손이나 팔을 포함하며, 과의 변화를 일으킬 수 있는 사용자 손 안의 동작 대상, 예를 들어, 책이나 펜을 포함하기도 한다.

광센서로부터 멀어지는 방향 또는 다가오는 방향은 주로 수직 방향을 말하며, 즉 광센서가 단말 화면의 전면에 위치할 때, 압력 또는 올림 제스처는 단말 화면에 수직인 방향을 따르는 위-아래 움직임을 말한다. 적어도 하나의 올림 또는 압력 제스처는 연속적인 올림 및 압력 액션의 조합일 수 있고, 압력 제스처 및 올림 제스처는 수회 반복적으로 수행될 수 있다.

또한, 올림을 위한 충분한 공간을 확보하기 위해, 바람직하게, 올림 제스처로부터 스크린까지의 초기 거리는 5cm이며, 허용오차는 ±2-3cm이다. 거리 정보는 화면에 표시되어 사용자에게 알려주며; 한편, 광학적 거리 범위는 또한 실제의 광 강도에 따라 적응적으로 조정될 수 있는데, 예를 들어, 광이 약하면, 광학적 거리가 적절하게 감소될 수 있다.

압력을 위한 충분한 공간을 확보하기 위해, 바람직하게, 압력 제스처로부터 스크린까지의 초기 거리는 5cm이며, 허용오차는 ±5cm이다. 거리 정보는 화면에 표시되어 사용자에게 알려주며; 한편, 광학적 거리 범위는 또한 실제의 광 강도에 따라 적응적으로 조정될 수 있는데, 예를 들어, 광이 약하면, 광학적 거리가 적절하게 감소될 수 있다.

본 실시예는 하나 이상의 광센서에 기초할 수 있으며; 여기서, 광센서가 하나인 경우, 올림 제스처, 압력 제스처, 및 적어도 하나의 올림 제스처 및 적어도 하나의 압력 제스처의 조합에 대응하는 변화 규칙성은 다음과 같다:

도 3b에 도시된 바와 같이, 올림 제스처에 대응하는 사전설정된 변화 규칙은: 광 강도가 제3 미리 정해진 시간 주기에서 감소하는 변화를 준수하고, 그런 다음 제1 미리 정해진 시간 주기에서 불변으로 유지하며, 그런 다음 제1 저-고 변화를 준수하며, 그런 다음 제2 미리 정해진 시간 주기에서 불변으로 유지하는 것을 포함한다.

구체적으로:

도 3b에 도시된 바와 같이, T_i _-1과 T_i 간의 지속시간은 제3 미리 정해진 시간 주기보다 길지 않으며; 시간 T_i에서 수신된 광센서의 광 강도는 시간 T_i _-1에서의 광 강도보다 작으며, 하강량은 설정된 제3 임계값 Dec_2보다 작지 않으며; 이 스테이지를 하강 스테이지라고 하며;

T_i와 T_k 사이에서, 여기서 T_k는 T_i보다 늦으며, T_k와 T_i 간의 지속시간은 T_2의 제1 미리 정해진 시간 주기보다 길지 않으며, 광 강도의 상승 변동량 또는 하강 변동량은 제4 임계값 Dec_Inc_1을 초과하지 않으며;

T_k와 T_m 사이에서, 광 강도는 올림 또는 압력 제스처에 따라 점차 증가하고, 여기서 시간 T_k에서의 광 강도 L_k는 기준 광 강도이며; 선택적으로, 기준 광 강도에 대한 시간 T_j에서의 광 강도 L_j의 비율은 계산될 수 있으며, 올림량 Pr로 표시되며, 여기서 T_j ∈ (T_k,T_m)이며,

;

선택적으로, 시간 T_j에서의 광 강도 L_j와 기준 광 강도 간의 차이는 계산될 수 있으며, 올림량 Pr로 표시되며, 여기서 T_j ∈ (T_k,T_m)이며,

Pr_j = L_j - L_k > 0;

T_m와 T_n 사이에서, 여기서 T_n은 T_m보다 늦으며, T_n과 T_m 간의 지속시간은 T_3의 제2 미리 정해진 시간 주기보다 길지 않으며, 광 강도는 기본적으로 불변으로 유지되며, 광 강도의 상승 변동량 또는 하강 변동량은 제4 임계값 Dec_Inc_1을 초과하지 않는다.

도 4b에 도시된 바와 같이, 압력 제스처에 대응하는 사전설정된 변화 규칙은: 광 강도가 제3 미리 정해진 시간 주기에서 감소하는 변화를 준수하고, 그런 다음 제1 미리 정해진 시간 주기에서 불변으로 유지하며, 그런 다음 제1 감소하는 변화를 준수하며, 그런 다음 제2 미리 정해진 시간 주기에서 불변으로 유지하는 것을 포함한다.

구체적으로:

도 4b에 도시된 바와 같이, T_i _-1과 T_i 간의 지속시간은 제3 미리 정해진 시간 주기보다 길지 않으며; 시간 T_i에서 수신된 광센서의 광 강도는 시간 T_i _-1에서의 광 강도보다 작으며, 하강량은 설정된 제3 임계값 Dec_2보다 작지 않으며; 이 스테이지를 하강 스테이지라고 하며;

T_k와 T_m 사이에서, 광 강도는 올림 또는 압력 제스처에 따라 점차 감소하고, 여기서 시간 T_k에서의 광 강도 L_k는 기준 광 강도이며; 선택적으로, 기준 광 강도에 대한 시간 T_j에서의 광 강도 L_j의 비율은 계산될 수 있으며, 압력량 Pr로 표시되며, 여기서 T_j ∈ (T_k,T_m)이며,

;

Pr_j = L_j - L_k < 0;

적어도 하나의 올림 제스처 및 적어도 하나의 압력 제스처에 대응하는 사전설정된 변화 규칙은: 광 강도가 감소하는 변화를 준수하고, 그런 다음 제1 미리 정해진 시간 주기에서 불변으로 유지하며, 그런 다음 고와 저 사이에서 변동하며, 그런 다음 제2 미리 정해진 시간 주기에서 불변으로 유지하는 것을 포함한다.

구체적으로, 감소하는 변동이 먼저 최초의 저-고 변화를 준수하고 그런 다음 최초의 감소하는 변화를 준수하면, 그 제스처는 올림-압력 제스처이고, 감소하는 변동이 먼저 최초의 감소하는 변화를 준수하고 그런 다음 최초의 저-고 변화를 준수하면, 그 제스처는 압력-올림 제스처이다.

올림 제스처 및 압력 제스처를 판정하는 방법과 마찬가지로, 단지 T_k와 T_m 사이에서, 광 강도는 제스처의 압력에 따라 점차 감소하거나, 또는 제스처의 올림에 따라 점차 증가한다. 변화는 반복적으로 그리고 지속적으로 변동한다. 선택적으로, 조정량 Pr은 계산될 수 있으며, 계산 방법은 올림량 및 압력량을 계산하는 방법과 동일하다.

도 5는 지속적인 액션 "압력-올림-압력"의 조합에 의해 생성되는 광 강도 변화를 도시하고 있으며; T_k와 T_m 간의 영역은 지속적인 액션 "압력-올림-압력"의 조합에 대한 유효 영역이다: 광 강도는 압력 액션이 T_k와 T_u 사이에서 발생할 때 제스처의 압력에 따라 점차 감소하며; 광 강도는 올림 액션이 T_u와 T_v 사이에서 발생할 때 제스처의 올림에 따라 점차 증가하며; 광 강도는 압력 액션이 T_v와 T_m 사이에서 다시 발생할 때 제스처의 압력에 따라 다시 점차 감소한다.

구체적으로, 제1 미리 정해진 시간 주기는 압력 제스처 또는 올림 제스처를 생성하는 동작 대상이 광센서를 차단하는 시간과 압력을 시작하거나 올림을 시작하는 시간 간의 통상적인 시간 간격 값이다. 제2 미리 정해진 시간 주기는 일정 시간 동안의 압력 또는 올림 후에 압력 제스처 또는 올림 제스처를 생성하는 동작 대상이 움직임이 없을 때 광센서가 차단되는 통상적인 지속시간 값이다. 제3 미리 정해진 시간 주기는 압력 제스처 또는 올림 제스처를 인식하는 검출 시간과 압력 제스처 또는 올림 제스처를 생성하는 동작 대상이 광센서를 차단하는 시간 사이의 통상적인 시간 간격 값이다. 실시예 2에서의 스와이프 제스처의 제1 미리 정해진 시간 주기는 본 실시예에서의 압력 제스처, 올림 제스처, 또는 적어도 하나의 압력 제스처 및 적어도 하나의 올림 제스처의 제1 미리 정해진 시간 주기보다 짧다. 제3 임계값은 광센서가 올림 제스처 또는 압력 제스처 또는 적어도 하나의 압력 제스처 및 적어도 하나의 올림 제스처를 생성하는 동작 대상에 의해 완전하게 차단될 때, 부분적으로 차단될 때, 또는 동작 대상의 그림자에 의해 차단될 때의 광 강도의 통상적인 감소이다. 제4 임계값은 올림 제스처 또는 압력 제스처 또는 적어도 하나의 올림 제스처 또는 적어도 하나의 압력 제스처를 포함하는 제스처를 생성하는 동작 대상에 의해 광센서가 차단된 후 그리고 올림 또는 압력을 시작하기 전에 움직임 없는 동작 대상에 의해 야기되는 광 강도의 통상적인 증가 또는 감소이다.

바람직하게, 주변의 주위 광 상태가 상이한 제스처 액션에 대응하는 광 변화 특성에 영향을 주는 것을 고려하여, 변화 규칙의 제3 임계값 및 제4 임계값은 주변의 주위 광 강도에 따라 적응적으로 조정될 수 있다. 예를 들어, 주변의 주위 광이 강하면, 제3 임계값은 적절하게 증가되어 광 지터에 의해 야기되는 부정확한 판정을 감소시킨다. 한편, 광센서에 의해 출력된 광 강도 값의 변도 범위는 광이 강할 때 크고, 제4 임계값은 압력 제스처 및 올림 제스처를 성공적으로 검출할 확률을 높이도록 높아질 수 있다.

제3 임계값, 제4 임계값, 제1 미리 정해진 시간 주기, 및 제2 미리 정해진 시간 주기는 또한 자기 학습에 의해 사용자의 제스처 습관으로부터 획득될 수 있으며, 이에 따라 단말 기기는 사용자의 동작 습관에 능동적으로 적응할 수 있다. 예를 들어, 제스처 인식 기능이 사용되기 전에, 사용자는 특정한 시간 주기 내에 수 개의 완전한 압력 제스처 및 올림 제스처를 완료해야 한다. 광센서의 출력 값은 일련의 광 강도 신호를 포함한다. 특정한 시간 주기가 종료된 후, 모든 압력 제스처 및 올림 제스처에 대응하는 제3 임계값, 제4 임계값, 제1 미리 정해진 시간 주기, 및 제2 미리 정해진 시간 주기가 각각 평균화된다. 대응하는 평균값을 제3 임계값, 제4 임계값, 제1 미리 정해진 시간 주기, 및 제2 미리 정해진 시간 주기로 사용한다.

선택적으로, 제1 미리 정해진 시간 주기 및 제2 미리 정해진 시간 주기는 또한 사용자가 인터페이스상에서 선택한 제스처 동작 속도에 따라 적응될 수도 있다. 예를 들어, 3개의 동작 속도 "고속, 중간, 저속"이 인터페이스에 제공되어 사용자가 선택하며; 각각의 모드는 시간 임계값의 집합에 대응하며; 사용자는 사용자의 동작 습관에 따라 모드를 선택한 후 사용된 시간 임계값을 결정한다. 일반적으로, 대응하는 시간 임계값은 그 선택된 제스처 동작 속도가 높을수록 작다.

실시예 4

본 실시예는 실시예 1 및 2에 기초하여, 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공한다. 또한, 단말이 복수의 광센서를 포함할 때, 복수의 광센서에 의해 출력된 복수 그룹의 광 강도 신호에 기초하여, 스와이프 제스처의 방향이 인식될 수 있다. 우-스와이프 제스처는 광센서의 감지 범위에서 동작 대상의 좌에서 우로 스와이프(left-to-right swipe)이며; 좌-스와이프 제스처는 광센서의 감지 범위에서 동작 대상의 우에서 좌로 스와이프(right-to-left swipe)를 포함하며; 하-스와이프 제스처는 광센서의 감지 범위에서 동작 대상의 위에서 아래로 스와이프(top-to-down swipe)를 포함하며; 그리고 상-스와이프 제스처는 광센서의 감지 범위에서 동작 대상의 아래에서 위로 스와이프(bottom-to-up swipe)를 포함한다. 동작 대상은 사용자의 손이나 팔을 포함하며, 광의 변화를 일으킬 수 있는 사용자 손 안의 다른 대상, 예를 들어, 책이나 펜을 포함하기도 한다.

실시예를 더 잘 설명하기 위해, 본 실시예에서의 모든 방향은 공통 사용 상태에서의 단말과 관련되어 있다. 예를 들어, 단말 기기는 9개의 물리적 숫자 키를 가지는 일반적인 이동 전화이고, 일반적으로 이동 전화의 공통 사용 상태는 사용자가 이동 전화를 잡고 있을 때 표시 화면이 있는 측면이 사용자의 얼굴을 향하고 있는 것이고; 이 경우, 이동 전화의 표시 화면 또는 수화기는 그 측면의 "상부 부분"에 위치하고, 9개의 물리적 숫자 키는 그 측면의 "하부 부분"에 위치하며, 숫자 키 1은 숫자 키 2의 "좌측"에 위치하고, 숫자 키 3은 숫자 키 2의 "우측"에 위치하는 것으로 간주할 수 있다.

구체적으로, 2개의 광센서를 예로 들어 보면, 도 6에서 2개의 광센서를 사용하여 좌-스와이프 또는 우-스와이프 제스처를 인식하며, 이 2개의 광센서의 바람직한 배치 위치는 이 2개의 광센서의 상대적 배치 위치 간의 수평 거리를 최대로 하는 위치이고, 여기서 수평 거리란 2개의 광센서가 x-축에 투사된 후의 상대적 거리를 말한다. 특정한 인식 방법은 제1 광센서(601) 및 제2 광센서(602)에 의해 스와이프 제스처를 검출하는 시간의 분배 특성에 따라 좌-스와이프 또는 우-스와이프 제스처를 판정하는 것이다. 구체적으로, 방법은 이하를 포함한다:

이동 전화의 좌측에 배치된 제1 광센서(601)가 시간 A에서 스와이프 제스처를 검출하고 이동 전화의 우측에 배치된 제2 광센서(602)가 시간 B에서 스와이프 제스처를 검출하면 제스처는 우-스와이프 제스처로 인식되며, 여기서 시간 B는 시간 A보다 느리고, 시간 A와 시간 B 간의 시간 차는 제2 미리 정해진 시간 주기보다 크지 않다.

이와는 달리, 이동 전화의 우측에 배치된 제2 광센서(602)가 시간 A에서 스와이프 제스처를 검출하고 이동 전화의 좌측에 배치된 제1 광센서(601)가 시간 B에서 스와이프 제스처를 검출하면 제스처는 좌-스와이프 제스처로 인식되며, 여기서 시간 B는 시간 A보다 느리고, 시간 A와 시간 B 간의 시간 차는 제2 미리 정해진 시간 주기보다 크지 않다.

구체적으로, 2개의 광센서를 예로 들어 보면, 도 7에서 2개의 광센서를 사용하여 상-스와이프 또는 하-스와이프 제스처를 인식하며, 이 2개의 광센서의 바람직한 배치 위치는 이 2개의 광센서의 상대적 배치 위치 간의 수직 거리를 최대로 하는 위치이고, 여기서 수직 거리란 2개의 광센서가 y-축에 투사된 후의 상대적 거리를 말한다. 특정한 인식 방법은 제1 광센서(701) 및 제2 광센서(702)에 의해 스와이프 제스처를 검출하는 시간의 분배 특성에 따라 상-스와이프 또는 하-스와이프 제스처를 판정하는 것이다. 구체적으로, 방법은 이하를 포함한다:

이동 전화의 상측에 배치된 제1 광센서(701)가 시간 A에서 스와이프 제스처를 검출하고 이동 전화의 하측에 배치된 제2 광센서(702)가 시간 B에서 스와이프 제스처를 검출하면 제스처는 하-스와이프 제스처로 인식되며, 여기서 시간 B는 시간 A보다 느리고, 시간 A와 시간 B 간의 시간 차는 제2 미리 정해진 시간 주기보다 크지 않다.

이와는 달리, 이동 전화의 하측에 배치된 제2 광센서(702)가 시간 A에서 스와이프 제스처를 검출하고 이동 전화의 상측에 배치된 제1 광센서(701)가 시간 B에서 스와이프 제스처를 검출하면 제스처는 상-스와이프 제스처로 인식되며, 여기서 시간 B는 시간 A보다 느리고, 시간 A와 시간 B 간의 시간 차는 제2 미리 정해진 시간 주기보다 크지 않다.

제2 미리 정해진 시간 주기는 제1 광센서에 의해 출력된 복수의 광 강도 신호에 대응하는 제1 스와이프 제스처를 인식하는 제1 시간과 제2 광센서에 의해 출력된 복수의 광 강도 신호에 대응하는 제2 스와이프 제스처를 인식하는 제2 시간 사이의 통상적인 시간 간격 값이다.

선택적으로, 제2 미리 정해진 시간 주기는 상이한 기기의 크기, 광센서의 배치 위치, 및 사용자의 습관에 따라 조정될 수 있다. 예를 들어, 제2 미리 정해진 시간 주기는 기기의 크기가 클 때 또는 2개의 광센서 간의 수평 거리 또는 수직 거리가 배치 위치로 인해 멀 때 적절하게 증가될 수 있다. 한편, 사용자는 또한 상이한 동작 속도를 선택할 수 있으며; 사용자가 선택한 동작 속도가 고속일 때, 제2 미리 정해진 시간 주기는 적절하게 감소될 수 있다.

선택적으로, 상이한 광센서에 의해 출력된 광 강도 신호에 의해 반영되는 광 강고에 따라 스와이프 제스처가 각각 인식될 때, 상이한 광센서에 대응하는 제1 시간 주기는 동일한 값 또는 상이한 값에 구성될 수 있다.

또한, 3개의 광센서를 예로 들어 보면, 도 8에서 3개의 광센서를 사용하여 좌-스와이프 또는 우-스와이프 또는 상-스와이프 또는 하-스와이프 제스처를 인식하며, 이 3개의 광센서의 바람직한 배치 위치는 이 3개의 광센서 중 2개의 인접하는 광센서 간의 수직 거리 및 수평 거리를 같게 하거나 최대로 하는 위치이다. 특정한 인식 방법은 제1 광센서(801), 제2 광센서(802), 및 제3 광센서(803)에 의해 스와이프 제스처를 검출하는 시간의 분배 특성에 따라 좌-스와이프 또는 우-스와이프 또는 상-스와이프 또는 하-스와이프 제스처를 판정하는 것이다. 구체적으로, 방법은 이하를 포함한다:

3개의 광센서가 스와이프 제스처를 인식하는 시간 순서가 광센서(801), 광센서(802), 및 광센서(803)이면 스와이프 제스처는 우-스와이프 제스처로 인식되고, 광센서(801)와 광센서(802)가 스와이프 제스처를 검출하는 시간차 및 광센서(802)와 광센서(803)가 스와이프 제스처를 검출하는 시간차 모두는 시간 임계값 T_6보다 작다. 마찬가지로, 3개의 광센서가 스와이프 제스처를 인식하는 시간 순서가 광센서(803), 광센서(802), 및 광센서(801)이면 스와이프 제스처는 좌-스와이프 제스처로 인식되고, 광센서(802)와 광센서(803)가 스와이프 제스처를 검출하는 시간차 및 광센서(801)와 광센서(802)가 스와이프 제스처를 검출하는 시간차 모두는 시간 임계값 T_6보다 작다.

3개의 광센서가 스와이프 제스처를 인식하는 시간 순서가 광센서(802), 광센서(801), 및 광센서(803)이면 스와이프 제스처는 상-스와이프 제스처로 인식되는 것이 고려되고, 광센서(802)와 광센서(801)가 스와이프 제스처를 검출하는 시간차 및 광센서(801)와 광센서(803)가 스와이프 제스처를 검출하는 시간차 모두는 시간 임계값 T_7보다 작다. 마찬가지로, 3개의 광센서가 스와이프 제스처를 인식하는 시간 순서가 광센서(803), 광센서(801), 및 광센서(802)이면 스와이프 제스처는 하-스와이프 제스처로 인식되고, 광센서(802)와 광센서(801)가 스와이프 제스처를 검출하는 시간차 및 광센서(801)와 광센서(803)가 스와이프 제스처를 검출하는 시간차 모두는 시간 임계값 T_7보다 작다.

단일의 광센서에 의해 출력된 광 강도 신호를 사용하여 스와이프 제스처를 인식하는 방법은 실시예 2에서의 방법과 동일하다.

선택적으로, 시간 임계값 T_6 및 T_7은 상이한 기기의 크기, 기기 유형, 및 사용자의 습관에 따라 조정될 수 있다. 예를 들어, 기기의 크기가 크면, T_6 및 T_7은 적절하게 증가될 수 있다. 단말 기기가 세로 길이가 가로 길이보다 긴 스마트폰이면, T_6은 T_7보다 작게 되도록 설정되며; 단말 기기가 세로 길이가 가로 길이보다 짧은 태블릿 컴퓨터이면, T_7은 T_6보다 작게 되도록 설정된다. 한편, 사용자는 또한 동작 속도를 다르게 선택할 수 있으며; 사용자가 선택한 동작 속도가 고속이면, T_6 및 T_7은 적절하게 감소될 수 있다.

또한, 본 실시예에서, 압력 제스처 액션 및 올림 제스처 액션을 인식하는 정확도를 높이기 위해 복수의 광센서를 구성할 수 있다. 구체적으로, 압력 제스처, 올림 제스처, 및 적어도 하나의 올림 제스처 및 적어도 하나의 압력 제스처의 조합은 하나 이상의 광센서에 의해 출력된 광 강도 신호에 따라 종합적으로 판정된다. 제스처에 관한 설명에 대해서는 실시예 3을 참조하면 된다.

올림 제스처에 대응하는 사전설정된 변화 규칙은:

A개의 광센서에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 고에서 저로 감소하는 변화 규칙을 각각 준수하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며; 그런 다음 B개의 광센서 각각에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 최초의 저-고 변화 규칙을 각각 준수하고; 그런 다음 상기 B개의 광센서 중 적어도 하나에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 제2 미리 정해진 시간 주기 동안 계속 불변으로 각각 유지하는 단계를 포함하며, 여기서, N, A, 및 B는 1보다 큰 정수이고, A는 N보다 크지 않지만 제1 임계값보다 작지 않으며, A개의 광센서는 N개의 광센서 중 A개의 광센서이고, B개의 광센서는 A개의 광센서 중 B개의 광센서이며, B는 A보다 크지 않지만 제2 임계값보다 작지 않다.

압력 제스처에 대응하는 사전설정된 변화 규칙은:

A개의 광센서에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 고에서 저로 감소하는 변화 규칙을 각각 준수하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며; 그런 다음 B개의 광센서 각각에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 최초의 감소하는 변화 규칙을 각각 준수하고; 그런 다음 상기 B개의 광센서 중 적어도 하나에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 제2 미리 정해진 시간 주기 동안 계속 불변으로 각각 유지하는 단계를 포함하며, 여기서, N, A, 및 B는 1보다 큰 정수이고, A는 N보다 크지 않지만 제1 임계값보다 작지 않으며, A개의 광센서는 N개의 광센서 중 A개의 광센서이고, B개의 광센서는 A개의 광센서 중 B개의 광센서이며, B는 A보다 크지 않지만 제2 임계값보다 작지 않다.

적어도 하나의 압력 제스처 및 적어도 하나의 올림 제스처에 대응하는 사전설정된 변화 규칙은:

A개의 광센서에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 고에서 저로 감소하는 변화 규칙을 각각 준수하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며; 그런 다음 B개의 광센서 각각에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 고와 저 사이에서 변동하며; 상기 B개의 광센서 중 적어도 하나에 의해 출력된 광 강도 신호에 의해 반영되는 광 강도가 제2 미리 정해진 시간 주기 동안 계속 불변으로 각각 유지하는 단계를 포함하며, 여기서, N, A, 및 B는 1보다 큰 정수이고, A는 N보다 크지 않지만 제1 임계값보다 작지 않으며, A개의 광센서는 N개의 광센서 중 A개의 광센서이고, B개의 광센서는 A개의 광센서 중 B개의 광센서이며, B는 A보다 크지 않지만 제2 임계값보다 작지 않다.

선택적으로, 제1 임계값은 N/2보다 작지 않으며, 제2 임계값은 A/2보다 작지 않다.

구체적으로, 감소하는 변화, 제1 미리 정해진 시간 주기 동안 불변으로 유지하는 단계, 제2 미리 정해진 시간 주기 동안 불변으로 유지하는 단계, 최초의 저-고 변화, 제1 감소하는 변화, 및 고와 저 사이에서의 변동에 대한 설명에 대해서는, 실시예 3을 참조하면 된다.

또한, 실시예 3에 기초하여, B개의 광센서에 의해 출력된 그 수신된 복수의 광 강도 신호에 따라, 제스처의 올림량 및 압력량이 각각 계산되며, 가중 합 계산을 수행하여 종합적인 올림량 및 압력량을 획득한다. 구체적으로, 압력량 Pr을 예로 하면, 공식은 다음과 같다:

여기서, Pr_j는 j(j <= B)번째 광센서의 압력량이고, k_j는 대응하는 가중 인자이며, k_j는 각각의 광센서의 파라미터, 예를 들어 정확도 및 감도에 따라 선택될 수 있다.

또한, B개의 광센서의 기준 광 강도에 대해 가중 평균을 수행하여 평균 기준 광 강도 L_BL을 획득하고; 그런 다음 B개의 광센서의 현재의 광 강도에 대해 가중 평균을 수행하여 현재의 평균 광 강도 L_avg를 획득하며; 그 후, 압력량 Pr은 평균 기준 광 강도와 현재의 평균 광 강도 간의 비율 도는 차이에 따라 획득된다. 예를 들어, 기준 광 강도 및 현재의 광 강도에 관한 설명에 대해서는, 실시예 3을 참조하면 되며, 즉,

또는

Pr = L_avg - L_BL

이며, 여기서

은 i(i <= B)번째 광센서의 기준 광 강도이고, Lⁱ는 i(i <= B)번째 광센서의 현재의 광 강도이며, p_i 및 q_j는 대응하는 가중 인자이다. 가중 인자는 각각의 광센서의 파라미터, 즉 정확도 및 감도에 따라 선택될 수 있다.

실시예 5

본 실시예는 전술한 실시예들에 기초하여 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법을 제공하며; 또한 인식된 논-터치 제스처에 대응하는 제어 동작을 실행할 때, 상기 방법은 특정한 제어 동작을 상이한 단말 애플리케이션에서의 인식된 논-터치 제스처에 맵핑하는 것을 포함한다. 제스처 액션의 맵핑은 상이한 단말 애플리케이션에 따라 변화될 수 있다. 예를 들어, 도 9a는 4가지 애플리케이션 시나리오, 즉, 전자책, 픽처 브라우징, 음악 재생 및 영상 재생에서 제어 동작을 스와이프 제스처, 압력 제스처 및 올림 제스처에 바람직하게 맵핑하는 것을 열거한다. 도 9b는 픽처 브라우징, 음악 재생, 영상 재생, 및 웹 페이지 브라우징의 애플리케이션 시나리오에서 상-하-좌-우 스와이프 제스처의 바람직한 맵핑을 도시한다. 제스처 액션의 맵핑은 애플리케이션 시나리오에서 사전설정될 수 있으며, 사용자에 의해 규정될 수 있고 사용자의 선호에 따라 조정될 수도 있다.

또한, 압력 제스처에 대응하는 압력량을 사용하여 픽처 브라우징의 줌-아웃 비율을 실시간으로 조정하거나, 음악을 재생하는 동안 음량 감소 비율을 조정할 수 있다. 예를 들어, 사용자가 픽처 브라우징 프로세스에서 압력 제스처를 사용하고 압력량이 Pr = 0.5 (ratio)이면, 표시된 픽처 크기는 줌 아웃되어 원래의 픽처 크기의 0.5배로 된다. 일반적으로, 압력 제스처 프로세스에서의 Pr은 시간이 지남에 따라 천천히 감소하는 값이고, 점진적 줌 아웃의 애니메이션 효과는 Pr을 통해 픽처 표시 크기를 제어함으로써 이를 수 있다.

마찬가지로, 올림 제스처에 대응하는 올림량을 사용하여 픽처 브라우징의 줌-인 비율을 실시간으로 조정하거나, 음악을 재생하는 동안 음량 증가 비율을 조정할 수 있다. 예를 들어, 사용자가 픽처 브라우징 프로세스에서 올림 제스처를 사용하고 올림량이 Lr = 2이면, 표시된 픽처 크기는 줌 아웃되어 원래의 픽처 크기의 2배로 된다. 일반적으로, 올림 제스처 프로세스에서의 Lr은 시간이 지남에 따라 천천히 증가하는 값이고, 점진적 줌 인의 애니메이션 효과는 Lr을 통해 픽처 표시 크기를 제어함으로써 이를 수 있다.

압력 제스처 및 올림 제스처의 연속적인 액션의 조합을 사용하여 연속적인 픽처 줌 또는 음량 조절 동작을 촉발할 수 있으며, 사용자가 반복적인 미세 조정을 통해 픽처를 적절한 크기로 조정할 수 있게 해주거나 음량을 적절한 값으로 조정할 수 있게 해준다. 예를 들어, 사용자가 "압력-올림-압력" 제스처를 완료하고 대응하는 조정량 Ar이 "0.5-0.7-0.6" (ratio)이면, 표시된 픽처 크기는 먼저 원래의 픽처 크기의 0.5로 줌아웃 되고, 그런 다음 0.7배로 줌인 되며, 그런 다음 0.6배로 줌아웃 되어, 연속적인 줌 애니메이션 효과를 형성한다.

당업자라면 전술한 실시예에서 특정한 실행 동안 복수의 논-터치 제스처를 동시에 인식할 수 있으며, 예를 들어, 스와이프뿐만 아니라 올림 및 압력도 인식할 수 있다는 것을 이해할 수 있을 것이며, 전술한 기능들을 동시에 실행하는 특정한 솔루션은 당업자에게는 알려진 기술이므로 여기서 더 설명하지 않는다.

실시예 6

본 실시예는 전술한 실시예들에 기초하여 논-터치 제스처를 사용하여 단말 을 제어하는 장치에 대해 개시하며, 상기 장치는 하나 이상의 광센서를 포함하는 단말 기기에 적용 가능하다. 도 10에 도시된 바와 같이, 장치(100)는 구체적으로:

시간 주기 내의 광 강도 변화에 따라 광센서에 의해 출력되는 복수의 광 강도 신호를 수신하고 상기 광 강도 변화를 반영하도록 구성되어 있는 수신 유닛(101) - 상기 광 강도 변화는 상기 논-터치 제스처에 의해 생성됨 - ;

상기 수신 유닛에 의해 수신되는 복수의 광 강도 신호의 변화 규칙이 상기 논-터치 제스처에 대응하는 사전설정된 변화 규칙을 준수하는지를 판정하고, 준수하면, 상기 복수의 광 강도 신호에 대응하는 논-터치 제스처를 인식하도록 구성되어 있는 제스처 인식 유닛(102); 및

단말 애플리케이션에서, 상기 제스처 인식 유닛에 의해 인식된 논-터치 제스처에 대응하는 제어 동작을 실행하도록 구성되어 있는 실행 유닛(103)

을 포함한다.

단말 기기가 하나의 광센서를 포함할 때, 제스처 인식 유닛은 스와이프 제스처, 올림 제스처, 압력 제스처, 및 적어도 하나의 올림 제스처 및 적어도 하나의 압력 제스처를 인식하도록 구성될 수 있다.

단말 기기가 N개의 광센서를 포함할 때, 제스처 인식 유닛은 상 제스처, 하 제스처, 좌 제스처, 및 우 제스처, 및 적어도 하나의 올림 제스처 및 적어도 하나의 압력 제스처를 인식하도록 구성될 수 있다.

단말 기기가 모션 센서 또는 방향 센서를 포함할 때, 상기 장치는: 상기 모션 센서 또는 상기 방향 센서에 의해 출력된 신호 값을 수신하고, 이동 전화가 상대적으로 안정한 상태에 있는지를 판정하며, 그리고 안정한 상태에 있으면, 출력된 복수의 광 강도 신호의 변화 값이 논-터치 제스처에 대응하는 사전설정된 변화 값을 준수하는지를 판정하는 단계를 촉발하도록 구성되어 있는 이동 전화 상태 판정 유닛(111)을 더 포함한다.

선택적으로, 장치는 올림 제스처의 올림량을 획득하도록 구성되어 있는 올림량 획득 유닛(112), 및 압력 제스처의 압력량을 획득하도록 구성되어 있는 압력량 획득 유닛(113)을 더 포함한다.

선택적으로, 제스처 인식 유닛은 광센서에 의해 출력된 광 강도 신호 중 하나가 수신될 때마다, 상기 수신 유닛에 의해 최후에 또는 복수 회 수신되는 광센서에 의해 출력된 하나 이상의 광 강도 신호에 따라, 상기 출력된 복수의 광 강도 신호의 변화 값이 논-터치 제스처에 대응하는 사전설정된 변화 값을 준수하는지를 판정하도록 구성되어 있는 실시간 제스처 인식 서브유닛(114)을 포함한다.

선택적으로, 실행 유닛은:

픽처 애플리케이션 또는 전자책 애플리케이션에서, 상-스와이프 제스처, 또는 하-스와이프 제스처, 또는 좌-스와이프 제스처, 또는 우-스와이프 제스처에 대응하는 상 페이지 넘기기 또는 끌기, 또는 하 페이지 넘기기 또는 끌기, 또는 좌 페이지 넘기기 또는 끌기, 또는 우 페이지 넘기기 또는 끌기의 제어 동작을 실행하도록 구성되어 있는 스와이프 제스처 실행 서브유닛(115);

픽처 애플리케이션 또는 전자책 애플리케이션에서 압력 제스처 및/또는 올림 제스처에 대응하는 줌 동작을 실행하도록 구성되어 있는 올림 또는 압력 제스처 실행 서브유닛(116);

픽처 애플리케이션 또는 전자책 애플리케이션에서, 올림량 획득 유닛에 의해 획득되는 올림 제스처의 올림량에 따라, 올림 제스처에 대응하는 줌 동작을 실행하도록 구성되어 있는 제1 줌 실행 서브유닛(117) - 줌 비율은 올림량 획득 유닛에 의해 획득된 올림량에 따라 줌 동작이 실행될 때 판정됨 - ; 및

픽처 애플리케이션 또는 전자책 애플리케이션에서, 압력량 획득 유닛에 의해 획득되는 압력 제스처의 압력량에 따라, 압력 제스처에 대응하는 줌 동작을 실행하도록 구성되어 있는 제2 줌 실행 서브유닛(118) - 여기서 줌 비율은 줌 동작이 실행될 때 압력량에 따라 결정됨 -

을 포함한다.

본 실시예에서의 장치 내의 유닛의 분할은 유닛의 논리적 분할이며 실제의 제품에서 일대일 관계로 이러한 유닛들에 대응하는 물리적 유닛이 있다는 것을 이해해야 한다. 유닛의 특정한 기능 실행에 대해서는, 전술한 실시예에서의 솔루션을 참조할 수 있으며, 특정한 제스처를 검출하는 방법 역시 사전설정된 규칙성에 기초하여 본 실시예에 적용 가능하다.

실시예 7

전술한 실시예에 기초하여, 본 실시예는 단말 장치(120)를 개시하며, 도 12에 도시된 바와 같이, 프로세서(121), 메모리(122), 및 광센서(123)를 포함하며, 여기서:

광센서(123)는 광 강도 변화를 반영하는 복수의 광 강도 신호를 출력하도록 구성되어 있으며, 하나 이상의 광센서가 포함될 수 있으며;

메모리(122)는 전술한 실시예에서 논-터치 제스처를 사용하여 단말 기기를 제어하는 방법에서 사용되는 응용 프로그램을 저장하도록 구성되어 있으며;

프로세서는 메모리 내의 프로그램을 읽어내고, 다음의 단계:

시간 주기 내의 광 강도 변화에 따라 광센서에 의해 출력되는 복수의 광 강도 신호를 수신하고 상기 광 강도 변화를 반영하는 단계 - 상기 광 강도 변화는 상기 논-터치 제스처에 의해 생성됨 - ;

상기 복수의 광 강도 신호의 변화 규칙이 상기 논-터치 제스처에 대응하는 사전설정된 변화 규칙을 준수하는지를 판정하고, 준수하면, 상기 복수의 광 강도 신호에 대응하는 논-터치 제스처를 인식하는 단계; 및

단말 애플리케이션에서, 상기 인식된 논-터치 제스처에 대응하는 제어 동작을 실행하는 단계

를 실행하도록 구성되어 있다.

또한, 단말 기기는 모션 센서(125) 또는 방향 센서(124)를 포함할 수 있으며; CPU는 메모리에 저장되어 있는 응용 프로그램을 실행하는 동안 이하의 단계: 모션 센서(125) 또는 방향 센서(124)에 따라, 이동 전화가 상대적으로 안정한 상태에 있는지를 판정하는 단계, 및 안정한 상태에 있지 않으면, 출력된 복수의 광 강도 신호의 변화 값이 논-터치 제스처에 대응하는 사전설정된 변화 값을 준수하는지를 판정하는 단계를 촉발하지 않는 단계; 또는 안정한 상태에 있으면, 상기 판정하는 단계를 촉발하는 단계를 실행한다.

본 실시예에서, 메모리에 저장되어 있는 응용 프로그램이 CPU에 의해 실행될 때, 응용 프로그램은 전술한 실시예에서 다양한 논-치 제스처를 인식하는 단계 및 다른 프로세싱 단계(예를 들어 압력량을 획득하는 단계)도 완료하며, 이에 대해서는 여기서 다시 상세히 설명하지 않는다. 한편, 실시예에서 제공하는 솔루션에 기초하여 프로그래밍을 수행하는 방법은 당업자에게 알려진 기술이며, 이에 대해서는 여기서 다시 상세히 설명하지 않는다.

전술한 실시예의 설명을 통해, 당업자라면 본 발명은 하드웨어에 의해 또는 펌웨어에 의해 또는 둘의 조합에 의해 실현될 수 있다는 것을 확실하게 이해할 수 있을 것이다. 본 발명이 소프트웨어에 의해 실현될 때, 전술한 기능들은 컴퓨터 판독 가능형 매체에 저장될 수 있거나 전송을 위한 컴퓨터 판독 가능형 매체 상에서 하나 또는 복수의 명령 또는 코드의 역할을 할 수 있다. 컴퓨터 판독 가능형 매체는 컴퓨터 저장 매체를 포함한다. 저장 매체는 컴퓨터가 액세스할 수 있는 임의의 이용 가능한 매체일 수 있다. 예를 들어, 컴퓨터 판독 가능형 매체는 RAM, ROM, EEPROM, 광디스크, 또는 그외 광디스크 저장 및 자기디스크 저장 매체 또는 그외 자기 저장 장치를 포함하거나, 또는 명령 또는 데이터 구조 형태를 가지는 원하는 프로그램 코드를 내장 또는 저장하는 데 사용될 수 있는 임의의 그외 컴퓨터 액세스 가능형 매체를 포함할 수 있으나, 이에 제한되지 않는다.

요컨대, 전술한 상세한 설명은 단지 본 발명의 예시적 실시예이며, 본 발명의 보호 범위를 제한하려는 것은 아니다.

Claims

단말 기기로서,
포인트 광센서; 및
상기 포인트 광센서에 결합되어 있는 프로세서를 포함하며,
상기 포인트 광센서는,
논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지하고;
상기 감지된 가시광 강도 변동에 대응하는 복수의 광 강도 신호를 출력하도록 구성되어 있으며,
상기 프로세서는,
상기 복수의 광 강도 신호를 수신하고;
상기 복수의 광 강도 신호의 변화 패턴을 결정하고;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하도록 구성되어 있는, 단말 기기.
제1항에 있어서,
상기 복수의 광 강도 신호의 변화 패턴을 결정하는 과정에서 상기 프로세서는,
상기 복수의 광 강도 신호의 변화 패턴이 고저(high-low) 강도 변화 규칙을 준수하는 것으로 결정하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며, 그런 다음 저고(low-high) 강도 변화 규칙을 준수하도록 구성되어 있으며;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 과정에서 상기 프로세서는,
상기 논-터치 사용자 제스처가 올림 제스처(uplift gesture)인 것을 식별하도록 구성되어 있으며, 상기 올림 제스처는 상기 포인트 광센서로부터 멀어지는 방향으로 상기 포인트 광센서의 감지 범위 내의 동작 대상의 진행 움직임을 포함하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 과정에서 상기 프로세서는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 상기 올림 제스처에 대응하는 줌 동작을 실행하도록 구성되어 있는, 단말 기기.
제1항에 있어서,
상기 복수의 광 강도 신호의 변화 패턴을 결정하는 과정에서 상기 프로세서는,
상기 복수의 광 강도 신호의 변화 패턴이 제1 고저 강도 변화 규칙을 준수하는 것으로 결정하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며, 그런 다음 제2 고저 강도 변화 규칙을 준수하도록 구성되어 있으며;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 과정에서 상기 프로세서는,
상기 논-터치 사용자 제스처가 압력 제스처인 것을 식별하도록 구성되어 있으며, 상기 압력 제스처는 상기 포인트 광센서로 다가오는 방향으로 상기 포인트 광센서의 감지 범위 내의 동작 대상의 진행 움직임을 포함하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 과정에서 상기 프로세서는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 상기 압력 제스처에 대응하는 줌 동작을 실행하도록 구성되어 있는, 단말 기기.
단말 기기로서,
상기 단말 기기의 본체 상의 상이한 위치에 위치하는 제1 포인트 광센서 및 제2 포인트 광센서; 및
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 결합되어 있는 프로세서
를 포함하며,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서 각각은,
논-터치 사용자 제스처에 의해 생성된 가시광 강도 변동을 감지하고;
상기 감지된 가시광 강도 변동에 대응하는 복수의 광 강도 신호를 출력하도록 구성되어 있으며;
상기 프로세서는,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 광 강도 신호를 수신하고;
상기 광 강도 신호의 변화 패턴을 결정하고;
상기 변화 패턴에 기초하여, 상기 논-터치 사용자 제스처의 이동 방향을 식별하는 것을 포함하여, 상기 논-터치 사용자 제스처를 식별하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하도록 구성되어 있는, 단말 기기.
제4항에 있어서,
상기 논-터치 사용자 제스처는 좌에서 우로 스와이프 제스처(left-to-right swipe gesture), 우에서 좌로 스와이프 제스처(right-to-left swipe gesture), 위에서 아래로 스와이프 제스처(top-to-down swipe gesture), 아래서 위로 스와이프 제스처(bottom-to-up swipe gesture), 올림 제스처(uplift gesture) 또는 압력 제스처(press gesture) 중 적어도 하나를 포함하는, 단말 기기.
제5항에 있어서,
상기 논-터치 사용자 제스처가 좌에서 우로 스와이프 제스처, 우에서 좌로 스와이프 제스처, 위에서 아래로 스와이프 제스처, 또는 아래서 위로 스와이프 제스처일 때, 상기 실행하는 것에서 상기 프로세서는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 좌에서 우로 스와이프 제스처, 또는 우에서 좌로 스와이프 제스처, 또는 위에서 아래로 스와이프 제스처, 또는 아래서 위로 스와이프 제스처에 대응하는 페이지 넘기기 또는 끌기(page flipping or dragging)의 제어 동작을 실행하도록 구성되는, 단말 기기.
제5항에 있어서,
상기 논-터치 사용자 제스처가 올림 제스처 또는 압력 제스처일 때, 상기 실행하는 것에서 상기 프로세서는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 올림 제스처 또는 압력 제스처에 대응하는 줌 동작을 실행하도록 구성되는, 단말 기기.
제4항에 있어서,
상기 단말 기기는 모션 센서 또는 방향 센서를 더 포함하며, 상기 모션 센서 또는 상기 방향 센서에 결합되어 있는 상기 프로세서는,
상기 모션 센서 또는 상기 방향 센서에 의해 출력된 신호 값을 수신하도록 추가로 구성되어 있고;
상기 결정하는 과정에서 상기 프로세서는,
상기 단말 기기가 상기 신호 값에 따라 상대적으로 안정한 상태에 있으면 상기 광 강도 신호의 변화 패턴을 결정하도록 구성되어 있는, 단말 기기.
제4항에 있어서,
상기 제1 포인트 광센서가 상기 제2 포인트 광센서의 좌측에 배치되어 있을 때, 상기 복수의 광 강도 신호의 변화 패턴을 결정하는 과정에서 상기 프로세서는,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 고저고(high-low-high) 강도 변경 규칙을 각각 준수하는 것으로 결정하도록 구성되어 있으며;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 과정에서 상기 프로세서는,
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이전에 결정되면 상기 논-터치 사용자 제스처가 좌에서 우로 스와이프 제스처인 것으로 식별하거나; 또는
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이후에 결정되면 상기 논-터치 사용자 제스처가 우에서 좌로 스와이프 제스처인 것으로 식별하도록 구성되어 있는, 단말 기기.
제4항에 있어서,
상기 제1 포인트 광센서가 상기 제2 포인트 광센서의 위에 배치되어 있을 때, 상기 복수의 광 강도 신호의 변화 패턴을 결정하는 과정에서 상기 프로세서는,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 고저고 강도 변경 규칙을 각각 준수하는 것으로 결정하도록 구성되어 있으며;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 과정에서 상기 프로세서는,
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이전에 결정되면 상기 논-터치 사용자 제스처가 위에서 아래로 스와이프 제스처인 것으로 식별하거나; 또는
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이후에 결정되면 상기 논-터치 사용자 제스처가 아래에서 위로 스와이프 제스처인 것으로 식별하도록 구성되어 있는, 단말 기기.
제9항에 있어서,
임의의 2개의 인접하는 포인트 광센서의 배치 위치 사이에는 동등한 수평 거리가 존재하며, 상기 수평 거리는 최대이고, 상기 수평 거리는 상기 2개의 인접하는 포인트 광센서가 x축에 투사된 이후의 상대적인 거리를 나타내는 것인, 단말 기기.
제10항에 있어서,
임의의 2개의 인접하는 포인트 광센서의 배치 위치 사이에는 동등한 수직 거리가 존재하며, 상기 수직 거리는 최대이고, 상기 수직 거리는 상기 2개의 인접하는 포인트 광센서가 y축에 투사된 이후의 상대적인 거리를 나타내는 것인, 단말 기기.
논-터치 제스처를 사용하여 단말 기기를 제어하는 방법으로서,
상기 단말 기기는 포인트 광센서를 포함하며, 상기 방법은,
상기 포인트 광센서가 상기 논-터치 제스처에 의해 생성된 가시광 강도 변동을 감지할 때 상기 포인트 광센서에 의해 출력된 복수의 광 강도 신호를 수신하는 단계;
상기 복수의 광 강도 신호의 변화 패턴을 결정하는 단계;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 단계; 및
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계
를 포함하는 단말 기기를 제어하는 방법.
제13항에 있어서,
상기 복수의 광 강도 신호의 변화 패턴을 결정하는 단계는,
상기 복수의 광 강도 신호의 변화 패턴이 고저 강도 변화 규칙을 준수하는 것으로 결정하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며, 그런 다음 저고 강도 변화 규칙을 준수하는 단계
를 포함하며,
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 단계는,
상기 논-터치 사용자 제스처가 올림 제스처인 것을 식별하는 단계
를 포함하며, 상기 올림 제스처는 상기 포인트 광센서로부터 멀어지는 방향으로 상기 포인트 광센서의 감지 범위 내의 동작 대상의 진행 움직임을 포함하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 상기 올림 제스처에 대응하는 줌 동작을 실행하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제13항에 있어서,
상기 복수의 광 강도 신호의 변화 패턴을 결정하는 단계는,
상기 복수의 광 강도 신호의 변화 패턴이 제1 고저 강도 변화 규칙을 준수하는 것으로 결정하고, 그런 다음 제1 미리 정해진 시간 주기 동안 계속 불변으로 유지하며, 그런 다음 제2 고저 강도 변화 규칙을 준수하는 단계
를 포함하며;
상기 변화 패턴에 기초하여 상기 논-터치 사용자 제스처를 식별하는 단계는,
상기 논-터치 사용자 제스처가 압력 제스처인 것을 식별하는 단계
를 포함하며, 상기 압력 제스처는 상기 포인트 광센서로 다가오는 방향으로 상기 포인트 광센서의 감지 범위 내의 동작 대상의 진행 움직임을 포함하며;
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 상기 압력 제스처에 대응하는 줌 동작을 실행하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
논-터치 제스처를 사용하여 단말 기기를 제어하는 방법으로서,
상기 단말 기기는, 상기 단말 기기의 본체 상의 상이한 위치에 위치하는 제1 포인트 광센서 및 제2 포인트 광센서를 포함하며, 상기 방법은,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서가 상기 논-터치 제스처에 의해 생성된 가시광 강도 변동을 감지할 때 상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 광 강도 신호를 수신하는 단계;
상기 광 강도 신호의 변화 패턴을 결정하는 단계;
상기 변화 패턴에 기초하여, 상기 논-터치 사용자 제스처의 이동 방향을 식별하는 단계를 포함하는, 상기 논-터치 사용자 제스처를 식별하는 단계; 및
상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계
를 포함하는 단말 기기를 제어하는 방법.
제16항에 있어서,
상기 논-터치 사용자 제스처는 좌에서 우로 스와이프 제스처, 우에서 좌로 스와이프 제스처, 위에서 아래로 스와이프 제스처, 아래서 위로 스와이프 제스처, 올림 제스처 및 압력 제스처 중 적어도 하나를 포함하는, 단말 기기를 제어하는 방법.
제17항에 있어서,
상기 논-터치 사용자 제스처가 좌에서 우로 스와이프 제스처, 우에서 좌로 스와이프 제스처, 위에서 아래로 스와이프 제스처, 또는 아래서 위로 스와이프 제스처일 때, 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 좌에서 우로 스와이프 제스처, 또는 우에서 좌로 스와이프 제스처, 또는 위에서 아래로 스와이프 제스처, 또는 아래서 위로 스와이프 제스처에 대응하는 페이지 넘기기 또는 끌기의 제어 동작을 실행하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제17항에 있어서,
상기 논-터치 사용자 제스처가 올림 제스처 또는 압력 제스처일 때, 상기 식별된 논-터치 사용자 제스처에 대응하는 제어 동작을 실행하는 단계는,
픽처 애플리케이션 또는 전자책 애플리케이션에서 올림 제스처 또는 압력 제스처에 대응하는 줌 동작을 실행하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제16항에 있어서,
상기 단말 기기는 모션 센서 또는 방향 센서를 더 포함하며, 상기 방법은,
상기 모션 센서 또는 상기 방향 센서에 의해 출력된 신호 값을 수신하는 단계
를 포함하며,
상기 광 강도 신호의 변화 패턴을 결정하는 단계는,
상기 단말 기기가 상기 신호 값에 따라 상대적으로 안정한 상태에 있으면 상기 광 강도 신호의 변화 패턴을 결정하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제16항에 있어서,
상기 제1 포인트 광센서가 상기 제2 포인트 광센서의 좌측에 배치되어 있을 때, 상기 광 강도 신호의 변화 패턴을 결정하는 단계는,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 고저고 강도 변경 규칙을 각각 준수하는 것으로 결정하는 단계
를 포함하며;
상기 논-터치 사용자 제스처를 식별하는 단계는,
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이전에 결정되면 상기 논-터치 사용자 제스처가 좌에서 우로 스와이프 제스처인 것으로 식별하는 단계; 또는
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이후에 결정되면 상기 논-터치 사용자 제스처가 우에서 좌로 스와이프 제스처인 것으로 식별하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제16항에 있어서,
상기 제1 포인트 광센서가 상기 제2 포인트 광센서의 위에 배치되어 있을 때, 상기 광 강도 신호의 변화 패턴을 결정하는 단계는,
상기 제1 포인트 광센서 및 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 고저고 강도 변경 규칙을 각각 준수하는 것으로 결정하는 단계
를 포함하며,
상기 논-터치 사용자 제스처를 식별하는 단계는,
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이전에 결정되면 상기 논-터치 사용자 제스처가 위에서 아래로 스와이프 제스처인 것으로 식별하는 단계; 또는
상기 제1 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴이 상기 제2 포인트 광센서에 의해 출력된 복수의 광 강도 신호의 변화 패턴 이후에 결정되면 상기 논-터치 사용자 제스처가 아래에서 위로 스와이프 제스처인 것으로 식별하는 단계
를 포함하는, 단말 기기를 제어하는 방법.
제21항에 있어서,
임의의 2개의 인접하는 포인트 광센서의 배치 위치 사이에는 동등한 수평 거리가 존재하며, 상기 수평 거리는 최대이고, 상기 수평 거리는 상기 2개의 인접하는 포인트 광센서가 x축에 투사된 이후의 상대적인 거리를 나타내는 것인, 단말 기기를 제어하는 방법.
제22항에 있어서,
임의의 2개의 인접하는 포인트 광센서의 배치 위치 사이에는 동등한 수직 거리가 존재하며, 상기 수직 거리는 최대이고, 상기 수직 거리는 상기 2개의 인접하는 포인트 광센서가 y축에 투사된 이후의 상대적인 거리를 나타내는 것인, 단말 기기를 제어하는 방법.
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제