KR102559030B1 - 터치 패널을 포함하는 전자 장치 및 그 제어 방법 - Google Patents

터치 패널을 포함하는 전자 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR102559030B1
KR102559030B1 KR1020160032928A KR20160032928A KR102559030B1 KR 102559030 B1 KR102559030 B1 KR 102559030B1 KR 1020160032928 A KR1020160032928 A KR 1020160032928A KR 20160032928 A KR20160032928 A KR 20160032928A KR 102559030 B1 KR102559030 B1 KR 102559030B1
Authority
KR
South Korea
Prior art keywords
electronic device
input
touch
hovering
control command
Prior art date
Application number
KR1020160032928A
Other languages
English (en)
Other versions
KR20170108662A (ko
Inventor
윤강진
김성찬
김양욱
고준호
문보석
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160032928A priority Critical patent/KR102559030B1/ko
Priority to PCT/KR2016/008312 priority patent/WO2017159931A1/en
Priority to US15/222,303 priority patent/US10114501B2/en
Publication of KR20170108662A publication Critical patent/KR20170108662A/ko
Application granted granted Critical
Publication of KR102559030B1 publication Critical patent/KR102559030B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G04—HOROLOGY
    • G04G—ELECTRONIC TIME-PIECES
    • G04G21/00—Input or output devices integrated in time-pieces
    • G04G21/08—Touch switches specially adapted for time-pieces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

터치 패널을 포함하는 전자 장치를 제어하는 방법에 있어서, 적어도 하나의 터치 입력을 수신하는 단계; 호버링 입력을 수신하는 단계; 수신된 적어도 하나의 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 단계; 및 결정된 제어 명령에 따라 전자 장치를 제어하는 단계; 를 포함하는 방법이 개시된다.

Description

터치 패널을 포함하는 전자 장치 및 그 제어 방법 {ELECTRONIC DEVICE INCLUDING A TOUCH PANEL AND METHOD FOR CONTROLLING THEREOF}
터치 패널을 포함하는 전자 장치 및 터치 패널을 포함하는 전자 장치를 제어하는 방법에 관한 것이다.
스마트 폰과 태블릿 PC가 대중화되면서, 전자 장치에 터치 패널이 포함되는 것이 보편화되었다. 또한, 터치 영역의 확장으로서 3D 터치 또는 근접 영역 터치를 감지하는 기술이 상용화되었다.
호버링 입력을 이용하여 터치 패널을 포함하는 전자 장치를 제어하는 방법 및 호버링 입력을 수신하는 터치 패널을 포함하는 전자 장치를 제공한다.
일 실시 예에 따라 터치 패널을 포함하는 전자 장치를 제어하는 방법은, 적어도 하나의 터치 입력을 수신하는 단계; 호버링 입력을 수신하는 단계; 수신된 적어도 하나의 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 단계; 및 결정된 제어 명령에 따라 전자 장치를 제어하는 단계; 를 포함한다.
또한, 적어도 하나의 터치 입력을 수신하는 단계는, 터치 패널을 이용하여 터치 입력을 수신하고, 호버링 입력을 수신하는 단계는, 전자 장치의 일측에 위치한 센서, 카메라 및 터치 패널 중 적어도 하나를 이용하여 호버링 입력을 수신할 수 있다.
또한, 적어도 하나의 터치 입력과 호버링 입력은 터치 패널 상의 서로 다른 영역에서 입력될 수 있다.
또한, 적어도 하나의 터치 입력은 터치 패널의 전면 부분 또는 터치 패널의 엣지 부분에서 입력될 수 있다.
또한, 호버링 입력을 수신하는 단계는, 연속적인 제스쳐 타입의 호버링 입력을 수신하는 단계; 를 포함할 수 있다.
또한, 제어 명령을 결정하는 단계는, 호버링 입력의 제스쳐에 대응되는 제어 명령을 결정하는 단계를 포함할 수 있다.
또한, 적어도 하나의 터치 입력에 기초하여, 적어도 하나의 터치 입력에 대응되는 제1 제어 명령을 결정하는 단계; 및 호버링 입력이 수신됨에 따라 제1 제어 명령을 제2 제어 명령으로 변경하는 단계; 를 더 포함할 수 있다.
일 실시 예에 따라 제어 명령을 결정하는 전자 장치는, 터치 패널; 및 적어도 하나의 터치 입력 및 호버링 입력을 수신하고, 수신된 적어도 하나의 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 프로세서; 를 포함한다.
일 실시 예에 따라 전자 장치를 제어하는 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 제공된다.
도 1은 일 실시 예에 따라 터치 패널을 포함하는 전자 장치를 제어하는 방법을 도시한 개요도이다.
도 2는 일 실시 예에 따라 터치 패널을 포함하는 전자 장치를 제어하는 방법을 나타내는 흐름도이다.
도 3은 일 실시 예에 따른 전자 장치의 주변 영역을 도시한 도면이다.
도 4는 터치 패널을 이용하여 호버링 입력을 수신하는 구성의 예시를 도시한 도면이다.
도 5는 좌우 엣지를 포함하는 전자 장치의 예시를 도시한 도면이다.
도 6은 상하 엣지를 포함하는 전자 장치의 예시를 도시한 도면이다.
도 7은 터치 입력 및 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 방법의 예시를 도시한 표이다.
도 8은 복수의 터치 입력을 수신하는 전자 장치를 제어하는 방법의 예시를 도시한 흐름도이다.
도 9는 복수의 터치 입력을 수신하는 전자 장치를 제어하는 방법의 예시를 도시한 도면이다.
도 10은 복수의 터치 입력을 수행하는 전자 장치를 이용하여 한글을 입력하는 방법의 예시를 도시한 도면이다.
도 11은 복수의 터치 입력을 수행하는 전자 장치를 이용하여 영문을 입력하는 방법의 예시를 도시한 도면이다.
도 12는 엣지 부분을 포함하지 않는 전자 장치의 예시를 도시한 도면이다.
도 13은 일 실시 예에 따라 연속적인 제스쳐 타입의 호버링 입력을 수신하는 전자 장치를 제어하는 방법을 도시한 흐름도이다.
도 14는 연속적인 제스쳐 타입의 호버링 입력의 예시를 도시한 도면이다.
도 15는 터치 입력 및 제스쳐 타입의 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 방법의 예시를 도시한 도면이다.
도 16은 의도되지 않은 호버링 입력을 배제하는 방법의 예시를 도시한 흐름도이다.
도 17은 의도되지 않은 호버링 입력의 예시를 도시한 도면이다.
도 18은 일 실시 예에 따라 터치 패널 영역에 대한 호버링 입력을 수신하는 전자 장치를 제어하는 방법을 도시한 흐름도이다.
도 19는 두 손을 이용하여 전자 장치를 제어하는 방법의 예시를 도시한 개요도이다.
도 20은 두 손을 이용하여 전자 장치를 제어하는 방법을 구체적으로 도시한 도면이다.
도 21은 한 손을 이용하여 전자 장치를 제어하는 방법의 예시를 도시한 도면이다.
도 22 및 도 23은 일 실시 예에 따른 전자 장치의 블록도이다.
아래에서는 첨부한 도면을 참조하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 개시의 실시예를 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 또한, 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 개시에서 사용되는 용어는, 본 개시에서 언급되는 기능을 고려하여 현재 사용되는 일반적인 용어로 기재되었으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 다양한 다른 용어를 의미할 수 있다. 따라서 본 개시에서 사용되는 용어는 용어의 명칭만으로 해석되어서는 안되며, 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 해석되어야 한다.
또한, 제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 이 용어들에 의해 한정되어서는 안 된다. 이 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로 사용된다.
또한, 본 개시에서 사용된 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것이며, 본 개시를 한정하려는 의도로 사용되는 것이 아니다. 단수의 표현은 문맥상 명백하게 단수를 뜻하지 않는 한, 복수의 의미를 포함한다. 또한, 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성 요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.
본 명세서, (특히, 특허 청구 범위에서)에서 사용된 “상기” 및 이와 유사한 지시어는 단수 및 복수 모두를 지시하는 것일 수 있다. 또한, 본 개시에 따른 방법을 설명하는 단계들의 순서를 명백하게 지정하는 기재가 없다면, 기재된 단계들은 적당한 순서로 행해질 수 있다. 기재된 단계들의 기재 순서에 따라 본 개시가 한정되는 것은 아니다.
본 명세서에서 다양한 곳에 등장하는 "일부 실시예에서" 또는 "일 실시예에서" 등의 어구는 반드시 모두 동일한 실시예를 가리키는 것은 아니다.
본 개시의 일 실시 예는 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들의 일부 또는 전부는, 특정 기능들을 실행하는 다양한 개수의 하드웨어 및/또는 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 개시의 기능 블록들은 하나 이상의 마이크로프로세서들에 의해 구현되거나, 소정의 기능을 위한 회로 구성들에 의해 구현될 수 있다.
또한, 도면에 도시된 구성 요소들 간의 연결 선 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것일 뿐이다. 실제 장치에서는 대체 가능하거나 추가된 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들에 의해 구성 요소들 간의 연결이 나타내어질 수 있다.
이하 첨부된 도면을 참고하여 본 개시를 상세히 설명하기로 한다.
도 1은 일 실시 예에 따라 터치 패널을 포함하는 전자 장치를 제어하는 방법을 도시한 개요도이다.
도 1을 참조하면, 전자 장치(100)는 사용자에 의해 착용되는 웨어러블 장치일 수 있다. 하지만, 전자 장치(100)의 종류는 웨어러블 장치로 제한되지 않는다. 다른 실시 예에서, 전자 장치(100)는 스마트 폰, 태블릿 PC 및 스마트 TV를 포함할 수 있으며, 이에 제한되지 않는다.
도 1을 참조하면, 사용자는 제1 손가락(120)으로 전자 장치(100)를 터치할 수 있다. 일 실시 예에서, 사용자는 전자 장치(100)에 포함된 터치 패널을 터치하는 것일 수 있다. 전자 장치(100)는 제1 손가락(120)에 의하여 터치된 터치 위치(160)에 대응되는 제어 명령을 결정 및 수행할 수 있다.
일 실시 예에서, 전자 장치(100)는 호버링 입력을 수신할 수 있다. 본 명세서에서, 호버링 입력은 전자 장치(100)를 직접적으로 터치하지 않는 근접 거리에서의 동작을 입력으로서 수신하는 것을 의미할 수 있다.
전자 장치(100)는 터치 패널, 하나 이상의 센서 또는 카메라를 이용하여 호버링 입력을 수신할 수 있으며, 호버링 입력을 수신하기 위하여 사용되는 방법은 제한되지 않는다. 터치 패널을 이용하여 호버링 입력을 수신하는 구체적인 방법은 도 4에서 상세히 후술될 예정이다.
일 실시 예에서, 사용자는 손등(150) 부분에 대한 호버링 입력을 수행할 수 있다. 본 명세서에서, 손등(150) 부분에 대한 호버링 입력이란 전자 장치(100)의 손등(150) 방향의 측면에서 행하는 호버링 입력을 의미할 수 있다. 예를 들어, 사용자가 손등(150) 부분에서 손가락을 움직임이면 전자 장치(100)가 손가락의 움직임을 감지함으로써 호버링 입력을 수신할 수 있다.
또한, 사용자는 제2 손가락(130)을 이용하여 손등(150)을 터치하거나 터치한 상태로 손등(150) 부분에서 제2 손가락(130)을 움직이는 동작을 수행할 수 있으나, 이에 한정되지 않는다. 일 실시 예에서, 사용자는 손등을 터치하지 않은 상태로 제2 손가락(130)을 움직이는 동작을 수행할 수 있다.
전자 장치(100)는 사용자가 손등(150)을 터치하는 동작을 호버링 입력으로서 수신할 수 있다. 다른 실시 예에서, 전자 장치(100)는 사용자가 손목(140)을 터치하는 동작을 호버링 입력으로서 수신할 수 있다. 호버링 입력이 수신되는 주변 영역에 대해서는 도 3에서 상세히 후술될 예정이다.
일 실시 예에서, 전자 장치(100)는 호버링 입력에 대응되는 제어 명령을 결정 및 수행할 수 있다. 예로, 전자 장치(100)는 호버링 입력의 유무에 따라 제어 명령을 결정 및 수행할 수 있다.
다른 예로, 전자 장치(100)는 제2 손가락(130)이 손등(150)을 터치한 터치 위치(170)에 대응되는 제어 명령을 결정 및 수행할 수 있다. 호버링 입력에 대응되는 제어 명령을 결정하는 구체적인 방법은 후술될 것이다.
도 2는 일 실시 예에 따라 터치 패널을 포함하는 전자 장치를 제어하는 방법을 나타내는 흐름도이다.
도 2를 참조하면, 단계 202에서, 전자 장치(100)는 터치 패널을 터치하는 사용자의 적어도 하나의 터치 입력을 수신한다. 일 실시 예에서, 전자 장치(100)에 포함된 터치 패널은 전면 부분 및 엣지 부분을 포함할 수 있다. 전자 장치(100)는 터치 패널의 전면 부분 및 엣지 부분에 대한 터치 입력 중 적어도 하나를 수신할 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 패널을 터치하는 사용자의 적어도 하나의 터치 입력에 기초하여 제1 제어 명령을 결정할 수 있다. 예를 들어, 전자 장치(100)는 터치 입력이 수신된 위치에 디스플레이된 UI에 대응하는 제1 제어 명령을 결정할 수 있다.
제1 제어 명령은 전자 장치(100)에 디스플레이된 어플리케이션을 제어하기 위한 명령을 포함할 수 있다. 예를 들어, 전자 장치(100)에 음악 재생 어플리케이션이 디스플레이된 경우, 제1 제어 명령은 음악을 재생하도록 하는 제어 명령일 수 있다.
단계 204에서, 전자 장치(100)는 전자 장치(100)에 대한 사용자의 호버링 입력을 수신한다. 전자 장치(100)는 터치 입력을 수신한 영역과 다른 영역에 대한 호버링 입력을 수신할 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 입력이 수신된 이후의 기 설정된 시간 내에 전자 장치(100)의 주변 영역에 대한 사용자의 호버링 입력을 수신할 수 있다. 다른 실시 예에서, 전자 장치(100)는 터치 입력이 수신된 전후의 기 설정된 시간 내에 전자 장치(100)에 대한 사용자의 호버링 입력을 수신할 수 있다. 일 실시 예에서, 전자 장치(100)는 터치 패널을 이용하여 전자 장치(100)의 측면에 대향하는 주변 영역에 대한 호버링 입력을 수신할 수 있다. 다른 실시 예에서, 전자 장치(100)는 터치 패널의 전체 영역 중에서, 터치 입력에 의해 터치된 부분 이외의 영역에 대한 호버링 입력을 수신할 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 입력이 수신된 이후의 기 설정된 시간 이후에 수신되는 호버링 입력을 무시할 수 있다. 다른 실시 예에서, 전자 장치(100)는 터치 입력이 수신되지 않은 경우 호버링 입력을 수신하지 않을 수 있다.
호버링 입력의 경우, 의도하지 않은 입력 혹은 잘못된 입력이 발생하는 경우가 많을 수 있다. 전자 장치(100)는 호버링 입력을 선택적으로 수신함으로써 사용자의 의도에 부합하는 호버링 입력을 수신할 수 있다.
단계 206에서, 전자 장치(100)는 수신된 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정한다. 일 실시 예에서, 전자 장치(100)는 터치 입력 및 호버링 입력이 수신된 위치를 이용하여 제어 명령을 결정할 수 있다. 예를 들어, 전자 장치(100)가 음악을 재생하고 있는 중에, 터치 입력이 전자 장치(100)의 전면 부분에서 수신되고, 호버링 입력이 전자 장치(100)의 오른쪽 측면 부분에서 수신된 경우, 전자 장치(100)는 현재 재생되고 있는 곡의 다음 곡을 재생할 수 있다. 다른 실시 예에서, 전자 장치(100)는 호버링 입력의 제스쳐 모양에 대응되는 제어 명령을 결정할 수 있다.
일 실시 예에서, 전자 장치(100)는 사용자의 호버링 입력을 수신하는 경우, 터치 입력에 기초하여 결정된 제1 제어 명령을 터치 입력 및 호버링 입력의 조합에 대응되는 제2 제어 명령으로 변경할 수 있다. 터치 입력 및 호버링 입력의 조합에 대응되는 제2 제어 명령은, 터치 입력의 위치, 터치 입력의 종류, 호버링 입력의 위치 및 호버링 입력의 종류에 따라 결정될 수 있다. 일 실시 예에서, 전자 장치(100)는 제1 제어 명령 및 수신된 호버링 입력에 기초하여 제2 제어 명령을 결정할 수 있다. 예를 들어, 전자 장치(100)는 제1 제어 명령의 종류, 호버링 입력의 위치 및 호버링 입력의 종류에 따라 제2 제어 명령을 결정할 수 있다. 전자 장치(100)는 제1 제어 명령을 결정된 제2 제어 명령으로 변경할 수 있다.
단계 208에서, 전자 장치(100)는 결정된 제어 명령에 따라 전자 장치를 제어한다. 일 실시 예에서, 전자 장치(100)는 제2 제어 명령에 따라 전자 장치를 제어할 수 있다. 제1 제어 명령이 결정된 후 기 설정된 시간 내에 호버링 입력이 수신되지 않은 경우, 전자 장치(100)는 제1 제어 명령에 따라 전자 장치를 제어할 수 있다.
도 3은 일 실시 예에 따른 전자 장치의 주변 영역을 도시한 도면이다.
도 3을 참조하면, 전자 장치(100)는 주변 영역(300)에 대한 사용자의 호버링 입력을 수신할 수 있다. 도 3에 도시된 주변 영역(300)의 형태는 예시를 위한 것일 뿐이고, 주변 영역(300)의 형태는 도 3에 도시된 형태에 제한되지 않는다. 일 실시 예에서, 주변 영역(300)은 전자 장치(100)가 호버링 입력을 수신할 수 있는 범위를 의미할 수 있다.
다른 실시 예에서, 주변 영역(300)은 사용자에 의해 기 설정된 영역을 의미할 수 있다. 이 경우, 전자 장치(100)가 수신한 호버링 입력들 중 기 설정된 영역 외에서 수신된 것으로 판단되는 호버링 입력은 무시될 수 있다.
주변 영역(300)은 전자 장치(100)의 모양 또는 전자 장치(100)에 포함된 터치 패널, 센서 또는 카메라의 위치에 따라 하나 이상의 주변 영역으로 구분될 수 있다. 일 실시 예에서, 주변 영역(300)은 전자 장치(100)의 측면 주변영역(310 내지 340) 및 전면 주변영역(350)을 포함할 수 있다.
예를 들어, 전자 장치(100)는 사각형 형태일 수 있다. 이 경우, 전자 장치(100)는 사각형의 각 엣지 부분에 위치한 터치 패널, 센서 또는 카메라를 포함할 수 있다. 측면 주변 영역(310 내지 340)은 각 엣지 부분에 대응하는 주변 영역들로 구분될 수 있다.
도 3을 참조하면, 측면 주변 영역(310 내지 340)은 좌측 주변 영역(310), 우측 주변 영역(320), 상측 주변 영역(330) 및 하측 주변 영역(340)을 포함할 수 있다. 또한, 주변 영역(300)은 전면 주변 영역(350)을 포함할 수 있다. 전면 주변 영역(350)은 전자 장치(100)의 전면과 맞닿은 공간을 의미할 수 있다.
도 3에 도시된 주변 영역들은 예시를 위한 것일 뿐이고, 주변 영역들의 위치, 크기 및 형태는 제한되지 않는다.
일 실시 예에서, 전자 장치(100)는 각 주변 영역에서 수신되는 호버링 입력을 서로 다른 것으로 판단할 수 있다. 예를 들어, 전자 장치(100)는 서로 다른 주변 영역에서 수신된 호버링 입력을 서로 다른 제어 명령에 대응시킬 수 있다.
일 실시 예에서, 전자 장치(100)는 복수의 호버링 입력을 동시에 수신할 수 있다. 이 경우, 전자 장치(100)는 서로 다른 주변 영역에서 호버링 입력을 동시에 수신할 수 있다.
전자 장치(100)는 복수의 호버링 입력 각각에 대응되는 제어 명령을 결정 및 수행할 수 있다. 또한, 전자 장치(100)는 복수의 호버링 입력의 조합에 대응되는 제어 명령을 결정 및 수행할 수 있다.
도 4는 터치 패널을 이용하여 호버링 입력을 수신하는 구성의 예시를 도시한 도면이다. 일 실시 예에서, 터치 패널(400)은 터치 센서 및 터치 센서에 포함된 전극을 포함할 수 있다.
사용자는 환경 내의 장치들이 방출한 전기장들에 의해 둘러싸일 수 있다. 이러한 장은 일반적으로 환경 내의 전자기적 간섭 (EMI)의 일부로 고려될 수 있다. 이러한 전기장은 사용자의 몸 도처에 걸쳐 운반될 수 있고, 전자 장치(100)에 포함된 터치 패널(400)의 전극에 정전 용량적으로 연결될 수도 있다.
이러한 노이즈를 거절하는 대신에, 사용자의 터치를 탐지하기 위하여 노이즈터치를 이용할 수 있다. 본 명세서에서, 노이즈터치는 몸에 전도되고 터치 패널(400)에 포함된 터치 센서의 전극에 의해 픽업된 노이즈를 이용하는 터치 감지 방법을 의미한다.
터치 패널(400)은 노이즈터치를 이용하여 사용자의 터치 입력을 감지할 수 있다. 또한, 터치 패널(400)은 노이즈터치를 이용하여 호버링 입력을 감지할 수 있다.
노이즈터치는 환경의 노이즈를 이용하므로, EMI에 면역이 있고, 사용자의 상호작용을 감지하기 위해 전기장을 배출할 필요가 없다. 또한, 노이즈터치는 그 이용 범위가 용이하게 확장될 수 있다. 예를 들어, 어떠한 모양이나 크기를 갖는 표면에도 적용할 수 있으며, 즉각적인 반응을 얻을 수 있다.
환경의 EMI 전원(430)은 그라운드(410)에 임피던스 Zin(420)를 통하여 접지될 수 있고, 임피던스 Zair(440)를 이용하여 인체에 연결될 수 있다. 외부 소스(490)는 또한 임피던스 Zb(450)를 통하여 그라운드(410)에 연결되어 있다.
도 4에서, 외부 소스(490)는 터치 패널(400)에 대한 터치에 이용되는 모든 외부 객체를 의미할 수 있다. 예를 들어, 외부 소스(490)는 사용자의 손가락을 포함하는 인체를 의미할 수 있다.
EMI(430)는 터치 패널(400)에 포함된 전극에 선택적 절연체를 통해 연결되고, 임피던스 Zh(220)를 통해 그라운드(410)에 연결된 전자 장치(100)에 의해 수신된다. 예를 들어, 시스템 내의 서로 다른 구성요소들의 접지에 이용된 임피던스 값의 차이 및 EMI에 의해 유도된 전기장에 대한 노출의 변화에 따라, 전자 장치(100)가 감지하는 주변의 모든 외부 소스에 대해 약간의 전위차가 발생할 수 있다.
예를 들어, 인체와 같은 커다란 안테나가 터치 패널(400)에 근접해 있는 경우, 노이즈의 특성은 인체가 근접하지 않은 경우와 다를 것이다. 전자 장치(100)는 터치 패널(400)이 감지한 노이즈의 특성의 변화에 기초하여 터치 입력 및 호버링 입력을 수신할 수 있다.
도 4에 도시된, 터치 입력 및 호버링 입력을 수신하는 구성 및 방법은 예시를 위한 것이고, 터치 입력 및 호버링 입력을 수신하기 위해 이용되는 구성 및 방법은 제한되지 않는다.
도 5는 좌우 엣지를 포함하는 전자 장치의 예시를 도시한 도면이다.
도 5를 참조하면, 전자 장치(100)는 좌측 엣지(510) 및 우측 엣지(520)를 포함할 수 있다. 일 실시 예에서, 전자 장치(100)에 포함된 터치 패널(400)은 전면 부분(500), 좌측 엣지(510) 및 우측 엣지(520)로 구분될 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 패널(400)의 좌측 엣지(510) 부분에 위치한 센서를 이용하여 손목(140)에 대한 사용자의 호버링 입력을 수신할 수 있다. 도 5의 손목(140) 부분은 도 3의 좌측 주변 영역(310)에 대응할 수 있다.
또한, 전자 장치(100)는 터치 패널(400)의 우측 엣지(520) 부분에 위치한 센서를 이용하여 손등(150)에 대한 사용자의 호버링 입력을 수신할 수 있다. 도 5의 손등(150) 부분은 도 3의 우측 주변 영역(320)에 대응할 수 있다.
좌측 엣지(510) 및 우측 엣지(520) 부분에 위치한 센서는 터치 패널에 포함된 터치 센서, 적외선 센서, 초음파 센서 등을 포함할 수 있으나, 이에 제한되지 않는다.
또한, 전자 장치(100)는 좌측 엣지 및 우측 엣지(520)에 위치한 카메라를 더 포함할 수 있다. 전자 장치(100)는 카메라를 이용하여 사용자의 호버링 입력을 수신할 수 있다.
도 6은 상하 엣지를 포함하는 전자 장치의 예시를 도시한 도면이다.
도 6을 참조하면, 전자 장치(100)는 상측 엣지(610) 및 하측 엣지(620)를 포함할 수 있다. 일 실시 예에서, 전자 장치(100)에 포함된 터치 패널(400)은 전면 부분(500), 상측 엣지(610) 및 하측 엣지(620)로 구분될 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 패널(400)의 상측 엣지(610) 부분에 위치한 센서를 이용하여 시계줄(630)에 대한 사용자의 호버링 입력을 수신할 수 있다. 도 6의 시계줄(630) 부분은 도 3의 상측 주변 영역(330)에 대응할 수 있다.
또한, 전자 장치(100)는 터치 패널(400)의 하측 엣지(620) 부분에 위치한 센서를 이용하여 시계줄(640)에 대한 사용자의 호버링 입력을 수신할 수 있다. 도 6의 시계줄(640) 부분은 도 3의 하측 주변 영역(340)에 대응할 수 있다.
전자 장치(100)는 제1 손가락(120)이 터치 패널의 전면 부분(500)을 터치하는 터치 입력을 수신할 수 있다. 또한, 전자 장치(100)는 제2 손가락(130)이 시계줄(630 또는 640)을 터치하는 호버링 입력을 수신할 수 있다.
도 7은 터치 입력 및 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 방법의 예시를 도시한 표이다.
도 7을 참조하면, 전자 장치(100)는 음악을 재생할 수 있다. 예를 들어, 전자 장치(100)에 음악 재생 어플리케이션이 실행되고 있을 수 있다. 사용자는 터치 입력 및 호버링 입력을 이용하여 음악 재생 어플리케이션을 제어할 수 있다.
전자 장치(100)는 사용자의 터치 입력을 수신할 수 있다. 도 7을 참조하면, 전자 장치(100)는 전면(720)에 대한 터치 입력 및 엣지(730)에 대한 터치 입력 중 적어도 하나를 수신할 수 있다.
전자 장치(100)는 사용자의 호버링 입력을 수신할 수 있다. 도 7을 참조하면, 전자 장치(100)는 손등(740)에 대한 호버링 입력 및 손목(750)에 대한 호버링 입력 중 적어도 하나를 수신할 수 있다.
전자 장치(100)는 터치 입력 및 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다. 도 7의 표(700)를 참조하면, 전자 장치(100)가 결정할 수 있는 제어 명령은 재생/정지(711), 다음 곡(712), 빨리감기(713), 이전 곡(714) 및 되감기(715)를 포함할 수 있다.
도 7을 참조하면, 전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하면, 음악을 재생하거나 정지할 수 있다. 예를 들어, 전자 장치(100)는 사용자가 전면을 터치하는 경우 음악을 재생할 수 있다. 또한, 전자 장치(100)는 음악이 재생되는 중에 사용자가 전면을 터치하는 경우 음악을 정지할 수 있다.
또한, 전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손등에 대한 사용자의 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 다음 곡을 재생할 수 있다.
일 실시 예에서, 전자 장치(100)는 사용자의 터치 입력을 수신하는 경우, 터치 입력에 기초하여 제1 제어 명령을 결정할 수 있다. 예를 들어, 전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하면, 전자 장치(100)는 터치 입력이 수신된 위치, 전자 장치(100)에서 실행 중인 애플리케이션 및 화면 상에 디스플레이된 UI에 기초하여 제1 제어 명령을 결정할 수 있다.
일 실시 예에서, 전자 장치(100)는 사용자의 터치 입력이 수신된 터치 좌표를 획득할 수 있다. 전자 장치(100)는 터치 좌표에 대응하는 UI를 결정할 수 있다. 전자 장치(100)는 결정된 UI에 대응하는 제어 명령을 제1 제어 명령으로 결정할 수 있다.
예를 들어, 전자 장치(100)는 음악 재생 어플리케이션을 디스플레이하고 있을 수 있다. 이 경우, 전자 장치(100)는 사용자의 터치 입력을 수신할 수 있다. 전자 장치(100)는 사용자의 터치 입력이 수신된 터치 좌표를 획득할 수 있다. 획득된 터치 좌표가 재생/정지 UI에 대응하는 경우, 전자 장치(100)는 음악을 재생 또는 정지하는 제어 명령을 제1 제어 명령으로 결정할 수 있다.
일 실시 예에서, 전자 장치(100)가 획득한 터치 좌표가 전자 장치(100)의 엣지 부분에 대응할 수 있다. 이 경우, 전자 장치(100)는 엣지 부분에 대응하는 UI에 기초하여 제1 제어 명령을 결정할 수 있다. 예를 들어, 전자 장치(100)는 음악 재생 목록을 디스플레이하도록 하는 제어 명령을 제1 제어 명령으로 결정할 수 있다.
또한, 전자 장치(100)는 사용자의 호버링 입력을 수신하는 경우, 터치 입력에 기초하여 결정된 제1 제어 명령을 터치 입력 및 호버링 입력의 조합에 대응되는 제2 제어 명령으로 변경할 수 있다. 예를 들어, 전자 장치(100)는 전자 장치(100)의 전면에 대한 터치 입력 및 손등에 대한 사용자의 호버링 입력을 수신하면, 다음 곡을 재생하도록 하는 제어 명령을 제2 제어 명령으로 결정할 수 있다. 전자 장치(100)는 음악을 재생 또는 정지하도록 하는 제1 제어 명령을 다음 곡을 재생하도록 하는 제2 제어 명령으로 변경할 수 있다.
일 실시 예에서, 전자 장치(100)는 결정된 제1 제어 명령 및 사용자의 호버링 입력에 기초하여 제1 제어 명령을 제2 제어 명령으로 변경할 수 있다. 예를 들어, 제1 제어 명령이 음악을 재생하도록 하는 제어 명령일 수 있다. 또한, 전자 장치(100)는 손등에 대한 사용자의 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 다음 곡을 재생하도록 하는 제어 명령을 제2 제어 명령으로 결정할 수 있다. 전자 장치(100)는 음악을 재생하도록 하는 제1 제어 명령을 다음 곡을 재생하도록 하는 제2 제어 명령으로 변경할 수 있다.
또한, 전자 장치(100)는 제2 제어 명령에 기초하여 전자 장치(100)를 제어할 수 있다. 터치 입력이 수신된 후 기 설정된 시간 동안 호버링 입력이 수신되지 않는 경우에는, 전자 장치(100)는 제1 제어 명령에 기초하여 전자 장치(100)를 제어할 수 있다.
일 실시 예에서, 전자 장치(100)는 호버링 입력의 종류에 기초하여 제2 제어 명령을 결정할 수 있다. 일 실시 예에서, 전자 장치(100)는 호버링 입력의 제스쳐 타입에 기초하여 제2 제어 명령을 결정할 수 있다. 예를 들어, 제1 제어 명령이 음악을 재생하도록 하는 제어 명령이고, 전자 장치(100)는 손등을 터치하는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 다음 곡을 재생하도록 하는 제어 명령을 제2 제어 명령으로 결정할 수 있다. 전자 장치(100)는 음악을 재생하도록 하는 제1 제어 명령을 다음 곡을 재생하도록 하는 제2 제어 명령으로 변경할 수 있다. 또한, 전자 장치(100)는 손가락을 상하로 움직이는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 재생 속도를 조절하는 제어 명령을 제2 제어 명령으로 결정할 수 있다. 전자 장치(100)는 음악을 재생하도록 하는 제1 제어 명령을 재생 속도를 조절하도록 하는 제2 제어 명령으로 변경할 수 있다.
일 실시 예에서, 전자 장치(100)는 사용자에 의해 착용되는 웨어러블 장치이며, 호버링 입력은, 전자 장치(100) 주변의 사용자의 신체를 터치하는 입력일 수 있다. 예로, 손등에 대한 호버링 입력은 손등을 터치하는 동작으로부터 기초할 수 있다. 전자 장치(100)는 호버링 입력에 의해 사용자의 신체가 물리적으로 또는 실제로 터치되었는지를 결정할 수 있는데, 예를 들어, 전자 장치(100) 주변 사용자의 신체에 인접한 영역에서 호버링 입력이 감지될 때, 일정 시간 안에 가속도 센서(42)로 센싱된 전자 장치(100)의 가속도 변화가 일정 범위 이내이면 호버링 입력에 의해 사용자의 신체가 물리적으로 또는 실제로 터치되었는지를 결정할 수 있으며, 사용자의 신체가 물리적으로 또는 실제로 터치되었는지를 결정하는 방법을 이에 국한하지는 않는다. 전자 장치(100)는 사용자의 신체가 터치됨에 따라 제어 명령을 결정할 수 있다. 이 경우, 전자 장치(100)는 호버링 입력이 수신되었더라도, 사용자의 신체가 터치되지 않은 경우 호버링 입력을 무시할 수 있다. 다만, 본 발명의 일 실시예에서 설명하는 호버링 입력에 의한 신체 터치를 물리적으로 또는 실제로 터치한 것으로 한정하지는 않으며, 호버링 입력이 신체에 근접한 것도 터치된 것으로 간주할 수 있음을 포함할 수 있다.
또한, 전자 장치(100)는 사용자가 엣지를 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손등에 대한 사용자의 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 빨리감기를 수행할 수 있다.
또한, 전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손목에 대한 사용자의 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 이전 곡을 재생할 수 있다.
또한, 전자 장치(100)는 사용자가 엣지를 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손목에 대한 사용자의 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 되감기를 수행항 수 있다.
도 8은 복수의 터치 입력을 수신하는 전자 장치를 제어하는 방법의 예시를 도시한 흐름도이다. 도 8에 도시된 방법은 도 2에 도시된 방법의 일 실시 예이다. 따라서, 도 8의 실시 예에 대한 설명에서 생략된 부분이라 할지라도 도 2에 관련하여 설명된 내용은 도 8의 실시 예에도 적용될 수 있다.
일 실시 예에서, 전자 장치(100)는 터치 패널을 터치하는 복수의 터치 입력을 수신할 수 있다. 또한, 전자 장치(100)는 수신된 복수의 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다.
단계 802에서, 전자 장치(100)는 터치 패널의 전면 부분을 터치하는 터치 입력을 수신할 수 있다.
단계 804에서, 전자 장치(100)는 터치 패널의 엣지 부분을 터치하는 터치 입력을 수신할 수 있다. 터치 패널의 엣지 부분은 상측 엣지, 하측 엣지, 좌측 엣지 및 우측 엣지 중 적어도 하나를 포함할 수 있다.
단계 806에서, 전자 장치(100)는 전자 장치(100)에 대한 사용자의 호버링 입력을 수신할 수 있다. 일 실시 예에서, 전자 장치(100)는 기 설정된 시간 내에 전자 장치(100)에 대한 사용자의 호버링 입력을 수신할 수 있다. 전자 장치(100)는 기 설정된 시간 이후에는 전자 장치(100)에 대한 사용자의 호버링 입력을 수신하지 않을 수 있다.
단계 808에서, 전자 장치(100)는 수신된 복수의 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다. 일 실시 예에서, 전자 장치(100)는 복수의 터치 입력 중 적어도 하나와 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다.
단계 810에서, 전자 장치(100)는 결정된 제어 명령에 따라 전자 장치를 제어할 수 있다.
도 9는 복수의 터치 입력을 수신하는 전자 장치를 제어하는 방법의 예시를 도시한 도면이다.
도 9를 참조하면, 전자 장치(100)는 전면 부분(500) 및 엣지 부분(510 및 520)을 포함할 수 있다. 일 실시 예에서, 사용자는 제1 손가락(120) 및 제2 손가락(130)을 이용하여 터치 입력을 수행할 수 있다. 또한, 사용자는 제3 손가락(910)을 이용하여 호버링 입력을 수행할 수 있다.
예로, 사용자는 제1 손가락(120)을 이용하여 전자 장치(100)의 전면 부분(500)을 터치하는 터치 입력을 수행할 수 있다. 또한, 사용자는 제2 손가락(130)을 이용하여 전자 장치(100)의 엣지 부분(510 및 520)을 터치하는 터치 입력을 수행할 수 있다.
또한, 사용자는 제3 손가락(910)을 이용하여 전자 장치(100)의 주변 영역에 대한 호버링 입력을 수행할 수 있다. 예로, 사용자는 제3 손가락(910)을 이용하여 손등(150) 또는 손목(140)에 대한 호버링 입력을 수행할 수 있다.
전자 장치(100)는 전면 부분(500)에 대한 터치 입력, 엣지 부분(510 및 520)에 대한 터치 입력 및 전자 장치(100)의 주변 영역에 대한 호버링 입력의 조합에 대응되는 제어 명령을 결정 및 수행할 수 있다.
도 10은 복수의 터치 입력을 수행하는 전자 장치를 이용하여 한글을 입력하는 방법의 예시를 도시한 도면이다.
도 10을 참조하면, 전자 장치(100)는 전면 부분(500) 및 엣지 부분(520)을 포함할 수 있다. 전자 장치(100)는 전면 부분(500) 및 엣지 부분(520)에 대한 터치 입력을 수신할 수 있다. 또한, 전자 장치(100)는 주변 영역(1030)에 대한 호버링 입력을 수신할 수 있다.
전자 장치(100)의 전면 부분(500)은 자음 키보드 영역(1010)을 포함할 수 있다. 또한, 전자 장치(100)의 엣지 부분(520)은 모음 키보드 영역(1020)을 포함할 수 있다. 자음 키보드 영역(1010) 및 모음 키보드 영역(1020)은 띄어쓰기 버튼, 한/영 전환 버튼, 기호/숫자 전환 버튼 등을 더 포함할 수 있다.
일 실시 예에서, 자음 키보드 영역(1010)은 자음을 입력하기 위한 하나 이상의 버튼을 포함할 수 있다. 일 실시 예에서, 각 버튼은 세 개의 자음을 포함할 수 있다.
일 실시 예에서, 자음 키보드 영역(1010)에 포함된 각 버튼은 제1 자음, 제2 자음 및 제3 자음을 포함할 수 있다. 전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력을 수신하는 경우, 제1 자음을 출력할 수 있다.
전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력을 수신하는 경우, 제2 자음을 출력할 수 있다.
전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우, 제3 자음을 출력할 수 있다.
전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력, 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우에도, 제3 자음을 출력할 수 있다.
예로, 자음 키보드 영역(1010)은 "ㄷ", "ㄸ" 및 "ㅌ"를 포함하는 버튼(1012)를 포함할 수 있다. 전자 장치(100)는, 버튼(1012)에 대한 터치 입력을 수신하는 경우, "ㄷ"을 출력할 수 있다.
전자 장치(100)는, 버튼(1012)및 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력을 수신하는 경우, "ㄸ"을 출력할 수 있다. 또한, 전자 장치(100)는, 버튼(1012) 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우, "ㅌ"을 출력할 수 있다.
다른 실시 예에서, 전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력, 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우 기 설정된 단어 또는 문장을 출력할 수 있다.
예로, 사용자는 자주 사용하는 단어 또는 문장을 전자 장치(100)에 저장하고, 자음 키보드 영역(1010)에 포함된 각 버튼을 단축키로 지정할 수 있다. 사용자는 "특허" 라는 단어를 전자 장치(100)에 저장하고, 버튼(1012)을 단축키로 지정할 수 있다.
이후 사용자가 버튼(1012)에 대한 터치 입력, 엣지 부분(520)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수행하는 경우, 전자 장치(100)는 "특허"를 출력할 수 있다.
일 실시 예에서, 모음 키보드 영역(1020)은 모음을 입력하기 위한 하나 이상의 버튼을 포함할 수 있다. 일 실시 예에서, 각 버튼은 모음을 입력하기 위하여 필요한 'ㅣ', 'ㆍ" 및 "ㅡ"를 포함할 수 있다. 하지만, 모음을 입력하기 위하여 이용되는 버튼의 종류는 제한되지 않는다.
일 실시 예에서, 전자 장치(100)의 엣지 영역(520)은 모음 키보드 영역(1020)에 포함되지 않는 일부 영역(1025)을 포함할 수 있다.
전자 장치(100)가 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 엣지 부분(520)에 포함된 일부 영역(1025)에 대한 터치 입력을 수신하는 경우, 제2 자음을 출력할 수 있다.
또한, 전자 장치(100)가 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 모음 키보드 영역(520)에 포함된, 제1 모음을 나타내는 버튼 대한 터치 입력을 수신하는 경우, 제2 자음과 제1 모음을 함께 출력할 수 있다.
예를 들어, 사용자가 자음 키보드 영역(1010)에 포함된 버튼(1011) 에 대한 터치 입력 및 엣지 부분(520)에 포함된 일부 영역(1025)에 대한 터치 입력을 수행하는 경우, 전자 장치(100)는 "ㄲ"을 출력할 수 있다.
또한, 사용자가 자음 키보드 영역(1010)에 포함된 버튼(1011)에 대한 터치 입력 및 모음 키보드 영역(1020)에 포함된 버튼(1021)에 대한 터치 입력을 수행하는 경우, 전자 장치(100)는 "끼"를 출력할 수 있다.
또한, 전자 장치(100)가 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력, 전자 장치(100)의 모음 키보드 영역(520)에 포함된, 제1 모음을 나타내는 버튼에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우, 제3 자음과 제1 모음을 함께 출력할 수 있다.
예를 들어, 사용자가 자음 키보드 영역(1010)에 포함된 버튼(1011) 에 대한 터치 입력, 엣지 부분(520)에 포함된 일부 영역(1025)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수행하는 경우, 전자 장치(100)는 "ㅋ"을 출력할 수 있다.
또한, 사용자가 자음 키보드 영역(1010)에 포함된 버튼(1011)에 대한 터치 입력 및 모음 키보드 영역(1020)에 포함된 버튼(1021)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수행하는 경우, 전자 장치(100)는 "키"를 출력할 수 있다.
예로, 사용자는 "특허"를 입력하기 위하여, 자음 키보드 영역(1010)에 포함된 버튼(1012), 모음 키보드 영역(1020)에 포함된 버튼(1023)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수행하여 "트" 를 입력할 수 있다.
또한, 사용자는 자음 키보드 영역(1010)에 포함된 버튼(1011)에 대한 터치 입력을 수행하여 "ㄱ"을 입력할 수 있다.
또한, 사용자는 자음 키보드 영역(1010)에 포함된 버튼(1013) 및 모음 키보드 영역(1020)에 포함된 버튼(1022)에 대한 터치 입력을 수행하고, 주변 영역(1030)에 대한 호버링 입력을 수행하여 "ㅎ ㆍ"를 입력할 수 있다.
또한, 사용자는 모음 키보드 영역(1020)에 포함된 버튼(1021)에 대한 터치 입력을 수행하여, "ㅣ" 를 입력할 수 있다.
도 10을 참조하면, 사용자는 네 번의 터치 입력으로 "특허"를 입력할 수 있다.
도 11은 복수의 터치 입력을 수행하는 전자 장치를 이용하여 영문을 입력하는 방법의 예시를 도시한 도면이다.
도 11을 참조하면, 전자 장치(100)는 전면 부분(500) 및 엣지 부분(520)을 포함할 수 있다. 전자 장치(100)는 전면 부분(500) 및 엣지 부분(520)에 대한 터치 입력을 수신할 수 있다. 또한, 전자 장치(100)는 주변 영역(1030)에 대한 호버링 입력을 수신할 수 있다.
전자 장치(100)의 전면 부분(500)은 알파벳 입력 영역(1110)을 포함할 수 있다. 또한, 전자 장치(100)의 엣지 부분(520)은 추가 입력 영역(1120)을 포함할 수 있다. 추가 입력 영역(1120)은 한/영 전환 버튼, 기호/숫자 전환 버튼 등을 포함할 수 있다. 알파벳 입력 영역(1110) 및 추가 입력 영역(1120)은 띄어쓰기 버튼 및 기호 버튼 등을 더 포함할 수 있다.
일 실시 예에서, 알파벳 입력 영역(1110)은 알파벳을 입력하기 위한 하나 이상의 버튼을 포함할 수 있다. 일 실시 예에서, 각 버튼은 세 개의 알파벳을 포함할 수 있다.
일 실시 예에서, 알파벳 입력 영역(1110)에 포함된 각 버튼은 제1 알파벳, 제2 알파벳 및 제3 알파벳을 포함할 수 있다. 전자 장치(100)는 알파벳 입력 영역(1110)에 포함된 버튼에 대한 터치 입력을 수신하는 경우, 제1 알파벳을 출력할 수 있다.
전자 장치(100)는 알파벳 입력 영역(1110)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력을 수신하는 경우, 제2 알파벳을 출력할 수 있다.
전자 장치(100)는 알파벳 입력 영역(1110)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우, 제3 알파벳을 출력할 수 있다.
전자 장치(100)는 알파벳 입력 영역(1110)에 포함된 버튼에 대한 터치 입력, 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우에도, 제3 알파벳을 출력할 수 있다.
예로, 알파벳 입력 영역은 "A", "B" 및 "C"를 포함하는 버튼(1111)을 포함할 수 있다. 전자 장치(100)는, 버튼(1111)에 대한 터치 입력을 수신하는 경우, "a"를 출력할 수 있다.
전자 장치(100)는, 버튼(1111)및 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력을 수신하는 경우, "b"를 출력할 수 있다. 또한, 전자 장치(100)는, 버튼(1111) 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우, "c"를 출력할 수 있다.
다른 실시 예에서, 전자 장치(100)는 자음 키보드 영역(1010)에 포함된 버튼에 대한 터치 입력, 전자 장치(100)의 엣지 부분(520)에 대한 터치 입력 및 전자 장치(100)의 주변 영역(1030)에 대한 호버링 입력을 수신하는 경우 기 설정된 단어 또는 문장을 출력할 수 있다.
예로, 사용자는 자주 사용하는 단어 또는 문장을 전자 장치(100)에 저장하고, 알파벳 입력 영역(1111)에 포함된 각 버튼을 단축키로 지정할 수 있다. 사용자는 "PATENT" 라는 단어를 전자 장치(100)에 저장하고, 버튼(1114)을 단축키로 지정할 수 있다.
이후 사용자가 버튼(1111)에 대한 터치 입력, 엣지 부분(520)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수행하는 경우, 전자 장치(100)는 "PATENT"를 출력할 수 있다.
일 실시 예에서, 추가 입력 영역(1120)은 대문자/소문자 전환 버튼(1122)을 포함할 수 있다. 예로, 전자 장치(100)가 버튼(1122)에 대한 터치 입력을 수신하면, 전자 장치(100)는 버튼(1122)이 활성화되었음을 나타낼 수 있다. 예로, 전자 장치(100)는 버튼(1122)의 색을 다르게 나타낼 수 있다.
사용자가 알파벳 입력 영역(1111)에 포함된 버튼을 터치하는 경우, 전자 장치(100)는 대문자를 출력할 수 있다. 일 실시 예에서, 하나의 알파벳이 입력되면 버튼(1122)의 활성화가 해제될 수 있다.
예로, 사용자는 대문자/소문자 전환 버튼(1122)에 대한 터치 입력을 수행한 후에 버튼(1112)에 대한 터치 입력을 수행할 수 있다. 이 경우, 전자 장치(100)는 대문자 "D"를 출력할 수 있다.
일 실시 예에서, 전자 장치(100)가 버튼(1122)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 수신하면, 전자 장치(100)는 버튼(1122)을 활성화된 상태로 고정할 수 있다. 예로, 버튼(1122)에 대한 터치 입력을 다시 수신하기 전까지, 사용자가 알파벳 입력 영역(1111)에 포함된 버튼을 터치하는 경우, 전자 장치(100)는 대문자를 출력할 수 있다.
일 실시 예에서, 사용자는 알파벳 입력 영역(1111)에 포함된 버튼에 대한 터치 입력 및 대문자/소문자 전환 버튼(1122)에 대한 터치 입력을 동시에 수행할 수 있다. 본 명세서에서, 두 개의 동작이 "동시에 수행" 된다는 것은, 두 동작이 서로 기 설정된 시간 내에 수행된다는 것을 의미할 수 있다.
예로, 사용자는 버튼(1112)에 대한 터치 입력 및 대문자/소문자 전환 버튼(1122)에 대한 터치 입력을 동시에 수행할 수 있다. 이 경우, 전자 장치(100)는 대문자 "E"를 출력할 수 있다.
다른 예로, 사용자는 버튼(1112)에 대한 터치 입력, 대문자/소문자 전환 버튼(1122)에 대한 터치 입력 및 주변 영역(1030)에 대한 호버링 입력을 동시에 수행할 수 있다. 이 경우, 전자 장치(100)는 대문자 "F"를 출력할 수 있다.
일 실시 예에서, 전자 장치(100)의 엣지 영역(520)은 추가 입력 영역(1120)에 포함되지 않는 일부 영역(1025)을 포함할 수 있다.
전자 장치(100)가 알파벳 영역(1110)에 포함된 버튼에 대한 터치 입력 및 전자 장치(100)의 엣지 부분(520)에 포함된 일부 영역(1025)에 대한 터치 입력을 수신하는 경우, 전자 장치(100)는 제2 알파벳을 출력할 수 있다.
예로, 사용자는 버튼(1112)에 대한 터치 입력 및 일부 영역(1025)에 대한 터치 입력을 동시에 수행할 수 있다. 이 경우, 전자 장치(100)는 소문자 "e"를 출력할 수 있다.
도 12는 엣지 부분을 포함하지 않는 전자 장치의 예시를 도시한 도면이다.
일 실시 예에서, 전자 장치(100)가 원 형태인 경우 엣지 부분을 포함하지 않을 수 있다. 다른 실시 예에서, 전자 장치(100)가 사각 형태인 경우에도 엣지 부분을 포함하지 않을 수도 있다.
엣지 부분을 포함하지 않는 전자 장치(100)의 경우, 베젤(1210) 부분을 이용하여 주변 영역(1250)에 대한 호버링 입력을 수신할 수 있다. 전자 장치(100)는 베젤(1210) 부분에 터치 패널, 하나 이상의 센서 및 카메라 중 적어도 하나를 포함할 수 있다.
일 실시 예에서, 전자 장치(100)가 원 형태인 경우, 주변 영역(1250)을 각도에 따라 분할할 수 있다. 예를 들어, 전자 장치(100)는 주변 영역(1250)을 직각으로 분할하여 4개의 주변 영역에 대한 호버링 입력을 수신할 수 있다.
다른 실시 예에서, 전자 장치(100)는 손등(150) 부분에 대한 호버링 입력, 손목(140) 부분에 대한 호버링 입력 및 그 외의 영역에 대한 호버링 입력을 구분하여 수신할 수 있다.
도 13은 일 실시 예에 따라 호버링 입력을 수신하는 전자 장치를 제어하는 방법을 도시한 흐름도이다. 도 13에 도시된 방법은 도 2에 도시된 방법의 일 실시 예이다. 따라서, 도 13의 실시 예에 대한 설명에서 생략된 부분이라 할지라도 도 2에 관련하여 설명된 내용은 도 13의 실시 예에도 적용될 수 있다.
단계 1302에서, 전자 장치(100)는 터치 패널을 터치하는 사용자의 적어도 하나의 터치 입력을 수신할 수 있다.
단계 1304에서, 전자 장치(100)는 연속적인 제스쳐 타입의 호버링 입력을 수신할 수 있다. 일 실시 예에서, 전자 장치(100)는 기 설정된 시간 동안 연속적인 제스쳐 타입의 호버링 입력을 수신할 수 있다. 전자 장치(100)가 수신할 수 있는 제스쳐 타입에는 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.
단계 1306에서, 전자 장치(100)는 호버링 입력의 제스쳐 모양에 대응되는 제어 명령을 결정할 수 있다. 일 실시 예에서, 전자 장치(100)는 대응되는 제어 명령이 존재하지 않는 제스쳐 모양의 호버링 입력이 수신된 경우, 수신된 호버링 입력을 무시할 수 있다.
단계 1308에서, 전자 장치(100)는 결정된 제어 명령에 따라 전자 장치를 제어할 수 있다.
도 14는 호버링 입력의 예시를 도시한 도면이다.
도 14를 참조하면, 전자 장치(100)는 다양한 제스쳐 타입의 호버링 입력을 수신할 수 있다. 도 14에 도시된 제스쳐 타입의 호버링 입력은 예시를 위한 것이고, 전자 장치(100)가 수신할 수 있는 제스쳐 타입의 호버링 입력의 종류는 이에 제한되지 않는다.
도 14를 참조하면, 전자 장치(100)는 주변 영역을 터치하는 호버링 입력(1400)을 수신할 수 있다.
또한, 1410 내지 1450에서와 같이, 전자 장치(100)는 주변 영역에서 연속적인 제스쳐 타입의 호버링 입력을 수신할 수도 있다.
또한, 전자 장치(100)는 주변 영역에서 좌우 플릭(flick, 1410) 및 상하 플릭(1420) 호버링 입력을 수신할 수 있다.
또한, 전자 장치(100)는 주변 영역에서 원을 그리는 호버링 입력(1430) 및 S자 모양의 호버링 입력(1440)을 수신할 수 있다.
또한, 전자 장치(100)는 전자 장치(100)를 터치하는 손가락으로부터 수신된 터치 입력 및 전자 장치(100)의 주변 영역을 터치하는 손가락으로부터 수신된 호버링 입력을 조합하여 멀티 터치 기능(1450)을 구현할 수 있다.
예로, 전자 장치(100)가 전자 장치(100)를 터치하는 손가락이 일방향으로 이동하는 슬라이드 입력을 수신할 수 있다. 이와 동시에, 전자 장치(100)는 주변 영역을 터치하는 손가락이 반대 방향으로 이동하는 호버링 입력을 수신할 수 있다.
이 경우, 전자 장치(100)는 전자 장치(100)에 디스플레이된 화면을 확대 또는 축소할 수 있다. 예로, 전자 장치(100)는 두 손가락이 가까워지는 입력을 수신하는 경우 화면을 축소할 수 있다. 또한, 전자 장치(100)는 두 손가락이 멀어지는 입력을 수신하는 경우 화면을 확대할 수 있다.
도 15는 터치 입력 및 제스쳐 타입의 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 방법의 예시를 도시한 도면이다.
전자 장치(100)는 사용자의 터치 입력을 수신할 수 있다. 도 15의 표(1500)를 참조하면, 전자 장치(100)는 전면(1520)에 대한 터치 입력 및 엣지(1530)에 대한 터치 입력 중 적어도 하나를 수신할 수 있다.
전자 장치(100)는 사용자의 호버링 입력을 수신할 수 있다. 도 15를 참조하면, 전자 장치(100)는 손등(1540)에 대한 호버링 입력 및 손목(1550)에 대한 호버링 입력 중 적어도 하나를 수신할 수 있다.
전자 장치(100)는 터치 입력 및 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다. 도 15를 참조하면, 전자 장치(100)가 결정할 수 있는 제어 명령은 볼륨 조절(1511), 밝기 조절(1512), 폰트 변경(1513) 및 줌(1514) 기능을 수행하기 위한 제어 명령을 포함할 수 있다.
전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손등에 대한 사용자의 상하 플릭 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 볼륨을 조절할 수 있다.
또한, 전자 장치(100)는 사용자가 전면을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손목에 대한 사용자의 상하 플릭 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 밝기를 조절할 수 있다.
또한, 전자 장치(100)는 사용자가 엣지 부분을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손등에 대한 사용자의 좌우 플릭 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 폰트를 변경할 수 있다.
또한, 전자 장치(100)는 사용자가 엣지 부분을 터치하는 터치 입력을 수신하고, 터치 입력으로부터 기 설정된 시간 내에 손목에 대한 사용자의 좌우 플릭 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 화면의 크기 또는 카메라로 촬영하는 영상을 확대하는 줌 기능을 수행할 수 있다.
도 16은 의도되지 않은 호버링 입력을 배제하는 방법의 예시를 도시한 흐름도이다. 도 16에 도시된 방법은 도 2에 도시된 방법의 일 실시 예이다. 따라서, 도 16의 실시 예에 대한 설명에서 생략된 부분이라 할지라도 도 2에 관련하여 설명된 내용은 도 16의 실시 예에도 적용될 수 있다.
단계 1602에서, 전자 장치(100)는 터치 패널을 터치하는 사용자의 적어도 하나의 터치 입력을 수신할 수 있다.
단계 1604에서, 전자 장치(100)는 호버링 입력이 수신되었는지를 판단할 수 있다. 일 실시 예에서, 전자 장치(100)는 터치 입력이 수신된 이후의 기 설정된 시간 이후에 수신되는 호버링 입력을 무시할 수 있다. 다른 실시 예에서, 전자 장치(100)는 터치 입력이 수신되지 않은 경우 호버링 입력을 수신하지 않을 수 있다.
호버링 입력의 경우, 의도하지 않은 입력 혹은 잘못된 입력이 발생하는 경우가 많을 수 있다. 전자 장치(100)는 호버링 입력을 선택적으로 수신함으로써 사용자의 의도에 부합하는 호버링 입력을 수신할 수 있다.
호버링 입력이 수신되지 않은 경우, 전자 장치(100)는 단계 1608을 수행할 수 있다. 호버링 입력이 수신된 경우, 전자 장치(100)는 단계 1606을 수행할 수 있다.
단계 1606에서, 전자 장치(100)는 의도되지 않은 호버링 입력인지 여부를 판단할 수 있다. 도 17은 의도되지 않은 호버링 입력의 예시를 도시한 도면이다. 도 17을 참조하면, 전자 장치(100)는 사용자에 의해 착용되는 웨어러블 장치일 수 있다.
전자 장치(100)가 호버링 입력을 수신하는 주변 영역(300)은 전자 장치가 호버링 입력을 감지할 수 있는 최대 범위를 나타낼 수도 있고, 사용자에 의해 기 설정된 영역을 나타낼 수도 있다.
전자 장치(100)는, 제2 손가락(130)에 의해 터치 입력이 수신된 이후의 기 설정된 시간 내에 제1 위치(1700)에 대한 호버링 입력을 수신할 수 있다. 전자 장치(100)는 제1 위치(1700)까지의 거리를 감지할 수 있다. 제1 위치(1700)가 주변 영역(300) 바깥인 것으로 판단되는 경우, 전자 장치(100)는 제1 위치(1700)에 대한 호버링 입력은 의도되지 않은 호버링 입력인 것으로 판단할 수 있다.
또한, 전자 장치(100)는, 제1 손가락(120)에 의한 호버링 입력을 수신할 수 있다. 전자 장치(100)는 연속적인 제스쳐 타입의 호버링 입력을 수신할 수 있다. 수신된 제스쳐 타입에 대응되는 제어 명령이 없는 경우, 전자 장치(100)는 의도되지 않은 호버링 입력이 수신된 것으로 판단할 수 있다.
또한, 전자 장치(100)는 손목 부분(1710)에 의한 호버링 입력을 수신할 수 있다. 예를 들어, 사용자가 전자 장치(100)를 향하여 손목을 위로 꺾으면, 전자 장치(100)의 우측 엣지 부분에 위치한 터치 패널, 센서 또는 카메라가, 꺾여진 손목 부분을 감지함으로써 호버링 입력을 수신할 수 있다.
전자 장치(100)는 호버링 입력이 수신되는 범위를 판단할 수 있다. 호버링 입력이 수신되는 범위가 기 설정된 임계값 이상일 경우, 전자 장치(100)는 손목 부분(1710)의 움직임에 따른, 의도되지 않은 호버링 입력이 수신된 것으로 판단할 수 있다.
의도되지 않은 호버링 입력이 수신된 것으로 판단되는 경우, 전자 장치(100)는 단계 1608을 수행할 수 있다.
사용자의 의도에 따른 호버링 입력이 수신된 것으로 판단되는 경우, 전자 장치(100)는 단계 1610을 수행할 수 있다.
단계 1608에서, 전자 장치(100)는 수신된 터치 입력에 대응되는 제어 명령을 결정할 수 있다. 사용자의 의도에 따른 호버링 입력이 수신되지 않았으므로, 전자 장치(100)는 수신된 터치 입력에 대응되는 제어 명령을 결정한다.
단계 1610에서, 전자 장치(100)는 수신된 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다. 사용자의 의도에 따른 호버링 입력에 대응되는 제어 명령을 결정함으로써, 전자 장치(100)는 사용자 원하는 동작을 수행할 수 있다.
단계 1612에서, 전자 장치(100)는 결정된 제어 명령에 따라 전자 장치를 제어할 수 있다.
도 18은 일 실시 예에 따라 터치 패널 영역에 대한 호버링 입력을 수신하는 전자 장치를 제어하는 방법을 도시한 흐름도이다. 도 18에 도시된 방법은 도 2에 도시된 방법의 일 실시 예이다. 따라서, 도 18의 실시 예에 대한 설명에서 생략된 부분이라 할지라도 도 2에 관련하여 설명된 내용은 도 18의 실시 예에도 적용될 수 있다.
단계 1802에서, 전자 장치(100)는 터치 패널을 터치하는 사용자의 적어도 하나의 터치 입력을 수신할 수 있다.
단계 1804에서, 전자 장치(100)는 터치 패널의 전체 영역 중에서, 터치된 부분 이외의 영역에 대한 사용자의 호버링 입력을 수신할 수 있다. 예로, 전자 장치(100)는 터치 패널의 전면 부분에 있어서, 터치된 부분 이외의 영역에 근접한 객체에 의한 호버링 입력을 수신할 수 있다.
단계 1806에서, 전자 장치(100)는 터치 입력 및 터치 입력에 의해 터치된 부분 이외의 영역에 대한 사용자의 호버링 입력의 조합에 대응되는 제어 명령을 결정할 수 있다.
단계 1808에서, 전자 장치(100)는 결정된 제어 명령에 따라 전자 장치를 제어할 수 있다.
도 19는 두 손을 이용하여 전자 장치를 제어하는 방법의 예시를 도시한 개요도이다.
도 19를 참조하면, 전자 장치(100)는 테이블에 두고 이용할 수 있는 태블릿 PC 또는 스마트 TV와 같이 두 손으로 조작하기 용이한 장치를 포함할 수 있다.
일 실시 예에서, 사용자는 왼손(1910) 또는 왼손(1910)에 들고 있는 터치 펜으로 전자 장치(100)의 터치 패널(400)을 터치할 수 있다.
전자 장치(100)는, 터치 입력이 수신된 이후의 기 설정된 시간 내에, 터치 패널의 전체 영역 중에서, 터치 입력에 의해 터치된 부분 이외의 영역에 대한 사용자의 호버링 입력을 수신할 수 있다. 예로, 사용자는 왼손(1910)을 이용하여 터치 패널(400)을 터치한 이후의 기 설정된 시간 내에, 오른손(1920)을 이용하여 터치된 부분 이외의 영역에 대한 호버링 입력을 수행할 수 있다.
사용자는 오른손(1920)을 상, 하, 좌, 우로 이동하는 호버링 입력을 수행할 수 있다. 또한, 사용자는 오른손(1920)의 높낮이를 변경하는 호버링 입력을 수행할 수 있다.
예로, 전자 장치(100)는 왼손(1910)을 이용하여 전자 장치(100)에 디스플레이되는 사진을 터치하는 터치 입력을 수신할 수 있다. 터치 입력이 수신된 이후의 기 설정된 시간 이내에, 전자 장치(100)는 오른손(1920)을 위쪽으로 이동하는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 사진을 확대하여 디스플레이할 수 있다.
또한, 터치 입력이 수신된 이후의 기 설정된 시간 이내에, 전자 장치(100)는 오른손(1920)을 아래쪽으로 이동하는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 사진을 축소하여 디스플레이할 수 있다.
다른 실시 예에서, 전자 장치(100)는 왼손(1910)을 이용하여 전자 장치(100)에 디스플레이되는 웹 페이지를 터치하는 터치 입력을 수신할 수 있다. 터치 입력이 수신된 이후의 기 설정된 시간 이내에, 전자 장치(100)는 오른손(1920)을 오른쪽으로 이동하는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 웹 페이지의 다음 페이지를 디스플레이할 수 있다.
또한, 터치 입력이 수신된 이후의 기 설정된 시간 이내에, 전자 장치(100)는 오른손(1920)을 왼쪽으로 이동하는 호버링 입력을 수신할 수 있다. 이 경우, 전자 장치(100)는 웹 페이지의 이전 페이지를 디스플레이할 수 있다.
도 20은 두 손을 이용하여 전자 장치를 제어하는 방법을 구체적으로 도시한 도면이다.
전자 장치(100)는 터치 패널(400)을 이용하여 사용자로부터 터치 입력 및 호버링 입력을 수신할 수 있다. 예로, 터치 패널(400)은 사용자가 왼손(1910)을 이용하여 터치 패널(400)을 터치하는 터치 입력을 수신할 수 있다.
전자 장치(100)는 왼손(1910)에 의한 터치 입력을 수신하는 시점에 오른손(1920)의 위치를 결정할 수 있다. 예로, 오른손(1920)의 위치는 터치 패널(400)으로부터의 상대적인 위치일 수 있다.
전자 장치(100)는 터치 입력을 수신하는 시점에 결정된 오른손(1920)의 위치를 기준 위치로 하여, 사용자의 호버링 입력을 수신할 수 있다.
예로, 전자 장치(100)는 터치 패널(400)을 이용하여 오른손(1920)이 기준 위치로부터 x축 방향(2010), y축 방향(2020) 및 z축 방향(2030)으로 이동하는 것을 감지할 수 있다. 전자 장치(100)는 오른손(1920)이 이동하는 방향 또는 오른손(1920)이 움직이는 제스쳐 타입을 감지하여, 호버링 입력을 수신할 수 있다.
일 실시 예에서, 왼손(1910)에 의한 터치 입력을 수신하는 시점에 오른손(1920)이 감지되지 않을 수 있다. 다른 실시 예에서, 기준 위치가 터치 패널(400)으로부터 기 설정된 거리 이상 멀리 있을 수 있다. 이 경우, 전자 장치(100)는 호버링 입력을 수신하지 않을 수 있다.
또한, 기준 위치는 터치 패널(400)으로부터 기 설정된 거리 내에 위치하였으나, 오른손(1920)이 터치 패널(400)이 감지할 수 있는 범위를 벗어나거나, 터치 패널(400)으로부터 기 설정된 거리 이상 멀어질 수 있다. 이 경우, 전자 장치(100)는 호버링 입력을 더 이상 수신하지 않을 수 있다.
도 21은 한 손을 이용하여 전자 장치를 제어하는 방법의 예시를 도시한 도면이다. 도 21을 참조하면, 터치 패널(400)은 사용자로부터 터치 입력을 수신할 수 있다.
일 실시 예에서, 터치 패널(400)을 터치하는 손가락이 터치 패널(400)에 가깝게 기울어진 제1 포즈(2110)를 취하고 있을 수 있다. 이 경우, 터치 패널(400)은 손가락에 의한 터치 입력을 수신하고, 제1 공간(2150)에서 터치되지 않은 손가락 부분을 감지할 수 있다.
예로, 제1 공간(2150)에서는 제1 포즈(2110)를 취하고 있는 손가락과 터치 패널(400) 사이의 거리가 가까울 수 있다.
이후, 손가락이 터치 패널(400)을 터치한 상태를 유지한 채로, 손가락이 터치 패널(400)로부터 멀리 기울어진 제2 포즈(2120)를 취하도록 움직일 수 있다.
이 경우, 터치 패널(400)은 터치 패널에 터치되지 않은 손가락 부분과 터치 패널(400) 사이의 거리가 멀어짐을 감지할 수 있다 예로, 제2 공간(2160)에서는 제2 포즈(2120)를 취하고 있는 손가락과 터치 패널(400) 사이의 거리가 멀 수 있다.
터치 패널(400)은 손가락과 터치 패널(400) 사이의 거리가 멀어지는 것을 감지하고, 손가락의 기울기를 변경하는 움직임을 호버링 입력으로서 수신할 수 있다. 이에 따라, 전자 장치(100)는 터치 패널에 대한 터치 입력 및 터치되지 않은 손가락 부분에 의한 호버링 입력을 수신할 수 있다.
전자 장치(100)는 터치 패널(400)을 터치한 손가락의 기울기가 변경되는 호버링 입력에 대응되는 제어 명령을 결정 및 수행할 수 있다.
도 22 및 도 23은 일 실시 예에 따른 전자 장치의 블록도이다.
도 22에 도시된 바와 같이, 일 실시예에 따른 전자 장치(100)는, 프로세서(110) 및 터치 패널(400)을 포함할 수 있다. 터치 패널(400)은 정전용량식 또는 압력식 등을 포함할 수 있으며, 접촉식 또는 비접촉식을 포함할 수 있다. 또한 터치패드로도 표현될 수 있다.
그러나, 도 22에 도시된 구성 요소 모두가 전자 장치(100)의 필수 구성 요소인 것은 아니다. 도 22에 도시된 구성 요소보다 많은 구성 요소에 의해 전자 장치(100)가 구현될 수도 있고, 도 22에 도시된 구성 요소보다 적은 구성 요소에 의해 전자 장치(100)가 구현될 수도 있다.
예를 들어, 도 23에 도시된 바와 같이, 일 실시 예에 따른 전자 장치(100)는, 터치 패널(400), 출력부(20), 프로세서(110), 및 통신부(50) 이외에 센싱부(40), A/V 입력부(60), 및 메모리(70)를 더 포함할 수도 있다.
일 실시 예에서, 전자 장치(100)는 사용자가 전자 장치(100)를 제어하기 위한 데이터를 입력하는 다양한 수단을 더 포함할 수 있다. 예를 들어, 전자 장치(100)에는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패널(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다.
터치 패널(400)은 터치 센서 및 터치 센서에 포함된 전극을 포함할 수 있다. 터치 패널(400)은 사용자로부터 터치 입력 및 호버링 입력을 수신할 수 있다.
또한, 전자 장치(100)는 호버링 입력을 수신하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 전자 장치(100)는 센싱부(40)에 포함된 하나 이상의 센서를 이용하여 호버링 입력을 수신할 수 있다. 또한, 전자 장치(100)는 호버링 입력을 수신하기 위하여 카메라(61)를 사용할 수 있다.
출력부(20)는, 오디오 신호 또는 비디오 신호 또는 진동 신호를 출력할 수 있으며, 출력부(20)는 디스플레이부(21), 음향 출력부(22), 및 진동 모터(23)를 포함할 수 있다.
디스플레이부(21)는 전자 장치(100)에서 처리되는 정보를 표시 출력한다.
한편, 디스플레이부(21)와 터치 패널(400)이 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(21)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(21)는 액정 디스플레이, 박막 트랜지스터 액정 디스플레이, 유기 발광 다이오드, 플렉시블 디스플레이, 3차원 디스플레이, 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 그리고 전자 장치(100)의 구현 형태에 따라 전자 장치(100)는 디스플레이부(21)를 2개 이상 포함할 수도 있다. 이때, 2개 이상의 디스플레이부(21)는 힌지(hinge)를 이용하여 마주보게 배치될 수 있다.
음향 출력부(22)는 통신부(50)로부터 수신되거나 메모리(70)에 저장된 오디오 데이터를 출력한다.진동 모터(23)는 진동 신호를 출력할 수 있다. 예를 들어, 진동 모터(23)는 터치스크린에 터치가 입력되는 경우 진동 신호를 출력할 수도 있다.
프로세서(110)는, 통상적으로 전자 장치(100)의 전반적인 동작을 제어한다. 예를 들어, 프로세서(110)는, 메모리(70)에 저장된 프로그램들을 실행함으로써, 터치 패널(400), 출력부(20), 센싱부(40), 통신부(50), A/V 입력부(60) 등을 전반적으로 제어할 수 있다.
구체적으로, 프로세서(110)는, 터치 패널(400)을 제어하여 사용자의 적어도 하나의 터치 입력을 수신할 수 있다. 또한, 프로세서(110)는 터치 입력이 수신된 이후의 기 설정된 시간 내에, 전자 장치(100)의 주변 영역에 대한 사용자의 호버링 입력을 수신할 수 있다. 일 실시 예에서, 프로세서(110)는 터치 패널(400) 또는 하나 이상의 센서를 제어하여 사용자의 호버링 입력을 수신할 수 있다.
프로세서(110)는 수신된 터치 입력 및 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하고, 결정된 제어 명령에 따라 전자 장치(100)를 제어할 수 있다.
센싱부(40)는, 전자 장치(100)의 상태 또는 전자 장치(100) 주변의 상태를 감지하고, 감지된 정보를 프로세서(110)로 전달할 수 있다. 전자 장치(100)는 센싱부로부터 감지된 정보를 이용하여 사용자의 호버링 입력을 수신할 수 있다.
센싱부(40)는, 지자기 센서(Magnetic sensor)(41), 가속도 센서(Acceleration sensor)(42), 온/습도 센서(43), 적외선 센서(44), 자이로스코프 센서(45), 위치 센서(예컨대, GPS)(46), 기압 센서(22), 근접 센서(23), 및 RGB 센서(illuminance sensor)(49) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.
통신부(50)는 근거리 통신부(51), 이동 통신부(52), 방송 수신부(53) 등을 포함할 수 있다.A/V(Audio/Video) 입력부(60)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(61)와 마이크로폰(62) 등이 포함될 수 있다. 카메라(61)은 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등의 화상 프레임을 얻을 수 있다. 이미지 센서를 통해 캡쳐된 이미지는 프로세서(110) 또는 별도의 이미지 처리부(미도시)를 통해 처리될 수 있다.
카메라(61)에서 처리된 화상 프레임은 메모리(70)에 저장되거나 통신부(50)를 통하여 외부로 전송될 수 있다. 카메라(61)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다. 일 실시 예에서, 전자 장치(100)는 카메라(61)에서 처리된 화상 프레임을 이용하여 사용자의 호버링 입력을 수신할 수 있다.
마이크로폰(62)은, 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다.
메모리(70)는, 프로세서(110)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치(100)로 입력되거나 전자 장치(100)로부터 출력되는 데이터를 저장할 수도 있다.
터치스크린의 터치 입력 또는 호버링 입력을 감지하기 위해 터치스크린의 내부 또는 근처에 다양한 센서가 구비될 수 있다. 터치스크린의 터치를 감지하기 위한 센서의 일례로 촉각 센서가 있다. 촉각 센서는 사람이 느끼는 정도로 또는 그 이상으로 특정 물체의 접촉을 감지하는 센서를 말한다. 촉각 센서는 접촉면의 거칠기, 접촉 물체의 단단함, 접촉 지점의 온도 등의 다양한 정보를 감지할 수 있다.
또한, 터치스크린의 터치 및 호버링을 감지하기 위한 센서의 일례로 근접 센서가 있다. 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다.
또한, 근접 센서의 일례로서 환경 내의 전자기적 간섭(EMI)에 따라 사용자의 몸 도처에 걸쳐 운반되는 전장에 의해 발생하는 노이즈를 이용하여 터치 및 호버링을 감지하는 노이즈 터치 센서가 있을 수 있다.
전자 장치(100)는 센서를 이용하여 연속적인 제스쳐 타입의 호버링 입력 및 터치 입력을 수신할 수 있다. 사용자의 터치 제스쳐 및 호버링 제스쳐에는 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.
패닝은 손가락을 댄 후, 손을 떼지 않고 계속적으로 드래그하는 움직임을 의미할 수 있다. 스와이프는 손가락을 댄 후, 일직선으로 시간 제한 없이 드래그하는 움직임을 의미할 수 있다. 플릭은 스와이프보다 조금 더 제한적인 동작으로서, 스와이프와 유사하나 빠르게 한쪽 방향으로 드래그하는 움직임을 의미할 수 있다. 스와이프와 플릭은 팬 동작으로 인식될 수 있으며, 플릭은 스와이프로 인식될 수 있다. 단, 상기 설명은 예시를 위한 것이며, 각 동작의 형태는 상기 설명에 제한되지 않는다.
한편, 상술한 실시예는, 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터에 의해 판독 가능한 매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 실시예에서 사용된 데이터의 구조는 컴퓨터 판독 가능 매체에 여러 수단을 통하여 기록될 수 있다. 또한, 상술한 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로 구현될 수 있다.
컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 기록 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 포함할 수 있다. 또한, 컴퓨터 판독 가능 매체는 컴퓨터 저장 매체 및 통신 매체를 포함할 수 있다.
또한, 컴퓨터가 읽을 수 있는 복수의 기록 매체가 네트워크로 연결된 컴퓨터 시스템들에 분산되어 있을 수 있으며, 분산된 기록 매체들에 저장된 데이터, 예를 들면 프로그램 명령어 및 코드가 적어도 하나의 컴퓨터에 의해 실행될 수 있다.
본 개시에서 설명된 특정 실행들은 일 실시예 일 뿐이며, 어떠한 방법으로도 본 개시의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 및 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다.
본 개시의 범위는 발명의 상세한 설명보다는 특허 청구 범위에 의하여 나타나며, 특허 청구 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.
100: 모바일 디바이스
120: 제1 손가락
130: 제2 손가락
140: 손목
150: 손등
160: 터치 위치
170: 터치 위치

Claims (15)

  1. 터치 패널을 포함하는 전자 장치를 제어하는 방법에 있어서,
    상기 터치 패널의 전면 부분을 통해, 적어도 하나의 제1 터치 입력을 수신하는 단계;
    상기 터치 패널의 엣지(edge) 부분을 통해, 적어도 하나의 제2 터치 입력을 수신하는 단계;
    상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나를 제공하는 손가락이 상기 터치 패널에 터치된 상태에서, 상기 손가락의 터치되지 않은 부분과 상기 터치 패널 사이의 거리 변화를 감지함으로써 호버링 입력을 수신하는 단계;
    상기 수신된 적어도 하나의 제1 터치 입력, 상기 수신된 적어도 하나의 제2 터치 입력 및 상기 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 단계; 및
    상기 결정된 제어 명령에 따라 상기 전자 장치를 제어하는 단계; 를 포함하는 방법.
  2. ◈청구항 2은(는) 설정등록료 납부시 포기되었습니다.◈
    제1 항에 있어서,
    상기 호버링 입력을 수신하는 단계는,
    상기 전자 장치의 일측에 위치한 센서, 카메라 및 터치 패널 중 적어도 하나를 이용하여 상기 호버링 입력을 수신하는 방법.
  3. ◈청구항 3은(는) 설정등록료 납부시 포기되었습니다.◈
    제1 항에 있어서, 상기 적어도 하나의 제1 터치 입력과 상기 호버링 입력은 상기 터치 패널 상의 서로 다른 영역에서 입력되는 방법.

  4. 삭제
  5. 제1 항에 있어서, 상기 호버링 입력을 수신하는 단계는,
    연속적인 제스쳐 타입의 호버링 입력을 수신하는 단계; 를 포함하는 방법.
  6. 제5 항에 있어서, 상기 제어 명령을 결정하는 단계는,
    상기 호버링 입력의 제스쳐에 대응되는 제어 명령을 결정하는 단계를 포함하는 방법.
  7. 제1 항에 있어서,
    상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나에 기초하여, 상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나에 대응되는 제1 제어 명령을 결정하는 단계; 및
    상기 호버링 입력이 수신됨에 따라 상기 제1 제어 명령을 제2 제어 명령으로 변경하는 단계;
    를 더 포함하는 방법.
  8. 제어 명령을 결정하는 전자 장치에 있어서,
    터치 패널; 및
    상기 터치 패널의 전면 부분을 통해 적어도 하나의 제1 터치 입력을 수신하고, 상기 터치 패널의 엣지 부분을 통해 적어도 하나의 제2 터치 입력을 수신하고, 상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나를 제공하는 손가락이 상기 터치 패널에 터치된 상태에서, 상기 손가락의 터치되지 않은 부분과 상기 터치 패널 사이의 거리 변화를 감지함으로써 호버링 입력을 수신하고, 상기 수신된 적어도 하나의 제1 터치 입력, 상기 수신된 적어도 하나의 제2 터치 입력 및 상기 수신된 호버링 입력의 조합에 대응되는 제어 명령을 결정하는 프로세서; 를 포함하는 전자 장치.
  9. 제8 항에 있어서, 상기 전자 장치는 상기 전자 장치의 일측에 위치한 센서, 카메라 및 터치 패널 중 적어도 하나를 더 포함하고,
    상기 프로세서는 상기 센서, 카메라 및 터치 패널 중 적어도 하나를 이용하여 상기 호버링 입력을 수신하는 전자 장치.
  10. 제8 항에 있어서, 상기 적어도 하나의 제1 터치 입력과 상기 호버링 입력은 상기 터치 패널 상의 서로 다른 영역에서 입력되는 전자 장치.
  11. 삭제
  12. 제8 항에 있어서, 상기 프로세서는,
    연속적인 제스쳐 타입의 호버링 입력을 수신하는 전자 장치.
  13. ◈청구항 13은(는) 설정등록료 납부시 포기되었습니다.◈
    제12 항에 있어서, 상기 프로세서는,
    상기 호버링 입력의 제스쳐에 대응되는 제어 명령을 결정하는 전자 장치.
  14. 제8 항에 있어서, 상기 프로세서는,
    상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나에 기초하여, 상기 적어도 하나의 제1 터치 입력 및 상기 적어도 하나의 제2 터치 입력 중 적어도 하나에 대응되는 제1 제어 명령을 결정하고, 상기 호버링 입력이 수신됨에 따라 상기 제1 제어 명령을 제2 제어 명령으로 변경하는 전자 장치.
  15. 제1 항 내지 제3항 및 제5항 내지 제7 항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020160032928A 2016-03-18 2016-03-18 터치 패널을 포함하는 전자 장치 및 그 제어 방법 KR102559030B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160032928A KR102559030B1 (ko) 2016-03-18 2016-03-18 터치 패널을 포함하는 전자 장치 및 그 제어 방법
PCT/KR2016/008312 WO2017159931A1 (en) 2016-03-18 2016-07-28 Electronic device including touch panel and method of controlling the electronic device
US15/222,303 US10114501B2 (en) 2016-03-18 2016-07-28 Wearable electronic device using a touch input and a hovering input and controlling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160032928A KR102559030B1 (ko) 2016-03-18 2016-03-18 터치 패널을 포함하는 전자 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20170108662A KR20170108662A (ko) 2017-09-27
KR102559030B1 true KR102559030B1 (ko) 2023-07-25

Family

ID=59847057

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160032928A KR102559030B1 (ko) 2016-03-18 2016-03-18 터치 패널을 포함하는 전자 장치 및 그 제어 방법

Country Status (3)

Country Link
US (1) US10114501B2 (ko)
KR (1) KR102559030B1 (ko)
WO (1) WO2017159931A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016104922A1 (ko) * 2014-12-24 2016-06-30 전자부품연구원 웨어러블 전자기기
KR20210015489A (ko) * 2019-08-02 2021-02-10 삼성전자주식회사 휠 입력을 처리하는 전자 장치 및 이의 동작 방법
WO2021040296A1 (en) * 2019-08-23 2021-03-04 Samsung Electronics Co., Ltd. Method for determining proximity of at least one object using electronic device
KR102187965B1 (ko) * 2020-03-31 2020-12-07 주식회사 가난한동지들 오브젝트 카메라 및 감지센서가 구비된 영상표시장치
KR102187964B1 (ko) * 2020-03-31 2020-12-07 주식회사 가난한동지들 오브젝트 카메라 및 감지센서가 구비된 키보드

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005182A (ja) * 2013-06-21 2015-01-08 カシオ計算機株式会社 入力装置、入力方法及びプログラム並びに電子機器

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8416217B1 (en) 2002-11-04 2013-04-09 Neonode Inc. Light-based finger gesture user interface
KR101597524B1 (ko) * 2009-05-18 2016-02-25 엘지전자 주식회사 비접촉 센서를 이용하여 동작 제어가 휴대 단말기 및 그 제어방법
US8535133B2 (en) 2009-11-16 2013-09-17 Broadcom Corporation Video game with controller sensing player inappropriate activity
US8614693B2 (en) * 2010-08-27 2013-12-24 Apple Inc. Touch and hover signal drift compensation
WO2012044713A1 (en) 2010-10-01 2012-04-05 Imerj LLC Drag/flick gestures in user interface
US9921661B2 (en) 2012-10-14 2018-03-20 Neonode Inc. Optical proximity sensor and associated user interface
US20140282279A1 (en) * 2013-03-14 2014-09-18 Cirque Corporation Input interaction on a touch sensor combining touch and hover actions
US9477356B2 (en) * 2013-06-19 2016-10-25 Qualcomm Incorporated System and method to drive touch panel to measure hover
US20150077345A1 (en) * 2013-09-16 2015-03-19 Microsoft Corporation Simultaneous Hover and Touch Interface
KR102161743B1 (ko) 2013-11-26 2020-10-06 삼성디스플레이 주식회사 터치 감지 장치 및 이를 포함하는 표시 장치
KR102297473B1 (ko) * 2014-07-15 2021-09-02 삼성전자주식회사 신체를 이용하여 터치 입력을 제공하는 장치 및 방법
WO2016017956A1 (en) 2014-07-30 2016-02-04 Samsung Electronics Co., Ltd. Wearable device and method of operating the same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005182A (ja) * 2013-06-21 2015-01-08 カシオ計算機株式会社 入力装置、入力方法及びプログラム並びに電子機器

Also Published As

Publication number Publication date
WO2017159931A1 (en) 2017-09-21
US20170269765A1 (en) 2017-09-21
KR20170108662A (ko) 2017-09-27
US10114501B2 (en) 2018-10-30

Similar Documents

Publication Publication Date Title
US11886699B2 (en) Selective rejection of touch contacts in an edge region of a touch surface
KR102120930B1 (ko) 포터블 디바이스의 사용자 입력 방법 및 상기 사용자 입력 방법이 수행되는 포터블 디바이스
KR102264444B1 (ko) 전자 장치에서 기능 실행 방법 및 장치
KR102160767B1 (ko) 제스처를 감지하여 기능을 제어하는 휴대 단말 및 방법
KR102559030B1 (ko) 터치 패널을 포함하는 전자 장치 및 그 제어 방법
US11003328B2 (en) Touch input method through edge screen, and electronic device
US20140062875A1 (en) Mobile device with an inertial measurement unit to adjust state of graphical user interface or a natural language processing unit, and including a hover sensing function
KR102155836B1 (ko) 터치 스크린 상에서 객체 디스플레이를 제어하는 휴대 단말 및 방법
KR20130102834A (ko) 이동 단말기 및 그 제어방법
US20170192465A1 (en) Apparatus and method for disambiguating information input to a portable electronic device
JP6304232B2 (ja) 携帯電子機器、その制御方法及びプログラム
US20230051261A1 (en) Electronic device for displaying contents, and control method therefor
KR102227290B1 (ko) 이동단말기 및 그 제어방법
AU2013100574A4 (en) Interpreting touch contacts on a touch surface
KR102353919B1 (ko) 터치의 압력에 응답하여 지정된 동작을 수행하는 전자 장치 및 방법
KR20160000534U (ko) 터치패드를 구비한 스마트폰
KR102258313B1 (ko) 이동단말 및 그 제어방법
KR101375727B1 (ko) 선형터치패턴을 이용한 터치스크린의 화면확대/축소 방법 및 장치
KR20200091550A (ko) 이동 단말 및 그 제어 방법
KR20130090665A (ko) 3차원 디스플레이 제어장치
AU2017219061A1 (en) Interpreting touch contacts on a touch surface
KR20170031332A (ko) 화면에 표시된 소프트웨어에 따라 입력가능영역이 제한되는 디스플레이 장치 및 제어 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant