KR20160023298A - 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법 - Google Patents

전자 장치 및 전자 장치의 입력 인터페이스 제공 방법 Download PDF

Info

Publication number
KR20160023298A
KR20160023298A KR1020140109481A KR20140109481A KR20160023298A KR 20160023298 A KR20160023298 A KR 20160023298A KR 1020140109481 A KR1020140109481 A KR 1020140109481A KR 20140109481 A KR20140109481 A KR 20140109481A KR 20160023298 A KR20160023298 A KR 20160023298A
Authority
KR
South Korea
Prior art keywords
input signal
touch screen
electronic pen
electronic device
input
Prior art date
Application number
KR1020140109481A
Other languages
English (en)
Inventor
김남회
최민기
안대일
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140109481A priority Critical patent/KR20160023298A/ko
Priority to US14/830,079 priority patent/US20160054851A1/en
Priority to EP15181744.2A priority patent/EP2988202A1/en
Publication of KR20160023298A publication Critical patent/KR20160023298A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186—Touch location disambiguation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04807—Pen manipulated menu
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/046—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means

Abstract

본 발명은 한 실시 예에 따른 전자 장치는 서로 다른 입력 방식을 기반으로 한 제 1 입력 신호 및 제 2 입력 신호를 수신하는 터치스크린; 및 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되면, 전자 펜 속성과 관련된 이벤트 아이템을 표시하도록 터치스크린을 제어하고, 이벤트 아이템의 표시 및 제 1 입력 신호의 입력이 지속되는 중 제 2 입력 신호를 수신하면, 제 2 입력 신호를 기반으로 이벤트 아이템과 관련된 기능을 표시하도록 터치스크린을 제어하는 제어 모듈을 포함한다.

Description

전자 장치 및 전자 장치의 입력 인터페이스 제공 방법{ELECTRONIC DEVICE AND METHOD FOR PROVIDING INPUT INTERFACE THEREOF}
본 발명의 다양한 실시 예들은 서로 다른 입력 방식을 기반으로 입력되는 적어도 두 가지의 입력 정보에 의한 입력 인터페이스 제공 방법과 이를 구현하는 전자 장치에 관한 것이다.
최근 모바일 기기 등의 전자 장치는 사용자가 손가락이나 전자 펜을 이용하여 화면을 터치하거나 접근하는 터치스크린 입력 방식을 주로 적용하고 있다. 이러한 터치스크린 입력 방식은 스마트폰, 휴대폰, 노트북 컴퓨터, 테블릿, 또는 컴퓨터 등과 같은 광범위한 전자 장치에 이용되고 있다.
또한, 터치스크린 입력 방식은 주로 사용자의 제스처 또는 전자 펜 등의 입력 수단에 의해 이루어지고 있다. 예컨대 입력 방식은 터치스크린에 대한 전자 펜의 접촉 또는 비접촉 근접 상태 등으로 이루어질 수 있다. 제스처 또는 전자 펜 입력은 최근 다양한 조합을 통한 컨버전스 형태의 입력으로 이용되고 있다.
전자 장치에 대한 입력 방식이 다양해짐에 따라, 특정 기능을 실행하기 위한 과정 또한 복잡해지고 있다. 따라서, 입력 방식이 복잡해질수록 전자 장치에 대한 접근성과 사용성이 저하된다는 문제점이 있다.
따라서, 핸드 기반 입력과 전자 펜 기반 입력 방법에 대한 입력 방식을 직관적으로 제공하여 특정 기능에 대한 빠른 접근성을 도모할 필요성이 있다.
또한, 최근 자주 사용하는 전자 펜의 입력 방법을 특정 어플리케이션에서 보다 쉽게 활용해야 할 필요성이 있다.
본 발명의 다양한 실시 예에 따른 전자 장치는 서로 다른 입력 방식을 기반으로 한 제 1 입력 신호 및 제 2 입력 신호를 수신하는 터치스크린; 및 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되면, 전자 펜 속성과 관련된 이벤트 아이템을 표시하도록 터치스크린을 제어하고, 이벤트 아이템의 표시 및 제 1 입력 신호의 입력이 지속되는 중 제 2 입력 신호를 수신하면, 제 2 입력 신호를 기반으로 이벤트 아이템과 관련된 기능을 표시하도록 터치스크린을 제어하는 제어 모듈을 포함할 수 있다.
본 발명의 다양한 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법은 제 1 입력 신호를 수신하는 단계; 제 1 입력 신호가 미리 설정된 시간 이상 수신되면 전자 펜 속성과 관련된 이벤트 아이템을 터치스크린에 표시하는 단계; 제 1 입력 신호가 미리 설정된 시간 이상 수신되는 동안 제 2 입력 신호를 수신하는 단계; 및 수신된 제 2 입력 신호를 기반으로 이벤트 아이템과 관련된 기능을 표시하는 단계를 포함하고, 제 1 입력 신호 및 상기 제 2 입력 신호는, 서로 다른 입력 방식을 기반으로 한 입력 신호인 것을 포함할 수 있다.
본 발명의 한 실시 예에 의하면 적어도 2개의 다른 기반의 입력 신호를 모두 수신하는 것을 기반으로 전자 펜 속성과 관련된 기능을 표시하는 것에 의해, 전자 펜 관련 어플리케이션에서 자주 사용하는 기능 등을 빠르고 직관적으로 실행할 수 있다.
도 1은 본 발명의 한 실시 예에 따른 전자 장치의 구성을 도시하는 블록도이다.
도 2는 본 발명의 한 실시 예에 따른 제어 모듈의 구성을 도시하는 블록도이다.
도 3은 본 발명의 한 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
도 4는 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
도 5는 본 발명의 한 실시 예에 따른 전자 장치의 입력 인터페이스의 오동작을 방지하는 방법을 나타내는 순서도이다.
도 6a 내지 6b는 도 5의 동작을 나타내는 예시도이다.
도 7은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스의 오동작을 방지하는 방법을 나타내는 순서도이다.
도 8a 내지 도 8b는 도 7의 동작을 나타내는 예시도이다.
도 9는 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
도 10은 도 9의 동작을 나타내는 예시도이다.
도 11은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
도 12a 내지 12d는 도 11의 동작을 나타내는 예시도이다.
도 13은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
도 14a 내지 14b는 도 13의 동작을 나타내는 예시도이다.
이하, 첨부된 도면들을 참조하여 다양한 실시 예들을 상세히 설명한다. 이때, 첨부된 도면들에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. 하기의 설명에서는 본 발명의 다양한 실시 예들에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
도 1은 본 발명의 한 실시 예에 따른 전자 장치(100)의 구성을 도시하는 블록도이다. 전자 장치(100)는 전자 펜(110), 센서 모듈(120), 메모리(130), 터치스크린(140) 및 제어 모듈(170)을 포함할 수 있다. 전자 펜(110)은 전자 장치(100)에 포함되어 있는 것으로 도시되어 있으나 이에 한정하는 것은 아니다. 예컨대, 전자 펜(110)은 다른 전자 장치로부터 제공되는 별도의 장치일 수 있다.
전자 펜은(110)은 전자 장치(100)를 구동하기 위해 다양한 신호를 입력할 수 있는 펜 형태의 입력 도구일 수 있다. 전자 펜(110)은 디지타이저(미도시)상에서 입력 가능하고, 코일과 커패시터로 구성된 LC 공진 회로(LC resonance circuit)을 포함할 수 있다. 코일은 디지타이저에 형성된 자기장에 의하여 전류를 발생시킬 수 있고, 발생된 전류를 커패시터로 전달할 수 있다. 커패시터는 전달된 전류에 의해 충전 가능하고, 전류를 코일로 방전시킬 수 있다. 이에 의해, 코일에는 자기장이 형성되며, 형성된 자기장은 디지타이저에서 검출될 수 있다.
전자 펜(110)은 지연 소자(예컨대, SAW 디바이스)를 이용한 패시브 방식(Passive-type)으로 형성될 수 있다. 예를 들어, 패시브 방식의 전자 펜(110)은 안테나를 통해 전자 장치(100)로부터 무선(Radio Frequency: RF) 신호를 수신할 수 있다. 패시브 방식의 전자 펜(110)은 수신된 무선 신호에 대한 반사 신호를 지연 소자를 통해 일정 시간 지연 후 다시 전자 장치(100)에 송신할 수 있다. 패시브 방식의 전자 펜(110)은 수신된 무선 신호와 동일한 주파수를 가지는 반사 신호를 안테나를 통해 전자 장치(100)에 송신하거나, 주파수, 진폭 및 위상 중 적어도 하나가 변화된 반사 신호를 안테나를 통해 전자 장치(100)에 송신할 수 있다. 패시브 방식의 전자 펜(110)은 주파수, 진폭 및 위상 적어도 하나가 변환된 반사 신호를 통해 전자 펜(110)에 가해지는 압력(필압), 또는 버튼 입력 등의 상태 정보를 전자 장치(100)에 제공할 수 있다.
전자 펜(110)은 LC공진 회로를 이용한 전자기공진 방식을 이용하거나, 지연 소자를 이용한 패시브 방식을 이용할 수 있으나, 이에 한정하는 것은 아니다. 예컨대, 본 발명에서 사용되는 전자 펜(110)은 전자기공진 방식 또는 패시브 방식 이외에 다양한 방식을 이용할 수 있다.
한 실시 예에 따르면, 전자 펜(110)은 전자 장치(100)에 대한 입력 신호 전송이 가능한 기능 버튼을 포함할 수 있다(미도시). 예를 들어, 전자 펜(110)은 물리적으로 구현되는 적어도 하나의 버튼을 포함할 수 있다. 전자 장치(100)는 전자 펜(110)에 포함된 기능 버튼의 입력, 해제, 또는 입력 후 일정 시간 이상의 홀드(hold) 동작 중 적어도 어느 하나의 동작을 기반으로 특정 입력 신호를 수신할 수 있다. 특정 입력 신호는, 전자 펜(110)의 터치 또는 호버링 입력 신호와 상이한 신호일 수 있다. 전자 장치(100)는 전자 펜(110)의 터치 또는 호버링 입력 신호와 전자 펜(110)의 기능 버튼 입력 신호가 결합된 신호를 새로운 입력 신호로서 인식할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110)이 터치스크린(140)상에 터치되었을 경우와 전자 펜(110)의 기능 버튼이 입력된 상태에서 전자 펜(110)이 터치스크린(140)상에 터치되었을 경우의 신호 입력을 구분하여 인식할 수 있다.
한 실시 예에 따르면, 전자 펜(110)은 전자 펜(110)의 기울기, 이동 속도, 전자 펜(110)과 터치스크린(140) 사이의 거리 등을 측정하기 위해 필요한 적어도 하나의 센서를 포함할 수 있다. 적어도 하나의 센서는 예컨대, 2축 또는 3축의 가속도 센서, 2축 또는 3축의 자이로 센서 등을 포함할 수 있다. 센서의 종류는 예시적인 것이며, 본 발명은 이에 한정하지 않는다. 예컨대, 전자 펜(110)의 기울기, 이동 속도 또는 전자 펜(110)과 터치스크린(140) 사이의 거리 등을 측정할 수 있다면 공지의 어떤 구성을 포함할 수 있다. 전자 펜(110)의 기울기, 이동 속도, 가속도 또는 전자 펜(110)과 터치스크린(140) 사이의 거리 등을 측정하기 위한 센서는 전자 펜(110) 또는 전자 장치(100)의 어느 하나 또는 양 쪽 모두에 포함될 수 있다.
센서 모듈(120)은 물리량을 계측하거나 전자 장치(100)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(120)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, color 센서(예: RGB(red, green, blue) 센서), 생체 센서, 온/습도 센서, 조도 센서 또는 UV(ultra violet) 센서 중 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 센서 모듈(120)은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(Infrared Ray) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 센서 모듈(120)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
한 실시 예에 따르면, 센서 모듈(120)은 전자 펜(110)으로부터 수신되는 전류의 변화, 전자파의 변화, 또는 터치스크린(140)에 입력되는 전자 펜(110)의 압력 변화 등에 관한 정보를 수신할 수 있다. 센서 모듈(120)은 수신된 정보를 제어 모듈(170)에 전송할 수 있다. 제어 모듈(170)은 센서 모듈(120)로부터 수신된 정보에 기반하여 전자 펜(110)의 기울기, 전자 펜(110)이 터치스크린(140) 상에 투영되는 위치, 전자 펜(110)의 이동 속도, 또는 전자 펜(110)과 터치스크린(140)과의 거리 등을 판단할 수 있다.
한 실시 예에 따르면, 센서 모듈(120)은 사용자가 전자 장치(100)를 그립(grip)하는 경우, 전자 장치(100)를 그립(grip)하는 손의 위치 정보 또는 압력 정보 등을 그립 센서 또는 압력 센서 등을 통해 수신할 수 있다. 센서 모듈(120)은 수신된 정보를 제어 모듈(170)에 전송할 수 있다. 제어 모듈(170)은 센서 모듈(120)로부터 수신된 정보에 기반하여 전자 장치(100)를 그립(grip)하는 손이 왼손인지 오른손인지를 판단할 수 있다.
한 실시 예에 따르면, 센서 모듈(120)은 사용자의 손가락 또는 전자 펜(110)이 터치스크린(140)에 근접하였을 경우(호버링), 정전 용량 또는 전류 변화를 기반으로 손가락 또는 전자 펜(110)의 터치를 포함한 다양한 동작을 인식할 수 있다. 이를 위해, 센서 모듈(120)은 제스처 센서, 자이로 센서 등의 다양한 센서를 이용할 수 있다.
메모리(130)는 제어 모듈(170) 또는 다른 구성요소들(예: 전자 펜(110), 센서 모듈(120), 터치스크린(140) 등)로부터 수신된 명령 또는 데이터를 저장할 수 있다. 메모리(130)는 상기 제어 모듈(170) 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 메모리(130)는, 예를 들면, 커널, 미들웨어, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 또는 어플리케이션 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다. 예컨대, 제어 모듈(170)은 프로세서, 회로 모듈, 반도체 또는 SOC(System On Chip) 상에서 하드웨어적으로 구현될 수 있고, 어플리케이션 프로그램 등의 소프트웨어적으로 구현될 수 있고, 또는 이를 조합한 펌 웨어 형태로 구현될 수 있다.
한 실시 예에 따르면, 메모리(130)는 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호에 따라 터치스크린(140)상에 표시될 이벤트 아이템을 저장할 수 있다. 이벤트 아이템은, 예컨대 전자 펜(110) 설정 메뉴 등 전자 펜(110)과 관련된 다양한 UI형태의 메뉴일 수 있다. 뿐만 아니라, 이벤트 아이템은 특정 어플리케이션에서 자주 사용되는 메뉴가 수동 또는 자동으로 저장된 UI 메뉴일 수 있다.
한 실시 예에 따르면, 메모리(130)는 핸드 기반 입력 또는 전자 펜(110) 기반 입력 신호에 따라 시스템 또는 특정 어플리케이션에서 실행될 수 있는 다양한 기능의 루틴 정보를 저장할 수 있다. 예컨대, 전자 장치(100)는 제 1 입력 신호, 제 2 입력 신호, 및 추가적인 신호 중 적어도 하나에 대응하는 루틴 정보를 메모리(130)에 미리 저장할 수 있다. 뿐만 아니라, 메모리(130)에 저장되는 특정 어플리케이션은 핸드 기반 입력 또는 전자 펜(110)기반 입력 신호의 조합에 대응하는 다양한 기능을 포함할 수 있다. 다양한 기능은, 어플리케이션의 설계자 또는 전자 장치(100)의 사용자에 의해 미리 설정될 수 있다.
터치스크린(140)은 입력 기능과 표시 기능을 동시에 수행하는 입출력 수단으로, 표시부(141)와 감지부(145)를 포함할 수 있다. 터치스크린(140)은 표시부(141)를 통해 사용자 디바이스 운용에 따른 다양한 화면(예컨대, 미디어 컨텐츠 재생 화면, 전자 펜(110) 설정 화면 또는 전자 펜(110)이 사용되는 어플리케이션 실행 화면 등)을 표시할 수 있다. 터치스크린(140)은, 표시부(141)를 통해 화면 표시 중 감지부(145)에 의한 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호를 수신할 수 있고, 수신한 입력 신호를 제어 모듈(170)에 전송할 수 있다. 제어 모듈(170)은 수신한 입력 신호를 기반으로 핸드 입력 신호 또는 전자 펜(110) 입력 신호를 구분할 수 있고, 구분된 입력 신호에 따라 미리 저장된 루틴 정보를 메모리(130)로부터 호출하여 입력 신호와 관련된 기능을 실행할 수 있다. 터치 스크린(140)은 액정 표시 장치(LCD: Liquid Crystal Display), OLED(Organic Light Emitted Diode) 등으로 형성될 수 있으며, 입력수단에 포함될 수 있다.
표시부(141)는 전자 장치(100)에서 처리되는 정보를 표시(출력)할 수 있다. 예를 들어, 전자 장치(100)가 전자 펜(110) 입력 모드일 경우, 표시부(141)는 전자 펜(110) 기능과 관련된 사용자 인터페이스(UI, User Interface) 또는 그래픽 사용자 인터페이스(GUI, Graphical UI)를 표시할 수 있다.
감지부(145)는 사용자의 손가락 등에 의한 일반 터치 입력 또는 근접 터치 입력을 인식하기 위한 제 1 터치 패널과 전자 펜(110)에 의한 터치 입력 또는 근접 터치 입력을 인식하기 위한 제 2 터치 패널이 결합되어 형성될 수 있다. 제 1 터치 패널 및 제 2 터치 패널은 일체형으로 형성될 수도 있다. 제 1터치 패널과 제 2 터치 패널은 정전 용량 방식, 저항 막 방식, 초음파 방식, 적외선 방식, 또는 전자기 유도 방식의 터치패널로 형성될 수 있다. 터치 입력은 입력 도구(전자 펜(110), 손가락 등)와 터치 스크린(140)의 접촉을 인식하는 입력을 의미하고, 근접 터치 입력은 입력 도구가 터치스크린(140)과 일정 거리 이내에 접근하는지, 예컨대 호버링(Hovering) 상태를 인식하는 입력을 의미한다.
감지부(145)는 터치스크린(140)상의 접촉 또는 비접촉 입력(예컨대, 터치 기반의 롱 프레스(long press) 입력, 터치 기반의 숏 프레스(short press) 입력, 싱글터치(single-touch) 기반의 입력, 멀티터치(multi-touch) 기반의 입력, 터치 기반의 제스처, 또는 호버링(hovering) 입력 등) 중 적어도 하나를 감지할 수 있다.
한 실시 예에 따르면, 감지부(145)는, 터치스크린(140)상의 핸드 기반의 입력 또는 전자 펜(110) 기반의 입력을 감지하는 경우, 입력 이벤트가 발생된 좌표를 검출할 수 있고, 검출된 좌표를 제어 모듈(170)에 전송할 수 있다. 제어 모듈(170)은 감지부(145)에서 수신되는 신호에 의해 핸드 기반의 입력 또는 전자 펜(110) 기반의 입력이 발생된 영역에 해당하는 기능을 수행할 수 있다.
한 실시 예에 따르면, 감지부(1450)는 터치스크린(140)의 특정 부위에 가해진 압력 또는 터치스크린(140)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환할 수 있다. 감지부(145)는 터치되는 위치 및 면적뿐만 아니라, 입력된 터치 방식에 따른 터치 시의 압력 또한 검출할 수 있다. 한 실시 예에 따르면, 감지부(145)는 제어기(미도시)를 포함할 수 있다. 감지부(145)는 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호를 수신할 수 있고, 수신된 신호를 제어기(미도시)로 전송할 수 있다. 제어기는 수신된 신호를 데이터 처리 후 제어 모듈(160)에 전송할 수 있다. 이에 의해, 제어 모듈(170)은 터치스크린(140)의 어느 영역에 입력 신호가 수신되었는지를 인식할 수 있다.
제어 모듈(170)은 전자 장치(100)의 전반적인 동작 및 전자 장치(100)의 내부 구성 간의 신호 흐름을 제어하고 데이터를 처리하는 데이터 처리 기능을 수행할 수 있다. 제어 모듈(170)은 중앙 처리 장치(Central Processing Unit: CPU) 또는 어플리케이션 프로세서(Application Processor: AP) 등으로 형성될 수 있다. 본 발명의 제어 모듈(170)은 핸드 기반의 입력과 전자 펜(110) 기반의 입력을 인식할 수 있고, 인식된 핸드 기반의 입력 및 전자 펜(110) 기반의 입력을 기반으로 다양한 기능 수행을 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈(170)은 터치스크린(140)의 감지부(145)를 통해 사용자로부터 제 1 입력 신호를 수신할 수 있다. 제어 모듈(170)은 수신된 제 1 입력 신호가 미리 설정된 시간 이상 유지되는 경우, 메모리(130)로부터 이벤트 아이템을 호출하여 터치스크린(140)의 표시부(141)로 전송할 수 있다. 제어 모듈(170)은, 제 1 입력 신호가 수신되는 동안 제 2 입력 신호를 수신하는 경우, 수신된 제 2 입력 신호에 대응하는 기능을 실행할 수 있다. 실행되는 기능은, 표시되는 이벤트 아이템과 관련된 기능일 수 있다. 한 실시 예에 따르면, 제 1 입력 신호는 핸드 기반 입력 신호이고, 제 2 입력 신호는 전자 펜(110) 기반 입력 신호일 수 있다.
한 실시 예에 따르면, 제어 모듈(170)은 사용자가 전자 장치(100)를 그립(grip)하는 경우, 그립(grip)하는 손이 왼손인지 오른손인지 여부를 판단할 수 있다. 전자 장치(100)는, 전자 장치(100)를 그립(grip)하는 손 뿐 아니라, 전자 장치(100)를 그립(grip)함에 따라 전자 장치(100)에 수신되는 그립(grip) 정보를 수신할 수 있다. 그립(grip) 정보는 예컨대, 전자 장치(100)를 그립(grip)하는 손 또는 손가락의 그립 유무, 또는 그립(grip)되는 영역 등의 정보를 포함할 수 있다. 이를 위해, 제어 모듈(170)은 터치스크린(140)을 통하여 전자 장치(100)를 그립(grip)하는 손이 왼손인지 오른손인지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 정전 용량 방식의 터치스크린(140)을 통해 그립(grip)정보를 수신할 수 있다. 뿐만 아니라, 제어 모듈(170)은 그립 센서를 포함한 적어도 하나의 센서로부터 관련 정보를 수신할 수 있다. 제어 모듈(170)은 다양한 방법을 이용하여 그립(grip)정보를 수신할 수 있다.
예를 들면, 전자 장치(100)는 적어도 하나의 그립 센서를 전자 장치(100)의 상측, 하측, 좌측 및 우측에 포함할 수 있다. 또 다른 예로, 전자 장치(100)는 적어도 하나의 그립 센서를 전자 장치(100)의 한 모서리에 적어도 두 개를 포함할 수 있다. 전자 장치(100)는 전자 장치(100)를 그립(grip)함에 따라 사용자 손이 위치하는 모서리에서의 그립 센서로부터 그립(grip)정보를 수신할 수 있다.
또 다른 예를 들면, 전자 장치(100)는 터치스크린(140) 상에 표시되는 사용자의 손가락(예컨대 엄지 손가락)의 형태 등을 인식하여 왼손인지 오른손인지 여부를 판단할 수 있다. 구체적으로, 제어 모듈(170)은 왼손으로 전자 장치(100)를 그립할 경우 터치스크린(140)에서 접촉 또는 비접촉 근접으로 감지되는 영역의 형태를 분석할 수 있다. 예컨대, 제어 모듈(170)은 터치스크린(140)상에서 가장 많이 감지되는 부분의 영역이 터치스크린(140)의 중심을 기준으로 좌, 우 인지 여부를 판단함으로써 그립되는 손을 판단할 수 있다.
그립(grip)정보를 수신하면, 제어 모듈(170)은 그립(grip)정보에 기반하여 터치스크린(140)상에서 그립(grip)정보가 수신된 주변 영역만 제 1 입력 신호를 수신하도록 터치스크린(140)을 제어할 수 있다.
예를 들어, 왼손 그립이라면, 전자 장치(100)는 터치스크린 상의 중심점을 기준으로 왼쪽 특정 영역에서만 제 1 입력 신호를 수신할 수 있다. 왼쪽 특정 지역은, 예컨대 왼쪽 손으로 전자 장치(100)를 그립(grip)할 경우, 사용자가 왼쪽 엄지 손가락을 움직여서 전자 장치(100)를 터치할 수 있는 물리적 영역일 수 있다. 상기 영역은, 사용자 또는 설계자에 의해 다양하게 설정될 수 있다. 전자 장치(100)는 터치스크린(140)의 특정 영역을 제어하여 특정 손가락(예컨대, 엄지 손가락)을 제외한 다른 손가락(예컨대, 검지, 중지, 약지 손가락 등)이 터치되는 것을 방지할 수 있다. 이에 의해, 전자 장치(100)는 의도치 않은 입력에 의한 의도치 않은 동작이 실행되는 것을 방지할 수 있다.
한 실시 예에 따르면, 제어 모듈(170)은 전자 펜(110)의 호버링 입력 신호를 수신할 수 있고, 전자 펜(110)의 호버링 입력 신호가 유지되는 동안에만 제 1 입력 신호의 수신을 활성화할 수 있다. 제어 모듈(170)은, 의도치 않은 입력에 의한 의도치 않은 동작이 실행되는 것을 방지하기 위해, 전자 펜(110)의 호버링 입력 신호가 유지되는 동안에만 제 1 입력 신호를 수신하도록 터치스크린(140)을 제어할 수 있다.
한 실시 예에 따르면, 제어 모듈(170)은 제 1 입력 신호가 미리 설정된 시간 이상 수신되는 경우 전자 펜(110) 속성과 관련된 이벤트 아이템을 표시하도록 터치스크린(140)을 제어할 수 있다. 전자 펜(110) 속성과 관련된 이벤트 아이템은, 예컨대, 전자 펜(110)의 종류, 색상, 굵기 등의 정보를 포함하는 다양한 형태의 UI메뉴를 포함할 수 있다. 예컨대 전자 펜(110) 속성과 관련된 이벤트 아이템은 전자 펜(110)설정 정보를 포함하는 다양한 형태의 UI메뉴를 포함할 수 있다. 뿐만 아니라, 전자 펜(110)의 속성은, 전자 펜(110)과 직접적으로 관련된 속성뿐 아니라, 어플리케이션 상에서 전자 펜(110)을 이용하여 표시할 수 있는 다양한 기능을 포함할 수 있다. 예컨대, 전자 펜(110) 속성 이벤트 아이템은, 전자 펜(110)을 이용하여 이미지를 삽입하거나 전자 펜(110)을 이용하여 이미지를 캡쳐하는 기능 등을 표시하는 UI 메뉴를 포함할 수 있다.
제어 모듈(170)은 제 1 입력 신호가 미리 설정된 시간 이상 수신되는 동안(예컨대, 사용자가 제 1 입력 신호를 유지되는 동안) 제 2 입력 신호를 수신하는 경우, 이벤트 아이템에 표시된 기능 중 적어도 하나를 터치스크린(140)상에 표시할 수 있다. 예컨대, 제 1 입력 신호로서, 일정 시간 이상의 터치 앤 홀드 입력이 수신되는 경우, 제어 모듈(170)은 전자 펜(110) 설정 정보 메뉴를 표시할 수 있다. 제 1 입력 신호가 유지되는 중 제 2 입력 신호로서 전자 펜(110)입력 신호가 수신되면, 제어 모듈(170)은 표시되는 펜 설정 메뉴 중 펜 도구를 변경할 수 있다.
도 1에 도시되어 있지 않지만, 전자 장치(100)는 버스, 입출력 인터페이스, 통신 인터페이스, 네트워크, SIM 카드, 슬롯, 카메라 모듈, 인디케이터, 모터, 전력 관리 모듈 또는 배터리 등을 포함할 수 있다. 한 실시 예에 따르면, 전자 장치(100) 또는 전자 펜(110)은 통신 모듈을 포함할 수 있다. 전자 장치(100)는 통신 모듈을 통해 통신연결 된 전자 펜(110)으로부터 전자 펜(110)의 다양한 정보를 수신할 수 있다. 전자 장치(100)는 수신된 정보로부터 전자 펜(110)의 위치, 기울기, 속도 등을 판단할 수 있다.
도 2는 본 발명의 한 실시 예에 따른 제어 모듈의 구성을 도시하는 블록도이다.
한 실시 예에 따르면, 제어 모듈(170)은 입력 인식부(171) 및 센서 인식부(175)를 포함할 수 있다. 입력 인식부(171)는 핸드 기반 입력 인식부(172) 및 전자 펜 기반 입력 인식부(173)를 포함할 수 있다. 핸드 기반 입력 인식부(172)는 터치스크린(140) 감지부(145)의 제 1 터치 패널과 전기적으로 연결될 수 있고, 전자 펜 기반 입력 인식부(173)는 터치스크린(140) 감지부(145)의 제 2 터치 패널과 전기적으로 연결될 수 있다. 센서 인식부(175)는 센서 모듈(120)과 전기적으로 연결되어 센서 모듈(120)로부터 적어도 하나의 센서 정보를 수신할 수 있다. 또한, 센서 인식부(175)는 전자 펜(110)으로부터 전자 펜(110)의 전류 변화, 정전 변화, 압력 변화 정보 등을 수신할 수 있다. 제어 모듈(170)은 입력 인식부(171)와 센서 인식부(175)를 통해 핸드 기반 입력 신호 및 전자 펜(110) 기반 입력 신호를 수신할 수 있다.
도 3은 본 발명의 한 실시 예에 따른 전자 장치의 입력 인터페이스 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 310동작에서, 전자 장치(100)는 전자 장치(100)의 사용자로부터 제 1입력 신호를 수신할 수 있다. 제 1 입력 신호와 제 2 입력 신호는 서로 다른 입력 방식을 기반으로 한 입력 신호일 수 있다. 예컨대, 제 1 입력 신호 및 제 2 입력 신호 각각은, 전하의 변화를 기반으로 한 정전 용량 방식의 입력 신호 또는 자기장의 변화를 기반으로 한 전자기 유도 방식의 입력 신호 중 선택된 어느 하나로 서로 다른 입력 신호인 것을 포함할 수 있다. 다시 말하면, 제 1 입력 신호는 정전 용량 방식의 입력 신호 또는 전자기 유도 방식의 입력 신호 중 하나일 수 있고, 제 2 입력 신호는 정전 용량 방식의 입력 신호 또는 전자기 유도 방식의 입력 신호 중 상기 제 1 입력 신호와 다른 입력 신호일 수 있다.
한 실시 예에 따르면, 제 1 입력 신호는, 예컨대, 핸드(hand) 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다. 핸드(hand) 기반의 입력 신호는 예컨대, 사용자의 손가락 등에 의한 일반 터치 입력 신호, 근접 터치 입력 신호, 또는 다양한 제스처 입력일 수 있다. 전자 펜(110) 기반의 입력 신호는 예컨대, 전자 펜(110) 등의 입력 도구에 의한 일반 터치 입력 신호, 근접 터치 입력 신호, 또는 전자 펜(110)을 이용한 다양한 제스처 입력일 수 있다.
한 실시 예에 따르면, 330 동작에서, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되면, 전자 펜(110) 속성과 관련된 이벤트 아이템을 터치스크린(140)에 표시할 수 있다. 한 실시 예에 따르면, 전자 장치(100)는 제 1 입력 신호가 수신된 위치 주변에 이벤트 아이템을 표시할 수 있다.
예를 들어, 전자 장치(100)는 터치스크린(140)상에 손가락 터치 입력 신호를 수신하고, 수신된 터치 입력이 미리 설정된 일정 시간 이상으로 수신되는지를 판단할 수 있다. 미리 설정된 시간은, 예컨대 전자 장치(100)의 설계자 또는 사용자가 수동으로 설정한 시간, 어플리케이션 프로그램에서 수동 또는 자동으로 설정될 수 있는 시간, 전자 장치(100) 시스템에서 수동 또는 자동으로 설정될 수 있는 시간 등이 될 수 있다. 전자 장치(100)는 다양한 실시 예에 따라 설정될 수 있는 시간을 메모리(130)에 상에 저장할 수 있다.
전자 장치(100)는 시스템 클럭(clock) 등의 클럭(clock) 정보를 이용하여 핸드 기반의 입력 또는 전자 펜(110) 기반의 입력 신호가 처음 수신된 때로부터 신호가 더 이상 수신되지 않을 때까지의 시간을 카운트할 수 있다. 전자 장치(100)는, 입력 신호가 유지되는 동안 카운팅 되는 시간과 메모리(130)에 미리 저장된 시간이 매핑되면, 미리 설정된 이벤트 아이템을 표시할 수 있다. 미리 설정된 이벤트 아이템은, 예컨대 펜 속성과 관련된 시스템 또는 어플리케이션 상에서의 메뉴 등을 포함할 수 있다. 예컨대, 미리 설정된 이벤트 아이템은 전자 펜(110) 기반의 특정 어플리케이션 상에서 수행되는 전자 펜(110) 설정 기능 메뉴일 수 있다. 뿐만 아니라, 미리 설정된 이벤트 아이템은 사용자가 특정 어플리케이션 상에서 자주 사용하는 기능을 설정할 수 있는 펜 속성과 관련된UI 메뉴 등이 될 수 있다.
다른 실시 예에 따르면, 전자 장치(100)는 전자 장치(100)의 사용자가 특정 어플리케이션에서 자주 사용하는 기능 관련 메뉴를 이벤트 아이템으로 자동으로 설정할 수 있다. 자주 사용하는 기능 관련 메뉴는, 예컨대 전자 펜(110) 속성과 관련된 메뉴일 수 있다. 전자 장치(100)는 사용자가 특정 어플리케이션에서 사용하는 기능 관련 메뉴의 횟수를 카운트할 수 있고, 카운팅 된 정보를 메모리(130)에 저장할 수 있다. 전자 장치(100)는, 제 1 입력 신호가 미리 설정된 시간 이상으로 유지되면, 카운팅 된 정보 중 가장 많이 카운팅된 정보를 이벤트 아이템으로 설정하여 표시할 수 있다. 가장 많이 카운팅 된 정보는 어플리케이션 실행시 마다 업데이트 되어 메모리(130)에 저장될 수 있다.
다른 실시 예에 따르면, 전자 장치(100)는 표시할 이벤트 아이템을 사용자로부터 수동으로 입력 받을 수 있고, 입력 받은 이벤트 아이템을 메모리(130) 또는 캐시 메모리에 저장할 수 있다.
한 실시 예에 따르면, 이벤트 아이템은 전자 펜 설정 정보를 포함한 UI 메뉴일 수 있다. 전자 펜(110) 설정 정보는 전자 펜(110)이 사용되는 특정 어플리케이션에서의 전자 펜(110) 설정 정보일 수 있다. 예컨대, 전자 펜(110) 설정 정보는 펜의 도구(연필, 붓, 볼펜, 형광펜, 또는 지우개 등), 펜의 굵기, 또는 펜의 색상 등을 포함할 수 있다.
다른 실시 예에 따르면, 이벤트 아이템은 전자 펜이 사용되는 어플리케이션에서 그림 또는 동영상을 불러오기 위한 삽입 창을 포함할 수 있다. 또 다른 실시 예에 따르면, 이벤트 아이템은 텍스트 또는 이미지의 확대율을 변경할 수 있는 기능 창을 포함할 수 있다. 다양한 실시 예에 따른 이벤트 아이템은 특정 어플리케이션에 따라 다양한 UI 메뉴, 아이콘, 이모티콘, 그래프, 지도, 표 등의 형태를 포함할 수 있다.
한 실시 예에 따르면, 350 동작에서, 전자 장치(100)는 이벤트 아이템의 표시 및 제 1 입력 신호의 입력이 지속되는 중 사용자로부터 제 2 입력 신호를 수신할 수 있다. 제 2 입력 신호는, 예컨대, 핸드(hand) 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다. 한 실시 예에 따르면, 제 1 입력 신호와 제 2 입력 신호 중 적어도 하나는 전자 펜(110) 기반의 입력 신호일 수 있다. 전자 장치(100)는 제 1 입력 신호에 대응하는 이벤트 아이템을 표시하고, 제 1 입력 신호의 수신이 유지되는 상태에서 제 2 입력 신호를 수신할 수 있다.
예를 들면, 전자 장치(100)는, 사용자로부터 수신된 터치 앤 홀드(Touch and Hold) 신호(제 1 입력 신호의 수신 및 제 1입력 신호의 수신 유지)에 따라 전자 펜(110) 설정 UI 메뉴를 표시하는 상태에서 사용자로부터 전자 펜(110)의 터치 입력을 수신할 수 있다.
한 실시 예에 따르면, 370 동작에서, 전자 장치(100)는 수신된 제 2 입력 신호를 기반으로 이벤트 아이템과 관련된 기능을 표시할 수 있다.
한 실시 예에 따른 이벤트 아이템과 관련된 기능은, 이벤트 아이템을 통해 표시되는 전자 펜(110) 관련 설정 메뉴 중 하나를 선택하는 것을 포함할 수 있다. 예컨대, 전자 장치(100)는 수신된 제 2 입력 신호를 기반으로 전자 펜(110) 관련 설정 메뉴 중 하나를 선택하는 것에 의해 상기 전자 펜(110) 설정 값을 변경할 수 있다.
다른 실시 예에 따른 이벤트 아이템과 관련된 기능은, 전자 펜(110) 설정 관련 UI 메뉴를 표시하는 이벤트 아이템에 대하여, 제 2 입력 신호에 따라 표시된 UI 메뉴를 변경하는 것을 포함할 수 있다.
또 다른 실시 예에 따른 이벤트 아이템과 관련된 기능은, 전자 펜(110) 설정 관련 UI 메뉴의 일부 영역만 터치스크린(140) 상에 표시되는 이벤트 아이템에 대하여, 제 2 입력 신호에 따라 터치스크린(140) 상에 보이지 않는 UI 메뉴의 나머지 일부 영역을 표시하는 것을 포함할 수 있다.
또 다른 실시 예에 따른 이벤트 아이템과 관련된 기능은, 제 2 입력 신호에 따라 전자 펜(110) 설정 관련 UI 메뉴가 다른 UI 메뉴로 토글(toggle) 방식으로 전환 되거나, 제 2 입력 신호에 따라 전자 펜(110) 설정 관련 메뉴가 다른 UI 메뉴로 패닝(panning) 방식으로 전환되는 단계를 포함할 수 있다.
한 실시 예에 따르면, 제 1 입력 신호 및 제 2 입력 신호는, 핸드 기반 입력 신호와 전자 펜(110) 기반 입력 신호 중 각각 서로 다른 입력 신호일 수 있다. 예컨대, 제 1 입력 신호가 핸드 기반 입력 신호인 경우, 제 2 입력 신호는 전자 펜(110) 기반 입력 신호일 수 있다. 반대로, 제 1 입력 신호가 전자 펜(110) 기반 입력 신호라면, 제 2 입력 신호는 핸드 기반의 입력 신호일 수 있다.
상기와 같은 다양한 실시 예에 따라, 본 발명은 핸드 기반의 입력 및 전자 펜(110) 기반의 입력을 이용하여 특정 어플리케이션에서 자주 사용하는 기능 등을 직관적이고 빠르게 실행할 수 있다.
도 4는 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 410 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 420 동작에서, 전자 장치(100)는 제 1 입력 신호를 수신할 수 있다. 제 1 입력 신호는, 예컨대 핸드 입력 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 430 동작에서, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속되는지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 수신된 제 1 입력 신호가 미리 설정된 시간 이상 유지되는 터치 앤 홀드 입력인지 여부를 판단할 수 있다.
수신된 제 1 입력 신호가 미리 설정된 시간 이상으로 수신되지 않는다면, 전자 장치(100)는 440동작으로 분기하여 해당 입력 신호에 따른 기능을 수행할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110)관련 어플리케이션에서 터치 지점에 대한 표시 변경 등의 기능을 수행할 수 있다. 전자 장치(100)는 해당 기능 실행 후 490 동작으로 분기하여 어플리케이션을 종료할지 여부를 사용자로부터 입력 받을 수 있다.
수신된 제 1 입력 신호가 미리 설정된 시간 이상으로 수신된다면, 전자 장치(100)는 450 동작으로 분기하여 제 1 입력 신호에 대응하는 이벤트 아이템을 터치스크린에 표시할 수 있다. 예컨대, 전자 장치(100)는, 사용자로부터 터치 입력 신호를 수신하고 미리 설정된 시간 이상 터치 입력 신호가 수신된다면, 전자 펜(110) 설정 메뉴를 표시할 수 있다.
한 실시 예에 따르면, 460동작에서, 전자 장치(100)는 이벤트 아이템의 표시 및 제 1 입력 신호의 입력이 지속되는 중 사용자로부터 제 2 입력 신호가 수신되는지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 수신된 제 1 입력 신호가 유지되는 동안 사용자로부터 제 2 입력 신호가 수신되는지 여부를 판단할 수 있다. 제 2 입력 신호는 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다. 제 1 입력 신호와 제 2 입력 신호 중 적어도 하나는 전자 펜(110) 기반의 입력 신호일 수 있다. 제 1 입력 신호가 미리 설정된 시간 이상으로 수신되지 않거나 사용자로부터 제 2 입력 신호가 수신되지 않는 경우, 전자 장치(100)는 450동작으로 분기하여 이벤트 아이템을 계속하여 표시할 수 있다.
제 1 입력 신호가 유지되는 동안 사용자로부터 제 2 입력 신호를 수신하면, 전자 장치(100)는 470 동작에서 제 2 입력 신호에 따라 이벤트 아이템과 관련된 기능을 실행할 수 있다.
한 실시 예에 따르면, 480 동작에서, 전자 장치(100)는 제 1 입력 신호의 입력이 지속되는지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 제 2 입력 신호에 따른 기능을 실행한 후에도 제 1 입력 신호의 입력이 계속하여 지속되는지 여부를 판단할 수 있다. 제 1 입력 신호의 입력이 지속되는 경우, 전자 장치(100)는 450 동작으로 분기하여 이벤트 아이템을 계속하여 표시할 수 있다.
제 1 입력 신호의 입력이 지속되지 않는 경우, 전자 장치(100)는 490 동작으로 분기하여 해당 어플리케이션을 종료할지를 여부를 사용자로부터 입력 받을 수 있다. 종료하지 않는 경우, 전자 장치(100)는 420 동작으로 분기하여 사용자로부터 제 1 입력 신호를 다시 수신할 수 있다. 종료한다면, 전자 장치(100)는 해당 어플리케이션을 종료할 수 있다.
도 5는 본 발명의 한 실시 예에 따른 전자 장치의 입력 인터페이스의 오동작을 방지하는 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 510 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다. 또한, 어플리케이션은 본 실시 예의 오동작 방지 기능 모드를 운영할 수 있도록 오동작 방지 모드로의 설정/해제 기능을 포함할 수 있다.
한 실시 예에 따르면, 사용자가 전자 장치(100)를 그립(grip)하는 경우, 전자 장치(100)는 530 동작에서 전자 장치(100)를 그립(grip)하는 손이 왼손인지 오른손인지 여부를 판단할 수 있다. 예를 들어, 전자 장치(100)는 터치스크린(140), 그립 센서, 압력 센서 또는 근접 센서 등을 이용하여 전자 장치(100)를 그립(grip)하는 사용자의 손이 왼손인지 오른손인지 여부를 판단할 수 있다. 또한, 전자 장치(100)는 결정된 손에 따라 전자 장치(100)가 그립(grip)되는 영역에 관한 그립(grip)정보를 수신할 수 있다.
한 실시 예에 따르면, 550 동작에서, 전자 장치(100)는 그립(grip)정보에 기반하여, 터치스크린(140)상에서 그립(grip)정보가 수신된 지점의 주변 영역만을 통해 제 1 입력 신호를 수신할 수 있다.
예를 들어, 전자 장치(100)를 그립(grip)하는 손이 왼손인 경우, 전자 장치(100)는 사용자 왼손의 엄지 손가락 부분이 터치될 수 있는 미리 설정된 영역에서만 터치 수신이 활성화되도록 터치스크린을 제어할 수 있다. 미리 설정된 영역은, 예컨대 전자 장치(100)의 설계자, 사용자에 의해 수동 또는 자동으로 설정될 수 있다. 전자 장치(100)는 터치스크린(140) 영역 중 상기 미리 설정된 영역을 제외한 영역에서는 터치 입력이 비활성화되도록 터치 스크린을 제어할 수 있다. 이에 의해, 전자 장치(100)는 의도치 않게 터치되는 왼손의 다른 손가락(예컨대, 둘째, 셋째, 넷째, 또는 새끼 손가락 등)에 따라 의도치 않은 기능이 발생하는 것을 방지할 수 있다.
한 실시 예에 따르면, 570 동작에서, 전자 장치(100)는 제 1 입력 신호 및 제 2 입력 신호에 따라 이벤트 아이템에 따른 기능을 표시할 수 있다. 본 실시 예에 따르면, 제 1 입력 신호는 핸드 입력 기반의 입력 신호이고 제 2 입력 신호는 전자 펜(110) 기반의 입력 신호일 수 있다.
도 6a 내지 6b는 도 5의 동작을 나타내는 예시도이다.
도 6a에서, 사용자는 전자 장치(110)를 왼손으로 그립(grip)하고 있고, 사용자의 손가락(610,620,630,640,650)은 도시되는 바와 같이 전자 장치(100)에 위치된다. 전자 장치(110)은 전자 펜(110)이 사용될 수 있는 어플리케이션을 실행한 상태이다.
전자 장치(100)는 센서 모듈(120)을 이용하여 사용자가 왼손으로 전자 장치(100)를 그립(grip)한 것을 인식하고, 이에 대응하여 미리 설정된 활성화 영역(660)에서만 사용자의 손가락(610)이 터치되는 것을 인식한다. 현재 사용자의 손가락(630,640)이 터치스크린의 일부 영역인 비활성화 영역(670)을 터치하고 있지만, 전자 장치(100)는 사용자의 손가락(630,640)을 제 1 입력 신호로 인식하지 않는다. 따라서 전자 장치(100)는 이벤트 아이템을 표시하지 않는다.
도 6b에서, 사용자는 전자 장치(100)를 그립(grip)한 상태에서 사용자의 손가락(610)을 활성화 영역(660)에 터치하고 있다. 전자 장치(100)는 활성화 영역(660)에서 사용자의 손가락(610)이 터치되었기 때문에, 이를 제 1 입력 신호로 인식할 수 있다. 전자 장치(100)는, 사용자의 손가락(610)이 미리 설정된 시간 이상 활성화 영역(660)에 터치되는 것을 인식하면, 이벤트 아이템(680)을 터치스크린(140)상에 표시할 수 있다.
도 7은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스의 오동작을 방지하는 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 710 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다. 또한, 어플리케이션은 본 실시 예의 오동작 방지 기능 모드를 운영할 수 있도록 오동작 방지 모드로의 설정/해제 기능을 포함할 수 있다.
한 실시 예에 따르면, 730 동작에서, 전자 장치(100)는 전자 펜(110)의 호버링(Hovering) 입력 신호를 수신할 수 있다. 전자 펜(110)의 호버링 입력 신호는 본 발명에서 개시되는 제 1 입력 신호 및 제 2 입력 신호의 수신과 별도의 동작으로 이루어지는 수신 동작일 수 있다. 전자 펜(110)의 호버링 입력 신호는 전자기 유도 방식을 기반으로 한 입력 신호일 수 있다.
한 실시 예에 따르면, 750 동작에서, 전자 장치(100)는 호버링 입력 신호의 입력이 지속되는지 여부를 판단할 수 있다. 본 발명의 입력 인터페이스 방법의 오동작을 방지하기 위해, 전자 장치(100)는 전자 펜(110)의 호버링 입력이 유지되는 경우에만 제 1 입력 신호의 수신을 활성화하도록 터치스크린(140)을 제어할 수 있다. 호버링 입력 신호의 입력이 지속되지 않는다면, 본 실시 예의 동작은 종료될 수 있다.
전자 펜(110)의 호버링 입력 신호의 입력이 지속된다면, 전자 장치(100)는 770 동작으로 분기하여 제 1 입력 신호의 수신을 활성화 할 수 있다. 제 1 입력 신호가 수신되고 미리 설정된 시간 이상 유지되어 이벤트 아이템이 표시되었다면, 전자 장치(100)는 더 이상의 호버링 입력이 유지되지 않아도 제 2 입력 신호를 수신할 수 있다. 예컨대, 이벤트 아이템이 표시되었다면, 전자 장치(100)는 이후 동작에서 도 3 또는 도 4의 동작을 실시할 수 있다.
한 실시 예에 따르면, 790 동작에서, 전자 장치(100)는 제 1 입력 신호 및 제 2 입력 신호에 따라 이벤트 아이템에 따른 기능을 표시할 수 있다. 본 실시 예에 따르면, 제 1 입력 신호는 핸드 입력 기반의 입력 신호이고 제 2 입력 신호는 전자 펜(110) 기반의 입력 신호일 수 있다.
도 8a 내지 도 8b는 도 7의 동작을 나타내는 예시도이다.
도 8a에서, 전자 장치(100)는 전자 펜(110)이 사용될 수 있는 어플리케이션을 실행한 상태이다. 사용자는 사용자의 손가락(810)을 전자 장치(100)의 터치스크린(140)상에 터치하지만, 전자 장치(100)는 전자 펜(110)의 호버링 입력이 수신되지 않는 상태이므로 상기 터치 신호를 제 1 입력 신호로 인식하지 않는다.
도 8b에서, 사용자는 오른손으로 전자 펜(110)을 이용하여 터치스크린(140)의 일부 영역에 호버링 입력을 유지한 상태에서, 왼손으로 터치스크린(140)의 일부 영역을 터치하고 있다. 전자 장치(110)는, 전자 펜(110)이 터치스크린(140)상에 투영되는 위치의 일부 영역을 호버링 포인트(820)로 표시하는 것에 의해, 사용자에게 호버링 입력이 유지되고 있는 것을 알릴 수 있다.
전자 펜(110)의 호버링 입력이 유지되고 있기 때문에, 전자 장치(100)는 사용자로부터 제 1 입력 신호(왼손의 터치 입력)를 수신할 수 있다. 터치 입력이 미리 설정된 시간 이상 유지되어, 전자 장치(100)는 이벤트 아이템(830)을 표시한다.
도 9는 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 910 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 920 동작에서, 전자 장치(100)는 제 1 입력 신호를 수신할 수 있다. 예컨대, 전자 장치(100)는 사용자로부터 터치 입력 신호를 수신할 수 있다.
한 실시 예에 따르면, 930 동작에서, 전자 장치는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되는지 여부를 판단할 수 있다. 예를 들면, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 유지되는 터치 앤 홀드 입력인지 여부를 판단할 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속되지 않는다면, 전자 장치(100)는 940동작으로 분기하여 해당 입력 신호에 따른 기능을 수행할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110)관련 어플리케이션에서 터치 지점에 대한 표시 변경 등의 기능을 수행할 수 있다. 전자 장치(100)는 해당 기능 실행 후 980 동작으로 분기하여 어플리케이션을 종료할지 여부를 사용자로부터 입력 받을 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속된다면, 전자 장치(100)는 950 동작으로 분기하여 전자 펜(110) 설정 정보를 터치스크린(140)에 표시할 수 있다.
한 실시 예에 따르면, 960동작에서, 전자 장치(100)는 전자 펜(110) 설정 정보 표시 및 제 1 입력 신호의 입력이 지속되는 중 제 2입력 신호를 수신할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110) 설정 정보가 표시되고 있고, 제 1 입력 신호의 입력 또한 지속되는 중 사용자로부터 제 2 입력 신호를 수신할 수 있다. 제 2 입력 신호는 예컨대, 전자 펜(110) 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 970동작에서, 전자 장치(100)는 수신된 제 2 입력 신호를 기반으로 전자 펜(110) 설정 값을 변경할 수 있다.
한 실시 예에 따르면, 980 동작에서, 전자 장치(100)는 해당 어플리케이션을 종료할지를 여부를 사용자로부터 입력 받을 수 있다. 종료하지 않는 경우, 전자 장치(100)는 920 동작으로 분기하여 사용자로부터 제 1 입력 신호를 다시 수신할 수 있다. 종료한다면, 전자 장치(100)는 해당 어플리케이션을 종료할 수 있다.
도 10은 도 9의 동작을 나타내는 예시도이다.
전자 장치(100)는 전자 펜(110)이 사용될 수 있는 어플리케이션을 실행한 상태이다. 전자 장치(100)는 사용자로부터 사용자 왼손의 손가락(1010)을 통해 제 1 입력 신호를 수신한다. 사용자의 터치 입력이 미리 설정된 시간 이상 유지되어 전자 장치(100)는 전자 펜 설정 정보(1030)를 표시한다. 전자 펜 설정 정보(1030)는 적어도 하나의 펜 도구(1041,1042,1043,1044,1045)를 포함할 수 있다.
전자 장치는(100)는, 사용자 왼손의 손가락(1010)에 의한 터치 입력 신호(제 1 입력 신호)가 유지되는 동안 전자 펜(110)에 의한 터치 입력을 수신한다. 전자 펜(110)은 사용자 오른손의 손가락(1020)에 쥐어진 상태로 입력되고 있다. 전자 펜(110)에 의한 터치 입력은 전자 펜 설정 정보(130)에서 표시되는 적어도 하나의 펜 도구(1041,1042,1043,1044,1045) 중 하나의 펜 도구(1042)를 사용하기 위한 입력이다. 이에 의해, 사용자는 전자 펜(110) 관련 어플리케이션에서, 손을 이용한 터치 입력과 전자 펜(110)을 이용한 터치 입력을 직관적으로 조합하는 것에 의해 보다 빠르게 펜 도구를 변경할 수 있다.
도 11은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 1110 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 1120 동작에서, 전자 장치(100)는 제 1 입력 신호를 수신할 수 있다. 제 1 입력 신호는, 예컨대 핸드 입력 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 1130 동작에서, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속되는지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되는 터치 앤 홀드 입력인지 여부를 판단할 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속되지 않는다면, 전자 장치(100)는 1140동작으로 분기하여 해당 입력 신호에 따른 기능을 수행할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110)관련 어플리케이션에서 터치 지점에 대한 표시 변경 등의 기능을 수행할 수 있다. 전자 장치(100)는 해당 기능 실행 후 1190 동작으로 분기하여 어플리케이션을 종료할지 여부를 사용자로부터 입력 받을 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속된다면, 전자 장치(100)는 1150 동작으로 분기하여 제 1 입력 신호에 대응하는 이벤트 아이템을 터치스크린에 표시할 수 있다. 예컨대, 전자 장치(100)는, 사용자로부터 터치 입력 신호를 수신하고 미리 설정된 시간 이상 터치 입력 신호의 입력이 지속된다면, 전자 펜(110) 설정 메뉴를 표시할 수 있다.
한 실시 예에 따르면, 1160동작에서, 전자 장치(100)는 이벤트 아이템 표시 및 제 1 입력 신호의 입력이 지속되는 중사용자로부터 제 2 입력 신호를 수신할 수 있다. 제 2 입력 신호는 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 1170 동작에서, 전자 장치(100)는 제 2 입력 신호에 따라 이벤트 아이템과 관련된 기능을 표시할 수 있다. 예컨대, 전자 장치(100)는 제 1 입력 신호에 따라 표시된 전자 펜(110) 도구 메뉴 중 하나의 펜 도구를 선택할 수 있다.
한 실시 예에 따르면, 1180 동작에서, 전자 장치(100)는 전자 펜(110)의 기능 버튼의 입력/해제, 전자 펜(110)의 기울기, 전자 펜(110)의 위치, 전자 펜(110)의 이동 속도, 또는 전자 펜(110)과 터치 스크린과의 거리 중 적어도 하나의 정보에 기반하여 부가 기능을 표시할 수 있다.
전자 장치(100)는 전자 펜(110)의 기능 버튼의 입력/해제에 따라 변화되는 전기적 신호를 인식할 수 있고, 인식된 전기적 신호 자체 또는 인식된 전기적 신호와 다른 입력 신호를 조합한 신호를 새로운 입력 신호로 인식할 수 있다.
전자 펜(110)의 위치는, 예컨대 전자 펜(110)이 터치스크린(140) 상에 터치되는 지점의 위치 또는 전자 펜(110)이 터치스크린(140)상에 호버링되는 지점의 위치를 포함할 수 있다. 전자 장치(100)는 센서 모듈(120)을 통해 수신되는 정보, 또는 통신 모듈을 통해 전자 펜(110)으로부터 수신되는 정보에 기반하여 전자 펜(110)의 위치를 판단할 수 있다.
전자 펜(110)의 이동 속도는, 예컨대 전자 펜(110)이 터치스크린(140)상에서 움직이는 속도 및 가속도 정보를 포함할 수 있다. 전자 장치(100)는 전자 펜(110)의 시간 당 위치 정보(변위 정보)를 계산하여 전자 펜(110)의 속도 또는 가속도 정보를 판단할 수 있다. 뿐만 아니라, 전자 장치(100)는 통신 모듈을 통해 전자(110)으로부터 수신되는 정보에 기반하여 전자 펜(110)의 속도 정보를 판단할 수 있다. 이를 위해, 전자 펜(110)은 별도의 센서 모듈(예컨대, 가속도 센서)을 포함할 수 있다.
전자 펜(110)과 터치스크린(140)과의 거리는, 예컨대 전자 펜(110)이 터치스크린(140)상에 호버링되는 상대적 거리를 의미할 수 있다. 이를 위해, 전자 장치(100)는 근접 센서 등을 포함한 센서 모듈(120)을 이용하여 전자 펜(110)과 터치스크린(140)과의 거리를 판단할 수 있다. 다른 예를 들면, 전자 장치(100)는 전자 펜(110)으로부터 수신되는 전기적 신호의 세기를 기준으로 전자 펜(110)과 터치스크린(140)과의 거리를 판단할 수 있다.
전자 장치(100)는 제 2 입력 신호에 따라 이벤트 아이템과 관련된 기능(예컨대, 펜 도구 변경 등의 기능)을 표시한 뒤, 추가적인 입력에 따라 부가 기능을 표시할 수 있다. 추가적인 입력은, 상술한 전자 펜(110)의 기능 버튼의 입력/해제, 전자 펜(110)의 기울기, 전자 펜(110)의 위치, 전자 펜(110)의 이동 속도, 또는 전자 펜(110)과 터치 스크린과의 거리 등을 포함할 수 있다. 부가 기능은, 예컨대 펜 도구가 선택된 후 펜 색상을 변경하는 것, 펜 도구 메뉴 등을 변경하는 것, 텍스트 또는 이미지의 확대율을 변경하는 것 등이 될 수 있다.
한 실시 예에 따르면, 1190 동작에서, 전자 장치(100)는 해당 어플리케이션을 종료할지를 여부를 사용자로부터 입력 받을 수 있다. 종료하지 않는 경우, 전자 장치(100)는 1120 동작으로 분기하여 사용자로부터 제 1 입력 신호를 다시 수신할 수 있다. 종료한다면, 전자 장치(100)는 해당 어플리케이션을 종료할 수 있다.
도 12a 내지 12b는 도 11의 동작을 나타내는 예시도이다.
도 12a에서, 전자 장치(100)는 전자 펜(110)이 사용될 수 있는 어플리케이션을 실행한 상태이다. 전자 장치(100)는 사용자로부터 사용자 왼손의 손가락(1210)을 통해 제 1 입력 신호(터치 신호)를 수신한다. 사용자의 터치 입력이 미리 설정된 시간 이상 유지되어 전자 장치(100)는 전자 펜 설정 정보(1230)를 표시한다. 전자 펜 설정 정보(1230)는 적어도 하나의 펜 도구(1231,1232,1233,1234,1235)를 포함할 수 있다. 제 1 입력 신호가 유지된 상태에서, 전자 장치(100)는 사용자로부터 전자 펜(110)의 터치 입력을 통해 전자 펜 설정 정보(1230)중 하나의 펜 도구(1232)를 입력 받는다. 전자 장치(100)는 하나의 펜 도구(1232)를 입력 받는 동작을 제 2 입력 신호로 수신한다. 전자 장치(100)는 사용자로부터 전자 펜(110)의 기능 버튼(1270)을 누른 상태에서 전자 펜(110)의 호버링 입력을 수신할 수 있다. 제 1 입력 신호가 유지되는 중 상기 호버링 입력이 수신되면, 전자 장치(100)는 호버링 포인트(1240)와 함께 펜 도구(1232)의 굵기를 조정할 수 있는 펜 굵기 조절 창(1250), 및 펜 굵기의 조정을 실시간으로 볼 수 있는 펜 굵기 프리뷰 창(1260)을 터치스크린(140)상에 표시할 수 있다. 펜 도구(1232)의 굵기는 조정하는 동작은 제 2 입력 신호에 의해 펜 도구(1232)를 선택한 동작에 대한 부가 기능이다. 전자 장치(100)는 사용자로부터 전자 펜(110)의 기능 버튼(1270)을 누른 상태에서 터치스크린(140)과 전자 펜(110)의 팁(tip)사이의 거리를 인식하여 부가 기능(펜 굵기 조절)을 실행할 수 있다.
도 12b에서, 전자 장치(100)는 사용자가 전자 펜(110)의 기능 버튼(1270)을 누른 상태에서 전자 펜(110)의 팁과 터치스크린(140)과의 거리가 늘어난 상태를 인식한다. 전자 장치(100)는 전자 펜(110)과 터치스크린(140)과의 거리에 대응하여 펜 굵기 조절 창(1250)을 자동으로 변화시킬 수 있고, 펜 굴기 프리뷰 창(1260)에 표시되는 펜 굵기의 프리뷰 화면을 변화시킬 수 있다. 전자 장치(100)는 전자 펜(110)의 팁과 터치스크린(140)과의 거리 정보를 펜 도구의 굵기 정보와 대응하여 메모리(130)에 미리 저장할 수 있다. 전자 장치(100)는 전자 펜(110)과 터치스크린(140)과의 거리를 센서 모듈(120)을 통해 인식하고, 인식된 거리와 저장된 거리 정보를 매핑하여 부가 기능을 실행할 수 있다.
도 12c및 12d는 부가 기능의 또 다른 예를 도시한다. 전자 장치(100)는 사용자의 왼손의 손가락(1210)으로부터 미리 설정된 시간 이상의 터치 앤 홀드 입력 신호를 수신한다. 전자 장치(100)는 미리 설정된 시간 이상의 제 1 입력 신호(터치 앤 홀드)에 따라 전자 펜(110)의 펜 도구 메뉴(1230)을 표시한다. 전자 장치(100)는 사용자 왼손의 손가락(1210)에 의한 터치 입력이 유지되는 동안 사용자 오른손에 의한 전자 펜(110)의 호버링 입력을 수신한다. 여기서 호버링 입력은 제 2 입력 신호일 수 있다. 전자 장치(100)는, 제 1 입력 신호(손가락 터치)가 유지되는 동안 제 2 입력 신호(전자 펜의 호버링 입력)를 수신하면, 전자 펜(110)의 펜 도구 메뉴(1230)와 관련된 기능을 수행할 수 있다. 도시되어 있지 않으나, 펜 도구 메뉴(1230)와 관련된 기능은 펜 도구 메뉴(1230)가 다른 색상으로 변하거나, 펜 도구 메뉴(1230)가 깜빡이는 등의 동작을 포함할 수 있다. 펜 도구 메뉴(1230)가 다른 색상으로 변하거나, 펜 도구 메뉴(1230)가 깜박이는 동작은 추가적인 입력 신호에 따라 부가 기능을 더 실행할 수 있다는 것을 의미할 수 있다.
전자 장치(100)는 센서 모듈(120)을 이용하여 전자 펜(110)의 기울기를 인식할 수 있다. 전자 장치(100)는 제 2 입력 신호인 전자 펜(110)의 호버링 입력이 유지되는 중 전자 펜(110)의 기울기가 변하면, 변화된 기울기에 따라 부가 기능을 실행할 수 있다. 부가 기능은, 도시되는 것과 같이 펜 도구 메뉴(1230)의 펜 도구(a, b, c)를 변경하는 동작이 될 수 있다. 예컨대, 제 2 입력 신호(전자 펜(110)의 호버링 입력)가 유지되는 동안 전자 펜(110)이 도 12c 에서의 a와 같은 위치, 즉 전자 펜(110)이 전자 장치(100상의 특정 지점과 연장된 선을 기준으로 90도의 각을 이루는 경우, 전자 장치(100)는 도 12d에서 도시되는 바와 같이 a 펜 도구를 자동으로 선택할 수 있다. 또 다른 예로, 제 2 입력 신호가(전자 펜(110)의 호버링 입력) 유지되는 동안 전자 펜(110)이 도 12c에서의 b와 같은 위치, 즉 전자 펜(110)이 전자 장치(100상의 특정 지점과 연장된 선을 기준으로 45도의 각을 이루는 경우, 전자 장치(100)는 도 12d에서 도시되는 바와 같이 b 펜 도구를 자동으로 선택할 수 있다. 또 다른 예로, 제 2 입력 신호가(전자 펜의 호버링 입력) 유지되는 동안 전자 펜(110)이 도 12c에서의 c와 같은 위치, 즉 전자 펜(110)이 전자 장치(100상의 특정 지점과 연장된 선을 기준으로 0도의 간격을 이루는 경우, 전자 장치(100)는 도 12d에서 도시되는 바와 같이 b 펜 도구를 자동으로 선택할 수 있다. 전자 펜(110)의 기울기를 판단하는 동작은 상기와 같은 실시예 이외의 다양한 방법이 사용될 수 있다. 예컨대, 전자 장치(100)는 사용자가 평상시 보는 화면을 기준 기울기 또는 기준 각으로 설정할 수 있다. 전자 장치(100)는 설정된 기준 기울기 또는 기준 각에 기반하여 전자 펜(110)의 기울기를 판단할 있다. 이를 위해, 전자 펜(110)은 적절한 회로 모듈을 구비할 수 있다.
전자 장치(100)는 전자 펜(110)의 특정 기울기(특정 각)에 따른 특정 펜 도구의 선택 정보를 메모리(130)에 미리 저장할 수 있다. 뿐만 아니라, 전자 장치(100)는 전자 펜(110)의 특정 기울기에 따른 다양한 기능 실행 정보를 메모리(130)에 미리 저장할 수 있다.
다른 실시 예에 따르면, 전자 펜(110)의 기울기에 따라 펜 도구가 변하는 중, 전자 장치(100)는 전자 펜(110)의 기능 버튼(1270)을 누르거나 해제하는 동작을 추가적으로 입력 받아, 상기 변화된 펜 도구를 확정할 수 있다(미도시). 이를 위해, 전자 장치(100)는 전자 펜(110)의 기울기에 따른 부가 기능을 미리 설정하여 메모리(130)에 저장할 수 있다. 또한, 전자 장치(100)는 전자 펜(110)의 기울기 정보와 전자 펜(110)의 기능 버튼(1270)의 입력 또는 해제 정보를 조합하여 다양한 기능을 실행하도록 미리 설정할 수 있다.
도 13은 본 발명의 다른 실시 예에 따른 전자 장치의 입력 인터페이스 제공 방법을 나타내는 순서도이다.
한 실시 예에 따르면, 1310 동작에서, 전자 장치(100)는 어플리케이션을 실행할 수 있다. 어플리케이션은, 예컨대 전자 펜(110)이 사용될 수 있는 다양한 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 1320 동작에서, 전자 장치(100)는 사용자로부터 제 1 입력 신호를 수신할 수 있다. 제 1 입력 신호는, 예컨대 핸드 입력 기반의 입력 신호 또는 전자 펜 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 1330 동작에서, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되는지 여부를 판단할 수 있다. 예컨대, 전자 장치(100)는 수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되는 터치 앤 홀드 입력인지 여부를 판단할 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속되지 않는다면, 전자 장치(100)는 1340동작으로 분기하여 해당 입력 신호에 따른 기능을 수행할 수 있다. 예컨대, 전자 장치(100)는 전자 펜(110)관련 어플리케이션에서 터치 지점에 대한 표시 변경 등의 기능을 수행할 수 있다. 전자 장치(100)는 해당 기능 실행 후 1380 동작으로 분기하여 어플리케이션을 종료할지 여부를 사용자로부터 입력 받을 수 있다.
수신된 제 1 입력 신호의 입력이 미리 설정된 시간 이상으로 지속된다면, 전자 장치(100)는 1350 동작으로 분기하여 제 1 입력 신호에 대응하는 UI 메뉴를 터치스크린에 표시할 수 있다. 예컨대, 전자 장치(100)는, 사용자로부터 터치 입력 신호를 수신하고 미리 설정된 시간 이상 터치 입력 신호가 수신된다면, 전자 UI 메뉴를 표시할 수 있다. UI 메뉴는, 예컨대 전자 펜(110)과 관련된 다양한 설정 메뉴를 포함할 수 있다.
한 실시 예에 따르면, 1360동작에서, 전자 장치(100)는 UI 메뉴 표시 및 제 1 입력 신호의 입력이 지속되는 중 제 2 입력 신호를 수신할 수 있다. 제 2 입력 신호는 핸드 기반의 입력 신호 또는 전자 펜(110) 기반의 입력 신호일 수 있다.
한 실시 예에 따르면, 1370 동작에서, 전자 장치(100)는 제 2 입력 신호에 따라 UI 메뉴와 관련된 기능을 실행할 수 있다. UI 메뉴와 관련된 기능의 한 예로, 전자 장치(100)는 제 1 입력 신호에 따라 표시된 펜 도구의 색상 메뉴 중 하나의 색상을 선택할 수 있다. UI 메뉴와 관련된 기능의 또 다른 예로, 전자 장치(100)는 제 1 입력 신호에 따라 표시된 펜 도구의 색상 메뉴 중 터치스크린(140) 상에 보이지 않는 다른 색상을 표시할 수 있다. UI 메뉴와 관련된 기능의 또 다른 예로, 전자 장치(100)는 제 1 입력 신호에 따라 표시된 펜 도구의 색상 메뉴를 펜 도구 설정 메뉴로 변경할 수 있다.
한 실시 예에 따르면, 1380 동작에서, 전자 장치(100)는 해당 어플리케이션을 종료할지를 여부를 사용자로부터 입력 받을 수 있다. 종료하지 않는 경우, 전자 장치(100)는 1320 동작으로 분기하여 사용자로부터 제 1 입력 신호를 다시 수신할 수 있다. 종료한다면, 전자 장치(100)는 해당 어플리케이션을 종료할 수 있다.
도 14a 도 13의 동작을 나타내는 예시도이다.
도 14a에서, 전자 장치(100)는 전자 펜(110)관련 어플리케이션을 실행하고 있다. 전자 장치(100)는 사용자 왼손의 손가락(1410)의 터치 신호(제 1 입력 신호)를 수신하고, 터치 신호가 미리 설정된 시간 이상 유지되어 펜 도구의 색상 메뉴(1420)를 표시하고 있다. 펜 도구의 색상 메뉴(1420)은 본 실시 예에서의 UI 메뉴 중 하나이다.
전자 장치(100)는 터치 신호가 유지되는 동안 전자 펜(110)에 의한 드래그 입력 신호를 입력 받는다. 전자 펜(110)의 드래그 입력 신호는 사용자로부터 수신되는 제 2 입력 신호이다. 전자 장치(100)는 전자 펜(110)의 드래그 입력 신호에 따라 표시중인 펜 도구 색상 메뉴(1410)를 패닝(panning) 방식으로 변경할 수 있다. 도시되는 바와 같이, 전자 장치(100)는 전자 펜(110)의 드래그 입력 신호에 따라 현재 보이는 펜 도구 색상을 새로운 펜 도구 색상으로 변경할 수 있다. 전자 장치(100)는 전자 펜(110)의 드래그 입력 신호 전 표시되는 펜 도구 색상의 일부 또는 전부를 새로운 펜 도구 색상으로 변경할 수 있다.
도 14b는 도 13의 동작을 나타내는 다른 예시도이다.
전자 장치(100)는 전자 펜(110)관련 어플리케이션을 실행하고 있다. 전자 장치(100)는 사용자 왼손의 손가락(1410)의 터치 신호(제 1 입력 신호)를 수신하고, 터치 신호가 미리 설정된 시간 이상 유지되어 펜 도구의 색상 메뉴(1420)를 표시하고 있다. 펜 도구의 색상 메뉴(1420)은 본 실시 예에서의 UI 메뉴 중 하나이다.
전자 장치(100)는 터치 신호가 유지되는 동안 전자 펜(110)에 의한 터치 입력 신호를 수신한다. 전자 펜(110)의 터치 입력 신호는 사용자로부터 수신되는 제 2 입력 신호이다. 전자 장치(100)는 전자 펜(110)의 터치 입력 신호에 따라 표시중인 펜 도구 색상 메뉴(1410)를 토글(toggle) 방식으로 변경할 수 있다. 도시되는 바와 같이, 전자 장치(100)는 전자 펜(110)의 터치 입력 신호에 따라 현재 보이는 펜 도구 색상을 펜 도구 설정 메뉴로 변경할 수 있다. 도 14a에서와 달리, 전자 장치(100)는 펜 도구 색상 메뉴를 펜 도구 메뉴로 전환할 수 있다. 펜 도구 색상 메뉴와 펜 도구 메뉴는 예시적인 것이며, 본 발명은 이에 한정하지 않는다. 예컨대, 펜 도구 색상 메뉴를 자주 사용하는 펜 메뉴로 전환하는 것 등의 다양한 실시 예가 가능하다.
본 발명과 도면에 개시된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 전자 장치 110: 전자 펜
120: 센서 모듈 130: 메모리
140: 터치스크린 141: 표시부
145: 감지부 170: 제어 모듈
171: 입력 인식부 172: 핸드 기반 입력 인식부
173: 전자 펜 기반 입력 인식부 175: 센서 인식부
610,620,630,640,650,810,1010,1020,1210,1220: 사용자의 손가락
660: 활성화 영역 670: 비활성화 영역
680,830: 이벤트 아이템 820, 1240: 호버링 포인트
1030: 전자 펜 설정 정보
1041,1042,1043,1044,1045,1231,1232,1233,1234,1235: 펜 도구
1230: 펜 도구 메뉴 1250: 펜 굵기 조절 창
1260: 펜 굵기 프리뷰 창 1270: 기능 버튼
1420: 펜 도구의 색상 메뉴

Claims (20)

  1. 서로 다른 입력 방식을 기반으로 한 제 1 입력 신호 및 제 2 입력 신호를 수신하는 터치스크린; 및
    상기 제 1 입력 신호의 입력이 미리 설정된 시간 이상 지속되면, 전자 펜 속성과 관련된 이벤트 아이템을 표시하도록 상기 터치스크린을 제어하고,
    상기 이벤트 아이템의 표시 및 제 1 입력 신호의 입력이 지속되는 중 제 2 입력 신호를 수신하면, 상기 제 2 입력 신호를 기반으로 상기 이벤트 아이템과 관련된 기능을 표시하도록 상기 터치스크린을 제어하는 제어 모듈을 포함하는 전자 장치.
  2. 제 1항에 있어서,
    상기 제 1 입력 신호 및 제 2 입력 신호 각각은, 전하의 변화를 기반으로 한 정전 용량 방식의 입력 신호 또는 자기장의 변화를 기반으로 한 전자기 유도 방식의 입력 신호 중 선택된 어느 하나로 서로 다른 입력 신호인 것을 포함하는 전자 장치.
  3. 제 1항에 있어서,
    상기 전자 장치를 그립(grip)하는 경우, 상기 제어 모듈은, 상기 터치스크린을 통해 상기 전자 장치를 그립(grip)하는 손이 왼손인지 오른손인지를 판단하고, 상기 그립 정보에 기반하여 상기 터치스크린 상에서 상기 그립 정보가 수신된 지점의 주변 영역만을 통해 상기 제 1 입력 신호를 수신할 수 있도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  4. 제 1항에 있어서,
    상기 제어 모듈은 전자기 유도 방식을 기반으로 한 호버링 입력 신호를 수신하고, 상기 호버링 입력 신호의 수신이 지속되는 동안에만 상기 제 1 입력 신호를 수신할 수 있도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  5. 제 3항에 있어서,
    센서 모듈을 더 포함하고,
    상기 제어 모듈은 상기 터치스크린 및 상기 센서 모듈 중 적어도 하나를 이용하여 상기 전자 장치를 그립(grip)하는 손이 왼손인지 오른손인지를 판단하는 것을 포함하는 전자 장치.
  6. 제 1항에 있어서,
    상기 제어 모듈은,
    전자 펜에 포함된 버튼의 입력 또는 해제, 전자 펜의 기울기, 상기 전자 펜이 상기 터치스크린 상에 투영되는 위치, 상기 전자 펜의 이동 속도 또는 가속도, 또는 상기 전자 펜과 터치 스크린과의 거리 중 적어도 하나에 기반하여 상기 표시된 기능의 부가 기능을 더 표시하도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  7. 제 6항에 있어서,
    상기 부가 기능은 상기 터치스크린 상에서 표시되는 텍스트 또는 이미지 중 적어도 하나의 확대율을 변경하는 기능이며,
    상기 제어 모듈은,
    상기 전자 펜에 포함된 버튼의 입력 또는 해제, 전자 펜의 기울기, 상기 전자 펜이 상기 터치스크린 상에 투영되는 위치, 상기 전자 펜의 이동 속도 또는 가속도, 또는 상기 전자 펜과 터치 스크린과의 거리 중 적어도 하나에 기반하여 상기 확대율이 변경되도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  8. 제 1항에 있어서,
    상기 이벤트 아이템은 전자 펜 설정 관련 UI 메뉴이며,
    상기 제어 모듈은,
    상기 제 2 입력 신호에 따라 상기 UI 메뉴를 변경하도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  9. 제 8항에 있어서,
    상기 UI 메뉴는 상기 UI메뉴의 일부 영역만 터치스크린 상에 표시되며,
    상기 제어 모듈은 상기 제 2 입력 신호에 의해 상기 터치스크린 상에 보이지 않는 UI 메뉴의 일부 영역이 표시되도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  10. 제 8항에 있어서,
    상기 제어 모듈은,
    상기 제 2 입력 신호에 기반하여 상기 표시되는UI 메뉴가 다른 UI 메뉴로 토글(toggle) 방식으로 전환 되거나,
    상기 제 2 입력 신호에 기반하여 상기 표시되는UI 메뉴가 다른 UI 메뉴로 패닝(panning) 방식으로 전환되도록 상기 터치스크린을 제어하는 것을 포함하는 전자 장치.
  11. 전자 장치의 입력 인터페이스 제공 방법에 있어서,
    제 1 입력 신호를 수신하는 단계;
    상기 제 1 입력 신호가 미리 설정된 시간 이상 수신되면 전자 펜 속성과 관련된 이벤트 아이템을 터치스크린에 표시하는 단계;
    상기 제 1 입력 신호가 미리 설정된 시간 이상 수신되는 동안 제 2 입력 신호를 수신하는 단계; 및
    상기 수신된 제 2 입력 신호를 기반으로 상기 이벤트 아이템과 관련된 기능을 표시하는 단계를 포함하고,
    상기 제 1 입력 신호 및 상기 제 2 입력 신호는, 서로 다른 입력 방식을 기반으로 한 입력 신호인 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  12. 제 11항에 있어서,
    상기 제 1 입력 신호 및 제 2 입력 신호 각각은, 전하의 변화를 기반으로 한 정전 용량 방식의 입력 신호 또는 자기장의 변화를 기반으로 한 전자기 유도 방식의 입력 신호 중 선택된 어느 하나로 서로 다른 입력 신호인 것을 포함하는 입력 인터페이스 제공 방법.
  13. 제 11항에 있어서,
    상기 전자 장치를 그립(grip)하는 경우, 상기 터치스크린을 통해 상기 전자 장치를 그립(grip)하는 손이 왼손인지 오른손인지를 판단하는 단계를 더 포함하며,
    상기 그립 정보에 기반하여, 상기 터치스크린 상에서 상기 그립 정보가 수신된 지점의 주변 영역만을 통해 상기 제 1 입력 신호를 수신하는 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  14. 제 11항에 있어서,
    전자 펜의 호버링 입력 신호를 수신하는 단계를 더 포함하며,
    상기 호버링 입력 신호의 입력이 지속되는 동안에만 상기 제 1 입력 신호를 수신하는 것을 포함하는 전자 장치의 입력 인터페이스 방법.
  15. 제 13항에 있어서,
    상기 전자 장치를 그립(grip)하는 손이 왼손인지 오른손인지를 판단하는 단계는, 상기 터치스크린 및 센서 모듈 중 적어도 하나를 이용하여 판단하는 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  16. 제 11항에 있어서,
    상기 전자 펜에 포함된 버튼의 입력 또는 해제, 전자 펜의 기울기, 상기 전자 펜이 상기 터치스크린 상에 투영되는 위치, 상기 전자 펜의 이동 속도 또는 가속도, 또는 상기 전자 펜과 터치 스크린과의 거리 중 적어도 하나에 기반하여 상기 표시된 기능의 부가 기능을 더 표시하는 단계를 더 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  17. 제 16항에 있어서,
    상기 부가 기능은 상기 터치스크린 상에서 표시되는 텍스트 또는 이미지 중 적어도 하나의 확대율이 변경되어 표시하는 기능이며,
    상기 부가 기능을 더 표시하는 단계는,
    상기 전자 펜의 기울기, 상기 전자 펜이 상기 터치스크린 상에 투영되는 위치, 상기 전자 펜의 이동 속도, 또는 상기 전자 펜과 터치 스크린과의 거리 중 적어도 하나에 기반하여 상기 확대율을 변경하는 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  18. 제 11항에 있어서,
    상기 이벤트 아이템은 전자 펜 설정 관련 UI 메뉴이며,
    상기 이벤트 아이템과 관련된 기능을 표시하는 단계는,
    상기 제 2 입력 신호에 따라 상기 터치스크린 상에 표시된 UI 메뉴를 변경하는 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  19. 제 18항에 있어서,
    상기 UI 메뉴는 상기 UI 메뉴의 일부 영역만 터치스크린 상에 표시되며,
    상기 이벤트 아이템과 관련된 기능을 실행하는 단계는, 상기 제 2 입력 신호에 기반하여 상기 터치스크린 상에 보이지 않는 UI 메뉴의 일부 영역을 표시하는 것을 포함하는 전자 장치의 입력 인터페이스 제공 방법.
  20. 제 18항에 있어서,
    상기 UI 메뉴를 변경하는 단계는,
    상기 제 2 입력 신호에 기반하여 상기 표시되는UI 메뉴가 다른 UI 메뉴로 토글(toggle) 방식으로 전환 되거나,
    상기 제 2 입력 신호에 기반하여 상기 표시되는UI 메뉴가 다른 UI 메뉴로 패닝(panning) 방식으로 전환되는 단계를 포함하는 전자 장치의 입력 인터페이스 제공 방법.
KR1020140109481A 2014-08-22 2014-08-22 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법 KR20160023298A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140109481A KR20160023298A (ko) 2014-08-22 2014-08-22 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법
US14/830,079 US20160054851A1 (en) 2014-08-22 2015-08-19 Electronic device and method for providing input interface
EP15181744.2A EP2988202A1 (en) 2014-08-22 2015-08-20 Electronic device and method for providing input interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140109481A KR20160023298A (ko) 2014-08-22 2014-08-22 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법

Publications (1)

Publication Number Publication Date
KR20160023298A true KR20160023298A (ko) 2016-03-03

Family

ID=53887002

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140109481A KR20160023298A (ko) 2014-08-22 2014-08-22 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법

Country Status (3)

Country Link
US (1) US20160054851A1 (ko)
EP (1) EP2988202A1 (ko)
KR (1) KR20160023298A (ko)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10088989B2 (en) * 2014-11-18 2018-10-02 Duelight Llc System and method for computing operations based on a first and second user input
JPWO2015049899A1 (ja) * 2013-10-01 2017-03-09 オリンパス株式会社 画像表示装置および画像表示方法
CN113643668A (zh) 2014-07-10 2021-11-12 智能平台有限责任公司 用于电子设备的电子标记的设备和方法
US10216405B2 (en) * 2015-10-24 2019-02-26 Microsoft Technology Licensing, Llc Presenting control interface based on multi-input command
US9454259B2 (en) 2016-01-04 2016-09-27 Secugen Corporation Multi-level command sensing apparatus
US10845987B2 (en) 2016-05-03 2020-11-24 Intelligent Platforms, Llc System and method of using touch interaction based on location of touch on a touch screen
US11079915B2 (en) * 2016-05-03 2021-08-03 Intelligent Platforms, Llc System and method of using multiple touch inputs for controller interaction in industrial control systems
KR20170141012A (ko) * 2016-06-14 2017-12-22 삼성전자주식회사 사용자 입력을 처리하기 위한 방법 및 그 전자 장치
KR102317619B1 (ko) * 2016-09-23 2021-10-26 삼성전자주식회사 전자 장치 및 이의 제어 방법
JP6734789B2 (ja) * 2017-01-19 2020-08-05 シャープ株式会社 複数の電子ペンによる操作を受付ける画像表示装置
US10635291B2 (en) * 2017-02-20 2020-04-28 Microsoft Technology Licensing, Llc Thumb and pen interaction on a mobile device
USD838729S1 (en) * 2017-11-21 2019-01-22 Salvatore Guerrieri Display screen with graphical user interface
US11119589B2 (en) * 2018-12-26 2021-09-14 Wacom Co., Ltd. Stylus and position calculation method
JP7299754B2 (ja) * 2019-05-22 2023-06-28 シャープ株式会社 情報処理装置、情報処理方法、及び情報処理プログラム
US11422669B1 (en) * 2019-06-07 2022-08-23 Facebook Technologies, Llc Detecting input using a stylus in artificial reality systems based on a stylus movement after a stylus selection action
US11334212B2 (en) 2019-06-07 2022-05-17 Facebook Technologies, Llc Detecting input in artificial reality systems based on a pinch and pull gesture
CN111142674B (zh) * 2019-12-31 2021-09-14 联想(北京)有限公司 一种控制方法及电子设备
US11537239B1 (en) * 2022-01-14 2022-12-27 Microsoft Technology Licensing, Llc Diffusion-based handedness classification for touch-based input
CN114816139B (zh) * 2022-06-24 2022-11-01 基合半导体（宁波）有限公司 一种电容屏、电容屏与触控笔的交互方法及存储介质

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6243074B1 (en) * 1997-08-29 2001-06-05 Xerox Corporation Handedness detection for a physical manipulatory grammar
US7800592B2 (en) * 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US6337698B1 (en) * 1998-11-20 2002-01-08 Microsoft Corporation Pen-based interface for a notepad computer
US7952570B2 (en) * 2002-06-08 2011-05-31 Power2B, Inc. Computer navigation
US7895536B2 (en) * 2003-01-08 2011-02-22 Autodesk, Inc. Layer editor system for a pen-based computer
US20060059437A1 (en) * 2004-09-14 2006-03-16 Conklin Kenneth E Iii Interactive pointing guide
US10048860B2 (en) * 2006-04-06 2018-08-14 Google Technology Holdings LLC Method and apparatus for user interface adaptation
US10983665B2 (en) * 2008-08-01 2021-04-20 Samsung Electronics Co., Ltd. Electronic apparatus and method for implementing user interface
US8330733B2 (en) * 2009-01-21 2012-12-11 Microsoft Corporation Bi-modal multiscreen interactivity
US20100251112A1 (en) * 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
US8610744B2 (en) * 2009-07-10 2013-12-17 Adobe Systems Incorporated Methods and apparatus for natural media painting using proximity-based tablet stylus gestures
CA2680602C (en) * 2009-10-19 2011-07-26 Ibm Canada Limited - Ibm Canada Limitee System and method for generating and displaying hybrid context menus
DE102010036906A1 (de) * 2010-08-06 2012-02-09 Tavendo Gmbh Konfigurierbares Pie-Menü
US9201520B2 (en) * 2011-02-11 2015-12-01 Microsoft Technology Licensing, Llc Motion and context sharing for pen-based computing inputs
KR101862123B1 (ko) * 2011-08-31 2018-05-30 삼성전자 주식회사 휴대단말기의 입력 장치 및 방법
US9541993B2 (en) * 2011-12-30 2017-01-10 Intel Corporation Mobile device operation using grip intensity
US9250768B2 (en) * 2012-02-13 2016-02-02 Samsung Electronics Co., Ltd. Tablet having user interface
JP5137150B1 (ja) * 2012-02-23 2013-02-06 株式会社ワコム 手書き情報入力装置及び手書き情報入力装置を備えた携帯電子機器
KR101907463B1 (ko) * 2012-02-24 2018-10-12 삼성전자주식회사 복합 터치 스크린 장치 및 그 운용 방법
TWI489172B (zh) * 2012-07-05 2015-06-21 Shih Hua Technology Ltd 混合式觸摸屏
KR102058990B1 (ko) * 2012-09-19 2019-12-24 엘지전자 주식회사 모바일 디바이스 및 그 제어 방법
US20140092100A1 (en) * 2012-10-02 2014-04-03 Afolio Inc. Dial Menu
US9008725B2 (en) * 2012-10-11 2015-04-14 Blackberry Limited Strategically located touch sensors in smartphone casing
KR101963207B1 (ko) * 2012-11-02 2019-07-31 삼성전자주식회사 단말기의 동작제어 장치 및 방법
US9582122B2 (en) * 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
US20140184519A1 (en) * 2012-12-28 2014-07-03 Hayat Benchenaa Adapting user interface based on handedness of use of mobile computing device
US20140210797A1 (en) * 2013-01-31 2014-07-31 Research In Motion Limited Dynamic stylus palette
CA2900425C (en) * 2013-02-07 2023-06-13 Dizmo Ag System for organizing and displaying information on a display device
US9891722B2 (en) * 2013-03-11 2018-02-13 Barnes & Noble College Booksellers, Llc Stylus-based notification system
US8890855B1 (en) * 2013-04-04 2014-11-18 Lg Electronics Inc. Portable device and controlling method therefor
US9804707B2 (en) * 2014-09-12 2017-10-31 Microsoft Technology Licensing, Llc Inactive region for touch surface based on contextual information

Also Published As

Publication number Publication date
US20160054851A1 (en) 2016-02-25
EP2988202A1 (en) 2016-02-24

Similar Documents

Publication Publication Date Title
KR20160023298A (ko) 전자 장치 및 전자 장치의 입력 인터페이스 제공 방법
US11886699B2 (en) Selective rejection of touch contacts in an edge region of a touch surface
US9261990B2 (en) Hybrid touch screen device and method for operating the same
US9507521B2 (en) Input apparatus, input mode switching method and computer apparatus
JP5507494B2 (ja) タッチ・スクリーンを備える携帯式電子機器および制御方法
US20140300559A1 (en) Information processing device having touch screen
US20140043265A1 (en) System and method for detecting and interpreting on and off-screen gestures
WO2016110052A1 (zh) 电子设备的控制方法及电子设备
KR20180081133A (ko) 신속한 스크린 분할 방법 및 장치, 전자 디바이스, 디스플레이 인터페이스, 및 저장 매체
JP5640486B2 (ja) 情報表示装置
US10809841B2 (en) Method of human-machine interaction by combining touch and contactless controls
CN110874117B (zh) 手持装置的操作方法、手持装置以及计算机可读取记录介质
KR20140114913A (ko) 사용자 기기의 센서 운용 방법 및 장치
US10956030B2 (en) Multi-touch based drawing input method and apparatus
EP3101528B1 (en) Method for controlling a display of an electronic device and the electronic device thereof
KR102176575B1 (ko) 입력을 감지하는 전자 장치 및 방법
JP6235349B2 (ja) タッチ操作機能付表示装置
KR20140130798A (ko) 터치 스크린 패널 디스플레이 및 터치 키 입력 장치 및 방법
JP2012164047A (ja) 情報処理装置
KR102145824B1 (ko) 스마트 터치패드 인터페이스 방법 및 그 장치
AU2013100574A4 (en) Interpreting touch contacts on a touch surface
CN106484285B (zh) 一种移动终端的显示方法及移动终端
KR20210123920A (ko) 에어 제스처에 의한 편집 기능을 제공하기 위한 전자 장치, 그 동작 방법 및 저장 매체
US20210018996A1 (en) Hybrid stylus and touch input device communicating with same
KR20240011834A (ko) 핸드헬드 디바이스용 후면 사용자 인터페이스

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid