KR102140290B1 - 입력 처리 방법 및 그 전자 장치 - Google Patents

입력 처리 방법 및 그 전자 장치 Download PDF

Info

Publication number
KR102140290B1
KR102140290B1 KR1020130148969A KR20130148969A KR102140290B1 KR 102140290 B1 KR102140290 B1 KR 102140290B1 KR 1020130148969 A KR1020130148969 A KR 1020130148969A KR 20130148969 A KR20130148969 A KR 20130148969A KR 102140290 B1 KR102140290 B1 KR 102140290B1
Authority
KR
South Korea
Prior art keywords
gesture
area
electronic device
input
touch
Prior art date
Application number
KR1020130148969A
Other languages
English (en)
Other versions
KR20150064354A (ko
Inventor
박정민
김경태
이승은
현은정
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130148969A priority Critical patent/KR102140290B1/ko
Priority to US14/557,607 priority patent/US9772711B2/en
Publication of KR20150064354A publication Critical patent/KR20150064354A/ko
Application granted granted Critical
Publication of KR102140290B1 publication Critical patent/KR102140290B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 한 실시 예에 따르면, 전자 장치의 동작 방법에 있어서, 터치 스크린에서 제 1 제스처를 검출하는 동작과, 상기 제 1 제스처에 따라 상기 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하는 동작과, 구분된 상기 둘 이상의 영역 중 하나의 영역에서 시작된 제 2 제스처를 검출하는 동작과, 상기 하나의 영역의 영역 속성 및 상기 제 2 제스처에 대응하여 상기 제 2 제스처를 표시하는 동작을 포함할 수 있다. 전자 장치의 동작 방법에 있어서 상술한 방법에 한정하지 않고 본 발명의 동일 또는 유사한 범위에서 다른 실시 예가 가능하다.

Description

입력 처리 방법 및 그 전자 장치{METHOD FOR PROCESSING INPUT AND AN ELECTRONIC DEVICE THEREOF}
본 발명은 전자 장치에 관한 것으로, 디스플레이 모듈 또는 터치 스크린에 입력한 제스처에 다양한 효과를 적용하여 표시하는 방법 및 그 전자 장치에 있다.
멀티미디어 기술이 발전하고 회로의 집적 기술이 발전함에 따라서 다양한 멀티미디어 기능을 이용할 수 있는 전자 장치는 점점 더 소형화되었고 개개인의 필수 장치로 사용되고 있다. 더욱이 전자 장치는 이동 통신의 통신 기능 또한 포함할 수 있고, 음성 통신 기능뿐만 아니라, 카메라 촬영 데이터 통신 동영상 재생 오디오 재생 및 메신저 일정관리 알람 기능 등의 다양한 부가 서비스를 제공함에 따라 그 기능을 사용할 수 있는 다양한 프로그램이 사용되고 전자 장치에 설치되는 프로그램을 사용할 수 있는 입력방법 또한 다양해지고 있다.
특히 최근에는 전자 장치의 터치 스크린 기술이 발전함으로써 손 또는 전자 펜과 같이 다양한 입력 수단으로 터치 스크린에 명령을 입력할 수 있다. 예컨대, 전자 장치의 터치 스크린은 손 등의 입력 수단을 사용해서 명령을 입력할 수 있는 입력 센서 및/또는 전자 펜과 같은 입력 수단을 사용해서 명령을 입력할 수 있는 입력 센서를 포함할 수 있다.
전자 장치는 디스플레이 모듈(예: 터치 스크린)에 입력되는 지정된 제스처의 경우 입력된 명령을 처리하지 않도록 결정할 수 있다. 하지만 상술한 처리하지 않는 입력을 불필요한 입력으로 결정하지 않고, 하나 또는 그 이상의 다른 제스처 입력과 연계하여 디스플레이 모듈에서 수행되는 제스처 입력에 다양한 효과를 적용하도록 제어할 수 있다.
다양한 실시 예에 따르면, 전자 장치의 동작 방법에 있어서, 터치 스크린에서 제 1 제스처를 검출하는 동작과, 상기 제 1 제스처에 따라 상기 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하는 동작과, 구분된 상기 둘 이상의 영역 중 하나의 영역에서 시작된 제 2 제스처를 검출하는 동작과, 상기 하나의 영역의 영역 속성 및 상기 제 2 제스처에 대응하여 상기 제 2 제스처를 표시하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 전자 장치에 있어서, 터치 스크린에 입력되는 하나 또는 그 이상의 제스처를 처리하는 명령이 저장된 메모리, 상기 터치 스크린에서 제 1 제스처를 검출하고, 상기 제 1 제스처에 따라 상기 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하고, 구분된 상기 둘 이상의 영역 중 하나의 영역에서 시작된 제 2 제스처를 검출하고, 상기 하나의 영역의 영역 속성 및 상기 제 2 제스처에 대응하여 상기 제 2 제스처를 표시하는 제스처 처리 모듈, 및 상기 제스처 처리 모듈을 제어하는 하나 또는 그 이상의 프로세서를 포함할 수 있다.
전자 장치의 디스플레이 모듈(예: 터치 스크린)에서 수행되는 제스처 입력을 하나 또는 그 이상의 지정된 입력으로 구분할 수 있고, 구분된 제스처 입력에 대응하여 전자 장치에 지정된 하나 또는 그 이상의 효과를 적용하여 제스처 입력을 디스플레이 모듈에 표시할 수 있다.
도 1은 다양한 실시 예에 따른, 전자 장치 101을 포함하는 네트워크 환경 100를 도시한다.
도 2는 다양한 실시 예들에 따른, 전자 장치 101의 제스처 처리 모듈 170의 블록도 200를 도시한다.
도 3a 및 도 3b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
도 4a 및 도 4b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
도 5a 및 도 5b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
도 6a 및 도 6b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
도 7a 내지 도 7c는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
도 8은 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작의 흐름을 도시한다.
도 9는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작의 흐름을 도시한다.
도 10은 다양한 실시 예들에 따른 전자 장치 1001의 블록도 1000를 도시한다.
도 11은 다양한 실시 예들에 따른 복수의 전자 장치들 사이의 통신 프로토콜 1100을 도시한다.
이하, 첨부된 도면을 참조하여 본 발명(present disclosure)를 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명의 다양한 실시 예에 따르면, 전자 장치 101는 디스플레이 모듈 150에 지정된 방법으로 입력되는 터치 입력을 감지할 수 있고, 감지한 지정된 방식의 터치 입력에 따라서 전자 장치 101의 디스플레이 모듈 150을 하나 또는 그 이상의 영역으로 구분할 수 있다. 여기에서 전자 장치 101의 디스플레이 모듈 150을 하나 또는 그 이상의 영역으로 구분하는 것은 디스플레이 모듈 150에 가상의 기준 선을 설정하여 각각의 영역에 지정된 기능을 설정하기 위한 영역 구분일 수 있다. 또한, "디스플레이 모듈 150을 하나 또는 그 이상의 영역으로 구분한다" 또는 하나 또는 그 이상의 영역으로 구분된 디스플레이 모듈 150"과 같은 표현은 디스플레이 모듈 150에서 전자 장치 101의 동작 상태를 표시하는 스크린 영역(예: 화면 구성 영역)을 하나 또는 그 이상의 영역으로 구분한다는 것으로 이해되어야 한다.
본 발명 가운데 사용될 수 있는“포함한다” 또는 “포함할 수 있다” 등의 표현은 발명된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명에서 “또는” 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, “A 또는 B”는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.본 발명 가운데 “제 1,”“제2,”“첫째,”또는“둘째,”등의 표현들이 본 발명의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분 짓기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 발명에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명에 따른 전자 장치는, 터치 스크린이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 터치 스크린을 포함한 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smartwatch))중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에 따르면, 전자 장치는 터치 스크린을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 또는 산업용 또는 가정용 로봇 중 적어도 하나를 포함할 수 있다.어떤 실시 예들에 따르면, 전자 장치는 터치 스크린을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector) 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시 예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시 예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예에 따른, 전자 장치 101을 포함하는 네트워크 환경 100를 도시한다. 도 1을 참조하면, 상기 전자 장치 101는 버스 110, 프로세서 120, 메모리 130, 입출력 인터페이스 140, 디스플레이 150, 통신 인터페이스 160 및 제스처 처리 모듈 170을 포함할 수 있다
상기 버스 110는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신 신호(예: 제어 메시지)를 전달하는 회로일 수 있다.
상기 프로세서 120는, 예를 들면, 상기 버스 110를 통해 전술한 다른 구성요소들(예: 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 제스처 처리 모듈 170)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
상기 메모리 130는, 상기 프로세서 120 또는 다른 구성요소들(예: 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 제스처 처리 모듈 170 등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 130는, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 133 또는 어플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 131은 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134이 상기 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 상기 어플리케이션 134이 상기 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 상기 어플리케이션 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 134 중 적어도 하나의 어플리케이션에 상기 전자 장치 101의 시스템 리소스(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 133는 상기 어플리케이션 134이 상기 커널 131 또는 상기 미들웨어 132에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 어플리케이션 134는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 134은 상기 전자 장치 101와 외부 전자 장치(예: 전자 장치 102 또는 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 102 또는 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 102 또는 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101와 통신하는 외부 전자 장치(예: 전자 장치 102 또는 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴 온(turn on)/턴 오프(turn off) 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)을 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시 예에 따르면, 상기 어플리케이션 134은 상기 외부 전자 장치(예: 전자 장치 102 또는 전자 장치 104)의 영역 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 상기 어플리케이션 134은 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106, 전자 장치 102 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140은, 센서(예: 가속도 센서, 자이로 센서) 또는 입력 장치(예: 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110를 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 제스처 처리 모듈 170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 제스처 처리 모듈 170로부터 수신된 명령 또는 데이터를 상기 출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120를 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다.
상기 통신 인터페이스 160은 상기 전자 장치 101와 외부 장치(예: 전자 장치 102, 전자 장치 104, 또는 서버 106) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 160은 네트워크 통신 162(예: Internet, LAN(local area network), WAN(wire area network), telecommunication network, cellular network, satellite network 또는 POTS(plain old telephone service) 등), 근거리 통신 164(예: wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), 또는 유선 통신(예: USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 등)을 지원할 수 있다. 한 실시 예에 따르면, 상기 전자 장치 101와 외부 장치 간의 통신을 위한 프로토콜(예: 근거리 통신 프로토콜, 네트워크 통신 프로토콜 또는 유선 통신 프로토콜)은 상기 API 133 또는 상기 미들웨어 132 중 적어도 하나에서 지원될 수 있다. 상기 전자 장치 102, 104 각각은 상기 전자 장치 101와 동일한 (예: 같은 타입의) 장치이거나 또는 다른 (예: 다른 타입의) 장치일 수 있다.
상기 제스처 처리 모듈 170은, 다른 구성요소들(예: 상기 프로세서 120, 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 모듈, 또는 상기 통신 인터페이스 160 등)로부터 획득된 정보 중 적어도 일부를 처리하고, 이를 다양한 방법으로 사용자에게 제공할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은 터치 스크린에서 제 1 제스처 입력을 획득하고, 제 1 제스처 입력을 기준으로 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하고, 구분된 터치 스크린에 수행되는 제 2 제스처 입력을 획득하고, 제 2 제스처 입력이 수행된 영역에 대응하는 효과(제 2 입력에 대응하는 효과, 또는 영역 속성)를 적용하여 제 2 제스처 입력을 터치 스크린에 표시할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은 터치 스크린에서 제 1 제스처를 검출하고, 제 1 제스처에 따라 상기 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하고, 구분된 둘 이상의 영역 중 하나의 영역에서 시작된 제 2 제스처를 검출하고, 하나의 영역의 영역 속성 및 제 2 제스처에 대응하여 제 2 제스처를 표시할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 제 1 제스처 입력을 기준으로 표시 영역의 지정된 위치에 결정된 하나 또는 그 이상의 가상의 기준 선으로 둘 이상의 영역을 구분할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 제 1 제스처 입력의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 거리에 결정하거나, 또는 제 1 제스처 입력의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 각도에 기준 선을 결정할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 터치 스크린의 표시 영역의 지정된 위치를 직접 터치 또는 간접 터치하는 입력으로 제스처 입력을 결정할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 터치 스크린에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상인 경우 제 1 제스처 입력으로 결정할 수 있다. 한 실시 예에 따르면, 제스처 처리 모듈 170은, 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 둘 이상의 직접 터치 영역을 포함하는 지정된 영역을 하나의 제 1 제스처 입력 영역으로 설정하는 모듈.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 제 1 제스처 입력을 유지한 상태에서 둘 이상의 영역으로 구분된 표시 영역에 집적 터치 입력 또는 간접 터치 입력으로 제 2 제스처 입력을 결정할 수 있다.
다양한 실시 예에 따르면, 둘 이상의 영역 각각은, 제 2 제스처 입력을 결정하는 둘 이상의 영역 각각에 제 2 제스처 입력을 표시 영역에 표시하는데 적용할 하나 또는 그 이상의 효과를 미리 설정할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 대응하는 효과로 표시 영역에 표시하는 제 2 제스처 입력에 입력 도구의 질감, 색상, 굵기 중에서 하나 또는 그 이상을 적용할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 대응하는 효과로 제 1 제스처 입력 영역의 지정된 위치 및 제 2 제스처 입력을 감지한 위치를 기준으로 지정된 위치에 컨텐츠를 가리키는 포인터를 표시할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈 170은, 표시한 제 2 제스처의 영역 속성을 유지한 상태에서 제 2 제스처를 구분된 둘 이상의 영역 중 제 2 영역 속성의 영역으로 이동할 수 있다.
다양한 실시 예에 따르면, 제스처 처리 모듈은, 제 2 제스처에 연속된 제 3 제스처를 감지하는 경우 기존의 제 2 제스처에 적용된 영역 속성에 따라서 표시할 수 있다. 후술하는 도 2 내지 도 9를 통하여 상기 제스처 처리 모듈 170에 대한 추가적인 정보를 제공한다.
도 2는 다양한 실시 예들에 따른, 전자 장치(예: 전자 장치 101)의 제스처 처리 모듈 170의 블록도 200를 도시한다. 도 2을 참조하면, 상기 제스처 처리 모듈 170은 획득 모듈 210, 결정 모듈 220, 제공 모듈 230을 포함할 수 있다.
획득 모듈 210은 전자 장치 101의 디스플레이 모듈 150에 입력되는 하나 또는 그 이상의 제스처 입력을 획득할 수 있다. 획득 모듈 210은 전자 장치 101의 디스플레이 모듈 150에 입력되는 제스처 입력을 획득함에 있어서, 입력 수단을 디스플레이 모듈 150의 지정된 위치에 접촉하여 명령을 입력하는 직접 터치 입력 및 입력 수단을 디스플레이 모듈 150의 지정된 위치에 접촉하지 않은 상태에서 디스플레이 모듈 150로부터 지정된 거리 내에 위치하여 명령을 입력하는 간접 터치 입력으로 획득할 수 있다.
결정 모듈 220은 전자 장치 101의 디스플레이 모듈 150에 입력되는 하나 또는 그 이상의 제스처 입력을 감지하여 비활성 터치 입력 영역 및 활성 터치 입력을 결정할 수 있다. 결정 모듈 220은 비활성 터치 입력을 결정하는 방법에 있어서, 디스플레이 모듈 150에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우 해당하는 직접 터치 영역을 비활성 터치 입력 영역으로 결정할 수 있다. 다른 실시 예에 따르면, 결정 모듈 220은 디스플레이 모듈 150에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상인 경우 비활성 터치 입력 영역으로 결정할 수 있다. 결정 모듈 220은 복수 개의 비활성 터치 입력 영역을 결정한 경우, 해당하는 비활성 터치 입력 영역을 포함하여 지정된 영역을 하나의 비활성 터치 입력 영역으로 설정할 수 있다.
결정 모듈 220은 활성 터치 입력 영역을 결정하는 방법에 있어서, 전자 장치 101의 디스플레이 모듈 101에서 획득한 하나 또는 그 이상의 제스처 입력으로 결정한 비활성 터치 입력 영역을 기반으로 디스플레이 모듈 150의 지정된 위치에 하나 또는 그 이상의 기준 선을 결정할 수 있다. 결정 모듈 220은 디스플레이 모듈 150에 결정한 하나 또는 이상의 기준 선으로 구분된 디스플레이 모듈 150의 영역에서 수행되는 제스처 입력에 하나 또는 그 이상의 지정된 효과를 적용할 수 있다.
제공 모듈 230은 디스플레이 모듈 150에 구분된 하나 또는 그 이상의 영역에서 수행되는 제스처 입력을 감지할 수 있고, 감지한 제스처 입력에 대응하는 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다. 제공 모듈 230은 감지한 제스처 입력에 입력 도구의 질감(texture), 색상(color), 굵기(pixel, px)과 같은 다양한 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있고, 또는 감지한 제스처를 기반으로 디스플레이 모듈 150의 지정된 위치를 가리키는 포인터(pointer)를 표시할 수도 있다.
도 3a 및 도 3b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
이하에서 본 발명의 다양한 실시 예를 도 3a를 참조하여 설명한다.
전자 장치 101은 디스플레이 모듈 150에 입력되는 한 점 터치 또는 지정된 영역의 터치를 참조하여 하나 또는 그 이상의 기능 영역으로 구분할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에 손 입력을 감지한 경우 도 3a를 참조하여 손의 지정된 제 1 입력 영역(예: 손바닥의 지정된 영역) 및 손의 제 2 입력 영역(예: 손가락 끝의 지정된 영역)을 구분하여 감지할 수 있다. 예를 들어, 전자 장치 101은 디스플레이 모듈 150을 통해서 터치 입력을 감지한 경우, 감지한 터치 입력이 지정된 영역 이상 연속(또는 지정된 면적 이상 입력)되거나, 하나의 터치 입력 영역(예: 터치 입력 영역 301)으로부터 지정된 거리 내에 하나 또는 그 이상의 터치 입력 영역(예: 터치 입력 영역 303 또는 터치 입력 영역 305)이 감지된 경우 손바닥의 지정된 영역을 입력한 제 1 입력 영역으로 결정할 수 있다. 다른 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150을 통해서 터치 입력을 감지한 경우, 감지한 터치 입력이 지정된 면적 이하 및/또는 지정된 거리 내에 감지되는 터치 입력 영역이 없는 경우 제 2 입력 영역으로 결정할 수 있다. 여기에서 제 2 입력 영역은, 상술한 손가락 끝의 지정된 영역으로 설명하고 있지만, 통상적으로 한점 터치를 나타내는 터치 펜, 전자 펜, 손가락 끝의 지정된 영역과 같은 입력 수단으로 선택하는 동작을 포함할 수 있다. 전자 장치 101은 전자 장치 101에 입력된 하나 또는 그 이상의 터치 입력 영역을 구분하여 각각의 영역에 입력에 해당하는 동작을 지정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 제 1 입력 영역과 같이 지정된 면적 이상 입력되는 터치 입력 영역에 대해서 명령이 입력되지 않은 것으로 처리하도록 설정할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 3b를 참조하여 설명한다.
도 3b를 참조하면, 전자 장치 101은 하나 또는 그 이상의 터치 입력을 전자 장치 101에 설정된 설정 정보를 참조하여, 제 1 입력 영역(예: 손바닥 입력 영역) 및 제 2 입력 영역(예: 손가락 끝의 입력 영역)으로 구분할 수 있다. 한 실시 예에 따르면, 손바닥 입력 영역에 해당하는 제 1 입력 영역을 복수 개(예: 터치 입력 영역 301, 터치 입력 영역 303 및 터치 입력 영역 305) 감지한 경우, 복수 개의 터치 입력 영역을 하나의 제 3 입력 영역 311로 결정할 수 있고, 제 3 입력 영역 311은 도 3a의 제 1 입력 영역과 같이 입력된 명령을 처리하지 않는 영역으로 결정할 수 있다. 전자 장치 101은 결정한 제 3 입력 영역 311을 기준으로 제 4 입력 영역 313을 결정할 수 있다. 제 4 입력 영역 313은 제 3 입력 영역 311의 넓이 및/또는 모양을 기준으로 입력 수단의 지정된 영역으로 디스플레이 모듈 150에 입력할 것으로 예측한 제 2 입력 영역 307이 복수 개 집합된 터치 입력 영역의 범위일 수 있다. 전자 장치 101은 상술한 바와 같이 전자 장치 101에 입력되는 터치 입력 영역의 방식에 따라서 하나 또는 그 이상의 입력 영역을 구분하여 수행하는 기능을 결정할 수 있다.
전자 장치 101은 제 3 입력 영역을 기준으로 제 4 입력 영역을 결정하는 방법에 있어서, 전자 장치 101의 메모리(예: 데이터베이스)에 저장된 하나 또는 그 이상의 사용자 정보를 참조할 수 있다. 한 실시 예에 따르면, 전자 장치 101의 데이터베이스는 사용자의 나이, 성별, 국적, 키와 같은 사용자의 체격을 결정할 수 있는 하나 또는 그 이상의 입력된 정보를 참조하여 결정할 수 있는 복수 개의 손 크기 정보를 포함할 수 있다. 전자 장치 101의 데이터베이스에 포함되어 있는 손 크기 정보는, 각각의 손 크기에 따라서 입력될 수 있는 제 3 입력 영역 및/또는 제 4 입력 영역의 기준 정보를 포함할 수도 있다. 전자 장치 101은 사용자 프로필을 설정함에 있어서, 전자 장치 101을 사용하는 사용자의 나이, 성별, 국적, 키와 같은 사용자의 체격을 결정할 수 있는 하나 또는 그 이상의 정보를 입력할 수 있고, 전자 장치 101의 데이터베이스에서 사용자 프로필과 매칭되는 손 크기를 결정할 수 있다. 전자 장치 101은 사용자 프로필을 기반으로 결정한 손 크기를 참조하여, 디스플레이 모듈 150에 입력되는 제 3 입력 영역을 기준으로 결정할 수 있는 제 4 영역의 기준 영역을 결정할 수 있다.
도 4a 및 도 4b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
전자 장치 101은 디스플레이 모듈 150의 지정된 영역을 하나 또는 그 이상으로 구분할 수 있고, 구분된 영역에서 수행하는 기능을 결정할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 4a를 참조하여 설명한다.
도 4a를 참조하면, 전자 장치 101은 입력 수단으로 디스플레이 모듈 150에 입력될 것으로 결정한 입력 영역(예: 도 3b에서 설명한 제 4 영역의 기준 영역)을 설정 정보에 미리 지정된 방법에 따라서 둘 이상의 영역(예: 'A 영역', 'B 영역', 및 'C 영역')으로 구분할 수 있다. 전자 장치 101은 입력 영역을 구분함에 있어서, 설정 정보에 하나 또는 그 이상의 구분 방식을 입력할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 비활성 터치 입력 영역(예: 도 4b에서 설명한 제 3 영역)의 지정된 위치를 참조하여 지정된 하나 또는 그 이상의 기준 거리에 가상의 기준 선(예: threshold #1_405 또는 threshold #2_407, threshold 이하 기준 선)을 결정할 수 있다. 전자 장치 101은 결정한 하나 또는 그 이상의 가상의 기준 선을 디스플레이 모듈에 표시할 수 있고, 표시하지 않을 수도 있다. 전자 장치 101은 디스플레이 모듈 150의 지정된 영역을 구분한 가상의 기준 선을 기준으로 각각의 구분된 영역에 전자 장치 101의 지정된 기능을 설정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 일정 영역을 'A 영역', 'B 영역', 및 'C 영역'으로 구분할 수 있고, 각각의 영역에 입력되는 터치 및/또는 드래그 동작과 같은 제스처 입력을 감지할 수 있다. 전자 장치 101은 'A 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 질감(texture)을 '연필'로 표시하도록 설정할 수 있다. 전자 장치 101은 'B 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 질감을 '목탄'으로 표시하도록 설정할 수 있다. 전자 장치 101은 'C 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 질감을 '페인트'로 표시하도록 설정할 수 있다. 상술한 바와 같이 전자 장치 101은 디스플레이 모듈 150의 구분된 영역(예: 'A 영역', 'B 영역', 및 'C 영역') 각각에 입력되는 터치 입력을 설정 정보를 참조하여 대응하는 효과를 적용하여 표시할 수 있다. 전자 장치 101은 구분된 영역에 전자 장치 101의 기능을 설정함에 있어서, 상술한 설명에 따른 디스플레이 150의 터치 입력을 적용하여 표시하는 질감에 한정하지 않고, 전자 장치 101 또는 전자 장치 101의 지정된 하나 또는 그 이상의 프로그램에서 수행할 수 있는 기능을 적용하여 표시하도록 설정할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 4b를 참조하여 설명한다.
도 4b를 참조하면, 전자 장치 101은 비활성 터치 입력 영역(예: 도 4b에서 설명한 제 3 영역)의 지정된 위치를 참조하여 지정된 하나 또는 그 이상의 기준 각도에 따라서 가상의 기준 선(예: threshold #1_415 또는 threshold #2_417, threshold 이하 기준 선)을 결정할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 지정된 영역을 구분한 가상의 기준 선을 기준으로 각각의 구분된 영역에 전자 장치 101의 지정된 기능을 설정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 일정 영역을 'A 영역', 'B 영역', 및 'C 영역'으로 구분할 수 있고, 각각의 영역에 입력되는 터치 및/또는 드래그 동작과 같은 제스처 입력을 감지할 수 있다. 전자 장치 101은 'A 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 표시 효과를 '투명도 0%'로 표시하도록 설정할 수 있다. 전자 장치 101은 'B 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 표시 효과를 '투명도 77%'로 표시하도록 설정할 수 있다. 전자 장치 101은 'C 영역'에서 수행되는 터치 입력을 감지한 경우 감지한 터치 입력의 표시 효과를 '투명도 33%'로 표시하도록 설정할 수 있다. 상술한 바와 같이 전자 장치 101은 디스플레이 모듈 150의 구분된 영역(예: 'A 영역', 'B 영역', 및 'C 영역') 각각에 입력되는 터치 입력을 설정 정보를 참조하여 대응하는 효과를 적용하여 표시할 수 있다. 전자 장치 101은 각각의 영역에 설정하는 효과에 대해서, 도 4a 및 도 4b에 설명한 표시 질감 및/또는 투명도에 한정하지 않고, 입력되는 터치 및/또는 드래그 동작을 디스플레이 모듈 150에 표시하는데 적용할 수 있는 색(color), 굵기, 글씨체와 같은 효과를 설정할 수도 있다.
다양한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에 구분된 하나 또는 그 이상의 영역 또는 영역을 확인할 수 있도록 하나 또는 그 이상의 구분된 영역(예: 'A 영역', 'B 영역' 및/또는 'C 영역')에 대해서 명암으로 표시하거나, 또는 가상의 기준 선(예: 기준 선 415 또는 기준 선 417)을 표시하는 방법과 같이 구분된 영역을 디스플레이 모듈 150에 표시할 수 있다. 전자 장치 101은 구분된 하나 또는 그 이상의 영역(예: 'A 영역', 'B 영역' 및/또는 'C 영역')을 디스플레이 모듈 150에 표시함에 있어서, 상술한 비활성 터치 입력 영역을 검출하고, 하나 또는 그 이상의 영역(예: 'A 영역', 'B 영역' 및/또는 'C 영역')을 구분한 경우 표시할 수 있고, 또는 비활성 터치 입력이 유지된 상태에서 입력 수단의 입력으로 감지하는 활성 터치 입력(예: 직접 터치 입력 또는 간접 터치 입력)을 검출한 경우 표시할 수도 있다.
도 5a 및 도 5b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
전자 장치 101은 가상의 기준 선을 기준으로 구분된 하나 또는 그 이상의 영역에 대해서 각각의 영역에서 수행되는 터치 및/또는 호버링 입력을 표시하는데 적용하는 하나 또는 그 이상의 효과를 설정할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 5a를 참조하여 설명한다.
도 5a를 참조하면, 전자 장치 101은 디스플레이 모듈 150의 비활성 터치 입력 영역(예: 터치 입력 영역 501 및/또는 터치 입력 영역 503)을 기반으로 결정된 가상의 기준 선 505를 기준으로 하나 또는 그 이상의 지정된 터치 입력 영역(예: 'A 영역' 및 'B 영역')을 디스플레이 모듈 150에 설정할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 'A 영역'에는 터치 입력 507을 감지하면 '연필', '검정(black)', '3px(px, pixel)'의 효과를 적용하여 감지한 터치 입력을 디스플레이 모듈 150에 표시할 수 있다. 전자 장치 101은 가상의 기준 선 505를 기준으로 'A 영역'에서 감지하는 터치 입력은 '연필', '검정(black)', '3px(px, pixel)'의 효과를 동일하게 적용하여 디스플레이 모듈 150에 표시할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 5b를 참조하여 설명한다.
도 5b를 참조하면, 전자 장치 101은 디스플레이 모듈 150에 지정된 터치 입력 또는 전자 장치 101의 지정된 기능을 수행하던 중에 디스플레이 모듈 150에 구분된 'B 영역'에 수행되는 터치 입력을 감지할 수 있고, 지정된 효과를 감지한 터치 입력에 적용하여 디스플레이 모듈 150에 표시할 수 있다.
한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에 입력되는 비활성 터치 입력 511을 기반으로 하나 또는 그 이상의 기준 선 513을 결정할 수 있고, 결정한 기준 선 513에 따라서 일정 영역을 하나 또는 그 이상의 영역(예: 'A 영역' 및 'B 영역')으로 구분할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 구분된 'A 영역', 'B 영역'에 수행되는 터치 입력을 디스플레이 모듈 150에 표시하는 경우, 각각의 영역에 지정된 하나 또는 그 이상의 효과를 적용하여 표시할 수 있다.
전자 장치 101은 디스플레이 모듈 150의 'A 영역'에서 수행되는 터치 입력을 감지하여 '연필', '검정(black)', '3px(px, pixel)'의 효과507가 적용된 터치 입력 507을 표시할 수 있다. 전자 장치 101은 수행중인 터치 입력 507을 터치 해제한 후 'B 영역'의 지정된 위치에 터치 및 드래그 동작으로 이루어진 터치 입력 515를 감지할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 'B 영역'에서 감지한 터치 입력 515에 'B 영역'에 대응하여 지정된 '목탄', '검정(black), '21px'의 효과를 적용된 터치 입력 515를 표시할 수 있다.
도 6a 및 도 6b는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
전자 장치 101은 디스플레이 모듈 150에 하나 또는 그 이상의 영역을 구분할 수 있고, 구분된 영역에 입력되는 터치 입력에 대응하여 하나 또는 그 이상의 지정된 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다. 예컨대, 디스플레이 모듈 150에 입력되는 터치 입력은 디스플레이 모듈 150의 지정된 위치를 물리적으로 접촉하는 직접 터치 입력일 수 있고, 디스플레이 모듈 150의 지정된 위치를 물리적으로 접촉하지 않고, 지정된 수치의 거리를 유치한 채 명령을 입력하는 간접 터치 입력(예: 호버링 입력)일 수도 있다. 전자 장치 101은 디스플레이 모듈 150의 지정된 위치에서 수행되는 터치 입력에 대응하여, 디스플레이 모듈 150에 구분된 영역을 기반으로 지정된 제 1 효과를 적용하거나 또는 디스플레이 모듈 150에 수행하는 터치 입력 방법을 기반으로 지정된 제 2 효과를 적용하거나, 디스플레이 모듈 150에 구분된 영역을 기반으로 지정된 제 1 효과 및 디스플레이 모듈 150에 수행하는 터치 입력 방법을 기반으로 지정된 제 2 효과를 결합한 제 3 효과를 적용할 수도 있다.
이하에서 본 발명의 다양한 실시 예를 도 6a를 참조하여 설명한다.
도 6a를 참조하면, 전자 장치 101은 디스플레이 모듈 150에 입력되는 비활성 터치 입력 영역 601을 결정할 수 있다. 전자 장치 101은 결정한 비활성 터치 입력 영역 601을 기반으로 하나 또는 그 이상의 가상의 기준 선(예: 기준 선 603을 결정할 수 있다. 전자 장치 101은 디스플레이 모듈 150에 결정한 하나 또는 그 이상의 가상의 기준 선 603을 기준으로 디스플레이 모듈 150의 'A 영역' 및 'B 영역'을 구분할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 'A 영역'에서 수행되는 호버링 입력 605를 감지할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 'A 영역'에 지정된 호버링 입력을 처리하는 방법에 따라서 감지한 호버링 입력 및 디스플레이 모듈 150과 수직을 이루는 디스플레이 모듈 150의 지정된 위치에 호버링 포인터 607을 표시할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 6b를 참조하여 설명한다.
도 6b를 참조하면, 전자 장치 101은 하나 또는 그 이상의 구분된 영역(예: 'A 영역' 및 'B 영역')을 포함하는 디스플레이 모듈 150의 'A 영역'에 입력되는 호버링 입력(예: 도 6a의 호버링 입력 605)에 대응하여 호버링 포인터 607을 표시하는 동작을 처리 중에 입력 수단을 이동하여 'B 영역'의 지정된 위치에서 수행하는 호버링 입력 615을 감지할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 'B 영역'에 지정된 호버링 입력을 처리하는 방법에 따라서 감지한 호버링 입력 및 디스플레이 모듈 150과 수직을 이루는 디스플레이 모듈 150의 지정된 위치 617을 기준으로 비활성 터치 입력 영역 611의 지정된 위치의 반대 방향으로 지정된 거리에 호버링 포인터 619를 표시할 수 있다.
도 7a 내지 도 7c는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작을 도시한다.
이하에서 본 발명의 다양한 실시 예를 도 7a를 참조하여 설명한다.
전자 장치 101은 디스플레이 모듈 150에서 수행되는 비활성 터치 입력 영역 701을 감지할 수 있다. 전자 장치 101은 디스플레이 모듈 150에 감지한 비활성 터치 입력 영역 701을 기반으로 하나 또는 그 이상의 가상의 기준 선(예: 기준 선 707)을 결정할 수 있고, 결정한 기준 선을 기준으로 디스플레이 모듈 150을 하나 또는 그 이상의 영역(예: 'A 영역' 및 'B 영역')으로 구분할 수 있다. 전자 장치 101은 디스플레이 모듈 150에 구분된 하나 또는 그 이상의 영역 각각에 전자 장치 101에서 수행할 수 있는 하나 또는 그 이상의 기능을 설정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에 구분된 'A 영역'에 수행되는 터치 및 드래그 입력을 디스플레이 모듈 150에 표시함에 있어서, '연필', '빨강(red)', '7px'의 효과를 적용하여 표시할 수 있다. 전자 장치 101은 디스플레이 모듈 150에 구분된 'B 영역'에 수행되는 터치 및 드래그 입력을 디스플레이 모듈 150에 표시함에 있어서, '펜', '파랑(blue)', '14px'의 효과를 적용하여 표시할 수 있다.
한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에서 감지한 비활성 터치 입력 701에 따라서 설정된 'A 영역'에 수행되는 터치 및 드래그 입력(예: 직접 터치 입력)을 감지할 수 있다. 전자 장치 101은 데이터베이스의 설정 정보에 따라서 'A 영역'에 지정된 입력 도구의 질감 '연필', 색상 '빨강(red)', 굵기 '7px'의 효과를 적용하여 입력한 'Love is... 705'를 표시할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 'A 영역'에서 수행되는 직접 터치 입력에 상술한 'A 영역'에 지정된 상술한 효과를 적용하여 표시하기 위해서 직접 터치 입력을 감지함에 있어서, 디스플레이 모듈 150의 'A 영역'에 수행되는 한번 또는 그 이상의 터치 해제를 감지할 수 있다. 전자 장치 101은 동일한 영역(예: 'A 영역')에 입력되는 입력 또는 지정된 시간 내에 다시 터치 및 드래그 입력을 감지한 경우 한번에 입력된 것으로 결정할 수 있고, 동일한 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다.
다른 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에서 감지한 비활성 터치 입력 701에 따라서 설정된 'B 영역'에 수행되는 터치 및 드래그 입력(예: 직접 터치 입력)을 감지할 수 있다. 전자 장치 101은 데이터베이스의 설정 정보에 따라서 'B 영역'에 지정된 '펜', '파랑(blue)', '14px'의 효과를 적용하여 입력한 스케치(예: 터치 및 드래그 입력) 707을 표시할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 'B 영역'에서 수행되는 직접 터치 입력을 감지함에 있어서, 디스플레이 모듈 150의 'B 영역'에서 터치 및 드래그 입력을 시작해서 터치를 유지한 채로 'A 영역'에서 수행되는 드래그 동작을 감지할 수 있다. 전자 장치 101은 'A 영역'에서 수행하는 드래그 동작이 시작된 영역이 'B 영역'인 것을 결정할 수 있고, 'B 영역'에 지정된 '펜', '파랑(blue)', '14px'의 효과를 유지하여 입력한 스케치(예: 터치 및 드래그 입력) 707을 계속 표시할 수 있다. 전자 장치 101은 통상적으로 필기하는 동작과 같이 디스플레이 모듈 150의 'B 영역'에서 직접 터치 입력을 수행하고 터치 해제한 후 지정된 시간 내에 'B 영역'에서 수행한 직접 터치 입력과 동일 또는 유사 선상의 'A 영역'에 직접 터치 입력을 수행되는 제스처 입력은 'B 영역'에서 수행된 제스처 입력에 연속해서 입력된 것으로 결정할 수 있고, 'A 영역'에 수행되는 제스처 입력에 'B 영역'에 설정된 효과를 적용하여 표시할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 7b를 참조하여 설명한다.
도 7b를 참조하면, 전자 장치 101은 디스플레이 모듈 150에서 비활성 터치 입력 영역 701을 기반으로 구분된 제 1 영역에 대응하는 효과를 적용하여 표시된 제스처를 제 2 영역으로 이동할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 비활성 터치 입력 영역 701을 기반으로 구분된 'A 영역' 및 'B 영역'에서 'B 영역'의 효과(예: 입력 도구의 질감 '펜', 색상 '파랑', 굵기 '14px')를 적용하여 표시된 제스처 707을 'A 영역'으로 이동할 수 있다. 전자 장치 101의 디스플레이 모듈 150에서 'A 영역'에 입력되는 제스처는 입력 도구의 질감 '연필', 색상 '빨강(red)', 굵기 '7px'의 효과를 적용하여 디스플레이 모듈 150에 표시하도록 설정되어 있을 수 있지만, 'B 영역'에서 입력되어 'A 영역'으로 이동된 제스처 711은 'B 영역'에 적용되는 효과(예: 입력 도구의 질감 '펜', 색상 '파랑', 굵기 '14px')를 유지한 채 'A 영역'에 표시될 수 있다. 더하여 전자 장치 101은 'B 영역'의 효과(예: 입력 도구의 질감 '펜', 색상 '파랑', 굵기 '14px')가 적용되어 'A 영역'으로 이동된 제스처 711에 연속하여 제스처를 입력하는 경우 검출한 제스처에 'B 영역'의 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다.
이하에서 본 발명의 다양한 실시 예를 도 7c를 참조하여 설명한다.
도 7c를 참조하면, 전자 장치 101은 디스플레이 모듈 150의 지정된 위치에 결정된 비활성 터치 입력 영역(예: 도 7a의 701)을 기반으로 하나 또는 그 이상의 영역(예: 도 7a의 'A 영역' 및 'B 영역')으로 구분된 상태에서 비활성 터치 입력 영역 701을 디스플레이 모듈 150의 다른 위치(예: 비활성 터치 입력 영역 721)로 이동한 경우, 이동된 비활성 터치 입력 영역 721을 기준으로 지정된 위치에 하나 또는 그 이상의 가상의 기준 선(예: 기준 선 723)을 결정할 수 있고, 기준 선 723을 기준으로 둘 이상의 구분된 영역(예: 'A 영역' 및 'B 영역')을 결정할 수 있다.
전자 장치 101은 이동(예: 재생성 또는 재결정)한 비활성 터치 입력 영역을 기반으로 둘 이상의 구분된 영역을 결정함에 있어서, 비활성 터치 입력 영역의 검출이 유지된 상태에서 모양, 넓이, 검출 위치 중에서 하나 또는 그 이상이 연속해서 변경될 수 있다. 전자 장치 101은 시간 변화에 따라서 변경되는 비활성 터치 입력 영역에 대응해서 디스플레이 모듈 150에 구분되는 둘 이상의 영역을 변경할 수 있고, 변경되는 둘 이상의 구분된 영역을 디스플레이 모듈 150에 표시할 수 있다.
도 8은 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작의 흐름을 도시한다.
전자 장치 101은 디스플레이 모듈 150에 구분된 하나 또는 그 이상의 영역에서 수행되는 간접 터치 입력 및/또는 직접 터치 입력에 대응하여 전자 장치 101의 데이터베이스의 설정 정보에 적용된 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다.
동작 801에서 전자 장치 101은 디스플레이 모듈 150에 입력되는 제스처 입력(예: 직접 터치 입력 및/또는 간접 터치 입력)을 감지할 수 있다. 전자 장치 101의 디스플레이 모듈 150이 입력 수단으로 간접 터치 및/또는 직접 터치하여 명령을 입력할 수 있는 터치 스크린의 형태로 구현될 수 있다. 전자 장치 101은 디스플레이 모듈 150에서 수행되는 간접 터치 입력 및/또는 직접 터치 입력을 감지할 수 있다.
동작 803에서 전자 장치 101은 감지한 제스처 입력을 기반으로 하나 또는 그 이상의 비활성 터치 입력 영역을 결정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈에 입력되는 직접 터치 입력을 감지할 수 있고, 전자 장치 101의 데이터베이스에 지정된 조건을 만족하는 하나 또는 그 이상의 직접 터치 입력 영역을 비활성 터치 입력 영역으로 결정할 수 있다. 예컨대, 전자 장치 101은 디스플레이 모듈 150에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우 해당하는 직접 터치 영역을 비활성 터치 영역으로 결정할 수 있다. 다른 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상인 경우 비활성 터치 입력 영역으로 결정할 수 있다. 전자 장치 101은 복수 개의 비활성 터치 입력 영역을 결정한 경우, 해당하는 비활성 터치 입력 영역을 포함하여 지정된 영역을 하나의 비활성 터치 입력 영역으로 설정할 수 있다.
동작 805에서 전자 장치 101은 결정한 비활성 터치 입력 영역을 기반으로 하나 또는 그 이상의 가상의 기준 선을 결정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150에서 수행되는 제스처 입력 중에서 결정한 비활성 터치 입력 영역의 지정된 위치를 기준으로 하나 또는 그 이상의 가상의 기준 선을 결정할 수 있다. 전자 장치 101은 가상의 기준 선을 결정하는 방법에 있어서, 비활성 터치 입력 영역의 지정된 위치로부터 지정된 거리에 설정할 수도 있고, 지정된 위치를 기준으로 디스플레이 모듈 150을 지정된 각도로 분할하여 설정할 수도 있다. 전자 장치 101은 설정한 하나 또는 그 이상의 기준 선을 기준으로 디스플레이 모듈 150을 하나 또는 그 이상의 영역으로 결정할 수 있다.
동작 807에서 전자 장치 101은 결정한 가상의 기준 선으로 구분된 디스플레이 모듈 150의 하나 또는 그 이상의 영역에 지정된 효과를 결정할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 하나 또는 그 이상의 영역으로 구분된 디스플레이 모듈 150의 지정된 영역에 전자 장치 101의 데이터베이스의 해당 영역에 대한 설정 정보를 적용할 수 있다. 예컨대, 전자 장치 101은 디스플레이 모듈 150에 입력되는 제스처 입력을 표시하는 과정에서 적용하는 효과에 있어서, 입력 수단의 종류(예: 질감), 색상(color), 두께(예: pixel)와 같은 효과 중에서 하나 또는 그 이상의 효과를 정하여 디스플레이 모듈 150의 구분된 영역별로 설정 정보를 저장할 수 있다. 전자 장치 101은 하나 또는 그 이상의 설정 정보를 데이터베이스에 포함할 수 있고, 디스플레이 모듈 150에 구분된 영역 중에서 제스처 입력이 수행되는 영역에 해당하는 설정 정보를 매칭(matching)할 수 있다.
동작 809에서 전자 장치 101은 디스플레이 모듈 150에 구분된 하나 또는 그 이상의 영역 중에서 제스처입력이 수행되는 영역에 설정된 효과를 적용할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 구분된 영역 중에서 하나의 영역에 제스처 입력(예: 직접 터치 입력 및/또는 간접 터치 입력)을 감지한 경우 전자 장치 101은 해당 영역에 지정된 효과를 감지한 제스처 입력에 적용할 수 있고, 지정된 효과를 적용한 제스처 입력을 디스플레이 모듈 150에 표시할 수 있다. 예컨대, 전자 장치 101은 디스플레이 모듈 150의 지정된 영역에 수행되는 직접 터치 입력을 디스플레이 모듈 150에 표시하는데 있어서, 입력 수단의 종류(예: 질감), 색상(color), 두께(예: pixel)를 표시할 위치와 같은 효과 중에서 디스플레이 모듈 150의 구분된 영역에 지정된 하나 또는 그 이상의 효과를 적용하여 표시할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 동작 807 및 동작 809를 구분하지 않고 하나의 동작에서 함께 수행할 수도 있다.
전자 장치 101은 동작 809를 수행하면 도 8의 실시 예를 종료할 수 있다.
도 9는 다양한 실시 예에 따른 전자 장치 101에서 입력을 처리하는 동작의 흐름을 도시한다.
전자 장치 101은 디스플레이 모듈 150에서 수행되는 간접 터치 입력을 감지한 경우, 하나 또는 그 이상의 영역으로 구분된 디스플레이 모듈 150에서 해당하는 영역에 지정된 효과를 적용하여 디스플레이 모듈 150의 지정된 위치를 가리키는 포인터를 표시할 수 있다.
동작 901에서 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에 수행되는 입력을 감지할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 하나 또는 그 이상의 영역으로 구분된 디스플레이 모듈 150에서 지정된 영역에 간접 터치 입력이 감지된 경우 디스플레이 모듈 150의 지정된 위치를 가리키는 포인터를 표시하는 포인팅 영역을 설정할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에 수행되는 제스처 입력을 감지할 수 있다.
동작 903에서 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에서 감지한 제스처 입력이 간접 터치 입력인지 여부를 결정할 수 있다. 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에서 수행된 제스처 입력이 간접 터치 입력인 경우 동작 905를 수행할 수 있고, 수행된 제스처 입력이 직접 터치 입력인 경우 동작 907을 수행할 수 있다.
동작 905에서 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에서 수행되는 간접 터치 입력의 위치를 기반으로 디스플레이 모듈 150의 지정된 위치를 가리키는 포인터(예: 호버링 포인터)를 표시할 수 있다. 한 실시 예에 따르면, 전자 장치 101은 디스플레이 모듈 150의 지정된 위치에서 수행되는 비활성 터치 입력 영역을 결정할 수 있고, 비활성 터치 입력 영역을 기준으로 디스플레이 모듈 150의 포인팅 영역에 입력되는 간접 터치 입력 위치를 결정할 수 있다. 전자 장치 101은 간접 터치 입력이 수행되는 위치를 참조하여 디스플레이 모듈 150의 지정된 위치에 표시된 화면 구성을 가리키는 포인터를 표시할 수 있다.
전자 장치 101은 동작 905를 수행하면 도 9의 실시 예를 종료할 수 있다.
동작 907에서 전자 장치 101은 디스플레이 모듈의 포인팅 영역에 수행되는 직접 터치 입력을 감지한 경우 데이터베이스에 저장된 설정 정보를 참조하여 직접 터치 입력을 디스플레이 모듈 150에 표시하는 것에 있어서 지정된 효과를 적용할 수 있다. 예컨대, 전자 장치 101은 디스플레이 모듈 150의 포인팅 영역에 수행되는 직접 터치 입력에 대응하여 입력 수단의 종류(예: 질감), 색상(color), 두께(예: pixel)와 같은 효과 중에서 설정 정보에 저장된 하나 또는 그 이상의 지정된 효과를 적용하여 디스플레이 모듈 150에 표시할 수 있다.
전자 장치 101은 동작 907을 수행하면 도 9의 실시 예를 종료할 수 있다.
다양한 실시 예에 따르면, 전자 장치의 동작 방법에 있어서, 터치 스크린에서 제 1 제스처 입력을 획득하는 동작과, 제 1 제스처 입력을 기준으로 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하는 동작과, 구분된 터치 스크린에 수행되는 제 2 제스처 입력을 획득하는 동작과, 제 2 제스처 입력이 수행된 영역에 대응하는 효과(또는 제 2 입력에 대응하는 효과)를 적용하여 제 2 제스처 입력을 터치 스크린에 표시하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 전자 장치의 동작 방법에 있어서, 터치 스크린에서 제 1 제스처를 검출하는 동작과, 제 1 제스처에 따라 터치 스크린의 표시 영역을 둘 이상의 영역으로 구분하는 동작과, 구분된 둘 이상의 영역 중 하나의 영역에서 시작된 제 2 제스처를 검출하는 동작과, 하나의 영역의 영역 속성 및 제 2 제스처에 대응하여 제 2 제스처를 표시하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 둘 이상의 영역은, 제 1 제스처를 기준으로 표시 영역의 지정된 위치에 결정된 하나 또는 그 이상의 가상의 기준 선으로 구분할 수 있다. 한 실시 예에 따르면, 기준 선은, 제 1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 거리에 결정하거나, 또는 제 1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 각도에 결정할 수 있다.
다양한 실시 예에 따르면, 제스처는, 터치 스크린의 표시 영역의 지정된 위치를 직접 터치 또는 간접 터치하는 입력일 수 있다.
다양한 실시 예에 따르면, 제 1 제스처는, 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 터치 스크린에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상일 수 있다.
다양한 실시 예에 따르면, 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 둘 이상의 직접 터치 영역을 포함하는 지정된 영역을 하나의 제 1 제스처 영역으로 설정할 수 있다.
다양한 실시 예에 따르면, 제 2 제스처는, 제 1 제스처를 유지한 상태에서 둘 이상의 영역으로 구분된 표시 영역에 집적 터치 입력 또는 간접 터치 입력할 수 있다.
다양한 실시 예에 따르면, 둘 이상의 영역 각각은, 제 2 제스처를 표시 영역에 표시하는데 적용할 하나 또는 그 이상의 효과가 미리 설정될 수 있다.
다양한 실시 예에 따르면, 영역 속성은, 표시 영역에 표시하는 제 2 제스처에 입력 도구의 질감, 색상, 굵기 중에서 하나 또는 그 이상을 적용할 수 있다.
다양한 실시 예에 따르면, 영역 속성은, 제 1 제스처 영역의 지정된 위치 및 제 2 제스처를 감지한 위치를 기준으로 지정된 위치에 컨텐츠를 가리키는 포인터를 표시할 수 있다.
다양한 실시 예에 따르면, 표시한 제 2 제스처의 영역 속성을 유지한 상태에서 제 2 제스처를 구분된 둘 이상의 영역 중 제 2 영역 속성의 영역으로 이동할 수 있다. 한 실시 예에 따르면, 제 2 제스처에 연속된 제 3 제스처를 검출하는 경우, 기존의 제 2 제스처에 적용된 영역 속성에 따라서 표시할 수 있다.
도 10은 다양한 실시 예들에 따른 전자 장치 1001의 블록도 1000를 도시한다. 상기 전자 장치 1001는, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 구성할 수 있다. 도 10을 참조하면, 상기 전자 장치 1001는 하나 이상의 프로세서 1010, SIM(subscriber identification module) 카드 1014, 메모리 1020, 통신 모듈 1030, 센서 모듈 1040, 입력 모듈 1050, 디스플레이 1060, 인터페이스 1070, 오디오 모듈 1080, 카메라 모듈 1091, 전력관리 모듈 1095, 배터리 1096, 인디케이터 1097 또는 모터 1098 를 포함할 수 있다.
상기 프로세서 1010(예: 상기 프로세서 120)는 하나 이상의 어플리케이션 프로세서(AP: application processor) 1011 또는 하나 이상의 커뮤니케이션 프로세서(CP: communication processor) 1013를 포함할 수 있다. 도 10에서는 상기 AP 1011 및 상기 CP 1013가 프로세서 1010 내에 포함된 것으로 도시되었으나, 상기 AP 1011 와 상기 CP 1013는 서로 다른 IC 패키지들 내에 각각 포함될 수 있다. 한 실시 예에 따르면, 상기 AP 1011 및 상기 CP 1013는 하나의 IC 패키지 내에 포함될 수 있다.
상기 AP 1011는 운영체제 또는 응용 프로그램을 구동하여 상기 AP 1011에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 1011는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시 예에 따르면, 상기 프로세서 1010는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 CP 1013는 상기 전자 장치 1001(예: 상기 전자 장치 101)와 네트워크로 연결된 다른 전자 장치들(예: 전자 장치 102, 전자 장치 104, 또는 서버 106) 간의 통신에서 데이터 링크를 관리하고 통신 프로토콜을 변환하는 기능을 수행할 수 있다. 상기 CP 1013는, 예를 들면, SoC로 구현될 수 있다. 한 실시 예에 따르면, 상기 CP 1013는 멀티미디어 제어 기능의 적어도 일부를 수행할 수 있다. 상기 CP 1013는, 예를 들면, 가입자 식별 모듈(예: SIM 카드 1014)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 또한, 상기 CP 1013는 사용자에게 음성 통화, 영상 통화, 문자 메시지 또는 패킷 데이터(packet data) 등의 서비스들을 제공할 수 있다.
또한, 상기 CP 1013는 상기 통신 모듈 1030의 데이터 송수신을 제어할 수 있다. 도 10에서는, 상기 CP 1013, 상기 전력관리 모듈 1095 또는 상기 메모리1020 등의 구성요소들이 상기 AP 1011와 별개의 구성요소로 도시되어 있으나, 한 실시 예에 따르면, 상기 AP 1011가 전술한 구성요소들의 적어도 일부(예: 상기 CP 1013)를 포함하도록 구현될 수 있다.
한 실시 예에 따르면, 상기 AP 1011 또는 상기 CP 1013는 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 1011 또는 상기 CP 1013는 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 SIM 카드 1014는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 1014는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 1020(예: 상기 메모리 130)는 내장 메모리 1022 또는 외장 메모리 1024를 포함할 수 있다. 상기 내장 메모리 1022는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다. 한 실시 예에 따르면, 상기 내장 메모리 1022는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 1024는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 1024는 다양한 인터페이스를 통하여 상기 전자 장치 1001과 기능적으로 연결될 수 있다. 한 실시 예에 따르면, 상기 전자 장치 1001는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 통신 모듈 1030(예: 상기 통신 인터페이스 160)은 무선 통신 모듈 1031 또는 RF 모듈 1034을 포함할 수 있다. 상기 무선 통신 모듈 1031은, 예를 들면, WiFi 1033, BT(bluetooth) 1035, GPS 1037 또는 NFC(near field communication) 10311를 포함할 수 있다. 예를 들면, 상기 무선 통신 모듈 1031은 무선 주파수를 이용하여 무선 통신 기능을 제공할 수 있다. 추가적으로 또는 대체적으로, 상기 무선 통신 모듈 1031은 상기 전자 장치 1000를 네트워크(예: Internet, LAN(local area network), WAN(wire area network), telecommunication network, cellular network, satellite network 또는 POTS(plain old telephone service) 등)와 연결시키기 위한 네트워크 인터페이스(예: LAN card) 또는 모뎀 등을 포함할 수 있다.
상기 RF 모듈 1034은 데이터의 송수신, 예를 들면, RF 신호의 송수신을 담당할 수 있다. 상기 RF 모듈 1034은, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 1034은 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다.
상기 센서 모듈 1040은 물리량을 계측하거나 전자 장치 1000의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 1040은, 예를 들면, 제스처 센서 1040A, 자이로 센서 1040B, 기압 센서 1040C, 마그네틱 센서 1040D, 가속도 센서 1040E, 그립 센서 1040F, 근접 센서 1040G, color 센서 1040H(예: RGB(red, green, blue) 센서), 생체 센서 1040I, 온/습도 센서 1040J, 조도 센서 1040K 또는 UV(ultra violet) 센서 1040M중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 1040은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 1040은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 모듈 1050은 터치 패널(touch panel) 1052, (디지털) 펜 센서(pen sensor) 1054, 키(key) 1056 또는 초음파(ultrasonic) 입력 장치 10510를 포함할 수 있다. 상기 터치 패널 1052은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 1052은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 1052은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 1052은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 1054는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 1056는, 예를 들면, 물리적인 버튼, 광학식 키, 키패드, 또는 터치키를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 10510는 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치에서 마이크(예: 마이크 101010)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시 예에 따르면, 상기 전자 장치 1000는 상기 통신 모듈 1030를 이용하여 이와 연결된 외부 장치(예: 네트워크, 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 1060(예: 상기 디스플레이 150)은 패널 1062, 홀로그램 1064, 또는 프로젝터 1066을 포함할 수 있다. 상기 패널 1062은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 1062은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 1062은 상기 터치 패널 1052과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 1064은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 1066는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 1000의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 상기 디스플레이 1060은 상기 패널 1062, 상기 홀로그램 1064, 또는 프로젝터 1066를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 1070는, 예를 들면, HDMI(high-definition multimedia interface) 1072, USB(universal serial bus) 1074, 광통신(optical communication) 단자 1076 또는 D-sub(D-subminiature) 10710를 포함할 수 있다. 상기 인터페이스 1070는, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스1070는, 예를 들면, MHL(mobile high-definition link(미도시)), SD(secure Digital)/MMC(multi-media card)(미도시) 또는 IrDA(infrared data association, 미도시)를 포함할 수 있다.
상기 오디오 모듈 1080은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 1080의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 1080은, 예를 들면, 스피커 10102, 리시버 10104, 이어폰 10106 또는 마이크 101010 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 1091은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬 (flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈 1095은 상기 전자 장치 1000의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈 1095은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시 예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 1096의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 1096는 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 1000에 전원을 공급할 수 있다. 상기 배터리 1096는, 예를 들면, 충전식 전지(rechargeable battery), 또는 태양 전자(solar battery)를 포함할 수 있다.
상기 인디케이터 1097는 상기 전자 장치 1000 혹은 그 일부(예: 상기 AP 1011)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 1096는 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 1000는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
도 11은 다양한 실시 예들에 따른 복수의 전자 장치들(예: 전자 장치 1110 및 전자 장치 1130) 사이의 통신 프로토콜 1100을 도시한다. 도 11을 참조하면, 예를 들어, 상기 통신 프로토콜 1100은, 장치 발견 프로토콜(device discovery protocol) 1151, 기능 교환 프로토콜(capability exchange protocol) 1153, 데이터 세션 프로토콜(data session protocol) 1155 및 어플리케이션 프로토콜(application protocol) 1157 등을 포함할 수 있다.
한 실시 예에 따르면, 상기 장치 발견 프로토콜 1151은 전자 장치들(예: 전자 장치 1110 또는 전자 장치 1130)이 자신과 통신 가능한 외부 전자 장치를 감지하거나 감지된 외부 전자 장치와 연결하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1110(예: 전자 장치 101)은, 상기 장치 발견 프로토콜 1151을 이용하여, 상기 전자 장치 1110에서 사용 가능한 통신 방법(예: wifi, BT, 또는 USB 등)을 통해, 상기 전자 장치 1110와 통신 가능한 기기(device)로, 전자 장치 1130(예: 전자 장치 102)를 감지할 수 있다. 상기 전자 장치 1110는, 상기 전자 장치 1130과의 통신 연결을 위해, 상기 장치 발견 프로토콜 1151을 이용하여, 감지된 전자 장치 1130에 대한 식별 정보를 획득하여 저장할 수 있다. 상기 전자 장치 1110는, 예를 들면, 적어도 상기 식별 정보에 기반하여, 상기 전자 장치 1130와의 통신 연결을 개설할 수 있다.
어떤 실시 예에 따르면, 상기 장치 발견 프로토콜 1151은 복수의 전자 장치들 사이에서 상호 인증을 하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1110는 적어도 전자 장치 1130와 연결을 위한 통신 정보(예: MAC(media access control) address, UUID(universally unique identifier), SSID(subsystem identification), IP(information provider) address)에 기반하여, 상기 전자 장치 1110와 상기 전자 장치 1130 간의 인증을 수행할 수 있다.
한 실시 예에 따르면, 상기 기능 교환 프로토콜 1153은 전자 장치 1110 또는 전자 장치 1130 중 적어도 하나에서 지원 가능한 서비스의 기능과 관련된 정보를 교환하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1110 및 전자 장치 1130은 상기 기능 교환 프로토콜 1153을 통하여, 각각이 현재 제공하고 있는 서비스의 기능과 관련된 정보를 서로 교환할 수 있다. 교환 가능한 정보는 전자 장치 310 및 전자 장치 320에서 지원 가능한 복수의 서비스들 중에서 특정 서비스를 가리키는 식별 정보를 포함할 수 있다. 예를 들어, 전자 장치 1110는 상기 기능 교환 프로토콜 333을 통해 전자 장치 1130로부터 상기 전자 장치 1130가 제공하는 특정 서비스의 식별 정보를 수신할 수 있다. 이 경우, 제 1 전자 장치 1110는 상기 수신된 식별 정보에 기반하여, 상기 전자 장치 1110이 상기 특정 서비스를 지원할 수 있는지 여부를 판단할 수 있다.
한 실시 예에 따르면, 상기 데이터 세션 프로토콜 1155은 통신이 가능하도록 연결된 전자 장치들(예: 전자 장치 1110, 전자 장치 1130) 간에, 예컨대, 서비스를 연동하여 제공하기 위하여 송수신 되는, 데이터 흐름을 제어하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1110 또는 전자 장치 1130 중 적어도 하나는 상기 데이터 세션 프로토콜 1155을 이용하여, 오류 제어, 또는 데이터 품질 제어 등을 수행할 수 있다. 추가적으로 또는 대체적으로, 상기 데이터 세션 프로토콜 1155은 전자 장치 1110와 전자 장치 1130 사이에서 송수신되는 데이터의 전송 포맷을 결정할 수 있다. 또한, 전자 장치 1110 또는 전자 장치 1130 중 적어도 하나는 상기 데이터 세션 프로토콜 1155를 이용하여 상호간의 데이터 교환을 위한 적어도 세션(session)을 관리(예: 세션 연결 또는 세션 종료)할 수 있다.
한 실시 예에 따르면, 상기 어플리케이션 프로토콜 1157은 외부 전자 장치로 제공되는 서비스와 관련된 데이터를 교환하기 위한, 절차 또는 정보를 제공하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1110(예: 전자 장치 101)은 상기 어플리케이션 프로토콜 1157을 통해 전자 장치 1130(예: 전자 장치 102, 전자 장치 104, 또는 서버 106)로 서비스를 제공할 수 있다.
한 실시 예에 따르면, 상기 통신 프로토콜 1100은 표준 통신 프로토콜, 개인 또는 단체에서 지정한 통신 프로토콜(예: 통신 장치 제조 업체 또는 네트워크 공급 업체 등에서 자체적으로 지정한 통신 프로토콜) 또는 이들의 조합을 포함할 수 있다.
본 발명의 다양한 실시 예는, 하나 또는 그 이상의 프로세서(예: 프로세서 120)에 의해서 수행할 수 있고, xxx 모듈에 의해서 수행할 수도 있다.본 발명에 사용된 용어 “모듈”은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. “모듈”은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. “모듈”은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. “모듈”은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. “모듈”은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명에 따른 “모듈”은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따르면, 본 발명의 청구항 및/또는 명세서에 기재된 다양한 실시 예들에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 하드웨어, 소프트웨어, 또는 하드웨어 및 소프트웨어의 조합의 형태로 구현될(implemented) 수 있다. 소프트웨어로 구현하는 경우, 하나 이상의 프로그램(또는 프로그래밍 모듈)을 저장하는 컴퓨터 판독 가능 저장 매체(또는 컴퓨터로 읽을 수 있는 저장 매체)가 제공될 수 있다. 예컨대, 소프트웨어는 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 하나 이상의 프로그램은, 전자 장치로 하여금, 본 발명의 청구항 및/또는 명세서에 기재된 실시 예들에 따른 방법들을 실행하게 하는 명령어(instructions)를 포함할 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서 210)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 220가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서210에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시(flash) 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치, 삭제가능 프로그램가능 롬(EEPROM, Electrically Erasable Programmable Read Only Memory), 자기 디스크 저장 장치(magnetic disc storage device) 또는 다른 형태의 광학 저장 장치, 마그네틱 카세트(magnetic cassette)가 포함될 수 있다. 또는, 이들의 일부 또는 전부의 조합으로 구성된 메모리에 저장될 수 있다. 또한, 각각의 구성 메모리는 다수 개 포함될 수도 있다.
더하여, 전자 장치에 인터넷(Internet), 인트라넷(Intranet), LAN(Local Area Network), WLAN(Wide LAN), 또는 SAN(Storage Area Network)과 같은 통신 네트워크, 또는 이들의 조합으로 구성된 통신 네트워크를 통하여 접근(access)할 수 있는 부착 가능한(attachable) 저장 장치(storage device)에 저장될 수 있다. 이러한 저장 장치는 외부 포트를 통하여 전자 장치에 접속할 수 있다. 또한, 통신 네트워크상의 별도의 저장장치가 휴대용 전자 장치에 접속할 수도 있다.
또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 발명에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
다양한 실시 예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정될 수 있다.
그리고 본 명세서와 도면에 발명된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 발명된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
101: 전자 장치 150: 디스플레이 모듈
170: 입력 처리 모듈

Claims (24)

  1. 전자 장치의 동작 방법에 있어서,
    터치 스크린에서 적어도 하나의 제1 제스처를 검출하는 동작;
    상기 적어도 하나의 제1 제스처가 미리 결정된 조건을 만족시키는지 여부를 결정하는 동작;
    상기 적어도 하나의 제1 제스처가 상기 미리 결정된 조건을 만족시키는 경우, 상기 검출된 적어도 하나의 제1 제스처에 기반하여, 터치 입력에 대해 비활성화된 영역을 결정하는 동작;
    상기 적어도 하나의 제1 제스처에 기반하여 결정된 상기 비활성화된 영역에 기반하여 상기 터치 스크린의 표시 영역의 적어도 일부를 터치 입력에 대해 활성화된 둘 이상의 영역으로 구분하는 동작;
    상기 적어도 하나의 제1 제스처가 검출되는 동안, 상기 구분된 둘 이상의 활성화된 영역 중 제1 영역에서 시작된 제2 제스처를 검출하는 동작; 및
    상기 제1 영역의 영역 속성에 기반하여 상기 제2 제스처에 대응하는 기능을 수행하는 동작;을 포함하고,
    상기 적어도 하나의 제1 제스처가 상기 미리 결정된 조건을 만족시키는지 여부를 결정하는 동작은:
    적어도 하나의 제1 제스처에 의해 검출된 둘 이상의 터치 포인트 사이의 거리가 미리 결정된 거리인지를 결정하는 동작 또는 적어도 하나의 제1 제스처에 의해 검출된 터치 영역의 크기가 미리 결정된 크기인지를 결정하는 동작을 포함하는 방법.
  2. 제1 항에 있어서, 상기 터치 입력에 대해 활성화된 둘 이상의 영역은,
    상기 제1 제스처를 기준으로 상기 표시 영역의 지정된 위치에 결정된 하나 또는 그 이상의 가상의 기준 선으로 구분하는 방법.
  3. 제2 항에 있어서, 상기 기준 선은,
    상기 제1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 거리에 결정되거나, 상기 제1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 각도에 결정되거나 또는 사용자 프로필에 기반하여 획득되는 손 크기 정보에 기반하여 결정되는 방법.
  4. 제1 항에 있어서, 상기 제스처는,
    상기 터치 스크린의 상기 표시 영역의 상기 활성화된 영역을 직접 터치 또는 간접 터치하는 입력인 방법.
  5. 제1 항에 있어서, 상기 제1 제스처는,
    상기 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 터치 스크린에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상인 경우인 방법.
  6. 제 5 항에 있어서,
    상기 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 상기 둘 이상의 직접 터치 영역을 포함하는 지정된 영역을 하나의 상기 제1 제스처의 영역으로 설정하는 방법.
  7. 제1 항에 있어서, 상기 제2 제스처는,
    상기 제1 제스처를 유지한 상태에서 상기 둘 이상의 활성화된 영역으로 구분된 상기 표시 영역에 직접 터치 입력 또는 간접 터치 입력하는 방법.
  8. 제1 항에 있어서, 상기 둘 이상의 활성화된 영역 각각은,
    상기 제2 제스처를 상기 표시 영역에 표시하는데 적용할 하나 또는 그 이상의 효과가 미리 설정된 방법.
  9. 제1 항에 있어서, 상기 영역 속성은,
    상기 표시 영역에 표시하는 상기 제2 제스처에 입력 도구의 질감, 색상, 굵기 중에서 하나 또는 그 이상을 적용하는 방법.
  10. 제1 항에 있어서, 상기 영역 속성은,
    상기 제1 제스처의 영역의 지정된 위치 및 상기 제2 제스처를 감지한 위치를 기준으로 지정된 위치에 컨텐츠를 가리키는 포인터를 표시하는 방법.
  11. 제1 항에 있어서,
    상기 제2 제스처의 상기 영역 속성을 유지한 상태에서 상기 제2 제스처를 상기 구분된 둘 이상의 영역 중 제1 영역 속성의 영역에서 제2 영역 속성의 영역으로 이동하는 방법.
  12. 제11 항에 있어서,
    상기 제2 제스처에 연속된 제3 제스처를 검출하는 경우, 기존의 상기 제2 제스처에 적용된 상기 영역 속성에 따라서 표시하는 방법.
  13. 전자 장치에 있어서,
    터치 스크린에 입력되는 하나 또는 그 이상의 제스처를 처리하는 명령이 저장된 메모리;
    제스처 처리 모듈;
    상기 제스처 처리 모듈을 제어하는 적어도 하나의 프로세서를 포함하고, 상기 제스처 처리 모듈은:
    상기 터치 스크린에서 적어도 하나의 제1 제스처를 검출하고,
    상기 적어도 하나의 제1 제스처가 미리 결정된 조건을 만족시키는지 여부를 결정하고,
    상기 적어도 하나의 제1 제스처가 상기 미리 결정된 조건을 만족시키는 경우, 상기 검출된 적어도 하나의 제1 제스처에 기반하여 터치 입력에 대해 비활성화된 영역을 결정하고,
    상기 적어도 하나의 제1 제스처에 기반하여 결정된 상기 비활성화된 영역에 기반하여 상기 터치 스크린의 표시 영역의 적어도 일부를 터치 입력에 대해 활성화된 둘 이상의 영역으로 구분하고,
    상기 적어도 하나의 제1 제스처가 검출되는 동안, 상기 구분된 둘 이상의 활성화된 영역 중 하나의 영역에서 시작된 제2 제스처를 검출하고,
    상기 하나의 영역의 영역 속성에 기반하여 상기 제2 제스처에 대응하는 기능을 수행하고,
    상기 적어도 하나의 제1 제스처가 상기 미리 결정된 조건을 만족시키는지 여부를 결정하는 것은:
    적어도 하나의 제1 제스처에 의해 검출된 둘 이상의 터치 포인트 사이의 거리가 미리 결정된 거리인지를 결정하거나
    적어도 하나의 제1 제스처에 의해 검출된 터치 영역의 크기가 미리 결정된 크기인지를 결정하는, 전자 장치.
  14. 제 13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 제 1 제스처를 기준으로 상기 표시 영역의 지정된 위치에 결정된 하나 또는 그 이상의 가상의 기준 선으로 상기 둘 이상의 영역을 구분하는, 전자 장치.
  15. 제14 항에 있어서, 상기 가상의 기준선은,
    상기 제1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 거리에 결정되거나, 상기 제1 제스처의 지정된 위치를 기준으로 하나 또는 그 이상의 지정된 각도에 결정되거나 또는 사용자 프로필에 기반하여 획득되는 손 크기 정보에 기반하여 결정되는, 전자 장치.
  16. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 터치 스크린의 상기 표시 영역의 지정된 위치를 직접 터치 또는 간접 터치하는 입력으로 상기 제스처를 결정하는, 전자 장치.
  17. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 터치 스크린에 입력되는 하나의 직접 터치 입력 영역이 지정된 넓이 이상인 경우 상기 제1 제스처로 결정하는, 전자 장치.
  18. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 터치 스크린에서 수행되는 둘 이상의 직접 터치 입력 영역이 지정된 거리 내에 위치한 경우, 상기 둘 이상의 직접 터치 영역을 포함하는 지정된 영역을 하나의 상기 제1 제스처의 영역으로 설정하는, 전자 장치.
  19. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 제1 제스처를 유지한 상태에서 상기 둘 이상의 영역으로 구분된 상기 표시 영역에 직접 터치 입력 또는 간접 터치 입력으로 상기 제2 제스처를 결정하는, 전자 장치.
  20. 제13 항에 있어서, 상기 제스처 처리 모듈은
    상기 둘 이상의 활성화된 영역 각각에 상기 제2 제스처를 상기 표시 영역에 표시하는데 적용할 하나 또는 그 이상의 효과를 미리 설정하는, 전자 장치.
  21. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 영역 속성으로 상기 표시 영역에 표시하는 상기 제2 제스처에 입력 도구의 질감, 색상, 굵기 중에서 하나 또는 그 이상을 적용하는, 전자 장치.
  22. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 영역 속성으로 상기 제1 제스처의 영역의 지정된 위치 및 상기 제2 제스처를 감지한 위치를 기준으로 지정된 위치에 컨텐츠를 가리키는 포인터를 표시하는, 전자 장치.
  23. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 제2 제스처의 상기 영역 속성을 유지한 상태에서 상기 제2 제스처를 상기 구분된 둘 이상의 영역 중 제1 영역 속성의 영역에서 제2 영역 속성의 영역으로 이동하는, 전자 장치.
  24. 제13 항에 있어서, 상기 제스처 처리 모듈은,
    상기 제2 제스처에 연속된 제3 제스처를 감지하는 경우 기존의 상기 제2 제스처에 적용된 상기 영역 속성에 따라서 표시하는, 전자 장치.
KR1020130148969A 2013-12-03 2013-12-03 입력 처리 방법 및 그 전자 장치 KR102140290B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130148969A KR102140290B1 (ko) 2013-12-03 2013-12-03 입력 처리 방법 및 그 전자 장치
US14/557,607 US9772711B2 (en) 2013-12-03 2014-12-02 Input processing method and electronic device thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130148969A KR102140290B1 (ko) 2013-12-03 2013-12-03 입력 처리 방법 및 그 전자 장치

Publications (2)

Publication Number Publication Date
KR20150064354A KR20150064354A (ko) 2015-06-11
KR102140290B1 true KR102140290B1 (ko) 2020-07-31

Family

ID=53265332

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130148969A KR102140290B1 (ko) 2013-12-03 2013-12-03 입력 처리 방법 및 그 전자 장치

Country Status (2)

Country Link
US (1) US9772711B2 (ko)
KR (1) KR102140290B1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11132105B2 (en) * 2015-04-28 2021-09-28 Adobe Inc. Capturing electronic signatures using an expanded interface area
US9857596B2 (en) * 2015-11-10 2018-01-02 Oculus Vr, Llc Strap assembly with flex circuit for a head mounted display
US10222979B2 (en) * 2015-12-04 2019-03-05 Datalogic Usa, Inc. Size adjustable soft activation trigger for touch displays on electronic device
CN105786249B (zh) * 2016-02-25 2020-08-11 努比亚技术有限公司 一种控制终端的方法及终端
KR102334521B1 (ko) * 2016-05-18 2021-12-03 삼성전자 주식회사 전자 장치 및 이의 입력 처리 방법
KR20180048158A (ko) * 2016-11-02 2018-05-10 삼성전자주식회사 디스플레이 운용 방법 및 이를 지원하는 전자 장치
DE102018202049B4 (de) * 2018-02-09 2023-12-14 Volkswagen Aktiengesellschaft Bedienvorrichtung sowie verfahren, computerlesbares speichermedium mit instruktionen zum einrichten einer bedienvorrichtung und kraftfahrzeug
CN110531843A (zh) * 2018-05-24 2019-12-03 富泰华工业（深圳）有限公司 电子装置及电子装置的操作控制方法
KR102569170B1 (ko) * 2018-08-09 2023-08-22 삼성전자 주식회사 사용자 입력이 유지되는 시간에 기반하여 사용자 입력을 처리하는 방법 및 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070152976A1 (en) * 2005-12-30 2007-07-05 Microsoft Corporation Unintentional touch rejection

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101144423B1 (ko) * 2006-11-16 2012-05-10 엘지전자 주식회사 휴대 단말기 및 휴대 단말기의 화면 표시 방법
US9423995B2 (en) * 2007-05-23 2016-08-23 Google Technology Holdings LLC Method and apparatus for re-sizing an active area of a flexible display
KR101499546B1 (ko) * 2008-01-17 2015-03-09 삼성전자주식회사 터치 스크린 장치의 디스플레이 영역 제어 방법, 장치, 및기록매체
KR101521919B1 (ko) * 2008-08-21 2015-05-20 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20100050319A (ko) * 2008-11-05 2010-05-13 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
KR101685363B1 (ko) * 2010-09-27 2016-12-12 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US9244545B2 (en) * 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
KR20120082577A (ko) 2011-01-14 2012-07-24 삼성전자주식회사 디바이스에서 펜 터치 인식 방법 및 장치
US20130021269A1 (en) * 2011-07-20 2013-01-24 Google Inc. Dynamic Control of an Active Input Region of a User Interface
TWI452509B (zh) * 2011-08-25 2014-09-11 3D sensing method and system of touch panel
US8806369B2 (en) * 2011-08-26 2014-08-12 Apple Inc. Device, method, and graphical user interface for managing and interacting with concurrently open software applications
DE102012108826A1 (de) * 2011-09-20 2013-03-21 Beijing Lenovo Software Ltd. Elektronische vorrichtung und verfahren zum anpassen ihres berührungssteuerungsbereichs
US20130100042A1 (en) * 2011-10-21 2013-04-25 Robert H. Kincaid Touch screen implemented control panel
KR20130101754A (ko) * 2012-03-06 2013-09-16 주식회사 팬택 설정 패턴을 활용한 모바일 디바이스의 제어 방법 및 이를 이용한 모바일 디바이스
CN102681847B (zh) * 2012-04-28 2015-06-03 华为终端有限公司 触屏终端对象处理方法及触屏终端
JP6153710B2 (ja) * 2012-09-28 2017-06-28 株式会社Pfu 帳票入出力装置、帳票入出力方法、および、プログラム
US9098127B2 (en) * 2012-10-17 2015-08-04 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
KR101963207B1 (ko) * 2012-11-02 2019-07-31 삼성전자주식회사 단말기의 동작제어 장치 및 방법
CN102981768B (zh) * 2012-12-04 2016-12-21 中兴通讯股份有限公司 一种在触屏终端界面实现悬浮式全局按钮的方法及系统
KR102072582B1 (ko) * 2012-12-31 2020-02-03 엘지전자 주식회사 듀얼 디스플레이 방법 및 장치
US20140208333A1 (en) * 2013-01-22 2014-07-24 Motorola Mobility Llc Initialize a Computing Device to Perform an Action
KR102137240B1 (ko) * 2013-04-16 2020-07-23 삼성전자주식회사 디스플레이 영역을 조절하기 위한 방법 및 그 방법을 처리하는 전자 장치
TW201502962A (zh) * 2013-07-15 2015-01-16 Hon Hai Prec Ind Co Ltd 手寫輸入控制方法
US20150052430A1 (en) * 2013-08-13 2015-02-19 Dropbox, Inc. Gestures for selecting a subset of content items
US20150081653A1 (en) * 2013-09-13 2015-03-19 Yahoo! Inc. Type free search assist

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070152976A1 (en) * 2005-12-30 2007-07-05 Microsoft Corporation Unintentional touch rejection

Also Published As

Publication number Publication date
US20150153893A1 (en) 2015-06-04
US9772711B2 (en) 2017-09-26
KR20150064354A (ko) 2015-06-11

Similar Documents

Publication Publication Date Title
KR102171082B1 (ko) 지문 처리 방법 및 그 전자 장치
KR102140290B1 (ko) 입력 처리 방법 및 그 전자 장치
US10261683B2 (en) Electronic apparatus and screen display method thereof
US10257416B2 (en) Apparatus and method for setting camera
US9983767B2 (en) Apparatus and method for providing user interface based on hand-held position of the apparatus
US20170235435A1 (en) Electronic device and method of application data display therefor
KR102219861B1 (ko) 화면 공유 방법 및 그 전자 장치
US9626505B2 (en) Method and apparatus for managing authentication
US9804762B2 (en) Method of displaying for user interface effect and electronic device thereof
US20150220247A1 (en) Electronic device and method for providing information thereof
US10999501B2 (en) Electronic device and method for controlling display of panorama image
KR102126568B1 (ko) 입력 데이터 처리 방법 및 그 전자 장치
KR102110257B1 (ko) 전화번호를 이용하여 외부 기기를 제어하는 전자 기기 및 방법
AU2015202698B2 (en) Method and apparatus for processing input using display
KR102144588B1 (ko) 센서 모듈 및 이를 구비한 장치
KR20150111632A (ko) 지문 인식 방법 및 그 전자 장치
KR102250772B1 (ko) 이어 잭 오작동을 방지하는 전자 장치 및 방법
KR102213897B1 (ko) 사용자 입력에 따라 하나 이상의 아이템들을 선택하는 방법 및 이를 위한 전자 장치
KR20150135837A (ko) 디스플레이 운용 전자장치 및 방법
KR102161446B1 (ko) 터치 기반 사용자 인터페이스를 포함하는 전자 장치
KR20150085351A (ko) 입력 처리 방법 및 그 전자 장치
US10114542B2 (en) Method for controlling function and electronic device thereof
US10171651B2 (en) Electronic device and method for configuring message, and wearable electronic device and method for receiving and executing the message
KR102241831B1 (ko) 전자 장치 및 이의 운영 방법
US20150341827A1 (en) Method and electronic device for managing data flow

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant