KR20160024505A

KR20160024505A - Electronic apparatus and input method thereof

Info

Publication number: KR20160024505A
Application number: KR1020140111322A
Authority: KR
Inventors: 세르게이 커스탁; 안드리 피수넨코; 스타니슬라브 콥찬코; 안톤 바겟스카이; 아르템 가브리스; 마이크할로 카트오브
Original assignee: 삼성전자주식회사
Priority date: 2014-08-26
Filing date: 2014-08-26
Publication date: 2016-03-07

Abstract

The present invention is to provide an input method for executing various functions for an electronic apparatus including a touch screen. The input method of an electronic apparatus including a touch screen comprises the following operations: receiving a first gesture having an trajectory through a direct touch on the touch screen; executing a first function of the electronic apparatus corresponding to the first gesture; receiving a second gesture having the same trajectory with the first gesture through a proximity touch on the touch screen; and executing a second function different from the first function of the electronic apparatus corresponding to the first gesture. However, the present invention is not limited to the present embodiment. Other embodiments are also possible.

Description

[0001] ELECTRONIC APPARATUS AND INPUT METHOD THEREOF [0002]

본 발명의 다양한 실시 예들은 터치 스크린을 포함하는 전자 장치 및 이의 터치 입력 방법에 관한 것이다.Various embodiments of the present invention relate to an electronic device including a touch screen and a touch input method thereof.

오늘 날의 스마트폰, 태블릿 PC 등과 같은 휴대 단말기뿐만 아니라 다양한 전자 장치들은 사용자의 입력을 직관적으로 처리할 수 있도록 터치 패널을 구비하는 추세이다. 터치 패널은 디스플레이 패널과 하나의 모듈을 이루어 터치 스크린의 형태로 사용자에게 제공될 수 있다.Today's various electronic devices as well as portable terminals such as smart phones, tablet PCs and the like are inclined to have a touch panel so as to intuitively process the user's input. The touch panel can be provided to the user in the form of a touch screen in the form of a module with the display panel.

한편, 기술의 발달로 전자 장치가 구현하는 기술을 점점 더 복잡해지고 있다. 전자 장치가 제공하는 다양한 기능을 효율적이고 직관적으로 실행하기 위하여, 전자 장치와 사용자 간의 인터렉션(interaction)이 점점 더 중요해지고 있다.On the other hand, with the development of technology, the technology implemented by electronic devices is becoming more and more complicated. In order to efficiently and intuitively implement the various functions provided by the electronic device, the interaction between the electronic device and the user becomes more and more important.

전자 장치가 지원하는 어플리케이션은 사용자의 입력에 따라 매우 다양한 기능을 지원할 수 있다. 사용자는, 해당 어플리케이션에서 실행하고자 하는 기능에 따라 각기 다른 입력을 제공하여야 한다. 종래에는, 사용자가 원하는 기능을 실행하기 위한 입력을 제공함에 있어, 메뉴를 오픈하고 메뉴에서 원하는 기능에 대응하는 아이템을 선택하는 등 시간과 동작이 다소 소요되는 문제가 있었다.Applications supported by electronic devices can support a wide variety of functions depending on user input. The user must provide different inputs according to the functions to be executed in the application. Conventionally, in providing an input for executing a function desired by the user, there has been a problem that a time and an operation are required, such as opening a menu and selecting an item corresponding to a desired function in a menu.

따라서, 본 발명의 다양한 실시 예는 터치 스크린을 포함하는 전자 장치에 있어서 다양한 기능을 실행하기 위한 입력 방법을 제안한다.Accordingly, various embodiments of the present invention propose an input method for performing various functions in an electronic device including a touch screen.

본 발명의 일 실시 예에 따른 터치 스크린을 포함하는 전자 장치의 입력 방법은, 상기 터치 스크린에 대한 직접 터치를 통해 궤적을 갖는 제 1 제스처를 입력받는 동작; 상기 제 1 제스처에 대응하는 상기 전자 장치의 제 1 기능을 실행하는 동작; 상기 터치 스크린에 대한 근접 터치를 통해 상기 제 1 제스처와 동일한 궤적을 갖는 제 2 제스처를 입력받는 동작; 및 상기 제 1 제스처에 대응하는 상기 전자 장치의 상기 제 1 기능과는 다른 제 2 기능을 실행하는 동작을 포함할 수 있다.An input method of an electronic device including a touch screen according to an exemplary embodiment of the present invention includes: receiving a first gesture having a locus through direct touch to the touch screen; Performing a first function of the electronic device corresponding to the first gesture; Receiving a second gesture having the same trajectory as the first gesture through proximity touch to the touch screen; And performing a second function different from the first function of the electronic device corresponding to the first gesture.

본 발명의 일 실시 예에 따른 전자 장치는, 직접 터치를 통해 궤적을 갖는 제 1 제스처를 입력받고, 근접 터치를 통해 상기 제 1 제스처와 동일한 궤적을 갖는 제 2 제스처를 입력받는 터치 스크린; 및 상기 제 1 제스처에 대응하는 제 1 기능을 실행하고, 상기 제 2 제스처에 대응하는 상기 제 1 기능과는 다른 제 2 기능을 실행하는 터치 입력 처리 모듈을 포함할 수 있다.An electronic device according to an embodiment of the present invention includes: a touch screen that receives a first gesture having a trajectory through a direct touch and receives a second gesture having the same trajectory as the first gesture through proximity touch; And a touch input processing module that executes a first function corresponding to the first gesture and executes a second function different from the first function corresponding to the second gesture.

본 발명의 일 실시 예에 따른 전자 장치는, 터치 입력을 수신하고, 출력 화면을 제공하는 터치 스크린; 및 상기 터치 스크린을 통해 근접 터치 입력이 감지되는 동안 화면 방향 회전 기능을 잠금하고, 상기 감지되던 근접 터치 입력이 소멸하는 경우 또는 추가적인 근접 터치 입력이 더 감지되는 경우에 상기 화면 방향 회전 기능 잠금을 해제하는 터치 입력 처리 모듈을 포함할 수 있다.An electronic device according to an embodiment of the present invention includes: a touch screen that receives a touch input and provides an output screen; And locks the screen orientation rotation function while the proximity touch input is detected through the touch screen, and when the detected proximity touch input disappears or further proximity touch input is detected, And a touch input processing module.

본 발명의 실시 예에 따른 전자 장치의 입력 방법에 의하면, 어플리케이션에서 다양한 기능을 실행시키는데 있어, 다양한 방식의 터치 입력을 이용한 끊김없는(seamless) 사용자 입력을 제공할 수 있다.According to the input method of the electronic device according to the embodiment of the present invention, in performing various functions in an application, it is possible to provide seamless user input using various types of touch input.

본 발명의 실시 예에 따른 전자 장치의 입력 방법에 의하면, 터치 입력의 입력 방식에 의해 결정되는 출력 모드에 따라 사용자 입력에 대응하는 다양한 출력을 제공할 수 있다.According to the input method of the electronic device according to the embodiment of the present invention, various outputs corresponding to the user input can be provided according to the output mode determined by the input method of the touch input.

또한, 본 발명의 실시 예에 따른 전자 장치에 의하면, 화면 방향 회전 잠금 기능 및 상기 잠금에 대한 해제 기능을 보다 직관적인 입력으로 제공할 수 있다.In addition, according to the electronic device according to the embodiment of the present invention, the screen rotation lock function and the lock release function can be provided as more intuitive input.

도 1은 본 발명의 한 실시 예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한다.
도 2는 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법을 나타내는 흐름도이다.
도 3은 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시로써, 다중 언어(multi-lingual) 입력 방법을 나타내는 흐름도이다.
도 4는 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시로써, 다중 언어 입력 방법을 나타내는 화면 예시도이다.
도 5는 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법을 나타내는 흐름도이다.
도 6은 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시를 나타내는 화면 예시도이다.
도 7은 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시를 나타내는 화면 예시도이다.
도 8은 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시를 나타내는 흐름도이다.
도 9는 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시를 나타내는 화면 예시도이다.
도 10은 본 발명의 한 실시 예에 따른 전자 장치의 입력 방법의 한 예시를 나타내는 화면 예시도이다.
도 11은 본 발명의 한 실시 예에 따른 전자 장치의 화면 방향 회전 잠금 및 잠금 해제 방법을 나타내는 흐름도이다.
도 12는 본 발명의 한 실시 예에 따른 전자 장치의 화면 방향 회전 잠금 및 잠금 해제 방법을 나타내는 화면 예시도이다.1 illustrates a network environment including an electronic device according to one embodiment of the present invention.
2 is a flowchart illustrating an input method of an electronic device according to an embodiment of the present invention.
3 is a flow chart illustrating a multi-lingual input method as an example of an input method of an electronic device according to an embodiment of the present invention.
4 is a diagram illustrating an example of a method of inputting an electronic device according to an exemplary embodiment of the present invention.
5 is a flowchart illustrating an input method of an electronic device according to an embodiment of the present invention.
6 is a diagram illustrating an example of a screen of an input method of an electronic device according to an embodiment of the present invention.
FIG. 7 is a diagram illustrating an example of an input method of an electronic device according to an embodiment of the present invention.
8 is a flow chart illustrating an example of an input method of an electronic device according to an embodiment of the present invention.
9 is a diagram illustrating an example of a screen of an input method of an electronic device according to an embodiment of the present invention.
10 is an exemplary diagram illustrating an example of an input method of an electronic device according to an embodiment of the present invention.
FIG. 11 is a flowchart illustrating a method of locking and unlocking rotation of a screen in an electronic device according to an embodiment of the present invention.
FIG. 12 is a diagram illustrating a screen illustrating a method of locking and unlocking a screen direction rotation of an electronic device according to an embodiment of the present invention.

이하, 본 발명의 다양한 실시 예가 첨부된 도면과 연관되어 기재된다. 본 발명의 다양한 실시 예는 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시 예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시 예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.Best Mode for Carrying Out the Invention Various embodiments of the present invention will be described below with reference to the accompanying drawings. The various embodiments of the present invention are capable of various changes and may have various embodiments, and specific embodiments are illustrated in the drawings and the detailed description is described with reference to the drawings. It should be understood, however, that it is not intended to limit the various embodiments of the invention to the specific embodiments, but includes all changes and / or equivalents and alternatives falling within the spirit and scope of the various embodiments of the invention. In connection with the description of the drawings, like reference numerals have been used for like elements.

본 발명의 다양한 실시 예에서 사용될 수 있는 "포함한다" 또는 "포함할 수 있다" 등의 표현은 개시(disclosure)된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명의 다양한 실시 예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. The use of "including" or "including" in various embodiments of the present invention can be used to refer to the presence of a corresponding function, operation or component, etc., which is disclosed, Components and the like. Also, in various embodiments of the invention, the terms "comprise" or "having" are intended to specify the presence of stated features, integers, steps, operations, components, parts or combinations thereof, But do not preclude the presence or addition of one or more other features, numbers, steps, operations, components, parts, or combinations thereof.

본 발명의 다양한 실시 예에서 "또는" 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, "A 또는 B"는, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.The "or" in various embodiments of the present invention includes any and all combinations of words listed together. For example, "A or B" may comprise A, comprise B, or both A and B.

본 발명의 다양한 실시 예에서 사용된 "제 1, " "제2, " "첫째, "또는 "둘째, "등의 표현들은 다양한 실시 예들의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 다양한 실시 예의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.&Quot; first, "" second," " first, "or" second, " etc. used in various embodiments of the present invention may modify various elements of various embodiments, I never do that. For example, the representations do not limit the order and / or importance of the components. The representations may be used to distinguish one component from another. For example, both the first user equipment and the second user equipment are user equipment and represent different user equipment. For example, without departing from the scope of the various embodiments of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다. It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it is to be understood that the element may be directly connected or connected to the other element, It should be understood that there may be other new components between the different components. On the other hand, when it is mentioned that an element is "directly connected" or "directly connected" to another element, it is understood that there is no other element between the element and the other element It should be possible.

본 발명의 다양한 실시 예에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명의 다양한 실시 예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.The terminology used in the various embodiments of the present invention is used only to describe a specific embodiment and is not intended to limit the various embodiments of the present invention. The singular expressions include plural expressions unless the context clearly dictates otherwise.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명의 다양한 실시 예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명의 다양한 실시 예에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the various embodiments of the present invention belong. Terms such as those defined in commonly used dictionaries should be interpreted to have the meanings consistent with the contextual meanings of the related art and, unless expressly defined in the various embodiments of the present invention, It is not interpreted as meaning.

본 발명의 다양한 실시 예에 따른 전자 장치는, 터치 스크린이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다. An electronic device according to various embodiments of the present invention may be an apparatus including a touch screen. For example, the electronic device can be a smartphone, a tablet personal computer, a mobile phone, a videophone, an e-book reader, a desktop personal computer, a laptop Such as a laptop personal computer (PC), a netbook computer, a personal digital assistant (PDA), a portable multimedia player (PMP), an MP3 player, a mobile medical device, a camera, or a wearable device Such as a head-mounted device (HMD) such as electronic glasses, an electronic garment, an electronic bracelet, an electronic necklace, an electronic app apparel, an electronic tattoo, or a smart watch.

어떤 실시 예들에 따르면, 전자 장치는 터치 스크린을 포함하는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.According to some embodiments, the electronic device may be a smart home appliance including a touch screen. [0003] Smart household appliances, such as electronic devices, are widely used in the fields of television, digital video disk (DVD) player, audio, refrigerator, air conditioner, vacuum cleaner, oven, microwave oven, washing machine, air cleaner, set- And may include at least one of a box (e.g., Samsung HomeSync ™, Apple TV ™, or Google TV ™), game consoles, an electronic dictionary, an electronic key, a camcorder,

어떤 실시 예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller? machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.According to some embodiments, the electronic device may be implemented in a variety of medical devices (e.g., magnetic resonance angiography (MRA), magnetic resonance imaging (MRI), computed tomography (CT), camera, ultrasound, global positioning system receiver, EDR (event data recorder), flight data recorder (FDR), automotive infotainment device, marine electronic equipment (eg marine navigation device and gyro compass), avionics, security An automotive head unit, an industrial or household robot, an automatic teller machine (ATM) of a financial institution, or a point of sale (POS) of a store.

어떤 실시 예들에 따르면, 전자 장치는 터치 스크린을 포함하는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.According to some embodiments, the electronic device may be a piece of furniture or a structure / structure including a touch screen, an electronic board, an electronic signature receiving device, a projector, (E.g., water, electricity, gas, or radio wave measuring instruments, etc.). An electronic device according to various embodiments of the present invention may be one or more of the various devices described above. Further, the electronic device according to various embodiments of the present invention may be a flexible device. It should also be apparent to those skilled in the art that the electronic device according to various embodiments of the present invention is not limited to the above-described devices.

이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다. Hereinafter, an electronic device according to various embodiments will be described with reference to the accompanying drawings. The term user as used in various embodiments may refer to a person using an electronic device or a device using an electronic device (e.g., an artificial intelligence electronic device).

도 1은 다양한 실시 예에 따른, 전자 장치(101)를 포함하는 네트워크 환경 (100)를 도시한다. 도 1을 참조하면, 상기 전자 장치(101)는 버스(110), 프로세서 (120), 메모리(130), 입출력 인터페이스(140), 디스플레이(150), 통신 인터페이스 (160) 및 터치 입력 처리 모듈(170)을 포함할 수 있다. 1 illustrates a network environment 100 including an electronic device 101, in accordance with various embodiments. 1, the electronic device 101 includes a bus 110, a processor 120, a memory 130, an input / output interface 140, a display 150, a communication interface 160, and a touch input processing module 170).

상기 버스(110)는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.The bus 110 may be a circuit that interconnects the components described above and communicates (e.g., control messages) between the components described above.

상기 프로세서(120)는, 예를 들면, 상기 버스(110)를 통해 전술한 다른 구성요소들(예: 상기 메모리(130), 상기 입출력 인터페이스(140), 상기 디스플레이(150), 상기 통신 인터페이스(160), 또는 상기 터치 입력 처리 모듈(170) 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.The processor 120 may communicate with other components (e.g., the memory 130, the input / output interface 140, the display 150, the communication interface 160, or the touch input processing module 170, and the like), decrypts the received command, and executes an operation or data processing according to the decrypted command.

상기 메모리(130)는, 상기 프로세서(120) 또는 다른 구성요소들(예: 상기 입출력 인터페이스(140), 상기 디스플레이(150), 상기 통신 인터페이스(160), 또는 상기 터치 입력 처리 모듈(170) 등)로부터 수신되거나 상기 프로세서(120) 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리(130)는, 예를 들면, 커널(131), 미들웨어(132), 어플리케이션 프로그래밍 인터페이스(API: application programming interface)(133) 또는 어플리케이션(134) 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.The memory 130 may be connected to the processor 120 or other components such as the input and output interface 140, the display 150, the communication interface 160, or the touch input processing module 170 Or store instructions or data generated by the processor 120 or other components. The memory 130 may include programming modules such as, for example, a kernel 131, a middleware 132, an application programming interface (API) 133, or an application 134. Each of the above-described programming modules may be composed of software, firmware, hardware, or a combination of at least two of them.

상기 커널(131)은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어(132), 상기 API(133) 또는 상기 어플리케이션(134)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스(110), 상기 프로세서 (120) 또는 상기 메모리(130) 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널(131)은 상기 미들웨어(132), 상기 API(133) 또는 상기 어플리케이션(134)에서 상기 전자 장치(101)의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.The kernel 131 may include system resources used to execute operations or functions implemented in other programming modules, such as the middleware 132, the API 133 or the application 134 (E.g., the bus 110, the processor 120, or the memory 130). The kernel 131 may also provide an interface for accessing and controlling or managing the individual components of the electronic device 101 at the middleware 132, the API 133 or the application 134 have.

상기 미들웨어(132)는 상기 API(133) 또는 상기 어플리케이션(134)이 상기 커널(131)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어(132)는 상기 어플리케이션(134)로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션(134) 중 적어도 하나의 어플리케이션에 상기 전자 장치(101)의 시스템 리소스(예: 상기 버스(110), 상기 프로세서(120) 또는 상기 메모리(130) 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.The middleware 132 can act as an intermediary for the API 133 or the application 134 to communicate with the kernel 131 to exchange data. The middleware 132 may also be operable to associate at least one application of the application 134 with system resources of the electronic device 101, for example, (E.g., scheduling or load balancing) for a work request using a method such as assigning a priority that can be used by the processor 110 (e.g., the bus 110, the processor 120, or the memory 130) .

상기 API(133)는 상기 어플리케이션(134)이 상기 커널(131) 또는 상기 미들웨어(132)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다. The API 133 is an interface for the application 134 to control the functions provided by the kernel 131 or the middleware 132. For example, the API 133 may be a file control, a window control, an image processing, At least one interface or function (e.g.

다양한 실시 예에 따르면, 상기 어플리케이션(134)는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션(134)은 상기 전자 장치(101)와 외부 전자 장치(예: 전자 장치(104)) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.According to various embodiments, the application 134 may be an SMS / MMS application, an email application, a calendar application, an alarm application, a health care application (e.g., an application that measures momentum or blood glucose) E.g., applications that provide air pressure, humidity, or temperature information, etc.). Additionally or alternatively, the application 134 may be an application related to the exchange of information between the electronic device 101 and an external electronic device (e.g., electronic device 104). The application associated with the information exchange may include, for example, a notification relay application for communicating specific information to the external electronic device, or a device management application for managing the external electronic device .

예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치(101) 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 (104))로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 (104))로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치(101)와 통신하는 외부 전자 장치(예: 전자 장치(104))의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.For example, the notification delivery application may transmit notification information generated by another application (e.g., SMS / MMS application, email application, healthcare application, or environment information application) of the electronic device 101 to an external electronic device (E.g., device 104). Additionally or alternatively, the notification delivery application may receive notification information from, for example, an external electronic device (e.g., electronic device 104) and provide it to the user. The device management application may be configured to perform functions for at least a portion of an external electronic device (e.g., electronic device 104) that communicates with the electronic device 101 (e.g., (E.g., controlling the turn-on / turn-off of the external electronic device or adjusting the brightness (or resolution) of the display), managing an application running on the external electronic device or services , Deleted or updated).

다양한 실시 예에 따르면, 상기 어플리케이션(134)은 상기 외부 전자 장치(예: 전자 장치(104))의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션(134)은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 상기 어플리케이션(134)은 전자 장치(101)에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버(106) 또는 전자 장치(104))로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.According to various embodiments, the application 134 may include an application specified according to attributes (e.g., the type of electronic device) of the external electronic device (e.g., electronic device 104). For example, if the external electronic device is an MP3 player, the application 134 may include an application related to music playback. Similarly, if the external electronic device is a mobile medical device, the application 134 may include applications related to health care. According to one embodiment, the application 134 may include at least one of an application specified in the electronic device 101 or an application received from an external electronic device (e.g., server 106 or electronic device 104) .

상기 입출력 인터페이스(140)은, 입출력 장치(예: 센서, 키보드 또는 터치 스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스(110)를 통해 상기 프로세서(120), 상기 메모리(130), 상기 통신 인터페이스(160), 또는 상기 터치 입력 처리 모듈(170)에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스(140)은 터치 스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서(120) 및 상기 터치 입력 처리 모듈(170)로 제공할 수 있다. 또한, 상기 입출력 인터페이스(140)은, 예를 들면, 상기 버스(110)를 통해 상기 프로세서(120), 상기 메모리(130), 상기 통신 인터페이스(160), 또는 상기 터치 입력 처리 모듈(170)로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스(140)은 상기 프로세서(120)를 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.The input / output interface 140 connects commands or data input from a user via an input / output device (e.g., a sensor, a keyboard, or a touch screen) to the processor 120, (130), the communication interface (160), or the touch input processing module (170). For example, the input / output interface 140 may provide data on the user's touch input through the touch screen to the processor 120 and the touch input processing module 170. The input / output interface 140 may be connected to the processor 120, the memory 130, the communication interface 160, or the touch input processing module 170 via the bus 110, for example. And output the received command or data through the input / output device (e.g., a speaker or a display). For example, the input / output interface 140 may output voice data processed through the processor 120 to a user through a speaker.

상기 디스플레이(150)는 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)을 표시할 수 있다. 예컨대, 디스플레이(150)는 터치 패널과 디스플레이 패널을 포함하는 터치스크린을 포함할 수 있다. 터치 패널은 손 제스처를 감지하는 손 터치 패널과 펜 제스처를 감지하는 펜 터치 패널을 포함하여 구성된 복합 터치 패널일 수 있다. 여기서 손 터치 패널은 정전용량 방식(capacitive type)으로 구현될 수 있다. 물론 손 터치 패널은 저항막 방식(resistive type), 적외선 방식 또는 초음파 방식 등으로 구현될 수도 있다. 또한 손 터치 패널은 손 제스처에 의해서만 이벤트를 발생하는 것은 아니며, 다른 물체(예, 정전용량 변화를 가할 수 있는 전도성 재질의 물체)에 의해서도 이벤트를 생성할 수 있다. 펜 터치 패널은 전자 유도 방식(electromagnetic induction type)으로 구성될 수 있다. 이에 따라 펜 터치 패널은 자기장을 형성할 수 있도록 특수 제작된 터치용 펜에 의해 이벤트를 생성한다. 펜 터치 패널은 키 이벤트를 발생할 수 있다. 예컨대, 펜에 설치된 액티베이터가 활성화되면, 펜의 코일에서 발생되는 자기장이 변화된다. 상기 액티베이터는 버튼으로 구현될 수 있고, 상기 버튼이 눌리는 방식으로 액티베이터가 활성화될 수 있다. 펜 터치 패널은 자기장의 변화에 응답하여 키 이벤트를 발생시킬 수 있다.The display 150 may display various information (e.g., multimedia data or text data) to the user. For example, the display 150 may include a touch screen including a touch panel and a display panel. The touch panel may be a complex touch panel comprising a hand touch panel for sensing hand gestures and a pen touch panel for sensing pen gestures. Here, the hand touch panel can be implemented as a capacitive type. Of course, the hand touch panel may be implemented by a resistive type, an infrared type, or an ultrasonic type. In addition, the hand touch panel does not only generate events by hand gestures, but can also generate events by other objects (e.g., conductive objects that can undergo capacitance changes). The pen touch panel may be configured as an electromagnetic induction type. Accordingly, the pen touch panel generates an event by a touch pen which is specially designed to form a magnetic field. The pen touch panel can generate key events. For example, when the activator installed in the pen is activated, the magnetic field generated in the coil of the pen changes. The activator may be implemented as a button, and the activator may be activated in a manner that the button is depressed. The pen touch panel can generate a key event in response to a change in the magnetic field.

터치 패널은, 터치 입력 수단(예, 터치용 펜 촉이나 손가락 끝)이 터치 입력의 한 예시로 터치 스크린에 대한 물리적인 접촉 입력을 제공하면. 이를 검출할 수 있다.The touch panel provides a physical contact input to the touch screen as an example of a touch input means (e.g., a pen tip or fingertip for a touch) provides touch input to the touch screen. This can be detected.

그리고, 터치 패널은 터치 입력 수단이 상기 터치 스크린에서 소정 거리 이내, 예컨대 10cm 이내로 접근하면, 터치 입력 수단의 접근(proximity)을 검출할 수 있다. 둘 간의 거리(일명, 깊이(depth))가 예컨대, 5cm 이내이면, 터치 입력 수단의 움직임과 그 방향을 검출할 수 있다. 둘 간의 거리가 예컨대, 3cm 이내이면, 터치 입력 수단의 위치를 검출할 수 있다. 이와 같이 터치 패널은, 터치 입력 수단이 터치 입력의 한 예시로 터치 스크린에 대하여 그 위치를 검출할 수 있는 수준까지 접근하여 제공하는 근접 입력(예컨대, 호버링(hovering))을 제공하면, 이를 검출할 수 있다. 여기서 3cm는 하나의 값일 뿐, 이 수치에 의해 근접 입력의 검출 여부가 정의되는 것은 아니다. 예컨대, 전자 장치의 성능에 따라 그 값이 좌우될 수 있다.The touch panel can detect the proximity of the touch input means when the touch input means approaches the touch screen within a predetermined distance, for example, within 10 cm. If the distance (aka, depth) between the two is, for example, within 5 cm, the movement and direction of the touch input means can be detected. If the distance between the two is, for example, within 3 cm, the position of the touch input means can be detected. Thus, if the touch input means provides proximity input (e.g., hovering) to approach and provide a level of detection of the position of the touch screen to the touch screen as an example of the touch input, . Here, 3 cm is only one value, and the detection of proximity input is not defined by this value. For example, the value may depend on the performance of the electronic device.

상기 통신 인터페이스(160)은 상기 전자 장치(101)와 외부 장치(예: 전자 장치(104) 또는 서버(106)) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스(160)은 무선 통신 또는 유선 통신을 통해서 네트워크(162)에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.The communication interface 160 may connect the communication between the electronic device 101 and an external device (e.g., the electronic device 104 or the server 106). For example, the communication interface 160 may be connected to the network 162 via wireless or wired communication to communicate with the external device. The wireless communication may include, for example, wireless fidelity, Bluetooth, near field communication (NFC), global positioning system (GPS) , WiBro or GSM, etc.). The wired communication may include at least one of, for example, a universal serial bus (USB), a high definition multimedia interface (HDMI), a recommended standard 232 (RS-232) or a plain old telephone service (POTS).

한 실시 예에 따르면, 상기 네트워크(162)는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시 예에 따르면, 상기 전자 장치(101)와 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션(134), 어플리케이션 프로그래밍 인터페이스(133), 상기 미들웨어(132), 커널(131) 또는 통신 인터페이스(160) 중 적어도 하나에서 지원될 수 있다.According to one embodiment, the network 162 may be a telecommunications network. The communication network may include at least one of a computer network, an internet, an internet of things, or a telephone network. According to one embodiment, a protocol (e.g., transport layer protocol, data link layer protocol or physical layer protocol) for communication between the electronic device 101 and an external device is provided by the application 134, application programming interface 133, May be supported by at least one of the middleware 132, the kernel 131, or the communication interface 160.

상기 터치 입력 처리 모듈(170)은 입력 모드 또는 출력 모드를 설정하고, 상기 입력 모드 또는 출력 모드에 응답하여 터치 입력에 대응하는 출력을 결정할 수 있다.The touch input processing module 170 may set an input mode or an output mode and determine an output corresponding to the touch input in response to the input mode or the output mode.

한 실시 예에 따르면, 터치 입력 처리 모듈(170)은 사용자의 설정 또는 실행되는 어플리케이션에 의해 특정(application-specific)되는 입력 모드(mode)를 설정할 수 있다. 이때, 입력 모드란, 전자 장치(101)가 사용자의 입력을 처리하는 환경을 의미할 수 있다. 전자 장치(101)의 입력 모드는 설정 또는 사용자의 입력에 의하여 전환될 수 있다.According to one embodiment, the touch input processing module 170 may set an input mode that is application-specific by the setting of the user or the application being executed. Here, the input mode may mean an environment in which the electronic device 101 processes user input. The input mode of the electronic device 101 may be switched by setting or by a user's input.

한 실시 예에 따르면, 터치 입력 처리 모듈(170)은 터치 스크린을 통하여 수신한 사용자의 터치 입력의 입력 방식(modality)을 감지할 수 있다. 예컨대, 터치 입력의 입력 방식은 상기 입력이 직접 터치인지 근접 터치인지 여부, 손가락에 의한 터치 입력인지 터치 펜에 의한 터치 입력인지 여부, 또는 터치 펜에 의한 터치 입력일 경우 상기 터치 펜에 포함된 액티베이터의 활성화 여부 중 적어도 하나에 의하여 결정될 수 있다. 한 실시 예에 따르면, 각 입력 모드에 대응하는 터치 입력의 입력 방식이 설정되어 있을 수 있다. 즉, 해당 입력 모드에서는 그에 대응하는 입력 방식의 터치 입력에 의해서 입력이 이루어질 수 있도록 설정되어 있을 수 있다.According to one embodiment, the touch input processing module 170 may sense a modality of the touch input of the user received through the touch screen. For example, the input method of the touch input may be an input method of an activator included in the touch pen when the input is a direct touch or a proximity touch, whether it is a touch input by a finger, a touch input by a touch pen, And whether or not it is activated. According to one embodiment, an input method of a touch input corresponding to each input mode may be set. That is, in the corresponding input mode, the input may be set by the touch input of the corresponding input method.

한 실시 예에 따르면, 터치 입력 처리 모듈(170)은 사용자가 제공하는 터치 입력 예컨대 터치 드로잉 입력의 입력 방식에 대응하는 출력 모드를 설정할 수 있다. 출력 모드가 달라지는 경우, 예컨대 전자 장치(101)가 동일한 드로잉 형태의 사용자의 터치 입력을 수신하더라도 터치 입력이 처리되어 출력되는 내용이 달라질 수 있다. 예컨대, 사용자가 제 1 입력 방식의 터치 입력을 제공하면, 제 1 출력 모드에서 사용자의 터치 입력을 처리할 수 있다. 이 경우 제 1 실행 결과를 출력할 수 있다. 반면, 사용자가 제 2 입력 방식의 터치 입력을 제공하면, 제 2 출력 모드에서 사용자의 터치 입력을 처리할 수 있다. 이 경우 제 2 실행 결과를 출력할 수 있다. 즉, 사용자가 동일한 제스처의 터치 입력을 제공하더라도, 터치 입력의 입력 방식에 따라서 서로 다른 출력 모드가 설정될 수 있기 때문에, 전자 장치(101)는 다른 실행 결과를 출력할 수 있다. 사용자의 터치 입력에 대응하는 실행 결과는 입출력 인터페이스(140) 또는 디스플레이(150) 등으로 출력될 수 있다.According to one embodiment, the touch input processing module 170 can set an output mode corresponding to an input method of a touch input, e.g., a touch drawing input, provided by a user. When the output mode is changed, for example, even if the electronic device 101 receives the touch input of the user of the same drawing type, the content of the touch input may be processed and output. For example, when the user provides the touch input of the first input method, the touch input of the user can be processed in the first output mode. In this case, the first execution result can be output. On the other hand, if the user provides the touch input of the second input method, the touch input of the user can be processed in the second output mode. In this case, the second execution result can be output. That is, even if the user provides the touch input of the same gesture, since different output modes can be set according to the input method of the touch input, the electronic device 101 can output another execution result. The execution result corresponding to the touch input of the user may be output to the input / output interface 140 or the display 150 and the like.

도 2는 본 발명의 한 실시예에 따른 전자 장치(101)의 입력 방법을 나타내는 흐름도이다.2 is a flow chart showing an input method of the electronic device 101 according to an embodiment of the present invention.

한 실시 예에 따르면, 전자 장치(101)는 201 동작에서 어플리케이션을 실행시킬 수 있다. 해당 어플리케이션을 통하여 작업을 수행하기 위해서는 사용자의 입력, 예컨대 터치 스크린을 통한 터치 입력을 수신할 수 있어야 한다. 전자 장치(101)는 203 동작에서 사용자 설정 또는 실행되고 있는 어플리케이션에 의해 특정되는 제 1 입력 모드를 설정할 수 있다.According to one embodiment, the electronic device 101 may execute an application at 201 operation. In order to perform an operation through the application, a user must be able to receive an input, for example, a touch input through a touch screen. The electronic device 101 can set a first input mode that is specified by an application being set up or executed in operation 203. [

한 실시 예에 따르면, 전자 장치(101)는 205 동작에서 모드 전환 여부를 판단할 수 있다. 모드 전환은 사용자의 입력 또는 설정에 의하여 이루어질 수 있다. 모드 전환이 없는 경우에는 207 동작과 같이 제 1 입력 모드에 대응하는 제 1 입력 방식으로 사용자로부터 터치 입력을 수신할 수 있다. 반면, 모드 전환이 있는 경우에는 209 동작과 같이 제 2 입력 모드로 모드를 전환시킬 수 있다. 이러한 모드 전환은 제 1 입력 모드에서 사용자 입력이 이루어진 이후에 이루어질 수도 있다. 그리고, 전자 장치(101)는 211 동작에서 제 2 입력 모드에 대응하는 제 2 입력 방식으로 사용자로부터 터치 입력을 수신할 수 있다. 한 실시 예에 따르면, 상기 제 2 입력 모드로의 전환은, 제 2 입력 방식의 터치 입력이 감지되는 경우 이루어질 수 있다. 즉, 전자 장치(101)는 제 1 입력 모드를 제공하다가 사용자로부터 제 2 입력 방식의 터치 입력을 수신하는 경우, 입력 모드를 제 2 입력 모드로 전환시키고 전환된 제 2 입력 모드에서 상기 제 2 입력 방식의 터치 입력을 처리할 수 있다.According to one embodiment, the electronic device 101 may determine whether the mode is switched in operation 205. [ Mode switching can be done by user's input or setting. If there is no mode change, the touch input can be received from the user in the first input mode corresponding to the first input mode as in the operation 207. [ On the other hand, when there is a mode change, the mode can be switched to the second input mode as in the operation 209. [ This mode change may be made after the user input is made in the first input mode. The electronic device 101 may then receive a touch input from a user in a second input mode corresponding to the second input mode at operation 211. [ According to one embodiment, the switching to the second input mode may be performed when the touch input of the second input method is detected. That is, when the electronic device 101 provides the first input mode and receives the touch input of the second input method from the user, the electronic device 101 switches the input mode to the second input mode and, in the switched second input mode, Type touch input can be processed.

한 실시 예에 따르면, 전자 장치(101)는 213 동작에서 설정된 입력 모드에 기초하여 수신하는 사용자의 터치 입력을 처리하고, 해당 터치 입력의 처리 결과를 표시할 수 있다. 사용자가 동일한 제스처의 터치 입력을 제공하더라도, 터치 입력이 제 1 또는 제 2 입력 방식인지에 따라서 다른 실행 결과가 생성될 수 있다. 전자 장치(101)는 디스플레이, 스피커, 진동 등을 이용하여 시각, 청각, 촉각적인 표시 방법 중 적어도 하나로 상기 실행 결과를 출력할 수 있다.According to one embodiment, the electronic device 101 can process the touch input of the user to be received based on the input mode set at operation 213, and display the processing result of the touch input. Even if the user provides the touch input of the same gesture, another execution result may be generated depending on whether the touch input is the first or the second input method. The electronic device 101 can output the execution result to at least one of visual, auditory, and tactile display methods using a display, a speaker, and a vibration.

도 3은 본 발명의 한 실시 예에 따른 전자 장치(101)의 입력 방법의 한 예시로써, 다중 언어(multi-lingual) 입력 방법을 나타내는 흐름도이다.3 is a flow diagram illustrating a multi-lingual input method as an example of an input method of an electronic device 101 according to an embodiment of the present invention.

한 실시 예에 따르면, 전자 장치(101)는 301 동작에서 어플리케이션을 실행할 수 있다. 예컨대, 실행되는 어플리케이션은 터치 스크린에 가상 키보드를 출력하고, 상기 가상 키보드에 대한 터치 입력을 통해 텍스트를 수신하는 작업을 수행할 수 있다. 전자 장치(101)는 303 동작에서 사용자 설정 또는 실행되고 있는 어플리케이션 특정에 의하여, 출력되는 가상 키보드를 제 1 언어 입력 모드로 설정할 수 있다. According to one embodiment, the electronic device 101 may execute an application at 301 operation. For example, an executed application can perform a task of outputting a virtual keyboard to a touch screen and receiving text via a touch input to the virtual keyboard. The electronic device 101 can set the virtual keyboard to be output in the first language input mode by the application specification being executed or being executed in operation 303. [

한 실시 예에 따르면, 전자 장치(101)는 305 동작에서 모드 전환 여부를 판단할 수 있다. 모드 전환은 사용자의 입력 또는 설정에 의하여 이루어질 수 있다. 모드 전환이 없는 경우에는 307 동작과 같이 제 1 언어 입력 모드에 대응하는 제 1 입력 방식으로, 상기 가상 키보드를 통해 터치 입력을 수신할 수 있다. 즉, 전자 장치(101)는 제 1 언어로 텍스트를 수신할 수 있고, 309 동작에서 제 1 언어에 대한 인식 알고리즘을 사용하여 입력된 텍스트를 분석할 수 있다. 상기 인식 알고리즘이란, 데이터베이스를 기반으로 하여 수신되는 문자로부터 완성될 수 있는 단어를 추측하는 알고리즘일 수 있다. 뿐만 아니라, 데이터베이스를 기반으로 하여 수신되는 단어로부터 완성될 수 있는 문장을 추측할 수 있는 알고리즘일 수 있다. 상기 데이터베이스는 네트워크를 통하여 서버로부터 공유할 수 있다.According to one embodiment, the electronic device 101 may determine whether to switch modes at operation 305. [ Mode switching can be done by user's input or setting. If there is no mode change, the touch input can be received through the virtual keyboard in the first input mode corresponding to the first language input mode as in operation 307. [ That is, the electronic device 101 may receive the text in the first language and may analyze the entered text using the recognition algorithm for the first language in operation 309. [ The recognition algorithm may be an algorithm for guessing words that can be completed from characters received based on a database. In addition, it can be an algorithm that can guess a sentence that can be completed from a received word based on a database. The database may be shared from a server via a network.

반면, 모드 전환이 있는 경우에는 311 동작과 같이 가상 키보드를 제 2 언어 입력 모드로 전환하여 설정할 수 있다. 이러한 모드 전환은 제 1 언어 입력 모드에서 사용자 입력이 이루어진 이후에 이루어질 수도 있다. 전자 장치(101)는 313 동작에서 제 2 언어 입력 모드에 대응하는 제 2 입력 방식으로, 상기 가상 키보드를 통해 터치 입력을 수신할 수 있다. 즉, 전자 장치(101)는 제 2 언어로 텍스트를 수신할 수 있고, 315 동작에서 제 2 언어에 대한 인식 알고리즘을 사용하여 입력된 텍스트를 분석할 수 있다. 상기 인식 알고리즘이란, 데이터베이스를 기반으로 하여 수신되는 문자로부터 완성될 수 있는 단어를 추측하는 알고리즘일 수 있다. 뿐만 아니라, 데이터베이스를 기반으로 하여 수신되는 단어로부터 완성될 수 있는 문장을 추측할 수 있는 알고리즘일 수 있다. 상기 데이터베이스는 네트워크를 통하여 서버로부터 공유할 수 있다.On the other hand, if there is a mode change, the virtual keyboard can be set by switching to the second language input mode as in the 311 operation. This mode change may be made after the user input is made in the first language input mode. The electronic device 101 may receive the touch input via the virtual keyboard in a second input mode corresponding to the second language input mode in operation 313. [ That is, the electronic device 101 may receive the text in the second language and may analyze the entered text using the recognition algorithm for the second language at 315 operation. The recognition algorithm may be an algorithm for guessing words that can be completed from characters received based on a database. In addition, it can be an algorithm that can guess a sentence that can be completed from a received word based on a database. The database may be shared from a server via a network.

한 실시 예에 따라, 전자 장치(101)는 317 동작에서 상기 제 2 언어를 기반으로 하는 인식 알고리즘을 사용하여 입력된 문자로부터 단어 후보군(word candidate)를 추출할 수 있다. 단어 후보군은 입력된 문자에 에러를 정정하거나 미완성인 단어를 완성시키는 방식으로 추출될 수 있다. 한 실시 예에 따란, 이러한 단어 후보군은 서버에 저장된 데이터베이스로부터 추출될 수 있다. 전자 장치(101)는 319 동작에서 추출된 단어 후보군을 사용자가 확인할 수 있도록 출력할 수 있고, 321 동작에서 출력되는 단어 후보군 중에서 어느 하나를 선택하는 입력을 사용자로부터 수신할 수 있다. 한편, 추출된 단어 후보군이 없는 경우에는 이를 표시하지 않을 수 있다. 본 실시 예에서는 제 2 언어 입력 모드에서 단어 후보군을 추출하는 동작을 예로써 설명하였으나 이에 한정되는 것은 아니고, 제 1 언어 입력 모드에서도 인식 알고리즘에 따라 단어 후보군을 추출할 수 있음을 당업자라면 잘 알 수 있을 것이다.According to one embodiment, the electronic device 101 may extract word candidates from input characters using a recognition algorithm based on the second language at 317 operation. The word candidates can be extracted by correcting the error in the input character or completing the incomplete word. According to one embodiment, these word candidates can be extracted from the database stored in the server. The electronic device 101 can output the word candidate group extracted in operation 319 so that the user can confirm it and can receive an input from the user to select any one of the word candidate groups output in operation 321. [ On the other hand, if there is no extracted word candidate group, it may not be displayed. Although it has been described in the present embodiment that the word candidate group is extracted in the second language input mode, the present invention is not limited thereto. It is well known to those skilled in the art that word candidates can be extracted according to the recognition algorithm even in the first language input mode There will be.

한 실시 예에 따르면, 상기 제 2 언어 입력 모드로의 전환은, 제 2 입력 방식의 터치 입력이 감지되는 경우 이루어질 수 있다. 즉, 전자 장치(101)는 제 1 언어 입력 모드를 제공하다가 사용자로부터 제 2 입력 방식의 터치 입력을 수신하는 경우, 언어 입력 모드를 제 2 언어 입력 모드로 전환시키고 전환된 제 2 언어 입력 모드에서 상기 제 2 입력 방식의 터치 입력을 처리할 수 있다.According to an embodiment, the switch to the second language input mode may be performed when a touch input of the second input method is detected. That is, when the electronic device 101 provides the first language input mode and receives the touch input of the second input method from the user, the electronic device 101 switches the language input mode to the second language input mode, The touch input of the second input method can be processed.

한 실시 예에 따르면, 전자 장치(101)는 323 동작에서 수신한 터치 입력에 대응하는 출력 텍스트를 표시할 수 있다. 예컨대, 해당 모드에서 사용자 터치 입력에 기반하여 제 1 언어의 출력 텍스트를 표시할 수도 있고, 제 2 언어의 출력 텍스트를 표시할 수도 있다. 출력 텍스트는 추출된 단어 후보군 중 선택되는 단어 후보군을 포함할 수 있다.According to one embodiment, the electronic device 101 may display the output text corresponding to the touch input received in operation 323. For example, the output text of the first language may be displayed based on the user touch input in the corresponding mode, or the output text of the second language may be displayed. The output text may include a word candidate group selected from the extracted word candidate groups.

도 4는 본 발명의 한 실시 예에 따른 전자 장치(101)의 입력 방법의 한 예시로써, 다중 언어 입력 방법을 나타내는 화면 예시도이다.FIG. 4 is a diagram illustrating an exemplary input method of the electronic device 101 according to an exemplary embodiment of the present invention.

예컨대 (a)에 도시된 바와 같이, 전자 장치(101)는 디스플레이(150)를 통하여 제 1 언어(예컨대, 영어)를 기반으로 하는 가상 키보드(411)를 출력할 수 있다. 상기 디스플레이(150)는 터치 스크린을 포함할 수 있다. 전자 장치(101)는 상기 가상 키보드(411)를 통하여 제 1 입력 방식의 터치 입력, 예컨대 접촉 입력(431)을 수신할 수 있다. 전자 장치(101)는 이러한 접촉 입력을 통하여 제 1 언어의 문자를 입력 받고 이를 표시 영역(421)에 표시할 수 있다.For example, as shown in (a), the electronic device 101 may output a virtual keyboard 411 based on a first language (e.g., English) via the display 150. [ The display 150 may include a touch screen. The electronic device 101 can receive a first input type touch input, for example, a touch input 431, through the virtual keyboard 411. [ The electronic device 101 can input characters of the first language through the touch input and display the characters in the display area 421.

그리고, (b)에 도시된 바와 같이, 전자 장치(101)의 입력 모드가 제 2 언어 입력 모드로 전환 될 수 있다. 제 2 언어 입력 모드로의 전환은 소정의 제스처 입력(433)에 의해 이루어질 수도 있고 설정에 의해 이루어질 수도 있다. 예컨대, 제 1 입력 방식의 터치 입력이 감지되다가 연속적으로 제 2 입력 방식의 사용자 터치 입력이 감지되면 제 2 언어 입력 모드로 전환될 수 있다. 제 2 언어 입력 모드에서는, 전자 장치(101)는 디스플레이(150)를 통해 제 2 언어(예컨대, 러시아어)를 기반으로 하는 가상 키보드(413)를 출력할 수 있다.Then, as shown in (b), the input mode of the electronic device 101 can be switched to the second language input mode. The switching to the second language input mode may be by a predetermined gesture input 433 or may be by setting. For example, when the touch input of the first input method is detected and the user input of the second input method is continuously detected, the second language input mode can be switched. In the second language input mode, the electronic device 101 may output a virtual keyboard 413 based on a second language (e.g., Russian) via the display 150. [

(c)에 도시된 바와 같이, 전자 장치(101)는 상기 가상 키보드(413)를 통하여 제 2 입력 방식의 터치 입력, 예컨대 근접 입력(435)을 수신할 수 있다. 전자 장치(101)는 이러한 근접 입력을 통하여 제 2 언어의 문자를 입력 받고 이를 표시 영역(421)에 표시할 수 있다. 그리고, 전자 장치(101)는 수신한 문자를 인식 알고리즘으로 분석하여 단어 후보군을 추출하고, 추출된 단어 후보군을 추가 표시 영역(415)에 표시할 수 있다. 추가 표시 영역(415)에 표시된 단어 후보군 중에서 어느 하나를 선택하는 입력(437)을 제공함으로써, 선택된 단어 후보군을 표시 영역(421)에 표시할 수 있다. 상기 표시된 단어 후보군 중에서 어느 하나를 선택하는 것은, 선택하고자 하는 단어 후보군에 대한 접촉 입력을 통하여 이루어질 수 있다.the electronic device 101 may receive the touch input of the second input method, for example, the proximity input 435, through the virtual keyboard 413, as shown in FIG. The electronic device 101 can receive the characters of the second language through the proximity input and display the characters in the display area 421. Then, the electronic device 101 can extract the word candidate group by analyzing the received character by the recognition algorithm, and display the extracted word candidate group in the additional display area 415. [ The selected word candidate group can be displayed in the display area 421 by providing the input 437 for selecting any one of the word candidate groups displayed in the additional display area 415. [ The selection of one of the displayed word candidate groups may be performed through contact input to the word candidate group to be selected.

도 5는 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법을 나타내는 흐름도이다.5 is a flowchart showing an input method of the electronic device 101 according to another embodiment of the present invention.

한 실시 예에 따르면, 전자 장치(101)는 501 동작에서 어플리케이션을 실행할 수 있다. 해당 어플리케이션을 통하여 작업을 수행하기 위해서는 사용자의 입력, 예컨대 터치 스크린을 통한 터치 입력을 수신할 수 있어야 한다. 전자 장치(101)는 503 동작에서 터치 스크린을 통해 터치 입력을 수신할 수 있다. 그리고, 505 동작에서 상기 수신한 터치 입력의 방식(modality)을 판단할 수 있다.According to one embodiment, the electronic device 101 is capable of running applications in 501 operations. In order to perform an operation through the application, a user must be able to receive an input, for example, a touch input through a touch screen. The electronic device 101 may receive the touch input via the touch screen at 503 operation. In step 505, it is possible to determine the modality of the received touch input.

한 실시 예에 따르면, 전자 장치(101)는 수신한 터치 입력의 방식이 제 1 입력 방식이면 507 동작과 같이 출력 모드를 제 1 출력 모드(mode)로 설정할 수 있다. 반면, 수신한 터치 입력의 방식이 제 2 입력 방식이면 509 동작과 같이 출력 모드를 제 2 출력 모드로 설정할 수 있다. 터치 입력의 입력 방식에 따라서 전자 장치(101)의 출력 모드를 설정 한 후, 전자 장치(101)는 511 동작에서 설정된 출력 모드에 기초하여 상기 터치 입력에 대응하는 출력을 실행할 수 있다. 예컨대, 사용자가 동일한 제스처의 터치 입력을 제공하더라도, 터치 입력이 제 1 또는 제 2 입력 방식인지에 따라서 다른 실행 결과가 생성될 수 있다. 전자 장치(101)는 디스플레이, 스피커, 진동 등을 이용하여 시각, 청각, 촉각적인 표시 방법 중 적어도 하나로 상기 실행 결과를 출력할 수 있다.According to one embodiment, when the received touch input method is the first input method, the electronic device 101 can set the output mode to the first output mode (mode) as in the operation of the step 507. On the other hand, if the received touch input method is the second input method, the output mode can be set to the second output mode as in the operation of the step 509. After setting the output mode of the electronic device 101 according to the input method of the touch input, the electronic device 101 can execute the output corresponding to the touch input based on the output mode set in operation 511. [ For example, even if the user provides the touch input of the same gesture, another execution result may be generated depending on whether the touch input is the first or the second input method. The electronic device 101 can output the execution result to at least one of visual, auditory, and tactile display methods using a display, a speaker, and a vibration.

도 6은 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법의 한 예시를 나타내는 화면 예시도이다.6 is a diagram illustrating an example of a screen of an input method of the electronic device 101 according to another embodiment of the present invention.

전자 장치(101)는 디스플레이(150)를 통하여 소정 언어(예컨대, 영어)를 기반으로 하는 가상 키보드(611)를 출력할 수 있다. 상기 디스플레이(150)는 터치 스크린을 포함할 수 있다. (a)를 참조하면, 전자 장치(101)는 상기 가상 키보드(611)를 통하여 제 1 입력 방식의 터치 입력, 예컨대 접촉 입력(631)을 수신할 수 있다. 전자 장치(101)는 이러한 접촉 입력(631)을 통하여 소정 언어의 문자를 입력 받고 상기 제 1 입력 방식에 대응하는 표시 형식, 예컨대 노멀(nomal) 폰트 형식으로 이를 표시 영역(621)에 표시할 수 있다. (b)를 참조하면, 전자 장치(101)는 상기 가상 키보드(611)를 통하여 제 2 입력 방식의 터치 입력, 예컨대 근접 입력(633)을 수신할 수 있다. 전자 장치(101)는 이러한 근접 입력(633)을 통하여 소정 언어의 문자를 입력 받고 상기 제 2 입력 방식에 대응하는 표시 형식, 예컨대 볼드(bold) 폰트 형식으로 이를 표시 영역(621)에 표시할 수 있다.The electronic device 101 may output a virtual keyboard 611 based on a predetermined language (e.g., English) through the display 150. [ The display 150 may include a touch screen. (a), the electronic device 101 can receive a first input type touch input, for example, a touch input 631, through the virtual keyboard 611. The electronic device 101 receives characters of a predetermined language through the touch input 631 and displays the characters in the display area 621 in a display format corresponding to the first input method, have. (b), the electronic device 101 can receive a touch input of the second input method, for example, the proximity input 633 through the virtual keyboard 611. The electronic device 101 receives characters of a predetermined language through the proximity input 633 and displays the characters in the display area 621 in a display format such as a bold font format corresponding to the second input mode have.

도 7은 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법의 다른 예시를 나타내는 화면 예시도이다.7 is a diagram illustrating an example of a screen showing another example of an input method of the electronic device 101 according to another embodiment of the present invention.

전자 장치(101)는 터치 입력의 드로잉을 인식할 수 있는 상태, 예컨대 메모 어플리케이션 실행 모드 또는 디스플레이(150)를 통하여 상기 터치 입력의 드로잉을 인식하는 모드에서, 예컨대 터치 펜을 이용하여 터치 입력을 수신할 수 있다. (a)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통하여 상기 터치 펜에 의한 제 1 입력 방식의 터치 입력, 예컨대 접촉 입력(701)을 수신할 수 있고, 상기 접촉 입력(701)에 따른 드로잉에 대응하여 드로잉 출력(711)을 디스플레이(150)에 표시할 수 있다.The electronic device 101 receives a touch input using a touch pen, for example, in a mode capable of recognizing the drawing of the touch input, for example, in a memo application execution mode or a mode for recognizing the drawing of the touch input through the display 150 can do. (a), the electronic device 101 can receive a first input type touch input, e.g., a touch input 701, by the touch pen via the display 150, and the touch input 701, The drawing output 711 can be displayed on the display 150 corresponding to the drawing according to the drawing.

그리고 (b)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통하여 상기 터치 펜에 의한 제 2 입력 방식의 터치 입력, 예컨대 근접 입력(703)을 수신할 수 있고, 상기 근접 입력(703)에 따른 드로잉에 대응하여 그림자 표시(713) 등과 같은 설정된 기능이 디스플레이(150)를 통해 출력될 수 있다.Referring to (b), the electronic device 101 can receive a touch input of the second input method, such as the proximity input 703, by the touch pen via the display 150, and the proximity input 703 A set function such as a shadow display 713 and the like may be output through the display 150 in correspondence with the drawing in accordance with the drawing.

그리고 (c)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통하여 제 3 입력 방식의 터치 입력을 수신할 수 있다. 제 3 입력 방식의 터치 입력은 손가락에 의한 터치 입력(705)(예컨대, 접촉 입력 또는 근접 입력)과 터치 펜에 의한 터치 입력(707)(예컨대, 접촉 입력 또는 근접 입력)을 동시에 수신하는 방식일 수 있다. 예컨대, 디스플레이(150) 상에 손가락에 의한 터치 입력(705)이 제공되고, 동시에 터치 펜에 의한 드로잉 입력(707)이 제공되는 경우, 상기 터치 펜이 제공하는 드로잉 입력(707)에 따라 지움(eraser effect)(715) 기능이 실행될 수 있다.Referring to (c), the electronic device 101 can receive the touch input of the third input method through the display 150. [ The touch input of the third input method is a method of simultaneously receiving a touch input 705 (e.g., touch input or proximity input) by the finger and a touch input 707 (e.g., touch input or proximity input) . For example, if a touch input 705 by a finger is provided on the display 150 and a drawing input 707 by the touch pen is provided at the same time, eraser effect 715 may be executed.

도 8은 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법의 한 예시를 나타내는 흐름도이다.8 is a flow chart illustrating an example of an input method of an electronic device 101 according to another embodiment of the present invention.

한 실시 예에 따르면, 전자 장치(101)는 801 동작에서 어플리케이션을 실행할 수 있다. 상기 어플리케이션 실행 중에는 전자 장치(101)가 터치 입력의 드로잉을 인식할 수 있다. 전자 장치(101)는 803 동작에서 터치 스크린을 통해 터치 드로잉 입력을 수신할 수 있다. 한 실시 예로써, 직접 터치 방식 또는 근접 터치 방식으로 상기 터치 드로잉 입력을 수신할 수 있다. 그리고, 805 동작에서 상기 수신한 터치 드로잉 입력의 방식(modality)을 판단할 수 있다.According to one embodiment, the electronic device 101 may execute an application in 801 operation. During execution of the application, the electronic device 101 can recognize the drawing of the touch input. The electronic device 101 may receive the touch drawing input via the touch screen in operation 803. In one embodiment, the touch drawing input may be received by a direct touch method or a proximity touch method. In operation 805, it is possible to determine the modality of the received touch drawing input.

한 실시 예에 따르면, 전자 장치(101)는 수신한 터치 드로잉 입력의 방식이 제 1 입력 방식이면 제 1 출력 모드로 설정될 수 있다. 예컨대, 전자 장치(101)는 807 동작과 같이 상기 터치 드로잉 입력에 대응하는 드로잉 출력을 표시할 수 있다.According to one embodiment, the electronic device 101 may be set to the first output mode if the received touch drawing input scheme is the first input scheme. For example, electronic device 101 may display a drawing output corresponding to the touch drawing input, such as 807 operation.

반면, 전자 장치(101)는 수신한 터치 입력의 방식이 제 2 입력 방식이면 제 2 출력 모드로 설정될 수 있다. 예컨대, 전자 장치(101)는 811 동작과 같이 수신한 터치 드로잉 입력을 형태 인식 알고리즘 또는 제스처 인식 알고리즘 중 적어도 하나의 알고리즘을 사용하여 분석할 수 있다. 예컨대, 형태 인식 알고리즘은 수신한 터치 드로잉 입력의 드로잉을 분석하여 소정 형태로 선형화(linearization)할 수 있는 알고리즘일 수 있다. 그리고 제스처 인식 알고리즘은 수신한 터치 드로잉 입력의 제스처를 분석하는 알고리즘일 수 있다. 전자 장치(101)는 813 동작에서, 형태 인식 알고리즘을 통해 획득한 선형화된 드로잉 표시를 출력하거나, 제스처 인식 알고리즘을 통해 획득한 제스처 입력에 대응하는 명령을 실행할 수 있다. 예컨대, 사용자가 제 2 입력 방식으로 동그라미 모양의 드로잉 입력을 제공한 경우, 전자 장치(101)는 선형화된 원을 출력하거나, 동그라미 제스처에 대응하는 명령에 대응하는 기능, 예컨대 복사 기능을 실행할 수 있다. On the other hand, if the received touch input method is the second input method, the electronic device 101 can be set to the second output mode. For example, the electronic device 101 may analyze the received touch drawing input, such as 811 operation, using at least one of a shape recognition algorithm or a gesture recognition algorithm. For example, the shape recognition algorithm may be an algorithm that can analyze the drawing of the received touch drawing input and linearize it to a predetermined shape. The gesture recognition algorithm may be an algorithm for analyzing the gesture of the received touch drawing input. The electronic device 101 may, in 813 operation, output a linearized drawing display obtained via a shape recognition algorithm or execute an instruction corresponding to the gesture input obtained via the gesture recognition algorithm. For example, if the user provides a drawing input in the form of a circle in the second input scheme, the electronic device 101 may output a linearized circle or perform a function corresponding to the instruction corresponding to the circle gesture, e.g., a copy function .

도 9는 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법의 한 예시를 나타내는 화면 예시도이다.FIG. 9 is a diagram illustrating an example of an input method of the electronic device 101 according to another embodiment of the present invention.

전자 장치(101)는 터치 입력의 드로잉을 인식할 수 있는 상태, 예컨대 메모 어플리케이션 실행 모드 또는 디스플레이(150)를 통하여 상기 터치 입력의 드로잉을 인식하는 상태에서, 예컨대 터치 펜을 이용하여 터치 드로잉 입력을 수신할 수 있다.The electronic device 101 is capable of recognizing the drawing of the touch input, for example, in a memo application execution mode or in a state of recognizing the drawing of the touch input through the display 150, .

(a) 및 (b)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통해 상기 터치 펜에 의한 제 1 입력 방식의 터치 드로잉 입력, 예컨대 접촉 입력 방식의 터치 드로잉 입력을 수신할 수 있다. 접촉 입력이 감지되는 경우, 전자 장치(101)는 출력 모드를 제 1 출력 모드로 설정하고, 상기 수신하는 터치 드로잉 입력(901)에 대응하는 드로잉 출력(911)을 디스플레이(150)로 표시할 수 있다. (a) and (b), the electronic device 101 may receive a touch input input of the first input method, such as a touch input input method, using the touch pen via the display 150 . When a touch input is sensed, the electronic device 101 sets the output mode to the first output mode and displays the drawing output 911 corresponding to the touching drawing input 901 to the display 150 have.

반면, (c) 및 (d)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통해 상기 터치 펜에 의한 제 2 입력 방식의 터치 드로잉 입력, 예컨대 근접 입력 방식의 터치 드로잉 입력을 수신할 수 있다. 근접 입력이 감지되는 경우, 전자 장치(101)는 출력 모드를 제 2 출력 모드로 설정하고, 상기 수신하는 터치 드로잉 입력(901)을 형태 인식 알고리즘을 통해 선형화하여, 선형화된 도형(913)을 디스플레이(150)로 표시할 수 있다.On the other hand, referring to (c) and (d), the electronic device 101 receives the second input type touch drawing input, for example, the proximity input touch drawing input, . When the proximity input is detected, the electronic device 101 sets the output mode to the second output mode, linearizes the received touch drawing input 901 through the shape recognition algorithm, and displays the linearized figure 913 on the display (150).

도 10은 본 발명의 다른 실시 예에 따른 전자 장치(101)의 입력 방법의 다른 예시를 나타내는 화면 예시도이다.FIG. 10 is a diagram showing a screen example showing another example of an input method of the electronic device 101 according to another embodiment of the present invention.

(a) 및 (b)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통해 상기 터치 펜에 의한 제 1 입력 방식의 터치 드로잉 입력, 예컨대 접촉 입력 방식의 터치 드로잉 입력을 수신할 수 있다. 접촉 입력이 감지되는 경우, 전자 장치(101)는 출력 모드를 제 1 출력 모드로 설정하고, 상기 수신하는 터치 드로잉 입력(1001)에 대응하는 드로잉 출력(1011)을 디스플레이(150)로 표시할 수 있다. (a) and (b), the electronic device 101 may receive a touch input input of the first input method, such as a touch input input method, using the touch pen via the display 150 . The electronic device 101 sets the output mode to the first output mode and displays the drawing output 1011 corresponding to the receiving touch drawing input 1001 on the display 150 have.

반면, (c) 및 (d)를 참조하면, 전자 장치(101)는 디스플레이(150)를 통해 상기 터치 펜에 의한 제 2 입력 방식의 터치 드로잉 입력, 예컨대 근접 입력 방식의 터치 드로잉 입력을 수신할 수 있다. 근접 입력이 감지되는 경우, 전자 장치(101)는 출력 모드를 제 2 출력 모드로 설정하고, 상기 수신하는 터치 드로잉 입력(1003 또는 1005)을 제스처 인식 알고리즘을 통해 분석하여, 획득한 제스처 입력에 대응하는 명령을 실행할 수 있다. 예컨대, (c)에 도시된 바와 같은 터치 드로잉 입력(1003)은 실행취소(undo)를 지시하는 제스처 입력일 수 있고, (d)에 도시된 바와 같은 터치 드로잉 입력(1005)은 되살리기(redo)를 지시하는 제스처 입력일 수 있다.On the other hand, referring to (c) and (d), the electronic device 101 receives the second input type touch drawing input, for example, the proximity input touch drawing input, . When proximity input is detected, the electronic device 101 sets the output mode to the second output mode, analyzes the received touch drawing input 1003 or 1005 through a gesture recognition algorithm, and responds to the acquired gesture input Command can be executed. For example, the touch drawing input 1003 as shown in (c) can be a gesture input that indicates undo, and the touch drawing input 1005 as shown in (d) It can be a gesture input to indicate.

도 11은 본 발명의 또 다른 실시 예에 따른 전자 장치(101)의 화면 방향 회전 잠금 및 잠금 해제 방법을 나타내는 흐름도이다.11 is a flowchart showing a method of locking and unlocking rotation of the electronic device 101 in the screen direction according to another embodiment of the present invention.

한 실시 예에 따르면, 전자 장치(101)는 1101 동작과 같이 어플리케이션을 실행할 수 있다. 이때, 어플리케이션 실행은 필수적인 동작은 아니고, 전자 장치(101)가 방향에 따라 랜드스케이프(landscape) 모드 또는 포트레이트(portrait) 모드로 컨텐츠를 표시하는 상태이면 된다. 전자 장치(101)는 터치 스크린을 통하여 터치 입력을 수신할 수 있고, 상기 컨텐츠를 표시하는 출력 화면을 제공할 수 있다.According to one embodiment, the electronic device 101 is capable of executing an application, such as 1101 operations. At this time, application execution is not an essential operation, but may be a state in which the electronic device 101 displays content in a landscape mode or a portrait mode according to a direction. The electronic device 101 can receive a touch input through a touch screen, and can provide an output screen displaying the content.

한 실시 예에 따르면, 전자 장치(101)는 1103 동작과 같이 터치 스크린을 통해 소정 방식(modality), 예컨대 근접 터치 방식의 터치 입력이 감지되는 경우, 1105 동작과 같이 화면 방향 회전 잠금을 설정할 수 있다. 화면 방향 회전 잠금이 설정되면, 전자 장치가 세로 방향으로 놓여 있는 상태에서 가로 방향으로 회전하더라도, 디스플레이(150)에서 출력되는 컨텐츠는 계속하여 포트레이트 모드로 출력될 수 있다. 한 실시 예에 따르면, 이러한 화면 방향 회전 잠금은 상기 터치 입력이 감지되는 동안 계속하여 유지될 수 있다.According to one embodiment, when the touch input of a predetermined modality such as the proximity touch is detected through the touch screen as in the operation 1103, the electronic device 101 can set the screen direction rotation lock like the operation 1105 . When the screen rotation lock is set, the content output from the display 150 can be continuously output to the portrait mode, even if the electronic device rotates in the horizontal direction with the vertical orientation. According to one embodiment, such screen rotation lock may be maintained while the touch input is sensed.

한 실시 예에 따르면, 전자 장치(101)는 1107 동작에서 감지되던 터치 입력이 소멸되거나, 감지되던 터치 입력과 동일 방식의 추가적인 터치 입력, 즉 추가적인 근접 터치 입력이 감지되면, 1109 동작과 같이 화면 방향 회전 잠금을 해제할 수 있다. 추가적인 근접 터치 입력이 감지되어 화면 방향 회전 잠금을 해제 하는 경우는, 상기 기존에 감지되던 근접 터치 입력과 상기 추가적으로 감지되는 근접 터치 입력이 동시에 감지되는 경우에 발생할 수 있다.According to one embodiment, when the touch input sensed in the operation 1107 is extinguished or an additional touch input of the same type as the sensed touch input, i.e., an additional proximity touch input is detected, the electronic device 101 displays the screen direction The rotation lock can be released. In the case where an additional proximity touch input is detected and the screen direction rotation lock is released, this can occur when the proximity touch input sensed previously and the proximity touch input sensed at the same time are detected at the same time.

도 12는 본 발명의 또 다른 실시 예에 따른 전자 장치(101)의 화면 방향 회전 잠금 및 잠금 해제 방법을 나타내는 화면 예시도이다.FIG. 12 is a diagram illustrating a screen illustrating a method of locking and unlocking rotation of the electronic device 101 in the screen direction according to another embodiment of the present invention.

(a) 및 (b) 에 도시된 바와 같이 전자 장치(101)의 디스플레이를 통해 근접 터치 방식의 터치 입력이 제공되면, 해당 터치 입력이 유지되는 동안 화면 방향 회전 잠금이 설정될 수 있다. 화면 방향 회전 잠금이 설정되면, 전자 장치가 세로 방향으로 놓여 있는 상태에서 가로 방향으로 회전하더라도, 디스플레이에서 출력되는 컨텐츠는 계속하여 포트레이트 모드로 출력될 수 있다. 반대의 경우도 동일하다.if a touch input of the proximity touch type is provided through the display of the electronic device 101 as shown in FIGS. 6A and 6B, the screen direction rotation lock can be set while the corresponding touch input is maintained. If the screen rotation lock is set, even if the electronic device rotates in the horizontal direction while the device is placed in the vertical direction, the content output from the display can be continuously output to the portrait mode. The opposite is also the case.

이후 (c)에 도시된 바와 같이 전자 장치(101)의 감지되던 근접 터치 방식의 터치 입력이 소멸되면, 설정된 화면 방향 회전 잠금이 해제되고 포트레이트 모드로 출력되던 컨텐츠는 랜드스케이프 모드로 출력될 수 있다.As shown in (c), when the touch input of the proximity-touch method sensed by the electronic device 101 disappears, the set screen direction rotation lock is released and the content output in the portrait mode can be output in the landscape mode .

다른 실시예에 따르면, (d)에 도시된 바와 같이 디스플레이 상에 기존의 근접 터치 입력과 함께 추가적인 근접 터치 입력이 제공되는 경우, 설정된 화면 방향 회전 잠금이 해제되고 포트레이트 모드로 출력되던 컨텐츠는 랜드스케이프 모드로 출력될 수 있다. 본 실시 예는, 사용자가 양 손을 이용하여 입력을 제공하고자 하는 경우 입력에 편리하게 화면 모드를 전환시킬 수 있다는 장점이 있다.According to another embodiment, when an additional proximity touch input is provided along with a conventional proximity touch input on the display as shown in (d), the set screen direction rotation lock is released and the content that has been output in the portrait mode is displayed in the landscape Mode. The present embodiment is advantageous in that when the user desires to provide input using both hands, the screen mode can be conveniently switched to the input.

본 발명의 다양한 실시예에 사용된 용어 "모듈"은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명의 다양한 실시예에 따른 "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다. The term "module" as used in various embodiments of the present invention may mean a unit including, for example, one or a combination of two or more of hardware, software or firmware. A "module" may be interchangeably used with terms such as, for example, unit, logic, logical block, component or circuit. A "module" may be a minimum unit or a portion of an integrally constructed component. A "module" may be a minimum unit or a portion thereof that performs one or more functions. "Modules" may be implemented either mechanically or electronically. For example, a "module" in accordance with various embodiments of the present invention may be implemented as an application-specific integrated circuit (ASIC) chip, field-programmable gate arrays (FPGAs) And a programmable-logic device.

다양한 실시예에 따르면, 본 발명의 다양한 실시예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서(120))에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리(130)가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서(120)에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.According to various embodiments, at least a portion of a device (e.g., modules or functions thereof) or a method (e.g., operations) according to various embodiments of the present invention may be, for example, a computer readable And may be implemented with instructions stored on a computer-readable storage medium. The instructions, when executed by one or more processors (e.g., the processor 120), may cause the one or more processors to perform functions corresponding to the instructions. The computer readable storage medium may be, for example, the memory 130. [ At least some of the programming modules may be implemented (e.g., executed) by the processor 120, for example. At least some of the programming modules may include, for example, modules, programs, routines, sets of instructions or processes, etc. to perform one or more functions.

상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.The computer-readable recording medium includes a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, an optical recording medium such as a CD-ROM (Compact Disc Read Only Memory), a DVD (Digital Versatile Disc) A magneto-optical medium such as a floppy disk, and a program command such as a read only memory (ROM), a random access memory (RAM), a flash memory, Module) that is configured to store and perform the functions described herein. The program instructions may also include machine language code such as those generated by a compiler, as well as high-level language code that may be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the various embodiments of the present invention, and vice versa.

본 발명의 다양한 실시예에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명의 다양한 실시예에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.Modules or programming modules according to various embodiments of the present invention may include at least one or more of the elements described above, some of which may be omitted, or may further include other additional elements. Operations performed by modules, programming modules, or other components in accordance with various embodiments of the invention may be performed in a sequential, parallel, iterative, or heuristic manner. Also, some operations may be performed in a different order, omitted, or other operations may be added.

다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 미리 설정된 조건을 만족하는 이벤트의 발생을 모니터링하는 동작, 상기 미리 설정된 조건을 만족하는 상기 이벤트의 발생이 감지되면 다른 전자 장치를 선정하는 동작 및 어플리케이션의 작업 환경 정보를 생성하여 상기 선정된 다른 전자 장치로 전송하는 동작을 포함할 수 있다.According to various embodiments, there is provided a storage medium storing instructions which, when executed by at least one processor, cause the at least one processor to be configured to perform at least one operation, An operation of monitoring occurrence of an event that satisfies a preset condition, an operation of selecting another electronic device when the occurrence of the event satisfying the predetermined condition is detected, and an operation environment information of the application, To the device.

그리고 본 명세서와 도면에 개시된 본 발명의 실시예들은 본 발명의 실시예에 따른 의 기술 내용을 쉽게 설명하고 본 발명의 실시예의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 실시예의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 다양한 실시예의 범위는 여기에 개시된 실시예들 이외에도 본 발명의 다양한 실시예의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 다양한 실시예의 범위에 포함되는 것으로 해석되어야 한다.
It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are intended to provide further explanation of the invention as claimed. And the like. Accordingly, the scope of various embodiments of the present invention should be construed as being included in the scope of various embodiments of the present invention without departing from the scope of the present invention, all changes or modifications derived from the technical idea of various embodiments of the present invention .

Claims

An input method of an electronic device including a touch screen,
Receiving a first gesture having a locus through a direct touch to the touch screen;
Performing a first function of the electronic device corresponding to the first gesture;
Receiving a second gesture having the same trajectory as the first gesture through proximity touch to the touch screen; And
And executing a second function different from the first function of the electronic device corresponding to the first gesture.

The method according to claim 1,
The operation of executing the first function may include:
And providing a drawing output corresponding to a trajectory of the first gesture via the touch screen.

The method according to claim 1,
Wherein the operation of performing the second function comprises:
And linearizing the locus of the second gesture to output a linearized shape to the touch screen.

The method according to claim 1,
Wherein the operation of performing the second function comprises:
Recognizing the second gesture and executing a command corresponding to the recognized gesture.

The method according to claim 1,
Further comprising inputting an additional direct touch or proximity touch simultaneously with the input of the first or second gesture.

6. The method of claim 5,
Further comprising performing a third function different from the first and second functions based on the first or second gesture and the additional direct touch or proximity touch.

A touch screen which receives a first gesture having a trajectory through a direct touch and receives a second gesture having the same trajectory as the first gesture through a proximity touch; And
And a touch input processing module that executes a first function corresponding to the first gesture and executes a second function different from the first function corresponding to the second gesture.

8. The method of claim 7,
The touch input processing module includes:
An electronic device for providing a drawing output corresponding to a locus of the first gesture via the touch screen;

8. The method of claim 7,
The touch input processing module includes:
Analyzing the trajectory of the second gesture using a shape recognition algorithm, and linearizing the locus of the second gesture according to an analysis result and outputting the linearized shape to the touch screen.

8. The method of claim 7,
The touch input processing module includes:
Analyze the trajectory of the second gesture using a gesture recognition algorithm, recognize the second gesture according to an analysis result, and execute a command corresponding to the recognized gesture.

8. The method of claim 7,
The touch screen,
Further receiving an additional direct touch or proximity touch simultaneously with the first or second gesture input.

12. The method of claim 11,
The touch input processing module includes:
And performs a third function different from the first and second functions based on the first or second gesture and the additional direct touch or proximity touch.

A touch screen for receiving a touch input and providing an output screen; And
Locks the screen direction rotation function while the proximity touch input is detected through the touch screen and releases the lock of the screen direction rotation function when the detected proximity touch input disappears or when additional proximity touch input is further detected An electronic device comprising a touch input processing module.

14. The method of claim 13,
The touch input processing module includes:
And releases the lock of the screen direction rotation function when the proximity touch input previously sensed when the additional proximity touch input is further sensed.