KR101165388B1 - Method for controlling screen using different kind of input devices and terminal unit thereof - Google Patents

Method for controlling screen using different kind of input devices and terminal unit thereof Download PDF

Info

Publication number
KR101165388B1
KR101165388B1 KR1020100031924A KR20100031924A KR101165388B1 KR 101165388 B1 KR101165388 B1 KR 101165388B1 KR 1020100031924 A KR1020100031924 A KR 1020100031924A KR 20100031924 A KR20100031924 A KR 20100031924A KR 101165388 B1 KR101165388 B1 KR 101165388B1
Authority
KR
South Korea
Prior art keywords
screen
input signal
subject
detected
input
Prior art date
Application number
KR1020100031924A
Other languages
Korean (ko)
Other versions
KR20110081736A (en
Inventor
안건준
박경호
김한선
Original Assignee
크루셜텍 (주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020100001824A external-priority patent/KR20100135165A/en
Application filed by 크루셜텍 (주) filed Critical 크루셜텍 (주)
Publication of KR20110081736A publication Critical patent/KR20110081736A/en
Application granted granted Critical
Publication of KR101165388B1 publication Critical patent/KR101165388B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04164—Connections between sensors and controllers, e.g. routing lines between electrodes and connection pads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Abstract

본 발명의 실시예에 따른 이종의 입력 장치를 이용하여 화면을 제어하는 방법 및 그 단말장치를 제공한다. 이종의 입력 장치가 구비된 단말장치는 제1 입력 장치 및 제1 입력 장치와 종류가 다른 별도의 입력 장치인 제2 입력 장치를 구비한다.
이러한 단말장치의 화면 제어 방법에 따르면, 제1 입력 장치로부터 화면을 제어하기 위한 제1 입력 신호를 감지하고, 제2 입력 장치로부터 화면을 제어하기 위한 제2 입력 신호를 감지하는 경우, 기 정의된 화면 제어 기능을 실행한다. 이때, 기 정의된 화면 제어 기능은 복수의 서로 다른 축으로 구성된 다차원 화면을 임의의 축을 기준으로 변화시킬 수 있는 기능을 포함한다.Provided are a method for controlling a screen using heterogeneous input devices and a terminal device according to an embodiment of the present invention. A terminal device provided with a heterogeneous input device includes a first input device and a second input device which is a separate input device different from the first input device.
According to the screen control method of the terminal device, when detecting the first input signal for controlling the screen from the first input device, and the second input signal for controlling the screen from the second input device, a predefined Execute the screen control function. In this case, the predefined screen control function includes a function of changing a multidimensional screen composed of a plurality of different axes based on an arbitrary axis.

Description

이종의 입력 장치를 이용하여 화면을 제어하는 방법 및 그 단말장치{METHOD FOR CONTROLLING SCREEN USING DIFFERENT KIND OF INPUT DEVICES AND TERMINAL UNIT THEREOF}Method of controlling screen using heterogeneous input device and terminal device {METHOD FOR CONTROLLING SCREEN USING DIFFERENT KIND OF INPUT DEVICES AND TERMINAL UNIT THEREOF}

본 발명은 이종의 입력 장치를 이용하여 화면을 제어하는 방법 및 그 단말장치에 관한 것이다.The present invention relates to a method for controlling a screen using heterogeneous input devices and a terminal device thereof.

일반적으로, 전자통신 기술의 발전을 통해 다양한 전자기기들이 만들어지고 있으며, 이러한 기기들은 점차 사용자의 조작 편의성과 더불어 디자인의 수려함을 강조하는 추세에 있다. 이러한 추세에 따라 강조되는 것은 키보드 혹은 키패드로 대표되던 입력 장치의 다변화이다.In general, various electronic devices are being made through the development of electronic communication technology, and these devices are increasingly emphasizing the user's ease of operation and the beautifulness of the design. Highlighted by this trend is the diversification of input devices represented by keyboards or keypads.

휴대폰(Mobile Terminal)이나 PDA(Personal Digital Assistants) 등의 휴대 단말기의 경우, 터치 스크린 또는 포인팅 디바이스에 의한 사용자 인터페이스를 많이 채용하고 있다. BACKGROUND OF THE INVENTION In the case of a mobile terminal such as a mobile terminal or a personal digital assistant (PDA), a user interface by a touch screen or a pointing device is adopted.

특히, 최근에는 이러한 터치 스크린과 포인팅 디바이스가 하나의 단말기에 장착되는 추세에 있다. In particular, in recent years, such a touch screen and a pointing device have tended to be mounted on one terminal.

여기서, 터치 스크린이란 스크린에 센서를 내장하고, 손이나 터치펜을 사용하여 스크린 상의 특정 오브젝트를 "터치"하면 센서가 이를 감지하는 방식에 의하여 사용자 입력이 이루어지는 입력 장치이다. 포인팅 디바이스는 손가락을 움직이면 움직인 방향에 따라 커서(또는 포인터)가 화면 상에서 이동한다. 이러한 포인팅 디바이스는 광 조이스틱(Optical Joystick), 터치패드, 홀 센서, 지문인식 센서, 압력 센서 등이 있다.Here, the touch screen is an input device in which a sensor is embedded in a screen and a user input is made by a method in which a sensor detects this when a specific object on the screen is touched using a hand or a touch pen. When the pointing device moves a finger, the cursor (or pointer) moves on the screen according to the moving direction. Such pointing devices include an optical joystick, a touchpad, a hall sensor, a fingerprint sensor, a pressure sensor, and the like.

한편, 휴대용 전자 기기의 다양한 기능이 하나의 기기에 집적화되면서 휴대용 전자 기기의 작동 모드에 따라 이를 이용하기 위한 다양한 메뉴 설정이 요구된다. 예컨대 통신 모드에서는 상대방 전화번호나 전송하고자 하는 파일의 검색 및 선택, 멀티미디어 모드에서는 멀티미디어 파일 탐색, 재생/정지, 일시 정지 등의 조작 무선 인터넷 접속, 카메라 모드 등에서는 마우스 기능이나 줌 기능(zoom) 등이 요구된다. 또한, 휴대용 전자 기기 자체의 기본 설정이나 메뉴 호출 등을 위한 기능이 요구된다.Meanwhile, as various functions of the portable electronic device are integrated into one device, various menu settings for using the portable electronic device are required according to the operation mode of the portable electronic device. For example, searching and selecting the other party's phone number or file to be transmitted in the communication mode, searching for multimedia files in the multimedia mode, playing / stopping, pausing, etc. Is required. In addition, a function for basic setting or menu call of the portable electronic device itself is required.

따라서, 이러한 다양한 화면 제어 조작을 간소하면서도 효율적으로 할 수 있는 개선 방안이 필요한 실정이다.Therefore, there is a need for an improvement plan that can simplify and efficiently perform such various screen control operations.

한편, 종래에 터치 스크린을 구비한 단말기에서는 멀티 터치 기술을 제공하고 있다. 멀티 터치 기술의 경우, 터치 스크린 상에 두 개의 손가락을 접촉한 상태에서 좌우로 벌리면 화면이 확대되고 오므리면 화면이 축소되는 기능이 대표적이다.On the other hand, the terminal provided with a touch screen conventionally provides a multi-touch technology. In the case of the multi-touch technology, the screen is enlarged when the two fingers are touched on the touch screen, and the screen is enlarged when the two fingers are touched.

하지만, 이러한 멀티 터치 기술은 X축과 Y축을 기반으로 움직임이 구현되므로 2차원(2D)에 제한되어 있다. However, this multi-touch technology is limited to two-dimensional (2D) because the movement is implemented based on the X-axis and Y-axis.

그런데, 점차 웹 서비스의 트렌드가 가상화(VIRTUAL) 되어가면서 2D 기반에서 3D 기반으로 바뀌어 나가고 있다. 이러한 추세를 대표하는 서비스로서, 요즘 각광받고 있는 구글(Google)의 고글 서비스, i-phone의 Layer 서비스가 있다.However, as the trend of web services is becoming virtualized, it is changing from 2D to 3D. The services that represent this trend include Google's goggles service and i-phone's Layer service.

구글(Google)의 고글 서비스는 휴대 전화로 주변 사진을 찍으면 사진 속 건물이나 물체와 관련된 정보를 알려주는 서비스다. 또한, i-phone의 Layer 서비스는 아이폰을 들고 어떠한 정보를 검색했을 때 카메라가 열리면서 정면의 모습이 아이폰에 담기는데 아이폰 화면 안에 검색한 정보가 3D 가상의 이미지 형태로 표현된다.Google's Goggles service lets you take pictures of your surroundings with your phone and tell you information about buildings and objects in them. In addition, i-phone's Layer service shows the front view on the iPhone as the camera opens when any information is retrieved while holding the iPhone.

하지만, 종래의 입력 장치는 2차원적인 움직임만을 검출하는 것이 일반적이다. 즉 3차원 공간에서의 움직임은 고려되지 않고 있다. 따라서, 향후 기술의 발전에 따른 3차원적인 사용자 인터페이스가 요구되는 실정을 생각할 때, 이러한 2차원 적인 입력 장치는 3차원 사용자 입력 장치로는 사용될 수 없다. However, conventional input devices generally detect only two-dimensional movements. That is, the motion in three-dimensional space is not considered. Therefore, given the situation that a three-dimensional user interface is required in accordance with the development of future technology, such a two-dimensional input device can not be used as a three-dimensional user input device.

따라서, 본 발명이 이루고자 하는 기술적 과제는 이종의 입력 장치를 이용하여 다양한 화면 제어 기능을 실행하는 방법 및 그 단말장치를 제공하는 것이다.Accordingly, an aspect of the present invention is to provide a method for executing various screen control functions using heterogeneous input devices and a terminal device thereof.

또한, 본 발명이 이루고자 하는 다른 기술적 과제는 이종의 입력 장치를 이용하여 다차원 공간 상의 화면 제어 기능을 실행하는 방법 및 그 단말장치를 제공하는 것이다.Another object of the present invention is to provide a method for executing a screen control function in a multi-dimensional space using heterogeneous input devices and a terminal device thereof.

본 발명의 하나의 특징에 따르면 화면 제어 방법이 제공된다. 이 방법은, 이종의 입력 장치를 이용하여 화면을 제어하는 방법에 있어서, 제1 입력 장치로부터 상기 화면을 제어하기 위한 제1 입력 신호를 감지하는 단계; 제2 입력 장치-여기서 제2 입력 장치는 상기 제1 입력 장치와 종류가 다른 별도의 입력 장치임-로부터 상기 화면을 제어하기 위한 제2 입력 신호를 감지하는 단계; 및 상기 제1 입력 신호 및 상기 제2 입력 신호가 감지된 경우, 기 정의된 화면 제어 기능을 실행하는 단계를 포함한다.According to one aspect of the invention there is provided a screen control method. The method includes controlling a screen using a heterogeneous input device, the method comprising: detecting a first input signal for controlling the screen from a first input device; Detecting a second input signal for controlling the screen from a second input device, wherein the second input device is a separate input device different from the first input device; And if the first input signal and the second input signal are detected, executing a predefined screen control function.

본 발명의 다른 특징에 따르면 단말장치가 제공된다. 이 장치는, 화면을 제어하기 위한 제1 입력 신호를 감지하는 제1 입력 장치; 상기 제1 입력 장치와 입력 방식이 다르고 상기 제1 입력 장치와 다른 위치에 탑재되며, 상기 화면을 제어하기 위한 제2 입력 신호를 감지하는 제2 입력 장치; 및 상기 제1 입력 신호 및 상기 제2 입력 신호가 감지된 경우, 기 정의된 화면 제어 기능을 실행하는 제어부를 포함한다.According to another feature of the invention there is provided a terminal device. The apparatus includes a first input device for sensing a first input signal for controlling a screen; A second input device different from an input method of the first input device, mounted on a different position from the first input device, and configured to sense a second input signal for controlling the screen; And a controller configured to execute a predefined screen control function when the first input signal and the second input signal are detected.

본 발명의 실시예에 따르면, 서로 다른 입력 방식의 이종 입력 장치를 이용하여 다양한 화면 제어 조작을 간소하면서도 효율적으로 할 수 있고, 3차원 공간 상의 화면 제어가 가능하다. According to an embodiment of the present invention, various screen control operations can be simplified and efficiently by using heterogeneous input devices of different input methods, and screen control in a three-dimensional space is possible.

도 1은 본 발명의 실시예에 따른 단말장치의 구성을 나타낸 블록도이다.
도 2는 본 발명의 하나의 실시예에 따른 화면 제어 방법을 나타낸 순서도이다.
도 3은 본 발명의 다른 실시예에 따른 화면 제어 방법을 나타낸 순서도이다.
도 4는 본 발명의 실시예에 따른 화면 제어 기능이 적용된 3차원 화면예를 나타낸다.1 is a block diagram showing the configuration of a terminal apparatus according to an embodiment of the present invention.
2 is a flowchart illustrating a screen control method according to an exemplary embodiment of the present invention.
3 is a flowchart illustrating a screen control method according to another exemplary embodiment of the present invention.
4 shows an example of a three-dimensional screen to which the screen control function according to an embodiment of the present invention is applied.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성 요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when an element is referred to as "comprising ", it means that it can include other elements as well, without excluding other elements unless specifically stated otherwise.

이하, 도면을 참조로 하여 본 발명의 실시예에 따른 이종의 입력 장치를 이용하여 화면을 제어하는 방법 및 그 단말장치에 대하여 상세히 설명한다.Hereinafter, a method and a terminal device for controlling a screen using heterogeneous input devices according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 단말장치의 구성을 나타낸 블록도이다.1 is a block diagram showing the configuration of a terminal apparatus according to an embodiment of the present invention.

도 1을 참조하면, 단말장치(100)는 서로 다른 입력 방식을 가진 이종의 입력 장치를 구비하고, 유무선 통신이 가능하며 멀티미디어 컨텐츠의 실행이 가능한 전자 기기를 말한다. 예컨대 노트북, IPTV(Internet Procotol TV), 휴대형 전화, 스마트 폰, UMPC(Ultra Mobile PC), PDA(Personal Digital Assistance) 등을 포함할 수 있다.Referring to FIG. 1, a terminal device 100 is an electronic device having heterogeneous input devices having different input methods, capable of wired / wireless communication, and executing multimedia content. For example, it may include a laptop, an Internet Prototol TV (IPTV), a portable telephone, a smart phone, an Ultra Mobile PC (UMPC), a Personal Digital Assistance (PDA), and the like.

이러한 단말장치(100)는 제1 입력 장치(101), 제2 입력 장치(103), 표시부(105), 통신부(107), 메모리(109) 및 제어부(111)를 포함한다. The terminal device 100 includes a first input device 101, a second input device 103, a display unit 105, a communication unit 107, a memory 109, and a control unit 111.

제1 입력 장치(101)는 기 설정된 입력 방식에 의해 화면 제어를 위한 제1 입력 신호를 감지한다. The first input device 101 detects a first input signal for screen control by a preset input method.

제2 입력 장치(103)는 기 설정된 입력 방식에 의해 화면 제어를 위한 제2 입력 신호를 감지한다. The second input device 103 detects a second input signal for screen control by a preset input method.

여기서, 제1 입력 장치(101)와 제2 입력 장치(103)의 입력 방식은 각각 서로 다르며, 단말장치(100)에 탑재된 위치 역시 다르다.Here, the input methods of the first input device 101 and the second input device 103 are different from each other, and the positions mounted on the terminal device 100 are also different.

이때, 제1 입력 장치(101) 및 제2 입력 장치(103)는 휴대형 단말기와 같은 소형의 전자기기에 탑재될 수 있다.In this case, the first input device 101 and the second input device 103 may be mounted on a small electronic device such as a portable terminal.

여기서, 하나의 실시예에 따르면, 제1 입력 장치(101)는 표시부(105)와 결합된 터치 패널이고, 제2 입력 장치(103)는 포인팅 디바이스 일 수 있다.Here, according to an exemplary embodiment, the first input device 101 may be a touch panel coupled to the display unit 105, and the second input device 103 may be a pointing device.

이때, 제1 입력 장치(101) 및 표시부(105)는 터치 스크린을 구성한다. 제1 입력 장치(101)는 표시부(105)에 장착되어 사용자의 터치 동작에 따른 제1 입력 신호를 감지하여 제어부(111)로 전달한다. 제1 입력 장치(101)는 표시부(105) 상에 사용자의 터치 위치, 터치 강도, 터치 방향 등에 따른 제1 입력 신호를 감지할 수 있으며, 전류 감지 방식, 압력 감지 방식 등 다양한 형태로 구현이 가능하다. 또한, 적용된 방식에 따라서 사용자가 직접 접촉하지 아니하고 근접하는 것만으로도 그 동작 상태를 감지할 수 있다.In this case, the first input device 101 and the display unit 105 constitute a touch screen. The first input device 101 is mounted on the display unit 105 and detects a first input signal according to a user's touch operation and transmits it to the control unit 111. The first input device 101 may detect a first input signal according to a user's touch position, touch intensity, and touch direction on the display unit 105, and may be implemented in various forms such as a current sensing method and a pressure sensing method. Do. In addition, depending on the applied method, the operation state may be detected only by the user's proximity rather than in direct contact.

또한, 제2 입력 장치(103)가 포인팅 디바이스일 경우, 표시부(105) 상의 커서(cursor) 또는 포인터(pointer)를 피사체의 움직임을 통해 생성 및 이동시켜 PC(Personal Computer)에서와 동일한 포인팅 기술을 구현한다. 예를 들어, 제2 입력 장치(103) 위에 손가락(피사체)을 올린 후 손가락을 움직이면 움직인 방향에 따라 커서(또는 포인터)가 화면 상에서 이동한다. In addition, when the second input device 103 is a pointing device, a cursor or a pointer on the display unit 105 may be generated and moved through the movement of a subject to provide the same pointing technique as that of a personal computer (PC). Implement For example, when the finger (subject) is placed on the second input device 103 and the finger is moved, the cursor (or the pointer) moves on the screen according to the moving direction.

이때, 제2 입력 장치(103)는 피사체의 물리적 접촉을 감지하거나 또는 피사체에 반사되는 광을 감지할 수 있으며 그에 따른 제2 입력 신호를 생성할 수 있다. 이러한 제2 입력 장치(103)는 광 조이스틱(Optical Joystick), 터치패드, 홀 센서, 지문인식 센서, 압력 센서 등을 포함하는 다양한 형태로 구현될 수 있다. In this case, the second input device 103 may detect physical contact of the subject or light reflected by the subject and generate a second input signal accordingly. The second input device 103 may be implemented in various forms including an optical joystick, a touch pad, a hall sensor, a fingerprint sensor, a pressure sensor, and the like.

여기서, 피사체는 손가락과 같은 사용자의 신체 부위로 이해되는 것이 일반적이나 굳이 신체가 아니라도 제2 입력 장치(103)가 움직임을 파악 가능하게 할 수 있는 다른 대체 가능한 모든 물체가 될 수 있다. Here, the subject may be generally understood as a user's body part such as a finger, but may be any other replaceable object that can make the second input device 103 detect the movement even if it is not the body.

표시부(105)는 제어부(111)가 출력하는 데이터, 사용자 선택이 가능한 이미지, 아이콘 및 메뉴 항목 등이 포함된 화면을 표시한다. 그리고 단말 장치(100)가 구현하는 기능에 따른 다양한 화면을 표시할 수 있는데, 예를 들어 풀 브라우징(full browsing), VOD(Vedio on Demand), 맵(Map), 엠피쓰리(MP3) 재생, 메일(Mail) 서비스 화면을 출력한다.The display unit 105 displays a screen including data output from the controller 111, an image that can be selected by a user, an icon, a menu item, and the like. In addition, various screens according to functions implemented by the terminal device 100 may be displayed. For example, full browsing, VOD (Vedio on Demand), map, MP3 playback, mail, etc. Print the (Mail) service screen.

또한, 표시부(105)는 복수의 서로 다른 축으로 구성된 화면을 표시한다. 즉 3차원 입체 공간 상에 표시된 지도 이미지 또는 웹 페이지 등을 표시할 수 있다. 또한, 위젯(Widget), 아이들 스크린(Idle Screen)을 3차원으로 구현할 수 있다.In addition, the display unit 105 displays a screen composed of a plurality of different axes. That is, a map image or a web page displayed on the 3D stereoscopic space may be displayed. In addition, widgets and idle screens may be implemented in three dimensions.

통신부(107)는 유무선 네트워크를 통해 웹 접속을 위한 인터페이스를 제공하여 일반 인터넷 사이트와 동일한 형태로 문서와 동영상을 볼 수 있는 풀 브라우징 서비스를 단말 장치(100)에서 구현할 수 있도록 지원한다.The communication unit 107 provides an interface for web access through a wired / wireless network to support the terminal device 100 to implement a full browsing service for viewing documents and videos in the same form as a general Internet site.

메모리(109)는 단말 장치(100)의 동작을 제어하기 위한 정보 및 화면 제어 기능과 관련된 정보를 저장한다.The memory 109 stores information for controlling the operation of the terminal device 100 and information related to a screen control function.

제어부(111)는 제1 입력 장치(101), 제2 입력 장치(103), 표시부(105), 통신부(107) 및 메모리(109)와 연결되어 각 구성 요소 간의 유기적인 동작을 제어한다.The control unit 111 is connected to the first input device 101, the second input device 103, the display unit 105, the communication unit 107, and the memory 109 to control organic operations between the components.

제어부(111)는 제1 입력 장치(101) 및 제2 입력 장치(103) 각각으로부터 감지되는 제1 입력 신호 및 제2 입력 신호에 따른 기 정의된 화면 제어 기능을 실행하는데, 구체적인 화면 제어 동작에 대해서는 도 2 및 도 3을 참조하여 상세히 설명한다.The controller 111 executes a predefined screen control function according to the first input signal and the second input signal detected from each of the first input device 101 and the second input device 103. This will be described in detail with reference to FIGS. 2 and 3.

이때, 도 2 및 도 3을 참조하여 설명할 때 도 1과 동일한 구성 요소에 대한 설명은 동일한 도면 부호를 사용한다.2 and 3, the same reference numerals are used to describe the same components as those of FIG. 1.

먼저, 도 2는 본 발명의 하나의 실시예에 따른 화면 제어 방법을 나타낸 순서도이다. First, FIG. 2 is a flowchart illustrating a screen control method according to an exemplary embodiment of the present invention.

도 2를 참조하면, 제어부(111)가 제1 입력 장치(101)로부터 제1 입력 신호를 감지(S101)하고, 제2 입력 장치(103)로부터 제2 입력 신호를 감지한다(S103).Referring to FIG. 2, the controller 111 detects a first input signal from the first input device 101 (S101), and detects a second input signal from the second input device 103 (S103).

이때, 제어부(111)는 제1 입력 신호 및 제2 입력 신호가 제1 입력 신호가 감지되는 상태에서 제2 입력 신호가 감지되거나 제1 입력 신호가 감지된 후 제2 입력 신호가 감지되는 경우에 해당하는지를 판단한다(S105).At this time, the control unit 111 is the first input signal and the second input signal when the first input signal is detected in the second input signal is detected or after the first input signal is detected after the second input signal is detected It is determined whether it corresponds (S105).

S105 단계의 판단 결과, 해당되는 경우 기 정의된 화면 제어 기능을 실행한다(S107). 여기서, 기 정의된 화면 제어 기능은 화면의 확대, 화면의 축소, 화면의 이동 및 화면의 회전 중 어느 하나를 포함할 수 있다. 이때, 화면은 표시부(105)가 출력하는 화면 전체를 의미하거나 화면에 표시된 일부 이미지를 포함할 수 있다.As a result of the determination in step S105, if it is applicable to execute the predefined screen control function (S107). Here, the predefined screen control function may include any one of enlargement of the screen, reduction of the screen, movement of the screen, and rotation of the screen. In this case, the screen may mean the entire screen output by the display unit 105 or may include some images displayed on the screen.

다음, 도 3은 본 발명의 다른 실시예에 따른 화면 제어 방법을 나타낸 순서도이다.3 is a flowchart illustrating a screen control method according to another embodiment of the present invention.

도 3을 참조하면, 제어부(111)가 표시부(105)를 통하여 다차원 공간 상의 화면을 표시한다(S201). Referring to FIG. 3, the control unit 111 displays a screen on a multi-dimensional space through the display unit 105 (S201).

여기서, 다차원 공간 상의 화면은 다차원 공간 상에서 다차원적으로 표시되고 가변되는 화면을 의미한다. 예를 들어, 3차원 화면은 3차원 화면에 나타난 이미지가 X축, Y축, Z축, 또는 이들을 합성한 축에 따라 '이동'하거나, '이동하면서 변경' 될 수 있는 화면을 의미한다. 이때, '이동하면서 변경' 은 크기 변경 외에 내용 변경도 포함된다. 이러한 3차원 화면에 나타난 이미지는 아이콘, 메뉴, 리스트, 포인터(커서), 영상 등을 포함한다. Here, the screen on the multi-dimensional space means a screen that is multi-dimensionally displayed and variable on the multi-dimensional space. For example, the 3D screen refers to a screen in which an image displayed on the 3D screen may be 'moved' or 'changed while moving' according to an X-axis, a Y-axis, a Z-axis, or a synthesized axis thereof. In this case, 'change as moving' includes content change in addition to size change. The image displayed on the 3D screen includes an icon, a menu, a list, a pointer (cursor), an image, and the like.

예를 들어, 3차원 공간 상에 지도 이미지를 표시하거나 카메라(미도시함)를 통해 촬영한 이미지를 3차원 입체 공간 형태로 표시할 수 있다.For example, a map image may be displayed on a three-dimensional space or an image photographed through a camera (not shown) may be displayed in a three-dimensional three-dimensional space.

제어부(111)는 제1 입력 장치(101)로부터 제1 입력 신호가 감지되는 상태에서 제2 입력 장치(103)로부터 제2 입력 신호를 감지하거나 제1 입력 신호가 감지된 후 제2 입력 신호를 감지한다(S203, S205, S207).The control unit 111 detects the second input signal from the second input device 103 in the state in which the first input signal is detected from the first input device 101 or receives the second input signal after the first input signal is detected. It detects (S203, S205, S207).

이때, 제어부(111)는 제1 입력 신호를 기 정의된 둘 이상의 서로 다른 축 방향의 제1 좌표로 연산한다(S209). 그리고 제2 입력 신호를 제1 좌표의 축을 제외한 기 정의된 하나의 축 방향의 제2 좌표로 연산한다(S211). In this case, the control unit 111 calculates the first input signal as first coordinates in at least two different axial directions (S209). In operation S211, the second input signal may be calculated as the second coordinate in one axis direction except for the axis of the first coordinate.

그리고 제어부(111)는 제1 좌표를 기준으로 제2 좌표에 따른 화면의 변화를 제어한다(S213).The controller 111 controls the change of the screen according to the second coordinate based on the first coordinate (S213).

또한, 제어부(111)는 제1 입력 장치(101)로부터 복수의 제1 입력 신호를 감지할 수 있다. 이런 경우, 제1 입력 장치(101)가 터치 스크린이라면, 멀티 터치에 해당한다. 제어부(111)는 복수의 제1 입력 신호가 감지되는 상태에서 제2 입력 장치(103)로부터 제2 입력 신호가 감지되면, 제2 입력 신호에 따라 화면의 변화를 제어할 수 있다. 예를 들어, 멀티 터치가 감지되면 x, y 축을 기준으로 z축 방향으로 화면을 회전시킬 수 있다.In addition, the controller 111 may detect a plurality of first input signals from the first input device 101. In this case, if the first input device 101 is a touch screen, it corresponds to multi-touch. If a second input signal is detected from the second input device 103 in a state where a plurality of first input signals are detected, the controller 111 may control the change of the screen according to the second input signal. For example, when the multi-touch is detected, the screen may be rotated in the z-axis direction based on the x and y axes.

한편, 도 4는 본 발명의 실시예에 따른 화면 제어 기능이 적용된 3차원 화면 예를 나타낸다. 즉 하나의 실시예로, 3차원 공간 상의 화면을 제어하는 경우이다.4 illustrates an example of a 3D screen to which a screen control function is applied according to an embodiment of the present invention. That is, in one embodiment, it is a case of controlling a screen on a three-dimensional space.

도 4를 참조하면, 단말장치(100)는 제1 입력 장치(101) 및 표시부(105)가 결합된 형태의 터치 스크린 및 포인팅 디바이스 형태의 제2 입력 장치(103)를 탑재한다. Referring to FIG. 4, the terminal device 100 includes a touch screen in which a first input device 101 and a display unit 105 are combined, and a second input device 103 in the form of a pointing device.

이때, 터치 스크린의 표시부(105)는 3차원 공간 상의 화면을 표시한다. 여기서, 3차원 공간의 화면은 3개의 서로 다른 축으로 구성된다. 즉 X 축, X 축과 평면상에서 수직을 이루는 Y 축 및 X 축, Y 축 각각과 공간상에서 수직을 이루는 Z 축으로 구성된다.At this time, the display unit 105 of the touch screen displays a screen on a three-dimensional space. Here, the screen of the three-dimensional space is composed of three different axes. That is, it is composed of the X axis, the Y axis perpendicular to the X axis in the plane, and the X axis, and the Z axis perpendicular to the X axis and the space respectively.

여기서, 제1 입력 장치(101)는 X 축 방향 및 Y 축 방향의 제1 입력 신호를 감지하고, 제2 입력 장치(103)는 Z 축 방향의 제2 입력 신호를 감지한다. 그러면, 제어부(111)는 제1 입력 신호를 2차원 평면 상에서의 (x,y) 좌표로 연산한다. 그리고 제2 입력 신호를 Z 축 방향의 좌표를 계산하여 3차원 평면 상에서의 (x, y, z) 좌표를 연산한다.Here, the first input device 101 detects the first input signal in the X-axis direction and the Y-axis direction, and the second input device 103 detects the second input signal in the Z-axis direction. Then, the control unit 111 calculates the first input signal in (x, y) coordinates on the two-dimensional plane. The coordinates of the second input signal in the Z-axis direction are calculated to calculate (x, y, z) coordinates on the 3D plane.

이때, 2차원 평면 상에서의 (x,y) 좌표는 고정된 상태에서 Z 축 방향의 좌표는 계속 변한다. 즉 제1 입력 신호는 화면 상의 고정된 위치에서 감지되는 반면 제2 입력 신호는 피사체의 움직임에 따라 계속해서 변하는 경우를 말한다.At this time, while the (x, y) coordinates on the two-dimensional plane are fixed, the coordinates in the Z-axis direction continue to change. That is, the first input signal is detected at a fixed position on the screen while the second input signal is continuously changed according to the movement of the subject.

그러면, 제어부(111)는 2차원 평면 상에서의 (x,y) 좌표에 해당하는 위치를 기준으로 Z 축 방향의 좌표에 따른 화면의 변화를 표시한다. 즉 Z 축 방향으로 화면을 회전, 축소, 확대할 수 있다.Then, the control unit 111 displays the change of the screen according to the coordinates in the Z-axis direction based on the position corresponding to the (x, y) coordinates on the two-dimensional plane. That is, the screen can be rotated, reduced or enlarged in the Z-axis direction.

이렇게 하면, 종래와 달리 X축, Y축 외에 Z 축의 조작을 가능하게 함으로써 궁극적인 3차원 조작이 가능하게 된다. In this way, unlike the conventional method, the operation of the Z axis in addition to the X axis and the Y axis is possible, thereby enabling the ultimate three-dimensional operation.

또한, 화면 상에서 제1 입력 장치(101) 및 제2 입력 장치(103)를 통해 감지되는 제1 입력 신호 및 제2 입력 신호를 결합하여 이미지에 대한 움직임이나 크기를 조절하는 것과 같은 어플리케이션 효과의 구현이 가능하다.In addition, the implementation of an application effect such as adjusting the movement or the size of the image by combining the first input signal and the second input signal sensed by the first input device 101 and the second input device 103 on the screen. This is possible.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, It belongs to the scope of right.

100: 단말장치 101: 제1 입력 장치
103: 제2 입력 장치 105: 표시부
107: 통신부 109: 메모리
111: 제어부100: terminal 101: first input device
103: second input device 105: display unit
107: communication unit 109: memory
111: control unit

Claims (15)

터치 스크린으로부터 화면을 제어하기 위한 제1 입력 신호-상기 제1 입력 신호는 피사체의 접촉에 따라 발생함-를 감지하는 단계;
화면 상의 커서 또는 포인터를 피사체의 움직임을 통해 생성 및 이동시키는 포인팅 디바이스로부터 화면을 제어하기 위한 제2 입력 신호-상기 제2 입력 신호는 피사체의 움직임에 따라 발생함-를 감지하는 단계;
상기 제1 입력 신호 및 상기 제2 입력 신호가 모두 감지되는 경우, 상기 제1 입력 신호를 통해 피사체가 접촉한 화면 상의 위치를 계산하고, 상기 제2 입력 신호를 통해 피사체의 움직임 방향을 분석하는 단계; 및
상기 화면 상의 위치를 기준으로 상기 피사체의 움직임 방향에 대해 설정된 화면 제어 기능을 실행하는 단계를 포함하고,
상기 화면 제어 기능은 피사체의 움직임 방향 별로 서로 다르게 설정되며 화면의 확대, 화면의 축소, 화면의 이동 및 화면의 회전 중 어느 하나를 포함하고,
상기 제1 입력 신호는 화면 상의 고정된 위치에서 감지되고 상기 제2 입력 신호는 피사체의 움직임에 따라 계속 변하는 화면 제어 방법.Detecting a first input signal for controlling a screen from a touch screen, wherein the first input signal is generated according to a contact of a subject;
Detecting a second input signal for controlling the screen from a pointing device that generates and moves a cursor or pointer on the screen through the movement of the subject, wherein the second input signal is generated according to the movement of the subject;
When both the first input signal and the second input signal are detected, calculating a position on the screen in which the subject contacts the first input signal and analyzing a moving direction of the subject through the second input signal ; And
Executing a screen control function set for a moving direction of the subject based on the position on the screen;
The screen control function is set differently for each moving direction of the subject and includes any one of enlargement of the screen, reduction of the screen, movement of the screen, and rotation of the screen.
And the first input signal is detected at a fixed position on the screen, and the second input signal is continuously changed as the subject moves. 제1항에 있어서,
상기 실행하는 단계는,
상기 제1 입력 신호가 감지되는 상태에서 상기 제2 입력 신호가 감지되는 경우, 상기 화면 제어 기능을 실행하는 것을 특징으로 하는 화면 제어 방법.The method of claim 1,
The step of performing,
And when the second input signal is detected while the first input signal is detected, executing the screen control function. 제1항에 있어서,
상기 실행하는 단계는,
상기 제1 입력 신호가 감지된 후 상기 제2 입력 신호가 감지되는 경우, 상기 화면 제어 기능을 실행하는 것을 특징으로 하는 화면 제어 방법.The method of claim 1,
The step of performing,
And if the second input signal is detected after the first input signal is detected, executing the screen control function. 삭제delete 제1항 내지 제3항 중 어느 한 항에 있어서,
상기 제1 입력 신호를 감지하는 단계 이전에,
복수의 서로 다른 축 상에서 구현되는 화면을 표시하는 단계를 더 포함하고,
상기 실행하는 단계는,
상기 제1 입력 신호를 기 정의된 둘 이상의 서로 다른 축 방향의 제1 좌표로 연산하는 단계;
상기 제2 입력 신호를 상기 둘 이상의 서로 다른 축 방향을 제외한 기 정의된 하나의 축 방향의 제2 좌표로 연산하는 단계; 및
상기 제1 좌표를 기준으로 상기 제2 좌표에 따른 화면의 변화를 제어하는 단계
를 포함하는 화면 제어 방법.4. The method according to any one of claims 1 to 3,
Before the step of detecting the first input signal,
Further comprising displaying a screen implemented on a plurality of different axes,
The step of performing,
Calculating the first input signal with first coordinates in at least two different axial directions defined in advance;
Calculating the second input signal with second coordinates in one predefined axial direction except for the two or more different axial directions; And
Controlling a change in a screen according to the second coordinates based on the first coordinates
Screen control method comprising a. 제5항에 있어서,
상기 제어하는 단계는,
상기 제1 좌표에 대응되는 화면 상에 표시된 이미지를 상기 제2 좌표에 따라 변화시키는 것을 특징으로 하는 화면 제어 방법.The method of claim 5,
Wherein the controlling comprises:
And changing an image displayed on the screen corresponding to the first coordinate according to the second coordinate. 제5항에 있어서,
상기 제어하는 단계는,
상기 제1 좌표에 대응되는 화면 상에 표시된 이미지를 기준점으로 하여 화면에 표시된 전체 이미지를 상기 제2 좌표에 따라 변화시키는 것을 특징으로 하는 화면 제어 방법.The method of claim 5,
Wherein the controlling comprises:
And changing the entire image displayed on the screen according to the second coordinate by using the image displayed on the screen corresponding to the first coordinate as a reference point. 삭제delete 피사체의 접촉에 따라 화면을 제어하기 위한 제1 입력 신호를 생성하는 터치 스크린;
상기 터치 스크린과 다른 위치에 탑재되어 피사체의 움직임을 통해 화면 상의 커서 또는 포인터를 생성 및 이동시키고, 상기 피사체의 움직임에 따라 화면을 제어하기 위한 제2 입력 신호를 생성하는 포인팅 디바이스; 및
상기 제1 입력 신호 및 상기 제2 입력 신호가 모두 감지된 경우, 상기 제1 입력 신호를 통해 피사체가 접촉한 화면 상의 위치를 계산하고, 상기 제2 입력 신호를 통해 피사체의 움직임 방향을 분석하며, 상기 화면 상의 위치를 기준으로 상기 피사체의 움직임 방향에 대해 설정된 화면 제어 기능을 실행하는 제어부를 포함하고,
상기 화면 제어 기능은 피사체의 움직임 방향 별로 서로 다르게 설정되며 화면의 확대, 화면의 축소, 화면의 이동 및 화면의 회전 중 어느 하나를 포함하고,
상기 제1 입력 신호는 화면 상의 고정된 위치에서 감지되고 상기 제2 입력 신호는 피사체의 움직임에 따라 계속 변하는 단말장치.A touch screen generating a first input signal for controlling the screen according to the contact of the subject;
A pointing device mounted at a position different from the touch screen to generate and move a cursor or a pointer on a screen through movement of a subject, and to generate a second input signal for controlling the screen according to the movement of the subject; And
When both the first input signal and the second input signal are detected, the position on the screen where the subject contacts the first input signal is calculated, and the movement direction of the subject is analyzed using the second input signal. And a controller configured to execute a screen control function set for a movement direction of the subject based on the position on the screen.
The screen control function is set differently for each moving direction of the subject and includes any one of enlargement of the screen, reduction of the screen, movement of the screen, and rotation of the screen.
And the first input signal is detected at a fixed position on the screen, and the second input signal is continuously changed as the subject moves. 제9항에 있어서,
상기 제어부는,
상기 제1 입력 신호가 감지되는 상태에서 상기 제2 입력 신호가 감지되는지를 판단하여 상기 화면 제어 기능의 실행 여부를 결정하는 것을 특징으로 하는 단말장치.10. The method of claim 9,
The control unit,
And determining whether to execute the screen control function by determining whether the second input signal is detected while the first input signal is detected. 제9항에 있어서,
상기 제어부는,
상기 제1 입력 신호가 감지된 후 상기 제2 입력 신호가 감지되는지를 판단하여 상기 화면 제어 기능의 실행 여부를 결정하는 것을 특징으로 하는 단말장치.10. The method of claim 9,
The control unit,
And determining whether to execute the screen control function by determining whether the second input signal is detected after the first input signal is detected. 제9항 내지 제11항 중 어느 한 항에 있어서,
복수의 서로 다른 축으로 구성된 화면을 표시하는 표시부
를 더 포함하는 단말장치.12. The method according to any one of claims 9 to 11,
Display unit for displaying a screen composed of a plurality of different axes
Terminal device further comprising. 제12항에 있어서,
상기 제어부는,
기 정의된 둘 이상의 서로 다른 축 방향으로의 입력에 따른 상기 제1 입력 신호 및 상기 둘 이상의 서로 다른 축 방향을 제외한 기 정의된 하나의 축 방향의 입력에 따른 상기 제2 입력 신호를 감지한 경우, 상기 둘 이상의 서로 다른 축 방향을 기준으로 상기 기 정의된 하나의 축 방향의 입력에 따른 화면의 변화를 제어하는 단말장치.The method of claim 12,
The control unit,
When the first input signal according to the input in two or more different axial directions defined and the second input signal according to the input in one predefined axial direction except the two or more different axial directions, Terminal device for controlling the change of the screen according to the input of the predefined one axis direction based on the two or more different axis direction. 제13항에 있어서,
상기 제어부는,
상기 둘 이상의 서로 다른 축 방향의 입력에 따른 상기 화면에서의 제1 좌표 및 상기 기 정의된 하나의 축 방향의 입력에 따른 상기 화면에서의 제2 좌표를 계산하고, 상기 제1 좌표에 대응되는 위치에 표시된 이미지를 상기 제2 좌표에 따라 변화시키거나 상기 제1 좌표에 표시된 이미지를 기준점으로 화면에 표시된 전체 이미지를 상기 제2 좌표에 따라 변화시키는 단말장치.The method of claim 13,
The control unit,
A first coordinate on the screen according to the input of the two or more different axial directions and a second coordinate on the screen according to the input of the predefined one axial direction, and calculate a position corresponding to the first coordinate The terminal device changes the image displayed on the screen according to the second coordinates or the entire image displayed on the screen based on the image displayed on the first coordinates based on the second coordinates. 삭제delete
KR1020100031924A 2010-01-08 2010-04-07 Method for controlling screen using different kind of input devices and terminal unit thereof KR101165388B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020100001824A KR20100135165A (en) 2009-06-16 2010-01-08 Control method for pointing device using the touch screen and portable device using the same
KR1020100001824 2010-01-08

Publications (2)

Publication Number Publication Date
KR20110081736A KR20110081736A (en) 2011-07-14
KR101165388B1 true KR101165388B1 (en) 2012-07-12

Family

ID=45092428

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020100031924A KR101165388B1 (en) 2010-01-08 2010-04-07 Method for controlling screen using different kind of input devices and terminal unit thereof
KR1020100031925A KR101165387B1 (en) 2010-01-08 2010-04-07 Method for controlling screen of terminal unit with touch screen and pointing device
KR1020110120351A KR20110133014A (en) 2010-01-08 2011-11-17 Method for controlling screen of terminal unit with touch screen and pointing device

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020100031925A KR101165387B1 (en) 2010-01-08 2010-04-07 Method for controlling screen of terminal unit with touch screen and pointing device
KR1020110120351A KR20110133014A (en) 2010-01-08 2011-11-17 Method for controlling screen of terminal unit with touch screen and pointing device

Country Status (1)

Country Link
KR (3) KR101165388B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130271415A1 (en) * 2011-09-30 2013-10-17 Intel Corporation Mechanism for employing and facilitating a touch panel thumb sensor pad at a computing device

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090256809A1 (en) * 2008-04-14 2009-10-15 Sony Ericsson Mobile Communications Ab Three-dimensional touch interface

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090313020A1 (en) * 2008-06-12 2009-12-17 Nokia Corporation Text-to-speech user interface control

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090256809A1 (en) * 2008-04-14 2009-10-15 Sony Ericsson Mobile Communications Ab Three-dimensional touch interface

Also Published As

Publication number Publication date
KR20110081737A (en) 2011-07-14
KR20110081736A (en) 2011-07-14
KR101165387B1 (en) 2012-07-12
KR20110133014A (en) 2011-12-09

Similar Documents

Publication Publication Date Title
US10401964B2 (en) Mobile terminal and method for controlling haptic feedback
JP5759660B2 (en) Portable information terminal having touch screen and input method
US9519350B2 (en) Interface controlling apparatus and method using force
US8443302B2 (en) Systems and methods of touchless interaction
US8823749B2 (en) User interface methods providing continuous zoom functionality
KR100783552B1 (en) Input control method and device for mobile phone
KR102052424B1 (en) Method for display application excution window on a terminal and therminal
JP5620440B2 (en) Display control apparatus, display control method, and program
US8866776B2 (en) Information processing device adapted to receiving an input for user control using a touch pad and information processing method thereof
US9459704B2 (en) Method and apparatus for providing one-handed user interface in mobile device having touch screen
US20150077362A1 (en) Terminal with fingerprint reader and method for processing user input through fingerprint reader
EP2068235A2 (en) Input device, display device, input method, display method, and program
WO2011002414A2 (en) A user interface
JP2014052852A (en) Information processor
KR20160049455A (en) Method of displaying an image by using a scroll bar and apparatus thereof
US10095384B2 (en) Method of receiving user input by detecting movement of user and apparatus therefor
EP3933545B1 (en) Method and apparatus for detecting a bending state of electronic device, and storage medium
US11354031B2 (en) Electronic apparatus, computer-readable non-transitory recording medium, and display control method for controlling a scroll speed of a display screen
US20150009136A1 (en) Operation input device and input operation processing method
KR20140090074A (en) Image display device and controlling method thereof
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
JP2013114645A (en) Small information device
KR101165388B1 (en) Method for controlling screen using different kind of input devices and terminal unit thereof
KR20110066545A (en) Method and terminal for displaying of image using touchscreen
US20200033959A1 (en) Electronic apparatus, computer-readable non-transitory recording medium, and display control method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150604

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160608

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170621

Year of fee payment: 6