KR100984826B1 - Portable terminal and user interface method thereof - Google Patents

Portable terminal and user interface method thereof Download PDF

Info

Publication number
KR100984826B1
KR100984826B1 KR1020080064457A KR20080064457A KR100984826B1 KR 100984826 B1 KR100984826 B1 KR 100984826B1 KR 1020080064457 A KR1020080064457 A KR 1020080064457A KR 20080064457 A KR20080064457 A KR 20080064457A KR 100984826 B1 KR100984826 B1 KR 100984826B1
Authority
KR
South Korea
Prior art keywords
gesture
touch screen
control
command
menu
Prior art date
Application number
KR1020080064457A
Other languages
Korean (ko)
Other versions
KR20100004342A (en
Inventor
이채현
이해성
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020080064457A priority Critical patent/KR100984826B1/en
Publication of KR20100004342A publication Critical patent/KR20100004342A/en
Application granted granted Critical
Publication of KR100984826B1 publication Critical patent/KR100984826B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Abstract

본 발명은 휴대용 단말기 및 그의 사용자 인터페이스 방법에 관한 것이다.

본 발명에 따른 휴대용 단말기는 접촉의 위치 및 움직임을 검출하는 터치스크린부 및 제스처 인식 명령이 입력될 경우, 제스처 인식 모드로 설정하여 접촉의 위치 및 움직임을 통해 제스처를 인식하고, 제스처에 해당되는 제어명령을 생성하는 터치스크린 모드 제어부를 포함한다.

Figure R1020080064457

제스처

The present invention relates to a portable terminal and a user interface method thereof.

When the touch screen unit and the gesture recognition command for detecting the position and the movement of the contact are input, the portable terminal according to the present invention sets the gesture recognition mode to recognize the gesture through the position and the movement of the contact, and controls corresponding to the gesture. And a touch screen mode controller for generating a command.

Figure R1020080064457

gesture

Description

휴대용 단말기 및 그의 사용자 인터페이스 방법{PORTABLE TERMINAL AND USER INTERFACE METHOD THEREOF}PORTABLE TERMINAL AND USER INTERFACE METHOD THEREOF}

본 발명은 휴대용 단말기 및 그의 사용자 인터페이스 방법에 관한 것으로, 더욱 상세하게는 터치스크린을 구비한 휴대용 단말기에서 메뉴를 표시하지 않고, 제어명령을 실행할 수 있는 휴대용 단말기 및 그의 사용자 인터페이스 방법에 관한 것이다. The present invention relates to a portable terminal and a user interface method thereof, and more particularly, to a portable terminal and a user interface method thereof capable of executing a control command without displaying a menu in a portable terminal having a touch screen.

근래 통신기술이 발달하면서 터치스크린을 구비한 휴대용 단말기가 많이 출시되고 있다. Recently, with the development of communication technology, a lot of portable terminals with a touch screen have been released.

일반적으로 터치스크린 장치는 별도의 키입력부를 사용하지 않고, 터치스크린에 표시된 메뉴에 사람의 손 또는 물체가 접촉되면, 그 위치에 해당하는 기능이 실행되는 장치로, 상기 터치스크린 장치에 포함되는 터치 패널의 종류는 저항(resistive)방식, 정전용량(capacitive)방식 및 적외선 방식 등이 있다.In general, the touch screen device does not use a separate key input unit, and when a human hand or an object contacts a menu displayed on the touch screen, a function corresponding to the position is executed. The touch included in the touch screen device Types of panels include resistive, capacitive, and infrared.

즉, 터치스크린 장치는 이러한 터치 패널이 장착된 터치스크린에 문자나 그 림 정보를 표시하고, 조작자에 의해 접촉이 발생되면, 접촉이 발생된 위치의 좌표정보를 통해 조작자가 선택한 것을 파악하고, 이에 해당하는 명령이 수행되도록 한다. That is, the touch screen device displays text or picture information on the touch screen on which the touch panel is mounted, and when a contact is generated by the operator, grasps the operator's selection through the coordinate information of the location where the contact is generated, Allow the corresponding command to be executed.

따라서, 이러한 터치스크린 장치가 장착된 휴대용단말기는 터치스크린에 메뉴를 표시함으로써 키입력부를 구비할 필요가 없거나 최소한으로 구비할 수 있도록 하여 휴대용단말기의 화면을 더욱 크게 할 수 있다. Accordingly, the portable terminal equipped with the touch screen device may display the menu on the touch screen so that the key input unit does not need to be provided or minimally provided, thereby making the screen of the portable terminal larger.

그러나, 터치스크린에 메뉴가 표시됨으로써 사용자가 볼 수 있는 화면의 크기가 제한되게 되었다. 특히, 웹 브라우저 실행시에 웹 브라우저를 제어할 수 있는 제어메뉴가 함께 표시되는데, 이 때문에 사용자가 볼 수 있는 웹 브라우저 화면 영역이 줄어들게 되는 문제점이 발생했다. However, as the menu is displayed on the touch screen, the size of the screen that the user can see is limited. In particular, when the web browser is executed, a control menu for controlling the web browser is displayed together, which causes a problem that the area of the web browser screen that the user can see is reduced.

그래서, 상기와 같은 문제점을 해결하기 위해 본 발명의 목적은 터치스크린에 메뉴를 표시하지 않고 제어명령을 입력할 수 있도록 하는 휴대용 단말기 및 그의 사용자 인터페이스 방법을 제공하는 데 있다.Accordingly, an object of the present invention to solve the above problems is to provide a portable terminal and a user interface method thereof that can input a control command without displaying a menu on the touch screen.

이에 따라, 본 발명에 따른 휴대용 단말기는, 접촉의 위치 및 움직임을 검출하는 터치스크린부; 및 제스처 인식 명령이 입력될 경우, 제스처 인식 모드로 설정하여 상기 접촉의 위치 및 움직임을 통해 제스처를 인식하고, 상기 제스처에 해당되는 제어명령을 생성하는 터치스크린 모드 제어부;를 포함한다.Accordingly, the portable terminal according to the present invention, the touch screen unit for detecting the position and movement of the contact; And a touch screen mode controller configured to set a gesture recognition mode when the gesture recognition command is input, recognize a gesture through the position and movement of the contact, and generate a control command corresponding to the gesture.

상기 제스처 인식 명령은 웹 브라우저가 실행된 상태에서 입력되는 것을 특징으로 한다.The gesture recognition command may be input while the web browser is executed.

그리고, 상기 터치스크린 모드 제어부는 상기 제스처 인식 모드로 설정하여 상기 제어명령을 생성한 후에 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 설정하는 것을 특징으로 한다.The touch screen mode controller may be set to the gesture recognition mode to set the screen control mode to move the screen up, down, left, and right after generating the control command.

또한, 상기 제어명령에 대응되는 제어메뉴를 생성하는 메뉴 생성부를 더 포함하고, 상기 터치스크린 모드 제어부는 제어메뉴 표시 명령이 입력될 경우, 상기 제어메뉴가 상기 터치스크린부에 표시되도록 상기 메뉴 생성부를 제어하는 것을 특징으로 한다.The apparatus may further include a menu generation unit configured to generate a control menu corresponding to the control command, wherein the touch screen mode controller is configured to display the control menu on the touch screen unit when a control menu display command is input. It is characterized by controlling.

또한, 상기 터치스크린 모드 제어부는 상기 접촉의 위치 및 움직임을 통해 상기 제스처를 인식하지 못할 경우, 재입력을 요청하는 메시지와 제스처 도움말 보기를 선택할 수 있는 메뉴가 상기 터치스크린부에 표시되도록 상기 메뉴 생성부를 제어하는 것을 특징으로 한다.In addition, when the touch screen mode control unit does not recognize the gesture through the location and movement of the contact, the touch screen mode controller generates a menu for displaying a message requesting re-entry and a menu for selecting a gesture help view. It is characterized by controlling the wealth.

그리고, 상기 제어명령은 뒤로 가기, 앞으로 가기, 상기 웹 브라우저 닫기, 새로 고침, 다음 탭 보기, 이전 탭 보기 및 제스처 도움말 보기 중 하나 이상을 포함하는 것을 특징으로 한다.The control command may include at least one of a back, a forward, a close of the web browser, a refresh, a next tab view, a previous tab view, and a gesture help view.

또한, 기 설정된 상기 제스처를 변경 설정하거나 또는 새로운 신규 제스처를 설정할 수 있는 제스처 설정부를 더 포함하는 것을 특징으로 한다.The apparatus may further include a gesture setting unit which may change the preset gesture or set a new gesture.

한편, 본 발명에 따른 휴대용 단말기의 사용자 인터페이스 방법은, 제스처 인식 명령이 입력될 경우, 제스처 인식 모드로 설정하는 제1단계; 및 터치스크린에서 검출되는 접촉의 위치와 움직임을 통해 제스처를 인식하여 상기 제스처에 해당하는 제어명령을 수행하는 제2단계;를 포함한다.On the other hand, the user interface method of a portable terminal according to the present invention, when a gesture recognition command is input, the first step of setting to the gesture recognition mode; And a second step of performing a control command corresponding to the gesture by recognizing the gesture through the position and the movement of the touch detected on the touch screen.

상기 접촉의 위치와 움직임을 통해 상기 제스처를 인식하지 못할 경우, 재입력을 요청하는 메시지와 제스처 도움말 보기를 선택할 수 있는 메뉴를 표시하는 단계를 더 포함하는 것을 특징으로 한다.The method may further include displaying a message for requesting re-entry and selecting a gesture help view when the gesture is not recognized through the location and movement of the contact.

또한, 상기 제 1단계 전에, 웹 브라우저가 실행되는 단계를 더 포함하는 것을 특징으로 한다.In addition, before the first step, characterized in that it further comprises the step of executing a web browser.

그리고, 상기 제1단계에서, 제어메뉴 표시 명령이 입력될 경우, 상기 웹 브라우저를 제어할 수 있는 하나 이상의 제어메뉴를 표시하는 단계를 더 포함하는 것 을 특징으로 한다.In the first step, when the control menu display command is input, the method may further include displaying one or more control menus capable of controlling the web browser.

상기 제어명령은 뒤로 가기, 앞으로 가기, 상기 웹 브라우저 닫기, 새로 고침, 다음 탭 보기, 이전 탭 보기 및 제스처 도움말 보기 중 하나 이상을 포함하는 것을 특징으로 한다.The control command may include one or more of back, forward, closing the web browser, refreshing, next tab view, previous tab view, and gesture help view.

또한, 상기 제2단계 후에, 상기 제스처 인식 모드에서 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 설정하는 단계를 더 포함하는 것을 특징으로 한다.The method may further include setting the screen control mode to move the screen up, down, left, and right in the gesture recognition mode after the second step.

따라서, 본 발명에 따르면, 웹 브라우저 실행시에 웹 브라우저를 제어하기 위한 제어메뉴를 터치스크린에 표시할 필요 없이 접촉에 의한 제스처를 통해 제어명령을 입력할 수 있게 되므로 사용자는 웹 브라우저를 터치스크린 화면 전체에 표시하여 볼 수 있게 된다. Therefore, according to the present invention, since the user can input a control command through a gesture by contact without having to display a control menu for controlling the web browser on the touch screen when the web browser is executed, the user can enter the touch screen of the web browser. You can see it in full.

또한, 기존의 제어메뉴를 통한 명령 방식과는 달리 터치에 의한 제스처를 통해 명령을 입력할 수 있으므로 사용자에게 호감을 불러일으킴과 동시에 편리성을 제공할 수 있으며, 사업자에게는 매출을 증대시킬 수 있게 된다.In addition, unlike the conventional command method through the control menu, it is possible to input the command through the gesture by the touch, thereby inviting the user and providing convenience, and increase the sales to the operator. .

이하, 첨부한 도면을 참조하여 본 발명을 상세히 설명하도록 하겠다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

다만, 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다. However, in describing the present invention, when it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, a detailed description thereof will be omitted.

도 1은 본 발명이 적용되는 휴대용 단말기의 구성을 보여주는 블럭도이다.1 is a block diagram showing the configuration of a portable terminal to which the present invention is applied.

도 1을 참조하면, 휴대용 단말기는, 무선 통신부(110), 터치스크린부(120)와, 메뉴 생성부(130), 터치스크린 모드 제어부(150) 및 명령 처리부(160)를 포함한다. 본 발명에 따른 휴대용 단말기는 인터넷이 가능한 PMP(Portable Multimedia Player), PDA(Personal Digital Assistants), PSP(Play Station Portable) 및 휴대용 방송수신기뿐만 아니라 이동통신단말기가 해당된다. Referring to FIG. 1, the portable terminal includes a wireless communication unit 110, a touch screen unit 120, a menu generation unit 130, a touch screen mode control unit 150, and a command processing unit 160. The portable terminal according to the present invention corresponds to a mobile communication terminal as well as a portable multimedia player (PMP), a personal digital assistant (PDA), a play station portable (PSP) and a portable broadcast receiver capable of internet.

무선 통신부(110)는 안테나(111)를 통해 무선으로 신호를 송수신한다. The wireless communication unit 110 transmits and receives signals wirelessly through the antenna 111.

터치스크린부(120)는 사용자의 손 또는 터치 펜이 접촉되는 위치 및 움직임을 검출하는데, 이를 위해 터치패널(121)과, 위치 검출부(123) 및 디스플레이부(125)를 포함한다. The touch screen unit 120 detects a position and a movement of a user's hand or touch pen. The touch screen unit 120 includes a touch panel 121, a position detector 123, and a display unit 125.

다시 말해, 터치스크린부(120)는 디스플레이부(125)에 터치패널(121)이 장착되어 각종 메뉴를 화면에 표시하고, 화면에 접촉이 발생될 경우에 위치 검출부(123)를 통해 접촉이 발생된 위치의 좌표 정보를 검출하여 출력한다. 상기 터치스크린부(120)의 터치패널(121)은 저항 방식, 정전용량 방식 또는 적외선 방식으로 구현될 수 있다. In other words, the touch screen unit 120 is equipped with a touch panel 121 on the display unit 125 to display various menus on the screen, and when a touch occurs on the screen, a touch occurs through the position detector 123. Detect and output the coordinate information of the position. The touch panel 121 of the touch screen unit 120 may be implemented in a resistive method, a capacitive method, or an infrared method.

메뉴 생성부(130)는 제어메뉴 표시 명령이 입력될 경우, 제어메뉴를 생성한다. When the control menu display command is input, the menu generator 130 generates a control menu.

터치스크린 모드 제어부(150)는 웹 브라우저가 실행될 경우, 초기에는 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 설정하고, 제스처 인식 명령이 입 력되면 접촉에 의한 제스처를 인식할 수 있는 제스처 인식 모드로 설정한다. 이를 위해, 터치스크린 모드 제어부(150)는 미리 정의된 접촉에 의한 제스처와 그에 대응되는 제어명령을 저장하는 저장부(151)를 더 포함한다. When the web browser is executed, the touch screen mode controller 150 may initially set the screen control mode to move the screen up, down, left, and right, and when the gesture recognition command is input, the gesture recognition mode capable of recognizing a gesture by contact. Set to. To this end, the touch screen mode controller 150 further includes a storage unit 151 for storing a gesture by a predefined contact and a control command corresponding thereto.

도 2 및 도 3을 참조하여 설명하면, 상기 화면 제어 모드에서 제어메뉴(210)가 표시된 경우, 도 2에 도시된 바와 같이, 터치스크린 화면(200)은 일반적인 휴대용 단말기와 동일하게 되고, 상기 제스처 인식 모드로 설정될 경우, 터치스크린 화면(300)은, 도 3에 도시된 바와 같다. 2 and 3, when the control menu 210 is displayed in the screen control mode, as shown in FIG. 2, the touch screen screen 200 becomes the same as a general portable terminal, and the gesture is performed. When set to the recognition mode, the touch screen screen 300 is as shown in FIG. 3.

보다 상세하게, 터치스크린 모드 제어부(150)는 웹 브라우저가 실행되고, 제스처 인식 명령이 입력되면 제스처 인식 모드로 설정하여 터치스크린부(120)를 통해 입력되는 제스처를 인식하고, 상기 제스처에 해당하는 제어명령을 생성한다. In more detail, when the web browser is executed and a gesture recognition command is input, the touch screen mode controller 150 recognizes a gesture input through the touch screen unit 120 by setting the gesture recognition mode and corresponding to the gesture. Create a control command.

이때, 터치스크린 모드 제어부(150)는 제스처 인식 명령에 따라 제스처 인식 모드로 설정하여 사용자로부터 제스처를 입력받아 제어명령을 생성한 후에는 초기 모드인 화면 제어 모드로 재설정하는 것을 특징으로 한다. 이를 통해, 화면 제어 모드에서의 접촉에 의한 제스처와 제스처 인식 모드에서의 접촉에 의한 제스처를 구분할 수 있게 된다. 즉, 동일한 제스처라도 화면 제어 모드에서의 제스처와 제스처 인식 모드에서의 제스처는 다른 제어명령을 생성하게 된다.In this case, the touch screen mode controller 150 may be set to the gesture recognition mode according to the gesture recognition command, and after receiving a gesture from the user to generate a control command, the touch screen mode controller 150 may reset the screen control mode to the initial mode. Through this, the gesture by the touch in the screen control mode and the gesture by the touch in the gesture recognition mode can be distinguished. That is, even in the same gesture, the gesture in the screen control mode and the gesture in the gesture recognition mode generate different control commands.

또한, 터치스크린 모드 제어부(150)는 웹 브라우저가 실행되고, 초기 모드인 화면 제어 모드에서 제어메뉴 표시 명령이 입력되면 상기 메뉴 생성부(130)를 제어하여 터치스크린부(120)에 웹 브라우저를 제어할 수 있는 하나 이상의 제어메뉴가 표시되도록 하고, 상기 제어메뉴 중 어느 하나가 선택되면, 그에 해당하는 제어명 령을 생성한다. In addition, the touch screen mode controller 150 controls the menu generator 130 when the web browser is executed and a control menu display command is input in the screen control mode, which is the initial mode, to control the web browser on the touch screen 120. One or more control menus that can be controlled are displayed, and when one of the control menus is selected, a corresponding control command is generated.

상기 제스처 인식 명령과 제어메뉴 표시 명령은 미리 정의된 접촉에 의해 입력되거나, 또는 휴대용 단말기에 구비된 별도의 키 버튼(미도시)을 통해 입력될 수 있다. 예를 들어, 제스처 인식 명령은 사용자가 손 또는 터치펜을 이용하여 터치스크린을 한 번 또는 연속으로 두 번 선택할 경우에 입력되도록 설정할 수 있다. The gesture recognition command and the control menu display command may be input by a predefined contact or may be input through a separate key button (not shown) provided in the portable terminal. For example, the gesture recognition command may be set to be input when the user selects the touch screen once or twice in succession using a hand or a touch pen.

상기 제스처 인식 모드에서 생성되는 제어명령과 화면 제어 모드에서 제어메뉴를 통해 생성되는 제어명령은 뒤로 가기, 앞으로 가기, 창 닫기, 새로 고침, 다음 탭 보기 및 이전 탭 보기 중 하나 이상을 포함한다. 이때, 제스처 인식 모드는 상기 저장부(151)에 저장된 하나 이상의 제스처와 그에 해당하는 제어명령을 설명하는 제스처 도움말 보기 제어명령을 더 포함한다. The control command generated in the gesture recognition mode and the control command generated through the control menu in the screen control mode may include at least one of a back, forward, close window, refresh, next tab view, and previous tab view. In this case, the gesture recognition mode further includes a gesture help view control command for explaining one or more gestures stored in the storage unit 151 and a control command corresponding thereto.

한편, 터치스크린 모드 제어부(150)는 상기 터치스크린부(120)에서 검출된 접촉의 위치와 움직임을 통해 제스처를 인식할 수 없을 경우, 상기 메뉴 생성부(120)를 제어하여 재입력을 요청하는 메시지와 제스처 도움말 보기를 선택할 수 있는 메뉴가 터치스크린부(120)에 표시되도록 한다. If the touch screen mode controller 150 cannot recognize a gesture through the position and movement of the contact detected by the touch screen 120, the touch screen mode controller 150 controls the menu generator 120 to request re-entry. A menu for selecting a message and a gesture help view may be displayed on the touch screen 120.

명령 처리부(160)는 상기 각 부를 제어하며, 휴대용 단말기로 입력되는 각종 명령이 수행되도록 처리하고, 특히, 상기 터치스크린 모드 제어부(150)에서 생성된 제어명령이 수행되도록 처리한다.The command processor 160 controls each unit to process various commands input to the portable terminal, and in particular, to process the control commands generated by the touch screen mode controller 150.

또한, 본 발명에 따른 휴대용 단말기는 제스처 설정부를 더 포함할 수 있다. 이에 따라, 제스처 설정부(미도시)는 기 정의된 제스처를 변경설정할 수 있으며, 특정 제어명령에 대응되는 새로운 신규 제스처를 터치스크린부(120)를 통해 입력받아 설정할 수 있다. In addition, the portable terminal according to the present invention may further include a gesture setting unit. Accordingly, the gesture setting unit (not shown) may change and set a predefined gesture, and receive and set a new new gesture corresponding to a specific control command through the touch screen unit 120.

도 4는 본 발명에 따른 휴대용 단말기의 사용자 인터페이스 방법을 보여주는 흐름도이다.4 is a flowchart illustrating a user interface method of a portable terminal according to the present invention.

휴대용 단말기는 웹 브라우저가 실행되고(S401), 제스처 인식 명령이 입력될 경우(S403), 제스처 인식 모드로 설정한다(S405). When the web browser is executed (S401) and a gesture recognition command is input (S403), the portable terminal sets the gesture recognition mode (S405).

그리고, 휴대용 단말기는 터치스크린에서 검출된 접촉의 위치와 움직임을 통해 제스처를 판단한다(S407, S409).In operation S407 and S409, the portable terminal determines the gesture based on the position and movement of the contact detected on the touch screen.

상기 제스처를 도 5를 참조하여 설명하면, 다음 웹 페이지를 표시하는 제어명령에 해당하는 '앞으로 가기'(10) 제스처, 이전 웹 페이지를 표시하는 제어명령에 해당하는 '뒤로 가기'(20) 제스처, 터치스크린에 표시된 웹 페이지를 종료하는 제어명령에 해당하는 '창 닫기(30)' 제스처, 현재 웹 페이지를 재실행하여 표시하는 제어명령에 해당하는 '새로 고침(40)' 제스처, 탭으로 분류된 웹 페이지 중 현재 선택된 웹 페이지의 다음 탭에 해당하는 웹 페이지를 표시하는 제어명령에 해당하는 '다음 탭 보기'(50) 제스처 및 현재 선택된 웹 페이지의 이전 탭에 해당하는 웹 페이지를 표시하는 제어명령에 해당하는 '이전 탭 보기'(60) 제스처 중 하나 이상이 포함될 수 있다.The gesture is described with reference to FIG. 5, a 'forward' 10 gesture corresponding to a control command for displaying a next web page, and a 'back' 20 gesture for a control command for displaying a previous web page. , 'Close window 30' gesture corresponding to the control command to terminate the web page displayed on the touch screen, 'Refresh 40' gesture corresponding to the control command displayed by re-executing the current web page, and classified into tabs. 'View Next Tab' (50) gesture corresponding to the control command to display the web page corresponding to the next tab of the currently selected web page among the web pages, and control command to display the web page corresponding to the previous tab of the currently selected web page. One or more of the 'previous tap view' 60 gesture corresponding to the above may be included.

상기 제스처 판단결과, 도 6a에 도시된 바와 같이, 터치스크린의 소정 위치부터 일정치 오른쪽으로 이동되는 접촉이 발생된 경우, "앞으로 가기"(10) 제스처 로 인식하여 다음 웹 페이지를 표시하고(S411), 도 6b에 도시된 바와 같이, 소정 위치부터 일정치 왼쪽으로 이동되는 접촉이 발생된 경우, "뒤로 가기"(20) 제스처로 인식하여 이전 웹 페이지를 표시한다(S413). As a result of the gesture determination, as shown in FIG. 6A, when a contact is moved from the predetermined position of the touch screen to the right by a certain value, the next web page is displayed by recognizing it as a "go forward" 10 gesture (S411). 6B, when a contact is moved from the predetermined position to the left of the predetermined value, the previous web page is displayed by recognizing it as a "back" 20 gesture (S413).

또는, 소정 위치에서 일정치 아래쪽으로 이동되는 접촉이 발생된 경우, "창 닫기"(30) 제스처로 인식하여 화면에 표시된 웹 페이지를 종료하고(S415), 소정 위치에서 일정치 위쪽과 아래쪽으로 번갈아 이동되는 접촉이 발생된 경우, "새로 고침"(40) 제스처로 인식하여 현재 웹 페이지를 재실행하여 표시한다(S417). Alternatively, when a contact is moved downward at a predetermined position from a predetermined position, the gesture is recognized as a "close window" 30 gesture and the web page displayed on the screen is terminated (S415), and the predetermined position alternates upward and downward at a predetermined position. If a moving contact is generated, it is recognized as a "refresh" gesture 40 and reexecuts and displays the current web page (S417).

또는, 소정 위치부터 일정치 위쪽으로 이동된 후, 일정치 오른쪽으로 이동되는 접촉이 발생된 경우, "다음 탭 보기"(50) 제스처로 인식하여 다음 탭의 웹 페이지를 표시하고(S419), 소정 위치부터 일정치 위쪽으로 이동된 후, 일정치 왼쪽으로 이동되는 접촉이 발생된 경우, "이전 탭 보기"(60) 제스처로 인식하여 이전 탭의 웹 페이지를 표시한다(S421). Alternatively, if a contact is moved from the predetermined position to a certain value and then moved to the right of the predetermined value, it is recognized as a "view next tab" 50 gesture to display a web page of the next tab (S419). If a contact is moved from the position to a predetermined value and then moved to the left of the predetermined value, it is recognized as the "view previous tab" 60 and displays the web page of the previous tab (S421).

그 후, 휴대용 단말기는 상기 제스처 인식 모드에서 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 설정한다(S423). 즉, 제스처 인식 모드로 설정하여 입력된 하나의 제스처에 해당하는 제어명령을 수행한 후에는 초기 모드인 화면 제어 모드로 설정하여 웹 브라우저 내에서 화면을 상하좌우로 이동시키는 제스처와 웹 브라우저를 제어시키는 제스처가 구별되도록 한다. Thereafter, the portable terminal sets the screen control mode to move the screen up, down, left and right in the gesture recognition mode (S423). That is, after performing a control command corresponding to one input gesture by setting to the gesture recognition mode, the screen control mode, which is the initial mode, is set to control the gesture of moving the screen up, down, left, and right in the web browser and the web browser. Make gestures distinct.

한편, 상기 화면 제어 모드에서 제어메뉴 표시 명령이 입력되면, 휴대용 단말기는 웹 브라우저를 제어할 수 있는 하나 이상의 제어메뉴를 표시하고, 표시된 제어메뉴 중 하나가 선택되면, 그에 해당되는 제어명령을 수행한다. Meanwhile, when a control menu display command is input in the screen control mode, the portable terminal displays one or more control menus for controlling a web browser, and when one of the displayed control menus is selected, performs a corresponding control command. .

이상에서는 본 발명을 특정의 바람직한 실시 예에 관련하여 도시하고 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 상술한 실시 예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양하게 개조 및 변화될 수 있다는 것을 용이하게 알 수 있다. 그러므로 본 발명의 권리범위는 설명된 실시 예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.While the invention has been shown and described with reference to certain preferred embodiments, it will be apparent to those skilled in the art that various modifications may be made without departing from the scope of the invention with respect to the embodiments described above. And can be varied. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined by the claims below and equivalents thereof.

도 1은 본 발명에 따른 휴대용 단말기의 사용자 인터페이스 장치를 보여주는 블럭도,1 is a block diagram showing a user interface device of a portable terminal according to the present invention;

도 2는 일반적인 휴대용 단말기의 터치스크린 화면을 보여주는 도면,2 is a view showing a touch screen screen of a typical portable terminal,

도 3은 본 발명에 따른 휴대용 단말기의 터치스크린 화면을 보여주는 도면,3 is a view showing a touch screen screen of the portable terminal according to the present invention;

도 4는 본 발명에 따른 휴대용 단말기의 사용자 인터페이스 방법을 보여주는 흐름도, 4 is a flowchart illustrating a user interface method of a portable terminal according to the present invention;

도 5는 본 발명에 따른 제스처를 일 예를 들어 보여주는 도면, 및 5 shows an example of a gesture according to the invention, and

도 6a 및 도 6b는 본 발명에 따른 휴대용 단말기에서의 제스처를 일 예를 들어 보여주는 도면이다. 6A and 6B illustrate an example of a gesture in a portable terminal according to the present invention.

* 도면의 주요 부호에 대한 설명* Description of the main symbols in the drawing

120 : 터치스크린부 150 : 터치스크린 모드 제어부120: touch screen unit 150: touch screen mode control unit

Claims (13)

접촉의 위치 및 움직임을 검출하는 터치스크린부; 및 A touch screen unit for detecting a position and a movement of the contact; And 제스처 인식 명령이 입력될 경우, 제스처 인식 모드로 설정하여 상기 접촉의 위치 및 움직임을 통해 제스처를 인식하고, 상기 제스처에 해당되는 제어명령을 생성한 후에 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 자동으로 설정하는 터치스크린 모드 제어부;를 포함하고, When a gesture recognition command is input, the user enters a gesture recognition mode to recognize a gesture through the position and movement of the contact, and generates a control command corresponding to the gesture, and then moves the screen up, down, left, or right. And a touch screen mode controller for automatically setting the 상기 제어명령은 뒤로 가기, 앞으로 가기, 웹 브라우저 닫기, 새로 고침, 다음 탭 보기, 이전 탭 보기 및 제스처 도움말 보기 중 하나 이상을 포함하는 휴대용 단말기.The control command may include at least one of a back, forward, close web browser, refresh, next tab view, previous tab view, and gesture help view. 제 1항에 있어서,The method of claim 1, 상기 제스처 인식 명령은 The gesture recognition command is 웹 브라우저가 실행된 상태에서 입력되는 것을 특징으로 하는 휴대용 단말기.A portable terminal, characterized in that being input while the web browser is running. 삭제delete 제 1항에 있어서,The method of claim 1, 상기 제어명령에 대응되는 제어메뉴를 생성하는 메뉴 생성부를 더 포함하고, Further comprising a menu generating unit for generating a control menu corresponding to the control command, 상기 터치스크린 모드 제어부는The touch screen mode control unit 제어메뉴 표시 명령이 입력될 경우, 상기 제어메뉴가 상기 터치스크린부에 표시되도록 상기 메뉴 생성부를 제어하는 것을 특징으로 하는 휴대용 단말기.When the control menu display command is input, the portable terminal, characterized in that for controlling the menu generating unit so that the control menu is displayed on the touch screen. 제 4항에 있어서, The method of claim 4, wherein 상기 터치스크린 모드 제어부는 The touch screen mode control unit 상기 접촉의 위치 및 움직임을 통해 상기 제스처를 인식하지 못할 경우, 재입력을 요청하는 메시지와 제스처 도움말 보기를 선택할 수 있는 메뉴가 상기 터치스크린부에 표시되도록 상기 메뉴 생성부를 제어하는 것을 특징으로 하는 휴대용 단말기.When the gesture is not recognized through the location and movement of the contact, the menu generating unit is controlled to display a message for requesting re-entry and a menu for selecting a gesture help view on the touch screen. terminal. 삭제delete 제 1항에 있어서,The method of claim 1, 기 설정된 상기 제스처를 변경 설정하거나 또는 새로운 신규 제스처를 설정할 수 있는 제스처 설정부를 더 포함하는 것을 특징으로 하는 휴대용 단말기.And a gesture setting unit configured to change the preset gesture or to set a new gesture. 제스처 인식 명령이 입력될 경우, 제스처 인식 모드로 설정하는 제1단계; A first step of setting a gesture recognition mode when a gesture recognition command is input; 터치스크린에서 검출되는 접촉의 위치와 움직임을 통해 제스처를 인식하여 상기 제스처에 해당하는 제어명령을 수행하는 제2단계; 및 A second step of recognizing a gesture through a position and a movement of a touch detected on a touch screen and performing a control command corresponding to the gesture; And 상기 제스처 인식 모드에서 화면을 상하좌우로 이동할 수 있는 화면 제어 모드로 자동으로 설정하는 제3단계;를 포함하고, And automatically setting the screen control mode to move the screen up, down, left, and right in the gesture recognition mode. 상기 제어명령은 뒤로 가기, 앞으로 가기, 웹 브라우저 닫기, 새로 고침, 다음 탭 보기, 이전 탭 보기 및 제스처 도움말 보기 중 하나 이상을 포함하는 휴대용 단말기의 사용자 인터페이스 방법.The control command may include at least one of a back, forward, close web browser, refresh, next tab view, previous tab view, and gesture help view. 제 8항에 있어서,The method of claim 8, 상기 접촉의 위치와 움직임을 통해 상기 제스처를 인식하지 못할 경우, 재입력을 요청하는 메시지와 제스처 도움말 보기를 선택할 수 있는 메뉴를 표시하는 단계를 더 포함하는 것을 특징으로 하는 휴대용 단말기의 사용자 인터페이스 방법.If the gesture is not recognized through the position and movement of the contact, displaying a message for requesting re-entry and a menu for selecting a gesture help view. 제 8항에 있어서,The method of claim 8, 상기 제 1단계 전에, Before the first step, 웹 브라우저가 실행되는 단계를 더 포함하는 것을 특징으로 하는 휴대용 단말기의 사용자 인터페이스 방법.The user interface method of a portable terminal, further comprising the step of executing a web browser. 제 10항에 있어서, The method of claim 10, 상기 제1단계에서, In the first step, 제어메뉴 표시 명령이 입력될 경우, 상기 웹 브라우저를 제어할 수 있는 하나 이상의 제어메뉴를 표시하는 단계를 더 포함하는 것을 특징으로 하는 휴대용 단말기의 사용자 인터페이스 방법.And displaying one or more control menus capable of controlling the web browser when a control menu display command is input. 삭제delete 삭제delete
KR1020080064457A 2008-07-03 2008-07-03 Portable terminal and user interface method thereof KR100984826B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080064457A KR100984826B1 (en) 2008-07-03 2008-07-03 Portable terminal and user interface method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080064457A KR100984826B1 (en) 2008-07-03 2008-07-03 Portable terminal and user interface method thereof

Publications (2)

Publication Number Publication Date
KR20100004342A KR20100004342A (en) 2010-01-13
KR100984826B1 true KR100984826B1 (en) 2010-10-20

Family

ID=41813924

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080064457A KR100984826B1 (en) 2008-07-03 2008-07-03 Portable terminal and user interface method thereof

Country Status (1)

Country Link
KR (1) KR100984826B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101355825B1 (en) * 2012-11-12 2014-01-28 에프에이리눅스 주식회사 Touch control device and method of display unit that can perform special functions through touch

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101810884B1 (en) 2011-06-07 2017-12-20 삼성전자주식회사 Apparatus and method for providing web browser interface using gesture in device
WO2014107626A1 (en) * 2013-01-03 2014-07-10 Brian Moore Systems and methods for advertising
US20140188606A1 (en) 2013-01-03 2014-07-03 Brian Moore Systems and methods for advertising on virtual keyboards

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070038643A (en) * 2005-10-06 2007-04-11 삼성전자주식회사 Method for batch processing of command using pattern recognition of panel input in portable communication terminal
KR20070039613A (en) * 2004-07-30 2007-04-12 애플 컴퓨터, 인크. Gestures for touch sensitive input devices
JP2007233649A (en) * 2006-02-28 2007-09-13 Ochanomizu Univ Information appliance and processing switch program when using tablet
KR20080029502A (en) * 2006-09-29 2008-04-03 엘지전자 주식회사 Apparatus of coordinates cognition and method for generation of key code on the apparatus thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070039613A (en) * 2004-07-30 2007-04-12 애플 컴퓨터, 인크. Gestures for touch sensitive input devices
KR20070038643A (en) * 2005-10-06 2007-04-11 삼성전자주식회사 Method for batch processing of command using pattern recognition of panel input in portable communication terminal
JP2007233649A (en) * 2006-02-28 2007-09-13 Ochanomizu Univ Information appliance and processing switch program when using tablet
KR20080029502A (en) * 2006-09-29 2008-04-03 엘지전자 주식회사 Apparatus of coordinates cognition and method for generation of key code on the apparatus thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101355825B1 (en) * 2012-11-12 2014-01-28 에프에이리눅스 주식회사 Touch control device and method of display unit that can perform special functions through touch

Also Published As

Publication number Publication date
KR20100004342A (en) 2010-01-13

Similar Documents

Publication Publication Date Title
US10459626B2 (en) Text input method in touch screen terminal and apparatus therefor
AU2014200250B2 (en) Method for providing haptic effect in portable terminal, machine-readable storage medium, and portable terminal
JP4857385B2 (en) Electronic pen system
JP4913873B2 (en) Electronic pen system and electronic pen
US20160170703A1 (en) System and method for linking and controlling terminals
US9632642B2 (en) Terminal apparatus and associated methodology for automated scroll based on moving speed
US20190196697A9 (en) Method and apparatus for designating entire area using partial area touch in a portable equipment
KR20180134668A (en) Mobile terminal and method for controlling the same
KR20130024220A (en) Input device and method on terminal equipment having a touch module
CN108920066B (en) Touch screen sliding adjustment method and device and touch equipment
CN110058755A (en) A kind of method, apparatus, terminal device and the storage medium of PowerPoint interaction
US20100194702A1 (en) Signal processing apparatus, signal processing method and selection method of uer interface icon for multi-touch panel
JP2015007949A (en) Display device, display controlling method, and computer program
WO2014040469A1 (en) Text selection method and device based on touchscreen type mobile terminal
US20140253815A1 (en) Input apparatus, display apparatus, and control methods thereof
CN104780409B (en) A kind of terminal remote control method and terminal remote control system
JP2011145762A (en) Electronic pen system
US20120137258A1 (en) Mobile electronic device, screen control method, and storage medium storing screen control program
US10159046B2 (en) Mobile terminal device
KR100984826B1 (en) Portable terminal and user interface method thereof
US20130234997A1 (en) Input processing apparatus, input processing program, and input processing method
KR20150051409A (en) Electronic device and method for executing application thereof
US20160170596A1 (en) Image display apparatus, image display method, and image-display program product
US20160202867A1 (en) Electronic apparatus, recording medium and operating method of electronic apparatus
JP6411067B2 (en) Information processing apparatus and input method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130820

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160817

Year of fee payment: 9