WO2015030313A1 - Method for executing function using gesture, portable electronic apparatus therefor, and computer-readable recording medium having program recorded thereon therefor - Google Patents

Method for executing function using gesture, portable electronic apparatus therefor, and computer-readable recording medium having program recorded thereon therefor Download PDF

Info

Publication number
WO2015030313A1
WO2015030313A1 PCT/KR2013/011525 KR2013011525W WO2015030313A1 WO 2015030313 A1 WO2015030313 A1 WO 2015030313A1 KR 2013011525 W KR2013011525 W KR 2013011525W WO 2015030313 A1 WO2015030313 A1 WO 2015030313A1
Authority
WO
WIPO (PCT)
Prior art keywords
function
gesture
icon
unit
screen
Prior art date
Application number
PCT/KR2013/011525
Other languages
French (fr)
Korean (ko)
Inventor
유제민
Original Assignee
Ryu Jea-Min
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ryu Jea-Min filed Critical Ryu Jea-Min
Publication of WO2015030313A1 publication Critical patent/WO2015030313A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Definitions

  • the present invention relates to a method of executing a function using a gesture and a portable electronic device for the same. More particularly, a guide icon providing a guide for a gesture is displayed on one side of a screen, and a gesture input from a user is detected to detect a gesture. A method and a portable electronic device for executing a function corresponding to an input direction.
  • Portable electronic devices such as smartphones and tablets provide a touch based interface.
  • a touch-based interface a user can input a certain gesture on the touch screen without using an additional input device such as a keyboard to use the display device as an input device.
  • a user needs to take a tap gesture to select an application icon to execute a specific application. If the application icon is located on the home screen (the base screen or desktop of the portable electronic device), the application can be run by selecting the icon directly from the home screen, but if the icon is not on the home screen, the menu on the home screen After selecting a button to bring up a list of applications, you need to select the icon for that application. In this case, two gestures are required: menu button selection and application icon selection.
  • An object of the present invention is to enable the execution of various functions through a gesture, and to provide an intuitive guide to a gesture by displaying a gesture guide icon.
  • an icon generator for generating a guide icon including a nine-divided area and individual function icons displayed in the first to eighth areas except for the central area of the nine-divided area;
  • a function setting unit for setting first to eighth vectors having direction components from the first to eighth regions to the central region, and corresponding functions of the individual function icons to the first to eighth vectors;
  • a display unit which displays the guide icon on a display screen;
  • a sensing unit configured to receive a gesture of a user and detect a gesture direction component;
  • a vector matching unit which determines a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors;
  • a function execution unit that executes the function corresponding to the determined vector;
  • a controller for controlling the icon generating unit, the function setting unit, the display unit, the sensing unit, the vector matching unit, and the function execution unit;
  • a memory that is executed by the controller and stores a program for operating the icon generator, the function setting unit, the display unit, the sensing unit
  • the function corresponding to the first to eighth vectors may be a screen switch function, a specific application execution function, or a switch to another guide icon.
  • the function corresponding to the first to eighth vectors is a switching function to the first to eighth home screens.
  • the function corresponding to the first to eighth vectors may be a specific application execution function.
  • the portable electronic device when the guide icon is tapped, an enlarged guide icon for editing each individual function icon of the guide icon is displayed, and each of the first to eighth areas is displayed.
  • the individual function icon displayed on the screen may be changed in position and function according to a gesture of a user inputted on the enlarged guide icon.
  • the 9-divided area may be a region obtained by dividing the guide icon into a 3 by 3 matrix shape, and the center area may be an area corresponding to 2 rows and 2 columns of the matrix.
  • the display unit may display the guide icon on the display screen regardless of a home screen or an application execution screen.
  • the display unit may display the guide icon on the display screen when the home screen is displayed.
  • the gesture direction component detected by the sensing unit may be a direction component of a vector traveling from the start point to the end point of the gesture.
  • the sensing unit may be a tactile sensor or a proximity sensor.
  • the vector matching unit may determine a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
  • the method comprises: generating a guide icon including a nine-divided area and individual function icons displayed on the first to eighth areas except for the central area among the nine divided areas; Setting first to eighth vectors having direction components from the first to eighth regions to the central region, and mapping the functions of the individual function icons to the first to eighth vectors; Displaying the guide icon on a display screen; Detecting a gesture direction component by receiving a gesture of a user; Determining a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors; And there is provided a function execution method using a gesture comprising the step of executing the function corresponding to the determined vector.
  • the function corresponding to the first to eighth vectors may be a screen switching function, a specific application execution function, or a switch to another guide icon.
  • a function corresponding to the first to eighth vectors is a first to eighth home screen.
  • the function may correspond to the first to eighth vectors.
  • an enlarged guide icon for editing each individual function icon of the guide icon is displayed, and the first to eighth.
  • the individual function icons displayed in each area may be changed in position and function according to a gesture of a user input on the enlarged guide icon.
  • the 9-divided area may be an area obtained by dividing the guide icon into a 3 by 3 matrix shape, and the center area may be an area corresponding to 2 rows and 2 columns of the matrix. have.
  • the displaying of the guide icon on the display screen may display the guide icon on the display screen regardless of the home screen or the application execution screen.
  • the displaying of the guide icon on the display screen may be displayed on the display screen only when the guide icon is displayed on the home screen.
  • the detecting of the gesture direction component may detect a direction component of a vector traveling from the start point to the end point of the gesture.
  • the determining of the vector may determine a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
  • a computer-readable recording medium having recorded thereon a program for executing a method of executing a function using a gesture is provided.
  • the user can obtain information on a function executed according to the gesture type by referring to the gesture guide icon.
  • various functions can be executed by using a gesture outside the spatial limits of the screen.
  • FIG. 1 is a block diagram illustrating a configuration of a portable electronic device according to an embodiment of the present invention.
  • FIG. 2 is a flowchart illustrating a function execution method using a gesture according to an embodiment of the present invention.
  • FIG. 3 is a diagram illustrating a guide icon generated according to an embodiment of the present invention.
  • FIG. 4 is a diagram illustrating an example of direction vectors according to an embodiment of the present invention.
  • FIG. 5 is an example of a screen for executing an application by a gesture according to an embodiment of the present invention.
  • 6A and 6B illustrate an example of switching a screen by a gesture according to an embodiment of the present invention.
  • FIG. 7 is a diagram illustrating an example of switching a plurality of guide icons according to an embodiment of the present invention.
  • FIG. 8 is a screen illustrating changing a setting of a guide icon according to an embodiment of the present invention.
  • any part of the specification is to “include” any component, this means that it may further include other components, except to exclude other components unless otherwise stated.
  • the terms “... unit”, “module”, etc. described in the specification mean a unit for processing at least one function or operation, which may be implemented in hardware or software or a combination of hardware and software. .
  • a "gesture” refers to a gesture used by a user to control a portable electronic device.
  • the gestures described herein may include tap, touch and hold, double tap, drag, pan, flick, drag and drop.
  • Trob refers to an operation in which the user touches the screen very quickly using a finger or a touch stylus. That is, a time difference between the touch-in time point at which the finger or the touch tool touches the screen and the touch-out time point at which the finger or touch tool is dropped off the screen is very short.
  • Touch & hold refers to an operation in which a user touches a screen using a finger or a touch stylus and maintains a touch input for a threshold time or more. That is, this means that the time difference between the touch-in time and the touch-out time is more than the threshold time.
  • the feedback signal may be provided visually or acoustically when the touch input is maintained for a threshold time or more.
  • drag refers to an operation of moving a finger or a touch tool to another position on the screen while the user touches a finger or a touch tool on the screen and maintains a touch.
  • An object is moved or a panning operation to be described later is performed due to the dragging operation.
  • Panning refers to a case where a user performs a drag operation without selecting an object. Panning does not select a specific object, so instead of moving the object within the page, the page itself moves within the screen, or a group of objects moves within the page.
  • FIG. 1 is a block diagram illustrating a configuration of a portable electronic device according to an embodiment of the present invention.
  • the portable electronic device 100 may be implemented in various forms.
  • the portable electronic device 100 described herein may be a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), Navigation, tablet PC, etc.
  • PDA personal digital assistant
  • PMP portable multimedia player
  • the portable electronic device 100 may include an icon generator 110, a function setting unit 120, a display unit 130, a sensing unit 140, a vector matching unit 150, and a function execution.
  • the unit 160, the communication unit 170, the memory 180, and the controller 190 may be included.
  • not all illustrated components are essential components.
  • the portable electronic device 100 may be implemented by more components than the illustrated components, and the portable electronic device 100 may be implemented by fewer components.
  • the icon generator 110 generates a guide icon according to an embodiment of the present invention.
  • the user may take a gesture of dragging in a specific direction to execute a specific application or switch screens, and the guide icon serves to visually provide a guide on the direction of the drag gesture. .
  • the guide icon of the present invention has a nine-divided area, and individual function icons may be displayed in each of the first to eighth areas except for the center area among the nine divided areas.
  • the nine-divided region is a region divided into a shape of a 3x3 matrix, and the central region may be an area corresponding to two rows and two columns of the matrix.
  • each area may be set as the first to eighth areas in the clockwise direction.
  • the first to eighth regions are not necessarily limited thereto, and any region other than the central region may be set as the first region, and each region may be set as the second to eighth regions in a clockwise or counterclockwise direction. have.
  • FIG. 3 is a diagram illustrating a guide icon generated according to an embodiment of the present invention.
  • the portable electronic device 100 includes a display screen 101 and a home key 102.
  • the display screen 101 may display a general icon 103 and a guide icon 10 according to an embodiment of the present invention.
  • the user may load the home screen, which is a basic screen of the portable electronic device 100, on the display screen 101 by pressing the home key 102.
  • the guide icon 10 may have a circle shape, and the guide icon may include a nine-divided area in a 3 by 3 matrix shape.
  • first to eighth regions 12-1 to 12-8 except for the central region 11 may be set in a clockwise direction starting from the upper left region 12-1 with respect to the central region 11.
  • individual function icons 13-1 to 13-8 may be displayed.
  • the individual function icons 13-1 to 13-8 may display icons of individual applications such as a music player and a folder launcher.
  • a basic figure shape may be displayed in the central area 11 of the guide icon 10.
  • the shape of the guide icon 10 of the present invention may be variously adopted, and the individual function icons 13-1 to 13-8 in the guide icon 10 may also be variously changed.
  • the guide icon 10 may be displayed on any area of the display screen 101.
  • the guide icon 10 may always be displayed on the display screen 101, it may not be displayed in a specific situation according to the user's setting.
  • the function setting unit 120 sets the first to eighth vectors having the direction component that travels in the direction of the center area in the first to eighth areas of the guide icon generated by the icon generator 110.
  • the function setting unit 120 associates the functions of the individual function icons with the first to eighth vectors. For example, when the individual function icon 13-2 located in the second area 12-2 is an internet browser icon, the function setting unit 120 may display the central area 11 in the second area 12-2. After setting the second vector 14-2 proceeding to), the second vector 14-2 is made to correspond to the execution function of the Internet browser application.
  • the direction components of the first to eighth vectors are up to down and left to right. It may be one of a -down direction, a right-up left-down direction, a left-right direction, and an opposite direction of the above directions.
  • FIG. 4 is a diagram illustrating an example of direction vectors according to an embodiment of the present invention.
  • FIG. 4 is an example of the first to eighth vectors set when the guide icon has a nine-divided area as shown in FIG. 3 and the first to eighth areas are allocated in a clockwise direction.
  • the first vector 14-1 traveling from the first region 12-1 to the central region 11 is a vector having a direction component of ⁇ 45 °.
  • the second vector 14-2 traveling from the second region 12-2 to the central region 11 is a vector having a direction component of -90 °
  • the third to eighth vectors ( 14-3 to 14-8) may each be set to a vector having a direction component of an angle plus ⁇ 45 °.
  • the function setting unit 120 associates the above-described first to eighth vectors 14-1 to 14-8 with functions of the individual function icons displayed in each area of the guide icon.
  • the Internet browser application icon 13-2 is displayed in the second area 12-2.
  • the function corresponding to the second vector 14-2 may be execution of an internet browser application.
  • the display 130 displays and outputs information processed by the portable electronic device 100 on a display screen.
  • the display unit 130 serves to display the guide icon 10 generated by the icon generator 110.
  • the guide icon 10 of the present invention does not directly act as a menu button, but provides a guide for the gesture direction in the user's gesture.
  • the display 130 may display the guide icon 10 on the display screen 101 regardless of the home screen or the application execution screen. Alternatively, the guide icon may be displayed only when the display screen 101 displays the home screen.
  • the display unit 130 when the display unit 130 and the touch pad have a mutual layer structure and constitute a touch screen, the display unit 130 may be used as an input device in addition to the output device.
  • the display unit 130 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, or a three-dimensional display. 3D display).
  • two or more display units 130 may exist according to the implementation form of the portable electronic device 100.
  • the touch screen may be configured to detect not only the touch input position and the touched area but also the touch input pressure.
  • the touch screen may be configured to detect not only the real-touch but also a proximity touch.
  • the term "real-touch” refers to a case in which a pointer is actually touched on the screen
  • the term “proximity-touch” refers to a point in which the pointer actually touches the screen. Instead, it refers to the case where the screen approaches a distance from the screen.
  • a pointer refers to a tool for touching or proximity touching a specific portion of a displayed screen. Examples include stylus fans, fingers, and the like.
  • the sensing unit 140 receives a gesture of the user from the touch screen and detects a direction component of the user gesture.
  • the gesture of the user that the sensing unit 140 detects the direction component may be a drag gesture that makes a continuous touch from the start point to the end point.
  • the direction component of the gesture detected by the sensing unit 140 may be a direction component of the vector traveling from the start point to the end point of the gesture.
  • the sensing unit 140 of the present invention may be provided with various sensors for detecting a touch or a proximity touch of the touch screen.
  • An example of a sensor for sensing a touch of a touch screen is a tactile sensor.
  • the tactile sensor refers to a sensor that senses the contact of a specific object to the extent that a person feels or more.
  • the tactile sensor may sense various information such as the roughness of the contact surface, the rigidity of the contact object, the temperature of the contact point, and the like.
  • an example of a sensor for sensing a touch of a touch screen is a proximity sensor.
  • the proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without using a mechanical contact by using an electromagnetic force or infrared rays.
  • proximity sensors have a considerably longer life than contact sensors and their utilization is also quite high.
  • the proximity sensor examples include a transmission photoelectric sensor, a direct reflection photoelectric sensor, a mirror reflection photoelectric sensor, a high frequency oscillation proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor.
  • the vector matching unit 150 determines a vector having a direction component corresponding to the gesture direction component detected by the sensing unit 140 among the direction components of the first to eighth vectors set by the function setting unit 120.
  • the direction components of the first to eighth vectors may differ by 45 ° from each other.
  • the vector matching unit 150 detects which direction vector component the user's gesture is closest to. For example, in the example of FIG. 4, if the angle of the gesture direction component input by the user is located between -22.5 ° and -22.5 ° from the angle of the direction component of the second vector 14-2, The vector having the corresponding direction component may be determined as the second vector 14-2.
  • the function execution unit 160 executes a function of an individual function icon corresponding to the vector determined by the vector matching unit 150.
  • the function execution unit 160 may serve as a processor that finally determines and executes an execution function of the portable electronic device 100.
  • the function of the individual function icon 13-2 corresponding to the second vector 14-2 is 'execution of the Internet browser application', and the vector having the direction component corresponding to the gesture direction component is In the case of the second vector 14-2, the function execution unit 160 executes the Internet browser application.
  • the communicator 170 may include one or more components that allow communication between the portable electronic device 100 and the external device 200.
  • the communication unit 170 may include a broadcast receiving module, a mobile communication module, a wireless internet module, a wired internet module, a short range communication module, a location information module, and the like.
  • the broadcast reception module receives a broadcast signal and / or broadcast related information from an external broadcast management server through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the mobile communication module transmits and receives a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call call signal, or a text / multimedia message.
  • the wireless internet module refers to a module for wireless internet access.
  • the wireless internet module may be internal or external.
  • the wired Internet module means a module for wired Internet access.
  • the short range communication module refers to a module for short range communication.
  • Near field communication technology uses Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Wi-Fi Direct (WFD) Near Field Communication (NFC), etc. Can be.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee Wi-Fi Direct
  • NFC Near Field Communication
  • the location information module is a module for checking or obtaining the location of the portable electronic device 100.
  • One example is the Global Position System (GPS) module.
  • GPS Global Position System
  • the GPS module receives location information from a plurality of satellites.
  • the location information may include coordinate information represented by latitude and longitude.
  • the memory 180 may store a program for processing and controlling the controller 190, and for storing data input / output (eg, capture data, phonebook, message, still image, video, etc.). You can also perform a function.
  • data input / output eg, capture data, phonebook, message, still image, video, etc.
  • the memory 180 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM (RAM, Random
  • SRAM Static Random Access Memory
  • ROM Read-Only Memory
  • EEPROM Electrically Erasable Programmable Read-Only Memory
  • PROM Programmable Read-Only Memory
  • EEPROM Electrically Erasable Programmable Read-Only Memory
  • PROM Programmable Read-Only Memory
  • the portable electronic device 100 may operate a web storage that performs a storage function of the memory 180 on the Internet.
  • the controller 190 typically controls the overall operation of the portable electronic device 100.
  • the controller 190 performs control and processing related to gesture recognition, voice call, data communication, video call, and the like. That is, the controller 190 may include the icon generator 110, the function setting unit 120, the display unit 130, the sensing unit 140, the vector matching unit 150, the function execution unit 160, and the communication unit 170. ) And the memory 180 can be controlled overall.
  • the controller 190 may include a multimedia module for playing multimedia. The multimedia module may be implemented in the controller 190 or may be implemented separately from the controller 190.
  • the external device 200 refers to a device that can communicate with the portable electronic device 100.
  • the digital CE (Consumer Elctronics) device may include a digital television (DTV), an Internet Protocol Television (IPTV), a refrigerator having a display device, an air conditioner, a printer, and the like.
  • the external device 200 may include a server device (eg, a social networking service server).
  • a server device eg, a social networking service server.
  • FIG. 2 is a flowchart illustrating a method of executing a function by a gesture according to an embodiment of the present invention.
  • a guide icon including individual function icons displayed in each of the first to eighth regions except for the central region among the nine divided regions and the nine divided regions is generated (S1).
  • the generated guide icon is displayed on the display screen (S4).
  • the gesture direction component that receives the user's gesture and proceeds from the start point to the end point of the gesture input is detected (S5).
  • FIG. 5 is an example of a screen for executing an application by a gesture according to an embodiment of the present invention.
  • the user may obtain an intuitive recognition of what function can be executed according to the direction of the gesture through the guide icon 10 displayed in the upper left of FIG.
  • the user may execute a music application by inputting a gesture having a direction from the upper right to the lower left through the guide icon 10, and may execute an internet browser application by inputting a gesture having the direction from the top to the lower left. It can be recognized.
  • the user may input a gesture having a vector component moving from the upper right side to the left direction on the display screen 101 through a touch.
  • the sensing unit 140 detects a gesture direction component from the gesture input of the user, and the vector matching unit 150 performs a gesture among the direction components of the first to eighth vectors 14-1 to 14-8.
  • a vector having an aromatic component corresponding to the aromatic component is determined.
  • the sensing unit 140 detects a vector of the end point direction at the start point of the user gesture, and the vector matching unit 150 indicates that the third vector 14-3 is a vector corresponding to the gesture direction component. You can decide.
  • the function execution unit 160 is executed. Run the music playback application as shown in the right screen.
  • the user may execute various functions simply with a single gesture without a plurality of touches despite the limited display screen size.
  • 6A and 6B illustrate an example of switching a screen by a gesture according to an embodiment of the present invention.
  • the home screen of the present invention may have nine home screens 105, 105-1 to 105-8 arranged in a 3 by 3 matrix form.
  • the display screen 101 illustrated in FIG. 6A may be a screen of a full screen view of a home screen executed by a user using a double touch using two fingers to view a configuration of a home screen.
  • the home screen currently displayed on the display screen 101 may be displayed as the home screen 105 located at the center.
  • a plurality of home screens may be provided, but switching between home screens is possible only through left and right touches, so that the number of switching increases as the number of home screens increases. For example, in order to move from the first home screen to the fifth home screen, a drag gesture that moves left and right is required four times.
  • up to nine home screens can be extended, and moving from the current home screen to all other home screens is possible with a single touch.
  • FIG. 6B illustrates a method of switching a home screen through a gesture according to an embodiment of the present invention.
  • the left side displays the central home screen 105 on the display screen 101
  • the right side displays the home screen 105-1 on the upper left on the display screen 101. It is a state.
  • the guide icon 10 displays a rectangular screen shape in the shape of each individual function icon 13-1 to 13-8.
  • the function setting unit 120 switches to different home screens for each individual function icon 13-1 to 13-8 and each of the vectors 14-1 to 14-8.
  • Functions can be mapped.
  • the first vector 14-1 may correspond to a function of switching from the current home screen 105 to the home screen 105-1 on the upper left side.
  • the third vector 14-3 may correspond to a function of switching from the current home screen 105 to the home screen 105-3 in the upper right corner.
  • the user can see the shape of the individual function icon displayed on the guide icon 10 to obtain information that the home screen can be switched through the current gesture.
  • FIG. 6B when the home screen currently being shown is the center home screen 105 of FIG. 6A as shown in the left figure, the user moves to the home screen 105-1 at the upper left side based on the current home screen. To switch, a gesture may proceed from the upper left to the lower right as shown in FIG. 6B.
  • the direction component of the gesture proceeding from the upper left to the lower right corresponds to the direction component of the first vector 14-1 and the function setting unit 120.
  • a function of switching from the current home screen 105 to the home screen 105-1 on the upper left, which is set as a function corresponding to the first vector 14-1, may be executed as shown in the right figure.
  • a switching function from the current home screen 105 to the upper home screen 105-2 may be executed.
  • a screen switching effect such as roll-in and roll-up may be applied at the same time as the user's gesture to smooth the switching shape.
  • the individual function icons 13-1 to 13-8 of the guide icon 10 of the present invention can be freely changed by the user's setting.
  • the guide icon 10 of FIG. 5 and the guide icon 10 of FIG. 6A may be displayed by being switched or changed with each other by user setting.
  • the screen switching guide icon 10 and a function corresponding thereto are executed as shown in FIG. 6A, and when a menu screen or an application screen other than the home screen is displayed, FIG. 5.
  • An application execution guide icon 10 and a function corresponding thereto may be executed. That is, the user may switch the screen when the display screen 101 is in the state of the home screen, and execute another application in the case of the application screen, using the method of executing a function using the gesture gesture of the present invention.
  • Individual function icons located in the first to eighth areas 12-1 to 12-8 of the guide icon 10 may represent a switching function to another guide icon 10.
  • FIG. 7 is a diagram illustrating an example of switching a plurality of guide icons using a gesture according to an embodiment of the present invention.
  • a plurality of guide icons may exist.
  • the function setting unit 120 may set a function corresponding to the fifth vector 14-5 of the first guide icon 10-1 to the execution of the second guide icon 10-2. That is, when the first guide icon 10-1 is displayed, the user may execute the second guide icon 10-2 by performing a gesture in the direction of the fifth vector 14-5. In this case, the guide icon 10 displayed on the display screen 101 is changed from the first guide icon 10-1 to the second guide icon 10-2.
  • the function setting unit 120 sets the function corresponding to the first vector 14-1 of the second guide icon 10-2 to the execution of the first guide icon 10-1, and
  • the function corresponding to the seventh vector 14-7 can be set by execution of the third guide icon 10-3.
  • the user takes a gesture toward the first vector 14-1 to display the first guide icon 10-1 on the display screen 101, or the seventh.
  • the third guide icon 10-3 may be displayed by performing a gesture in the direction of the vector 14-7.
  • the function setting unit 120 may set a function corresponding to the third vector 14-3 of the third guide icon 10-3 to the execution of the second guide icon 10-2.
  • FIG. 8 is a screen illustrating changing a setting of a guide icon according to an embodiment of the present invention.
  • the user may tap the guide icon 10 to change positions and functions of individual function icons 13-1 to 13-8 of the guide icon 10.
  • the enlarged guide icon 10a is displayed as shown in the right figure of FIG. 8.
  • the user taps one of the individual function icons 13-1 to 13-8 or the first to eighth areas 12-1 to 12-8 in the enlarged guide icon 10a to set the function of each individual function icon.
  • Functions that can be applied to individual function icons include an application execution function and a screen switching function.
  • the shape of the individual function icon is also changed to the shape changed to the corresponding function.
  • the icon 13-3 currently located in the third area 12-3 is a music application icon, but the user taps the third area 12-3 to select a message application from the list that appears.
  • the function icon 13-3 may be changed to a message application icon.
  • the function corresponding to the third vector 14-3 is a message.
  • the user may touch and hold one of the individual function icons 13-1 to 13-8 for a predetermined time to change the position between the individual function icons 13-1 to 13-8. For example, when the icon 13-1 located in the first area 12-1 and the icon 13-2 located in the second area 12-2 are to be changed, the first area 12 is changed. -1) After holding the icon 13-1 positioned for a predetermined time or longer, drag the icon 13-1 to the second area 12-2 to drag and drop the position between the two icons. You can change it.
  • Method according to an embodiment of the present invention can be implemented in the form of program instructions that can be executed by various computer means may be recorded on a computer readable medium.
  • the computer readable medium may include program instructions, data files, data structures, etc. alone or in combination.
  • Program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks.
  • Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

A portable electronic apparatus according to an embodiment of the present invention comprises: an icon generating unit configured to generate guide icons including individual function icons displayed in a region divided into nine smaller regions and displayed in first to eighth regions among the nine smaller regions except for a central region; a function setting unit configured to set first to eighth vectors having directional components that are directed toward the central region from the first to eighth regions, and to match the functions of the individual function icons with the first to eighth vectors; a display unit configured to display the guide icons on a display screen; a sensing unit configured to receive input of a user gesture to detect a directional component of the gesture; a vector matching unit configured to determine, from among the directional components of the first to eighth vectors, a vector having a directional component that corresponds to the directional component of the gesture; a function executing unit configured to execute the function corresponding to the determined vector; a control unit configured to control the icon generating unit, the function setting unit, the display unit, the sensing unit, the vector matching unit and the function executing unit; and a memory configured to be executed by the control unit, and to store programs for operating the icon generating unit, the function setting unit, the display unit, the sensing unit, the vector matching unit and the function executing unit.

Description

제스처를 이용한 기능 실행 방법, 이를 위한 휴대용 전자 장치 및 제스처를 이용한 기능 실행 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독가능한 기록매체A computer-readable recording medium recording a method for executing a function using a gesture, a portable electronic device therefor, and a program for executing the method using the gesture.
본 발명은 제스처를 이용한 기능 실행 방법 및 이를 위한 휴대용 전자 장치에 관한 것으로, 보다 상세하게는 제스처에 대한 가이드를 제공하는 가이드 아이콘을 화면의 일측에 표시하고, 사용자로부터의 제스처 입력을 감지하여 제스처의 입력 방향에 대응하는 기능을 실행시키는 방법 및 휴대용 전자 장치에 관한 것이다.The present invention relates to a method of executing a function using a gesture and a portable electronic device for the same. More particularly, a guide icon providing a guide for a gesture is displayed on one side of a screen, and a gesture input from a user is detected to detect a gesture. A method and a portable electronic device for executing a function corresponding to an input direction.
스마트폰(smartphone) 및 타블릿(tablet)과 같은 휴대용 전자 장치는 터치 기반의 인터페이스를 제공한다. 터치 기반의 인터페이스에서, 사용자는 자판과 같은 추가적인 입력 장치 없이도 일정 제스처(gesture)를 터치 스크린 상에 입력하여 표시 장치를 입력 장치로서 사용할 수 있다.Portable electronic devices such as smartphones and tablets provide a touch based interface. In a touch-based interface, a user can input a certain gesture on the touch screen without using an additional input device such as a keyboard to use the display device as an input device.
근래의 휴대용 전자 장치가 제공하는 인터페이스 환경에서, 사용자는 특정 어플리케이션을 실행하기 위해 어플리케이션 아이콘을 선택하는 탭(tap) 제스처를 취할 필요가 있다. 어플리케이션 아이콘이 홈 화면(휴대용 전자 장치의 기본 화면 혹은 바탕 화면) 상에 위치한 경우라면 홈 화면에서 바로 아이콘을 선택하여 어플리케이션을 실행시킬 수 있지만, 아이콘이 홈 화면 상에 있지 않은 경우, 홈 화면의 메뉴 버튼을 선택하여 어플리케이션의 목록을 불러온 후, 해당 어플리케이션의 아이콘을 선택할 필요가 있다. 이 경우 메뉴 버튼 선택과 어플리케이션 아이콘 선택이라는 2번의 제스처가 필요하다.In an interface environment provided by modern portable electronic devices, a user needs to take a tap gesture to select an application icon to execute a specific application. If the application icon is located on the home screen (the base screen or desktop of the portable electronic device), the application can be run by selecting the icon directly from the home screen, but if the icon is not on the home screen, the menu on the home screen After selecting a button to bring up a list of applications, you need to select the icon for that application. In this case, two gestures are required: menu button selection and application icon selection.
이에, 어플리케이션의 빠른 실행을 위해 많은 어플리케이션 아이콘을 홈 화면에 위치시키는 방법이 있으나 과도하게 많은 아이콘이 홈 화면에 존재하면 화면의 간략성 및 아이콘의 인식성을 오히려 떨어뜨리는 문제점이 발생하였다. 또한, 하나의 홈 화면 내에 위치할 수 있는 아이콘의 수도 제한되어 있다.Thus, there is a method of placing many application icons on the home screen for quick execution of the application, but when too many icons exist on the home screen, a problem of reducing the simplicity of the screen and the recognition of the icons has occurred. In addition, the number of icons that can be located in one home screen is limited.
이와 유사하게, 하나의 어플리케이션을 실행하는 중간에 다른 어플리케이션을 실행하기 위해서는 홈 화면으로 돌아가기 위해 홈 버튼을 누른 후, 홈 화면의 메뉴 버튼을 선택하고, 메뉴 항목 중 어플리케이션의 버튼을 선택하는 총 3번의 제스처가 필요하였다.Similarly, to run another application in the middle of executing one application, press the home button to return to the home screen, select a menu button on the home screen, and select an application button among the menu items. Gestures were required.
본 발명은 제스처를 통해 다양한 기능의 실행을 가능하게 하고, 제스처 가이드 아이콘을 디스플레이하여 사용자에게 제스처에 대한 직관적 가이드를 제공하는 것을 일 목적으로 한다.An object of the present invention is to enable the execution of various functions through a gesture, and to provide an intuitive guide to a gesture by displaying a gesture guide icon.
본 발명의 일 실시예에 따르면, 9분할된 영역 및 상기 9분할된 영역 중 중앙 영역을 제외한 제1 내지 제8 영역에 표시된 개별 기능 아이콘을 포함하는 가이드 아이콘을 생성하는 아이콘 생성부; 상기 제1 내지 제8 영역에서 상기 중앙 영역으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정하고, 상기 제1 내지 제8 벡터에 상기 개별 기능 아이콘의 기능을 대응시키는 기능 설정부; 상기 가이드 아이콘을 디스플레이 화면에 표시하는 디스플레이부; 사용자의 제스처를 입력받아 제스처 방향 성분을 검출하는 센싱부; 상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정하는 벡터 매칭부; 상기 결정된 벡터에 대응하는 상기 기능을 실행하는 기능 실행부; 상기 아이콘 생성부, 상기 기능 설정부, 상기 디스플레이부, 상기 센싱부, 상기 벡터 매칭부 및 상기 기능 실행부를 제어하는 제어부; 및 상기 제어부에 의해 실행되고, 상기 아이콘 생성부, 상기 기능 설정부, 상기 디스플레이부, 상기 센싱부, 상기 벡터 매칭부 및 상기 기능 실행부를 동작시키는 프로그램이 저장되는 메모리를 포함하는 휴대용 전자 장치가 제공된다. According to an embodiment of the present invention, an icon generator for generating a guide icon including a nine-divided area and individual function icons displayed in the first to eighth areas except for the central area of the nine-divided area; A function setting unit for setting first to eighth vectors having direction components from the first to eighth regions to the central region, and corresponding functions of the individual function icons to the first to eighth vectors; A display unit which displays the guide icon on a display screen; A sensing unit configured to receive a gesture of a user and detect a gesture direction component; A vector matching unit which determines a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors; A function execution unit that executes the function corresponding to the determined vector; A controller for controlling the icon generating unit, the function setting unit, the display unit, the sensing unit, the vector matching unit, and the function execution unit; And a memory that is executed by the controller and stores a program for operating the icon generator, the function setting unit, the display unit, the sensing unit, the vector matching unit, and the function execution unit. do.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 제1 내지 제8 벡터에 대응하는 기능은 화면 전환 기능, 특정 어플리케이션 실행 기능 혹은 다른 가이드 아이콘으로 전환 기능일 수 있다. In the portable electronic device according to the present invention, the function corresponding to the first to eighth vectors may be a screen switch function, a specific application execution function, or a switch to another guide icon.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 디스플레이 화면에 홈 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 제 1 내지 제8 홈 화면으로의 전환 기능이고, 상기 디스플레이 화면에 홈 화면이 아닌 다른 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 특정 어플리케이션 실행 기능일 수 있다. In the portable electronic device according to the present invention, when the gesture is input while the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors is a switching function to the first to eighth home screens. When the gesture is input while a screen other than the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors may be a specific application execution function.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 가이드 아이콘을 탭(tap)하면, 상기 가이드 아이콘의 각 개별 기능 아이콘을 편집할 수 있는 확대된 가이드 아이콘이 디스플레이되고, 상기 제1 내지 제8 영역의 각각에 표시되는 상기 개별 기능 아이콘은 상기 확대된 가이드 아이콘 상에 입력되는 사용자의 제스처에 따라 위치 및 기능이 변경될 수 있다.In the portable electronic device according to the present invention, when the guide icon is tapped, an enlarged guide icon for editing each individual function icon of the guide icon is displayed, and each of the first to eighth areas is displayed. The individual function icon displayed on the screen may be changed in position and function according to a gesture of a user inputted on the enlarged guide icon.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 9분할된 영역은 상기 가이드 아이콘을 3 by 3 매트릭스 형상으로 분할한 영역이며, 상기 중앙 영역은 상기 매트릭스의 2행 2열에 해당하는 영역일 수 있다. In the portable electronic device according to the present invention, the 9-divided area may be a region obtained by dividing the guide icon into a 3 by 3 matrix shape, and the center area may be an area corresponding to 2 rows and 2 columns of the matrix.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 디스플레이부는 상기 가이드 아이콘을 홈 화면 내지 어플리케이션 실행화면에 상관 없이 상기 디스플레이 화면에 표시할 수 있다. In the portable electronic device according to the present invention, the display unit may display the guide icon on the display screen regardless of a home screen or an application execution screen.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 디스플레이부는 상기 가이드 아이콘을 홈 화면을 표시하고 있을 경우, 상기 디스플레이 화면에 표시할 수 있다. In the portable electronic device according to the present invention, the display unit may display the guide icon on the display screen when the home screen is displayed.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 센싱부가 검출하는 제스처 방향 성분은 상기 제스처의 시작점부터 끝점까지 진행하는 벡터의 방향 성분일 수 있다. In the portable electronic device according to the present invention, the gesture direction component detected by the sensing unit may be a direction component of a vector traveling from the start point to the end point of the gesture.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 센싱부는 촉각 센서 또는 근접 센서일 수 있다. In the portable electronic device according to the present invention, the sensing unit may be a tactile sensor or a proximity sensor.
본 발명에 따른 휴대용 전자 장치에 있어서, 상기 벡터 매칭부는 상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분과 가장 가까운 방향 성분을 갖는 벡터를 결정할 수 있다. In the portable electronic device according to the present invention, the vector matching unit may determine a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
본 발명의 다른 실시예에 따르면, 9분할된 영역 및 상기 9분할된 영역 중 중앙 영역을 제외한 제1 내지 제8 영역에 표시된 개별 기능 아이콘을 포함하는 가이드 아이콘을 생성하는 단계; 상기 제1 내지 제8 영역에서 상기 중앙 영역으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정하고, 상기 제1 내지 제8 벡터에 상기 개별 기능 아이콘의 기능을 대응시키는 단계; 상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계; 사용자의 제스처를 입력 받아 제스처 방향 성분을 검출하는 단계; 상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정하는 단계; 및 상기 결정된 벡터에 대응하는 상기 기능을 실행하는 단계를 포함하는 제스처를 이용한 기능 실행 방법이 제공된다.According to another embodiment of the present invention, the method comprises: generating a guide icon including a nine-divided area and individual function icons displayed on the first to eighth areas except for the central area among the nine divided areas; Setting first to eighth vectors having direction components from the first to eighth regions to the central region, and mapping the functions of the individual function icons to the first to eighth vectors; Displaying the guide icon on a display screen; Detecting a gesture direction component by receiving a gesture of a user; Determining a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors; And there is provided a function execution method using a gesture comprising the step of executing the function corresponding to the determined vector.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 제1 내지 제8 벡터에 대응하는 기능은 화면 전환 기능, 특정 어플리케이션 실행 기능 혹은 다른 가이드 아이콘으로 전환 기능일 수 있다. In the method for executing a function using a gesture according to the present invention, the function corresponding to the first to eighth vectors may be a screen switching function, a specific application execution function, or a switch to another guide icon.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 디스플레이 화면에 홈 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 제1 내지 제8 홈 화면으로의 전환 기능이고, 상기 디스플레이 화면에 홈 화면이 아닌 다른 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능일 수 있다. In the method for executing a function using a gesture according to the present invention, when the gesture is input while a home screen is displayed on the display screen, a function corresponding to the first to eighth vectors is a first to eighth home screen. When the gesture is input while a screen other than the home screen is displayed on the display screen, the function may correspond to the first to eighth vectors.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 가이드 아이콘을 탭(tap)하면, 상기 가이드 아이콘의 각 개별 기능 아이콘을 편집할 수 있는 확대된 가이드 아이콘이 디스플레이되고, 상기 제1 내지 제8 영역의 각각에 표시되는 상기 개별 기능 아이콘은 상기 확대된 가이드 아이콘 상에 입력되는 사용자의 제스처에 따라 위치 및 기능이 변경될 수 있다. In the method for executing a function using a gesture according to the present invention, when the guide icon is tapped, an enlarged guide icon for editing each individual function icon of the guide icon is displayed, and the first to eighth. The individual function icons displayed in each area may be changed in position and function according to a gesture of a user input on the enlarged guide icon.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 9분할된 영역은 상기 가이드 아이콘을 3 by 3 매트릭스 형상으로 분할한 영역이며, 상기 중앙 영역은 상기 매트릭스의 2행 2열에 해당하는 영역일 수 있다. In the method of executing a function using a gesture according to the present invention, the 9-divided area may be an area obtained by dividing the guide icon into a 3 by 3 matrix shape, and the center area may be an area corresponding to 2 rows and 2 columns of the matrix. have.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계는 상기 가이드 아이콘을 홈 화면 내지 어플리케이션 실행화면에 상관 없이 상기 디스플레이 화면에 표시할 수 있다. In the method for executing a function using a gesture according to the present invention, the displaying of the guide icon on the display screen may display the guide icon on the display screen regardless of the home screen or the application execution screen.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계는 상기 가이드 아이콘을 홈 화면을 표시하고 있을 경우에만, 상기 디스플레이 화면에 표시할 수 있다. In the method for executing a function using a gesture according to the present invention, the displaying of the guide icon on the display screen may be displayed on the display screen only when the guide icon is displayed on the home screen.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 제스처 방향 성분을 검출하는 단계는 상기 제스처의 시작점부터 끝점까지 진행하는 벡터의 방향 성분을 검출할 수 있다. In the method for executing a function using a gesture according to the present invention, the detecting of the gesture direction component may detect a direction component of a vector traveling from the start point to the end point of the gesture.
본 발명에 따른 제스처를 이용한 기능 실행 방법에 있어서, 상기 벡터를 결정하는 단계는 상기 제1내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분과 가장 가까운 방향 성분을 갖는 벡터를 결정할 수 있다. In the method for executing a function using a gesture according to the present invention, the determining of the vector may determine a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
본 발명의 또 다른 실시예에 따르면, 제스처를 이용한 기능 실행 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독가능한 기록매체가 제공된다. According to still another embodiment of the present invention, a computer-readable recording medium having recorded thereon a program for executing a method of executing a function using a gesture is provided.
본 발명에 의하면, 사용자는 제스처 가이드 아이콘을 참조하여 제스처 종류에 따라 실행되는 기능에 대한 정보를 얻을 수 있다.According to the present invention, the user can obtain information on a function executed according to the gesture type by referring to the gesture guide icon.
또한, 본 발명의 의하면 화면의 공간적 한계를 벗어나 다양한 기능을 제스처를 이용하여 실행할 수 있다.In addition, according to the present invention, various functions can be executed by using a gesture outside the spatial limits of the screen.
도 1은 본 발명의 일 실시예에 따른 휴대용 전자 장치의 구성을 설명하기 위한 블록도이다.1 is a block diagram illustrating a configuration of a portable electronic device according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 따른 제스처를 이용한 기능 실행 방법의 순서도를 나타낸 도면이다.2 is a flowchart illustrating a function execution method using a gesture according to an embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따라 생성된 가이드 아이콘을 나타낸 도면이다.3 is a diagram illustrating a guide icon generated according to an embodiment of the present invention.
도 4는 본 발명의 일 실시예에 따른 방향 벡터들의 일 예를 나타낸 도면이다.4 is a diagram illustrating an example of direction vectors according to an embodiment of the present invention.
도 5는 본 발명의 일 실시예에 따라 제스처로 어플리케이션을 실행시키는 화면의 일 예이다.5 is an example of a screen for executing an application by a gesture according to an embodiment of the present invention.
도 6a 및 도 6b는 본 발명의 일 실시예에 따라 제스처로 화면을 전환하는 경우의 일 예이다.6A and 6B illustrate an example of switching a screen by a gesture according to an embodiment of the present invention.
도 7은 본 발명의 일 실시예에 따라 복수의 가이드 아이콘을 전환하는 예시를 나타내는 도면이다.7 is a diagram illustrating an example of switching a plurality of guide icons according to an embodiment of the present invention.
도 8은 본 발명의 일 실시예에 따라 가이드 아이콘의 설정을 변경하는 것을 나타낸 화면이다.8 is a screen illustrating changing a setting of a guide icon according to an embodiment of the present invention.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.Terms used herein will be briefly described and the present invention will be described in detail.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다.The terms used in the present invention have been selected as widely used general terms as possible in consideration of the functions in the present invention, but this may vary according to the intention or precedent of the person skilled in the art, the emergence of new technologies and the like.
또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.In addition, in certain cases, there is also a term arbitrarily selected by the applicant, in which case the meaning will be described in detail in the description of the invention. Therefore, the terms used in the present invention should be defined based on the meanings of the terms and the contents throughout the present invention, rather than the names of the simple terms.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When any part of the specification is to "include" any component, this means that it may further include other components, except to exclude other components unless otherwise stated. In addition, the terms "... unit", "module", etc. described in the specification mean a unit for processing at least one function or operation, which may be implemented in hardware or software or a combination of hardware and software. .
명세서 전체에서 "제스처"란 사용자가 휴대용 전자 장치를 제어하기 위해 사용하는 손짓 등을 의미한다. 예를 들어, 본 명세서에서 기술되는 제스처에는 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭 등이 있을 수 있다.Throughout the specification, a "gesture" refers to a gesture used by a user to control a portable electronic device. For example, the gestures described herein may include tap, touch and hold, double tap, drag, pan, flick, drag and drop.
"탭"은 사용자가 손가락이나 터치 도구(stylus)를 이용하여 화면을 매우 빠르게 터치하는 동작을 나타낸다. 즉, 손가락이나 터치 도구가 화면에 닿는 시점인 터치-인 시점과 손가락이나 터치 도구가 화면에서 떨어지는 시점인 터치-아웃 시점 간의 시간 차이가 매우 짧은 경우를 의미한다."Tab" refers to an operation in which the user touches the screen very quickly using a finger or a touch stylus. That is, a time difference between the touch-in time point at which the finger or the touch tool touches the screen and the touch-out time point at which the finger or touch tool is dropped off the screen is very short.
"터치&홀드"는 사용자가 손가락이나 터치 도구(stylus)를 이용하여 화면을 터치한 후 임계 시간 이상 터치 입력을 유지하는 동작을 나타낸다. 즉, 터치-인 시점과 터치-아웃 시점 간의 시간 차이가 임계 시간 이상인 경우를 의미한다. 터치 입력이 탭인지 터치&홀드인지를 사용자에게 인식시키도록 하기 위하여 터치 입력이 임계 시간 이상 유지되면 시각적 또는 청각적으로 피드백 신호를 제공할 수도 있다."Touch & hold" refers to an operation in which a user touches a screen using a finger or a touch stylus and maintains a touch input for a threshold time or more. That is, this means that the time difference between the touch-in time and the touch-out time is more than the threshold time. In order to allow the user to recognize whether the touch input is a tap or a touch and hold, the feedback signal may be provided visually or acoustically when the touch input is maintained for a threshold time or more.
"드래그"는 사용자가 손가락이나 터치 도구를 화면에 터치한 후 터치를 유지한 상태에서 손가락이나 터치 도구를 화면 내의 다른 위치로 이동시키는 동작을 의미한다. 드래그 동작으로 인하여 오브젝트가 이동되거나 후술할 패닝 동작이 수행된다.The term "drag" refers to an operation of moving a finger or a touch tool to another position on the screen while the user touches a finger or a touch tool on the screen and maintains a touch. An object is moved or a panning operation to be described later is performed due to the dragging operation.
"패닝"은 사용자가 오브젝트를 선택하지 않고 드래그 동작을 수행하는 경우를 나타낸다. 패닝은 특정 오브젝트를 선택하지 않기 때문에 오브젝트가 페이지 내에서 이동되는 것이 아니라 페이지 자체가 화면 내에서 이동하거나, 오브젝트의 그룹이 페이지 내에서 이동한다."Panning" refers to a case where a user performs a drag operation without selecting an object. Panning does not select a specific object, so instead of moving the object within the page, the page itself moves within the screen, or a group of objects moves within the page.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. As those skilled in the art would realize, the described embodiments may be modified in various different ways, all without departing from the spirit or scope of the present invention. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.
도 1은 본 발명의 일 실시예에 따른 휴대용 전자 장치의 구성을 설명하기 위한 블록도이다.1 is a block diagram illustrating a configuration of a portable electronic device according to an embodiment of the present invention.
휴대용 전자 장치(100)는 다양한 형태로 구현될 수 있다. 예를 들어, 본 명세서에서 기술되는 휴대용 전자 장치(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, 태블릿 PC 등이 있다.The portable electronic device 100 may be implemented in various forms. For example, the portable electronic device 100 described herein may be a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), Navigation, tablet PC, etc.
도 1에 도시된 바와 같이, 휴대용 전자 장치(100)는 아이콘 생성부(110), 기능 설정부(120), 디스플레이부(130), 센싱부(140), 벡터 매칭부(150), 기능 실행부(160), 통신부(170), 메모리(180) 및 제어부(190)를 포함할 수 있다. 그러나 도시된 구성요소가 모두가 필수구성요소인 것은 아니다. 도시된 구성요소보다 많은 구성요소에 의해 휴대용 전자 장치(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 휴대용 전자 장치(100)가 구현될 수 있다.As illustrated in FIG. 1, the portable electronic device 100 may include an icon generator 110, a function setting unit 120, a display unit 130, a sensing unit 140, a vector matching unit 150, and a function execution. The unit 160, the communication unit 170, the memory 180, and the controller 190 may be included. However, not all illustrated components are essential components. The portable electronic device 100 may be implemented by more components than the illustrated components, and the portable electronic device 100 may be implemented by fewer components.
이하, 상기 구성요소들에 대해 차례로 살펴본다.Hereinafter, the components will be described in order.
아이콘 생성부(110)는 본 발명의 일 실시예에 따라 가이드 아이콘을 생성하는 역할을 한다. 본 발명의 일 실시예에 의하면, 사용자는 특정 방향으로 드래그하는 제스처를 취하여 특정 어플리케이션을 실행시키거나 화면을 전환할 수 있으며, 가이드 아이콘은 드래그 제스처의 방향에 대한 가이드를 시각적으로 제공하는 역할을 한다.The icon generator 110 generates a guide icon according to an embodiment of the present invention. According to an embodiment of the present invention, the user may take a gesture of dragging in a specific direction to execute a specific application or switch screens, and the guide icon serves to visually provide a guide on the direction of the drag gesture. .
본 발명의 가이드 아이콘은 9분할된 영역을 갖고, 9분할된 영역 중 중앙 영역을 제외한 나머지 제1 내지 제8 영역의 각각에 개별 기능 아이콘이 표시될 수 있다. 본 발명의 일 실시예에서, 9분할된 영역은 3x3 매트릭스의 형상으로 분할된 영역으로, 중앙 영역은 상기 매트릭스의 2행 2열에 해당하는 영역일 수 있다. 또한, 가이드 아이콘의 중앙 영역의 좌측 상단 영역에서 시작하여 시계 방향으로 각 영역을 제1 내지 제8 영역으로 설정할 수 있다. 제1 영역 내지 제 8영역은 반드시 이에 한정되지 않고, 중앙 영역을 제외한 나머지 영역들 중 임의의 영역을 제 1 영역으로 설정하고, 시계 또는 반시계 방향으로 각 영역을 제2 내지 8영역으로 설정할 수 있다. The guide icon of the present invention has a nine-divided area, and individual function icons may be displayed in each of the first to eighth areas except for the center area among the nine divided areas. In one embodiment of the present invention, the nine-divided region is a region divided into a shape of a 3x3 matrix, and the central region may be an area corresponding to two rows and two columns of the matrix. In addition, starting from the upper left area of the center area of the guide icon, each area may be set as the first to eighth areas in the clockwise direction. The first to eighth regions are not necessarily limited thereto, and any region other than the central region may be set as the first region, and each region may be set as the second to eighth regions in a clockwise or counterclockwise direction. have.
도 3은 본 발명의 일 실시예에 따라 생성된 가이드 아이콘을 나타낸 도면이다.3 is a diagram illustrating a guide icon generated according to an embodiment of the present invention.
도 3을 참조하면, 휴대용 전자 장치(100)는 디스플레이 화면(101) 및 홈 키(102)를 포함한다. 디스플레이 화면(101)에는 일반 아이콘(103) 및 본 발명의 일 실시예에 따른 가이드 아이콘(10)이 표시될 수 있다. 사용자는 홈 키(102)를 눌러 디스플레이 화면(101)에 휴대용 전자 장치(100)의 기본 화면인 홈 화면을 로딩할 수 있다. Referring to FIG. 3, the portable electronic device 100 includes a display screen 101 and a home key 102. The display screen 101 may display a general icon 103 and a guide icon 10 according to an embodiment of the present invention. The user may load the home screen, which is a basic screen of the portable electronic device 100, on the display screen 101 by pressing the home key 102.
도 3에 예시된 바와 같이, 본 발명의 일 실시예에 따른 가이드 아이콘(10)은 원(circle) 모양일 수 있으며, 가이드 아이콘은 3 by 3 매트릭스 모양으로 9분할한 영역을 포함할 수 있다. As illustrated in FIG. 3, the guide icon 10 according to an embodiment of the present invention may have a circle shape, and the guide icon may include a nine-divided area in a 3 by 3 matrix shape.
이때, 중앙 영역(11)을 제외한 나머지 제1 내지 제8 영역(12-1 내지 12-8)은 중앙 영역(11)을 기준으로 좌측 상단 영역(12-1)을 시작으로 시계 방향으로 설정될 수 있다. 제1 내지 제8 영역(12-1 내지 12-8)은 개별 기능 아이콘(13-1 내지 13-8)이 표시될 수 있다. 개별 기능 아이콘(13-1 내지 13-8)은 음악 재생기, 폴더 실행기와 같은 개별 어플리케이션의 아이콘이 표시될 수 있다. 가이드 아이콘(10)의 중앙 영역(11)에는 기본 도형 모양이 표시될 수 있다.In this case, the first to eighth regions 12-1 to 12-8 except for the central region 11 may be set in a clockwise direction starting from the upper left region 12-1 with respect to the central region 11. Can be. In the first to eighth areas 12-1 to 12-8, individual function icons 13-1 to 13-8 may be displayed. The individual function icons 13-1 to 13-8 may display icons of individual applications such as a music player and a folder launcher. A basic figure shape may be displayed in the central area 11 of the guide icon 10.
위와 같은 도 3의 예시 외에도, 본 발명의 가이드 아이콘(10)의 모양은 다양하게 채택될 수 있으며, 가이드 아이콘(10) 내의 개별 기능 아이콘(13-1 내지 13-8) 역시 다양하게 변경될 수 있음은 물론이다. 그리고, 가이드 아이콘(10)은 디스플레이 화면(101)의 임의의 영역에 표시될 수 있다. 또한, 가이드 아이콘(10)은 항상 디스플레이 화면(101)에 표시될 수 있지만, 사용자의 설정에 따라 특정 상황에서 표시되지 않을 수도 있다.In addition to the example of FIG. 3 as described above, the shape of the guide icon 10 of the present invention may be variously adopted, and the individual function icons 13-1 to 13-8 in the guide icon 10 may also be variously changed. Of course. The guide icon 10 may be displayed on any area of the display screen 101. In addition, although the guide icon 10 may always be displayed on the display screen 101, it may not be displayed in a specific situation according to the user's setting.
기능 설정부(120)는 아이콘 생성부(110)가 생성한 가이드 아이콘의 제1 내지 제8 영역에서 상기 중앙 영역의 방향으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정한다. 그리고, 기능 설정부(120)는 제1 내지 제8 벡터에 개별 기능 아이콘의 기능을 대응시킨다. 예를 들어, 제2 영역(12-2)에 위치하는 개별 기능 아이콘(13-2)이 인터넷 브라우저 아이콘인 경우, 기능 설정부(120)는 제2 영역(12-2)에서 중앙 영역(11)으로 진행하는 제2 벡터(14-2)를 설정한 후, 제2 벡터(14-2)를 인터넷 브라우저 어플리케이션의 실행 기능에 대응시킨다.The function setting unit 120 sets the first to eighth vectors having the direction component that travels in the direction of the center area in the first to eighth areas of the guide icon generated by the icon generator 110. The function setting unit 120 associates the functions of the individual function icons with the first to eighth vectors. For example, when the individual function icon 13-2 located in the second area 12-2 is an internet browser icon, the function setting unit 120 may display the central area 11 in the second area 12-2. After setting the second vector 14-2 proceeding to), the second vector 14-2 is made to correspond to the execution function of the Internet browser application.
가이드 아이콘이 3 by 3 매트릭스 형상의 9분할된 영역을 갖는 경우, 제1 내지 제8 벡터의 방향 성분은 상측(up)에서 하측(down) 방향, 좌상측(left-up)에서 우하측(right-down) 방향, 우상측(right-up)에서 좌하(left-down) 방향, 좌측(left)에서 우측(right) 방향 및 상기 방향들의 반대 방향 중 하나일 수 있다.When the guide icon has 9 divided regions of 3 by 3 matrix shape, the direction components of the first to eighth vectors are up to down and left to right. It may be one of a -down direction, a right-up left-down direction, a left-right direction, and an opposite direction of the above directions.
도 4는 본 발명의 일 실시예에 따른 방향 벡터들의 일 예를 나타낸 도면이다.4 is a diagram illustrating an example of direction vectors according to an embodiment of the present invention.
도 4는 도 3과 같이 가이드 아이콘이 9분할된 영역을 갖고, 제1 내지 제8 영역이 시계 방향으로 할당된 경우에 설정되는 제1 내지 제 8 벡터의 일 예이다. 도 4의 예에서, 제1 영역(12-1)에서 중앙 영역(11)으로 진행하는 제1 벡터(14-1)는 -45° 의 방향 성분을 갖는 벡터이다. 또한, 제2 영역(12-2)에서 중앙 영역(11)으로 진행하는 제2 벡터는(14-2)는 -90° 의 방향 성분을 갖는 벡터이고, 동일한 방법으로 제3 내지 제8 벡터(14-3 내지 14-8)이 각각 -45°씩 더한 각도의 방향 성분을 갖는 벡터로 설정될 수 있다. FIG. 4 is an example of the first to eighth vectors set when the guide icon has a nine-divided area as shown in FIG. 3 and the first to eighth areas are allocated in a clockwise direction. In the example of FIG. 4, the first vector 14-1 traveling from the first region 12-1 to the central region 11 is a vector having a direction component of −45 °. Further, the second vector 14-2 traveling from the second region 12-2 to the central region 11 is a vector having a direction component of -90 °, and the third to eighth vectors ( 14-3 to 14-8) may each be set to a vector having a direction component of an angle plus −45 °.
기능 설정부(120)는 상술한 제1 내지 제8 벡터(14-1 내지 14-8)에 가이드 아이콘의 각 영역에 표시된 개별 기능 아이콘의 기능을 대응시킨다. 도 4의 예에서, 제2 영역(12-2)에 인터넷 브라우저 어플리케이션 아이콘(13-2)이 표시된The function setting unit 120 associates the above-described first to eighth vectors 14-1 to 14-8 with functions of the individual function icons displayed in each area of the guide icon. In the example of FIG. 4, the Internet browser application icon 13-2 is displayed in the second area 12-2.
경우, 제2 벡터(14-2)에 대응하는 기능은 인터넷 브라우저 어플리케이션의 실행일 수 있다.In this case, the function corresponding to the second vector 14-2 may be execution of an internet browser application.
디스플레이부(130)는 휴대용 전자 장치(100)에서 처리되는 정보를 디스플레이 화면에 표시 출력한다. 본 발명의 일 실시예에서, 디스플레이부(130)는 아이콘 생성부(110)가 생성한 가이드 아이콘(10)을 표시하는 역할을 한다. 본 발명의 가이드 아이콘(10)은 직접 메뉴 버튼의 역할을 하는 것은 아니지만, 사용자가 제스처를 취하는 데 있어 제스처 방향에 대한 가이드를 제공한다. 디스플레이부(130)는 가이드 아이콘(10)을 홈 화면 내지 어플리케이션 실행 화면에 상관없이 항상 디스플레이 화면(101)에 표시되도록 할 수 있다. 혹은, 디스플레이 화면(101)이홈 화면을 표시하고 있을 때만 가이드 아이콘을 표시할 수 있다.The display 130 displays and outputs information processed by the portable electronic device 100 on a display screen. In one embodiment of the present invention, the display unit 130 serves to display the guide icon 10 generated by the icon generator 110. The guide icon 10 of the present invention does not directly act as a menu button, but provides a guide for the gesture direction in the user's gesture. The display 130 may display the guide icon 10 on the display screen 101 regardless of the home screen or the application execution screen. Alternatively, the guide icon may be displayed only when the display screen 101 displays the home screen.
본 발명에 있어서, 디스플레이부(130)와 터치패드가 상호 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(130)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(130)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 휴대용 전자 장치(100)의 구현 형태에 따라 디스플레이부(130)가 2개 이상 존재할 수도 있다. 터치스크린은 터치 입력 위치, 터치된 면적뿐만 아니라 터치 입력 압력까지도 검출할 수 있도록 구성될 수 있다. 또한, 터치 스크린은 상기 터치(real-touch) 뿐만 아니라 근접 터치(proximity touch)도 검출될 수 있도록 구성될 수 있다.In the present invention, when the display unit 130 and the touch pad have a mutual layer structure and constitute a touch screen, the display unit 130 may be used as an input device in addition to the output device. The display unit 130 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, or a three-dimensional display. 3D display). In addition, two or more display units 130 may exist according to the implementation form of the portable electronic device 100. The touch screen may be configured to detect not only the touch input position and the touched area but also the touch input pressure. In addition, the touch screen may be configured to detect not only the real-touch but also a proximity touch.
본 명세서에서 "터치(real-touch)"라 함은 화면에 실제로 포인터(pointer)가 터치된 경우를 말하고, "근접 터치(proximity-touch)"라 함은 포인터(pointer)가 화면에 실제로 터치는 되지 않고, 화면으로부터 소정 거리 떨어져 접근된 경우를 말한다. 본 명세서에서 포인터(pointer)는 디스플레이된 화면의 특정 부분을 터치하거나 근접 터치하기 위한 도구를 말한다. 그 일례로 스타일러스 팬, 손가락 등이 있다.In the present specification, the term "real-touch" refers to a case in which a pointer is actually touched on the screen, and the term "proximity-touch" refers to a point in which the pointer actually touches the screen. Instead, it refers to the case where the screen approaches a distance from the screen. In the present specification, a pointer refers to a tool for touching or proximity touching a specific portion of a displayed screen. Examples include stylus fans, fingers, and the like.
센싱부(140)는 터치 스크린으로부터 사용자의 제스처를 입력받아 사용자 제스처의 방향 성분을 검출한다. 본 발명의 일 실시예에서, 센싱부(140)가 방향 성분을 검출하는 사용자의 제스처는 시작점부터 끝점까지 연속적인 터치가 이루어지는 드래그(drag) 제스처일 수 있다. 센싱부(140)가 검출하는 제스처의 방향 성분은 제스처의 시작점부터 끝점까지 진행하는 벡터의 방향 성분일 수 있다.The sensing unit 140 receives a gesture of the user from the touch screen and detects a direction component of the user gesture. In one embodiment of the present invention, the gesture of the user that the sensing unit 140 detects the direction component may be a drag gesture that makes a continuous touch from the start point to the end point. The direction component of the gesture detected by the sensing unit 140 may be a direction component of the vector traveling from the start point to the end point of the gesture.
본 발명의 센싱부(140)는 터치스크린의 터치 또는 근접 터치를 감지하기 위한 다양한 센서가 구비될 수 있다. 터치스크린의 터치를 감지하기 위한 센서의 일례로 촉각 센서가 있다. 촉각 센서는 사람이 느끼는 정도로 또는 그 이상으로 특정 물체의 접촉을 감지하는 센서를 말한다. 상기 촉각 센서는 접촉면의 거칠기, 접촉 물체의 단단함, 접촉 지점의 온도 등의 다양한 정보를 감지할 수 있다.The sensing unit 140 of the present invention may be provided with various sensors for detecting a touch or a proximity touch of the touch screen. An example of a sensor for sensing a touch of a touch screen is a tactile sensor. The tactile sensor refers to a sensor that senses the contact of a specific object to the extent that a person feels or more. The tactile sensor may sense various information such as the roughness of the contact surface, the rigidity of the contact object, the temperature of the contact point, and the like.
또한, 터치스크린의 터치를 감지하기 위한 센서의 일례로 근접 센서가 있다. 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 따라서, 근접 센서는 접촉식 센서보다는 그 수명이 상당히 길며 그 활용도 또한 상당히 높다.In addition, an example of a sensor for sensing a touch of a touch screen is a proximity sensor. The proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without using a mechanical contact by using an electromagnetic force or infrared rays. Thus, proximity sensors have a considerably longer life than contact sensors and their utilization is also quite high.
근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다.Examples of the proximity sensor include a transmission photoelectric sensor, a direct reflection photoelectric sensor, a mirror reflection photoelectric sensor, a high frequency oscillation proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor.
벡터 매칭부(150)는 기능 설정부(120)가 설정한 제1 내지 제8 벡터의 방향 성분 중 센싱부(140)가 검출한 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정한다.The vector matching unit 150 determines a vector having a direction component corresponding to the gesture direction component detected by the sensing unit 140 among the direction components of the first to eighth vectors set by the function setting unit 120.
도 4와 같은 본 발명의 일 실시예에서, 상기 제1 내지 제8 벡터의 방향 성분은 서로 45°만큼 차이날 수 있다. 이 경우, 벡터 매칭부(150)는 사용자의 제스처가 어느 방향 벡터의 성분에 가장 가까운지를 검출한다. 예를 들어, 도 4의 예에서, 사용자가 입력한 제스처 방향 성분의 각도가 제2 벡터(14-2)의 방향 성분의 각도로부터 -22.5°에서 -22.5°사이에 위치한다면, 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터는 제2 벡터(14-2)라 결정할 수 있다.In an embodiment of the present invention as shown in FIG. 4, the direction components of the first to eighth vectors may differ by 45 ° from each other. In this case, the vector matching unit 150 detects which direction vector component the user's gesture is closest to. For example, in the example of FIG. 4, if the angle of the gesture direction component input by the user is located between -22.5 ° and -22.5 ° from the angle of the direction component of the second vector 14-2, The vector having the corresponding direction component may be determined as the second vector 14-2.
기능 실행부(160)는 벡터 매칭부(150)가 결정한 벡터에 대응하는 개별 기능 아이콘의 기능을 실행한다. 기능 실행부(160)는 최종적으로 휴대용 전자장치(100)의 수행 기능을 결정하고 실행하는 프로세서(processor)의 역할을 할 수 있다.The function execution unit 160 executes a function of an individual function icon corresponding to the vector determined by the vector matching unit 150. The function execution unit 160 may serve as a processor that finally determines and executes an execution function of the portable electronic device 100.
도 4의 실시예에서, 제2 벡터(14-2)에 대응된 개별 기능 아이콘(13-2)의 기능이 '인터넷 브라우저 어플리케이션의 실행'이고, 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터는 제2 벡터(14-2)인 경우 기능 실행부(160)은 인터넷 브라우저 어플리케이션을 실행시킨다.In the embodiment of Fig. 4, the function of the individual function icon 13-2 corresponding to the second vector 14-2 is 'execution of the Internet browser application', and the vector having the direction component corresponding to the gesture direction component is In the case of the second vector 14-2, the function execution unit 160 executes the Internet browser application.
통신부(170)는 휴대용 전자 장치(100)와 외부 디바이스(200) 간에 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 통신부(170)는 방송 수신 모듈, 이동통신 모듈, 무선 인터넷 모듈, 유선 인터넷 모듈, 근거리 통신 모듈, 위치정보 모듈 등을 포함할 수 있다. The communicator 170 may include one or more components that allow communication between the portable electronic device 100 and the external device 200. For example, the communication unit 170 may include a broadcast receiving module, a mobile communication module, a wireless internet module, a wired internet module, a short range communication module, a location information module, and the like.
방송 수신 모듈은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다.The broadcast reception module receives a broadcast signal and / or broadcast related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel.
또한, 이동통신 모듈은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.In addition, the mobile communication module transmits and receives a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network. The wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call call signal, or a text / multimedia message.
무선 인터넷 모듈은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈은 내장되거나 외장 될 수 있다. 또한, 유선 인터넷 모듈은 유선 인터넷 접속을 위한 모듈을 의미한다.The wireless internet module refers to a module for wireless internet access. The wireless internet module may be internal or external. In addition, the wired Internet module means a module for wired Internet access.
근거리 통신 모듈은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, WFD(Wi-Fi Direct) NFC(Near Field Communication) 등이 이용될 수 있다.The short range communication module refers to a module for short range communication. Near field communication technology uses Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Wi-Fi Direct (WFD) Near Field Communication (NFC), etc. Can be.
또한, 위치정보 모듈은 휴대용 전자 장치(100)의 위치를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기에서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다.In addition, the location information module is a module for checking or obtaining the location of the portable electronic device 100. One example is the Global Position System (GPS) module. The GPS module receives location information from a plurality of satellites. Here, the location information may include coordinate information represented by latitude and longitude.
메모리(180)는 제어부(190)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 캡쳐 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 저장을 위한 기능을 수행할 수도 있다.The memory 180 may store a program for processing and controlling the controller 190, and for storing data input / output (eg, capture data, phonebook, message, still image, video, etc.). You can also perform a function.
메모리(180)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, RandomThe memory 180 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM (RAM, Random
Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory),Access Memory (SRAM), Static Random Access Memory (ROM), ROM (Read-Only Memory),
EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 휴대용 전자 장치(100)는 인터넷(internet)상에서 메모리(180)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory) may include a storage medium of at least one type of magnetic memory, magnetic disk, optical disk. In addition, the portable electronic device 100 may operate a web storage that performs a storage function of the memory 180 on the Internet.
제어부(190)는 통상적으로 휴대용 전자 장치(100)의 전반적인 동작을 제어한다. 예를 들어, 제어부(190)는 제스처 인식, 음성 통화, 데이터 통신, 화상 통화 등과 관련된 제어 및 처리를 수행한다. 즉, 제어부(190)는 아이콘 생성부(110), 기능 설정부(120), 디스플레이부(130), 센싱부(140), 벡터 매칭부(150), 기능 실행부(160), 통신부(170) 및 메모리(180)를 전반적으로 제어할 수 있다. 또한, 제어부(190)는 멀티 미디어 재생을 위한 멀티미디어 모듈을 구비할 수도 있다. 멀티미디어 모듈은 제어부(190) 내에 구현될 수도 있고, 제어부(190)와 별도로 구현될 수도 있다.The controller 190 typically controls the overall operation of the portable electronic device 100. For example, the controller 190 performs control and processing related to gesture recognition, voice call, data communication, video call, and the like. That is, the controller 190 may include the icon generator 110, the function setting unit 120, the display unit 130, the sensing unit 140, the vector matching unit 150, the function execution unit 160, and the communication unit 170. ) And the memory 180 can be controlled overall. In addition, the controller 190 may include a multimedia module for playing multimedia. The multimedia module may be implemented in the controller 190 or may be implemented separately from the controller 190.
한편, 본 발명의 일 실시예에 따른 외부 디바이스(200)는 휴대용 전자 장치(100)와 통신 가능한 장치를 의미한다. 외부 디바이스(200)의 일례로, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, 태블릿 PC, 디지털 카메라, 디지털 CE 기기(Consumer Elctronics) 등이 있을 수 있다. 디지털 CE(Consumer Elctronics) 기기에는 DTV(Digital television), IPTV(Internet Protocol Television), 디스플레이 장치를 갖는 냉장고, 에어컨, 프린터 등이 있을 수 있다.Meanwhile, the external device 200 according to an embodiment of the present invention refers to a device that can communicate with the portable electronic device 100. As an example of the external device 200, a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), a navigation device, a tablet PC, a digital camera , Digital CE devices (Consumer Elctronics), and the like. The digital CE (Consumer Elctronics) device may include a digital television (DTV), an Internet Protocol Television (IPTV), a refrigerator having a display device, an air conditioner, a printer, and the like.
한편, 본 발명의 일 실시예에 따른 외부 디바이스(200)는 서버 장치(예컨대, Social Networking Service 서버 등)를 포함할 수 있다.Meanwhile, the external device 200 according to an embodiment of the present invention may include a server device (eg, a social networking service server).
도 2는 본 발명의 일 실시예에 따른 제스처에 의한 기능 실행 방법의 순서도를 나타낸 도면이다.2 is a flowchart illustrating a method of executing a function by a gesture according to an embodiment of the present invention.
먼저, 9분할된 영역 및 9분할된 영역 중 중앙 영역을 제외한 제1 내지 제8 영역 각각에 표시된 개별 기능 아이콘을 포함하는 가이드 아이콘을 생성한다(S1).First, a guide icon including individual function icons displayed in each of the first to eighth regions except for the central region among the nine divided regions and the nine divided regions is generated (S1).
다음으로, 가이드 아이콘의 제1 내지 제8 영역에서 중앙 영역으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정한다(S2).Next, the first to eighth vectors having the direction components advancing from the first to eighth regions of the guide icon to the central region are set (S2).
다음으로, 제1 내지 제8 벡터에 가이드 아이콘의 영역에 표시된 각 개별 기능 아이콘의 기능을 대응시킨다(S3).Next, the functions of the individual function icons displayed in the area of the guide icon are associated with the first to eighth vectors (S3).
다음으로, 생성된 가이드 아이콘을 디스플레이 화면에 표시한다(S4).Next, the generated guide icon is displayed on the display screen (S4).
다음으로, 사용자의 제스처를 입력 받아 제스처 입력의 시작점에서 끝점으로 진행하는 제스처 방향 성분을 검출한다(S5).Next, the gesture direction component that receives the user's gesture and proceeds from the start point to the end point of the gesture input is detected (S5).
마지막으로, 제1 내지 제8 벡터의 방향 성분 중 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정하고, 결정된 벡터에 대응하는 개별 기능 아이콘의 기능을 실행한다(S6).Finally, a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors is determined, and the function of the individual function icon corresponding to the determined vector is executed (S6).
도 5는 본 발명의 일 실시예에 따라 제스처로 어플리케이션을 실행시키는 화면의 일 예이다.5 is an example of a screen for executing an application by a gesture according to an embodiment of the present invention.
먼저, 사용자는 도 5의 좌측 상단에 표시된 가이드 아이콘(10)을 통해 제스처의 방향에 따라 어떤 기능을 실행할 수 있는지에 대한 직관적 인식을 얻을 수 있다. 예를 들어, 사용자는 가이드 아이콘(10)을 통해 우측 상단에서 좌측 하단의 방향을 갖는 제스처를 입력하면 음악 어플리케이션을 실행할 수 있고, 상단에서 하단의 방향을 갖는 제스처를 입력하면 인터넷 브라우저 어플리케이션을 실행 가능하다고 인식할 수 있다.First, the user may obtain an intuitive recognition of what function can be executed according to the direction of the gesture through the guide icon 10 displayed in the upper left of FIG. For example, the user may execute a music application by inputting a gesture having a direction from the upper right to the lower left through the guide icon 10, and may execute an internet browser application by inputting a gesture having the direction from the top to the lower left. It can be recognized.
도 5의 왼쪽 그림과 같이, 사용자는 디스플레이 화면(101)에 우측 상단에서 좌측 방향으로 진행하는 벡터 성분을 갖는 제스처를 터치를 통해 입력할 수 있다. 상술한 바와 같이, 센싱부(140)는 사용자의 제스처 입력에서 제스처 방향 성분을 검출하고, 벡터 매칭부(150)는 제1 내지 제8 벡터(14-1 내지 14-8)의 방향 성분 중 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정한다. 도 5의 실시예에서, 센싱부(140)는 사용자 제스처의 시작점에서 끝점 방향의 벡터를 검출하고, 벡터 매칭부(150)는 제3 벡터(14-3)가 제스처 방향 성분에 대응하는 벡터라고 결정할 수 있다.As shown in the left figure of FIG. 5, the user may input a gesture having a vector component moving from the upper right side to the left direction on the display screen 101 through a touch. As described above, the sensing unit 140 detects a gesture direction component from the gesture input of the user, and the vector matching unit 150 performs a gesture among the direction components of the first to eighth vectors 14-1 to 14-8. A vector having an aromatic component corresponding to the aromatic component is determined. In the embodiment of FIG. 5, the sensing unit 140 detects a vector of the end point direction at the start point of the user gesture, and the vector matching unit 150 indicates that the third vector 14-3 is a vector corresponding to the gesture direction component. You can decide.
도 5의 실시예에서, 제3 벡터(14-3)에 대응하는 개별 기능 아이콘은 제3 영역(12-3)에 위치하는 음악 재생 어플리케이션 아이콘(13-3)이므로, 기능 실행부(160)는 오른쪽 화면과 같이 음악 재생 어플리케이션을 실행한다.In the embodiment of FIG. 5, since the individual function icon corresponding to the third vector 14-3 is the music reproduction application icon 13-3 located in the third region 12-3, the function execution unit 160 is executed. Run the music playback application as shown in the right screen.
도 5에 예시된 본 발명의 일 실시예에서는, 사용자는 한정된 디스플레이 화면의 크기에도 불구하고 다양한 기능을 복수번의 터치 없이 간편히 한번의 제스처만으로 실행시킬 수 있다.In the exemplary embodiment of the present invention illustrated in FIG. 5, the user may execute various functions simply with a single gesture without a plurality of touches despite the limited display screen size.
도 6a 및 도 6b는 본 발명의 일 실시예에 따라 제스처로 화면을 전환하는 경우의 일 예이다.6A and 6B illustrate an example of switching a screen by a gesture according to an embodiment of the present invention.
도 6a는 본 발명에서 적용될 수 있는 홈 화면들(105, 105-1 내지 105-8)을 디스플레이 화면(101) 상에 축소하여 표시한 예이다. 도 6a을 참조하면, 본 발명의 홈 화면은 3 by 3 매트릭스 형태로 정렬된 9개의 홈 화면들(105, 105-1 내지 105-8)을 가질 수 있다. 도 6a에 나타난 디스플레이 화면(101)은 사용자가 홈 화면의 구성을 보기 위해 손가락 2개를 사용한 더블 터치로 실행한 홈 화면 전체 보기 모드의 화면일 수 있다. 도 6a의 실시예에서, 현재 디스플레이 화면(101)에 보여지고 있는 홈 화면이 중앙에 위치한 홈 화면(105)으로 표시될 수 있다.6A illustrates an example in which the home screens 105 and 105-1 to 105-8 that are applicable in the present invention are reduced and displayed on the display screen 101. Referring to FIG. 6A, the home screen of the present invention may have nine home screens 105, 105-1 to 105-8 arranged in a 3 by 3 matrix form. The display screen 101 illustrated in FIG. 6A may be a screen of a full screen view of a home screen executed by a user using a double touch using two fingers to view a configuration of a home screen. In the embodiment of FIG. 6A, the home screen currently displayed on the display screen 101 may be displayed as the home screen 105 located at the center.
기존의 휴대용 전자 장치의 환경에서는 복수개의 홈 화면을 가질 수 있었지만, 좌우 터치를 통해서만 홈 화면간의 전환이 가능하여 홈 화면의 수가 많아질수록 전환 횟수가 그만큼 증가하는 문제점이 있었다. 예를 들어, 첫번째 홈 화면부터 다섯번째 홈 화면까지 이동하기 위해서는 좌우로 이동하는 드래그 제스처가 총 4번 요구되었다.In the environment of a conventional portable electronic device, a plurality of home screens may be provided, but switching between home screens is possible only through left and right touches, so that the number of switching increases as the number of home screens increases. For example, in order to move from the first home screen to the fifth home screen, a drag gesture that moves left and right is required four times.
이에 반하여, 본 발명의 일 실시예에 따르면 홈 화면을 9개까지 확장할 수 있으며, 현재의 홈 화면에서 다른 모든 홈 화면으로의 이동이 단 한번의 터치로 가능하다.On the contrary, according to an embodiment of the present invention, up to nine home screens can be extended, and moving from the current home screen to all other home screens is possible with a single touch.
도 6b는 본 발명의 일 실시예에 따라 제스처를 통해 홈 화면을 전환하는 방법을 표시하고 있다. 도 6b의 휴대용 전자 장치(100)에서 왼쪽은 디스플레이 화면(101)에 중앙 홈 화면(105)을 표시한 상태이고, 오른쪽은 디스플레이 화면(101)에 좌측 상단의 홈 화면(105-1)을 표시한 상태이다.6B illustrates a method of switching a home screen through a gesture according to an embodiment of the present invention. In the portable electronic device 100 of FIG. 6B, the left side displays the central home screen 105 on the display screen 101, and the right side displays the home screen 105-1 on the upper left on the display screen 101. It is a state.
도 6b를 참조하면, 가이드 아이콘(10)은 도 5의 가이드 아이콘(10)과 달리 각 개별 기능 아이콘(13-1 내지 13-8)의 모양으로 직사각형의 화면 모양을 표시하고 있다. 이때, 비록 개별 기능 아이콘의 모양은 같지만 기능 설정부(120)는 각 개별 기능 아이콘(13-1 내지 13-8) 및 각 벡터(14-1 내지 14-8)에 각기 다른 홈 화면으로의 전환 기능을 대응시킬 수 있다. 예를 들어, 제1 벡터(14-1)는 현재의 홈 화면(105)에서 좌측 상단의 홈 화면(105-1)으로 전환하는 기능에 대응할 수 있다. 혹은, 제3 벡터(14-3)은 현재의 홈 화면(105)에서 우측 상단의 홈 화면(105-3)으로 전환하는 기능에 대응할 수 있다.Referring to FIG. 6B, unlike the guide icon 10 of FIG. 5, the guide icon 10 displays a rectangular screen shape in the shape of each individual function icon 13-1 to 13-8. At this time, although the shape of the individual function icon is the same, the function setting unit 120 switches to different home screens for each individual function icon 13-1 to 13-8 and each of the vectors 14-1 to 14-8. Functions can be mapped. For example, the first vector 14-1 may correspond to a function of switching from the current home screen 105 to the home screen 105-1 on the upper left side. Alternatively, the third vector 14-3 may correspond to a function of switching from the current home screen 105 to the home screen 105-3 in the upper right corner.
사용자는 가이드 아이콘(10)에 표시된 개별 기능 아이콘의 모양을 보고 현재 제스처를 통해 홈 화면을 전환할 수 있다는 정보를 얻을 수 있다.The user can see the shape of the individual function icon displayed on the guide icon 10 to obtain information that the home screen can be switched through the current gesture.
도 6b의 실시예에서, 왼쪽 그림과 같이 현재 보여지고 있는 홈 화면이 도 6a의 중앙 홈 화면(105)인 경우, 사용자는 현재 홈 화면을 기준으로 좌측 상단에 있는 홈 화면(105-1)으로 전환하기 위해 도 6b와 같이 좌측 상단에서 우측 하단으로 진행하는 제스처를 취할 수 있다.In the embodiment of FIG. 6B, when the home screen currently being shown is the center home screen 105 of FIG. 6A as shown in the left figure, the user moves to the home screen 105-1 at the upper left side based on the current home screen. To switch, a gesture may proceed from the upper left to the lower right as shown in FIG. 6B.
도 6a 및 도 6b에 따른 본 발명의 일 실시예에 의하면, 좌측 상단에서 우측 하단으로 진행하는 제스처의 방향 성분은 제 1 벡터(14-1)의 방향 성분에 대응하고, 기능 설정부(120)가 제1 벡터(14-1)에 대응하는 기능으로 설정한 현재의 홈 화면(105)에서 좌측 상단의 홈 화면(105-1)으로의 전환 기능이 오른쪽 그림과 같이 실행될 수 있다. 마찬가지의 방법으로, 제2 벡터(14-2)의 방향 성분에 대응하는 제스처를 입력하는 경우, 현재의 홈 화면(105)에서 상단의 홈 화면(105-2)으로의 전환 기능이 실행될 수 있다. 홈 화면이 전환될 때, 전환 모양을 자연스럽게 하기 위해 사용자의 제스처와 동시에 롤 인(roll-in), 롤 업(roll-up) 등의 화면 전환 효과가 적용될 수 있다.6A and 6B, the direction component of the gesture proceeding from the upper left to the lower right corresponds to the direction component of the first vector 14-1 and the function setting unit 120. A function of switching from the current home screen 105 to the home screen 105-1 on the upper left, which is set as a function corresponding to the first vector 14-1, may be executed as shown in the right figure. In a similar manner, when a gesture corresponding to the direction component of the second vector 14-2 is inputted, a switching function from the current home screen 105 to the upper home screen 105-2 may be executed. . When the home screen is switched, a screen switching effect such as roll-in and roll-up may be applied at the same time as the user's gesture to smooth the switching shape.
본 발명의 가이드 아이콘(10)의 개별 기능 아이콘(13-1 내지 13-8)은 사용자의 설정에 의해 자유롭게 변경 가능하다. 또한, 하나의 가이드 아이콘(10) 내에 어플리케이션 실행용 개별 기능 아이콘 및 화면 전환용 아이콘이 함께 표시되는 경우도 물론 상정할 수 있다.The individual function icons 13-1 to 13-8 of the guide icon 10 of the present invention can be freely changed by the user's setting. In addition, it may also be assumed that an individual function icon for executing an application and an icon for screen switching are displayed together in one guide icon 10.
추가적으로, 도 5의 가이드 아이콘(10)과 도 6a의 가이드 아이콘(10)은 사용자 설정에 의해 서로 전환 혹은 변경되어 표시될 수 있다. 특히, 디스플레이 화면(101)에 홈 화면이 표시된 상태에서는 도 6a와 같은 화면 전환용 가이드 아이콘(10) 및 그에 대응하는 기능이 실행되고, 홈 화면 이외의 메뉴 화면이나 어플리케이션 화면이 표시된 상태에서는 도 5와 같은 어플리케이션 실행용 가이드 아이콘(10) 및 그에 대응하는 기능이 실행될 수 있다. 즉, 사용자는 본 발명의 제스처 제스처를 이용한 기능 실행 방법을 사용하여, 디스플레이 화면(101)이 홈 화면의 상태일 때 화면을 전환하고, 어플리케이션 화면인 경우에는 다른 어플리케이션을 실행시킬 수 있다.In addition, the guide icon 10 of FIG. 5 and the guide icon 10 of FIG. 6A may be displayed by being switched or changed with each other by user setting. In particular, when the home screen is displayed on the display screen 101, the screen switching guide icon 10 and a function corresponding thereto are executed as shown in FIG. 6A, and when a menu screen or an application screen other than the home screen is displayed, FIG. 5. An application execution guide icon 10 and a function corresponding thereto may be executed. That is, the user may switch the screen when the display screen 101 is in the state of the home screen, and execute another application in the case of the application screen, using the method of executing a function using the gesture gesture of the present invention.
가이드 아이콘(10)의 제1 내지 제8 영역(12-1 내지 12-8)에 위치한 개별 기능 아이콘은 다른 가이드 아이콘(10)으로의 전환 기능을 나타낼 수 있다.Individual function icons located in the first to eighth areas 12-1 to 12-8 of the guide icon 10 may represent a switching function to another guide icon 10.
도 7은 본 발명의 일 실시예에 따라 제스처를 이용하여 복수개의 가이드 아이콘을 전환하는 예시를 나타낸 도면이다.7 is a diagram illustrating an example of switching a plurality of guide icons using a gesture according to an embodiment of the present invention.
도 7과 같이 가이드 아이콘은 복수개 존재할 수 있다. 도 7을 참조하면, 제1 가이드 아이콘(10-1)의 제5 영역(12-5)에는 가이드 아이콘(10) 모양의 개별 기능 아이콘이 표시된 것을 알 수 있다. 이와 같은 경우, 기능 설정부(120)는 제1 가이드 아이콘(10-1)의 제5 벡터(14-5)에 대응하는 기능을 제2 가이드 아이콘(10-2)의 실행으로 설정할 수 있다. 즉, 사용자는 제1 가이드 아이콘(10-1)이 표시되고 있을 때 제5 벡터(14-5) 방향의 제스처를 취하여 제2 가이드 아이콘(10-2)을 실행시킬 수 있다. 이 경우 디스플레이 화면(101)에 표시되는 가이드 아이콘(10)은 제1 가이드 아이콘(10-1)에서 제2 가이드 아이콘(10-2)으로 변경된다.As illustrated in FIG. 7, a plurality of guide icons may exist. Referring to FIG. 7, it can be seen that individual function icons in the shape of the guide icon 10 are displayed in the fifth area 12-5 of the first guide icon 10-1. In this case, the function setting unit 120 may set a function corresponding to the fifth vector 14-5 of the first guide icon 10-1 to the execution of the second guide icon 10-2. That is, when the first guide icon 10-1 is displayed, the user may execute the second guide icon 10-2 by performing a gesture in the direction of the fifth vector 14-5. In this case, the guide icon 10 displayed on the display screen 101 is changed from the first guide icon 10-1 to the second guide icon 10-2.
또한, 제2 가이드 아이콘(10-2)의 제1 영역(12-1) 및 제7 영역(12-7)에는 가이드 아이콘(10) 모양의 개별 기능 아이콘이 표시된 것을 알 수 있다. 이와 같은 경우, 기능 설정부(120)는 제2 가이드 아이콘(10-2)의 제1 벡터(14-1)에 대응하는 기능을 제1 가이드 아이콘(10-1)의 실행으로 설정하고, 제7 벡터(14-7)에 대응하는 기능을 제3 가이드 아이콘(10-3)의 실행으로 설정할 수 있다. 사용자는 제2 가이드 아이콘(10-2)이 표시되고 있을 때 제1 벡터(14-1) 방향의 제스처를 취하여 디스플레이 화면(101)에 제1 가이드 아이콘(10-1)을 표시하거나, 제7 벡터(14-7) 방향의 제스처를 취하여 제3 가이드 아이콘(10-3)을 표시할 수 있다.In addition, it can be seen that individual function icons in the shape of the guide icon 10 are displayed in the first area 12-1 and the seventh area 12-7 of the second guide icon 10-2. In this case, the function setting unit 120 sets the function corresponding to the first vector 14-1 of the second guide icon 10-2 to the execution of the first guide icon 10-1, and The function corresponding to the seventh vector 14-7 can be set by execution of the third guide icon 10-3. When the second guide icon 10-2 is displayed, the user takes a gesture toward the first vector 14-1 to display the first guide icon 10-1 on the display screen 101, or the seventh. The third guide icon 10-3 may be displayed by performing a gesture in the direction of the vector 14-7.
마지막으로, 제3 가이드 아이콘(10-3)의 제3 영역(12-3)에는 가이드 아이콘(10) 모양의 개별 기능 아이콘이 표시된 것을 알 수 있다. 이와 같은 경우, 기능 설정부(120)는 제3 가이드 아이콘(10-3)의 제3 벡터(14-3)에 대응하는 기능을 제2 가이드 아이콘(10-2)의 실행으로 설정할 수 있다.Finally, it can be seen that individual function icons in the shape of the guide icon 10 are displayed in the third area 12-3 of the third guide icon 10-3. In this case, the function setting unit 120 may set a function corresponding to the third vector 14-3 of the third guide icon 10-3 to the execution of the second guide icon 10-2.
도 8은 본 발명의 일 실시예에 따라 가이드 아이콘의 설정을 변경하는 것을 나타낸 화면이다.8 is a screen illustrating changing a setting of a guide icon according to an embodiment of the present invention.
도 8의 왼쪽 그림과 같이, 사용자는 가이드 아이콘(10)을 탭(tap)하여 가이드 아이콘(10)의 개별 기능 아이콘(13-1 내지 13-8)의 위치 및 기능을 변경할 수 있다. 가이드 아이콘(10)을 탭하면 도 8의 오른쪽 그림과 같이 확대된 가이드 아이콘(10a)이 표시된다.As illustrated in the left figure of FIG. 8, the user may tap the guide icon 10 to change positions and functions of individual function icons 13-1 to 13-8 of the guide icon 10. When the guide icon 10 is tapped, the enlarged guide icon 10a is displayed as shown in the right figure of FIG. 8.
사용자는 확대된 가이드 아이콘(10a) 내의 개별 기능 아이콘(13-1 내지 13-8) 혹은 제1 내지 제8 영역(12-1 내지 12-8) 중 하나를 탭하여 각 개별 기능 아이콘에 설정된 기능을 변경할 수 있다. 개별 기능 아이콘에 적용될 수 있는 기능은 어플리케이션 실행 기능 및 화면 전환 기능 등이다. 개별 기능 아이콘에 적용된 기능이 변경되면, 개별 기능 아이콘의 모양 역시 해당 기능에 변경되는 모양으로 변경된다. The user taps one of the individual function icons 13-1 to 13-8 or the first to eighth areas 12-1 to 12-8 in the enlarged guide icon 10a to set the function of each individual function icon. Can be changed. Functions that can be applied to individual function icons include an application execution function and a screen switching function. When a function applied to an individual function icon is changed, the shape of the individual function icon is also changed to the shape changed to the corresponding function.
예를 들어, 현재 제3 영역(12-3)에 위치하는 아이콘(13-3)은 음악 어플리케이션 아이콘이지만, 사용자는 제3 영역(12-3)을 탭하여 나타나는 목록 중에서 메시지 어플리케이션을 선택하여 개별 기능 아이콘(13-3)을 메시지 어플리케이션 아이콘으로 변경할 수 있다. 이때, 제3 벡터(14-3)에 대응하는 기능이 메시지For example, the icon 13-3 currently located in the third area 12-3 is a music application icon, but the user taps the third area 12-3 to select a message application from the list that appears. The function icon 13-3 may be changed to a message application icon. At this time, the function corresponding to the third vector 14-3 is a message.
어플리케이션의 실행으로 변경됨은 물론이다.Of course, it is changed by execution of the application.
또한, 사용자는 개별 기능 아이콘(13-1 내지 13-8) 중 하나를 일정시간 터치&홀드하여 개별 기능 아이콘(13-1 내지 13-8) 간의 위치를 변경할 수 있다. 예를 들어, 제1 영역(12-1)에 위치한 아이콘(13-1)과 제2 영역(12-2)에 위치한 아이콘(13-2)의 위치를 변경하고자 하는 경우, 제1 영역(12-1)에 위치한 아이콘(13-1)을 일정 시간 이상 터치한 상태로 유지한 후 아이콘(13-1)을 제2 영역(12-2)으로 드래그 앤 드롭(drag&drop)하여 두 아이콘 간의 위치를 변경할 수 있다.In addition, the user may touch and hold one of the individual function icons 13-1 to 13-8 for a predetermined time to change the position between the individual function icons 13-1 to 13-8. For example, when the icon 13-1 located in the first area 12-1 and the icon 13-2 located in the second area 12-2 are to be changed, the first area 12 is changed. -1) After holding the icon 13-1 positioned for a predetermined time or longer, drag the icon 13-1 to the second area 12-2 to drag and drop the position between the two icons. You can change it.
상술한 본 발명의 일 실시예에 따른 방법 및 휴대용 전자 장치에 의해, 화면의 공간적 한계에서 벗어나 여러가지 제스처에 의한 다양한 기능의 실행이 가능하며, 제스처에 대한 가이드 아이콘을 제공하여 제스처 방향과 실행 기능간의 관계에 대한 사용자의 직관적 인식이 가능하다.By the method and the portable electronic device according to an embodiment of the present invention described above, it is possible to execute various functions by various gestures without departing from the spatial limitations of the screen, and provide a guide icon for a gesture to Intuitive recognition of the relationship is possible.
본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Method according to an embodiment of the present invention can be implemented in the form of program instructions that can be executed by various computer means may be recorded on a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concepts of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims (20)

  1. 9분할된 영역 및 상기 9분할된 영역 중 중앙 영역을 제외한 제1 내지 제8 영역에 표시된 개별 기능 아이콘을 포함하는 가이드 아이콘을 생성하는 아이콘 생성부;An icon generator for generating a guide icon including a 9-divided area and individual function icons displayed in the first to eighth areas except for the center area of the 9-divided area;
    상기 제1 내지 제8 영역에서 상기 중앙 영역으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정하고, 상기 제1 내지 제8 벡터에 상기 개별 기능 아이콘의 기능을 대응시키는 기능 설정부;A function setting unit for setting first to eighth vectors having direction components from the first to eighth regions to the central region, and corresponding functions of the individual function icons to the first to eighth vectors;
    상기 가이드 아이콘을 디스플레이 화면에 표시하는 디스플레이부;A display unit which displays the guide icon on a display screen;
    사용자의 제스처를 입력 받아 제스처 방향 성분을 검출하는 센싱부;A sensing unit configured to receive a gesture of a user and detect a gesture direction component;
    상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정하는 벡터 매칭부;A vector matching unit which determines a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors;
    상기 결정된 벡터에 대응하는 상기 기능을 실행하는 기능 실행부; A function execution unit that executes the function corresponding to the determined vector;
    상기 아이콘 생성부, 상기 기능 설정부, 상기 디스플레이부, 상기 센싱부,The icon generator, the function setting unit, the display unit, the sensing unit,
    상기 벡터 매칭부 및 상기 기능 실행부를 제어하는 제어부; 및A control unit controlling the vector matching unit and the function execution unit; And
    상기 제어부에 의해 실행되고, 상기 아이콘 생성부, 상기 기능 설정부, 상기 디스플레이부, 상기 센싱부, 상기 벡터 매칭부 및 상기 기능 실행부를 동작시키는 프로그램이 저장되는 메모리;A memory that is executed by the controller and stores a program for operating the icon generator, the function setting unit, the display unit, the sensing unit, the vector matching unit, and the function execution unit;
    를 포함하는 휴대용 전자 장치.Portable electronic device comprising a.
  2. 제1항에 있어서,The method of claim 1,
    상기 제1 내지 제8 벡터에 대응하는 기능은 화면 전환 기능, 특정 어플리케이션 실행 기능 및 다른 가이드 아이콘으로 전환 기능 중 적어도 하나의 기능인 휴대용 전자 장치.The function corresponding to the first to eighth vectors may be at least one of a screen change function, a specific application execution function, and a switch to another guide icon.
  3. 제1항에 있어서,The method of claim 1,
    상기 디스플레이 화면에 홈 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 제1 내지 제8 홈 화면으로의 전환 기능이고,When the gesture is input while the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors is a switching function to the first to eighth home screens.
    상기 디스플레이 화면에 상기 홈 화면이 아닌 다른 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 특정 어플리케이션 실행 기능인 휴대용 전자 장치.When the gesture is input while a screen other than the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors is a specific application execution function.
  4. 제1항에 있어서,The method of claim 1,
    상기 가이드 아이콘을 탭(tap)하면, 상기 가이드 아이콘의 각 개별 기능 아이콘을 편집할 수 있는 확대된 가이드 아이콘이 디스플레이되고, 상기 제1 내지 제8 영역의 각각에 표시되는 상기 개별 기능 아이콘은 상기 확대된 가이드 아이콘 상에 입력되는 사용자의 제스처에 따라 위치 및 기능이 변경될 수 있는 휴대용 전자 장치.When tapping the guide icon, an enlarged guide icon for editing each individual function icon of the guide icon is displayed, and the individual function icon displayed in each of the first to eighth areas is enlarged. A portable electronic device, the position and function of which may be changed according to a gesture of a user input on the guide icon.
  5. 제1항에 있어서,The method of claim 1,
    상기 9분할된 영역은 상기 가이드 아이콘을 3 by 3 매트릭스 형상으로 분할한 영역이며, 상기 중앙 영역은 상기 매트릭스의 2행 2열에 해당하는 영역인 휴대용 전자 장치.The nine-divided region is a region obtained by dividing the guide icon into a 3 by 3 matrix, and the central region is a region corresponding to two rows and two columns of the matrix.
  6. 제1항에 있어서, 상기 디스플레이부는 The method of claim 1, wherein the display unit
    상기 가이드 아이콘을 홈 화면 내지 어플리케이션 실행화면에 상관 없이 상기 디스플레이 화면에 표시하는 휴대용 전자 장치. A portable electronic device for displaying the guide icon on the display screen regardless of a home screen or an application execution screen.
  7. 제1항에 있어서, 상기 디스플레이부는The method of claim 1, wherein the display unit
    상기 가이드 아이콘을 홈 화면을 표시하고 있을 경우, 상기 디스플레이 화면에 표시하는 휴대용 전자 장치. The portable electronic device displaying the guide icon on the display screen when the guide icon is displayed.
  8. 제1항에 있어서, 상기 센싱부가 검출하는 제스처 방향 성분은The method of claim 1, wherein the gesture direction component detected by the sensing unit is
    상기 제스처의 시작점부터 끝점까지 진행하는 벡터의 방향 성분인 휴대용 전자 장치. A portable electronic device which is a direction component of a vector traveling from a start point to an end point of the gesture.
  9. 제1항에 있어서, 상기 센서는The method of claim 1, wherein the sensor
    촉각 센서 또는 근접 센서인 휴대용 전자 장치. Portable electronic devices that are tactile sensors or proximity sensors.
  10. 제1항에 있어서, 상기 벡터 매칭부는The method of claim 1, wherein the vector matching unit
    상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분과 가장 가까운 방향 성분을 갖는 벡터를 결정하는 휴대용 전자 장치. And a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
  11. 9분할된 영역 및 상기 9분할된 영역 중 중앙 영역을 제외한 제1 내지 제8 영역에 표시된 개별 기능 아이콘을 포함하는 가이드 아이콘을 생성하는 단계;Generating a guide icon including a nine-divided area and individual function icons displayed in the first to eighth areas except for the central area among the nine-divided areas;
    상기 제1 내지 제8 영역에서 상기 중앙 영역으로 진행하는 방향 성분을 갖는 제1 내지 제8 벡터를 설정하고, 상기 제1 내지 제8 벡터에 상기 개별 기능 아이콘의 기능을 대응시키는 단계;Setting first to eighth vectors having direction components from the first to eighth regions to the central region, and mapping the functions of the individual function icons to the first to eighth vectors;
    상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계; Displaying the guide icon on a display screen;
    사용자의 제스처를 입력 받아 제스처 방향 성분을 검출하는 단계; Detecting a gesture direction component by receiving a gesture of a user;
    상기 제1 내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분에 대응하는 방향 성분을 갖는 벡터를 결정하는 단계; 및Determining a vector having a direction component corresponding to the gesture direction component among the direction components of the first to eighth vectors; And
    상기 결정된 벡터에 대응하는 상기 기능을 실행하는 단계;Executing the function corresponding to the determined vector;
    를 포함하는 제스처를 이용한 기능 실행 방법.Function execution method using a gesture comprising a.
  12. 제11항에 있어서,The method of claim 11,
    상기 제1 내지 제8 벡터에 대응하는 기능은 화면 전환 기능, 특정 어플리케이션 실행 기능 혹은 다른 가이드 아이콘으로 전환 기능인 제스처를 이용한 기능 실행 방법.The function corresponding to the first to eighth vectors may be a screen change function, a specific application execution function, or a switch function to another guide icon.
  13. 제11항에 있어서,The method of claim 11,
    상기 디스플레이 화면에 홈 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 제1 내지 제8 홈 화면으로의 전환 기능이고,When the gesture is input while the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors is a switching function to the first to eighth home screens.
    상기 디스플레이 화면에 홈 화면이 아닌 다른 화면이 표시된 상태에서 상기 제스처가 입력되는 경우, 상기 제1 내지 제8 벡터에 대응하는 기능은 특정 어플리케이션 실행 기능인 제스처를 이용한 기능 실행 방법.If the gesture is input while a screen other than the home screen is displayed on the display screen, the function corresponding to the first to eighth vectors is a specific application execution function.
  14. 제11항에 있어서,The method of claim 11,
    상기 가이드 아이콘을 탭(tap)하면, 상기 가이드 아이콘의 각 개별 기능 아이콘을 편집할 수 있는 확대된 가이드 아이콘이 디스플레이되고,Tap the guide icon to display an enlarged guide icon for editing each individual function icon of the guide icon,
    상기 제1 내지 제8 영역의 각각에 표시되는 상기 개별 기능 아이콘은 상기 확대된 가이드 아이콘 상에 입력되는 사용자의 제스처에 따라 위치 및 기능이 변경될 수 있는 제스처를 이용한 기능 실행 방법.The individual function icon displayed in each of the first to eighth areas may be a function execution method using a gesture in which a position and a function may be changed according to a gesture of a user input on the enlarged guide icon.
  15. 제11항에 있어서,The method of claim 11,
    상기 9분할된 영역은 상기 가이드 아이콘을 3 by 3 매트릭스 형상으로 분할한 영역이며, 상기 중앙 영역은 상기 매트릭스의 2행 2열에 해당하는 영역인 제스처를 이용한 기능 실행 방법.The 9-divided region is a region obtained by dividing the guide icon into a 3 by 3 matrix, and the center region is a region corresponding to 2 rows and 2 columns of the matrix.
  16. 제11항에 있어서, 상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계는 The method of claim 11, wherein displaying the guide icon on a display screen
    상기 가이드 아이콘을 홈 화면 내지 어플리케이션 실행화면에 상관 없이 상기 디스플레이 화면에 표시하는 제스처를 이용한 기능 실행 방법.And a gesture of displaying the guide icon on the display screen regardless of a home screen or an application execution screen.
  17. 제11항에 있어서, 상기 가이드 아이콘을 디스플레이 화면에 표시하는 단계는 The method of claim 11, wherein displaying the guide icon on a display screen
    상기 가이드 아이콘을 홈 화면을 표시하고 있을 경우에만, 상기 디스플레이 화면에 표시하는 제스처를 이용한 기능 실행 방법. A method for executing a function using a gesture of displaying on the display screen only when the guide icon is displayed on a home screen.
  18. 제11항에 있어서, 상기 제스처 방향 성분을 검출하는 단계는 12. The method of claim 11, wherein detecting the gesture direction component
    상기 제스처의 시작점부터 끝점까지 진행하는 벡터의 방향 성분을 검출하는 제스처를 이용한 기능 실행 방법. And a gesture detecting a direction component of the vector moving from the start point to the end point of the gesture.
  19. 제11항에 있어서, 상기 벡터를 결정하는 단계는 12. The method of claim 11, wherein determining the vector
    상기 제1내지 제8 벡터의 방향 성분 중 상기 제스처 방향 성분과 가장 가까운 방향 성분을 갖는 벡터를 결정하는 제스처를 이용한 기능 실행 방법. And determining a vector having a direction component closest to the gesture direction component among the direction components of the first to eighth vectors.
  20. 제11항 내지 제19항 중 어느 하나의 항에 따른 제스처를 이용한 기능 실행 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독가능한 기록매체. A computer-readable recording medium having recorded thereon a program for executing a method for executing a function using a gesture according to any one of claims 11 to 19.
PCT/KR2013/011525 2013-08-29 2013-12-12 Method for executing function using gesture, portable electronic apparatus therefor, and computer-readable recording medium having program recorded thereon therefor WO2015030313A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20130103445A KR101507595B1 (en) 2013-08-29 2013-08-29 Method for activating function using gesture and mobile device thereof
KR10-2013-0103445 2013-08-29

Publications (1)

Publication Number Publication Date
WO2015030313A1 true WO2015030313A1 (en) 2015-03-05

Family

ID=52586834

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2013/011525 WO2015030313A1 (en) 2013-08-29 2013-12-12 Method for executing function using gesture, portable electronic apparatus therefor, and computer-readable recording medium having program recorded thereon therefor

Country Status (2)

Country Link
KR (1) KR101507595B1 (en)
WO (1) WO2015030313A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110066981A1 (en) * 2009-09-16 2011-03-17 International Business Machines Corporation Placement of items in cascading radial menus
KR20110116712A (en) * 2010-04-20 2011-10-26 주식회사 인프라웨어 Computer-readable media containing the program of ui method using gesture
KR20120056889A (en) * 2009-10-30 2012-06-04 애플 인크. Detection of gesture orientation on repositionable touch surface
WO2013010156A2 (en) * 2011-07-14 2013-01-17 Microsoft Corporation Submenus for context based menu system
WO2013119008A1 (en) * 2012-02-07 2013-08-15 부가벤쳐스 Electronic apparatus and computer-implemented method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110066981A1 (en) * 2009-09-16 2011-03-17 International Business Machines Corporation Placement of items in cascading radial menus
KR20120056889A (en) * 2009-10-30 2012-06-04 애플 인크. Detection of gesture orientation on repositionable touch surface
KR20110116712A (en) * 2010-04-20 2011-10-26 주식회사 인프라웨어 Computer-readable media containing the program of ui method using gesture
WO2013010156A2 (en) * 2011-07-14 2013-01-17 Microsoft Corporation Submenus for context based menu system
WO2013119008A1 (en) * 2012-02-07 2013-08-15 부가벤쳐스 Electronic apparatus and computer-implemented method

Also Published As

Publication number Publication date
KR20150025631A (en) 2015-03-11
KR101507595B1 (en) 2015-04-07

Similar Documents

Publication Publication Date Title
AU2011339167B2 (en) Method and system for displaying screens on the touch screen of a mobile device
WO2012108714A2 (en) Method and apparatus for providing graphic user interface in mobile terminal
WO2015005606A1 (en) Method for controlling chat window and electronic device implementing the same
WO2017065494A1 (en) Portable device and screen display method of portable device
WO2016093506A1 (en) Mobile terminal and control method therefor
WO2013180454A1 (en) Method for displaying item in terminal and terminal using the same
WO2014107011A1 (en) Method and mobile device for displaying image
WO2014193101A1 (en) Method and apparatus for controlling screen display using environmental information
WO2015199484A2 (en) Portable terminal and display method thereof
WO2014084633A1 (en) Method for displaying applications and electronic device thereof
WO2011099713A2 (en) Screen control method and apparatus for mobile terminal having multiple touch screens
WO2014088253A1 (en) Method and system for providing information based on context, and computer-readable recording medium thereof
WO2014073825A1 (en) Portable device and control method thereof
WO2014046525A1 (en) Method and apparatus for providing multi-window in touch device
WO2014017790A1 (en) Display device and control method thereof
WO2012108620A2 (en) Operating method of terminal based on multiple inputs and portable terminal supporting the same
WO2015105271A1 (en) Apparatus and method of copying and pasting content in a computing device
WO2013103275A1 (en) Method and apparatus for implementing multi-vision system by using multiple portable terminals
WO2014017722A1 (en) Display device for executing multiple applications and method for controlling the same
WO2016021965A1 (en) Electronic device and method of controlling display thereof
WO2014129828A1 (en) Method for providing a feedback in response to a user input and a terminal implementing the same
WO2016190545A1 (en) User terminal apparatus and control method thereof
WO2014107005A1 (en) Mouse function provision method and terminal implementing the same
WO2015178677A1 (en) User terminal device, method for controlling user terminal device, and multimedia system thereof
WO2015005674A1 (en) Method for displaying and electronic device thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13892430

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13892430

Country of ref document: EP

Kind code of ref document: A1