WO2011090324A2 - 터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기 - Google Patents

터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기 Download PDF

Info

Publication number
WO2011090324A2
WO2011090324A2 PCT/KR2011/000405 KR2011000405W WO2011090324A2 WO 2011090324 A2 WO2011090324 A2 WO 2011090324A2 KR 2011000405 W KR2011000405 W KR 2011000405W WO 2011090324 A2 WO2011090324 A2 WO 2011090324A2
Authority
WO
WIPO (PCT)
Prior art keywords
touch
gui
control step
pressure
touch pressure
Prior art date
Application number
PCT/KR2011/000405
Other languages
English (en)
French (fr)
Other versions
WO2011090324A3 (ko
Inventor
김건년
박광범
김원효
이강열
서경학
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to US13/375,362 priority Critical patent/US9244601B2/en
Priority to CN201180002296.5A priority patent/CN102449593B/zh
Priority to EP11734873.0A priority patent/EP2527966A4/en
Publication of WO2011090324A2 publication Critical patent/WO2011090324A2/ko
Publication of WO2011090324A3 publication Critical patent/WO2011090324A3/ko
Priority to US14/968,492 priority patent/US10168886B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G06F3/04855—Interaction with scrollbars
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/013—Force feedback applied to a game
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Definitions

  • the present invention relates to a UI providing method and an electronic device using the same, and more particularly, to a UI providing method for receiving a user command through a touch screen and an electronic device applying the same.
  • touch device technology various kinds of touch pads or touch screens and touch devices have been adopted in mobile devices.
  • the user may input information or a command through the touch device, so that the mobile device does not need to have a separate input device.
  • touch devices In view of the increasing recognition rate and accuracy of touch devices, mobile devices with touch devices are increasing.
  • a touch device having only a touch device as an input device may be more inconvenient for a user than a conventional key button method.
  • the mobile device 10 has a touch screen including a display 11 and a transparent touch screen 12 positioned on an upper surface of the display 11.
  • the transparent touch screen 12 is an input device that senses user touch and allows the user to talk to the GUI on the display 11.
  • the touch screen 12 allows a user to make selections / settings on a graphical user interface by moving the input pointer or specifying GUI elements.
  • the touch screen detects a position where a plurality of fingers touch each other in a time sequence T1, T2, T3, or T4 to enlarge, reduce, scroll, or move content such as a text or an image.
  • the present invention has been made to solve the above problems, an object of the present invention, a method of providing a UI based on touch pressure that can provide a variety of UI based on the pressure of the touch manipulated by the user in the touch screen and It is to provide an electronic device applying this.
  • a UI providing method of an electronic device comprising: detecting a touch pressure of a single touch input through a touch screen provided in the electronic device; And controlling the electronic device based on the touch pressure.
  • the controlling step may adjust the size or zoom of the GUI-element displayed on the touch screen based on the touch pressure.
  • the controlling step may adjust the speed of the GUI-element displayed on the touch screen based on the touch pressure.
  • the size or zoom control object when the size or zoom control object is changed to another GUI-element, the size or zoom of the changed other GUI-element may be adjusted.
  • the controlling step may adjust at least one of the size, movement amount and rotation amount of the GUI-element displayed on the touch screen based on the touch pressure.
  • the controlling step may adjust at least one of thickness, density and color of the GUI-element displayed on the touch screen based on the touch pressure.
  • the speed of the GUI element displayed on the touch screen may be adjusted based on the touch pressure.
  • the speed of the GUI-element may be a speed for any one of the GUI-element movement, the GUI-element flipping, and the GUI-element playback.
  • the controlling step may control the movement of the GUI-element given the weight based on the touch pressure.
  • the controlling step may control at least one of an acoustic output and a tactile output of the electronic device based on the touch pressure.
  • the controlling step may select or execute different menu items based on the touch pressure.
  • the mode of the electronic device may be adjusted based on the touch pressure.
  • the controlling step may unlock the electronic device based on the touch pressure.
  • the wireless output of the electronic device may be controlled based on the touch pressure.
  • the electronic device the touch screen for grasping the touch pressure of the single touch input by the user; And a controller configured to control an operation based on the touch pressure.
  • a method of providing a UI of an electronic device comprising: detecting touch pressures of a multi-touch input through a touch screen provided in the electronic device; And controlling the electronic device based on the touch pressures.
  • the controlling step may adjust the size or zoom of the GUI-elements displayed on the touch screen, respectively, based on the touch pressures.
  • the size of the GUI element may be adjusted according to the 'direction in which the first point is the starting point and the multi-touching second point is the end point' based on the multi-touched first point.
  • the touch pressure applied to the second point may be greater than the touch pressure applied to the first point.
  • At least one of the size, the movement amount and the rotation amount of the GUI-elements displayed on the touch screen may be adjusted based on the touch pressures.
  • the controlling step may adjust at least one of the size, movement amount and rotation amount of the GUI-element displayed on the touch screen based on the combination of the touch pressures.
  • At least one of thickness, density, and color of the GUI elements displayed on the touch screen may be adjusted based on the touch pressures.
  • the controlling step may adjust the speed of the GUI-elements displayed on the touch screen based on the touch pressures, respectively.
  • the controlling step may adjust the speed of the GUI-element displayed on the touch screen based on the combination of the touch pressures.
  • the controlling step may control the movement of the weighted GUI-elements, respectively, based on the touch pressures.
  • the controlling step may three-dimensionally control at least one of an audio output and a tactile output of the electronic device based on the touch pressures.
  • the controlling step may provide a list of menu items dependent on the GUI element when the touch pressures of the multi-touched first point and the second point are second touch pressures greater than the first touch pressure.
  • a list of menu items dependent on the GUI element may be provided in an area of the first touch point and the second touch point.
  • the controlling step may three-dimensionally control the wireless output of the electronic device based on the touch pressures.
  • the electronic device the touch screen for grasping the touch pressures of the multi-touch input by the user; And a controller configured to control an operation based on the touch pressures.
  • FIG. 1 is a perspective view of a mobile device according to the prior art
  • 2 is a legend table for classifying touch operations by a user
  • 3 to 14 are provided to explain the size / zoom adjustment according to the single touch pressure
  • 15 to 26 are views provided to explain the speed (movement, skip, playback) control according to the single touch pressure
  • 27 and 28 are diagrams for explaining the weight expression according to the single touch pressure
  • 29 to 38 are diagrams provided in the description of auditory / tactile output adjustment according to a single touch pressure
  • 39 to 75 are views for explaining the function setting / execution according to the single touch pressure
  • 81 to 83 are views provided to explain the movement amount / rotation amount adjustment according to the multi-touch pressure
  • 92 to 95 are views for explaining the function setting / execution according to the multi-touch pressure
  • 98 is a block diagram of an electronic device capable of providing UIs in the manner described above.
  • FIG. 2 is a legend table for classifying touch manipulation by a user.
  • This various UI consists of GUI-elements.
  • the GUI-element is displayed on the touch screen such as an icon, a widget, a graphic controller, text, content, an application execution window, and provides information, content, and the like, and refers to an element to be manipulated.
  • the scrolling direction is scrolled in a direction in which the sequence number of contents increases.
  • the scroll speed increases.
  • the scrolling direction is decreased in the direction in which the contents are decreased.
  • the scroll-speed is the same as the case on the right side. Therefore, in the state where a plurality of contents (1, 2, 3, 4, 5) are arranged on the touch screen as shown in FIG. 3, the scroll-bar displayed at the bottom as shown in FIG. If the left portion is "Touch Down" (210) it is scrolled in the direction of decreasing the sequence number of the contents.
  • FIG. 9 when the block “A” is “Touch Down” 210 in the web browser, an enlarged frame appears at the edge of the block “A” as shown in FIG. 10. Thereafter, when the touch manipulation is changed to “Touch Down & Press Down” 220 as shown in FIG. 10, the contents of the block “A” in the enlarged frame are zoomed in as shown in FIG. 11.
  • the content of block "A” may be in various forms, such as images, text, and combinations of images and text.
  • the shape of the content can be modified according to the touch pressure.
  • the content is zoomed in / zoomed out according to the touch pressure, it is possible to implement so that the touched point is located in the center of the touch screen. This is useful for map and photo content.
  • the amount of movement of the touched GUI element can be adjusted according to the touch pressure. Specifically, 1) if the user's touch pressure on the GUI-element is large, the movement amount of the GUI-element is large (moving the GUI-element a lot on the touch screen), and 2) the user's touch pressure on the GUI-element is small. In this case, the movement amount of the GUI element can be reduced (moving the GUI element less in the touch screen).
  • the rotation amount of the GUI-element touched according to the touch pressure it is possible to adjust the rotation amount of the GUI-element touched according to the touch pressure. Specifically, 1) if the user's touch pressure on the GUI-element is large, the amount of rotation of the GUI-element is increased (rotating the GUI-element a lot on the touch screen), and 2) the user's touch pressure on the GUI-element is increased. If it is small, it is possible to reduce the amount of rotation of the GUI element (less rotation of the GUI element in the touch screen).
  • adjusting the movement amount / rotation amount may be adjusted in accordance with the touch pressure in parallel. For example, 1) if the user's touch pressure on the GUI-element increases, the amount of movement or rotation of the GUI-element is increased while causing the GUI-element to shrink or zoom out, and 2) the user on the GUI-element.
  • the touch pressure of is reduced, the amount of movement or rotation of the GUI element is reduced while the GUI element is implementable such that the GUI element is enlarged or zoomed in.
  • the thickness of the touched GUI element can be adjusted according to the touch pressure. For example, 1) if the user's touch pressure is large, the thickness of the input text is thickened, and 2) if the user's touch pressure with respect to the GUI-element is small, the text may be thinned.
  • the concentration of the GUI-element touched according to the touch pressure For example, 1) if the user's touch pressure is high, the density of the input text is darkened (darkened); and 2) if the user's touch pressure with respect to the GUI-element is small, the text density is lightened (lightened). Can be.
  • the color of the touched GUI-element in accordance with the touch pressure. For example, 1) if the user's touch pressure is large, the color of the input text is a warm (reddish color) color; and 2) if the user's touch pressure on the GUI-element is small, the color of the text is cold ( Blue color) color.
  • the speed (moving, skipping, playback) of the touched GUI element can be adjusted. For example, 1) if the user's touch pressure on the GUI-element is high, the speed (move, flip, play) of the GUI-element is high, and 2) if the user's touch pressure on the GUI-element is small, the GUI -You can slow down the speed of the element (move, skip, play).
  • the "Contacts” menu item is selected by the user, and the “Contacts” menu item is inverted as shown in FIG. 16, and the people starting with “A” as shown in FIG. 17. The contact for appears.
  • FIG. 6 to FIG. 8 illustrate the case where the content size is increased while the scroll-speed is reduced and the content size is reduced as the scroll-speed is increased according to the touch pressure.
  • the GUI element speeds up (moves, skips, plays), and the size of the GUI element increases, and 2) the user touches the GUI element. If the touch pressure is reduced, the speed (movement, skipping, playback) of the GUI element may be slowed down, and the size of the GUI element may be reduced.
  • weight may be given to the GUI-element. That is, some of the GUI-elements displayed on the touch screen may be heavy and others may be light. More specifically, it can be set that a folder icon in which a large number of files are stored is heavy, and a folder icon in which a small number of files is stored is light.
  • the required touch pressure may be determined according to the weight of the GUI element, thereby indirectly expressing the weight of the GUI element. That is, in order to drag a folder icon in which 100 files are stored as shown in FIG. 27, a "Touch Down & Press Down" 220 is required, and as shown in FIG. 28, drag a folder icon in which 10 files are stored. In order to do so, a "Touch Down" 210 is required.
  • the moving speed may be changed according to the weight of the GUI element. This means that the moving speed when dragging the heavy folder icon shown in FIG. 27 by "Touch Down & Press Down” 220 is “Touch Down & Press Down” 220 when the light folder icon shown in FIG. 28 is dragged. This means that it appears slower than the moving speed when dragging.
  • acoustic output sound
  • the touch pressure For example, 1) if the user's touch pressure is large, the sound output is increased, and 2) if the user's touch pressure is small, the sound output is reduced.
  • the tactile output (vibration) according to the touch pressure. For example, 1) if the user's touch pressure is large, the vibration output is large, and 2) if the user's touch pressure is small, the vibration output is small.
  • Vibration pattern refers to the increase and decrease of the pressure input by the user for a certain time.
  • the vibration recording menu is selected in the music player as shown in FIG. 33
  • the vibration recording screen as shown in FIG. 34 is displayed.
  • the vibration recording is started as shown in FIG. 35.
  • the stored vibration pattern can be used as a phone call vibration, it is possible to generate and use a vibration pattern according to one's taste. In addition, it is possible to generate and store several vibration patterns. In this case, it is possible to map different vibration patterns for each group of contacts.
  • 39 to 44 illustrate a method of executing a main menu item according to a touch pressure.
  • the touch pressure is shown as a gauge on the right side of the touch screen, as shown, it can be seen that the magnitude of the touch pressure is level-1.
  • 45 to 54 illustrate a method of performing an item selection according to the touch pressure.
  • the call log as shown in FIG. 48 is displayed on the touch screen.
  • call-in item is "Touch Down & Press Down” 220
  • call-in / out history is scrolled sequentially as shown in FIG.
  • touch pressure is increased by converting the touch operation to “Touch Down & Press Down & Stronger” 230 as shown in FIG. 49
  • the scroll-speed of call reception history increases as shown in FIG. 50.
  • a method of automatically setting the text mode according to the touch pressure will be described in detail with reference to FIGS. 54 to 59. Specifically, a method of inputting "apparent A" will be described in detail.
  • the touch pressure is a predetermined specific size performs a corresponding function, but if the touch pressure is not a predetermined specific size it can be implemented by not performing the function.
  • 60 to 67 illustrate a method of unlocking based on touch pressure.
  • FIG. 60 is a diagram illustrating a lock screen displayed on a touch screen. As shown in FIG. 60, a phrase for guiding a lock releasing method is displayed at the bottom of the lock screen.
  • FIG. 61 illustrates a situation in which a drag is applied while applying a touch pressure or more to a roller coaster. As shown in FIG. 61, when the roller coaster starts dragging, the guide phrase disappears.
  • FIG. 62 illustrates a situation in which the touch pressure applied to the roller coaster becomes less than a certain size so that the roller coaster falls. Thereafter, the falling roller coaster is pushed back by the recoil as shown in FIG. 63 and returns to the initial position. When the roller coaster returns to the initial position, the guide text is displayed again.
  • FIG. 64 when a drag is applied to the vertex while applying a touch pressure of a predetermined size or more to the roller coaster, the roller coaster automatically moves along the downhill as shown in FIG. 65. Subsequently, as shown in FIG. 66, the initial screen gradually appears as the lock screen gradually disappears from the touch screen, and FIG. 67 illustrates a result of the initial screen appearance being completed.
  • the unlocking pressure pattern is set in advance, and the unlocking is performed by inputting the preset pressure pattern.
  • FIG. 68 is a diagram illustrating a lock screen displayed on a touch screen. As shown in FIG. 68, a phrase for guiding a lock releasing method is displayed at the bottom of the lock screen. As shown in the guide text, in order to release the lock, a predetermined pressure pattern has to be input at three points shown at the bottom of FIG.
  • the pressure pattern is assumed to be "medium-strong-weak".
  • the “medium-strong-weak” pressure pattern is a pressure in which touch pressure is applied level-in at the left point, touch pressure is applied level-intensity at the center point, and touch pressure is applied level-weak at the right point. It means pattern.
  • the touch pressure is applied in the level at the left point as shown in FIG. 70 for at least 1 second, after providing feedback that the touch pressure is properly input as shown in FIG. 71, the left point is changed as shown in FIG. 72. It is displayed differently from the point.
  • the intensity of the wireless output can be adjusted according to the touch pressure. Specifically, 1) if the touch pressure of the user is large, the intensity of the wireless output can be set large, and 2) if the touch pressure of the user is small, the intensity of the wireless output can be set small.
  • FIG. 76 illustrates a situation in which the wireless output icon is “Touch Down” 210 to set the intensity of the wireless output to be small.
  • the wireless output icon is “Touch Down & Press Down” 220 to increase the intensity of the wireless output. A largely set situation is shown.
  • the wireless scan range can be set large, and 2) if the touch pressure of the user is small, the wireless scan range can be set small.
  • the sizes of the multi-touched GUI-elements are each adjustable based on the touch pressures for each. Specifically, among the multi-touched GUI-elements, 1) the size of the GUI-element with greater touch pressure may be displayed larger, and 2) the size of the GUI-element with lower touch pressure may be displayed smaller.
  • the zoom state of the multi-touched GUI-elements can each be adjusted based on the touch pressures for each. Specifically, 1) of the multi-touched GUI-elements, the GUI-element with greater touch pressure may be zoomed in, and 2) the GUI-element with less touch pressure may be zoomed out.
  • a new function may be performed based on the touch pressures of the multi-touched points.
  • the two points are treated as simple two-point multi-touch, but one point (hereinafter referred to as 210-point) is "Touch Down".
  • "210" and the other point is "Touch Down & Press Down” 220, the size of the GUI element "A”, "210-point” relative to the "210-point” , The size of the GUI element " A "
  • the amounts of movement of the multi-touched GUI-elements are respectively adjustable based on touch pressures for each. Specifically, 1) of the multi-touched GUI-elements, the amount of movement of the GUI-element with greater touch pressure can be made larger, and 2) the amount of movement of the GUI-element with less touch pressure can be made smaller.
  • the rotation amount of the GUI element can be adjusted based on the combination of the multi-touch pressures, respectively. For example, 1) when the left portion of the handle is “Touch Down & Press Down” 220 and the handle is the “Touch Down” 210 as shown in FIG. 82, the vehicle rotates to the left. And 2) when the right portion of the handle is "Touch Down & Press Down” 220 and the left portion is “Touch Down” 210 as shown in FIG. 83, the vehicle is allowed to rotate to the right. Can be.
  • the thicknesses of the multi-touched GUI-elements are each adjustable based on the touch pressures for each. Specifically, 1) among the multi-touch texts, the thickness of the text having the larger touch pressure may be displayed in bold, and 2) the thickness of the text having the smaller touch pressure may be displayed in thin.
  • the concentrations of the multi-touched GUI-elements are each adjustable based on the touch pressures for each. Specifically, 1) the touch pressure of the multi-touched text may be displayed in a thicker text, and 2) the text of which the touch pressure is small may be displayed in blur.
  • the colors of the multi-touched GUI-elements are each adjustable based on touch pressures for each.
  • the color of the text with a higher touch pressure may be a warm (red) color
  • the color of the text with a small touch pressure may be a cold (blue) color.
  • the speeds (move, flip, play) of the multi-touched GUI-elements are respectively adjustable based on the touch pressures for each. Specifically, 1) the speed (move, flip, play) of GUI-element with high touch pressure is fast, and 2) the speed (move, flip, play) of GUI-element with low touch pressure is slow. can do.
  • the amount of rotation of the GUI element can be adjusted respectively based on the combination of multi-touch pressures. For example, 1) when the brake is “Touch Down & Press Down” 220 and the accelerator pedal is “Touch Down” 210 as shown in FIG. 85, the vehicle runs at low speed, and 2) FIG. 86 As shown in FIG. 2, when the accelerator pedal is “Touch Down & Press Down” 220 and the brake is “Touch Down” 210, the automobile may be driven at high speed.
  • the left vibration motor is the right vibration motor.
  • the right vibration motor vibrates to the left. It can be operated larger than the motor.
  • the upper vibration motor is operated larger than the lower vibration motor
  • the lower vibration motor may be operated larger than the upper vibration motor
  • the left antenna is wireless than the right antenna.
  • Output is large
  • the right part of the wireless output icon is “Touch Down & Press Down” 220 and the left part is “Touch Down” 210 as shown in FIG. 97
  • the right antenna is wireless than the left antenna. You can make the output large.
  • the top antenna has a higher wireless output than the bottom antenna
  • the bottom of the wireless output icon when 1) the top of the wireless output icon is "Touch Down & Press Down" 220 and the bottom is “Touch Down” 210, the top antenna has a higher wireless output than the bottom antenna, and 2) the bottom of the wireless output icon.
  • the lower antenna can have a larger wireless output than the upper antenna.
  • the touch pressure may be displayed as a gauge to guide the user.
  • this is merely an example for convenience of description and may guide the touch pressure magnitude in another way.
  • a circular guide having a radius proportional to the touch pressure at the touched point or a color of the gauge or the circular guide may be changed according to the touch pressure.
  • touch pressure guide by voice or vibration, and of course, such a guide may be applied as it is in the case of multi-touch.
  • the electronic devices capable of providing the aforementioned UIs include the touch screen 110, the communication unit 120, the control unit 130, the audio / vibration output unit 140, and the storage unit 150. It is provided.
  • the touch screen 110 functions as a display on which the aforementioned UI is displayed as well as an input means for receiving a user command through a touch.
  • the touch screen 110 may detect the touch pressure as well as the touch point by the user.
  • the communication unit 120 is connected to communicate with an external device and / or an external communication network.
  • the audio / vibration output unit 140 performs sound output and vibration output.
  • the storage unit 150 is a storage medium in which a program for driving an electronic device and a program for providing the aforementioned UIs are stored.
  • the controller 130 drives a program stored in the storage 150 to drive an electronic device.
  • the controller 130 provides a UI through the touch screen 110 and displays the touch screen 110 according to a user command (in particular, a user's touch pressure) input through the provided UI, and the communication unit 120.
  • a user command in particular, a user's touch pressure
  • the electronic device illustrated in FIG. 98 may be implemented in various shapes. Such shapes include folder-type, slide-type, bar-type, rotational-type, swing-type, and combinations thereof.
  • the electronic devices shown in Fig. 98 are of any kind. 1) mobile devices such as smartphones or mobile PCs, as well as 2) home-mounted devices such as DTVs, STBs, home theaters, DVD players, audio systems, and TV-based game consoles, 3) digital conference systems, table top devices, It can also be applied to outdoor stationary devices such as copiers, printers, and composite devices, and 4) outdoor display devices installed in large stores or public places such as advertisement displays and guide displays.
  • the technical idea of the present invention may be implemented as an application program executed in the electronic device as well as the basic drive program for driving the electronic device, the state in which the program is mounted on the device may be applied to the electronic device
  • This program can be implemented as a CD bundle, or downloaded wirelessly via the Internet or mobile communication network.

Abstract

터치 압력에 기반한 UI 제공방법 및 이를 적용한 전자기기가 제공된다. 본 전자기기의 UI 제공방법은, 전자기기에 마련된 터치 스크린을 통해 입력된 터치의 터치 압력을 파악하고, 터치 압력을 기초로 전자기기를 제어한다. 이에 의해, 터치 스크린에서 사용자에 의해 조작된 터치의 압력을 기반으로 다양한 UI를 제공할 수 있게 되어, 사용자의 편의성과 엔터테인먼트를 향상시킬 수 있게 된다.

Description

터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기
본 발명은 UI 제공방법 및 이를 적용한 전자기기에 관한 것으로, 더욱 상세하게는 터치 스크린을 통해 사용자 명령을 입력받는 UI 제공방법 및 이를 적용한 전자기기에 관한 것이다.
현재 모바일 기기 등과 같은 전자기기에서 효율적으로 문자를 입력하기 위한 다양한 입력장치들이 존재하며 대표적인 입력방법으로는 버튼을 이용한 입력방식, 포인팅을 이용한 입력방식, 터치 스크린을 이용한 방식 등이 사용되고 있다.
최근에는 터치 디바이스 기술의 발전으로 인해, 다양한 종류의 터치패드 또는 터치 스크린과 터치 디바이스가 모바일 기기에 채택되고 있다. 터치 디바이스를 이용할 경우, 사용자는 터치 디바이스를 통해 정보 또는 명령을 입력할 수 있으므로 모바일 기기에 별도의 입력 장치를 구비할 필요가 없는 장점이 있다. 터치 디바이스의 인식률 및 정확도 또한 점점 향상되고 있는 점에 비추어, 터치 디바이스를 구비한 모바일기기는 점점 증가하고 있다.
그러나, 이와 같은 터치 디바이스의 기술적 발전에도 그 장치적 특성을 충분히 활용할 수 있는 사용자 인터페이스가 부족한 실정이다. 예컨대, 입력장치로서 터치 디바이스만을 구비한 모바일기기가 종래의 키버튼 방식보다 사용자 입장에서 더 불편할 수도 있다.
도 1은 종래기술에 따른 모바일 기기의 사시도이다. 모바일 기기(10)는 디스플레이(11)와 디스플레이(11)의 상면에 위치된 투명 터치 화면(12)을 포함하는 터치 스크린을 구비한다. 투명 터치 화면(12)은 사용자 터치를 감지하는 입력 장치이며, 사용자가 디스플레이(11) 상의 GUI와 대화하게 한다.
예컨대, 터치 화면(12)에 의해 사용자는 입력 포인터를 이동시키거나, GUI 요소를 지정함으로써 그래픽 사용자 인터페이스상에서 선택/설정을 행할 수 있게 된다.
터치 스크린에서는 도 1에 도시된 바와 같이 여러 개의 손가락이 닿는 위치를 시간 순서(T1, T2, T3, T4)에 따라 감지하여 문자 또는 이미지 등의 컨텐츠를 확대, 축소, 스크롤이나 이동시킬 수 있다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 터치 스크린에서 사용자에 의해 조작된 터치의 압력을 기반으로 다양한 UI를 제공할 수 있는 터치 압력에 기반한 UI 제공방법 및 이를 적용한 전자기기를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명에 따른, 전자기기의 UI 제공방법은, 상기 전자기기에 마련된 터치 스크린을 통해 입력된 싱글 터치의 터치 압력을 파악하는 단계; 및 상기 터치 압력을 기초로, 상기 전자기기를 제어하는 단계;를 포함한다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기 또는 줌을 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 함께 조절할 수 있다.
상기 제어 단계는, 크기 또는 줌 제어 대상이 다른 GUI-요소로 변경되면, 변경된 다른 GUI-요소의 크기 또는 줌을 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기, 이동량 및 회전량 중 적어도 하나를 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 굵기, 농도 및 색상 중 적어도 하나를 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 조절할 수 있다.
상기 GUI-요소의 속도는, 상기 GUI-요소 이동, 상기 GUI-요소 넘기기, 상기 GUI-요소 재생 중 어느 하나에 대한 속도일 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 중량감이 부여된 GUI-요소에 대한 이동을 제어할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 전자기기의 청각적 출력 및 촉각적 출력 중 적어도 하나를 제어할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 각기 다른 메뉴항목을 선택 또는 실행할 수 있다.
상기 제어단계는, 상기 터치 압력을 기초로, 상기 전자기기의 모드를 조정할 수 있다.
상기 제어단계는, 상기 터치 압력을 기초로, 상기 전자기기의 잠금을 해제할 수 있다.
상기 제어 단계는, 상기 터치 압력을 기초로, 상기 전자기기의 무선 출력을 제어할 수 있다.
한편, 본 발명에 따른, 전자기기는, 사용자에 의해 입력된 싱글 터치의 터치 압력을 파악하는 터치 스크린; 및 상기 터치 압력을 기초로, 동작을 제어하는 제어부;를 포함한다.
상기 목적을 달성하기 위한 본 발명에 따른, 전자기기의 UI 제공방법은, 상기 전자기기에 마련된 터치 스크린을 통해 입력된 멀티 터치의 터치 압력들을 파악하는 단계; 및 상기 터치 압력들을 기초로, 상기 전자기기를 제어하는 단계;를 포함한다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 크기 또는 줌을 각각 조절할 수 있다.
상기 제어 단계는, 멀티 터치된 제1 지점을 기준으로, '상기 제1 지점을 시점, 멀티 터치된 제2 지점을 종점으로 하는 방향'에 따라 GUI 요소의 크기를 조절할 수 있다.
상기 제어 단계는, 상기 제2 지점에 인가된 터치 압력은, 상기 제1 지점에 인가된 터치 압력 보다 클 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 크기, 이동량 및 회전량 중 적어도 하나를 각각 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력들의 조합을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기, 이동량 및 회전량 중 적어도 하나를 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 굵기, 농도 및 색상 중 적어도 하나를 각각 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 속도를 각각 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력들의 조합을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 조절할 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 중량감이 부여된 GUI-요소들에 대한 이동을 각각 제어할 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 전자기기의 청각적 출력 및 촉각적 출력 중 적어도 하나를 입체적으로 제어할 수 있다.
상기 제어 단계는, 멀티 터치된 제1 지점과 제2 지점의 터치 압력들이 제1 터치 압력 보다 큰 제2 터치 압력이면, 상기 GUI 요소에 종속된 메뉴항목들의 리스트를 제공할 수 있다.
상기 제어 단계는, 상기 GUI 요소에 종속된 메뉴항목들의 리스트를 멀티 터치된 제1 지점과 제2 지점의 영역 내에 제공할 수 있다.
상기 제어 단계는, 상기 터치 압력들을 기초로, 상기 전자기기의 무선 출력을 입체적으로 제어할 수 있다.
한편, 본 발명에 따른 전자기기는, 사용자에 의해 입력된 멀티 터치의 터치 압력들을 파악하는 터치 스크린; 및 상기 터치 압력들을 기초로, 동작을 제어하는 제어부;를 포함한다.
이상 설명한 바와 같이, 본 발명에 따르면, 터치 스크린에서 사용자에 의해 조작된 터치의 압력을 기반으로 다양한 UI를 제공할 수 있게 되어, 사용자의 편의성과 엔터테인먼트를 향상시킬 수 있게 된다.
도 1은 종래기술에 따른 모바일 기기의 사시도,
도 2는 사용자에 의한 터치 조작을 구분하기 위한 범례표,
도 3 내지 14는, 싱글 터치 압력에 따른 크기/줌 조절의 설명에 제공되는 도면,
도 15 내지 26은, 싱글 터치 압력에 따른 속도(이동,넘기기,재생) 조절의 설명에 제공되는 도면,
도 27 및 28은, 싱글 터치 압력에 따른 중량감 표현의 설명에 제공되는 도면,
도 29 내지 38은, 싱글 터치 압력에 따른 청각/촉각적 출력 조절의 설명에 제공되는 도면,
도 39 내지 75는, 싱글 터치 압력에 따른 기능 설정/실행의 설명에 제공되는 도면,
도 76 및 77은, 싱글 터치 압력에 따른 무선 출력 조절의 설명에 제공되는 도면,
도 78 내지 80은, 멀티 터치 압력에 따른 크기/줌 조절의 설명에 제공되는 도면,
도 81 내지 83은, 멀티 터치 압력에 따른 이동량/회전량 조절의 설명에 제공되는 도면,
도 84 내지 86은, 멀티 터치 압력에 따른 속도(이동,넘기기,재생) 조절의 설명에 제공되는 도면,
도 87 내지 91은, 멀티 터치 압력에 따른 청각/촉각적 출력 조절의 설명에 제공되는 도면,
도 92 내지 95는, 멀티 터치 압력에 따른 기능 설정/실행의 설명에 제공되는 도면,
도 96 및 97은, 멀티 터치 압력에 따른 무선 출력 조절의 설명에 제공되는 도면, 그리고,
도 98은 지금까지 설명한 방식의 UI들을 제공할 수 있는 전자기기의 블럭도이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
1. 터치 조작의 구분
도 2는 사용자에 의한 터치 조작을 구분하기 위한 범례표이다. 도 2에서,
1) "Touch Down"(210)은 터치 스크린을 약한 압력으로 터치하는 조작,
2) "Touch Down & Press Down"(220)은 터치 스크린을 강한 압력으로 터치하는 조작,
3) "Touch Down & Press Down & Stronger"(230)은 "Touch Down & Press Down"(220) 후에 압력을 더욱 증가시키는 조작,
4) "Touch Down & Press Down & Up"(240)은 "Touch Down & Press Down"(220) 후에 '터치를 해제하는'(즉, 터치 스크린에서 손가락을 떼는) 조작,
5) "Touch Down & Press Down & Stronger & Up"(250)은 "Touch Down & Press Down & Stronger"(230) 후에 '터치를 해제하는'(즉, 터치 스크린에서 손가락을 떼는) 조작을 말한다.
이하에서는, 위 조작들을 이용하여 조작할 수 있는 다양한 UI들을 제공할 것이다. 이 다양한 UI는 GUI-요소들로 구성된다.
GUI-요소는 아이콘, 위젯, 그래픽 컨트롤러, 텍스트, 컨텐츠, 어플리케이션 실행창 등과 같이 터치 스크린에 표시되며, 정보, 컨텐츠 등을 제공하고, 조작 대상이 되는 요소를 말한다.
2. 싱글 터치
2.1 터치 압력에 따른 크기/줌 조절
터치 압력에 따라 터치된 GUI-요소의 크기 조절이 가능하다. 구체적으로, 1) GUI-요소에 대한 사용자의 터치 압력이 크면, GUI-요소의 크기를 크게 표시하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, GUI-요소의 크기를 작게 표시할 수 있다.
도 3에 도시된 바와 같이 터치 스크린에 다수의 컨텐츠들(1,2,3,4,5)이 배열되어 있는 상태에서, 도 4에 도시된 바와 같이 하단에 표시되어 있는 스크롤-바의 우측 부분을 "Touch Down"(210)하면, 도 5에 도시된 바와 같이 표시되는 컨텐츠들의 순번이 증가하는 방향으로 스크롤 된다.
이와 같이 스크롤-바에서의 터치 지점이 우측인 경우 컨텐츠들의 순번이 증가하는 방향으로 스크롤 되는데, 터치 지점이 우측일수록 스크롤-속도가 빨라진다.
한편, 도 5에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down"(220)으로 변경되면, 스크롤-속도가 줄어들면서 도 6에 도시된 바와 같이 중앙에 위치한 컨텐츠가 확대된다.
그리고, 도 6에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down & Stronger"(230)으로 변경되면, 스크롤-속도는 더욱 줄어들고 도 7에 도시된 바와 같이 중앙에 위치한 컨텐츠가 더욱 확대된다.
만약, 도 7에 도시된 상황에서 터치 조작이 "Touch Down & Press Down"(220)으로 변경되면, 중앙에 위치한 컨텐츠가 축소되지만 스크롤-속도는 증가하게 될 것이다. 그리고, 이 상황에서 터치 조작이 "Touch Down"(210)으로 변경되면 중앙에 위치한 컨텐츠는 더욱 축소되지만 스크롤-속도는 더욱 증가하게 될 것이다.
한편, 스크롤-바에서의 터치 지점이 좌측인 경우 컨텐츠들의 순번이 감소하는 방향으로 스크롤하는데, 터치 지점이 좌측일수록 스크롤-속도가 빨라짐은 우측의 경우와 동일하다. 따라서, 도 3에 도시된 바와 같이 터치 스크린에 다수의 컨텐츠들(1,2,3,4,5)이 배열되어 있는 상태에서, 도 8에 도시된 바와 같이 하단에 표시되어 있는 스크롤-바의 좌측 부분을 "Touch Down"(210)하면 컨텐츠들의 순번이 감소하는 방향으로 스크롤 된다.
1) 터치 스크린에 표시된 컨텐츠에 대한 사용자의 터치 압력이 크면, 컨텐츠를 줌-인하고, 2) 컨텐츠에 대한 사용자의 터치 압력이 작으면, 컨텐츠를 줌-아웃할 수 있는 바, 이하에서 구체적인 예를 들어 설명한다.
도 9에 도시된 바와 같이 웹브라우저에서 블럭 "A"가 "Touch Down"(210)되면, 도 10에 도시된 바와 같이 블럭 "A"의 테두리에 확대 프레임이 나타난다. 이후, 도 10에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down"(220)로 변경되면, 도 11에 도시된 바와 같이 확대 프레임 내에 있는 블럭 "A"의 내용이 줌-인 된다. 블럭 "A"의 내용은 이미지, 텍스트 및 이미지와 텍스트의 조합 등 다양한 형태일 수 있다.
한편, 도 11에 도시된 바와 같이 터치 조작이 "Touch Down"(210)로 변경된 후 화살표 방향으로 드래그 되면, 도 12에 도시된 바와 같이 확대 프레임이 드래그 방향에 따라 이동하고 이동된 확대 프레임 내의 내용이 줌-인 된다. 반면, 확대 프레임 내에 있었던 블럭 "A"의 내용은 확대 프레임이 이동됨에 따라 원래의 크기로 줌-아웃 된다.
만약, 도 13에 도시된 바와 같이 확대 프레임 밖의 지점이 "Touch Down"(210)되면, 도 14에 도시된 바와 같이 확대 프레임은 터치 스크린에서 사라진다.
한편, 터치 압력에 따라 컨텐츠의 모양을 변형하는 것도 가능하다. 예를 들어, 터치 스크린에 바탕 화면으로 "물고기가 있는 연못 컨텐츠'를 표시할 수 있는데, 여기에 터치 지점에서 동심원 모양의 물결을 표시하되 터치 압력에 따라 동심원의 크기가 결정되도록 구현가능하다.
다른 한편으로, 터치 압력에 따라 컨텐츠가 줌-인/줌-아웃 되되, 터치된 지점이 터치 스크린의 중앙에 위치하도록 구현하는 것이 가능하다. 지도, 사진 컨텐츠의 경우에 유용하다.
2.2 터치 압력에 따른 이동량/회전량 조절
터치 압력에 따라 터치된 GUI-요소의 이동량 조절이 가능하다. 구체적으로, 1) GUI-요소에 대한 사용자의 터치 압력이 크면, GUI-요소의 이동량을 크게(터치 스크린에서 GUI-요소를 많이 이동) 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, GUI-요소의 이동량을 작게(터치 스크린에서 GUI-요소를 적게 이동) 할 수 있다.
한편, 터치 압력에 따라 터치된 GUI-요소의 회전량 조절이 가능하다. 구체적으로, 1) GUI-요소에 대한 사용자의 터치 압력이 크면, GUI-요소의 회전량을 크게(터치 스크린에서 GUI-요소를 많이 회전) 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, GUI-요소의 회전량을 작게(터치 스크린에서 GUI-요소를 적게 회전) 할 수 있다.
다른 한편, 이동량/회전량 조절시에는 터치 압력에 따른 크기 조절을 병행할 수 있다. 예를 들어, 1) GUI-요소에 대한 사용자의 터치 압력이 증가하면, GUI-요소의 이동량 또는 회전량을 증가시키되 GUI-요소가 축소 또는 줌-아웃 되도록 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 감소하면,GUI-요소의 이동량 또는 회전량을 감소시키되 GUI-요소가 GUI-요소가 확대 또는 줌-인 되도록 구현가능하다.
2.3 터치 압력에 따른 굵기/농도/색상 조절
터치 압력에 따라 터치된 GUI-요소의 굵기 조절이 가능하다. 예를 들어, 1) 사용자의 터치 압력이 크면, 입력되는 텍스트의 굵기를 굵게 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, 텍스트의 굵기를 얇게 할 수 있다.
한편, 터치 압력에 따라 터치된 GUI-요소의 농도 조절이 가능하다. 예를 들어, 1) 사용자의 터치 압력이 크면, 입력되는 텍스트의 농도를 진하게(어둡게) 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, 텍스트의 농도를 연하게(밝게) 할 수 있다.
다른 한편으로, 터치 압력에 따라 터치된 GUI-요소의 색상 조절이 가능하다. 예를 들어, 1) 사용자의 터치 압력이 크면, 입력되는 텍스트의 색상을 따뜻한(붉은색 계통) 색상으로 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, 텍스트의 색상을 차가운(푸른색 계통) 색상으로 할 수 있다.
조절 대상을 조합하여 구현하는 것도 가능하다. 예를 들면, 1) 사용자의 터치 압력이 크면, 입력되는 텍스트의 굵기는 굵게 하되 색상은 따뜻한(붉은색 계통) 색상으로 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, 텍스트의 굵기는 얇게 하되 색상을 차가운(푸른색 계통) 색상으로 할 수 있다.
2.4 터치 압력에 따른 속도(이동,넘기기,재생) 조절
터치 압력에 따라 터치된 GUI-요소의 속도(이동,넘기기,재생) 조절이 가능하다. 예를 들어, 1) GUI-요소에 대한 사용자의 터치 압력이 크면, GUI-요소의 속도(이동,넘기기,재생)를 빠르게 하고, 2) GUI-요소에 대한 사용자의 터치 압력이 작으면, GUI-요소의 속도(이동,넘기기,재생)를 느리게 할 수 있다.
도 15에 도시된 바와 같이 사용자에 의해 "Contacts" 메뉴항목이 선택되어, 도 16에 도시된 바와 같이 "Contacts" 메뉴항목이 뒤집어지면서, 도 17에 도시된 바와 같이 "ㄱ"으로 시작하는 사람들에 대한 연락처가 나타난다.
도 18에 도시된 바와 같이 스크롤바의 하단이 "Touch Down(210)"되면, 도 19에 도시된 바와 같이 연락처가 아래 방향으로 스크롤 된다. 이때, 도 19에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down"(220)으로 변경되면, 도 20에 도시된 바와 같이, "ㄴ"으로 시작하는 사람들에 대한 연락처로 점프하게 된다. 즉, 터치 압력이 커지면, 스크롤 이동 속도가 빨라진다 할 수 있다.
이하에서는, 음악 컨텐츠에 대한 재생 속도를 터치 압력으로 조절하는 방법에 대해, 도 21 내지 도 26을 참조하여 상세히 설명한다.
도 21에 도시된 바와 같이 음악 컨텐츠 재생기가 실행된 후에, 디스크 형상의 조작기가 "Touch Down"(210)되면, 도 22에 도시된 바와 같이 디스크 형상의 중앙에 현재 재생속도인 "×1"을 표시한다. 이후, 도 22에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down"(220)으로 변경되면, 도 23에 도시된 바와 같이, 재생속도가 "×0.5"로 느려진다.
그리고, 도 23에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down & Stronger"(230)으로 변경되면, 도 24에 도시된 바와 같이, 재생속도가 "×0.2"로 더 느려지게 된다.
한편, 터치를 해제하면, 재생속도가 점차 증가하여 도 25에 도시된 바와 같이 "×1"로 복원되며, 이후에는 도 26에 도시된 바와 같이 재생속도 표시가 사라진다.
한편, 터치 압력에 따른 속도(이동,넘기기,재생) 조절은 크기 조절과 함께 조합되어 구현될 수 있는데, 이는 도 6 내지 도 8을 참조하여 설명한 바 있다. 구체적으로, 도 6 내지 도 8에서 터치 압력에 따라, 스크롤-속도가 줄어들면서 컨텐츠 크기가 확대되는 경우와 스크롤-속도가 빨라지면서 컨텐츠 크기가 축소되는 경우를 예시한 바 있다.
다른 한편, 1) GUI-요소에 대한 사용자의 터치 압력이 증가하면, GUI-요소의 속도(이동,넘기기,재생)가 빨라지면서 GUI-요소의 크기가 커지고, 2) GUI-요소에 대한 사용자의 터치 압력이 감소하면, GUI-요소의 속도(이동,넘기기,재생)가 느려지면서 GUI-요소의 크기가 작아지는 것으로도 구현가능하다.
2.5 터치 압력에 따른 중량감 표현
사용자에게 엔터테인먼트를 제공하는 차원에서, GUI-요소에 중량을 부여할 수 있다. 즉, 터치 스크린에 표시된 GUI-요소들 중 어느 것은 무겁고, 다른 것은 가벼울 수 있다. 보다 구체적으로, 많은 개수의 파일이 저장되어 있는 폴더 아이콘은 무겁고, 적은 개수의 파일이 저장되어 있는 폴더 아이콘은 가볍다고 설정할 수 있다.
이에 따르면, GUI-요소의 중량에 따라 요구되는 터치 압력이 결정되도록 하여, GUI-요소의 중량감을 간접적으로 표현할 수 있다. 즉, 도 27에 도시된 바와 같이 100개의 파일이 저장된 폴더 아이콘을 드래그 하기 위해서는 "Touch Down & Press Down"(220)이 요구되고, 도 28에 도시된 바와 같이 10개의 파일이 저장된 폴더 아이콘을 드래그하기 위해서는 "Touch Down"(210)이 요구되도록 구현가능하다.
만약, 도 27에 도시된 무거운 폴더 아이콘을 "Touch Down"(210)하여 드래그 한다면, 폴더 아이콘이 드래그 되지 않는다.
뿐만 아니라, 같은 터치 압력을 주어 드래그하더라도, GUI-요소의 중량에 따라 이동 속도가 달라지게 구현가능하다. 이는, 도 27에 도시된 무거운 폴더 아이콘을 "Touch Down & Press Down"(220)하여 드래그 하는 경우의 이동 속도가, 도 28에 도시된 가벼운 폴더 아이콘을 "Touch Down & Press Down"(220)하여 드래그 하는 경우의 이동 속도 보다 느리게 나타남을 의미한다.
2.6 터치 압력에 따른 청각/촉각적 출력 조절
터치 압력에 따라 청각적 출력(음향)을 조절하는 것이 가능하다. 예를 들어, 1) 사용자의 터치 압력이 크면, 음향 출력을 크게 하고, 2) 사용자의 터치 압력이 작으면, 음향 출력을 작게 하는 것이다.
즉, 1) 도 29에 도시된 바와 같이 음향 조절 아이콘을 "Touch Down"(210)하면 음향 출력이 작게 설정되고, 2) 도 30에 도시된 바와 같이 음향 조절 아이콘을 "Touch Down & Press Down"(220)하면 음향 출력이 크게 설정된다.
한편, 터치 압력에 따라 촉각적 출력(진동)을 조절하는 것도 가능하다. 예를 들어, 1) 사용자의 터치 압력이 크면, 진동 출력을 크게 하고, 2) 사용자의 터치 압력이 작으면, 진동 출력을 작게 하는 것이다.
즉, 1) 도 31에 도시된 바와 같이 진동 조절 아이콘을 "Touch Down"(210)하면 음향 출력이 작게 설정되고, 2) 도 32에 도시된 바와 같이 음향 조절 아이콘을 "Touch Down & Press Down"(220)하면 진동 출력이 크게 설정된다.
이하에서는, 터치 압력 조절을 통해 진동 패턴을 생성/저장하는 과정에 대해, 도 33 내지 도 38을 참조하여 상세히 설명한다. 진동 패턴은 일정 시간 동안 사용자에 의해 입력되는 압력의 증감 추이를 말한다.
도 33에 도시된 바와 같이 음악 재생기에서 진동 녹음 메뉴를 선택하면, 도 34에 도시된 바와 같은 진동 녹음 화면이 표시되는데 녹음 시작 메뉴를 선택하면, 도 35에 도시된 바와 같이 진동 녹음이 시작된다.
도 36에 도시된 바와 같이 "Touch Down"(210)이 조작되면 진동 파형은 작아지고, 도 37과 도 38에 도시된 바와 같이 "Touch Down & Press Down"(220)이 조작되면 진동 파형이 커지면서, 시간의 진행에 따라 변화된 진동 파형이 진동 패턴으로 저장된다.
저장된 진동 패턴은 전화 알림 진동으로 사용가능하므로, 자신의 취향에 맞는 진동 패턴을 생성하여 이용할 수 있다. 또한, 진동 패턴을 여러 개 생성하여 저장하는 것이 가능하다. 이 경우, 연락처의 그룹별로 각기 다른 진동 패턴을 매핑하는 것이 가능하다.
앞서, 터치 스크린에 바탕 화면으로 "물고기가 있는 연못 컨텐츠'가 표시된 경우, 터치 지점에서 터치 압력에 부합하는 크기를 가지는 동심원 모양의 물결을 표시하는 예를 제시한 바 있다. 여기에, 터치 압력에 부합하는 물방울 떨어지는 소리를 함께 출력하는 것도 상정할 수 있다.
2.7 터치 압력에 따른 기능 설정/실행
터치 압력을 측정하고, 측정된 터치 압력에 따라 각기 다른 기능을 설정/실행하는 것이 가능하다. 이는, 터치 압력에 따라 다양한 기능들 중 하나가 선택되어 설정/실행되는 것이라 할 수 있다. 이하에서 다양한 예들을 들어 상세히 설명한다.
도 39 내지 도 44는, 터치 압력에 따라 메인메뉴 항목을 실행하는 방법을 예시한 도면이다.
도 39에 도시된 바와 같이 터치 스크린에 표시된 아이콘이 "Touch Down & Press Down"(220)되면, 도 40에 도시된 바와 같이 아이콘의 첫 번째 메인메뉴 항목인 "Contacts"가 나타난다. 한편, 터치 스크린의 우측에는 터치 압력이 게이지로 나타나는데, 도시된 바에 따르면 터치 압력의 크기는 레벨-1임을 확인할 수 있다.
이후, 도 40에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down & Stronger"(230)로 변경되어 더 큰 터치 압력이 인가되면, 도 41에 도시된 바와 같이 터치 압력의 크기가 레벨-2로 증가함과 동시에 아이콘의 두 번째 메인메뉴 항목인 "Message"가 나타난다.
그리고, 도 41에 도시된 바와 같이 터치 조작이 "Touch Down & Press Down & Stronger"(230)로 계속 유지되어 더 큰 터치 압력이 인가되면, 도 42에 도시된 바와 같이 터치 압력의 크기가 레벨-3으로 증가함과 동시에 아이콘의 세 번째 메인메뉴 항목인 "Photo"가 나타난다.
한편, 도 42에 도시된 바와 같이 터치 스크린에 나타난 "Photo"를 "Touch Down"(210) 한 후에 좌측으로 플리커 하면, 도 43과 도 44에 도시된 바와 같이 "Photo" 항목이 뒤집어 지면서 사진 컨텐츠들이 재생된다.
도 45 내지 도 54는, 터치 압력에 따라 항목을 선택하는 실행하는 방법을 예시한 도면이다.
도 45에 도시된 바와 같이 터치 스크린에 나타난 "History" 메뉴항목을 "Touch Down"(210)하여 플리커하면, 도 46과 도 47에 도시된 바와 같이 "History" 항목이 뒤집어 지면서 실행된다.
그 결과 도 48에 도시된 바와 같은 통화 이력이 터치 스크린에 표시된다. 도 48에 도시된 바와 같이 "수발신" 항목이 "Touch Down & Press Down"(220)되면, 도 49에 도시된 바와 같이 수발신 이력들이 순차적으로 스크롤 된다. 이때, 도 49에 도시된 바와 같이 터치 조작을 "Touch Down & Press Down & Stronger"(230)로 변환하여 터치 압력을 증가시키면, 도 50에 도시된 바와 같이 수발신 이력들의 스크롤-속도가 증가한다.
한편, 도 50에 도시된 바와 같이, 터치 조작이 "Touch Down & Press Down"(220)으로 변환되어 터치 압력이 감소하면, 도 51에 도시된 바와 같이 스크롤 방향이 전환된다. 즉, 통화 이력의 스크롤 방향과 속도는 터치 압력에 의해 결정된다고 할 수 있다.
이때, 도 52에 도시된 바와 같이 특정 통화 이력이 "Touch Down & Press Down & Up"(240)되면, 도 53에 도시된 바와 같이 "Touch Down & Press Down & Up"(240)된 통화 이력에 대한 통화 시도가 이루어진다.
터치 압력에 따라 문자 모드를 자동 설정하는 방법에 대해, 도 54 내지 도 59를 참조하여 상세히 설명한다. 구체적으로 "꼭A"를 입력하는 방법에 대해 상세히 설명한다.
아래에서는, 도 54에 도시된 바와 같이 리플 메시지 입력 항목이 탭 조작되어 선택된 후, 도 55에 도시된 바와 같이 "ㄱ" 키가 "Touch Down & Press Down"(220)되면, 도 56에 도시된 바와 같이 "ㄲ"이 입력된다. 이후, 도 57에 도시된 바와 같이 "ㅗ"와 "ㄱ"이 순차적으로 탭 조작되면, 도 58에 도시된 바와 같이 "꼭"이 완성된다.
그리고, 도 57에 도시된 바와 같이 한/영 변환 아이콘 "ABC"가 탭 조작된 후, 도 58에 도시된 바와 같이 "A"가 "Touch Down & Press Down"(220)되면 영대문자 "A"가 입력된다. 만약, "A"가 탭 조작되었다면, 영소문자 "a"가 입력되었을 것이다.
한편, 터치 압력이 기설정된 특정 크기인 경우 해당 기능을 수행하지만, 터치 압력이 기설정된 특정 크기가 아니라면 해당 기능을 수행하지 않는 것으로 구현가능하다.
도 60 내지 도 67은, 터치 압력에 기반하여 잠금 해제(Unlock)를 수행하는 방법을 예시한 도면이다.
도 60은 터치 스크린에 표시되는 잠금 화면을 도시한 도면이다. 도 60에 도시된 바와 같이 잠금 화면의 하부에는 잠금 해제 방법을 안내하기 위한 문구 표시되어 있다. 도 61에는 롤러 코스터에 터치 압력을 특정 크기 이상 인가하면서 드래그하는 상황을 도시하였다. 도 61에 도시된 바와 같이 롤러 코스터를 드래그 시작하면 안내 문구는 사라진다.
도 62에는 롤러 코스터에 가해진 터치 압력이 특정 크기 미만이 되어 롤러 코스터가 떨어지는 상황을 도시하였다. 이후, 떨어지는 롤러 코스터는 도 63에 도시된 바와 같이 반동에 의해 뒤로 밀려났다가 처음 위치로 복귀한다. 롤러 코스터가 처음 위치로 복귀하면, 안내 문구가 다시 표시된다.
도 64에 도시된 바와 같이 롤러 코스터에 특정 크기 이상의 터치 압력을 인가하면서 정점까지 드래그하면, 도 65에 도시된 바와 같이 롤러 코스터는 내리막을 따라 자동으로 이동하게 된다. 이후, 도 66에 도시된 바와 같이 터치 스크린에서 잠금 화면이 점차 사라지면서 초기 화면이 서서히 등장하는데, 도 67에 초기 화면 등장이 완료된 결과를 도시하였다.
도 68 내지 도 75는, 터치 압력에 기반하여 잠금 해제(Unlock)를 수행하는 다른 방법을 예시한 도면이다. 여기서는, 잠금 해제용 압력 패턴을 미리 설정하며, 미리 설정된 압력 패턴을 입력하여 잠금 해제를 수행하게 된다.
도 68은 터치 스크린에 표시되는 잠금 화면을 도시한 도면이다. 도 68에 도시된 바와 같이 잠금 화면의 하부에는 잠금 해제 방법을 안내하기 위한 문구 표시되어 있다. 안내 문구에 나타난 바와 같이, 잠금 해제를 위해서는 도 68의 하부에 나타난 3개의 지점에 미리 설정된 압력 패턴을 입력하여야 한다.
여기서, 압력 패턴은 "중-강-약"인 것으로 상정한다. "중-강-약" 압력 패턴이란, 좌측 포인트에서는 터치 압력이 레벨-중으로 인가되고, 중앙 포인트에서는 터치 압력이 레벨-강으로 인가되고, 우측의 포인트에서는 터치 압력이 레벨-약으로 인가되는 압력 패턴을 의미한다.
도 68에서는 좌측 포인트에서 터치 압력이 레벨-약으로 잘못 인가되고, 도 69에서는 좌측 포인트에서 터치 압력이 레벨-강으로 잘못 인가되고 있는 상황을 도시하였다.
도 70에서와 같이 좌측 포인트에서 터치 압력이 레벨-중으로 1초 이상 맞게 인가되면, 도 71에 도시된 바와 같이 터치 압력이 맞게 입력되었다는 피드백이 제공된 후, 도 72에 도시된 바와 같이 좌측 포인트를 다른 포인트와 다르게 표시된다.
이후, 도 73에 도시된 바와 같이 중앙 포인트에 터치 압력이 레벨-강으로 1초 이상 인가되고, 도 74에 도시된 바와 같이 우측의 포인트에 터치 압력이 레벨-약으로 1초 이상 인가되면, 도 75에 도시된 바와 같이 터치 스크린에서 잠금 화면이 점차 사라지면서 초기 화면이 서서히 등장하게 되는데, 그 결과는 도 67과 동일하다.
2.8 터치 압력에 따른 무선 출력 조절
터치 압력에 따라 무선 출력의 강도 조절이 가능하다. 구체적으로, 1) 사용자의 터치 압력이 크면, 무선 출력의 강도를 크게 설정하고, 2) 사용자의 터치 압력이 작으면, 무선 출력의 강도를 작게 설정할 수 있다.
도 76에는 무선 출력 아이콘이 "Touch Down"(210)되어 무선 출력의 강도가 작게 설정된 상황을 도시하였고, 도 77에는 무선 출력 아이콘이 "Touch Down & Press Down"(220)되어 무선 출력의 강도가 크게 설정된 상황을 도시하였다.
같은 맥락으로, 터치 압력에 따라 무선 스캔 범위 조절이 가능하다. 구체적으로, 1) 사용자의 터치 압력이 크면, 무선 스캔 범위를 크게 설정하고, 2) 사용자의 터치 압력이 작으면, 무선 스캔 범위를 작게 설정할 수 있다.
3. 멀티 터치
3.1 터치 압력에 따른 크기/줌 조절
멀티 터치된 GUI-요소들의 크기들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 GUI-요소들 중 1) 터치 압력이 더 큰 GUI-요소의 크기는 크게 표시하고, 2) 터치 압력이 작은 GUI-요소의 크기는 작게 표시할 수 있다.
즉, 도 78에 도시된 바와 같이 원래 동일하였던 컨텐츠들 중 1) "Touch Down & Press Down"(220)된 컨텐츠 "A"는 크게 표시하고, 2) "Touch Down"(210)된 컨텐츠 "B"는 작게 표시한다.
그리고, 멀티 터치된 GUI-요소들의 줌 상태를 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 GUI-요소들 중 1) 터치 압력이 더 큰 GUI-요소는 줌-인하고, 2) 터치 압력이 작은 GUI-요소는 줌-아웃할 수 있다.
한편, 멀티 터치된 지점들의 터치 압력들을 기초로, 새로운 기능을 수행할 수 있다. 예를 들어, 도 79에 도시된 바와 같이 두 개의 지점이 "Touch Down"(210)로 멀티 터치된 경우 단순한 2지점의 멀티 터치로 취급하지만, 한 지점(이하, 210-지점)이 "Touch Down"(210)되고 다른 한 지점(이하, 220-지점)이 "Touch Down & Press Down"(220)되면 GUI 요소 "A"의 크기를, '210-지점을 기준'으로 '210-지점을 시점, 220-지점을 종점으로 하는 방향'에 따라 GUI 요소 "A"의 크기를 확대하도록 구현가능하다.
3.2 터치 압력에 따른 이동량/회전량 조절
멀티 터치된 GUI-요소들의 이동량들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 GUI-요소들 중 1) 터치 압력이 더 큰 GUI-요소의 이동량은 크게, 2) 터치 압력이 작은 GUI-요소의 이동량은 작게 할 수 있다.
즉, 도 81에 도시된 바와 같이, 1) "Touch Down & Press Down"(220)된 발사대에서 발사된 미사일을 멀리 이동하고, 2) "Touch Down"(210)된 발사대에서 발사된 미사일을 짧게 이동하도록 구현가능하다.
그리고, GUI-요소의 회전량을 멀티 터치 압력들의 조합을 기초로 각각 조절 가능하다. 예를 들어, 1) 도 82에 도시된 바와 같이 핸들의 좌측 부분이 "Touch Down & Press Down"(220)되고, 핸들이 우측 부분이 "Touch Down"(210)된 경우, 자동차는 좌측으로 회전하고, 2) 도 83에 도시된 바와 같이 핸들의 우측 부분이 "Touch Down & Press Down"(220)되고, 핸들이 좌측 부분이 "Touch Down"(210)된 경우, 자동차는 우측으로 회전하게 할 수 있다.
3.3 터치 압력에 따른 굵기/농도/색상 조절
멀티 터치된 GUI-요소들의 굵기들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 텍스트들 중 1) 터치 압력이 더 큰 텍스트의 굵기는 굵게 표시하고, 2) 터치 압력이 작은 텍스트의 굵기는 얇게 표시할 수 있다.
그리고, 멀티 터치된 GUI-요소들의 농도들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 텍스트들 중 1) 터치 압력이 더 텍스트는 진하게 표시하고, 2) 터치 압력이 작은 텍스트는 흐리게 표시할 수 있다.
또한, 멀티 터치된 GUI-요소들의 색상들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 텍스트들 중 1) 터치 압력이 더 큰 텍스트의 색상은 따뜻한(붉은색 계통) 색상으로, 2) 터치 압력이 작은 텍스트의 색상은 차가운(푸른색 계통) 색상으로 할 수 있다.
3.4 터치 압력에 따른 속도(이동,넘기기,재생) 조절
멀티 터치된 GUI-요소들의 속도(이동,넘기기,재생)들을 각각에 대한 터치 압력들을 기초로 각각 조절 가능하다. 구체적으로, 멀티 터치된 텍스트들 중 1) 터치 압력이 큰 GUI-요소의 속도(이동,넘기기,재생)는 빠르게, 2) 터치 압력이 작은 GUI-요소의 속도(이동,넘기기,재생)는 느리게 할 수 있다.
즉, 도 84에 도시된 바와 같이, 1) "Touch Down & Press Down"(220)된 레버로 조작되는 비행기는 빠른 속도로 이동하고, 2) "Touch Down"(210)된 레버로 조작되는 비행기는 느린 속도로 이동하도록 구현가능하다.
또한, GUI-요소의 회전량을 멀티 터치 압력들의 조합을 기초로 각각 조절 가능하다. 예를 들어, 1) 도 85에 도시된 바와 같이 브레이크가 "Touch Down & Press Down"(220)되고 가속패달이 "Touch Down"(210)된 경우, 자동차는 저속으로 주행하고, 2) 도 86에 도시된 바와 같이 가속패달이 "Touch Down & Press Down"(220)되고, 브레이크가 "Touch Down"(210)된 경우, 자동차는 고속으로 주행하도록 구현가능하다.
3.5 터치 압력에 따른 중량감 표현
각기 다른 중량이 부여된 GUI-요소들을 드래그 하기 위해 요구되는 각기 다른 터치 압력들이 멀티 터치로 함께 인가되는 경우, 각기 다른 중량이 부여된 GUI-요소들이 함께 드래그 될 수 있다.
3.6 터치 압력에 따른 청각/촉각적 출력 조절
멀티 터치된 지점들에서의 터치 압력들을 기초로, 음향을 입체적으로 조절하는 것이 가능하다.
예를 들어, 1) 도 87에 도시된 바와 같이 음향 조절 아이콘의 좌측 부분이 "Touch Down & Press Down"(220)되고 우측 부분이 "Touch Down"(210)되면, 좌측 스피커에서 우측 스피커 보다 음향이 크게 출력되고, 2) 도 88에 도시된 바와 같이 음향 조절 아이콘의 우측 부분이 "Touch Down & Press Down"(220)되고 좌측 부분이 "Touch Down"(210)되면, 우측 스피커에서 우측 스피커 보다 음향이 크게 출력도록 할 수 있다.
마찬가지로, 1) 음향 조절 아이콘의 상부가 "Touch Down & Press Down"(220)되고 하부가 "Touch Down"(210)되면, 상부 스피커에서 하부 스피커 보다 음향이 크게 출력되고, 2) 음향 조절 아이콘의 하부가 "Touch Down & Press Down"(220)되고 상부가 "Touch Down"(210)되면, 하부 스피커에서 상부 스피커 보다 음향이 크게 출력도록 할 수 있다.
그리고, 멀티 터치된 지점들에서의 터치 압력들을 기초로, 진동을 입체적으로 조절하는 것이 가능하다.
예를 들어, 1) 도 89에 도시된 바와 같이 진동 조절 아이콘의 좌측 부분이 "Touch Down & Press Down"(220)되고 우측 부분이 "Touch Down"(210)되면, 좌측 진동 모터가 우측 진동 모터 보다 크게 동작되고, 2) 도 90에 도시된 바와 같이 진동 조절 아이콘의 우측 부분이 "Touch Down & Press Down"(220)되고 좌측 부분이 "Touch Down"(210)되면, 우측 진동 모터가 좌측 진동 모터 보다 크게 동작되도록 할 수 있다.
마찬가지로, 1) 진동 조절 아이콘의 상부가 "Touch Down & Press Down"(220)되고 하부가 "Touch Down"(210)되면, 상부 진동 모터가 하부 진동 모터 보다 크게 동작되고, 2) 음향 조절 아이콘의 하부가 "Touch Down & Press Down"(220)되고 상부가 "Touch Down"(210)되면, 하부 진동 모터가 상부 진동 모터 보다 크게 동작도록 할 수 있다.
한편, 도 91에 도시된 바와 같이, 터치 스크린에 표시된 그래픽 피아노에서 2개의 건반이 각기 다른 터치 압력들로 멀티 터치된 경우, 멀티 터치된 건반들의 음들이 출력되되 출력 세기들은 터치 압력들에 각각 비례하도록 할 수 있다.
3.7 터치 압력에 따른 기능 설정/실행
멀티 터치된 지점들의 터치 압력을 측정하고, 측정된 터치 압력에 따라 각기 다른 기능을 설정/실행하는 것이 가능하다. 이는, 터치 압력에 따라 다양한 기능들 중 하나가 선택되어 설정/실행되는 것이라 할 수 있다. 이하에서 다양한 예들을 들어 상세히 설명한다.
1) 도 92에 도시된 바와 같이 GUI 요소 "A"의 모서리 지점들이 "Touch Down"(210)되면 단순한 멀티 터치로 취급되지만, 2) 도 93에 도시된 바와 같이 GUI 요소 "A"의 모서리 지점들이 "Touch Down & Press Down"(220)되면 GUI 요소 "A"에 종속된 메뉴항목들의 리스트를 제공하도록 구현가능하다.
또한, 1) 컨텐츠 "A"의 모서리 하나와 바탕 화면의 일 지점이 "Touch Down"(210)되면, 도 94에 도시된 바와 같이 멀티 터치에 의해 지정되는 영역에 컨텐츠 "A"를 확대하여 표시하지만, 2) 컨텐츠 "A"의 모서리 하나와 바탕 화면의 일 지점이 "Touch Down & Press Down"(220)되면, 도 95에 도시된 바와 같이 멀티 터치에 의해 지정되는 영역 내에 컨텐츠 "A"에 종속된 메뉴항목들의 리스트를 제공하되 컨텐츠 "A"를 많이 가리지 않도록 할 수 있다.
3.8 터치 압력에 따른 무선 출력 조절
멀티 터치된 지점들에서의 터치 압력들을 기초로, 무선 출력을 입체적으로 조절하는 것이 가능하다.
예를 들어, 1) 도 96에 도시된 바와 같이 무선 출력 아이콘의 좌측 부분이 "Touch Down & Press Down"(220)되고 우측 부분이 "Touch Down"(210)되면, 좌측 안테나가 우측 안테나 보다 무선 출력이 크고, 2) 도 97에 도시된 바와 같이 무선 출력 아이콘의 우측 부분이 "Touch Down & Press Down"(220)되고 좌측 부분이 "Touch Down"(210)되면, 우측 안테나가 좌측 안테나 보다 무선 출력이 크도록 할 수 있다.
마찬가지로, 1) 무선 출력 아이콘의 상부가 "Touch Down & Press Down"(220)되고 하부가 "Touch Down"(210)되면, 상부 안테나가 하부 안테나 보다 무선 출력이 크고, 2) 무선 출력 아이콘의 하부가 "Touch Down & Press Down"(220)되고 상부가 "Touch Down"(210)되면, 하부 안테나가 상부 안테나 보다 무선 출력이 크도록 할 수 있다.
4. 터치 압력 안내
도 39에서와 같이, 터치 압력의 크기를 게이지로 표시하여 사용자에게 안내할 수 있다. 하지만, 이는 설명의 편의를 위한 일 예에 불과한 것으로 다른 방법으로 터치 압력 크기를 안내할 수 있다. 예를 들어, 터치된 지점에 터치 압력에 비례하는 반지름을 가지는 원형의 가이드나, 터치 압력에 따라 게이지 또는 원형 가이드의 색상이 달라지도록 구현가능하다.
뿐만 아니라, 터치 압력 가이드를 음성이나 진동으로 출력하는 것도 가능함은 물론이고, 이와 같은 가이드는 멀티 터치의 경우에도 그대로 적용될 수 있다.
5. 적용가능한 전자기기
도 98은 지금까지 설명한 방식의 UI들을 제공할 수 있는 전자기기의 블럭도이다. 도 98에 도시된 바와 같이, 앞서 언급한 UI들을 제공할 수 있는 전자기기는 터치 스크린(110), 통신부(120), 제어부(130), 오디오/진동 출력부(140), 저장부(150)를 구비한다.
터치 스크린(110)은 전술한 UI가 표시되는 디스플레이로 기능함은 물론, 터치를 통해 사용자 명령을 입력받는 입력 수단으로 기능한다. 터치 스크린(110)은 사용자에 의한 터치 지점은 물론 터치 압력 파악이 가능하다.
통신부(120)는 외부기기 및/또는 외부 통신망과 통신가능하도록 연결된다. 오디오/진동 출력부(140)는 음향 출력과 진동 출력을 수행한다.
저장부(150)는 전자기기 구동에 필요한 프로그램 및 전술한 UI들을 제공하는데 필요한 프로그램이 저장된 저장매체이다.
제어부(130)는 저장부(150)에 저장된 프로그램을 구동하여, 전자기기를 구동한다. 특히, 제어부(130)는 터치 스크린(110)을 통해 UI를 제공하고, 제공된 UI를 통해 입력된 사용자 명령(특히, 사용자의 터치 압력)에 따라 터치 스크린(110)의 표시 동작, 통신부(120)의 통신 동작/설정, 오디오/진동 출력부(140)의 출력 동작/설정을 제어하고, 사용자가 원하는 기능을 실행하여 그 결과 화면을 터치 스크린(110)을 통해 제공한다.
도 98에 도시된 전자기기는 다양한 형상으로 구현될 수 있다. 이러한 형상에는 폴더형(folder-type), 슬라이드형(slide-type), 바형(bar-type), 회전형(rotational-type), 스윙형(swing-type) 및 이들의 조합이 포함된다.
도 98에 도시된 전자기기는 종류를 불문한다. 1) 스마트 폰이나 모바일 PC와 같은 모바일 기기는 물론, 2) DTV, STB, 홈씨어터, DVD플레이어, 오디오 시스템, TV 기반의 게임기 등과 같은 가정용 거치형 기기와, 3) 디지털 회의 시스템, Table Top 기기, 복사기, 프린터, 복합기기 등과 같은 사무용 거치형 기기, 4) 광고용 디스플레이, 안내용 디스플레이와 같이 대형 매장이나 공공장소에 설치되는 옥외용 디스플레이 기기에도 적용될 수 있다.
또한, 본 발명의 기술적 사상은, 전자기기를 구동시키는 기본 구동 프로그램은 물론 전자기기에서 실행되는 응용 프로그램으로 구현될 수 있음은 물론, 이 프로그램이 기기들에 탑재된 상태는 전자기기에 적용될 수 있으며, 이 프로그램을 CD 번들로 제공되는 경우나, 인터넷, 이동통신망을 통해 무선으로 다운로드되는 방식으로 구현할 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (30)

  1. 전자기기의 UI 제공방법에 있어서,
    상기 전자기기에 마련된 터치 스크린을 통해 입력된 싱글 터치의 터치 압력을 파악하는 단계; 및
    상기 터치 압력을 기초로, 상기 전자기기를 제어하는 단계;를 포함하는 것을 특징으로 하는 UI 제공방법.
  2. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기 또는 줌을 조절하는 것을 특징으로 하는 UI 제공방법.
  3. 제 2항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 함께 조절하는 것을 특징으로 하는 UI 제공방법.
  4. 제 2항에 있어서,
    상기 제어 단계는,
    크기 또는 줌 제어 대상이 다른 GUI-요소로 변경되면, 변경된 다른 GUI-요소의 크기 또는 줌을 조절하는 것을 특징으로 하는 UI 제공방법.
  5. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기, 이동량 및 회전량 중 적어도 하나를 조절하는 것을 특징으로 하는 UI 제공방법.
  6. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 굵기, 농도 및 색상 중 적어도 하나를 조절하는 것을 특징으로 하는 UI 제공방법.
  7. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 조절하는 것을 특징으로 하는 UI 제공방법.
  8. 제 7항에 있어서,
    상기 GUI-요소의 속도는,
    상기 GUI-요소 이동, 상기 GUI-요소 넘기기, 상기 GUI-요소 재생 중 어느 하나에 대한 속도인 것을 특징으로 하는 UI 제공방법.
  9. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 중량감이 부여된 GUI-요소에 대한 이동을 제어하는 것을 특징으로 하는 UI 제공방법.
  10. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 전자기기의 청각적 출력 및 촉각적 출력 중 적어도 하나를 제어하는 것을 특징으로 하는 UI 제공방법.
  11. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 각기 다른 메뉴항목을 선택 또는 실행하는 것을 특징으로 하는 UI 제공방법.
  12. 제 1항에 있어서,
    상기 제어단계는,
    상기 터치 압력을 기초로, 상기 전자기기의 모드를 조정하는 것을 특징으로 하는 UI 제공방법.
  13. 제 1항에 있어서,
    상기 제어단계는,
    상기 터치 압력을 기초로, 상기 전자기기의 잠금을 해제하는 것을 특징으로 하는 UI 제공방법.
  14. 제 1항에 있어서,
    상기 제어 단계는,
    상기 터치 압력을 기초로, 상기 전자기기의 무선 출력을 제어하는 것을 특징으로 하는 UI 제공방법.
  15. 사용자에 의해 입력된 싱글 터치의 터치 압력을 파악하는 터치 스크린; 및
    상기 터치 압력을 기초로, 동작을 제어하는 제어부;를 포함하는 것을 특징으로 하는 전자기기.
  16. 전자기기의 UI 제공방법에 있어서,
    상기 전자기기에 마련된 터치 스크린을 통해 입력된 멀티 터치의 터치 압력들을 파악하는 단계; 및
    상기 터치 압력들을 기초로, 상기 전자기기를 제어하는 단계;를 포함하는 것을 특징으로 하는 UI 제공방법.
  17. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 크기 또는 줌을 각각 조절하는 것을 특징으로 하는 UI 제공방법.
  18. 제 16항에 있어서,
    상기 제어 단계는,
    멀티 터치된 제1 지점을 기준으로, '상기 제1 지점을 시점, 멀티 터치된 제2 지점을 종점으로 하는 방향'에 따라 GUI 요소의 크기를 조절하는 것을 특징으로 하는 UI 제공방법.
  19. 제 17항에 있어서,
    상기 제어 단계는,
    상기 제2 지점에 인가된 터치 압력은, 상기 제1 지점에 인가된 터치 압력 보다 큰 것을 특징으로 하는 UI 제공방법.
  20. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 크기, 이동량 및 회전량 중 적어도 하나를 각각 조절하는 것을 특징으로 하는 UI 제공방법.
  21. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들의 조합을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 크기, 이동량 및 회전량 중 적어도 하나를 조절하는 것을 특징으로 하는 UI 제공방법.
  22. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 굵기, 농도 및 색상 중 적어도 하나를 각각 조절하는 것을 특징으로 하는 UI 제공방법.
  23. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 터치 스크린에 나타난 GUI-요소들의 속도를 각각 조절하는 것을 특징으로 하는 UI 제공방법.
  24. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들의 조합을 기초로, 상기 터치 스크린에 나타난 GUI-요소의 속도를 조절하는 것을 특징으로 하는 UI 제공방법.
  25. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 중량감이 부여된 GUI-요소들에 대한 이동을 각각 제어하는 것을 특징으로 하는 UI 제공방법.
  26. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 전자기기의 청각적 출력 및 촉각적 출력 중 적어도 하나를 입체적으로 제어하는 것을 특징으로 하는 UI 제공방법.
  27. 제 16항에 있어서,
    상기 제어 단계는,
    멀티 터치된 제1 지점과 제2 지점의 터치 압력들이 제1 터치 압력 보다 큰 제2 터치 압력이면, 상기 GUI 요소에 종속된 메뉴항목들의 리스트를 제공하는 것을 특징으로 하는 UI 제공방법.
  28. 제 27항에 있어서,
    상기 제어 단계는,
    상기 GUI 요소에 종속된 메뉴항목들의 리스트를 멀티 터치된 제1 지점과 제2 지점의 영역 내에 제공하는 것을 특징으로 하는 UI 제공방법.
  29. 제 16항에 있어서,
    상기 제어 단계는,
    상기 터치 압력들을 기초로, 상기 전자기기의 무선 출력을 입체적으로 제어하는 것을 특징으로 하는 UI 제공방법.
  30. 사용자에 의해 입력된 멀티 터치의 터치 압력들을 파악하는 터치 스크린; 및
    상기 터치 압력들을 기초로, 동작을 제어하는 제어부;를 포함하는 것을 특징으로 하는 전자기기.
PCT/KR2011/000405 2010-01-22 2011-01-20 터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기 WO2011090324A2 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
US13/375,362 US9244601B2 (en) 2010-01-22 2011-01-20 Method for providing a user interface based on touch pressure, and electronic device using same
CN201180002296.5A CN102449593B (zh) 2010-01-22 2011-01-20 基于碰触压力的ui提供方法及采用该方法的电子装置
EP11734873.0A EP2527966A4 (en) 2010-01-22 2011-01-20 METHOD FOR PROVIDING USER INTERFACE BASED ON TOUCH PRESSURE, AND ELECTRONIC DEVICE COMPRISING SAME
US14/968,492 US10168886B2 (en) 2010-01-22 2015-12-14 Method for providing a user interface based on touch pressure, and electronic device using same

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR10-2010-0006177 2010-01-22
KR20100006177 2010-01-22
KR1020100139579A KR101304321B1 (ko) 2010-01-22 2010-12-30 싱글 터치 압력에 기반한 ｕｉ 제공방법 및 이를 적용한 전자기기
KR10-2010-0139604 2010-12-30
KR1020100139604A KR101319264B1 (ko) 2010-01-22 2010-12-30 멀티 터치 압력에 기반한 ｕｉ 제공방법 및 이를 적용한 전자기기
KR10-2010-0139579 2010-12-30

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US13/375,362 A-371-Of-International US9244601B2 (en) 2010-01-22 2011-01-20 Method for providing a user interface based on touch pressure, and electronic device using same
US14/968,492 Continuation US10168886B2 (en) 2010-01-22 2015-12-14 Method for providing a user interface based on touch pressure, and electronic device using same

Publications (2)

Publication Number Publication Date
WO2011090324A2 true WO2011090324A2 (ko) 2011-07-28
WO2011090324A3 WO2011090324A3 (ko) 2011-12-29

Family

ID=44922891

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/000405 WO2011090324A2 (ko) 2010-01-22 2011-01-20 터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기

Country Status (5)

Country Link
US (2) US9244601B2 (ko)
EP (1) EP2527966A4 (ko)
KR (2) KR101304321B1 (ko)
CN (1) CN102449593B (ko)
WO (1) WO2011090324A2 (ko)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722283A (zh) * 2012-06-06 2012-10-10 北京中自科技产业孵化器有限公司 一种触摸屏的解锁方法及装置
CN103092406A (zh) * 2011-11-07 2013-05-08 伊梅森公司 用于触敏表面上的多压交互的系统和方法
CN103164066A (zh) * 2011-12-19 2013-06-19 联想(北京)有限公司 一种触摸控制方法
CN104298906A (zh) * 2014-10-23 2015-01-21 苏州天平先进数字科技有限公司 触屏终端密码锁解锁方法
WO2015088263A1 (ko) * 2013-12-11 2015-06-18 삼성전자 주식회사 터치 입력의 압력 상태에 따라 동작하는 전자 장치 및 그 방법
US20160054912A1 (en) * 2011-12-28 2016-02-25 Lg Electronics Inc. Mobile terminal and operation control method thereof
AU2013222955B2 (en) * 2012-02-24 2017-08-17 Samsung Electronics Co., Ltd. A mobile terminal having a screen operation and operating method

Families Citing this family (218)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5651494B2 (ja) 2011-02-09 2015-01-14 日立マクセル株式会社 情報処理装置
KR101770206B1 (ko) * 2011-04-06 2017-08-22 엘지전자 주식회사 이동 단말기 및 이를 이용한 사용자 인터페이스 제공 방법
EP2715500A4 (en) * 2011-05-25 2015-04-29 Nokia Corp DEVICE, PROCEDURE, COMPUTER PROGRAM AND USER INTERFACE
US20130005469A1 (en) * 2011-06-30 2013-01-03 Imerj LLC Dual screen game module
US20130012319A1 (en) * 2011-07-07 2013-01-10 Negroponte Dimitri Mechanism for facilitating hybrid control panels within gaming systems
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
JP5633906B2 (ja) * 2011-09-08 2014-12-03 Kddi株式会社 画面への押圧でページ捲りが可能な電子書籍表示装置及びプログラム
JP5999830B2 (ja) * 2011-10-28 2016-09-28 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法
US9367233B2 (en) 2011-10-31 2016-06-14 Samsung Electronics Co., Ltd. Display apparatus and method thereof
KR101882724B1 (ko) * 2011-12-21 2018-08-27 삼성전자 주식회사 카테고리 검색 방법 및 이를 지원하는 단말기
US9134900B2 (en) * 2012-01-18 2015-09-15 Qualcomm Incorporated Traversal of a soft bar to unlock an application
US10937097B1 (en) 2012-02-06 2021-03-02 Acorns Grow Incorporated Systems and methods for creating excess funds from retail transactions and apportioning those funds into investments
EP2812088A4 (en) 2012-02-06 2015-05-20 Hothead Games Inc SYSTEMS AND METHOD FOR VIRTUAL COMPETITIVE GROUP MANAGEMENT
KR101725073B1 (ko) 2012-02-06 2017-04-11 핫헤드 게임즈 인크. 카드 상자 및 팩의 가상 개봉
US8781906B2 (en) 2012-02-06 2014-07-15 Walter Cruttenden Systems and methods for managing consumer transaction-based investments
WO2013154341A1 (ko) * 2012-04-10 2013-10-17 Ahn Jae Seok 모바일 단말에서 디지털 컨텐트를 스크롤하는 방법 및 이를 위한 모바일 단말 장치
KR20130000318A (ko) * 2012-05-02 2013-01-02 황두호 대기화면을 이용한 광고 방법과 광고 시스템 및 이동통신 단말기
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
AU2013259630B2 (en) 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to gesture
EP2847660B1 (en) 2012-05-09 2018-11-14 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
AU2013259642A1 (en) 2012-05-09 2014-12-04 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
DE112013002412T5 (de) 2012-05-09 2015-02-19 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche zum Bereitstellen von Rückmeldung für das Wechseln von Aktivierungszuständen eines Benutzerschnittstellenobjekts
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
DE112013002387T5 (de) 2012-05-09 2015-02-12 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Bereitstellung taktiler Rückkopplung für Operationen in einer Benutzerschnittstelle
US20130339859A1 (en) * 2012-06-15 2013-12-19 Muzik LLC Interactive networked headphones
US20180048750A1 (en) * 2012-06-15 2018-02-15 Muzik, Llc Audio/video wearable computer system with integrated projector
JPWO2014002633A1 (ja) * 2012-06-28 2016-05-30 日本電気株式会社 処理装置、動作制御方法及びプログラム
JP2015537299A (ja) * 2012-10-31 2015-12-24 サムスン エレクトロニクス カンパニー リミテッド ディスプレイ装置及びそのディスプレイ方法
CN103809776B (zh) * 2012-11-12 2017-05-24 联想(北京)有限公司 一种功能执行方法及电子设备
JP1470731S (ko) * 2012-11-16 2016-05-23
JP1473581S (ko) * 2012-11-16 2016-06-20
USD837232S1 (en) 2012-11-30 2019-01-01 Waymo Llc Display screen or a portion thereof with graphical user interface
USD746836S1 (en) 2012-11-30 2016-01-05 Google Inc. Display screen or portion thereof with transitional graphical user interface
CN103019593A (zh) * 2012-11-30 2013-04-03 珠海市魅族科技有限公司 一种用户界面的控制方法及终端
CN104395866B (zh) * 2012-11-30 2018-02-23 松下知识产权经营株式会社 触觉提示装置及触觉提示方法
KR101436587B1 (ko) * 2012-12-26 2014-09-03 전자부품연구원 투 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
WO2014104726A1 (ko) * 2012-12-26 2014-07-03 전자부품연구원 원 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
KR101436588B1 (ko) * 2012-12-26 2014-09-02 전자부품연구원 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
KR101436586B1 (ko) * 2012-12-26 2014-09-02 전자부품연구원 원 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
WO2014104727A1 (ko) * 2012-12-26 2014-07-03 전자부품연구원 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
KR101436585B1 (ko) * 2012-12-26 2014-10-30 전자부품연구원 원 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
US9141259B2 (en) * 2013-01-21 2015-09-22 International Business Machines Corporation Pressure navigation on a touch sensitive user interface
US9842571B2 (en) * 2013-02-22 2017-12-12 Samsung Electronics Co., Ltd. Context awareness-based screen scroll method, machine-readable storage medium and terminal therefor
CN104020868B (zh) * 2013-02-28 2017-09-01 联想(北京)有限公司 一种信息处理的方法及电子设备
KR102117086B1 (ko) * 2013-03-08 2020-06-01 삼성디스플레이 주식회사 단말기 및 그의 조작 방법
USD969818S1 (en) 2013-03-14 2022-11-15 Acorns Grow Inc. Mobile device screen with graphical user interface
USD735233S1 (en) * 2013-03-14 2015-07-28 Microsoft Corporation Display screen with graphical user interface
USD972577S1 (en) 2013-03-14 2022-12-13 Acorns Grow Inc. Mobile device screen with a graphical user interface
US11176614B1 (en) 2013-03-14 2021-11-16 Acorns Grow Incorporated Systems and methods for creating excess funds from retail transactions and apportioning those funds into investments
USD928190S1 (en) 2013-03-14 2021-08-17 Acorns Grow Incorporated Mobile device screen or portion thereof with an animated graphical user interface
USD927509S1 (en) 2013-03-14 2021-08-10 Acorns Grow Incorporated Mobile device screen or portion thereof with graphical user interface
JP2014183425A (ja) * 2013-03-19 2014-09-29 Sony Corp 画像処理方法、画像処理装置および画像処理プログラム
WO2014194527A1 (zh) * 2013-06-08 2014-12-11 华为终端有限公司 一种多媒体浏览进度控制的方法及终端
USD741352S1 (en) 2013-06-09 2015-10-20 Apple Inc. Display screen or portion thereof with graphical user interface
KR102180961B1 (ko) * 2013-07-16 2020-11-19 삼성전자주식회사 입력 처리 방법 및 그 전자 장치
KR101518453B1 (ko) * 2013-08-29 2015-05-11 주식회사 픽스트리 컨텐츠 재생 장치 및 방법
KR102105463B1 (ko) * 2013-09-02 2020-04-28 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
USD788795S1 (en) * 2013-09-03 2017-06-06 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
US11044248B2 (en) 2013-09-13 2021-06-22 Symbol Technologies, Llc Method and device for facilitating mutual authentication between a server and a user using haptic feedback
US9665206B1 (en) 2013-09-18 2017-05-30 Apple Inc. Dynamic user interface adaptable to multiple input tools
CN103488404B (zh) * 2013-09-22 2016-03-02 华为技术有限公司 一种解除电子设备锁定的方法及其装置
USD733744S1 (en) 2013-10-21 2015-07-07 Apple Inc. Display screen or portion thereof with graphical user interface
JP6062913B2 (ja) 2013-12-04 2017-01-18 株式会社 ハイディープＨｉＤｅｅｐ Ｉｎｃ． タッチに基づいた対象動作制御システム及びその方法
KR101656753B1 (ko) * 2013-12-04 2016-09-13 주식회사 하이딥 터치에 기초한 대상 동작 제어 시스템 및 그 방법
US9575651B2 (en) * 2013-12-30 2017-02-21 Lenovo (Singapore) Pte. Ltd. Touchscreen selection of graphical objects
USD754682S1 (en) * 2014-01-03 2016-04-26 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
JP2015176471A (ja) * 2014-03-17 2015-10-05 パイオニア株式会社 表示制御装置、表示制御方法、および、表示制御装置用プログラム
US20150268802A1 (en) * 2014-03-24 2015-09-24 Hideep Inc. Menu control method and menu control device including touch input device performing the same
JP2015185173A (ja) 2014-03-24 2015-10-22 株式会社 ハイヂィープ タッチ圧力及びタッチ面積による動作対象の臨時操作方法及び端末機
USD763882S1 (en) * 2014-04-25 2016-08-16 Tencent Technology (Shenzhen) Company Limited Portion of a display screen with animated graphical user interface
USD765110S1 (en) * 2014-04-25 2016-08-30 Tencent Technology (Shenzhen) Company Limited Portion of a display screen with animated graphical user interface
USD766262S1 (en) 2014-05-01 2016-09-13 Beijing Qihoo Technology Co. Ltd Display screen with an animated graphical user interface
USD762711S1 (en) * 2014-06-06 2016-08-02 Le Shi Internet Information Technology Corp. Beijing Display screen with an animated graphical user interface
CN104063280B (zh) 2014-06-25 2017-09-12 华为技术有限公司 一种智能终端的控制方法
KR20160001180A (ko) * 2014-06-26 2016-01-06 삼성전자주식회사 가상 키보드의 디스플레이를 위한 방법 및 그 전자 장치
KR20160001602A (ko) * 2014-06-26 2016-01-06 삼성전자주식회사 폴더블 전자 장치의 인터페이싱 방법 및 그 폴더블 전자 장치
CN105242835A (zh) * 2014-06-30 2016-01-13 宇龙计算机通信科技(深圳)有限公司 一种终端、一种基于触控技术的菜单选择方法及装置
US10712843B2 (en) * 2014-07-29 2020-07-14 Naver Corporation Method and apparatus for controlling display of scrolled content by modifying the content as the content is being scrolled to a designed location and computer program for executing the method
USD805536S1 (en) * 2014-08-29 2017-12-19 Cheetah Mobile Inc. Display screen or portion thereof with a graphical user interface
USD763285S1 (en) * 2014-09-02 2016-08-09 Apple Inc. Display screen or portion thereof with graphical user interface
USD762692S1 (en) 2014-09-02 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD754727S1 (en) * 2014-09-18 2016-04-26 3M Innovative Properties Company Display screen or portion thereof with animated graphical user interface
USD800758S1 (en) 2014-09-23 2017-10-24 Seasonal Specialties, Llc Computer display screen with graphical user interface for lighting
USD762697S1 (en) * 2014-09-30 2016-08-02 Microsoft Corporation Display screen with graphical user interface
CN107210950A (zh) 2014-10-10 2017-09-26 沐择歌有限责任公司 用于共享用户交互的设备
CN105630365A (zh) * 2014-10-29 2016-06-01 深圳富泰宏精密工业有限公司 网页调整方法及系统
JP1531722S (ko) * 2014-11-21 2015-08-24
KR102350770B1 (ko) * 2014-12-16 2022-01-14 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
US10782039B2 (en) 2015-01-19 2020-09-22 Lennox Industries Inc. Programmable smart thermostat
US9883007B2 (en) * 2015-01-20 2018-01-30 Microsoft Technology Licensing, Llc Downloading an application to an apparatus
USD812624S1 (en) * 2015-01-21 2018-03-13 S-Printing Solution Co., Ltd. Display screen or portion thereof with graphical user interface
CN104598112B (zh) 2015-01-23 2019-01-18 小米科技有限责任公司 按钮交互方法和装置
USD780772S1 (en) * 2015-02-27 2017-03-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with a graphical user interface
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
DK201500581A1 (en) * 2015-03-08 2017-01-16 Apple Inc Devices, Methods, and Graphical User Interfaces for Displaying and Using Menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
USD775172S1 (en) * 2015-05-01 2016-12-27 Sap Se Display screen or portion thereof with graphical user interface
USD781327S1 (en) * 2015-05-01 2017-03-14 Sap Se Display screen or portion thereof with transitional graphical user interface
USD792890S1 (en) * 2015-05-22 2017-07-25 Acorns Grow Incorporated Display screen or portion therof with a financial data graphical user interface
US9977506B2 (en) 2015-05-22 2018-05-22 Microsoft Technology Licensing, Llc Input optimization based on frequency of use
USD777755S1 (en) * 2015-05-22 2017-01-31 RedCritter, Corp. Display screen with animated graphical user interface
CN104915140A (zh) * 2015-05-28 2015-09-16 努比亚技术有限公司 基于虚拟按键触摸操作数据的处理方法及装置
CN104915096A (zh) * 2015-05-29 2015-09-16 努比亚技术有限公司 应用界面显示方法及装置
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
CN105046122B (zh) * 2015-07-07 2018-03-27 广东欧珀移动通信有限公司 一种终端系统管理方法及终端
US10298746B2 (en) 2015-07-29 2019-05-21 Lg Electronics Inc. Mobile terminal and method for controlling same
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
EP3337142A4 (en) * 2015-08-11 2019-03-13 LG Electronics Inc. MOBILE DEVICE AND CONTROL PROCESS THEREFOR
CN105260109B (zh) * 2015-08-27 2019-02-05 Oppo广东移动通信有限公司 一种播放速度调节方法及终端
CN105159582B (zh) * 2015-08-27 2018-05-29 广东欧珀移动通信有限公司 一种视频区域调整方法及终端
CN105045492B (zh) * 2015-08-27 2018-05-29 广东欧珀移动通信有限公司 一种睡眠播放时长设置方法及终端设备
DE102015216627A1 (de) * 2015-08-31 2017-03-02 BSH Hausgeräte GmbH Berührungsempfindliche Bedienanzeige sowie Verfahren zum Verbessern einer Bedienbarkeit einer Skala einer solchen Bedienanzeige
CN105224221B (zh) * 2015-09-09 2019-01-25 魅族科技（中国）有限公司 一种终端设备及标记方法
CN106610780A (zh) * 2015-10-27 2017-05-03 中兴通讯股份有限公司 一种文本选取方法和智能终端
CN105303086A (zh) * 2015-10-31 2016-02-03 深圳市金立通信设备有限公司 一种应用启动方法及终端
KR101749933B1 (ko) * 2015-11-12 2017-06-22 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN106775369A (zh) * 2015-11-25 2017-05-31 中兴通讯股份有限公司 一种用于控制媒体播示的方法、装置及终端
KR102468884B1 (ko) * 2015-12-07 2022-11-18 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
US10776762B2 (en) 2015-12-16 2020-09-15 Paypal, Inc. Measuring tap pressure on mobile devices to automate actions
CN105511795B (zh) * 2015-12-17 2019-06-04 Oppo广东移动通信有限公司 一种用户界面操作的方法及移动终端
CN105677178B (zh) * 2015-12-30 2019-02-05 Oppo广东移动通信有限公司 一种调整控件所属图层的方法及移动终端
USD805540S1 (en) * 2016-01-22 2017-12-19 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD783667S1 (en) * 2016-01-22 2017-04-11 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CN105739891A (zh) * 2016-01-27 2016-07-06 宇龙计算机通信科技(深圳)有限公司 一种音乐处理方法及移动终端
KR101815857B1 (ko) * 2016-02-03 2018-01-08 한국산업기술대학교 산학협력단 신호 세기 기반 제어 장치
CN107092852A (zh) * 2016-02-17 2017-08-25 北京小米移动软件有限公司 压力检测方法和装置
USD816106S1 (en) * 2016-04-05 2018-04-24 Ora Inc. Display screen with graphic user interface for a mobile electronic device
USD825591S1 (en) * 2016-04-05 2018-08-14 Ora Inc. Display screen with graphical user interface for a mobile electronic device
USD824940S1 (en) * 2016-04-05 2018-08-07 Ora Inc. Display screen with graphical user interface for a mobile electronic device
US9919213B2 (en) * 2016-05-03 2018-03-20 Hothead Games Inc. Zoom controls for virtual environment user interfaces
CN107346201B (zh) * 2016-05-04 2021-03-16 西安中兴新软件有限责任公司 解除终端屏幕锁定的方法及装置
BR112018073693A2 (pt) 2016-05-18 2019-02-26 Apple Inc dispositivos, métodos, e interfaces gráficas de usuário para mensagens
US9959037B2 (en) * 2016-05-18 2018-05-01 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR102440848B1 (ko) * 2016-05-20 2022-09-06 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9922679B2 (en) * 2016-06-01 2018-03-20 James Tallantyre Slow motion video playback method for computing devices with touch interfaces
JP6758921B2 (ja) * 2016-06-01 2020-09-23 キヤノン株式会社 電子機器及びその制御方法
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
DK179034B1 (en) * 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
US10004991B2 (en) 2016-06-28 2018-06-26 Hothead Games Inc. Systems and methods for customized camera views in virtualized environments
US10010791B2 (en) 2016-06-28 2018-07-03 Hothead Games Inc. Systems and methods for customized camera views and customizable objects in virtualized environments
CN106168880B (zh) * 2016-07-01 2019-11-05 珠海市魅族科技有限公司 一种输入控制的方法及终端
KR102124620B1 (ko) * 2016-08-02 2020-06-18 주식회사 하이딥 터치 압력 및 터치 면적에 따른 동작 대상의 임시 조작 방법 및 단말기
KR102584981B1 (ko) * 2016-09-13 2023-10-05 삼성전자주식회사 포스 입력에 따른 화면 출력 방법 및 이를 지원하는 전자 장치
KR102557125B1 (ko) 2016-09-23 2023-07-20 삼성전자주식회사 전자 장치 및 그 제어 방법
USD830374S1 (en) * 2016-10-07 2018-10-09 Bred Ventures Inc. Display screen or portion thereof with a graphical user interface
USD831033S1 (en) * 2016-10-07 2018-10-16 Bred Ventures Inc. Display screen or portion thereof with a graphical user interface
USD846591S1 (en) 2016-10-07 2019-04-23 Bred Ventures Inc. Display screen or portion thereof with a score leaderboard graphical user interface
US10296091B2 (en) * 2016-10-13 2019-05-21 Immersion Corporation Contextual pressure sensing haptic responses
CN106527923B (zh) * 2016-10-19 2020-03-10 华为机器有限公司 一种图形显示方法及装置
USD835149S1 (en) * 2016-11-28 2018-12-04 Saavn Llc Display screen or portion thereof with animated graphical user interface
US10528251B2 (en) * 2016-12-13 2020-01-07 International Business Machines Corporation Alternate video summarization
KR102316024B1 (ko) * 2017-03-02 2021-10-26 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 사용자 인터페이스 표시 방법
USD837247S1 (en) * 2017-03-24 2019-01-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
KR20180131908A (ko) * 2017-06-01 2018-12-11 엘지전자 주식회사 이동 단말기 및 그것의 동작방법
USD843405S1 (en) * 2017-06-05 2019-03-19 Apple Inc. Display screen or portion thereof with graphical user interface
KR102353919B1 (ko) * 2017-06-09 2022-01-21 삼성전자주식회사 터치의 압력에 응답하여 지정된 동작을 수행하는 전자 장치 및 방법
US10599294B2 (en) 2017-06-27 2020-03-24 Lennox Industries Inc. System and method for transferring images to multiple programmable smart thermostats
US10725647B2 (en) * 2017-07-14 2020-07-28 Microsoft Technology Licensing, Llc Facilitating interaction with a computing device based on force of touch
USD875751S1 (en) * 2017-08-22 2020-02-18 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US20190087060A1 (en) * 2017-09-19 2019-03-21 Sling Media Inc. Dynamic adjustment of media thumbnail image size based on touchscreen pressure
CN112286434B (zh) * 2017-10-16 2021-12-10 华为技术有限公司 一种悬浮按钮显示方法及终端设备
GB2567864B (en) * 2017-10-27 2019-10-23 Peratech Holdco Ltd Scrolling through a plurality of entities
JP7065367B2 (ja) * 2018-03-29 2022-05-12 パナソニックＩｐマネジメント株式会社 入力装置及び音声出力システム
CN110555336A (zh) * 2018-05-30 2019-12-10 北京小米移动软件有限公司 指纹采集方法、装置、电子设备和存储介质
US11067305B2 (en) 2018-06-27 2021-07-20 Lennox Industries Inc. Method and system for heating auto-setback
USD928799S1 (en) 2018-07-19 2021-08-24 Acorns Grow Incorporated Mobile device screen or portion thereof with graphical user interface
CN109062535B (zh) * 2018-07-23 2021-07-13 Oppo广东移动通信有限公司 发声控制方法、装置、电子装置及计算机可读介质
JP7119718B2 (ja) * 2018-07-30 2022-08-17 オムロンヘルスケア株式会社 端末装置、電気治療器、および治療システム
JP2018190469A (ja) * 2018-08-22 2018-11-29 キヤノン株式会社 画像形成装置、コンピュータプログラムおよび記録媒体
USD933079S1 (en) * 2018-08-24 2021-10-12 Microsoft Corporation Display screen with animated graphical user interface
US10388322B1 (en) 2018-10-29 2019-08-20 Henry M. Pena Real time video special effects system and method
US11641439B2 (en) * 2018-10-29 2023-05-02 Henry M. Pena Real time video special effects system and method
US10404923B1 (en) 2018-10-29 2019-09-03 Henry M. Pena Real time video special effects system and method
US11567655B2 (en) 2019-02-21 2023-01-31 Acorns Grow Incorporated Secure signature creation on a secondary device
USD910050S1 (en) * 2019-03-22 2021-02-09 Apple Inc. Electronic device with graphical user interface
CN110287663B (zh) * 2019-06-28 2021-03-26 北京蓦然认知科技有限公司 一种用户登录解锁方法、装置
CN110502168B (zh) * 2019-07-15 2021-04-02 五八有限公司 多点触控功能菜单生成方法、装置、服务器、终端及介质
USD927521S1 (en) 2019-12-09 2021-08-10 Acorns Grow Incorporated Mobile device screen or portion thereof with a graphical user interface
CN111258481A (zh) * 2020-01-08 2020-06-09 口碑(上海)信息技术有限公司 页面展示方法及装置
USD972578S1 (en) * 2020-01-10 2022-12-13 Illumina, Inc. Display screen or portion thereof with animated graphical user interface
USD992559S1 (en) * 2020-09-01 2023-07-18 Aristocrat Technologies, Inc. Display screen or portion thereof with graphical user interface
KR102256042B1 (ko) * 2020-10-13 2021-05-25 삼성전자 주식회사 입력을 유도하는 전자 장치 및 방법.
USD988338S1 (en) * 2021-03-10 2023-06-06 Netflix, Inc. Display panel of a programmed computer system with a graphical user interface
USD1011376S1 (en) * 2021-08-17 2024-01-16 Beijing Kuaimajiabian Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
KR102490429B1 (ko) 2022-07-25 2023-01-30 주식회사 컴플렉시온 사용자 체력 레벨별 난이도 조절이 가능한 게임 컨텐츠를 제공하는 전자 장치의 제어 방법
KR102490430B1 (ko) 2022-07-25 2023-01-27 주식회사 컴플렉시온 관절 트래킹을 바탕으로, 긍정어 및 부정어 중 어느 하나에 대한 명령을 획득하는 전자 장치의 제어 방법
KR102510048B1 (ko) 2022-07-25 2023-03-15 주식회사 컴플렉시온 운동 동작에 따른 증강현실 데이터를 출력하는 전자 장치의 제어 방법
KR102510047B1 (ko) 2022-07-25 2023-03-15 주식회사 컴플렉시온 관절 가동 각도 범위를 이용한 동작 인식의 노이즈를 필터링하는 전자 장치의 제어 방법
KR102510051B1 (ko) 2022-07-25 2023-03-14 주식회사 컴플렉시온 시간 및 관절 별 기준 위치를 이용하여 동작 일치를 판단하는 전자 장치의 제어 방법
KR102510050B1 (ko) 2022-07-25 2023-03-14 주식회사 컴플렉시온 관절 트래킹을 바탕으로 전진 및 후진 중 어느 하나에 대한 명령을 획득하는 전자 장치의 제어 방법
CN117608424B (zh) * 2024-01-24 2024-04-12 江苏锦花电子股份有限公司 一种基于物联网的触摸式旋钮屏管控系统及方法

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09325081A (ja) * 1996-06-05 1997-12-16 Casio Comput Co Ltd 運動測定装置及び運動測定装置を備えた電子式ゲーム装置
US6388655B1 (en) * 1999-11-08 2002-05-14 Wing-Keung Leung Method of touch control of an input device and such a device
JP2001265481A (ja) * 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
TW521205B (en) * 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
US8004496B2 (en) * 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
US11275405B2 (en) * 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
JP2004206178A (ja) * 2002-12-24 2004-07-22 Konica Minolta Holdings Inc 操作入力装置
US20050223340A1 (en) * 2004-03-30 2005-10-06 Mikko Repka Method of navigating in application views, electronic device, graphical user interface and computer program product
EP3121697A1 (en) * 2004-07-30 2017-01-25 Apple Inc. Mode-based graphical user interfaces for touch sensitive input devices
US8381135B2 (en) * 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
JP2008508628A (ja) * 2004-08-02 2008-03-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ タッチスクリーンにおける圧力制御ナビゲーション
JP4356594B2 (ja) * 2004-11-22 2009-11-04 ソニー株式会社 表示装置、表示方法、表示プログラム及び表示プログラムを記録した記録媒体
US7619616B2 (en) * 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US9727082B2 (en) * 2005-04-26 2017-08-08 Apple Inc. Back-side interface for hand-held devices
JP2006345209A (ja) * 2005-06-08 2006-12-21 Sony Corp 入力装置、情報処理装置、情報処理方法、及びプログラム
JP5142510B2 (ja) * 2005-11-25 2013-02-13 オセ−テクノロジーズ ビーブイ グラフィカルユーザインターフェース提供方法及びシステム
US7657849B2 (en) * 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
JP4185104B2 (ja) * 2006-02-28 2008-11-26 株式会社東芝 情報機器及びその動作制御方法
DE102006037156A1 (de) * 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
KR100765327B1 (ko) * 2006-05-08 2007-10-09 주식회사 애트랩 입력 장치
US7777732B2 (en) * 2007-01-03 2010-08-17 Apple Inc. Multi-event input system
KR101406289B1 (ko) * 2007-03-08 2014-06-12 삼성전자주식회사 스크롤 기반 아이템 제공 장치 및 방법
US8032298B2 (en) * 2007-03-29 2011-10-04 Alpine Electronics, Inc. Method and apparatus for incorporating adaptive scroll operation for navigation system
KR100842604B1 (ko) * 2007-04-09 2008-07-01 삼성전자주식회사 모드를 전환하는 방법 및 이동 통신 단말기
US8621348B2 (en) * 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
KR20090011367A (ko) * 2007-07-26 2009-02-02 (주)멜파스 터치스크린 장치 및 터치스크린 장치를 이용한 화면 제어방법
KR101395780B1 (ko) * 2007-07-27 2014-05-16 삼성전자주식회사 촉각 감지를 위한 압력 센서 어레이 장치 및 방법
US20090046110A1 (en) * 2007-08-16 2009-02-19 Motorola, Inc. Method and apparatus for manipulating a displayed image
KR101456047B1 (ko) * 2007-08-31 2014-11-03 삼성전자주식회사 휴대 단말기 및 그의 기능 수행 방법
US8683378B2 (en) * 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US20090128507A1 (en) * 2007-09-27 2009-05-21 Takeshi Hoshino Display method of information display device
US20090091479A1 (en) * 2007-10-04 2009-04-09 Motorola, Inc. Keypad haptic communication
TW200923758A (en) * 2007-11-27 2009-06-01 Wistron Corp A key-in method and a content display method of an electronic device, and the application thereof
TW200925957A (en) * 2007-12-14 2009-06-16 Htc Corp Function switch methods and systems, and machine readable medium thereof
JP4605214B2 (ja) * 2007-12-19 2011-01-05 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US8745514B1 (en) * 2008-04-11 2014-06-03 Perceptive Pixel, Inc. Pressure-sensitive layering of displayed objects
US20090271731A1 (en) * 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
US20090327939A1 (en) * 2008-05-05 2009-12-31 Verizon Data Services Llc Systems and methods for facilitating access to content instances using graphical object representation
KR101456001B1 (ko) * 2008-05-23 2014-11-03 엘지전자 주식회사 단말기 및 그 제어 방법
KR101540779B1 (ko) 2008-07-01 2015-07-29 엘지전자 주식회사 휴대 단말기 및 그 제어방법
EP3258361B1 (en) * 2008-07-01 2020-08-12 LG Electronics Inc. -1- Mobile terminal using pressure sensor and method of controlling the mobile terminal
US20100039393A1 (en) * 2008-08-15 2010-02-18 At&T Intellectual Property I, L.P. Text entry on touch screen cellphones by different pressure levels
US8286199B1 (en) * 2008-08-22 2012-10-09 SmartVault Corporation Automated method for creating a graphical user interface for a document management system that is visually integrated with an application having limited native GUI-integration capabilities
US20100079380A1 (en) * 2008-09-30 2010-04-01 Nokia Corporation Intelligent input device lock
US8385885B2 (en) * 2008-10-17 2013-02-26 Sony Ericsson Mobile Communications Ab Method of unlocking a mobile electronic device
US8289286B2 (en) * 2008-12-19 2012-10-16 Verizon Patent And Licensing Inc. Zooming keyboard/keypad
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US8633901B2 (en) * 2009-01-30 2014-01-21 Blackberry Limited Handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
US8751955B2 (en) * 2009-03-28 2014-06-10 International Business Machines Corporation Scrollbar user interface for multitouch devices
US8539382B2 (en) * 2009-04-03 2013-09-17 Palm, Inc. Preventing unintentional activation and/or input in an electronic device
TWI402737B (zh) * 2009-05-04 2013-07-21 Mitac Int Corp Multi - touch device and its method
US8907897B2 (en) * 2009-06-16 2014-12-09 Intel Corporation Optical capacitive thumb control with pressure sensor
US8730199B2 (en) * 2009-09-04 2014-05-20 Atmel Corporation Capacitive control panel
US9513798B2 (en) * 2009-10-01 2016-12-06 Microsoft Technology Licensing, Llc Indirect multi-touch interaction
US20110119578A1 (en) * 2009-11-17 2011-05-19 Schwartz Michael U Method of scrolling items on a touch screen user interface
US8487888B2 (en) * 2009-12-04 2013-07-16 Microsoft Corporation Multi-modal interaction on multi-touch display

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None
See also references of EP2527966A4

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107608518A (zh) * 2011-11-07 2018-01-19 意美森公司 用于触敏表面上的多压交互的系统和方法
CN103092406A (zh) * 2011-11-07 2013-05-08 伊梅森公司 用于触敏表面上的多压交互的系统和方法
US10775895B2 (en) 2011-11-07 2020-09-15 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
EP2590067A3 (en) * 2011-11-07 2015-05-20 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
EP3441866A1 (en) * 2011-11-07 2019-02-13 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US9582178B2 (en) 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US10152131B2 (en) 2011-11-07 2018-12-11 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
CN103092406B (zh) * 2011-11-07 2017-10-24 意美森公司 用于触敏表面上的多压交互的系统和方法
CN103164066A (zh) * 2011-12-19 2013-06-19 联想(北京)有限公司 一种触摸控制方法
US20160054912A1 (en) * 2011-12-28 2016-02-25 Lg Electronics Inc. Mobile terminal and operation control method thereof
US10198168B2 (en) * 2011-12-28 2019-02-05 British Telecommunications Public Limited Company Mobile terminal and operation control method thereof
AU2013222955B2 (en) * 2012-02-24 2017-08-17 Samsung Electronics Co., Ltd. A mobile terminal having a screen operation and operating method
US9772738B2 (en) 2012-02-24 2017-09-26 Samsung Electronics Co., Ltd. Mobile terminal having a screen operation and operation method thereof
CN102722283A (zh) * 2012-06-06 2012-10-10 北京中自科技产业孵化器有限公司 一种触摸屏的解锁方法及装置
US9939951B2 (en) 2013-12-11 2018-04-10 Samsung Electronics Co., Ltd. Electronic device operating according to pressure state of touch input and method thereof
US10185440B2 (en) 2013-12-11 2019-01-22 Samsung Electronics Co., Ltd. Electronic device operating according to pressure state of touch input and method thereof
WO2015088263A1 (ko) * 2013-12-11 2015-06-18 삼성전자 주식회사 터치 입력의 압력 상태에 따라 동작하는 전자 장치 및 그 방법
US10409418B2 (en) 2013-12-11 2019-09-10 Samsung Electronics Co., Ltd. Electronic device operating according to pressure state of touch input and method thereof
CN104298906A (zh) * 2014-10-23 2015-01-21 苏州天平先进数字科技有限公司 触屏终端密码锁解锁方法

Also Published As

Publication number Publication date
KR20110086501A (ko) 2011-07-28
US20120274662A1 (en) 2012-11-01
CN102449593B (zh) 2015-04-15
EP2527966A2 (en) 2012-11-28
US10168886B2 (en) 2019-01-01
EP2527966A4 (en) 2016-03-09
WO2011090324A3 (ko) 2011-12-29
KR20110086502A (ko) 2011-07-28
US20160098184A1 (en) 2016-04-07
CN102449593A (zh) 2012-05-09
KR101304321B1 (ko) 2013-09-11
US9244601B2 (en) 2016-01-26
KR101319264B1 (ko) 2013-10-18

Similar Documents

Publication Publication Date Title
WO2011090324A2 (ko) 터치 압력에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기
WO2013055089A1 (en) Method and apparatus for operating function in touch device
WO2011025239A2 (ko) 모션을 이용한 ｕｉ 제공방법 및 이를 적용한 디바이스
WO2011019188A2 (en) User interaction method and apparatus for electronic device
WO2014175622A1 (en) Method for displaying and electronic device thereof
WO2015037932A1 (en) Display apparatus and method for performing function of the same
WO2013122355A1 (en) Tablet having user interface
WO2015026101A1 (ko) 디스플레이 장치의 애플리케이션 실행 방법 및 그 디스플레이 장치
WO2013073904A1 (en) Mobile device for executing multiple applications and method for same
WO2015005734A1 (en) User terminal device for supporting user interaction and methods thereof
WO2014017841A1 (en) User terminal apparatus and control method thereof cross-reference to related applications
WO2010143839A2 (ko) 컨텐츠 탐색을 위한 ｇｕｉ 제공방법 및 이를 적용한 디바이스
WO2015041438A1 (en) Method for screen mirroring and source device thereof
WO2014171705A1 (en) Method for adjusting display area and electronic device thereof
WO2014157885A1 (en) Method and device for providing menu interface
WO2013073898A1 (en) Mobile device for executing multiple applications and method thereof
WO2013162200A1 (en) Method and terminal for displaying a plurality of pages, method and terminal for displaying a plurality of applications being executed on terminal, and method of executing a plurality of applications
WO2010143843A2 (ko) 컨텐츠 브로드캐스트 방법 및 이를 적용한 디바이스
WO2014104593A1 (en) Method of controlling portable device and portable device thereof
WO2015030564A1 (en) Display apparatus, portable device and screen display methods thereof
WO2015012629A1 (en) Method of processing input and electronic device thereof
EP2338101A2 (en) Object management method and apparatus using touchscreen
WO2016064140A1 (en) Providing method for inputting and electronic device
EP3019932A1 (en) Method for displaying and electronic device thereof
WO2018056642A2 (en) Electronic device and method thereof for managing applications

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180002296.5

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11734873

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13375362

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2011734873

Country of ref document: EP