WO2013115440A1 - 멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법 - Google Patents

멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법 Download PDF

Info

Publication number
WO2013115440A1
WO2013115440A1 PCT/KR2012/004912 KR2012004912W WO2013115440A1 WO 2013115440 A1 WO2013115440 A1 WO 2013115440A1 KR 2012004912 W KR2012004912 W KR 2012004912W WO 2013115440 A1 WO2013115440 A1 WO 2013115440A1
Authority
WO
WIPO (PCT)
Prior art keywords
touch
processor
input
touch display
release
Prior art date
Application number
PCT/KR2012/004912
Other languages
English (en)
French (fr)
Inventor
이기혁
김선준
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Publication of WO2013115440A1 publication Critical patent/WO2013115440A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Definitions

  • the present invention relates to a multi-touch screen, and more particularly, to a text input device and a method using a soft keyboard displayed on a multi-touch screen.
  • multi-touch devices including smart phones, provide soft keyboards as the primary means for text entry.
  • Soft keyboards provided by multi-touch devices are designed primarily for use with the thumb.
  • the keys of the soft keyboard may be smaller than the touch surface where the finger touches the multi-touch device. Therefore, in order to allow a user to confirm whether a key intended by the user is to be input, the multi-touch device generates a touch around a touch surface (eg, touch of a multi-touch display) when a touch with a finger occurs on the multi-touch display.
  • the currently touched key can be displayed.
  • the multi-touch device may allow a touched key to be input to an application executed in the multi-touch device when the user's finger is moved away from the multi-touch display.
  • Such a display method and an input method give a user an opportunity to modify a key to be input to the multi-touch device according to his / her intention while the key is touched.
  • a multi-touch device having a large size or more such as a tablet
  • the user may place his or her hands or all fingers on the multi-touch display of the multi-touch device.
  • a multi-touch device can provide a soft keyboard having a form similar to a physical keyboard actually used.
  • the size or spacing between the keys of a soft keyboard of this similar type may be the same as or similar to the size or spacing between the keys of the physical keyboard, respectively. Therefore, in a multi-touch device providing a soft keyboard having a form similar to a physical keyboard, even if a finger touches a specific key displayed on the multi-touch display, the touched key is not covered by the finger. Therefore, in a multi-touch device having a large size, unlike a multi-touch device of a small size such as a smart phone, a function of displaying a touched key may not be required.
  • One of the problems with multi-touch devices is that a key is ultimately entered when a touch occurs on the multi-touch display.
  • the user cannot place a finger on the multi-touch display to check the touch of the surface of the key or to rest the hand.
  • Such a limitation causes a problem that the user may cause fatigue when the user uses the multi-touch device for a long time.
  • Certain multi-touch devices solve the aforementioned problems by mounting a physical button on the bottom of the multi-touch display, or by using a pressure sensor to allow the user to actually press the screen.
  • this solution requires additional components such as an input button and a pressure sensor other than the touch screen, and has a disadvantage in that it cannot support multi-touch input.
  • Korean Patent Publication No. 10-2009-0056469 published June 03, 2009
  • the types of touches and the number of touches that can be recognized are determined for each application, and the attributes of the touches are measured for the touch input of the touch screen.
  • the touch input is classified according to the property of the measured touch, and finally, the touch input is determined as one of the types of touch by comparing the divided touch input with the types of the touch that can be recognized by the application, and corresponding to the determined touch input.
  • the process of determining and executing the function is started.
  • An embodiment may provide an apparatus and a method for canceling a touch by considering the touch as unrelated to an input when the touch is maintained for a specific time or more.
  • An embodiment may provide an apparatus and a method for canceling the touch by considering the touch as unrelated to the input when the touch moves by a predetermined distance or more.
  • a touch display and process for detecting the touch on the screen and the release of the touch by the user, based on the touch and the release to the input using the touch display
  • a processor for generating related information and transmitting information related to the generated input to the process, wherein the processor considers the touch to be canceled if the touch is held for a time equal to or greater than a first threshold.
  • the touch display may be a multi-touch display that senses touches each occurring at one or more positions and release of each of the touches.
  • the processor may generate information related to the input based on the touch and release for each of the one or more locations.
  • the touch display may detect movement of the position of the touch.
  • the processor may consider the touch to be canceled if the distance between the first position of the touch and the position where the touch is moved is greater than or equal to a second threshold.
  • the processor may control the touch display to cause the screen to output one or more Graphic User Interface (GUI) objects, and based on the touch and the release to the user's touch of the one or more GUI objects. Identifies the corresponding window object
  • GUI Graphic User Interface
  • the processor may control the touch display to cause the screen to output a soft keyboard, and identify a key touched by the user among the one or more keys in the soft keyboard.
  • the touch display may detect movement of the position of the touch.
  • the processor may change the touched key based on the position of the touch according to the movement.
  • the information related to the input may include a preview event indicating that the touch occurs on a specific key among the one or more keys, a cancellation event indicating that the touch is canceled, and a completion event indicating that the input of the specific key is completed.
  • the processor may generate the completion event when the release occurs without the touch being canceled.
  • the processor may control the touch display to output information enabling the user to identify the specific key when the preview event occurs.
  • the processor may control the touch display so that the screen outputs a GUI object, and adjust a string output in the GUI object based on information related to the input.
  • the processor may add a character corresponding to the specific key to the string when the preview event occurs, delete the output character from the string when the cancellation event occurs, and when the completion event occurs, Characters can be changed from the first form to the second form
  • the first form and the second form may be different from each other.
  • the touch display may be a multi-touch display that senses touches each occurring at one or more positions and release of each of the touches.
  • the particular key may be one or more.
  • the processor may generate the preview event, the cancellation event, and the completion event for each of the one or more specific keys based on the touch and release on each of the one or more specific keys.
  • the character may be one or more.
  • the one or more characters may each correspond to one of the one or more specific keys.
  • the processor outputs information on the screen by controlling the touch display, the touch display detects a touch on the screen by a user, the touch display detects the release of the touch, The processor generating information related to an input using the touch display based on the touch and the release, the processor transmitting information related to the generated input to a process executed by the processor and the touch Is considered to be canceled if is held for a time equal to or greater than a first threshold.
  • a touch display in a touch display, a screen for outputting information, a sensor for detecting a touch on the screen and a release of the touch by a user, and generating information related to an input based on the touch and the release, And a controller for outputting information related to the generated input, wherein the controller considers the touch to be canceled if the touch is held for a time above a first threshold.
  • a sensor detects a touch on a screen by a user, the sensor detects a release of the touch, and a controller detects the touch and the release. Generating information related to an input using the touch display based on the controller; outputting information related to the generated input by the controller; and if the controller is maintained for a time above a first threshold, the touch is considered canceled.
  • a recording medium having a program for processing an input using a touch display is recorded, the touch display being based on a touch on a screen of the touch display detected by the touch display and a release of the touch.
  • An input information generation code for generating information related to the used input wherein the input information generation code considers the touch canceled if the touch is held for a time equal to or greater than a first threshold value; and sends information related to the generated input to a processor.
  • a computer-readable recording medium is provided, in which a program containing an output code for transferring to a process to be executed is recorded.
  • the user may rest his or her hand on the multi-touch screen between character inputs, and unintended characters may not be input to the multi-touch device.
  • a multi-touch device having a multi-touch screen convenience of text input may be improved, and utilization of the multi-touch device may be increased.
  • FIG. 1 illustrates a posture of a user placing a hand on an electronic device having a touch display, according to an embodiment.
  • FIG. 2 is a structural diagram of a touch device according to an embodiment.
  • FIG. 3 is a state transition diagram for a touch point according to an example.
  • FIG. 4 illustrates an interaction between a plurality of state machines and a GUI object using an event flow according to an example.
  • FIG. 5 is a view illustrating a generation of an event and a change of an output string when a user inputs the word 'BOY' through multi-touch according to an example.
  • FIG. 6 is a structural diagram of a touch display according to an embodiment of the present invention.
  • FIG. 7 is a flowchart illustrating an operation according to a recognized gesture after cancellation of a touch according to an embodiment of the present invention.
  • 'touch' may mean that the user's finger or the like is in contact with the touch screen or the contact is maintained.
  • 'Release' may mean that a user's finger or the like that has been in contact with the touch screen falls from the touch screen.
  • FIG. 1 illustrates a posture of a user placing a hand on an electronic device having a touch display, according to an embodiment.
  • a user places his or her hands on the touch display 110 of the electronic device 100. Each finger of the user was touched on the touch display 110.
  • "L1" to “L5" and “R1” to “R5" are labels indicating the user's fingers, respectively.
  • a touch state and a pressed state may be distinguished.
  • the touch state may mean a state in which a user's finger is in contact with a key of a physical keyboard but the key is not pressed by a force applied by the finger.
  • the pressed state may mean a state in which a key of the physical keyboard is pressed by a user's finger. The user may distinguish whether a key in contact with the finger is in a touch state or a pressed state through a sense transmitted through the finger. Thus, the user can rest while placing the fingers on the key in a touch state.
  • FIG. 2 is a structural diagram of a touch device according to an embodiment.
  • the electronic device 100 may include a touch display 110 and a processor 200.
  • the touch display 110 may output information on a screen.
  • the screen may indicate a portion where information is output as light in a display such as a liquid crystal display (LCD) or an organic light-emitting diode (OLED).
  • LCD liquid crystal display
  • OLED organic light-emitting diode
  • the touch display 110 may detect a physical change occurring on the screen.
  • the physical change may include 1) a touch on the screen by the user, 2) continuous maintenance of the touch, 3) movement of the position of the touch, and 4) release of the touch.
  • Touch on the screen by the user may mean that the user places a part of his or her body at a specific location on the screen.
  • Release of the touch may mean that the user releases a part of his or her body or a tool from the screen.
  • the user may touch a specific location on the screen in order to deliver a certain input value to the process executed by the electronic device 100 or the processor 200.
  • the touch display 110 may transmit information about the detected physical change to the processor 200.
  • the touch display 110 detects a physical change
  • the touch display 110 transmits the detected physical change to the processor 200, and the processor 200 considers the received physical change to be received.
  • the processor 200 may execute a process.
  • the process may mean an operating system, an application, an app, and the like.
  • the processor 200 may control the touch display 110 to output specific information.
  • the processor 200 may perform a specific operation according to the information about the physical change.
  • the processor 200 may generate information related to an input using the touch display based on physical changes occurring on the screen (eg, touch, maintenance of the touch, movement of the position of the touch, and release of the touch).
  • the processor 200 may transmit information related to the generated input to the process. That is, a process may represent an entity that receives an input value or information related to the input.
  • the touch display 110 may sense one or more physical changes that occur at different locations. For example, the touch display 110 may sense touches each occurring at one or more positions, continuous holding of each of the touches, movement of the position of each of the touches, and release of each of the touches. . The touch display 110 may transmit information about the detected physical change for each of the one or more locations to the processor 200. The processor 200 may identify which location the information on the physical change is and may perform a specific operation according to the information on the detected physical change for the specific location.
  • a position where a touch occurs on the screen is outlined as a touch point.
  • the touch point may be represented by coordinates.
  • the touch at a single touch point and the maintenance of the touch associated with the touch point, the state transition according to the movement and release of the position of the touch are described in detail with reference to FIG. 3 below.
  • FIG. 3 is a state transition diagram for a touch point according to an example.
  • the state transition diagram 300 may represent a process in which the processor 200 generates information related to an input for one touch point based on a detected physical phenomenon.
  • the processor 200 may divide a state for one touch point into an idle state 310 and a touched state 320.
  • the idle state 310 may be a state indicating before a touch occurs or after a process for the touch ends.
  • the touched state 320 may be a state indicating that processing of the generated touch is continued after a touch on a specific position occurs.
  • Steps 330 and 385 to be described below may indicate a text input processing method. That is, the text input method may include steps 330 to 385.
  • the information output step may be performed. That is, the character input method may include an information output step.
  • the touch display 110 may output information to the screen.
  • the processor 200 may control the touch display 110 to output information on the screen.
  • the state for one touch point may be initialized to an idle state 310.
  • the touch display 110 may detect a touch on the screen by a user.
  • the touch display 110 may transmit information about the detected touch to the processor 200.
  • the processor 200 may transition the state from the idle state 310 to the touched state 320.
  • the processor 200 may set a timer variable t representing a time for which the touch is maintained to 0 using information on the detected touch, and a value of the variable x 0 representing the initial position of the touch. Can be set to the value of the variable x .
  • the variable x represents the position of the touch at the present time (that is, when the touch is detected or when the transition occurs).
  • the processor 200 may set x using information on the detected touch.
  • the position may be a coordinate value.
  • step 335 the processor 200 may output a preview event as one of information related to an input.
  • the preview event may indicate that a touch on a specific touch point has occurred.
  • the processor 200 may transmit a preview event to the process.
  • the touch display 110 may detect the continued maintenance of the touch.
  • the touch display 110 may transmit information about the continued maintenance of the detected touch to the processor 200.
  • the processor 200 may update the value of t .
  • the processor 200 may update the value of t to a time from when the touch is detected to the present time (that is, when the continuous maintenance of the touch is detected).
  • the touch display 110 may detect movement of the position of the touch (that is, movement of the touch point).
  • the touch display 110 may transmit information about the movement of the detected touch to the processor 200.
  • the processor 200 may update the value of x to the location of the current touch (that is, when the movement of the location of the touch occurs) by using the information about the movement of the location of the touch. Therefore, x may represent the position where the touch is moved or the current position of the touch.
  • processor 200 based on, for example t, can be detected that the touch is maintained for a first threshold value t au over time.
  • the processor 200 may consider the touch to be canceled if the touch is maintained for a time equal to or greater than the first threshold t au .
  • the touch being considered to be canceled may mean that the processor 200 regards the touch as not a touch for input, so that the processor 200 does not make an input by the touch. Can mean processing.
  • the processor 200 may transition the state from the touched state 320 to the idle state 310.
  • the processor 200 may calculate a distance traveled by the touch, for example, based on x 0 and x .
  • Processor 200 is the distance between the first position x 0 and the touch movement position x of the touch second threshold If abnormal, the touch can be considered canceled.
  • the processor 200 may transition the state from the touched state 320 to the idle state 310.
  • step 375 the processor 200 may output a cancel event as one of information related to an input.
  • the preview event may indicate that a touch on a specific touch point is canceled.
  • the processor 200 may transmit a cancellation event to the process.
  • the touch display 110 may detect a release of a touch by a user.
  • the touch display 110 may transmit information about the release of the detected touch to the processor 200.
  • the processor 200 may transition the state from the touched state 320 to the idle state 310.
  • step 385 the processor 200 may output a complete event as one of information related to an input.
  • the completion event may indicate that a touch on a specific touch point is completed.
  • the processor 200 may transmit a completion event to the process.
  • the processor 200 may control the touch display 110 such that the screen outputs one or more Graphic User Interface (GUI) objects. Further, the processor 200 identifies the window object corresponding to the user's touch among the one or more GUI objects based on one or more of a touch, maintaining the touch, moving the position of the touch, and releasing the touch. can do.
  • the variable (or object) k may represent a window object input by the user.
  • One or more GUI objects may be one or more keys in the soft keyboard. That is, the processor 200 may control the touch display 110 such that the screen outputs a soft keyboard, and the processor 200 may control at least one of a touch, holding the touch, moving the position of the touch, and releasing the touch. Based on which one of the one or more keys in the soft keyboard can be identified. k may be a variable corresponding to the touched key.
  • the processor 200 may generate k representing the key touched by the user among the one or more keys. If k is generated, at step 335, processor 200 may output a preview of k .
  • the preview may mean information for allowing the user to identify the touched key. In general, the preview may be output within the screen.
  • the processor 200 may output a cancellation of k .
  • the processor 200 may output the completion of k .
  • the preview event of step 335 may indicate that a touch has occurred on a specific key among one or more keys.
  • the cancellation event of step 375 may indicate that a touch generated on the specific key is canceled.
  • the completion event of step 385 may indicate that the input of the specific key is completed.
  • the processor 200 may control the touch display 110 to output preview information for allowing a user to identify a specific key on which a touch occurs.
  • the processor 200 may determine a position at which the preview information is output based on the position of the specific key where the touch is generated.
  • the processor 200 may change the touched key based on the (new) position of the touch according to the movement.
  • the processor may update the value of k to indicate the touched key k is changed.
  • the processor 200 may generate a preview event indicating that a touch occurs on the changed touched key, and output a k indicating the changed touched key.
  • Step 380 may occur only when the state is the touched state 320. Therefore, the processor 200 may generate a completion event when the release of the touch occurs without the touch being canceled by the step 360 or the step 370.
  • FIG. 4 illustrates an interaction between a plurality of state machines and a GUI object using an event flow according to an example.
  • the multi-touch device 400 will be described.
  • the multi-touch device 400 may represent the electronic device 100 supporting multi-touch.
  • the multi-touch device 400 may refer to the electronic device 100 capable of processing a plurality of touches (or physical phenomena occurring in relation to the plurality of touches) occurring at the same time or overlapping.
  • the touch display 110 may be a multi-touch display that senses touches each occurring at one or more positions, holding each of the touches, moving the position of each of the touches, and releasing each of the touches. .
  • the touch display 110 may detect a physical phenomenon occurring at each of the one or more touch points.
  • the touch display 110 may identify which of the one or more touch points is associated with a particular physical phenomenon.
  • the touch display 110 may transmit the detected physical change and the touch point (or the location of the touch) associated with the physical change to the processor 200.
  • the processor 200 may perform physical changes (eg, touch, hold of touch, location of touch) for each of one or more positions (ie, one or more touch points). Output or generate information related to an input (eg, one or more of a preview event, a cancel event, and a completion event) based on one or more of a movement of and a release of a touch), wherein the information related to the generated input is one or more locations. It can indicate which position they are related to.
  • a soft keyboard is output on the screen of the touch display 110, one or more specific keys in which a touch occurs may be provided.
  • the processor 200 may output or generate information related to an input for each of the one or more specific keys based on a physical phenomenon for each of the one or more specific keys.
  • the processor 200 may control the touch display 110 such that a screen of the touch display 110 outputs a GUI object.
  • GUI objects can contain strings. That is, the string may be output as part of the GUI object.
  • the processor 200 may adjust a string output in the GUI object 410 based on the information related to the input described above with reference to FIGS. 2 to 4.
  • the GUI object 410 may be a text box.
  • GUI object 410 may receive text input.
  • the process may control the operation of the GUI object 410.
  • the multi-touch device 400 uses one or more state machines to process a physical number generated at each of the one or more touch points.
  • i 420 is an identifier (ID) that distinguishes one or more touchpoints. Physical phenomena that occur with respect to one touch point may have the same identifier.
  • S1 430 represents a first state machine that processes the physical phenomena that have occurred with respect to the first touch point.
  • S2 440 represents a second state machine that processes the physical phenomena that have occurred with respect to the second touch point.
  • S3 450 represents a third state machine that processes physical phenomena that have occurred in relation to the third touch point.
  • S1 430, S2 440, and S3 450 may use the separate state transition diagram 300 to generate an event according to a physical phenomenon.
  • the touch display 110 may transmit information about the detected physical change and an identifier of the touch point corresponding to the physical change to the processor 200.
  • the processor 200 may distinguish the touch points using the identifiers of the touch points, and the steps 330 to 385 described above with reference to FIG. 3 using the state transition diagram 300 of the state machine corresponding to the touch point. Can be performed.
  • touch (i), movement (i) and release (i) may represent touch, movement and release transmitted with identifier i, respectively.
  • the processor 200 may allow the S1 430 to process the physical phenomenon touch 1, the movement 1, and the release 1 occurring in relation to the first touch point, and the S1 430 may be configured as described above.
  • k may represent a key touched at the first touch point of one or more keys of the soft keyboard.
  • the generated preview event, cancellation event and completion event may be sent to the GUI object 410.
  • the GUI object 410 may show a key to be input in response to the transmitted event, cancel the input of the key, or complete the input of the key.
  • FIG. 5 is a view illustrating a generation of an event and a change of an output string when a user inputs the word 'BOY' through multi-touch according to an example.
  • a text box and a string in the text box are displayed as the GUI object 410 over time.
  • the initial text box 510 shows the form of a text box in which no content is input.
  • the final text box 519 shows the form of the text box when the input of the word 'BOY' is completed.
  • events generated as the user manipulates the electronic device 100 are displayed as time passes.
  • "k1" to “k7” may each indicate an identifier of a state machine that processes the event.
  • "B”, "A”, “S”, “D”, “F”, “O” and “Y” may each represent a character corresponding to the touched key.
  • preview k1 (B) " can indicate that a preview event for key “ B” occurs in state machine " k1 " by touching key “ B ", where " done k1 "
  • the state machine "k1" may indicate that a completion event has occurred.
  • the processor 200 may add a character corresponding to a specific key to a string of a text box.
  • the added character may have a first form.
  • the first form is an outline font.
  • the processor 200 may delete a character added by the preview event from the string. That is, the first form may indicate to the user that the above characters are temporarily input and that the above input may be canceled.
  • the processor 200 may change the text output in the first form from the first form to the second form by the preview event. That is, the second form may indicate to the user that the input of the above text is completed and is not canceled.
  • the first and second forms may be visually different from one another in order to allow a user to distinguish between cancelable characters and input completed characters.
  • the first and second forms may be different from each other in font, size, thickness, italics, underlined or outlined.
  • the above characters may be one or more, and each of the one or more characters may correspond to one of the one or more touched keys.
  • the one or more characters may be characters represented by a key corresponding to each of the one or more touch points.
  • the user can touch the touch screen using finger "L1" to type the letter "B".
  • the touch may generate a preview event of the key "B", and the processor 200 may output the letter "B" in a text box in a first form.
  • the touch may be handled by the first state machine 430, and the preview event of key “B” may be output from the first state machine 430.
  • the state of the first state machine 430 may transition to the touched state 320.
  • step 521 the user can release the touch on the key “B” by attaching the finger “L1” that was touching the key “B” from the key “B”. Due to the above release, a completion event of key “B” may occur.
  • the letter “ B " scheduled to be input by the completion event can be confirmed as being input by the user.
  • the processor 200 may change the letter “B” from the first form to the second form to output the confirmation in the text box.
  • the release may be handled by the first state machine 430, and the completion event of key “B” may be output from the first state machine 430.
  • the release allows the state of the first state machine 430 to transition to the idle state 310.
  • the first state machine 430 may process other touches that occur later.
  • the user's fingers “L2", “L3”, “L4" and “L5" are sequentially keys “A”, “S”, “D” and “F”, respectively.
  • Touch By the above touch preview events for each of the keys “A”, “S”, “D”, and “F” may occur sequentially, and the processor 200 may, according to the touched order, the letters “A”, “S”, “D”, and “F” may be sequentially output in the text box in the first form, respectively.
  • Different state machines can be used for each of the touches. The state machines may transition from the idle state 310 to the touched state 320, respectively, and output a preview event, respectively.
  • the user may leave the fingers “L2”, “L3”, “L4” and “L5” touched on the touch display 110 for a time greater than or equal to the threshold t au , or the touched fingers “L2”, “ L3 “,” L4 “and” L5 "threshold It can be moved by the above distance.
  • cancellation events for each of the keys “A”, “S”, “D”, and “F” may occur sequentially.
  • the processor 200 may sequentially delete the letters “A”, “S”, “D”, and “F” respectively output in the text box in the first form in the order in which the intervening for cancellation is satisfied.
  • the input of the letters "A”, “S”, “D” and “F” displayed in steps 522 to 525 may be sequentially canceled, respectively.
  • the state machines that processed the touch in steps 522 to 525 may each transition from the touched state 320 to the idle state.
  • step 530 the user can touch the touch screen using finger "R1" to type the letter “O".
  • the touch event may generate a preview event of the key “O”, and the processor 200 may output the letter “O” in a text box in a first form.
  • step 531 the user can release the touch on the key “O” by attaching the finger “R1” that was touching the key “O” from the key “O". Due to the above release, a completion event of key “O” may occur. The letter “ O " scheduled to be input by the completion event can be confirmed as input by the user.
  • the processor 200 may change the letter “O” from the first form to the second form to output the confirmation in the text box.
  • the user can touch the touch screen using finger "R2" to type the letter "Y".
  • the touch may generate a preview event of the key "Y", and the processor 200 may output the letter "Y” in a text box in a first form.
  • step 531 the user can release the touch on the key “Y” by attaching the finger “R2" that was touching the key “Y” from the key “Y”.
  • the release event of key “Y” may occur by the above release.
  • the letter “Y”, which was scheduled to be input by the completion event, may be determined to be input by the user.
  • the processor 200 may change the letter “Y” from the first form to the second form to output the confirmation in the text box.
  • FIG. 6 is a structural diagram of a touch display according to an embodiment of the present invention.
  • the touch display 600 may include a screen 610, a sensor 620, and a controller 630.
  • the screen 610 may correspond to the screen of the touch display 110 described above.
  • the screen 610 may perform a function performed by the screen of the touch display 110.
  • the screen 610 may output information.
  • the sensor 620 may correspond to the touch display 110 described above. That is, the sensor 620 may perform a function performed by the touch display 110 (or a function other than a function performed by the screen among the functions of the touch display 110). For example, the sensor 620 may detect a physical change occurring on the screen 610.
  • the sensor 640 may be various sensors capable of recognizing physical phenomena such as a capacitive sensor or a pressure sensitive sensor. In FIG. 6, it is merely exemplary that four sensors are distributed in each of the four corners of the screen.
  • the controller 630 may correspond to the processor 200 described above. That is, the controller 630 may perform a function that the processor 200 performs. For example, the controller 630 may generate information related to an input based on the physical change, and output information related to the generated input. The controller 630 may consider the touch canceled if the touch is held for a time equal to or greater than the first threshold t au .
  • the touch display 600 is associated with inputs such as preview events, cancellation events, and completion events based on physical changes such as touch, maintenance of the touch, movement of the position of the touch, and release of the touch.
  • the display may be internally generated to transmit information related to the generated input to an external processor 200 or the like.
  • FIG. 7 is a flowchart illustrating an operation according to a gesture recognized after cancellation of a touch according to an embodiment of the present invention.
  • step 710 may be 1) the touch is canceled by the processor 200 in step 360 that the touch has been held for a time equal to or greater than the first threshold t au or 2) the processor 200 in step 370.
  • the first is of a touch and a touch position x 0 is the distance between the movement position x can be performed when the touch by detecting that more than a second threshold canceled.
  • the processor 200 canceling the touch may transition the state of the touch point to the idle state 310.
  • the processor 200 may output cancellation of a touch on a touch point.
  • the processor 200 may control the touch display 110 to output the information on the cancellation.
  • the information on the cancellation may mean an image, a string, an animation, etc. indicating the cancellation of the touch output on the touch display 110.
  • the processor 200 may detect a gesture input by the user on the touch display 110.
  • the gesture may include movement of the position of the touch and release of the touch.
  • the gesture may be the movement of the location of the touch or the release of the touch.
  • the gesture may be a gesture related to the touch point.
  • the starting position of the gesture may be a touch point.
  • the touch point may be in the movement path of the gesture.
  • the processor 200 may perform an operation corresponding to the sensed gesture.
  • a specific operation may be performed based on the additional physical change in the touch display 110.
  • the processor 200 may detect a gesture in which the user's finger is moved in a specific direction, and the touch display 110 The cursor output on the screen may be moved in the same direction as that of the user's finger.
  • the cursor may be a mark on the touch display 110 indicating a point at which a character input through the keyboard is inserted.
  • the processor 200 may detect a gesture in which the user's finger is moved in a specific direction, the touch display 110
  • the mouse pointer output on the screen may be moved in the same direction as that of the user's finger.
  • the mouse pointer may be an indicator indicating a screen GUI object on the touch display 110 to which a command by pressing a button of a mouse is applied.
  • the processor 200 may detect a gesture in which the two fingers of the user move to the left, and backspace ) Can produce the effect.
  • the effect of the backspace may mean an operation of deleting a character on the left side of the cursor output on the touch display 110 and moving the cursor one space to the left.
  • the procedure ends.
  • the end of the procedure may mean a state of waiting for the operation of detecting the touch of step 330 while maintaining the state of the touch point in the idle state 310.
  • step 710 or step 730 may be repeatedly performed again.
  • Embodiments include computer-readable media containing program instructions for performing various computer-implemented operations.
  • the program recorded on the computer readable medium may be a program for processing input using a touch display.
  • an input information generation code for generating information related to an input using the touch display based on a touch on the screen of the touch display and a release of the touch detected by the touch display, and the generated input.
  • a computer readable medium may be recorded on which a program is recorded that includes an output code for transmitting related information to a process executed by a processor.
  • the input information generation code may consider that the touch is canceled if the touch is maintained for a time equal to or greater than the first threshold.
  • the program according to the present embodiment may be configured as a PC-based program or a mobile terminal dedicated application (for example, a smart phone application, a feature phone VM, etc.).
  • the input information generation code and the output code exemplarily classify codes executed by the processor 200 of the electronic device 100 to perform a function.
  • the function processed by the processor 200 may generate the above input information.
  • Some or all of the code and output code may be executed.
  • the program may be configured to be stored in a memory of the user terminal and / or the e-book service system and executed by at least one processor running in the user terminal and / or the e-book service system.
  • the computer readable medium may include program instructions, data files, data structures, etc. alone or in combination.
  • the program instructions recorded on the media may be those specially designed and constructed for the purposes of the embodiments, or they may be of the kind well-known and available to those having skill in the computer software arts.
  • the above-described file system can be recorded in a computer-readable recording medium.

Abstract

밀터 터치 입력을 처리하기 위한 방법 및 장치가 제공된다. 터치 디스플레이는 사용자에 의한 스크린 상의 터치 및 상기의 터치의 릴리즈를 감지할 수 있다. 프로세서는 터치 및 릴리즈에 기반하여 터치 디스플레이를 사용한 입력에 관련된 정보를 생성할 수 있다. 프로세서는 터치가 특정 시간 이상 유지되면, 상기의 터치를 입력과 무관한 것으로 간주하여 상기의 터치를 취소할 수 있다. 또한, 프로세서는 상기의 터치의 위치가 일정 거리 이상 이동하면, 상기의 터치를 취소할 수 있다.

Description

멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법
멀티 터치 스크린(multi-touch screen)에 관한 것으로, 보다 상세히는 멀티 터치 스크린에 표시된 소프트 키보드(soft keyboard)를 이용하는 문자 입력 장치 및 방법에 관한 것이다.
스마트폰(smart)을 비롯한 다양한 멀티 터치 기기(device)들이 문자 입력을 위한 주요한 수단으로서 소프트 키보드를 제공한다. 멀티 터치 기기들이 제공하는 소프트 키보드는 주로 엄지 손가락을 통해 사용하는 것을 가정하여 디자인 되었다. 멀티 터치 기기에 손가락이 터치되는 터치 면에 비해 소프트 키보드의 키가 더 작을 수 있다. 따라서, 사용자가 자신이 의도한 키가 입력될 것인지를 확인할 수 있게 하기 위해, 멀티 터치 기기는 멀티 터치 디스플레이(display)에 손가락에 의한 터치가 발생하면 터치 면의 주위(예컨대, 멀티 터치 디스플레이의 터치된 좌표의 윗 부분)에 현재 터치된 키를 표시할 수 있다. 또한, 멀티 터치 기기는 사용자의 손가락이 멀티 터치 디스플레이로부터 떨어질 때 터치된 키가 멀티 터치 기기에서 실행되는 어플리케이션 등으로 입력되게 할 수 있다. 이러한 표시 방식 및 입력 방식은 사용자에게 키가 터치된 상태에서 멀티 터치 기기로 입력될 키를 자신의 의사에 맞춰 수정할 수 있는 기회를 부여한다.
타블렛(tablet)과 같은 일정 기준 이상의 큰 크기를 갖는 멀티 터치 기기가 사용될 때, 사용자는 상기의 멀티 터치 기기의 멀티 터치 디스플레이 위에 자신의 양 손 또는 모든 손가락들을 올려 놓을 수 있다. 또한, 이러한 멀티 터치 기기는 실제로 사용되는 물리적 키보드와 유사한 형태를 갖는 소프트 키보드를 제공할 수 있다. 이러한 유사한 형태의 소프트 키보드의 키의 크기 또는 키들 간의 간격은 각각 물리적 키보드의 키의 크기 또는 키들 간의 간격과 동일하거나 유사할 수 있다. 따라서, 물리적 키보드와 유사한 형태를 갖는 소프트 키보드를 제공하는 멀티 터치 기기에 있어서는, 손가락이 멀티 터치 디스플레이에 표시된 특정한 키를 터치하더라도 터치된 키가 손가락에 의해 가려지지 않는다. 따라서, 큰 크기를 갖는 멀티 터치 기기에 있어서는, 스마트폰과 같은 작은 크기의 멀티 터치 기기와는 달리, 터치된 키를 표시하는 기능이 요구되지 않을 수 있다.
멀티 터치 기기에서 발생하는 문제들 중 하나는, 멀티 터치 디스플레이에 터치가 발생하면 궁극적으로는 키가 입력된다는 것이다. 따라서, 사용자는 물리적 키보드를 사용할 때와는 달리, 키의 표면의 촉감을 확인하거나, 손을 쉬게 하기 위해 손가락을 멀티 터치 디스플레이 위에 올려놓을 수 없다. 이러한 제한은 사용자가 장시간 멀티 터치 기기를 사용할 때 사용자의 피로를 유발시킬 수 있다는 문제를 발생시킨다.
특정한 멀티 터치 기기는 멀티 터치 디스플레이의 하단에 물리 버튼을 장착하거나, 압력 센서를 이용하여 사용자가 화면을 실제로 누를 수 있게 함으로써 전술된 문제를 해결한다. 그러나, 이러한 해결 방법은 터치 스크린(screen) 외의 입력 버튼 및 압력 센서 등과 같은 추가적인 부품을 요구하며, 멀티 터치 입력을 지원할 수 없다는 단점을 갖는다.
한국공개특허 제10-2009-0056469호(공개일 2009년 06월 03일)에는, 어플리케이션 별 인식 가능한 터치의 유형과 터치의 수를 판단하고, 터치 스크린의 터치 입력에 대해 터치의 속성을 측정하고, 측정된 터치의 속성에 따라 상기 터치 입력을 구분하고, 구분된 터치 입력과 어플리케이션 별 인식 가능한 터치의 유형을 비교하여 터치 입력을 터치의 유형 중 하나의 유형으로 최종 결정하고, 결정된 터치 입력에 대응되는 기능을 판단하여 실행하는 과정을 개시한다.
일 실시예는 터치가 특정 시간 이상 유지되면, 상기의 터치를 입력과 무관한 것으로 간주하여 상기의 터치를 취소하는 장치 및 방법을 제공할 수 있다.
일 실시예는 터치의 위치가 일정 거리 이상 이동하면, 상기의 터치를 입력과 무관한 것으로 간주하여 상기의 터치를 취소하는 장치 및 방법을 제공할 수 있다.
일 측에 따르면, 스크린에 정보를 출력하고, 사용자에 의한 상기 스크린 상의 터치 및 상기 터치의 릴리즈를 감지하는 터치 디스플레이 및 프로세스를 실행하고, 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하고, 상기 생성된 입력에 관련된 정보를 상기 프로세스로 전송하는 프로세서를 포함하고, 상기 프로세서는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는, 전자 장치가 제공된다.
상기 터치 디스플레이는 하나 이상의 위치들에서 각각 발생한 터치들 및 상기 터치들 각각의 릴리즈를 감지하는 멀티 터치 디스플레이일 수 있다.
상기 프로세서는 상기 하나 이상의 위치들 각각에 대한 상기 터치 및 상기 릴리즈에 기반하여 상기 입력에 관련된 정보를 생성할 수 있다.
상기 터치 디스플레이는 상기 터치의 위치의 이동을 감지할 수 있다.
상기 프로세서는 상기 터치의 최초의 위치 및 상기 터치가 이동된 위치 간의 거리가 제2 임계치 이상이면 상기 터치가 취소된 것으로 간주할 수 있다.
상기 프로세서는 상기 스크린이 하나 이상의 그래픽 유저 인터페이스(Graphic User Interface; GUI) 객체들을 출력하도록 상기 터치 디스플레이를 제어할 수 있고, 상기 터치 및 상기 릴리즈에 기반하여 상기 하나 이상의 GUI 객체들 중 사용자의 터치에 대응하는 윈도우 객체를 식별할 수 있다
상기 프로세서는 상기 스크린이 소프트 키보드를 출력하도록 상기 터치 디스플레이를 제어할 수 있고, 상기 소프트 키보드 내의 상기 하나 이상의 키들 중 상기 사용자에 의해 터치된 키를 식별할 수 있다.
상기 터치 디스플레이는 상기 터치의 위치의 이동을 감지할 수 있다.
상기 프로세서는 상기 이동에 따른 상기 터치의 위치에 기반하여 상기 터치된 키를 변경할 수 있다.
상기 입력에 관련된 정보는 상기 하나 이상의 키들 중 특정한 키에 상기 터치가 발생한 것을 나타내는 프리뷰 이벤트, 상기 터치가 취소된 것을 나타내는 취소 이벤트 및 상기 특정한 키의 입력이 완료되었음을 나타내는 완료 이벤트를 포함할 수 있다.
상기 프로세서는 상기 터치가 취소되지 않은 채 상기 릴리즈가 발생하면 상기 완료 이벤트를 생성할 수 있다.
상기 프로세서는 상기 프리뷰 이벤트가 발생하면 상기 사용자가 상기 특정한 키를 식별할 수 있게 하는 정보를 출력하도록 상기 터치 디스플레이를 제어할 수 있다.
상기 프로세서는 상기 스크린이 GUI 객체를 출력하도록 상기 터치 디스플레이를 제어할 수 있고, 상기 입력에 관련된 정보에 기반하여 상기 GUI 객체 내에서 출력되는 문자열을 조정할 수 있다.
상기 프로세서는 상기 프리뷰 이벤트가 발생하면 상기 문자열에 상기 특정한 키에 대응하는 문자를 추가할 수 있고, 상기 취소 이벤트가 발생하면 상기 문자열에서 상기 출력된 문자를 삭제할 수 있고, 상기 완료 이벤트가 발생하면 상기 문자를 상기 제1 형태에서 제2 형태로 변경할 수 있다
상기 제1 형태 및 상기 제2 형태는 서로 상이할 수 있다.
상기 터치 디스플레이는 하나 이상의 위치들에서 각각 발생한 터치들 및 상기 터치들 각각의 릴리즈를 감지하는 멀티 터치 디스플레이일 수 있다.
상기 특정한 키는 하나 이상일 수 있다.
상기 프로세서는 상기 하나 이상의 특정한 키들 각각에 대한 상기 터치 및 상기 릴리즈에 기반하여 상기 하나 이상의 특정한 키들 각각에 대한 상기 프리뷰 이벤트, 상기 취소 이벤트 및 상기 완료 이벤트를 생성할 수 있다.
상기 문자는 하나 이상일 수 있다.
상기 하나 이상의 문자들은 각각 상기 하나 이상의 특정한 키들 중 하나의 키에 대응할 수 있다.
다른 일 측에 따르면, 프로세서가 터치 디스플레이를 제어함으로써 스크린에 정보를 출력하는 단계, 상기 터치 디스플레이가 사용자에 의한 상기 스크린 상의 터치를 감지하는 단계, 상기 터치 디스플레이가 상기 터치의 릴리즈를 감지하는 단계, 상기 프로세서가 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 단계, 상기 프로세서가 상기 생성된 입력에 관련된 정보를 상기 프로세서에 의해 실행되는 프로세스로 전송하는 단계 및 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는 단계를 포함하는, 입력 처리 방법이 제공된다.
다른 일 측에 따르면, 터치 디스플레이에 있어서, 정보를 출력하는 스크린, 사용자에 의한 상기 스크린 상의 터치 및 상기 터치의 릴리즈를 감지하는 센서 및 상기 터치 및 상기 릴리즈에 기반하여 입력에 관련된 정보를 생성하고, 상기 생성된 입력에 관련된 정보를 출력하는 제어기를 포함하고, 상기 제어기는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는, 터치 디스플레이가 제공된다.
또 다른 일 측에 따르면, 터치 디스플레이가 입력을 처리하는 방법에 있어서, 센서가 사용자에 의한 스크린 상의 터치를 감지하는 단계, 상기 센서가 상기 터치의 릴리즈를 감지하는 단계, 제어기가 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 단계, 상기 제어기가 상기 생성된 입력에 관련된 정보를 출력하는 단계 및 상기 제어기가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는 단계를 포함하는, 입력 처리 방법이 제공된다.
또 다른 일 측에 따르면, 터치 디스플레이를 사용한 입력을 처리하는 프로그램이 기록되어 있는 기록 매체에 있어서, 터치 디스플레이에 의해 감지된 상기 터치 디스플레이의 스크린 상의 터치 및 상기 터치의 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 입력 정보 생성 코드 - 상기 입력 정보 생성 코드는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주함 - 및 상기 생성된 입력에 관련된 정보를 프로세서에 의해 실행되는 프로세스로 전송하는 출력 코드를 포함하는 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
장시간의 문자 입력이 필요한 경우, 사용자는 문자 입력의 사이사이에 멀티 터치 스크린 위에 손을 올려 놓고 쉴 수 있으며, 의도하지 않은 문자가 멀티 터치 기기로 입력되지 않을 수 있다.
멀티 터치 스크린을 갖는 멀티 터치 기기에 있어서 문자 입력의 편의성이 향상될 수 있으며, 멀티 터치 기기의 활용이 증대될 수 있다.
도 1은 일 예에 따른 사용자가 터치 디스플레이를 갖는 전자 장치 위에 손을 올려 놓은 자세를 도시한다.
도 2는 일 실시예에 따른 터치 장치의 구조도이다.
도 3은 일 예에 따른 터치 포인트에 대한 상태 전이도이다.
도 4는 일 예에 따른 복수 개의 상태 기계들 및 GUI 객체 간의 상호작용을 이벤트 흐름을 사용하여 설명한다.
도 5는 일 예에 따른 사용자가 멀티 터치로 단어 'BOY'을 입력할 경우의 이벤트의 발생 및 출력되는 문자열의 변화를 설명한다.
도 6은 본 발명의 일 실시예에 따른 터치 디스플레이의 구조도이다.
도 7은 본 발명의 일 예에 따른 터치의 취소 후에 인식된 제스처(gesture)에 따른 동작을 설명하는 흐름도이다.
이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
하기에서, '터치'는 사용자의 손가락 등이 터치 스크린과 접촉하는 것 또는 상기의 접촉이 유지되는 것을 의미할 수 있다. '릴리즈(release)'는 터치 스크린과 접촉하고 있던 사용자의 손가락 등이 상기의 터치 스크린으로부터 떨어지는 것을 의미할 수 있다.
도 1은 일 예에 따른 사용자가 터치 디스플레이를 갖는 전자 장치 위에 손을 올려 놓은 자세를 도시한다.
도 1에서, 사용자는 자신의 양 손을 전자 장치(100)의 터치 디스플레이(110) 위에 올려 놓았다. 사용자의 각 손가락은 터치 디스플레이(110) 위에 터치되었다. "L1" 내지 "L5", 그리고 "R1" 내지 "R5"는 각각 사용자의 손가락을 나타내는 레이블이다.
물리적 키보드에 있어서는, 터치 상태 및 누름 상태가 구분될 수 있다. 터치 상태는 사용자의 손가락과 물리적 키보드의 키가 접촉되었으나 손가락이 가하는 힘에 의해 키가 눌려지지는 않은 상태를 의미할 수 있다. 누름 상태는 사용자의 손가락에 의해 물리적 키보드의 키가 눌려진 상태를 의미할 수 있다. 사용자는 손가락을 통해 전해지는 감각 등을 통해 손가락에 접촉한 키가 터치 상태에 있는지 또는 누름 상태에 있는지를 구분할 수 있다. 따라서, 사용자는 손가락들을 키 위에 터치 상태로 놓은 채 쉴 수 있다.
반면, 터치 스크린에 있어서는, 터치 스크린의 물리적 특성 상 터치 상태 만이 존재할 뿐 누름 상태가 별도로 존재하지 않는다. 따라서, 사용자는 터치 스크린의 위에 손가락을 올려 놓고 쉴 수 없다. 사용자가 터치 스크린의 위에 손가락을 올려 놓고 쉴 경우, 사용자가 의도하지 않은 키들이 입력될 수 있다.
도 2는 일 실시예에 따른 터치 장치의 구조도이다.
전자 장치(100)는 터치 디스플레이(110) 및 프로세서(200)를 포함할 수 있다.
터치 디스플레이(110)는 스크린(screen)에 정보를 출력할 수 있다. 여기서, 스크린은 액정(Liquid Crystal Display; LCD) 또는 유기발광다이오드((Organic Light-Emitting Diode; OLED) 등과 같은 디스플레이에서 빛으로서 정보가 출력되는 부분을 나타낼 수 있다.
터치 디스플레이(110)는 스크린 상에서 발생하는 물리적 변화를 감지할 수 있다. 여기서, 물리적 변화는 1) 사용자에 의한 스크린 상의 터치, 2) 상기의 터치의 계속적인 유지, 3) 상기의 터치의 위치의 이동 및 4) 상기의 터치의 릴리즈를 포함할 수 있다. 사용자에 의한 스크린 상의 터치란, 사용자가 스크린 상의 특정한 위치에 자신의 신체 중 일부 또는 도구를 갖다 대는 것을 의미할 수 있다. 터치의 릴리즈란 사용자가 상기의 자신의 신체 중 일부 또는 도구를 스크린으로부터 떼어 놓는 것을 의미할 수 있다. 사용자는 스크린에 표시된 정보에 기반하여, 전자 장치(100) 또는 프로세서(200)에 의해 실행되는 프로세스에 어떤 입력 값을 전달하기 위해 스크린 상의 특정한 위치를 터치할 수 있다.
터치 디스플레이(110)는 감지된 물리적 변화에 대한 정보를 프로세서(200)로 전송할 수 있다. 이하, 터치 디스플레이(110)가 물리적 변화를 감지하면, 터치 디스플레이(110)는 감지된 물리적 변화를 프로세서(200)로 전송하고, 프로세서(200)는 감지된 물리적 변화를 수신하는 것으로 간주한다.
프로세서(200)는 프로세스(process)를 실행할 수 있다. 여기서, 프로세스는 운영 체제, 어플리케이션(application) 및 앱(app) 등을 의미할 수 있다.
프로세서(200)는 터치 디스플레이(110)가 특정한 정보를 출력하도록 제어할 수 있다. 프로세서(200)는 물리적 변화에 대한 정보에 따라 특정한 연산을 수행할 수 있다. 프로세서(200)는 스크린 상에서 발생하는 물리적 변화(예컨대, 터치, 터치의 유지, 터치의 위치의 이동 및 터치의 릴리즈)에 기반하여 터치 디스플레이를 사용한 입력에 관련된 정보를 생성할 수 있다. 프로세서(200)는 생성된 입력에 관련된 정보를 프로세스로 전송할 수 있다. 즉, 프로세스는 입력 값 또는 입력에 관련된 정보를 수신하는 개체(entity)를 나타낼 수 있다.
터치 디스플레이(110)는 상이한 위치에서 발생한 하나 이상의 물리적 변화들을 감지할 수 있다. 예컨대, 터치 디스플레이(110)는 하나 이상의 위치들에서 각각 발생한 터치들, 상기의 터치들 각각의 계속적인 유지, 상기의 터치들 각각의 위치의 이동 및 상기의 터치들 각각의 릴리즈를 감지할 수 있다. 터치 디스플리이(110)는 하나 이상의 위치들 각각에 대해 감지된 물리적 변화에 대한 정보를 프로세서(200)로 전송할 수 있다. 프로세서(200)는 물리적 변화에 대한 정보가 어떠한 위치에 대한 것인지를 식별할 수 있고, 특정한 위치에 대해 감지된 물리적 변화에 대한 정보에 따라 특정한 연산을 수행할 수 있다.
이하, 스크린 상에서 터치가 발생한 위치를 터치 포인트로 약술한다. 터치 포인트는 좌표로 표현될 수 있다. 단일한 터치 포인트에서의 터치 및 상기의 터치 포인트와 관련된 터치의 유지, 터치의 위치의 이동 및 릴리즈에 따른 상태 전이가 하기에서 도 3을 참조하여 상세히 설명된다.
도 3은 일 예에 따른 터치 포인트에 대한 상태 전이도이다.
상태 전이도(state transition diagram)(300)는 프로세서(200)가 감지된 물리적 현상에 기반하여 하나의 터치 포인트에 대한 입력에 관련된 정보를 생성하는 과정을 나타낼 수 있다.
프로세서(200)는, 하나의 터치 포인트에 대한 상태를, 유휴(idle) 상태(310) 및 터치된(touched) 상태(320)로 구분할 수 있다. 여기서, 유휴 상태(310)는 터치가 발생하기 전 또는 상기 터치에 대한 처리가 종료된 후를 나타내는 상태일 수 있다. 터치된 상태(320)는 특정한 위치에 대한 터치가 발생한 후 상기의 발생된 터치에 대한 처리가 계속되고 있음을 나타내는 상태일 수 있다.
후술될 단계들(330, 내지 385)은 문자 입력 처리 방법을 나타낼 수 있다. 즉, 문자 입력 방법은 단계들(330 내지 385)를 포함할 수 있다.
특정한 터치 포인트에 대한 단계들(310 내지 385)이 수행되기 전에, 정보 출력 단계가 수행될 수 있다. 즉, 문자 입력 방법은 정보 출력 단계를 포함할 수 있다.
정보 출력 단계에서, 터치 디스플레이(110)는 스크린에 정보를 출력할 수 있다. 프로세서(200)는 스크린이 정보를 출력하도록 터치 디스플레이(110)를 제어할 수 있다.
하나의 터치 포인트에 대한 상태는 유휴 상태(310)로 초기화될 수 있다.
단계(330)에서, 터치 디스플레이(110)는 사용자에 의한 상기 스크린 상의 터치를 감지할 수 있다. 터치 디스플레이(110)는 감지된 터치에 대한 정보를 프로세서(200)로 전송할 수 있다.
프로세서(200)는 상태를 유휴 상태(310)로부텨 터치된 상태(320)로 전이시킬 수 있다.
프로세서(200)는 감지된 터치에 대한 정보를 사용하여, 터치가 유지되는 시간을 나타내는 타이머 변수 t를 0으로 세트(set)할 수 있고, 상기의 터치의 최초의 위치를 나타내는 변수 x 0의 값을 변수 x의 값으로 세트할 수 있다. 변수 x는 현재(말하자면, 상기의 터치가 감지된 시점 또는 상기의 전이가 발생한 시점)의 터치의 위치를 나타낸다. 프로세서(200)는 감지된 터치에 대한 정보를 사용하여 x를 세트할 수 있다. 여기서, 위치는 좌표 값일 수 있다.
단계(330)가 발생한 경우, 단계(335)에서, 프로세서(200)는 입력에 관련된 정보 중 하나로서, 프리뷰(preview) 이벤트를 출력할 수 있다. 프리뷰 이벤트는 특정한 터치 포인트에 대한 터치가 발생한 것을 나타낼 수 있다. 프로세서(200)는 프리뷰 이벤트를 프로세스로 전송할 수 있다.
단계(340)에서, 터치 디스플레이(110)는 터치의 계속되는 유지를 감지할 수 있다. 터치 디스플레이(110)는 감지된 터치의 계속되는 유지에 대한 정보를 프로세서(200)로 전송할 수 있다.
프로세서(200)는 t의 값을 갱신할 수 있다. 프로세서(200)는 t의 값을 터치가 감지된 시점으로부터 현재(말하자면, 터치의 계속되는 유지가 감지된 시점)까지의 시간으로 갱신할 수 있다.
단계(350)에서, 터치 디스플레이(110)는 터치의 위치의 이동(즉, 터치 포인트의 이동)을 감지할 수 있다. 터치 디스플레이(110)는 감지된 터치의 위치의 이동에 대한 정보를 프로세서(200)로 전송할 수 있다.
프로세서(200)는 감지된 터치의 위치의 이동에 대한 정보를 사용하여 x의 값을 현재(말하자면, 터치의 위치의 이동이 발생한 시점)의 터치의 위치로 갱신할 수 있다. 따라서, x는 터치가 이동된 위치 또는 터치의 현재의 위치를 나타낼 수 있다.
단계(360)에서, 프로세서(200)는, 예컨대 t에 기반하여, 터치가 제1 임계치 tau 이상의 시간 동안 유지된 것을 감지할 수 있다. 프로세서(200)는 터치가 제1 임계치 tau 이상의 시간 동안 유지되면 터치가 취소된 것으로 간주할 수 있다. 여기서, 터치가 취소된 것으로 간주된다는 것은, 프로세서(200)가 상기의 터치를 입력을 위한 터치가 아닌 것으로 간주한다는 것을 의미할 수 있고, 프로세서(200)가 상기의 터치에 의한 입력이 이루어지지 않도록 처리한다는 것을 의미할 수 있다.
터치가 취소된 것으로 간주됨으로써, 프로세서(200)는 상태를 터치된 상태(320)로부터 유휴 상태(310)로 전이시킬 수 있다.
단계(370)에서, 프로세서(200)는, 예컨대 x 0 및 x에 기반하여, 터치가 이동한 거리를 계산할 수 있다. 프로세서(200)는 터치의 최초의 위치 x 0 및 터치가 이동된 위치 x 간의 거리가 제2 임계치
Figure PCTKR2012004912-appb-I000001
이상이면 터치가 취소된 것으로 간주할 수 있다.
터치가 취소된 것으로 간주됨으로써, 프로세서(200)는 상태를 터치된 상태(320)로부터 유휴 상태(310)로 전이시킬 수 있다.
단계(360) 또는 단계(370)가 발생한 경우, 단계(375)에서, 프로세서(200)는 입력에 관련된 정보 중 하나로서, 취소(cancel) 이벤트를 출력할 수 있다. 프리뷰 이벤트는 특정한 터치 포인트에 대한 터치가 취소된 것을 나타낼 수 있다. 프로세서(200)는 취소 이벤트를 프로세스로 전송할 수 있다.
단계(380)에서, 터치 디스플레이(110)는 사용자에 의한 터치의 릴리즈를 감지할 수 있다. 터치 디스플레이(110)는 감지된 터치의 릴리즈에 대한 정보를 프로세서(200)로 전송할 수 있다.
프로세서(200)는 상태를 터치된 상태(320)로부텨 유휴 상태(310)로 전이시킬 수 있다.
단계(380)가 발생한 경우, 단계(385)에서, 프로세서(200)는 입력에 관련된 정보 중 하나로서, 완료(complete) 이벤트를 출력할 수 있다. 완료 이벤트는 특정한 터치 포인트에 대한 터치가 완료된 것을 나타낼 수 있다. 프로세서(200)는 완료 이벤트를 프로세스로 전송할 수 있다.
전술된 정보 출력 단계에서, 프로세서(200)는 스크린이 하나 이상의 그래픽 유저 인터페이스(Graphic User Interface; GUI) 객체들을 출력하도록 터치 디스플레이(110)를 제어할 수 있다. 또한, 프로세서(200)는 터치, 상기의 터치의 유지, 상기의 터치의 위치의 이동 및 상기의 터치의 릴리즈 중 하나 이상에 기반하여 하나 이상의 GUI 객체들 중 사용자의 터치에 대응하는 원도우 객체를 식별할 수 있다. 변수(또는, 객체) k는 사용자의 입력하는 윈도우 객체를 나타낼 수 있다.
하나 이상의 GUI 객체들은 소프트 키보드 내의 하나 이상의 키들일 수 있다. 즉, 프로세서(200)는 스크린이 소프트 키보드를 출력하도록 터치 디스플레이(110)를 제어할 수 있고, 터치, 상기의 터치의 유지, 상기의 터치의 위치의 이동 및 상기의 터치의 릴리즈 중 하나 이상에 기반하여 소프트 키보드 내의 하나 이상의 키들 중 사용자에 의해 터치(또는 입력)된 키를 식별할 수 있다. k는 터치된 키에 대응하는 변수일 수 있다.
따라서, 단계(330)에서, 프로세서(200)는 하나 이상의 키들 중 사용자에 의해 터치된 키를 나타내는 k를 생성할 수 있다. k가 생성된 경우, 단계(335)에서, 프로세서(200)는 k의 프리뷰를 출력할 수 있다. 여기서, 프리뷰는 사용자가 터치된 키를 식별할 수 있게하는 정보를 의미할 수 있다. 일반적으로, 프리뷰는 스크린 내에서 출력될 수 있다. 단계(375)에서, 프로세서(200)는 k의 취소를 출력할 수 있다. 단계(385)에서, 프로세서(200)는 k의 완료를 출력할 수 있다.
단계(335)의 프리뷰 이벤트는 하나 이상의 키들 중 특정한 키에 터치가 발생한 것을 나타낼 수 있다. 단계(375)의 취소 이벤트는 상기의 특정한 키에 발생한 터치가 취소된 것을 나타낼 수 있다. 단계(385)의 완료 이벤트는 상기의 특정한 키의 입력이 완료되었음을 나타낼 수 있다.
프로세서(200)는 특정한 키에 터치가 발생한 것을 나타내는 프리뷰 이벤트가 발생하면, 사용자가 터치가 발생한 특정한 키를 식별할 수 있게하는 프리뷰 정보를 출력하도록 터치 디스플레이(110)를 제어할 수 있다. 프로세서(200)는 터치가 발생한 특정한 키의 위치에 기반하여 프리뷰 정보가 출력되는 위치를 결정할 수 있다.
단계(350)에서 터치 디스플레이(110)가 터치의 위치의 이동을 감지한 경우, 프로세서(200)는 이동에 따른 터치의 (새로운) 위치에 기반하여 터치된 키를 변경할 수 있다. 프로세서는 k가 변경된 터치된 키를 나타내도록 k의 값을 갱신할 수 있다.
터치된 키가 변경된 경우, 단계(335)에서 프로세서(200)는 변경된 터치된 키에 터치가 발생한 것을 나타내는 프리뷰 이벤트를 발생시킬 수 있으며, 변경된 터치된 키를 나타내는 k를 출력할 수 있다.
단계(380)는 상태가 터치된 상태(320)일 경우에만 발생 가능할 수 있다. 따라서, 프로세서(200)는 단계(360) 또는 단계(370)에 의해 터치가 취소되지 않은 채 상기의 터치의 릴리즈가 발생하면 완료 이벤트를 생성할 수 있다.
도 4는 일 예에 따른 복수 개의 상태 기계들 및 GUI 객체 간의 상호작용을 이벤트 흐름을 사용하여 설명한다.
우선, 멀티 터치 장치(400)에 대해 설명한다.
멀티 터치 장치(400)는 멀티 터치를 지원하는 전자 장치(100)를 나타낼 수 있다. 멀티 터치 장치(400)는 동시에 또는 중첩하여 발생하는 복수 개의 터치들(또는, 복수 개의 터치들과 관련하여 발생하는 물리적 현상들)을 처리할 수 있는 전자 장치(100)를 의미할 수 있다.
터치 디스플레이(110)는 하나 이상의 위치들에서 각각 발생한 터치들, 상기의 터치들 각각의 유지, 상기의 터치들 각각의 위치의 이동 및 상기의 터치들 각각의 릴리즈를 감지하는 멀티 터치 디스플레이일 수 있다. 말하자면, 터치 디스플레이(110)는 하나 이상의 터치 포인트들 각각에서 발생하는 물리적 현상을 감지할 수 있다. 또한, 터치 디스플레이(110)는 특정한 물리적 현상이 하나 이상의 터치 포인트들 중 어떤 터치 포인트와 관련된 것인가를 식별할 수 있다. 터치 디스플레이(110)는 감지된 물리적 변화 및 상기 물리적 변화와 관련된 터치 포인트(또는 터치의 위치)를 프로세서(200)로 전송할 수 있다.
전자 장치(100)가 멀티 터치 장치(400)인 경우, 프로세서(200)는 하나 이상의 위치들(즉, 하나 이상의 터치 포인트들) 각각에 대한 물리적 변화(예컨대, 터치, 터치의 유지, 터치의 위치의 이동 및 터치의 릴리즈 중 하나 이상)에 기반하여 입력에 관련된 정보(예컨대, 프리뷰 이벤트, 취소 이벤트 및 완료 이벤트 중 하나 이상)를 출력 또는 생성할 수 있고, 생성된 입력에 관련된 정보가 하나 이상의 위치들 중 어떤 위치에 관련된 것인가를 나타낼 수 있다. 터치 디스플레이(110)의 스크린에 소프트 키보드가 출력된 경우, 터치가 발생한 특정한 키는 하나 이상일 수 있다. 프로세서(200)는 하나 이상의 특정한 키들 각각에 대한 물리적 현상에 기반하여 하나 이상의 특정한 키들 각각에 대한 입력에 관련된 정보를 출력 또는 생성할 수 있다.
다음으로, GUI 객체(object)에 대해서 설명한다.
프로세서(200)는 터치 디스플레이(110)의 스크린이 GUI 객체를 출력하도록 터치 디스플레이(110)를 제어할 수 있다. GUI 객체는 문자열(string)을 포함할 수 있다. 즉, GUI 객체의 일부로서 문자열이 출력될 수 있다. 프로세서(200)는 도 2 내지 도 4를 참조하여 전술된 입력에 관련된 정보에 기반하여 GUI 객체(410) 내에서 출력되는 문자열을 조정할 수 있다. GUI 객체(410)는 텍스트 박스(text box)일 수 있다. GUI 객체(410)는 문자 입력을 수신할 수 있다. 프로세스는 GUI 객체(410)의 동작을 제어할 수 있다.
다음으로, 멀티 터치 장치(400)가 하나 이상의 상태 기계(state machine)들을 사용하여 하나 이상의 터치 포인트들 각각에서 발생한 물리적 번화를 처리하는 방법을 설명한다.
i(420)는 하나 이상의 터치포인트들을 구분하는 식별자(identifier; ID)이다. 하나의 터치 포인트에 관련하여 발생한 물리적 현상들은 동일한 식별자를 가질 수 있다. S1(430)은 제1 터치 포인트에 관련하여 발생한 물리적 현상들을 처리하는 제1 상태 기계를 나타낸다. S2(440)는 제2 터치 포인트에 관련하여 발생한 물리적 현상들을 처리하는 제2 상태 기계를 나타낸다. S3(450)은 제3 터치 포인트에 관련하여 발생한 물리적 현상들을 처리하는 제3 상태 기계를 나타낸다. S1(430), S2(440) 및 S3(450)은 각각 별도의 상태 전이도(300)를 사용하여 물리적 현상에 따른 이벤트를 발생시킬 수 있다.
터치 디스플레이(110)는 감지된 물리적 변화에 대한 정보 및 물리적 변화에 대응하는 터치 포인트의 식별자를 프로세서(200)로 전송할 수 있다. 프로세서(200)는 터치 포인트의 식별자를 사용하여 터치 포인트를 구분할 수 있고, 터치 포인트에 대응하는 상태 머신의 상태 전이도(300)를 사용하여 도 3을 참조하여 전술된 단계들(330 내지 385)을 수행할 수 있다.
도 4에서, 터치(i), 이동(i) 및 릴리즈(i)는 각각 식별자 i와 함께 전송된 터치, 이동 및 릴리즈를 나타낼 수 있다. 또한, 프로세서(200)는 S1(430)이 제1 터치 포인트에 관련하여 발생한 물리적 현상 터치(1), 이동(1) 및 릴리즈(1)를 처리하게 할 수 있으며, S1(430)은 상기의 물리적 현상을 처리함에 따라 프리뷰 이벤트, 취소 이벤트 및 완료 이벤트를 생성할 수 있다. k는 소프트 키보드의 하나 이상의 키들 중 제1 터치 포인트에서 터치된 키를 나타낼 수 있다. 생성된 프리뷰 이벤트, 취소 이벤트 및 완료 이벤트는 GUI 객체(410)로 전송될 수 있다. GUI 객체(410)는 전송된 이벤트에 대응하여 입력될 키를 보여주거나, 키의 입력을 취소하거나 또는 키의 입력을 완료할 수 있다.
도 5는 일 예에 따른 사용자가 멀티 터치로 단어 'BOY'을 입력할 경우의 이벤트의 발생 및 출력되는 문자열의 변화를 설명한다.
도 5의 좌측에는 GUI 객체(410)로서 텍스트 박스 및 텍스트 박스 내의 문자열이 시간의 흐름에 따라 표시되었다. 예컨대, 최초 텍스트 박스(510)는 아무 내용도 입력되지 않은 상태에서의 텍스트 박스의 형태를 나타낸다. 최종 텍스트 박스(519)는 단어 'BOY'의 입력이 완료된 상태에서의 텍스트 박스의 형태를 나타낸다. 도 5의 우측에는 사용자가 전자 장치(100)를 조작함에 따라 발생하는 이벤트들을 시간의 흐름에 따라 표시하였다. 이벤트 중 "k1" 내지 "k7"은 각각 이벤트를 처리하는 상태 머신의 식별자를 나타낼 수 있다. "B", "A", "S", "D", "F", "O" 및 "Y"는 각각 터치된 키에 대응하는 문자를 나타낼 수 있다. 예컨대, "프리뷰(k1(B))"는 키 "B"가 터치됨으로써 상태 머신 "k1"에서 키 "B"에 대한 프리뷰 이벤트가 발생함을 나타낼 수 있으며, "완료(k1)"는 상기의 상태 머신 "k1"에 의해 완료 이벤트가 발생함을 나타낼 수 있다.
프로세서(200)는 프리뷰 이벤트가 발생하면 텍스트 박스의 문자열에 특정한 키에 대응하는 문자를 추가할 수 있다. 추가되는 문자는 제1 형태를 가질 수 있다. 도 5에서, 제1 형태는 외곽선 폰트이다.
프로세서(200)는 취소 이벤트가 발생하면 문자열에서 프리뷰 이벤트에 의해 추가된 문자를 삭제할 수 있다. 즉, 제1 형태는 사용자에게, 상기의 문자는 임시로 입력된 것이며, 상기의 문자의 입력은 취소될 수 있음을 나타낼 수 있다.
프로세서(200)는 완료 이벤트가 발생하면 프리뷰 이벤트에 의해 제1 형태로 출력된 문자를 제1 형태에서 제2 형태로 변경할 수 있다. 즉, 제2 형태는 사용자에게 상기의 문자의 입력이 완료되었으며 취소되지 않는다는 것을 나타낼 수 있다.
사용자가 취소 가능한 문자 및 입력이 완료된 문자를 서로 구분하게 할 수 있게 하기 위해, 제1 형태 및 제2 형태는 서로 시각적으로 상이할 수 있다. 예컨대, 제1 형태 및 제2 형태는 글자체, 크기, 굵기, 이탤릭체인지 여부, 밑줄이 그어졌는지 여부 및 외곽선체인지 여부 등에 있어서 서로 상이할 수 있다.
전자 장치(100)가 멀티 터치 장치(400)인 경우, 상기의 문자는 하나 이상일 수 있고, 하나 이상의 문자들은 각각 하나 이상의 터치된 키들 중 하나의 키에 대응할 수 있다. 또는, 하나 이상의 문자들은 각각 하나 이상의 터치 포인트들 각각에 대응하는 키가 나타내는 문자일 수 있다.
단계(520)에서, 사용자는 문자 "B"를 타이핑하기 위해 손가락 "L1"을 사용하여 터치 스크린을 터치할 수 있다. 상기의 터치에 의해 키 "B"의 프리뷰 이벤트가 발생할 수 있고, 프로세서(200)는 문자 "B"를 제1 형태로 텍스트 박스 내에 출력할 수 있다. 예컨대, 상기의 터치는 제1 상태 기계(430)에 의해 처리될 수 있고, 키 "B"의 프리뷰 이벤트는 제1 상태 기계(430)로부터 출력될 수 있다. 상기의 터치에 의해 제1 상태 기계(430)의 상태는 터치된 상태(320)로 전이할 수 있다.
단계(521)에서, 사용자는 키 "B"를 터치하고 있던 손가락 "L1"을 키 "B"로부터 땜으로서 키 "B"에 대한 터치를 릴리즈할 수 있다. 상기의 릴리즈에 의해 키 "B"의 완료 이벤트가 발생할 수 있다. 상기의 완료 이벤트에 의해 입력 예정되었던 문자 "B"는 사용자에 의해 입력된 것으로 확정될 수 있다. 프로세서(200)는 상기의 확정을 나타내기 위해 문자 "B"를 제1 형태에서 제2 형태로 변경하여 텍스트 박스 내에 출력할 수 있다. 상기의 릴리즈는 제1 상태 기계(430)에 의해 처리될 수 있고, 키 "B"의 완료 이벤트는 제1 상태 기계(430)로부터 출력될 수 있다. 상기의 릴리즈에 의해 제1 상태 기계(430)의 상태는 유휴 상태(310)로 전이할 수 있다. 제1 상태 기계(430)는 이후에 발생하는 다른 터치를 처리할 수 있다.
단계(522) 내지 단계(525)에서, 사용자의 손가락들 "L2", "L3", "L4" 및 "L5"는 각각 순차적으로 키 "A", "S", "D" 및 "F"를 터치한다. 상기의 터치에 의해 키 "A", "S", "D" 및 "F" 각각에 대한 프리뷰 이벤트들이 순차적으로 발생할 수 있고, 프로세서(200)는, 터치된 순서에 따라, 문자 "A", "S", "D" 및 "F"를 각각 순차적으로 제1 형태로 텍스트 박스 내에 출력할 수 있다. 터치들 각각을 위해 서로 상이한 상태 기계들이 사용될 수 있다. 상태 기계들은 각각 유휴 상태(310)로부터 터치된 상태(320)로 전이할 수 있으며, 각각 프리뷰 이벤트를 출력할 수 있다.
사용자는 손가락들 "L2", "L3", "L4" 및 "L5"를 임계치 tau 이상의 시간 동안 터치 디스플레이(110) 위에 터치된 채로 놓아둘 수 있으며, 또는 터치된 손가락들 "L2", "L3", "L4" 및 "L5"를 임계치
Figure PCTKR2012004912-appb-I000002
이상의 거리만큼 이동시킬 수 있다. 따라서, 단계(526) 내지 단계(529)에서 키 "A", "S", "D" 및 "F" 각각에 대한 취소 이벤트가 순차적으로 발생할 수 있다. 프로세서(200)는 취소를 위한 조간이 만족되는 순서에 따라, 제1 형태로 텍스트 박스 내에 출력된 문자 "A", "S", "D" 및 "F"를 각각 순차적으로 삭제할 수 있다. 즉, 단계(522) 내지 단계(525)에서 표시된 문자 "A", "S", "D" 및 "F"의 입력이 각각 순차적으로 취소될 수 있다. 단계(522) 내지 단계(525)에서 터치를 처리한 상태 기계들은 각각 터치된 상태(320)에서 유휴 상태로 전이할 수 있다.
단계(530)에서, 사용자는 문자 "O"를 타이핑하기 위해 손가락 "R1"을 사용하여 터치 스크린을 터치할 수 있다. 상기의 터치에 의해 키 "O"의 프리뷰 이벤트가 발생할 수 있고, 프로세서(200)는 문자 "O"를 제1 형태로 텍스트 박스 내에 출력할 수 있다.
단계(531)에서, 사용자는 키 "O"를 터치하고 있던 손가락 "R1"을 키 "O"로부터 땜으로서 키 "O"에 대한 터치를 릴리즈할 수 있다. 상기의 릴리즈에 의해 키 "O"의 완료 이벤트가 발생할 수 있다. 상기의 완료 이벤트에 의해 입력 예정되었던 문자 "O"는 사용자에 의해 입력된 것으로 확정될 수 있다. 프로세서(200)는 상기의 확정을 나타내기 위해 문자 "O"를 제1 형태에서 제2 형태로 변경하여 텍스트 박스 내에 출력할 수 있다.
단계(532)에서, 사용자는 문자 "Y" 타이핑하기 위해 손가락 "R2"을 사용하여 터치 스크린을 터치할 수 있다. 상기의 터치에 의해 키 "Y"의 프리뷰 이벤트가 발생할 수 있고, 프로세서(200)는 문자 "Y"를 제1 형태로 텍스트 박스 내에 출력할 수 있다.
단계(531)에서, 사용자는 키 "Y"를 터치하고 있던 손가락 "R2"를 키 "Y"로부터 땜으로서 키 "Y"에 대한 터치를 릴리즈할 수 있다. 상기의 릴리즈에 의해 키 "Y"의 완료 이벤트가 발생할 수 있다. 상기의 완료 이벤트에 의해 입력 예정되었던 문자 "Y"는 사용자에 의해 입력된 것으로 확정될 수 있다. 프로세서(200)는 상기의 확정을 나타내기 위해 문자 "Y"를 제1 형태에서 제2 형태로 변경하여 텍스트 박스 내에 출력할 수 있다. 상기의 단계들(520 내지 533)을 통해, 멀티 터치를 통한 입력이 완료되고, 텍스트 박스 내에서는 문자열 "BOY"가 입력이 완료되었음을 나타내는 제2 형태로 출력될 수 있다.
도 6은 본 발명의 일 실시예에 따른 터치 디스플레이의 구조도이다.
터치 디스플레이(600)는 스크린(610), 센서(620) 및 제어기(630)를 포함할 수 있다..
스크린(610)은 전술된 터치 디스플레이(110)의 스크린에 대응할 수 있다. 스크린(610)은 터치 디스플레이(110)의 스크린이 수행하는 기능을 수행할 수 있다. 예컨대, 스크린(610)은 정보를 출력할 수 있다.
센서(620)는 전술된 터치 디스플레이(110)에 대응할 수 있다. 즉, 센서(620)는 터치 디스플레이(110)가 수행하는 기능(또는, 터치 디스플레이(110)의 기능 중 스크린이 수행하는 기능을 제외한 기능)을 수행할 수 있다. 예컨대, 센서(620)는 스크린(610) 상에서 발생하는 물리적 변화를 감지할 수 있다.
센서(640)는 정전식 센서 또는 감압식 센서 등 물리적 현상을 인식할 수 있는 다양한 센서일 수 있다. 도 6에서, 4 개의 센서들이 스크린의 4 개의 모서리들 각각에 분산하여 배치된 것은 단지 예시적인 것이다.
제어기(630)는 전술된 프로세서(200)에 대응할 수 있다. 즉, 제어기(630)는 프로세서(200)가 수행하는 기능을 수행할 수 있다. 예컨대, 제어기(630)는 상기 물리적 변화에 기반하여 입력에 관련된 정보를 생성할 수 있고, 생성된 입력에 관련된 정보를 출력할 수 있다. 제어기(630)는 터치가 제1 임계치 tau 이상의 시간 동안 유지되면 터치가 취소된 것으로 간주할 수 있다.
즉, 터치 디스플레이(600)는 터치, 상기의 터치의 유지, 상기의 터치의 위치의 이동 및 상기의 터치의 릴리즈와 같은 물리적 변화에 기반하여, 프리뷰 이벤트, 취소 이벤트 및 완료 이벤트와 같은 입력에 관련된 정보를 내부적으로 생성하여, 생성된 입력에 관련된 정보를 외부의 프로세서(200) 등으로 전송하는 디스플레이를 나타낼 수 있다.
앞서 도 1 내지 도 5를 참조하여 설명된 기술적 내용들이 그대로 적용될 수 있다. 특히, 터치 디스플레이(110)의 스크린, 터치 디스플레이(110) 및 프로세서(200)에 대한 기술적 내용들이 각각 스크린(610), 센서(620) 및 제어기(630)에 그대로 적용될 수 있다. 또한, "터치 디스플레이(110)를 사용한 입력"은 "터치 디스플레이(600)를 사용한 입력"으로 대체될 수 있다. 따라서, 보다 상세한 설명은 이하 생략하기로 한다.
도 7은 본 발명의 일 예에 따른 터치의 취소 후에 인식된 제스처에 따른 동작을 설명하는 흐름도이다.
하기의 단계들(710, 720 및 730)는 터치가 취소된 후 수행될 수 있다. 즉, 단계(710)는 1) 단계(360)에서 프로세서(200)가 터치가 제1 임계치 tau 이상의 시간 동안 유지된 것을 감지함으로써 터치가 취소되거나, 2) 단계(370)에서 프로세서(200)가 터치의 최초의 위치 x 0 및 터치가 이동된 위치 x 간의 거리가 제2 임계치 이상임을 감지함으로써 터치가 취소되었을 때 수행될 수 있다.
단계(710)에서, 터치를 취소한 프로세서(200)는 터치 포인트에 대한 상태를 유휴 상태(310)로 전이시킬 수 있다.
단계(720)에서, 프로세서(200)는 터치 포인트에 대한 터치의 취소를 출력할 수 있다. 예컨대, 프로세서(200)는 상기의 취소에 대한 정보를 출력하도록 터치 디스플레이(110)를 제어할 수 있다. 여기서, 취소에 대한 정보는 터치 디스플레이(110) 상에 출력되는 터치의 취소를 나타내는 영상, 문자열 및 애니메이션(animation) 등을 의미할 수 있다.
단계(730)에서, 프로세서(200)는 사용자에 의해 터치 디스플레이(110) 상에 입력된 제스처를 감지할 수 있다. 여기서, 제스처는 터치의 위치의 이동 및 터치의 릴리즈를 포함할 수 있다.
제스처는 터치의 위치의 이동 또는 터치의 릴리즈일 수 있다.
제스처는 터치 포인트에 관련된 제스처일 수 있다. 예컨대, 제스처의 시작 위치는 터치 포인트일 수 있다. 또는, 터치 포인트는 제스처의 이동 경로 중에 있을 수 있다.
단계(740)에서, 프로세서(200)는 감지된 제스처에 대응하는 동작을 수행할 수 있다.
즉, 단계(730) 및 단계(740)에 의해, 터치 포인트에 대한 터치가 취소된 후, 터치 디스플레이(110)에서 추가적으로 발생하한 물리적 변화에 기반하여 특정한 동작이 수행될 수 있다.
예컨대, 터치의 취소 후 사용자가 자신의 손가락을 특정한 방향으로 움직인 경우, 단계(720)에서 프로세서(200)는 사용자의 손가락이 특정한 방향으로 이동한 제스처를 감지할 수 있고, 터치 디스플레이(110) 상에 출력된 커셔(cursor)를 사용자의 손가락이 이동한 방향과 동일한 방향으로 이동시킬 수 있다. 여기서, 커셔는 키보드를 통해 입력된 문자가 삽입되는 지점을 나타내는 터치 디스플레이(110) 상의 표식일 수 있다.
예컨대, 터치의 취소 후 사용자가 자신의 손가락을 특정한 방향으로 움직인 경우, 단계(720)에서 프로세서(200)는 사용자의 손가락이 특정한 방향으로 이동한 제스처를 감지할 수 있고, 터치 디스플레이(110) 상에 출력된 마우스 포인터(mouse pointer)를 사용자의 손가락이 이동한 방향과 동일한 방향으로 이동시킬 수 있다. 여기서, 마우스 포인터는 마우스의 버튼(button)의 누름(press) 등에 의한 명령이 적용될 터치 디스플레이(110) 상의 화면(screen) GUI 객체를 가리키는 표식일 수 있다.
예컨대, 터치의 취소 후 사용자가 두 개의 손가락들을 좌측으로 움직인 경우, 단계(720)에서 프로세서(200)는 사용자의 2 개의 손가락들이 좌측 방향으로 이동한 제스처를 감지할 수 있고, 백스페이스(backspace)의 효과를 발생시킬 수 있다. 여기서, 백스페이스의 효과는 터치 디스플레이(110) 상에 출력된 커셔(cursor)의 좌측의 글자를 지우고, 상기의 커셔를 좌측으로 한 칸 이동시키는 동작을 의미할 수 있다.
감지된 제스처에 대응하는 동작이 수행되면, 절차가 종료한다. 여기서, 절차의 종료란, 터치 포인트에 대한 상태가 유휴 상태(310)로 유지되면서, 단계(330)의 터치를 감지하는 동작을 대기하는 상태를 의미할 수 있다.
또한, 단계(740)의 수행 이후, 단계(710) 또는 단계(730)가 다시 반복적으로 수행될 수도 있다.
실시예들은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체를 포함한다. 컴퓨터 판독 가능 매체에 기록된 프로그램은 터치 디스플레이를 사용한 입력을 처리하는 프로그램일 수 있다. 특히, 본 실시예에서는 터치 디스플레이에 의해 감지된 상기 터치 디스플레이의 스크린 상의 터치 및 상기 터치의 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 입력 정보 생성 코드와, 상기 생성된 입력에 관련된 정보를 프로세서에 의해 실행되는 프로세스로 전송하는 출력 코드를 포함하는 프로그램이 기록되는 컴퓨터 판독 가능 매체를 포함할 수 있다. 여기서, 상기의 입력 정보 생성 코드는 터치가 제1 임계치 이상의 시간 동안 유지되면 상기의 터치가 취소된 것으로 간주할 수 있다. 본 실시예에 따른 프로그램은 PC 기반의 프로그램 또는 모바일 단말 전용 어플리케이션(예를 들어, 스마트폰 어플리케이션, 피쳐폰 VM(virtual machine) 등의 형태) 등으로 구성될 수 있다. 입력 정보 생성 코드 및 출력 코드는 전자 기기(100)의 프로세서(200)가 기능을 수행하기 위해 실행하는 코드를 예시적으로 분류한 것으로, 프로세서(200)에 의해 처리되는 기능은 상기의 입력 정보 생성 코드 및 출력 코드 중 하나 이상에 의해 일부 또는 전부가 실행될 수 있다. 또한, 프로그램은, 사용자 단말 및/또는 전자책 서비스 시스템의 메모리에 저장되어 사용자 단말 및/또는 전자책 서비스 시스템에서 구동되는 적어도 하나의 프로세서에 의해 실행되도록 구성될 수 있다.
상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 또한, 상술한 파일 시스템은 컴퓨터 판독이 가능한 기록 매체에 기록될 수 있다.
이상과 같이 실시예를 통해 설명된 기술적 내용은 다양한 수정 및 변형이 가능하다. 그러므로, 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

Claims (15)

  1. 스크린에 정보를 출력하고, 사용자에 의한 상기 스크린 상의 터치 및 상기 터치의 릴리즈를 감지하는 터치 디스플레이; 및
    프로세스를 실행하고, 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하고, 상기 생성된 입력에 관련된 정보를 상기 프로세스로 전송하는 프로세서
    를 포함하고,
    상기 프로세서는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는, 전자 장치.
  2. 제1항에 있어서,
    상기 터치 디스플레이는 하나 이상의 위치들에서 각각 발생한 터치들 및 상기 터치들 각각의 릴리즈를 감지하는 멀티 터치 디스플레이이고,
    상기 프로세서는 상기 하나 이상의 위치들 각각에 대한 상기 터치 및 상기 릴리즈에 기반하여 상기 입력에 관련된 정보를 생성하는, 전자 장치.
  3. 제1항에 있어서,
    상기 터치 디스플레이는 상기 터치의 위치의 이동을 감지하고,
    상기 프로세서는 상기 터치의 최초의 위치 및 상기 터치가 이동된 위치 간의 거리가 제2 임계치 이상이면 상기 터치가 취소된 것으로 간주하는, 전자 장치.
  4. 제1항에 있어서,
    상기 프로세서는 상기 스크린이 하나 이상의 그래픽 유저 인터페이스(Graphic User Interface; GUI) 객체들을 출력하도록 상기 터치 디스플레이를 제어하고, 상기 터치 및 상기 릴리즈에 기반하여 상기 하나 이상의 GUI 객체들 중 사용자의 터치에 대응하는 윈도우 객체를 식별하는, 전자 장치.
  5. 제1항에 있어서,
    상기 프로세서는 상기 스크린이 소프트 키보드를 출력하도록 상기 터치 디스플레이를 제어하고, 상기 소프트 키보드 내의 상기 하나 이상의 키들 중 상기 사용자에 의해 터치된 키를 식별하는, 전자 장치.
  6. 제5항에 있어서,
    상기 터치 디스플레이는 상기 터치의 위치의 이동을 감지하고,
    상기 프로세서는 상기 이동에 따른 상기 터치의 위치에 기반하여 상기 터치된 키를 변경하는. 전자 장치.
  7. 제5항에 있어서,
    상기 입력에 관련된 정보는 상기 하나 이상의 키들 중 특정한 키에 상기 터치가 발생한 것을 나타내는 프리뷰 이벤트, 상기 터치가 취소된 것을 나타내는 취소 이벤트 및 상기 특정한 키의 입력이 완료되었음을 나타내는 완료 이벤트를 포함하며,
    상기 프로세서는 상기 터치가 취소되지 않은 채 상기 릴리즈가 발생하면 상기 완료 이벤트를 생성하는, 전자 장치.
  8. 제7항에 있어서,
    상기 프로세서는 상기 프리뷰 이벤트가 발생하면 상기 사용자가 상기 특정한 키를 식별할 수 있게 하는 정보를 출력하도록 상기 터치 디스플레이를 제어하는, 전자 장치.
  9. 제7항에 있어서,
    상기 프로세서는 상기 스크린이 GUI 객체를 출력하도록 상기 터치 디스플레이를 제어하고, 상기 입력에 관련된 정보에 기반하여 상기 GUI 객체 내에서 출력되는 문자열을 조정하는, 전자 장치.
  10. 제7항에 있어서,
    상기 프로세서는 상기 프리뷰 이벤트가 발생하면 상기 문자열에 상기 특정한 키에 대응하는 문자를 추가하고,
    상기 취소 이벤트가 발생하면 상기 문자열에서 상기 출력된 문자를 삭제하고,
    상기 완료 이벤트가 발생하면 상기 문자를 상기 제1 형태에서 제2 형태로 변경하고,
    상기 제1 형태 및 상기 제2 형태는 서로 상이한, 전자 장치.
  11. 제10항에 있어서,
    상기 터치 디스플레이는 하나 이상의 위치들에서 각각 발생한 터치들 및 상기 터치들 각각의 릴리즈를 감지하는 멀티 터치 디스플레이이고,
    상기 특정한 키는 하나 이상이고,
    상기 프로세서는 상기 하나 이상의 특정한 키들 각각에 대한 상기 터치 및 상기 릴리즈에 기반하여 상기 하나 이상의 특정한 키들 각각에 대한 상기 프리뷰 이벤트, 상기 취소 이벤트 및 상기 완료 이벤트를 생성하고,
    상기 문자는 하나 이상이고,
    상기 하나 이상의 문자들은 각각 상기 하나 이상의 특정한 키들 중 하나의 키에 대응하는, 전자 장치.
  12. 프로세서가 터치 디스플레이를 제어함으로써 스크린에 정보를 출력하는 단계;
    상기 터치 디스플레이가 사용자에 의한 상기 스크린 상의 터치를 감지하는 단계;
    상기 터치 디스플레이가 상기 터치의 릴리즈를 감지하는 단계;
    상기 프로세서가 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 단계;
    상기 프로세서가 상기 생성된 입력에 관련된 정보를 상기 프로세서에 의해 실행되는 프로세스로 전송하는 단계; 및
    상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는 단계
    를 포함하는, 입력 처리 방법.
  13. 터치 디스플레이에 있어서,
    정보를 출력하는 스크린;
    사용자에 의한 상기 스크린 상의 터치 및 상기 터치의 릴리즈를 감지하는 센서; 및
    상기 터치 및 상기 릴리즈에 기반하여 입력에 관련된 정보를 생성하고, 상기 생성된 입력에 관련된 정보를 출력하는 제어기
    를 포함하고,
    상기 제어기는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는, 터치 디스플레이.
  14. 터치 디스플레이가 입력을 처리하는 방법에 있어서,
    센서가 사용자에 의한 스크린 상의 터치를 감지하는 단계;
    상기 센서가 상기 터치의 릴리즈를 감지하는 단계;
    제어기가 상기 터치 및 상기 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 단계;
    상기 제어기가 상기 생성된 입력에 관련된 정보를 출력하는 단계; 및
    상기 제어기가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주하는 단계
    를 포함하는, 입력 처리 방법.
  15. 터치 디스플레이를 사용한 입력을 처리하는 프로그램이 기록되어 있는 기록 매체에 있어서,
    터치 디스플레이에 의해 감지된 상기 터치 디스플레이의 스크린 상의 터치 및 상기 터치의 릴리즈에 기반하여 상기 터치 디스플레이를 사용한 입력에 관련된 정보를 생성하는 입력 정보 생성 코드 - 상기 입력 정보 생성 코드는 상기 터치가 제1 임계치 이상의 시간 동안 유지되면 상기 터치가 취소된 것으로 간주함 -; 및
    상기 생성된 입력에 관련된 정보를 프로세서에 의해 실행되는 프로세스로 전송하는 출력 코드
    를 포함하는 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.
PCT/KR2012/004912 2012-01-30 2012-06-21 멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법 WO2013115440A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0009002 2012-01-30
KR1020120009002A KR101375924B1 (ko) 2012-01-30 2012-01-30 멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법

Publications (1)

Publication Number Publication Date
WO2013115440A1 true WO2013115440A1 (ko) 2013-08-08

Family

ID=48905452

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/004912 WO2013115440A1 (ko) 2012-01-30 2012-06-21 멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법

Country Status (2)

Country Link
KR (1) KR101375924B1 (ko)
WO (1) WO2013115440A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015102325A1 (ko) * 2014-01-03 2015-07-09 삼성전자 주식회사 디스플레이 장치 및 이의 추천 문자 제공 방법
WO2016089075A1 (en) * 2014-12-04 2016-06-09 Samsung Electronics Co., Ltd. Wearable device and method of transmitting message from the same

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105045484B (zh) * 2015-07-06 2018-04-17 腾讯科技（深圳）有限公司 操作处理方法及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0618023B2 (ja) * 1985-08-09 1994-03-09 富士通株式会社 タイパマチツクキ−ボ−ド入力制御方式
KR20080042056A (ko) * 2008-04-23 2008-05-14 (주)씨에스랩글로벌 터치스크린을 구비한 휴대용 단말기에서의 향상된 문자 입력 방법
KR20080071473A (ko) * 2007-01-30 2008-08-04 삼성전자주식회사 단말기의 터치키보드를 통한 문자 입력 장치 및 방법
KR20100093999A (ko) * 2009-02-18 2010-08-26 주식회사 엘지유플러스 터치형 단말기의 터치 민감도 조절 방법 및 그 시스템

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100672539B1 (ko) * 2005-08-12 2007-01-24 엘지전자 주식회사 터치스크린을 구비하는 이동통신단말기에서의 터치 입력인식 방법 및 이를 구현할 수 있는 이동통신단말기
KR100923755B1 (ko) * 2009-07-06 2009-10-27 라오넥스(주) 멀티터치 방식 문자입력 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0618023B2 (ja) * 1985-08-09 1994-03-09 富士通株式会社 タイパマチツクキ−ボ−ド入力制御方式
KR20080071473A (ko) * 2007-01-30 2008-08-04 삼성전자주식회사 단말기의 터치키보드를 통한 문자 입력 장치 및 방법
KR20080042056A (ko) * 2008-04-23 2008-05-14 (주)씨에스랩글로벌 터치스크린을 구비한 휴대용 단말기에서의 향상된 문자 입력 방법
KR20100093999A (ko) * 2009-02-18 2010-08-26 주식회사 엘지유플러스 터치형 단말기의 터치 민감도 조절 방법 및 그 시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015102325A1 (ko) * 2014-01-03 2015-07-09 삼성전자 주식회사 디스플레이 장치 및 이의 추천 문자 제공 방법
WO2016089075A1 (en) * 2014-12-04 2016-06-09 Samsung Electronics Co., Ltd. Wearable device and method of transmitting message from the same
US10020835B2 (en) 2014-12-04 2018-07-10 Samsung Electronics Co., Ltd. Wearable device and method of transmitting message from the same
US10374648B2 (en) 2014-12-04 2019-08-06 Samsung Electronics Co., Ltd. Wearable device for transmitting a message comprising strings associated with a state of a user
US10924147B2 (en) 2014-12-04 2021-02-16 Samsung Electronics Co., Ltd. Wearable device for transmitting a message comprising strings associated with a state of a user

Also Published As

Publication number Publication date
KR101375924B1 (ko) 2014-03-20
KR20130087818A (ko) 2013-08-07

Similar Documents

Publication Publication Date Title
WO2016093506A1 (ko) 이동 단말기 및 그 제어 방법
WO2014185624A1 (ko) 문자 입력 장치 및 문자 입력 방법
WO2011046270A1 (ko) 멀티터치 방식 입력제어 시스템
WO2015088263A1 (ko) 터치 입력의 압력 상태에 따라 동작하는 전자 장치 및 그 방법
WO2012153914A1 (en) Method and apparatus for providing graphic user interface having item deleting function
WO2011004960A2 (ko) 멀티터치 방식 문자입력 방법
WO2014084633A1 (en) Method for displaying applications and electronic device thereof
WO2014058144A1 (ko) 고속 스크롤 컨텐츠와 스크롤바 표시 방법 및 시스템
WO2012108714A2 (en) Method and apparatus for providing graphic user interface in mobile terminal
WO2015088298A1 (ko) 터치스크린이 장착된 키보드 및 그 제어방법과 이를 이용한 컴퓨터장치의 제어방법
WO2015072787A1 (ko) 전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치
WO2014189225A1 (en) User input using hovering input
WO2014137176A1 (en) Input apparatus, display apparatus, and control methods thereof
WO2014029170A1 (zh) 电容和电磁双模触摸屏的触控方法及手持式电子设备
WO2016129923A1 (ko) 디스플레이 장치 및 디스플레이 방법 및 컴퓨터 판독가능 기록매체
WO2015072803A1 (ko) 단말기 및 단말기의 제어 방법
WO2018124823A1 (en) Display apparatus and controlling method thereof
AU2012214993A1 (en) Method and apparatus for providing graphic user interface in mobile terminal
WO2017200323A1 (ko) 사용자 데이터를 저장하는 전자 장치 및 그 방법
WO2019160348A1 (ko) 수중 상태에서 압력 센서를 이용하여 사용자 입력을 획득하는 전자 장치 및 상기 전자 장치를 제어하는 방법
WO2019124841A1 (ko) 전자 장치 및 스트로크 입력에 따른 기능 실행 방법
WO2013115440A1 (ko) 멀티 터치 스크린에서의 탭핑을 이용하여 문자를 입력하는 장치 및 방법
WO2012173378A2 (ko) 키보드 레이아웃을 제공하는 유저 인터페이스 제공 장치 및 방법
WO2016035926A1 (en) Digital device for copying digital contents by screen overlap and controlling method thereof
WO2017131251A1 (ko) 디스플레이 디바이스 및 그의 터치 입력 프로세싱 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12867549

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12867549

Country of ref document: EP

Kind code of ref document: A1