WO2018080169A1 - 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법 - Google Patents

터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법 Download PDF

Info

Publication number
WO2018080169A1
WO2018080169A1 PCT/KR2017/011857 KR2017011857W WO2018080169A1 WO 2018080169 A1 WO2018080169 A1 WO 2018080169A1 KR 2017011857 W KR2017011857 W KR 2017011857W WO 2018080169 A1 WO2018080169 A1 WO 2018080169A1
Authority
WO
WIPO (PCT)
Prior art keywords
touch
display
pressure level
information
electronic device
Prior art date
Application number
PCT/KR2017/011857
Other languages
English (en)
French (fr)
Inventor
김소영
김규홍
최승민
강두석
이요한
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US16/346,010 priority Critical patent/US10871883B2/en
Publication of WO2018080169A1 publication Critical patent/WO2018080169A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9538—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G06F3/04144—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position using an array of force sensing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0445—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using two or more layers of sensing electrodes, e.g. using two layers of electrodes separated by a dielectric layer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0446—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using a grid-like structure of electrodes in at least two directions, e.g. using row and column electrodes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Definitions

  • Embodiments disclosed in the present disclosure relate to an electronic device and a method for providing information in response to a pressure input of a touch.
  • the display of the electronic device may further include a touch panel so that the display of the electronic device may be implemented as a touch screen.
  • the display may be implemented as a touch screen, and in addition to serving as a visual display means, the display may also serve as an input means for receiving user input.
  • the user may provide a user input such as a touch to the electronic device in order to control the electronic device.
  • the user should fully anticipate the operation of the electronic device in response to the user input before providing the user input to the electronic device.
  • the user may require certain learning to predict the type of user input and the response of the electronic device corresponding thereto.
  • the pressure of the touch on the touch screen can be used as one parameter of the user input.
  • the user may selectively input an existing touch input and a “pressure input” to control the electronic device as intended.
  • the input source of the user using the touch is not one but a plurality, the amount of learning required by the user is increased.
  • the present invention provides an intuitive user interface (UI) or user experience (UX) that can minimize the learning required by the user in controlling an electronic device in which a user uses a combination of a simple touch input and a touch pressure. Can be provided.
  • UI intuitive user interface
  • UX user experience
  • a method including a pressure sensor capable of detecting a pressure of a touch on the touch screen and providing various functions in response to the pressure level of the touch and an electronic device performing the same may be provided.
  • a pressure sensor capable of detecting a pressure of a touch on the touch screen and providing various functions in response to the pressure level of the touch and an electronic device performing the same.
  • An electronic device includes a housing including a first surface facing in a first direction and a second surface facing in a second direction opposite to the first direction, the first surface and the second surface.
  • a display disposed between surfaces, the display exposed through the first surface, a touch sensor disposed between the first surface and the second surface, the touch sensor detecting at least one position of a touch by an external object on the display;
  • a pressure sensor disposed between a first surface and the second surface, the pressure sensor detecting pressure by the external object against the display, the display, the touch sensor, and at least one processor electrically connected to the pressure sensor; It may include a memory electrically connected to the at least one processor.
  • the memory stores at least one application program including a user interface configured to display a plurality of items on the display, and when executed, the processor launches an application program that displays the user interface on the display.
  • Display an array of the plurality of items on the user interface receive first data generated from the touch sensor, receive second data generated from the pressure sensor, and receive the first data.
  • Select one of the plurality of items based at least on select one of the plurality of pressure levels based at least on the second data, and based at least on one of the selected plurality of pressure levels, the selected Multiple sets of definitions associated with one of a plurality of items Instructions may be stored that cause one of the beams to appear on the display.
  • the electronic device may further include a display, a touch sensor, a pressure sensor, the display, the touch sensor, and at least one processor electrically connected to the pressure sensor, and the at least one processor. It may include a memory connected to.
  • the memory when executed, displays the plurality of items on the display, selects at least one of the plurality of items based on the position of the touch sensed by the touch sensor, and uses the pressure sensor. To detect the pressure level of the touch and to display at least one set of information associated with the selected at least one item on the display in response to the detected pressure level.
  • the method may further include launching an application program for displaying a user interface on a display, displaying an array of the plurality of items on the user interface, and first data generated from a touch sensor.
  • Receiving the second data receiving the second data generated from the pressure sensor, selecting one of the plurality of items based at least on the first data, and at least one of the plurality of pressure levels based on the second data. Selecting one, and displaying one of a plurality of sets of information associated with one of the selected plurality of items on the display based at least on one of the selected plurality of pressure levels.
  • the method may further include outputting a plurality of items to a display, selecting at least one of the plurality of items based on a position of a touch detected by a touch sensor, and using a pressure sensor. Detecting the pressure level of the touch, and displaying, on the display, at least one set of information associated with the selected at least one item in response to the detected pressure level of the touch.
  • the instructions may be used to launch an application program for displaying a user interface on a display. Operation, displaying an arrangement of the plurality of items on the user interface, receiving first data generated from a touch sensor, receiving second data generated from a pressure sensor, based at least on the first data Selecting one of the plurality of items, selecting one of the plurality of pressure levels based at least on the second data, and at least based on one of the selected plurality of pressure levels, the selected plurality of One of a plurality of sets of information associated with one of the items in It may be set to perform an operation of displaying me on the display.
  • a computer recording medium executed by at least one processor, the computer-readable instructions are stored, the instructions, the operation of outputting a plurality of items on the display, the touch sensor Selecting at least one of the plurality of items based on the detected position of the touch, detecting the pressure level of the touch using a pressure sensor, and in response to the detected pressure level of the touch, the selected at least It may be set to perform an operation of displaying on the display at least one set of information associated with one item.
  • various functions may be provided according to the pressure level of the touch, thereby providing a rich user experience to users.
  • various effects may be provided that are directly or indirectly understood through the present invention.
  • FIG 1 illustrates an electronic device according to various embodiments of the present disclosure.
  • FIG. 2 is a block diagram of an electronic device according to various embodiments of the present disclosure.
  • FIG. 3 is a block diagram of a program module according to various embodiments of the present disclosure.
  • FIG 4 illustrates an appearance of an electronic device according to an embodiment of the present disclosure.
  • FIG. 5 illustrates a stacked structure of a display according to an embodiment.
  • FIG. 6 illustrates a pressure sensor according to an embodiment.
  • FIG. 7 is a view illustrating a touch according to various embodiments of the present disclosure.
  • FIG. 8 is a block diagram of an electronic device according to an embodiment of the present disclosure.
  • 9A and 9B illustrate an information providing method according to an exemplary embodiment.
  • FIG. 10 is a flowchart illustrating a search result providing method of an input query according to an exemplary embodiment.
  • FIG. 11 is a diagram for describing a method of providing a search result of an input query, according to an exemplary embodiment.
  • FIG. 12 illustrates a method of providing information based on a touch on text according to an embodiment.
  • FIGS. 13A and 13B are diagrams for describing a method of providing information based on a touch on text according to an exemplary embodiment.
  • FIG. 14 illustrates a method of providing information based on a touch on an image object according to an embodiment.
  • 15A and 15B are diagrams for describing a method of providing information based on a touch on an image object, according to an exemplary embodiment.
  • 16 illustrates a method of providing information based on a touch on an icon according to an embodiment.
  • 17 is a diagram for describing a method of providing information based on a touch on an icon, according to an exemplary embodiment.
  • FIG. 18 illustrates a method of providing information based on a touch on a function object according to an embodiment.
  • 19 is a diagram for describing a method of providing information based on a touch on a functional object, according to an exemplary embodiment.
  • 20A to 20C are diagrams for describing a method of providing information based on a touch on a function object, according to another exemplary embodiment.
  • 21A and 21B illustrate a method of providing touch-based information according to an embodiment.
  • 22 is a view illustrating a layout according to various embodiments of the present disclosure.
  • FIG. 23 is a diagram for describing a method of providing touch-based information according to an exemplary embodiment.
  • 24 is a flowchart illustrating a content sorting method based on force touch, according to an exemplary embodiment.
  • 25 is a diagram for describing a content sorting method based on force touch, according to an exemplary embodiment.
  • FIG. 26 is a diagram for describing a content sorting method based on force touch, according to another exemplary embodiment.
  • FIG. 27 is a diagram for describing a mail list sorting method based on force touch, according to an exemplary embodiment.
  • FIG. 28 is a diagram illustrating a mail list sorting method based on force touch, according to another exemplary embodiment.
  • 29 is a diagram for describing an image object being selected in response to a pressure of a touch according to another embodiment.
  • FIG. 30 is a view for explaining that a selection area is specified in response to a pressure of a touch according to another embodiment.
  • expressions such as “have”, “may have”, “include”, or “may contain” include the presence of a corresponding feature (e.g., numerical, functional, operational, or component such as a component). Does not exclude the presence of additional features.
  • expressions such as “A or B”, “at least one of A or / and B”, or “one or more of A or / and B” may include all possible combinations of items listed together.
  • “A or B”, “at least one of A and B”, or “at least one of A or B” includes (1) at least one A, (2) at least one B, Or (3) both of cases including at least one A and at least one B.
  • first,” “second,” “first,” or “second,” as used herein may modify various components, regardless of order and / or importance, and may modify one component to another. It is used to distinguish a component and does not limit the components.
  • the first user device and the second user device may represent different user devices regardless of the order or importance.
  • the first component may be called a second component, and similarly, the second component may be renamed to the first component.
  • One component (such as a first component) is "(functionally or communicatively) coupled with / to" to another component (such as a second component) or " When referred to as “connected to”, it should be understood that any component may be directly connected to the other component or may be connected through another component (eg, a third component).
  • a component e.g., a first component
  • another component e.g., a second component
  • the expression “configured to” used in this document is, for example, “suitable for”, “having the capacity to” depending on the situation. It may be used interchangeably with “designed to”, “adapted to”, “made to”, or “capable of”.
  • the term “configured to” may not necessarily mean only “specifically designed to” in hardware. Instead, in some situations, the expression “device configured to” may mean that the device “can” along with other devices or components.
  • the phrase “processor configured (or set up) to perform A, B, and C” may execute a dedicated processor (eg, an embedded processor) to perform the operation, or one or more software programs stored in a memory device. By doing so, it may mean a general-purpose processor (for example, a CPU or an application processor) capable of performing the corresponding operations.
  • An electronic device may include, for example, a smartphone, a tablet personal computer, a mobile phone, a video phone, an e-book reader, Desktop PCs, laptop PCs, netbook computers, workstations, servers, personal digital assistants, portable multimedia players, MP3 players, mobile medical devices, It may include at least one of a camera or a wearable device.
  • a wearable device may be an accessory type (for example, a watch, a ring, a bracelet, an anklet, a necklace, glasses, a contact lens, or a head-mounted-device (HMD)), a fabric, or a clothing type (for example, it may include at least one of an electronic garment, a body attachment type (eg, a skin pad or a tattoo), or a living implantable type (eg, an implantable circuit).
  • HMD head-mounted-device
  • the electronic device may be a home appliance.
  • Home appliances are, for example, televisions, digital video disk players, audio, refrigerators, air conditioners, cleaners, ovens, microwave ovens, washing machines, air cleaners, set-top boxes, home automation Home automation control panel, security control panel, TV box (e.g. Samsung HomeSync TM, Apple TV TM, or Google TV TM), game console (e.g. Xbox TM, PlayStation TM), electronics It may include at least one of a dictionary, an electronic key, a camcorder, or an electronic picture frame.
  • the electronic device may include various medical devices (eg, various portable medical measuring devices (such as blood glucose meters, heart rate monitors, blood pressure monitors, or body temperature meters), magnetic resonance angiography (MRA), magnetic resonance imaging (MRI), Computed tomography (CT), cameras, or ultrasounds), navigation devices, satellite navigation systems (GNSS (Global Navigation Satellite System)), event data recorders (EDRs), flight data recorders (FDRs), automotive infotainment ) Devices, ship's electronic equipment (e.g.
  • Point of sales point of sales, or Internet of things (e.g. light bulbs, sensors, electricity or gas meters, sprinkler devices, fire alarms, thermostats, street lights, It may include at least one of (toaster), exercise equipment, hot water tank, heater, boiler.
  • things e.g. light bulbs, sensors, electricity or gas meters, sprinkler devices, fire alarms, thermostats, street lights, It may include at least one of (toaster), exercise equipment, hot water tank, heater, boiler.
  • an electronic device may be a furniture or part of a building / structure, an electronic board, an electronic signature receiving device, a projector, or various measuring devices (eg, Water, electricity, gas, or radio wave measuring instrument).
  • the electronic device may be one or a combination of the aforementioned various devices.
  • An electronic device according to an embodiment may be a flexible electronic device.
  • the electronic device according to an embodiment of the present disclosure is not limited to the above-described devices, and may include a new electronic device according to technology development.
  • the term user may refer to a person who uses an electronic device or a device (eg, an artificial intelligence electronic device) that uses an electronic device.
  • FIG 1 illustrates an electronic device according to various embodiments of the present disclosure.
  • the electronic devices 101, 102, 104, or the server 106 may be connected to each other through the network 162 or the local area communication 164.
  • the electronic device 101 may include a bus 110, a processor 120, a memory 130, an input / output interface 150, a display 160, and a communication interface 170.
  • the electronic device 101 may omit at least one of the components or additionally include other components.
  • the bus 110 may, for example, include circuitry that connects the components 110-170 to each other and communicates communications (eg, control messages and / or data) between the components.
  • communications eg, control messages and / or data
  • the processor 120 may include one or more of a central processing unit (CPU), an application processor (AP), or a communication processor (CP).
  • the processor 120 may execute, for example, an operation or data processing related to control and / or communication of at least one other component of the electronic device 101.
  • the memory 130 may include volatile and / or nonvolatile memory.
  • the memory 130 may store, for example, commands or data related to at least one other element of the electronic device 101.
  • the memory 130 may store software and / or a program 140.
  • the program 140 may be, for example, a kernel 141, middleware 143, an application programming interface (API) 145, an application program (or “application”) 147, or the like. It may include. At least a portion of kernel 141, middleware 143, or API 145 may be referred to as an operating system (OS).
  • OS operating system
  • the kernel 141 may be a system resource (eg, used to execute an action or function implemented in, for example, other programs (eg, middleware 143, API 145, or application program 147).
  • the bus 110, the processor 120, or the memory 130 may be controlled or managed.
  • the kernel 141 may provide an interface for controlling or managing system resources by accessing individual components of the electronic device 101 from the middleware 143, the API 145, or the application program 147. Can be.
  • the middleware 143 may serve as an intermediary for allowing the API 145 or the application program 147 to communicate with the kernel 141 to exchange data.
  • the middleware 143 may process one or more work requests received from the application program 147 according to priority.
  • the middleware 143 may use system resources (eg, the bus 110, the processor 120, or the memory 130, etc.) of the electronic device 101 for at least one of the application programs 147. Priority can be given.
  • the middleware 143 may perform the scheduling or load balancing of the one or more work requests by processing the one or more work requests according to the priority given to the at least one.
  • the API 145 is, for example, an interface for the application 147 to control a function provided by the kernel 141 or the middleware 143, for example, file control, window control, image processing, or text. It may include at least one interface or function (eg, a command) for control.
  • the input / output interface 150 may serve as, for example, an interface capable of transferring a command or data input from a user or another external device to other component (s) of the electronic device 101.
  • the input / output interface 150 may output commands or data received from other component (s) of the electronic device 101 to a user or another external device.
  • Display 160 may be, for example, a liquid crystal display (LCD), a light-emitting diode (LED) display, an organic LED (OLED) display, or a microelectromechanical Microelectromechanical systems (MEMS) displays, or electronic paper displays.
  • the display 160 may display various contents (eg, text, images, videos, icons, symbols, etc.) to the user.
  • the display 160 may include a touch screen and, for example, may receive a touch, gesture, proximity, or hovering input using an electronic pen or a part of a user's body.
  • the communication interface 170 may establish communication between, for example, the electronic device 101 and an external device (eg, the first external electronic device 102, the second external electronic device 104, or the server 106). Can be.
  • the communication interface 170 may be connected to the network 162 through wireless or wired communication to communicate with the external device (eg, the second external electronic device 104 or the server 106).
  • Wireless communication is, for example, a cellular communication protocol, for example, long-term evolution (LTE), LTE-advanced (LTE-A), code division multiple access (CDMA), Wi-band CDMA (WCDMA), and universal mobile (UMTS).
  • LTE long-term evolution
  • LTE-A LTE-advanced
  • CDMA code division multiple access
  • WCDMA Wi-band CDMA
  • UMTS universal mobile
  • cellular communication using at least one of telecommunications system (WTro), wireless broadband (WiBro), or global system for mobile communications (GSM).
  • the wireless communication may include, for example, wireless fidelity (Wi-Fi), Bluetooth, Bluetooth low power (BLE), Zigbee, near field communication (NFC), and magnetic secure transmission (MST). Transmission), radio frequency (RF), or body area network (BAN), or GNSS.
  • Wi-Fi wireless fidelity
  • BLE Bluetooth low power
  • NFC near field communication
  • MST magnetic secure transmission
  • Transmission radio frequency
  • the MST generates a pulse according to the transmission data using an electromagnetic signal, and the pulse may generate a magnetic field signal.
  • the electronic device 101 transmits the magnetic field signal to a point of sales, and the POS detects the magnetic field signal using an MST reader and converts the detected magnetic field signal into an electrical signal. Can be restored.
  • GNSS may be, for example, global positioning system (GPS), global navigation satellite system (Glonass), beidou navigation satellite system (“Beidou”), or Galileo (the European global satellite-based navigation system), depending on the region of use or bandwidth. It may include at least one of.
  • GPS global positioning system
  • Glonass global navigation satellite system
  • Beidou beidou navigation satellite system
  • Galileo the European global satellite-based navigation system
  • the wired communication may include, for example, at least one of a universal serial bus (USB), a high definition multimedia interface (HDMI), a reduced standard-232 (RS-232), a plain old telephone service (POTS), and the like.
  • the network 162 may include a telecommunications network, for example, at least one of a computer network (for example, a LAN or WAN), the Internet, and a telephone network.
  • Each of the first and second external electronic devices 102 and 104 may be a device that is the same as or different from the electronic device 101.
  • the server 106 may include a group of one or more servers.
  • all or part of operations executed in the electronic device 101 may be executed in another or a plurality of electronic devices (for example, the electronic devices 102 and 104 or the server 106).
  • the electronic device 101 when the electronic device 101 needs to perform a function or service automatically or by request, the electronic device 101 may instead or additionally execute the function or service by itself. At least some associated functions may be requested to another device (eg, the electronic device 102 or 104 or the server 106).
  • the other electronic device may execute the requested function or the additional function and transmit the result to the electronic device 101.
  • the electronic device 101 may process the received result as it is or additionally to provide the requested function or service.
  • cloud computing, distributed computing, or client-server computing technology may be used.
  • FIG. 2 is a block diagram of an electronic device according to various embodiments of the present disclosure.
  • the electronic device 201 may include, for example, all or part of the electronic device 101 illustrated in FIG. 1.
  • the electronic device 201 may include one or more processors (eg, an AP) 210, a communication module 220, a subscriber identification module 224, a memory 230, a sensor module 240, an input device 250, and a display ( 260, an interface 270, an audio module 280, a camera module 291, a power management module 295, a battery 296, an indicator 297, and a motor 298.
  • the processor 210 may control, for example, a plurality of hardware or software components connected to the processor 210 by running an operating system or an application program, and may perform various data processing and operations.
  • the processor 210 may be implemented with, for example, a system on chip (SoC).
  • SoC system on chip
  • the processor 210 may further include a graphic processing unit (GPU) and / or an image signal processor.
  • the processor 210 may include at least some of the components illustrated in FIG. 2 (eg, the cellular module 221).
  • the processor 210 may load and process instructions or data received from at least one of other components (eg, nonvolatile memory) into volatile memory, and store various data in the nonvolatile memory. have.
  • the communication module 220 may have a configuration that is the same as or similar to that of the communication interface 170 of FIG. 1.
  • the communication module 220 may be, for example, a cellular module 221, a Wi-Fi module 222, a Bluetooth module 223, a GNSS module 224 (eg, a GPS module, a Glonass module, a Beidou module, or a Galileo). Module), NFC module 225, MST module 226 and RF (radio frequency) module 227.
  • the cellular module 221 may provide, for example, a voice call, a video call, a text service, or an internet service through a communication network. According to an embodiment of the present disclosure, the cellular module 221 may perform identification and authentication of the electronic device 201 in a communication network by using a subscriber identification module (eg, a SIM card) 229. According to an embodiment of the present disclosure, the cellular module 221 may perform at least some of the functions that the processor 210 may provide. According to an embodiment of the present disclosure, the cellular module 221 may include a communication processor (CP).
  • CP communication processor
  • IC integrated chip
  • the RF module 227 may transmit / receive, for example, a communication signal (eg, an RF signal).
  • the RF module 227 may include, for example, a transceiver, a power amp module (PAM), a frequency filter, a low noise amplifier (LNA), an antenna, or the like.
  • PAM power amp module
  • LNA low noise amplifier
  • at least one of the cellular module 221, the Wi-Fi module 222, the Bluetooth module 223, the GNSS module 224, the NFC module 225, and the MST module 226 is a separate RF.
  • the module can transmit and receive RF signals.
  • Subscriber identification module 229 may include, for example, a card containing a subscriber identification module and / or an embedded SIM, and may include unique identification information (eg, an integrated circuit card identifier (ICCID)) or It may include subscriber information (eg, international mobile subscriber identity).
  • ICCID integrated circuit card identifier
  • the memory 230 may include, for example, an internal memory 232 or an external memory 234.
  • the internal memory 232 may be, for example, volatile memory (eg, dynamic RAM (DRAM), static RAM (SRAM), or synchronous dynamic RAM (SDRAM), etc.), non-volatile memory (eg, One time programmable ROM (OTPROM), programmable ROM (PROM), erasable and programmable ROM (EPROM), electrically erasable and programmable ROM (EPEROM), mask ROM, flash ROM, flash memory (e.g., NAND flash) (NAND flash or NOR flash, etc.), a hard drive, or a solid state drive (SSD).
  • volatile memory eg, dynamic RAM (DRAM), static RAM (SRAM), or synchronous dynamic RAM (SDRAM), etc.
  • non-volatile memory eg, One time programmable ROM (OTPROM), programmable ROM (PROM), erasable and programmable ROM (EPROM), electrically
  • the external memory 234 may be a flash drive, for example, compact flash (CF), secure digital (SD), Micro-SD, Mini-SD, extreme digital (XD), MultiMediaCard (MMC), or memory. It may further include a stick (memory stick).
  • the external memory 234 may be functionally and / or physically connected to the electronic device 201 through various interfaces.
  • the security module 236 is a module including a storage space having a relatively higher security level than the memory 230 and may be a circuit that ensures safe data storage and a protected execution environment.
  • the security module 236 may be implemented as a separate circuit and may include a separate processor.
  • the security module 236 may include, for example, an embedded secure element (eSE) that is present in a removable smart chip, a secure digital (SD) card, or embedded in a fixed chip of the electronic device 201. It may include.
  • eSE embedded secure element
  • SD secure digital
  • the security module 236 may be driven by an operating system different from the operating system (OS) of the electronic device 201.
  • OS operating system
  • the security module 236 may operate based on a java card open platform (JCOP) operating system.
  • JCOP java card open platform
  • the sensor module 240 may measure, for example, a physical quantity or detect an operation state of the electronic device 201 and convert the measured or detected information into an electrical signal.
  • the sensor module 240 includes, for example, a gesture sensor 240A, a gyro sensor 240B, an air pressure sensor 240C, a magnetic sensor 240D, an acceleration sensor 240E, a grip sensor 240F, and a proximity sensor ( 240G), color sensor 240H (e.g., RGB sensor), biometric sensor 240I, temperature / humidity sensor 240J, illuminance sensor 240K, or UV (ultra violet) sensor 240M can do.
  • a gesture sensor 240A e.g., a gyro sensor 240B
  • an air pressure sensor 240C e.g., a magnetic sensor 240D
  • an acceleration sensor 240E e.g., a grip sensor 240F
  • a proximity sensor 240G
  • color sensor 240H e.g.
  • the sensor module 240 may include, for example, an olfactory sensor, an electromyography sensor, an electroencephalogram sensor, an electrocardiogram sensor, an infrared sensor, an iris. Sensors and / or fingerprint sensors.
  • the sensor module 240 may further include a control circuit for controlling at least one or more sensors belonging therein.
  • the electronic device 201 further includes a processor configured to control the sensor module 240 as part of or separately from the processor 210, while the processor 210 is in a sleep state. The sensor module 240 may be controlled.
  • the input device 250 may be, for example, a touch panel 252, a (digital) pen sensor 254, a key 256, or an ultrasonic input device ( 258).
  • the touch panel 252 may use at least one of capacitive, resistive, infrared, or ultrasonic methods, for example.
  • the touch panel 252 may further include a control circuit.
  • the touch panel 252 may further include a tactile layer to provide a tactile response to the user.
  • the (digital) pen sensor 254 may be, for example, part of a touch panel or may include a separate sheet for recognition.
  • the key 256 may include, for example, a physical button, an optical key, or a keypad.
  • the ultrasonic input device 258 may detect ultrasonic waves generated by an input tool through a microphone (for example, the microphone 288) and check data corresponding to the detected ultrasonic waves.
  • Display 260 may include panel 262, hologram device 264, or projector 266.
  • the panel 262 may include a configuration that is the same as or similar to that of the display 160 of FIG. 1.
  • the panel 262 may be implemented to be, for example, flexible, transparent, or wearable.
  • the panel 262 may be configured as a single module with the touch panel 252.
  • the hologram 264 may show a stereoscopic image in the air by using interference of light.
  • the projector 266 may display an image by projecting light onto a screen.
  • the screen may be located inside or outside the electronic device 201.
  • panel 262 may include a pressure sensor (or force sensor) capable of measuring the strength of the pressure on the user's touch.
  • the pressure sensor may be integrated with the touch panel 252, or may be implemented with one or more sensors separate from the touch panel 252.
  • the display 260 may further include a control circuit for controlling the panel 262, the hologram device 264, or the projector 266.
  • the interface 270 may include, for example, an HDMI 272, a USB 274, an optical interface 276, or a D-subminiature 278.
  • the interface 270 may be included in, for example, the communication interface 170 illustrated in FIG. 1. Additionally or alternatively, interface 270 may include, for example, a mobile high-definition link (MHL) interface, an SD card / MMC interface, or an infrared data association (IrDA) compliant interface.
  • MHL mobile high-definition link
  • IrDA infrared data association
  • the audio module 280 may bilaterally convert, for example, a sound and an electrical signal. At least some components of the audio module 280 may be included in, for example, the input / output interface 150 illustrated in FIG. 1.
  • the audio module 280 may process sound information input or output through, for example, a speaker 282, a receiver 284, an earphone 286, a microphone 288, or the like.
  • the camera module 291 is, for example, a device capable of capturing still images and moving images.
  • the camera module 291 may include one or more image sensors (eg, a front sensor or a rear sensor), a lens, an image signal processor (ISP) Or flash (eg, LEDs or xenon lamps).
  • image sensors eg, a front sensor or a rear sensor
  • ISP image signal processor
  • flash eg, LEDs or xenon lamps.
  • the power management module 295 may manage power of the electronic device 201, for example.
  • the power management module 295 may include a power management integrated circuit (PMIC), a charger integrated circuit (ICC), or a battery or fuel gauge.
  • the PMIC may have a wired and / or wireless charging scheme.
  • the wireless charging method may include, for example, a magnetic resonance method, a magnetic induction method, an electromagnetic wave method, or the like, and may further include additional circuits for wireless charging, such as a coil loop, a resonance circuit, a rectifier, and the like. have.
  • the battery gauge may measure, for example, the remaining amount of the battery 296, the voltage, the current, or the temperature during charging.
  • the battery 296 may include, for example, a rechargeable battery and / or a solar battery.
  • the indicator 297 may display a specific state of the electronic device 201 or a part thereof (for example, the processor 210), for example, a booting state, a message state, or a charging state.
  • the motor 298 may convert an electrical signal into mechanical vibrations, and may generate a vibration or haptic effect.
  • the electronic device 201 may include a processing device (eg, a GPU) for supporting mobile TV.
  • the processing device for supporting mobile TV may process media data according to a standard such as Digital Multimedia Broadcasting (DMB), Digital Video Broadcasting (DVB), or MediaFLO TM .
  • DMB Digital Multimedia Broadcasting
  • DVD Digital Video Broadcasting
  • MediaFLO TM MediaFLO
  • each of the components described in this document may be composed of one or more components, and the name of the corresponding component may vary according to the type of electronic device.
  • the electronic device may be configured to include at least one of the components described in this document, and some components may be omitted or further include other additional components.
  • some of the components of the electronic device according to various embodiments of the present disclosure may be combined to form one entity, and thus may perform the same functions of the corresponding components before being combined.
  • FIG. 3 is a block diagram of a program module according to various embodiments of the present disclosure.
  • the program module 310 (eg, the program 140) is operated on an operating system (OS) and / or operating system that controls resources related to the electronic device (eg, the electronic device 101).
  • OS operating system
  • applications eg, application program 147) may be included.
  • the operating system may be, for example, android, ios, windows, symbian, tizen, bada, or the like.
  • the program module 310 may include a kernel 320, middleware 330, an API 360, and / or an application 370. At least a part of the program module 310 may be preloaded on the electronic device or may be downloaded from an external electronic device (eg, the electronic devices 102 and 104, the server 106, etc.).
  • the kernel 320 may include, for example, a system resource manager 321 or a device driver 323.
  • the system resource manager 321 may perform control, allocation, or retrieval of system resources.
  • the system resource manager 321 may include a process manager, a memory manager, or a file system manager.
  • the device driver 323 may include, for example, a display driver, a camera driver, a Bluetooth driver, a shared memory driver, a USB driver, a keypad driver, a Wi-Fi driver, an audio driver, or an inter-process communication (IPC) driver. Can be.
  • IPC inter-process communication
  • the middleware 330 may provide various functions through the API 360, for example, to provide functions commonly required by the application 370, or to allow the application 370 to efficiently use limited system resources inside the electronic device. Functions may be provided to the application 370.
  • the middleware 330 eg, the middleware 143 may include a runtime library 335, an application manager 341, a window manager 342, and a multimedia manager. 343, resource manager 344, power manager 345, database manager 346, package manager 347, connectivity manager 348, notification manager 349, location manager 350, graphic manager 351, security manager 352, or payment manager manager) 354.
  • the runtime library 335 may include, for example, a library module that the compiler uses to add new functionality through the programming language while the application 370 is running.
  • the runtime library 335 may perform input / output management, memory management, or a function for an arithmetic function.
  • the application manager 341 may manage, for example, a life cycle of at least one of the applications 370.
  • the window manager 342 may manage GUI resources used on the screen.
  • the multimedia manager 343 may grasp formats required for playing various media files and perform encoding or decoding of media files using a codec suitable for the format.
  • the resource manager 344 may manage resources such as source code, memory, or storage space of at least one of the applications 370.
  • the power manager 345 may operate in conjunction with a basic input / output system (BIOS) to manage a battery or power, and provide power information necessary for the operation of the electronic device.
  • BIOS basic input / output system
  • the database manager 346 may create, search for, or change a database for use in at least one of the applications 370.
  • the package manager 347 may manage installation or update of an application distributed in the form of a package file. .
  • the connection manager 348 may manage, for example, a wireless connection such as Wi-Fi or Bluetooth. Notification manager 349 may display or notify events such as arrival messages, appointments, proximity notifications, and the like in a manner that does not disturb the user.
  • the location manager 350 may manage location information of the electronic device.
  • the graphic manager 351 may manage graphic effects to be provided to the user or a user interface related thereto.
  • the security manager 352 may provide various security functions required for system security or user authentication. According to an embodiment of the present disclosure, when the electronic device (for example, the electronic device 101) includes a telephone function, the middleware 330 further includes a telephone manager for managing a voice or video call function of the electronic device. can do.
  • the middleware 330 may include a middleware module that forms a combination of various functions of the above-described components.
  • the middleware 330 may provide a module specialized for each type of OS in order to provide a differentiated function.
  • the middleware 330 may dynamically delete some of the existing components or add new components.
  • API 360 (eg, API 145) is, for example, a set of API programming functions, which may be provided in different configurations depending on the operating system. For example, in the case of Android or iOS, one API set may be provided for each platform, and in Tizen, two or more API sets may be provided for each platform.
  • the application 370 may be, for example, a home 371, a dialer 372, an SMS / MMS 373, an instant message (374), a browser 375, Camera 376, Alarm 377, Contact 378, Voice Dial 379, Email 380, Calendar 381, Media Player 382, Album 383, or Clock 384, Billing ( 385) one or more applications capable of performing functions such as health care (e.g., measuring exercise or blood sugar), or providing environmental information (e.g., providing barometric pressure, humidity, or temperature information). It may include.
  • health care e.g., measuring exercise or blood sugar
  • environmental information e.g., providing barometric pressure, humidity, or temperature information. It may include.
  • the application 370 may be an application that supports information exchange between an electronic device (eg, the electronic device 101) and an external electronic device (eg, the electronic devices 102 and 104).
  • the "information exchange application” may be included.
  • the information exchange application may include, for example, a notification relay application for delivering specific information to an external electronic device, or a device management application for managing the external electronic device.
  • the notification delivery application may include notification information generated by another application of the electronic device (eg, an SMS / MMS application, an email application, a health care application, or an environmental information application). , 104)). Also, the notification delivery application may receive notification information from an external electronic device and provide the notification information to a user, for example.
  • another application of the electronic device eg, an SMS / MMS application, an email application, a health care application, or an environmental information application. , 104)
  • the notification delivery application may receive notification information from an external electronic device and provide the notification information to a user, for example.
  • the device management application may, for example, turn on the at least one function of an external electronic device (eg, the electronic devices 102 and 104) in communication with the electronic device (eg, the external electronic device itself (or some component). / Turn-off or adjust the brightness (or resolution) of the display, manage applications (e.g., install, delete, or Can be updated).
  • an external electronic device eg, the electronic devices 102 and 104
  • the electronic device eg, the external electronic device itself (or some component).
  • manage applications e.g., install, delete, or Can be updated.
  • the application 370 may include an application (eg, a health care application of a mobile medical device) designated according to an attribute of an external electronic device (eg, the electronic devices 102 and 104).
  • the application 370 may include an application received from an external electronic device (for example, the server 106 or the electronic devices 102 and 104).
  • the application 370 may include a preloaded application or a third party application downloadable from a server.
  • the names of the components of the program module 310 according to the shown embodiment may vary depending on the type of operating system.
  • At least a part of the program module 310 may be implemented in software, firmware, hardware, or a combination of two or more thereof. At least a part of the program module 310 may be implemented (for example, executed) by, for example, a processor (for example, the processor 210). At least a part of the program module 310 may include, for example, a module, a program, a routine, sets of instructions, or a process for performing one or more functions.
  • FIG 4 illustrates an appearance of an electronic device according to an embodiment of the present disclosure.
  • an electronic device 401 may include a display 410 and a housing 420.
  • Various circuits or modules such as a processor and a memory, may be disposed inside the electronic device 401 (that is, inside the housing 420).
  • the display 410 may be disposed on a front surface of the electronic device 401.
  • the display 410 has a rear surface facing the upper direction (the first direction) 41 and the lower direction (the second direction) 42. Disposed between the second surface and exposed to the outside through the front surface.
  • the display 410 may output a plurality of items (eg, text, images, videos, icons, widgets, symbols, etc.), or touch input (touch, hovering, “force touch”) from a user.
  • the display 410 may include, for example, a cover glass, a display panel, a touch panel, and / or a pressure sensor.
  • the cover glass, the display panel, the touch panel, and / or the pressure sensor may be stacked with areas corresponding to each other (eg, substantially the same area) (see FIG. 5).
  • the display 410 may be disposed on a front surface of the electronic device 401, and may further extend to at least one side from the front surface.
  • the display 410 may extend in the left direction 43 and / or the right direction 44.
  • the display 410 extends in the left direction 43 and / or the right direction 44, so that the display 410 may be exposed to the outside through the left and right sides as well as the front side.
  • the housing 420 may form at least a portion of an appearance of the electronic device 401.
  • the housing 420 may include a front face (first face) facing the first direction 41 and a back face (second face) facing the second direction 42 opposite to the first direction 41.
  • Sides of the housing 420 surrounding the first and second surfaces are left side facing the left-side direction 43, right side facing the right-side direction 44, and upper side. It may include an upper side facing the upper-side direction 45 and a lower side facing the bottom-side direction 46.
  • the housing 420 may be formed of a plastic injection molding, a conductive material (eg, a metal), or a combination thereof to protect various components inside the electronic device 400 from external impact or dust.
  • the housing 420 may be an outer surface of a plurality of components.
  • the front surface of the housing 420 may be a cover glass disposed on the display 410, and the rear surface of the housing 420 may be a back cover of the electronic device 401.
  • FIG. 5 illustrates a stacked structure of a display according to an embodiment.
  • FIG. 5 a stacked structure of a display according to an embodiment is shown.
  • the stack structure may be applied to the display 410 illustrated in FIG. 4.
  • the components illustrated in FIG. 5 may be disposed between the front surface (first surface) and the rear surface (second surface) of the electronic device 401 of FIG. 4.
  • the cover glass 510 may transmit light generated by the display panel 530.
  • a user may touch a part of the body (eg, a finger) to perform a “touch” (including a touch using an electronic pen).
  • the cover glass 510 may be formed of, for example, tempered glass, tempered plastic, a flexible polymer material, and the like, to protect the display and the electronic device on which the display is mounted from external impact.
  • the cover glass 510 may also be referred to as a glass window or a cover window.
  • a specified physical quantity (eg, voltage, quantity of light, resistance, amount of charge, capacitance, etc.) may be changed by contact of an external object (eg, a user's finger or electronic pen).
  • the touch sensor 520 may detect a position of an external object in contact with the display (eg, on the surface of the cover glass 510) based on the change of the specified physical quantity.
  • the touch sensor 520 may include a capacitive touch sensor, a pressure sensitive touch sensor, an infrared touch sensor, a resistive touch sensor, or a piezo touch sensor. According to various embodiments of the present disclosure, the touch sensor 520 may be referred to by various names such as a touch panel according to an implementation form.
  • the display panel 530 may output at least one content or item (eg, text, an image, a video, an icon, a widget, or a symbol).
  • the display panel 530 may be, for example, a liquid crystal display (LCD) panel, a light emitting diode (LED) display panel, an organic light emitting diode (OLED) display panel, or a microelectromechanical system (MEMS) display panel, or an electronic paper. It may include a display panel.
  • LCD liquid crystal display
  • LED light emitting diode
  • OLED organic light emitting diode
  • MEMS microelectromechanical system
  • the display panel 530 may be integrally implemented with the touch sensor (or touch panel) 520.
  • the display panel 530 may be referred to as a touch screen panel (TSP) or a touch screen display panel.
  • the pressure sensor 540 may detect pressure (or force) caused by an external object (eg, a user's finger or an electronic pen) in contact with the display (eg, the surface of the cover glass 510).
  • the pressure sensor 540 may include a first electrode 541, a second electrode 542, and / or a dielectric layer 543.
  • the pressure sensor 540 may detect the pressure of the touch based on the capacitance between the first electrode 541 and the second electrode 542 which is changed by the pressure of the touch.
  • the configuration of the pressure sensor 540 will be described in more detail with reference to FIG. 6.
  • the haptic actuator 550 is a haptic feedback to the user when a touch (including hovering, "force touch") by an external object (eg, a user's finger, an electronic pen) is received. feedback (eg vibration).
  • the haptic actuator 560 may include a piezoelectric member and / or a diaphragm.
  • the touch sensor 520 may be directly formed on the rear surface of the cover glass 510 (so-called cover glass integrated touch panel).
  • the touch sensor 520 may be separately manufactured and inserted between the cover glass 510 and the display panel 530 (so-called add-on touch panel) or may be directly formed on the display panel 530. (So-called on-cell touch panels).
  • the touch sensor 520 may be included inside the display panel 530 (so-called in-cell touch panel).
  • the stacked structure may further include an area fingerprint sensor implemented as opaque or transparent.
  • FIG. 6 illustrates a pressure sensor according to an embodiment.
  • the pressure sensor 640 may include a first electrode 641, a second electrode 642, and a dielectric layer 643.
  • the pressure sensor 640 may correspond to the pressure sensor 540 illustrated in FIG. 5.
  • the configuration of the pressure sensor 640 shown in FIG. 6 is exemplary, and embodiments of the present invention are not limited to the configuration of the pressure sensor 640 shown in FIG. 6.
  • the first electrode 641 and / or the second electrode 642 may be implemented to be transparent or opaque.
  • a conductive member eg, conductive
  • the patch and the conductive wire may be formed of copper (Cu), silver (Ag), magnesium (Mg), titanium (Ti), and opaque graphene.
  • the first electrode 641 and / or the second electrode 642 may be indium tin oxide (ITO) or IZO. (Indium zinc oxide), silver nanowires (Ag nanowire), a metal mesh (metal mesh), a transparent polymer conductor, may be implemented as a transparent graphene.
  • one of the first electrode 641 and / or the second electrode 642 may be implemented as one metal plate serving as a ground (GND).
  • the other of the first electrode 641 and / or the second electrode 642 may be formed in a repeated polygonal pattern using the aforementioned material (so-called self-capacitance method).
  • the first electrode 641 is implemented as a rectangular conductive patch arranged in an array pattern, but embodiments of the present invention are not limited to the structure shown in FIG. 6.
  • one of the first electrode 641 and the second electrode 642 may be formed in a pattern extending in the first direction, and the other (eg, the receiving end ( Rx)) may be formed in a pattern extending in a second direction intersecting the first direction at a predetermined angle (for example, a right angle) (so-called mutual-capacitance method).
  • the first electrode 641 and / or the second electrode 642 may be formed of a conductive wire bent in a strain gage pattern.
  • the first electrode 641 may be directly formed on the rear surface of the display panel (eg, 530 of FIG. 5).
  • the first electrode 641 may be printed on a flexible printed circuit board (FPCB), and the FPCB may be attached to one surface of the display panel.
  • FPCB flexible printed circuit board
  • the dielectric layer 643 may be a dielectric material having a specified capacitance, for example, a silicone foam, a silicone membrane, an optical clean adhesive (OCA), a sponge, a rubber, a polymer (eg, a polycabonate), a PET ( polyethylene terephthalate), and the like.
  • a dielectric material having a specified capacitance for example, a silicone foam, a silicone membrane, an optical clean adhesive (OCA), a sponge, a rubber, a polymer (eg, a polycabonate), a PET ( polyethylene terephthalate), and the like.
  • FIG. 7 is a view illustrating a touch according to various embodiments of the present disclosure.
  • a “touch” may be specified based on a pressure and / or time of a touch.
  • “touch” refers to “tap”, “double tap”, touch-down for a specified time or more (hereinafter referred to as “long touch”), force touch, or the like. It may include.
  • the force touch may include “weak force touch”, “weak force long touch”, “strong force touch”, and “strong force long touch”. Each embodiment disclosed in this document may be described using the terms.
  • the touch sensor (eg, 540 of FIG. 5, 640 of FIG. 6) may have a discrete pressure P1 (first level or Touch with a pressure lower than the pressure can be detected (or sensed).
  • the electronic device may recognize (or specify) a touch corresponding to the curve 70-A as a simple “tap”.
  • the pressure level selected by the curve 70-A may be understood as a zero pressure level (or a default pressure level).
  • the touch sensor (eg, 540 of FIG. 5, 640 of FIG. 6) detects a touch twice with a pressure less than the pressure P1. can do.
  • the electronic device may recognize the touch corresponding to the curve 70-B as a "double tap".
  • the touch sensor eg, 540 in FIG. 5, 640 in FIG. 6
  • the electronic device may recognize the touch corresponding to the curve 70-C as a "long touch”.
  • the touch sensor eg, 540 of FIG. 5, 640 of FIG. 6
  • the discrete pressure P2 Can be referred to as a second level or a second pressure level, where a touch with a pressure less than P2> P1 can be detected.
  • the electronic device may recognize the touch corresponding to the curve 70 -D as a "weak force touch".
  • the pressure level selected by the curve 70 -D may be understood as the first pressure level P1.
  • a touch sensor for a time longer than the specified time t1 is a pressure greater than pressure P1 and less than pressure P2. It is possible to detect a touch with. In this case, the electronic device may recognize the touch corresponding to the curve 70-E as a "weak force long touch".
  • the touch sensor eg, 540 of FIG. 5, 640 of FIG. 6
  • the electronic device may recognize the touch corresponding to the curve 70-F as a "strong force touch”.
  • the pressure level selected by the curve 70-F may be understood as the second pressure level P2.
  • the touch sensor eg, 540 in FIG. 5, 640 in FIG. 6
  • the electronic device may recognize the touch corresponding to the curve 70-G as a "strong force long touch".
  • the various types of “touch” described above are not limited to the examples described in curves 70-A through 70-G.
  • the various types of “touch” may include a so-called “triple touch” that includes three or more touches.
  • a touch with a pressure exceeding the pressure P3 may be recognized as a very strong force touch.
  • Various embodiments disclosed herein may be performed based at least on these various types of “touches”.
  • FIG. 8 is a block diagram of an electronic device according to an embodiment of the present disclosure.
  • an electronic device 801 may include a display panel 810, a display driving circuit (DDI) 815, a touch sensor 820, a touch sensor IC 825, It may include a pressure sensor 830, a pressure sensor IC 835, a haptic actuator 840, a memory 850, and a processor 860.
  • a display panel 810 may include a display driving circuit (DDI) 815, a touch sensor 820, a touch sensor IC 825, It may include a pressure sensor 830, a pressure sensor IC 835, a haptic actuator 840, a memory 850, and a processor 860.
  • overlapping descriptions of the same elements as those described with reference to FIGS. 1 to 5 may be omitted.
  • the display panel 810 may receive an image driving signal supplied from the display driving circuit (DDI) 815.
  • the display panel 810 may display various contents and / or items (for example, text, an image (object), a video, an icon, a functional object, a symbol, or the like) based on the image driving signal.
  • the display panel 810 may be overlapped with the touch sensor 820, and / or the pressure sensor 830 (eg, see FIG. 5), or may simply be referred to as a "display.” .
  • the display driving circuit (DDI) 815 may supply an image driving signal corresponding to the image information received from the processor 860 (host) to the display panel 810 at a predetermined frame rate.
  • the display driving circuit 815 may include a graphic RAM, an interface module, an image processing unit, a multiplexer, a display timing controller (T-con), Source drivers, gate drivers, and / or oscillators, and the like.
  • the touch sensor 820 may detect a physical quantity (eg, voltage, light amount, resistance, charge amount, capacitance, etc.) that changes as the user touches the cover glass (eg, 510 of FIG. 5). According to an embodiment of the present disclosure, the touch sensor 820 may be disposed to overlap the display panel 810.
  • a physical quantity eg, voltage, light amount, resistance, charge amount, capacitance, etc.
  • the touch sensor IC 825 may detect the change in the physical quantity and calculate a position (X, Y) where the touch is made based on the change in the physical quantity (eg, voltage, resistance, capacitance, etc.).
  • the calculated position (coordinate) may be provided (or reported) to the processor 860.
  • the transmitter Tx included in the touch sensor 820 may be used.
  • the coupling voltage between the receiver Rx may change.
  • the change in the coupling voltage may be sensed by the touch sensor IC 825, and the touch sensor IC 825 transfers the coordinates (X, Y) of the touched position to the processor 860. I can deliver it.
  • the processor 860 may obtain data regarding the coordinates (X, Y) as an event regarding a user input.
  • the touch sensor IC 825 may be referred to as a touch IC, a touch screen IC, a touch controller, or a touch screen controller IC.
  • the processor 860 may serve as the touch sensor IC 825.
  • the touch sensor IC 825 and the processor 860 may be implemented in one configuration (eg, one-chip).
  • the pressure sensor 830 may detect pressure (or force) caused by an external object (eg, a finger or an electronic pen). According to an embodiment of the present disclosure, the pressure sensor 830 may transmit, by the touch, the transmitting end Tx (eg, the first electrode 641 of FIG. 6) and the receiving end Rx (the second electrode 642 of FIG. 6). The pressure may be sensed based on a change in physical quantity (eg, capacitance) between the electrodes.
  • the pressure sensor IC 835 may detect a change in a physical quantity (eg, capacitance) in the pressure sensor 830 and calculate a pressure Z applied by a user's touch based on the change in the physical quantity. .
  • the pressure Z may be provided to the processor 860 together with the positions X and Y where the touch is made.
  • the pressure sensor IC 835 may be referred to as a force touch controller, force sensor IC, pressure panel IC, or the like. According to various embodiments of the present disclosure, the pressure sensor IC 835 may be implemented in one configuration (eg, one-chip) with the touch sensor IC 825.
  • the haptic actuator 840 may provide tactile feedback (eg, vibration) to the user according to a control command of the processor 860.
  • the haptic actuator 840 may provide tactile feedback to the user when a touch input (eg, touch, hovering, force touch, etc.) is received from the user.
  • a touch input eg, touch, hovering, force touch, etc.
  • the memory 850 may store commands or data associated with operations of components included in the electronic device 801. According to various embodiments of the present disclosure, the memory 850 may store at least one application program including a user interface configured to display a plurality of items on a display. For example, the memory 850 may store instructions that, when executed, allow the processor 860 to perform the various operations described herein (eg, FIGS. 9A, 9B, etc.).
  • the processor 860 may be electrically connected to, for example, the components 810-850 included in the electronic device 801.
  • the processor 860 may execute arithmetic or data processing related to control and / or communication of the components 810-850 included in the electronic device 801.
  • the processor 860 may launch (or execute) an application program (or simply referred to as an “application”) displaying a user interface on the display 810.
  • the processor 860 may display an array of the plurality of items on a user interface displayed on the display 810 in response to the launch of the application.
  • the processor 860 may receive first data (data including position coordinates X and Y of the touch) generated from the touch sensor 820. In addition, the processor 860 may receive second data (data including the pressure Z of the touch) generated from the pressure sensor 830. The processor 860 selects one of the plurality of items based at least on the first data and selects one of the plurality of discrete pressure levels (eg, P1, P2 of FIG. 7) based at least on the second data. You can choose. The processor 860 may display one of the plurality of sets of information associated with the selected item based on at least one pressure level of the selected plurality of pressure levels.
  • the processor 860 may display, on the display, a first set of information among the plurality of sets of information when the first level is selected.
  • the processor 860 may display a second set of information on the display among the plurality of sets of information.
  • the second set of information may include more information than the first set of information.
  • the processor 860 may output a plurality of items to the display 810.
  • the plurality of items may include an icon, an image object, text (or text object), or a function object for executing a specified operation.
  • the processor 860 may select at least one of the plurality of items based on the position of the touch detected by the touch sensor 820, and detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may display on the display at least one set of information associated with the at least one selected item in response to the detected pressure level of the touch.
  • Operation of the processor 860 described above is an example, and is not limited to the foregoing description.
  • the operation of the processor described below in other parts of this document can also be understood as the operation of the processor 860.
  • at least some of the operations described as the operations of the "electronic device” may also be understood as operations of the processor 860.
  • An electronic device may include a housing including a first surface facing in a first direction and a second surface facing in a second direction opposite to the first direction, between the first surface and the second surface.
  • a display disposed through the first surface, the touch sensor disposed between the first surface and the second surface, the touch sensor detecting at least one position of a touch by an external object on the display, the first surface
  • a pressure sensor disposed between the second surface and the second surface, the pressure sensor detecting pressure by the external object on the display, the display, the touch sensor, and at least one processor electrically connected to the pressure sensor, and the at least one It may include a memory electrically connected to the processor.
  • the memory stores at least one application program including a user interface configured to display a plurality of items on the display, and when executed, the processor launches an application program that displays the user interface on the display.
  • Display an array of the plurality of items on the user interface receive first data generated from the touch sensor, receive second data generated from the pressure sensor, and receive the first data.
  • Select one of the plurality of items based at least on select one of the plurality of pressure levels based at least on the second data, and based at least on one of the selected plurality of pressure levels, the selected Multiple sets of definitions associated with one of a plurality of items Instructions may be stored that cause one of the beams to appear on the display.
  • the plurality of pressure levels may include a discrete first level and a discrete second level higher than the first level.
  • the instructions may cause the processor to display on the display a first set of information of the plurality of sets when the first level is selected, and a second set of information of the plurality of sets of information when the second level is selected. May include an instruction to display on the display.
  • the second set of information may include more information than the first set of information.
  • An electronic device includes a display, a touch sensor, a pressure sensor, at least one processor electrically connected to the display, the touch sensor, and the pressure sensor, and a memory electrically connected to the at least one processor. can do.
  • the memory when executed, displays the plurality of items on the display, selects at least one of the plurality of items based on the position of the touch sensed by the touch sensor, and uses the pressure sensor. To detect the pressure level of the touch and to display at least one set of information associated with the selected at least one item on the display in response to the detected pressure level.
  • the plurality of items may include an input query and a functional object configured to request a search result for the input query.
  • the memory may include the first search result of the input query when the processor selects the functional object based on the position of the touch detected by the touch sensor, and the pressure level of the detected touch is equal to or less than a first pressure level. Display a first set of information on the display, and when the detected pressure level of the touch exceeds the first pressure level, display a second set of information on the display including a second search result of the input query; And when the detected pressure level of the touch exceeds a second pressure level that is higher than the first pressure level, instructions to cause the display to display a third set of information including a third search result of the input query. have.
  • the first search result may include a category list including at least one category.
  • the second search result may include at least one item belonging to a category having the highest association with the input query.
  • the third search result may include detailed information of at least one item belonging to a category having the highest association with the input query, and the item having the highest association with the input query.
  • the first search result may include a search result in which the input query is included with a first level of accuracy.
  • the second search result may include a search result in which the input query is included with a second level of accuracy.
  • the third search result may include a search result in which the input query is included with a third level of accuracy.
  • the accuracy of the second level may be set higher than the accuracy of the first level and lower than the accuracy of the third level.
  • the plurality of items may include text.
  • the memory selects the text based on the position of the touch sensed by the touch sensor, and the first set of information comprising the text if the pressure level of the detected touch exceeds a first pressure level. May be displayed on the display, and instructions for displaying on the display a second set of information including the text if the detected pressure level of the touch exceeds a second pressure level higher than the first pressure level. have.
  • the text may be included in an execution screen of the email application.
  • the first set of information may include a mail list in which the text is included in a mail title.
  • the second set of information may include a mail list in which the text is included in the mail subject or mail body.
  • the text may be included in an execution screen by a designated application.
  • the first set of information may include a search result in which the text is included at a first level of accuracy.
  • the second set of information may include a search result that includes the text at a second level of accuracy. The accuracy of the second level may be higher than the accuracy of the first level.
  • the text may be included in an execution screen by a designated application.
  • the first set of information may include a search result in the electronic device of the text
  • the second set of information may include a web search result of the text.
  • the plurality of items may include an image object.
  • the memory selects the image object based on the position of the touch sensed by the touch sensor, and if the pressure level of the detected touch exceeds a first pressure level, the selected image object and the first level. And display a first set of information comprising a similar image object on the display, and if the pressure level of the detected touch exceeds a second pressure level higher than the first pressure level, the selected image object and the second level. Instructions may be stored to cause the display to display a second set of information including a similar image object. In this case, the similarity of the second level may be set higher than that of the first level.
  • the plurality of items may include an icon of a specified application.
  • the memory selects the icon based on the position of the touch sensed by the touch sensor, and if the detected pressure level is less than or equal to the first pressure level, the processor displays the execution screen of the designated application in the first set. Display on the display as information, and when the detected pressure level of the detected touch exceeds the first pressure level, display a second set of information associated with the designated application on the display; Instructions that cause a third set of information associated with the designated application to be displayed on the display when the second pressure level is higher than the first pressure level. In this case, the information amount of the third set of information may be greater than the information amount of the second set of information.
  • the second set of information or the third set of information may include notification information of the designated application.
  • the plurality of items may include a designated function object.
  • the memory selects the designated function object based on the position of the touch detected by the touch sensor, and displays a screen linked to the designated function object when the pressure of the detected touch is equal to or less than a first pressure level. Display on the display as a first set of information, and display on the display a second set of information associated with the designated functional object when the pressure of the detected touch exceeds a first pressure level, and the pressure of the detected touch Instructions may be stored that cause a third set of information associated with the designated functional object to be displayed on the display if the second pressure level is higher than the first pressure level.
  • the plurality of items may include a function object included in an execution screen of a specified application.
  • the memory selects the function object based on the position of the touch detected by the touch sensor, and if the detected pressure of the touch exceeds the first pressure level, the execution screen including the function object is displayed. Displaying a first set of information configured in a first layout on the display, and if the detected pressure of the touch exceeds a second pressure level higher than the first pressure level, executing the execution screen including the object in a second layout Instructions for displaying the second set of information on the display may be stored.
  • 9A illustrates a method of providing information according to an embodiment.
  • a method of providing information may include operations 901 to 911.
  • the operations 901 to 911 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 901 to 911 may be implemented by instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • operations 901 to 911 will be described using reference numerals of FIG. 8.
  • the processor 860 of the electronic device 801 may launch (or execute) an application program for displaying a user interface on the display 810.
  • the processor 860 may render the user interface on the display 810 according to an activity included in the application program.
  • the processor 860 may display an array of a plurality of items (eg, an icon, an image (object), a text (object), a function object) on a user interface.
  • a plurality of items eg, an icon, an image (object), a text (object), a function object
  • the plurality of items may be simultaneously with the user interface.
  • the processor 860 may receive first data generated from the touch sensor 820.
  • the first data may include location information of a touch by an external object (eg, a user's finger or an electronic pen).
  • the processor 860 may receive second data generated from the pressure sensor 830.
  • the second data may include information about a pressure (or force) of the touch by an external object.
  • operations 903 and 905 are described as separate operations, but the processor 860 may simultaneously touch the first data and the second data in response to a touch by the external object. 820 and the pressure sensor 830.
  • the processor 860 may select one of a plurality of items based on the first data. That is, the processor 860 may select one of a plurality of items displayed on the display 810 based at least on location information (eg, coordinates) touched by the external object.
  • location information eg, coordinates
  • the processor 860 may select one of the plurality of pressure levels based on the second data.
  • the processor 860 may select one of the various types of touch shown in FIG. 7 based on the pressure of the touch by the external object.
  • the processor 860 may display, on the display 810, one of a plurality of sets of information associated with one of the selected items based on at least one of the pressure levels selected in operation 909. For example, the processor 860 may display different sets of information on the display 810 depending on the strength of the pressure of the touch.
  • 9B is a flowchart of a method of providing information according to another exemplary embodiment.
  • a method of providing information may include operations 902 to 908.
  • the operations 902 to 908 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 902 to 908 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • operations 902 to 908 will be described using the reference numerals of FIG. 8 as in FIG. 9A.
  • the processor 860 of the electronic device 801 may output a plurality of items (eg, an icon, an image (object), a text (object), and a function object) to the display 810.
  • a plurality of items eg, an icon, an image (object), a text (object), and a function object
  • the plurality of items may be included in execution screens of various types of applications (eg, home applications, email applications, browser applications, search applications, etc.).
  • the processor 860 may select at least one of the plurality of items based on the position of the touch detected by the touch sensor 820.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830. According to various embodiments of the present disclosure, operations 904 and 906 are described as separate operations, but the processor 860 may simultaneously select at least one item and detect the pressure level.
  • the processor 860 may display at least one set of information associated with the at least one item selected in operation 904 on the display 810 in response to the pressure level of the touch detected in operation 906.
  • FIGS. 9A and 9B have described operations of an electronic device according to an embodiment of the present disclosure.
  • an operation of an electronic device according to various embodiments of the present disclosure will be described with reference to FIGS. 10 to 28.
  • FIGS. 10 to 28 descriptions overlapping with FIGS. 9A and 9B may be omitted.
  • FIG. 10 is a flowchart illustrating a search result providing method of an input query according to an exemplary embodiment.
  • a method for providing a search result of an input query (or a search query) may include operations 1001 to 1013.
  • the operations 1001 to 1013 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 1001 to 1013 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • operations 1001 to 1013 will be described using reference numerals of FIG. 8.
  • the processor 860 of the electronic device 801 may display a plurality of items on the display 810.
  • the plurality of items may include an input query and a function object configured to request a search result or a search result for the input query.
  • the input query may include text, an image, a voice, etc. input by a user.
  • the function object set to request the search result may include a key (or a button) for confirming the search query.
  • the function object set to request the search result may be included in, for example, an execution screen of a search application in a device, an execution screen of a web search application, or an execution screen of a browser application displaying a web page of a search provider. It may also include a search key (or a search button).
  • the processor 860 may select a function object configured to request the search result based on the location of the touch detected by the touch sensor 820.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • operations 1003 and 1005 are described as separate operations, but the processor 860 may perform operations 1003 and 1005 at the same time in response to the touch.
  • the processor 860 may determine the pressure level detected in operation 1005. For example, the processor 860 may proceed to operation 1009 when the detected pressure of the touch is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may determine that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than or equal to (or less than) a second pressure level (eg, P2 of FIG. 7). ), Operation 1011 may be performed. The processor 860 may proceed to operation 1013 when the detected pressure of the touch is greater than (or higher than) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • Operation 1011 may be performed.
  • Operation 1013 may be performed.
  • the processor 860 may proceed to operation 1013 when the detected pressure of the touch is greater than (or higher than) the second pressure level (eg, P2 of FIG. 7).
  • the processor 860 displays on the display 810 a first set of information that includes a first search result of the input query because the detected touch pressure is below (or below) a first pressure level. can do.
  • the processor 860 may display on the display 810 a first set of information that includes a first search result of the input query when the detected touch is a “tap”.
  • the first search result may include, for example, a search result in which the input query is included with a first level of accuracy.
  • the first search result of the input query may include a category list including at least one category (or domain).
  • the processor 860 includes a second search result of the input query because the detected touch pressure is greater than (or equal to or greater than) the first pressure level and less than (or less than) a second pressure level.
  • the second set of information may be displayed on the display 810.
  • the processor 860 may display on the display 810 a second set of information that includes a second search result of the input query if the detected touch is a “weak force touch”.
  • the second search result may include, for example, a search result in which the input query is included with a second level of accuracy.
  • the accuracy of the second level may be higher than the accuracy of the first level.
  • the second search result may include at least one item belonging to a category having the highest association with the input query.
  • the category having the highest association with the input query may be included in, for example, a category list included in the first search result.
  • the processor 860 may display, on the display 810, a third set of information including a third search result of the input query because the detected touch pressure is greater than a second pressure level.
  • the processor 860 may display on the display 810 a third set of information that includes a third search result of the input query if the detected touch is a “strong force touch”.
  • the third search result may include, for example, a search result in which the input query is included with a third level of accuracy.
  • the accuracy of the third level may be higher than the accuracy of the second level.
  • the third search result may include detailed information of at least one item belonging to a category having the highest association with the input query, and the item having the highest association with the input query.
  • the item having the highest association with the input query may be, for example, one of items included in a category having the highest association with the input query included in the second search result.
  • the operations 1009, 1011, or 1013 may be switched in real time according to the pressure variation of the touch determined in operation 1007.
  • the processor 860 may perform operation 1009 when the pressure of the touch from the user is lower than the first pressure level.
  • the processor 860 may perform operation 1011 when the pressure of the touch is gradually increased (in a state where no touch release is made) and becomes greater than the first pressure level.
  • the processor 860 may perform operation 1013 when the pressure of the touch is further increased to be greater than the second pressure.
  • the operations 1009, 1011, or 1013 may be switched in real time in response to the decrease in the pressure of the touch.
  • FIG. 11 is a diagram for describing a method of providing a search result of an input query, according to an exemplary embodiment.
  • the electronic device may execute a search application (or a browser application that outputs a search engine web page).
  • the screen 1100 may be displayed on the display of the electronic device.
  • the user may input an input query (eg, "hotel") using the soft keyboard 1151 displayed on the screen 1100.
  • the user may then touch 11 a function object 1152 (eg, a search key) set to request a search result for the input query.
  • the electronic device may select the functional object 1152 based on the position of the touch 11 detected by the touch sensor, and detect the pressure level of the touch 11 using a pressure sensor.
  • the electronic device may display a first search result screen in which the input query (eg, "hotel") is searched with the accuracy of the first level.
  • 1101 may be displayed on the display.
  • the first search result may include a category list including a plurality of categories (eg, “TOP HITS”, “GOOGLE MAPS”, “TURBOSCAN”).
  • TOP HITS GOOGLE MAPS
  • TURBOSCAN a category list including a plurality of categories.
  • one item 1111 may be included in the "TOP HITS” category
  • three items 1112-1114 may be included in the "GOOGLE MAPS” category
  • one item 1115 may be included in the "TURBOSCAN” category.
  • the input query may have a second level of accuracy.
  • the second search result screen 1102 found as may be displayed on the display.
  • the accuracy of the second level may be higher than the accuracy of the first level.
  • the items 1112-1114 belonging to a category eg, "GOOGLE MAPS" having the highest correlation with the input query may be displayed on the top of the second search result.
  • the item 1111 belonging to the “TOP HITS” category and the item 1115 belonging to the “TURBOSCAN” category are illustrated in the second search result screen 1102 of FIG. 11, according to various embodiments of the present disclosure. It may be excluded from the search result screen 1102.
  • the electronic device displays a third search result screen 1103 in which the input query is searched with a third level of accuracy. Can be marked on.
  • the third search result screen 1103 may be output on the display. In this case, the accuracy of the third level may be higher than the accuracy of the second level.
  • the third search result is one of items 1112-1114 belonging to a category (eg, "GOOGLE MAPS") that is most relevant to the input query (eg, "hotel"), and the input query (eg, " hotel ”) and the detailed information 1123 of the item 1113 that is most relevant.
  • a category eg, "GOOGLE MAPS”
  • FIG. 12 illustrates a method of providing information based on a touch on text according to an embodiment.
  • a method of providing information based on a touch on text may include operations 1201 to 1213.
  • the operations 1201 to 1213 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 1201 to 1213 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • reference numerals of FIG. 8 are used to describe operations 1201 to 1213.
  • the processor 860 of the electronic device 801 may display a plurality of items on the display 810.
  • the plurality of items may include text.
  • the text may include at least one alphabet, word, phrase, or clause included in an execution screen of an application (eg, an email application, an e-book application, a browser application, etc.). , Sentences, or paragraphs.
  • the text may include hypertext to which a specified screen (or content) is linked.
  • the processor 860 may select or specify the text based on the location of the touch detected by the touch sensor 820. In this case, the processor 860 may emphasize the text.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may determine the pressure level detected in operation 1205. For example, the processor 860 may proceed to operation 1209 when the detected pressure of the touch is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1211 may be performed. The processor 860 may proceed to operation 1213 when the detected touch pressure is greater than (or equal to) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • the processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1211 may be performed.
  • the processor 860 may hold the selected text because the detected touch pressure is below (or below) a first pressure level. For example, the hold may provide a starting point for touch scrolling that may be performed following a touch below the first pressure level.
  • the processor 860 may display a screen linked to the hypertext on the display 810 in response to a touch below the first pressure level.
  • the processor 860 may generate a first set of information including the text because the detected touch pressure is greater than (or equal to or greater than) the first pressure level and less than (or less than) a second pressure level. May be displayed on the display 810. For example, the processor 860 may display the first set of information on the display 810 when the detected touch is a “weak force touch”.
  • the first set of information may include a list of mails in which the text is included in a mail title. have.
  • the first set of information when the selected text is included in an execution screen of a browser application or an e-book application, includes the text having a first level of accuracy (comparatively low). May include search results.
  • the first set of information when the selected text is included in an execution screen of a browser application or an e-book application, may include a first search range of the text (eg, the memory 850 of the electronic device 801). ) May include search results within the.
  • the processor 860 may display a second set of information including the text on the display 810 since the detected touch pressure is greater than a second pressure level. For example, the processor 860 may display on the display 810 a second set of information that includes the text if the detected touch is a “strong force touch”.
  • the second set of information when the selected text is included in an execution screen of an email application, may include the mails having the text included in a mail subject and / or a mail body. May contain a list.
  • the second set of information when the selected text is included in an execution screen of a browser application or an e-book application, may include a search result in which the text is included in a (relatively high) second level of accuracy. Can be. In this case, the accuracy of the second level may be set higher than the accuracy of the first level.
  • the second set of information when the selected text is included in an execution screen of a browser application or an e-book application, may be a search result (web search) within a second search range (eg, the Internet) of the text. Result).
  • FIGS. 13A and 13B are diagrams for describing a method of providing information based on a touch on text according to an exemplary embodiment.
  • the electronic device may execute an email application.
  • the screen 1300a including the mail list may be displayed on the display of the electronic device.
  • the user may touch 13a a specific text 1310a (eg, courses) among a plurality of items displayed on the screen 1300a.
  • the specific text 1310a may be highlighted.
  • the electronic device may select the specific text 1310a (eg courses) based on the position of the touch 13a detected by the touch sensor, and detect the pressure level of the touch 13a using a pressure sensor. have.
  • specific text 1310a eg courses
  • the electronic device may output details of an e-mail corresponding to the position where the touch 13a is made on a new screen ( Not shown).
  • Mails including the specific text 1310a (eg courses) in the mail subject may be displayed as a list.
  • the electronic device may display the specific text 1310a (eg, courses) in the mail subject and / or the mail body.
  • Mails containing the can be displayed as a list (see screen 1303a).
  • the electronic device may execute an email application.
  • the screen 1300b including the mail list may be displayed on the display of the electronic device.
  • the user may touch 13b a specific text 1310b (eg courses) among a plurality of items displayed on the screen 1300b.
  • the specific text 1310b may be highlighted.
  • the electronic device may select the specific text 1310b (eg courses) based on the position of the touch 13b detected by the touch sensor, and detect the pressure level of the touch 13b using a pressure sensor. have.
  • the electronic device may output details of an e-mail corresponding to the position where the touch 13b is made on a new screen ( Not shown).
  • Mails including the specific text 1310b (eg courses) in the mail subject may be displayed as a list.
  • the electronic device may include the specific text 1310b (eg, courses) in the mail subject and / or the mail body. Mails containing the can be displayed as a list (see screen 1303b).
  • FIG. 14 illustrates a method of providing information based on a touch on an image object according to an embodiment.
  • a method of providing information based on a touch on an image may include operations 1401 to 1413.
  • the operations 1401 to 1413 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 1401 to 1413 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • reference numerals of FIG. 8 are used to describe operations 1401 to 1413.
  • the processor 860 of the electronic device 801 may display a plurality of items on the display 810.
  • the plurality of items may include an image object.
  • the at least one image object may be an image (or any image of a video) displayed on the display 810 by execution of a designated application (eg, an image viewer application, a multimedia playback application, a browser application, or an e-book application). Frame).
  • the processor 860 may select or specify the image object based on the position of the touch detected by the touch sensor 820. In this case, the outline of the image object may be highlighted.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may determine the pressure level detected in operation 1405. For example, the processor 860 may proceed to operation 1409 when the detected pressure of the touch is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1411 may be performed. The processor 860 may proceed to operation 1413 when the detected pressure of the touch is greater than (or higher than) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • the processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1411 may be performed.
  • the processor 860 may perform a predetermined function since the detected touch pressure is below (or below) a first pressure level.
  • the processor 860 may display a page linked to the selected image object or hold the selected image object.
  • the hold may provide a starting point for touch scrolling that may be performed following a touch below the first pressure level.
  • the processor 860 performs playback / pause of the video being played in response to a touch below the first pressure level. You may.
  • the processor 860 includes the first set that includes the selected image object because the pressure of the detected touch is greater than (or equal to or greater than) the first pressure level and less than (or less than) a second pressure level. Information may be displayed on the display 810. For example, the processor 860 may display the first set of information on the display 810 when the detected touch is a “weak force touch”.
  • the first set of information may include an image object that is similar to the selected image object at a first level.
  • the first set of information may include search results (search images) in which the selected image object is included in a (comparatively low) first level of similarity.
  • search results (search images) included in the first set of information may be obtained from a memory included in the electronic device, a server communicating with the electronic device, or the Internet.
  • the processor 860 may display a second set of information on the display 810 including the selected image object since the detected touch pressure is greater than a second pressure level. For example, the processor 860 may display the second set of information on the display 810 when the detected touch is a “strong force touch”.
  • the second set of information may include an image object that is similar to the selected image object at a second level.
  • the similarity of the second level may be set higher than that of the first level.
  • the second set of information may include search results (search images) in which the selected image object is included at a (comparatively high) second level of similarity.
  • search results (search images) included in the second set of information may be obtained from a memory included in the electronic device, a server communicating with the electronic device, or the Internet.
  • 15A is a diagram for describing a method of providing information based on a touch on an image object, according to an exemplary embodiment.
  • the electronic device may execute an image viewer application (or a multimedia playback application).
  • an image viewer application or a multimedia playback application
  • any one image 1500 may be displayed on the display of the electronic device.
  • the image 1500 may correspond to one image frame of an image viewed by an image viewer application or video content being played by a multimedia playback application.
  • the user may simultaneously touch 15-1 and 15-2 of the plurality of image objects 1510 and 1520 (eg, an image object set in the face region of the person) included in the screen 1500. .
  • the plurality of image objects 1510 and 1520 eg, an image object set in the face region of the person
  • the electronic device selects the image objects 1510 and 1520 based on the positions of the touches 15-1 and 15-2 detected by the touch sensor and uses the pressure sensor to select the touch 15-1, The pressure level of 15-2) can be detected.
  • the electronic device may indicate that the pressure levels of the touches 15-1 and 15-2 are less than or equal to a first pressure level. (Or less), a page linked to the image object 1510 and / or the image object 1520 may be displayed. Alternatively, the electronic device may hold the image objects 1510 and 1520 when the pressure levels of the touches 15-1 and 15-2 are less than (or less than) the first pressure level. For example, when the image objects 1510 and 1520 are included in one image frame of the video content being played, the electronic device plays / pauses the video being played in response to a touch below the first pressure level. You may.
  • the electronic device may display a screen. As shown at 1502, five search images 1530 in which the selected image objects 1510 and 1520 are included with a (relatively low) first level of similarity are displayed at the bottom of the screen 1502. It can be displayed in the form.
  • the electronic device may select the selected image objects as shown on screen 1503.
  • the three search images 1540 included in the second comparative level 1510 and 1520 may be displayed in the form of thumbnails at the bottom of the screen 1503.
  • the five search images 1530 and / or the three search images 1540 may be obtained from a memory included in an electronic device.
  • the five search images 1530 and / or the three search images 1540 may be obtained from a server or the Internet communicating with the electronic device.
  • the five search images 1530 and / or the three search images 1540 May be obtained from other image frames of the video content being played.
  • 15B is a diagram for describing a method of providing information based on a touch on an image object (eg, a thumbnail) according to an exemplary embodiment.
  • an image object eg, a thumbnail
  • the electronic device may execute a multimedia playback application.
  • the screen 1504 may be displayed on the display of the electronic device.
  • the screen 1504 may include any image frame of the video content being played by the multimedia playback application.
  • the user may touch the bottom of the image frame included in the screen 1504 (eg, tap, force touch, etc.).
  • the electronic device may display the screen 1505 in response to the touch 15-3 detected by the touch sensor.
  • a playback control bar 1525 of the multimedia playback application and a thumbnail 1515 corresponding to any image frame of the video content being played may be displayed at the bottom of the screen 1505.
  • the user may touch 15-4 the thumbnail 1515.
  • the electronic device may select the thumbnail 1515 based on the position of the touch 15-4 detected by the touch sensor, and detect the pressure level of the touch 15-4 using the pressure sensor.
  • the electronic device may display the screen 1506 when the pressure of the touch 15-4 is greater than (or above) the first pressure level and below (or below) the second pressure level.
  • Four thumbnails 1516 summarizing the video content being played back to the first level may be displayed on the screen 1506.
  • the electronic device may display the screen 1507 when the pressure of the touch 15-4 is greater than (or greater than) the second pressure level.
  • Six thumbnails 1517 summarizing the video content being played at a second level may be displayed on the screen 1507.
  • FIG. 15B determines the number of thumbnails (or video content summary levels) according to the pressure of the touch on the thumbnail 1515, according to various embodiments, the pressure of the touch 15-3 on the lower area of the screen 1504 is determined.
  • the thumbnails may be displayed, and the number of thumbnails displayed and / or a summary level of video content may be determined.
  • 16 illustrates a method of providing information based on a touch on an icon according to an embodiment.
  • a method for providing information based on a touch on an icon may include operations 1601 through 1613.
  • operations 1601 to 1613 may be performed by the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 1601 to 1613 may be implemented by instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • reference numerals of FIG. 8 will be used to describe operations 1601 to 1613.
  • the processor 860 of the electronic device 801 may display a plurality of items on the display 810.
  • the plurality of items may include an icon of at least one application.
  • the at least one icon may be displayed on a home screen by executing a home application.
  • the processor 860 may select or specify an icon of the at least one application based on the location of the touch detected by the touch sensor 820.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may determine the pressure level detected in operation 1605. For example, the processor 860 may proceed to operation 1609 when the detected touch pressure is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1611 may proceed. The processor 860 may proceed to operation 1613 when the detected pressure of the touch is greater than (or equal to) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • the processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 1611 may proceed.
  • the processor 860 displays the execution screen of the application indicated by the selected icon as the first set of information on the display 810 because the detected touch pressure is below (or below) the first pressure level. Can be.
  • the execution screen may be displayed on the display 810 according to an activity included in the application.
  • the processor 860 may determine that the pressure of the detected touch is greater than (or equal to or greater than) the first pressure level and less than or equal to (or less than) a second pressure level. Two sets of information may be displayed on the display 810. For example, the processor 860 may display the second set of information on the display 810 when the detected touch is a “weak force touch”.
  • the second set of information may include notification information of an application.
  • the processor 860 may display the second set of information on the newly created layer.
  • the processor 860 may display on the display 810 a third set of information associated with the designated application indicated by the selected icon because the pressure of the touch is greater than a second pressure level. For example, the processor 860 may display the third set of information on the display 810 when the detected touch is a “strong force touch”.
  • the third set of information may include notification information of an application.
  • the information amount of the third set of information may be greater than the information amount of the second set of information.
  • the processor 860 may display the third set of information on the newly created layer similarly to the second set of information.
  • 17 is a diagram for describing a method of providing information based on a touch on an icon, according to an exemplary embodiment.
  • the electronic device may output a home screen 1700, and an icon of at least one application may be displayed on the home screen 1700.
  • the at least one icon may include an icon 1710 of the email application.
  • the icon 1710 may have a badge 1711 indicating the number of unread mails.
  • the user may touch 17 an icon 1710 included in the home screen 1700.
  • the electronic device may select the icon 1710 based on the position of the touch 17 detected by the touch sensor, and detect the pressure level of the touch 17 by using a pressure sensor.
  • the electronic device outputs an execution screen 1701 of the email application indicated by the selected icon 1710 as the first set of information. can do.
  • the pressure level of the touch touch 17 is greater than (or greater than) the first pressure level and less than (or less than) the second pressure level, as shown on screen 1702
  • the second set of information 1722 associated with the email application indicated by the icon 1710 may be displayed on the screen 1702 in a new layer.
  • the second set of information 1722 may include the number of unread mails for each category.
  • the electronic device may display an email application indicated by the icon 1710 as shown on screen 1703.
  • the associated third set of information 1733 may be displayed on the screen 1703 as a new layer.
  • the third set of information 1733 may include the number of unread mails and a summary of the unread mails for each category. That is, the information amount of the third set of information 1731 may be greater than the information amount of the second set of information 1722.
  • FIG. 18 illustrates a method of providing information based on a touch on a function object according to an embodiment.
  • a method for providing information based on a touch on a function object may include operations 1801 to 1813.
  • the operations 1801 to 1813 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 1801 to 1813 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • reference numerals of FIG. 8 will be used to describe operations 1801 to 1813.
  • the processor 860 of the electronic device 801 may display a plurality of items on the display 810.
  • the plurality of items may include at least one functional object.
  • at least one function may be assigned to each of the function objects, and the function object may be implemented in the form of various buttons, soft-keys, and the like arranged on an execution screen of various applications. have.
  • the processor 860 may select or specify the at least one functional object based on the position of the touch detected by the touch sensor 820.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may determine the pressure level detected in operation 1805. For example, the processor 860 may proceed to operation 1809 when the detected pressure of the touch is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may determine that the pressure of the touch detected in operation 1805 is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than or equal to less than the second pressure level (eg, P2 of FIG. 7). (Or less), operation 1811 may proceed. The processor 860 may proceed to operation 1813 when the pressure of the touch detected in operation 1805 is greater than (or above) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • the processor 860 may determine that the pressure of the touch detected in operation 1805 is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than or equal to less than the second pressure level (eg, P2 of FIG.
  • the processor 860 may display, on the display 810, a screen linked to the selected function object as a first set of information because the detected touch pressure is below (or below) a first pressure level. have.
  • the processor 860 may determine that the pressure of the detected touch is greater than (or equal to or greater than) the first pressure level and equal to or less than (or less than) a second pressure level. Information may be displayed on the display 810. For example, the processor 860 may display the second set of information on the display 810 when the detected touch is a “weak force touch”.
  • the second set of information may include information extracted from content included in a screen linked to the selected function object.
  • the second set of information may include information that summarizes the content included in the linked screen to a relatively high level based on a specified algorithm.
  • the processor 860 may display the second set of information on the newly created layer.
  • the processor 860 may display on the display 810 a third set of information associated with the selected functional object because the detected touch pressure is greater than a second pressure level. For example, the processor 860 may display the third set of information on the display 810 when the detected touch is a “strong force touch”.
  • the third set of information may include information extracted from content included in a screen linked to the selected function object.
  • the third set of information may be extracted in a manner different from that of the extraction method (algorithm) of the second set of information, based on the information included in the screen linked to the function object. That is, the third set of information may include information that summarizes the content included in the linked screen to a relatively low level based on another designated algorithm.
  • the information amount of the third set of information may be greater than the information amount of the second set of information.
  • the processor 860 may display the third set of information on the newly created layer similarly to the second set of information.
  • 19 is a diagram for describing a method of providing information based on a touch on a functional object, according to an exemplary embodiment.
  • an electronic device for performing a method of providing information based on a touch on a functional object may visit a web page of a web mail operator by executing a browser application.
  • the screen 1900 including the plurality of items may be displayed on the display of the electronic device.
  • the user may touch 19 a functional object 1910 for reading an invoice among a plurality of items included in the screen 1900.
  • the electronic device may select the function object 1910 based on the position of the touch 19 detected by the touch sensor, and detect the pressure level of the touch 19 by using a pressure sensor.
  • the electronic device may output the screen 1901 linked to the function object 1910 as the first set of information.
  • the screen 1901 may receive the received bill mails in chronological order.
  • the second set of information 1922 associated with the function object 1910 may be displayed on the screen 1902 as a new layer.
  • the second set of information 1922 may include information that summarizes content included in the screen 1901 based on a specified algorithm.
  • the second set of information 1922 may include the number of bills received monthly for the last nine months.
  • the electronic device may include a third set associated with the functional object 1910, as shown on screen 1903.
  • the information 1933 may be displayed on the screen 1903 as a new layer.
  • the third set of information 1933 may include information that summarizes content included in the screen 1901 based on another algorithm.
  • the second set of information 1922 and the third set of information 1933 may be extracted in different ways based on information included in the screen 1901 linked to the function object 1910.
  • the third set of information 1933 may include a summary of the number of bills received and the amount of the bill received in the current month.
  • the third set of information 1933 may include at least one function object (eg, hyperlink text).
  • 20A is a diagram for describing a method of providing information based on a touch on a function object, according to another exemplary embodiment.
  • the electronic device may execute a social network service application (for example, facebook TM ).
  • facebook TM a social network service application
  • the screen 2000 including the plurality of items may be displayed on the display of the electronic device.
  • the user may touch 20 the function object 2010 for viewing the updated news feed included in the screen 2000.
  • the electronic device may select the function object 2010 based on the position of the touch 20 detected by the touch sensor, and detect the pressure level of the touch 20 using a pressure sensor.
  • the electronic device may display a screen linked to the function object 1910 (eg, the latest news feed is posted). (posted) screen) can be output as a first set of information (not shown).
  • the second set of information 2022 associated with the function object 2010 may be displayed on the screen 2002 as a new layer.
  • the second set of information 2022 may include a summary of postings updated in the last hour by category.
  • the electronic device may include a third set associated with the functional object 2010, as shown on screen 2003.
  • Information 2033 can be displayed on the screen 2003 as a new layer.
  • the third set of information 2033 may include a summary of postings updated in the last 24 hours by category.
  • 20B is a diagram for describing a method of providing information based on a touch on a function object, according to another exemplary embodiment.
  • an electronic device performing a method of providing information based on a touch on a function object is shown.
  • the electronic device may execute an IM application.
  • a screen 2004 including contents of conversations between a plurality of users may be displayed on the display of the electronic device.
  • the user may touch 21 (eg, force touch) the function object 2014 representing the title of the chat window included in the screen 2004.
  • the electronic device may select the function object 2014 based on the position of the touch 21 (for example, force touch) detected by the touch sensor. In response to the touch 21, the electronic device may output, for example, a screen 2005.
  • the touch 21 for example, force touch
  • the electronic device may display the summary information 2015 of the chat window in association with the function object 2014 representing the title of the chat window.
  • the summary information 2015 may include, for example, an unread message, a conversation status and a number of calls that call a user of the electronic device, a content mentioning a specific place or time, and a word most frequently mentioned by conversation time.
  • the summary information 2015 may be output even when a force touch is made on an object representing any one of chat list.
  • the user may touch 22 any text (eg, “Han Ji Min”) of various contents included in the summary information 2015 of the screen 2005.
  • the electronic device may select the text (eg, “Han Ji-min”) based on the position of the touch 22 detected by the touch sensor, and detect the pressure of the touch 22 by using a pressure sensor.
  • the electronic device may display text (eg, " Can search for within the first range and output it to the display.
  • the search within the first range may include the first range 2016 shown on the screen 2006.
  • the electronic device displays the text (eg, “Han Ji-min”) on which the touch 22 is made in the first range.
  • the search within the first range may include the second range 2026 shown on the screen 2006. That is, the higher the pressure of the touch 22, the wider the search range output to the display.
  • 20C is a diagram for describing a method of providing information based on a touch on a function object, according to another exemplary embodiment.
  • the electronic device may execute a health care application (for example, S-Health TM ).
  • a screen 2007 including a statistical graph regarding steps of the user may be displayed on the display of the electronic device.
  • the user may touch 22 (eg, force touch) the partial region 2017 included in the screen 2007.
  • the area 2017 may display a histogram indicating the number of steps according to the time of the day.
  • the electronic device may detect a selection for the region 2017 based on the position of the touch 22 (for example, a force touch) detected by the touch sensor, and sense the pressure level of the touch 22. According to an embodiment of the present disclosure, the electronic device may output the screen 2008 or the screen 2009 according to the detected pressure level of the touch 22.
  • the electronic device may output the screen 2008.
  • a histogram indicating the number of steps in the last week may be displayed. That is, the temporal range that can represent the number of steps can be expanded.
  • the electronic device may output the screen 2009. In some areas of the screen 2009, a histogram showing the number of steps in the last three months may be displayed. That is, the temporal range that can represent the number of steps can be further expanded.
  • 21A illustrates a method of providing touch-based information according to an embodiment.
  • a method for providing touch-based information may include operations 2102 to 2108.
  • the operations 2102 to 2108 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 2102 to 2108 may be implemented as instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • operations 2102 to 2108 will be described using reference numerals of FIG. 8.
  • the processor 860 of the electronic device 801 may display the original content on the display 810.
  • the original content may include various information included in an execution screen of an application (eg, an email application, an e-book application, a browser application, etc.).
  • the processor 860 selects the at least one functional object based on the position of the touch detected by the touch sensor 820, and detects the pressure level of the touch using the pressure sensor 830. can do.
  • the processor 860 may determine a layout for modifying, excluding, or rearranging the original content based on the pressure level detected in operation 2104.
  • the processor 860 may display at least a part of the information included in the original content displayed in operation 2102 on the display 810 based on the layout determined in operation 2106.
  • 21B illustrates a method of providing touch-based information according to an embodiment.
  • 22 is a diagram illustrating a layout according to various embodiments of the present disclosure.
  • the method for providing touch-based information may include operations 2101 to 2113.
  • the operations 2101 to 2113 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of the operations 2101 to 2113 may be implemented by instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • FIG. 8 will be used to describe operations 2101 to 2113, and for convenience of description, reference will be made to FIGS. 21B and 22 alternately.
  • the processor 860 of the electronic device 801 may display an execution screen of an application including a plurality of items.
  • the execution screen may include content and a designated function object.
  • an execution screen 2200 of an application may be displayed on the display of the electronic device.
  • the execution screen 2200 may include a title 2211, body text 2212, images 2213 and 2214, body text 2215, flash 2216, a script 2215, and a designated function object of content. 2210).
  • the processor 860 may select or specify the designated function object based on the location of the touch detected by the touch sensor 820.
  • the electronic device displaying the execution screen 2200 may select the designated function object 2210 based on the location of the touch from the user.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the electronic device displaying the execution screen 2200 may detect a pressure level of a touch for selecting the designated function object 2210 using a pressure sensor.
  • the processor 860 may determine the pressure level detected in operation 2105. For example, the processor 860 may proceed to operation 2109 when the detected pressure of the touch is less than (or less than) a first pressure level (for example, P1 of FIG. 7). The processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 2111 may proceed. The processor 860 may proceed to operation 2113 when the detected pressure of the touch is greater than (or higher than) the second pressure level (eg, P2 of FIG. 7).
  • a first pressure level for example, P1 of FIG. 7
  • the processor 860 may detect that the pressure of the detected touch is greater than (or greater than) the first pressure level (eg, P1 of FIG. 7) and less than (or greater than) second pressure level (eg, P2 of FIG. 7). Less than), operation 2111 may proceed. The
  • the processor 860 may perform a predetermined function assigned to the designated function object because the detected touch pressure is below (or below) a first pressure level.
  • the designated function may correspond to a function of increasing or decreasing the size of the text included in the execution screen of the application (not shown).
  • the processor 860 may display the first execution screen including the function object because the detected touch pressure is greater than (or equal to or greater than) the first pressure level and less than (or less than) a second pressure level.
  • the first set of information constituted by the layout may be displayed on the display 810.
  • the processor 860 may display the first set of information on the display 810 when the detected touch is a “weak force touch”.
  • the electronic device displaying the execution screen 2200 may reconfigure the execution screen 2200 to the first layout.
  • the electronic device may configure the execution screen 2200 as a first layout by modifying a document object model (DOM) tree of the execution screen 2200.
  • DOM document object model
  • the electronic device may remove the flash 2216 and the script 2215 from the DOM tree of the execution screen 2200 and display the remaining items 2211-2215 on the display.
  • the execution screen 2202 may be output to the display.
  • the processor 860 may display, on the display 810, a second set of information on which the execution screen including the function object is configured as the second layout. .
  • the processor 860 may display the second set of information on the display 810 when the detected touch is a “strong force touch”.
  • the electronic device displaying the execution screen 2200 may reconfigure the execution screen 2200 to the second layout.
  • the electronic device may configure the execution screen 2200 in a second layout by modifying the DOM tree of the execution screen 2200.
  • the electronic device removes the images 2213 and 2214, the flash 2216 and the script 2215 from the DOM tree of the execution screen 2200, and displays only the title 2211 and the body text 2212 and 2215. Can be marked on. Through this, the execution screen 2203 may be output.
  • FIG. 23 is a diagram for describing a method of providing touch-based information according to an exemplary embodiment.
  • an electronic device performing a method of providing touch-based information may visit a web page by executing a browser application.
  • a title 2311, a body text 2312, an image 2313, and a body text 2314 may be displayed on the web page screen 2300.
  • the user may touch 23 a designated function object 2310 included in an upper portion of the web page screen 2300.
  • the electronic device may select the function object 2310 based on the position of the touch 23 detected by the touch sensor, and detect the pressure level of the touch 23 by using a pressure sensor.
  • the electronic device may perform a predetermined function assigned to the designated function object 2310.
  • the designated function may correspond to a function of increasing or decreasing the size of the text included in the web page screen 2300 (not shown).
  • the electronic device may display the web page screen 2300 in a first manner.
  • the screen 2302 configured as a layout can be displayed. For example, titles 2311 may not be displayed on the screen 2302, and items 2312, 2313, and 2314 may be displayed.
  • the electronic device may configure the execution screen 2300 including the function object 2310 as a second layout. Can be displayed.
  • the title 2311 and the image 2313 may not be displayed on the screen 2303, and texts 2312 and 2314 and subsequent texts 2305 may be displayed.
  • the layout may be reconfigured according to the type of the object applying the touch or force touch.
  • the user may touch or force touch the image 2313 included in the web page screen 2300 instead of the designated function object 2310.
  • the image 2313 may be displayed as a separate window (or tab).
  • the electronic device may determine the first pressure level.
  • the image 2313 may be enlarged or reduced within the range between the second pressure levels.
  • the electronic device collects and displays all the images included in the web page screen 2300 at a glance. can do.
  • the pressure level of the touch applied to the text may change the second pressure level. If exceeded (or abnormal), the electronic device may collect and display only all the texts included in the web page screen 2300.
  • 24 is a flowchart illustrating a content sorting method based on force touch, according to an exemplary embodiment.
  • a method of arranging content based on a force touch may include operations 2401 to 2417.
  • Operations 2401 to 2417 may be performed by, for example, the electronic device 801 illustrated in FIG. 8.
  • Each operation of operations 2401 to 2417 may be implemented by instructions (commands) that may be performed (or executed) by, for example, the processor 860 of the electronic device 801.
  • the instructions may be stored in, for example, a computer recording medium or a memory 850 of the electronic device 801 illustrated in FIG. 8.
  • operations 2401 to 2417 will be described using reference numerals of FIG. 8.
  • the processor 860 of the electronic device 801 may display a content list and a designated function object according to the execution of the application.
  • the content list may be a list in which at least one content is arranged in one direction.
  • the processor 860 of the electronic device 801 may detect an input position of a touch on the designated function object by the touch sensor 820.
  • the processor 860 may detect the pressure level of the touch using the pressure sensor 830.
  • the processor 860 may determine whether the pressure level detected in operation 2405 is equal to or greater than (or exceeds) the first pressure level (eg, P1 of FIG. 7). The processor 860 may proceed to operation 2409 when the detected pressure level is equal to or greater than the first pressure level, or proceed to operation 2413 if not.
  • the first pressure level eg, P1 of FIG. 7
  • the processor 860 may check a search query for the designated function object in response to a touch having a pressure equal to or greater than a first pressure level.
  • the search query may mean a keyword (eg, a word, phrase, clause, etc.) or a criterion for sorting a content list.
  • the processor 860 may rearrange or sort the content list based on the search query in response to a touch in which the pressure is greater than or equal to the first pressure level.
  • the processor 860 may determine whether a touch whose pressure is below (or below) a first pressure level is maintained for a predetermined time or more. The processor 860 may proceed to operation 2415 when the touch is maintained for a predetermined time or, otherwise, proceed to operation 2417.
  • the processor 860 may determine that the touch is a “long touch” (see 70-C in FIG. 7) because a touch whose pressure is below (or below) the first pressure level is maintained for a predetermined time or more. . Thereafter, the processor 860 may perform an operation corresponding to a preset “long touch”.
  • the processor 860 does not hold a touch whose pressure is below (or below) a first pressure level for more than a certain time, thus making the touch “normal touch” (“tap”; see 70-A in FIG. 7). Judging by Thereafter, the processor 860 may perform an operation corresponding to a preset “normal touch”.
  • 25 is a diagram for describing a content sorting method based on force touch, according to an exemplary embodiment.
  • the electronic device may execute a search application (or a browser application that outputs a search engine web page).
  • the screen 2501 may be displayed on the display of the electronic device by the execution of the search application.
  • the user may input a search query (eg, “hotel”) into the input field 2550 using the soft keyboard 2551 displayed on the screen 2501.
  • the electronic device may automatically display a search result of the search query (eg, "hotel") on the display in response to an input search query (eg, "hotel”).
  • the search result may include a category list including a plurality of categories (eg, “TOP HITS” and “GOOGLE MAPS”) in order, as illustrated on screen 2501.
  • the category “TOP HITS” may include one item 2511 and the "GOOGLE MAPS” category may include three items 2512-2514.
  • the user may perform a touch 25-1 (eg, “weak force touch” or “strong force touch”) on the function object 2510 (eg, a search key) included in the screen 2501. Can be.
  • the electronic device may rearrange the search results of the input query (eg, “hotel”) and display them on the display.
  • the screen 2501 is arranged in the order of the "TOP HITS” category and the "GOOGLE MAPS” category, but the electronic device responds to the touch 25-1 to display the "GOOGLE MAPS" category, as shown in the screen 2502.
  • the category list can be reconstructed in the order of the "TURBOSCAN” category (including item 2515), and the "TOP HITS” category.
  • a user may perform a touch 25-2 (eg, a “weak force touch” or “strong force touch”) on a function object 2510 (eg, a search key) included in screen 2502.
  • the electronic device may rearrange the search results of the input query (eg, “hotel”) and display them on the display.
  • the screen 2502 is arranged in the "GOOGLE MAPS” category, the "TURBOSCAN” category, and the “TOP HITS” category, but the electronic device responds to the touch 25-2, as shown in the screen 2503.
  • the category list can be constructed in the order of the "TURBOSCAN” category, the "TOP HITS” category, and the "GOOGLE MAPS” category.
  • the electronic device may detect a force touch 25-3 (eg, 70-E or 70-G of FIG. 7) for a specified time or more. For example, when the force touch 25-3 is detected for more than the designated time, the electronic device may continuously rearrange (or shuffle) the category list included in the screen 2501 or 2502 for the specified time. . According to an example, when the force touch for the specified time or more is terminated, the electronic device may stop the rearrangement (or shuffle) and output the soft keyboard 2551 again, as shown in screen 2504. Can be.
  • a force touch 25-3 eg, 70-E or 70-G of FIG. 7
  • the electronic device may continuously rearrange (or shuffle) the category list included in the screen 2501 or 2502 for the specified time.
  • the electronic device may stop the rearrangement (or shuffle) and output the soft keyboard 2551 again, as shown in screen 2504. Can be.
  • FIG. 26 is a diagram for describing a content sorting method based on force touch, according to another exemplary embodiment.
  • the electronic device may execute a search application (or a browser application that outputs a search engine web page).
  • the screen 2601 may be displayed on the display of the electronic device by the execution of the search application.
  • the user may input a search query (eg, “1 dollar”) into the input field 2650 using the soft keyboard 2601 displayed on the screen 2601.
  • the electronic device may automatically display a search result of the search query (eg, "1 dollar") on the display in response to an input search query (eg, "1 dollar”).
  • a search result of the search query eg, "1 dollar”
  • a plurality of categories eg, exchange rate search 2611, web search 2612, App Store search 2613, and map search 2614
  • the exchange rate search 2611 category may include an item 2611e including extended information.
  • the user may touch 26-1 (eg, “weak force touch” or “strong force touch”) on the function object 2610 (eg, a search key) included in the screen 2601.
  • the electronic device may reconstruct and display a search result of the input query (eg, “1 dollar”) in response to the touch 26-1.
  • the electronic device does not display the item 2611e including the extended information of the exchange rate search 2611 in response to the touch 26-1 and expands the web search 2612.
  • the item 2612e including the information can be displayed.
  • the user may touch 26-2 (eg, “weak force touch” or “strong force touch”) on the function object 2610 (eg, a search key) included in screen 2602.
  • the electronic device may reconstruct and display a search result of the input query (eg, “1 dollar”) on the display.
  • the electronic device does not display the item 2612e including the extended information of the web search 2612 in response to the touch 26-2, and instead of the App Store search 2613.
  • the item 2613e including the extension information may be displayed.
  • the electronic device may detect a force touch 26-3 (eg, 70-E or 70-G of FIG. 7) for a specified time or more. For example, when the force touch 26-3 is detected for more than the designated time, the electronic device may sequentially display items including extension information of the categories 261-2614 for the specified time. According to an example, when the force touch for the specified time or more is terminated, the electronic device stops displaying the items including the extended information of the categories 261-2614 in sequence, as shown on a screen 2604, The soft keyboard 2701 can be output again.
  • a force touch 26-3 eg, 70-E or 70-G of FIG. 7
  • the electronic device may sequentially display items including extension information of the categories 261-2614 for the specified time.
  • the electronic device stops displaying the items including the extended information of the categories 261-2614 in sequence, as shown on a screen 2604,
  • the soft keyboard 2701 can be output again.
  • the search query is described as text in FIGS. 25 and 26, but the search query may include various queries such as an image, a video, and a voice input.
  • FIG. 27 is a diagram for describing a mail list sorting method based on force touch, according to an exemplary embodiment.
  • the electronic device may execute an email application (or a browser application that outputs a web mail page).
  • the screen 2701 may be displayed on the display of the electronic device by the execution of the email application.
  • the screen 2701 may include a mail list including a plurality of mails.
  • the user may touch 27 (eg, “weak force touch” or “strong force touch”) on the object 2710 included in any mail 2711 of the mail list.
  • the object 2710 may represent a sender (eg, “Coursera”) of the mail 2711.
  • the electronic device may display a list screen 2702 of mails sent by a sender (eg, “Coursera”) indicated by the object 2710 on the display.
  • the object 2710 may include not only an icon indicating the sender of the mail, but also text indicating the name and the email address of the sender of the mail.
  • FIG. 28 is a diagram illustrating a mail list sorting method based on force touch, according to another exemplary embodiment.
  • the electronic device may execute an email application (or a browser application that outputs a web mail page).
  • the screen 2800 may be displayed on the display of the electronic device by the execution of the email application.
  • the screen 2800 may include a mail list including a plurality of mails.
  • At least some mails of the mail list may include an object 2810 indicating an unread mail and an object 2820 indicating a mail including an attachment.
  • a user may force touch (eg, “weak force touch” or “strong force touch”) one of the objects 2810 included in some mail.
  • the electronic device may display a list of unread mails among all mail lists on the display, as shown in screen 2801.
  • a user may force touch (eg, “weak force touch” or “strong force touch”) one of the objects 2820 included in some mail.
  • the electronic device may display a list of mails including attachments among all mail lists on the display, as shown in screen 2802.
  • FIG. 29 illustrates an example of selecting an image object in response to a pressure of a touch, according to an exemplary embodiment.
  • an electronic device 2900 illustrating a method of selecting an image object in response to a pressure of a touch is shown.
  • the electronic device 2900 may execute an image viewer application.
  • the electronic device 2900 may display the screen 2910-1 including a certain image by executing the image viewer application.
  • a user may perform a touch 29 on a display (or screen 2910-1).
  • the electronic device 2900 may detect the position and the pressure of the touch 29 in response to the touch 29.
  • the electronic device may output the screens 2910-2, 2910-3, or 2910-4 according to the detected pressure level of the touch 29.
  • the electronic device 2900 may output the screen 2910-2 to the display.
  • the electronic device 2900 based on an image object recognition algorithm (eg, a face recognition algorithm, etc.), corresponds to an image object (eg, a face object) corresponding to a position where the touch 29 is made in the entire image. ) Can be selected.
  • an image object recognition algorithm eg, a face recognition algorithm, etc.
  • screen 2910-3 may be output.
  • the electronic device 2900 may select the image object 2333 including the face of the person and the upper body based on the image object recognition algorithm. That is, as the pressure of the touch 29 increases, the selected image object may be extended.
  • the electronic device 2900-1 may display the screen 2910-4. You can print according to the screen 2910-4, the electronic device 2900 may select an image object 2944 including a face, an upper body, and a lower body of a person based on an image object recognition algorithm. That is, as the pressure of the touch 29 increases, the selected image object may be further extended.
  • the selection range of the image object is extended based on a single person, but is not limited thereto.
  • the electronic device 2900 may include an image including a face of a person corresponding to the position of the touch 29. You can also select image objects at the same time, including objects and faces of adjacent people.
  • the image object is selected and specified along the boundary of the corresponding image object in FIG. 29, the image object may be selected and specified in the form of a circle, a polygon, or the like.
  • the user's touch 29 selecting an image object is described under a single touch.
  • the electronic device 2900 may support multi-touch including two or more touches.
  • the image displayed on the screen of the electronic device is described under the assumption of a still image, but may correspond to an image corresponding to one frame of the video.
  • the electronic device 2900 may perform various operations based on the selected image object. For example, the electronic device 2900 may receive a similar image from a designated search engine by using the selected image object as a search query. In this case, the search result may be different according to a selected range of the selected image object (eg, "face, face + upper body, face + upper body + lower body.”
  • the designated search engine is not limited to similar images. Instead, information about the selected image object (for example, if the selected image is a building, geographic location of the building, floor information, etc.) may be provided.
  • the electronic device 2900 may search for and sort images from the memory of the electronic device 2900, including image objects similar to the selected image object, and provide a corresponding search result list to the user.
  • the search result lists may be different from each other depending on the selection range of the selected image object.
  • the electronic device 2900 may output a close-up of the selected image object with respect to the selected image object and output it to the display.
  • the electronic device 2900 may store the selected image object in a clipboard and use the same for later operation of another application (eg, an image editing application).
  • FIG. 30 is a view for explaining that a selection area is specified in response to a pressure of a touch according to another embodiment.
  • an electronic device 3000 performing a method of specifying a selection area in response to a pressure of a touch is shown.
  • the electronic device 3000 may execute a map application.
  • the electronic device 3000 may display the user interface of the map application and / or the map content (for example, a map included in the screen 3010-1) on the display by executing the map application.
  • the user may perform a touch 30 on a display (or screen 3010-1).
  • the electronic device 3000 may detect the position and the pressure of the touch 30 in response to the touch 30.
  • the electronic device 3000 may recognize the touch 30 as a “force touch”.
  • the electronic device 3000 may display a guide 3011 around the position where the touch 30 is made on the display.
  • the guide 3011 may be larger or smaller depending on the pressure of the touch 30.
  • the electronic device 3000 may output the screen 3010-2 or the screen 3010-3 according to the detected pressure level of the touch 30.
  • screen 3010-2 can be output.
  • the electronic device 3000 when the weak force touch is detected, the electronic device 3000 creates a circular area 3022 having a radius of a first distance (for example, 500 m) around the position where the touch 30 is made. You can choose.
  • the electronic device 3000 displays the screen 3010-3. You can print According to the screen 3010-3, when the strong force touch is detected, the electronic device 3000 creates a circular area 3033 having a radius of a second distance (eg, 1000 m) around the position where the touch 30 is made. You can choose. That is, the electronic device may expand the selected area as the pressure of the touch 30 increases.
  • a second distance eg, 1000 m
  • the selection area may support multi-touch including two or more touches. For example, you can specify the selection area by setting the location where two touches are made to the diameter or radius of the circle.
  • different functions may be provided according to a pressure level of a touch received from a user. This can provide a more colorful user experience to the user.
  • a computer recording medium executed by at least one processor and storing computer readable instructions, the instructions may include: launching an application program for displaying a user interface on a display; Displaying an array of the plurality of items in a network, receiving first data generated from a touch sensor, receiving second data generated from a pressure sensor, and based on at least the first data. Selecting one of the plurality of items, at least one of the plurality of pressure levels based at least on the second data, and at least based on one of the selected plurality of pressure levels; One of the associated plurality of sets of information It may be set to cause the operation of displaying the ray.
  • the plurality of pressure levels may include a discrete first level and a discrete second level higher than the first level.
  • the instructions may be configured to display information of the first set of the plurality of sets of information on the display when the first level is selected, and to display the second set of information of the plurality of sets of information when the second level is selected. Instructions for displaying on a display, wherein the second set of information may include more information than the first set of information.
  • An electronic device includes a display, a touch sensor, a pressure sensor, at least one processor electrically connected to the display, the touch sensor, and the pressure sensor, and a memory electrically connected to the at least one processor. can do.
  • the memory when executed, displays the plurality of items on the display, selects at least one of the plurality of items based on the position of the touch sensed by the touch sensor, and uses the pressure sensor. To detect the pressure level of the touch and to display at least one set of information associated with the selected at least one item on the display in response to the detected pressure level.
  • the plurality of items may include an input query and a functional object configured to request a search result for the input query.
  • the memory may include the first search result of the input query when the processor selects the functional object based on the position of the touch detected by the touch sensor, and the pressure level of the detected touch is equal to or less than a first pressure level. Display a first set of information on the display, and when the detected pressure level of the touch exceeds the first pressure level, display a second set of information on the display including a second search result of the input query; And when the detected pressure level of the touch exceeds a second pressure level that is higher than the first pressure level, instructions to cause the display to display a third set of information including a third search result of the input query. have.
  • the first search result may include a category list including at least one category.
  • the second search result may include at least one item belonging to a category having the highest association with the input query.
  • the third search result may include detailed information of at least one item belonging to a category having the highest association with the input query, and the item having the highest association with the input query.
  • the first search result may include a search result in which the input query is included with a first level of accuracy.
  • the second search result may include a search result in which the input query is included with a second level of accuracy.
  • the third search result may include a search result in which the input query is included with a third level of accuracy.
  • the accuracy of the second level may be set higher than the accuracy of the first level and lower than the accuracy of the third level.
  • the plurality of items may include text.
  • the memory selects the text based on the position of the touch sensed by the touch sensor, and the first set of information comprising the text if the pressure level of the detected touch exceeds a first pressure level. May be displayed on the display, and instructions for displaying on the display a second set of information including the text if the detected pressure level of the touch exceeds a second pressure level higher than the first pressure level. have.
  • the text may be included in an execution screen of the email application.
  • the first set of information may include a mail list in which the text is included in a mail title.
  • the second set of information may include a mail list in which the text is included in the mail subject or mail body.
  • the text may be included in an execution screen by a designated application.
  • the first set of information may include a search result in which the text is included at a first level of accuracy.
  • the second set of information may include a search result that includes the text at a second level of accuracy. The accuracy of the second level may be higher than the accuracy of the first level.
  • the text may be included in an execution screen by a designated application.
  • the first set of information may include a search result in the electronic device of the text.
  • the second set of information may comprise a web search result of the text.
  • the plurality of items may include an image object.
  • the memory selects the image object based on the position of the touch sensed by the touch sensor, and if the pressure level of the detected touch exceeds a first pressure level, the selected image object and the first level. And display a first set of information comprising a similar image object on the display, and if the pressure level of the detected touch exceeds a second pressure level higher than the first pressure level, the selected image object and the second level. Instructions may be stored to cause the display to display a second set of information including a similar image object. In this case, the similarity of the second level may be set higher than that of the first level.
  • the plurality of items may include an icon of a specified application.
  • the memory selects the icon based on the position of the touch sensed by the touch sensor, and if the detected pressure level is less than or equal to the first pressure level, the processor displays the execution screen of the designated application in the first set. Display on the display as information, and when the detected pressure level of the detected touch exceeds the first pressure level, display a second set of information associated with the designated application on the display; Instructions that cause a third set of information associated with the designated application to be displayed on the display when the second pressure level is higher than the first pressure level.
  • the information amount of the third set of information may be greater than the information amount of the second set of information.
  • the second set of information or the third set of information may include notification information of the designated application.
  • the plurality of items may include a designated function object.
  • the memory selects the designated function object based on the position of the touch detected by the touch sensor, and displays a screen linked to the designated function object when the pressure of the detected touch is equal to or less than a first pressure level. Display on the display as a first set of information, and display on the display a second set of information associated with the designated functional object when the pressure of the detected touch exceeds a first pressure level, and the pressure of the detected touch Instructions may be stored that cause a third set of information associated with the designated functional object to be displayed on the display if the second pressure level is higher than the first pressure level.
  • the plurality of items may include a function object included in an execution screen of a specified application.
  • the memory selects the function object based on the position of the touch detected by the touch sensor, and if the detected pressure of the touch exceeds the first pressure level, the execution screen including the function object is displayed. Displaying a first set of information configured in a first layout on the display, and if the detected pressure of the touch exceeds a second pressure level higher than the first pressure level, executing the execution screen including the object in a second layout Instructions for displaying the second set of information on the display may be stored.
  • module may refer to a unit that includes one or a combination of two or more of hardware, software, or firmware.
  • a “module” may be interchangeably used with terms such as, for example, unit, logic, logical block, component, or circuit.
  • the module may be a minimum unit or part of an integrally constructed part.
  • the module may be a minimum unit or part of performing one or more functions.
  • the “module” can be implemented mechanically or electronically.
  • a “module” is one of application-specific integrated circuit (ASIC) chips, field-programmable gate arrays (FPGAs), or programmable-logic devices that perform certain operations, known or developed in the future. It may include at least one.
  • ASIC application-specific integrated circuit
  • FPGAs field-programmable gate arrays
  • an apparatus eg, modules or functions thereof
  • a method eg, operations
  • computer-readable storage media in the form of a program module. It can be implemented as a command stored in.
  • the instruction is executed by a processor (eg, the processor 120)
  • the one or more processors may perform a function corresponding to the instruction.
  • the computer-readable storage medium may be the memory 130, for example.
  • Computer-readable recording media include hard disks, floppy disks, magnetic media (e.g. magnetic tapes), optical media (e.g. CD-ROMs, digital versatile discs), magnetic- Optical media (eg floptical disks), hardware devices (eg ROM, RAM, flash memory, etc.), etc.
  • program instructions may be created by a compiler. It may include not only machine code, such as losing, but also high-level language code executable by a computer using an interpreter, etc.
  • the hardware device described above may be configured to operate as one or more software modules to perform the operations of various embodiments. And vice versa.
  • Modules or program modules according to various embodiments of the present disclosure may include at least one or more of the above components, some of them may be omitted, or may further include other additional components.
  • Operations performed by a module, program module, or other component according to various embodiments of the present disclosure may be executed in a sequential, parallel, repetitive, or heuristic manner. In addition, some operations may be executed in a different order, may be omitted, or other operations may be added.

Abstract

일 실시 예에 따른 전자 장치는, 디스플레이, 터치 센서, 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 디스플레이에 복수의 아이템을 표시하고, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고, 상기 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하고, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다. 이 외에도 명세서를 통해 파악되는 다양한 실시 예가 가능하다.

Description

터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법
본 발명에서 개시되는 실시 예들은, 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법에 관한 것이다.
이동통신 기술의 발달로, 퍼스널 컴퓨터(personal computer)의 보급에 뒤이어, 스마트폰(smartphone), 웨어러블(wearable) 기기 등 디스플레이를 구비한 전자 장치가 광범위하게 보급되고 있다.
상기 전자 장치의 디스플레이는 터치 패널을 추가로 구비함으로써, 이른바 터치 스크린(touch screen)으로 구현될 수 있다. 디스플레이는 터치 스크린으로 구현됨으로써 시각적 표시 수단으로의 역할에 더하여 사용자 입력을 수신할 수 있는 입력 수단으로서의 역할도 수행할 수 있다.
사용자는 전자 장치를 제어하기 위해, 터치 등의 사용자 입력을 전자 장치에 제공할 수 있다. 사용자는 스스로 사용자 입력을 전자 장치에 제공하기 전에 해당 사용자 입력에 응답한 전자 장치의 동작을 충분히 예상할 수 있어야 한다. 사용자는 사용자 입력의 유형과 이에 대응되는 전자 장치의 응답을 예상하기 위해 일정한 학습이 요구될 수 있다.
터치 스크린에 대한 터치의 압력을 사용자 입력의 일 파라미터로 이용할 수 있다. 사용자는 의도한대로 전자 장치를 제어하기 위해 기존의 터치 입력과 "압력 입력"을 선택적으로 입력할 수 있다. 이처럼 터치를 이용한 사용자의 입력 소스(source)가 하나가 아닌 복수개인 경우 상기 사용자에게 요구되는 학습의 양은 더욱 많아지게 된다.
본 발명은 사용자가 단순한 터치 입력과 터치의 압력을 압력 입력을 혼용하여 사용하는 전자 장치를 제어함에 있어서, 사용자에게 요구되는 학습을 최소화할 수 있는 직관적인 UI(user interface) 또는 UX(user experience)를 제공할 수 있다.
본 발명의 다양한 실시 예들은, 상기 터치 스크린에 대한 터치의 압력을 검출할 수 있는 압력 센서를 구비하고, 상기 터치의 압력 레벨에 응답하여 다양한 기능을 제공하는 방법 및 이를 수행하는 전자 장치를 제공할 수 있다.
본 발명의 일 실시 예에 따른 전자 장치는, 제1 방향으로 향한 제1 면, 및 상기 제1 방향의 반대인 제2 방향으로 향한 제2 면을 포함하는 하우징, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 제1 면을 통해 노출된 디스플레이, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 디스플레이 상의 외부 물체에 의한 터치의 적어도 하나의 위치를 검출하는 터치 센서, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 디스플레이에 대한 상기 외부 물체에 의한 압력을 검출하는 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 복수의 아이템을 상기 디스플레이에 표시하도록 설정된 사용자 인터페이스를 포함한 적어도 하나의 어플리케이션 프로그램을 저장하며, 실행 시에, 상기 프로세서가, 상기 디스플레이에 상기 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭(launching)하고, 상기 사용자 인터페이스에 상기 복수의 아이템의 배열(array)을 표시하고, 상기 터치 센서로부터 생성된 제1 데이터를 수신하고, 상기 압력 센서로부터 생성된 제2 데이터를 수신하고, 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하고, 상기 제2 데이터에 적어도 기반하여 복수의 압력 레벨 중 하나를 선택하고, 및 상기 선택된 상기 복수의 압력 레벨 중 하나에 적어도 기반하여, 상기 선택된 상기 복수의 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또한, 본 발명의 일 실시 예에 따른 전자 장치는, 디스플레이, 터치 센서, 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 디스플레이에 복수의 아이템을 표시하고, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고, 상기 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하고, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또한, 본 발명의 일 실시 예에 따른 방법은, 디스플레이에 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭하는 동작, 상기 사용자 인터페이스에 상기 복수의 아이템의 배열을 표시하는 동작, 터치 센서로부터 생성된 제1 데이터를 수신하는 동작, 압력 센서로부터 생성된 제2 데이터를 수신하는 동작, 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하는 동작, 상기 제2 데이터에 적어도 기반하여 복수의 압력 레벨 중 하나를 선택하는 동작, 및 상기 선택된 상기 복수의 압력 레벨 중 하나에 적어도 기반하여, 상기 선택된 상기 복수의 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 상기 디스플레이에 표시하는 동작을 포함할 수 있다.
또한, 본 발명의 일 실시 예에 따른 방법은, 디스플레이에 복수의 아이템을 출력하는 동작, 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하는 동작, 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하는 동작, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 디스플레이에 표시하는 동작을 포함할 수 있다.
또한, 본 발명의 일 실시 예에 따른, 적어도 하나의 프로세서에 의해 실행되며, 컴퓨터로 읽을 수 있는 인스트럭션들이 저장된 컴퓨터 기록 매체에 있어서, 상기 인스트럭션들은, 디스플레이에 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭하는 동작, 상기 사용자 인터페이스에 상기 복수의 아이템의 배열을 표시하는 동작, 터치 센서로부터 생성된 제1 데이터를 수신하는 동작, 압력 센서로부터 생성된 제2 데이터를 수신하는 동작, 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하는 동작, 상기 제2 데이터에 적어도 기반하여 복수의 압력 레벨 중 하나를 선택하는 동작, 및 상기 선택된 상기 복수의 압력 레벨 중 하나에 적어도 기반하여, 상기 선택된 상기 복수의 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 상기 디스플레이에 표시하는 동작을 수행하도록 설정될 수 있다.
또한, 본 발명의 일 실시 예에 따른, 적어도 하나의 프로세서에 의해 실행되며, 컴퓨터로 읽을 수 있는 인스트럭션들이 저장된 컴퓨터 기록 매체에 있어서, 상기 인스트럭션들은, 디스플레이에 복수의 아이템을 출력하는 동작, 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하는 동작, 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하는 동작, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 디스플레이에 표시하는 동작을 수행하도록 설정될 수 있다.
본 발명의 실시 예들에 따르면, 터치의 압력 레벨에 따라서 다양한 기능을 제공할 수 있으므로 사용자들에게 풍부한 사용자 경험을 제공할 수 있다. 이 외에, 본 발명를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.
도 1은 다양한 실시 예에 따른 전자 장치를 나타낸다.
도 2는 다양한 실시 예에 따른 전자 장치의 블록도를 나타낸다.
도 3은 다양한 실시 예에 따른 프로그램 모듈의 블록도를 나타낸다.
도 4는 일 실시 예에 따른 전자 장치의 외관을 나타낸다.
도 5는 일 실시 예에 따른 디스플레이의 적층 구조를 나타낸다.
도 6은 일 실시 예에 따른 압력 센서를 나타낸다.
도 7은 다양한 실시 예에 따른 터치를 설명하기 위한 도면이다.
도 8은 일 실시 예에 따른 전자 장치의 블록도를 나타낸다.
도 9a 및 도 9b는 일 실시 예에 따른 정보 제공 방법을 나타낸다.
도 10은 일 실시 예에 따른 입력 쿼리의 검색 결과 제공 방법을 나타낸다.
도 11은 일 실시 예에 따른 입력 쿼리의 검색 결과 제공 방법을 설명하기 위한 도면이다.
도 12는 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 13a 및 도 13b는 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 14는 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 15a 및 도 15b는 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 16은 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 17은 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 18은 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 19는 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 20a 내지 도 20c는 또 다른 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 21a 및 도 21b는 일 실시 예에 따른 터치 기반 정보 제공 방법을 나타낸다.
도 22는 다양한 실시 예에 따른 레이아웃을 설명하기 위한 도면이다..
도 23은 일 실시 예에 따른 일 실시 예에 따른 터치 기반 정보 제공 방법을 설명하기 위한 도면이다.
도 24는 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 나타낸다.
도 25는 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 설명하기 위한 도면이다.
도 26은 또 다른 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 설명하기 위한 도면이다.
도 27은 일 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 설명하기 위한 도면이다.
도 28은 또 다른 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 설명하기 위한 도면이다.
도 29는 또 다른 실시 예에 따른 터치의 압력에 응답하여 이미지 객체가 선택되는 것을 설명하기 위한 도면이다.
도 30은 또 다른 실시 예에 따른 터치의 압력에 응답하여 선택 영역이 특정되는 것을 설명하기 위한 도면이다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다", "가질 수 있다", "포함한다", 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나", 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제1", "제2", "첫째", 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)"것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성(또는 설정)된 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은 관련 기술의 문맥 상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.
본 문서의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC (desktop PC), 랩탑 PC(laptop PC), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라, 또는 웨어러블 장치(wearable device) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에 따르면 웨어러블 장치는 엑세서리 형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체 형(예: 전자 의복), 신체 부착 형(예: 스킨 패드(skin pad) 또는 문신), 또는 생체 이식 형(예: implantable circuit) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에서, 전자 장치는 가전 제품(home appliance)일 수 있다. 가전 제품은, 예를 들면, 텔레비전, DVD 플레이어(Digital Video Disk player), 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(예: Xbox™, PlayStation™), 전자 사전, 전자 키, 캠코더, 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, 위성 항법 시스템(GNSS(Global Navigation Satellite System)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 문서의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시 예에 따른 전자 장치가 설명된다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치 (예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예에 따른 전자 장치를 나타낸다.
도 1을 참조하면, 다양한 실시 예에서의 전자 장치(101, 102, 104) 또는 서버(106)가 네트워크(162) 또는 근거리 통신(164)를 통하여 서로 연결될 수 있다. 전자 장치(101)는 버스(110), 프로세서(120), 메모리(130), 입출력 인터페이스(150), 디스플레이(160), 및 통신 인터페이스(170)를 포함할 수 있다. 어떤 실시 예에서는, 전자 장치(101)는, 구성요소들 중 적어도 하나를 생략하거나 다른 구성 요소를 추가적으로 구비할 수 있다.
버스(110)는, 예를 들면, 구성요소들(110-170)을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지 및/또는 데이터)을 전달하는 회로를 포함할 수 있다.
프로세서(120)는, 중앙처리장치(central processing unit (CPU)), 어플리케이션 프로세서(application processor (AP)), 또는 커뮤니케이션 프로세서(communication processor (CP)) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(120)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
메모리(130)는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리(130)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 한 실시 예에 따르면, 메모리(130)는 소프트웨어 및/또는 프로그램(140)을 저장할 수 있다. 프로그램(140)은, 예를 들면, 커널(141), 미들웨어(143), 어플리케이션 프로그래밍 인터페이스(Application Programming Interface (API))(145), 및/또는 어플리케이션 프로그램(또는 "어플리케이션")(147) 등을 포함할 수 있다. 커널(141), 미들웨어(143), 또는 API(145)의 적어도 일부는, 운영 시스템(Operating System (OS))으로 지칭될 수 있다.
커널(141)은, 예를 들면, 다른 프로그램들(예: 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147))에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)을 제어 또는 관리할 수 있다. 또한, 커널(141)은 미들웨어(143), API(145), 또는 어플리케이션 프로그램(147)에서 전자 장치(101)의 개별 구성요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
미들웨어(143)는, 예를 들면, API(145) 또는 어플리케이션 프로그램(147)이 커널(141)과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다.
또한, 미들웨어(143)는 어플리케이션 프로그램(147)으로부터 수신된 하나 이상의 작업 요청들을 우선 순위에 따라 처리할 수 있다. 예를 들면, 미들웨어(143)는 어플리케이션 프로그램(147) 중 적어도 하나에 전자 장치(101)의 시스템 리소스(예: 버스(110), 프로세서(120), 또는 메모리(130) 등)를 사용할 수 있는 우선 순위를 부여할 수 있다. 예컨대, 미들웨어(143)는 상기 적어도 하나에 부여된 우선 순위에 따라 상기 하나 이상의 작업 요청들을 처리함으로써, 상기 하나 이상의 작업 요청들에 대한 스케쥴링 또는 로드 밸런싱 등을 수행할 수 있다.
API(145)는, 예를 들면, 어플리케이션(147)이 커널(141) 또는 미들웨어(143)에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 영상 처리, 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
입출력 인터페이스(150)는, 예를 들면, 사용자 또는 다른 외부 기기로부터 입력된 명령 또는 데이터를 전자 장치(101)의 다른 구성요소(들)에 전달할 수 있는 인터페이스의 역할을 할 수 있다. 또한, 입출력 인터페이스(150)는 전자 장치(101)의 다른 구성요소(들)로부터 수신된 명령 또는 데이터를 사용자 또는 다른 외부 기기로 출력할 수 있다.
디스플레이(160)는, 예를 들면, 액정 디스플레이(liquid crystal display (LCD)), 발광 다이오드(light-emitting diode (LED)) 디스플레이, 유기 발광 다이오드(organic LED (OLED)) 디스플레이, 또는 마이크로 전자기계 시스템(microelectromechanical systems, MEMS) 디스플레이, 또는 전자 종이(electronic paper) 디스플레이를 포함할 수 있다. 디스플레이(160)는, 예를 들면, 사용자에게 각종 컨텐츠(예: 텍스트, 이미지, 비디오, 아이콘, 또는 심볼 등)을 표시할 수 있다. 디스플레이(160)는, 터치 스크린을 포함할 수 있으며, 예를 들면, 전자 펜 또는 사용자의 신체의 일부를 이용한 터치, 제스처, 근접, 또는 호버링(hovering) 입력을 수신할 수 있다.
통신 인터페이스(170)는, 예를 들면, 전자 장치(101)와 외부 장치(예: 제1 외부 전자 장치(102), 제2 외부 전자 장치(104), 또는 서버(106)) 간의 통신을 설정할 수 있다. 예를 들면, 통신 인터페이스(170)는 무선 통신 또는 유선 통신을 통해서 네트워크(162)에 연결되어 상기 외부 장치 (예: 제2 외부 전자 장치(104) 또는 서버(106))와 통신할 수 있다.
무선 통신은, 예를 들면 셀룰러 통신 프로토콜로서, 예를 들면 LTE(long-term evolution), LTE-A(LTE-advanced), CDMA(code division multiple access), WCDMA(WIdeband CDMA), UMTS(universal mobile telecommunications system), WiBro(wireless broadband), 또는 GSM(global system for mobile communications) 중 적어도 하나를 사용하는 셀룰러 통신을 포함할 수 있다. 한 실시예에 따르면, 무선 통신은, 예를 들면, Wi-Fi(wireless fidelity), 블루투스, 블루투스 저전력(BLE), 지그비(Zigbee), NFC(near field communication), 자력 시큐어 트랜스미션(MST: Magnetic Secure Transmission), 라디오 프리퀀시(RF), 또는 보디 에어리어 네트워크(BAN), 또는 GNSS 중 적어도 하나를 포함할 수 있다.
MST는 전자기 신호를 이용하여 전송 데이터에 따라 펄스를 생성하고, 상기 펄스는 자기장 신호를 발생시킬 수 있다. 전자 장치(101)는 상기 자기장 신호를 POS(point of sales)에 전송하고, POS는 MST 리더(MST reader)를 이용하여 상기 자기장 신호는 검출하고, 검출된 자기장 신호를 전기 신호로 변환함으로써 상기 데이터를 복원할 수 있다.
GNSS는 사용 지역 또는 대역폭 등에 따라, 예를 들면, GPS(Global Positioning System), Glonass(Global Navigation Satellite System), Beidou Navigation Satellite System(이하 "Beidou") 또는 Galileo(the European global satellite-based navigation system) 중 적어도 하나를 포함할 수 있다. 이하, 본 문서에서는, "GPS"는 "GNSS"와 혼용되어 사용(interchangeably used)될 수 있다. 유선 통신은, 예를 들면, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard-232), 또는 POTS(plain old telephone service) 등 중 적어도 하나를 포함할 수 있다. 네트워크(162)는 통신 네트워크(telecommunications network), 예를 들면, 컴퓨터 네트워크(computer network)(예: LAN 또는 WAN), 인터넷, 또는 전화 망(telephone network) 중 적어도 하나를 포함할 수 있다.
제1 및 제2 외부 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 한 실시 예에 따르면, 서버(106)는 하나 또는 그 이상의 서버들의 그룹을 포함할 수 있다. 다양한 실시 예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치(예: 전자 장치(102,104), 또는 서버(106))에서 실행될 수 있다. 한 실시 예에 따르면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치(예: 전자 장치(102, 104), 또는 서버(106))에게 요청할 수 있다. 다른 전자 장치(예: 전자 장치(102, 104), 또는 서버(106))는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 2는 다양한 실시 예에 따른 전자 장치의 블록도를 나타낸다.
도 2를 참조하면, 전자 장치(201)는, 예를 들면, 도 1에 도시된 전자 장치(101)의 전체 또는 일부를 포함할 수 있다. 전자 장치(201)는 하나 이상의 프로세서(예: AP)(210), 통신 모듈(220), 가입자 식별 모듈(224), 메모리(230), 센서 모듈(240), 입력 장치(250), 디스플레이(260), 인터페이스(270), 오디오 모듈(280), 카메라 모듈(291), 전력 관리 모듈(295), 배터리(296), 인디케이터(297), 및 모터(298)를 포함할 수 있다.
프로세서(210)는, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 프로세서(210)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서(210)는, 예를 들면, SoC(system on chip)로 구현될 수 있다. 한 실시 예에 따르면, 프로세서(210)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다. 프로세서(210)는 도 2에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈(221))를 포함할 수도 있다. 프로세서(210)는 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
통신 모듈(220)은, 도 1의 통신 인터페이스(170)와 동일 또는 유사한 구성을 가질 수 있다. 통신 모듈(220)은, 예를 들면, 셀룰러 모듈(221), Wi-Fi 모듈(222), 블루투스 모듈(223), GNSS 모듈(224) (예: GPS 모듈, Glonass 모듈, Beidou 모듈, 또는 Galileo 모듈), NFC 모듈(225), MST 모듈(226) 및 RF(radio frequency) 모듈(227)을 포함할 수 있다.
셀룰러 모듈(221)은, 예를 들면, 통신망을 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈(221)은 가입자 식별 모듈(예: SIM 카드)(229)을 이용하여 통신 네트워크 내에서 전자 장치(201)의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈(221)은 프로세서(210)가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈(221)은 커뮤니케이션 프로세서(CP)를 포함할 수 있다.
Wi-Fi 모듈(222), 블루투스 모듈(223), GNSS 모듈(224), NFC 모듈(225), 또는 MST 모듈(226) 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 어떤 실시 예에 따르면, 셀룰러 모듈(221), Wi-Fi 모듈(222), 블루투스 모듈(223), GNSS 모듈(224), NFC 모듈(225), MST 모듈(226) 중 적어도 일부(예: 두 개 이상)는 하나의 IC(integrated chip) 또는 IC 패키지 내에 포함될 수 있다.
RF 모듈(227)은, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. RF 모듈(227)은, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter), LNA(low noise amplifier), 또는 안테나 등을 포함할 수 있다. 다른 실시 예에 따르면, 셀룰러 모듈(221), Wi-Fi 모듈(222), 블루투스 모듈(223), GNSS 모듈(224), NFC 모듈(225), MST 모듈(226) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다.
가입자 식별 모듈(229)은, 예를 들면, 가입자 식별 모듈을 포함하는 카드 및/또는 내장 SIM(embedded SIM)을 포함할 수 있으며, 고유한 식별 정보(예: ICCID (integrated circuit card identifier)) 또는 가입자 정보(예: IMSI (international mobile subscriber identity))를 포함할 수 있다.
메모리(230) (예: 메모리(130))는, 예를 들면, 내장 메모리(232) 또는 외장 메모리(234)를 포함할 수 있다. 내장 메모리(232)는, 예를 들면, 휘발성 메모리(예: DRAM(dynamic RAM), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비-휘발성(non-volatile) 메모리 (예: OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), 마스크(mask) ROM, 플래시(flash) ROM, 플래시 메모리(예: 낸드플래시(NAND flash) 또는 노아플래시(NOR flash) 등), 하드 드라이브, 또는 SSD(solid state drive) 중 적어도 하나를 포함할 수 있다.
외장 메모리(234)는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD, Mini-SD, xD(extreme digital), MMC(MultiMediaCard), 또는 메모리 스틱(memory stick) 등을 더 포함할 수 있다. 외장 메모리(234)는 다양한 인터페이스를 통하여 전자 장치(201)와 기능적으로 및/또는 물리적으로 연결될 수 있다.
보안 모듈(236)은 메모리(230)보다 상대적으로 보안 레벨이 높은 저장 공간을 포함하는 모듈로서, 안전한 데이터 저장 및 보호된 실행 환경을 보장해주는 회로일 수 있다. 보안 모듈(236)은 별도의 회로로 구현될 수 있으며, 별도의 프로세서를 포함할 수 있다. 보안 모듈(236)은, 예를 들면, 탈착 가능한 스마트 칩, SD(secure digital) 카드 내에 존재하거나, 또는 전자 장치(201)의 고정 칩 내에 내장된 내장형 보안 요소(embedded secure element(eSE))를 포함할 수 있다. 또한, 보안 모듈 (236)은 전자 장치(201)의 운영 체제(OS)와 다른 운영 체제로 구동될 수 있다. 예를 들면, 보안 모듈(236)은 JCOP(java card open platform) 운영 체제를 기반으로 동작할 수 있다.
센서 모듈(240)은, 예를 들면, 물리량을 계측하거나 전자 장치(201)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(240)은, 예를 들면, 제스처 센서(240A), 자이로 센서(240B), 기압 센서(240C), 마그네틱 센서(240D), 가속도 센서(240E), 그립 센서(240F), 근접 센서(240G), 컬러 센서(240H)(예: RGB 센서), 생체 센서(240I), 온/습도 센서(240J), 조도 센서(240K), 또는 UV(ultra violet) 센서(240M) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 센서 모듈(240)은, 예를 들면, 후각 센서(E-nose sensor), EMG(electromyography) 센서, EEG(electroencephalogram) 센서, ECG(electrocardiogram) 센서, IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 센서 모듈(240)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시 예에서는, 전자 장치(201)는 프로세서(210)의 일부로서 또는 별도로, 센서 모듈(240)을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서(210)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(240)을 제어할 수 있다.
입력 장치(250)는, 예를 들면, 터치 패널(touch panel)(252), (디지털) 펜 센서(pen sensor)(254), 키(key)(256), 또는 초음파(ultrasonic) 입력 장치(258)를 포함할 수 있다. 터치 패널(252)은, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 터치 패널(252)은 제어 회로를 더 포함할 수도 있다. 터치 패널(252)은 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
(디지털) 펜 센서(254)는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 시트(sheet)를 포함할 수 있다. 키(256)는, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드를 포함할 수 있다. 초음파 입력 장치(258)는 마이크(예: 마이크(288))를 통해, 입력 도구에서 발생된 초음파를 감지하여, 상기 감지된 초음파에 대응하는 데이터를 확인할 수 있다.
디스플레이(260)(예: 디스플레이(160))는 패널(262), 홀로그램 장치(264), 또는 프로젝터(266)를 포함할 수 있다. 패널(262)은, 도 1의 디스플레이(160)와 동일 또는 유사한 구성을 포함할 수 있다. 패널(262)은, 예를 들면, 유연하게(flexible), 투명하게(transparent), 또는 착용할 수 있게(wearable) 구현될 수 있다. 패널(262)은 터치 패널(252)과 하나의 모듈로 구성될 수도 있다. 홀로그램 장치(264)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 프로젝터(266)는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 스크린은, 예를 들면, 전자 장치(201)의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 패널(262)은 사용자의 터치에 대한 압력의 세기를 측정할 수 있는 압력 센서 (또는 포스 센서)를 포함할 수 있다. 상기 압력 센서는 상기 터치 패널(252)와 일체형으로 구현되거나, 또는 상기 터치 패널(252)와는 별도의 하나 이상의 센서로 구현될 수 있다. 한 실시 예에 따르면, 디스플레이(260)는 상기 패널(262), 상기 홀로그램 장치(264), 또는 프로젝터(266)를 제어하기 위한 제어 회로를 더 포함할 수 있다.
인터페이스(270)는, 예를 들면, HDMI(272), USB(274), 광 인터페이스(optical interface)(276), 또는 D-sub(D-subminiature)(278)를 포함할 수 있다. 인터페이스(270)는, 예를 들면, 도 1에 도시된 통신 인터페이스(170)에 포함될 수 있다. 추가적으로 또는 대체적으로, 인터페이스(270)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD 카드/MMC 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
오디오 모듈(280)은, 예를 들면, 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있다. 오디오 모듈(280)의 적어도 일부 구성요소는, 예를 들면, 도 1에 도시된 입출력 인터페이스(150)에 포함될 수 있다. 오디오 모듈(280)은, 예를 들면, 스피커(282), 리시버(284), 이어폰(286), 또는 마이크(288) 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
카메라 모듈(291)은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래시(flash)(예: LED 또는 제논 램프(xenon lamp))를 포함할 수 있다.
전력 관리 모듈(295)은, 예를 들면, 전자 장치(201)의 전력을 관리할 수 있다. 한 실시 예에 따르면, 전력 관리 모듈(295)은 PMIC(power management integrated circuit), 충전 IC(charger integrated circuit), 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다. PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 배터리 게이지는, 예를 들면, 배터리(296)의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 배터리(296)는, 예를 들면, 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)를 포함할 수 있다.
인디케이터(297)는 전자 장치(201) 혹은 그 일부(예: 프로세서(210))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 모터(298)는 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동(vibration), 또는 햅틱(haptic) 효과 등을 발생시킬 수 있다. 도시되지는 않았으나, 전자 장치(201)은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(Digital Multimedia Broadcasting), DVB(Digital Video Broadcasting), 또는 미디어플로(MediaFLOTM) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 문서에서 기술된 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시 예에서, 전자 장치는 본 문서에서 기술된 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 다양한 실시 예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
도 3은 다양한 실시 예에 따른 프로그램 모듈의 블록도를 나타낸다.
한 실시 예에 따르면, 프로그램 모듈(310)(예: 프로그램(140))은 전자 장치(예: 전자 장치(101))에 관련된 자원을 제어하는 운영 체제(OS) 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션(예: 어플리케이션 프로그램(147))을 포함할 수 있다. 운영 체제는, 예를 들면, 안드로이드(android), iOS, 윈도우즈(windows), 심비안(symbian), 타이젠(tizen), 또는 바다(bada) 등이 될 수 있다.
프로그램 모듈(310)은 커널(320), 미들웨어(330), API(360), 및/또는 어플리케이션(370)을 포함할 수 있다. 프로그램 모듈(310)의 적어도 일부는 전자 장치 상에 프리로드(preload) 되거나, 외부 전자 장치(예: 전자 장치(102, 104), 서버(106) 등)로부터 다운로드 가능하다.
커널(320)(예: 커널(141))은, 예를 들면, 시스템 리소스 매니저(321) 또는 디바이스 드라이버(323)를 포함할 수 있다. 시스템 리소스 매니저(321)는 시스템 리소스의 제어, 할당, 또는 회수 등을 수행할 수 있다. 한 실시 예에 따르면, 시스템 리소스 매니저(321)는 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부 등을 포함할 수 있다. 디바이스 드라이버(323)는, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, Wi-Fi 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다.
미들웨어(330)는, 예를 들면, 어플리케이션(370)이 공통적으로 필요로 하는 기능을 제공하거나, 어플리케이션(370)이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 API(360)를 통해 다양한 기능들을 어플리케이션(370)으로 제공할 수 있다. 한 실시 예에 따르면, 미들웨어(330)(예: 미들웨어(143))는 런타임 라이브러리(335), 어플리케이션 매니저(application manager)(341), 윈도우 매니저(window manager)(342), 멀티미디어 매니저(multimedia manager)(343), 리소스 매니저(resource manager)(344), 파워 매니저(power manager)(345), 데이터베이스 매니저(database manager)(346), 패키지 매니저(package manager)(347), 연결 매니저(connectivity manager)(348), 통지 매니저(notification manager)(349), 위치 매니저(location manager)(350), 그래픽 매니저(graphic manager)(351), 보안 매니저(security manager)(352), 또는 결제 매니저(payment manager)(354) 중 적어도 하나를 포함할 수 있다.
런타임 라이브러리(335)는, 예를 들면, 어플리케이션(370)이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 런타임 라이브러리(335)는 입출력 관리, 메모리 관리, 또는 산술 함수에 대한 기능 등을 수행할 수 있다.
어플리케이션 매니저(341)는, 예를 들면, 어플리케이션(370) 중 적어도 하나의 어플리케이션의 생명 주기(life cycle)를 관리할 수 있다. 윈도우 매니저(342)는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 멀티미디어 매니저(343)는 다양한 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 리소스 매니저(344)는 어플리케이션(370) 중 적어도 어느 하나의 어플리케이션의 소스 코드, 메모리 또는 저장 공간 등의 자원을 관리할 수 있다.
파워 매니저(345)는, 예를 들면, 바이오스(BIOS: basic input/output system) 등과 함께 동작하여 배터리 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보 등을 제공할 수 있다. 데이터베이스 매니저(346은 어플리케이션(370) 중 적어도 하나의 어플리케이션에서 사용할 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 패키지 매니저(347)는 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 업데이트를 관리할 수 있다.
연결 매니저(348)는, 예를 들면, Wi-Fi 또는 블루투스 등의 무선 연결을 관리할 수 있다. 통지 매니저(349)는 도착 메시지, 약속, 근접성 알림 등의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 위치 매니저(350)는 전자 장치의 위치 정보를 관리할 수 있다. 그래픽 매니저(351)는 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 보안 매니저(352)는 시스템 보안 또는 사용자 인증 등에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(예: 전자 장치(101))가 전화 기능을 포함한 경우, 미들웨어(330)는 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager)를 더 포함할 수 있다.
미들웨어(330)는 전술한 구성요소들의 다양한 기능의 조합을 형성하는 미들웨어 모듈을 포함할 수 있다. 미들웨어(330)는 차별화된 기능을 제공하기 위해 운영 체제의 종류 별로 특화된 모듈을 제공할 수 있다. 또한, 미들웨어(330)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다.
API(360)(예: API(145))는, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼 별로 하나의 API 셋을 제공할 수 있으며, 타이젠(tizen)의 경우, 플랫폼 별로 두 개 이상의 API 셋을 제공할 수 있다.
어플리케이션(370)(예: 어플리케이션 프로그램(147))은, 예를 들면, 홈(371), 다이얼러(372), SMS/MMS(373), IM(instant message)(374), 브라우저(375), 카메라(376), 알람(377), 컨택트(378), 음성 다이얼(379), 이메일(380), 달력(381), 미디어 플레이어(382), 앨범(383), 또는 시계(384), 결제(385), 건강 관리(health care)(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보 제공(예: 기압, 습도, 또는 온도 정보 등을 제공) 등의 기능을 수행할 수 있는 하나 이상의 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 어플리케이션(370)은 전자 장치(예: 전자 장치(101))와 외부 전자 장치(예: 전자 장치(102, 104)) 사이의 정보 교환을 지원하는 어플리케이션(이하, 설명의 편의상, "정보 교환 어플리케이션")을 포함할 수 있다. 정보 교환 어플리케이션은, 예를 들면, 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 알림 전달 어플리케이션은 전자 장치의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션, 또는 환경 정보 어플리케이션 등)에서 발생된 알림 정보를 외부 전자 장치(예: 전자 장치(102, 104))로 전달하는 기능을 포함할 수 있다. 또한, 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다.
장치 관리 어플리케이션은, 예를 들면, 전자 장치와 통신하는 외부 전자 장치(예: 전자 장치(102, 104))의 적어도 하나의 기능(예: 외부 전자 장치 자체(또는 일부 구성 부품)의 턴-온/턴-오프 또는 디스플레이의 밝기(또는 해상도) 조절), 외부 전자 장치에서 동작하는 어플리케이션 또는 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스 등)를 관리(예: 설치, 삭제, 또는 업데이트)할 수 있다.
한 실시 예에 따르면, 어플리케이션(370)은 외부 전자 장치(예: 전자 장치(102, 104))의 속성에 따라 지정된 어플리케이션(예: 모바일 의료 기기의 건강 관리 어플리케이션)을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션(370)은 외부 전자 장치(예: 서버(106) 또는 전자 장치(102, 104))로부터 수신된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션(370)은 프리로드 어플리케이션(preloaded application) 또는 서버로부터 다운로드 가능한 제3자 어플리케이션(third party application)을 포함할 수 있다. 도시된 실시 예에 따른 프로그램 모듈(310)의 구성요소들의 명칭은 운영 체제의 종류에 따라서 달라질 수 있다.
다양한 실시 예에 따르면, 프로그램 모듈(310)의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어, 또는 이들 중 적어도 둘 이상의 조합으로 구현될 수 있다. 프로그램 모듈(310)의 적어도 일부는, 예를 들면, 프로세서(예: 프로세서(210))에 의해 구현(implement)(예: 실행)될 수 있다. 프로그램 모듈(310)의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트(sets of instructions) 또는 프로세스 등을 포함할 수 있다.
도 4는 일 실시 예에 따른 전자 장치의 외관을 나타낸다.
도 4를 참조하면 일 실시 예에 따른 전자 장치(401)는 디스플레이(410), 하우징(420)을 포함할 수 있다. 상기 전자 장치(401)의 내부(즉, 하우징(420)의 내부)에는 프로세서, 메모리 등 다양한 회로 또는 모듈 등이 배치될 수 있다.
다양한 실시 예에 따르면, 디스플레이(410)는 전자 장치(401)의 전면(front surface)에 배치될 수 있다. 예컨대, 디스플레이(410)는 상방향(upper direction)(제1 방향)(41)을 향한 전면(제1 면)과 하방향(lower direction)(제2 방향)(42)을 향한 후면(rear surface)(제2 면) 사이에 배치되되, 상기 전면을 통해 외부에 노출될 수 있다.
예를 들어, 상기 디스플레이(410)는 복수의 아이템(예: 텍스트, 이미지, 비디오, 아이콘, 위젯, 또는 심볼 등)을 출력하거나, 사용자로부터 터치 입력(터치, 호버링(hovering), "포스 터치" 포함)을 수신할 수 있다. 이를 위해, 디스플레이(410)는, 예를 들어, 커버 글래스, 디스플레이 패널, 터치 패널, 및/또는 압력 센서 등을 포함할 수 있다. 상기 커버 글래스, 디스플레이 패널, 터치 패널, 및/또는 압력 센서 등은 각각 서로 대응되는 면적(예: 실질적으로 동일한 면적)을 가지고 적층될 수 있다(도 5 참조).
다양한 실시 예에 따르면, 디스플레이(410)는 전자 장치(401)의 전면에 배치되되, 상기 전면에서 적어도 하나의 측면으로 더 확장될 수 있다. 예를 들어, 디스플레이(410)는 좌측 방향(43) 및/또는 우측 방향(44)으로 확장될 수 있다. 상기 디스플레이(410)는 좌측 방향(43) 및/또는 우측 방향(44)으로 확장됨으로써, 전면뿐만 아니라 좌우 측면을 통해서도 외부에 노출될 수 있다.
다양한 실시 예에 따르면, 하우징(420)은 전자 장치(401)의 외관의 적어도 일부분을 형성할 수 있다. 예컨대, 하우징(420)은 제1 방향(41)으로 향한 전면(제1 면), 및 상기 제1 방향(41)의 반대인 제2 방향(42)으로 향한 후면(제2 면)을 포함할 수 있다. 상기 제1 면과 상기 제2 면을 둘러싼 하우징(420)의 측면은 좌측 방향(left-side direction)(43)을 향한 좌측면, 우측 방향(right-side direction)(44)을 향한 우측면, 상측 방향(upper-side direction)(45)을 향한 상측면, 하측 방향(bottom-side direction)(46)을 향한 하측면을 포함할 수 있다.
상기 하우징(420)은, 전자 장치(400) 내부의 다양한 구성요소들을 외부의 충격이나 먼지로부터 보호하기 위하여 플라스틱 사출물, 도전성 소재(예: 금속), 또는 이들의 조합으로 이루어질 수 있다. 일 실시 예에 따르면, 상기 하우징(420)은 복수의 구성 요소의 외측 표면일 수 있다. 예컨대, 상기 하우징(420)의 전면은 디스플레이(410) 위에 배치되는 커버 글래스일 수 있고, 상기 하우징(420)의 후면은 전자 장치(401)의 후면 커버(back cover)일 수 있다.
도 5는 일 실시 예에 따른 디스플레이의 적층 구조를 나타낸다.
도 5를 참조하면, 일 실시 예에 따른 디스플레이의 적층 구조가 도시되어 있다. 예컨대, 상기 적층 구조는 도 4에 도시된 디스플레이(410) 에 적용될 수 있다. 따라서, 도 5에 도시된 구성들은 도 4의 전자 장치(401)의 전면(제1 면)과 후면(제2 면) 사이에 배치될 수 있다.
일 실시 예에 따른 디스플레이의 적층 구조에 있어서, 커버 글래스(510)는 디스플레이 패널(530)에 의해 생성된 빛을 투과시킬 수 있다. 상기 커버 글래스(510) 상에서 사용자는 신체의 일부(예: 손가락)를 접촉하여 "터치"(전자 펜을 이용한 접촉을 포함함)을 수행할 수 있다. 상기 커버 글래스(510)는, 예컨대, 강화 유리, 강화 플라스틱, 구부러질 수 있는(flexible) 고분자 소재 등으로 형성되어, 디스플레이 및 상기 디스플레이가 탑재된 전자 장치를 외부 충격으로부터 보호할 수 있다. 다양한 실시 예에 따르면, 상기 커버 글래스(510)는 글래스 윈도우(glass window) 또는 커버 윈도우(cover window)로도 참조될 수 있다.
터치 센서(520)에서는, 외부 물체(예: 사용자의 손가락, 전자 펜)의 접촉에 의하여 지정된 물리량(예: 전압, 광량, 저항, 전하량, 커패시턴스 등)이 변화할 수 있다. 상기 터치 센서(520)는 상기 지정된 물리량의 변화에 기반하여 디스플레이 상(예: 커버 글래스(510)의 표면 상)에 접촉한 외부 물체의 위치를 검출할 수 있다. 예를 들어, 상기 터치 센서(520)은 정전식 터치 센서, 감압식 터치 센서, 적외선 방식 터치 센서, 저항막 방식 터치 센서, 또는 피에조(piezo) 터치 센서 등을 포함할 수 있다. 다양한 실시 예에 따르면, 상기 터치 센서(520)는 구현 형태에 따라서 터치 패널 등 다양한 명칭으로 참조될 수 있다.
디스플레이 패널(530)은 적어도 하나의 콘텐트 혹은 아이템(item)(예: 텍스트, 이미지, 비디오, 아이콘, 위젯, 또는 심볼 등)을 출력할 수 있다. 상기 디스플레이 패널(530)은, 예를 들어, 액정 디스플레이(LCD) 패널, 발광 다이오드(LED) 디스플레이 패널, 유기 발광 다이오드(OLED) 디스플레이 패널, 또는 마이크로 전자기계 시스템(MEMS) 디스플레이 패널, 또는 전자 종이 디스플레이 패널을 포함할 수 있다.
본 발명의 다양한 실시 예에 따르면, 상기 디스플레이 패널(530)은 터치 센서(또는 터치 패널)(520)와 일체로 구현될 수 있다. 이 경우, 상기 디스플레이 패널(530)은 터치스크린 패널(TSP: touch screen panel), 혹은 터치스크린 디스플레이 패널로 참조될 수 있다.
압력 센서(540)는, 디스플레이(예: 커버 글래스(510)의 표면)에 접촉한 외부 물체(예: 사용자의 손가락, 전자 펜)에 의한 압력(혹은, 힘)을 검출할 수 있다. 일 실시 예에 따르면, 상기 압력 센서(540)는 제1 전극(541), 제2 전극(542), 및/또는 유전층(dielectric layer)(543)을 포함할 수 있다. 예컨대, 상기 압력 센서(540)는 상기 터치의 압력에 의해 변화하는 상기 제1 전극(541) 및 상기 제2 전극(542) 사이의 정전용량에 기초하여 상기 터치의 압력을 감지할 수 있다. 상기 압력 센서(540)의 구성에 대하여는 도 6을 참조하여 더욱 상세히 설명된다.
햅틱 액추에이터(haptic actuator)(550)는 외부 물체(예: 사용자의 손가락, 전자 펜)에 의한 터치(호버링(hovering), "포스 터치" 포함)가 수신될 때, 상기 사용자에게 촉각적 피드백(haptic feedback)(예: 진동)을 제공할 수 있다. 이를 위해 상기 햅틱 액추에이터(560)는 압전부재(Piezoelectric member) 및/또는 진동판 등을 포함할 수 있다.
앞서 설명한 도 5의 디스플레이의 적층 구조는 일례로서, 다양한 변형이 가능하다. 예를 들면, 터치 센서(520)는 커버 글래스(510)의 배면에 직접 형성될 수 있다(이른바, 커버 글래스 일체형 터치 패널). 또는, 터치 센서(520)는 별도로 제작되어 커버 글래스(510)와 디스플레이 패널(530) 사이에 삽입되거나(이른바 애드 온(add-on) 터치 패널), 디스플레이 패널(530) 위에 직접 형성될 수 있다(이른바, 온-셀(on-cell) 터치 패널). 또한, 터치 센서(520)는 디스플레이 패널(530) 내부에 포함될 수도 있다(이른바, 인-셀(in-cell) 터치 패널).
일 실시 예에 따르면, 상기 적층 구조에는 불투명 또는 투명하게 구현된 에어리어(area) 방식 지문 센서가 추가로 구비될 수도 있다.
도 6은 일 실시 예에 따른 압력 센서를 나타낸다.
도 6을 참조하면, 일 실시 예에 따른 압력 센서(640)는 제1 전극(641), 제2 전극(642), 및 유전층(643)을 포함할 수 있다. 예컨대, 압력 센서(640)는, 도 5에 도시된 압력 센서(540)에 대응될 수 있다. 도 6에 도시된 압력 센서(640)의 구성은 예시적인 것이며, 본 발명의 실시 예들은 도 6에 도시된 압력 센서(640)의 구성으로 그 권리범위가 한정되지 않는다.
일 실시 예에 따르면, 상기 제1 전극(641) 및/또는 상기 제2 전극(642)은 투명 또는 불투명하게 구현될 수 있다. 예를 들어, 제1 전극(641) 및/또는 상기 제2 전극(642)이 불투명하게 구현되는 경우, 상기 제1 전극(641) 및/또는 제2 전극(642)의 도전 부재(예: 도전 패치, 도전 와이어)는 구리(Cu), 은(Ag), 마그네슘(Mg), 티타늄(Ti), 불투명한 그래핀(graphene)으로 구현될 수 있다. 또한, 제1 전극(641) 및/또는 상기 제2 전극(642)이 투명하게 구현되는 경우, 상기 제1 전극(641) 및/또는 제2 전극(642)은 ITO(Indium Tin Oxide), IZO(Indium zinc oxide), 은 나노 와이어(Ag nanowire), 메탈 메쉬(metal mesh), 투명 고분자 전도체, 투명 그래핀으로 구현될 수 있다.
일 실시 예에 따르면, 제1 전극(641) 및/또는 제2 전극(642) 중 하나는 접지(GND) 역할을 수행하는 하나의 금속판으로 구현될 수 있다. 제1 전극(641) 및/또는 제2 전극(642) 중 다른 하나는 전술한 소재를 이용하여 반복된 다각형 패턴으로 형성될 수 있다(이른바, self-capacitance 방식). 도 6에서 상기 제1 전극(641)은 어레이 패턴(array)으로 배열된(arrange) 사각형 도전 패치로 구현되어 있으나, 본 발명의 실시 예들은 도 6에 도시된 구조에 제한되지 않는다.
또 다른 예를 들면, 제1 전극(641) 및 제2 전극(642) 중 하나(예: 송신단(Tx))는 제1 방향으로 연장된 패턴으로 형성될 수 있고, 다른 하나(예: 수신단(Rx))는 상기 제1 방향과 지정된 각도(예: 직각)으로 교차하는 제2 방향으로 연장된 패턴으로 형성될 수도 있다(이른바, mutual-capacitance 방식). 다양한 실시 예에 따르면, 상기 제1 전극(641) 및/또는 상기 제2 전극(642)은 Strain gage pattern으로 구부러진 도전 와이어로 구현될 수도 있다. 예를 들면, 제1 전극(641)은 디스플레이 패널(예: 도 5의 530)의 배면에 직접 형성될 수 있다. 또는, 제1 전극(641)은 FPCB(flexible printed circuit board) 상에 인쇄될 수 있으며, 해당 FPCB는 디스플레이 패널의 일 면에 부착될 수 있다.
유전층(643)은 지정된 커패시턴스를 가진 유전물질, 예를 들어, 실리콘 폼(foam), 실리콘 멤브레인(membrane), OCA(optical clean adhesive), 스폰지, 고무, 폴리머(예: PC(polycabonate), PET(polyethylene terephthalate) 등)으로 구현될 수 있다.
도 7은 다양한 실시 예에 따른 터치를 설명하기 위한 도면이다.
도 7을 참조하면, 본 발명의 다양한 실시 예에 따른 "터치"는 터치의 압력 및/또는 시간에 기반하여 특정될 수 있다. 상기 다양한 실시 예에 따른 "터치"는 "탭(tap)", "더블 탭(double tap)", 지정된 시간 이상의 터치 다운(이하 "롱 터치(long touch)"로 참조됨), 포스 터치 등을 포함할 수 있다. 또한, 다양한 실시 예에 따르면, 상기 포스 터치는 "약한 포스 터치", "약한 포스 롱 터치", "강한 포스 터치", 및 "강한 포스 롱 터치"를 포함할 수 있다. 본 문서에서 개시되는 각 실시 예는 상기 용어들을 이용하여 설명될 수 있다.
본 발명의 다양한 실시예에 따라, 곡선(curve) 70-A를 참조하면, 비교적 짧은 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 이산적인 압력 P1 (제1 레벨 또는 제1 압력 레벨로 참조될 수 있음) 보다 작은 압력을 가진 터치를 검출(혹은 감지)할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-A에 대응하는 터치를 단순 "탭"으로 인식 (혹은 특정)할 수 있다. 다양한 실시 예에 따르면 상기 곡선 70-A에 의해 선택되는 압력 레벨은 제0 압력 레벨(혹은 디폴트(default) 압력 레벨)로 이해될 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-B를 참조하면, 비교적 짧은 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 압력 P1보다 작은 압력을 가진 터치를 2회 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-B에 대응하는 터치를 "더블 탭"으로 인식할 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-C를 참조하면, 지정된 시간 t1보다 긴 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 압력 P1보다 작은 압력을 가진 터치를 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-C에 대응하는 터치를 "롱 터치"로 인식할 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-D를 참조하면, 비교적 짧은 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 이산적인 압력 P1보다 크고 이산적인 압력 P2 (제2 레벨 또는 제2 압력 레벨로 참조될 수 있음; 이때 P2 > P1) 보다 작은 압력을 가진 터치를 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-D에 대응하는 터치를 "약한 포스 터치"로 인식할 수 있다. 다양한 실시 예에 따르면 상기 곡선 70-D에 의해 선택되는 압력 레벨은 제1 압력 레벨(P1)로 이해될 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-E를 참조하면, 지정된 시간 t1보다 긴 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 압력 P1보다 크고 압력 P2보다 작은 압력을 가진 터치를 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-E에 대응하는 터치를 "약한 포스 롱 터치"로 인식할 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-F를 참조하면, 비교적 짧은 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 압력 P2 (P2 > P1)보다 큰 압력을 가진 터치를 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-F에 대응하는 터치를 "강한 포스 터치"로 인식할 수 있다. 다양한 실시 예에 따르면 상기 곡선 70-F에 의해 선택되는 압력 레벨은 제2 압력 레벨(P2)로 이해될 수 있다.
본 발명의 다양한 실시예에 따라, 곡선 70-G를 참조하면, 지정된 시간 t1보다 긴 시간 동안, 터치 센서(예: 도 5의 540, 도 6의 640)는 압력 P2보다 큰 압력을 가진 터치를 검출할 수 있다. 이 경우, 전자 장치는 상기 곡선 70-G에 대응하는 터치를 "강한 포스 롱 터치"로 인식할 수 있다.
전술한 다양한 유형의 "터치"는 곡선 70-A 내지 70-G에서 설명된 예에 제한되지 않는다. 예컨대, 상기 다양한 유형의 "터치"는 3회의 이상의 터치를 포함하는 이른바 "트리플 터치"를 포함할 수 있다. 또 다른 예를 들면, 압력 P2보다 더 높은 압력 P3가 설정된 경우, 상기 압력 P3를 초과하는 압력을 가진 터치는 매우 강한 포스 터치로 인식될 수도 있다. 이와 같은 다양한 유형의 "터치"들에 적어도 기반하여 본 명세서에서 개시되는 다양한 실시 예들이 수행될 수 있다.
도 8은 일 실시 예에 따른 전자 장치의 블록도를 나타낸다.
도 8을 참조하면, 일 실시 예에 따른 전자 장치(801)는 디스플레이 패널(810), 디스플레이 구동 회로(DDI; display driving IC)(815), 터치 센서(820), 터치 센서 IC(825), 압력 센서(830), 압력 센서 IC(835), 햅틱 액추에이터(840), 메모리(850), 및 프로세서(860)를 포함할 수 있다. 도 8에서, 도 1 내지 도 5에서 설명한 구성들과 동일한 구성들에 대한 중복된 설명은 생략될 수 있다.
디스플레이 패널(810)은 디스플레이 구동 회로(DDI)(815)로부터 공급받은 영상 구동 신호를 수신할 수 있다. 디스플레이 패널(810)은 상기 영상 구동 신호에 기반하여 다양한 컨텐츠 및/또는 아이템(예: 텍스트, 이미지 (객체), 비디오, 아이콘, 기능 객체(functional object)), 또는 심볼 등)을 표시할 수 있다. 본 문서에 있어서, 디스플레이 패널(810)은 터치 센서(820), 및/또는 압력 센서(830)와 중첩적으로 결합될 수 있으며(예: 도 5 참조), 단순히 "디스플레이"로 참조될 수도 있다.
디스플레이 구동 회로(DDI)(815)는 프로세서(860)(호스트)로부터 수신한 영상 정보에 대응하는 영상 구동 신호를 미리 설정된 프레임률(frame rate)로 디스플레이 패널(810)에 공급할 수 있다. 도시하지는 않았으나, 다양한 실시 예에 따르면, 디스플레이 구동 회로(815)는 그래픽 램, 인터페이스 모듈, 이미지 프로세싱 유닛(image processing unit), 멀티플렉서(multiplexer), 디스플레이 타이밍 컨트롤러(display timing controller; T-con), 소스 드라이버, 게이트 드라이버, 및/또는 발진기(oscillator) 등을 포함할 수 있다.
터치 센서(820)는 사용자가 커버 글래스(예: 도 5의 510)를 터치함에 따라 변화하는 물리량(예: 전압, 광량, 저항, 전하량, 커패시턴스 등)을 감지할 수 있다. 일 실시 예에 따르면, 상기 터치 센서(820)는 디스플레이 패널(810)과 중첩적으로 배치될 수 있다.
터치 센서 IC(825)는 상기 물리량의 변화를 감지하고, 상기 물리량(예: 전압, 저항, 커패시턴스 등)의 변화에 기반하여 터치가 이루어진 위치(X,Y)를 산출할 수 있다. 상기 산출된 위치 (좌표)는 프로세서(860)에 제공(혹은 보고(report))될 수 있다.
본 발명의 다양한 실시 예에 따라, 사용자의 신체 일부(예: 손가락) 또는 전자 펜 등이 디스플레이의 커버 글래스(예: 도 5의 510)에 접촉하면, 터치 센서(820)에 포함된 송신단(Tx) 및/또는 수신단(Rx) 사이의 커플링 전압이 변화할 수 있다. 예를 들어, 상기 커플링 전압의 변화는 터치 센서 IC(825)에 의해 감지될 수 있고, 상기 터치 센서 IC(825)는 상기 터치가 이루어진 위치의 좌표(X,Y)를 프로세서(860)로 전달할 수 있다. 상기 프로세서(860)는 상기 좌표(X,Y)에 관한 데이터를 사용자 입력에 관한 이벤트로서 획득할 수 있다.
터치 센서 IC(825)는 터치 IC, 터치 스크린 IC, 터치 컨트롤러, 또는 터치 스크린 컨트롤러 IC 등으로 참조될 수 있다. 다양한 실시 예에 따르면, 상기 터치 센서 IC(825)가 포함되지 않은 전자 장치에서는, 상기 프로세서(860)가 상기 터치 센서 IC(825)의 역할을 수행할 수도 있다. 다양한 실시 예에 따르면, 상기 터치 센서 IC(825)와 상기 프로세서(860)는 일 구성(예: one-chip)으로 구현될 수도 있다.
압력 센서(830)는 외부 물체(예: 손가락, 전자 펜)에 의한 압력(혹은, 힘)을 감지할 수 있다. 일 실시 예에 따르면, 상기 압력 센서(830)는, 상기 터치에 의해 송신단(Tx)(예: 도 6의 제1 전극(641)) 및 수신단(Rx)(도 6의 제2 전극(642)) 사이의 물리량(예: 정전용량)의 변화에 기초하여 상기 압력을 감지할 수 있다.
압력 센서 IC(835)는 압력 센서(830)에서의 물리량(예: 정전용량 등)의 변화를 감지하고, 상기 물리량의 변화에 기반하여 사용자의 터치에 의해 가해진 압력(Z)를 산출할 수 있다. 상기 압력(Z)은 터치가 이루어진 위치(X,Y)와 함께 프로세서(860)에 제공될 수 있다.
다양한 실시 예에 따르면, 압력 센서 IC(835)는 포스 터치 컨트롤러, 포스 센서 IC, 또는 압력 패널 IC 등으로 참조될 수 있다. 또한, 다양한 실시 예에 따르면, 상기 압력 센서 IC(835)는 터치 센서 IC(825)와 일 구성(예: one-chip)으로 구현될 수도 있다.
햅틱 액추에이터(840)는 프로세서(860)의 제어 명령에 따라서 상기 사용자에게 촉각적 피드백(예: 진동)을 제공할 수 있다. 예를 들어, 햅틱 액추에이터(840)는, 사용자로부터 터치 입력(예: 터치, 호버링, 포스 터치 포함)이 수신될 때, 상기 사용자에게 촉각적 피드백을 제공할 수 있다.
메모리(850)는 전자 장치(801)에 포함된 구성요소의 동작과 연관된 명령 또는 데이터를 저장할 수 있다. 본 발명의 다양한 실시 예에 따라, 메모리(850)는, 복수의 아이템을 디스플레이에 표시하도록 설정된 사용자 인터페이스를 포함한 적어도 하나의 어플리케이션 프로그램을 저장할 수 있다. 예를 들어, 메모리(850)는, 실행 시에, 프로세서(860)가 본 문서에 기재된 다양한 동작(예: 도 9a, 도 9b 등)을 수행할 수 있도록 하는 명령어(instructions)를 저장할 수 있다.
프로세서(860)는 예를 들면, 전자 장치(801)에 포함된 구성요소들(810-850)과 전기적으로 연결될 수 있다. 프로세서(860)는 전자 장치(801)에 포함된 구성요소들(810-850)의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
일 실시 예에 따르면, 프로세서(860)는 디스플레이(810)에 사용자 인터페이스를 표시하는 어플리케이션 프로그램(혹은, 단순히 "어플리케이션"으로 참조될 수 있음)을 런칭(launching) (혹은, 실행)할 수 있다. 상기 프로세서(860)는 상기 어플리케이션의 런칭에 응답하여 디스플레이(810)에 표시된 사용자 인터페이스에 상기 복수의 아이템의 배열(array)을 표시할 수 있다.
프로세서(860)는 터치 센서(820)로부터 생성된 제1 데이터(터치의 위치 좌표(X,Y)를 포함하는 데이터)를 수신할 수 있다. 또한, 프로세서(860)는 압력 센서(830)로부터 생성된 제2 데이터(터치의 압력(Z)을 포함하는 데이터)를 수신할 수 있다. 프로세서(860)는 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하고, 상기 제2 데이터에 적어도 기반하여 복수의 이산적 압력 레벨(예: 도 7의 P1, P2) 중 하나를 선택할 수 있다. 프로세서(860)는 상기 선택된 복수의 압력 레벨 중 하나의 압력 레벨에 적어도 기반하여, 상기 선택된 아이템과 연관된 복수 세트의 정보 중 하나를 디스플레이에 표시할 수 있다.
본 발명의 다양한 실시예에 따라, 프로세서(860)는 상기 제1 레벨이 선택되면 상기 복수 세트의 정보 중 제1 세트의 정보를 상기 디스플레이에 표시할 수 있다. 프로세서(860)는 상기 제2 레벨이 선택되면 상기 복수 세트의 정보 중 제2 세트의 정보를 상기 디스플레이에 표시할 수 있다. 본 발명의 다양한 실시예에 따르면, 상기 제2 세트의 정보는 상기 제1 세트의 정보보다 더 많은 정보를 포함할 수 있다.
일 실시 예에 따르면, 프로세서(860)는 디스플레이(810)에 복수의 아이템을 출력할 수 있다. 예를 들어, 상기 복수의 아이템은 아이콘, 이미지 객체, 텍스트(또는 텍스트 객체), 또는 지정된 동작을 실행시키기 위한 기능 객체를 포함할 수 있다. 프로세서(860)는 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고, 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다. 프로세서(860)는 상기 검출된 터치의 압력 레벨에 응답하여, 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시할 수 있다.
상기 설명된 프로세서(860)의 동작은 일례로서, 전술한 기재에 제한되지 않는다. 예컨대, 이하 본 문서의 다른 부분에 기재된 프로세서의 동작도 상기 프로세서(860)의 동작으로 이해될 수 있다. 또한, 본 문서에서, "전자 장치"의 동작으로 기재된 동작들 중 적어도 일부도 프로세서(860)의 동작으로 이해될 수 있다.
일 실시 예에 따른 전자 장치는, 제1 방향으로 향한 제1 면, 및 상기 제1 방향의 반대인 제2 방향으로 향한 제2 면을 포함하는 하우징, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 제1 면을 통해 노출된 디스플레이, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 디스플레이 상의 외부 물체에 의한 터치의 적어도 하나의 위치를 검출하는 터치 센서, 상기 제1 면과 상기 제2 면 사이에 배치되되, 상기 디스플레이에 대한 상기 외부 물체에 의한 압력을 검출하는 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 복수의 아이템을 상기 디스플레이에 표시하도록 설정된 사용자 인터페이스를 포함한 적어도 하나의 어플리케이션 프로그램을 저장하며, 실행 시에, 상기 프로세서가, 상기 디스플레이에 상기 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭(launching)하고, 상기 사용자 인터페이스에 상기 복수의 아이템의 배열(array)을 표시하고, 상기 터치 센서로부터 생성된 제1 데이터를 수신하고, 상기 압력 센서로부터 생성된 제2 데이터를 수신하고, 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하고, 상기 제2 데이터에 적어도 기반하여 복수의 압력 레벨 중 하나를 선택하고, 및 상기 선택된 상기 복수의 압력 레벨 중 하나에 적어도 기반하여, 상기 선택된 상기 복수의 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 압력 레벨은, 이산적인 제1 레벨 및 상기 제1 레벨보다 높은 이산적인 제2 레벨을 포함할 수 있다. 상기 인스트럭션들은 상기 프로세서가, 상기 제1 레벨이 선택되면 상기 복수 세트의 정보 중 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 제2 레벨이 선택되면 상기 복수 세트의 정보 중 제2 세트의 정보를 상기 디스플레이에 표시 포함하도록 하는 인스트럭션을 포함할 수 있다. 상기 제2 세트의 정보는 상기 제1 세트의 정보보다 더 많은 정보를 포함할 수 있다.
일 실시 예에 따른 전자 장치는, 디스플레이, 터치 센서, 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 디스플레이에 복수의 아이템을 표시하고, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고, 상기 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하고, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 입력 쿼리(input query), 및 상기 입력 쿼리에 대한 검색 결과를 요청(request)하도록 설정된 기능 객체(functional object)를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 입력 쿼리의 제1 검색 결과를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 입력 쿼리의 제2 검색 결과를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 입력 쿼리의 제3 검색 결과를 포함하는 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
예를 들면, 상기 제1 검색 결과는, 적어도 하나의 카테고리를 포함한 카테고리 목록(category list)을 포함할 수 있다. 또 다른 예를 들면, 상기 제2 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템을 포함할 수 있다. 또 다른 예를 들면, 상기 제3 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템 중, 상기 입력 쿼리와 연관성이 가장 높은 아이템의 상세 정보를 포함할 수 있다.
예를 들면, 상기 제1 검색 결과는 상기 입력 쿼리가 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또 다른 예를 들면, 상기 제2 검색 결과는 상기 입력 쿼리가 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또 다른 예를 들면, 상기 제3 검색 결과는 상기 입력 쿼리가 제3 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 이때 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높고, 상기 제3 레벨의 정확도보다 낮게 설정될 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 텍스트를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 텍스트를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 텍스트를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 텍스트를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
예를 들면, 상기 텍스트는 이메일 어플리케이션의 실행 화면에 포함될 수 있다. 이때, 상기 제1 세트의 정보는 상기 텍스트가 메일 제목(title)에 포함되어 있는 메일 목록을 포함할 수 있다. 상기 제2 세트의 정보는 상기 텍스트가 상기 메일 제목 또는 메일 본문(body)에 포함된 메일 목록을 포함할 수 있다.
또 다른 예를 들면, 상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함될 수 있다. 이때, 상기 제1 세트의 정보는 상기 텍스트가 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 상기 제2 세트의 정보는 상기 텍스트가 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높을 수 있다.
또 다른 예를 들면, 상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함될 수 있다. 상기 제1 세트의 정보는 상기 텍스트의 상기 전자 장치 내 검색 결과를 포함하고, 상기 제2 세트의 정보는 상기 텍스트의 웹 검색 결과를 포함할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 이미지 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 이미지 객체를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제1 레벨로 유사한 이미지 객체를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제2 레벨로 유사한 이미지 객체를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다. 이때, 상기 제2 레벨의 유사도는 상기 제1 레벨의 유사도보다 높게 설정될 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 지정된 어플리케이션의 아이콘을 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 아이콘을 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 지정된 어플리케이션의 실행 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다. 이때, 상기 제3 세트의 정보의 정보량은, 상기 제2 세트의 정보의 정보량보다 더 많을 수 있다. 또한, 상기 제2 세트의 정보 또는 상기 제3 세트의 정보는, 상기 지정된 어플케이션의 알림(notification) 정보를 포함할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 지정된 기능 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 지정된 기능 객체를 선택하고, 상기 검출된 터치의 압력이 제1 압력 레벨 이하이면 상기 지정된 기능 객체에 링크되어 있는 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은, 지정된 어플리케이션의 실행 화면에 포함된 기능 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고, 상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면, 상기 기능 객체를 포함한 상기 실행 화면을 제1 레이아웃으로 구성한 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 객체를 포함한 상기 실행 화면을 제2 레이아웃으로 구성한 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
도 9a는 일 실시 예에 따른 정보 제공 방법을 나타낸다.
도 9a를 참조하면, 일 실시 예에 따른 정보 제공 방법은 동작 901 내지 911을 포함할 수 있다. 상기 동작 901 내지 911은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 901 내지 911의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하 도 8의 참조부호를 이용하여 동작 901 내지 911을 설명하도록 한다.
동작 901에서 전자 장치(801)의 프로세서(860)는 디스플레이(810)에 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭 (혹은 실행)할 수 있다. 예컨대, 상기 프로세서(860)는 상기 어플리케이션 프로그램에 포함된 액티비티(activity)에 따라서 상기 사용자 인터페이스를 디스플레이(810)에 렌더링(rendering)할 수 있다.
동작 902에서 프로세서(860)는 사용자 인터페이스에 복수의 아이템(예: 아이콘, 이미지 (객체), 텍스트 (객체), 기능 객체)의 배열을 표시할 수 있다. 예를 들면, 상기 복수의 아이템은 상기 사용자 인터페이스와 동시에 이루어질 수 있다.
동작 903에서 프로세서(860)는 터치 센서(820)로부터 생성된 제1 데이터를 수신할 수 있다. 상기 제1 데이터는 외부 물체(예: 사용자의 손가락, 전자 펜)에 의한 터치의 위치 정보를 포함할 수 있다.
동작 905에서 프로세서(860)는 압력 센서(830)로부터 생성된 제2 데이터를 수신할 수 있다. 상기 제2 데이터는 외부 물체에 의한 터치의 압력(혹은 힘)에 관한 정보를 포함할 수 있다.
다양한 실시 예에 따르면, 동작 903과 동작 905는 별개의 동작으로 기재되어 있으나, 프로세서(860)는 상기 제1 데이터 및 상기 제2 데이터를 상기 외부 물체에 의한 터치에 응답하여 실질적으로 동시에 터치 센서(820) 및 압력 센서(830)로부터 수신할 수 있다.
동작 907에서 프로세서(860)는 상기 제1 데이터에 기반하여 복수의 아이템 중 하나를 선택할 수 있다. 즉, 프로세서(860)는 상기 외부 물체가 터치한 위치 정보(예: 좌표)에 적어도 기반하여 디스플레이(810)에 표시된 복수의 아이템 중 하나를 선택할 수 있다.
동작 909에서 프로세서(860)는 상기 제2 데이터에 기반하여 복수의 압력 레벨 중 하나를 선택할 수 있다. 프로세서(860)는 상기 외부 물체에 의한 터치의 압력에 기반하여 도 7에 도시된 다양한 유형의 터치 중 하나를 선택할 수 있다.
동작 911에서 프로세서(860)는 동작 909에서 선택된 압력 레벨 중 적어도 하나에 기반하여, 상기 선택된 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 터치의 압력의 강약에 따라서 상이한 세트의 정보를 디스플레이(810)에 표시할 수 있다.
도 9b는 또 다른 실시 예에 따른 정보 제공 방법을 나타낸다.
도 9b를 참조하면, 일 실시 예에 따른 정보 제공 방법은 동작 902 내지 908을 포함할 수 있다. 상기 동작 902 내지 908은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 902 내지 908의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 도 9a에서와 마찬가지로 도 8의 참조부호를 이용하여 동작 902 내지 908을 설명하도록 한다.
동작 902에서 전자 장치(801)의 프로세서(860)는 디스플레이(810)에 복수의 아이템(예: 아이콘, 이미지 (객체), 텍스트 (객체), 기능 객체)을 출력할 수 있다. 예컨대, 상기 복수의 아이템은 다양한 유형의 어플리케이션(예: 홈 어플리케이션, 이메일 어플리케이션, 브라우저 어플리케이션, 검색 어플리케이션 등)의 실행 화면에 포함될 수 있다.
동작 904에서 상기 프로세서(860)는 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택할 수 있다.
동작 906에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다. 다양한 실시 예에 따르면, 동작 904과 동작 906는 별개의 동작으로 기재되어 있으나, 프로세서(860)는 적어도 하나의 아이템의 선택 및 상기 압력 레벨의 검출을 실질적으로 동시에 수행할 수 있다.
동작 908에서 상기 프로세서(860)는 동작 906에서 검출된 터치의 압력 레벨에 응답하여, 동작 904에서 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 디스플레이(810)에 표시할 수 있다.
도 9a 및 도 9b에서는 본 발명의 일 실시 예에 따른 전자 장치의 동작을 설명하였다. 이하에서는, 도 10 내지 도 28을 참조하여, 본 발명의 다양한 실시 예에 따른 전자 장치의 동작을 구체적인 예를 들어 설명하기로 한다. 상기 도 10 내지 도 28의 설명에 있어서 도 9a 및 도 9b와 중복된 설명은 생략될 수 있다.
도 10은 일 실시 예에 따른 입력 쿼리의 검색 결과 제공 방법을 나타낸다.
도 10을 참조하면, 일 실시 예에 따른 입력 쿼리(혹은, 검색 쿼리)의 검색 결과 제공 방법은 동작 1001 내지 1013을 포함할 수 있다. 상기 동작 1001 내지 1013은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 1001 내지 1013의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 도 8의 참조부호를 이용하여 동작 1001 내지 1013을 설명하도록 한다.
동작 1001에서 전자 장치(801)의 프로세서(860)는 복수의 아이템을 디스플레이(810)에 표시할 수 있다. 예를 들어, 상기 복수의 아이템은, 입력 쿼리(input query) 및 상기 입력 쿼리에 대한 검색 결과(retrieve result 또는 search result)를 요청(request)하도록 설정된 기능 객체를 포함할 수 있다.
본 발명의 다양한 실시예에 따라, 상기 입력 쿼리는 사용자가 입력한 텍스트, 이미지, 음성 등을 포함할 수 있다. 예를 들면, 상기 검색 결과를 요청하도록 설정된 기능 객체는, 상기 검색 쿼리를 확정(confirm)하기 위한 키(또는, 버튼)을 포함할 수 있다. 이 외에도, 상기 검색 결과를 요청하도록 설정된 기능 객체는, 예를 들어, 장치 내 검색 어플리케이션의 실행 화면, 웹 검색 어플리케이션의 실행 화면, 또는 검색 사업자의 웹 페이지를 표시한 브라우저 어플리케이션의 실행 화면에 포함된 검색 키(혹은 검색 버튼)을 포함할 수도 있다.
동작 1003에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 검색 결과를 요청하도록 설정된 기능 객체를 선택할 수 있다.
동작 1005에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다. 도 10에서 동작 1003과 동작 1005는 별개의 동작으로 기재되어 있으나, 상기 프로세서(860)는 상기 터치에 응답하여 실질적으로 동시에 동작 1003과 동작 1005를 수행할 수도 있다.
동작 1007에서 상기 프로세서(860)는 동작 1005에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 1009로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2) 이하(혹은 미만)이면 동작 1011로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 1013으로 진행할 수 있다.
동작 1009에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로, 상기 입력 쿼리의 제1 검색 결과를 포함하는 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "탭"인 경우 상기 입력 쿼리의 제1 검색 결과를 포함하는 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다.
상기 제1 검색 결과는, 예를 들면, 상기 입력 쿼리가 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또한, 일 예를 들면, 상기 입력 쿼리의 제1 검색 결과는 적어도 하나의 카테고리(혹은, 도메인(domain))를 포함한 카테고리 목록(category list)을 포함할 수 있다.
동작 1011에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 입력 쿼리의 제2 검색 결과를 포함하는 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 입력 쿼리의 제2 검색 결과를 포함하는 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
상기 제2 검색 결과는, 예를 들면, 상기 입력 쿼리가 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 이때, 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높을 수 있다. 또한, 일 예를 들면, 상기 제2 검색 결과는 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템을 포함할 수 있다. 상기 입력 쿼리와의 연관성이 가장 높은 카테고리는, 예컨대, 상기 제1 검색 결과에 포함된 카테고리 목록에 포함된 것일 수 있다.
동작 1013에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제2 압력 레벨보다 크므로, 상기 입력 쿼리의 제3 검색 결과를 포함하는 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 입력 쿼리의 제3 검색 결과를 포함하는 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다.
상기 제3 검색 결과는, 예를 들어, 상기 입력 쿼리가 제3 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 이때, 상기 제3 레벨의 정확도는 상기 제2 레벨의 정확도보다 높을 수 있다. 일 예를 들면, 상기 제3 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템 중, 상기 입력 쿼리와 연관성이 가장 높은 아이템의 상세 정보를 포함할 수 있다. 상기 입력 쿼리와 연관성이 가장 높은 아이템은, 예컨대, 상기 제2 검색 결과에 포함된 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 포함된 아이템 중 하나일 수 있다.
본 발명의 다양한 실시 예에 따르면, 동작 1007에서 판단된 터치의 압력 변동에 따라서 동작 1009, 1011, 또는 1013는 실시간으로 전환될 수 있다. 예를 들어, 프로세서(860)는 사용자로부터의 터치의 압력이 제1 압력 레벨보다 낮은 상태에서는 동작 1009를 수행할 수 있다. 프로세서(860)는 (터치 릴리즈가 이루어지지 않은 상태에서) 상기 터치의 압력이 점차 증가하여 상기 제1 압력 레벨보다 커지면 동작 1011을 수행할 수 있다. 프로세서(860)는 상기 터치의 압력이 더 증가하여 상기 제2 압력보다 커지면 동작 1013을 수행할 수 있다. 터치의 압력이 하강하는 경우에도 유사하게, 상기 터치의 압력의 하강에 응답하여 동작 1009, 1011, 또는 1013은 실시간으로 상호 전환될 수 있다.
도 11은 일 실시 예에 따른 입력 쿼리의 검색 결과 제공 방법을 설명하기 위한 도면이다.
도 11을 참조하면, 일 실시 예에 따른 입력 쿼리의 검색 결과 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 검색 어플리케이션 (또는, 검색 엔진 웹 페이지를 출력한 브라우저 어플리케이션)을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 화면 1100이 표시될 수 있다. 사용자는 예를 들어, 상기 화면 1100에 표시된 소프트 키보드(1151)를 이용하여 입력 쿼리(예: "hotel")를 입력할 수 있다. 이후 사용자는 상기 입력 쿼리에 대한 검색 결과를 요청하도록 설정된 기능 객체(1152)(예: 검색 키)를 터치(11)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(11)의 위치에 기반하여 상기 기능 객체(1152)를 선택하고, 압력 센서를 이용하여 상기 터치(11)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(11)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 입력 쿼리(예: "hotel")가 제1 레벨의 정확도로 검색된 제1 검색 결과 화면 1101을 디스플레이에 표시할 수 있다. 예를 들어, 상기 제1 검색 결과는 복수의 카테고리(예: "TOP HITS", "GOOGLE MAPS", "TURBOSCAN")를 포함한 카테고리 목록을 포함할 수 있다. 예를 들어, "TOP HITS" 카테고리에는 하나의 아이템 1111이 포함될 수 있고, "GOOGLE MAPS" 카테고리에는 3개의 아이템 1112-1114가 포함될 수 있으며, "TURBOSCAN" 카테고리에는 하나의 아이템 1115가 포함될 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(11)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면 상기 입력 쿼리가 제2 레벨의 정확도로 검색된 제2 검색 결과 화면 1102을 디스플레이에 표시할 수 있다. 예를 들어, 상기 터치(11)의 압력이 제1 압력 레벨 이하에서 상기 제1 압력 레벨 이상으로 증가하면 상기 제2 검색 결과 화면 1102이 디스플레이에 출력될 수 있다. 이때, 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높을 수 있다. 예를 들어, 상기 제2 검색 결과에는 상기 입력 쿼리와의 연관성이 가장 높은 카테고리(예: "GOOGLE MAPS")에 속한 아이템들 1112-1114가 가장 위에 표시될 수 있다. 도 11의 제2 검색 결과 화면 1102에는, "TOP HITS" 카테고리에 속한 아이템 1111, 및 "TURBOSCAN" 카테고리에 속한 아이템 1115이 도시되어 있으나, 다양한 실시 예에 따르면, 상기 아이템들 1111, 1115는 제2 검색 결과 화면 1102에서 배제될 수도 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(11)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 상기 입력 쿼리가 제3 레벨의 정확도로 검색된 제3 검색 결과 화면 1103을 디스플레이에 표시할 수 있다. 예를 들어, 상기 터치(11)의 압력이 제1 압력 레벨 또는 제2 압력 레벨 이하에서 상기 제2 압력 레벨 이상으로 증가하면 상기 제3 검색 결과 화면 1103이 디스플레이에 출력될 수 있다. 이때, 상기 제3 레벨의 정확도는 상기 제2 레벨의 정확도보다 높을 수 있다. 예를 들어, 상기 제3 검색 결과는 상기 입력 쿼리(예: "hotel")와의 연관성이 가장 높은 카테고리(예: "GOOGLE MAPS")에 속한 아이템들 1112-1114 중, 상기 입력 쿼리(예: "hotel")와 연관성이 가장 높은 아이템 1113의 상세 정보 1123을 포함할 수 있다.
도 12는 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 12를 참조하면, 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법은 동작 1201 내지 1213을 포함할 수 있다. 상기 동작 1201 내지 1213은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 1201 내지 1213의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 동작 1201 내지 1213의 설명에 도 8의 참조부호를 이용한다.
동작 1201에서 전자 장치(801)의 프로세서(860)는 복수의 아이템을 디스플레이(810)에 표시할 수 있다. 예를 들어, 상기 복수의 아이템은 텍스트를 포함할 수 있다. 예를 들어, 상기 텍스트는, 어플리케이션(예: 이메일 어플리케이션, 이북 어플리케이션, 브라우저 어플리케이션 등)의 실행 화면에 포함된 적어도 하나의 알파벳(alphabet), 단어(word), 구(phrase), 절(clause), 문장(sentence), 또는 단락(paragraph)을 포함할 수 있다. 또한, 다양한 실시 예에 따르면, 상기 텍스트는 지정된 화면(혹은 콘텐트)이 링크된 하이퍼텍스트를 포함할 수 있다.
동작 1203에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 텍스트를 선택 혹은 특정할 수 있다. 이때, 상기 프로세서(860)는 상기 텍스트를 강조할 수도 있다.
동작 1205에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 1207에서 상기 프로세서(860)는 동작 1205에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 1209로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2)보다 이하(혹은 미만)이면 동작 1211로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 1213으로 진행할 수 있다.
동작 1209에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로, 예를 들어, 상기 선택된 텍스트를 홀드(hold)할 수 있다. 예를 들면, 상기 홀드는 상기 제1 압력 레벨 이하의 터치에 이어서 수행될 수도 있는 터치 스크롤링의 시작점을 제공할 수 있다. 한편, 프로세서(860)는, 상기 텍스트가 하이퍼텍스트인 경우, 상기 제1 압력 레벨 이하의 터치에 응답하여 상기 하이퍼텍스트에 링크된 화면을 디스플레이(810)에 표시할 수도 있다.
동작 1211에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 텍스트를 포함하는 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 예를 들어, 상기 선택된 텍스트가 이메일 어플리케이션의 실행 화면에 포함된 경우, 상기 제1 세트의 정보는 상기 텍스트가 메일 제목(title)에 포함되어 있는 메일들의 목록을 포함할 수 있다. 일 실시 예에 따르면, 상기 선택된 텍스트가 브라우저 어플리케이션 또는 이북(e-book) 어플리케이션의 실행 화면에 포함된 경우, 상기 제1 세트의 정보는 상기 텍스트가 (비교적 낮은) 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또 다른 예를 들어, 상기 선택된 텍스트가 브라우저 어플리케이션 또는 이북 어플리케이션의 실행 화면에 포함된 경우, 상기 제1 세트의 정보는 상기 텍스트의 제1 검색 범위(예: 전자 장치(801)의 메모리(850)) 내에서의 검색 결과를 포함할 수 있다.
동작 1213에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제2 압력 레벨보다 크므로, 상기 텍스트를 포함하는 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 텍스트를 포함하는 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 예를 들어, 상기 선택된 텍스트가 이메일 어플리케이션의 실행 화면에 포함된 경우, 상기 제2 세트의 정보는 상기 텍스트가 메일 제목 및/또는 메일 본문(body)에 포함되어 있는 메일들의 목록을 포함할 수 있다. 일 실시 예에 따르면, 상기 선택된 텍스트가 브라우저 어플리케이션 또는 이북 어플리케이션의 실행 화면에 포함된 경우, 상기 제2 세트의 정보는 상기 텍스트가 (비교적 높은) 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 이때, 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높게 설정될 수 있다. 또 다른 예를 들어, 상기 선택된 텍스트가 브라우저 어플리케이션 또는 이북 어플리케이션의 실행 화면에 포함된 경우, 상기 제2 세트의 정보는 상기 텍스트의 제2 검색 범위(예: 인터넷) 내에서의 검색 결과(웹 검색 결과)를 포함할 수 있다.
도 13a 및 도 13b는 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 13a를 참조하면, 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 이메일 어플리케이션을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 메일 목록을 포함하는 화면 1300a가 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 1300a에 표시된 복수의 아이템들 중 특정 텍스트(1310a)(예: courses)를 터치(13a)할 수 있다. 이때, 상기 특정 텍스트(1310a)는 강조될 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(13a)의 위치에 기반하여 상기 특정 텍스트(1310a)(예: courses)를 선택하고, 압력 센서를 이용하여 상기 터치(13a)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(13a)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 터치(13a)가 이루어진 위치에 대응하는 메일의 상세를 새로운 화면으로 출력할 수 있다(미도시).
또 다른 예를 들어, 전자 장치는, 상기 터치(13a)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 1302a에 도시된 바와 같이, 메일 제목에 상기 특정 텍스트(1310a)(예: courses)를 포함하는 메일들을 목록으로 표시할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(13a)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 메일 제목 및/또는 메일 본문에 상기 특정 텍스트(1310a)(예: courses)를 포함하는 메일들을 목록으로 표시할 수 있다(화면 1303a 참조).
한편, 도 13b를 참조하면, 일 실시 예에 따른 텍스트에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 이메일 어플리케이션을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 메일 목록을 포함하는 화면 1300b가 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 1300b에 표시된 복수의 아이템들 중 특정 텍스트(1310b)(예: courses)를 터치(13b)할 수 있다. 이때, 상기 특정 텍스트(1310b)는 강조될 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(13b)의 위치에 기반하여 상기 특정 텍스트(1310b)(예: courses)를 선택하고, 압력 센서를 이용하여 상기 터치(13b)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(13b)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 터치(13b)가 이루어진 위치에 대응하는 메일의 상세를 새로운 화면으로 출력할 수 있다(미도시).
또 다른 예를 들어, 전자 장치는, 상기 터치(13b)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 1302b에 도시된 바와 같이, 메일 제목에 상기 특정 텍스트(1310b)(예: courses)를 포함하는 메일들을 목록으로 표시할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(13b)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 메일 제목 및/또는 메일 본문에 상기 특정 텍스트(1310b)(예: courses)를 포함하는 메일들을 목록으로 표시할 수 있다(화면 1303b 참조).
도 14는 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 14를 참조하면, 일 실시 예에 따른 이미지에 대한 터치에 기반한 정보 제공 방법은 동작 1401 내지 1413을 포함할 수 있다. 상기 동작 1401 내지 1413은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 1401 내지 1413의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 동작 1401 내지 1413의 설명에 도 8의 참조부호를 이용한다.
동작 1401에서 전자 장치(801)의 프로세서(860)는 복수의 아이템을 디스플레이(810)에 표시할 수 있다. 예를 들어, 상기 복수의 아이템은 이미지 객체를 포함할 수 있다. 예를 들어, 적어도 하나의 이미지 객체는, 지정된 어플리케이션(예: 이미지 뷰어 어플리케이션, 멀티미디어 재생 어플리케이션, 브라우저 어플리케이션 또는 이북 어플리케이션)의 실행에 의하여 디스플레이(810)에 표시되는 이미지 (혹은, 비디오의 어느 한 이미지 프레임)내에 포함될 수 있다.
동작 1403에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 이미지 객체를 선택 혹은 특정할 수 있다. 이때, 상기 이미지 객체의 윤곽은 강조될(highlighted) 수 있다.
동작 1405에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 1407에서 상기 프로세서(860)는 동작 1405에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 1409로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2)보다 이하(혹은 미만)이면 동작 1411로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 1413으로 진행할 수 있다.
동작 1409에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로 사전에 미리 지정된 기능을 수행할 수 있다. 일 실시 예에 따르면, 프로세서(860)는 상기 선택된 이미지 객체에 링크된 페이지를 표시하거나, 상기 선택된 이미지 객체를 홀드(hold)할 수 있다. 예를 들면, 상기 홀드는 상기 제1 압력 레벨 이하의 터치에 이어서 수행될 수도 있는 터치 스크롤링의 시작점을 제공할 수 있다. 또한, 예를 들어, 상기 이미지 객체가 멀티미디어 재생 어플리케이션의 실행 화면에 포함된 경우 프로세서(860)는 제1 압력 레벨 이하의 터치에 응답하여 재생 중인 비디오의 재생/일시정지(playback/pause)를 수행할 수도 있다.
동작 1411에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 선택된 이미지 객체를 포함하는 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제1 세트의 정보는 상기 선택된 이미지 객체와 제1 레벨로 유사한 이미지 객체를 포함할 수 있다. 일 실시 예에 따르면, 제1 세트의 정보는, 상기 선택된 이미지 객체가 (비교적 낮은) 제1 레벨의 유사도로 포함된 검색 결과(검색 이미지)들을 포함할 수 있다. 예를 들어, 상기 제1 세트의 정보에 포함된 검색 결과(검색 이미지)들은, 전자 장치에 포함된 메모리 또는 상기 전자 장치와 통신하는 서버 또는 인터넷으로부터 획득될 수 있다.
동작 1413에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제2 압력 레벨보다 크므로, 상기 선택된 이미지 객체를 포함하는 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제2 세트의 정보는 상기 선택된 이미지 객체와 제2 레벨로 유사한 이미지 객체를 포함할 수 있다. 이때, 상기 제2 레벨의 유사도는 상기 제1 레벨의 유사도보다 높게 설정될 수 있다. 일 실시 예에 따르면, 제2 세트의 정보는, 상기 선택된 이미지 객체가 (비교적 높은) 제2 레벨의 유사도로 포함된 검색 결과(검색 이미지)들을 포함할 수 있다. 예를 들어, 상기 제2 세트의 정보에 포함된 검색 결과(검색 이미지)들은, 전자 장치에 포함된 메모리 또는 상기 전자 장치와 통신하는 서버 또는 인터넷으로부터 획득될 수 있다.
도 15a는 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 15a를 참조하면, 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 이미지 뷰어 어플리케이션(또는 멀티미디어 재생 어플리케이션)을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 어느 한 이미지 1500이 표시될 수 있다. 상기 이미지 1500은 이미지 뷰어 어플리케이션에 의해 열람된 이미지 또는 멀티미디어 재생 어플리케이션에 의해 재생 중인 비디오 콘텐트의 어느 한 이미지 프레임에 해당할 수 있다.
사용자는, 예를 들어, 상기 화면 1500에 포함된 복수의 이미지 객체들(1510, 1520)(예: 인물의 얼굴 영역에 설정된 이미지 객체)를 동시에 터치(15-1, 15-2)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치들(15-1, 15-2)의 위치에 기반하여 상기 이미지 객체들(1510, 1520)를 선택하고, 압력 센서를 이용하여 상기 터치(15-1, 15-2)의 압력 레벨을 검출할 수 있다.
예를 들어, 상기 이미지 객체들(1510, 1520)이 이미지 뷰어 어플리케이션에 의해 열람된 이미지에 포함된 경우, 전자 장치는 상기 터치(15-1, 15-2)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 이미지 객체(1510) 및/또는 이미지 객체(1520)에 링크된 페이지를 표시할 수 있다. 또는 전자 장치는 상기 터치(15-1, 15-2)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 이미지 객체들(1510, 1520)을 홀드할 수 있다. 예를 들어, 상기 이미지 객체들(1510, 1520)이 재생 중인 비디오 콘텐트의 어느 한 이미지 프레임에 포함된 경우 전자 장치는 제1 압력 레벨 이하의 터치에 응답하여 재생 중인 비디오의 재생/일시정지를 수행할 수도 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치 터치(15-1, 15-2)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 1502에 도시된 바와 같이, 상기 선택된 이미지 객체들(1510, 1520)이 (비교적 낮은) 제1 레벨의 유사도로 포함된 5개의 검색 이미지들(1530)을 상기 화면 1502의 하단에 섬네일(thumbnail)의 형태로 표시할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(15-1, 15-2)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 화면 1503에 도시된 바와 같이, 상기 선택된 이미지 객체들(1510, 1520)이 (비교적 높은) 제2 레벨의 유사도로 포함된 3개의 검색 이미지들(1540)을 상기 화면 1503의 하단에 섬네일의 형태로 표시할 수 있다.
다양한 실시 예에 따르면, 상기 5개의 검색 이미지들(1530) 및/또는 상기 3개의 검색 이미지들(1540)은, 전자 장치에 포함된 메모리로부터 획득될 수 있다. 또는 상기 5개의 검색 이미지들(1530) 및/또는 상기 3개의 검색 이미지들(1540)은 상기 전자 장치와 통신하는 서버 혹은 인터넷으로부터 획득될 수 있다. 또한, 예를 들어, 상기 이미지 객체들(1510, 1520)이 재생 중인 비디오 콘텐트의 어느 한 이미지 프레임에 포함된 경우, 상기 5개의 검색 이미지들(1530) 및/또는 상기 3개의 검색 이미지들(1540)은 상기 재생 중인 비디오 콘텐트의 다른 이미지 프레임들로부터 획득될 수도 있다.
도 15b는 일 실시 예에 따른 이미지 객체(예: 섬네일)에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 15b를 참조하면, 일 실시 예에 따른 이미지 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 멀티미디어 재생 어플리케이션을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 화면 1504가 표시될 수 있다. 상기 화면 1504는 멀티미디어 재생 어플리케이션에 의해 재생 중인 비디오 콘텐트의 어느 한 이미지 프레임을 포함할 수 있다.
예를 들면, 사용자는, 상기 화면 1504에 포함된 이미지 프레임의 하단을 터치(15-3)(예: 탭, 포스 터치 등)할 수 있다. 상기 전자 장치는 터치 센서에서 감지된 상기 터치(15-3)에 응답하여 화면 1505를 표시할 수 있다. 상기 화면 1505의 하단에는 멀티미디어 재생 어플리케이션의 재생 제어 바(playback control bar)(1525) 및 재생 중인 비디오 콘텐트의 어느 한 이미지 프레임에 해당하는 섬네일(1515)이 표시될 수 있다.
일 실시 예에 따르면, 사용자는 상기 섬네일(1515)를 터치(15-4)할 수 있다. 전자 장치는 터치 센서에서 감지된 터치(15-4)의 위치에 기반하여 섬네일(1515)을 선택하고, 압력 센서를 이용하여 상기 터치(15-4)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는 상기 터치(15-4)의 압력이 제1 압력 레벨보다 크고 (혹은 이상이고) 제2 압력 레벨 이하(혹은 미만)이면, 화면 1506을 표시할 수 있다. 상기 화면 1506 상에는 재생 중인 비디오 콘텐트를 제1 레벨로 요약한 4개의 섬네일들(1516)이 표시될 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(15-4)의 압력이 제2 압력 레벨보다 크면 (혹은 이상이면) 화면 1507을 표시할 수 있다. 상기 화면 1507 상에는 재생 중인 비디오 콘텐트를 제2 레벨로 요약한 6개의 섬네일들(1517)이 표시될 수 있다.
도 15b에는 섬네일(1515)에 대한 터치의 압력에 따라서 섬네일들의 개수 (또는, 비디오 콘텐트 요약 수준)를 결정하였으나, 다양한 실시 예에 따르면, 화면 1504의 하단 영역에 대한 터치(15-3)의 압력에 기반하여 상기 섬네일들을 표시하고, 상기 표시되는 섬네일들의 개수 및/또는 비디오 콘텐트의 요약 레벨을 결정할 수도 있다.
도 16은 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 16을 참조하면, 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법은 동작 1601 내지 1613을 포함할 수 있다. 상기 동작 1601 내지 1613은 예를 들어, 도 8에 도시된 전자 장치(801) 에 의해 수행될 수 있다. 상기 동작 1601 내지 1613의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 동작 1601 내지 1613의 설명에 도 8의 참조부호를 이용한다.
동작 1601에서 전자 장치(801)의 프로세서(860)는 복수의 아이템을 디스플레이(810)에 표시할 수 있다. 예를 들어, 상기 복수의 아이템은 적어도 하나의 어플리케이션의 아이콘를 포함할 수 있다. 예를 들어, 상기 적어도 하나의 아이콘은, 홈 어플리케이션의 실행에 의한 홈 화면(home screen) 상에 표시될 수 있다.
동작 1603에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 적어도 하나의 어플리케이션의 아이콘을 선택 혹은 특정할 수 있다.
동작 1605에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 1607에서 상기 프로세서(860)는 동작 1605에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 1609로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2)보다 이하(혹은 미만)이면 동작 1611로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 1613으로 진행할 수 있다.
동작 1609에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로 상기 선택된 아이콘이 지시하는 어플리케이션의 실행 화면을 제1 세트의 정보로서 디스플레이(810)에 표시할 수 있다. 상기 실행 화면은 어플리케이션에 포함된 액티비티(activity)에 따라서 디스플레이(810)에 표시될 수 있다.
동작 1611에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 선택된 아이콘이 지시하는 어플리케이션과 연관된 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제2 세트의 정보는, 어플리케이션의 알림(notification) 정보를 포함할 수 있다. 이때, 상기 프로세서(860)는 상기 제2 세트의 정보를 새로이 생성되는 레이어 상에 표시할 수 있다.
동작 1613에서 상기 프로세서(860)는 상기 터치의 압력이 제2 압력 레벨보다 크므로, 상기 선택된 아이콘이 나타내는 상기 지정된 어플리케이션과 연관된 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제3 세트의 정보는, 어플리케이션의 알림 정보를 포함할 수 있다. 이때, 상기 제3 세트의 정보의 정보량은 상기 제2 세트의 정보의 정보량보다 더 많을 수 있다. 또한, 상기 프로세서(860)는 상기 제2 세트의 정보와 마찬가지로 상기 제3 세트의 정보를 새로이 생성되는 레이어 상에 표시할 수 있다.
도 17은 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 17을 참조하면, 일 실시 예에 따른 아이콘에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 홈 화면 1700을 출력할 수 있고, 상기 홈 화면 1700에는 적어도 하나의 어플리케이션의 아이콘이 표시될 수 있다. 예를 들어, 상기 적어도 하나의 아이콘은 이메일 어플리케이션의 아이콘(1710)을 포함할 수 있다. 상기 아이콘(1710)에는 읽지 않은(unread) 메일의 수를 나타내는 배지(badge)(1711)가 부착될 수 있다. 사용자는, 예를 들어, 상기 홈 화면 1700에 포함된 아이콘(1710)을 터치(17)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(17)의 위치에 기반하여 상기 아이콘(1710)을 선택하고, 압력 센서를 이용하여 상기 터치(17)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(17)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면 상기 선택된 아이콘(1710)이 지시하는 이메일 어플리케이션의 실행 화면 1701을 제1 세트의 정보로서 출력할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치 터치(17)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 1702에 도시된 바와 같이, 상기 아이콘(1710)이 지시하는 이메일 어플리케이션과 연관된 제2 세트의 정보(1722)를 화면 1702에 새로운 레이어로 표시할 수 있다. 예를 들어, 상기 제2 세트의 정보(1722)는 읽지 않은 메일의 개수를 각 카테고리 별로 포함할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(17)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 화면 1703에 도시된 바와 같이, 상기 아이콘(1710)이 지시하는 이메일 어플리케이션과 연관된 제3 세트의 정보(1733)를 화면 1703에 새로운 레이어로 표시할 수 있다. 예를 들어, 상기 제3 세트의 정보(1733)는 읽지 않은 메일들의 개수 및 상기 읽지 않은 메일들의 요약을 각 카테고리 별로 포함할 수 있다. 즉, 상기 제3 세트의 정보(1733)의 정보량은 상기 제2 세트의 정보(1722)의 정보량보다 더 많을 수 있다.
도 18은 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 나타낸다.
도 18을 참조하면, 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법은 동작 1801 내지 1813을 포함할 수 있다. 상기 동작 1801 내지 1813은 예를 들어, 도 8에 도시된 전자 장치(801)에 의해 수행될 수 있다. 상기 동작 1801 내지 1813의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 동작 1801 내지 1813의 설명에 도 8의 참조부호를 이용한다.
동작 1801에서 전자 장치(801)의 프로세서(860)는 복수의 아이템을 디스플레이(810)에 표시할 수 있다. 일 실시 예에 따르면, 상기 복수의 아이템은 적어도 하나의 기능 객체를 포함할 수 있다. 예를 들면, 상기 기능 객체에는 각각 적어도 하나의 기능이 할당될 수 있으며, 상기 기능 객체는, 각종 어플리케이션의 실행 화면 상에 배치되는 다양한 버튼, 소프트키(soft-key) 등의 형태로 구현될 수 있다.
동작 1803에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 적어도 하나의 기능 객체를 선택 혹은 특정할 수 있다.
동작 1805에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 1807에서 상기 프로세서(860)는 동작 1805에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 1809로 진행할 수 있다. 상기 프로세서(860)는 동작 1805에서 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2)보다 이하(혹은 미만)이면 동작 1811로 진행할 수 있다. 상기 프로세서(860)는 동작 1805에서 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 1813으로 진행할 수 있다.
동작 1809에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로 상기 선택된 기능 객체에 링크되어 있는 화면을 제1 세트의 정보로서 디스플레이(810)에 표시할 수 있다.
동작 1811에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 선택된 기능 객체와 연관된 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제2 세트의 정보는, 상기 선택된 기능 객체에 링크되어 있는 화면에 포함된 콘텐트로부터 추출된 정보를 포함할 수 있다. 예컨대, 상기 제2 세트의 정보는, 상기 링크되어 있는 화면에 포함된 콘텐트를 지정된 알고리즘에 기반하여 상대적으로 높은 수준으로 요약한 정보를 포함할 수 있다. 이때, 상기 프로세서(860)는 상기 제2 세트의 정보를 새로이 생성되는 레이어 상에 표시할 수 있다.
동작 1813에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제2 압력 레벨보다 크므로, 상기 선택된 기능 객체와 연관된 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 제3 세트의 정보를 디스플레이(810)에 표시할 수 있다.
일 실시 예에 따르면, 상기 제3 세트의 정보는, 상기 선택된 기능 객체에 링크되어 있는 화면에 포함된 콘텐트로부터 추출된 정보를 포함할 수 있다. 예컨대, 상기 제3 세트의 정보는 상기 기능 객체에 링크되어 있는 화면에 포함된 정보에 기반하여, 상기 제2 세트의 정보의 추출 방식(알고리즘)과 상이한 방식으로 추출될 수 있다. 즉, 상기 제3 세트의 정보는 상기 링크되어 있는 화면에 포함된 콘텐트를 또 다른 지정된 알고리즘에 기반하여 상대적으로 낮은 수준으로 요약한 정보를 포함할 수 있다. 따라서, 상기 제3 세트의 정보의 정보량은 상기 제2 세트의 정보의 정보량보다 더 많을 수 있다. 또한, 상기 프로세서(860)는 상기 제2 세트의 정보와 마찬가지로 상기 제3 세트의 정보를 새로이 생성되는 레이어 상에 표시할 수 있다.
도 19는 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 19를 참조하면, 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 브라우저 어플리케이션을 실행하여 웹 메일 사업자의 웹 페이지를 방문할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 복수의 아이템을 포함한 화면 1900이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 1900에 포함된 복수의 아이템 중 청구서를 열람하기 위한 기능 객체(1910)를 터치(19)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(19)의 위치에 기반하여 상기 기능 객체(1910)을 선택하고, 압력 센서를 이용하여 상기 터치(19)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(19)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면, 상기 기능 객체(1910)에 링크되어 있는 화면 1901을 제1 세트의 정보로서 출력할 수 있다. 예를 들어, 상기 화면 1901에는 수신된 청구서 메일이 시간 순서대로 정렬되어 있을 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치 터치(19)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 1902에 도시된 바와 같이, 상기 기능 객체(1910)와 연관된 제2 세트의 정보(1922)를 화면 1902에 새로운 레이어로 표시할 수 있다. 상기 제2 세트의 정보(1922)는 화면 1901에 포함된 콘텐트를 지정된 알고리즘에 기반하여 요약한 정보를 포함할 수 있다. 예컨대, 상기 제2 세트의 정보(1922)에는 최근 9개월 동안 월별로 수신된 청구서의 개수가 포함될 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(19)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 화면 1903에 도시된 바와 같이, 상기 기능 객체(1910)와 연관된 제3 세트의 정보(1933)를 화면 1903에 새로운 레이어로 표시할 수 있다. 상기 제3 세트의 정보(1933)는 화면 1901에 포함된 콘텐트를 또 다른 알고리즘에 기반하여 요약한 정보를 포함할 수 있다. 상기 제2 세트의 정보(1922) 및 상기 제3 세트의 정보(1933)는 상기 기능 객체(1910)에 링크되어 있는 화면 1901에 포함된 정보에 기반하여, 서로 상이한 방식으로 추출될 수 있다. 예컨대, 상기 제3 세트의 정보(1933)에는 당월에 수신된 청구서의 개수 및 청구금액의 요약이 포함될 수 있다. 다양한 실시 예에 따르면, 상기 제3 세트의 정보(1933)에는 적어도 하나의 기능 객체(예: 하이퍼링크 텍스트)가 포함될 수 있다. 상기 적어도 하나의 기능 객체에 대한 사용자의 터치(예: "탭")가 이루어지면 상기 터치가 이루어진 기능 객체에 링크된 화면이 출력될 수 있다.
도 20a는 또 다른 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 20a를 참조하면, 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 사회 관계망 서비스 어플리케이션(예: facebookTM)을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 복수의 아이템을 포함한 화면 2000이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2000에 포함된 업데이트된 뉴스 피드를 열람하기 위한 기능 객체(2010)를 터치(20)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(20)의 위치에 기반하여 상기 기능 객체(2010)을 선택하고, 압력 센서를 이용하여 상기 터치(20)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(20)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면, 상기 기능 객체(1910)에 링크되어 있는 화면(예: 가장 최신의 뉴스피드가 포스트된(posted) 화면)을 제1 세트의 정보로서 출력할 수 있다(미도시).
또 다른 예를 들어, 전자 장치는, 상기 터치 터치(20)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 화면 2002에 도시된 바와 같이, 상기 기능 객체(2010)와 연관된 제2 세트의 정보(2022)를 화면 2002에 새로운 레이어로 표시할 수 있다. 예를 들면, 상기 제2 세트의 정보(2022)는 최근 1시간 동안 업데이트된 포스팅의 요약이 카테고리 별로 포함될 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(20)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 화면 2003에 도시된 바와 같이, 상기 기능 객체(2010)와 연관된 제3 세트의 정보(2033)를 화면 2003에 새로운 레이어로 표시할 수 있다. 상기 제3 세트의 정보(2033)는 최근 24시간 동안 업데이트된 포스팅의 요약이 카테고리 별로 포함될 수 있다.
도 20b는 또 다른 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 20b를 참조하면, 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 IM 어플리케이션을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 복수의 사용자 간의 대화 내용이 포함된 화면 2004가 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2004에 포함된 채팅창의 타이틀을 나타내는 기능 객체(2014)를 터치(21) (예: 포스 터치)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(21)(예: 포스 터치)의 위치에 기반하여 상기 기능 객체(2014)를 선택할 수 있다. 상기 터치(21)에 응답하여 상기 전자 장치는, 예를 들어, 화면 2005를 출력할 수 있다.
화면 2005에 따르면, 상기 전자 장치는 상기 채팅창의 타이틀을 나타내는 기능 객체(2014)에 연관하여, 상기 채팅창의 요약 정보(2015)를 표시할 수 있다. 예를 들어, 상기 요약 정보(2015)는 예를 들어, 읽지 않은 메시지, 상기 전자 장치의 사용자를 호출한 대화 상태 및 호출 횟수, 특정 장소나 시간이 언급된 내용, 대화 시간 별로 가장 많이 언급된 단어, 채팅창에서 공유된 사진, 대화 참여자 정보, 가장 많이 발언한 사용자, 채팅창의 최초 개설된 시점, 지속된 시간, 또는 대화 개수 등을 포함할 수 있다. 다양한 실시 예에 따르면, 채팅창 목록 중 어느 한 채팅창을 나타내는 객체에 대해 포스 터치하는 경우에도 상기 요약 정보(2015)가 출력될 수 있다.
일 실시 예에 따르면, 사용자는, 화면 2005의 요약 정보(2015)에 포함된 다양한 콘텐트 중 어느 한 텍스트(예: "한지민")을 터치(22)할 수 있다. 전자 장치는 터치 센서에서 감지된 터치(22)의 위치에 기반하여 상기 텍스트(예: "한지민")를 선택하고, 압력 센서를 이용하여 상기 터치(22)의 압력을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(22)의 압력이 제1 압력 레벨보다 크고 (혹은 이상이고) 제2 압력 레벨 이하(혹은 미만)이면, 상기 터치(22)가 이루어진 텍스트(예: "한지민")를 제1 범위 내에서 검색하고 이를 디스플레이에 출력할 수 있다. 예컨대, 상기 제1 범위 내 검색은 화면 2006에 도시된 제1 범위 2016를 포함할 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(22)의 압력이 제2 압력 레벨보다 크면 (혹은 이상이면), 상기 터치(22)가 이루어진 텍스트(예: "한지민")를 상기 제1 범위보다 넓은 제2 범위 내에서 검색하고, 이를 디스플레이에 출력할 수 있다. 예컨대, 상기 제1 범위 내 검색은 화면 2006에 도시된 제2 범위 2026를 포함할 수 있다. 즉, 상기 터치(22)의 압력이 높을수록 디스플레이에 출력되는 검색 범위가 더 넓어질 수 있다.
도 20c는 또 다른 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 설명하기 위한 도면이다.
도 20c를 참조하면, 일 실시 예에 따른 기능 객체에 대한 터치에 기반한 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 건강 관리 어플리케이션(예: S-HealthTM)을 실행할 수 있다. 상기 실행에 의해 전자 장치의 디스플레이에는 사용자의 걸음수(steps)에 관한 통계 그래프가 포함된 화면 2007이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2007에 포함된 일부 영역 2017을 터치(22) (예: 포스 터치)할 수 있다. 예컨대, 상기 영역 2017은 당일의 시간에 따른 걸음 수를 나타낸 히스토그램이 표시될 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(22)(예: 포스 터치)의 위치에 기반하여 상기 영역 2017에 대한 선택을 감지하고, 상기 터치(22)의 압력 레벨을 감지할 수 있다. 일 실시 예에 따르면, 전자 장치는 감지된 상기 터치(22)의 압력 레벨에 따라서 화면 2008 또는 화면 2009를 출력할 수 있다.
일 실시 예에 따르면, 전자 장치는 상기 터치(22)의 압력이 제1 압력 레벨보다 크고 (혹은 이상이고) 제2 압력 레벨 이하(혹은 미만)이면, 화면 2008을 출력할 수 있다. 화면 2008 중 일부 영역 2018에는 최근 일주일 간의 걸음 수를 나타낸 히스토그램이 표시될 수 있다. 즉, 걸음 수를 나타낼 수 있는 시간적 범위가 확대될 수 있다.
일 실시 예에 따르면, 전자 장치는 상기 터치(22)의 압력이 제2 압력 레벨보다 크면 (혹은 이상이면), 화면 2009를 출력할 수 있다. 화면 2009 중 일부 영역 2019에는 최근 3개월간 간의 걸음 수를 나타낸 히스토그램이 표시될 수 있다. 즉, 걸음 수를 나타낼 수 있는 시간적 범위가 더욱 확대될 수 있다.
도 21a는 일 실시 예에 따른 터치 기반 정보 제공 방법을 나타낸다.
도 21a를 참조하면, 일 실시 예에 따른 터치 기반 정보 제공 방법은 동작 2102 내지 2108을 포함할 수 있다. 상기 동작 2102 내지 2108은 예를 들어, 도 8에 도시된 전자 장치(801)에 의해 수행될 수 있다. 상기 동작 2102 내지 2108의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 도 8의 참조부호를 이용하여 동작 2102 내지 2108을 설명하도록 한다.
동작 2102에서 전자 장치(801)의 프로세서(860)는 원본 콘텐트를 디스플레이(810)에 표시할 수 있다. 예를 들어, 상기 원본 콘텐트는 어플리케이션(예: 이메일 어플리케이션, 이북 어플리케이션, 브라우저 어플리케이션 등)의 실행 화면에 포함된 다양한 정보를 포함할 수 있다.
동작 2104에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 적어도 하나의 기능 객체를 선택하고, 상기 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 2106에서 상기 프로세서(860)는, 동작 2104에서 검출된 압력 레벨에 기반하여 상기 원본 콘텐트를 수정, 배제, 또는 재배열(rearrange)하기 위한 레이아웃을 결정할 수 있다.
동작 2108에서 상기 프로세서(860)는, 동작 2102에서 표시된 원본 콘텐트에 포함된 정보의 적어도 일부를 동작 2106에서 결정된 레이아웃에 기반하여 디스플레이(810)에 표시할 수 있다.
도 21b는 일 실시 예에 따른 터치 기반 정보 제공 방법을 나타낸다. 또한, 도 22는 다양한 실시 예에 따른 레이아웃을 설명하기 위한 도면이다.
도 21b를 참조하면, 일 실시 예에 따른 터치 기반 정보 제공 방법은 동작 2101 내지 2113을 포함할 수 있다. 상기 동작 2101 내지 2113은 예를 들어, 도 8에 도시된 전자 장치(801)에 의해 수행될 수 있다. 상기 동작 2101 내지 2113의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다.
이하에서는 동작 2101 내지 2113의 설명에 도 8의 참조부호를 이용하며, 설명을 돕기 위하여 일부 동작에 있어서 도 21b와 도 22를 교대로 참조하기로 한다.
동작 2101에서 전자 장치(801)의 프로세서(860)는 복수의 아이템이 포함된 어플리케이션의 실행 화면을 표시할 수 있다. 일 실시 예에 따르면 상기 실행 화면에는 콘텐트 및 지정된 기능 객체가 포함될 수 있다.
예를 들어, 도 22를 참조하면, 전자 장치의 디스플레이에는 어플리케이션의 실행 화면 2200이 표시될 수 있다. 예를 들어, 상기 실행 화면 2200은 콘텐트의 제목(2211), 본문 텍스트(2212), 이미지(2213, 2214), 본문 텍스트(2215), 플래시(2216), 스크립트(2217), 및 지정된 기능 객체(2210)를 포함할 수 있다.
동작 2103에서 상기 프로세서(860)는, 터치 센서(820)에서 감지된 터치의 위치에 기반하여 상기 지정된 기능 객체를 선택 혹은 특정할 수 있다.
예를 들어, 도 22를 참조하면, 실행 화면 2200을 표시하고 있는 전자 장치는, 사용자로부터의 터치의 위치에 기반하여 상기 지정된 기능 객체(2210)를 선택할 수 있다.
동작 2105에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
예를 들어, 도 22를 참조하면, 실행 화면 2200을 표시하고 있는 전자 장치는, 압력 센서를 이용하여 상기 지정된 기능 객체(2210)를 선택하는 터치의 압력 레벨을 검출할 수 있다.
동작 2107에서 상기 프로세서(860)는 동작 2105에서 검출된 압력 레벨을 판단할 수 있다. 예컨대, 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨(예: 도 7의 P1) 이하(혹은, 미만)이면 동작 2109로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨(예: 도 7의 P1)보다 크고 (혹은 이상이고), 제2 압력 레벨(예: 도 7의 P2)보다 이하(혹은 미만)이면 동작 2111로 진행할 수 있다. 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제2 압력 레벨(예: 도 7의 P2)보다 크면 (혹은 이상이면) 동작 2113으로 진행할 수 있다.
동작 2109에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 제1 압력 레벨 이하(혹은 미만)이므로 상기 지정된 기능 객체에 할당된 미리 지정된 기능을 수행할 수 있다. 일 예를 들면, 상기 지정된 기능은 상기 어플리케이션의 실행 화면에 포함된 텍스트의 크기를 크게 하거나 작게 하는 기능에 해당할 수 있다(미도시).
동작 2111에서 상기 프로세서(860)는 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 크고(혹은 같거나 크고) 제2 압력 레벨 이하 (혹은 미만)이므로, 상기 기능 객체를 포함한 실행 화면을 제1 레이아웃으로 구성한 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "약한 포스 터치"인 경우 상기 제1 세트의 정보를 디스플레이(810)에 표시할 수 있다.
예를 들어, 도 22를 참조하면, 실행 화면 2200을 표시하고 있는 전자 장치는 상기 "약한 포스 터치"가 검출되면, 상기 실행 화면 2200을 제1 레이아웃으로 재구성(reconfigure)할 수 있다. 예를 들어, 전자 장치는 상기 실행 화면 2200의 DOM(document object model) 트리(tree)를 수정(modify)함으로써, 상기 실행 화면 2200을 제1 레이아웃으로 구성할 수 있다. 일 예를 들면, 전자 장치는 실행 화면 2200의 DOM 트리에서 플래시(2216) 및 스크립트(2217)을 제거하고, 나머지 아이템들(2211-2215)을 디스플레이에 표시할 수 있다. 이를 통해 실행 화면 2202가 디스플레이에 출력될 수 있다.
동작 2113에서 상기 프로세서(860)는 상기 터치의 압력이 제2 압력 레벨보다 크므로, 상기 기능 객체를 포함한 실행 화면을 제2 레이아웃으로 구성한 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다. 예컨대, 프로세서(860)는 상기 검출된 터치가 "강한 포스 터치"인 경우 상기 제2 세트의 정보를 디스플레이(810)에 표시할 수 있다.
예를 들어, 도 22를 참조하면, 실행 화면 2200을 표시하고 있는 전자 장치는 상기 "강한 포스 터치"가 검출되면, 상기 실행 화면 2200을 제2 레이아웃으로 재구성할 수 있다. 예를 들어, 전자 장치는 상기 실행 화면 2200의 DOM 트리를 수정함으로써, 상기 실행 화면 2200을 제2 레이아웃으로 구성할 수 있다. 일 예를 들면, 전자 장치는 실행 화면 2200의 DOM 트리에서 이미지(2213, 2214), 플래시(2216) 및 스크립트(2217)을 제거하고, 제목(2211), 및 본문 텍스트(2212, 2215)만을 디스플레이에 표시할 수 있다. 이를 통해 실행 화면 2203이 출력될 수 있다.
도 23은 일 실시 예에 따른 일 실시 예에 따른 터치 기반 정보 제공 방법을 설명하기 위한 도면이다.
도 23을 참조하면, 일 실시 예에 따른 터치 기반 정보 제공 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 브라우저 어플리케이션을 실행하여 웹 페이지를 방문할 수 있다. 일 실시 예에 따르면, 상기 웹 페이지 화면 2300에는 제목(2311), 본문 텍스트(2312), 이미지(2313), 본문 텍스트(2314)가 표시될 수 있다. 사용자는, 예를 들어, 상기 웹 페이지 화면 2300의 상단에 포함된 지정된 기능 객체(2310)를 터치(23)할 수 있다.
상기 전자 장치는 터치 센서에서 감지된 터치(23)의 위치에 기반하여 상기 기능 객체(2310)을 선택하고, 압력 센서를 이용하여 상기 터치(23)의 압력 레벨을 검출할 수 있다.
예를 들어, 전자 장치는, 상기 터치(23)의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면, 상기 지정된 기능 객체(2310)에 할당된 미리 지정된 기능을 수행할 수 있다. 일 예를 들면, 상기 지정된 기능은 웹 페이지 화면 2300에 포함된 텍스트의 크기를 크게 하거나 작게 하는 기능에 해당할 수 있다(미도시).
또 다른 예를 들어, 전자 장치는, 상기 터치(23)의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 상기 웹 페이지 화면 2300을 제1 레이아웃으로 구성한 화면 2302을 표시할 수 있다. 예를 들면, 상기 화면 2302에는 제목(2311)이 표시되지 않고, 아이템들(2312, 2313, 2314)이 표시될 수 있다.
또 다른 예를 들어, 전자 장치는, 상기 터치(23)의 압력 레벨이 제2 압력 레벨보다 크면 (혹은 이상이면), 상기 기능 객체(2310)를 포함한 실행 화면 2300을 제2 레이아웃으로 구성한 화면 2303을 표시할 수 있다. 예를 들면, 상기 화면 2303에는 제목(2311) 및 이미지(2313)이 표시되지 않고, 텍스트(2312, 2314) 및 후속 텍스트(2305)가 표시될 수 있다.
다양한 실시 예에 따르면, 터치 또는 포스 터치를 가하는 객체의 유형에 따라서 레이아웃을 재구성할 수 있다. 예를 들어, 사용자는 상기 지정된 기능 객체(2310) 대신에 웹 페이지 화면 2300에 포함된 이미지(2313)를 터치 또는 포스 터치할 수 있다.
예컨대, 상기 이미지(2313)를 선택하는 터치의 압력 레벨이 제1 압력 레벨 이하(혹은 미만)이면, 상기 이미지(2313)은 별도 창(또는 탭)으로 표시될 수 있다. 또 다른 예를 들어, 상기 이미지(2313)를 선택하는 터치의 압력 레벨이 제1 압력 레벨보다 크고 (혹은 이상이고), 제2 압력 레벨 이하(혹은 미만)이면, 전자 장치는 상기 제1 압력 레벨에서 상기 제2 압력 레벨 사이의 범위 내에서 이미지(2313)을 확대 또는 축소할 수 있다. 또 다른 예를 들어, 상기 이미지(2313)를 선택하는 터치의 압력 레벨이 제2 압력 레벨을 초과하면 (혹은 이상이면), 전자 장치는 웹 페이지 화면 2300에 포함된 모든 이미지를 취합하여 일목요연하게 표시할 수 있다.
또 다른 실시 예에 따르면, 상기 이미지(2313)를 선택하는 경우와 유사하게, 텍스트(예: 웹 페이지 화면 2300에 포함된 텍스트(2312, 2314)) 에 가해진 터치의 압력 레벨이 제2 압력 레벨을 초과하면 (혹은 이상이면), 전자 장치는 웹 페이지 화면 2300에 포함된 모든 텍스트만을 취합하여 표시할 수 있다.
도 24는 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 나타낸다.
도 24를 참조하면, 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법은 동작 2401 내지 2417을 포함할 수 있다. 상기 동작 2401 내지 2417은 예를 들어, 도 8에 도시된 전자 장치(801)에 의해 수행될 수 있다. 상기 동작 2401 내지 2417의 각 동작은, 예를 들어, 상기 전자 장치(801)의 프로세서(860)에 의해 수행(혹은, 실행)될 수 있는 인스트럭션(명령어)들로 구현될 수 있다. 상기 인스트럭션들은, 예를 들어, 컴퓨터 기록 매체 또는 도 8에 도시된 전자 장치(801)의 메모리(850)에 저장될 수 있다. 이하에서는 도 8의 참조부호를 이용하여 동작 2401 내지 2417을 설명하도록 한다.
동작 2401에서 전자 장치(801)의 프로세서(860)는 어플리케이션 실행에 따른 콘텐츠 리스트 및 지정된 기능 객체를 표시할 수 있다. 상기 콘텐츠 리스트는 적어도 하나의 콘텐트가 일 방향으로 정렬된 리스트일 수 있다.
동작 2403에서 전자 장치(801)의 프로세서(860)는 터치 센서(820)에서 상기 지정된 기능 객체에 대한 터치의 입력 위치를 검출할 수 있다.
동작 2405에서 상기 프로세서(860)는 압력 센서(830)를 이용하여 상기 터치의 압력 레벨을 검출할 수 있다.
동작 2407에서 상기 프로세서(860)는 동작 2405에서 검출된 압력 레벨이 제1 압력 레벨(예: 도 7의 P1) 이상인지 (혹은 초과하는지) 판단할 수 있다. 상기 프로세서(860)는 상기 검출된 압력 레벨이 제1 압력 레벨 이상인 경우 동작 2409로 진행할 수 있고, 그러하지 아니한 경우 동작 2413으로 진행할 수 있다.
동작 2409에서 상기 프로세서(860)는 압력이 제1 압력 레벨 이상인 터치에 응답하여, 상기 지정된 기능 객체에 관한 검색 쿼리를 확인할 수 있다. 예컨대, 상기 검색 쿼리는 키워드(예: 단어, 구, 절 등) 또는 콘텐츠 리스트 정렬을 위한 기준을 의미할 수 있다.
동작 2411에서 상기 프로세서(860)는 압력이 제1 압력 레벨 이상인 터치에 응답하여, 상기 검색 쿼리를 기반으로 콘텐츠 리스트를 재배열 또는 정렬할 수 있다.
동작 2413에서 상기 프로세서(860)는 압력이 제1 압력 레벨 미만인 (혹은 이하인) 터치가 일정 시간 이상 유지되는지 판단할 수 있다. 상기 프로세서(860)는 상기 터치가 일정 시간 이상 유지되는 경우 동작 2415로 진행할 수 있고, 그러하지 아니한 경우 동작 2417으로 진행할 수 있다.
동작 2415에서 상기 프로세서(860)는, 압력이 제1 압력 레벨 미만인 (혹은 이하인) 터치가 일정 시간 이상 유지되므로, 해당 터치를 "롱 터치"(도 7의 70-C 참조)로 판단할 수 있다. 이후 상기 프로세서(860)는 미리 설정되어 있는 "롱 터치"에 대응하는 동작을 수행할 수 있다.
동작 2417에서 상기 프로세서(860)는, 압력이 제1 압력 레벨 미만인 (혹은 이하인) 터치가 일정 시간 이상 유지되지 않으므로, 해당 터치를 "일반 터치"("탭"; 도 7의 70-A 참조)로 판단할 수 있다. 이후 상기 프로세서(860)는 미리 설정되어 있는 "일반 터치"에 대응하는 동작을 수행할 수 있다.
도 25는 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 설명하기 위한 도면이다.
도 25를 참조하면, 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 검색 어플리케이션 (또는, 검색 엔진 웹 페이지를 출력한 브라우저 어플리케이션)을 실행할 수 있다. 상기 검색 어플리케이션의 실행에 의해 전자 장치의 디스플레이에는 화면 2501이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2501에 표시된 소프트 키보드(2551)를 이용하여 입력 필드(2550)에 검색 쿼리(예: "hotel")를 입력할 수 있다.
일 실시 예에 따르면, 상기 전자 장치는 입력되는 검색 쿼리(예: "hotel")에 응답하여 자동으로 상기 검색 쿼리(예: "hotel")의 검색 결과를 디스플레이에 표시할 수 있다. 예를 들어, 상기 검색 결과는, 화면 2501에 도시된 바와 같이, 복수의 카테고리(예: "TOP HITS", "GOOGLE MAPS")가 순서대로 포함된 카테고리 목록을 포함할 수 있다. 상기 카테고리 "TOP HITS"에는 하나의 아이템 2511이 포함될 수 있고, "GOOGLE MAPS" 카테고리 에는 3개의 아이템 2512-2514가 포함될 수 있다.
일 실시 예에 따르면, 사용자는 화면 2501에 포함된 기능 객체(2510)(예: 검색 키)에 대한 터치(25-1)(예: "약한 포스 터치" 또는 "강한 포스 터치")를 수행할 수 있다. 전자 장치는 상기 터치(25-1)에 응답하여 상기 입력 쿼리(예: "hotel")의 검색 결과를 재배열하여 디스플레이에 표시할 수 있다. 예컨대, 화면 2501에는 "TOP HITS" 카테고리 및 "GOOGLE MAPS" 카테고리 순서로 배치되어 있으나, 전자 장치는 상기 터치(25-1)에 응답하여, 화면 2502에 도시된 바와 같이, "GOOGLE MAPS" 카테고리, "TURBOSCAN" 카테고리 (아이템 2515를 포함함), 및 "TOP HITS" 카테고리 순서로 카테고리 목록을 재구성할 수 있다.
유사하게, 사용자는 화면 2502에 포함된 기능 객체(2510)(예: 검색 키)에 대한 터치(25-2)(예: "약한 포스 터치" 또는 "강한 포스 터치")를 수행할 수 있다. 전자 장치는 상기 터치(25-2)에 응답하여 상기 입력 쿼리(예: "hotel")의 검색 결과를 다시 재배열하여 디스플레이에 표시할 수 있다. 예컨대, 화면 2502에는 "GOOGLE MAPS" 카테고리, "TURBOSCAN" 카테고리, 및 "TOP HITS" 카테고리 순서로 배치되어 있으나, 전자 장치는 상기 터치(25-2)에 응답하여, 화면 2503에 도시된 바와 같이, "TURBOSCAN" 카테고리, "TOP HITS" 카테고리, 및 "GOOGLE MAPS" 카테고리 순서로 카테고리 목록을 구성할 수 있다.
한편, 일 실시 예에 따르면, 전자 장치는 지정된 시간 이상의 포스 터치(25-3)(예: 도 7의 70-E 또는 70-G)를 검출할 수 있다. 예를 들어, 상기 지정된 시간 이상의 포스 터치(25-3)가 검출되면, 전자 장치는 상기 지정된 시간 동안 화면 2501 또는 2502에 포함된 카테고리 목록을 연속적으로 재배열(혹은 셔플(shuffle))할 수 있다. 일 예에 따르면, 상기 지정된 시간 이상의 포스 터치가 종료되면, 전자 장치는, 화면 2504에 도시된 바와 같이, 상기 재배열 (혹은 셔플(shuffle))을 정지하고, 다시 소프트 키보드(2551)를 출력할 수 있다.
도 26은 또 다른 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 설명하기 위한 도면이다.
도 26을 참조하면, 일 실시 예에 따른 포스 터치에 기반한 콘텐트 정렬 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 검색 어플리케이션 (또는, 검색 엔진 웹 페이지를 출력한 브라우저 어플리케이션)을 실행할 수 있다. 상기 검색 어플리케이션의 실행에 의해 전자 장치의 디스플레이에는 화면 2601이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2601에 표시된 소프트 키보드(2651)를 이용하여 입력 필드(2650)에 검색 쿼리(예: "1 달러")를 입력할 수 있다.
일 실시 예에 따르면, 상기 전자 장치는 입력되는 검색 쿼리(예: "1 달러")에 응답하여 자동으로 상기 검색 쿼리(예: "1 달러")의 검색 결과를 디스플레이에 표시할 수 있다. 예를 들어, 상기 검색 결과는, 화면 2601에 도시된 바와 같이, 복수의 카테고리(예: 환율 검색(2611), 웹 검색(2612), App Store 검색(2613), 지도 검색(2614))가 순서대로 포함된 카테고리 목록을 포함할 수 있다. 이때 상기 환율 검색(2611) 카테고리에는 확장 정보(extended information)를 포함한 아이템(2611e)이 포함될 수 있다.
일 실시 예에 따르면, 사용자는 화면 2601에 포함된 기능 객체(2610)(예: 검색 키)를 터치(26-1)(예: "약한 포스 터치" 또는 "강한 포스 터치")할 수 있다. 전자 장치는 상기 터치(26-1)에 응답하여 상기 입력 쿼리(예: "1 달러")의 검색 결과를 재구성하여 디스플레이에 표시할 수 있다. 예컨대, 전자 장치는 상기 터치(26-1)에 응답하여, 화면 2602에 도시된 바와 같이, 환율 검색(2611)의 확장 정보를 포함한 아이템(2611e)을 표시하지 아니하고, 웹 검색(2612)의 확장 정보를 포함한 아이템(2612e)을 표시할 수 있다.
유사하게, 사용자는 화면 2602에 포함된 기능 객체(2610)(예: 검색 키)를 터치(26-2)(예: "약한 포스 터치" 또는 "강한 포스 터치")할 수 있다. 전자 장치는 상기 터치(26-2)에 응답하여 상기 입력 쿼리(예: "1 달러의")의 검색 결과를 다시 재구성하여 디스플레이에 표시할 수 있다. 예컨대, 전자 장치는 상기 터치(26-2)에 응답하여, 화면 2603에 도시된 바와 같이, 웹 검색(2612)의 확장 정보를 포함한 아이템(2612e)을 표시하지 아니하고, App Store 검색(2613)의 확장 정보를 포함한 아이템(2613e)을 표시할 수 있다.
한편, 일 실시 예에 따르면, 전자 장치는 지정된 시간 이상의 포스 터치(26-3)(예: 도 7의 70-E 또는 70-G)를 검출할 수도 있다. 예를 들어, 상기 지정된 시간 이상의 포스 터치(26-3)가 검출되면, 전자 장치는 상기 지정된 시간 동안 카테고리들(2611-2614)의 확장 정보를 포함한 아이템을 순차적으로 표시할 수 있다. 일 예에 따르면, 상기 지정된 시간 이상의 포스 터치가 종료되면, 전자 장치는, 화면 2604에 도시된 바와 같이, 카테고리들(2611-2614)의 확장 정보를 포함한 아이템을 순차적으로 표시하는 동작을 정지하고, 다시 소프트 키보드(2651)를 출력할 수 있다.
한편, 다양한 실시 예에 따르면, 도 25 및 도 26에서는 검색 쿼리가 텍스트인 것으로 설명하였으나, 상기 검색 쿼리는 이미지, 비디오, 음성입력과 같은 다양한 쿼리를 포함할 수 있다.
도 27은 일 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 설명하기 위한 도면이다.
도 27을 참조하면, 일 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 이메일 어플리케이션 (또는, 웹 메일 페이지를 출력한 브라우저 어플리케이션)을 실행할 수 있다. 상기 이메일 어플리케이션의 실행에 의해 전자 장치의 디스플레이에는 화면 2701이 표시될 수 있다. 사용자는, 예를 들어, 상기 화면 2701에는 복수의 메일을 포함하는 메일 목록이 포함될 수 있다.
일 실시 예에 따르면, 사용자는 상기 메일 목록 중 어느 한 메일(2711)에 포함된 객체(2710)를 터치(27)(예: "약한 포스 터치" 또는 "강한 포스 터치")할 수 있다. 예를 들어, 상기 객체(2710)는 상기 메일(2711)의 발신자(예: "Coursera")를 나타낼 수 있다. 전자 장치는 상기 터치(27)에 응답하여, 객체(2710)가 지시하는 발신자(예: "Coursera")가 보낸 메일들의 목록 화면 2702를 디스플레이에 표시할 수 있다.
다양한 실시 예에 따르면, 상기 객체(2710)는 메일의 발신자를 나타내는 아이콘뿐만 아니라, 메일의 발신자의 이름 및 이메일 주소를 나타낸 텍스트를 포함할 수 있다.
도 28은 또 다른 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 설명하기 위한 도면이다.
도 28을 참조하면, 일 실시 예에 따른 포스 터치에 기반한 메일 목록 정렬 방법을 수행하는 전자 장치가 도시되어 있다. 일 실시 예에 따르면, 상기 전자 장치는 이메일 어플리케이션 (또는, 웹 메일 페이지를 출력한 브라우저 어플리케이션)을 실행할 수 있다. 상기 이메일 어플리케이션의 실행에 의해 전자 장치의 디스플레이에는 화면 2800이 표시될 수 있다. 예를 들어, 상기 화면 2800에는 복수의 메일을 포함하는 메일 목록이 포함될 수 있다.
일 실시 예에 따르면, 상기 메일 목록 중 적어도 일부 메일에는 읽지 않은(unread) 메일을 나타내는 객체(2810) 및 첨부파일이 포함된 메일을 나타내는 객체(2820)가 포함될 수 있다.
예를 들면, 사용자는 일부 메일에 포함된 객체(2810) 중 하나를 포스 터치(예: "약한 포스 터치" 또는 "강한 포스 터치")할 수 있다. 상기 객체(2810)에 대해 포스 터치가 이루어지면, 전자 장치는, 화면 2801에 도시된 바와 같이, 전체 메일 목록 중 읽지 않은 메일들의 목록을 디스플레이에 표시할 수 있다.
예를 들면, 사용자는 일부 메일에 포함된 객체(2820) 중 하나를 포스 터치(예: "약한 포스 터치" 또는 "강한 포스 터치")할 수 있다. 상기 객체(2820)에 대해 포스 터치가 이루어지면, 전자 장치는, 화면 2802에 도시된 바와 같이, 전체 메일 목록 중 첨부파일이 포함된 메일들의 목록을 디스플레이에 표시할 수 있다.
도 29는 일 실시 예에 따른 터치의 압력에 응답하여 이미지 객체가 선택되는 것을 설명하기 위한 도면이다.
도 29를 참조하면, 일 실시 예에 따른 터치의 압력에 응답하여 이미지 객체를 선택하는 방법을 수행하는 전자 장치(2900)가 도시되어 있다. 예를 들어, 상기 전자 장치(2900)은 이미지 뷰어 어플리케이션을 실행할 수 있다. 예컨대, 전자 장치(2900)는 상기 이미지 뷰어 어플리케이션을 실행에 의해 일정한 이미지를 포함한 화면 2910-1을 표시할 수 있다.
화면 2910-1을 참조하면, 사용자는 디스플레이(혹은 화면 2910-1) 상에서 터치(29)를 수행할 수 있다. 전자 장치(2900)는 상기 터치(29)에 응답하여 상기 터치(29)의 위치 및 압력을 검출할 수 있다. 일 실시 예에 따르면, 전자 장치는 감지된 상기 터치(29)의 압력 레벨에 따라서 화면 2910-2, 2910-3, 또는 2910-4를 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(2900)는 상기 터치(29)의 압력이 제1 압력 레벨 이하이거나 낮은 경우("탭"), 화면 2910-2를 디스플레이에 출력할 수 있다. 상기 화면 2910-2에 따르면, 전자 장치(2900)는 이미지 객체 인식 알고리즘(예: 안면 인식 알고리즘 등)에 기반하여, 전체 이미지 중 터치(29)가 이루어진 위치에 대응하는 이미지 객체(예: 얼굴 객체)(2922)를 선택할 수 있다.
일 실시 예에 따르면, 전자 장치(2900)는 화면 2910-1 상에서 이루어진 터치(29)의 압력이 제1 압력 레벨 보다 크고 (혹은 이상이고), 제2 압력 레벨보다 낮으면 (혹은 미만이면) ("약한 포스 터치"), 화면 2910-3를 출력할 수 있다. 상기 화면 2910-3에 따르면, 전자 장치(2900)는 이미지 객체 인식 알고리즘에 기반하여, 인물의 얼굴 및 상반신이 포함된 이미지 객체(2933)를 선택할 수 있다. 즉, 터치(29)의 압력이 증가함에 따라서 선택되는 이미지 객체를 확장할 수 있다.
일 실시 예에 따르면, 전자 장치(2900)는 화면 2910-1 상에서 이루어진 터치(29)의 압력이 제2 압력 레벨 보다 크면 (혹은 이상이면), ("강한 포스 터치"), 화면 2910-4를 출력할 수 있다. 상기 화면 2910-4에 따르면, 전자 장치(2900)는 이미지 객체 인식 알고리즘에 기반하여, 인물의 얼굴, 상반신, 및 하반신이 포함된 이미지 객체(2944)를 선택할 수 있다. 즉, 터치(29)의 압력이 증가함에 따라서 선택되는 이미지 객체를 더욱 확장할 수 있다.
화면 2910-4에서는 단일 인물을 중심으로 이미지 객체의 선택 범위를 확장하였으나, 이에 제한되지 않는다. 예를 들면, 전자 장치(2900)는 화면 2910-1 상에서 이루어진 터치(29)의 압력이 약한 포스 터치이거나 또는 강한 포스 터치인 경우, 상기 터치(29)의 위치에 대응하는 인물의 얼굴을 포함한 이미지 객체와 인접한 인물의 얼굴을 포함한 이미지 객체를 동시에 선택할 수도 있다. 또한, 도 29에서 이미지 객체는 해당 이미지 객체의 경계를 따라서 선택 및 특정되었으나, 원, 다각형 등의 형태로 선택 및 특정될 수도 있다.
도 29에서 이미지 객체를 선택하는 사용자의 터치(29)는 단일 터치를 전제로 설명하였으나, 다양한 실시 예에 따르면, 전자 장치(2900)는 2 이상의 터치를 포함하는 멀티 터치를 지원할 수도 있다. 도 29에서 전자 장치의 화면에 표시되는 이미지는 스틸 이미지를 전제로 설명하였으나, 비디오의 어느 한 프레임에 해당하는 이미지에 해당할 수도 있다.
일 실시 예에 따르면, 위와 같이 이미지 객체가 선택되면, 전자 장치(2900)는 선택된 이미지 객체를 기반으로 다양한 동작을 수행할 수 있다. 예를 들면, 전자 장치(2900)는 선택된 이미지 객체를 검색 쿼리로 활용하여 지정된 검색 엔진으로부터 유사 이미지를 제공받을 수 있다. 이때, 선택된 이미지 객체의 선택 범위(예: "얼굴, 얼굴+상반신, 얼굴+상반신+하반신)에 따라서 검색 결과는 상이할 수 있다. 다양한 실시 예에 따르면, 상기 지정된 검색 엔진은 유사 이미지에 한하지 않고, 상기 선택된 이미지 객체에 관한 정보(예컨대, 선택된 이미지가 건물인 경우 해당 건물의 지리적 위치, 또는 플로어 인포메이션 등)을 제공할 수도 있다.
또 다른 예를 들면, 전자 장치(2900)는 선택된 이미지 객체와 유사한 이미지 객체를 포함한 이미지들을 전자 장치(2900)의 메모리로부터 검색 및 정렬(sorting)하여, 해당 검색 결과 리스트를 사용자에게 제공할 수 있다. 마찬가지로, 선택된 이미지 객체의 선택 범위에 따라서 검색 결과 리스트는 서로 상이할 수 있다.
또 다른 예를 들면, 전자 장치(2900)는 선택된 이미지 객체를 중심으로, 당해 선택된 이미지 객체를 클로즈업하여 디스플레이에 출력할 수 있다. 또 다른 예를 들면, 전자 장치(2900)는 선택된 이미지 객체를 클립 보드에 저장하고, 이를 추후 다른 어플리케이션(예: 이미지 편집 어플리케이션 등)의 동작에 이용할 수도 있다.
도 30는 또 다른 실시 예에 따른 터치의 압력에 응답하여 선택 영역이 특정되는 것을 설명하기 위한 도면이다.
도 30를 참조하면, 일 실시 예에 따른 터치의 압력에 응답하여 선택 영역을 특정하는 방법을 수행하는 전자 장치(3000)가 도시되어 있다. 예를 들어, 상기 전자 장치(3000)는, 지도 어플리케이션을 실행할 수 있다. 예컨대, 전자 장치(3000)는 상기 지도 어플리케이션을 실행함으로써 디스플레이에 상기 지도 어플리케이션의 사용자 인터페이스 및/또는 지도 콘텐츠(예: 화면 3010-1에 포함된 지도)를 표시할 수 있다.
화면 3010-1을 참조하면, 사용자는 디스플레이(혹은 화면 3010-1) 상에서 터치(30)를 수행할 수 있다. 전자 장치(3000)는 상기 터치(30)에 응답하여 상기 터치(30)의 위치 및 압력을 검출할 수 있다. 전자 장치(3000)는 터치(30)의 압력이 제1 압력 레벨보다 높은 경우, 상기 터치(30)를 "포스 터치"로 인식할 수 있다.
전자 장치(3000)는 상기 "포스 터치"를 인식하였으므로, 터치(30)가 이루어진 위치를 중심으로 하는 가이드(3011)을 디스플레이에 표시할 수 있다. 상기 가이드(3011)는 터치(30)의 압력에 따라서 커지거나 작아질 수 있다. 일 실시 에에 따르면, 전자 장치(3000)는 감지된 터치(30)의 압력 레벨에 따라서 화면 3010-2 또는 화면 3010-3을 출력할 수 있다.
일 실시 예에 따르면, 전자 장치(3000)는 화면 3010-1 상에서 이루어진 터치(30)의 압력이 제1 압력 레벨 보다 크고 (혹은 이상이고), 제2 압력 레벨보다 낮으면 (혹은 미만이면) ("약한 포스 터치"), 화면 3010-2를 출력할 수 있다. 상기 화면 3010-2에 따르면, 전자 장치(3000)는 상기 약한 포스 터치가 감지되면 상기 터치(30)가 이루어진 위치를 중심으로 제1 거리(예: 500m)를 반지름으로 하는 원형 영역(3022)를 선택할 수 있다.
일 실시 예에 따르면, 전자 장치(3000)는 화면 3010-1 상에서 이루어진 터치(30)의 압력이 제2 압력 레벨 보다 크면 (혹은 이상이면), ("강한 포스 터치"), 화면 3010-3를 출력할 수 있다. 상기 화면 3010-3에 따르면, 전자 장치(3000)는 상기 강한 포스 터치가 감지되면 상기 터치(30)가 이루어진 위치를 중심으로 제2 거리(예: 1000m)를 반지름으로 하는 원형 영역(3033)를 선택할 수 있다. 즉, 전자 장치는 터치(30)의 압력이 증가함에 따라서 선택되는 영역을 확장할 수 있다.
도 30에서는 단일의 터치(30)를 이용한 선택 영역의 지정을 설명하였으나, 이에 제한되지 않는다. 다양한 실시 예에 따르면, 상기 선택 영역은 2 이상의 터치를 포함한 멀티 터치를 지원할 수 있다. 예를 들어 두 개의 터치가 이루어진 위치를 원의 지름 또는 반지름으로 설정하여 선택 영역을 지정할 수도 있다.
본 발명의 다양한 실시 예에 의하면, 사용자로부터 수신되는 터치의 압력 레벨에 따라서 상이한 기능을 제공할 수 있다. 이를 통해 사용자에게 보다 다채로운 사용자 경험을 제공할 수 있다.
일 실시 예에 따른, 적어도 하나의 프로세서에 의해 실행되며, 컴퓨터로 읽을 수 있는 인스트럭션들이 저장된 컴퓨터 기록 매체에 있어서, 상기 인스트럭션들은, 디스플레이에 사용자 인터페이스를 표시하는 어플리케이션 프로그램을 런칭하는 동작, 상기 사용자 인터페이스에 상기 복수의 아이템의 배열을 표시하는 동작, 터치 센서로부터 생성된 제1 데이터를 수신하는 동작, 압력 센서로부터 생성된 제2 데이터를 수신하는 동작, 상기 제1 데이터에 적어도 기반하여 상기 복수의 아이템 중 하나를 선택하는 동작, 상기 제2 데이터에 적어도 기반하여 복수의 압력 레벨 중 하나를 선택하는 동작, 및 상기 선택된 상기 복수의 압력 레벨 중 하나에 적어도 기반하여, 상기 선택된 상기 복수의 아이템 중 하나와 연관된 복수 세트의 정보 중 하나를 상기 디스플레이에 표시하는 동작을 수행하도록 설정될 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 압력 레벨은, 이산적인 제1 레벨 및 상기 제1 레벨보다 높은 이산적인 제2 레벨을 포함할 수 있다. 상기 인스트럭션들은 상기 제1 레벨이 선택되면 상기 복수 세트의 정보 중 제1 세트의 정보를 상기 디스플레이에 표시하는 동작, 및 상기 제2 레벨이 선택되면 상기 복수 세트의 정보 중 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션을 포함하고, 상기 제2 세트의 정보는 상기 제1 세트의 정보보다 더 많은 정보를 포함할 수 있다.
일 실시 예에 따른 전자 장치는, 디스플레이, 터치 센서, 압력 센서, 상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서, 및 상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함할 수 있다. 상기 메모리는, 실행 시에, 상기 프로세서가, 상기 디스플레이에 복수의 아이템을 표시하고, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고, 상기 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하고, 상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 입력 쿼리(input query), 및 상기 입력 쿼리에 대한 검색 결과를 요청(request)하도록 설정된 기능 객체(functional object)를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 입력 쿼리의 제1 검색 결과를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 입력 쿼리의 제2 검색 결과를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 입력 쿼리의 제3 검색 결과를 포함하는 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
예를 들면, 상기 제1 검색 결과는, 적어도 하나의 카테고리를 포함한 카테고리 목록(category list)을 포함할 수 있다. 또 다른 예를 들면, 상기 제2 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템을 포함할 수 있다. 또 다른 예를 들면, 상기 제3 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템 중, 상기 입력 쿼리와 연관성이 가장 높은 아이템의 상세 정보를 포함할 수 있다.
예를 들면, 상기 제1 검색 결과는 상기 입력 쿼리가 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또 다른 예를 들면, 상기 제2 검색 결과는 상기 입력 쿼리가 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 또 다른 예를 들면, 상기 제3 검색 결과는 상기 입력 쿼리가 제3 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 이때 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높고, 상기 제3 레벨의 정확도보다 낮게 설정될 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 텍스트를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 텍스트를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 텍스트를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 텍스트를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
예를 들면, 상기 텍스트는 이메일 어플리케이션의 실행 화면에 포함될 수 있다. 이때, 상기 제1 세트의 정보는 상기 텍스트가 메일 제목(title)에 포함되어 있는 메일 목록을 포함할 수 있다. 상기 제2 세트의 정보는 상기 텍스트가 상기 메일 제목 또는 메일 본문(body)에 포함된 메일 목록을 포함할 수 있다.
또 다른 예를 들면, 상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함될 수 있다. 이때, 상기 제1 세트의 정보는 상기 텍스트가 제1 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 상기 제2 세트의 정보는 상기 텍스트가 제2 레벨의 정확도로 포함된 검색 결과를 포함할 수 있다. 상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높을 수 있다.
또 다른 예를 들면, 상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함될 수 있다. 상기 제1 세트의 정보는 상기 텍스트의 상기 전자 장치 내 검색 결과를 포함할 수 있다. 상기 제2 세트의 정보는 상기 텍스트의 웹 검색 결과를 포함할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 이미지 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 이미지 객체를 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제1 레벨로 유사한 이미지 객체를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제2 레벨로 유사한 이미지 객체를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다. 이때, 상기 제2 레벨의 유사도는 상기 제1 레벨의 유사도보다 높게 설정될 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 지정된 어플리케이션의 아이콘을 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 아이콘을 선택하고, 상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 지정된 어플리케이션의 실행 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다. 이때, 상기 제3 세트의 정보의 정보량은, 상기 제2 세트의 정보의 정보량보다 더 많을 수 있다. 또한, 예를 들면, 상기 제2 세트의 정보 또는 상기 제3 세트의 정보는, 상기 지정된 어플케이션의 알림(notification) 정보를 포함할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은 지정된 기능 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 지정된 기능 객체를 선택하고, 상기 검출된 터치의 압력이 제1 압력 레벨 이하이면 상기 지정된 기능 객체에 링크되어 있는 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
또 다른 실시 예에 따르면, 상기 복수의 아이템은, 지정된 어플리케이션의 실행 화면에 포함된 기능 객체를 포함할 수 있다. 상기 메모리는 상기 프로세서가, 상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고, 상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면, 상기 기능 객체를 포함한 상기 실행 화면을 제1 레이아웃으로 구성한 제1 세트의 정보를 상기 디스플레이에 표시하고, 상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 객체를 포함한 상기 실행 화면을 제2 레이아웃으로 구성한 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장할 수 있다.
본 문서에서 사용된 용어 "모듈"은, 예를 들면, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은, 예를 들면, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component), 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그램 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어가 프로세서(예: 프로세서(120))에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 메모리(130)가 될 수 있다.
컴퓨터로 판독 가능한 기록 매체는, 하드디스크, 플로피디스크, 마그네틱 매체(magnetic media)(예: 자기테이프), 광기록 매체(optical media)(예: CD-ROM, DVD(Digital Versatile Disc), 자기-광 매체(magneto-optical media)(예: 플롭티컬 디스크(floptical disk)), 하드웨어 장치(예: ROM, RAM, 또는 플래시 메모리 등) 등을 포함할 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 다양한 실시 예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
다양한 실시 예에 따른 모듈 또는 프로그램 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 다양한 실시 예에 따른 모듈, 프로그램 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
그리고 본 문서에 개시된 실시 예는 개시된, 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 발명의 범위를 한정하는 것은 아니다. 따라서, 본 문서의 범위는, 본 발명의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예를 포함하는 것으로 해석되어야 한다.

Claims (15)

  1. 전자 장치에 있어서,
    디스플레이;
    터치 센서;
    압력 센서;
    상기 디스플레이, 상기 터치 센서, 및 상기 압력 센서와 전기적으로 연결된 적어도 하나의 프로세서; 및
    상기 적어도 하나의 프로세서와 전기적으로 연결된 메모리를 포함하고,
    상기 메모리는, 실행 시에, 상기 프로세서가,
    상기 디스플레이에 복수의 아이템을 표시하고,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 복수의 아이템 중 적어도 하나를 선택하고,
    상기 압력 센서를 이용하여 상기 터치의 압력 레벨을 검출하고,
    상기 검출된 터치의 압력 레벨에 응답하여, 상기 선택된 적어도 하나의 아이템과 연관된 적어도 한 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  2. 청구항 1에 있어서,
    상기 복수의 아이템은 입력 쿼리(input query), 및 상기 입력 쿼리에 대한 검색 결과를 요청(request)하도록 설정된 기능 객체(functional object)를 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고,
    상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 입력 쿼리의 제1 검색 결과를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 입력 쿼리의 제2 검색 결과를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 입력 쿼리의 제3 검색 결과를 포함하는 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  3. 청구항 2에 있어서,
    상기 제1 검색 결과는, 적어도 하나의 카테고리를 포함한 카테고리 목록(category list)을 포함하는, 전자 장치.
  4. 청구항 2에 있어서,
    상기 제2 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템을 포함하는, 전자 장치.
  5. 청구항 2에 있어서,
    상기 제3 검색 결과는, 상기 입력 쿼리와의 연관성이 가장 높은 카테고리에 속한 적어도 하나의 아이템 중, 상기 입력 쿼리와 연관성이 가장 높은 아이템의 상세 정보를 포함하는, 전자 장치.
  6. 청구항 1에 있어서,
    상기 복수의 아이템은 텍스트를 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 텍스트를 선택하고,
    상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면 상기 텍스트를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 텍스트를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  7. 청구항 6에 있어서,
    상기 텍스트는 이메일 어플리케이션의 실행 화면에 포함되어 있고,
    상기 제1 세트의 정보는 상기 텍스트가 메일 제목(title)에 포함되어 있는 메일 목록을 포함하고,
    상기 제2 세트의 정보는 상기 텍스트가 상기 메일 제목 또는 메일 본문(body)에 포함된 메일 목록을 포함하는, 전자 장치.
  8. 청구항 6에 있어서,
    상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함되어 있고,
    상기 제1 세트의 정보는 상기 텍스트가 제1 레벨의 정확도로 포함된 검색 결과를 포함하고,
    상기 제2 세트의 정보는 상기 텍스트가 제2 레벨의 정확도로 포함된 검색 결과를 포함하며,
    상기 제2 레벨의 정확도는 상기 제1 레벨의 정확도보다 높은 전자 장치.
  9. 청구항 6에 있어서,
    상기 텍스트는 지정된 어플리케이션에 의한 실행 화면에 포함되어 있고,
    상기 제1 세트의 정보는 상기 텍스트의 상기 전자 장치 내 검색 결과를 포함하고,
    상기 제2 세트의 정보는 상기 텍스트의 웹 검색 결과를 포함하는 전자 장치.
  10. 청구항 1에 있어서,
    상기 복수의 아이템은 이미지 객체를 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 이미지 객체를 선택하고,
    상기 검출된 터치의 압력 레벨이 제1 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제1 레벨로 유사한 이미지 객체를 포함하는 제1 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 선택된 이미지 객체와 제2 레벨로 유사한 이미지 객체를 포함하는 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  11. 청구항 10에 있어서,
    상기 제2 레벨의 유사도는 상기 제1 레벨의 유사도보다 높게 설정된, 전자 장치.
  12. 청구항 1에 있어서,
    상기 복수의 아이템은 지정된 어플리케이션의 아이콘을 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 아이콘을 선택하고,
    상기 검출된 터치의 압력 레벨이 제1 압력 레벨 이하이면 상기 지정된 어플리케이션의 실행 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력 레벨이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 어플리케이션과 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  13. 청구항 12에 있어서,
    상기 제3 세트의 정보의 정보량은, 상기 제2 세트의 정보의 정보량보다 더 많은, 전자 장치.
  14. 청구항 1에 있어서,
    상기 복수의 아이템은 지정된 기능 객체를 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 지정된 기능 객체를 선택하고,
    상기 검출된 터치의 압력이 제1 압력 레벨 이하이면 상기 지정된 기능 객체에 링크되어 있는 화면을 제1 세트의 정보로서 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제2 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면 상기 지정된 기능 객체와 연관된 제3 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
  15. 청구항 1에 있어서,
    상기 복수의 아이템은, 지정된 어플리케이션의 실행 화면에 포함된 기능 객체를 포함하고,
    상기 메모리는 상기 프로세서가,
    상기 터치 센서에서 감지된 터치의 위치에 기반하여 상기 기능 객체를 선택하고,
    상기 검출된 터치의 압력이 제1 압력 레벨을 초과하면, 상기 기능 객체를 포함한 상기 실행 화면을 제1 레이아웃으로 구성한 제1 세트의 정보를 상기 디스플레이에 표시하고,
    상기 검출된 터치의 압력이 상기 제1 압력 레벨보다 높은 제2 압력 레벨을 초과하면, 상기 객체를 포함한 상기 실행 화면을 제2 레이아웃으로 구성한 제2 세트의 정보를 상기 디스플레이에 표시하도록 하는 인스트럭션들을 저장하는 전자 장치.
PCT/KR2017/011857 2016-10-27 2017-10-25 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법 WO2018080169A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/346,010 US10871883B2 (en) 2016-10-27 2017-10-25 Electronic device and method for providing information in response to pressure input of touch

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0140766 2016-10-27
KR1020160140766A KR102636153B1 (ko) 2016-10-27 2016-10-27 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법

Publications (1)

Publication Number Publication Date
WO2018080169A1 true WO2018080169A1 (ko) 2018-05-03

Family

ID=62023816

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2017/011857 WO2018080169A1 (ko) 2016-10-27 2017-10-25 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법

Country Status (3)

Country Link
US (1) US10871883B2 (ko)
KR (1) KR102636153B1 (ko)
WO (1) WO2018080169A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018208225A1 (en) * 2017-05-12 2018-11-15 Razer (Asia-Pacific) Pte. Ltd. Method and apparatus for quantifying button click force
USD944817S1 (en) * 2018-12-28 2022-03-01 Gis Planning, Inc. Display screen or portion thereof with map user interface
USD955402S1 (en) * 2018-12-28 2022-06-21 Gis Planning, Inc. Display screen or portion thereof with map user interface
US11620350B2 (en) * 2020-08-24 2023-04-04 Snap Inc. Vehicle recognition system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100035043A (ko) * 2008-09-25 2010-04-02 삼성전자주식회사 컨텐츠 관리 방법 및 장치
KR20140089224A (ko) * 2013-01-04 2014-07-14 삼성전자주식회사 터치 입력에 기초하여 동작을 실행하는 디바이스 및 동작 실행 방법
KR101474452B1 (ko) * 2008-08-04 2014-12-19 엘지전자 주식회사 이동단말기의 터치입력 제어방법
KR101660803B1 (ko) * 2016-05-03 2016-09-28 아이피랩 주식회사 정보 제공 장치 및 그 방법
KR101669046B1 (ko) * 2014-06-26 2016-10-25 삼성전자주식회사 폴더블 전자 장치의 인터페이싱 방법 및 그 폴더블 전자 장치

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6667750B1 (en) * 1999-07-30 2003-12-23 Curl Corporation Multiple pass layout of graphical objects with elastics
KR101207328B1 (ko) * 2004-08-02 2012-12-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 압력 감지 터치 스크린, 압력 감지 터치 스크린을 구비하는 데이터 처리 시스템, 데이터 처리 시스템과의 사용자 상호작용을 쉽게 하는 방법, 및 컴퓨터 판독 가능한 매체
US8561036B1 (en) * 2006-02-23 2013-10-15 Google Inc. Software test case management
US8542205B1 (en) * 2010-06-24 2013-09-24 Amazon Technologies, Inc. Refining search results based on touch gestures
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
KR20150039024A (ko) * 2013-10-01 2015-04-09 엘지전자 주식회사 이동 단말기
US20170068413A1 (en) * 2015-09-09 2017-03-09 Microsoft Technology Licensing, Llc Providing an information set relating to a graphical user interface element on a graphical user interface
US10620803B2 (en) * 2015-09-29 2020-04-14 Microsoft Technology Licensing, Llc Selecting at least one graphical user interface item

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101474452B1 (ko) * 2008-08-04 2014-12-19 엘지전자 주식회사 이동단말기의 터치입력 제어방법
KR20100035043A (ko) * 2008-09-25 2010-04-02 삼성전자주식회사 컨텐츠 관리 방법 및 장치
KR20140089224A (ko) * 2013-01-04 2014-07-14 삼성전자주식회사 터치 입력에 기초하여 동작을 실행하는 디바이스 및 동작 실행 방법
KR101669046B1 (ko) * 2014-06-26 2016-10-25 삼성전자주식회사 폴더블 전자 장치의 인터페이싱 방법 및 그 폴더블 전자 장치
KR101660803B1 (ko) * 2016-05-03 2016-09-28 아이피랩 주식회사 정보 제공 장치 및 그 방법

Also Published As

Publication number Publication date
US10871883B2 (en) 2020-12-22
KR102636153B1 (ko) 2024-02-14
US20200050326A1 (en) 2020-02-13
KR20180046037A (ko) 2018-05-08

Similar Documents

Publication Publication Date Title
WO2018026170A1 (en) Electronic device and method of recognizing touches in the electronic device
WO2018012719A1 (en) Electronic apparatus having a hole area within screen and control method thereof
WO2017164680A1 (ko) 디스플레이를 가진 전자 장치
WO2017188624A1 (en) Fingerprint verification method and electronic device for performing the same
WO2018199537A1 (en) Electronic device and method of controlling the electronic device based on touch input
WO2017150929A1 (ko) 디스플레이를 제어하는 전자 장치 및 이의 동작 방법
WO2018135753A1 (ko) 전자 장치 및 그의 동작 방법
WO2018131775A1 (ko) 전자 장치 및 그의 동작 방법
WO2016018039A1 (en) Apparatus and method for providing information
WO2018212500A1 (ko) 콘텐츠를 표시하기 위한 방법 및 그 전자 장치
WO2018097478A1 (en) Electronic device for processing multi-modal input, method for processing multi-modal input and sever for processing multi-modal input
WO2018026192A1 (en) Electronic device comprising force sensor
WO2018026102A1 (ko) 전자 장치 및 그의 동작 방법
WO2017010803A1 (en) Method for operating electronic device, and electronic device
WO2018097549A1 (en) Method for processing various inputs, and electronic device and server for the same
WO2015167165A1 (en) Method and electronic device for managing display objects
WO2017026682A1 (en) Device and method for executing application
WO2017111382A1 (en) Electronic device and method for image control thereof
WO2017191957A1 (ko) 화면 표시 방법 및 이를 지원하는 전자 장치
WO2018080115A1 (ko) 압력 센서를 포함하는 전자 장치
WO2018056641A1 (ko) 전자 장치 및 그 제어 방법
WO2018026163A1 (ko) 전면 스크린을 채용한 전자 장치
WO2017078500A1 (ko) 추천 객체를 제공하기 위한 전자 장치 및 방법
WO2017069480A1 (en) Screen outputting method and electronic device supporting the same
WO2018080169A1 (ko) 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17865306

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17865306

Country of ref document: EP

Kind code of ref document: A1