WO2018034555A1 - 디스플레이를 제어하는 전자 장치 및 방법 - Google Patents

디스플레이를 제어하는 전자 장치 및 방법 Download PDF

Info

Publication number
WO2018034555A1
WO2018034555A1 PCT/KR2017/009105 KR2017009105W WO2018034555A1 WO 2018034555 A1 WO2018034555 A1 WO 2018034555A1 KR 2017009105 W KR2017009105 W KR 2017009105W WO 2018034555 A1 WO2018034555 A1 WO 2018034555A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
application
area
electronic device
displayed
Prior art date
Application number
PCT/KR2017/009105
Other languages
English (en)
French (fr)
Inventor
김준환
고정원
김문휘
김혜진
노경욱
박명수
신정우
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to EP17841737.4A priority Critical patent/EP3483715B1/en
Priority to US16/326,658 priority patent/US11036257B2/en
Publication of WO2018034555A1 publication Critical patent/WO2018034555A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1677—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for detecting open or closed state or particular intermediate positions assumed by movable parts of the enclosure, e.g. detection of display lid position with respect to main body in a laptop, detection of opening of the cover of battery compartment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0208—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts
    • H04M1/0214—Foldable telephones, i.e. with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0241—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call
    • H04M1/0243—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call using the relative angle between housings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0241—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call
    • H04M1/0245—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings using relative motion of the body parts to change the operational status of the telephone set, e.g. switching on/off, answering incoming call using open/close detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
    • H04M1/0268—Details of the structure or mounting of specific components for a display module assembly including a flexible display panel
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102—Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/16—Details of telephonic subscriber devices including more than one display unit

Definitions

  • the present invention relates to a flexible electronic device, and to an electronic device and a method for controlling a display.
  • the flexible electronic device refers to an electronic device whose shape may be changed like a paper.
  • the flexible electronic device may deform a shape by applying force to a user, or may be provided in a folded form.
  • Various embodiments of the present disclosure may provide an electronic device and a method of controlling a display of a display in response to a shape change (for example, outspreading or folding) in a flexible electronic device.
  • a shape change for example, outspreading or folding
  • an electronic device for controlling a display comprising: a display configured to display a first application on a first area; And a processor configured to sense a change in shape of the display and to display a second application paired with the first application displayed in the first area in the second area of the display in response to the detection.
  • a display control method of an electronic device may include: displaying a first application on a first area of a display; Detecting a change in shape of the display; Determining a second application associated with the first application displayed in the first area in response to the sensing; And displaying the determined second application on a second area of the display.
  • various embodiments of the present disclosure provide a computer-readable storage medium storing a program including a command for controlling a display of an electronic device, the computer-readable storage medium comprising: a first instruction set for displaying a first application on a first area of a display; A second instruction set for detecting a change in shape of the display; A third instruction set for determining a second application associated with the first application displayed in the first area in response to the sensing; And a fourth instruction set for displaying the determined second application on the second area of the display.
  • a flexible device may be displayed to a user by displaying different user interfaces according to priorities in a shape change (eg, outspreading or folding) operation. It can provide inherent performance.
  • a shape change eg, outspreading or folding
  • the user can quickly execute the desired application.
  • FIG 1 illustrates an electronic device according to various embodiments of the present disclosure.
  • FIG. 2 is a diagram illustrating a front surface of an electronic device according to various embodiments of the present disclosure.
  • FIG 3 is a diagram illustrating a rear surface of an electronic device according to various embodiments of the present disclosure.
  • FIG. 4 illustrates an electronic device in a network environment according to various embodiments of the present disclosure.
  • 5 is a block diagram of an electronic device 101 according to various embodiments.
  • FIG. 6 is a block diagram of a program module according to various embodiments of the present disclosure.
  • FIGS. 7 to 11B are diagrams for describing a program module according to various embodiments of the present disclosure.
  • FIG. 12 is a flowchart illustrating a process of controlling a display of an electronic device according to various embodiments of the present disclosure.
  • FIG. 13 is a flowchart illustrating a process of controlling a display of an electronic device according to an embodiment of the present disclosure.
  • FIG. 14 is an exemplary view illustrating a first embodiment of controlling a display operation of a display by changing a shape while an email application is displayed on a first area of the display of the present invention.
  • 15 is an exemplary view illustrating a second embodiment of controlling a display operation of a display by changing a shape while an email application is displayed on a first area of the display of the present invention.
  • 16 (a) to 16 (c) are exemplary views illustrating a third embodiment of controlling a display operation of a display by changing a shape while a screen indicating a call reception is displayed on a first area of a display of the present invention; to be.
  • 16 (d) to 16 (f) are exemplary diagrams illustrating a fourth embodiment in which a call is received while an email application is displayed on a first area of a display, and the display operation of the display is controlled by a shape change. .
  • FIG. 17 is an exemplary view illustrating a fifth embodiment of controlling a display operation of a display by changing a shape while a map is displayed on a first area of the display of the present invention.
  • FIG. 18 is an exemplary view illustrating a sixth embodiment of controlling a display operation of a display by changing a shape while a contact application is displayed on a first area of the display of the present invention.
  • 19a (a) and 19a (b) show the display by changing the shape in a state in which a keyword to be searched by the user is input through a web browser displayed in the first area of the display of the present invention and the search result is displayed.
  • 19A (c) and 19A (d) are exemplary views showing an eighth embodiment in which the display operation of the display is controlled by changing the shape while a moving image is reproduced in the first region of the display of the present invention. .
  • 19B (e) and 19B (f) are exemplary views illustrating a ninth embodiment in which the display operation of the display is controlled by changing the shape while the conversation application is displayed in the first area of the display of the present invention.
  • 19B (g) and 19B (h) are exemplary views illustrating a tenth embodiment in which a display operation of a display is controlled by changing a shape while a home screen is displayed in a first area of the display of the present invention.
  • expressions such as “A or B,” “at least one of A or / and B,” or “one or more of A or / and B” may include all possible combinations of items listed together.
  • “A or B,” “at least one of A and B,” or “at least one of A or B,” includes (1) at least one A, (2) at least one B, Or (3) both of cases including at least one A and at least one B.
  • first,” “second,” “first,” or “second,” as used herein may modify various components, regardless of order and / or importance, and may form a component. It is used to distinguish it from other components and does not limit the components.
  • the first user device and the second user device may represent different user devices regardless of the order or importance.
  • the first component may be called a second component, and similarly, the second component may be renamed to the first component.
  • One component (such as a first component) is "(functionally or communicatively) coupled with / to" to another component (such as a second component) or " When referred to as “connected to”, it should be understood that any component may be directly connected to the other component or may be connected through another component (eg, a third component).
  • a component e.g., a first component
  • another component e.g., a second component
  • no other component e.g., a third component
  • the expression “configured to” as used in this document is, for example, “having the capacity to” depending on the context, for example, “suitable for,” “. It may be used interchangeably with “designed to,” “adapted to,” “made to,” or “capable of.”
  • the term “configured to” may not necessarily mean only “specifically designed to” in hardware. Instead, in some situations, the expression “device configured to” may mean that the device “can” along with other devices or components.
  • the phrase “processor configured (or configured to) perform A, B, and C” may be implemented by executing a dedicated processor (eg, an embedded processor) to perform its operation, or one or more software programs stored in a memory device. It may mean a general-purpose processor (eg, a CPU or an application processor) capable of performing corresponding operations.
  • An electronic device may include, for example, a smartphone, a tablet personal computer, a mobile phone, a video phone, and an e-book reader.
  • wearable devices may be accessory (eg, watches, rings, bracelets, anklets, necklaces, glasses, contact lenses, or head-mounted-devices (HMDs)), textiles, or clothing one-pieces (eg, it may include at least one of an electronic garment, a body attachment type (eg, a skin pad or a tattoo), or a living implantable type (eg, an implantable circuit).
  • HMDs head-mounted-devices
  • the electronic device may be a home appliance.
  • Home appliances are, for example, televisions, digital video disk (DVD) players, audio, refrigerators, air conditioners, vacuum cleaners, ovens, microwaves, washing machines, air purifiers, set-top boxes, home automation controls Panel (home automation control panel), security control panel, TV box (e.g. Samsung HomeSync TM , Apple TV TM , or Google TV TM ), game console (e.g. Xbox TM , PlayStation TM ), electronic dictionary It may include at least one of an electronic key, a camcorder, a charging device, or an electronic picture frame.
  • DVD digital video disk
  • the electronic device may include a variety of medical devices (e.g., various portable medical measuring devices such as blood glucose meters, heart rate monitors, blood pressure meters, or body temperature meters), magnetic resonance angiography (MRA), magnetic resonance imaging (MRI), Such as computed tomography (CT), imaging or ultrasound, navigation devices, satellite navigation systems (global navigation satellite systems), event data recorders (EDRs), flight data recorders (FDRs), and automotive infotainment ) Devices, ship's electronic equipment (e.g.
  • Point of sales, point of sales, or Internet of things may include at least one.
  • an electronic device may be a piece of furniture or a building / structure, an electronic board, an electronic signature receiving device, a projector, or various measuring devices (eg, Water, electricity, gas, or radio wave measuring instrument).
  • the electronic device may be a combination of one or more of the aforementioned various devices.
  • An electronic device according to an embodiment may be a flexible electronic device.
  • the electronic device according to an embodiment of the present disclosure is not limited to the above-described devices, and may include a new electronic device according to technology development.
  • the term user may refer to a person who uses an electronic device or a device (eg, an artificial intelligence electronic device) that uses an electronic device.
  • a device eg, an artificial intelligence electronic device
  • FIG 1 illustrates an electronic device according to various embodiments of the present disclosure.
  • a display 160 may be disposed on the front surface 102 of the electronic device 101.
  • the display 160 may be largely formed to occupy most of the front surface 102 of the electronic device 101.
  • the main home screen may be displayed on the display 160.
  • the main home screen may be a first screen or a graphical user interface (GUI) capable of user interaction displayed on the display 160 when the electronic device 101 is powered on.
  • the home screen may display at least one of shortcut icons for executing frequently used applications, a main menu switch key, time, and weather. When the user selects the main menu switch key, the menu screen may be displayed on the display 160.
  • a status bar that displays at least one state of the electronic device 101 such as a battery charging state, a strength of a received signal, or a current time may be displayed on the top of the display 160.
  • the front 102 edge (or bezel, or case portion around the display 160) of the electronic device 101 located below the display 160 may have a home button, menu button, and / or go back. Buttons can be formed.
  • the home button can be used to show the main home screen on the display.
  • the home button may be used to display recently used applications on the display 160 or to display a task manager.
  • the menu button can be used to provide a connection menu that can be displayed on the display 160.
  • the connection menu may include at least one of a widget add menu, a background change menu, a search menu, an edit menu, an environment setting menu, and the like.
  • the back button may be used to display a screen executed immediately before the currently running screen or to terminate the most recently used application.
  • the first camera 110 and / or at least one sensor such as a distance sensor, an illuminance sensor, or a proximity sensor may be disposed at an edge of the front surface 102 of the electronic device 101 positioned on the display 160.
  • at least one sensor such as a second camera 310, a flash, a speaker, and / or a distance sensor may be disposed on the rear surface 330 of the electronic device 101.
  • At least one of, for example, a volume button having a power / lock button, a volume up button and a volume down button, a terrestrial DMB antenna for receiving a broadcast, and at least one microphone may be disposed on the side 104 of the electronic device 101. have.
  • the electronic device 101 can detect an input for changing the shape of the display 160.
  • the electronic device 101 detects an input by outspreading the display 160 or folding the display 160, and displays an operation of the display 160 in response to the detected input. Can be controlled.
  • the outspreading refers to an operation of moving the second area below the first area in parallel with the second area while being folded into the first area and the second area of the display 160.
  • the folding refers to an operation of overlapping the first area by spaced apart from the second area in a state where the first area and the second area of the display 160 are parallel to each other. In this way, the display may be located outward while the first area and the second area are folded.
  • FIG. 2 is a diagram illustrating a front surface of an electronic device according to various embodiments of the present disclosure.
  • the electronic device 101 includes a strain sensor 242 (eg, a strain gauge), a first sensor 230, a second sensor 240, and a display 160. It may include.
  • the electronic device 101 may include a hinge (not shown) for an outspreading and / or folding operation, and the display of the display 160 in response to an input by the outspreading and / or folding operation.
  • a circuit board may be further included. The display operation of the display 160, which may be performed by the circuit board, may be performed by the processor 420.
  • the strain sensor 220 may be disposed at the folded position 210 of the electronic device 101, and may output a strain value used to measure the folded angle of the electronic device 101.
  • the electronic device 101 can measure the folded angle of the electronic device 101 or the hinge through the angle sensor 442 that can measure the folding angle of the display 160.
  • the first sensor 230 may be disposed at the upper edge of the front of the display 160, and the second sensor 240 may be disposed at the lower edge of the front of the display 160.
  • the first and second sensors 230 and 240 may detect a change in the folded state of the electronic device 101.
  • the first and second sensors 230 and 240 may each include at least one of a distance sensor and a gyroscope sensor.
  • the first sensor 230 may be a magnetic force sensing sensor
  • the second sensor 240 may be a magnetic force applying sensor.
  • the magnetic force detection sensor can detect the magnetic force intensity caused by. As the distance between the magnetic force sensor and the magnetic force sensor becomes closer as described above, the magnetic strength is changed, so that the electronic device 101 can calculate a folding angle based on the magnetic strength.
  • the display 160 may include a flexible panel for displaying an image and may detect at least one of pressure, fingerprint, and the like, or may include a sensor for detecting such pressure and fingerprint.
  • FIG 3 is a diagram illustrating a rear surface of an electronic device according to various embodiments of the present disclosure.
  • At least one sensor such as a sub display 320, a second camera 310, a flash, a speaker, and / or a distance sensor is disposed on a rear surface 330 of the electronic device 101. Can be arranged.
  • the electronic device 101 may be set to display graphic elements / interfaces / information of preset conditions / types (eg, message count / outgoing information, status information of the electronic device) on the sub display 320.
  • the sub display 320 may be configured to detect a pressure (eg, a user's tap / knock). For example, when the user knocks (eg, double knocks / taps) the sub display 320, the electronic device 101 may be set to display graphic elements / interfaces / information on the sub display 320.
  • the sub display 320 can be configured to detect fingerprint information.
  • FIG. 4 illustrates an electronic device in a network environment according to various embodiments of the present disclosure.
  • the electronic device 101 may include a bus 410, a processor 420, a memory 430, a sensor module (or a sensor unit) 440, an input / output interface 450, a display 160 (eg, the display 160). , And communication interface 470.
  • the electronic device 101 may omit at least one of the components or additionally include other components.
  • the electronic device 101 may be referred to as a frame buffer 463, a graphics processing unit (GPU) 464, a touch screen panel (TSP) 466 (or a touch panel). At least one) may be further included.
  • the bus 410 may include circuitry that connects the components 410-470 to each other and transfers communication (eg, control messages or data) between the components.
  • the processor 420 may include one or more of a central processing unit, an application processor, or a communication processor (CP).
  • the processor 420 may execute, for example, an operation or data processing related to control and / or communication of at least one other component of the electronic device 101.
  • the memory 430 may include volatile and / or nonvolatile memory.
  • the memory 430 may store, for example, commands or data related to at least one other element of the electronic device 101.
  • the memory 430 may store software and / or a program.
  • the program may include, for example, a kernel, middleware, an application programming interface (API), and / or an application program (or “application”). At least a portion of the kernel, middleware, or API may be referred to as an operating system.
  • the kernel may include, for example, system resources (eg, bus 410, processor 420, or the like) used to execute an action or function implemented in other programs (eg, middleware, APIs, or application programs). Memory 430, etc.) may be controlled or managed.
  • the kernel may provide an interface for controlling or managing system resources by accessing individual components of the electronic device 101 from middleware, APIs, or application programs.
  • the middleware may act as an intermediary to allow APIs or application programs to communicate with the kernel to exchange data. Also, the middleware may process one or more work requests received from an application program according to priority. For example, the middleware may give priority to using system resources (eg, the bus 410, the processor 420, or the memory 430) of the electronic device 101 to at least one of the application programs. One or more work requests can be processed.
  • An API is an interface for an application to control functions provided by a kernel or middleware. For example, an API includes at least one interface or function (eg, a command) for file control, window control, image processing, or character control. can do.
  • the sensor module 440 may, for example, measure a physical quantity or detect an operation state of the electronic device 101, and convert the measured or detected information into an electrical signal.
  • the sensor module 440 may include, for example, at least one of the angle sensor 442, the distance sensor 444, and the gyroscope sensor 446.
  • the sensor module 440 may include a global navigation satellite system (GNSS), a global positioning system (GPS), a gesture sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, and a color sensor (eg, RGB ( red, green, blue sensor), a biometric sensor, a temperature / humidity sensor, an illuminance sensor, or an ultra violet (UV) sensor.
  • sensor module 440 may comprise, for example, an e-nose sensor, an electromyography (EMG) sensor, an electrocardiogram (EEG) sensor, an electrocardiogram (ECG) sensor, Infrared (IR) sensors, iris sensors and / or fingerprint sensors.
  • the sensor module 440 may further include a control circuit for controlling at least one or more sensors belonging therein.
  • the electronic device 101 further includes a processor configured to control the sensor module 440 as part of or separately from the processor 410, while the processor 410 is in a sleep state, The sensor module 440 may be controlled.
  • the input / output interface 450 may transmit, for example, a command or data input from a user or another external device to other component (s) of the electronic device 101, or another component of the electronic device 101 ( Commands or data received from the device) can be output to the user or other external device.
  • the input / output interface 450 may include, for example, at least one of a speaker, a receiver, earphones, and a microphone.
  • the display 160 is, for example, a liquid crystal display (LCD), a light emitting diode (LED) display, an organic light emitting diode (OLED) display, a microelectromechanical system (MEMS) display, an electronic paper display, a projector It may include at least one.
  • the display 160 may display, for example, various types of content (eg, text, images, videos, icons, and / or symbols) to the user.
  • the frame buffer 463 may store pixel values or pixel color values to be output to the display 160, and the frame buffer 463 may be stored in the memory, the GPU 464, the display 160, or the display controller. Memory, or a virtual device such as a frame buffer device of Linux.
  • the GPU 464 may generate a screen including various objects such as an item, an image, text, and the like.
  • the GPU 464 calculates at least one attribute value such as a coordinate value, a shape, a size, a color, and the like in which each object is to be displayed according to the layout of the screen, and displays a screen of various layouts including the object based on the calculated attribute value.
  • the screen or application screen may refer to all or part of an image displayed on the surface (or display area) of the display 160.
  • the application screen may be referred to as a graphical interface, a graphical user interface (GUI), an application window, an application area, or the like.
  • GUI graphical user interface
  • the display 160 may include a touch screen panel (not shown) that may receive a touch, gesture, proximity, or hovering input using an electronic pen or a part of a user's body.
  • the touch screen panel may detect touch / hover using, for example, at least one of capacitive, resistive, infrared, or ultrasonic methods.
  • the touch screen panel may further include a control circuit.
  • the touch screen panel may further include a tactile layer to provide a tactile response to the user.
  • the communication interface 470 may establish communication between, for example, the electronic device 101 and an external device (eg, the external electronic device 404 or the server 406).
  • the communication interface 470 may be connected to the network 402 through wireless or wired communication to communicate with an external device (eg, the external electronic device 404 or the server 406).
  • the wireless communication may be, for example, LTE, LTE Advance (LTE-A), code division multiple access (CDMA), wideband CDMA (WCDMA), universal mobile telecommunications system (UMTS), wireless broadband (WiBro), or global network (GSM).
  • LTE Long Term Evolution
  • LTE-A LTE Advance
  • CDMA code division multiple access
  • WCDMA wideband CDMA
  • UMTS universal mobile telecommunications system
  • WiBro wireless broadband
  • GSM global network
  • the wireless communication may include, for example, wireless fidelity (WiFi), Bluetooth, Bluetooth low power (BLE), Zigbee, near field communication (NFC), magnetic secure transmission, and radio. It may include at least one of a frequency (RF) or a body area network (BAN).
  • GNSS GNSS.
  • the GNSS may be, for example, a Global Positioning System (GPS), a Global Navigation Satellite System (Glonass), a Beidou Navigation Satellite System (hereinafter referred to as "Beidou”), or a Galileo, the European global satellite-based navigation system.
  • GPS Global Positioning System
  • Glonass Global Navigation Satellite System
  • Beidou Beidou Navigation Satellite System
  • Galileo the European global satellite-based navigation system.
  • Wired communication may include, for example, at least one of a universal serial bus (USB), a high definition multimedia interface (HDMI), a standard standard232 (RS-232), a power line communication, a plain old telephone service (POTS), and the like.
  • the network 402 may comprise a telecommunications network, eg, at least one of a computer network (eg, LAN or WAN), the Internet, or a telephone network.
  • the external electronic device 404 may be the same or different type of device as the electronic device 101. According to various embodiments of the present disclosure, all or part of operations executed in the electronic device 101 may be executed in another or a plurality of electronic devices (for example, the external electronic device 404 or the server 406). According to one embodiment, when the electronic device 101 needs to perform a function or service automatically or by request, the electronic device 101 may instead or additionally execute the function or service by itself. The associated at least some function may be requested to another device (eg, the external electronic device 404 or the server 406). The other electronic device (for example, the electronic device 404 or the server 406) may execute the requested function or the additional function and transmit the result to the electronic device 101. The electronic device 101 may process the received result as it is or additionally to provide the requested function or service. To this end, for example, cloud computing, distributed computing, or client-server computing technology may be used.
  • 5 is a block diagram of an electronic device 101 according to various embodiments.
  • the electronic device 101 may include all or part of the electronic device 101 shown in FIG. 4.
  • the electronic device 101 may include one or more processors (eg, an AP) 420, a communication module 520, a subscriber identification module 524, a memory 430, a sensor module 540, an input device 550, and a display ( 160, an interface 570, an audio module 580, a camera module 591, a power management module 595, a battery 596, an indicator 597, and a motor 598.
  • the processor 420 may control, for example, a plurality of hardware or software components connected to the processor 420 by running an operating system or an application program, and may perform various data processing and operations.
  • the processor 420 may be implemented with, for example, a system on chip (SoC). According to an embodiment, the processor 420 may further include a graphic processing unit (GPU) and / or an image signal processor. The processor 420 may include at least some of the components illustrated in FIG. 5 (eg, the cellular module 521). The processor 420 may load and process instructions or data received from at least one of other components (eg, nonvolatile memory) into the volatile memory, and store the result data in the nonvolatile memory.
  • SoC system on chip
  • the communication module 520 may be, for example, a cellular module 521, a WiFi module 523, a Bluetooth module 525, a GNSS module 527, an NFC module 528, and the like.
  • RF module 529 may be included.
  • the cellular module 521 may provide, for example, a voice call, a video call, a text service, or an internet service through a communication network.
  • the cellular module 521 may perform identification and authentication of the electronic device 101 in the communication network using the subscriber identification module (eg, the SIM card) 524.
  • the cellular module 521 may perform at least some of the functions that the processor 420 may provide.
  • the cellular module 521 may include a communication processor (CP).
  • CP communication processor
  • at least some (eg, two or more) of the cellular module 521, the WiFi module 523, the Bluetooth module 525, the GNSS module 527, or the NFC module 528 may be one integrated chip. (IC) or in an IC package.
  • the RF module 529 may transmit / receive a communication signal (for example, an RF signal), for example.
  • the RF module 529 may include, for example, a transceiver, a power amp module (PAM), a frequency filter, a low noise amplifier (LNA), an antenna, or the like.
  • PAM power amp module
  • LNA low noise amplifier
  • At least one of the cellular module 521, the WiFi module 523, the Bluetooth module 525, the GNSS module 527, or the NFC module 528 may transmit and receive an RF signal through a separate RF module.
  • Subscriber identification module 524 may include, for example, a card or embedded SIM that includes a subscriber identification module, and may include unique identification information (eg, an integrated circuit card identifier (ICCID)) or subscriber information (eg, an IMSI). (international mobile subscriber identity)).
  • ICCID integrated circuit card identifier
  • subscriber information eg, an IMSI). (international mobile subscriber identity)
  • the memory 430 may include, for example, an internal memory 532 or an external memory 534.
  • the internal memory 532 may include, for example, volatile memory (for example, DRAM, SRAM, or SDRAM) and nonvolatile memory (for example, one time programmable ROM (OTPROM), PROM, EPROM, EEPROM, mask ROM, flash ROM). , Flash memory, hard drive, or solid state drive (SSD).
  • the external memory 534 may be a flash drive, for example, compact flash (CF), secure digital (SD), Micro-SD, Mini-SD, extreme digital (XD), or multi-media card (MMC). Or a memory stick.
  • the external memory 534 may be functionally or physically connected to the electronic device 101 through various interfaces.
  • the sensor module 540 may measure a physical quantity or detect an operation state of the electronic device 101, and may convert the measured or detected information into an electrical signal.
  • the sensor module 540 includes, for example, a gesture sensor 540A, a gyro sensor 540B, an air pressure sensor 540C, a magnetic sensor 540D, an acceleration sensor 540E, a grip sensor 540F, and a proximity sensor ( 540G), color sensor 540H (e.g., red (green, blue) sensor), biometric sensor 540I, temperature / humidity sensor 540J, illuminance sensor 540K, or UV (ultra violet) ) May include at least one of the sensors 540M.
  • a gesture sensor 540A e.g., a gyro sensor 540B, an air pressure sensor 540C, a magnetic sensor 540D, an acceleration sensor 540E, a grip sensor 540F, and a proximity sensor ( 540G), color sensor 540H (e.g., red (
  • sensor module 540 may include, for example, an e-nose sensor, an electromyography (EMG) sensor, an electrocardiogram (EEG) sensor, an electrocardiogram (ECG) sensor, Infrared (IR) sensors, iris sensors and / or fingerprint sensors.
  • the sensor module 540 may further include a control circuit for controlling at least one or more sensors belonging therein.
  • the electronic device 101 further includes a processor configured to control the sensor module 540 as part of or separately from the processor 420, while the processor 420 is in a sleep state, The sensor module 240 may be controlled.
  • the input device 550 may include, for example, a touch panel 552, a (digital) pen sensor 554, a key 556, or an ultrasonic input device 558.
  • the touch panel 552 may use at least one of capacitive, resistive, infrared, or ultrasonic methods, for example.
  • the touch panel 552 may further include a control circuit.
  • the touch panel 552 may further include a tactile layer to provide a tactile response to the user.
  • the (digital) pen sensor 554 may be, for example, part of a touch panel or include a separate recognition sheet.
  • the key 556 may include, for example, a physical button, an optical key, or a keypad.
  • the ultrasonic input device 558 may detect ultrasonic waves generated by an input tool through a microphone (for example, a microphone 588) and check data corresponding to the detected ultrasonic waves.
  • Display 160 may include panel 562, hologram device 564, projector 566, and / or control circuitry for controlling them.
  • the panel 562 may be implemented to be flexible, transparent, or wearable, for example.
  • the panel 562 may be configured with the touch panel 552 and one or more modules.
  • panel 562 may include a pressure sensor (or force sensor) capable of measuring the strength of the pressure on the user's touch.
  • the pressure sensor may be integrated with the touch panel 552, or may be implemented with one or more sensors separate from the touch panel 552.
  • the hologram device 564 may show a stereoscopic image in the air by using interference of light.
  • the projector 566 may display an image by projecting light onto a screen.
  • the screen may be located inside or outside the electronic device 101.
  • the interface 570 may include, for example, an HDMI 572, a USB 574, an optical interface 576, or a D-subminiature 578.
  • the interface 570 may be included in, for example, the communication interface 470 illustrated in FIG. 4. Additionally or alternatively, interface 570 may include, for example, a mobile high-definition link (MHL) interface, an SD card / multi-media card (MMC) interface, or an infrared data association (IrDA) compliant interface.
  • MHL mobile high-definition link
  • MMC multi-media card
  • IrDA infrared data association
  • the audio module 580 may bidirectionally convert, for example, a sound and an electrical signal. At least some components of the audio module 580 may be included in, for example, the input / output interface 450 illustrated in FIG. 4.
  • the audio module 580 may process sound information input or output through, for example, a speaker 582, a receiver 584, an earphone 586, a microphone 588, or the like.
  • the camera module 591 is, for example, a device capable of capturing still images and moving images. According to an embodiment, the camera module 591 may include one or more image sensors (eg, a front sensor or a rear sensor), a lens, and an image signal processor (ISP). Or flash (eg, LED or xenon lamp, etc.).
  • the power management module 595 may manage power of the electronic device 101, for example.
  • the power management module 595 may include a power management integrated circuit (PMIC), a charger IC, or a battery or fuel gauge.
  • the PMIC may have a wired and / or wireless charging scheme.
  • the wireless charging method may include, for example, a magnetic resonance method, a magnetic induction method, an electromagnetic wave method, or the like, and may further include additional circuits for wireless charging, such as a coil loop, a resonance circuit, a rectifier, and the like. have.
  • the battery gauge may measure, for example, the remaining amount of the battery 596, the voltage, the current, or the temperature during charging.
  • Battery 596 may include, for example, a rechargeable cell and / or a solar cell.
  • the indicator 597 may display a specific state of the electronic device 101 or a part thereof (for example, the processor 420), for example, a booting state, a message state, or a charging state.
  • the motor 598 may convert electrical signals into mechanical vibrations, and may generate vibrations or haptic effects.
  • the electronic device 101 may be, for example, a mobile TV supporting device capable of processing media data according to a standard such as digital multimedia broadcasting (DMB), digital video broadcasting (DVB), or mediaFlo TM . : GPU).
  • DMB digital multimedia broadcasting
  • DVD digital video broadcasting
  • mediaFlo TM . : GPU mediaFlo TM .
  • Each of the components described in this document may be composed of one or more components, and the names of the corresponding components may vary depending on the type of electronic device.
  • the electronic device 101 may omit some components, further include additional components, or some of the components may be combined to form a single object, but the combination of the corresponding components before combining may be performed. You can do the same
  • FIG. 6 is a block diagram of a program module according to various embodiments of the present disclosure.
  • the program module 610 may include an operating system (OS) for controlling resources related to an electronic device (eg, the electronic device 101) and / or various applications (eg, running on the operating system).
  • OS operating system
  • applications eg, running on the operating system.
  • the operating system can be an example, and Android (Android TM), iOS TM, Windows (Windows TM), Symbian (Symbian TM), Tizen (Tizen TM), or sea (Samsung bada os TM).
  • the program module 610 may include a kernel 620, middleware 630, an application programming interface (API) 660, and / or an application 670. At least a part of the program module 610 may be preloaded on the electronic device, or may be downloaded from the external electronic device 404 or the server 406.
  • API application programming interface
  • the kernel 620 may include, for example, a system resource manager 621 and / or a device driver 623.
  • the system resource manager 621 may perform control, allocation, or retrieval of system resources.
  • the system resource manager 621 may include a process manager, a memory manager, or a file system manager.
  • the device driver 623 may include, for example, a display driver, a camera driver, a Bluetooth driver, a shared memory driver, a USB driver, a keypad driver, a WiFi driver, an audio driver, or an inter-process communication (IPC) driver. .
  • IPC inter-process communication
  • the middleware 630 may provide various functions through the API 660, for example, to provide functions commonly required by the application 670 or to enable the application 670 to efficiently use limited system resources inside the electronic device. Functions may be provided to the application 670.
  • the middleware 630 may include a runtime library 635, an application manager 641, a window manager 642, a multimedia manager 643, and a resource manager ( resource manager 644, power manager 645, database manager 646, package manager 647, connectivity manager 648, notification manager It may include at least one of a notification manager 649, a location manager 650, a graphic manager 651, or a security manager 652.
  • the runtime library 635 may include, for example, a library module that the compiler uses to add new functionality through the programming language while the application 670 is running.
  • the runtime library 635 may perform input / output management, memory management, or a function for an arithmetic function.
  • the application manager 641 may manage, for example, a life cycle of at least one of the applications 670.
  • the window manager 642 may manage GUI resources used on the screen.
  • the multimedia manager 643 may grasp formats required for playing various media files, and may perform encoding or decoding of media files using a codec suitable for the corresponding format.
  • the resource manager 644 may manage resources such as source code, memory, or storage space of at least one of the applications 670.
  • the power manager 645 may operate together with, for example, a basic input / output system (BIOS) to manage a battery or power, and provide power information necessary for the operation of the electronic device.
  • the database manager 646 may create, search for, or change a database to be used by at least one of the applications 670.
  • the package manager 647 may manage installation or update of an application distributed in the form of a package file.
  • the connection manager 648 may manage, for example, a wireless connection such as WiFi or Bluetooth. Notification manager 649 may display or notify events such as arrival messages, appointments, proximity notifications, and the like in a manner that does not disturb the user.
  • the location manager 650 may manage location information of the electronic device.
  • the graphic manager 651 may manage graphic effects to be provided to the user or a user interface related thereto.
  • the security manager 652 may provide various security functions required for system security or user authentication. According to an embodiment of the present disclosure, when the electronic device (for example, the electronic device 101) includes a telephone function, the middleware 630 further includes a telephone manager for managing a voice or video call function of the electronic device. can do.
  • the middleware 630 may include a middleware module that forms a combination of various functions of the above-described components.
  • the middleware 630 may provide a module specialized for each type of OS in order to provide a differentiated function.
  • the middleware 630 may dynamically delete some of the existing components or add new components.
  • the API 660 (eg, the API 145) is, for example, a set of API programming functions, and may be provided in different configurations depending on the operating system. For example, in the case of Android or iOS, one API set may be provided for each platform, and in Tizen, two or more API sets may be provided for each platform.
  • the application 670 may be, for example, a home 671, a dialer 672, an SMS / MMS 673, an instant message (IM) 674, a browser 675, a camera 676, an alarm 677. , Contact 678, voice dial 679, email 680, calendar 681, media player 682, album 683, or clock 684, health care (e.g., One or more applications capable of performing functions such as measuring blood sugar, or providing environmental information (eg, providing barometric pressure, humidity, or temperature information).
  • the application 670 may be an application that supports information exchange between an electronic device (for example, the electronic device 101) and the external electronic device 404 or the server 406 (hereinafter, for convenience of description).
  • Information exchange application may include, for example, a notification relay application for delivering specific information to an external electronic device, or a device management application for managing the external electronic device.
  • the notification delivery application may be configured to display notification information generated by another application of the electronic device (eg, an SMS / MMS application, an email application, a health care application, or an environmental information application). It may include a function to deliver). Also, the notification delivery application may receive notification information from an external electronic device and provide the notification information to a user, for example.
  • another application of the electronic device eg, an SMS / MMS application, an email application, a health care application, or an environmental information application.
  • the notification delivery application may receive notification information from an external electronic device and provide the notification information to a user, for example.
  • the device management application may, for example, turn on / turn off at least one function of the external electronic device 404 or server 406 (eg, the external electronic device itself (or some component)) in communication with the electronic device. -Off or adjust the brightness (or resolution) of the display, manage applications (e.g., install, delete, or update) applications on the external electronic device or services provided by the external electronic device (e.g., call service or message service) )can do.
  • manage applications e.g., install, delete, or update
  • applications on the external electronic device or services provided by the external electronic device e.g., call service or message service
  • the application 670 may include an application (eg, a health care application of a mobile medical device, etc.) designated according to an attribute of the external electronic device 404 or the server 406.
  • the application 670 may include an application received from the external electronic device 404 or the server 406.
  • the application 670 may be a preloaded application or a server. It may include a downloadable third party application
  • the names of the components of the program module 610 according to the illustrated embodiment may vary depending on the type of operating system.
  • At least a part of the program module 610 may be implemented in software, firmware, hardware, or a combination of two or more thereof. At least a portion of the program module 610 may be implemented (eg, executed) by, for example, the processor 420. At least a part of the program module 610 may include, for example, a module, a program, a routine, sets of instructions, or a process for performing one or more functions.
  • FIGS. 7 to 11B are diagrams for describing a program module according to various embodiments of the present disclosure.
  • a program module may include an operating system for controlling resources related to the electronic device 101 and / or various applications running on the operating system.
  • the operating system may include, for example, Android TM , iOS TM , Windows TM , Symbian TM , Tizen TM , or Bada TM .
  • At least some of the program modules may be preloaded on the electronic device or downloaded from the external electronic device 404 or the server 406.
  • the folding event converter 720 (or referred to as an event converter) is a sensor 710 (e.g., strain sensor 712, distance sensor 713, gyroscope sensor, Raw data received from 714) may be analyzed to calculate a folding state.
  • folding may be referred to as bending and folding event may be referred to as folding gesture.
  • the folding event dispatcher / handler 728 may deliver the folding state / event to the system 765 or the application 760.
  • the folding state manager 722 may transfer the folding state to the module.
  • the state memory module 724 may store a folding state.
  • the notification / message manager 741 may provide an event such as, for example, an arrival message, an appointment, or a proximity notification to the user.
  • the event logger 742 may record the events and display them in chronological order.
  • the telephony module 743 may manage a voice / video call function of the electronic device.
  • the timer 744 may provide a timer function.
  • the location manager 745 may manage location information of the electronic device, for example.
  • the power manager 746 may manage the capacity or power of the battery and provide power information necessary for the operation of the electronic device, for example, in conjunction with the power controller 748.
  • the system event receiver 732 receives an event from the notification / message manager 741, the event logger 742, the telephony module 743, the timer 744, or the power manager 746 to determine the context. It can be delivered to a manager (Context Manager, 734).
  • the input handler 730 may receive input from the TSP 715, the mouse 716, or the key 717, and deliver the input to the context manager 734.
  • the context manager 734 may manage a system service based on an input, a system event, a folding state, and the like.
  • the display controller 774 may control screen on / off.
  • the frame buffer 772 may store pixel values or pixel color values to be output to the display.
  • the graphic composer 770 may generate a screen including various objects such as an item, an image, and a text.
  • the window manager 750 may manage GUI resources used on the screen.
  • the application 760 may be, for example, home, dialer, SMS / MMS, instant message (IM), browser, camera, alarm, contact, voice dial, email, calendar, media player, album, watch, healthcare (eg It may include an application for measuring an exercise amount or blood sugar, or an environment information (for example, barometric pressure, humidity, or temperature information).
  • At least some of the program modules may be implemented (eg, executed) in software, firmware, hardware (eg, a processor), or a combination of at least two of them, and modules, programs, routines, sets of instructions for performing one or more functions. Or a process.
  • the event converter 820 may calculate the folding state by analyzing raw data of the sensor 810. For example, when each of the first sensor 230 and the second sensor 240 includes a gyroscope sensor, the event converter 820 may include the first sensor 230 measured by the first sensor 230.
  • the folded angle of the electronic device 101 may be calculated by comparing the angle formed between the axis of the axis and the ground and the angle between the axis of the second sensor 240 measured by the second sensor 240 and the ground.
  • the magnetic force strength by the magnetic force applying unit may correspond to an operation of bending the electronic device 101. Can be detected.
  • the event converter 820 increases the strength of the magnetic force as the electronic device 101 is folded and the folded of the electronic device 101 based on the strength of the magnetic force.
  • the angle can be calculated.
  • the folding state may be measured directly through the angle sensor 811 or determined through the calculation of the event converter 820.
  • the folding state may be expressed as an angle itself, as a state corresponding to a certain angular range, or as an increasing / decreasing trend of angle.
  • Folding state manager 822 delivers the folding state / event to event handler 828, which may be processed by registered event handler 828.
  • the event handler 828 may be registered by various modules such as the system 865, the application 860, a background service, and the registered event handler 828 processes the folding event according to priority. can do.
  • the priority may be in order of the system 865, an application that is visible (or activated), an application that is running but not directly visible to the user, and a background service that does not have a visible UI. For example, if a folding event is not handled by a higher priority event handler, the folding event can be processed by the next priority event handler.
  • Sequential processing of the folding event may have the following effects.
  • the system 865 may display an alpha screen or a gadget.
  • the alpha screen may be freely movable and may be configured as a window displaying at least one of multimedia content, user-customized information, real-time information, and the like.
  • the system 865 may not handle folding events, and if the event handler 828 with the next priority is registered in the video application, the video application may be folding / unfolding. Depending on the (unfolding) event, video playback can be stopped or started.
  • the folding state manager 922 may deliver a folding state / event directly to the system 965 or the application 960 without going through an event handler. For example, the folding state manager 922 may determine whether or not to deliver a folding event based on context information of the electronic device obtained from the context manager 934.
  • the window manager 1050 may adjust the application windows 1083 and 1084 to correspond to the divided areas.
  • the plurality of virtual displays 1181 and 1182 are configured by the plurality of application windows 1083 and 1084.
  • the coordinates on the corresponding display for the same point on the application window are the same even though the positions of the application windows 1083 and 1084 are different. Can be adjusted to match.
  • an electronic device for controlling a display may include: a display configured to display a first application on a first area; And a processor configured to sense a change in shape of the display and to display a second application paired with the first application displayed in the first area in the second area of the display in response to the detection. have.
  • the present disclosure may further include a sensor unit configured to detect outspreading or folding of the electronic device.
  • the processor may be configured to determine whether the second application associated with the function of the first application is set in response to the detection of the shape change.
  • the processor when the second application is set, may be configured to display the second application on the second area and to display an auxiliary screen on the third area of the display.
  • the processor may be set to display the auxiliary screen on one side of the display.
  • the processor when the input on the sub screen is detected, divides the first area into a first sub area and a second sub area, and displays the first application on the first sub area. Displaying the second application on the second sub-area, displaying the sub-screen on the second area, and the sub-screen displayed on the second area of the at least one application associated with a function of the first application. It can contain an object.
  • the processor may be set to determine whether the first application supports the enlargement mode.
  • the processor displays an auxiliary screen on the second area, and the auxiliary screen is at least one application associated with a function of the first application. It can contain an object of.
  • the processor may be configured to determine whether the supported enlargement mode is an area enlargement mode.
  • the processor when the magnification mode is the area magnification mode, the processor enlarges and displays the first application to the first area and the second area, and displays an auxiliary screen on a third area of the display. Can be set to display.
  • the processor displays additional functions or additional information related to the first application in the second area and displays an auxiliary screen in a third area of the display. It can be set to display on.
  • the processor when the folding of the changed shape display is detected while the display is unfolded due to the shape change, the processor may be set to inactivate the second area.
  • the processor displays an auxiliary screen on a third area of the display in response to the detection of the shape change, and the auxiliary screen is one or more corresponding to recommendation items customized for the first application. It can be composed of objects.
  • FIG. 12 is a flowchart illustrating a process of controlling a display of an electronic device according to various embodiments of the present disclosure.
  • the electronic device 101 may display an application on a display.
  • the electronic device 101 may display the first application on the first area of the display.
  • the electronic device 101 may control a display operation of the display in response to a shape change of the display 160 (for example, outspreading or folding).
  • the display 160 of the electronic device 101 may divide the screen into a plurality of areas in response to the shape change (for example, outspreading or folding).
  • the electronic device 101 may display at least one application on the display.
  • the electronic device 101 may display a plurality of applications on the display 160, and display one application in each of the divided plurality of areas.
  • Each divided area of the display 160 may be divided into a main area and at least one sub area.
  • the main area may be an area that is mainly visible to the user by the grip of the user, and the sub area may be an area that is not visible to the user by the grip of the user.
  • the electronic device 101 may display a first application in the main area.
  • the electronic device 101 can switch the sub-area to an inactive state.
  • the electronic device 101 may detect whether a shape change (eg, outspreading) of the display 160 occurs.
  • the electronic device 101 may include a sensor unit that can detect outspreading or folding.
  • the electronic device 101 may detect outspreading or folding of the display 160 through the sensor unit.
  • the electronic device 101 may determine whether the display 160 is currently outspread or folded based on an angle at which the display 160 is outspread (or folded). When the angle exceeds the predetermined range, the electronic device 101 may determine whether the display 160 is currently outspread or folded. For example, when the display 160 is outspread in the folded state, the electronic device 101 may display the current display 160 when the angle of the outspread state in the folded state exceeds the predetermined range.
  • the electronic device 101 determines that the angle of the folded state in the outspreaded state exceeds the predetermined range. It can be determined that the current folding.
  • the predetermined range is variably adjustable.
  • the electronic device 101 may control an operation of the display to perform at least one function associated with an application.
  • the electronic device 101 sets up at least one application paired with the first application displayed in the first area of the display 160. You can determine if it is. If the electronic device 101 determines that at least one application paired with the first application displayed in the first area is set, the electronic device 101 displays the second application paired with the first application. It may be displayed on the second area of 160. If an application paired with the first application is not set, the electronic device 101 may determine whether the first application supports the enlargement mode. If the first application does not support the magnification mode, the electronic device 101 may display the auxiliary screen on the second area.
  • the auxiliary screen may include an object of at least one application associated with a function of the first application.
  • Objects for at least one application displayed on the sub screen may be displayed according to priority.
  • the priority may include a frequency of use, a recent order of use, and a user setting.
  • Objects for at least one application displayed on the sub screen may be displayed on the sub screen based on at least one of a frequency of use, a recent use order, and a user setting.
  • the electronic device 101 may determine whether the magnification mode supported by the first application is the area magnification mode. If the magnification mode supported by the first application is determined as the area magnification mode, the electronic device 101 may enlarge and display the first application to the first area and the second area. The electronic device 101 may enlarge and display the first application on the entire screen of the display 160 including the first area and the second area. In addition, if the magnification mode supported for the first application is the area magnification mode, the electronic device 101 may display an auxiliary screen on the third area of the display 160. The electronic device 101 may display additional functions or additional information related to the first application in the second area. When the magnification mode supported for the first application is not the area magnification mode, the electronic device 101 may display additional functions or additional information related to the first application on the second area of the display.
  • a display control method of an electronic device may include: displaying a first application on a first area of a display; Detecting a change in shape of the display; Determining a second application associated with the first application displayed in the first area in response to the sensing; And displaying the determined second application on a second area of the display.
  • the method may further include determining whether the second application associated with the function of the first application is set in response to the detection of the shape change; Displaying the second application in the second area if the second application is set; And displaying the auxiliary screen on the third area of the display.
  • the input on the sub screen when the input on the sub screen is detected, dividing the first area into a first sub area and a second sub area; Displaying the first application on the first sub area; Displaying the second application on the second sub area; And displaying the sub screen on the second area, wherein the sub screen displayed on the second area may include an object of at least one application associated with a function of the first application.
  • the second application if the second application is not set, determining whether the first application supports an enlargement mode; And if the first application does not support the magnification mode, displaying the auxiliary screen on the second area.
  • the first application supports an enlargement mode, determining whether the supported enlargement mode is an area enlargement mode; And when the magnification mode is the area magnification mode, expanding and displaying the first application in the first area and the second area, and displaying an auxiliary screen in a third area of the display. .
  • magnification mode if the magnification mode is not the area magnification mode, displaying additional functions or additional information related to the first application in the second area; And displaying the auxiliary screen on the third area of the display.
  • FIG. 13 is a flowchart illustrating a process of controlling a display of an electronic device according to an embodiment of the present disclosure.
  • the electronic device 101 may display the first application on the first area of the display.
  • the electronic device 101 may control a display operation of the display in response to a shape change of the display 160 (for example, outspreading or folding).
  • the display 160 of the electronic device 101 may divide the screen into a plurality of areas in response to the shape change (for example, outspreading or folding).
  • the electronic device 101 may display at least one application on the display.
  • the electronic device 101 may display a plurality of applications on the display 160, and display one application in each of the divided plurality of areas.
  • Each divided area of the display 160 may be divided into a main area and at least one sub area.
  • the main area may be an area that is mainly visible to the user by the grip of the user, and the sub area may be an area that is not visible to the user by the grip of the user.
  • the electronic device 101 may display a first application in the main area.
  • the electronic device 101 can switch the sub-area to an inactive state.
  • the electronic device 101 may detect whether a shape change (eg, outspreading) of the display 160 occurs.
  • the electronic device 101 may include a sensor unit that can detect outspreading or folding.
  • the electronic device 101 may detect outspreading or folding of the display 160 through the sensor unit.
  • the electronic device 101 may determine whether the display 160 is currently outspread or folded based on an angle at which the display 160 is outspread (or folded). When the angle exceeds the predetermined range, the electronic device 101 may determine whether the display 160 is currently outspread or folded. For example, when the display 160 is outspread in the folded state, the electronic device 101 may display the current display 160 when the angle of the outspread state in the folded state exceeds the predetermined range.
  • the electronic device 101 determines that the angle of the folded state in the outspreaded state exceeds the predetermined range. It can be determined that the current folding.
  • the predetermined range is variably adjustable.
  • the electronic device 101 may determine whether an application paired with the first application is set. If it is determined that the display 160 is changed in shape (eg, outspreading), the electronic device 101 may determine whether at least one application paired with the first application displayed in the first area is set. Can be. For example, if it is determined that the display 160 is outspreaded while the e-mail application is displayed in the first area, the electronic device 101 determines that a chat application (eg, a text transmission / reception application, Conversation application, etc.) can be determined.
  • a chat application eg, a text transmission / reception application, Conversation application, etc.
  • the electronic device 101 determines that at least one application paired with the first application displayed in the first area is set, the electronic device 101 determines that the second application is paired with the first application. May be displayed on the second area of the display 160.
  • the electronic device 101 may display the auxiliary screen in the third area.
  • the electronic device 101 may display the second application and the auxiliary screen paired with the first application on the display 160 together.
  • the auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160.
  • the auxiliary screen may include an object of at least one application associated with a function of the first application.
  • the auxiliary screen may include at least one object corresponding to recommended items customized for the first application.
  • the auxiliary screen may be displayed on the second area by a drag gesture.
  • the electronic device 101 may determine a chat application (paired with the email application). For example, a text transmission / reception application, a conversation application, etc.) may be displayed on the second area of the display 160.
  • the electronic device 101 may determine whether the first application supports the enlargement mode. If an application paired with the first application is not set, the electronic device 101 may determine whether the first application supports the enlargement mode.
  • the magnification mode may include a mode in which the displayed first application is enlarged (for example, zoomed in) to be displayed on the entire screen of the display 160.
  • the electronic device 101 may display the auxiliary screen on the second area. If the first application does not support the magnification mode, the electronic device 101 may display the auxiliary screen on the second area.
  • the auxiliary screen may include an object of at least one application associated with a function of the first application.
  • the auxiliary screen may include at least one object corresponding to recommended items customized for the first application. For example, when the e-mail application is displayed in the first area of the display 160, the display 160 is outspreaded, it is determined that the paired application is not set, and the first application is enlarged. If it is determined that the mode does not support the mode, the electronic device 101 may display the auxiliary screen on the second area.
  • the auxiliary screen may include an object for at least one application which is not paired with the email application.
  • Objects for at least one application displayed on the sub screen may be displayed according to priority.
  • the priority may include a frequency of use, a recent order of use, and a user setting.
  • Objects for at least one application displayed on the sub screen may be displayed on the sub screen based on at least one of a frequency of use, a recent use order, and a user setting.
  • the electronic device 101 may determine whether the supported magnification mode is the area magnification mode.
  • the electronic device 101 may determine whether the magnification mode supported by the first application is the area magnification mode.
  • the application may be supported to be displayed on the entire screen of the display 160. For example, in the case of a video or a picture, when the display 160 moves horizontally, a video or a picture may be displayed through the entire screen of the display 160.
  • the electronic device 101 may enlarge and display the first application in the first area and the second area. If the magnification mode supported for the first application is the area magnification mode, the electronic device 101 may enlarge and display the first application to the first area and the second area of the display 160. The electronic device 101 may enlarge and display the first application on the entire screen of the display 160 including the first area and the second area. The electronic device 101 may display a menu button 1951 on the enlarged application that provides various functions for the enlarged application. For example, when the magnification mode supported for the map displayed on the first area of the display 160 is the area magnification mode, the electronic device 101 expands (or enlarges) the map displayed on the first area to display the display ( 160 may be displayed on the entire screen.
  • the electronic device 101 may display an auxiliary screen on the third area of the display 160.
  • the auxiliary screen may include an object of at least one application associated with a function of the first application.
  • the auxiliary screen may include at least one object corresponding to recommended items customized for the first application.
  • the electronic device 101 may display additional functions or additional information related to the first application in the second area.
  • the electronic device 101 may display additional functions or additional information related to the first application on the second area of the display. For example, while the contact application is displayed on the first area of the display 160, the outspreading of the electronic device 101 is detected, and the enlargement mode supported by the contact application displayed on the first area is displayed. Otherwise, the electronic device 101 may display the recent call history and the text transmission / reception history for each user in the second area.
  • the outspreading of the electronic device 101 is detected, and the magnification mode supported by the e-mail application displayed in the first area is displayed. If not, the electronic device 101 may display details such as important senders, important mails, and sent items in the second area.
  • the outspreading of the electronic device 101 is detected while a keyword to be searched by the user is input through a web browser displayed on the first area of the display 160 and a search result is displayed, the electronic device 101 is detected. ) May determine whether the magnification mode supported by the web browser is the area magnification.
  • the electronic device 101 may display a search result in addition to the displayed result in the second area.
  • the electronic device 101 determines whether the zoom mode supported by the chat application is area enlargement. You can judge. If the magnification mode supported by the chat application is not area enlargement, the electronic device 101 uses various emoticons that can be used for a conversation with the other party, an object of another application related to the chat application, or an object of a recently used application. It can be displayed in the second area.
  • the electronic device 101 determines whether the zoom mode supported on the home screen is the area enlargement. You can judge. If the magnification mode supported for the home screen is not an area magnification, the electronic device 101 may display an object of at least one application linked to the home screen on the second area.
  • 14A to 14D are exemplary views illustrating a first embodiment of controlling a display operation of a display by changing a shape while an e-mail application is displayed on a first area of the display of the present invention.
  • the electronic device 101 may display an email application on the first area 1410 of the display 160.
  • the electronic device 101 may display an email application on the first area 1410 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (for example, outspreading) while the email application is displayed on the first area 1410 of the display 160.
  • FIG. 14B illustrates a view after the display 160 is changed in shape.
  • the electronic device 101 detects an input from which the display 160 is outspread while the email application is displayed on the first area 1410 of the display 160, the electronic device 101 is paired with the email application. It may be determined whether the application is preset.
  • the electronic device 101 displays the chat application paired with the email application (eg, a text transmission / reception application, a conversation application, etc.) It may be displayed on the second area 1420 of 160. While displaying the email application in the first area 1410, the electronic device 101 displays the chat application paired with the email application in the second area 1420, and displays an auxiliary screen in the third area 1430. ) Can be displayed.
  • the auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160.
  • the auxiliary screen may be displayed as an area for launching another application.
  • the auxiliary screen may include an object of at least one chat application associated with a function of the email application and / or an object of each user included in each chat application. As such, the auxiliary screen may include at least one object corresponding to recommendation items customized for the email application.
  • the auxiliary screen may be displayed on the second area by a drag gesture.
  • FIG. 14C when a touch or a drag gesture toward the second area is detected at some point (or area) 1431 of the third area 1430 on which the sub-screen is displayed, the electronic device 101 stops.
  • Various objects included in the sub screen may be displayed on the second area 1440.
  • the auxiliary screen may include objects of at least one application associated with the email application, objects of at least one recently used application, and objects of all applications.
  • the auxiliary screen may be configured as an object of at least one application corresponding to recommended items customized to the function of the email application.
  • FIG. 14D in a state where various objects included in the sub screen are displayed on the second area 1440, a touch or drag to a left (or right) part of a part (or area) 1432 on the sub screen is displayed.
  • the electronic device 101 may display the sub screen 1440 illustrated in FIG. 14D as shown in the sub screen 1431 of FIG. 14C.
  • 15 (a) to 15 (d) are exemplary views illustrating a second embodiment of controlling a display operation of a display by outspreading while an email application is displayed on a first area of the display of the present invention.
  • the electronic device 101 may display an email application on the first area 1510 of the display 160.
  • the electronic device 101 may display an email application on the first area 1510 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (for example, outspreading) while the email application is displayed on the first area 1510 of the display 160.
  • the electronic device 101 may determine whether an application paired with the email application is preset. If there is an application paired with the email application while the electronic device 101 displays the email application on the first area 1510 of the display 160, the electronic device 101 pairs the email application as shown in FIG. 15B.
  • the objects of at least one application, the objects of at least one application recently used, and the objects of all applications may be displayed on the second area 1520 of the display 160.
  • the electronic device 101 may display a home screen on the first area 1530 of the display 160 while the display 160 is folded. .
  • the electronic device 101 may detect a shape change (for example, outspreading) while the home screen is displayed on the first area 1530 of the display 160.
  • the electronic device 101 may determine whether an application paired with the home screen is preset. If the electronic device 101 is paired with the home screen while the home screen is displayed on the first area 1530 of the display 160, the electronic device 101 is paired with the home screen as shown in FIG. 15D.
  • the objects of at least one application, the objects of at least one application recently used, and the objects of all applications may be displayed on the second area 1520 of the display 160.
  • 16 (a) to 16 (c) are exemplary views illustrating a third embodiment of controlling a display operation of a display by changing a shape while a screen indicating a call reception is displayed on a first area of a display of the present invention
  • 16 (d) to 16 (f) are examples of a fourth embodiment in which a call is received while an e-mail application is displayed on a first area of the display, and the display operation of the display is controlled by a shape change. It is also.
  • the electronic device 101 may display a screen corresponding to a call reception in the first area 1610 of the display 160.
  • the electronic device 101 may display a screen corresponding to a call reception in the first area 1510 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (eg, outspreading) in a state where a screen corresponding to a call reception is displayed on the first area 1510 of the display 160.
  • the electronic device 101 may determine whether an application paired with the call is preset. If the electronic device 101 displays the screen corresponding to the call reception in the first area 1610 of the display 160 and there is no application paired to the call, the electronic device 101 determines whether the screen corresponding to the call reception can be enlarged.
  • the electronic device 101 may include an object of at least one application paired with the call, an object of at least one application recently used, and a user.
  • An auxiliary screen including at least one application object and objects of all applications that the user prefers may be displayed on the second area 1620 of the display 160.
  • the object of at least one application paired with the call, the object of at least one application recently used, the object of at least one application preferred by the user, and the objects of all applications may be displayed on the sub screen according to priority. .
  • the priority may include a frequency of use, a recent order of use, and a user setting.
  • Objects for the at least one application may be displayed in the second area 1620 based on a priority of at least one of a frequency of use, a recent order of use, and a user setting.
  • a touch gesture or a drag gesture toward the left side (or the right side) is detected at some point (or area) on the sub screen
  • the electronic device 101 subsidizes the sub screen 1620 illustrated in FIG. 16B as shown in FIG. 16C. It can be displayed as the screen 1620.
  • no object may be displayed in the second area 1630.
  • the electronic device 101 may display an email application on the first area 1640 of the display 160.
  • the electronic device 101 may display the email application 1640 on the first area of the display 160 while the display 160 is folded.
  • the electronic device 101 may display a screen 1650 corresponding to a call reception in the first area while displaying the email application 1640 on the first area of the display 160.
  • the electronic device 101 may detect a shape change (eg, outspreading) of the display 160 while the call is received. If a shape change (eg, outspreading) of the display 160 is detected while the call is being received, the electronic device 101 displays a screen 1650 corresponding to the call reception in the first area and displays the e-mail.
  • a shape change eg, outspreading
  • the application 1640 may be displayed on the second area.
  • the electronic device 101 may output voices transmitted and received during the call to the speaker phone.
  • the electronic device 101 includes at least one object of at least one application paired with the call or email application, an object of at least one application recently used, an object of at least one application preferred by the user, and all of them.
  • An auxiliary screen including objects of an application may be displayed on the third area 1650 of the display 160.
  • 17A and 17B are exemplary views illustrating a fifth embodiment of controlling a display operation of a display by changing a shape while a map is displayed on a first area of the display of the present invention.
  • the electronic device 101 may display a map on the first area 1710 of the display 160.
  • the electronic device 101 may display a map on the first area 1710 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (for example, outspreading) while the map is displayed on the first area 1710 of the display 160.
  • FIG. 17B illustrates a view after the display 160 is reshaped (eg, outspread).
  • the electronic device 101 detects an input of changing the shape of the display 160 (eg, an outspreaded input) while a map is displayed on the first area 1710 of the display 160, the electronic device 101 is detected. May determine whether an application paired with an application displaying the map is preset.
  • the electronic device 101 may determine whether the application displaying the map supports the magnification mode. If the application displaying the map supports the enlargement mode, the electronic device 101 may determine whether the supported enlargement mode is the area enlargement mode. When the supporting magnification mode is the area magnification mode, the electronic device may display an application displaying the map on the full screen 1720 of the display 160. In addition, the electronic device 101 may display the auxiliary screen on the third area 1730. The auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160. The auxiliary screen may be displayed as an area for launching another application. The auxiliary screen may include an object of at least one application associated with a function of an application displaying the map.
  • 18A to 18D are exemplary views illustrating a sixth embodiment of controlling a display operation of a display by changing a shape while a contact application is displayed on a first area of the display of the present invention.
  • the electronic device 101 may display a contact application on the first area 1810 of the display 160.
  • the electronic device 101 may display a contact application on the first area 1810 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (eg, outspreading) while the contact application is displayed on the first area 1810 of the display 160.
  • FIG. 14B shows a view after the display 160 is reshaped (eg, outspread).
  • the electronic device 101 pairs with the contact application. It may be determined whether the preset application is preset.
  • the electronic device 101 can determine whether the contact application supports the enlargement mode. If the contact application supports the enlargement board, the electronic device 101 may determine whether an enlargement mode supported by the contact application is an area enlargement mode. If the magnification mode supported by the contact application is not an area magnification mode, the electronic device 101 may display an additional function related to the contact application in the second area 1820. The additional function may vary depending on the attributes of the application displayed in the first area 1810. For example, functionality related to the contacts application may include call history 1821 and text history 1822. When the call history 1821 is selected, the electronic device 101 displays a recent call 1831, a favorite 1832, and a contact 1833 in the second area 1840 as shown in FIG.
  • the keypad 1834 may be displayed on the first area 1810. If the text description 1822 is selected, the electronic device 101 displays the important sender 1841, the important mail 1882, and the sent mailbox 1843 as the second area 1840 as shown in FIG. 18D.
  • the email list 1844 may be displayed on the first area 1810.
  • the electronic device 101 may display the auxiliary screen on the third area 1830.
  • the auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160.
  • the auxiliary screen may be displayed as an area for launching another application.
  • the auxiliary screen may include an object of at least one application associated with a function of the contact application.
  • 19a (a) and 19a (b) show the display by changing the shape in a state in which a keyword to be searched by the user is input through a web browser displayed in the first area of the display of the present invention and the search result is displayed.
  • 19A and 19A are diagrams illustrating a seventh embodiment of controlling an operation, in which a moving image is reproduced in a first region of a display according to the present invention.
  • 19B is an exemplary view illustrating an eighth embodiment for controlling a display operation, and FIGS. 19B (e) and 19B (f) show the display of the display by changing the shape while the chat application is displayed in the first area of the display of the present invention.
  • 19B is a diagram illustrating a ninth embodiment for controlling a display operation, and FIGS. 19B (g) and 19b (h) are displayed by changing a shape while a home screen is displayed on a first area of the display of the present invention.
  • the electronic device 101 may display a web browser on the first area 1910 of the display 160.
  • the electronic device 101 may display a web browser on the first area 1910 of the display 160 while the display 160 is folded.
  • the electronic device 101 may display a result corresponding to the keyword input through the web browser in the first area 1910.
  • the electronic device 101 may detect a shape change (for example, outspreading) in a state where a search result is displayed through a web browser on the first area 1910 of the display 160.
  • FIG. 19A (b) shows a view after the display 160 has been reshaped (eg, outspread).
  • the electronic device 101 When the electronic device 101 detects an input of changing the shape of the display 160 while the web browser is displayed on the first area 1910 of the display 160, the electronic device 101 displays an application paired with the web browser. It may be determined whether this is set. If there is no application paired with the web browser, the electronic device 101 may determine whether the web browser supports the enlargement mode. If the web browser supports the enlargement mode, the electronic device 101 may determine whether the supported enlargement mode is the area enlargement mode. If the supported magnification mode is not the area magnification mode, the electronic device 101 may display a search result in addition to the displayed search result in the second area 1920. When a shape change is detected while a search result is displayed through a web browser in the first area 1910 of the display 160, the electronic device 101 additionally searches for the search result in addition to the displayed search result in the second area 1920. Can be marked on.
  • the electronic device 101 may display a moving image reproduced in the first area 1940 of the display 160.
  • the electronic device 101 may display a video played in the first area 1940 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (for example, outspreading) in a state where a video is displayed on the first area 1940 of the display 160.
  • FIG. 19A (d) shows a view after the display 160 is outspread.
  • the electronic device 101 plays back the moving picture. It may be determined whether an application paired with an application is preset.
  • the electronic device 101 may determine whether the application for playing the video supports the magnification mode. If the application that plays the video supports the enlargement mode, the electronic device 101 may determine whether the supported enlargement mode is the area enlargement mode. If the supported magnification mode is not the area magnification mode, the electronic device 101 may enlarge (1950) and display the screen of the video being played by a predetermined multiple as shown in FIG. 19A (d). The electronic device 101 may display, on the display 160, a menu button 1951 for selecting at least one function provided by the application for playing the video. In addition, the electronic device 101 may display the auxiliary screen in the third area 1960.
  • the auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160.
  • the auxiliary screen may be displayed as an area for launching another application.
  • the auxiliary screen may include an object of at least one application associated with a function of an application for playing the video.
  • the auxiliary screen may include at least one object corresponding to recommended items customized to the application for playing the video.
  • the electronic device 101 may display a chat application on the first area 1970 of the display 160.
  • the electronic device 101 may display a chat application on the first area 1970 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect outspreading while displaying a chat application on the first area 1970 of the display 160.
  • the electronic device 101 may determine whether an application paired with the conversation application is preset. If there is no application paired with the conversation application while the conversation application is displayed on the first area 1970 of the display 160, the electronic device 101 may determine whether the conversation application supports the enlargement mode. If the conversation application supports the magnification mode, the electronic device 101 may determine whether the magnification mode to support is the area magnification mode.
  • the electronic device 101 may include at least one object associated with the conversation application, an object of at least one application recently used, and An auxiliary screen including a plurality of emoticons applicable to a conversation application may be displayed on the second area 1981.
  • the auxiliary screen may be configured as an object of at least one application corresponding to recommended items customized to the function of the conversation application.
  • the electronic device 101 may display a home screen on the first area 1990 of the display 160.
  • the electronic device 101 may display a home screen on the first area 1979 of the display 160 while the display 160 is folded.
  • the electronic device 101 may detect a shape change (for example, outspreading) while the home screen is displayed on the first area 1990 of the display 160.
  • the electronic device 101 may determine whether an application paired with the home screen is preset. If the application paired with the home screen does not exist while the home screen is displayed on the first area 1970 of the display 160, the electronic device 101 may determine whether the home screen supports an enlarged mode. If the home screen supports the enlargement mode, the electronic device 101 may determine whether the supported enlargement mode is the area enlargement mode.
  • the electronic device 101 displays a second screen including an object of at least one application linked to the home screen. Can be marked on.
  • the auxiliary screen may be configured as an object of at least one application corresponding to recommended items customized to a function of the home screen.
  • the auxiliary screen may be displayed on one side (eg, boundary surface) of the display 160.
  • the auxiliary screen may include an object of at least one application associated with a function of the home screen.
  • the auxiliary screen may include at least one object corresponding to recommended items customized to the home screen.
  • module may refer to a unit that includes one or a combination of two or more of hardware, software, or firmware.
  • a “module” may be interchangeably used with terms such as, for example, unit, logic, logical block, component, or circuit.
  • the module may be a minimum unit or part of an integrally constructed part.
  • the module may be a minimum unit or part of performing one or more functions.
  • the “module” can be implemented mechanically or electronically.
  • a “module” in accordance with this document may be an application-specific integrated circuit (ASIC) chip, field-programmable gate arrays (FPGAs), or programmable logic devices that perform certain operations, known or developed in the future. logic device).
  • ASIC application-specific integrated circuit
  • FPGAs field-programmable gate arrays
  • an apparatus eg modules or functions thereof
  • method eg operations
  • an apparatus eg modules or functions thereof
  • method eg operations
  • the present document may be, for example, a computer readable storage medium in the form of a programming module. -readable storage media).
  • the control circuit may perform a function corresponding to the command.
  • the computer-readable storage medium may be, for example, the memory 130.
  • At least some of the programming modules may be implemented (eg, executed) by, for example, control circuitry.
  • At least some of the programming modules may include, for example, modules, programs, routines, sets of instructions, or processes for performing one or more functions.
  • the computer-readable recording medium includes magnetic media such as hard disks, floppy disks, and magnetic tapes, and optical recording media such as compact disc read only memory (CD-ROM) and digital versatile disc (DVD).
  • Media, magneto-optical media, such as floppy disks, and program instructions such as read only memory, random access memory, flash memory, Hardware device specifically configured to store and perform modules).
  • the program instructions may also include high-level language code that can be executed by a computer using an interpreter as well as machine code such as produced by a compiler.
  • the hardware device described above may be configured to operate as one or more software modules to perform the operations of this document, and vice versa.
  • Modules or programming modules according to this document may include at least one or more of the above components, some may be omitted, or may further include additional other components. Operations performed by modules, programming modules, or other components in accordance with this document may be executed in a sequential, parallel, repetitive, or heuristic manner. In addition, some operations may be executed in a different order, may be omitted, or other operations may be added.
  • a storage medium storing instructions, the instructions comprising: a computer readable storage medium storing a program including a command for controlling a display of an electronic device, the first region in a first area of the display; A first instruction set for displaying an application; A second instruction set for detecting a change in shape of the display; A third instruction set for determining a second application associated with the first application displayed in the first area in response to the sensing; And a fourth instruction set for displaying the determined second application on the second area of the display.

Abstract

본 발명은 플렉서블 전자 장치에 관한 것으로서, 디스플레이를 제어하는 전자 장치 및 방법에 관한 것이다. 이를 위해 본 발명은 디스플레이를 제어하는 전자 장치에 있어서, 제1 영역에 제1 어플리케이션을 표시하도록 구성된 디스플레이; 및 상기 디스플레이의 형태 변경을 감지하고, 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된(paired) 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하도록 설정된 프로세서를 포함할 수 있다.

Description

디스플레이를 제어하는 전자 장치 및 방법
본 발명은 플렉서블 전자 장치에 관한 것으로서, 디스플레이를 제어하는 전자 장치 및 방법에 관한 것이다.
최근 전자 장치에서 제공하는 다양한 서비스 및 부가 기능들은 점차 확대되고 있다. 이러한 전자 장치의 효용 가치를 높이고 사용자들의 다양한 욕구를 만족시키기 위해서 통신 서비스 제공자 또는 전자 장치 제조사들은 보다 다양한 기능들을 제공하고 다른 업체와의 차별화를 위해 전자 장치를 경쟁적으로 개발하고 있다.
또한, 전자 기술의 발달에 힘입어 다양한 유형의 플렉서블 전자 장치가 개발되고 있다. 특히, TV, PC, 랩탑 컴퓨터, 태블릿 PC, 휴대폰, MP3 플레이어 등과 같은 전자 장치들은 대부분의 가정에서 사용될 정도로 보급율이 높다.
최근에는 더 새롭고 다양한 기능을 원하는 사용자의 니즈(needs)에 부합하기 위하여, 전자 장치를 좀 더 새로운 형태로 개발하기 위한 노력이 이루어지고 있다. 플렉서블 전자 장치는 마치 종이처럼 그 형태가 변형될 수 있는 전자 장치를 의미한다. 플렉서블 전자 장치는 사용자가 힘을 가해서 형상을 변형시킬 수 있고, 접는 형태로 제공될 수도 있다.
종래에는 디스플레이의 형태 변경 감지시(예: 아웃스프레딩 동작 시), 미리 정해진 어플리케이션 또는 홈 화면을 표시함으로써, 사용자의 의도에 맞지 않는 문제점이 있었다.
이에 따라, 사용자의 형태 변경 동작에 대응되도록 다양한 사용자 인터페이스를 표시할 필요성이 있으며, 또한, 기존에 표시된 어플리케이션에 연관된 어플리케이션을 표시함으로써, 사용자의 만족도를 향상시킬 필요성이 있다.
본 발명의 다양한 실시 예는 플렉서블 전자 장치에서 형태 변경(예: 아웃스프레딩 또는 폴딩)에 대응하여 디스플레이의 표시를 제어하는 전자 장치 및 방법을 제공할 수 있다.
이를 위해, 본 발명의 다양한 실시 예는 디스플레이를 제어하는 전자 장치에 있어서, 제1 영역에 제1 어플리케이션을 표시하도록 구성된 디스플레이; 및 상기 디스플레이의 형태 변경을 감지하고, 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된(paired) 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하도록 설정된 프로세서를 포함할 수 있다.
또한, 본 발명의 다양한 실시 예는 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이의 제1 영역에 제1 어플리케이션을 표시하는 동작; 상기 디스플레이의 형태 변경을 감지하는 동작; 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된 제2 어플리케이션을 결정하는 동작; 및 상기 결정된 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하는 동작을 포함할 수 있다.
또한, 본 발명의 다양한 실시 예는 전자 장치의 디스플레이를 제어하는 명령어를 포함하는 프로그램을 저장하는 컴퓨터 가독성 저장 매체에 있어서, 디스플레이의 제1 영역에 제1 어플리케이션을 표시하는 제1 명령 셋; 상기 디스플레이의 형태 변경을 감지하는 제2 명령 셋; 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된 제2 어플리케이션을 결정하는 제3 명령 셋; 및 상기 결정된 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하는 제4 명령 셋을 포함할 수 있다.
본 발명의 다양한 실시 예에 따르면, 디스플레이를 제어하는 전자 장치 및 방법을 제공함으로써, 형태 변경(예: 아웃스프레딩 또는 폴딩) 동작 시, 우선순위에 따라 다른 사용자 인터페이스를 표시함으로써, 사용자에게 플렉서블 디바이스 고유의 성능을 제공할 수 있다. 또한, 기존에 실행된 어플리케이션을 지속적으로 표시하고 있는 상태에서 상기 실행된 어플리케이션과 연계된 적어도 하나의 어플리케이션을 표시함으로써, 사용 불편을 줄일 수 있다.
또한, 상기 적어도 하나의 어플리케이션을 표시하면서 보조 화면을 함께 표시함으로써, 사용자가 원하는 어플리케이션을 빠르게 실행할 수 있다.
도 1은 본 발명의 다양한 실시예에 따른 전자 장치를 나타낸다.
도 2는 본 발명의 다양한 실시예에 따른 전자 장치의 전면을 나타낸 예시도이다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치의 후면을 나타낸 예시도이다.
도 4는 본 발명의 다양한 실시예에 따른 네트워크 환경 내의 전자 장치를 나타낸다.
도 5는 다양한 실시예에 따른 전자 장치(101)의 블록도이다.
도 6은 본 발명의 다양한 실시 예에 따른 프로그램 모듈의 블럭도이다.
도 7 내지 11b는 본 발명의 다양한 실시예에 따른 프로그램 모듈을 설명하기 위한 도면들이다.
도 12는 본 발명의 다양한 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 나타낸 순서도이다.
도 13은 본 발명의 일 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 나타낸 순서도이다.
도 14는 본 발명의 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제1 실시 예를 나타낸 예시도이다.
도 15는 본 발명의 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제2 실시 예를 나타낸 예시도이다.
도 16의 (a) 내지 16의 (c)는 본 발명의 디스플레이의 제1 영역에 통화 수신을 알리는 화면이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제3 실시 예를 나타낸 예시도이다.
도 16의 (d) 내지 16의 (f)는 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 통화가 수신되고, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제4 실시 예를 나타낸 예시도이다.
도 17은 본 발명의 디스플레이의 제1 영역에 지도가 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제5 실시 예를 나타낸 예시도이다.
도 18은 본 발명의 디스플레이의 제1 영역에 연락처 어플리케이션이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제6 실시 예를 나타낸 예시도이다.
도 19a의 (a) 및 19a의 (b)는 본 발명의 디스플레이의 제1 영역에 표시된 웹 브라우저를 통해 사용자가 검색하고자 하는 키워드가 입력되어 검색 결과가 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제7 실시 예를 나타낸 예시도이다.
도 19a의 (c) 및 19a의 (d)는 본 발명의 디스플레이의 제1 영역에 동영상을 재생하고 있는 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제8 실시 예를 나타낸 예시도이다.
도 19b의 (e) 및 19b의 (f)는 본 발명의 디스플레이의 제1 영역에 대화 어플리케이션이 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제9 실시 예를 나타낸 예시도이다.
도 19b의 (g) 및 19b의 (h)는 본 발명의 디스플레이의 제1 영역에 홈 화면이 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제10 실시 예를 나타낸 예시도이다.
이하, 본 문서의 다양한 실시예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 문서의 실시예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제 1," "제 2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제 1 사용자 기기와 제 2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시예들을 배제하도록 해석될 수 없다.
본 문서의 다양한 실시예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device) 중 적어도 하나를 포함할 수 있다. 다양한 실시예에 따르면, 웨어러블 장치는 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드(skin pad) 또는 문신), 또는 생체 이식형(예: implantable circuit) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에서, 전자 장치는 가전 제품(home appliance)일 수 있다. 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더(camcorder), 충전 장치 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다.
어떤 실시예에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시예에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시예에 따른 전자 장치가 설명된다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 본 발명의 다양한 실시예에 따른 전자 장치를 나타낸다.
도 1을 참조하면, 전자 장치(101)의 전면(102)에는 디스플레이(160)가 배치될 수 있다. 디스플레이(160)는 전자 장치(101)의 전면(102)의 대부분을 차지하도록 크게 형성될 수 있다. 예를 들어, 디스플레이(160)에 메인 홈 화면이 표시될 수 있다. 메인 홈 화면은 전자 장치(101)의 전원을 켰을 때 디스플레이(160) 상에 표시되는 사용자 인터랙션이 가능한 첫 화면 또는 GUI(graphical user interface)일 수 있다. 홈 화면에는 자주 사용되는 어플리케이션들을 실행하기 위한 단축 아이콘들, 메인 메뉴 전환키, 시간, 날씨 중의 적어도 하나가 표시될 수 있다. 사용자가 메인 메뉴 전환키를 선택하면, 디스플레이(160)에 메뉴 화면이 표시될 수 있다.
또한, 디스플레이(160)의 상단에는 배터리 충전 상태, 수신 신호의 세기 또는 현재 시각 등 전자 장치(101)의 적어도 하나의 상태를 표시하는 상태 바가 표시될 수도 있다. 디스플레이(160)의 아래에 위치하는 전자 장치(101)의 전면(102) 가장자리(또는 베젤이나, 디스플레이(160)의 둘레의 케이스 부분이라고 칭할 수 있음)에는 홈 버튼, 메뉴 버튼 및/또는 뒤로 가기 버튼이 형성될 수 있다.
홈 버튼은 디스플레이에 메인 홈 화면(main Home screen)을 표시하는데 사용될 수 있다. 또한, 홈 버튼은 디스플레이(160) 상에 최근에(recently) 사용된 어플리케이션들을 표시하도록 하거나, 태스크 매니저(Task Manager)를 표시하기 위하여 사용될 수도 있다. 메뉴 버튼은 디스플레이(160) 상에 표시될 수 있는 연결 메뉴를 제공하는데 사용될 수 있다. 연결 메뉴에는 위젯 추가 메뉴, 배경화면 변경 메뉴, 검색 메뉴, 편집 메뉴, 환경 설정 메뉴 등의 적어도 하나가 포함될 수 있다. 뒤로 가기 버튼은 현재 실행되고 있는 화면의 바로 이전에 실행되었던 화면을 표시하거나, 가장 최근에 사용된 어플리케이션을 종료시키는데 사용될 수 있다.
디스플레이(160)의 위에 위치하는 전자 장치(101)의 전면(102)의 가장자리에는 제1 카메라(110) 및/또는 거리 센서, 조도 센서, 근접 센서 등의 적어도 하나의 센서가 배치될 수 있다. 그리고, 전자 장치(101)의 후면(330)에는, 제2 카메라(310), 플래시(flash), 스피커, 및/또는 거리 센서 등의 적어도 하나의 센서가 배치될 수 있다.
전자 장치(101)의 측면(104)에는 예를 들어 전원/잠금 버튼, 볼륨 증가 버튼 및 볼륨 감소 버튼을 갖는 볼륨 버튼, 방송 수신을 위한 지상파 DMB 안테나, 적어도 하나의 마이크 중의 적어도 하나가 배치될 수 있다.
전자 장치(101)는 디스플레이(160)의 형태를 변경하는 입력을 감지할 수 있다. 전자 장치(101)는 디스플레이(160)를 펼치는 아웃스프레딩(outspreading) 또는 디스플레이(160)를 접는 폴딩(folding)에 의한 입력을 감지하고, 상기 감지된 입력에 대응하여 디스플레이(160)의 표시 동작을 제어할 수 있다. 상기 아웃스프레딩은 디스플레이(160)의 제1 영역과 제2 영역으로 폴딩된 상태에서 제1 영역 아래에 위치한 제2 영역이 이격되어 상기 제2 영역과 평행하게 움직이도록 하는 동작을 의미한다. 그리고, 상기 폴딩은 디스플레이(160)의 제1 영역과 제2 영역이 평행한 상태에서 제2 영역이 이격되어 상기 제1 영역과 겹쳐지도록 하는 동작을 의미한다. 이와 같이, 제1 영역과 제2 영역이 폴딩된 상태에서 디스플레이는 외부쪽으로 위치할 수 있다.
도 2는 본 발명의 다양한 실시예에 따른 전자 장치의 전면을 나타낸 예시도이다.
도 2를 참조하면, 전자 장치(101)는, 스트레인 센서(strain Sensor, 242)(예: 스트레인 게이지(strain gauge)), 제1 센서(230), 제2 센서(240) 및 디스플레이(160)를 포함할 수 있다. 또한, 전자 장치(101)는 아웃스프레딩 및/또는 폴딩 동작을 위한 힌지(미도시)를 포함할 수 있고, 상기 아웃스프레딩 및/또는 폴딩 동작에 의한 입력에 대응하여 디스플레이(160)의 표시 동작을 제어하기 위해, 회로기판(미도시)를 더 포함할 수 있다. 상기 회로 기판에 의해 수행될 수 있는 디스플레이(160)의 표시 동작은 프로세서(420)에 의해 수행될 수 있다.
스트레인 센서(220)는 전자 장치(101)의 접는 위치(210)에 배치될 수 있으며, 전자 장치(101)의 접힌 각도를 측정하는데 사용되는 스트레인 값을 출력할 수 있다.
전자 장치(101)는 디스플레이(160)의 접히는 각도를 측정할 수 있는 각도 센서(442)를 통해, 전자 장치(101) 또는 힌지의 접힌 각도를 측정할 수 있다.
제1 센서(230)는 디스플레이(160)의 전면의 상단 가장자리에 배치될 수 있고, 제2 센서(240)는 디스플레이(160)의 전면의 하단 가장자리에 배치될 수 있다. 제1 및 제2 센서들(230, 240)은 전자 장치(101)에 대한 접힘 상태의 변경을 검출할 수 있다. 예를 들어, 제1 및 제2 센서들(230, 240)은 각각 거리 센서 및 자이로스코프 센서 중의 적어도 하나를 포함할 수 있다. 또는 제1 센서(230)는 자력 감지 센서이며, 제2 센서(240)는 자력 인가 센서일 수 있다. 예를 들어, 전자 장치(101)를 구부리는 동작에 대응하여, 자력 감지 센서인 제1 센서(230)와 자력 인가 센서인 제2 센서(240) 간의 거리가 가까워지게 되며, 이에 따라 자력 인가 센서에 의한 자력 세기를 자력 감지 센서가 검출할 수 있다. 이와 같이 자력 감지 센서와 자력 인가 센서 간의 거리가 가까워질수록 자력 세기가 달라지게 되므로, 전자 장치(101)에서는 이러한 자력 세기를 기반으로 접히는 각도 등을 산출할 수 있다.
디스플레이(160)는, 영상의 표시를 위한 플렉서블 패널을 포함할 수 있고, 압력, 지문 등의 적어도 하나를 검출할 수 있거나, 이러한 압력 및 지문을 검출하기 위한 센서를 포함할 수도 있다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치의 후면을 나타낸 예시도이다.
도 3을 참조하면, 전자 장치(101)의 후면(330)에는, 서브 디스플레이(320), 제2 카메라(310), 플래시(flash), 스피커, 및/또는 거리 센서 등의 적어도 하나의 센서가 배치될 수 있다.
전자 장치(101)는 접힌 상태에서, 서브 디스플레이(320)에 미리 설정된 조건/타입(예: 메시지 수/발신 정보, 전자 장치의 상태 정보)의 그래픽 요소/인터페이스/정보를 표시하도록 설정될 수 있다. 서브 디스플레이(320)는 압력(예: 사용자의 탭(tap)/노크(knock))을 검출하도록 구성될 수 있다. 예를 들어, 사용자가 서브 디스플레이(320)를 노크(예: 더블 노크/태핑)한 경우, 전자 장치(101)는 서브 디스플레이(320)에 그래픽 요소/인터페이스/정보를 표시하도록 설정될 수 있다. 서브 디스플레이(320)는 지문 정보를 검출하도록 구성될 수 있다.
도 4는 본 발명의 다양한 실시예에 따른 네트워크 환경 내의 전자 장치를 나타낸다.
도 4를 참조하면, 다양한 실시예에서의, 네트워크 환경 내의 전자 장치(101)가 기재된다. 전자 장치(101)는 버스(410), 프로세서(420), 메모리(430), 센서 모듈(또는 센서부)(440), 입출력 인터페이스(450), 디스플레이(160)(예: 디스플레이(160)), 및 통신 인터페이스(470)를 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)는, 구성요소들 중 적어도 하나를 생략하거나 다른 구성요소를 추가적으로 구비할 수 있다. 예를 들어, 전자 장치(101)는, 프레임 버퍼(Frame buffer, 463), 그래픽 처리 장치(graphics processing unit: GPU, 464), 터치 스크린 패널(touch screen panel: TSP, 466)(또는 터치 패널이라고도 함) 중의 적어도 하나를 더 포함할 수 있다.
버스(410)는 구성 요소들(410-470)을 서로 연결하고, 구성 요소들 간의 통신(예: 제어 메시지 또는 데이터)을 전달하는 회로를 포함할 수 있다. 프로세서(420)는, 중앙 처리 장치, 어플리케이션 프로세서, 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서(420)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성 요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
메모리(430)는, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리(430)는, 예를 들면, 전자 장치(101)의 적어도 하나의 다른 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 한 실시예에 따르면, 메모리(430)는 소프트웨어 및/또는 프로그램을 저장할 수 있다. 프로그램은, 예를 들면, 커널, 미들웨어, 어플리케이션 프로그래밍 인터페이스(API), 및/또는 어플리케이션 프로그램(또는 "어플리케이션") 등을 포함할 수 있다. 커널, 미들웨어, 또는 API의 적어도 일부는, 운영 시스템으로 지칭될 수 있다. 커널은, 예를 들면, 다른 프로그램들(예: 미들웨어, API, 또는 어플리케이션 프로그램)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스(410), 프로세서(420), 또는 메모리(430) 등)을 제어 또는 관리할 수 있다. 또한, 커널은 미들웨어, API, 또는 어플리케이션 프로그램에서 전자 장치(101)의 개별 구성 요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
미들웨어는, 예를 들면, API 또는 어플리케이션 프로그램이 커널과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 미들웨어는 어플리케이션 프로그램으로부터 수신된 하나 이상의 작업 요청들을 우선 순위에 따라 처리할 수 있다. 예를 들면, 미들웨어는 어플리케이션 프로그램 중 적어도 하나에 전자 장치(101)의 시스템 리소스(예: 버스(410), 프로세서(420), 또는 메모리(430) 등)를 사용할 수 있는 우선 순위를 부여하고, 하나 이상의 작업 요청들을 처리할 수 있다. API는 어플리케이션이 커널 또는 미들웨어에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 영상 처리, 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
센서 모듈(440)은, 예를 들면, 물리량을 계측하거나 전자 장치(101)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(440)은, 예를 들면, 각도 센서(442), 거리 센서(444) 및 자이로스코프 센서(446) 중의 적어도 하나를 포함할 수 있다. 센서 모듈(440)은, GNSS(global navigation satellite system), GPS(Global Positioning System), 제스처 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러(color) 센서(예: RGB(red, green, blue) 센서), 생체 센서, 온/습도 센서, 조도 센서, 또는 UV(ultra violet) 센서 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 센서 모듈(440)은, 예를 들면, 후각(e-nose) 센서, 일렉트로마이오그라피(EMG) 센서, 일렉트로엔씨팔로그램(EEG) 센서, 일렉트로카디오그램(ECG) 센서, IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 센서 모듈(440)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)는 프로세서(410)의 일부로서 또는 별도로, 센서 모듈(440)을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서(410)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(440)을 제어할 수 있다.
입출력 인터페이스(450)는, 예를 들면, 사용자 또는 다른 외부 기기로부터 입력된 명령 또는 데이터를 전자 장치(101)의 다른 구성 요소(들)에 전달하거나, 또는 전자 장치(101)의 다른 구성 요소(들)로부터 수신된 명령 또는 데이터를 사용자 또는 다른 외부 기기로 출력할 수 있다. 입출력 인터페이스(450)는, 예를 들면, 스피커, 리시버, 이어폰, 마이크 중의 적어도 하나를 포함할 수 있다.
디스플레이(160)는, 예를 들면, 액정 디스플레이(LCD), 발광 다이오드(LED) 디스플레이, 유기 발광 다이오드(OLED) 디스플레이, 마이크로 전자기계 시스템 (MEMS) 디스플레이, 전자종이(electronic paper) 디스플레이, 프로젝터 중의 적어도 하나를 포함할 수 있다. 디스플레이(160)는, 예를 들면, 사용자에게 각종 콘텐츠(예: 텍스트, 영상, 비디오, 아이콘, 및/또는 심볼 등)을 표시할 수 있다.
프레임 버퍼(463)는 디스플레이(160)에 출력할 픽셀 값들 또는 픽셀 컬러 값들(pixel color values)를 저장할 수 있으며, 프레임 버퍼(463)는 메모리, GPU(464), 디스플레이(160) 또는 디스플레이 컨트롤러 내부의 메모리, 또는 리눅스(Linux)의 프레임 버퍼 장치(frame buffer device)와 같은 가상(Virtual) 장치로 구현될 수 있다.
GPU(464)는 아이템, 영상, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성할 수 있다. GPU(464)는 화면의 레이아웃에 따라 각 객체가 표시될 좌표값, 형태, 크기, 컬러 등의 적어도 하나의 속성값을 연산하고, 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성할 수 있다. 이하, 화면 또는 어플리케이션 화면은, 디스플레이(160)의 표면(또는 표시 영역) 상에 보이는 영상의 전체 또는 일부를 지칭할 수 있다. 예를 들어, 어플리케이션 화면은, 그래픽 인터페이스, 그래픽 사용자 인터페이스(graphical user interface: GUI), 어플리케이션 윈도우, 어플리케이션 영역 등으로 칭할 수도 있다.
디스플레이(160)는 전자 펜 또는 사용자의 신체의 일부를 이용한 터치, 제스쳐, 근접, 또는 호버링 입력을 수신할 수 있는 터치 스크린 패널(미도시)을 포함할 수 있다. 상기 터치 스크린 패널은, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용하여 터치/호버링을 감지할 수 있다. 또한, 터치 스크린 패널은 제어 회로를 더 포함할 수도 있다. 터치 스크린 패널은 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
통신 인터페이스(470)는, 예를 들면, 전자 장치(101)와 외부 장치(예: 외부 전자 장치(404), 또는 서버(406)) 간의 통신을 설정할 수 있다. 예를 들면, 통신 인터페이스(470)는 무선 통신 또는 유선 통신을 통해서 네트워크(402)에 연결되어 외부 장치(예: 외부 전자 장치(404) 또는 서버(406))와 통신할 수 있다.
무선 통신은, 예를 들면, LTE, LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), WiBro(Wireless Broadband), 또는 GSM(Global System for Mobile Communications) 등 중 적어도 하나를 사용하는 셀룰러 통신을 포함할 수 있다. 한 실시예에 따르면, 무선 통신은, 예를 들면, WiFi(wireless fidelity), 블루투스, 블루투스 저전력(BLE), 지그비(Zigbee), NFC(near field communication), 자력 시큐어 트랜스미션(Magnetic Secure Transmission), 라디오 프리퀀시(RF), 또는 보디 에어리어 네트워크(BAN) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 무선 통신은 GNSS를 포함할 수 있다. GNSS는, 예를 들면, GPS(Global Positioning System), Glonass(Global Navigation Satellite System), Beidou Navigation Satellite System(이하 "Beidou") 또는 Galileo, the European global satellite-based navigation system일 수 있다. 이하, 본 문서에서는, "GPS"는 "GNSS"와 상호 호환적으로 사용될 수 있다. 유선 통신은, 예를 들면, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard232), 전력선 통신, 또는 POTS(plain old telephone service) 등 중 적어도 하나를 포함할 수 있다. 네트워크(402)는 텔레커뮤니케이션 네트워크, 예를 들면, 컴퓨터 네트워크(예: LAN 또는 WAN), 인터넷, 또는 텔레폰 네트워크 중 적어도 하나를 포함할 수 있다.
외부 전자 장치(404)는 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 다양한 실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치(예: 외부 전자 장치(404), 또는 서버(406))에서 실행될 수 있다. 한 실시예에 따르면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치(예: 외부 전자 장치(404), 또는 서버(406))에게 요청할 수 있다. 다른 전자 장치(예: 전자 장치(404), 또는 서버(406))는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 5는 다양한 실시예에 따른 전자 장치(101)의 블록도이다.
도 5를 참조하면, 전자 장치(101)는, 도 4에 도시된 전자 장치(101)의 전체 또는 일부를 포함할 수 있다. 전자 장치(101)는 하나 이상의 프로세서(예: AP)(420), 통신 모듈(520), 가입자 식별 모듈(524), 메모리(430), 센서 모듈(540), 입력 장치(550), 디스플레이(160), 인터페이스(570), 오디오 모듈(580), 카메라 모듈(591), 전력 관리 모듈(595), 배터리(596), 인디케이터(597), 및 모터(598)를 포함할 수 있다. 프로세서(420)는, 예를 들면, 운영 체제 또는 응용 프로그램을 구동하여 프로세서(420)에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서(420)는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 프로세서(420)는 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서를 더 포함할 수 있다. 프로세서(420)는 도 5에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈(521))를 포함할 수도 있다. 프로세서(420)는 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드)하여 처리하고, 결과 데이터를 비휘발성 메모리에 저장할 수 있다.
통신 모듈(520)(예: 통신 인터페이스(470))은, 예를 들면, 셀룰러 모듈(521), WiFi 모듈(523), 블루투스 모듈(525), GNSS 모듈(527), NFC 모듈(528) 및 RF 모듈(529)을 포함할 수 있다. 셀룰러 모듈(521)은, 예를 들면, 통신망을 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(521)은 가입자 식별 모듈(예: SIM 카드)(524)을 이용하여 통신 네트워크 내에서 전자 장치(101)의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(521)은 프로세서(420)가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시예에 따르면, 셀룰러 모듈(521)은 커뮤니케이션 프로세서(CP)를 포함할 수 있다. 어떤 실시예에 따르면, 셀룰러 모듈(521), WiFi 모듈(523), 블루투스 모듈(525), GNSS 모듈(527) 또는 NFC 모듈(528) 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. RF 모듈(529)은, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. RF 모듈(529)은, 예를 들면, 트랜시버, PAM(power amp module), 주파수 필터, LNA(low noise amplifier), 또는 안테나 등을 포함할 수 있다. 다른 실시예에 따르면, 셀룰러 모듈(521), WiFi 모듈(523), 블루투스 모듈(525), GNSS 모듈(527) 또는 NFC 모듈(528) 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다. 가입자 식별 모듈(524)은, 예를 들면, 가입자 식별 모듈을 포함하는 카드 또는 임베디드 SIM을 포함할 수 있으며, 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
메모리(430)는, 예를 들면, 내장 메모리(532) 또는 외장 메모리(534)를 포함할 수 있다. 내장 메모리(532)는, 예를 들면, 휘발성 메모리(예: DRAM, SRAM, 또는 SDRAM 등) 및 비휘발성 메모리(예: OTPROM(one time programmable ROM), PROM, EPROM, EEPROM, mask ROM, flash ROM, 플래시 메모리, 하드 드라이브, 또는 솔리드 스테이트 드라이브 (SSD)) 중 적어도 하나를 포함할 수 있다. 외장 메모리(534)는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD, Mini-SD, xD(extreme digital), MMC(multi-media card) 또는 메모리 스틱 등을 포함할 수 있다. 외장 메모리(534)는 다양한 인터페이스를 통하여 전자 장치(101)와 기능적으로 또는 물리적으로 연결될 수 있다.
센서 모듈(540)은, 예를 들면, 물리량을 계측하거나 전자 장치(101)의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈(540)은, 예를 들면, 제스처 센서(540A), 자이로 센서(540B), 기압 센서(540C), 마그네틱 센서(540D), 가속도 센서(540E), 그립 센서(540F), 근접 센서(540G), 컬러(color) 센서(540H)(예: RGB(red, green, blue) 센서), 생체 센서(540I), 온/습도 센서(540J), 조도 센서(540K), 또는 UV(ultra violet) 센서(540M) 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 센서 모듈(540)은, 예를 들면, 후각(e-nose) 센서, 일렉트로마이오그라피(EMG) 센서, 일렉트로엔씨팔로그램(EEG) 센서, 일렉트로카디오그램(ECG) 센서, IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 센서 모듈(540)은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)는 프로세서(420)의 일부로서 또는 별도로, 센서 모듈(540)을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서(420)가 슬립(sleep) 상태에 있는 동안, 센서 모듈(240)을 제어할 수 있다.
입력 장치(550)는, 예를 들면, 터치 패널(552), (디지털) 펜 센서(554), 키(556), 또는 초음파 입력 장치(558)를 포함할 수 있다. 터치 패널(552)은, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 터치 패널(552)은 제어 회로를 더 포함할 수도 있다. 터치 패널(552)은 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다. (디지털) 펜 센서(554)는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 쉬트를 포함할 수 있다. 키(556)는, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드를 포함할 수 있다. 초음파 입력 장치(558)는 마이크(예: 마이크(588))를 통해, 입력 도구에서 발생된 초음파를 감지하여, 상기 감지된 초음파에 대응하는 데이터를 확인할 수 있다.
디스플레이(160)는 패널(562), 홀로그램 장치(564), 프로젝터(566), 및/또는 이들을 제어하기 위한 제어 회로를 포함할 수 있다. 패널(562)은, 예를 들면, 유연하게, 투명하게, 또는 착용할 수 있게 구현될 수 있다. 패널(562)은 터치 패널(552)과 하나 이상의 모듈로 구성될 수 있다. 한 실시예에 따르면, 패널(562)은 사용자의 터치에 대한 압력의 세기를 측정할 수 있는 압력 센서(또는 포스 센서)를 포함할 수 있다. 상기 압력 센서는 터치 패널(552)과 일체형으로 구현되거나, 또는 터치 패널(552)과는 별도의 하나 이상의 센서로 구현될 수 있다. 홀로그램 장치(564)는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 프로젝터(566)는 스크린에 빛을 투사하여 영상을 표시할 수 있다. 스크린은, 예를 들면, 전자 장치(101)의 내부 또는 외부에 위치할 수 있다. 인터페이스(570)는, 예를 들면, HDMI(572), USB(574), 광 인터페이스(optical interface)(576), 또는 D-sub(D-subminiature)(578)를 포함할 수 있다. 인터페이스(570)는, 예를 들면, 도 4에 도시된 통신 인터페이스(470)에 포함될 수 있다. 추가적으로 또는 대체적으로, 인터페이스(570)는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
오디오 모듈(580)은, 예를 들면, 소리와 전기 신호를 쌍방향으로 변환시킬 수 있다. 오디오 모듈(580)의 적어도 일부 구성요소는, 예를 들면, 도 4에 도시된 입출력 인터페이스(450)에 포함될 수 있다. 오디오 모듈(580)은, 예를 들면, 스피커(582), 리시버(584), 이어폰(586), 또는 마이크(588) 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다. 카메라 모듈(591)은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, 이미지 시그널 프로세서(ISP), 또는 플래시(예: LED 또는 xenon lamp 등)를 포함할 수 있다. 전력 관리 모듈(595)은, 예를 들면, 전자 장치(101)의 전력을 관리할 수 있다. 한 실시예에 따르면, 전력 관리 모듈(595)은 PMIC(power management integrated circuit), 충전 IC, 또는 배터리 또는 연료 게이지를 포함할 수 있다. PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 배터리 게이지는, 예를 들면, 배터리(596)의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 배터리(596)는, 예를 들면, 충전식 전지 및/또는 태양 전지를 포함할 수 있다.
인디케이터(597)는 전자 장치(101) 또는 그 일부(예: 프로세서(420))의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 모터(598)는 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동, 또는 햅틱 효과 등을 발생시킬 수 있다. 전자 장치(101)는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어플로(mediaFloTM) 등의 규격에 따른 미디어 데이터를 처리할 수 있는 모바일 TV 지원 장치(예: GPU)를 포함할 수 있다. 본 문서에서 기술된 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시예에서, 전자 장치(101)는 일부 구성요소가 생략되거나, 추가적인 구성요소를 더 포함하거나, 또는, 구성요소들 중 일부가 결합되어 하나의 개체로 구성되되, 결합 이전의 해당 구성요소들의 기능을 동일하게 수행할 수 있다.
도 6은 본 발명의 다양한 실시 예에 따른 프로그램 모듈의 블럭도이다.
도 6은 참조하면, 프로그램 모듈(610)은 전자 장치(예: 전자 장치(101))에 관련된 자원을 제어하는 운영 체제(operating system(OS)) 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션(예: 어플리케이션 프로그램)을 포함할 수 있다. 운영 체제는, 예를 들면, 안드로이드(AndroidTM), iOSTM, 윈도우즈(WindowsTM), 심비안(SymbianTM), 타이젠(TizenTM), 또는 바다(Samsung bada osTM) 등이 될 수 있다.
프로그램 모듈(610)은 커널(620), 미들웨어(630), 어플리케이션 프로그래밍 인터페이스(application programming interface (API))(660), 및/또는 어플리케이션(670)을 포함할 수 있다. 프로그램 모듈(610)의 적어도 일부는 전자 장치 상에 프리로드(preload) 되거나, 외부 전자 장치(404) 또는 서버(406)로부터 다운로드(download) 가능하다.
커널(620)은, 예를 들면, 시스템 리소스 매니저(621) 및/또는 디바이스 드라이버(623)를 포함할 수 있다. 시스템 리소스 매니저(621)는 시스템 리소스의 제어, 할당, 또는 회수 등을 수행할 수 있다. 한 실시 예에 따르면, 시스템 리소스 매니저(621)는 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부 등을 포함할 수 있다. 디바이스 드라이버(623)는, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, WiFi 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다.
미들웨어(630)는, 예를 들면, 어플리케이션(670)이 공통적으로 필요로 하는 기능을 제공하거나, 어플리케이션(670)이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 API(660)를 통해 다양한 기능들을 어플리케이션(670)으로 제공할 수 있다. 한 실시 예에 따르면, 미들웨어(630)는 런타임 라이브러리(635), 어플리케이션 매니저(application manager)(641), 윈도우 매니저(window manager)(642), 멀티미디어 매니저(multimedia manager)(643), 리소스 매니저(resource manager)(644), 파워 매니저(power manager)(645), 데이터베이스 매니저(database manager)(646), 패키지 매니저(package manager)(647), 연결 매니저(connectivity manager)(648), 통지 매니저(notification manager)(649), 위치 매니저(location manager)(650), 그래픽 매니저(graphic manager)(651), 또는 보안 매니저(security manager)(652) 중 적어도 하나를 포함할 수 있다.
런타임 라이브러리(635)는, 예를 들면, 어플리케이션(670)이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 런타임 라이브러리(635)는 입출력 관리, 메모리 관리, 또는 산술 함수에 대한 기능 등을 수행할 수 있다.
어플리케이션 매니저(641)는, 예를 들면, 어플리케이션(670) 중 적어도 하나의 어플리케이션의 생명 주기(life cycle)를 관리할 수 있다. 윈도우 매니저(642)는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 멀티미디어 매니저(643)는 다양한 미디어 파일들의 재생에 필요한 포맷을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 리소스 매니저(644)는 어플리케이션(670) 중 적어도 어느 하나의 어플리케이션의 소스 코드, 메모리 또는 저장 공간 등의 자원을 관리할 수 있다.
파워 매니저(645)는, 예를 들면, 바이오스(BIOS: basic input/output system) 등과 함께 동작하여 배터리(battery) 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보 등을 제공할 수 있다. 데이터베이스 매니저(646)는 어플리케이션(670) 중 적어도 하나의 어플리케이션에서 사용할 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 패키지 매니저(647)는 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 업데이트를 관리할 수 있다.
연결 매니저(648)는, 예를 들면, WiFi 또는 블루투스 등의 무선 연결을 관리할 수 있다. 통지 매니저(649)는 도착 메시지, 약속, 근접성 알림 등의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 위치 매니저(650)는 전자 장치의 위치 정보를 관리할 수 있다. 그래픽 매니저(651)는 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 보안 매니저(652)는 시스템 보안 또는 사용자 인증 등에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(예: 전자 장치(101))가 전화 기능을 포함한 경우, 미들웨어(630)는 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager)를 더 포함할 수 있다.
미들웨어(630)는 전술한 구성요소들의 다양한 기능의 조합을 형성하는 미들웨어 모듈을 포함할 수 있다. 미들웨어(630)는 차별화된 기능을 제공하기 위해 운영 체제의 종류 별로 특화된 모듈을 제공할 수 있다. 또한, 미들웨어(630)는 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다.
API(660)(예: API(145))는, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼 별로 하나의 API 셋을 제공할 수 있으며, 타이젠(tizen)의 경우, 플랫폼 별로 두 개 이상의 API 셋을 제공할 수 있다.
어플리케이션(670)은, 예를 들면, 홈(671), 다이얼러(672), SMS/MMS(673), IM(instant message)(674), 브라우저(675), 카메라(676), 알람(677), 컨택트(678), 음성 다이얼(679), 이메일(680), 달력(681), 미디어 플레이어(682), 앨범(683), 또는 시계(684), 건강 관리(health care)(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보 제공(예: 기압, 습도, 또는 온도 정보 등을 제공) 등의 기능을 수행할 수 있는 하나 이상의 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 어플리케이션(670)은 전자 장치(예: 전자 장치(101))와, 외부 전자 장치(404) 또는 서버(406) 사이의 정보 교환을 지원하는 어플리케이션(이하, 설명의 편의 상, "정보 교환 어플리케이션")을 포함할 수 있다. 정보 교환 어플리케이션은, 예를 들면, 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 알림 전달 어플리케이션은 전자 장치의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션, 또는 환경 정보 어플리케이션 등)에서 발생된 알림 정보를 외부 전자 장치(404) 또는 서버(406)로 전달하는 기능을 포함할 수 있다. 또한, 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다.
장치 관리 어플리케이션은, 예를 들면, 전자 장치와 통신하는 외부 전자 장치(404) 또는 서버(406)의 적어도 하나의 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴-온/턴-오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 외부 전자 장치에서 동작하는 어플리케이션 또는 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스 등)를 관리(예: 설치, 삭제, 또는 업데이트)할 수 있다.
한 실시 예에 따르면, 어플리케이션(670)은 외부 전자 장치(404) 또는 서버(406)의 속성(에 따라 지정된 어플리케이션(예: 모바일 의료 기기의 건강 관리 어플리케이션 등)을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션(670)은 외부 전자 장치(404) 또는 서버(406)로부터 수신된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션(670)은 프리로드 어플리케이션(preloaded application) 또는 서버로부터 다운로드 가능한 제3자 어플리케이션(third party application)을 포함할 수 있다. 도시된 실시 예에 따른 프로그램 모듈(610)의 구성요소들의 명칭은 운영 체제의 종류에 따라서 달라질 수 있다.
다양한 실시 예에 따르면, 프로그램 모듈(610)의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어, 또는 이들 중 적어도 둘 이상의 조합으로 구현될 수 있다. 프로그램 모듈(610)의 적어도 일부는, 예를 들면, 프로세서(420)에 의해 구현(implement)(예: 실행)될 수 있다. 프로그램 모듈(610)의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트(sets of instructions) 또는 프로세스 등을 포함할 수 있다.
도 7 내지 11b는 본 발명의 다양한 실시예에 따른 프로그램 모듈을 설명하기 위한 도면들이다.
도 7을 참조하면, 본 발명의 다양한 실시예에 따른 프로그램 모듈은 전자 장치(101)에 관련된 자원을 제어하는 운영 체제 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션을 포함할 수 있다. 운영 체제는, 예를 들면, AndroidTM, iOSTM, WindowsTM, SymbianTM, TizenTM, 또는 BadaTM를 포함할 수 있다. 프로그램 모듈의 적어도 일부는 전자 장치 상에 프리로드되거나, 외부 전자 장치(404) 또는 서버(406)로부터 다운로드 가능하다.
폴딩 이벤트 컨버터(Folding Event Converter, 720)(또는 이벤트 컨버터라고 함)는 센서(710)(예: 스트레인 센서(strain Sensor, 712), 거리 센서(Distance Sensor, 713), 자이로스코프 센서(Gyroscope Sensor, 714))로부터 수신한 원 데이터(Raw data)를 분석하여 폴딩 상태를 계산할 수 있다. 이하, 폴딩은 벤딩(bending)이라고 칭할 수도 있고, 폴딩 이벤트는 폴딩 제스처라고 칭할 수도 있다.
폴딩 이벤트 디스패처/핸들러(Folding Event Dispatcher/Handler, 728)(또는 이벤트 핸들러라고 함)는 폴딩 상태/이벤트를 시스템(System, 765) 또는 어플리케이션(Application, 760)으로 전달할 수 있다. 폴딩 스테이트 매니저(Folding State Manager, 722)는 폴딩 상태를 해당 모듈에 전달할 수 있다. 상태 메모리 모듈(State Memory Module, 724)은 폴딩 상태를 저장할 수 있다. 노티피케이션/메시지 매니저(Notification/Message manager, 741)는, 예를 들면, 도착 메시지, 약속, 근접성 알림 등의 이벤트를 사용자에게 제공할 수 있다. 이벤트 로거(Event Logger, 742)는 이벤트들을 기록하고, 시간순으로 표시할 수 있다. 텔레포니 모듈(Telephony Module, 743)은 전자 장치의 음성/영상 통화 기능을 관리할 수 있다.
타이머(Timer, 744)는 타이머 기능을 제공할 수 있다. 로케이션 매니저(Location Manager, 745)는, 예를 들면, 전자 장치의 위치 정보를 관리할 수 있다. 파워 매니저(Power Manager, 746)는, 예를 들면, 파워 컨트롤러(Power Controller 748)와 연동하여, 배터리의 용량 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보를 제공할 수 있다. 시스템 이벤트 리시버(System Event Receiver, 732)는, 노티피케이션/메시지 매니저(741), 이벤트 로거(742), 텔레포니 모듈(743), 타이머(744) 또는 파워 매니저(746)로부터 이벤트를 수신하여 컨텍스트 매니저(Context Manager, 734)로 전달할 수 있다.
입력 핸들러(Input Handler, 730)는, TSP(715), 마우스(Mouse 716) 또는 키(Key, 717)로부터의 입력을 수신하여 컨텍스트 매니저(734)로 전달할 수 있다. 컨텍스트 매니저(Context Manager, 734)는, 입력, 시스템 이벤트, 폴딩 상태 등에 근거하여, 시스템 서비스를 관리할 수 있다. 디스플레이 컨트롤러(Display Controller, 774)는, 화면 온/오프를 제어할 수 있다. 프레임 버퍼(Frame buffer, 772)는 디스플레이에 출력할 픽셀 값들 또는 픽셀 컬러 값들(pixel color values)를 저장할 수 있다. 그래픽 컴포저(Graphic Composer, 770)는 아이템, 영상, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성할 수 있다. 윈도우 매니저(750)는 화면에서 사용되는 GUI 자원을 관리할 수 있다.
어플리케이션(760)은, 예를 들면, 홈, 다이얼러, SMS/MMS, IM(instant message), 브라우저, 카메라, 알람, 컨택트, 음성 다이얼, 이메일, 달력, 미디어 플레이어, 앨범, 와치, 헬스 케어(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보(예: 기압, 습도, 또는 온도 정보) 제공 어플리케이션을 포함할 수 있다.
프로그램 모듈의 적어도 일부는 소프트웨어, 펌웨어, 하드웨어(예: 프로세서), 또는 이들 중 적어도 둘 이상의 조합으로 구현(예: 실행)될 수 있으며, 하나 이상의 기능을 수행하기 위한 모듈, 프로그램, 루틴, 명령어 세트 또는 프로세스를 포함할 수 있다.
도 8을 참조하면, 이벤트 컨버터(820)는, 센서(810)의 원 데이터를 분석하여 폴딩 상태를 계산할 수 있다. 예를 들어, 제1 센서(230) 및 제2 센서(240) 각각이 자이로스코프 센서를 포함하는 경우, 이벤트 컨버터(820)는, 제1 센서(230)에 의해 측정된 제1 센서(230)의 축과 지면이 이루는 각도와, 제2 센서(240)에 의해 측정된 제2 센서(240)의 축과 지면이 이루는 각도를 서로 비교함으로써, 전자 장치(101)의 접힌 각도를 계산할 수 있다.
또는, 제1 센서(230)가 자력 감지 센서를 포함하며, 제2 센서(240)가 자력 인가부를 포함하는 경우, 전자 장치(101)를 구부리는 동작에 대응하여, 자력 인가부에 의한 자력 세기를 검출할 수 있다.
이러한 경우 이벤트 컨버터(820)는, 검출된 자력 세기는 접힌 각도에 비례하므로 즉, 전자 장치(101)가 접혀질수록 자력의 세기가 커지게 되며 자력의 세기를 기반으로 전자 장치(101)의 접힌 각도를 계산할 수 있다.
폴딩 상태는, 각도 센서(811)를 통해 바로 측정되거나 이벤트 컨버터(820)의 계산을 통해 결정될 수 있다. 폴딩 상태는, 각도 자체로 표현되거나, 일정 각도 범위에 대응하는 하나의 상태로 표현되거나, 각도의 증가/감소 추세로 표현될 수 있다.
폴딩 스테이트 매니저(Folding State Manager, 822)는 폴딩 상태/이벤트를 이벤트 핸들러(828)로 전달하고, 폴딩 이벤트는 등록된 이벤트 핸들러(828)에 의해 처리될 수 있다. 이벤트 핸들러(828)는, 시스템(865), 어플리케이션(860), 백그라운드 서비스(background service) 등 여러 모듈들에 의해 등록될 수 있으며, 등록된 이벤트 핸들러(828)는 우선 순위에 따라 폴딩 이벤트를 처리할 수 있다. 예를 들어, 우선 순위는, 시스템(865), 눈에 보이는(또는 활성화된) 어플리케이션, 실행 중이지만 사용자에게 직접 보이지 않는 어플리케이션, 눈에 보이는 UI를 가지지 않는 백그라운드 서비스의 순으로 정해질 수 있다. 예를 들어, 높은 우선 순위의 이벤트 핸들러에서 폴딩 이벤트가 처리되지 않은 경우 다음 순위의 이벤트 핸들러에서 폴딩 이벤트를 처리할 수 있다.
폴딩 이벤트의 순차적인 처리는 아래와 같은 효과를 가질 수 있다.
전자 장치가 미리 설정된 각도 이내로 접힌 경우, 시스템(865)에서 알파 스크린 또는 가젯(Gadget)을 표시할 수 있다. 예를 들어, 알파 스크린은, 자유롭게 이동 가능할 수 있고, 멀티미디어 콘텐트, 사용자 맞춤형 정보, 실시간 정보 등의 적어도 하나를 표시하는 윈도우로 구성될 수 있다. 가로 모드와 같은 특정 상황이 주어진 경우 시스템(865)은 폴딩 이벤트를 처리하지 않을 수 있고, 다음 우선 순위를 가진 이벤트 핸들러(828)가 비디오 어플리케이션에서 등록된 경우 비디오 어플리케이션은 폴딩(folding)/언폴딩(unfolding) 이벤트에 따라 비디오 재생을 정지하거나 개시할 수 있다.
도 9를 참조하면, 폴딩 스테이트 매니저(922)는 폴딩 상태/이벤트를 이벤트 핸들러를 거치지 않고 직접 시스템(965) 또는 어플리케이션(960)으로 전달할 수 있다. 예를 들어, 폴딩 스테이트 매니저(922)는 컨텍스트 매니저(934)로부터 획득한 전자 장치의 컨텍스트 정보에 근거하여 폴딩 이벤트의 전달 여부/대상을 결정할 수도 있다.
도 10a 및 도 10b를 참조하면, 화면 분할 방식들 중에서 디스플레이(1080)의 가상적 분할 없이, 디스플레이(1080)의 화면만 복수의 영역들로 분할한 경우에, 어플리케이션 윈도우(1083, 1084)의 위치에 따라 어플리케이션 윈도우 상의 동일 지점에 대한 디스플레이(1080) 상의 좌표가 다르므로, 윈도우 매니저(1050)는 어플리케이션 윈도우(1083, 1084)가 분할된 영역에 부합하도록 조절할 수 있다.
도 11a 및 도 11b를 참조하면, 화면 분할 방식들 중에서 디스플레이를 가상 디스플레이들(1181, 1182)로 분할한 경우에, 복수의 가상 디스플레이들 (1181, 1182)이 복수의 어플리케이션 윈도우들(1083, 1084)에 일대일 대응되고, 어플리케이션 윈도우(1083, 1084)의 위치가 달라도 어플리케이션 윈도우 상의 동일 지점에 대한 해당 디스플레이 상의 좌표가 같으므로, 디스플레이 매니저(1050)는 가상 디스플레이(1181, 1182)가 분할된 영역에 부합하도록 조절할 수 있다.
본 발명의 다양한 실시 예에 따르면, 디스플레이를 제어하는 전자 장치에 있어서, 제1 영역에 제1 어플리케이션을 표시하도록 구성된 디스플레이; 및 상기 디스플레이의 형태 변경을 감지하고, 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된(paired) 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하도록 설정된 프로세서를 포함할 수 있다.
일 실시 예에 따르면, 본 발명은 상기 전자 장치의 아웃스프레딩 또는 폴딩(folding)을 감지하도록 설정된 센서부를 더 포함할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 형태 변경의 감지에 대응하여 상기 제1 어플리케이션의 기능과 연계된 상기 제2 어플리케이션이 설정되어 있는지 판단하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 제2 어플리케이션이 설정되어 있으면, 상기 제2 어플리케이션을 상기 제2 영역에 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 보조 화면을 상기 디스플레이의 일측 면에 표시하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 보조 화면 상의 입력이 감지되면, 상기 제1 영역을 제1 서브 영역 및 제2 서브 영역으로 분할하고, 상기 제1 어플리케이션을 상기 제1 서브 영역에 표시하고, 상기 제2 어플리케이션을 상기 제2 서브 영역에 표시하고, 상기 보조 화면을 상기 제2 영역에 표시하며, 상기 제2 영역에 표시된 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 제2 어플리케이션이 설정되어 있지 않으면, 상기 제1 어플리케이션이 확대 모드를 지원하는지 판단하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 제1 어플리케이션이 확대 모드를 지원하지 않으면, 보조 화면을 상기 제2 영역에 표시하고, 상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 제1 어플리케이션이 확대 모드를 지원하면, 상기 지원되는 확대 모드가 영역 확대 모드인지를 판단하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 확대 모드가 상기 영역 확대 모드이면, 상기 제1 어플리케이션을 상기 제1 영역 및 상기 제2 영역으로 확대하여 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는, 상기 확대 모드가 상기 영역 확대 모드가 아니면, 상기 제1 어플리케이션에 관련된 부가 기능 또는 부가 정보를 상기 제2 영역에 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 형태 변경에 의해 상기 디스플레이가 펼쳐진 상태에서, 상기 형태 변경된 디스플레이의 폴딩이 감지되면, 상기 프로세서는, 상기 제2 영역을 비활성하도록 설정될 수 있다.
일 실시 예에 따르면, 상기 프로세서는 상기 형태 변경의 감지에 대응하여 보조 화면을 상기 디스플레이의 제3 영역에 표시하며, 상기 보조 화면은, 상기 제1 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다.
도 12는 본 발명의 다양한 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 나타낸 순서도이다.
이하, 도 12를 참조하여 본 발명의 다양한 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 상세히 설명하면 다음과 같다.
전자 장치(101)는, 동작 1210에서, 디스플레이에 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이의 제1 영역에 제1 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 형태 변경(예: 아웃스프레딩(outspreading) 또는 폴딩(folding))에 대응하여 디스플레이의 표시 동작을 제어할 수 있다. 전자 장치(101)의 디스플레이(160)는 상기 형태 변경(예: 아웃스프레딩(outspreading) 또는 폴딩(folding))에 대응하여 화면을 복수 개의 영역으로 분할될 수 있다. 전자 장치(101)는 디스플레이에 적어도 하나의 어플리케이션을 표시할 수 있다. 전자 장치(101)는 복수 개의 어플리케이션을 디스플레이(160) 상에 표시할 수 있고, 상기 분할된 복수 개의 영역 각각에 하나의 어플리케이션을 표시할 수 있다. 디스플레이(160)의 분할된 각 영역은 주 영역(main area)과 적어도 하나의 부 영역(sub area)로 나뉠 수 있다. 상기 주 영역은 사용자의 그립에 의해 사용자에게 주로 보여지는 영역이 지정될 수 있고, 상기 부 영역은 사용자의 그립에 의해 사용자에게 보여지지 않는 영역이 지정될 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩 상태가 되면, 상기 주 영역에 제1 어플리케이션을 표시할 수 있다. 그리고, 전자 장치(101)는 디스플레이(160)가 폴딩 상태가 되면, 상기 부 영역을 비활성화 상태로 전환할 수 있다.
전자 장치(101)는, 동작 1212에서, 디스플레이(160)의 형태 변경(예: 아웃스프레딩(outspreading))이 발생되는지 감지할 수 있다. 전자 장치(101)는 아웃스프레딩 또는 폴딩을 감지할 수 있는 센서부를 포함할 수 있다. 전자 장치(101)는 센서부를 통해 디스플레이(160)의 아웃스프레딩 또는 폴딩을 감지할 수 있다. 전자 장치(101)는 디스플레이(160)가 아웃스프레딩(또는 폴딩)되는 각도에 기반하여 디스플레이(160)가 현재 아웃스프레딩되는 것인지 또는 폴딩되는 것인지 판단할 수 있다. 전자 장치(101)는 상기 각도가 미리 결정된 범위를 초과하는 경우, 디스플레이(160)가 현재 아웃스프레딩되는 것인지 또는 폴딩되는 것인지 판단할 수 있다. 예를 들면, 디스플레이(160)가 폴딩된 상태에서 아웃스프레딩되면, 전자 장치(101)는 폴딩된 상태에서 아웃스프레딩되고 있는 상태의 각도가 미리 결정된 범위를 초과하면, 디스플레이(160)가 현재 아웃스프레딩되고 있는 것으로 판단할 수 있다. 예를 들면, 디스플레이(160)가 아웃스프레딩된 상태에서 폴딩이되면, 전자 장치(101)는 아웃스프레딩된 상태에서 폴딩되고 있는 상태의 각도가 미리 결정된 범위를 초과하면, 디스플레이(160)가 현재 폴딩되고 있는 것으로 판단할 수 있다. 상기 미리 결정된 범위는 가변적으로 조절 가능하다.
전자 장치(101)는, 동작 1214에서, 어플리케이션에 연계된 적어도 하나의 기능을 수행하기 위해 디스플레이의 동작을 제어할 수 있다. 디스플레이(160)가 형태 변경(예: 아웃스프레딩(outspreading))되는 것으로 결정되면, 전자 장치(101)는 디스플레이(160)의 제1 영역에 표시된 제1 어플리케이션에 페어된 적어도 하나의 어플리케이션이 설정되어 있는지 판단할 수 있다. 그리고, 전자 장치(101)는 상기 제1 영역에 표시된 제1 어플리케이션에 페어된 적어도 하나의 어플리케이션이 설정되어 있는 것으로 판단되면, 전자 장치(101)는 제1 어플리케이션과 페어된 제2 어플리케이션을 상기 디스플레이(160)의 제2 영역에 표시할 수 있다. 제1 어플리케이션과 페어된 어플리케이션이 설정되어 있지 않으면, 전자 장치(101)는 상기 제1 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 제1 어플리케이션이 확대 모드를 지원하지 않는 경우, 전자 장치(101)는 보조 화면을 제2 영역에 표시할 수 있다. 상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 상기 보조 화면에 표시된 적어도 하나의 어플리케이션에 대한 객체들은 우선 순위에 따라 표시될 수 있다. 상기 우선 순위는 사용 빈도수, 최근 사용 순서 및 사용자 설정을 포함할 수 있다. 상기 보조 화면에 표시된 적어도 하나의 어플리케이션에 대한 객체들은 사용 빈도수, 최근 사용 순서 및 사용자 설정 중 적어도 하나의 우선 순위에 기반하여 보조 화면에 표시될 수 있다.
전자 장치(101)는 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드로 판단되면, 전자 장치(101)는 제1 어플리케이션을 제1 영역 및 제2 영역으로 확대하여 표시할 수 있다. 전자 장치(101)는 제1 어플리케이션을 제1 영역 및 제2 영역을 포함한 디스플레이(160)의 전체 화면으로 확대하여 표시할 수 있다. 또한, 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드이면, 전자 장치(101)는 보조 화면을 상기 디스플레이(160)의 제3 영역에 표시할 수 있다. 전자 장치(101)는 제1 어플리케이션과 관련된 부가 기능 또는 부가 정보를 상기 제2 영역에 표시할 수 있다. 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드가 아닌 경우, 전자 장치(101)는 제1 어플리케이션과 관련된 부가 기능 또는 부가 정보를 상기 디스플레이의 제2 영역에 표시할 수 있다.
본 발명의 다양한 실시 예에 따르면, 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이의 제1 영역에 제1 어플리케이션을 표시하는 동작; 상기 디스플레이의 형태 변경을 감지하는 동작; 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된 제2 어플리케이션을 결정하는 동작; 및 상기 결정된 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하는 동작을 포함할 수 있다.
일 실시 예에 따르면, 상기 형태 변경의 감지에 대응하여 상기 제1 어플리케이션의 기능과 연계된 상기 제2 어플리케이션이 설정되어 있는지 판단하는 동작; 상기 제2 어플리케이션이 설정되어 있으면, 상기 제2 어플리케이션을 상기 제2 영역에 표시하는 동작; 및 보조 화면을 상기 디스플레이의 제3 영역에 표시하는 동작을 더 포함할 수 있다.
일 실시 예에 따르면, 상기 보조 화면 상의 입력이 감지되면, 상기 제1 영역을 제1 서브 영역 및 제2 서브 영역으로 분할하는 동작; 상기 제1 어플리케이션을 상기 제1 서브 영역에 표시하는 동작; 상기 제2 어플리케이션을 상기 제2 서브 영역에 표시하는 동작; 및 상기 보조 화면을 상기 제2 영역에 표시하는 동작을 더 포함하며, 상기 제2 영역에 표시된 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다.
일 실시 예에 따르면, 상기 제2 어플리케이션이 설정되어 있지 않으면, 상기 제1 어플리케이션이 확대 모드를 지원하는지 판단하는 동작; 및 상기 제1 어플리케이션이 확대 모드를 지원하지 않으면, 보조 화면을 상기 제2 영역에 표시하는 동작을 더 포함할 수 있다.
일 실시 예에 따르면, 상기 제1 어플리케이션이 확대 모드를 지원하면, 상기 지원되는 확대 모드가 영역 확대 모드인지를 판단하는 동작; 및 상기 확대 모드가 상기 영역 확대 모드이면, 상기 제1 어플리케이션을 상기 제1 영역 및 상기 제2 영역으로 확대하여 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하는 동작을 더 포함할 수 있다.
일 실시 예에 따르면, 상기 확대 모드가 상기 영역 확대 모드가 아니면, 상기 제1 어플리케이션에 관련된 부가 기능 또는 부가 정보를 상기 제2 영역에 표시하는 동작; 및 보조 화면을 상기 디스플레이의 제3 영역에 표시하는 동작을 더 포함할 수 있다.
도 13은 본 발명의 일 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 나타낸 순서도이다.
이하, 도 13을 참조하여 본 발명의 일 실시 예에 따른 전자 장치의 디스플레이를 제어하는 과정을 상세히 설명하면 다음과 같다.
전자 장치(101)는, 동작 1310에서, 디스플레이의 제1 영역에 제1 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 형태 변경(예: 아웃스프레딩(outspreading) 또는 폴딩(folding))에 대응하여 디스플레이의 표시 동작을 제어할 수 있다. 전자 장치(101)의 디스플레이(160)는 상기 형태 변경(예: 아웃스프레딩(outspreading) 또는 폴딩(folding))에 대응하여 화면을 복수 개의 영역으로 분할될 수 있다. 전자 장치(101)는 디스플레이에 적어도 하나의 어플리케이션을 표시할 수 있다. 전자 장치(101)는 복수 개의 어플리케이션을 디스플레이(160) 상에 표시할 수 있고, 상기 분할된 복수 개의 영역 각각에 하나의 어플리케이션을 표시할 수 있다. 디스플레이(160)의 분할된 각 영역은 주 영역(main area)과 적어도 하나의 부 영역(sub area)로 나뉠 수 있다. 상기 주 영역은 사용자의 그립에 의해 사용자에게 주로 보여지는 영역이 지정될 수 있고, 상기 부 영역은 사용자의 그립에 의해 사용자에게 보여지지 않는 영역이 지정될 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩 상태가 되면, 상기 주 영역에 제1 어플리케이션을 표시할 수 있다. 그리고, 전자 장치(101)는 디스플레이(160)가 폴딩 상태가 되면, 상기 부 영역을 비활성화 상태로 전환할 수 있다.
전자 장치(101)는, 동작 1312에서, 디스플레이(160)의 형태 변경(예: 아웃스프레딩(outspreading))이 발생되는지 감지할 수 있다. 전자 장치(101)는 아웃스프레딩 또는 폴딩을 감지할 수 있는 센서부를 포함할 수 있다. 전자 장치(101)는 센서부를 통해 디스플레이(160)의 아웃스프레딩 또는 폴딩을 감지할 수 있다. 전자 장치(101)는 디스플레이(160)가 아웃스프레딩(또는 폴딩)되는 각도에 기반하여 디스플레이(160)가 현재 아웃스프레딩되는 것인지 또는 폴딩되는 것인지 판단할 수 있다. 전자 장치(101)는 상기 각도가 미리 결정된 범위를 초과하는 경우, 디스플레이(160)가 현재 아웃스프레딩되는 것인지 또는 폴딩되는 것인지 판단할 수 있다. 예를 들면, 디스플레이(160)가 폴딩된 상태에서 아웃스프레딩되면, 전자 장치(101)는 폴딩된 상태에서 아웃스프레딩되고 있는 상태의 각도가 미리 결정된 범위를 초과하면, 디스플레이(160)가 현재 아웃스프레딩되고 있는 것으로 판단할 수 있다. 예를 들면, 디스플레이(160)가 아웃스프레딩된 상태에서 폴딩이되면, 전자 장치(101)는 아웃스프레딩된 상태에서 폴딩되고 있는 상태의 각도가 미리 결정된 범위를 초과하면, 디스플레이(160)가 현재 폴딩되고 있는 것으로 판단할 수 있다. 상기 미리 결정된 범위는 가변적으로 조절 가능하다.
전자 장치(101)는, 동작 1314에서, 제1 어플리케이션과 페어된(paired) 어플리케이션이 설정되어 있는지 판단할 수 있다. 디스플레이(160)가 형태 변경(예: 아웃스프레딩(outspreading))되는 것으로 결정되면, 전자 장치(101)는 상기 제1 영역에 표시된 제1 어플리케이션에 페어된 적어도 하나의 어플리케이션이 설정되어 있는지 판단할 수 있다. 예를 들면, 제1 영역에 이메일 어플리케이션이 표시된 상태에서 디스플레이(160)가 아웃스프레딩(outspreading)되는 것으로 결정되면, 전자 장치(101)는 이메일 어플리케이션에 페어된 채팅 어플리케이션(예: 문자 송수신 어플리케이션, 대화 어플리케이션 등)이 설정되어 있는지 판단할 수 있다.
전자 장치(101)는, 동작 1316에서, 상기 제1 영역에 표시된 제1 어플리케이션에 페어된 적어도 하나의 어플리케이션이 설정되어 있는 것으로 판단되면, 전자 장치(101)는 제1 어플리케이션과 페어된 제2 어플리케이션을 상기 디스플레이(160)의 제2 영역에 표시할 수 있다. 전자 장치(101)는 보조 화면을 제3 영역에 표시할 수 있다. 전자 장치(101)는 상기 제1 어플리케이션과 페어된 상기 제2 어플리케이션과 보조 화면을 함께 디스플레이(160) 상에 표시할 수 있다. 상기 보조 화면은 상기 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 상기 보조 화면은, 상기 제1 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다. 상기 보조 화면은, 드래그 제스처에 의해 상기 제2 영역에 표시될 수 있다. 예를 들면, 상기 디스플레이(160)의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 디스플레이(160)가 아웃스프레딩(outspreading)되는 것으로 결정되면, 전자 장치(101)는 이메일 어플리케이션에 페어된 채팅 어플리케이션(예: 문자 송수신 어플리케이션, 대화 어플리케이션 등)을 상기 디스플레이(160)의 제2 영역에 표시할 수 있다.
전자 장치(101)는, 동작 1318에서, 제1 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 제1 어플리케이션과 페어된 어플리케이션이 설정되어 있지 않으면, 전자 장치(101)는 상기 제1 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 상기 확대 모드는 상기 표시된 제1 어플리케이션을 확대(예: 줌 인)하여 디스플레이(160)의 전체 화면으로 표시하는 모드를 포함할 수 있다.
전자 장치(101)는, 동작 1320에서, 보조 화면을 제2 영역에 표시할 수 있다. 제1 어플리케이션이 확대 모드를 지원하지 않는 경우, 전자 장치(101)는 보조 화면을 제2 영역에 표시할 수 있다. 상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 상기 보조 화면은, 상기 제1 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다. 예를 들면, 상기 디스플레이(160)의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 디스플레이(160)가 아웃스프레딩(outspreading)되고, 페어된 어플리케이션이 설정되지 않는 것으로 판단되고, 상기 제1 어플리케이션이 확대 모드를 지원하지 않는 것으로 판단되면, 전자 장치(101)는 보조 화면을 제2 영역에 표시할 수 있다. 상기 보조 화면은 상기 이메일 어플리케이션과 페어되지 않은 적어도 하나의 어플리케이션에 대한 객체를 포함할 수 있다. 상기 보조 화면에 표시된 적어도 하나의 어플리케이션에 대한 객체들은 우선 순위에 따라 표시될 수 있다. 상기 우선 순위는 사용 빈도수, 최근 사용 순서 및 사용자 설정을 포함할 수 있다. 상기 보조 화면에 표시된 적어도 하나의 어플리케이션에 대한 객체들은 사용 빈도수, 최근 사용 순서 및 사용자 설정 중 적어도 하나의 우선 순위에 기반하여 보조 화면에 표시될 수 있다.
전자 장치(101)는, 동작 1322에서, 지원되는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 전자 장치(101)는 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 디스플레이(160) 상에 어플리케이션이 표시되는 경우, 디스플레이(160)의 화면 크기의 제약에 따라, 사용자는 불편함을 느낄 수 있다. 이러한 사용자 불편함을 해소하기 위해, 어플리케이션은 디스플레이(160)의 화면 전체를 통해 표시되도록 기능이 지원될 수 있다. 예를 들면, 동영상 또는 사진의 경우, 디스플레이(160)를 가로로 향하도록 움직이면, 디스플레이(160)의 전체 화면을 통해 동영상 또는 사진이 표시될 수 있다.
전자 장치(101)는, 동작 1324에서, 제1 어플리케이션을 제1 영역 및 제2 영역으로 확대하여 표시할 수 있다. 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드이면, 전자 장치(101)는 제1 어플리케이션을 디스플레이(160)의 제1 영역 및 제2 영역으로 확대하여 표시할 수 있다. 전자 장치(101)는 제1 어플리케이션을 제1 영역 및 제2 영역을 포함한 디스플레이(160)의 전체 화면으로 확대하여 표시할 수 있다. 전자 장치(101)는 확대된 어플리케이션에 대한 다양한 기능을 제공하는 메뉴 버튼(1951)을 상기 확대된 어플리케이션 상에 표시할 수 있다. 예를 들면, 상기 디스플레이(160)의 제1 영역에 표시된 지도에 지원되는 확대 모드가 영역 확대 모드인 경우, 전자 장치(101)는 상기 제1 영역에 표시된 지도를 확장(또는 확대)하여 디스플레이(160)의 전체 화면에 표시할 수 있다. 또한, 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드이면, 전자 장치(101)는 보조 화면을 상기 디스플레이(160)의 제3 영역에 표시할 수 있다. 상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 상기 보조 화면은, 상기 제1 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다.
전자 장치(101)는, 동작 1326에서, 제1 어플리케이션과 관련된 부가 기능 또는 부가 정보를 상기 제2 영역에 표시할 수 있다. 제1 어플리케이션에 지원되는 확대 모드가 영역 확대 모드가 아닌 경우, 전자 장치(101)는 제1 어플리케이션과 관련된 부가 기능 또는 부가 정보를 상기 디스플레이의 제2 영역에 표시할 수 있다. 예를 들면, 디스플레이(160)의 제1 영역에 연락처 어플리케이션이 표시된 상태에서, 전자 장치(101)의 아웃스프레딩이 감지고, 상기 제1 영역에 표시된 연락처 어플리케이션에 지원되는 확대 모드가 영역 확대가 아니면, 전자 장치(101)는 최근 통화 내역, 사용자별 문자 송수신 내역을 제2 영역에 표시할 수 있다. 또는, 예를 들면, 디스플레이(160)의 제1 영역에 이메일 어플리케이션이 표시된 상태에서, 전자 장치(101)의 아웃스프레딩이 감지고, 상기 제1 영역에 표시된 이메일 어플리케이션에 지원되는 확대 모드가 영역 확대가 아니면, 전자 장치(101)는 중요 발신인, 중요 메일, 보낸 편지함 등과 같은 내역을 제2 영역에 표시할 수 있다. 또는, 상기 디스플레이(160)의 제1 영역에 표시된 웹 브라우저를 통해 사용자가 검색하고자 하는 키워드가 입력되어 검색 결과가 표시된 상태에서, 전자 장치(101)의 아웃스프레딩이 감지되면, 전자 장치(101)는 웹 프라우저에 지원되는 확대 모드가 영역 확대인지를 판단할 수 있다. 그리고, 상기 웹 프라우저에 지원되는 확대 모드가 영역 확대가 아니면, 전자 장치(101)는 상기 표시된 결과 이외에 추가적으로 검색한 결과를 제2 영역에 표시할 수 있다. 또는, 상기 디스플레이(160)의 제1 영역에 대화 어플리케이션이 표시된 상태에서, 전자 장치(101)의 아웃스프레딩이 감지되면, 전자 장치(101)는 대화 어플리케이션에 지원되는 확대 모드가 영역 확대인지를 판단할 수 있다. 그리고, 상기 대화 어플리케이션에 지원되는 확대 모드가 영역 확대가 아니면, 전자 장치(101)는 상대방과 대화에 사용될 수 있는 다양한 이모티콘, 상기 대화 어플리케이션에 연관된 다른 어플리케이션의 객체, 또는 최근에 사용한 어플리케이션의 객체를 제2 영역에 표시할 수 있다. 또는, 상기 디스플레이(160)의 제1 영역에 홈 화면이 표시된 상태에서, 전자 장치(101)의 아웃스프레딩이 감지되면, 전자 장치(101)는 홈 화면에 지원되는 확대 모드가 영역 확대인지를 판단할 수 있다. 그리고, 상기 홈 화면에 지원되는 확대 모드가 영역 확대가 아니면, 전자 장치(101)는 홈 화면에 연계된 적어도 하나의 어플리케이션의 객체를 제2 영역에 표시할 수 있다.
도 14의 (a) 내지 14의 (d)는 본 발명의 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제1 실시 예를 나타낸 예시도이다.
도 14의 (a) 내지 14의 (d)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1410)에 이메일 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1410)에 이메일 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1410)에 이메일 어플리케이션을 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 도 14의 (b)는 디스플레이(160)가 형태 변경된 이후의 도면을 나타낸다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1410)에 이메일 어플리케이션을 표시된 상태에서 디스플레이(160)가 아웃스프레딩되는 입력이 감지되면, 전자 장치(101)는 상기 이메일 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 상기 이메일 어플리케이션과 페어된 어플리케이션(예: 문자 송수신 어플리케이션, 대화 어플리케이션 등)이 존재하면, 전자 장치(101)는 상기 이메일 어플리케이션에 페어된 채팅 어플리케이션(예: 문자 송수신 어플리케이션, 대화 어플리케이션 등)을 상기 디스플레이(160)의 제2 영역(1420)에 표시할 수 있다. 전자 장치(101)는 상기 이메일 어플리케이션을 제1 영역(1410)에 표시하고 있는 상태에서, 상기 이메일 어플리케이션과 페어된 채팅 어플리케이션을 제2 영역(1420)에 표시하고, 보조 화면을 제3 영역(1430)에 표시할 수 있다. 상기 보조 화면은 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 다른 어플리케이션을 런칭(launching)할 수 있는 영역으로 표시될 수 있다. 상기 보조 화면은 상기 이메일 어플리케이션의 기능과 연계된 적어도 하나의 채팅 어플리케이션의 객체 및/또는 각 채팅 어플리케이션에 포함된 각 사용자의 객체를 포함할 수 있다. 이와 같이, 상기 보조 화면은, 상기 이메일 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다. 상기 보조 화면은, 드래그 제스처에 의해 상기 제2 영역에 표시될 수 있다.
도 14의 (c)에서, 보조 화면이 표시된 제3 영역(1430)의 일부 지점(또는 영역)(1431)에 터치 또는, 제2 영역으로 향하는 드래그 제스처가 감지되면, 전자 장치(101)는 상기 보조 화면에 포함된 다양한 객체를 제2 영역(1440)에 표시할 수 있다. 상기 보조 화면은 상기 이메일 어플리케이션에 연계된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들을 포함할 수 있다. 상기 보조 화면은 상기 이메일 어플리케이션의 기능에 맞춤형 추천 항목들에 대응하는 적어도 하나의 어플리케이션의 객체로 구성될 수 있다. 그리고, 도 14d에서 상기 보조 화면에 포함된 다양한 객체를 제2 영역(1440)에 표시된 상태에서, 상기 보조 화면 상의 일부 지점(또는 영역)(1432)에 터치 또는, 좌측(또는 우측)으로 향하는 드래그 제스처가 감지되면, 전자 장치(101)는 도 14의 (d)에 도시된 보조 화면(1440)을 도 14의 (c)의 보조 화면(1431)과 같이 표시할 수 있다.
도 15의 (a) 내지 15의 (d)는 본 발명의 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 아웃스프레딩에 의해 디스플레이의 표시 동작을 제어하는 제2 실시 예를 나타낸 예시도이다.
도 15의 (a) 내지 15의 (b)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1510)에 이메일 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1510)에 이메일 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1510)에 이메일 어플리케이션을 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 그리고, 전자 장치(101)는 이메일 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1510)에 이메일 어플리케이션을 표시된 상태에서 상기 이메일 어플리케이션과 페어된 어플리케이션이 존재하면, 도 15b와 같이 전자 장치(101)는 상기 이메일 어플리케이션에 페어된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들을 상기 디스플레이(160)의 제2 영역(1520)에 표시할 수 있다.
도 15의 (c) 내지 15의 (d)를 참조하면, 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1530)에 홈 화면을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1530)에 홈 화면이 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 그리고, 전자 장치(101)는 홈 화면과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1530)에 홈 화면을 표시된 상태에서 상기 홈 화면과 페어된 어플리케이션이 존재하면, 도 15d와 같이 전자 장치(101)는 상기 홈 화면에 페어된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들을 상기 디스플레이(160)의 제2 영역(1520)에 표시할 수 있다.
도 16의 (a) 내지 16의 (c)는 본 발명의 디스플레이의 제1 영역에 통화 수신을 알리는 화면이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제3 실시 예를 나타낸 예시도이고, 도 16의 (d) 내지 16의 (f)는 디스플레이의 제1 영역에 이메일 어플리케이션이 표시된 상태에서 통화가 수신되고, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제4 실시 예를 나타낸 예시도이다.
도 16의 (a) 내지 16의 (c)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1610)에 통화 수신에 대응하는 화면을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1510)에 통화 수신에 대응하는 화면을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1510)에 통화 수신에 대응하는 화면을 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 그리고, 전자 장치(101)는 상기 통화에 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1610)에 통화 수신에 대응하는 화면을 표시된 상태에서 상기 통화에 페어된 어플리케이션이 존재하지 않으면, 상기 통화 수신에 대응하는 화면이 확대 가능한지 판단할 수 있다. 상기 통화 수신에 대응하는 화면이 확대 가능하지 않으면, 도 16의 (b)와 같이 전자 장치(101)는 상기 통화에 페어된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체, 사용자가 선호하는 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들을 포함하는 보조 화면을 상기 디스플레이(160)의 제2 영역(1620)에 표시할 수 있다. 상기 통화에 페어된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체, 사용자가 선호하는 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들은 우선 순위에 따라 상기 보조 화면에 표시될 수 있다. 상기 우선 순위는 사용 빈도수, 최근 사용 순서 및 사용자 설정을 포함할 수 있다. 상기 적어도 하나의 어플리케이션에 대한 객체들은 사용 빈도수, 최근 사용 순서 및 사용자 설정 중 적어도 하나의 우선 순위에 기반하여 제2 영역(1620)에 표시될 수 있다. 그리고, 상기 보조 화면 상의 일부 지점(또는 영역)에 터치 또는, 좌측(또는 우측)으로 향하는 드래그 제스처가 감지되면, 전자 장치(101)는 도 16b에 도시된 보조 화면(1620)을 도 16c의 보조 화면(1620)과 같이 표시할 수 있다. 그리고, 제2 영역(1630)은 어떠한 객체도 표시되지 않을 수 있다.
도 16의 (d) 내지 16의 (f)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1640)에 이메일 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역에 이메일 어플리케이션(1640)을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역에 이메일 어플리케이션(1640)을 표시한 상태에서 통화 수신에 대응하는 화면(1650)을 상기 제1 영역에 표시할 수 있다. 전자 장치(101)는 상기 통화가 수신되는 도중에 디스플레이(160)의 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 상기 통화가 수신되는 도중에 디스플레이(160)의 형태 변경(예: 아웃스프레딩)이 감지되면, 전자 장치(101)는 상기 통화 수신에 대응하는 화면(1650)을 제1 영역에 표시하고, 상기 이메일 어플리케이션(1640)을 제2 영역에 표시할 수 있다. 그리고, 전자 장치(101)는 상기 통화 중에 송수신되는 음성을 스피커 폰으로 출력할 수 있다. 그리고, 도 16f와 같이 전자 장치(101)는 상기 통화 또는 상기 이메일 어플리케이션에 페어된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체, 사용자가 선호하는 적어도 하나의 어플리케이션의 객체 및 모든 어플리케이션의 객체들을 포함하는 보조 화면을 상기 디스플레이(160)의 제3 영역(1650)에 표시할 수 있다.
도 17의 (a) 및 17의 (b)는 본 발명의 디스플레이의 제1 영역에 지도가 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제5 실시 예를 나타낸 예시도이다.
도 17의 (a) 및 17의 (b)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1710)에 지도를 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1710)에 지도를 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1710)에 지도가 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 도 17의 (b)는 디스플레이(160)가 형태 변경된(예: 아웃스프레딩된) 이후의 도면을 나타낸다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1710)에 지도가 표시된 상태에서 디스플레이(160)가 형태 변경되는 입력(예: 아웃스프레딩되는 입력)이 감지되면, 전자 장치(101)는 상기 지도를 표시하는 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 상기 지도를 표시하는 어플리케이션과 페어된 어플리케이션이 존재하지 않으면, 전자 장치(101)는 상기 지도를 표시하는 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 그리고, 상기 지도를 표시하는 어플리케이션이 확대 모드를 지원하면, 전자 장치(101)는 지원하는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 지원하는 확대 모드가 영역 확대 모드이면, 전자 장치는 상기 지도를 표시하는 어플리케이션을 디스플레이(160)의 전체 화면(1720)에 표시할 수 있다. 그리고, 전자 장치(101)는 보조 화면을 제3 영역(1730)에 표시할 수 있다. 상기 보조 화면은 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 다른 어플리케이션을 런칭(launching)할 수 있는 영역으로 표시될 수 있다. 상기 보조 화면은 상기 지도를 표시하는 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다.
도 18의 (a) 내지 18의 (d)는 본 발명의 디스플레이의 제1 영역에 연락처 어플리케이션이 표시된 상태에서 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제6 실시 예를 나타낸 예시도이다.
도 18의 (a) 내지 18의 (d)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1810)에 연락처 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1810)에 연락처 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1810)에 연락처 어플리케이션을 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 도 14의 (b)는 디스플레이(160)가 형태 변경된(예: 아웃스프레딩된) 이후의 도면을 나타낸다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1410)에 연락처 어플리케이션을 표시한 상태에서 디스플레이(160)가 아웃스프레딩되는 입력이 감지되면, 전자 장치(101)는 상기 연락처 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 상기 연락처 어플리케이션과 페어된 어플리케이션이 존재하지 않으면, 전자 장치(101)는 상기 연락처 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 상기 연락처 어플리케이션이 확대 보드를 지원하면, 전자 장치(101)는 상기 연락처 어플리케이션에 지원되는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 상기 연락처 어플리케이션에 지원되는 확대 모드가 영역 확대 모드가 아니면, 전자 장치(101)는 상기 연락처 어플리케이션과 관련된 부가 기능을 제2 영역(1820)에 표시할 수 있다. 상기 부가 기능은 제1 영역(1810)에 표시된 어플리케이션의 속성에 따라 다를 수 있다. 예를 들면, 연락처 어플리케이션에 관련된 기능은 통화 내역(1821), 문자 내역(1822)을 포함할 수 있다. 상기 통화 내역(1821)이 선택되면, 전자 장치(101)는 도 18의 (c)와 같이 최근 통화(1831), 즐겨 찾기(1832), 연락처(1833)을 제2 영역(1840)에 표시하고, 제1 영역(1810)에는 키패드(1834)를 표시할 수 있다. 만일, 상기 문자 내역(1822)이 선택되면, 전자 장치(101)는 도 18의 (d)와 같이 중요 발신인(1841), 중요 메일(1842), 보낸 편지함(1843)을 제2 영역(1840)에 표시하고, 제1 영역(1810)에는 이메일 리스트(1844)를 표시할 수 있다. 그리고, 전자 장치(101)는 보조 화면을 제3 영역(1830)에 표시할 수 있다. 상기 보조 화면은 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 다른 어플리케이션을 런칭(launching)할 수 있는 영역으로 표시될 수 있다. 상기 보조 화면은 상기 연락처 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다.
도 19a의 (a) 및 19a의 (b)는 본 발명의 디스플레이의 제1 영역에 표시된 웹 브라우저를 통해 사용자가 검색하고자 하는 키워드가 입력되어 검색 결과가 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제7 실시 예를 나타낸 예시도이고, 도 19a의 (c) 및 19a의 (d)는 본 발명의 디스플레이의 제1 영역에 동영상을 재생하고 있는 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제8 실시 예를 나타낸 예시도이고, 도 19b의 (e) 및 19b의 (f)는 본 발명의 디스플레이의 제1 영역에 대화 어플리케이션이 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제9 실시 예를 나타낸 예시도이고, 도 19b의 (g) 및 19b의 (h)는 본 발명의 디스플레이의 제1 영역에 홈 화면이 표시된 상태에서, 형태 변경에 의해 디스플레이의 표시 동작을 제어하는 제10 실시 예를 나타낸 예시도이다.
도 19a의 (a) 및 19a의 (b)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1910)에 웹 브라우저를 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1910)에 웹 브라우저를 표시할 수 있다. 전자 장치(101)는 상기 웹 브라우저를 통해 입력되는 키워드에 대응되는 결과를 제1 영역(1910)에 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1910)에 웹 브라우저를 통해 검색 결과를 표시한 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 도 19a의 (b)는 디스플레이(160)가 형태 변경된(예: 아웃스프레딩된) 이후의 도면을 나타낸다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1910)에 웹 브라우저가 표시된 상태에서 디스플레이(160)가 형태 변경되는 입력이 감지되면, 전자 장치(101)는 상기 웹 브라우저와 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 상기 웹 브라우저와 페어된 어플리케이션이 존재하지 않으면, 전자 장치(101)는 상기 웹 브라우저가 확대 모드를 지원하는지 판단할 수 있다. 상기 웹 브라우저가 확대 모드를 지원하면, 전자 장치(101)는 지원하는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 상기 지원하는 확대 모드가 영역 확대 모드가 아니면, 전자 장치(101)는 상기 표시된 검색 결과 이외에 추가적으로 검색한 결과를 제2 영역(1920)에 표시할 수 있다. 디스플레이(160)의 제1 영역(1910)에 웹 브라우저를 통해 검색 결과가 표시된 상태에서 형태 변경이 감지되면, 전자 장치(101)는 상기 표시된 검색 결과 이외에 추가적으로 검색한 결과를 제2 영역(1920)에 표시할 수 있다.
도 19a의 (c) 및 19a의 (d)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1940)에 재생되는 동영상을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1940)에 재생되는 동영상을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1940)에 동영상을 표시한 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 도 19a의 (d)는 디스플레이(160)가 아웃스프레딩된 이후의 도면을 나타낸다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1940)에 재생되는 동영상이 표시된 상태에서 디스플레이(160)가 아웃스프레딩되는 입력이 감지되면, 전자 장치(101)는 상기 동영상을 재생하는 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 상기 동영상을 재생하는 어플리케이션과 페어된 어플리케이션이 존재하지 않으면, 전자 장치(101)는 상기 동영상을 재생하는 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 상기 동영상을 재생하는 어플리케이션가 확대 모드를 지원하면, 전자 장치(101)는 지원하는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 상기 지원하는 확대 모드가 영역 확대 모드가 아니면, 전자 장치(101)는 도 19a의 (d)와 같이 상기 재생중인 동영상의 화면을 미리 결정된 배수만큼 확대(1950)하여 표시할 수 있다. 그리고, 전자 장치(101)는 상기 동영상을 재생하는 어플리케이션에서 제공되는 적어도 하나의 기능을 선택하기 위한 메뉴 버튼(1951)을 디스플레이(160)에 표시할 수 있다. 그리고, 전자 장치(101)는 보조 화면을 제3 영역(1960)에 표시할 수 있다. 상기 보조 화면은 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 다른 어플리케이션을 런칭(launching)할 수 있는 영역으로 표시될 수 있다. 상기 보조 화면은 상기 동영상을 재생하는 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 이와 같이, 상기 보조 화면은, 상기 동영상을 재생하는 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다.
도 19b의 (e) 및 19b의 (f)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1970)에 대화 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1970)에 대화 어플리케이션을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1970)에 대화 어플리케이션을 표시된 상태에서 아웃스프레딩을 감지할 수 있다. 그리고, 전자 장치(101)는 대화 어플리케이션과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1970)에 대화 어플리케이션을 표시된 상태에서 상기 대화 어플리케이션과 페어된 어플리케이션이 존재하지 않으면, 상기 대화 어플리케이션이 확대 모드를 지원하는지 판단할 수 있다. 상기 대화 어플리케이션이 확대 모드를 지원하면, 전자 장치(101)는 지원하는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 상기 지원하는 확대 모드가 영역 확대 모드가 아니면, 도 19b의 (f)와 같이 전자 장치(101)는 상기 대화 어플리케이션에 연계된 적어도 하나의 어플리케이션의 객체, 최근에 사용한 적어도 하나의 어플리케이션의 객체 및 상기 대화 어플리케이션에 적용할 수 있는 복수의 이모티콘을 포함하는 보조 화면을 제2 영역(1981)에 표시할 수 있다. 상기 보조 화면은 상기 대화 어플리케이션의 기능에 맞춤형 추천 항목들에 대응하는 적어도 하나의 어플리케이션의 객체로 구성될 수 있다.
도 19b의 (g) 및 19b의 (h)를 참조하면, 전자 장치(101)는 디스플레이(160)의 제1 영역(1990)에 홈 화면을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)가 폴딩된 상태에서 디스플레이(160)의 제1 영역(1979)에 홈 화면을 표시할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1990)에 홈 화면을 표시된 상태에서 형태 변경(예: 아웃스프레딩)을 감지할 수 있다. 그리고, 전자 장치(101)는 홈 화면과 페어된 어플리케이션이 기 설정되어 있는지 판단할 수 있다. 전자 장치(101)는 디스플레이(160)의 제1 영역(1970)에 홈 화면을 표시된 상태에서 상기 홈 화면과 페어된 어플리케이션이 존재하지 않으면, 상기 홈 화면이 확대 모드를 지원하는지 판단할 수 있다. 상기 홈 화면이 확대 모드를 지원하면, 전자 장치(101)는 지원하는 확대 모드가 영역 확대 모드인지 판단할 수 있다. 상기 지원하는 확대 모드가 영역 확대 모드가 아니면, 도 19b의 (h)와 같이 전자 장치(101)는 상기 홈 화면에 연계된 적어도 하나의 어플리케이션의 객체를 포함하는 보조 화면을 제2 영역(1991)에 표시할 수 있다. 상기 보조 화면은 상기 홈 화면의 기능에 맞춤형 추천 항목들에 대응하는 적어도 하나의 어플리케이션의 객체로 구성될 수 있다. 상기 보조 화면은 상기 디스플레이(160)의 일측 면(예: 경계 면)에 표시될 수 있다. 상기 보조 화면은 상기 홈 화면의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함할 수 있다. 상기 보조 화면은, 상기 홈 화면에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성될 수 있다.
본 문서에 사용된 용어 "모듈"은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 문서에 따른 "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 문서에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 제어 회로에 의해 실행될 경우, 상기 제어 회로가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리(130)가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 제어 회로에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 문서의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 문서에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 문서에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다. 다양한 실시 예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은, 전자 장치의 디스플레이를 제어하는 명령어를 포함하는 프로그램을 저장하는 컴퓨터 가독성 저장 매체에 있어서, 디스플레이의 제1 영역에 제1 어플리케이션을 표시하는 제1 명령 셋; 상기 디스플레이의 형태 변경을 감지하는 제2 명령 셋; 상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된 제2 어플리케이션을 결정하는 제3 명령 셋; 및 상기 결정된 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하는 제4 명령 셋을 포함할 수 있다.
그리고 본 명세서와 도면에 개시된 본 문서의 실시 예들은 본 문서의 기술 내용을 쉽게 설명하고 본 문서의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 문서의 범위를 한정하고자 하는 것은 아니다. 따라서 본 문서의 범위는 여기에 개시된 실시 예들 이외에도 본 문서의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 문서의 범위에 포함되는 것으로 해석되어야 한다.

Claims (15)

  1. 디스플레이를 제어하는 전자 장치에 있어서,
    제1 영역에 제1 어플리케이션을 표시하도록 구성된 디스플레이; 및
    상기 디스플레이의 형태 변경을 감지하고,
    상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된(paired) 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하도록 설정된 프로세서를 포함하는 전자 장치.
  2. 제1 항에 있어서,
    상기 전자 장치의 아웃스프레딩 또는 폴딩(folding)을 감지하도록 설정된 센서부를 더 포함하는 전자 장치.
  3. 제1 항에 있어서,
    상기 프로세서는,
    상기 형태 변경의 감지에 대응하여 상기 제1 어플리케이션의 기능과 연계된 상기 제2 어플리케이션이 설정되어 있는지 판단하도록 설정된 전자 장치.
  4. 제3 항에 있어서
    상기 프로세서는,
    상기 제2 어플리케이션이 설정되어 있으면, 상기 제2 어플리케이션을 상기 제2 영역에 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정된 전자 장치.
  5. 제4 항에 있어서,
    상기 프로세서는,
    상기 보조 화면을 상기 디스플레이의 일측 면에 표시하도록 설정된 전자 장치.
  6. 제5 항에 있어서,
    상기 프로세서는,
    상기 보조 화면 상의 입력이 감지되면, 상기 제1 영역을 제1 서브 영역 및 제2 서브 영역으로 분할하고,
    상기 제1 어플리케이션을 상기 제1 서브 영역에 표시하고,
    상기 제2 어플리케이션을 상기 제2 서브 영역에 표시하고,
    상기 보조 화면을 상기 제2 영역에 표시하며,
    상기 제2 영역에 표시된 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함하는 전자 장치.
  7. 제3 항에 있어서,
    상기 프로세서는,
    상기 제2 어플리케이션이 설정되어 있지 않으면, 상기 제1 어플리케이션이 확대 모드를 지원하는지 판단하도록 설정된 전자 장치.
  8. 제7 항에 있어서,
    상기 프로세서는,
    상기 제1 어플리케이션이 확대 모드를 지원하지 않으면, 보조 화면을 상기 제2 영역에 표시하고,
    상기 보조 화면은 상기 제1 어플리케이션의 기능과 연계된 적어도 하나의 어플리케이션의 객체를 포함하는 전자 장치.
  9. 제7 항에 있어서,
    상기 프로세서는,
    상기 제1 어플리케이션이 확대 모드를 지원하면, 상기 지원되는 확대 모드가 영역 확대 모드인지를 판단하도록 설정된 전자 장치.
  10. 제9 항에 있어서,
    상기 프로세서는,
    상기 확대 모드가 상기 영역 확대 모드이면, 상기 제1 어플리케이션을 상기 제1 영역 및 상기 제2 영역으로 확대하여 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정된 전자 장치.
  11. 제9 항에 있어서,
    상기 프로세서는,
    상기 확대 모드가 상기 영역 확대 모드가 아니면, 상기 제1 어플리케이션에 관련된 부가 기능 또는 부가 정보를 상기 제2 영역에 표시하고, 보조 화면을 상기 디스플레이의 제3 영역에 표시하도록 설정된 전자 장치.
  12. 제1 항에 있어서,
    상기 형태 변경에 의해 상기 디스플레이가 펼쳐진 상태에서, 상기 형태 변경된 디스플레이의 폴딩이 감지되면, 상기 프로세서는, 상기 제2 영역을 비활성하도록 설정된 전자 장치.
  13. 제1 항에 있어서,
    상기 프로세서는 상기 형태 변경의 감지에 대응하여 보조 화면을 상기 디스플레이의 제3 영역에 표시하며,
    상기 보조 화면은, 상기 제1 어플리케이션에 맞춤형 추천 항목들에 대응하는 적어도 하나의 객체로 구성되는 전자 장치.
  14. 전자 장치의 디스플레이 제어 방법에 있어서,
    디스플레이의 제1 영역에 제1 어플리케이션을 표시하는 동작;
    상기 디스플레이의 형태 변경을 감지하는 동작;
    상기 감지에 대응하여 상기 제1 영역에 표시된 상기 제1 어플리케이션에 연계된 제2 어플리케이션을 결정하는 동작; 및
    상기 결정된 제2 어플리케이션을 상기 디스플레이의 제2 영역에 표시하는 동작을 포함하는 방법.
  15. 제14 항에 있어서,
    상기 형태 변경의 감지에 대응하여 상기 제1 어플리케이션의 기능과 연계된 상기 제2 어플리케이션이 설정되어 있는지 판단하는 동작;
    상기 제2 어플리케이션이 설정되어 있으면, 상기 제2 어플리케이션을 상기 제2 영역에 표시하는 동작; 및
    보조 화면을 상기 디스플레이의 제3 영역에 표시하는 동작을 더 포함하는 방법.
PCT/KR2017/009105 2016-08-19 2017-08-21 디스플레이를 제어하는 전자 장치 및 방법 WO2018034555A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP17841737.4A EP3483715B1 (en) 2016-08-19 2017-08-21 Electronic device and method for controlling display
US16/326,658 US11036257B2 (en) 2016-08-19 2017-08-21 Electronic device and method for controlling display

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0105368 2016-08-19
KR1020160105368A KR102574183B1 (ko) 2016-08-19 2016-08-19 디스플레이를 제어하는 전자 장치 및 방법

Publications (1)

Publication Number Publication Date
WO2018034555A1 true WO2018034555A1 (ko) 2018-02-22

Family

ID=61196803

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2017/009105 WO2018034555A1 (ko) 2016-08-19 2017-08-21 디스플레이를 제어하는 전자 장치 및 방법

Country Status (4)

Country Link
US (1) US11036257B2 (ko)
EP (1) EP3483715B1 (ko)
KR (1) KR102574183B1 (ko)
WO (1) WO2018034555A1 (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110379313A (zh) * 2019-07-26 2019-10-25 昆山工研院新型平板显示技术中心有限公司 一种可折叠式柔性显示面板以及可折叠式显示装置
CN110908751A (zh) * 2019-10-31 2020-03-24 维沃移动通信有限公司 信息显示、收藏的方法、装置、电子设备及介质
WO2020087213A1 (zh) * 2018-10-29 2020-05-07 深圳市柔宇科技有限公司 折叠式移动终端的控制方法及折叠式移动终端
CN111262994A (zh) * 2020-01-09 2020-06-09 三星电子（中国）研发中心 一种折叠屏智能设备的任务选择方法和装置
EP3671406A1 (en) * 2018-12-17 2020-06-24 Beijing Xiaomi Mobile Software Co., Ltd. Method, apparatus and storage medium for displaying shortcut operation panel
CN112262366A (zh) * 2018-08-15 2021-01-22 华为技术有限公司 显示方法及装置
CN112599004A (zh) * 2019-09-17 2021-04-02 三星显示有限公司 显示装置
EP3907591A4 (en) * 2019-01-15 2022-03-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. FILE PROCESSING METHOD AND DEVICE, TERMINAL AND STORAGE MEDIUM
CN110908751B (zh) * 2019-10-31 2024-04-19 维沃移动通信有限公司 信息显示、收藏的方法、装置、电子设备及介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102577051B1 (ko) * 2018-07-17 2023-09-11 삼성전자주식회사 분할 화면을 제공하기 위한 전자 장치 및 방법
KR102570827B1 (ko) * 2018-07-17 2023-08-25 삼성전자주식회사 디스플레이 상에서 복수의 어플리케이션의 실행 화면을 표시하는 전자 장치 및 상기 전자 장치의 구동 방법
CN111081143B (zh) * 2018-10-22 2022-08-05 北京小米移动软件有限公司 显示控制方法、装置、电子设备和计算机可读存储介质
CN111381906B (zh) * 2018-12-27 2023-10-03 北京小米移动软件有限公司 应用内信息的显示方法、装置、终端及存储介质
US11398168B2 (en) 2019-04-03 2022-07-26 Samsung Electronics Co., Ltd. Mobile device with a foldable display and method of providing user interfaces on the foldable display
KR20200138931A (ko) * 2019-06-03 2020-12-11 삼성전자주식회사 플렉서블 전자 장치 및 그의 동작 방법
CN112333333A (zh) * 2019-07-17 2021-02-05 华为技术有限公司 一种基于折叠屏的交互方法及设备
KR20210022302A (ko) * 2019-08-20 2021-03-03 삼성전자주식회사 전자 장치 및 전자 장치의 상태에 기반하여 동작 모드 제어 방법
CN111078091A (zh) * 2019-11-29 2020-04-28 华为技术有限公司 分屏显示的处理方法、装置及电子设备
KR20210075438A (ko) * 2019-12-13 2021-06-23 삼성전자주식회사 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 사용자 인터페이스를 표시하는 방법
US11392395B2 (en) * 2020-01-15 2022-07-19 Citrix Systems, Inc. Generating and presenting contextual user interfaces on devices with foldable displays
KR20220053860A (ko) * 2020-10-23 2022-05-02 삼성전자주식회사 어플리케이션의 실행 화면을 제공하는 전자 장치, 그 동작 방법 및 저장 매체
EP4148543A4 (en) 2020-10-23 2024-01-17 Samsung Electronics Co Ltd ELECTRONIC DEVICE FOR PROVIDING AN EXECUTION SCREEN OF AN APPLICATION, OPERATING METHOD THEREOF AND STORAGE MEDIUM
US20230016622A1 (en) * 2021-07-14 2023-01-19 Qualcomm Incorporated Systems, techniques, and other implementations for expandable display management

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160019369A (ko) * 2014-08-11 2016-02-19 캐논 가부시끼가이샤 정보 처리 장치, 표시 제어 방법 및 저장 매체
KR20160032079A (ko) * 2014-05-23 2016-03-23 삼성전자주식회사 폴더블 디바이스 및 그 제어 방법
KR20160033507A (ko) * 2014-09-18 2016-03-28 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR20160040909A (ko) * 2014-10-06 2016-04-15 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
KR20160080467A (ko) * 2014-12-29 2016-07-08 엘지전자 주식회사 이동 단말기 및 이의 제어방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130059233A (ko) * 2011-11-28 2013-06-05 삼성전자주식회사 휴대단말기의 어플리케이션 표시장치 및 방법
KR20130123606A (ko) 2012-05-03 2013-11-13 한국과학기술원 플렉서블 디스플레이를 이용한 정보 동기화 방법
KR102043810B1 (ko) 2012-08-20 2019-11-12 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 제어 방법
KR20140135404A (ko) 2013-05-16 2014-11-26 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
KR102127930B1 (ko) 2014-02-14 2020-06-29 엘지전자 주식회사 이동 단말기 및 이의 제어방법
WO2015178714A1 (en) * 2014-05-23 2015-11-26 Samsung Electronics Co., Ltd. Foldable device and method of controlling the same
KR20160038510A (ko) * 2014-09-30 2016-04-07 엘지전자 주식회사 이동단말기 및 그 제어방법
US10254863B2 (en) 2014-12-19 2019-04-09 Lg Electronics Inc. Mobile terminal
KR102358110B1 (ko) * 2015-03-05 2022-02-07 삼성디스플레이 주식회사 표시 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160032079A (ko) * 2014-05-23 2016-03-23 삼성전자주식회사 폴더블 디바이스 및 그 제어 방법
KR20160019369A (ko) * 2014-08-11 2016-02-19 캐논 가부시끼가이샤 정보 처리 장치, 표시 제어 방법 및 저장 매체
KR20160033507A (ko) * 2014-09-18 2016-03-28 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR20160040909A (ko) * 2014-10-06 2016-04-15 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
KR20160080467A (ko) * 2014-12-29 2016-07-08 엘지전자 주식회사 이동 단말기 및 이의 제어방법

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112262366A (zh) * 2018-08-15 2021-01-22 华为技术有限公司 显示方法及装置
EP3819755A4 (en) * 2018-08-15 2021-07-21 Huawei Technologies Co., Ltd. DISPLAY PROCESS AND DEVICE
WO2020087213A1 (zh) * 2018-10-29 2020-05-07 深圳市柔宇科技有限公司 折叠式移动终端的控制方法及折叠式移动终端
EP3671406A1 (en) * 2018-12-17 2020-06-24 Beijing Xiaomi Mobile Software Co., Ltd. Method, apparatus and storage medium for displaying shortcut operation panel
US11010020B2 (en) 2018-12-17 2021-05-18 Beijing Xiaomi Mobile Software Co., Ltd. Method, apparatus and storage medium for displaying shortcut operation panel
EP3907591A4 (en) * 2019-01-15 2022-03-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. FILE PROCESSING METHOD AND DEVICE, TERMINAL AND STORAGE MEDIUM
US11347389B2 (en) 2019-01-15 2022-05-31 Guangdong Oppo Mobile Telecommunications Corp., Ltd. File processing method, terminal, and storage medium
CN110379313A (zh) * 2019-07-26 2019-10-25 昆山工研院新型平板显示技术中心有限公司 一种可折叠式柔性显示面板以及可折叠式显示装置
CN112599004A (zh) * 2019-09-17 2021-04-02 三星显示有限公司 显示装置
CN110908751A (zh) * 2019-10-31 2020-03-24 维沃移动通信有限公司 信息显示、收藏的方法、装置、电子设备及介质
CN110908751B (zh) * 2019-10-31 2024-04-19 维沃移动通信有限公司 信息显示、收藏的方法、装置、电子设备及介质
CN111262994A (zh) * 2020-01-09 2020-06-09 三星电子（中国）研发中心 一种折叠屏智能设备的任务选择方法和装置

Also Published As

Publication number Publication date
EP3483715A4 (en) 2019-08-14
KR20180020669A (ko) 2018-02-28
KR102574183B1 (ko) 2023-09-05
EP3483715B1 (en) 2023-01-04
EP3483715A1 (en) 2019-05-15
US20200310492A1 (en) 2020-10-01
US11036257B2 (en) 2021-06-15

Similar Documents

Publication Publication Date Title
WO2018034555A1 (ko) 디스플레이를 제어하는 전자 장치 및 방법
WO2017135599A1 (ko) 외부 전자 장치를 제어하기 위한 방법 및 전자 장치
AU2015350680B2 (en) Power control method and apparatus for reducing power consumption
WO2018151505A1 (en) Electronic device and method for displaying screen thereof
WO2018169365A1 (en) Electronic device for controlling audio output and operation method thereof
WO2018143624A1 (ko) 디스플레이 제어 방법, 저장 매체 및 전자 장치
WO2016137187A1 (en) Apparatus and method for providing screen mirroring service
WO2016117947A1 (ko) 복수의 디스플레이를 제어하는 전자 장치 및 제어 방법
WO2019039871A1 (en) ELECTRONIC DEVICE AND METHOD FOR OPERATING APPLICATIONS
WO2017061762A1 (ko) 복수의 디스플레이를 구비한 전자장치 및 그 제어 방법
WO2017078366A1 (ko) 복수의 디스플레이들을 포함하는 전자 장치 및 그 동작 방법
WO2017179905A1 (ko) 플렉서블 디바이스 및 그 동작 방법
WO2017022971A1 (ko) 전자 장치에서 디스플레이 방법 및 장치
WO2017209530A1 (en) Method of switching application and electronic device therefor
WO2016175602A1 (en) Electronic device for providing short-cut user interface and method therefor
WO2017018722A1 (en) Screen operating method and electronic device supporting the same
WO2017086676A1 (ko) 전자 장치 및 전자 장치의 컨텐츠 출력 방법
WO2017123016A1 (ko) 전자 장치의 플렉서블 디스플레이 및 그의 운용 방법
WO2017131401A1 (ko) 전자 장치 및 전자 장치의 사용자 인터페이스 제어 방법
WO2016093419A1 (ko) 시선 캘리브레이션 방법 및 그 전자 장치
WO2017119690A1 (ko) 전자 장치 및 그 동작 방법
WO2016209004A1 (ko) 전자 장치의 터치 센싱 모듈 제어 방법 및 전자 장치, 전자 장치에 구비된 터치 센싱 모듈의 동작 방법 및 터치 센싱 모듈
WO2018106019A1 (ko) 콘텐츠 출력 방법 및 이를 지원하는 전자 장치
WO2015178661A1 (en) Method and apparatus for processing input using display
WO2017023040A1 (en) Screen controlling method and electronic device for supporting the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17841737

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017841737

Country of ref document: EP

Effective date: 20190205

NENP Non-entry into the national phase

Ref country code: DE