WO2018151522A1 - 화면을 공유하기 위한 전자 장치 및 방법 - Google Patents

화면을 공유하기 위한 전자 장치 및 방법 Download PDF

Info

Publication number
WO2018151522A1
WO2018151522A1 PCT/KR2018/001924 KR2018001924W WO2018151522A1 WO 2018151522 A1 WO2018151522 A1 WO 2018151522A1 KR 2018001924 W KR2018001924 W KR 2018001924W WO 2018151522 A1 WO2018151522 A1 WO 2018151522A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
screen
pin mode
display
input
Prior art date
Application number
PCT/KR2018/001924
Other languages
English (en)
French (fr)
Inventor
김현경
박웅희
이샛별
김봉규
김태형
안형준
이광용
이상헌
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP18754308.7A priority Critical patent/EP3582098A4/en
Priority to US16/486,640 priority patent/US10983749B2/en
Publication of WO2018151522A1 publication Critical patent/WO2018151522A1/ko
Priority to US17/234,434 priority patent/US11334311B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Definitions

  • Various embodiments relate to an electronic device, and more particularly, to an electronic device and a method thereof for sharing a screen.
  • Such electronic devices provide various services such as photographing, getting directions, or providing a web interface, as well as services such as voice call and text message transmission.
  • an electronic device having such a casting technique does not display a state of a screen displayed on a display of another electronic device on the display of the electronic device based on data transmitted from the electronic device. Accordingly, a method of displaying a state of a screen displayed on a display of another electronic device on the display of the electronic device based on data transmitted from the electronic device is required.
  • various embodiments of the present disclosure may provide an electronic device and a method of displaying an object indicating a screen display state of another electronic device on its display when the screen is displayed through the display of another electronic device.
  • An electronic device may include a memory for storing instructions, a display unit, a communication unit, and an electrical connection with the memory. Displaying an object having a first shape that is floated on the first screen being displayed on the electronic device, transmitting data for displaying the first screen on the external electronic device, to the external electronic device, Receiving an input for an object and based on the transition of the first application associated with the first screen from the foreground state to the background state, the second screen is maintained while maintaining the transmission of the data. At least one processor configured to execute the stored instructions for display.
  • a method of an electronic device may include displaying an object floating on a first screen displayed on the electronic device, having a first shape, and data for displaying the first screen on an external electronic device. Transmitting the data to the external electronic device based on an operation of receiving an input for the displayed object and a first application related to the first screen from a foreground state to a background state And displaying the second screen in a state of maintaining.
  • a memory for storing instructions, a display unit, a communication unit, and a first screen associated with a first application electrically connected to the memory and operating in a background state are transmitted from the electronic device. Indicating to be displayed on an external electronic device connected to the electronic device based on the data, and configured to execute the stored instructions to display an object floating on a second screen displayed on the electronic device. It may include at least one processor.
  • a method of an electronic device indicates that a first screen associated with a first application operating in a background state is displayed on an external electronic device connected to the electronic device based on data transmitted from the electronic device. And displaying an object floating on a second screen displayed on the electronic device.
  • An electronic device and a method according to various embodiments of the present disclosure may control the screen independently of an external electronic device linked to the electronic device by providing an object floating on a screen being displayed in the electronic device.
  • FIG. 1 illustrates an example of a functional configuration of an electronic device according to various embodiments of the present disclosure.
  • FIG 2 illustrates an example of screens displayed on an electronic device and an external electronic device according to various embodiments of the present disclosure.
  • FIG 3 is a view illustrating an operation of an electronic device according to various embodiments of the present disclosure.
  • FIG. 4 illustrates an example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 5 illustrates another example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 6 illustrates another example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 7A illustrates an example of a movement of an object for a pin mode according to various embodiments.
  • FIG. 7B illustrates another example of movement of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 8A illustrates an example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • 8B illustrates another example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • 8C is a view illustrating another example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG 9 illustrates an example of a preview window of an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 10 illustrates an example of an operation of an electronic device that performs various functions by using an object for a pin mode, according to various embodiments of the present disclosure.
  • FIG. 11 illustrates an example of a function associated with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 12 illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 13 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 14 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 15 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure.
  • 16 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 17 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure.
  • FIG. 18 illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure.
  • 19A illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure.
  • 19B illustrates another example of a function linked with an object for a pin mode according to various embodiments.
  • 20 is a view illustrating another example of a function linked to an object for a pin mode according to various embodiments of the present disclosure.
  • 21 illustrates an example of a function for determining a plurality of devices for a multiple pin mode according to various embodiments.
  • 22 is a flowchart illustrating a signal flow between an electronic device and an external electronic device according to various embodiments of the present disclosure.
  • the expression “device configured to” may mean that the device “can” together with other devices or components.
  • processor configured (or configured to) perform A, B, and C may be implemented by executing a dedicated processor (eg, an embedded processor) to perform its operation, or one or more software programs stored in a memory device. It may mean a general purpose processor (eg, a CPU or an application processor) capable of performing the corresponding operations.
  • An electronic device may be, for example, a smartphone, a tablet PC, a mobile phone, a video phone, an e-book reader, a desktop PC, a laptop PC, a netbook computer, a workstation, a server, a personal digital assistant (PDA). It may include at least one of an assistant, a portable multimedia player (PMP), an MP3 player, a medical device, a camera, or a wearable device. Wearable devices may be accessory (e.g. watches, rings, bracelets, anklets, necklaces, eyeglasses, contact lenses, or head-mounted-devices (HMDs), textiles or clothing integrated (e.g.
  • the electronic device may be, for example, a television, a digital video disk (DVD) player, or audio.
  • Refrigerator, air conditioner, cleaner, oven, microwave, washing machine, air purifier, set-top box, home automation control panel, security control panel, media box (e.g. Samsung HomeSync TM , Apple TV TM , or Google TV TM ), game consoles (for example: Xbox TM, PlayStation TM), may include electronic dictionary, at least one of the electronic key, a camcorder, or a digital photo frame.
  • the electronic device may include various medical devices (eg, various portable medical measuring devices (such as blood glucose meters, heart rate monitors, blood pressure monitors, or body temperature meters), magnetic resonance angiography (MRA), magnetic resonance imaging (MRI), Computed tomography (CT), cameras or ultrasounds), navigation devices, global navigation satellite systems (GNSS), event data recorders (EDRs), flight data recorders (FDRs), automotive infotainment devices, ship electronics (E.g.
  • various portable medical measuring devices such as blood glucose meters, heart rate monitors, blood pressure monitors, or body temperature meters
  • MRA magnetic resonance angiography
  • MRI magnetic resonance imaging
  • CT Computed tomography
  • GNSS global navigation satellite systems
  • EDRs event data recorders
  • FDRs flight data recorders
  • automotive infotainment devices ship electronics
  • an electronic device may be a piece of furniture, a building / structure or a car, an electronic board, an electronic signature receiving device, a projector, or various measurement devices (eg, water, electricity, Gas, or a radio wave measuring instrument).
  • the electronic device may be flexible or a combination of two or more of the aforementioned various devices.
  • An electronic device according to an embodiment of the present disclosure is not limited to the above-described devices.
  • the term user may refer to a person who uses an electronic device or a device (eg, an artificial intelligence electronic device) that uses an electronic device.
  • FIG. 1 illustrates an example of a functional configuration of an electronic device according to various embodiments of the present disclosure.
  • the electronic device 100 includes a controller 110, a display unit 120, a storage unit 130, a communication unit 140, and / or an input unit 150. can do.
  • the controller 110 may control overall operations of the electronic device 100.
  • the controller 110 may execute applications that provide an internet browser, a game, a video, and the like.
  • the controller 110 may include one processor core or may include a plurality of processor cores.
  • the controller 110 may include multi-cores such as dual-core, quad-core, and hexa-core.
  • the controller 110 may further include a cache memory located inside or outside.
  • the controller 110 may receive commands of other components of the electronic device 100, interpret the received commands, and perform calculation or process data according to the interpreted commands.
  • the controller 110 may process data or signals generated or generated in an application. For example, the controller 110 may request a command, data, or signal from the storage 130 to execute or control an application. The controller 110 may record (or store) or update a command, data, or signal to the storage 130 to execute or control an application.
  • the controller 110 may interpret and process a message, data, command, or signal received from the display unit 120, the communication unit 140, or the input unit 150. In addition, the controller 110 may generate a new message, data, command, or signal based on the received message, data, command, or signal. The controller 110 may provide the processed or generated message, data, command, or signal to the display 120. For example, when the electronic device 100 displays a screen through a display of another electronic device, the controller 110 processes or creates an object indicating the screen display state of the other electronic device on the display 120. The displayed message, data, command, or signal may be provided to the display 120.
  • All or part of the controller 110 may be electrically or physically coupled with other components in the electronic device 100 (eg, the display 120, the storage 130, the communicator 140, and / or the input 150). .
  • the controller 110 may be configured with one or more processors.
  • the controller 110 may include an application processor (AP) for controlling a program of an upper layer such as an application program, or a communication processor (CP) for performing control for communication.
  • AP application processor
  • CP communication processor
  • the controller 110 may further include a display control unit and a connection control unit.
  • the display manager may control the display related to the object for the pin mode according to various embodiments.
  • the display manager may control the display 120 to display an object for a pin mode on a screen that is currently displayed based on the establishment of a connection between another electronic device and the electronic device 100.
  • the display manager may set the application related to the screen currently being displayed to the pin mode based on receiving an input for an object for the pin mode.
  • the display manager may control the display 120 to display a menu for performing various functions related to the pin mode, based on receiving an input for an object for the pin mode.
  • the display manager controls to set the pin mode to fix the screen displayed through another electronic device regardless of whether the application operates in the background state or the foreground state.
  • Various functions can be performed to control the display of an object.
  • the connection manager may control a connection related to the pin mode according to various embodiments.
  • the connection manager may control the communication unit 140 to establish a connection with another electronic device in order to share the screen displayed on the electronic device 100.
  • the connection manager may control the communicator 140 to maintain a connection with the other electronic device.
  • the connection manager may control the communication unit 140 to release or terminate the connection with the other electronic device based on receiving an input for the object for the pin mode.
  • the controller 110 may be configured to implement the methods, procedures, and / or operations proposed in this document.
  • the display unit 120 may output data or a signal.
  • the display 120 may display an image signal processed by the controller 110.
  • the display unit 120 may display a capture or still image.
  • the display 120 may display a moving image or a camera preview image.
  • the display 120 may display a graphical user interface (GUI) so that a user can interact with the electronic device 100.
  • GUI graphical user interface
  • the display unit 120 may be configured as a liquid crystal display (LCD) or an organic light emitting diode (OLED).
  • LCD liquid crystal display
  • OLED organic light emitting diode
  • the storage 130 may store a control command code, control data, or user data for controlling the electronic device 100.
  • the storage unit 130 may include an application, an operating system (OS), middleware, and a device driver.
  • OS operating system
  • middleware middleware
  • device driver a device driver
  • the storage unit 130 may include one or more of volatile memory or non-volatile memory.
  • Volatile memory includes dynamic random access memory (DRAM), static RAM (SRAM), synchronous DRAM (SDRAM), phase-change RAM (PRAM), magnetic RAM (MRAM), persistent RAM (RRAM), ferroelectric RAM (FeRAM), and the like. It may include.
  • the nonvolatile memory may include a read only memory (ROM), a programmable ROM (PROM), an electrically programmable ROM (EPROM), an electrically erasable ROM (EEPROM), a flash memory, and the like.
  • the storage unit 130 may include nonvolatile media such as a hard disk drive (HDD), a solid state disk (SSD), an embedded multimedia card (eMMC), and a universal flash storage (UFS). Can be.
  • HDD hard disk drive
  • SSD solid state disk
  • eMMC embedded multimedia card
  • UFS universal flash storage
  • the communication unit 140 may include various communication functions (eg, wired communication, wireless communication (eg, cellular communication, Bluetooth, NFC, Wi-Fi, etc.) for communication between the electronic device 100 and at least one external electronic device.
  • the communication unit 140 may establish communication between the electronic device 100 and at least one external electronic device, for example, the communication unit 140 may communicate with at least one external electronic device through a wireless communication path or a wired communication path. Traffic can be exchanged.
  • the input unit 150 may receive an indication, an interaction, or data from the user.
  • the input unit 150 may be a touch panel coupled to the display unit 120.
  • the input unit 150 may sense a touch or hovering input of a finger and a pen.
  • the input unit 150 may include a sensor. Such a sensor may be independently attached to the touch panel of the input unit.
  • the input received at the input unit 150 may have various types.
  • the input received by the input unit 150 may include a touch and release, a drag and drop, a long touch, a force touch, and the like.
  • the input unit 150 may provide the controller 110 with the received input and data related to the received input.
  • the display unit 120 and the input unit 150 may be configured as an integrated touch screen.
  • FIG 2 illustrates an example of screens displayed on an electronic device and an external electronic device according to various embodiments of the present disclosure.
  • the electronic device 100 may be a device that has established communication for screen sharing with the external electronic device 205.
  • the connection between the electronic device 100 and the external electronic device 205 may be by wire or by wireless, according to embodiments.
  • a communication path between the electronic device 100 and the external electronic device 205 may be set in various schemes.
  • the communication path between the electronic device 100 and the external electronic device 205 may be a direct communication path in which no relay node is required.
  • the electronic device 100 may employ techniques such as Bluetooth, Bluetooth low energy (BLE), long term evolution (LTE) device-to-device (D2D), and wireless fidelity (Wi-Fi) direct.
  • the communication with the external electronic device 205 may be performed.
  • the communication path between the electronic device 100 and the external electronic device 205 may be a communication path through which a signal is transmitted or received through a relay node such as a base station (AP), an access point (AP), or the like.
  • the electronic device 100 may be connected to the external electronic device 205 through a relay node.
  • the electronic device 100 may communicate with the external electronic device 205 through a cellular communication scheme such as LTE or a Wi-Fi scheme.
  • the electronic device 100 may establish communication with the external electronic device 205 through an application or a program for mirroring, casting, or the like.
  • the electronic device 100 that has established communication for screen sharing with the external electronic device 205 may display the object 206.
  • the object 206 may be generated based on the electronic device 100 establishing communication with the external electronic device 205.
  • the electronic device 100 may display the generated object 206 on the display 120.
  • the object 206 may represent that the electronic device 100 establishes communication with the external electronic device 205 for screen sharing.
  • the object 206 may include an image of the external electronic device to indicate that the electronic device 100 establishes communication with the external electronic device 205.
  • the object 206 may provide various functions for assisting screen sharing between the electronic device 100 and the external electronic device 205.
  • the object 206 may be changed into various shapes according to the screen sharing state between the electronic device 100 and the external electronic device 205.
  • Various functions provided by the object 206 and various forms of the object 206 will be described later with reference to the drawings and descriptions thereof.
  • the electronic device 100 may display a screen 207.
  • the electronic device 100 may display the screen 207 as a wall paper.
  • the electronic device 100 may display a screen 207 as an execution screen of a specific application.
  • the screen 207 may include content A.
  • the content A may include an object such as an image, a video, an icon, a user interface, and the like. However, it is not limited to this.
  • the object 206 may be floated on the screen 207.
  • the object 206 floating on the screen 207 may indicate that the object 206 overlaps the screen 207 and the object 206 is located in a layer higher than the screen 207.
  • the floating of the object 206 on the screen 207 may indicate that the object 206 may be moved to various positions on the screen 207 according to the input to the object 206.
  • the object 206 may move to a specific position on the screen 207 in response to a user input for moving the object 206 such as a drag input or a slide input.
  • the object 206 displayed on the electronic device 100 to share a screen with the external electronic device 205 may be referred to as an object for a pin mode. Detailed description of the pin mode will be described later.
  • the electronic device 100 may transmit data in order to share the screen 207 of the electronic device 100 with the external electronic device 205.
  • the data transmitted from the electronic device 100 to the external electronic device 205 may include information for displaying the content A on the external electronic device 205 in the same configuration as the configuration of the screen 207.
  • the external electronic device 205 may receive data transmitted from the electronic device 100.
  • the external electronic device 205 may display a screen 208.
  • the screen 208 may be displayed on the display of the external electronic device 205 based on the data received from the electronic device 100.
  • Screen 208 may correspond to screen 207.
  • the electronic device 100 may perform screen mirroring on the screen 207.
  • the object 206 for the pin mode may not be displayed on the display of the external electronic device 205 despite screen mirroring of the electronic device 100.
  • the object 206 for the pin mode may not be displayed on the display of the external electronic device 205 for the immersion of the user who views the screen 208 despite screen mirroring of the electronic device 100.
  • the electronic device 100 may switch the screen 207 to the screen 211.
  • the electronic device 100 may switch the screen 207 to the screen 211 based on a user input or a change in the state of the electronic device 100.
  • the electronic device 100 may change the state of the first application from the foreground state to the background state based on a user input or a change in the state of the electronic device 100.
  • the foreground state may represent a state of displaying a screen through the display unit 120.
  • the background state may indicate a state in which the application is running but displaying the screen through the display 120 is stopped (or terminated).
  • the electronic device 100 may display the screen 211 located in a lower layer than the layer of the screen 207.
  • the screen 211 may be a background screen or a screen related to the second application.
  • Screen 211 may include content B.
  • the content B may include an object such as an image, a video, an icon, a user interface, or the like. However, it is not limited to this.
  • the object 206 for the pin mode may be floated on the screen 211.
  • the object 206 may be disposed on a layer higher than the layer of the screen 211.
  • the object 206 may be moved to other locations on the screen 211 according to a user's input.
  • the electronic device 100 may transmit data for displaying the changed display state of the electronic device 100 to the external electronic device 205.
  • the electronic device 100 may transmit data in order to display the content B on the external electronic device 205 in the same configuration as that of the screen 211.
  • the external electronic device 205 may receive data transmitted from the electronic device 100.
  • the external electronic device 205 may display a screen 212 converted from the screen 208.
  • the external electronic device 205 may display the screen 212 based on the data received from the electronic device 100.
  • the screen 212 may correspond to the screen 211.
  • the object 206 for the pin mode may not be displayed on the display of the external electronic device 205.
  • the electronic device 100 may receive an input 213 for the object 206 for the pin mode.
  • the electronic device 100 may receive an input 213 for the object 206 for the pin mode floated on the screen 211.
  • the input 213 may be an input for entering the pin mode.
  • the input 213 may be an input for additionally entering the pin mode.
  • the electronic device 100 may set the plurality of applications to the pin mode based on receiving an input for additionally entering the pin mode. A detailed definition of the pin mode and an operation of setting the plurality of applications to the pin mode will be described later.
  • the attribute of the input 213 may vary.
  • the input 213 may be a touch.
  • the input 213 may be a long touch.
  • input 213 may be double tap or hovering.
  • input 213 may be a force touch having an intensity distinct from that of a typical input. However, it is not limited to this.
  • the pin mode may be a mode for displaying only at least some of the various screens displayed by the electronic device 100 on the external electronic device 205. Further, the pin mode may be a mode for displaying only a screen related to a specific application on the external electronic device 205 among a plurality of applications running on the electronic device 100. In addition, the pin mode may be a mode for transmitting only some signals from the plurality of signals related to the display function caused in the electronic device 100 to the external electronic device 205. In addition, the pin mode may be a mode for distinguishing or separating a screen displayed by the electronic device 100 through the external electronic device 205 from a screen displayed by the electronic device 100. In addition, the pin mode may be a mode for controlling a display operation of the external electronic device 205.
  • the pin mode indicates that the electronic device 100 may display a screen, a state of the screen, or an attribute of the screen that is currently displayed on the electronic device 100 regardless of a change in the display state of the electronic device 100. It may be a mode for maintaining in the electronic device 205. However, it should be noted that this is a different concept from pause. For example, suppose that after the screen on which the electronic device 100 plays a video is set to the pin mode, the screen displayed by the electronic device 100 is switched to an internet browser. In this case, the external electronic device 205 may display a screen for playing a video, instead of displaying an internet browser which is a switched screen.
  • the screen for playing the video displayed on the external electronic device 205 may maintain a progress state unless a user inputs otherwise.
  • the external electronic device 205 may display a screen for playing a video independent of the screen of the electronic device 100 being switched to the Internet browser. That is, a user who views the electronic device 100 may use an internet browser on the display unit 120 of the electronic device 100, and a user who views the external electronic device 205 may watch a video on the display unit of the external electronic device 205.
  • the electronic device 100 may display the object 221 for the pin mode by updating the object 206 for the pin mode based on the reception of the input 213. In other words, the electronic device 100 may update the object 206 for the pin mode to the object 221 for the pin mode by changing the shape of the object 206 for the pin mode based on receiving the input 213.
  • the object 221 for the pin mode may further include an element for representing the second application associated with the screen 211, rather than the object 206 for the pin mode.
  • the object 221 for the pin mode may further include an element for indicating that the second application is pinned than the object 206 for the pin mode.
  • the object 221 for the pin mode may further include an element for indicating that the screen 211 related to the second application is fixed at the external electronic device 205 than the object 206 for the pin mode.
  • the object 221 for the pin mode may further include an element for indicating that only display data related to the second application is transmitted to the external electronic device 205, rather than the object 206 for the pin mode.
  • the element may be displayed in various formats according to embodiments.
  • the element may be included in the object 221 for the pin mode in a badge format representing a second application (eg, a video playback application), as shown in FIG. 2.
  • a second application eg, a video playback application
  • the electronic device 100 may transmit data for displaying the screen 222 on the external electronic device 205 to the external electronic device 205.
  • the electronic device 100 may transmit data to display the content B related to the second application on the external electronic device 205 in the same configuration as that of the screen 222.
  • the external electronic device 205 may receive data transmitted from the electronic device 100.
  • the external electronic device 205 may display the screen 223 based on the data received from the electronic device 100.
  • the screen 223 may correspond to the screen 222.
  • the object 221 for the pin mode may not be included in the screen 223.
  • the electronic device 100 may switch the screen 222 to the screen 231.
  • the electronic device 100 may switch the screen 222 to the screen 231 based on a user input or a change in the state of the electronic device 100.
  • the electronic device 100 may change the state of the second application related to the screen 222 from the foreground state to the background state based on a user input or a change in the state of the electronic device 100.
  • the electronic device 100 may display a screen 231 disposed on a lower layer than the layer of the screen 222.
  • the screen 231 may be a background screen.
  • the screen 231 may be a screen related to the first application or the third application.
  • the screen 231 may include the content C.
  • the content C may include an object such as an image, a video, an icon, a user interface, or the like. However, it is not limited to this.
  • the object 221 for the pin mode may be floated on the screen 231.
  • the object 221 for the pin mode may be located in a layer higher than the layer of the screen 231.
  • the object 221 for the pin mode may move to other positions on the screen 231 according to a user's input.
  • the electronic device 100 may transmit data related to the screen 222 to the external electronic device 205.
  • the electronic device 100 may transmit data related to the second application to continuously display the screen 223 corresponding to the screen 222 on the external electronic device 205 regardless of whether the screen of the electronic device 100 is switched from the screen 222 to the screen 231. Can be.
  • the electronic device 100 may transmit data about the second application set in the pin mode to the external electronic device 205.
  • the external electronic device 205 may receive data from the electronic device 100.
  • the external electronic device 205 may display the screen 223 based on the received data.
  • the external electronic device 205 may display the screen 223 corresponding to the screen 222 without corresponding to the screen 231 even though the current screen of the electronic device 100 is switched from the screen 222 to the screen 231.
  • the external electronic device 205 may display a screen related to an application set to the pin mode regardless of the screen currently displayed on the electronic device 100.
  • FIG. 2 illustrates that the electronic device 100 operates in an unlocked state
  • the electronic device 100 may perform operations similar to those of FIG. 2.
  • the electronic device 100 may display an object for the pin mode floating on the lock screen.
  • the electronic device 100 may perform at least one function corresponding to the at least one input based on receiving at least one input for the object for the pin mode floated on the lock screen. Examples of the at least one function will be described later.
  • the electronic device 100 may display a screen different from the external electronic device 205 through the pin mode.
  • the electronic device 100 may display or control a screen independently of the external electronic device 205 by providing an object for the pin mode.
  • a user of the electronic device 100 provides a child video stored in the electronic device 100 to a child on a TV that is an external electronic device 205.
  • a user of the electronic device 100 does not disturb a child who watches a child's video through the external electronic device 205, and uses the electronic device 100 to access the Internet.
  • Other tasks such as surfing can be performed.
  • the electronic device 100 according to various embodiments of the present disclosure may provide a higher degree of freedom to a user of the electronic device 100 by providing an object for the pin mode or the pin mode.
  • a user of the electronic device 100 is providing presentation data stored in the electronic device 100 to a plurality of audiences through the external electronic device 205.
  • the user of the electronic device 100 may maintain an e-mail, a short message service (SMS) message received by the electronic device 100 while maintaining displaying the presentation material on the external electronic device 205 so as not to expose privacy to a plurality of audiences.
  • SMS short message service
  • the electronic device may be electrically connected to a memory for storing instructions, a display unit, a communication unit, and the memory.
  • the stored instruction for displaying a second screen while maintaining transmission of the data based on the transition to the state Is set to execute may include at least one processor.
  • the at least one processor is further configured to execute the stored instructions to display a plurality of items each representing functions executable through the object in response to receiving another input to the object. And the plurality of items, the item indicating a function for switching the first application operating in the background state to the foreground state, an item indicating a function for stopping transmission of the data, and the electronic device. An item indicating a function for changing a connected device to another external electronic device, an item for controlling the first application operating in the background state, or an item indicating a function for stopping a connection with the external electronic device; one It can be included.
  • the plurality of items may be included in a message window displayed by the object in response to receiving the other input.
  • the object having the second shape may include an element for indicating a timing at which the content is being played in the external electronic device when the first screen is related to playing the content. It may include.
  • the object having the second shape may include a contour having a color for representing the first application.
  • the object having the second shape may include an image for representing the first application.
  • the object having the first shape may be generated based on establishing a connection with the external electronic device.
  • the input may be used to enter a pin mode in which the external electronic device displays only the first screen associated with the first application among a plurality of applications running in the electronic device. Can be.
  • the at least one processor may generate a window that displays a first screen displayed on the external electronic device based on receiving another input for the object having the second shape. Further configured to execute the stored instructions for display, the window may be superimposed on the second screen. Further, the at least one processor is configured to change the size of the window based on receiving a first input for the window and to change the position of the window based on receiving a second input for the window. May be further configured to execute the stored instructions.
  • the electronic device may include a memory for storing instructions, a display unit, a communication unit, and an electrical connection with the memory. And a first screen related to a first application operating in a background state is displayed on an external electronic device connected to the electronic device based on data transmitted from the electronic device, and displayed on the electronic device. And at least one processor configured to execute the stored instructions to display an object floating on the second screen.
  • FIG. 3 is a view illustrating an operation of an electronic device according to various embodiments of the present disclosure. Such an operation may be performed by at least one of the components included in the electronic device 100 or the electronic device 100 illustrated in FIG. 1 (eg, the controller 110).
  • the electronic device 100 may display an object for a pin mode on a first screen associated with a first application and transmit data for sharing the first screen to the external electronic device 205. .
  • the electronic device 100 may operate in a state of being paired with the external electronic device 205 for screen sharing.
  • the electronic device 100 may display an object for the pin mode on the first screen to determine the entry into the pin mode.
  • the object for the pin mode may be floated on the first screen.
  • the electronic device 100 may transmit data for displaying the screen currently displayed on the electronic device 100 on the external electronic device 205 to the external electronic device 205.
  • the electronic device 100 may perform screen mirroring of the first electronic screen with the external electronic device 205.
  • the electronic device 100 may display the object 301b for the pin mode floating on the screen 301a including the content A.
  • FIG. The screen 301a or the content A may be associated with a first application (eg, a text message application).
  • the initial display position of the object 301b may be variously set.
  • the initial display position of the object 301b may be a fixed position according to a user's setting or a basic setting of the electronic device 100.
  • the initial display position of the object 301b may be adaptively changed according to the display state of the electronic device 100.
  • the external electronic device 205 paired with the electronic device 100 may display a screen having a configuration corresponding to that of the screen 301a displayed on the electronic device 100.
  • the electronic device 100 may receive an input for the displayed object.
  • the electronic device 100 may receive a touch input 302a for the object 301b.
  • the electronic device 100 may detect the received touch input 302a.
  • the touch input 302a may be an input for setting the first application to the pin mode.
  • the electronic device 100 may change the shape of the displayed object.
  • the electronic device 100 may change the shape of the object 302a from the first shape to the second shape.
  • the electronic device 100 may generate and display the object 303a by updating the object 302a.
  • the object 303a may further include an element for indicating that the object 303a is associated with a text application that is a first application.
  • object 303a may further include elements of a badge format than object 302a.
  • the element of the badge format may have a shape corresponding to the character application.
  • the element of the badge format may have a color corresponding to the character application.
  • this is only an example for explanation.
  • Various formats of elements included in the object for the pin mode will be described later in the drawings and the description thereof.
  • the electronic device 100 may display the object 303a floating on the screen 301a.
  • the external electronic device 205 paired with the electronic device 100 may maintain displaying a screen having a configuration corresponding to that of the screen 301a displayed on the electronic device 100.
  • the electronic device 100 displays the second screen on the second screen while maintaining transmission of data for displaying the first screen on the external electronic device 205 based on the transition of the first application to the background state.
  • You can switch to The electronic device 100 may change the first application to the background state based on the received input or the change of the state of the electronic device 100. In other words, the electronic device 100 may stop displaying the first screen related to the first application.
  • the electronic device 100 since the electronic device 100 has set the first application to the pin mode, regardless of the interruption of the display of the first screen, the electronic device 100 continuously transmits data for displaying the first screen to the external electronic device 205 to the external electronic device 205. I can send it.
  • the external electronic device 205 may display a first screen related to the first application set to the pin mode instead of the second screen based on the data received from the electronic device 100.
  • the electronic device 100 may switch the screen 301a to the screen 304a.
  • the electronic device 100 may switch the screen 301a to the screen 304a as the background screen based on a user's input of pressing the home button of the electronic device 100.
  • Screen 304a may include content B.
  • FIG. 3 the external electronic device 205 may display a screen having a configuration corresponding to the configuration of the screen 301a regardless of the change of the display screen of the electronic device 100.
  • FIG. 4 illustrates an example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • An object having such a shape may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 401 for the pin mode on the screen 400.
  • the electronic device 100 may display the object 401 for the pin mode floating on the screen 400.
  • the object 401 for the pin mode may be displayed in various shapes according to the type of the external electronic device 205 paired with the electronic device 100.
  • the electronic device 100 may adaptively change the shape of the object 401 for the pin mode according to the type of the external electronic device 205 connected to the electronic device 100.
  • the object 401 for the pin mode may have the same shape as the object 402. That is, the object 401 for the pin mode may include an image representing the TV like the object 402.
  • the object 401 for the pin mode may have the same shape as the object 403. That is, the object 401 for the pin mode may include an image representing the refrigerator like the object 403.
  • the object 401 for the pin mode may have the same shape as the object 404. have. That is, the object 401 for the pin mode may include an image representing the notebook like the object 404.
  • the object 401 for the pin mode may display an image representing the tablet PC as in the object 405. It may include.
  • the shape of the object 401 for the pin mode is not limited thereto.
  • the object 401 for the pin mode may include a speech bubble set including an image or a word indicating a type of the external electronic device 205 connected to the electronic device 100.
  • a speech bubble including an image or a word indicating the type of the external electronic device 205 may be always displayed or may be displayed when a specific condition (eg, a hovering input to the object 401) is satisfied.
  • FIG. 4 may be a diagram illustrating a shape of an object 401 for a pin mode before setting a specific application to the pin mode. It should be noted that the object for the pin mode after setting a specific application to the pin mode may have a shape similar to the examples shown in FIG. 4.
  • FIG. 5 illustrates another example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • An object having such a shape may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 501 for the pin mode on the screen 500.
  • the electronic device 100 may operate while connected to the external electronic device 205 in order to share a screen with the external electronic device 205.
  • the electronic device 100 may operate in a state in which a target to share the screen with the external electronic device 205 is set as a screen related to the first application.
  • the electronic device 100 may be an electronic device connected to the external electronic device 205 in a state in which the pin mode of the first application is set.
  • the electronic device 100 may display the object 501 for the pin mode floating on the screen 500.
  • the object 501 for the pin mode may include an element for indicating that the first application is set to the pin mode.
  • the object 501 for the pin mode may include a window (eg, a speech bubble) including an image and / or a phrase representing the first application set to the pin mode, such as the objects 502a to 502c.
  • the object 501 for the pin mode may include, as an object 502a, a window including an image and / or message pinned indicating a message application set to the pin mode.
  • the object 501 for the pin mode may include, as an object 502b, a window including an image and / or a movie pinned indicating a video application set to the pin mode.
  • the object 501 for the pin mode may include, as an object 502c, a window including an image and / or a browser pinned indicating the Internet browser set to the pin mode.
  • the object 501 for the pin mode represents the first application set to the pin mode, such as the objects 503a to 503c, and may include an image overlapping the object 501 as an element.
  • the object 501 for the pin mode may include an element having a shape corresponding to an icon of the first application, such as objects 503a to 503c, in a badge format.
  • the object 501 for the pin mode may include, in a badge format, an element indicating a message application set to the pin mode, as in the object 503a.
  • the object 501 for the pin mode may include, in a badge format, an element indicating a video application set to the pin mode, as in the object 503b.
  • the object 501 for the pin mode may include, in a badge format, an element indicating an internet browser set in the pin mode, as in the object 503c.
  • the object 501 for the pin mode may indicate that the first application is set to the pin mode by using a color element, such as the objects 504a to 504c.
  • the object 501 for the pin mode may change all or part of the color of the object 501 according to the type of the application set to the pin mode.
  • the object 501 for pin mode includes, as an object 504a, a contour that has a color (eg, orange) corresponding to the color of the icon of the message application, so that the message application enters pin mode. It may indicate that it is set.
  • the object 501 for the pin mode like the object 504b, includes a contour having a color (eg, red) corresponding to the color of the icon of the video application as an element, thereby indicating that the video application is set to the pin mode. Can be represented.
  • the object 501 for the pin mode such as the object 504c, includes as an element a contour having a color (eg, blue) corresponding to the color of the icon of the Internet browser, thereby setting the internet browser to the pin mode. It can be shown.
  • the object 501 for the pin mode displays the icon of the first application set to the pin mode in the reduced size inside the object 501 for the pin mode, thereby reducing the first
  • This may indicate that the application is set to pin mode.
  • the icon of the first application having the reduced size displayed inside the object 501 may be displayed overlapping with the pin image indicating the pin mode.
  • the size of the pin image may be changed according to a design choice.
  • the object 501 for the pin mode may indicate that the message application is set to the pin mode by displaying an icon and a pin image of the message application having a reduced size inside the object 501, as in the object 505a.
  • the object 501 for the pin mode may indicate that the video application is set to the pin mode by displaying an icon and a pin image of the video application having a reduced size inside the object 501, as in the object 505b.
  • the object 501 for the pin mode may indicate that the internet browser is set to the pin mode by displaying an icon and a pin image of the internet browser having a reduced size inside the object 501, as in the object 505c. have.
  • the object 501 for the pin mode displays an icon of the first application set to the pin mode in the reduced size inside the object 501 for the pin mode, the object 501
  • the first application may be set to the pin mode.
  • the object 501 for the pin mode like the object 506a, displays an icon of a message application having a reduced size inside the object 501 for the pin mode, and displays a pin image around the object 501, The message may indicate that the application is set to pin mode.
  • the object 501 for the pin mode displays an icon of a video application having a reduced size inside the object 501 for the pin mode, and displays a pin image around the object 501.
  • the video application may be set to the pin mode.
  • the object 501 for the pin mode displays an icon of an internet browser having a reduced size inside the object 501 for the pin mode, such as the object 506c, and displays a pin image around the object 501. This may indicate that the internet browser is set to the pin mode.
  • FIG. 5 illustrates various methods for representing an application configured in pin mode in an object for pin mode.
  • the method of representing the application set in the pin mode in the object for the pin mode is not limited thereto.
  • various visual effects for indicating that the application is set to the pin mode may be applied to the object for the pin mode.
  • FIG. 6 illustrates another example of a shape of an object for a pin mode according to various embodiments of the present disclosure.
  • An object having such a shape may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may operate while connected to the external electronic device 205 in order to share a screen with the external electronic device 205.
  • the electronic device 100 may share a screen related to an application having a current progress timing within a specified time (eg, a total playback time) such as a video, with the external electronic device 205.
  • a specified time e.g, a total playback time
  • the electronic device 100 may operate in a state where the video application is set to the pin mode.
  • the electronic device 100 may display an object 601 for the pin mode associated with the video application on the screen 600.
  • the electronic device 100 may display the object 601 for the pin mode floating on the screen 600.
  • the object 601 for the pin mode may include an element for indicating when a current playback time of content related to a video application displayed on the external electronic device 205 is present.
  • the object 601 for the pin mode is displayed along the contour of the object 601 for the pin mode, such as the object 602, and includes a status bar having a variable length as an element. It may indicate when the current playback time of the content being displayed at (ie, the playback progress status).
  • the length of the status bar may be determined based on a ratio between the total playback time of the content displayed on the external electronic device 205 and the playback time of the content up to now. For example, when the content displayed on the external electronic device 205 is half played, the shape of the status bar displayed along the outline of the object 601 for the pin mode may be a semicircle.
  • the shape of the status bar displayed along the outline of the object 601 for the pin mode may be a circle.
  • the object 601 for the pin mode may further display a visual effect for indicating that the reproduction of the content is completed in the external electronic device 205.
  • the electronic device 100 may adjust a playback time of the content displayed on the external electronic device 205 based on receiving an input for the status bar displayed along the outline of the object 601 for the pin mode. For example, when the electronic device 100 receives an input of dragging the status bar displayed along the outline of the object 601 for the pin mode in a counterclockwise direction, the electronic device 100 may play back the content displayed on the external electronic device 205. Can be rewinded by a time point corresponding to the length of the drag. As another example, when the electronic device 100 receives an input of dragging a status bar displayed along the contour of the object 601 for the pin mode in a clockwise direction, the electronic device 100 may play back the content displayed on the external electronic device 205. Can be forwarded by a time point corresponding to the length of the drag.
  • the object 601 for the pin mode by including a status bar having a variable length inside the object 601 for the pin mode, as an element of the content being displayed on the external electronic device 205
  • the current playback time is (ie, playback progress status)
  • the length of the status bar may be determined based on a ratio between the total reproduction time of the content displayed on the external electronic device 205 and the reproduction time of the content up to now. For example, when the content displayed on the external electronic device 205 is half played, the status bar displayed inside the object 601 for the pin mode may be marked up and displayed by half.
  • the electronic device 100 may control the playback time of the content displayed on the external electronic device 205 based on receiving an input for the status bar displayed inside the object 601 for the pin mode.
  • the object 601 for the pin mode as the object 604, the window to display and control the state of the content being displayed on the external electronic device 205 around the object 601 for the pin mode as an element
  • it may indicate when the current playback time of the content displayed on the external electronic device 205 is present.
  • the window may always be displayed.
  • the window may be displayed according to a particular condition (eg, receiving a hovering input for object 601 for pin mode).
  • the window may include a status bar indicating a reproduction time of the content displayed on the external electronic device 205.
  • the window may include at least one button for controlling the state of the content, such as a play / pause button, a rewind button, a forward button, and the like.
  • the window may further include a volume control button, a channel control button (for TV, radio playback, etc.).
  • FIG. 6 illustrates various methods for indicating the state of content displayed on the external electronic device 205 in the object for the pin mode.
  • the method of indicating the state of the content displayed on the external electronic device 205 is not limited thereto. In other words, various visual effects for indicating the state of the content displayed on the external electronic device 205 may be applied to the object for the pin mode.
  • FIG. 7A illustrates an example of a movement of an object for a pin mode according to various embodiments.
  • the movement of the object may be caused by the electronic device 100 or the display unit 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 701 for the pin mode on the screen 700.
  • the object 701 for the pin mode may be floated on the screen 700.
  • the object 701 for the pin mode may be located in the area 702.
  • the electronic device 100 may display the object 701 for the pin mode floating on the screen 700 in the area 702.
  • the screen 700 may further include an object 705.
  • the electronic device 100 may receive an input for moving the object 701 for the pin mode.
  • the electronic device 100 may receive an input for changing the position of the object 701 for the pin mode from the area 702.
  • the electronic device 100 may receive a drag and release input 703 for the object 701 for the pin mode.
  • the object 701 for the pin mode may be moved from the area 702 to the area 704 based on the drag and release input.
  • the electronic device 100 may change the location of the object 701 for the pin mode based on the received input in order to provide a more convenient interface to the user.
  • the object 701 for the pin mode to be moved based on the received input may be located in an empty space in the screen 700, but may be at least partially overlapped with the space where another object is located.
  • the object 701 for the moved pin mode based on the received input may overlap with the object 705 in the area 704.
  • the object 701 for the pin mode may be displayed above the object 705.
  • the electronic device 100 may display the object 701 for the pin mode above the object 705 so that the user may more easily access the object 701 for the pin mode.
  • FIG. 7B illustrates another example of movement of an object for a pin mode according to various embodiments of the present disclosure.
  • the movement of the object may be caused by the electronic device 100 or the display unit 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 711 for the pin mode on the screen 710.
  • the object 711 for the pin mode may be floated on the screen 710.
  • the object 711 for the pin mode may be located at location 712.
  • the electronic device 100 may display the object 711 for the pin mode floating on the screen 710 in the area 712.
  • the screen 710 may further include the object 715.
  • the electronic device 100 may receive an input for moving the object 711 for the pin mode. In other words, the electronic device 100 may receive an input for changing the position of the object 711 for the pin mode from the area 712. In some embodiments, the electronic device 100 may move the object 711 for the pin mode from the area 712 to the area 714 based on receiving the drag and release input 713 for the object 711 for the pin mode.
  • the object 711 that is moved based on the received input may overlap the object 715 in the area 714.
  • the object 711 for the pin mode may be displayed below the object 715, unlike the illustration of FIG. 7A.
  • the electronic device 100 may adaptively change an arrangement relationship between the object 711 and the object 715 for the pin mode.
  • the electronic device 100 may determine a priority for arrangement between other objects having various types such as the object 711 and the object 715 for the pin mode. For example, an object of high priority may be placed higher than an object of low priority.
  • the electronic device 100 may determine the priority of the object 711 for the pin mode according to a default setting.
  • the electronic device 100 may set the priority of the object 711 for the pin mode to be higher than the priority of other objects.
  • the electronic device 100 may determine the priority of the object 711 and other objects for the pin mode according to a user input. For example, the electronic device 100 sets the priority of some of the other objects higher than that of the object 711 for the pin mode, and sets the priority of the other some of the other objects to the priority of the object 711 for the pin mode. Can be set lower.
  • the electronic device 100 may provide higher mobility to an object for the pin mode by plotting an object for the pin mode on the screen. Also, the electronic device 100 according to various embodiments of the present disclosure may display an object for the pin mode in various ways by controlling an arrangement relationship between the object for the pin mode and other objects. In other words, the electronic device 100 according to various embodiments of the present disclosure may adaptively display an object for a pin mode according to a screen state.
  • FIG. 8A illustrates an example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • the menu of such an object may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 801 for the pin mode on the screen 800.
  • screen 800 is an indicator for displaying the status of the electronic device, a window showing information (weather information, etc.) around the electronic device, at least one object associated with the application and displayed on a page within the desktop, frequently used It may be a wall paper including various objects associated with an application and displayed in a lower area of the desktop, such as at least one other object (ie, a Top 5 icon).
  • the electronic device 100 may display the object 801 for the pin mode floating on the screen 800.
  • the object 801 may further include an element for indicating the specific application set to the pin mode.
  • the electronic device 100 may receive an input 802 for the object 801 for the pin mode.
  • the input 802 received via the object 801 for pin mode may be an input for indicating a plurality of functions associated with (or associated with) the object 801 for pin mode.
  • the electronic device 100 may display a menu window 803 for respectively displaying a plurality of functions linked to the object 801.
  • the attribute of the input 802 may be different from the attribute of the input for moving the object 801 for the pin mode.
  • the attribute of the input 802 may be different from the attribute of the input for setting a particular application to the pin mode via the object 801 for the pin mode.
  • the menu window 803 may be set to a speech bubble format.
  • the menu window 803 includes an item for executing an extended mode function, an item for executing a pinned app control without switching the application set to the pin mode to the foreground, and a pin mode of the application.
  • the menu window 803 may include more items. In addition, a detailed description of each of the plurality of icons included in the menu will be described later.
  • the electronic device 100 may execute a function corresponding to the specific item based on receiving an input for the specific item among the plurality of items included in the menu window 803.
  • the menu window 803 may be located around the object 801. In some other embodiments, the menu window 803 may be positioned to overlap with the object 801. In some other embodiments, the menu window 803 may be located in an area corresponding to the position of the input means detected by the sensor of the electronic device 100.
  • the menu window 803 may be displayed opaquely. In some other embodiments, the menu window 803 may be displayed semi-transparently so that the user can recognize the contents of the screen located below the menu window 803.
  • FIG. 8B illustrates another example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • the menu of such an object may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 811 for the pin mode on the screen 810.
  • Screen 810 may be associated with a game.
  • the screen 810 may be a game execution screen.
  • the object 811 for the pin mode may include an element for indicating that the email application is set to the pin mode.
  • the object 811 for the pin mode may include an image having a shape corresponding to the shape of the icon of the e-mail application in a badge format. That is, the electronic device 100 may display the game execution screen on the display 120 while transmitting a screen related to an email application to the external electronic device 205.
  • the electronic device 100 may display a screen related to an email application through the display unit of the external electronic device 205, and display a game execution screen through the display unit 120.
  • the electronic device 100 may receive an input 812 for the object 811.
  • the input 812 may be an input for displaying a menu for performing a plurality of functions linked to the object 811.
  • the property of the input 812 may be different from that of other inputs to the object 811 (eg, an input for moving the object 811 and an input for setting a specific application to the pin mode).
  • the input for moving the object 811 may be touch and drag, while the input 812 may be touch and hold.
  • the electronic device 100 may display the menu 813 based on receiving the input 812.
  • the menu 813 may track the input means causing the input 812 based on the hold command included in the input 812. In other words, the menu 813 may accompany the input means.
  • the menu 813 may display a window 814 indicating an application set to the pin mode.
  • the window 814 displays a phrase (or a screen related to the e-mail application on the external electronic device 205) indicating that data for displaying the screen related to the e-mail application on the external electronic device 205 is being transmitted. Phrases to indicate that they are doing so).
  • Windows 814 may include the phrase "e-mail pinned”.
  • Windows 814 may include the phrase "application pinned" that does not specify an application set to pin mode.
  • the object 811 may further include an image in a badge format to indicate an application set to the pin mode.
  • the menu 813 may display a plurality of images to indicate a plurality of destinations for the object 811.
  • the plurality of images may represent a plurality of functions associated with the object 811.
  • the plurality of images may include images representing a function for executing a shortcut command for an email application set to pin mode (go to pinned e-mail), images representing a function for releasing pin mode of the email application. (unpinfrom device), an image that represents the ability to change the electronic device associated with the pin mode, a change pinned app that represents the ability to change the application set to the pin mode, or a screen with other electronic devices. It may include one or more of the images (disconnect) representing a function for disconnecting a communication connection for sharing.
  • the electronic device 100 is based on receiving an input 815 for superposing an object 811 on a specific image among the plurality of images included in the menu 813 (or an input for moving the object 811 to a specific image).
  • the function shown can be performed.
  • the electronic device 100 may deactivate a communication path for sharing a screen with the external electronic device 205 based on receiving an input 815 for moving the object 811 to a specific image.
  • the electronic device 100 displays a game execution screen on the display unit 120 of the electronic device 100 based on receiving an input 815 that superimposes the object 811 on another specific image (go to pinned e-mail). can do.
  • FIG. 8C is a view illustrating another example of a menu of an object for a pin mode according to various embodiments of the present disclosure.
  • the menu of such an object may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 821 for the pin mode on the screen 820.
  • Screen 820 may relate to surfing the Internet.
  • the screen 820 may be a web page display screen of an internet browser.
  • the object 821 for the pin mode may include an element for indicating that the music application is set to the pin mode.
  • the object 821 for the pin mode may include an element having a shape corresponding to the shape of the icon of the music application in a badge format. That is, the electronic device 100 may display a screen related to a music application through the external electronic device 205, and display the screen 820, which is a web page display screen, through the display 120.
  • the electronic device 100 may receive an input 822 for the object 821.
  • the input 822 may be an input for activating a menu for performing a plurality of functions associated with the object 821.
  • the attributes of input 822 can be distinguished from the attributes of other inputs to object 821.
  • the electronic device 100 may display the menu screen 830 on the entire area of the display unit 120 of the electronic device 100 based on the reception of the input 822.
  • the menu screen 830 may include more detailed information than the menu illustrated in FIGS. 8A and 8B.
  • the menu screen 830 may include items for executing various functions associated with the object 821.
  • the menu screen 830 may include an indicator item for indicating that the music application is set to the pin mode, a command item for immediately activating the music application (ie, a shortcut item (go to pinned music)), A command item for ending pin mode (unpinfrom TV), a command item for changing a device linked to pin mode (change device), a command item for changing an application set in pin mode to another application (change App.), Or at least one of a command item for disconnecting the connection with the external electronic device 205 for screen sharing.
  • the menu screen 830 may include a thumbnail 831 for previewing.
  • the menu screen 830 may include a thumbnail 831 displaying a screen corresponding to a screen currently displayed on the external electronic device 205.
  • the electronic device 100 may check the display state of the external electronic device 205 through the thumbnail 831 of the menu screen 830 resulting from the object 821 without switching to the screen related to the music application.
  • the menu screen 830 may be displayed opaquely. In some other embodiments, the menu screen 830 may be semi-transparent so that the user can recognize the state of the screen below the menu screen 830.
  • FIGS. 8A-8C show various menus resulting from the object for the pin mode. At least one of the menus illustrated in FIGS. 8A to 8C may be simultaneously applied in the electronic device 100 according to the state of the electronic device 100 according to various embodiments. For example, the electronic device 100 may display a menu window 803 based on receiving a first input, and may display a menu 813 based on receiving a second input different from the first input.
  • the menu resulting from the object for the pin mode is not limited to FIGS. 8A-8C.
  • the preview window may be displayed on the electronic device 100 or the display 120 of the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 901 for a pin mode on a screen 900.
  • Screen 900 may be associated with a text application.
  • the screen 900 may include a user interface for a text application.
  • the external electronic device 205 associated with the electronic device 100 through the pin mode may display a screen related to the video application.
  • the external electronic device 205 may display a screen of content played through the video application. Since the electronic device 100 sets the video application to the pin mode, the electronic device 100 may display the video application based on the data received from the electronic device 100 even though the electronic device 100 displays the screen 900 associated with the text application. The screen of the content to be played through can be displayed.
  • the electronic device 100 may float the object 901 on the screen 900.
  • the floating object 901 may be moved according to a user input or a change of state of the electronic device.
  • the electronic device 100 may receive an input 902 for the object 901.
  • the input 902 may be an input for activating a preview function for a screen displayed on the external electronic device 205.
  • Input 902 may be independent of other inputs.
  • the attribute of input 902 can be distinguished from the attribute of other inputs.
  • the input for activating the menu for the object 901 may be a double tap input for the object 901
  • the input for activating the preview function for the object 901 may be a hovering input for the object 901.
  • the electronic device 100 may display a window 903 that provides a preview function based on receiving or detecting the input 902.
  • the window 903 may display a screen corresponding to the screen displayed on the external electronic device 205.
  • the windows 903 may display menus for remotely controlling a screen displayed on the external electronic device 205 (eg, when a screen displayed on the external electronic device 205 is associated with a TV, play, rewind, forward, Volume control, stop, channel control, etc.) may be further included.
  • the electronic device 100 may perform a function corresponding to at least one list based on receiving an input for at least one list among the lists.
  • the window 903 may overlap the screen 900 currently displayed by the electronic device 100.
  • the initial display position of the window 903 may be changed by a user's setting or may be fixed by a basic setting or option of the electronic device 100.
  • the window 903 may be moved by a user's input (drag and drop) to move the window 903.
  • the window 903 may be displayed in a full screen mode.
  • the window 903 may have various sizes.
  • the window 903 may be displayed in a size determined based on a user's setting or a basic setting of the electronic device 100.
  • Windows 903 can adaptively resize based on detecting user input (eg, minimize menu, maximize menu, restore menu to previous size, etc.) for resizing Windows 903.
  • the electronic device 100 may provide a preview window that is generated through an input for an object for a pin mode, and thus may operate in a background switched state and may be displayed on the external electronic device 205. It does not require a separate input to invoke (or query) the associated application.
  • the electronic device 100 may provide a preview window so that a user may more easily check the display state of the external electronic device 205.
  • FIG. 10 illustrates an example of an operation of an electronic device that performs various functions by using an object for a pin mode, according to various embodiments of the present disclosure. Such an operation may be performed by at least one of the electronic device 100 or the components of the electronic device 100 illustrated in FIG. 1 (control unit 110).
  • the electronic device 100 may display an object for a pin mode.
  • the electronic device 100 may display an object for a pin mode floating on a desktop.
  • the electronic device 100 may display an object for a pin mode floating on a screen related to a specific application.
  • An application related to the object for the pin mode (that is, an application set in the pin mode) may not be related to a screen currently displayed on the electronic device 100.
  • the screen displayed on the electronic device 100 may be a screen related to a video application, whereas the application set in the pin mode may be an email application.
  • the electronic device 100 may receive an input for the displayed object.
  • the received input may be an input for displaying a menu displaying functions linked to an object for a pin mode.
  • the electronic device 100 may detect the received input.
  • the electronic device 100 may display a plurality of items representing a plurality of functions related to a pin mode, based on detecting the received input. For example, the electronic device 100 may display one of the menus shown in FIGS. 8A through 8C.
  • the electronic device 100 may perform a function corresponding to the selected item based on an input for selecting one item among the displayed plurality of items. For example, in response to receiving an input for a first item of a plurality of items, the electronic device 100 may perform at least a function for changing a device linked with a pin mode from an external electronic device 205 to another external electronic device. One operation can be performed. As another example, in response to receiving an input for a second item of the plurality of items, the electronic device 100 disconnects a communication connection with the external electronic device 205 connected to the electronic device 100 to share a screen. You may.
  • FIG. 11 illustrates an example of a function associated with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 1101 for the pin mode on the screen 1100.
  • the electronic device 100 may be connected to the external electronic device 205 through a pin mode.
  • the electronic device 100 may operate in a state where the video application is set to the pin mode.
  • the electronic device 100 may display a screen 1100 different from the screen related to the video application while transmitting data related to the video application set to the pin mode to the external electronic device 205.
  • the electronic device 100 may display the object 1101 floating on the screen 1100.
  • the electronic device 100 may display a menu window 1102 related to the floated object 1101.
  • the external electronic device 205 may display a screen related to a video application set to a pin mode based on data received from the electronic device 100.
  • the electronic device 100 may display a menu window 1102 in response to detecting an input to the object 1101.
  • Menu window 1102 is an item 1103 that activates a function for performing a short cut to a pinned application, and controls an application set to pin mode without calling a screen of the application set to pin mode.
  • An item that activates the function to release the pin mode of the application an item that activates the function for changing the interlocking device through the pin mode, and an item that enables the function to disconnect from the connected device to share the screen. And the like.
  • the menu window 1102 may further include an item for activating another function.
  • the electronic device 100 may receive an input 1104 for the item 1103 included in the displayed menu window 1102.
  • the input 1104 may be an input for executing a function corresponding to the item 1103.
  • the electronic device 100 may perform a shortcut of the video application set to the pin mode, which is a function corresponding to the item 1103, based on the detection of the input 1104. In other words, the electronic device 100 may display a screen 1105 related to the video application based on detecting the input 1104. Since the electronic device 100 is in a state of transmitting data related to a video application to the external electronic device 205 through the pin mode, the screen 1105 may correspond to a screen displayed on the external electronic device 205.
  • the electronic device 100 may call the screen displayed on the external electronic device 205 from the electronic device 100 using the item 1103.
  • the electronic device 100 may transmit the external electronic device through the item 1103.
  • the screen being displayed at 205 can be queried quickly and displayed.
  • FIG. 12 illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display an object 1201 for the pin mode on the screen 1200.
  • the electronic device 100 may be connected to the external electronic device 205 through a pin mode.
  • the electronic device 100 may operate in a state where the music application is set to the pin mode.
  • the electronic device 100 may display the screen 1200 on the display 120 while displaying the screen related to the music application set in the pin mode through the external electronic device 205.
  • the object 1201 may include an element for indicating that the music application is set to the pin mode.
  • the electronic device 100 may display a menu window 1202 in response to detecting an input to the object 1201.
  • the menu window 1202 includes an item for entering the extended mode, an item for activating a function for performing a shortcut to an application set in the pin mode, an item for controlling the application without displaying the application set in the pin mode, and an application pin.
  • Item 1203 for activating a function for terminating a mode an item for activating a function for changing a device interworking through a pin mode, an item for activating a function for terminating a connection with a device sharing a screen, and the like. have.
  • the electronic device 100 may receive an input 1204 for the item 1203 displayed in the menu window 1202.
  • the input 1204 may be a touch input.
  • the electronic device 100 may end the pin mode of the music application based on receiving the input 1204.
  • the electronic device 100 may stop transmitting data related to the music application to the external electronic device 205 based on receiving the input 1204.
  • the electronic device 100 may transmit data about a screen currently displayed on the electronic device 100 to the external electronic device 205 based on the reception of the input 1204.
  • the electronic device 100 may transmit data about the screen 1205 to the external electronic device 205.
  • the external electronic device 205 may receive data about the screen 1205 from the electronic device 100.
  • the external electronic device 1205 may display a screen having a configuration corresponding to that of the screen 1205 based on the received data.
  • the electronic device 100 may determine whether to distinguish between the screen displayed on the electronic device 100 and the screen displayed on the external electronic device 204 through the item 1203. In other words, the electronic device 100 according to various embodiments of the present disclosure may provide higher accessibility to the user by determining whether to mirror the screen through a simplified procedure through the item 1203.
  • FIG. 13 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may be connected to the external electronic device 205 in order to share a screen related to a video application in a pin mode. Meanwhile, the electronic device 100 may display the screen 1300 while executing the video application in the background state. The external electronic device 205 may display a screen related to a video application, based on data received from the electronic device 100.
  • the electronic device 100 may display the object 1301 for the pin mode on the background screen such as the screen 1300.
  • the object 1301 may include an element for indicating that the video application is set to the pin mode in the electronic device 100.
  • the electronic device 100 may display a menu window 1302 based on detecting an input for the object 1301 floating on the screen 1300.
  • Menu window 1302 is an item for directly accessing the video application set to the pin mode, an item 1303 for controlling the video application set to the pin mode in the current display state without a separate screen switching, an item for stopping the pin mode of the video application, It may include an item for changing a device interworking with the pin mode of the video application, an item for terminating the connection with a device interworking for screen sharing, and the like.
  • Item 1303 may include various objects for directly controlling a video application.
  • the item 1303 may include an object for pausing or playing content of a video application displayed on the external electronic device 205.
  • the item 1303 may include an object for changing the content of the video application to another content, an object for controlling the playback time of the video application, an object for controlling the output volume of the played content, or a content of the played content. It may further include one or more of the objects for controlling the image quality.
  • the electronic device 100 may receive an input 1304 for an object for pausing the content of the video application included in the item 1303. In response to receiving the input 1304 for the object for pausing the content, the electronic device 100 may change the pause image in the object for pausing the content to a playback image. Also, in response to receiving an input for an object for pausing the content, the electronic device 100 may update the status indication text in the item 1303. In other words, the electronic device 100 may change the item 1303 to an item 1305. Item 1305 may include the phrase "video paused " changed from "video playing ". In addition, in response to receiving an input 1304 for the object for pausing the content, the electronic device 100 may change the content displayed on the external electronic device 205 from the playback state to the pause state. In other words, the electronic device 100 may transmit a pause command of content to the video application without switching the video application operating in the background state to the foreground state.
  • the electronic device 100 provides the item 1303 in the pin mode, without changing the state of the application shared with the external electronic device 205 and operating in the background state to the foreground state. Can be controlled.
  • the electronic device 100 may display an item 1303 so that a user may more conveniently access an application related to a screen shared with the external electronic device 205.
  • FIG. 14 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may be connected to the external electronic device 205 in order to share a screen related to a message application in a pin mode.
  • the electronic device 100 may display the screen 1401 while executing the message application in the background state.
  • the external electronic device 205 may display a screen related to a text application based on data received from the electronic device 100.
  • the electronic device 100 may display the object 1402 for the pin mode floating on the screen 1401.
  • the object 1402 may include an element for indicating that the message application is set to the pin mode.
  • the electronic device 100 may display the menu window 1403 based on the detection of the input to the object 1402.
  • the menu window 1403 is a shortcut item for a message application set to pin mode, an item 1404 for controlling a message application set to pin mode without a separate screen switching, an item for stopping a pin mode of the message application, and a message application. It may include an item for changing the target device to receive data, an item for stopping the connection with the current target device.
  • Item 1404 may include at least one window for directly controlling the message application.
  • the item 1404 may include a window 1405 for inputting a sender, a window 1406 for inputting a word to be included in a message, and the like.
  • the item 1404 may further include a window for displaying summary information of the received message.
  • the electronic device 100 may display more windows in the item 1404 based on the size of the display area.
  • the electronic device 100 may specify a receiver of a message to be transmitted from the electronic device 100 through an input to the window 1405.
  • the electronic device 100 may display a window overlapping at least a portion of the screen 1401, the object 1402, or the menu window 1403 based on receiving an input for the window 1405. .
  • the window may be used to search for a phone number stored in the electronic device 100.
  • the electronic device 100 may further display a virtual keypad for inputting a phone number or name.
  • the electronic device 100 may specify a receiver of a message to be transmitted from the electronic device 100 as "Jenette Mchale" based on at least one input to the window 1405.
  • the electronic device 100 may determine a character to be included in a message to be transmitted based on receiving an input for the window 1406. For example, although not illustrated in FIG. 14, the electronic device 100 may display a virtual keypad superimposed on at least a portion of the screen 1401, the object 1402, or the menu window 1403 based on receiving an input for the window 1406. have. The electronic device 100 may display a character to be included in the message to be transmitted in the window 1406 by identifying an input to the displayed virtual keypad. For example, the electronic device 100 may display “Hello I'm” in the window 1406 based on a user input. In addition, the electronic device 100 may display a cursor 1407 to indicate a position where a letter to be input through a keypad is displayed.
  • the electronic device 100 may input a receiver of a message to be transmitted and contents of a message to be transmitted through a voice input or the like. In this case, the electronic device 100 may display the processing result according to the voice input through the windows 1405 and 1406.
  • the electronic device 100 may transmit a text written through the item 1403 to another electronic device based on receiving an input for the object “send” included in the window 1406.
  • the other electronic device may be a device possessed by a user specified through an input to the window 1405.
  • the electronic device 100 may display a notification indicating whether transmission of the message is normally completed.
  • the electronic device 100 may display a notification 1408 indicating that the message is normally transmitted.
  • the electronic device 100 may display a notification 1408 including "sending complete".
  • a notification message such as notification 1408, may be displayed in the area of item 1404.
  • the notification message may be displayed in an indicator area of the upper portion of the display 120.
  • the electronic device 100 may display a notification indicating that the message is not normally transmitted.
  • the electronic device 100 may display a visual effect, perform a haptic, or output a sound to indicate whether the message is normally transmitted.
  • the electronic device 100 may generate a visual effect of vibrating one or more of the object 1402, the menu window 1403, or the item 1404 to indicate that the message is normally transmitted.
  • the electronic device 100 may vibrate the electronic device 100 to indicate that a message is normally transmitted.
  • the electronic device 100 may emit a physical indicator configured with a light emitting element in a specific color or output a sound to indicate that a message is normally transmitted. However, it is not limited to this.
  • the external electronic device 205 may display a message normally transmitted from the electronic device 100 to another electronic device.
  • the external electronic device 205 may update the display of the message transmitted by the electronic device 100 based on the input for the item 1404.
  • the electronic device 100 may display the item 1404 to control the application set to the pin mode without changing the application set to the pin mode from the background state to the foreground state.
  • the electronic device 100 may adaptively change the configuration of an item for directly controlling the application set to the pin mode according to the type or function of the application set to the pin mode. For example, when the application set to the pin mode is related to music, the electronic device 100 may configure an item to include an object capable of triggering functions such as pause / play, rewind, volume control, music selection / add, and the like. If the application set to the pin mode is related to the TV, the item may be configured to include channel change, volume control, and the like.
  • FIG. 15 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may be connected to the external electronic device 205 in order to share a screen related to a video application in a pin mode.
  • the electronic device 100 may execute the video application in the background while transmitting data about the video application set to the pin mode to the external electronic device 205.
  • the external electronic device 205 may display a screen related to the video application based on data about the video application received from the electronic device 100.
  • the electronic device 100 may display the screen 1500 while the moving image application is running in the background state.
  • Screen 1500 may be a wallpaper.
  • the electronic device 100 may display the object 1501 for the pin mode floating on the screen 1500.
  • the object 1501 may include an element for indicating that the video is set to the pin mode.
  • the electronic device 100 may display a menu window 1503 for displaying functions connected to the object 1501 based on receiving an input for the object 1501.
  • the menu window 1503 includes an object for switching the application set to the pin mode to the foreground state, an object 1504 for controlling the application set to the pin mode running in the background state, an object for stopping the pin mode of the application, and the pin mode. It may include an object for changing the device to display the screen associated with the application set to, an object for terminating the connection for screen sharing.
  • the electronic device 100 may display a window 1505 for controlling a video application in a background state.
  • the electronic device 100 may stop displaying the menu window 1503 and display the window 1505.
  • the window 1505 may include an object for controlling the screen and / or sound output from the external electronic device 205.
  • the window 1505 may display a bar format object for adjusting volume, objects for performing rewind, pause, play, stop, and forward functions, and a current playing state of content being played by a video application. It may include one or more of an object of a status bar format for presentation or an object of a video format for displaying a current playback state of the content.
  • the electronic device 100 may perform at least one function corresponding to the at least one object.
  • the electronic device 100 may control the screen displayed on the external electronic device 205 by controlling an application having a background state based on detecting an input for at least one object.
  • the electronic device 100 may provide a direct control window different from the direct control item of the application set to the pin mode illustrated in FIGS. 13 and / or 14. Also, the electronic device 100 may operate in the background state and directly control an application shared with the external electronic device 205 in consideration of the free area of the display 120 and the size of the total area of the display 120 of the electronic device 100. You can adaptively change the display format of objects (windows, items, etc.). For example, when it is determined that the total area of the display unit 120 is relatively large, the electronic device 100 displays an object that can provide more detailed information, and determines that the free area of the display unit 120 is relatively insufficient. In this case, an object capable of providing simplified information may be displayed.
  • FIG. 16 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may share a screen related to a video application with the external electronic device 205 using the pin mode.
  • the electronic device 100 may transmit information related to the screen of the content being played through the video application to the external electronic device 205.
  • the electronic device 100 may change the moving picture application from the foreground state to the background state while transmitting the information to the external electronic device 205.
  • the video application is changed to a background state, but since the video application is set to the pin mode, the electronic device 100 may maintain transmission of the information.
  • the electronic device 100 may display the screen 1600 in response to the moving picture application being changed to the background state.
  • the screen 1600 may be a wallpaper.
  • the screen 1600 may be a screen related to another application located on a layer disposed below the layer on which the screen of the content being played through the video application is located.
  • the electronic device 100 may display the object 1601 for the pin mode on the screen 1600.
  • the electronic device 100 may display an object 1601 floating on the screen 1600.
  • the object 1601 may include at least one element for indicating that the electronic device 100 is transmitting information for displaying a screen related to a video application to the external electronic device 205 through the pin mode.
  • the electronic device 100 may receive an input for the object 1601.
  • the electronic device 100 may display a menu window 1602 based on receiving an input for the object 1601.
  • the menu window 1602 is used to change an icon for directly calling a pinned video application, an icon for directly controlling a pinned video application, an icon for releasing a pinned video application, and a device to share a screen for the pinned video application.
  • the electronic device 100 may receive an input 1604 for the icon 1603.
  • the electronic device 100 may display a window 1605 for providing the user with information about devices located within the coverage of the electronic device 100 or a relay node connected to the electronic device 100.
  • the electronic device 100 when the electronic device 100 shares a screen with at least one other device through direct communication, the electronic device 100 receives a signal from peripheral devices of the electronic device 100 based on detecting the input 1604. It is possible to identify the reception strength of the devices.
  • the electronic device 100 may identify or determine at least one signal having a reception strength equal to or greater than a reference strength among the signals.
  • the reference strength may be a parameter that is set so that the quality of data transmitted from the electronic device 100 to another device satisfies the quality of a predetermined level or more.
  • the reference strength may be a parameter for filtering another device having a state value or a channel quality value of the channel for the electronic device 100 less than a predetermined size, or another device spaced apart from the electronic device by a predetermined distance or more.
  • the electronic device 100 may determine a device to share the screen by using channel state indication or information (CSI), channel quality indication (CQI), and the like, rather than the reception strength.
  • CSI channel state indication or information
  • CQI channel quality indication
  • the electronic device 100 when the electronic device 100 shares the screen with at least one other device through the relay node, the electronic device 100 sends the electronic device 100 to the relay node connected to the electronic device based on detecting the input 1604. And a message for requesting information about at least one other device that can share the screen with the mobile station. Based on receiving the message, the relay node may transmit a response message to the electronic device 100 including information on at least one other device capable of sharing the screen with the electronic device 100. The electronic device 100 may identify or determine a device to share the screen based on the response message.
  • the electronic device 100 may display information for indicating the determined device in the window 1605.
  • the electronic device 100 may display an external electronic device that has transmitted a signal having a reception strength equal to or greater than a reference strength, such as item 1606.
  • the item 1606 may be configured with an image for indicating an external electronic device 1600 that has transmitted a signal having a reception intensity of a reference intensity or higher, and text for indicating a type (notebook), a brand (S), etc. of the external electronic device 1600. Can be.
  • the external electronic device 1600 may operate while displaying a screen that is not related to the electronic device 100. Unlike the external electronic device 205, the external electronic device 1600 operates in a state not related to the electronic device 100, and therefore, the external electronic device 1600 may display a screen not related to the electronic device 100. For example, the external electronic device 1600 may display its own desktop.
  • the electronic device 100 may connect with the external electronic device 1600 based on the pin mode based on receiving the input 1607 for the item 1606.
  • the electronic device 100 may transmit data for displaying a screen of content being played in the video application set to the pin mode to the connected external electronic device 1600 based on the pin mode.
  • the electronic device 100 may display a screen related to the video application set to the pin mode through the external electronic device 1600.
  • the electronic device 100 may change an association state between the external electronic device 205 and the electronic device 100.
  • the electronic device 100 may disconnect the connection between the external electronic device 205 and the electronic device based on receiving the input 1607.
  • screen C of the external electronic device 205 of FIG. 16 may be a blank screen or a basic screen of the external electronic device 20.
  • the electronic device 100 may release only the pin mode while maintaining the connection between the external electronic device 205 and the electronic device. In other words, the electronic device 100 may transmit data about the screen currently displayed by the electronic device 100, not a screen related to the moving picture application, to the external electronic device 205.
  • screen C of the external electronic device 205 of FIG. 16 may correspond to screen 1600 of the electronic device 100.
  • the electronic device 100 may maintain a connection with the external electronic device 205 based on the pin mode.
  • the electronic device 100 may be connected to the external electronic device 205 and the external electronic device 1600 based on the pin mode based on the reception of the input 1607.
  • screen C of the external electronic device 205 of FIG. 16 may be a screen related to a video application.
  • the electronic device 100 may change the object 1601 based on receiving the input 1607. For example, when the electronic device 100 disconnects from the external electronic device 205 and establishes only a connection with the external electronic device 1600 in response to receiving the input 1607, the electronic device 100 changes the object for the pin mode from the object 1601. 1609 may be displayed. In other words, the electronic device 100 may generate the object 1609 by updating the changed state of the object 1601.
  • the object 1609 may include at least one element for indicating that the application set in the pin mode is a video application and that the type of the connected device is a notebook based on the pin mode.
  • the external electronic device 1600 since the electronic device 100 is connected to the external electronic device 1600 based on the pin mode, even if the electronic device 100 switches the screen 1600 to the screen 1609, the external electronic device 1600 may maintain displaying the screen related to the video application. .
  • the electronic device 100 may provide a function of changing a device sharing a screen to another device using an item in a menu for an object for a pin mode.
  • the electronic device 100 may provide higher convenience to the user by providing such a function.
  • FIG. 17 illustrates another example of a function linked with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may share a screen of a video application set to a pin mode with the external electronic device 205.
  • the electronic device 100 may display a screen 1700 that is not related to the screen of the video application.
  • the electronic device 100 may display the object 1701 for the pin mode superimposed on the screen 1700.
  • the object 1701 may include at least one element for indicating that the electronic device 100 is connected to the external electronic device 205 and that the video application is set to the pin mode.
  • the electronic device 100 may display a menu window 1702.
  • the menu window 1702 may include at least one item for executing various functions linked to the object 1701 and an item 1703 for changing an application set in a pin mode to another application.
  • the electronic device 100 may display a window 1705 based on receiving an input 1704 for the item 1703.
  • the window 1705 may be displayed to guide the electronic device 100 changing the application set to the pin mode to another application.
  • the window 1705 may include at least one object for indicating at least one application that the electronic device 100 may set in the pin mode.
  • the window 1705 may include an object 1706 representing a game application, an object representing an email application, an object representing a document, and the like.
  • Applications represented by the objects included in the window 1705 may be set by various methods.
  • the applications may be applications set by a user.
  • the applications may be applications currently running on the electronic device 100.
  • the applications may be applications executed in the electronic device 100 for a time within a set time from a current time point.
  • the applications may be applications that can be shared with other devices. However, it is not limited to this.
  • the electronic device 100 may receive an input for one object among objects included in the window 1705.
  • the electronic device 100 may receive an input for the object 1706.
  • the input 1706 may be an input for changing an application set in the pin mode from a first application (eg, a video application) to a second application (eg, a game application).
  • the electronic device 100 may execute a game application represented by the object 1706 based on receiving an input for the object 1706.
  • the electronic device 100 may display a screen 1707 related to the game application.
  • the electronic device 100 may display an object 1708 floating on the screen 1707.
  • Object 1708 unlike object 1701, may include an element to indicate that the game application is set to pin mode.
  • the electronic device 100 may transmit data related to a game application to the external electronic device 205 based on receiving an input for the object 1706.
  • the external electronic device 205 may display a screen corresponding to the screen 1707 related to the game application, based on the data received from the electronic device 100.
  • the electronic device 100 may display a screen corresponding to the screen 1707 through the external electronic device 205 based on receiving an input for the object 1706.
  • the electronic device 100 may switch the screen 1707 to the screen 1700.
  • the electronic device 100 may switch the screen 1707 to the screen 1700 based on receiving an input for the home button of the electronic device 100.
  • the game application set in the pin mode may be switched to the background state. Since the game application is set to the pin mode, the electronic device 100 may maintain transmission of data related to the game application regardless of whether the game application is switched to the background state.
  • the external electronic device 205 may continuously display a screen corresponding to the screen 1707 based on data continuously received from the electronic device 100.
  • FIG. 17 illustrates an example of displaying a separate application list for changing an application set to the pin mode, but this is only one example.
  • the electronic device 100 may change an application set to the pin mode through another method. For example, after receiving the input for the object 1703, the electronic device 100 may change the application using a procedure similar to the procedure illustrated in FIG. 2 or 3 (ie, setting the application to the pin mode). have.
  • the electronic device 100 may provide a user with higher convenience by providing an object for changing an application set to a pin mode.
  • the electronic device 100 may adaptively respond to a change in a situation around a user of the electronic device by providing an object for changing an application set in the pin mode.
  • FIG. 18 illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may output a screen related to a video application to the external electronic device 205 through a pin mode.
  • the electronic device 100 may display a screen 1800 different from the screen output to the external electronic device 205.
  • the electronic device 100 may display the object 1801 for the pin mode floating on the screen 1800.
  • the object 1801 for the pin mode may include an element indicating the type of the external electronic device 205 and an element indicating an application set to the pin mode.
  • the electronic device 100 may display a menu window 1802 based on an input for the object 1801.
  • the menu window 1802 may be used to trigger various functions related to the object 1801 or pin mode.
  • the menu window 1802 may include an item 1803 for terminating, disconnecting, or stopping the connection with the external electronic device 205.
  • the menu window 1802 may further include items for triggering other functions.
  • the electronic device 100 may receive an input 1804 for the item 1803.
  • the electronic device 100 may disconnect the communication for sharing the screen with the external electronic device 205 based on receiving the input 1804 for the item 1803. In other words, interoperability between the electronic device 100 and the external electronic device 205 may be lost or terminated in terms of sharing the screen.
  • the electronic device 100 may stop transmitting data to the external electronic device 205 based on receiving the input 1804.
  • the external electronic device 205 may stop displaying the screen related to the electronic device 100 due to the interruption of data transmission.
  • the electronic device 100 may stop displaying the object 1801 based on receiving the input 1804.
  • the electronic device 100 may stop displaying the object 1801.
  • the electronic device 100 may provide higher convenience to a user by providing a quick menu for disconnecting communication with an external electronic device without changing a screen.
  • 19A illustrates another example of a function associated with an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may transmit data related to a video application set to a pin mode to the external electronic device 205.
  • the external electronic device 205 may display a screen of content played by the video application set to the pin mode based on the data received from the electronic device 100.
  • the electronic device 100 may display a screen 1900.
  • the screen 1900 may not be related to the video application.
  • the screen 1900 may be a desktop screen.
  • the screen 1900 may include an object 1901 for the pin mode including an element indicating that the video application is set to the pin mode.
  • the electronic device 100 may display a menu window 1902 based on receiving an input for the object 1901.
  • the menu window 1902 may include items representing functions that may result from the object 1901.
  • object 1901 may include item 1903 to cause an extended mode.
  • the extended mode may be a mode for using the screen of the external electronic device 205 as the expanded screen of the electronic device 100.
  • the electronic device 100 may display at least some of the objects on the external electronic device 205.
  • the extended mode may be a mode for widening the total area of the display unit 120 of the electronic device 100.
  • the extended mode may be a mode for increasing the capability of the display unit 120 of the electronic device 100.
  • the electronic device 100 may receive an input 1904 for item 1903.
  • the input 1904 may be an input for changing an operation mode or a display mode of the electronic device to an extended mode.
  • the input 1904 may be configured to change a button included in item 1903 from left to right.
  • the input 1904 may consist of touching the item 1903.
  • the electronic device 100 may operate in the extended mode based on receiving the input 1904.
  • the electronic device 100 operating in the extended mode may display the moved object on the external electronic device 205 based on receiving an input for moving the specific object to the external electronic device 205.
  • the electronic device 100 operating in the extended mode may input an input for moving a specific window displayed on the electronic device 100 to the external electronic device 205 (for example, moving the specific window to the corner or edge portion of the display unit 120 of the electronic device 100).
  • the specific window may be displayed on the external electronic device 205.
  • an application related to a specific window moved to the external electronic device 205 may be set to a pin mode.
  • an application related to a specific window moved to the external electronic device 205 may not be set to the pin mode.
  • the external electronic device 205 may display a screen for an application set in the pin mode on one side of the display unit of the external electronic device 205 and perform mirroring on the display screen of the electronic device 100 on the other side.
  • the electronic device 100 may display an object 1905 indicating that the electronic device 100 operates in the extended mode. In some embodiments, the electronic device 100 may stop displaying the window 1902.
  • the object 1905 may indicate a display state of the external electronic device 205.
  • the object 1905 may include an image indicating that the screen provided to the external electronic device 205 in the extended mode is displayed in full screen.
  • the object 1905 may include an image indicating the type of device providing the extended mode.
  • the electronic device 100 may receive an input for moving a specific object in the electronic device around the object 1905.
  • the specific object may be a window, an icon, or a screen.
  • the electronic device 100 may receive an input for moving the icon 1906 around the object 1905.
  • the electronic device 100 may identify which position of the object 1905 is held in proximity to (or drop or overlap) the object 1905.
  • the electronic device 100 displays the screen related to the icon 1906 by the external electronic device 205 on the left side, and is currently full screen. After reducing the screen related to the video application is displayed as can be controlled to display on the right.
  • the electronic device 100 displays the screen related to the icon 1906 by the external electronic device 205 on the lower side, and is currently displayed as a full screen. After reducing the screen related to the application can be controlled to display on the upper side. In other words, the electronic device 100 may control the arrangement state of the screen on the object to be moved using the object 1905.
  • the electronic device 100 may update the object 1905 to correspond to the arrangement state. For example, the electronic device 100 may change the shape of the object 1905 from the first shape to the second shape. For example, when the icon 1906 is dropped while at least partially overlapping the left side of the object 1905, the electronic device 100 may include an image indicating that a screen associated with the icon 1906 is disposed on the left side and an existing display screen is disposed on the right side. 1908 may be displayed. In contrast, when the icon 1906 is dropped at least partially overlapping the lower side of the object 1905, the electronic device 100 includes an object 1920 including an image indicating that a screen associated with the icon 1906 is disposed below and an existing display screen is disposed above. Can be displayed.
  • the electronic device 100 may update the object 1901.
  • the electronic device 100 changes the element indicating that the application set to the pin mode is a video application based on the completion of the input of the icon 1906 to an element indicating the plurality of applications set to the pin mode. Can be displayed.
  • the electronic device 100 may display a menu window 1909.
  • Menu window 1909 shows an item indicating that it is in the expanded mode, an item for executing a shortcut to the video application set to the pin mode, and an item for executing a shortcut for the game application (added through the extended mode) set to the pin mode.
  • An item for directly controlling a video application an item for directly controlling a game application, an item for releasing a pin mode of a video application, an item for releasing a pin mode of a video application, and a pin mode for a video application. It may include an item for changing, an item for changing a device for a pin mode of a game application, and an item for disconnecting with all or some of the devices connected to the electronic device 100.
  • the electronic device 100 may give extensibility to the display unit 120 of the electronic device 100 by using a function linked to a pin mode and an object for the pin mode.
  • 19B illustrates another example of a function linked with an object for a pin mode according to various embodiments. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display a window 1930 for the extended mode based on receiving an input for the extended mode.
  • the input for the extended mode may be a user input for an object 1905, an object 1909, an object 1920, and the like.
  • the input for extended mode may be a user's input to item 1904.
  • the window 1930 may be translucent. In some other embodiments, the window 1930 may be opaque.
  • the window 1930 may include an object 1931 for selecting a screen or an application related to the screen for displaying (or additionally displaying) the external electronic device 205, an object 1932 for changing the external electronic device 205 to another electronic device, and an external electronic device.
  • the window 1930 may further include an object 1934 and an object 1935 for performing a shortcut to an application related to a screen currently displayed on the external electronic device 205.
  • the object 1934 may be an object for performing a shortcut to a music application related to a screen currently displayed on one side of the display unit of the external electronic device 205.
  • the object 1935 may be an object for performing a shortcut to a video application associated with a screen currently displayed on the other side in the display unit of the external electronic device 205.
  • the window 1930 may further include a thumbnail 1936 and a thumbnail 1937 for indicating an arrangement relationship between a plurality of screens related to a plurality of applications currently displayed on the external electronic device 205 and a display state of the plurality of screens.
  • the electronic device 100 may display that the screen for the music application is displayed on the left side and the screen for the video application is displayed on the right side through the arrangement states of the thumbnails 1936 and the thumbnails 1937. Can be.
  • the electronic device 100 may change the arrangement state of the plurality of screens displayed on the external electronic device 205 based on receiving an input for changing the arrangement state of the thumbnail 1936 and the thumbnail. For example, when the thumbnail 1936 is positioned in the right area of the thumbnail 1937 and receives a drop input, the electronic device 100 displays the screen for the music application to the external electronic device 205 from the right side, and displays the screen for the video application.
  • the control signal can be transmitted which instructs to display on the left side.
  • the external electronic device 205 displays a screen related to a music application on the right side of the display unit of the external electronic device 205 based on a control signal received from the electronic device 100, and displays a video application on the left side of the display unit of the external electronic device 205.
  • the relevant screen can be displayed.
  • the electronic device 100 may display a reproduction progress state and a representative image of a song reproduced through a music application through a thumbnail 1936.
  • the electronic device 100 may display a playback progress state and a current playback screen of content (or a video) played through a video application through a thumbnail 1937.
  • FIG. 20 is a view illustrating another example of a function linked to an object for a pin mode according to various embodiments of the present disclosure. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may be connected to the external electronic device 205 to display a screen for a video application set to a pin mode.
  • the electronic device 100 may display a screen 2000 related to the desktop.
  • Screen 2000 may include an object 2001 plotted on screen 2000.
  • the electronic device 100 may display a menu window 2002 related to the object 2001 based on detecting an input for the object 2001.
  • the menu window 2002 may include at least one area for activating at least one function associated with the object 2001.
  • the menu window 2002 may include an area 2003 for activating a function for determining a device to be additionally connected to the electronic device 100 based on the pin mode.
  • the electronic device 100 may display a screen related to an application set in the pin mode in a plurality of devices as well as one device.
  • the electronic device 100 may display a window 2005 for determining a device to be added based on detecting the input 2004 for the region 2003. In some embodiments, the electronic device 100 may stop displaying the menu window 2002 and display the window 2005. Windows 2005 may include information about at least one device that the electronic device 100 may add for the pin mode. The operation of determining the at least one device may correspond to the operation according to the description of FIG. 16.
  • Windows 2005 may include at least one area to represent at least one device that can be added for pin mode.
  • Windows 2005 may include an area representing an S notebook and an area representing an S refridgerator.
  • each area included in Windows 2005 may include an image representing a device and a letter representing the device.
  • the electronic device 100 may receive an input for the area 2006 included in the window 2005.
  • the electronic device 100 may transmit the moving picture application set to the pin mode to the external electronic device 2007 based on receiving the input for the area 2006.
  • the electronic device 100 may set the pin mode of the video application with the external electronic device 2007 as well as the external electronic device 205.
  • the external electronic device 2007 may display a screen of content being played through the video application, based on the data received from the electronic device 100.
  • the screen displayed on the external electronic device 205 may correspond to the screen displayed on the external electronic device 2007.
  • the object 2001 may be updated.
  • the electronic device 100 may display the object 2008 changed from the object 2001 including the image representing the external electronic device 205.
  • the object 2008 may include an image for representing the external electronic device 2007 as well as an image for representing the external electronic device 205.
  • the electronic device 100 may display the number of devices connected to the electronic device 100 instead of an image representing each device.
  • the menu window 2002 may be updated. For example, after the external electronic device 2007 is added, the electronic device 100 may display a menu window 2009. Unlike the menu window 2002, the menu window 2009 may further include items regarding the external electronic device 2007.
  • the menu window 2009 shows a shortcut item for an application pinned on the external electronic device 205, a shortcut item for an application pinned on the external electronic device 2007, a direct control item for an application pinned on the external electronic device 205, an external device.
  • Direct control item of the application pinned by the electronic device 2007, item to release the pin mode of the application pinned by the external electronic device 205, item to release the pin mode of the application pinned by the external electronic device 2007, connection with the external electronic device 205
  • an item for disconnecting the connection an item for disconnecting the connection with the external electronic device 2007, and the like.
  • the electronic device 100 may independently set an application pinned by the external electronic device 205 and an application pinned by the external electronic device 2007.
  • the electronic device 100 may not only extend a screen of the electronic device 100 through a multi-pin mode that pins an application in a plurality of devices, but also provide a more flexible environment to the user.
  • FIG. 21 illustrates an example of a function for determining a plurality of devices for a multiple pin mode according to various embodiments. Such a function may be performed by the electronic device 100 shown in FIG. 1.
  • the electronic device 100 may display a user interface (UI) 2100.
  • the user interface 2100 may include a smart view 2101 for establishing a connection for sharing a screen with at least one external electronic device.
  • the electronic device 100 may display a window 2102 for selecting a device to share the screen of the electronic device 100.
  • the window 2102 may overlap the screen 2100a.
  • the window 2102 may display information on at least one external electronic device determined through an operation similar to the operation described with reference to FIG. 16.
  • the window 2102 may display an image for representing a notebook, an image for representing a refrigerator, and an image for representing a TV with the determined information about the at least one external electronic device.
  • the window 2102 may include at least one object 2103 for receiving a user input for selecting all or part of the displayed at least one external electronic device.
  • the electronic device 100 may receive a user input 2104 for selecting a refrigerator and a TV through at least one object 2103. In addition, the electronic device 100 may receive an input 2105 for determining whether to select a refrigerator and a TV.
  • the electronic device 100 may establish a connection with the refrigerator (external electronic device 2106) and a TV (external electronic device 205), respectively, based on receiving the input 2105.
  • the electronic device 100 may display the object 2107 for the pin mode floated on the screen 2100a.
  • the object 2107 may include an image indicating the number of external electronic devices that have established a connection with the electronic device 100.
  • the electronic device may display a screen having a configuration corresponding to that of the screen 2100a currently being displayed.
  • each of the external electronic device 205 and the external electronic device 2106 may perform mirroring on the screen 2100a.
  • the electronic device 100 may display a display screen of the electronic device 100, a display screen of the external electronic device 205, or an external electronic device through operations corresponding to at least some of the operations described with reference to FIGS. 2, 3, and 16.
  • One or more of the display screens of the 2106 may be independently operated.
  • the electronic device 100 may set the pin mode with the plurality of devices in the initial connection setting step as well as adding another device after establishing a connection for the pin mode with the specific device.
  • FIG. 22 is a flowchart illustrating a signal flow between an electronic device and an external electronic device according to various embodiments of the present disclosure. Such a signal flow may occur between the electronic device 100 shown in FIG. 1 and the external electronic device 205 shown in FIG. 2.
  • the electronic device 100 and the external electronic device 205 may establish a connection for screen sharing.
  • the established connection may be performed by triggering the electronic device 100 or may be performed by triggering the external electronic device 205.
  • the established connection may be performed by triggering devices other than the electronic device 100 and the external electronic device 205.
  • the electronic device 100 may initiate transmission of the first data for screen sharing based on the establishment of the connection.
  • the first data may include information related to a current display screen of the electronic device 100.
  • the electronic device 100 may transmit first data to the external electronic device 205.
  • the external electronic device 205 may receive first data.
  • the electronic device 100 may display an object for a pin mode on a screen currently being displayed.
  • the external electronic device 205 may display a screen on which the electronic device 100 is currently displayed based on the first data received from the electronic device 100. In other words, the external electronic device 205 may perform mirroring with the electronic device 100.
  • FIG. 26 illustrates that the electronic device 100 transmits the first data at the time when operation 2203 is performed, but may maintain transmitting the first data until the pin mode is set (or applied).
  • the first data may refer to data related to a screen displayed by the electronic device 100. In other words, when the screen displayed by the electronic device 100 changes, information in the first data may also change.
  • the electronic device 100 may receive an input for a first object for a first application.
  • the electronic device 100 may display a first screen related to the first application based on receiving an input for the first object. Since the external electronic device 205 mirrors the electronic device 100, the external electronic device 205 may display a first screen in operation 2209.
  • the electronic device 100 may receive an input for an object for a pin mode.
  • the electronic device 100 may set the first application related to the first screen currently being displayed in the pin mode. Since the electronic device 100 sets the first application to the pin mode, the electronic device 100 may display data for displaying the screen related to the first application on the external electronic device 205 regardless of whether the first application is switched to the background state. It can transmit to the external electronic device 205.
  • the electronic device 100 may change the first application to the background state based on a user input or a state change of the electronic device 100. In other words, the electronic device 100 may output a screen not related to the first application through the display unit 120.
  • the electronic device 100 may transmit second data.
  • the electronic device 100 may transmit second data for displaying the screen related to the first application on the external electronic device 205 regardless of whether the first application is switched to the background state.
  • the external electronic device 205 may maintain displaying the first screen.
  • the external electronic device 205 may maintain displaying the first screen because the first application operates in the pinned state.
  • the external electronic device 205 may maintain displaying the first screen.
  • the electronic device 100 may receive an input for the second object.
  • the second object may be associated with a second application different from the first application.
  • the electronic device 100 may display a second screen related to the second application based on receiving an input for the second object. In other words, the electronic device 100 may display a different screen than after the operation 2211 is performed. However, since the electronic device 100 operates in the pin mode, in operation 2216, the electronic device 100 may transmit second data to the external electronic device 205. In other words, the electronic device 100 may transmit the second data associated with the first application set to the pin mode regardless of the current state of the electronic device 100 to the external electronic device 205.
  • the external electronic device 205 may maintain displaying the first screen. Since the external electronic device 205 is connected to the electronic device 100 based on the pin mode, the external electronic device 205 may maintain displaying the first screen regardless of the display of the second screen of the electronic device 100.
  • a method of an electronic device may include displaying an object that has a first shape and is floated on a first screen displayed on the electronic device, and the first screen. Displaying the object having a second shape that is changed from the first shape based on receiving data for displaying the data in the external electronic device to the external electronic device and receiving an input for the displayed object. And displaying a second screen while maintaining transmission of the data based on the transition of the first application related to the first screen from the foreground state to the background state. Can be.
  • the method may further include displaying a plurality of items each representing functions executable through the object, in response to receiving another input to the object.
  • the items may include an item indicating a function for switching the first application operating in the background state to the foreground state, an item indicating a function for stopping transmission of the data, and an external electronic device connected to the electronic device. And at least one of an item indicating a function for changing to a device, an item for controlling the first application operating in the background state, or an item indicating a function for stopping the connection with the external electronic device.
  • the plurality of items may be included in a message window displayed by the object in response to receiving the other input.
  • the object having the second shape may include an element for indicating a timing at which the content is being played in the external electronic device when the first screen is related to playing the content. It may include.
  • the object having the second shape may include a contour having a color for representing the first application.
  • the object having the second shape may include an image for representing the first application.
  • the object having the first shape may be generated based on establishing a connection with the external electronic device.
  • the input may be used to enter a pin mode in which the external electronic device displays only the first screen associated with the first application among a plurality of applications running in the electronic device. Can be.
  • the method may further include displaying a window displaying a first screen displayed on the external electronic device based on receiving another input for the object having the second shape. It may further include, and the window may be superimposed on the second screen.
  • a method of an electronic device may include: an external electronic device connected to the electronic device based on data transmitted from the electronic device by a first screen associated with a first application operating in a background state; And displaying an object floated on the second screen displayed on the electronic device.
  • a computer-readable storage medium for storing one or more programs (software modules) may be provided.
  • One or more programs stored in a computer readable storage medium are configured for execution by one or more processors in an electronic device.
  • One or more programs include instructions that cause an electronic device to execute methods in accordance with embodiments described in the claims or specifications of this disclosure.
  • Such programs may include random access memory, non-volatile memory including flash memory, read only memory (ROM), and electrically erasable programmable ROM.
  • EEPROM Electrically Erasable Programmable Read Only Memory
  • magnetic disc storage device compact disc ROM (CD-ROM), digital versatile discs (DVDs) or other forms
  • CD-ROM compact disc ROM
  • DVDs digital versatile discs
  • It can be stored in an optical storage device, a magnetic cassette. Or, it may be stored in a memory composed of some or all of these combinations.
  • each configuration memory may be included in plural.
  • the program may be configured through a communication network such as the Internet, an intranet, a local area network (LAN), a wide area network (WLAN), or a storage area network (SAN), or a combination thereof. It may be stored in an attachable storage device that is accessible. Such a storage device may be connected to a device that performs an embodiment of the present disclosure through an external port. In addition, a separate storage device on a communication network may be connected to a device that performs an embodiment of the present disclosure.
  • a communication network such as the Internet, an intranet, a local area network (LAN), a wide area network (WLAN), or a storage area network (SAN), or a combination thereof. It may be stored in an attachable storage device that is accessible. Such a storage device may be connected to a device that performs an embodiment of the present disclosure through an external port.
  • a separate storage device on a communication network may be connected to a device that performs an embodiment of the present disclosure.

Abstract

본 개시의 다양한 실시 예들에 따른 전자 장치(electronic device)의 방법은, 백그라운드 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는 객체를 표시하는 동작을 포함할 수 있다.

Description

화면을 공유하기 위한 전자 장치 및 방법
다양한 실시 예들은 전자 장치(electronic device)에 관한 것으로, 보다 구체적으로 화면을 공유하기 위한 전자 장치 및 그의 방법에 관한 것이다.
디지털 기술의 발달과 함께 이동통신 단말기, PDA(personal digital assistant), 전자 수첩, 스마트폰, 태블릿(tablet) PC(personal computer), 또는 웨어러블 디바이스(wearable device) 등과 같이 이동성(mobility)을 가지면서 통신 및/또는 정보 처리를 수행할 수 있는 전자 장치들이 보급되고 있다. 이러한 전자 장치는 음성 통화, 문자 메시지 송신 등과 같은 서비스 뿐 아니라 사진 촬영, 길 찾기, 또는 웹 인터페이스 제공 등과 같은 다양한 서비스들을 제공하고 있다.
한편, 통신 기술의 발달로 인하여 사진, 동영상 등과 같은 컨텐츠(content)에 대한 접근도가 증가함에 따라 이러한 컨텐츠를 공유하는 다양한 기술(technology)들이 개발되고 있다. 예를 들면, 현재 전자 장치와 관련된 화면을 다른 전자 장치에서 표시하는 화면 공유 기술을 구비한 전자 장치가 개발되고 있다.
화면을 다른 전자 장치와 공유하는 전자 장치의 사용자에게 보다 높은 자유도(degree of freedom)를 부여하기 위하여 상기 전자 장치의 표시 화면과 상기 다른 전자 장치의 표시 화면을 서로 다르게 하는 캐스팅(casting) 기술이 보급되고 있다.
하지만, 이러한 캐스팅 기술을 구비한 전자 장치는, 상기 전자 장치로부터 송신되는 데이터에 기반하여 다른 전자 장치의 디스플레이에서 표시되고 있는 화면의 상태를 상기 전자 장치의 디스플레이를 통해 표시하지 않는다. 따라서, 상기 전자 장치로부터 송신되는 데이터에 기반하여 다른 전자 장치의 디스플레이에서 표시되고 있는 화면의 상태를 상기 전자 장치의 디스플레이를 통해 표시하는 방안이 요구된다.
따라서, 다양한 실시 예들은, 다른 전자 장치의 디스플레이를 통해 화면을 표시하는 경우 다른 전자 장치의 화면 표시 상태를 나타내는 객체(object)를 자신의 디스플레이에서 표시하는 전자 장치 및 방법을 제공할 수 있다.
본 문서에서 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
다양한 실시 예들에 따른 전자 장치(electronic device)는, 명령어(instruction)들을 저장하는 메모리(memory)와, 디스플레이부(display unit)와, 통신부(communication unit)와, 상기 메모리와 전기적으로 연결되고, 상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅되고(floated on) 제1 형상을 가지는 객체를 표시하고, 상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하고, 상기 표시된 객체에 대한 입력을 수신하고, 상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함할 수 있다.
다양한 실시 예들에 따른 전자 장치의 방법은, 제1 형상을 가지고, 상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅된 객체를 표시하는 동작과, 상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하는 동작과, 상기 표시된 객체에 대한 입력을 수신하는 동작과, 상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드 상태에서 백그라운드 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하는 동작을 포함할 수 있다.
다양한 실시 예들에 따른 전자 장치는, 명령어들을 저장하는 메모리와, 디스플레이부와, 통신부와, 상기 메모리와 전기적으로 연결되고, 백그라운드 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는(floated on) 객체를 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함할 수 있다.
다양한 실시 예들에 따른 전자 장치의 방법은, 백그라운드 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는 객체를 표시하는 동작을 포함할 수 있다.
다양한 실시예들에 따른 전자 장치 및 방법은, 상기 전자 장치 내에서 표시 중인 화면 위에 플로팅되는 객체를 제공함으로써, 상기 전자 장치와 연동된 외부 전자 장치와 독립적으로 상기 화면을 제어할 수 있다.
도 1은 다양한 실시 예들에 따른 전자 장치의 기능적 구성의 예를 도시한다.
도 2는 다양한 실시 예들에 따른 전자 장치 및 외부 전자 장치에서 표시되는 화면들의 예를 도시한다.
도 3은 다양한 실시 예들에 따른 전자 장치의 동작의 예를 도시한다.
도 4는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 예를 도시한다.
도 5는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 다른 예를 도시한다.
도 6은 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 또 다른 예를 도시한다.
도 7a는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 움직임(movement)의 예를 도시한다.
도 7b는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 움직임의 다른 예를 도시한다.
도 8a는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 예를 도시한다.
도 8b는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 다른 예를 도시한다.
도 8c는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 또 다른 예를 도시한다.
도 9는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 프리뷰 윈도우의 예를 도시한다.
도 10은 다양한 실시 예들에 따라 핀 모드를 위한 객체를 이용하여 다양한 기능들을 수행하는 전자 장치의 동작의 예를 도시한다.
도 11은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 예를 도시한다.
도 12는 다양한 실시 예들에 따른 핀 모드를 위한 객체와 연동된 기능의 다른 예를 도시한다.
도 13은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 14는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 15는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 16은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 17은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 18은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 19a는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 19b는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 20은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다.
도 21은 다양한 실시 예들에 따라 다중 핀 모드를 위한 복수의 장치들을 결정하기 위한 기능의 예를 도시한다.
도 22는 다양한 실시 예들에 따른 전자 장치와 외부 전자 장치 사이의 신호 흐름을 도시한다.
이하, 본 문서의 다양한 실시 예들이 첨부된 도면을 참조하여 기재된다. 실시 예 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B" 또는 "A 및/또는 B 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제 1," "제 2," "첫째," 또는 "둘째,"등의 표현들은 해당 구성요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다.
본 문서에서, "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, 하드웨어적 또는 소프트웨어적으로 "~에 적합한," "~하는 능력을 가지는," "~하도록 변경된," "~하도록 만들어진," "~를 할 수 있는," 또는 "~하도록 설계된"과 상호 호환적으로(interchangeably) 사용될 수 있다. 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(예: CPU 또는 application processor)를 의미할 수 있다.
본 문서의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰, 태블릿 PC, 이동 전화기, 영상 전화기, 전자책 리더기, 데스크탑 PC, 랩탑 PC, 넷북 컴퓨터, 워크스테이션, 서버, PDA(personal digital assistant), PMP(portable multimediaplayer), MP3 플레이어, 의료기기, 카메라, 또는 웨어러블 장치 중 적어도 하나를 포함할 수 있다. 웨어러블 장치는 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드 또는 문신), 또는 생체 이식형 회로 중 적어도 하나를 포함할 수 있다. 어떤 실시 예들에서, 전자 장치는, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스, 홈 오토매이션 컨트롤 패널, 보안 컨트롤 패널, 미디어 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더, 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 드론(drone), 금융 기관의 ATM, 상점의 POS(point of sales), 또는 사물 인터넷 장치 (예: 전구, 각종 센서, 스프링클러 장치, 화재 경보기, 온도조절기, 가로등, 토스터, 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다. 어떤 실시 예에 따르면, 전자 장치는 가구, 건물/구조물 또는 자동차의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터, 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예들에서, 전자 장치는 플렉서블하거나, 또는 전술한 다양한 장치들 중 둘 이상의 조합일 수 있다. 본 문서의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예들에 따른 전자 장치의 기능적 구성의 예를 도시한다.
도 1을 참조하면, 전자 장치 100은 제어부(controller) 110, 디스플레이부(display unit) 120, 저장부(storage unit) 130, 통신부(communication unit) 140, 및/또는 입력부(input unit) 150를 포함할 수 있다.
제어부 110은 전자 장치 100의 전반적인 동작을 제어할 수 있다. 제어부 110은 인터넷 브라우저, 게임, 동영상 등을 제공하는 어플리케이션들을 실행할 수 있다. 일부 실시 예들에서, 제어부 110은 하나의 프로세서 코어(single core)를 포함하거나, 복수의 프로세서 코어들을 포함할 수 있다. 예를 들면, 제어부 110은 듀얼 코어(dual-core), 쿼드 코어(quad-core), 헥사 코어(hexa-core) 등의 멀티 코어(multi-core)를 포함할 수 있다. 실시 예들에 따라, 제어부 110은 내부 또는 외부에 위치된 캐시 메모리(cache memory)를 더 포함할 수 있다.
제어부 110은 전자 장치 100의 다른 구성 요소들의 명령을 수신할 수 있고, 수신된 명령을 해석할 수 있으며, 해석된 명령에 따라 계산을 수행하거나 데이터를 처리할 수 있다.
제어부 110은 어플리케이션에서 생성되거나 발생되는 데이터 또는 신호를 처리할 수 있다. 예를 들면, 제어부 110은 어플리케이션을 실행하거나 제어하기 위해 저장부 130에게 명령어, 데이터 또는 신호를 요청할 수 있다. 제어부 110은 어플리케이션을 실행하거나 제어하기 위해 저장부 130에게 명령어, 데이터, 또는 신호를 기록(또는 저장)하거나 갱신할 수 있다.
제어부 110은 디스플레이부 120, 통신부 140, 또는 입력부 150으로부터 수신되는 메시지, 데이터, 명령어, 또는 신호를 해석할 수 있고, 가공할 수 있다. 또한, 제어부 110은 수신된 메시지, 데이터, 명령어, 또는 신호에 기반하여 새로운 메시지, 데이터, 명령어, 또는 신호를 생성할 수 있다. 제어부 110은 가공되거나 생성된 메시지, 데이터, 명령어, 또는 신호를 디스플레이부 120 등에게 제공할 수 있다. 예를 들면, 제어부 110은, 전자 장치 100이 다른 전자 장치의 디스플레이를 통해 화면을 표시하는 경우, 다른 전자 장치의 화면 표시 상태를 나타내는 객체(object)를 디스플레이부 120에서 표시하기 위해, 가공되거나 생성된 메시지, 데이터, 명령어, 또는 신호를 디스플레이부 120에게 제공할 수 있다.
제어부 110의 전부 또는 일부는 전자 장치 100 내의 다른 구성 요소(예를 들면, 디스플레이부 120, 저장부 130, 통신부 140, 및/또는 입력부 150)와 전기적으로 또는 물리적으로 결합(coupled with)될 수 있다.
실시 예들에 따라, 제어부 110은 하나 또는 그 이상의 프로세서로 구성될 수 있다. 예를 들면, 제어부 110은 응용 프로그램 등과 같은 상위 계층의 프로그램을 제어하는 AP(application processor) 또는 통신을 위한 제어를 수행하는 CP(communication processor) 등을 포함할 수 있다.
도 1에 도시하지 않았으나, 제어부 110은 디스플레이 관리부(display control unit) 및 연결 관리부(connection control unit)를 더 포함할 수 있다.
일부 실시 예들에서, 디스플레이 관리부는 다양한 실시 예들에 따른 핀 모드를 위한 객체와 관련된 표시를 제어할 수 있다. 예를 들면, 디스플레이 관리부는, 다른 전자 장치와 전자 장치 100 사이의 연결이 수립되는 것에 기반하여 핀 모드를 위한 객체를 현재 표시 중인 화면 상에서 표시하도록 디스플레이부 120을 제어할 수 있다. 다른 예를 들면, 디스플레이 관리부는, 핀 모드를 위한 객체에 대한 입력을 수신하는 것에 기반하여, 현재 표시 중인 화면과 관련된 어플리케이션을 핀 모드로 설정할 수 있다. 또 다른 예를 들면, 디스플레이 관리부는, 핀 모드를 위한 객체에 대한 입력을 수신하는 것에 기반하여, 핀 모드와 관련된 다양한 기능들을 수행하기 위한 메뉴를 표시하도록 디스플레이부 120을 제어할 수 있다. 다시 말해, 디스플레이 관리부는, 어플리케이션이 백그라운드 상태에서 동작하는지 포어그라운드 상태에서 동작하는지 여부와 관계없이 다른 전자 장치를 통해 표시되는 화면을 고정하기 위하여, 핀 모드를 설정하는 것을 제어하고, 핀 모드를 위한 객체를 표시하는 것을 제어하기 위한 다양한 기능들을 수행할 수 있다.
일부 실시 예들에서, 연결 관리부는 다양한 실시 예들에 따른 핀 모드와 관련된 연결을 제어할 수 있다. 예를 들면, 연결 관리부는 전자 장치 100에서 표시되고 있는 화면을 공유하기 위하여, 다른 전자 장치와의 연결을 수립하도록 통신부 140을 제어할 수 있다. 다른 예를 들면, 연결 관리부는, 상기 다른 전자 장치와의 연결을 유지하도록 통신부 140을 제어할 수 있다. 또 다른 예를 들면, 연결 관리부는, 핀 모드를 위한 객체에 대한 입력을 수신하는 것에 기반하여, 상기 다른 전자 장치와의 연결을 해제 또는 종료하도록 통신부 140을 제어할 수 있다.
다양한 실시 예들에서, 제어부 110은 본 문서에서 제안하는 방법, 절차, 및/또는 동작들을 구현하도록 설정(configured to)될 수 있다.
디스플레이부 120은 데이터 또는 신호를 출력할 수 있다. 일부 실시 예들에서, 디스플레이부 120은 제어부 110에 의해 가공된 영상 신호를 표시할 수 있다. 예를 들면, 디스플레이부 120은 캡쳐(capture) 또는 스틸(still) 이미지를 표시할 수 있다. 다른 예를 들면, 디스플레이부 120은 동영상 또는 카메라 프리뷰(preview) 이미지를 표시할 수 있다. 또 다른 예를 들면, 디스플레이부 120은 사용자가 전자 장치 100과 상호작용할 수 있도록 GUI(graphical user interface)를 표시할 수 있다.
디스플레이부 120은 LCD(liquid crystal display) 또는 OLED(organic light emitting diode)로 구성될 수 있다.
저장부 130은 전자 장치 100을 제어하는 제어 명령어 코드, 제어 데이터, 또는 사용자 데이터를 저장할 수 있다. 예를 들면, 저장부 130은 어플리케이션(application), OS(operating system), 미들웨어(middleware), 디바이스 드라이버(device driver)를 포함할 수 있다.
저장부 130은 휘발성 메모리(volatile memory) 또는 불휘발성(non-volatile memory) 중 하나 또는 그 이상을 포함할 수 있다. 휘발성 메모리는 DRAM(dynamic random access memory), SRAM(static RAM), SDRAM(synchronous DRAM), PRAM(phase-change RAM), MRAM(magnetic RAM), RRAM(resistive RAM), FeRAM(ferroelectric RAM) 등을 포함할 수 있다. 불휘발성 메모리는 ROM(read only memory), PROM(programmable ROM), EPROM(electrically programmable ROM), EEPROM(electrically erasable ROM), 플레시 메모리(flash memory) 등을 포함할 수 있다.
저장부 130은 하드 디스크 드라이브(HDD, hard disk drive), 솔리드 스테이트 디스크(SSD, solid state disk), eMMC(embedded multimedia card), UFS(universal flash storage)와 같은 불휘발성 매체(medium)를 포함할 수 있다.
통신부 140은 전자 장치 100과 적어도 하나의 외부 전자 장치 사이의 통신을 위한 다양한 통신 기능(예를 들면, 유선 통신, 무선 통신(예: 셀룰러 통신, 블루투스, NFC, Wi-Fi 등) 등을 구비할 수 있다. 다시 말해, 통신부 140은 전자 장치 100과 적어도 하나의 외부 전자 장치 사이의 통신을 설정할 수 있다. 예를 들면, 통신부 140은 무선 통신 경로 또는 유선 통신 경로를 통해 적어도 하나의 외부 전자 장치와 트래픽을 교환할 수 있다.
입력부 150은 사용자로부터 지시(indication 또는 instruction), 인터렉션(interaction), 또는 데이터를 수신할 수 있다. 입력부 150은 디스플레이부 120과 결합된 터치 패널(touch panel)일 수 있다. 입력부 150은 손가락 및 펜의 터치 또는 호버링(hovering) 입력을 감지(sense)할 수 있다. 입력부 150은 센서를 포함할 수 있다. 이러한 센서는 입력부의 터치 패널에 독립적으로 부착될 수 있다. 입력부 150에 수신되는 입력은 다양한 유형들을 가질 수 있다. 예를 들면, 입력부 150에 수신되는 입력은 터치 및 릴리즈(touch and release), 드래그 앤 드롭(drag and drop), 롱 터치(long touch), 포스 터치(force touch) 등을 포함할 수 있다. 입력부 150은 수신된 입력 및 수신된 입력과 관련된 데이터를 제어부 110에게 제공할 수 있다.
실시 예들에 따라, 디스플레이부 120과 입력부 150은 일체형의 터치 스크린(touch screen)으로 설정(configured)될 수 있다.
도 2는 다양한 실시 예들에 따른 전자 장치 및 외부 전자 장치에서 표시되는 화면들의 예를 도시한다.
도 2에서, 전자 장치 100은 외부 전자 장치 205와 화면 공유를 위한 통신을 수립(establish)한 장치일 수 있다. 전자 장치 100과 외부 전자 장치 205 사이의 연결(connection)은, 실시 예들에 따라, 유선(by wire)일 수도 있고 무선(by wireless)일 수도 있다.
또한, 전자 장치 100과 외부 전자 장치 205 사이의 통신 경로(communication path)는, 다양한 방식(scheme)으로 설정될 수 있다. 일부 실시 예들에서, 전자 장치 100과 외부 전자 장치 205 사이의 통신 경로는 릴레이 노드(relay node)가 요구되지 않는 직접 통신 경로(direct communication path)일 수 있다. 예를 들면, 전자 장치 100은 블루투스(bluetooth), BLE(bluetooth low energy), LTE(long term evolution) D2D(device-to-device), Wi-Fi(wireless fidelity) 다이렉트(direct) 등과 같은 기법을 통해 외부 전자 장치 205와 통신할 수 있다. 다른 일부 실시 예들에서, 전자 장치 100과 외부 전자 장치 205 사이의 통신 경로는 기지국(base station), AP(access point) 등과 같은 릴레이 노드를 통해 신호가 송신되거나 수신되는 통신 경로일 수 있다. 다시 말해, 전자 장치 100은 릴레이 노드를 통해 외부 전자 장치 205와 연결될 수 있다. 예를 들면, 전자 장치 100은 LTE와 같은 셀룰러 통신 기법 또는 Wi-Fi 기법을 통해 외부 전자 장치 205와 통신할 수 있다.
전자 장치 100은 미러링(mirroring), 캐스팅(casting) 등을 위한 어플리케이션 또는 프로그램을 통해 외부 전자 장치 205와 통신을 수립할 수 있다.
도 2를 참조하면, 외부 전자 장치 205와 화면 공유를 위한 통신을 수립한 전자 장치 100은 객체 206을 표시할 수 있다. 객체 206은, 전자 장치 100이 외부 전자 장치 205과 통신을 수립하는 것에 기반하여 생성될 수 있다. 전자 장치 100은 생성된 객체 206을 디스플레이부 120을 통해 표시할 수 있다.
객체 206은 전자 장치 100이 화면 공유를 위해 외부 전자 장치 205와 통신을 수립함을 나타낼 수 있다. 예를 들면, 객체 206은, 전자 장치 100이 외부 전자 장치 205와 통신을 수립함을 나타내기 위하여, 외부 전자 장치의 이미지를 포함할 수 있다. 하지만, 이에 한정되지 않는다.
객체 206은 전자 장치 100과 외부 전자 장치 205 사이의 화면 공유를 보조하기 위한 다양한 기능(function)들을 제공할 수 있다. 객체 206은 전자 장치 100과 외부 전자 장치 205 사이의 화면 공유 상태에 따라 다양한 형태(shape)들로 변경될 수 있다. 객체 206이 제공하는 다양한 기능들과 객체 206의 다양한 형태들은, 이하 설명되는 도면 및 그에 대한 설명을 통해 후술될 것이다.
전자 장치 100은 화면 207을 표시할 수 있다. 예를 들면, 전자 장치 100은 배경화면(wall paper)으로 화면 207을 표시할 수 있다. 다른 예를 들면, 전자 장치 100은 특정 어플리케이션의 실행 화면으로 화면 207을 표시할 수 있다. 하지만, 이에 한정되지 않는다. 화면 207은 컨텐츠(content) A를 포함할 수 있다. 상기 컨텐츠 A는 이미지, 동영상, 아이콘 등과 같은 객체(object), 사용자 인터페이스(userinterface) 등을 포함할 수 있다. 하지만, 이에 한정되지 않는다.
일부 실시 예들에서, 객체 206은 화면 207 위에 플로팅(floated on)될 수 있다. 객체 206이 화면 207에 플로팅된다는 것은, 객체 206이 화면 207에 중첩되며 객체 206이 화면 207보다 상위의 레이어(layer)에 위치된다는 것을 나타낼 수 있다. 또한(furthermore), 객체 206이 화면 207에 플로팅된다는 것은, 객체 206이 객체 206에 대한 입력(input)에 따라 화면 207 위의 다양한 위치들로 이동될 수 있다는 것을 나타낼 수 있다. 예를 들면, 객체 206은, 드래그(drag) 입력 또는 슬라이드(slide) 입력과 같이 객체 206을 이동시키기 위한 사용자의 입력에 대응하여, 화면 207 위의 특정 위치로 이동할 수 있다.
이하, 외부 전자 장치 205 등과 화면을 공유하기 위하여 전자 장치 100에서 표시되는 객체 206은 핀 모드(pin mode)를 위한 객체로 지칭될 수 있다. 핀 모드에 대한 상세한 설명은, 이하에서 후술될 것이다.
전자 장치 100은, 전자 장치 100의 화면 207을 외부 전자 장치 205와 공유하기 위하여, 데이터를 송신할 수 있다. 예를 들면, 전자 장치 100으로부터 외부 전자 장치 205에게 송신되는 데이터는 컨텐츠 A를 화면 207의 구성(configuration)과 같은(equal to) 구성으로 외부 전자 장치 205에서 표시하기 위한 정보를 포함할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 송신되는 데이터를 수신할 수 있다.
외부 전자 장치 205은 화면 208을 표시할 수 있다. 화면 208은 전자 장치 100으로부터 수신된 데이터에 기반하여 외부 전자 장치 205의 디스플레이를 통해 표시될 수 있다. 화면 208은 화면 207에 대응할 수 있다. 다시 말해, 전자 장치 100은 화면 207에 대한 화면 미러링(screen mirroring)을 수행할 수 있다.
일부 실시 예들에서, 핀 모드를 위한 객체 206은, 전자 장치 100의 화면 미러링에도 불구하고, 외부 전자 장치 205의 디스플레이에서 표시되지 않을 수 있다. 예를 들면, 핀 모드를 위한 객체 206은, 전자 장치 100의 화면 미러링에도 불구하고, 화면 208을 보는 사용자의 몰입(concentration)을 위해, 외부 전자 장치 205의 디스플레이에서 표시되지 않을 수 있다.
전자 장치 100은, 화면 207을 화면 211으로 전환할 수 있다. 전자 장치 100은, 사용자의 입력 또는 전자 장치 100의 상태의 변화에 기반하여, 화면 207을 화면 211로 전환할 수 있다.
예를 들어, 화면 207이 제1 어플리케이션과 관련된다고 하자. 전자 장치 100은, 사용자의 입력 또는 전자 장치 100의 상태의 변화에 기반하여, 제1 어플리케이션의 상태를 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 변경할 수 있다. 여기서, 포어그라운드 상태는, 디스플레이부 120을 통해 화면을 표시하는 상태를 나타낼 수 있다. 여기서, 백그라운드 상태는, 어플리케이션은 실행 중이지만, 디스플레이 120을 통해 화면을 표시하는 것은 중단한(또는 종료) 상태를 나타낼 수 있다. 제1 어플리케이션의 상태가 포어그라운드 상태에서 백그라운드 상태로 변경되는 것에 대응하여, 전자 장치 100은 화면 207의 레이어보다 하위 레이어에 위치된 화면 211을 표시할 수 있다. 화면 211은 배경화면일 수도 있고, 제2 어플리케이션과 관련된 화면일 수도 있다. 화면 211은 컨텐츠 B를 포함할 수 있다. 컨텐츠 B는 이미지, 동영상, 아이콘 등과 같은 객체, 사용자 인터페이스 등을 포함할 수 있다. 하지만, 이에 한정되지 않는다.
일부 실시 예들에서, 핀 모드를 위한 객체 206은 화면 211 위에 플로팅될 수 있다. 예를 들면, 객체 206은 화면 211의 레이어보다 상위의 레이어에 배치될 수 있다. 다른 예를 들면, 객체 206은, 사용자의 입력에 따라 화면 211 위의 다른 위치들로 이동될 수 있다.
전자 장치 100은, 전자 장치 100의 변경된 표시 상태를 외부 전자 장치 205에서 표시하기 위한 데이터를 외부 전자 장치 205에게 송신할 수 있다. 예를 들면, 전자 장치 100은 컨텐츠 B를 화면 211의 구성과 같은(equal to) 구성으로 외부 전자 장치 205에서 표시하기 위해, 데이터를 송신할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 송신되는 데이터를 수신할 수 있다.
외부 전자 장치 205는 화면 208로부터 전환된 화면 212를 표시할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 수신된 데이터에 기반하여 화면 212를 표시할 수 있다. 화면 212는 화면 211에 대응할 수 있다.
일부 실시 예들에서, 핀 모드를 위한 객체 206은, 외부 전자 장치 205의 디스플레이에서 표시되지 않을 수 있다.
전자 장치 100은 핀 모드를 위한 객체 206에 대한 입력 213을 수신할 수 있다. 전자 장치 100은 화면 211 위에 플로팅된 핀 모드를 위한 객체 206에 대한 입력 213을 수신할 수 있다. 여기서, 입력 213은, 핀 모드에 진입(enter)하기 위한 입력일 수 있다. 일부 실시 예들에서, 입력 213은, 핀 모드에 추가적으로 진입하기 위한 입력일 수 있다. 전자 장치 100은, 핀 모드에 추가적으로 진입하기 위한 입력을 수신하는 것에 기반하여 복수의 어플리케이션들을 핀 모드로 설정할 수 있다. 핀 모드에 대한 구체적인 정의 및 복수의 어플리케이션들을 핀 모드로 설정하는 동작은 후술될 것이다.
입력 213의 속성(attribute)은 다양할 수 있다. 예를 들면, 입력 213은 터치일 수 있다. 다른 예를 들면, 입력 213은 롱 터치일 수 있다. 또 다른 예를 들면, 입력 213은 더블 탭 또는 호버링일 수 있다. 또 다른 예를 들면, 입력 213은 통상적인 입력의 세기와 구별되는 세기를 가지는 포스 터치일 수 있다. 하지만, 이에 한정되지 않는다.
여기서, 핀 모드는, 전자 장치 100이 표시하는 다양한 화면들 중 적어도 일부만을 외부 전자 장치 205에서 표시하기 위한 모드일 수 있다. 또한(furthermore), 핀 모드는, 전자 장치 100에서 실행 중인 복수의 어플리케이션들 중에서 특정 어플리케이션과 관련된 화면만을 외부 전자 장치 205에서 표시하기 위한 모드일 수 있다. 또한, 핀 모드는, 전자 장치 100에서 야기되는 디스플레이 기능과 관련된 복수의 신호들 중에서 일부 신호만을 외부 전자 장치 205에게 송신하기 위한 모드일 수 있다. 또한, 핀 모드는, 전자 장치 100이 외부 전자 장치 205을 통해 표시하는 화면을 전자 장치 100이 표시 중인 화면과 구별 또는 분리하기 위한 모드일 수 있다. 또한, 핀 모드는, 외부 전자 장치 205의 디스플레이 동작을 제어하기 위한 모드일 수 있다. 또한, 핀 모드는, 전자 장치 100이, 전자 장치 100에서 현재 표시 중인 화면, 화면의 상태(state), 또는 화면의 속성(attribute)을, 이후 전자 장치 100의 표시 상태의 변경과 관계 없이, 외부 전자 장치 205에서 유지하기 위한 모드일 수 있다. 다만, 이는 정지(pause)와 다른 개념임을 유의하여야 한다. 예를 들어, 전자 장치 100이 동영상을 재생하는 화면이 핀 모드로 설정된 후, 전자 장치 100가 표시하는 화면이 인터넷 브라우저(internet browser)로 전환되었다고 가정하자. 이러한 경우, 외부 전자 장치 205는 전환된 화면인 인터넷 브라우저를 표시하는 것이 아니라, 동영상을 재생하는 화면을 표시할 수 있다. 또한, 외부 전자 장치 205에서 표시되는 동영상을 재생하는 화면은, 사용자의 별도의 입력이 없는 한, 진행 중인(in progress) 상태를 유지할 수 있다. 다시 말해, 외부 전자 장치 205는, 전자 장치 100의 화면이 인터넷 브라우저로 전환되는 것과 독립적으로, 동영상을 재생하는 화면을 표시할 수 있다. 즉, 전자 장치 100을 보는 사용자는 전자 장치 100의 디스플레이부 120에서 인터넷 브라우저를 이용할 수 있고, 외부 전자 장치 205를 보는 사용자는 외부 전자 장치 205의 디스플레이부에서 동영상을 시청할 수 있다.
전자 장치 100은 입력 213을 수신하는 것에 기반하여 핀 모드를 위한 객체 206을 업데이트하여 핀 모드를 위한 객체 221을 표시할 수 있다. 다시 말해, 전자 장치 100은, 입력 213을 수신하는 것에 기반하여, 핀 모드를 위한 객체 206의 형상을 변경함으로써, 핀 모드를 위한 객체 206을 핀 모드를 위한 객체 221로 업데이트할 수 있다.
핀 모드를 위한 객체 221은, 핀 모드를 위한 객체 206보다, 화면 211과 연관된 제2 어플리케이션을 나타내기 위한 요소(element)를 더 포함할 수 있다. 핀 모드를 위한 객체 221은, 핀 모드를 위한 객체 206보다, 제2 어플리케이션이 핀됨(pinned)을 나타내기 위한 요소를 더 포함할 수 있다. 핀 모드를 위한 객체 221은, 핀 모드를 위한 객체 206보다, 제2 어플리케이션과 관련된 화면 211이 외부 전자 장치 205에서 고정됨(fixed)을 나타내기 위한 요소를 더 포함할 수 있다. 핀 모드를 위한 객체 221은 핀 모드를 위한 객체 206보다, 제2 어플리케이션과 관련된 표시 데이터만이 외부 전자 장치 205에게 송신됨을 나타내기 위한 요소를 더 포함할 수 있다.
여기서, 요소는, 실시 예들에 따라, 다양한 포맷(format)들로 표시될 수 있다. 예를 들면, 요소는, 도 2에 도시된 바와 같이, 제2 어플리케이션(예: 동영상 재생 어플리케이션)을 나타내는 뱃지(badge) 포맷으로 핀 모드를 위한 객체 221에 포함될 수 있다.
전자 장치 100은 외부 전자 장치 205에게 화면 222를 외부 전자 장치 205에서 표시하기 위한 데이터를 송신할 수 있다. 예를 들면, 전자 장치 100은, 제2 어플리케이션과 관련된 컨텐츠 B를 화면 222의 구성과 같은(equal to) 구성으로 외부 전자 장치 205에서 표시하기 위해, 데이터를 송신할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 송신되는 데이터를 수신할 수 있다.
외부 전자 장치 205는 전자 장치 100으로부터 수신된 데이터에 기반하여 화면 223을 표시할 수 있다. 화면 223은 화면 222에 대응할 수 있다. 일부 실시 예들에서, 핀 모드를 위한 객체 221은 화면 223에 포함되지 않을 수 있다.
전자 장치 100은 화면 222를 화면 231로 전환할 수 있다. 전자 장치 100은 사용자의 입력 또는 전자 장치 100의 상태의 변화에 기반하여, 화면 222를 화면 231로 전환할 수 있다. 전자 장치 100은, 사용자의 입력 또는 전자 장치 100의 상태의 변화 등에 기반하여, 화면 222와 관련된 제2 어플리케이션의 상태를 포어그라운드 상태에서 백그라운드 상태로 전환할 수 있다. 제2 어플리케이션의 상태가 전환되는 것에 대응하여, 전자 장치 100은 화면 222의 레이어보다 하위 레이어에 배치된 화면 231을 표시할 수 있다. 예를 들면, 화면 231은 배경화면일 수 있다. 다른 예를 들면, 화면 231은 제1 어플리케이션 또는 제3 어플리케이션과 관련된 화면일 수 있다. 화면 231은 컨텐츠 C를 포함할 수 있다. 컨텐츠 C는 이미지, 동영상, 아이콘 등과 같은 객체, 사용자 인터페이스 등을 포함할 수 있다. 하지만, 이에 한정되지 않는다.
일부 실시 예들에서, 핀 모드를 위한 객체 221은 화면 231 위에 플로팅될 수 있다. 예를 들면, 핀 모드를 위한 객체 221은 화면 231의 레이어보다 상위의 레이어에서 위치될 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 221은, 사용자의 입력에 따라 화면 231 위의 다른 위치들로 이동할 수 있다.
전자 장치 100은, 전자 장치 100의 현재 화면이 화면 222에서 화면 231으로 전환됨에도 불구하고, 화면 222와 관련된 데이터를 외부 전자 장치 205에게 송신할 수 있다. 전자 장치 100은, 전자 장치 100의 화면이 화면 222에서 화면 231으로 전환됨과 관계없이, 화면 222에 대응하는 화면 223을 지속적으로 외부 전자 장치 205에서 표시하기 위하여, 제2 어플리케이션과 관련된 데이터를 송신할 수 있다. 다시 말해, 전자 장치 100은, 핀 모드로 설정된 제2 어플리케이션에 대한 데이터를 외부 전자 장치 205에게 송신할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 데이터를 수신할 수 있다.
외부 전자 장치 205는, 수신된 데이터에 기반하여, 화면 223을 표시할 수 있다. 외부 전자 장치 205는, 전자 장치 100의 현재 화면이 화면 222에서 화면 231으로 전환되었음에도 불구하고, 화면 231에 대응하지 않고 화면 222에 대응하는 화면 223을 표시할 수 있다. 다시 말해, 외부 전자 장치 205는, 핀 모드를 통해 전자 장치 100과 연결된 경우, 전자 장치 100이 현재 표시하고 있는 화면과 관계없이, 핀 모드로 설정된 어플리케이션과 관련된 화면을 표시할 수 있다.
도 2는 전자 장치 100이 잠금 해제 상태에서 동작하는 것을 예시하고 있지만, 이는 설명을 위한 것이다. 일부 실시 예들에서, 전자 장치 100은 잠금 상태에서 동작하는 경우에도 도 2에 도시된 동작들과 유사한 동작을 수행할 수 있다. 예를 들면, 전자 장치 100은, 핀 모드로 설정된 경우, 잠금 화면 상에 플로팅되는 핀 모드를 위한 객체를 표시할 수 있다. 전자 장치 100은, 잠금 화면 위에 플로팅된 핀 모드를 위한 객체에 대한 적어도 하나의 입력을 수신하는 것에 기반하여, 적어도 하나의 입력에 대응하는 적어도 하나의 기능을 수행할 수 있다. 상기 적어도 하나의 기능에 대한 예시는 후술될 것이다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은, 핀 모드를 통해, 외부 전자 장치 205와 서로 다른 화면을 표시할 수 있다. 다시 말해, 전자 장치 100은, 핀 모드를 위한 객체를 제공함으로써, 외부 전자 장치 205와 독립적으로 화면을 표시 또는 제어할 수 있다.
예를 들어, 전자 장치 100의 사용자가 전자 장치 100에 저장된 어린이용 동영상을 외부 전자 장치 205인 TV에서 아이(kid)에게 제공하고 있다고 가정하자. 전자 장치 100의 사용자는, 전자 장치 100의 디스플레이를 통해 표시되는 핀 모드를 위한 객체를 이용함으로써, 어린이용 동영상을 외부 전자 장치 205를 통해 시청하는 아이를 방해하지 않고, 전자 장치 100을 이용하여 인터넷 서핑(surfing) 등과 같은 다른 작업을 수행할 수 있다. 즉, 다양한 실시 예들에 따른 전자 장치 100은, 핀 모드 또는 핀 모드를 위한 객체를 제공함으로써, 전자 장치 100의 사용자에게 보다 높은 자유도를 제공할 수 있다.
다른 예를 들어, 전자 장치 100의 사용자가 전자 장치 100에 저장된 발표 자료를 외부 전자 장치 205를 통해 복수의 청중들에게 제공하고 있다고 가정하자. 전자 장치 100의 사용자는, 복수의 청중들에게 사생활을 노출하지 않기 위해 외부 전자 장치 205에서 발표 자료를 표시하는 것은 유지한 상태에서, 전자 장치 100에 수신되는 이메일, SMS(short message service) 메시지, 메신져(messenger)의 메시지를 확인하기 위해 핀 모드 또는 핀 모드를 위한 객체를 이용할 수 있다. 즉, 다양한 실시 예들에 따른 전자 장치 100은, 전자 장치 100의 사용자의 프라이버시가 보장되도록, 핀 모드 또는 핀 모드를 위한 객체를 제공할 수 있다.
하지만, 이에 한정되지 않는다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치는, 명령어(instruction)들을 저장하는 메모리(memory)와, 디스플레이부(display unit)와, 통신부(communication unit)와, 상기 메모리와 전기적으로 연결되고, 상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅되고(floated on) 제1 형상을 가지는 객체를 표시하고, 상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하고, 상기 표시된 객체에 대한 입력을 수신하는 것에 기반하여, 상기 제1 형상으로부터 변경된 제2 형상을 가지는 상기 객체를 표시하고, 상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함할 수 있다.
다양한 실시 예들에서, 상기 적어도 하나의 프로세서는, 상기 객체에 대한 다른 입력을 수신하는 것에 대응하여, 상기 객체를 통해 실행할 수 있는 기능들을 각각 나타내는 복수의 아이템들을 표시하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되고, 상기 복수의 아이템들은, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 상기 포어그라운드 상태로 전환하기 위한 기능을 나타내는 아이템, 상기 데이터의 송신을 중단하기 위한 기능을 나타내는 아이템, 상기 전자 장치에 연결된 장치를 다른 외부 전자 장치로 변경하기 위한 기능을 나타내는 아이템, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 제어하기 위한 아이템, 또는 상기 외부 전자 장치와의 연결을 중단하기 위한 기능을 나타내는 아이템 중 적어도 하나를 포함할 수 있다. 상기 복수의 아이템들은, 상기 다른 입력을 수신하는 것에 대응하여 상기 객체 옆에(by) 표시되는 메시지 창(message window) 내에 포함될 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 화면이 컨텐츠(content)의 재생과 관련된 경우, 상기 외부 전자 장치에서 상기 컨텐츠가 재생되고 있는 시점(timing)을 나타내기 위한 요소를 포함할 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 어플리케이션을 나타내기 위한 컬러(color)를 가지는 윤곽(contour)을 포함할 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 어플리케이션을 나타내기 위한 이미지를 포함할 수 있다.
다양한 실시 예들에서, 상기 제1 형상을 가지는 객체는, 상기 외부 전자 장치와의 연결을 수립(establish)하는 것에 기반하여, 생성될 수 있다.
다양한 실시 예들에서, 상기 입력은, 상기 전자 장치 내에서 실행 중인 복수의 어플리케이션들 중에서 상기 제1 어플리케이션과 관련된 상기 제1 화면만을 상기 외부 전자 장치에서 표시하는 핀 모드(pin mode)에 진입하기 위해 이용될 수 있다.
다양한 실시 예들에서, 상기 적어도 하나의 프로세서는, 상기 제2 형상을 가지는 상기 객체에 대한 다른 입력을 수신하는 것에 기반하여, 상기 외부 전자 장치에서 표시되고 있는 제1 화면을 표시하는 윈도우(window)를 표시하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되고, 상기 윈도우는, 상기 제2 화면 위에 중첩될 수 있다. 또한, 상기 적어도 하나의 프로세서는, 상기 윈도우에 대한 제1 입력을 수신하는 것에 기반하여 상기 윈도우의 사이즈를 변경하고, 상기 윈도우에 대한 제2 입력을 수신하는 것에 기반하여 상기 윈도우의 위치를 변경하기 위해 상기 저장된 명령어들을 실행하도록 더 설정될 수 있다.
또한, 상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치는, 명령어(instruction)들을 저장하는 메모리(memory)와, 디스플레이부(display unit)와, 통신부(communication unit)와, 상기 메모리와 전기적으로 연결되고, 백그라운드(background) 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는(floated on) 객체를 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함할 수 있다.
도 3은 다양한 실시 예들에 따른 전자 장치의 동작의 예를 도시한다. 이러한 동작은, 도 1에 도시된 전자 장치 100 또는 전자 장치 100에 포함된 구성 요소들 중 적어도 하나(예: 제어부 110)에 의해 수행될 수 있다.
도 3을 참조하면, 동작 301에서, 전자 장치 100은 제1 어플리케이션과 관련된 제1 화면 위에 핀 모드를 위한 객체를 표시하고, 제1 화면을 공유하기 위한 데이터를 외부 전자 장치 205에게 송신할 수 있다. 다시 말해, 전자 장치 100은 화면 공유를 위해 외부 전자 장치 205와 페어링된 상태에서 동작할 수 있다. 또한, 전자 장치 100은, 핀 모드로의 진입을 결정하기 위하여, 제1 화면 위에 핀 모드를 위한 객체를 표시할 수 있다. 예를 들면, 핀 모드를 위한 객체는 제1 화면 위에 플로팅될 수 있다. 또한, 전자 장치 100은, 현재 전자 장치 100에서 표시되고 있는 화면을 외부 전자 장치 205에서 표시하기 위한 데이터를 외부 전자 장치 205에게 송신할 수 있다. 다시 말해, 전자 장치 100은, 외부 전자 장치 205와 제1 화면에 대한 화면 미러링을 수행할 수 있다.
예를 들면, 전자 장치 100은 컨텐츠 A를 포함하는 화면 301a 위에 플로팅된 핀 모드를 위한 객체 301b를 표시할 수 있다. 화면 301a 또는 컨텐츠 A는 제1 어플리케이션(예: 문자 메시지 어플리케이션)과 연관될 수 있다. 객체 301b의 최초(initial) 표시 위치는 다양하게 설정될 수 있다. 예를 들면, 객체 301b의 최초 표시 위치는, 사용자의 설정(setting) 또는 전자 장치 100의 기본 설정에 따른 고정된 위치일 수 있다. 다른 예를 들면, 객체 301b의 최초 표시 위치는, 전자 장치 100의 표시 상태에 따라 적응적으로 변경될 수 있다. 하지만, 이에 한정되지 않는다. 도 3에 도시하지 않았으나, 전자 장치 100과 페어링된 외부 전자 장치 205는 전자 장치 100에서 표시되고 있는 화면 301a의 구성(configuration)과 대응하는 구성을 가지는 화면을 표시할 수 있다.
동작 302에서, 전자 장치 100은 표시된 객체에 대한 입력을 수신할 수 있다. 예를 들면, 전자 장치 100은 객체 301b에 대한 터치 입력 302a를 수신할 수 있다. 전자 장치 100은 수신된 터치 입력 302a를 검출할 수 있다. 여기서, 터치 입력 302a는 제1 어플리케이션을 핀 모드로 설정하기 위한 입력일 수 있다.
동작 303에서, 전자 장치 100은 표시된 객체의 형상을 변경할 수 있다. 예를 들면, 전자 장치 100은 객체 302a의 형상을 제1 형상에서 제2 형상으로 변경할 수 있다. 다시 말해, 전자 장치 100은 객체 302a를 업데이트함으로써, 객체 303a를 생성하고 표시할 수 있다. 객체 303a는, 객체 302a보다 제1 어플리케이션인 문자 어플리케이션과 연관됨을 나타내기 위한 요소를 더 포함할 수 있다. 예를 들면, 객체 303a는 객체 302a보다 뱃지 포맷의 요소를 더 포함할 수 있다. 도 3의 예시에서, 뱃지 포맷의 요소는 문자 어플리케이션에 대응하는 형상(shape)을 가질 수 있다. 또한, 뱃지 포맷의 요소는 문자 어플리케이션에 대응하는 색상(color)을 가질 수 있다. 하지만 이는 설명을 위한 예시일 뿐이다. 핀 모드를 위한 객체에 포함되는 요소의 다양한 포맷들은, 이하의 도면 및 그에 대한 설명에서 후술될 것이다.
전자 장치 100은 화면 301a 위에 플로팅되는 객체 303a를 표시할 수 있다. 도 3에 도시하지 않았으나, 전자 장치 100과 페어링된 외부 전자 장치 205는 전자 장치 100에서 표시되고 있는 화면 301a의 구성(configuration)과 대응하는 구성을 가지는 화면을 표시하는 것을 유지할 수 있다.
동작 304에서, 전자 장치 100은, 제1 어플리케이션이 백그라운드 상태로 전환되는 것에 기반하여, 제1 화면을 외부 전자 장치 205에서 표시하기 위한 데이터를 송신하는 것을 유지한 상태에서 제1 화면을 제2 화면으로 전환할 수 있다. 전자 장치 100은 수신되는 입력 또는 전자 장치 100의 상태의 변경에 기반하여 제1 어플리케이션을 백그라운드 상태로 전환할 수 있다. 달리 표현하면, 전자 장치 100은 제1 어플리케이션과 관련된 제1 화면의 표시를 중단할 수 있다. 하지만, 전자 장치 100은, 제1 어플리케이션을 핀 모드로 설정하였기 때문에, 제1 화면의 표시의 중단과 관계없이, 제1 화면을 외부 전자 장치 205에서 표시하기 위한 데이터를 지속적으로 외부 전자 장치 205에게 송신할 수 있다. 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 데이터에 기반하여, 제2 화면이 아닌 핀 모드로 설정된 제1 어플리케이션과 관련된 제1 화면을 표시할 수 있다.
예를 들면, 전자 장치 100은, 화면 301a를 화면 304a로 전환할 수 있다. 전자 장치 100은, 전자 장치 100의 홈 버튼(home button)을 프레스하는 사용자의 입력에 기반하여, 화면 301a를 바탕화면인 화면 304a로 전환할 수 있다. 화면 304a는 컨텐츠 B를 포함할 수 있다. 도 3에 도시하지 않았으나, 외부 전자 장치 205는, 전자 장치 100의 표시 화면 변경과 관계없이, 화면 301a의 구성(configuration)에 대응하는 구성을 가지는 화면을 표시할 수 있다.
도 4는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 예를 도시한다. 이러한 형상을 가지는 객체는 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 4를 참조하면, 전자 장치 100은 화면 400에서 핀 모드를 위한 객체 401을 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 화면 400 위에 플로팅된 핀 모드를 위한 객체 401을 표시할 수 있다.
핀 모드를 위한 객체 401은 전자 장치 100과 페어링된 외부 전자 장치 205의 종류에 따라 다양한 형상들로 표시될 수 있다. 전자 장치 100은 전자 장치 100과 연결된 외부 전자 장치 205의 종류에 따라 핀 모드를 위한 객체 401의 형상을 적응적으로 변경할 수 있다.
예를 들어, 전자 장치 100과 화면을 공유하기 위해 연결된 외부 전자 장치 205가 TV인 경우, 핀 모드를 위한 객체 401은 객체 402와 같은 형상을 가질 수 있다. 즉, 핀 모드를 위한 객체 401은 객체 402과 같이 TV를 나타내는 이미지를 포함할 수 있다.
다른 예를 들어, 전자 장치 100과 화면을 공유하기 위해 연결된 외부 전자 장치 205가 냉장고인 경우, 핀 모드를 위한 객체 401은 객체 403과 같은 형상을 가질 수 있다. 즉, 핀 모드를 위한 객체 401은 객체 403과 같이 냉장고를 나타내는 이미지를 포함할 수 있다.
또 다른 예를 들어, 전자 장치 100과 화면을 공유하기 위해 연결된 외부 전자 장치 205가 노트북(notebook 또는 랩탑 컴퓨터(laptop computer))인 경우, 핀 모드를 위한 객체 401은 객체 404와 같은 형상을 가질 수 있다. 즉, 핀 모드를 위한 객체 401은, 객체 404와 같이 노트북을 나타내는 이미지를 포함할 수 있다.
또 다른 예를 들어, 전자 장치 100과 화면을 공유하기 위해 연결된 외부 전자 장치 205가 테블릿 PC(tablet personal computer)인 경우, 핀 모드를 위한 객체 401은 객체 405와 같이 테블릿 PC를 나타내는 이미지를 포함할 수 있다.
하지만, 핀 모드를 위한 객체 401의 형상은 이에 제한되지 않는다. 예를 들면, 도 4에 도시하지 않았지만, 핀 모드를 위한 객체 401은 전자 장치 100과 연결된 외부 전자 장치 205의 유형을 나타내는 이미지 또는 단어(word)를 포함하는 말풍선 등과 세트로 구성될 수 있다. 이러한 경우, 외부 전자 장치 205의 유형을 나타내는 이미지 또는 단어(word)를 포함하는 말풍선은 항상 표시될 수도 있고, 특정 조건(예: 객체 401에 대한 호버링 입력)을 충족하는 경우 표시될 수도 있다.
또한, 도 4는, 특정 어플리케이션을 핀 모드로 설정하기 전의 핀 모드를 위한 객체 401의 형상을 예시하는 도면일 수도 있다. 특정 어플리케이션을 핀 모드로 설정한 후의 핀 모드를 위한 객체도 도 4에 도시된 예들과 유사한 형상을 가질 수 있음을 유의하여야 한다.
도 5는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 다른 예를 도시한다. 이러한 형상을 가지는 객체는 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 5를 참조하면, 전자 장치 100은 화면 500에서 핀 모드를 위한 객체 501을 표시할 수 있다. 전자 장치 100은 외부 전자 장치 205와 화면을 공유하기 위하여 외부 전자 장치 205와 연결된 상태에서 동작할 수 있다. 또한, 전자 장치 100은 외부 전자 장치 205와의 화면을 공유할 대상(target)을 제1 어플리케이션과 관련된 화면으로 설정한 상태에서 동작할 수 있다. 다시 말해, 전자 장치 100은 제1 어플리케이션을 핀 모드를 설정한 상태에서 외부 전자 장치 205와 연결된 전자 장치일 수 있다. 전자 장치 100은 화면 500 위에 플로팅된 핀 모드를 위한 객체 501을 표시할 수 있다.
핀 모드를 위한 객체 501은 제1 어플리케이션이 핀 모드로 설정되었음 나타내기 위한 요소를 포함할 수 있다.
일부 실시 예들에서, 핀 모드를 위한 객체 501은, 객체 502a 내지 502c와 같이, 핀 모드로 설정된 제1 어플리케이션을 나타내는 이미지 및/또는 문구를 포함하는 윈도우(예: 말풍선)을 요소로 포함할 수 있다. 예를 들면, 핀 모드를 위한 객체 501은 객체 502a와 같이, 핀 모드로 설정된 메시지 어플리케이션을 나타내는 이미지 및/또는 문구(message pinned)를 포함하는 윈도우를 요소로 포함할 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 502b와 같이, 핀 모드로 설정된 동영상 어플리케이션을 나타내는 이미지 및/또는 문구(movie pinned)를 포함하는 윈도우를 요소로 포함할 수 있다. 또 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 502c와 같이, 핀 모드로 설정된 인터넷 브라우저를 나타내는 이미지 및/또는 문구(browser pinned)를 포함하는 윈도우를 요소로 포함할 수 있다.
다른 일부 실시 예들에서, 핀 모드를 위한 객체 501은, 객체 503a 내지 503c와 같이, 핀 모드로 설정된 제1 어플리케이션을 나타내며, 객체 501에 중첩되는 이미지를 요소로 포함할 수 있다. 달리 표현하면, 핀 모드를 위한 객체 501은, 객체 503a 내지 503c와 같이, 제1 어플리케이션의 아이콘에 대응하는 형상을 가지는 요소를 뱃지 포맷으로 포함할 수 있다. 예를 들면, 핀 모드를 위한 객체 501은, 객체 503a와 같이, 핀 모드로 설정된 메시지 어플리케이션을 나타내는 요소를 뱃지 포맷으로 포함할 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 503b와 같이, 핀 모드로 설정된 동영상 어플리케이션을 나타내는 요소를 뱃지 포맷으로 포함할 수 있다. 또 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 503c와 같이, 핀 모드로 설정된 인터넷 브라우져를 나타내는 요소를 뱃지 포맷으로 포함할 수 있다.
또 다른 일부 실시 예들에서, 핀 모드를 위한 객체 501은, 객체 504a 내지 504c와 같이, 색상을 가지는 요소를 이용하여 제1 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 다시 말해, 핀 모드를 위한 객체 501은, 핀 모드로 설정된 어플리케이션의 유형에 따라, 객체 501의 색상 중 전부 또는 일부를 변경할 수 있다. 예를 들면, 핀 모드를 위한 객체 501은, 객체 504a와 같이, 메시지 어플리케이션의 아이콘의 색상에 대응하는 색상(예: 주황색)을 가지는 윤곽(contour)을 요소로 포함함으로써, 메시지 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 504b와 같이, 동영상 어플리케이션의 아이콘의 색상에 대응하는 색상(예: 빨간색)을 가지는 윤곽을 요소로 포함함으로써, 동영상 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 또 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 504c와 같이, 인터넷 브라우저의 아이콘의 색상에 대응하는 색상(예: 파란색)을 가지는 윤곽을 요소로 포함함으로써, 인터넷 브라우져가 핀 모드로 설정됨을 나타낼 수 있다.
또 다른 일부 실시 예들에서, 핀 모드를 위한 객체 501은, 객체 505a 내지 505c와 같이, 핀 모드를 위한 객체 501의 내부에 핀 모드로 설정된 제1 어플리케이션의 아이콘을 축소된 사이즈로 표시함으로써, 제1 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 여기서, 객체 501의 내부에 표시되는 축소된 사이즈를 가지는 제1 어플리케이션의 아이콘은 핀 모드임을 나타내는 핀(pin) 이미지와 중첩되어 표시될 수 있다. 여기서 핀 이미지의 크기는, 디자인의 선택에 따라 변경될 수 있다. 예를 들면, 핀 모드를 위한 객체 501은, 객체 505a와 같이, 축소된 사이즈를 가지는 메시지 어플리케이션의 아이콘과 핀 이미지를 객체 501의 내부에 표시함으로써, 메시지 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 505b와 같이, 축소된 사이즈를 가지는 동영상 어플리케이션의 아이콘과 핀 이미지를 객체 501의 내부에 표시함으로써, 동영상 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 또 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 505c와 같이, 축소된 사이즈를 가지는 인터넷 브라우저의 아이콘과 핀 이미지를 객체 501의 내부에 표시함으로써, 인터넷 브라우저가 핀 모드로 설정됨을 나타낼 수 있다.
또 다른 일부 실시 예들에서, 핀 모드를 위한 객체 501은, 객체 506a 내지 506c와 같이, 핀 모드를 위한 객체 501의 내부에 핀 모드로 설정된 제1 어플리케이션의 아이콘을 축소된 사이즈로 표시하고, 객체 501의 주변에(around) 핀 모드를 나타내는 핀 이미지를 표시함으로써, 제1 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 예를 들면, 핀 모드를 위한 객체 501은, 객체 506a와 같이, 축소된 사이즈를 가지는 메시지 어플리케이션의 아이콘을 핀 모드를 위한 객체 501의 내부에 표시하고, 객체 501의 주변에서 핀 이미지를 표시함으로써, 메시지 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 506b와 같이, 축소된 사이즈를 가지는 동영상 어플리케이션의 아이콘을 핀 모드를 위한 객체 501의 내부에 표시하고, 객체 501의 주변에서 핀 이미지를 표시함으로써, 동영상 어플리케이션이 핀 모드로 설정됨을 나타낼 수 있다. 또 다른 예를 들면, 핀 모드를 위한 객체 501은, 객체 506c와 같이, 축소된 사이즈를 가지는 인터넷 브라우저의 아이콘을 핀 모드를 위한 객체 501의 내부에 표시하고, 객체 501의 주변에서 핀 이미지를 표시함으로써, 인터넷 브라우저가 핀 모드로 설정됨을 나타낼 수 있다.
상술한 바와 같이, 도 5는 핀 모드로 설정된 어플리케이션을 핀 모드를 위한 객체에서 나타내기 위한 다양한 방법들을 예시한다. 하지만, 핀 모드로 설정된 어플리케이션을 핀 모드를 위한 객체에서 나타내는 방법은, 이에 한정되지 않음을 유의하여야 한다. 다시 말해, 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 다양한 시각 효과(visual effect)들이 핀 모드를 위한 객체에 적용될 수 있다.
도 6은 다양한 실시 예들에 따른 핀 모드를 위한 객체의 형상의 또 다른 예를 도시한다. 이러한 형상을 가지는 객체는 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 6을 참조하면, 전자 장치 100은, 외부 전자 장치 205와 화면을 공유하기 위하여, 외부 전자 장치 205와 연결된 상태에서 동작할 수 있다. 또한, 전자 장치 100은 동영상 등과 같이 지정된 시간(예: 총 재생 시간) 이내에서 현재 진행 시점(timing)을 가지는 어플리케이션과 관련된 화면을 외부 전자 장치 205와 공유할 수 있다. 예를 들면, 전자 장치 100은, 동영상 어플리케이션을 핀 모드로 설정한 상태에서 동작할 수 있다. 전자 장치 100은, 화면 600에서 동영상 어플리케이션과 연관되는 핀 모드를 위한 객체 601을 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 화면 600 위에 플로팅된 핀 모드를 위한 객체 601을 표시할 수 있다.
핀 모드를 위한 객체 601은 외부 전자 장치 205에서 표시되고 있는 동영상 어플리케이션과 관련된 컨텐츠의 현재 재생 시점이 언제인지를 나타내기 위한 요소를 포함할 수 있다.
일부 실시 예들에서, 핀 모드를 위한 객체 601은, 객체 602와 같이, 핀 모드를 위한 객체 601의 윤곽을 따라(along) 표시되고, 가변적인 길이를 가지는 상태 바를 요소로 포함함으로써, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 현재 재생 시점이 언제인지(즉, 재생 진행 상황)를 나타낼 수 있다. 이러한 경우, 상태 바의 길이는, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 총 재생 시간과 현재까지의 컨텐츠의 재생 시간 사이의 비율(rate)에 기반하여 결정될 수 있다. 예를 들면, 외부 전자 장치 205에서 표시되는 컨텐츠가 절반 정도 재생된 경우, 핀 모드를 위한 객체 601의 윤곽을 따라 표시되는 상태 바의 형상은, 반원일 수 있다. 다른 예를 들면, 외부 전자 장치 205에서 표시되는 컨텐츠의 재생이 완료된 경우, 핀 모드를 위한 객체 601의 윤곽을 따라 표시되는 상태 바의 형상은 원일 수 있다. 컨텐츠의 재생이 완료된 경우, 핀 모드를 위한 객체 601은 외부 전자 장치 205에서 컨텐츠의 재생이 완료됨을 나타내기 위한 시각 효과(visual effect)를 더 표시할 수 있다.
일 실시 예에서, 전자 장치 100은, 핀 모드를 위한 객체 601의 윤곽을 따라 표시되는 상태 바에 대한 입력을 수신하는 것에 기반하여, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 재생 시점을 조절할 수 있다. 예를 들어, 전자 장치 100이 핀 모드를 위한 객체 601의 윤곽을 따라 표시되는 상태 바를 반 시계 방향으로 드래그하는 입력을 수신하는 경우, 전자 장치 100은 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 재생 시점을 드래그의 길이에 대응하는 시점만큼 되감을 수 있다(rewind). 다른 예를 들어, 전자 장치 100이 핀 모드를 위한 객체 601의 윤곽을 따라 표시되는 상태 바를 시계 방향으로 드래그하는 입력을 수신하는 경우, 전자 장치 100은 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 재생 시점을 드래그의 길이에 대응하는 시점만큼 전진(forward)시킬 수 있다.
다른 일부 실시 예들에서, 핀 모드를 위한 객체 601은, 객체 603과 같이, 핀 모드를 위한 객체 601의 내부에 가변적인 길이를 가지는 상태 바를 요소로 포함함으로써, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 현재 재생 시점이 언제인지(즉, 재생 진행 상황)를 나타낼 수 있다. 이러한 경우, 상태 바의 길이는, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 총 재생 시간과 현재까지의 컨텐츠의 재생 시간 사이의 비율에 기반하여 결정될 수 있다. 예를 들면, 외부 전자 장치 205에서 표시되는 컨텐츠가 절반 정도 재생된 경우, 핀 모드를 위한 객체 601 내부에 표시되는 상태 바는, 전체에서 절반만큼 마크 업되어 표시될 수 있다. 다른 예를 들면, 외부 전자 장치 205에서 표시되는 컨텐츠의 재생이 완료된 경우, 핀 모드를 위한 객체 601 내부에 표시되는 상태 바는, 전체 모두가 마크 업되어 표시될 수 있다. 전자 장치 100은, 핀 모드를 위한 객체 601 내부에 표시되는 상태 바에 대한 입력을 수신하는 것에 기반하여, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 재생시점을 제어할 수 있다.
또 다른 일부 실시 예들에서, 핀 모드를 위한 객체 601은, 객체 604와 같이, 핀 모드를 위한 객체 601의 주변에서 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 상태를 표시하고 제어하는 윈도우를 요소로 표시함으로써, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 현재 재생 시점이 언제인지를 나타낼 수 있다. 일부 실시 예들에서, 윈도우는, 항상 표시될 수 있다. 다른 일부 실시 예들에서, 윈도우는, 특정 조건(예: 핀 모드를 위한 객체 601에 대한 호버링 입력을 수신)에 따라, 표시될 수도 있다.
여기서, 윈도우는, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 재생 시점을 나타내는 상태 바를 포함할 수 있다. 일부 실시 예들에서, 윈도우는, play/pause 버튼, rewind 버튼, forward 버튼 등과 같이 컨텐츠의 상태를 제어하기 위한 적어도 하나의 버튼을 포함할 수 있다. 또한, 도 6에서 도시하지 않았으나, 실시 예들에 따라 윈도우는, 볼륨 조절 버튼, 채널 조절 버튼(TV, 라디오 재생 등의 경우) 등을 더 포함할 수 있다.
상술한 바와 같이, 도 6은 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 상태를 핀 모드를 위한 객체에서 나타내기 위한 다양한 방법들을 예시한다. 하지만, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 상태를 나타내는 방법은, 이에 한정되지 않음을 유의하여야 한다. 다시 말해, 외부 전자 장치 205에서 표시되고 있는 컨텐츠의 상태를 나타내기 위한 다양한 시각 효과들이 핀 모드를 위한 객체에 적용될 수 있다.
도 7a는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 움직임(movement)의 예를 도시한다. 이러한 객체의 움직임은, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 야기될 수 있다.
도 7a를 참조하면, 전자 장치 100은 화면 700에서 핀 모드를 위한 객체 701을 표시할 수 있다. 핀 모드를 위한 객체 701은 화면 700 위에 플로팅될 수 있다. 핀 모드를 위한 객체 701은 영역 702에 위치될 수 있다. 다시 말해, 전자 장치 100은 화면 700 위에 플로팅된 핀 모드를 위한 객체 701를 영역 702에서 표시할 수 있다. 여기서, 화면 700은, 객체 705를 더 포함할 수 있다.
전자 장치 100은, 핀 모드를 위한 객체 701을 이동시키기 위한 입력을 수신할 수 있다. 다시 말해, 전자 장치 100은, 핀 모드를 위한 객체 701의 위치를 영역 702로부터 변경하기 위한 입력을 수신할 수 있다. 일부 실시 예들에서, 전자 장치 100은 핀 모드를 위한 객체 701에 대한 드래그 앤 릴리즈(drag and release) 입력 703을 수신할 수 있다. 핀 모드를 위한 객체 701은, 드래그 앤 릴리즈 입력에 기반하여, 영역 702로부터 영역 704로 이동될 수 있다. 전자 장치 100은, 사용자에게 보다 편리한 인터페이스를 제공하기 위하여, 수신되는 입력에 기반하여 핀 모드를 위한 객체 701의 위치를 변경할 수 있다.
수신되는 입력에 기반하여 이동되는 핀 모드를 위한 객체 701은 화면 700 내의 빈 공간에 위치될 수도 있지만, 다른 객체가 위치된 공간에 적어도 일부 중첩될 수도 있다. 예를 들면, 수신되는 입력에 기반하여 이동된 핀 모드를 위한 객체 701은 영역 704에서 객체 705와 중첩될 수 있다. 이러한 경우, 핀 모드를 위한 객체 701은 객체 705보다 상위에 표시될 수 있다. 전자 장치 100은, 사용자가 보다 쉽게 핀 모드를 위한 객체 701에 접근할 수 있도록, 핀 모드를 위한 객체 701을 객체 705보다 상위에서 표시할 수 있다.
도 7b는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 움직임의 다른 예를 도시한다. 이러한 객체의 움직임은, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 야기될 수 있다.
도 7b를 참조하면, 전자 장치 100은 화면 710에서 핀 모드를 위한 객체 711을 표시할 수 있다. 핀 모드를 위한 객체 711은 화면 710 위에 플로팅될 수 있다. 핀 모드를 위한 객체 711은 위치 712에 위치될 수 있다. 다시 말해, 전자 장치 100은 화면 710 위에 플로팅된 핀 모드를 위한 객체 711을 영역 712에서 표시할 수 있다. 여기서, 화면 710은 객체 715를 더 포함할 수 있다.
전자 장치 100은, 핀 모드를 위한 객체 711을 이동시키기 위한 입력을 수신할 수 있다. 다시 말해, 전자 장치 100은, 핀 모드를 위한 객체 711의 위치를 영역 712로부터 변경하기 위한 입력을 수신할 수 있다. 일부 실시예들에서, 전자 장치 100은, 핀 모드를 위한 객체 711에 대한 드래그 앤 릴리즈 입력 713을 수신하는 것에 기반하여, 핀 모드를 위한 객체 711을 영역 712에서 영역 714로 이동시킬 수 있다.
수신되는 입력에 기반하여 이동되는 객체 711은 영역 714에서 객체 715와 중첩될 수 있다. 이러한 경우, 핀 모드를 위한 객체 711은, 도 7a의 도시와 달리, 객체 715의 하위에 표시될 수 있다. 다시 말해, 전자 장치 100은 핀 모드를 위한 객체 711과 객체 715 사이의 배치 관계를 적응적으로 변경할 수 있다. 예를 들면, 전자 장치 100은, 핀 모드를 위한 객체 711과 객체 715와 같은 다양한 유형들을 가지는 다른 객체들 사이의 배치에 대한 우선순위를 결정할 수 있다. 예를 들면, 우선순위가 높은 객체는 우선순위가 낮은 객체보다 상위에 배치될 수 있다. 일부 실시 예들에서, 전자 장치 100은, 기본 설정(default setting)에 따라 핀 모드를 위한 객체 711가 가지는 우선순위를 결정할 수 있다. 예를 들면, 전자 장치 100은 핀 모드를 위한 객체 711의 우선순위를 다른 객체들의 우선순위보다 높게 설정할 수 있다. 다른 일부 실시 예들에서, 전자 장치 100은, 핀 모드를 위한 객체 711과 다른 객체들의 우선순위를 사용자의 입력에 따라 결정될 수 있다. 예를 들면, 전자 장치 100은 다른 객체들 중 일부의 우선순위를 핀 모드를 위한 객체 711의 우선순위보다 높게 설정하고, 다른 객체들 중 나머지 일부의 우선순위를 핀 모드를 위한 객체 711의 우선순위보다 낮게 설정할 수 있다.
도 7a 및 도 7b를 통해 설명한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 핀 모드를 위한 객체를 화면에 플로팅함으로써, 핀 모드를 위한 객체에게 보다 높은 이동성을 부여할 수 있다. 또한, 다양한 실시 예들에 따른 전자 장치 100은 핀 모드를 위한 객체와 다른 객체들 사이의 배치 관계를 제어함으로써, 핀 모드를 위한 객체를 다양한 방식으로 표시할 수 있다. 다시 말해, 다양한 실시 예들에 따른 전자 장치 100은, 화면의 상태에 따라 적응적으로 핀 모드를 위한 객체를 표시할 수 있다.
도 8a는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 예를 도시한다. 이러한 객체의 메뉴는, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 8a를 참조하면, 전자 장치 100은 화면 800에서 핀 모드를 위한 객체 801을 표시할 수 있다. 일부 실시 예들에서, 화면 800은 전자 장치의 상태를 표시하는 인디케이터, 전자 장치 주변의 정보(날씨 정보 등)를 나타내는 윈도우, 어플리케이션과 연관되고 바탕 화면 내의 페이지에서 표시되는 적어도 하나의 객체, 자주 이용되는 어플리케이션과 연관되고 바탕 화면 내의 하위의 영역에 표시되는 적어도 하나의 다른 객체(즉, Top 5 아이콘) 등과 같은 다양한 객체들을 포함하는 바탕 화면(wall paper)일 수 있다. 전자 장치 100은 화면 800 위에 플로팅되는 핀 모드를 위한 객체 801을 표시할 수 있다. 일부 실시 예들에서, 객체 801은, 전자 장치 100이 특정 어플리케이션을 핀 모드로 설정한 경우, 핀 모드로 설정된 특정 어플리케이션을 나타내기 위한 요소를 더 포함할 수 있다.
전자 장치 100은 핀 모드를 위한 객체 801에 대한 입력 802를 수신할 수 있다. 핀 모드를 위한 객체 801을 통해 수신된 입력 802는 핀 모드를 위한 객체 801과 연동된(또는 연관된) 복수의 기능들을 표시하기 위한 입력일 수 있다. 다시 말해, 전자 장치 100은, 객체 801에 대한 입력 802를 수신하는 것에 기반하여, 객체 801과 연동된 복수의 기능들을 각각 나타내기 위한 메뉴 윈도우 803을 표시할 수 있다. 일부 실시 예들에서, 입력 802의 속성은 핀 모드를 위한 객체 801을 이동시키기 위한 입력의 속성과 서로 다를 수 있다. 일부 실시 예들에서, 입력 802의 속성은 핀 모드를 위한 객체 801을 통해 특정 어플리케이션을 핀 모드로 설정하기 위한 입력의 속성과 서로 다를 수 있다.
일부 실시 예들에서, 메뉴 윈도우 803은 말풍선 포맷으로 설정될 수 있다. 메뉴 윈도우 803은, 확장 모드 기능(extended mode)을 실행하기 위한 아이템, 핀 모드로 설정된 어플리케이션을 포어그라운드로 전환시키는 것 없이 제어하기 위한 기능(pinned app control)을 실행하기 위한 아이템, 어플리케이션의 핀 모드를 해제(release)하기 위한 기능(unpin from device)을 실행하기 위한 아이템, 어플리케이션의 핀 모드와 연동되는 전자 장치를 변경(즉, 제1 외부 전자 장치 205를 다른 전자 장치로 변경)하기 위한 기능(change device)을 실행하기 위한 아이템, 및/또는 화면 공유를 위한 외부 전자 장치 205와의 연결을 끊기 위한 기능(disconnect)을 실행하기 위한 아이템을 포함할 수 있다. 실시 예들에 따라, 메뉴 윈도우 803은 보다 많은 아이템을 포함할 수도 있다. 또한, 메뉴에 포함되는 복수의 아이콘들 각각에 대한 상세한 설명은 후술될 것이다.
전자 장치 100은, 메뉴 윈도우 803에 포함된 복수의 아이템들 중 특정 아이템에 대한 입력을 수신하는 것에 기반하여, 특정 아이템에 대응하는 기능을 실행할 수 있다.
일부 실시 예들에서, 메뉴 윈도우 803은 객체 801의 주변에 위치될 수 있다. 다른 일부 실시 예들에서, 메뉴 윈도우 803은 객체 801과 중첩되어 위치될 수 있다. 또 다른 일부 실시 예들에서, 메뉴 윈도우 803은 전자 장치 100의 센서에 의해 검출된 입력 수단의 위치에 대응하는 영역에 위치될 수 있다.
일부 실시 예들에서, 메뉴 윈도우 803은 불투명하게 표시될 수 있다. 다른 일부 실시 예들에서, 메뉴 윈도우 803은, 사용자가 메뉴 윈도우 803 아래에 위치되는 화면의 내용을 인지할 수 있도록, 반투명하게 표시될 수 있다.
도 8b는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 다른 예를 도시한다. 이러한 객체의 메뉴는, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 8b를 참조하면, 전자 장치 100은 화면 810에서 핀 모드를 위한 객체 811을 표시할 수 있다. 화면 810은 게임과 연관될 수 있다. 다시 말해, 화면 810은 게임 실행 화면일 수 있다. 핀 모드를 위한 객체 811은, 이메일 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다. 예를 들면, 핀 모드를 위한 객체 811은, 이메일 어플리케이션의 아이콘의 형상에 대응하는 형상을 가지는 이미지를 뱃지 포맷으로 포함할 수 있다. 즉, 전자 장치 100은, 이메일 어플리케이션과 관련된 화면을 외부 전자 장치 205에게 송신하면서, 게임 실행 화면을 디스플레이부 120에서 표시할 수 있다. 다시 말해, 전자 장치 100은, 이메일 어플리케이션과 관련된 화면을 외부 전자 장치 205의 디스플레이부를 통해 표시하고, 게임 실행 화면을 디스플레이부 120을 통해 표시할 수 있다.
전자 장치 100은, 객체 811에 대한 입력 812를 수신할 수 있다. 입력 812는 객체 811와 연동된 복수의 기능들을 수행하기 위한 메뉴를 표시하기 위한 입력일 수 있다. 입력 812의 속성은 객체 811에 대한 다른 입력(예: 객체 811을 이동시키기 위한 입력, 특정 어플리케이션을 핀 모드로 설정하기 위한 입력)의 속성과 다를 수 있다. 예를 들면, 객체 811을 이동시키기 위한 입력은 터치 앤 드래그인 반면, 입력 812는, 터치 앤 홀드일 수 있다.
전자 장치 100은, 입력 812를 수신하는 것에 기반하여, 메뉴 813을 표시할 수 있다. 메뉴 813는, 입력 812에 포함된 홀드 명령에 기반하여, 입력 812를 야기하는 입력 수단을 추적할 수 있다. 다시 말해, 메뉴 813은 입력 수단에 동반할 수 있다.
일부 실시 예들에서, 메뉴 813은 핀 모드로 설정된 어플리케이션을 나타내는 윈도우 814를 표시할 수 있다. 윈도우 814는, 도 8b에 도시된 바와 같이, 이메일 어플리케이션과 관련된 화면을 외부 전자 장치 205에서 표시하기 위한 데이터가 송신되고 있음을 나타내기 위한 문구(또는 이메일 어플리케이션과 관련된 화면을 외부 전자 장치 205에서 표시하고 있음을 나타내기 위한 문구)를 포함할 수 있다. 예를 들면, 윈도우 814는 문구 "e-mail pinned"를 포함할 수 있다. 다른 예를 들면, 윈도우 814는 핀 모드로 설정된 어플리케이션을 특정하지 않는 문구 "application pinned"를 포함할 수도 있다. 이러한 경우, 객체 811은 핀 모드로 설정된 어플리케이션을 나타내기 위해 뱃지 포맷의 이미지 등을 더 포함할 수 있다.
일부 실시 예들에서, 메뉴 813은 객체 811를 위한 복수의 목적지(destination)들을 나타내기 위한 복수의 이미지들을 표시할 수 있다. 복수의 이미지들은 객체 811과 연동된 복수의 기능들을 나타낼 수 있다. 예를 들면, 복수의 이미지들은, 핀 모드로 설정된 이메일 어플리케이션에 대한 바로 가기 명령을 실행하기 위한 기능을 나타내는 이미지(go to pinned e-mail), 이메일 어플리케이션의 핀 모드를 해제하기 위한 기능을 나타내는 이미지(unpinfrom device), 핀 모드와 연관된 전자 장치를 변경하기 위한 기능을 나타내는 이미지(change device), 핀 모드로 설정된 어플리케이션을 변경하기 위한 기능을 나타내는 이미지(change pinned app), 또는 다른 전자 장치와 화면을 공유하기 위한 통신 연결을 해제하기 위한 기능을 나타내는 이미지(disconnect) 중 하나 또는 그 이상을 포함할 수 있다.
전자 장치 100은, 메뉴 813에 포함된 복수의 이미지들 중 특정 이미지에 객체 811을 중첩시키는 입력(또는, 객체 811을 특정 이미지로 이동시키는 입력) 815를 수신하는 것에 기반하여, 상기 하나의 이미지가 나타내는 기능을 실행할 수 있다. 예를 들면, 전자 장치 100은, 객체 811을 특정 이미지(disconnect)로 이동시키는 입력 815를 수신하는 것에 기반하여, 외부 전자 장치 205와 화면을 공유하기 위한 통신 경로를 비활성화시킬 수 있다. 다른 예를 들면, 전자 장치 100은, 객체 811을 다른 특정 이미지(go to pinned e-mail)에 중첩시키는 입력 815를 수신하는 것에 기반하여, 전자 장치 100의 디스플레이부 120을 통해 게임 실행 화면을 표시할 수 있다.
도 8c는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 메뉴의 또 다른 예를 도시한다. 이러한 객체의 메뉴는, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 8c를 참조하면, 전자 장치 100은 화면 820에서 핀 모드를 위한 객체 821을 표시할 수 있다. 화면 820은 인터넷 서핑과 관련될 수 있다. 다시 말해, 화면 820은 인터넷 브라우저의 웹페이지 표시 화면일 수 있다. 핀 모드를 위한 객체 821은, 음악 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다. 예를 들면, 핀 모드를 위한 객체 821은, 음악 어플리케이션의 아이콘의 형상에 대응하는 형상을 가지는 요소를 뱃지 포맷으로 포함할 수 있다. 즉, 전자 장치 100은, 음악 어플리케이션과 관련된 화면을 외부 전자 장치 205를 통해 표시하고, 웹페이지 표시 화면인 화면 820을 디스플레이부 120을 통해 표시할 수 있다.
전자 장치 100은, 객체 821에 대한 입력 822를 수신할 수 있다. 입력 822는 객체 821과 연동된 복수의 기능들을 수행하기 위한 메뉴를 활성화하기 위한 입력일 수 있다. 입력 822의 속성은 객체 821에 대한 다른 입력의 속성과 구별될 수 있다.
전자 장치 100은, 입력 822를 수신하는 것에 기반하여, 전자 장치 100의 디스플레이부 120의 전체 영역 상에 메뉴 화면 830을 표시할 수 있다. 메뉴 화면 830은 도 8a 및 도 8b에 도시된 메뉴보다 상세한 정보를 포함할 수 있다.
일부 실시 예들에서, 메뉴 화면 830은 객체 821과 연동된 다양한 기능들을 실행하기 위한 항목들을 포함할 수 있다. 예를 들면, 메뉴 화면 830은, 음악 어플리케이션이 핀 모드로 설정된 상태임을 나타내기 위한 인디케이터 항목, 음악 어플리케이션을 바로 활성화하기 위한 명령어 항목(즉, 바로가기 항목(go to pinned music)),음악 어플리케이션의 핀 모드를 종료하기 위한 명령어 항목(unpinfrom TV), 핀 모드로 연동되는 장치를 변경하기 위한 명령어 항목(change device), 핀 모드로 설정된 어플리케이션을 다른 어플리케이션으로 변경하기 위한 명령어 항목(change App.), 또는 화면 공유를 위한 외부 전자 장치 205와의 연결을 중단하기 위한 명령어 항목(disconnect) 중 적어도 하나를 포함할 수 있다.
일부 실시 예들에서, 메뉴 화면 830은 미리 보기를 위한 썸네일(thumbnail) 831을 포함할 수 있다. 예를 들면, 메뉴 화면 830은, 현재 외부 전자 장치 205에서 표시되고 있는 화면에 대응하는 화면을 표시하는 썸네일 831을 포함할 수 있다. 다시 말해, 전자 장치 100은, 음악 어플리케이션과 관련된 화면으로의 전환 없이, 객체 821로부터 야기되는 메뉴 화면 830의 썸네일 831을 통해 외부 전자 장치 205의 표시 상태를 확인할 수 있다.
일부 실시 예들에서, 메뉴 화면 830은, 불투명하게 표시될 수 있다. 다른 일부 실시 예들에서, 메뉴 화면 830은, 사용자가 메뉴 화면 830 아래의 화면의 상태를 인지할 수 있도록, 반투명하게 표시될 수 있다.
상술한 바와 같이, 도 8a 내지 8c는 핀 모드를 위한 객체로부터 야기되는 다양한 메뉴들을 도시한다. 도 8a 내지 8c에 예시된 메뉴 중 적어도 하나는, 다양한 실시 예들에 따른 전자 장치 100의 상태에 따라, 동시에 전자 장치 100 내에서 적용될 수 있다. 예를 들면, 전자 장치 100은 제1 입력을 수신하는 것에 기반하여 메뉴 윈도우 803을 표시하고, 제1 입력과 다른 제2 입력을 수신하는 것에 기반하여 메뉴 813을 표시할 수 있다. 하지만, 핀 모드를 위한 객체로부터 야기되는 메뉴는, 도 8a 내지 도 8c에 한정되지 않는다.
도 9는 다양한 실시 예들에 따른 핀 모드를 위한 객체의 프리뷰 윈도우의 예를 도시한다. 이러한 프리뷰 윈도우는, 도 1에 도시된 전자 장치 100 또는 전자 장치 100의 디스플레이부 120에서 표시될 수 있다.
도 9를 참조하면, 전자 장치 100은 화면 900에서 핀 모드를 위한 객체 901을 표시할 수 있다. 화면 900은 문자 어플리케이션과 관련될 수 있다. 다시 말해, 화면 900은 문자 어플리케이션을 위한 사용자 인터페이스를 포함할 수 있다. 전자 장치 100과 핀 모드를 통해 연관된 외부 전자 장치 205는 동영상 어플리케이션과 관련된 화면을 표시할 수 있다. 달리 표현하면, 외부 전자 장치 205는 동영상 어플리케이션을 통해 재생되는 컨텐츠의 화면을 표시할 수 있다. 전자 장치 100은 동영상 어플리케이션을 핀 모드로 설정하였기 때문에, 전자 장치 100이 문자 어플리케이션과 관련된 화면 900을 표시함에도 불구하고, 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 데이터에 기반하여, 동영상 어플리케이션을 통해 재생되는 컨텐츠의 화면을 표시할 수 있다.
일부 실시 예들에서, 전자 장치 100은 화면 900 위에 객체 901을 플로팅할 수 있다. 사용자의 입력 또는 전자 장치의 상태의 변경에 따라 플로팅된 객체 901은 이동될 수 있다.
전자 장치 100은 객체 901에 대한 입력 902를 수신할 수 있다. 입력 902는 외부 전자 장치 205에서 표시되고 있는 화면에 대한 미리 보기 기능을 활성화하기 위한 입력일 수 있다. 입력 902는, 다른 입력들과 독립될 수 있다. 다시 말해, 입력 902의 속성은, 다른 입력들의 속성과 구별될 수 있다. 예를 들면, 객체 901에 대한 메뉴를 활성화하기 위한 입력은 객체 901에 대한 더블 탭 입력인 반면, 객체 901에 대한 미리 보기 기능을 활성화하기 위한 입력은 객체 901에 대한 호버링 입력일 수 있다.
전자 장치 100은, 입력 902를 수신하거나 검출하는 것에 기반하여, 미리 보기(preview) 기능을 제공하는 윈도우 903을 표시할 수 있다. 윈도우 903은 외부 전자 장치 205에서 표시되고 있는 화면에 대응하는 화면을 표시할 수 있다. 일부 실시 예들에서, 윈도우 903은 외부 전자 장치 205에서 표시되고 있는 화면을 원격으로 제어하기 위한 메뉴들(예: 외부 전자 장치 205에서 표시하고 있는 화면이 TV와 관련되는 경우, play, rewind, forward, 볼륨 조절, stop, 채널 조절 등)을 더 포함할 수 있다. 이러한 경우, 전자 장치 100은 목록들 중 적어도 하나의 목록에 대한 입력을 수신하는 것에 기반하여, 적어도 하나의 목록에 대응하는 기능을 수행할 수 있다.
일부 실시 예들에서, 윈도우 903은 전자 장치 100이 현재 표시하고 있는 화면 900에 중첩되어 표시될 수 있다. 윈도우 903의 최초 표시 위치는, 사용자의 설정에 의해 변경될 수도 있고, 전자 장치 100의 기본 설정 또는 옵션에 의해 고정될 수도 있다. 윈도우 903은, 윈도우 903을 이동시키기 위한 사용자의 입력(드래그 앤 드롭)에 의해 이동될 수도 있다. 다른 일부 실시 예들에서, 윈도우 903은 전체 화면 모드로 표시될 수도 있다.
일부 실시 예들에서, 윈도우 903은 다양한 사이즈를 가질 수 있다. 예를 들면, 윈도우 903은 사용자의 설정 또는 전자 장치 100의 기본 설정에 기반하여 결정된 크기로 표시될 수 있다. 윈도우 903은 윈도우 903의 크기를 조절하기 위한 사용자의 입력(예: 최소화 메뉴, 최대화 메뉴, 이전 크기로 복원 메뉴에 대한 입력 등)을 검출하는 것에 기반하여, 적응적으로 크기를 변경할 수 있다.
상술한 바와 같이 다양한 실시 예들에 따른 전자 장치 100은, 핀 모드를 위한 객체에 대한 입력을 통해 생성되는 프리뷰 윈도우를 제공함으로써, 백그라운드로 전환된 상태로 동작하고 외부 전자 장치 205에 표시되고 있는 화면과 관련되는 어플리케이션을 호출(또는 조회)하기 위한 별도의 입력을 요구하지 않는다. 다시 말해, 다양한 실시 예들에 따른 전자 장치 100은, 사용자가 외부 전자 장치 205의 표시 상태를 보다 쉽게 확인할 수 있도록, 프리뷰 윈도우를 제공할 수 있다.
도 10은 다양한 실시 예들에 따라 핀 모드를 위한 객체를 이용하여 다양한 기능들을 수행하는 전자 장치의 동작의 예를 도시한다. 이러한 동작은, 도 1에 도시된 전자 장치 100 또는 전자 장치 100 내의 구성 요소들 중 적어도 하나(제어부 110)에 의해 수행될 수 있다.
도 10을 참조하면, 동작 1001에서, 전자 장치 100은 핀 모드를 위한 객체를 표시할 수 있다. 예를 들면, 전자 장치 100은 바탕 화면 위에 플로팅된 핀 모드를 위한 객체를 표시할 수 있다. 다른 예를 들면, 전자 장치 100은 특정 어플리케이션과 관련된 화면 위에 플로팅된 핀 모드를 위한 객체를 표시할 수 있다. 상기 핀 모드를 위한 객체와 관련되는 어플리케이션(즉, 핀 모드로 설정된 어플리케이션)은, 현재 전자 장치 100에서 표시하고 있는 화면과 관련되지 않을 수 있다. 예를 들면, 전자 장치 100에서 표시되고 있는 화면은 동영상 어플리케이션과 관련된 화면인 반면, 핀 모드로 설정된 어플리케이션은 이메일 어플리케이션일 수 있다.
동작 1002에서, 전자 장치 100은 표시된 객체에 대한 입력을 수신할 수 있다. 상기 수신된 입력은, 핀 모드를 위한 객체와 연동되는 기능들을 표시하는 메뉴를 표시하기 위한 입력일 수 있다. 전자 장치 100은 수신된 입력을 검출할 수 있다.
동작 1003에서, 전자 장치 100은, 수신된 입력을 검출하는 것에 기반하여, 핀 모드와 관련된 복수의 기능들을 나타내는 복수의 아이템들을 표시할 수 있다. 예를 들면, 전자 장치 100은, 도 8a 내지 8c에 도시된 메뉴들 중 하나의 메뉴를 표시할 수 있다.
동작 1004에서, 전자 장치 100은, 표시된 복수의 아이템들 중 하나의 아이템을 선택하기 위한 입력에 기반하여, 선택된 아이템에 대응하는 기능을 수행할 수 있다. 예를 들면, 전자 장치 100은, 복수의 아이템들 중 제1 아이템에 대한 입력을 수신하는 것에 대응하여, 핀 모드와 연동되는 장치를 외부 전자 장치 205에서 다른 외부 전자 장치로 변경하기 기능을 위한 적어도 하나의 동작을 수행할 수 있다. 다른 예를 들면, 전자 장치 100은, 복수의 아이템들 중 제2 아이템에 대한 입력을 수신하는 것에 대응하여, 화면을 공유하기 위해 전자 장치 100과 연결된 외부 전자 장치 205와의 통신 연결을 단절(disconnect)할 수도 있다.
도 11은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 11을 참조하면, 전자 장치 100은 화면 1100에서 핀 모드를 위한 객체 1101을 표시할 수 있다. 전자 장치 100은 외부 전자 장치 205와 핀 모드를 통해 연결될 수 있다. 전자 장치 100은 동영상 어플리케이션을 핀 모드로 설정한 상태에서 동작할 수 있다. 다시 말해, 전자 장치 100은 핀 모드로 설정된 동영상 어플리케이션과 관련된 데이터를 외부 전자 장치 205에게 송신하면서 동영상 어플리케이션과 관련된 화면과 다른 화면 1100을 표시할 수 있다. 또한, 전자 장치 100은 화면 1100 위에 플로팅된 객체 1101을 표시할 수 있다. 또한, 전자 장치 100은 플로팅된 객체 1101와 관련되는 메뉴 윈도우 1102를 표시할 수 있다. 한편, 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 데이터에 기반하여 핀 모드로 설정된 동영상 어플리케이션과 관련된 화면을 표시할 수 있다.
전자 장치 100은 객체 1101에 대한 입력을 검출하는 것에 대응하여, 메뉴 윈도우 1102를 표시할 수 있다.
메뉴 윈도우 1102는 핀 모드로 설정된 어플리케이션(pinned application)에 대한 바로 가기(short cut)를 수행하기 위한 기능을 활성화하는 아이템 1103, 핀 모드로 설정된 어플리케이션의 화면을 호출하지 않고 핀 모드로 설정된 어플리케이션을 제어하는 아이템, 어플리케이션의 핀 모드를 해제하기 위한 기능을 활성화하는 아이템, 핀 모드를 통해 연동되는 장치를 변경하기 위한 기능을 활성화하는 아이템, 화면을 공유하기 위해 연결된 장치와 단절하기 위한 기능을 활성화하는 아이템 등을 포함할 수 있다. 일부 실시 예들에서, 메뉴 윈도우 1102는 다른 기능을 활성화하는 아이템을 더 포함할 수 있다.
전자 장치 100은, 표시된 메뉴 윈도우 1102에 포함된 아이템 1103에 대한 입력 1104를 수신할 수 있다. 입력 1104는 아이템 1103에 대응하는 기능을 실행하기 위한 입력일 수 있다.
전자 장치 100은, 입력 1104를 검출하는 것에 기반하여, 아이템 1103에 대응하는 기능인 핀 모드로 설정된 동영상 어플리케이션의 바로 가기를 수행할 수 있다. 다시 말해, 전자 장치 100은, 입력 1104를 검출하는 것에 기반하여, 동영상 어플리케이션과 관련된 화면 1105를 표시할 수 있다. 전자 장치 100은, 핀 모드를 통해 외부 전자 장치 205에게 동영상 어플리케이션과 관련된 데이터를 송신하고 있는 상태이기 때문에, 화면 1105는 외부 전자 장치 205에서 표시되고 있는 화면에 대응할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은, 아이템 1103 등을 이용하여 외부 전자 장치 205를 통해 표시하고 있는 화면을 전자 장치 100에서 호출할 수 있다. 다시 말해, 다양한 실시 예들에 따른 전자 장치 100은, 전자 장치 100에서 표시되고 있는 화면과 전자 장치 100과 연동되는 외부 전자 장치 205에서 표시되고 있는 화면이 일치하지 않는 경우, 아이템 1103을 통해 외부 전자 장치 205에서 표시되고 있는 화면을 빠르게 조회하여 표시할 수 있다.
도 12는 다양한 실시 예들에 따른 핀 모드를 위한 객체와 연동된 기능의 다른 예를 도시한다. 이러한 기능은 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 12를 참조하면, 전자 장치 100은 화면 1200에서 핀 모드를 위한 객체 1201을 표시할 수 있다. 전자 장치 100은 외부 전자 장치 205과 핀 모드를 통해 연결될 수 있다. 또한, 전자 장치 100은 음악 어플리케이션을 핀 모드로 설정한 상태에서 동작할 수 있다. 다시 말해, 전자 장치 100은 핀 모드로 설정된 음악 어플리케이션과 관련된 화면을 외부 전자 장치 205를 통해 표시하면서 화면 1200을 디스플레이부 120을 통해 표시할 수 있다. 객체 1201은 음악 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다.
전자 장치 100은 객체 1201에 대한 입력을 검출하는 것에 대응하여, 메뉴 윈도우 1202를 표시할 수 있다.
메뉴 윈도우 1202는 확장 모드로 진입하기 위한 아이템, 핀 모드로 설정된 어플리케이션에 대한 바로 가기를 수행하기 위한 기능을 활성화하는 아이템, 핀 모드로 설정된 어플리케이션을 표시하지 않고 상기 어플리케이션을 제어하는 아이템, 어플리케이션의 핀 모드를 종료하기 위한 기능을 활성화하는 아이템 1203, 핀 모드를 통해 연동되는 장치를 변경하기 위한 기능을 활성화하는 아이템, 화면을 공유하는 장치와의 연결을 종료하는 기능을 활성화하는 아이템 등을 포함할 수 있다.
전자 장치 100은 메뉴 윈도우 1202에 표시된 아이템 1203에 대한 입력 1204를 수신할 수 있다. 예를 들면, 입력 1204는 터치 입력일 수 있다.
전자 장치 100은 입력 1204를 수신하는 것에 기반하여, 음악 어플리케이션의 핀 모드를 종료할 수 있다. 전자 장치 100은, 입력 1204를 수신하는 것에 기반하여, 외부 전자 장치 205에게 음악 어플리케이션과 관련된 데이터를 송신하는 것을 중단할 수 있다. 전자 장치 100은, 입력 1204를 수신하는 것에 기반하여, 외부 전자 장치 205에게 현재 전자 장치 100에 표시되고 있는 화면에 대한 데이터를 송신할 수 있다. 예를 들면, 전자 장치 100은 화면 1205에 대한 데이터를 외부 전자 장치 205에게 송신할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 화면 1205에 대한 데이터를 수신할 수 있다. 외부 전자 장치 1205는 수신된 데이터에 기반하여 화면 1205의 구성에 대응하는 구성을 가지는 화면을 표시할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은, 아이템 1203을 통해, 전자 장치 100에서 표시되고 있는 화면과 외부 전자 장치 204에서 표시되고 있는 화면을 구별할 것인지 여부를 결정할 수 있다. 다시 말해, 다양한 실시 예들에 따른 전자 장치 100은, 아이템 1203을 통해 간소화된 절차로 화면의 미러링 여부를 결정함으로써, 사용자에게 보다 높은 접근성을 부여할 수 있다.
도 13은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 13을 참조하면, 전자 장치 100은, 동영상 어플리케이션과 관련된 화면을 핀 모드로 공유하기 위해, 외부 전자 장치 205와 연결될 수 있다. 한편, 전자 장치 100은, 동영상 어플리케이션을 백그라운드 상태에서 실행하면서, 화면 1300을 표시할 수 있다. 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 데이터에 기반하여, 동영상 어플리케이션과 관련된 화면을 표시할 수 있다.
한편, 전자 장치 100은 화면 1300과 같은 배경 화면에서 핀 모드를 위한 객체 1301을 표시할 수 있다. 객체 1301은 전자 장치 100에서 동영상 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다.
전자 장치 100은 화면 1300 위에 플로팅된 객체 1301에 대한 입력을 검출하는 것에 기반하여 메뉴 윈도우 1302를 표시할 수 있다.
메뉴 윈도우 1302는 핀 모드로 설정된 동영상 어플리케이션에 직접 접근하기 위한 아이템, 별도의 화면 전환 없이 현재 표시 상태에서 핀 모드로 설정된 동영상 어플리케이션을 제어하기 위한 아이템 1303, 동영상 어플리케이션의 핀 모드를 중단하기 위한 아이템, 동영상 어플리케이션의 핀 모드와 연동되는 장치를 변경하기 위한 아이템, 화면 공유를 위해 연동되고 있는 장치와의 연결을 종료하기 위한 아이템 등을 포함할 수 있다.
아이템 1303은 동영상 어플리케이션을 직접 제어하기 위한 다양한 객체들을 포함할 수 있다. 일부 실시 예들에서, 아이템 1303은, 도 13에 도시된 바와 같이, 외부 전자 장치 205에서 표시되고 있는 동영상 어플리케이션의 컨텐츠를 일시 중지하거나 재생하기 위한 객체를 포함할 수 있다. 실시 예들에 따라, 아이템 1303은, 동영상 어플리케이션의 컨텐츠를 다른 컨텐츠로 변경하기 위한 객체, 동영상 어플리케이션의 재생 시점을 제어하기 위한 객체, 재생되는 컨텐츠의 출력 음량을 제어하기 위한 객체, 또는 재생되는 컨텐츠의 화질을 제어하기 위한 객체 중 하나 또는 그 이상을 더 포함할 수 있다.
전자 장치 100은 아이템 1303 내에 포함된 동영상 어플리케이션의 컨텐츠를 일시 중지하기 위한 객체에 대한 입력 1304를 수신할 수 있다. 전자 장치 100은, 컨텐츠를 일시 중지하기 위한 객체에 대한 입력 1304을 수신하는 것에 응답하여, 상기 컨텐츠를 일시 중지하기 위한 객체 내의 일시 중지 이미지를 재생 이미지로 변경할 수 있다. 또한, 전자 장치 100은 컨텐츠를 일시 중지하기 위한 객체에 대한 입력을 수신하는 것에 응답하여, 아이템 1303 내의 상태 표시 문구를 업데이트할 수 있다. 다시 말해, 전자 장치 100은 아이템 1303을 아이템 1305로 변경할 수 있다. 아이템 1305는 "video playing..."으로부터 변경된 문구 "video paused..."를 포함할 수 있다. 또한, 전자 장치 100은, 컨텐츠를 일시 중지하기 위한 객체에 대한 입력 1304를 수신하는 것에 응답하여, 외부 전자 장치 205에서 표시되고 있는 컨텐츠를 재생 상태에서 일시 정지 상태로 변경할 수 있다. 다시 말해, 전자 장치 100은, 백그라운드 상태에서 동작하는 동영상 어플리케이션을 포어그라운드 상태로 전환하지 않고, 상기 동영상 어플리케이션에게 컨텐츠의 일시 정지 명령을 전달할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 핀 모드에서 아이템 1303을 제공함으로써, 외부 전자 장치 205와 공유되며 백그라운드 상태에서 동작하는 어플리케이션의 상태를 포어그라운드 상태로 전환하는 동작 없이, 상기 어플리케이션을 제어할 수 있다. 다시 말해, 다양한 실시 예들에 따른 전자 장치 100은, 사용자가 보다 편리하게 외부 전자 장치 205와 공유하는 화면과 관련된 어플리케이션에 접근할 수 있도록, 아이템 1303을 표시할 수 있다.
도 14는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 14를 참조하면, 전자 장치 100은, 메시지 어플리케이션과 관련된 화면을 핀 모드로 공유하기 위해, 외부 전자 장치 205와 연결될 수 있다. 전자 장치 100은, 메시지 어플리케이션을 백그라운드 상태에서 실행하면서 화면 1401을 표시할 수 있다. 한편, 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 데이터에 기반하여, 문자 어플리케이션과 관련된 화면을 표시할 수 있다.
전자 장치 100은 화면 1401 위에 플로팅되는 핀 모드를 위한 객체 1402를 표시할 수 있다. 객체 1402는 메시지 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다.
전자 장치 100은 객체 1402에 대한 입력을 검출하는 것에 기반하여, 메뉴 윈도우 1403을 표시할 수 있다.
메뉴 윈도우 1403은, 핀 모드로 설정된 메시지 어플리케이션으로의 바로 가기 아이템, 별도의 화면 전환 없이 핀 모드로 설정된 메시지 어플리케이션을 제어하기 위한 아이템 1404, 메시지 어플리케이션의 핀 모드를 중단하기 위한 아이템, 메시지 어플리케이션에 대한 데이터를 수신할 타겟 장치를 변경하기 위한 아이템, 현재 타겟 장치와의 연결을 중단하기 위한 아이템 등을 포함할 수 있다.
아이템 1404는, 메시지 어플리케이션을 직접 제어하기 위한 적어도 하나의 윈도우를 포함할 수 있다. 예를 들면, 아이템 1404는, 발신자를 입력하기 위한 윈도우 1405, 메시지에 포함될 단어를 입력하기 위한 윈도우 1406 등을 포함할 수 있다. 도 14에 도시하지 않았으나, 아이템 1404는 수신된 메시지의 요약 정보를 표시하는 윈도우 등을 더 포함할 수 있다. 다시 말해, 전자 장치 100은 디스플레이 영역의 크기 등에 기반하여 아이템 1404 내에서 보다 많은 윈도우를 표시할 수 있다.
전자 장치 100은, 윈도우 1405에 대한 입력을 통해 전자 장치 100으로부터 송신될 메시지의 수신자를 특정할 수 있다. 예를 들면, 도 14에 도시하지 않았으나, 전자 장치 100은, 윈도우 1405에 대한 입력을 수신하는 것에 기반하여, 화면 1401, 객체 1402, 또는 메뉴 윈도우 1403 중 적어도 일부에 중첩된 윈도우를 표시할 수 있다. 상기 윈도우는 전자 장치 100 내에 저장된 전화번호를 검색하기 위해 이용될 수 있다. 또한, 도 14에 도시하지 않았으나, 전자 장치 100은, 전화번호 또는 이름을 입력하기 위한 가상 키패드를 더 표시할 수 있다. 예를 들면, 전자 장치 100은, 윈도우 1405에 대한 적어도 하나의 입력에 기반하여, 전자 장치 100으로부터 송신될 메시지의 수신자를 "Jenette Mchale"로 특정할 수 있다.
전자 장치 100은, 윈도우 1406에 대한 입력을 수신하는 것에 기반하여, 송신될 메시지에 포함될 글자를 결정할 수 있다. 예를 들면, 도 14에 도시하지 않았으나, 전자 장치 100은, 윈도우 1406에 대한 입력을 수신하는 것에 기반하여, 화면 1401, 객체 1402, 또는 메뉴 윈도우 1403 중 적어도 일부에 중첩된 가상 키패드를 표시할 수 있다. 전자 장치 100은, 표시된 가상 키패드에 대한 입력을 식별함으로써, 송신될 메시지에 포함될 글자를 윈도우 1406에서 표시할 수 있다. 예를 들면, 전자 장치 100은, 사용자의 입력에 기반하여 "Hello I'm "을 윈도우 1406에서 표시할 수 있다. 또한, 전자 장치 100은, 키패드 등을 통해 입력될 글자가 표시될 위치를 나타내기 위하여, 커서 1407을 표시할 수 있다.
다른 예를 들면, 전자 장치 100은, 음성 입력 등을 통해 송신될 메시지의 수신자 및 송신될 메시지의 내용을 입력할 수 있다. 이러한 경우, 전자 장치 100은, 음성 입력에 따른 처리 결과를 윈도우 1405 및 윈도우 1406을 통해 표시할 수 있다.
전자 장치 100은 윈도우 1406 내에 포함된 객체 "send"에 대한 입력을 수신하는 것에 기반하여, 아이템 1403을 통해 작성한 문자를 다른 전자 장치에게 송신할 수 있다. 상기 다른 전자 장치는 윈도우 1405에 대한 입력을 통해 특정된 사용자가 소지한 장치일 수 있다.
전자 장치 100은 메시지의 송신이 정상적으로 완료되었는지 여부를 나타내는 알림(notification)을 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은, 메시지의 송신이 정상적으로 완료된 경우, 메시지가 정상적으로 송신됨을 나타내는 알림 1408을 표시할 수 있다. 다시 말해, 전자 장치 100은 "sending complete"를 포함하는 알림 1408을 표시할 수 있다. 일 실시 예에서, 알림 1408과 같은 알림 메시지는 아이템 1404의 영역에서 표시될 수 있다. 다른 실시 예에서, 알림 메시지는 디스플레이부 120의 상단의 인디케이터 영역에서 표시될 수 있다. 하지만, 이에 한정되지 않는다. 다른 일부 실시 예들에서, 전자 장치 100은, 메시지의 송신 정상적으로 완료되지 않은 경우, 메시지가 정상적으로 송신되지 않음을 나타내는 알림을 표시할 수 있다. 또 다른 일부 실시 예들에서, 전자 장치 100은, 메시지가 정상적으로 송신되었는지 여부를 나타내기 위한 시각 효과를 표시하거나, 햅틱을 수행하거나, 소리를 출력할 수 있다. 예를 들면, 전자 장치 100은, 메시지가 정상적으로 송신됨을 알리기 위하여, 객체 1402, 메뉴 윈도우 1403, 또는 아이템 1404 중 하나 또는 그 이상을 진동시키는 시각 효과를 발생시킬 수 있다. 다른 예를 들면, 전자 장치 100은, 메시지가 정상적으로 송신됨을 나타내기 위하여, 전자 장치 100을 진동시킬 수 있다. 또 다른 예를 들면, 전자 장치 100은, 메시지가 정상적으로 송신됨을 표시하기 위하여, 발광 소자로 구성된 물리적 인디케이터를 특정 색깔로 발광시키거나, 소리를 출력할 수도 있다. 하지만, 이에 한정되지 않는다.
한편, 외부 전자 장치 205는 전자 장치 100으로부터 다른 전자 장치에게 정상적으로 송신된 메시지를 표시할 수 있다. 다시 말해, 외부 전자 장치 205는 핀 모드로 설정된 문자 어플리케이션을 표시하고 있기 때문에, 아이템 1404에 대한 입력에 기반하여 전자 장치 100이 송신한 메시지에 대한 표시를 업데이트할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 아이템 1404를 표시함으로써, 핀 모드로 설정된 어플리케이션을 백그라운드 상태에서 포어그라운드 상태로 전환하지 않고, 핀 모드로 설정된 어플리케이션을 제어할 수 있다.
또한, 도 13 및 도 14에 도시된 바와 같이, 전자 장치 100은 핀 모드로 설정된 어플리케이션의 종류 또는 기능에 따라 핀 모드로 설정된 어플리케이션을 직접 제어하기 위한 아이템의 구성을 적응적으로 변경할 수 있다. 예를 들면, 전자 장치 100은, 핀 모드로 설정된 어플리케이션이 음악과 관련된 경우, 아이템이 일시 정지/재생, 되감기, 볼륨 조절, 음악 선택/추가 등의 기능을 트리거링할 수 있는 객체 등을 포함하도록 구성하고, 핀 모드로 설정된 어플리케이션이 TV와 관련된 경우, 아이템이 채널 변경, 볼륨 조절 등을 포함하도록 구성할 수 있다.
도 15는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 15를 참조하면, 전자 장치 100은 동영상 어플리케이션과 관련된 화면을 핀 모드로 공유하기 위해, 외부 전자 장치 205와 연결될 수 있다. 전자 장치 100은 핀 모드로 설정된 동영상 어플리케이션에 대한 데이터를 외부 전자 장치 205에게 송신하면서, 동영상 어플리케이션을 백그라운드 상태에서 실행할 수 있다. 한편, 외부 전자 장치 205는, 전자 장치 100으로부터 수신되는 동영상 어플리케이션에 대한 데이터에 기반하여, 동영상 어플리케이션과 관련된 화면을 표시할 수 있다.
전자 장치 100은, 동영상 어플리케이션을 백그라운드 상태에서 실행하고 있는 상태에서, 화면 1500을 표시할 수 있다. 화면 1500은 바탕화면일 수 있다. 전자 장치 100은 화면 1500 위에 플로팅되는 핀 모드를 위한 객체 1501을 표시할 수 있다. 객체 1501은, 동영상이 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다.
전자 장치 100은, 객체 1501에 대한 입력을 수신하는 것에 기반하여, 객체 1501와 연결된 기능들을 나타내기 위한 메뉴 윈도우 1503을 표시할 수 있다. 메뉴 윈도우 1503은, 핀 모드로 설정된 어플리케이션을 포어그라운드 상태로 전환하기 위한 객체, 백그라운드 상태로 실행되고 있는 핀 모드로 설정된 어플리케이션을 제어하기 위한 객체 1504, 어플리케이션의 핀 모드를 중지하기 위한 객체, 핀 모드로 설정된 어플리케이션과 관련된 화면을 표시할 장치를 변경하기 위한 객체, 화면 공유를 위한 연결을 종료하기 위한 객체 등을 포함할 수 있다.
객체 1504에 대한 입력을 수신하면, 전자 장치 100은 백그라운드 상태의 동영상 어플리케이션을 제어하기 위한 윈도우 1505를 표시할 수 있다. 전자 장치 100은 메뉴 윈도우 1503을 표시하는 것을 중단하고 윈도우 1505를 표시할 수 있다.
윈도우 1505는 외부 전자 장치 205에서 출력되고 있는 화면 및/또는 소리를 제어하기 위한 객체를 포함할 수 있다. 예를 들면, 윈도우 1505는, 볼륨 조절을 위한 바(bar) 포맷의 객체, rewind, pause, play, stop, forward 기능을 수행하기 위한 객체들, 동영상 어플리케이션에 의해 재생되고 있는 컨텐츠의 현재 재생 상태를 나타내기 위한 상태 바 포맷의 객체, 또는 상기 컨텐츠의 현재 재생 상태를 표시하기 위한 동영상 포맷의 객체 중 하나 또는 그 이상을 포함할 수 있다.
전자 장치 100은 윈도우 1505 내의 다양한 객체들 중 적어도 하나의 객체에 대한 입력을 수신하는 경우, 상기 적어도 하나의 객체에 대응하는 적어도 하나의 기능을 수행할 수 있다. 다시 말해, 전자 장치 100은, 적어도 하나의 객체에 대한 입력을 검출하는 것에 기반하여 백그라운드 상태의 어플리케이션을 제어함으로써, 외부 전자 장치 205에서 표시되고 있는 화면을 제어할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은, 도 13 및/또는 14에서 도시된 핀 모드로 설정된 어플리케이션의 직접 제어 아이템과 다른 직접 제어 윈도우를 제공할 수 있다. 또한, 전자 장치 100은, 전자 장치 100의 디스플레이부 120의 여유 영역, 디스플레이부 120의 총 영역의 크기 등을 고려하여, 백그라운드 상태에서 동작하고 외부 전자 장치 205와 공유하고 있는 어플리케이션을 직접 제어하기 위한 객체(윈도우, 아이템 등)의 표시 형식(format)을 적응적으로 변경할 수 있다. 예를 들면, 전자 장치 100은, 디스플레이부 120의 총 영역이 상대적으로 넓다고 판단되는 경우, 보다 디테일한 정보를 제공할 수 있는 객체를 표시하고, 디스플레이부 120의 여유 영역이 상대적으로 부족하다고 판단되는 경우, 간소화된 정보를 제공할 수 있는 객체를 표시할 수 있다.
도 16은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 16을 참조하면, 전자 장치 100은, 동영상 어플리케이션과 관련된 화면을 핀 모드를 이용하여 외부 전자 장치 205와 공유할 수 있다. 전자 장치 100은, 동영상 어플리케이션을 통해 재생되고 있는 컨텐츠의 화면과 관련된 정보를 외부 전자 장치 205에게 송신할 수 있다. 전자 장치 100은, 상기 정보를 외부 전자 장치 205에게 송신하는 동안, 상기 동영상 어플리케이션을 포어그라운드 상태에서 백그라운드 상태로 변경할 수 있다. 상기 동영상 어플리케이션은 백그라운드 상태로 변경되었지만, 상기 동영상 어플리케이션은 핀 모드로 설정되었기 때문에, 전자 장치 100은 상기 정보의 송신을 유지할 수 있다. 상기 전자 장치 100은, 상기 동영상 어플리케이션이 백그라운드 상태로 변경되는 것에 응답하여, 화면 1600을 표시할 수 있다. 예를 들면, 화면 1600은 배경화면일 수 있다. 다른 예를 들면, 화면 1600은 상기 동영상 어플리케이션을 통해 재생되고 잇는 컨텐츠의 화면이 위치된 레이어보다 아래에 배치된 레이어에 위치된 다른 어플리케이션과 관련된 화면일 수도 있다.
전자 장치 100은 화면 1600에서 핀 모드를 위한 객체 1601을 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 화면 1600 위에서 플로팅되는 객체 1601을 표시할 수 있다. 객체 1601은 전자 장치 100이 핀 모드를 통해 외부 전자 장치 205에게 동영상 어플리케이션과 관련된 화면을 표시하기 위한 정보를 송신하고 있음을 나타내기 위한 적어도 하나의 요소를 포함할 수 있다.
전자 장치 100은 객체 1601에 대한 입력을 수신할 수 있다. 전자 장치 100은, 객체 1601에 대한 입력을 수신하는 것에 기반하여, 메뉴 윈도우 1602를 표시할 수 있다. 메뉴 윈도우 1602는, 핀된(pinned) 동영상 어플리케이션을 직접 호출하기 위한 아이콘, 핀된 동영상 어플리케이션을 직접 제어하기 위한 아이콘, 핀된 동영상 어플리케이션을 해제하기 위한 아이콘, 핀된 동영상 어플리케이션에 대한 화면을 공유할 장치를 변경하기 위한 아이콘 1603, 핀 모드로 설정된 어플리케이션을 다른 어플리케이션으로 변경하기 위한 아이콘, 전자 장치와 연결된 장치와의 연결을 종료하기 위한 아이콘 등을 포함할 수 있다.
전자 장치 100은 아이콘 1603에 대한 입력 1604를 수신할 수 있다. 전자 장치 100은, 입력 1604를 수신함을 검출하는 경우, 전자 장치 100 또는 전자 장치 100과 연결된 릴레이 노드의 커버리지 내에 위치된 장치들에 대한 정보를 사용자에게 제공하기 위한 윈도우 1605를 표시할 수 있다.
일부 실시 예들에서, 전자 장치 100이 직접 통신을 통해 적어도 하나의 다른 장치와 화면을 공유하는 경우, 전자 장치 100은, 입력 1604를 검출하는 것에 기반하여, 전자 장치 100의 주변 장치들로부터 수신되는 신호들의 수신 세기를 확인(identify)할 수 있다. 전자 장치 100은 상기 신호들 중 기준 세기(reference strength) 이상의 수신 세기를 가지는 적어도 하나의 신호를 식별(identify)하거나 결정할 수 있다. 여기서, 기준 세기는, 전자 장치 100으로부터 다른 장치에게 송신되는 데이터의 품질이 일정 수준 이상의 품질을 만족하도록 하기 위해 설정되는 파라미터일 수 있다. 다시 말해, 기준 세기는, 전자 장치 100에 대한 채널의 상태 값 또는 채널 품질 값이 일정 크기 미만인 다른 장치나, 전자 장치로부터 일정 거리 이상 이격된 다른 장치를 필터링하기 위한 파라미터일 수 있다. 일부 실시 예들에서, 전자 장치 100은, 수신 세기가 아닌 CSI(channel state indication or information), CQI(channel qualityindication) 등을 이용하여 화면을 공유할 장치를 결정할 수도 있다.
다른 일부 실시 예들에서, 전자 장치 100이 릴레이 노드를 통해 적어도 하나의 다른 장치와 화면을 공유하는 경우, 전자 장치 100은, 입력 1604를 검출하는 것에 기반하여, 전자 장치와 연결된 릴레이 노드에게 전자 장치 100과 화면을 공유할 수 있는 적어도 하나의 다른 장치에 대한 정보를 요청하기 위한 메시지를 송신할 수 있다. 릴레이 노드는, 상기 메시지를 수신하는 것에 기반하여, 전자 장치 100과 화면을 공유할 수 있는 적어도 하나의 다른 장치에 대한 정보를 포함하는 응답 메시지를 전자 장치 100에게 송신할 수 있다. 전자 장치 100은 응답 메시지에 기반하여 화면을 공유할 장치를 식별하거나 결정할 수 있다.
전자 장치 100은, 결정된 장치를 나타내기 위한 정보를 윈도우 1605에서 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은, 아이템 1606과 같이 기준 세기 이상의 수신 세기를 가지는 신호를 송신한 외부 전자 장치를 표시할 수 있다. 아이템 1606은 기준 세기 이상의 수신 세기를 가지는 신호를 송신한 외부 전자 장치 1600을 나타내기 위한 이미지와 외부 전자 장치 1600의 유형(notebook), 브랜드(S) 등을 나타내기 위한 문자로 구성(configured)될 수 있다. 한편, 외부 전자 장치 1600은 전자 장치 100과 관련되지 않은 화면을 표시하고 있는 상태에서 동작할 수 있다. 외부 전자 장치 1600은, 외부 전자 장치 205와 달리, 전자 장치 100과 관련되지 않은 상태에서 동작하기 때문에, 외부 전자 장치 1600은 전자 장치 100과 관련되지 않은 화면을 표시할 수 있다. 예를 들면, 외부 전자 장치 1600은 자신의 바탕 화면을 표시할 수 있다.
전자 장치 100은, 아이템 1606에 대한 입력 1607을 수신하는 것에 기반하여, 핀 모드에 기반하여 외부 전자 장치 1600과 연결할 수 있다. 전자 장치 100은, 핀 모드에 기반하여 연결된 외부 전자 장치 1600에게 핀 모드로 설정된 동영상 어플리케이션에서 재생되고 있는 컨텐츠의 화면을 표시하기 위한 데이터를 송신할 수 있다. 다시 말해, 전자 장치 100은, 외부 전자 장치 1600을 통해 핀 모드로 설정된 동영상 어플리케이션과 관련된 화면을 표시할 수 있다.
한편, 전자 장치 100은, 입력 1607을 수신하는 것에 기반하여, 외부 전자 장치 205와 전자 장치 100 사이의 연동(association) 상태를 변경할 수 있다. 일부 실시 예들에서, 전자 장치 100은, 입력 1607을 수신하는 것에 기반하여, 외부 전자 장치 205와 전자 장치 사이의 연결(connection)을 단절할 수 있다. 이러한 경우, 도 16의 외부 전자 장치 205의 화면 C는 빈 화면 또는 외부 전자 장치 20의 기본 화면일 수 있다. 다른 일부 실시 예들에서, 전자 장치 100은, 입력 1607을 수신하는 것에 기반하여, 외부 전자 장치 205와 전자 장치 사이의 연결은 유지한 상태에서, 핀 모드만을 해제할 수 있다. 다시 말해, 전자 장치 100은, 외부 전자 장치 205에게 동영상 어플리케이션과 관련된 화면이 아닌 전자 장치 100이 현재 표시하고 있는 화면에 대한 데이터를 송신할 수 있다. 이러한 경우, 도 16의 외부 전자 장치 205의 화면 C는 전자 장치 100의 화면 1600에 대응할 수 있다. 또 다른 일부 실시 예들에서, 전자 장치 100은 핀 모드에 기반된 외부 전자 장치 205와의 연결을 유지할 수 있다. 다시 말해, 전자 장치 100은 입력 1607을 수신하는 것에 기반하여 외부 전자 장치 205 및 외부 전자 장치 1600과 핀 모드에 기반하여 연결될 수 있다. 이러한 경우, 도 16의 외부 전자 장치 205의 화면 C는 동영상 어플리케이션과 관련된 화면일 수 있다.
전자 장치 100은, 입력 1607을 수신하는 것에 기반하여, 객체 1601을 변경할 수 있다. 예를 들어, 전자 장치 100이 입력 1607을 수신하는 것에 응답하여 외부 전자 장치 205와의 연결을 단절하고 외부 전자 장치 1600과의 연결만을 설정한 경우, 전자 장치 100은 객체 1601으로부터 변경된 핀 모드를 위한 객체 1609를 표시할 수 있다. 다시 말해, 전자 장치 100은, 객체 1601에 대한 변경된 상태를 업데이트함으로써, 객체 1609를 생성할 수 있다. 객체 1609는 핀 모드로 설정된 어플리케이션이 동영상 어플리케이션이라는 것 및 핀 모드에 기반하여 연결된 장치의 유형이 노트북이라는 것을 나타내기 위한 적어도 하나의 요소를 포함할 수 있다.
또한, 전자 장치 100은 핀 모드에 기반하여 외부 전자 장치 1600과 연결되었기 때문에, 전자 장치 100이 화면 1600을 화면 1609로 전환하더라도, 외부 전자 장치 1600은 동영상 어플리케이션과 관련된 화면을 표시하는 것을 유지할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 핀 모드를 위한 객체에 대한 메뉴 내의 아이템을 이용하여 화면을 공유하는 장치를 다른 장치로 변경하는 기능을 제공할 수 있다. 전자 장치 100은 이러한 기능을 제공함으로써, 사용자에게 보다 높은 편의성을 제공할 수 있다.
도 17은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 17을 참조하면, 전자 장치 100은 핀 모드로 설정된 동영상 어플리케이션의 화면을 외부 전자 장치 205와 공유할 수 있다. 전자 장치 100은 동영상 어플리케이션의 화면과 관련되지 않은 화면 1700을 표시할 수 있다. 전자 장치 100은 화면 1700 내에 중첩된 핀 모드를 위한 객체 1701을 표시할 수 있다. 객체 1701은 전자 장치 100이 외부 전자 장치 205와 연결된 상태라는 것 및 동영상 어플리케이션이 핀 모드로 설정된 상태라는 것을 나타내기 위한 적어도 하나의 요소를 포함할 수 있다.
전자 장치 100은 객체 1701에 대한 입력을 수신하면 메뉴 윈도우 1702를 표시할 수 있다. 메뉴 윈도우 1702는 객체 1701와 연동된 다양한 기능들을 실행하기 위한 적어도 하나의 아이템과 핀 모드로 설정된 어플리케이션을 다른 어플리케이션으로 변경하기 위한 아이템 1703을 포함할 수 있다.
일부 실시 예들에서, 전자 장치 100은 아이템 1703에 대한 입력 1704를 수신하는 것에 기반하여, 윈도우 1705를 표시할 수 있다. 윈도우 1705는 전자 장치 100이 핀 모드로 설정된 어플리케이션을 다른 어플리케이션으로 변경하는 것을 가이드하기 위해 표시될 수 있다. 윈도우 1705는 전자 장치 100이 핀 모드로 설정할 수 있는 적어도 하나의 어플리케이션을 나타내기 위한 적어도 하나의 객체를 포함할 수 있다. 예를 들면, 윈도우 1705는 게임 어플리케이션을 나타내는 객체 1706, 이메일 어플리케이션을 나타내는 객체, 문서를 나타내는 객체 등을 포함할 수 있다.
윈도우 1705에 포함되는 객체들이 나타내는 어플리케이션들은 다양한 방법들에 의해 설정될 수 있다. 예를 들면, 상기 어플리케이션들은 사용자에 의해 설정된 어플리케이션들일 수 있다. 다른 예를 들면, 상기 어플리케이션들은 전자 장치 100이 현재 실행 중인 어플리케이션들일 수 있다. 또 다른 예를 들면, 상기 어플리케이션들은 현재 시점으로부터 설정 시간 이내의 시간 동안 전자 장치 100에서 실행된 어플리케이션들일 수 있다. 또 다른 예를 들면, 상기 어플리케이션들은 다른 장치와의 공유가 가능한 어플리케이션들일 수 있다. 하지만, 이에 한정되지 않는다.
전자 장치 100은 윈도우 1705 내에 포함된 객체들 중 하나의 객체에 대한 입력을 수신할 수 있다. 예를 들면, 전자 장치 100은 객체 1706에 대한 입력을 수신할 수 있다. 입력 1706은 핀 모드로 설정된 어플리케이션을 제1 어플리케이션(예: 동영상 어플리케이션)에서 제2 어플리케이션(예: 게임 어플리케이션)으로 변경하기 위한 입력일 수 있다.
전자 장치 100은 객체 1706에 대한 입력을 수신하는 것에 기반하여, 객체 1706이 나타내는 게임 어플리케이션을 실행할 수 있다. 전자 장치 100은 게임 어플리케이션과 관련된 화면 1707을 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 화면 1707 위에 플로팅되는 객체 1708을 표시할 수 있다. 객체 1708은, 객체 1701과 달리, 게임 어플리케이션이 핀 모드로 설정됨을 나타내기 위한 요소를 포함할 수 있다.
또한, 전자 장치 100은 객체 1706에 대한 입력을 수신하는 것에 기반하여, 게임 어플리케이션과 관련된 데이터를 외부 전자 장치 205에게 송신할 수 있다. 외부 전자 장치 205는, 전자 장치 100으로부터 수신된 데이터에 기반하여, 게임 어플리케이션과 관련된 화면 1707에 대응하는 화면을 표시할 수 있다. 다시 말해, 전자 장치 100은, 객체 1706에 대한 입력을 수신하는 것에 기반하여 외부 전자 장치 205를 통해 화면 1707에 대응하는 화면을 표시할 수 있다.
전자 장치 100은 화면 1707을 화면 1700으로 전환할 수 있다. 예를 들면, 전자 장치 100은, 전자 장치 100의 홈 버튼에 대한 입력을 수신하는 것에 기반하여, 화면 1707을 화면 1700으로 전환할 수 있다. 다시 말해, 핀 모드로 설정된 게임 어플리케이션은 백그라운드 상태로 전환될 수 있다. 전자 장치 100은, 게임 어플리케이션이 핀 모드로 설정되었기 때문에, 게임 어플리케이션이 백그라운드 상태로 전환됨과 관계없이, 게임 어플리케이션과 관련된 데이터의 송신을 유지할 수 있다. 외부 전자 장치 205는, 전자 장치 100으로부터 계속적으로 수신되는 데이터에 기반하여, 화면 1707에 대응하는 화면을 계속적으로 표시할 수 있다.
도 17은 핀 모드로 설정된 어플리케이션을 변경하기 위해 별도의 어플리케이션 리스트를 표시하는 예를 도시하고 있지만, 이는 하나의 예시일 뿐이다. 다양한 실시 예들에 따른 전자 장치 100은 다른 방식을 통해 핀 모드로 설정된 어플리케이션을 변경할 수도 있다. 예를 들면, 전자 장치 100은, 객체 1703에 대한 입력을 수신한 후, 도 2 또는 도 3 등에 도시된 절차(즉, 어플리케이션을 핀 모드로 설정하는 절차)와 유사한 절차를 이용하여 어플리케이션을 변경할 수도 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 핀 모드로 설정된 어플리케이션을 변경하기 위한 객체를 제공함으로써, 사용자에게 보다 높은 편의성을 제공할 수 있다. 또한, 전자 장치 100은 핀 모드로 설정된 어플리케이션을 변경하기 위한 객체를 제공함으로써, 전자 장치의 사용자 주변의 상황의 변화에 적응적으로 반응할 수 있다.
도 18은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 18을 참조하면, 전자 장치 100은, 동영상 어플리케이션과 관련된 화면을 핀 모드를 통해 외부 전자 장치 205에게 출력할 수 있다. 전자 장치 100은 외부 전자 장치 205에게 출력되는 화면과 다른 화면 1800을 표시할 수 있다. 전자 장치 100은 화면 1800 위에 플로팅되는 핀 모드를 위한 객체 1801을 표시할 수 있다. 핀 모드를 위한 객체 1801은 외부 전자 장치 205의 유형을 나타내는 요소와 핀 모드로 설정된 어플리케이션을 나타내는 요소를 포함할 수 있다.
전자 장치 100은 객체 1801에 대한 입력에 기반하여 메뉴 윈도우 1802를 표시할 수 있다. 메뉴 윈도우 1802는 객체 1801 또는 핀 모드와 관련된 다양한 기능들을 트리거링하기 위하여 이용될 수 있다. 메뉴 윈도우 1802는 외부 전자 장치 205와의 연결을 종료하거나, 단절하거나, 중단하기 위한 아이템 1803을 포함할 수 있다. 실시 예들에 따라 메뉴 윈도우 1802는 다른 기능들을 트리거링하기 위한 아이템들을 더 포함할 수 있다.
전자 장치 100은 아이템 1803에 대한 입력 1804을 수신할 수 있다. 전자 장치 100은 아이템 1803에 대한 입력 1804을 수신하는 것에 기반하여 외부 전자 장치 205와 화면을 공유하기 위한 통신을 단절할 수 있다. 다시 말해, 화면을 공유한다는 측면에서 전자 장치 100과 외부 전자 장치 205와의 연동성은 사라지거나 종료될 수 있다.
전자 장치 100은 입력 1804을 수신하는 것에 기반하여 외부 전자 장치 205으로의 데이터의 송신을 중단할 수 있다. 외부 전자 장치 205는 데이터의 송신의 중단으로 인하여 전자 장치 100과 관련된 화면을 표시하는 것을 중단할 수 있다.
또한, 일부 실시 예들에서, 전자 장치 100은 입력 1804를 수신하는 것에 기반하여 객체 1801을 표시하는 것을 중단할 수 있다. 전자 장치 100은, 입력 1804를 수신하는 것으로 인하여 화면 공유를 위해 전자 장치 100과 연결된 장치가 없는 경우, 객체 1801을 표시하는 것을 중단할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치 100은 별도의 화면 전환 없이 외부 전자 장치와의 통신을 단절할 수 있는 퀵 메뉴를 제공함으로써, 사용자에게 보다 높은 편의성을 제공할 수 있다.
도 19a는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 19a를 참조하면, 전자 장치 100은 핀 모드로 설정된 동영상 어플리케이션과 관련된 데이터를 외부 전자 장치 205에게 송신할 수 있다. 외부 전자 장치 205는 전자 장치 100으로부터 수신되는 데이터에 기반하여 핀 모드로 설정된 동영상 어플리케이션에 의해 재생되는 컨텐츠의 화면을 표시할 수 있다.
전자 장치 100은 화면 1900을 표시할 수 있다. 화면 1900은 동영상 어플리케이션과 관련되지 않을 수 있다. 예를 들면, 화면 1900은 바탕 화면일 수 있다. 화면 1900은 동영상 어플리케이션이 핀 모드로 설정됨을 나타내는 요소를 포함하는 핀 모드를 위한 객체 1901을 포함할 수 있다. 전자 장치 100은 객체 1901에 대한 입력을 수신하는 것에 기반하여 메뉴 윈도우 1902를 표시할 수 있다. 메뉴 윈도우 1902는 객체 1901으로부터 야기될 수 있는 기능들을 나타내는 항목들을 포함할 수 있다. 예를 들면, 객체 1901은 확장 모드(extended mode)를 야기하기 위한 항목 1903을 포함할 수 있다. 여기서, 확장 모드는, 외부 전자 장치 205의 화면을 전자 장치 100의 확장된 화면으로 이용하기 위한 모드일 수 있다. 예를 들면, 전자 장치 100이 표시 중인 객체들 중 적어도 일부를 외부 전자 장치 205로 이동시키기 위한 입력을 수신하는 경우, 전자 장치 100은 상기 객체들 중 적어도 일부를 외부 전자 장치 205에서 표시할 수 있다. 확장 모드는, 전자 장치 100의 디스플레이부 120의 총 영역을 보다 넓게 하기 위한 모드일 수 있다. 확장 모드는, 전자 장치 100의 디스플레이부 120의 능력을 상승시키기 위한 모드일 수 있다.
전자 장치 100은 항목 1903에 대한 입력 1904를 수신할 수 있다. 입력 1904는 전자 장치의 동작 모드 또는 표시 모드를 확장 모드로 변경하기 위한 입력일 수 있다. 예를 들면, 입력 1904는 항목 1903에 포함된 버튼을 좌에서 우로 변경하는 동작으로 구성될 수 있다. 다른 예를 들면, 입력 1904는 항목 1903을 터치하는 동작으로 구성될 수 있다.
전자 장치 100은 입력 1904를 수신하는 것에 기반하여 확장 모드로 동작할 수 있다. 확장 모드로 동작하는 전자 장치 100은 특정 객체를 외부 전자 장치 205에게 이동시키기 위한 입력을 수신하는 것에 기반하여 외부 전자 장치 205 상에서 이동된 객체를 표시할 수 있다. 예를 들어, 확장 모드로 동작하는 전자 장치 100은, 전자 장치 100에 표시된 특정 윈도우를 외부 전자 장치 205로 이동시키기 위한 입력(예: 특정 윈도우를 전자 장치 100의 디스플레이부 120의 모서리 또는 테두리 부분으로 이동시키는 드래그)을 수신하는 경우, 상기 특정 윈도우를 외부 전자 장치 205에서 표시할 수 있다. 일 실시 예에서, 외부 전자 장치 205으로 이동된 특정 윈도우와 관련된 어플리케이션은 핀 모드로 설정될 수 있다. 다른 실시 예에서, 외부 전자 장치 205으로 이동된 특정 윈도우와 관련된 어플리케이션은 핀 모드로 설정되지 않을 수도 있다. 다시 말해, 외부 전자 장치 205는 외부 전자 장치 205의 디스플레이부의 일 측에서 핀 모드로 설정된 어플리케이션에 대한 화면을 표시하고, 다른 측에서 전자 장치 100의 표시 화면에 대한 미러링을 수행할 수도 있다.
일부 실시 예들에서, 전자 장치 100은, 입력 1904를 수신하는 것에 기반하여, 확장 모드로 동작함을 나타내기 위한 객체 1905를 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 윈도우 1902를 표시하는 것을 중단할 수 있다.
일부 실시 예들에서, 객체 1905는 외부 전자 장치 205의 표시 상태를 나타낼 수 있다. 예를 들면, 객체 1905는 확장 모드로 외부 전자 장치 205에 제공되고 있는 화면이 풀 스크린으로 표시됨을 나타내는 이미지를 포함할 수 있다. 또한, 객체 1905는 확장 모드를 제공하는 장치의 유형을 나타내는 이미지를 포함할 수 있다.
전자 장치 100은 객체 1905 주변으로 전자 장치 내의 특정 객체를 이동시키기 위한 입력을 수신할 수 있다. 상기 특정 객체는, 윈도우일 수도 있고, 아이콘일 수도 있으며, 화면일 수도 있다. 예를 들면, 전자 장치 100은 아이콘 1906을 객체 1905 주변으로 이동하기 위한 입력을 수신할 수 있다. 일 실시 예에서, 전자 장치 100은 이동되는 아이콘 1906이 객체 1905의 어떤 위치와 근접되어 홀드되는지(또는 드랍, 중첩 등) 여부를 식별할 수 있다. 예를 들어, 아이콘 1906이 객체 1905의 좌측에 근접된 상태에서 홀드(또는 드랍, 중첩 등)되는 경우, 전자 장치 100은 외부 전자 장치 205가 아이콘 1906과 관련된 화면을 좌측에 표시하고, 현재 풀 스크린으로 표시되고 있는 동영상 어플리케이션과 관련된 화면을 축소한 후 우측에 표시하도록 제어할 수 있다. 다른 예를 들어, 아이콘 1906이 객체 1905의 하측에 근접된 상태에서 홀드되는 경우, 전자 장치 100은 외부 전자 장치 205가 이이콘 1906과 관련된 화면을 하측에 표시하고, 현재 풀 스크린으로 표시되고 있는 동영상 어플리케이션과 관련된 화면을 축소한 후 상측에 표시하도록 제어할 수 있다. 다시 말해, 전자 장치 100은, 이동될 객체에 대한 화면의 배치 상태를 객체 1905를 이용하여 제어할 수 있다.
전자 장치 100은, 아이콘 1906에 대한 입력이 완료된 경우, 배치 상태에 대응하도록 객체 1905를 업데이트할 수 있다. 예를 들면, 전자 장치 100은 객체 1905의 형상을 제1 형상에서 제2 형상으로 변경할 수 있다. 예를 들어, 아이콘 1906이 객체 1905의 좌측에 적어도 일부 중첩된 상태에서 드랍된 경우, 전자 장치 100은 좌측에 아이콘 1906과 관련된 화면이 배치되고 우측에 기존 표시 화면이 배치됨을 나타내는 이미지를 포함하는 객체 1908를 표시할 수 있다. 이와 달리, 아이콘 1906이 객체 1905의 하측에 적어도 일부 중첩된 상태에서 드랍된 경우, 전자 장치 100은 하측에 아이콘 1906과 관련된 화면이 배치되고 상측에 기존 표시 화면이 배치됨을 나타내는 이미지를 포함하는 객체 1920을 표시할 수 있다.
전자 장치 100은, 아이콘 1906에 대한 입력이 완료된 경우, 객체 1901을 업데이트할 수 있다. 전자 장치 100은, 아이콘 1906에 대한 입력이 완료되는 것에 기반하여, 핀 모드로 설정된 어플리케이션이 동영상 어플리케이션임을 나타내는 요소를 핀 모드로 설정된 어플리케이션이 복수임을 나타내기 위한 요소로 변경한 핀 모드를 위한 객체 1915를 표시할 수 있다.
전자 장치 100은, 객체 1915에 대한 입력을 수신하는 경우, 메뉴 윈도우 1909를 표시할 수 있다. 메뉴 윈도우 1909는 확장 모드 상태임을 나타내는 아이템, 핀 모드로 설정된 동영상 어플리케이션에 대한 바로 가기를 실행하기 위한 아이템, 핀 모드로 설정된 게임 어플리케이션(확장 모드를 통해 추가된)에 대한 바로 가기를 실행하기 위한 아이템, 동영상 어플리케이션을 직접 제어하기 위한 아이템, 게임 어플리케이션을 직접 제어하기 위한 아이템, 동영상 어플리케이션의 핀 모드를 해제하기 위한 아이템, 게임 어플리케이션의 핀 모드를 해제하기 위한 아이템, 동영상 어플리케이션의 핀 모드에 대한 장치를 변경하기 위한 아이템, 게임 어플리케이션의 핀 모드에 대한 장치를 변경하기 위한 아이템, 전자 장치 100과 연결된 장치들 중 전부 또는 일부와 단절하기 위한 아이템을 포함할 수 있다.
상술한 바와 같이, 전자 장치 100은, 핀 모드와 핀 모드를 위한 객체에 연동된 기능을 이용하여, 전자 장치 100의 디스플레이부 120에 확장성을 부여할 수 있다.
도 19b는 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 19b를 참조하면, 전자 장치 100은, 확장 모드를 위한 입력을 수신하는 것에 기반하여, 확장 모드를 위한 윈도우 1930을 표시할 수 있다. 일부 실시 예들에서, 확장 모드를 위한 입력은, 객체 1905, 객체 1909, 객체 1920 등에 대한 사용자의 입력일 수 있다. 다른 일부 실시 예들에서, 확장 모드를 위한 입력은, 아이템 1904에 대한 사용자의 입력일 수 있다.
일부 실시 예들에서, 윈도우 1930은, 반투명할 수 있다. 다른 일부 실시 예들에서, 윈도우 1930은, 불투명할 수 있다.
윈도우 1930은, 외부 전자 장치 205를 통해 표시하기 위한(또는 추가적으로 표시하기 위한) 화면 또는 화면과 관련된 어플리케이션을 선택하기 위한 객체 1931, 외부 전자 장치 205를 다른 전자 장치로 변경하기 위한 객체 1932, 외부 전자 장치 205와의 통신 연결을 종료하기 위한 객체 1933을 포함할 수 있다.
윈도우 1930은, 현재 외부 전자 장치 205에서 표시되고 있는 화면과 관련된 어플리케이션에 대한 바로 가기를 수행하기 위한 객체 1934 및 객체 1935를 더 포함할 수 있다. 예를 들면, 객체 1934는, 현재 외부 전자 장치 205의 디스플레이부 내의 일 측에서 표시되고 있는 화면과 관련된 음악 어플리케이션에 대한 바로 가기를 수행하기 위한 객체일 수 있다. 다른 예를 들면, 객체 1935는, 현재 외부 전자 장치 205의 디스플레이부 내의 다른 측에서 표시되고 있는 화면과 관련된 동영상 어플리케이션에 대한 바로 가기를 수행하기 위한 객체일 수 있다.
윈도우 1930은, 현재 외부 전자 장치 205에서 표시되고 있는 복수의 어플리케이션들과 관련된 복수의 화면들 사이의 배치 관계 및 복수의 화면들의 표시 상태를 나타내기 위한 썸네일 1936 및 썸네일 1937을 더 포함할 수 있다. 예를 들면, 전자 장치 100은, 썸네일 1936 및 썸네일 1937의 배치 상태를 통해, 외부 전자 장치 205에서 음악 어플리케이션에 대한 화면이 좌측에서 표시되고 있고, 동영상 어플리케이션에 대한 화면이 우측에서 표시되고 있음을 나타낼 수 있다.
일부 실시 예들에서, 전자 장치 100은, 썸네일 1936 및 썸네일의 배치 상태를 변경하기 위한 입력을 수신하는 것에 기반하여, 외부 전자 장치 205에서 표시되고 있는 복수의 화면들의 배치 상태를 변경할 수 있다. 예를 들어, 썸네일 1936을 썸네일 1937의 우측 영역에 위치시킨 후 드랍하는 입력을 수신하는 경우, 전자 장치 100은 외부 전자 장치 205에게 음악 어플리케이션에 대한 화면을 우측에서 표시하고, 동영상 어플리케이션에 대한 화면을 좌측에서 표시할 것을 명령하는 제어 신호를 송신할 수 있다. 외부 전자 장치 205는, 전자 장치 100으로부터 수신된 제어 신호에 기반하여, 외부 전자 장치 205의 디스플레이부의 우측 영역에서 음악 어플리케이션과 관련된 화면을 표시하고, 외부 전자 장치 205의 디스플레이부의 좌측 영역에서 동영상 어플리케이션과 관련된 화면을 표시할 수 있다.
또한, 전자 장치 100은, 썸네일 1936을 통해, 음악 어플리케이션을 통해 재생되는 곡의 재생 진행 상태 및 대표 이미지를 나타낼 수 있다. 또한, 전자 장치 100은, 썸네일 1937을 통해, 동영상 어플리케이션을 통해 재생되는 컨텐츠(또는 동영상)의 재생 진행 상태 및 현재 재생 화면을 나타낼 수 있다.
도 20은 다양한 실시 예들에 따라 핀 모드를 위한 객체와 연동된 기능의 또 다른 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 20을 참조하면, 전자 장치 100은, 핀 모드로 설정된 동영상 어플리케이션에 대한 화면을 표시하기 위해, 외부 전자 장치 205와 연결될 수 있다. 전자 장치 100은, 바탕 화면과 관련된 화면 2000을 표시할 수 있다. 화면 2000은 화면 2000 위에 플로팅된 객체 2001을 포함할 수 있다. 전자 장치 100은 객체 2001에 대한 입력을 검출하는 것에 기반하여 객체 2001과 관련된 메뉴 윈도우 2002를 표시할 수 있다. 메뉴 윈도우 2002는 객체 2001과 연동된 적어도 하나의 기능을 활성화하기 위한 적어도 하나의 영역을 포함할 수 있다. 예를 들면, 메뉴 윈도우 2002는 핀 모드에 기반하여 전자 장치 100과 추가적으로 연결될 장치를 결정하기 위한 기능을 활성화하기 위한 영역 2003을 포함할 수 있다. 다시 말해, 전자 장치 100은 핀 모드로 설정된 어플리케이션과 관련된 화면을 하나의 장치 뿐 아니라 복수의 장치들에서 표시할 수 있다.
전자 장치 100은 영역 2003에 대한 입력 2004를 검출하는 것에 기반하여, 추가될 장치를 결정하기 위한 윈도우 2005를 표시할 수 있다. 일부 실시 예들에서, 전자 장치 100은 메뉴 윈도우 2002를 표시하는 것을 중단하고, 윈도우 2005를 표시할 수 있다. 윈도우 2005는 전자 장치 100이 핀 모드를 위해 추가할 수 있는 적어도 하나의 장치에 대한 정보를 포함할 수 있다. 상기 적어도 하나의 장치를 결정하는 동작은, 도 16의 설명에 따른 동작에 대응할 수 있다.
윈도우 2005는 핀 모드를 위해 추가할 수 있는 적어도 하나의 장치를 나타내기 위한 적어도 하나의 영역을 포함할 수 있다. 예를 들면, 윈도우 2005는 S notebook을 나타내는 영역과 S refridgerator를 나타내는 영역을 포함할 수 있다. 일부 실시 예들에서, 윈도우 2005에 포함된 각 영역은 장치를 나타내는 이미지와 장치를 나타내는 글자를 포함할 수 있다.
전자 장치 100은 윈도우 2005에 포함된 영역 2006에 대한 입력을 수신할 수 있다. 전자 장치 100은, 영역 2006에 대한 입력을 수신하는 것에 기반하여, 핀 모드로 설정된 동영상 어플리케이션을 외부 전자 장치 2007에게 송신할 수 있다. 다시 말해, 전자 장치 100은 동영상 어플리케이션의 핀 모드를 외부 전자 장치 205 뿐 아니라 외부 전자 장치 2007과도 설정할 수 있다. 외부 전자 장치 2007은 전자 장치 100으로부터 수신되는 데이터에 기반하여, 동영상 어플리케이션을 통해 재생되고 있는 컨텐츠의 화면을 표시할 수 있다. 일부 실시 예들에서, 외부 전자 장치 205에서 표시되는 화면은 외부 전자 장치 2007에서 표시되고 있는 화면에 대응할 수 있다.
외부 전자 장치 2007이 핀 모드를 위해 연결된 장치로 추가됨에 따라, 객체 2001은 업데이트될 수 있다. 예를 들면, 전자 장치 100은 외부 전자 장치 205를 나타내는 이미지를 포함하는 객체 2001로부터 변경된 객체 2008을 표시할 수 있다. 객체 2008은 외부 전자 장치 205를 나타내기 위한 이미지 뿐 아니라 외부 전자 장치 2007을 나타내기 위한 이미지를 포함할 수 있다. 일부 실시 예들에서, 전자 장치 100과 핀 모드를 통해 연결된 장치의 수가 기준값 이상인 경우, 전자 장치 100은 각 장치를 나타내는 이미지 대신 전자 장치 100과 연결된 장치의 수를 표시할 수도 있다.
외부 전자 장치 2007이 핀 모드를 위해 연결된 장치로 추가됨에 따라, 메뉴 윈도우 2002는 업데이트될 수 있다. 예를 들면, 외부 전자 장치 2007이 추가된 후, 전자 장치 100은 메뉴 윈도우 2009을 표시할 수 있다. 메뉴 윈도우 2009는 메뉴 윈도우 2002와 달리, 외부 전자 장치 2007에 관한 아이템들을 더 포함할 수 있다.
예를 들면, 메뉴 윈도우 2009는 외부 전자 장치 205에서 핀되는 어플리케이션에 대한 바로 가기 아이템, 외부 전자 장치 2007에서 핀되는 어플리케이션에 대한 바로 가기 아이템, 외부 전자 장치 205에서 핀되는 어플리케이션의 직접 제어 아이템, 외부 전자 장치 2007에서 핀되는 어플리케이션의 직접 제어 아이템, 외부 전자 장치 205에서 핀되는 어플리케이션의 핀 모드를 해제하는 아이템, 외부 전자 장치 2007에서 핀되는 어플리케이션의 핀 모드를 해제하는 아이템, 외부 전자 장치 205와의 연결을 단절하는 아이템, 외부 전자 장치 2007와의 연결을 단절하는 아이템 등을 포함할 수 있다.
도 20은 외부 전자 장치 205와 외부 전자 장치 2007에서 동일한 어플리케이션이 핀되는 환경을 예시하고 있지만, 이는 설명을 위한 예시일 뿐이다. 도 2, 도 3, 또는 도 17에 예시된 동작들을 통해 전자 장치 100은 외부 전자 장치 205에서 핀되는 어플리케이션과 외부 전자 장치 2007에서 핀되는 어플리케이션을 독립적으로 설정할 수 있다.
다양한 실시 예들에 따른 전자 장치 100은 복수의 장치들에서 어플리케이션을 핀하는 다중 핀 모드를 통해, 전자 장치 100의 화면을 확장할 수 있을 뿐 아니라, 보다 유동적인 환경을 사용자에게 제공할 수 있다.
도 21은 다양한 실시 예들에 따라 다중 핀 모드를 위한 복수의 장치들을 결정하기 위한 기능의 예를 도시한다. 이러한 기능은, 도 1에 도시된 전자 장치 100에 의해 수행될 수 있다.
도 21을 참조하면, 전자 장치 100은 사용자 인터페이스(UI, user interface) 2100을 표시할 수 있다. 사용자 인터페이스 2100은 적어도 하나의 외부 전자 장치와 화면을 공유하기 위한 연결을 설정하기 위한 객체(smart view) 2101을 포함할 수 있다.
객체 2101에 대한 입력을 수신하는 것에 기반하여, 전자 장치 100은 전자 장치 100의 화면을 공유할 장치를 선택하기 위한 윈도우 2102를 표시할 수 있다. 윈도우 2102는 화면 2100a와 중첩될 수 있다. 윈도우 2102는 도 16에서 설명된 동작과 유사한 동작을 통해 결정된 적어도 하나의 외부 전자 장치에 대한 정보를 표시할 수 있다. 예를 들면, 윈도우 2102는 결정된 적어도 하나의 외부 전자 장치에 대한 정보로 노트북을 나타내기 위한 이미지, 냉장고를 나타내기 위한 이미지, TV를 나타내기 위한 이미지를 표시할 수 있다. 또한, 윈도우 2102는 표시된 적어도 하나의 외부 전자 장치 중 전부 또는 일부를 선택하기 위한 사용자의 입력을 수신하기 위한 적어도 하나의 객체 2103을 포함할 수 있다.
전자 장치 100은 적어도 하나의 객체 2103을 통해 냉장고와 TV를 선택하기 위한 사용자의 입력 2104를 수신할 수 있다. 또한, 전자 장치 100은 냉장고와 TV를 선택함을 확정하기 위한 입력 2105를 수신할 수 있다.
전자 장치 100은 입력 2105를 수신하는 것에 기반하여, 냉장고(외부 전자 장치 2106)와의 연결 및 TV(외부 전자 장치 205)와의 연결을 각각 수립할 수 있다. 또한, 전자 장치 100은 입력 2105를 수신하는 것에 기반하여, 화면 2100a 상에서 플로팅된 핀 모드를 위한 객체 2107을 표시할 수 있다. 일부 실시 예들에서, 객체 2107은 전자 장치 100과 연결을 설정한 외부 전자 장치의 수를 나타내는 이미지를 포함할 수 있다.
한편, 외부 전자 장치 205와 외부 전자 장치 2106 각각은 핀 모드가 설정되지 않은 상태이기 때문에, 전자 장치가 현재 표시 중인 화면 2100a의 구성과 대응하는 구성을 가지는 화면을 표시할 수 있다. 다시 말해, 외부 전자 장치 205와 외부 전자 장치 2106 각각은 화면 2100a에 대한 미러링을 수행할 수 있다. 하지만, 도 2, 도 3, 및 도 16에 대한 설명에 따른 동작들에 적어도 일부 대응하는 동작을 통해, 전자 장치 100은 전자 장치 100의 표시 화면, 외부 전자 장치 205의 표시 화면, 또는 외부 전자 장치 2106의 표시 화면 중 하나 또는 그 이상을 독립적으로 운영할 수 있다.
상술한 바와 같이, 전자 장치 100은 특정 장치와 핀 모드를 위한 연결을 설정한 후, 다른 장치를 추가하는 것 뿐 아니라, 초기 연결 설정 단계에서 복수의 장치들과 핀 모드를 설정할 수 있다.
도 22는 다양한 실시 예들에 따른 전자 장치와 외부 전자 장치 사이의 신호 흐름을 도시한다. 이러한 신호 흐름은, 도 1에 도시된 전자 장치 100과 도 2에 도시된 외부 전자 장치 205 사이에서 야기될 수 있다.
도 22를 참조하면, 동작 2201에서, 전자 장치 100과 외부 전자 장치 205는 화면 공유를 위한 연결을 수립할 수 있다. 상기 수립된 연결은 전자 장치 100의 트리거링에 의해 수행될 수도 있고, 외부 전자 장치 205의 트리거링에 의해 수행될 수도 있다. 또한, 상기 수립된 연결은, 전자 장치 100 및 외부 전자 장치 205가 아닌 다른 장치의 트리거링에 의해 수행될 수도 있다.
동작 2202에서, 전자 장치 100은, 상기 연결이 수립되는 것에 기반하여 화면 공유를 위한 제1 데이터의 송신을 개시할 수 있다. 상기 제1 데이터는 전자 장치 100의 현재 표시 화면과 관련된 정보를 포함할 수 있다.
동작 2203에서, 전자 장치 100은 외부 전자 장치 205에게 제1 데이터를 송신할 수 있다. 외부 전자 장치 205는, 제1 데이터를 수신할 수 있다.
동작 2204에서, 전자 장치 100은 현재 표시 중인 화면 상에 핀 모드를 위한 객체를 표시할 수 있다.
동작 2205에서, 외부 전자 장치 205는 전자 장치 100으로부터 수신되는 제1 데이터에 기반하여 전자 장치 100이 현재 표시 중인 화면을 표시할 수 있다. 다시 말해, 외부 전자 장치 205는, 전자 장치 100과 미러링을 수행할 수 있다.
도 22에서 도시된 동작 2203, 동작 2204, 동작 2205의 순서는 설명을 위한 순서일 뿐임을 유의하여야 한다. 동작 2203 내지 동작 2205는 동시에 수행될 수도 있고, 순서에 관계없이 수행될 수도 있다. 또한, 도 26은, 전자 장치 100이 제1 데이터를 동작 2203이 수행되는 시점에서 송신함을 표시하고 있지만, 핀 모드가 설정될 때(또는 적용될 때)까지 제1 데이터를 송신하는 것을 유지할 수 있다. 또한, 상기 제1 데이터는, 전자 장치 100이 표시하는 화면과 관련된 데이터를 의미할 수 있다. 다시 말해, 전자 장치 100이 표시하는 화면이 변경되는 경우, 제1 데이터 내의 정보도 변경될 수 있다.
동작 2206에서, 전자 장치 100은 제1 어플리케이션을 위한 제1 객체에 대한 입력을 수신할 수 있다.
동작 2208에서, 전자 장치 100은 제1 객체에 대한 입력을 수신하는 것에 기반하여, 제1 어플리케이션과 관련된 제1 화면을 표시할 수 있다. 외부 전자 장치 205는 전자 장치 100과 미러링을 수행하고 있는 바, 외부 전자 장치 205는, 동작 2209에서, 제1 화면을 표시할 수 있다.
동작 2210에서, 전자 장치 100은, 핀 모드를 위한 객체에 대한 입력을 수신할 수 있다. 다시 말해, 전자 장치 100은, 현재 표시 중인 제1 화면과 관련되는 제1 어플리케이션을 핀 모드로 설정할 수 있다. 전자 장치 100은 제1 어플리케이션을 핀 모드로 설정한 하였기 때문에, 전자 장치 100은 제1 어플리케이션이 백그라운드 상태로 전환되는지 여부와 관계없이 제1 어플리케이션과 관련된 화면을 외부 전자 장치 205에서 표시하기 위한 데이터를 외부 전자 장치 205에게 송신할 수 있다.
동작 2211에서, 전자 장치 100은, 사용자의 입력 또는 전자 장치 100의 상태 변화에 기반하여 제1 어플리케이션을 백그라운드 상태로 전환할 수 있다. 다시 말해, 전자 장치 100은, 제1 어플리케이션과 관련되지 않은 화면을 디스플레이부 120을 통해 출력할 수 있다.
동작 2212에서, 전자 장치 100은 제2 데이터를 송신할 수 있다. 다시 말해, 전자 장치 100은, 제1 어플리케이션이 백그라운드 상태로 전환된 것과 관계없이, 제1 어플리케이션과 관련된 화면을 외부 전자 장치 205에서 표시하기 위한 제2 데이터를 송신할 수 있다.
동작 2213에서, 외부 전자 장치 205는 제1 화면을 표시하는 것을 유지할 수 있다. 외부 전자 장치 205는 제1 어플리케이션이 핀된 상태에서 동작하기 때문에 제1 화면을 표시하는 것을 유지할 수 있다. 또한, 외부 전자 장치 205는 전자 장치 100으로부터 제2 데이터를 수신하기 때문에, 제1 화면을 표시하는 것을 유지할 수 있다.
동작 2214에서, 전자 장치 100은 제2 객체에 대한 입력을 수신할 수 있다. 예를 들면, 제2 객체는 제1 어플리케이션과 다른 제2 어플리케이션과 관련될 수 있다.
동작 2215에서, 전자 장치 100은 제2 객체에 대한 입력을 수신하는 것에 기반하여 제2 어플리케이션과 관련된 제2 화면을 표시할 수 있다. 다시 말해, 전자 장치 100은 동작 2211이 수행된 후와 다른 화면을 표시할 수 있다. 하지만, 전자 장치 100은, 핀 모드에서 동작히기 때문에, 동작 2216에서, 외부 전자 장치 205에게 제2 데이터를 송신할 수 있다. 다시 말해, 전자 장치 100은, 전자 장치 100의 현재 상태와 관계없이 핀 모드로 설정된 제1 어플리케이션과 연관된 제2 데이터를 외부 전자 장치 205에게 송신할 수 있다.
동작 2217에서, 외부 전자 장치 205는 제1 화면을 표시하는 것을 유지할 수 있다. 외부 전자 장치 205는 전자 장치 100과 핀 모드에 기반하여 연결된 상태이기 때문에, 전자 장치 100의 제2 화면의 표시와 관계없이 제1 화면을 표시하는 것을 유지할 수 있다.
상술한 바와 같이, 다양한 실시 예들에 따른 전자 장치의 방법은, 제1 형상을 가지고, 상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅된(floated on) 객체를 표시하는 동작과, 상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하는 동작과, 상기 표시된 객체에 대한 입력을 수신하는 것에 기반하여, 상기 제1 형상으로부터 변경된 제2 형상을 가지는 상기 객체를 표시하는 동작과, 상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하는 동작을 포함할 수 있다.
다양한 실시 예들에서, 상기 방법은, 상기 객체에 대한 다른 입력을 수신하는 것에 대응하여, 상기 객체를 통해 실행할 수 있는 기능들을 각각 나타내는 복수의 아이템들을 표시하는 동작을 더 포함할 수 있고, 상기 복수의 아이템들은, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 상기 포어그라운드 상태로 전환하기 위한 기능을 나타내는 아이템, 상기 데이터의 송신을 중단하기 위한 기능을 나타내는 아이템, 상기 전자 장치에 연결된 장치를 다른 외부 전자 장치로 변경하기 위한 기능을 나타내는 아이템, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 제어하기 위한 아이템, 또는 상기 외부 전자 장치와의 연결을 중단하기 위한 기능을 나타내는 아이템 중 적어도 하나를 포함할 수 있다. 또한, 상기 복수의 아이템들은, 상기 다른 입력을 수신하는 것에 대응하여 상기 객체 옆에(by) 표시되는 메시지 창(message window) 내에 포함될 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 화면이 컨텐츠(content)의 재생과 관련된 경우, 상기 외부 전자 장치에서 상기 컨텐츠가 재생되고 있는 시점(timing)을 나타내기 위한 요소를 포함할 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 어플리케이션을 나타내기 위한 컬러(color)를 가지는 윤곽(contour)을 포함할 수 있다.
다양한 실시 예들에서, 상기 제2 형상을 가지는 객체는, 상기 제1 어플리케이션을 나타내기 위한 이미지를 포함할 수 있다.
다양한 실시 예들에서, 상기 제1 형상을 가지는 객체는, 상기 외부 전자 장치와의 연결을 수립(establish)하는 것에 기반하여, 생성될 수 있다.
다양한 실시 예들에서, 상기 입력은, 상기 전자 장치 내에서 실행 중인 복수의 어플리케이션들 중에서 상기 제1 어플리케이션과 관련된 상기 제1 화면만을 상기 외부 전자 장치에서 표시하는 핀 모드(pin mode)에 진입하기 위해 이용될 수 있다.
다양한 실시 예들에서, 상기 방법은, 상기 제2 형상을 가지는 상기 객체에 대한 다른 입력을 수신하는 것에 기반하여, 상기 외부 전자 장치에서 표시되고 있는 제1 화면을 표시하는 윈도우(window)를 표시하는 동작을 더 포함할 수 있고, 상기 윈도우는, 상기 제2 화면 위에 중첩될 수 있다.
상술한 바와 같이 다양한 실시 예들에 따른 전자 장치의 방법은, 백그라운드(background) 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는(floated on) 객체를 표시하는 동작을 포함할 수 있다.
본 개시의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합의 형태로 구현될(implemented) 수 있다.
소프트웨어로 구현하는 경우, 하나 이상의 프로그램(소프트웨어 모듈)을 저장하는 컴퓨터 판독 가능 저장 매체가 제공될 수 있다. 컴퓨터 판독 가능 저장 매체에 저장되는 하나 이상의 프로그램은, 전자 장치(device) 내의 하나 이상의 프로세서에 의해 실행 가능하도록 구성된다(configured for execution). 하나 이상의 프로그램은, 전자 장치로 하여금 본 개시의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들을 실행하게 하는 명령어(instructions)를 포함한다.
이러한 프로그램(소프트웨어 모듈, 소프트웨어)은 랜덤 액세스 메모리 (random access memory), 플래시(flash) 메모리를 포함하는 불휘발성(non-volatile) 메모리, 롬(ROM: Read Only Memory), 전기적 삭제가능 프로그램가능 롬(EEPROM: Electrically Erasable Programmable Read Only Memory), 자기 디스크 저장 장치(magnetic disc storage device), 컴팩트 디스크 롬(CD-ROM: Compact Disc-ROM), 디지털 다목적 디스크(DVDs: Digital Versatile Discs) 또는 다른 형태의 광학 저장 장치, 마그네틱 카세트(magnetic cassette)에 저장될 수 있다. 또는, 이들의 일부 또는 전부의 조합으로 구성된 메모리에 저장될 수 있다. 또한, 각각의 구성 메모리는 다수 개 포함될 수도 있다.
또한, 상기 프로그램은 인터넷(Internet), 인트라넷(Intranet), LAN(Local Area Network), WLAN(Wide LAN), 또는 SAN(Storage Area Network)과 같은 통신 네트워크, 또는 이들의 조합으로 구성된 통신 네트워크를 통하여 접근(access)할 수 있는 부착 가능한(attachable) 저장 장치(storage device)에 저장될 수 있다. 이러한 저장 장치는 외부 포트를 통하여 본 개시의 실시 예를 수행하는 장치에 접속할 수 있다. 또한, 통신 네트워크상의 별도의 저장장치가 본 개시의 실시 예를 수행하는 장치에 접속할 수도 있다.
상술한 본 개시의 구체적인 실시 예들에서, 개시에 포함되는 구성 요소는 제시된 구체적인 실시 예에 따라 단수 또는 복수로 표현되었다. 그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 본 개시가 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성 요소라 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다.
한편 본 개시의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 개시의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 개시의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

Claims (15)

  1. 전자 장치(electronic device)에 있어서,
    명령어(instruction)들을 저장하는 메모리(memory)와,
    디스플레이부(display unit)와,
    통신부(communication unit)와,
    상기 메모리와 전기적으로 연결되고,
    상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅되고(floated on) 제1 형상을 가지는 객체를 표시하고,
    상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하고,
    상기 표시된 객체에 대한 입력을 수신하고,
    상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함하는 전자 장치.
  2. 청구항 1에 있어서, 상기 적어도 하나의 프로세서는,
    상기 객체에 대한 다른 입력을 수신하는 것에 대응하여, 상기 객체를 통해 실행할 수 있는 기능들을 각각 나타내는 복수의 아이템들을 표시하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되고,
    상기 복수의 아이템들은,
    상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 상기 포어그라운드 상태로 전환하기 위한 기능을 나타내는 아이템, 상기 데이터의 송신을 중단하기 위한 기능을 나타내는 아이템, 상기 전자 장치에 연결된 장치를 다른 외부 전자 장치로 변경하기 위한 기능을 나타내는 아이템, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 제어하기 위한 아이템, 또는 상기 외부 전자 장치와의 연결을 중단하기 위한 기능을 나타내는 아이템 중 적어도 하나를 포함하는 전자 장치.
  3. 청구항 1에 있어서, 상기 적어도 하나의 프로세서는,
    상기 입력을 수신하는 것에 기반하여, 상기 객체의 형상을 제1 형상으로부터 변경된 제2 형상을 가지는 상기 객체를 표시하기 위해 상기 명령어들을 실행하도록 더 설정되는 전자 장치.
  4. 청구항 3에 있어서, 상기 제2 형상을 가지는 객체는,
    상기 제1 화면이 컨텐츠(content)의 재생과 관련된 경우, 상기 외부 전자 장치에서 상기 컨텐츠가 재생되고 있는 시점(timing)을 나타내기 위한 요소를 포함하는 전자 장치.
  5. 청구항 3에 있어서, 상기 제2 형상을 가지는 객체는,
    상기 제1 어플리케이션을 나타내기 위한 컬러(color)를 가지는 윤곽(contour)을 포함하는 전자 장치.
  6. 청구항 3에 있어서, 상기 제2 형상을 가지는 객체는,
    상기 제1 어플리케이션을 나타내기 위한 이미지를 포함하는 전자 장치.
  7. 청구항 3에 있어서, 상기 제1 형상을 가지는 객체는,
    상기 외부 전자 장치와의 연결을 수립(establish)하는 것에 기반하여, 생성되는 전자 장치.
  8. 청구항 3에 있어서, 상기 적어도 하나의 프로세서는,
    상기 제2 형상을 가지는 상기 객체에 대한 다른 입력을 수신하는 것에 기반하여, 상기 외부 전자 장치에서 표시되고 있는 제1 화면을 표시하는 윈도우(window)를 표시하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되고,
    상기 윈도우는,
    상기 제2 화면 위에 중첩되는 전자 장치.
  9. 청구항 8에 있어서, 상기 적어도 하나의 프로세서는,
    상기 윈도우에 대한 제1 입력을 수신하는 것에 기반하여 상기 윈도우의 사이즈를 변경하고,
    상기 윈도우에 대한 제2 입력을 수신하는 것에 기반하여 상기 윈도우의 위치를 변경하기 위해 상기 저장된 명령어들을 실행하도록 더 설정되는 전자 장치.
  10. 청구항 1에 있어서, 상기 입력은,
    상기 전자 장치 내에서 실행 중인 복수의 어플리케이션들 중에서 상기 제1 어플리케이션과 관련된 상기 제1 화면만을 상기 외부 전자 장치에서 표시하는 핀 모드(pin mode)에 진입하기 위해 이용되는 전자 장치.
  11. 전자 장치(electronic device)의 방법에 있어서,
    제1 형상을 가지고, 상기 전자 장치에서 표시되고 있는 제1 화면 위에 플로팅된(floated on) 객체를 표시하는 동작과,
    상기 제1 화면을 외부 전자 장치에서 표시하기 위한 데이터를 상기 외부 전자 장치에게 송신하는 동작과,
    상기 표시된 객체에 대한 입력을 수신하는 것에 기반하여, 상기 제1 형상으로부터 변경된 제2 형상을 가지는 상기 객체를 표시하는 동작과,
    상기 제1 화면과 관련된 제1 어플리케이션이 포어그라운드(foreground) 상태에서 백그라운드(background) 상태로 전환되는 것에 기반하여, 상기 데이터의 송신을 유지한 상태에서 제2 화면을 표시하는 동작을 포함하는 방법.
  12. 청구항 11에 있어서,
    상기 객체에 대한 다른 입력을 수신하는 것에 대응하여, 상기 객체를 통해 실행할 수 있는 기능들을 각각 나타내는 복수의 아이템들을 표시하는 동작을 더 포함하고,
    상기 복수의 아이템들은,
    상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 상기 포어그라운드 상태로 전환하기 위한 기능을 나타내는 아이템, 상기 데이터의 송신을 중단하기 위한 기능을 나타내는 아이템, 상기 전자 장치에 연결된 장치를 다른 외부 전자 장치로 변경하기 위한 기능을 나타내는 아이템, 상기 백그라운드 상태에서 동작하는 상기 제1 어플리케이션을 제어하기 위한 아이템, 또는 상기 외부 전자 장치와의 연결을 중단하기 위한 기능을 나타내는 아이템 중 적어도 하나를 포함하는 방법.
  13. 청구항 11에 있어서, 상기 입력을 수신하는 동작은,
    상기 입력을 수신하는 것에 기반하여, 상기 객체의 형상을 제1 형상으로부터 변경된 제2 형상을 가지는 상기 객체를 표시하는 동작을 더 포함하는 방법.
  14. 청구항 13에 있어서, 상기 제2 형상을 가지는 객체는,
    상기 제1 화면이 컨텐츠(content)의 재생과 관련된 경우, 상기 외부 전자 장치에서 상기 컨텐츠가 재생되고 있는 시점(timing)을 나타내기 위한 요소를 포함하는 방법.
  15. 전자 장치(electronic device)에 있어서,
    명령어(instruction)들을 저장하는 메모리(memory)와,
    디스플레이부(display unit)와,
    통신부(communication unit)와,
    상기 메모리와 전기적으로 연결되고,
    백그라운드(background) 상태에서 동작하는 제1 어플리케이션과 관련된 제1 화면이 상기 전자 장치로부터 송신되는 데이터에 기반하여 상기 전자 장치와 연결된 외부 전자 장치에서 표시되고 있음을 나타내고, 상기 전자 장치에서 표시되고 있는 제2 화면 위에 플로팅되는(floated on) 객체를 표시하기 위해 상기 저장된 명령어들을 실행하도록 설정되는 적어도 하나의 프로세서를 포함하는 전자 장치.
PCT/KR2018/001924 2017-02-17 2018-02-14 화면을 공유하기 위한 전자 장치 및 방법 WO2018151522A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP18754308.7A EP3582098A4 (en) 2017-02-17 2018-02-14 ELECTRONIC DEVICE AND SCREEN SHARING METHOD
US16/486,640 US10983749B2 (en) 2017-02-17 2018-02-14 Electronic device and method for sharing screen
US17/234,434 US11334311B2 (en) 2017-02-17 2021-04-19 Electronic device and method for sharing screen

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170021856A KR20180095399A (ko) 2017-02-17 2017-02-17 화면을 공유하기 위한 전자 장치 및 방법
KR10-2017-0021856 2017-02-17

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/486,640 A-371-Of-International US10983749B2 (en) 2017-02-17 2018-02-14 Electronic device and method for sharing screen
US17/234,434 Continuation US11334311B2 (en) 2017-02-17 2021-04-19 Electronic device and method for sharing screen

Publications (1)

Publication Number Publication Date
WO2018151522A1 true WO2018151522A1 (ko) 2018-08-23

Family

ID=63169581

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/001924 WO2018151522A1 (ko) 2017-02-17 2018-02-14 화면을 공유하기 위한 전자 장치 및 방법

Country Status (4)

Country Link
US (2) US10983749B2 (ko)
EP (1) EP3582098A4 (ko)
KR (1) KR20180095399A (ko)
WO (1) WO2018151522A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2019283975A9 (en) * 2019-01-04 2020-11-12 Apple Inc. Predictive media routing
CN112019893A (zh) * 2019-05-30 2020-12-01 北京小米移动软件有限公司 终端的投屏方法和终端的投屏装置
JP2022502719A (ja) * 2019-08-28 2022-01-11 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co., Ltd. 画面ミラーリング方法、装置、端末及び記憶媒体

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102412283B1 (ko) * 2016-02-17 2022-06-23 삼성전자 주식회사 전자 장치 및 전자 장치의 영상 공유 제어 방법
KR20180095399A (ko) 2017-02-17 2018-08-27 삼성전자주식회사 화면을 공유하기 위한 전자 장치 및 방법
CN109062475B (zh) * 2018-08-22 2020-08-28 Oppo广东移动通信有限公司 图标显示方法、装置、终端及存储介质
JP6778735B2 (ja) * 2018-12-26 2020-11-04 本田技研工業株式会社 表示装置、表示方法、およびプログラム
US11455081B2 (en) * 2019-08-05 2022-09-27 Snap Inc. Message thread prioritization interface
KR20210059177A (ko) * 2019-11-15 2021-05-25 삼성전자주식회사 전자장치 및 그 제어방법
CN111026484A (zh) * 2019-12-02 2020-04-17 维沃移动通信有限公司 一种应用分享方法、第一电子设备及计算机可读存储介质
CN113542825B (zh) * 2020-04-20 2022-10-11 华为技术有限公司 投屏显示方法、系统、终端设备和存储介质
CN111913628B (zh) * 2020-06-22 2022-05-06 维沃移动通信有限公司 分享方法、装置和电子设备
CN111880757A (zh) * 2020-06-30 2020-11-03 北京小米移动软件有限公司 投屏方法、投屏装置及存储介质
CN112269525B (zh) * 2020-11-04 2022-08-16 北京小米移动软件有限公司 小屏窗口显示方法、装置及存储介质
CN114827335B (zh) * 2021-01-18 2023-08-22 华为技术有限公司 多终端屏幕互动显示控制方法及电子设备
JP2022139202A (ja) * 2021-03-11 2022-09-26 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システムおよびプログラム
CN116301516A (zh) * 2021-12-21 2023-06-23 北京小米移动软件有限公司 一种应用共享方法及装置、电子设备、存储介质
KR20230119536A (ko) * 2022-02-07 2023-08-16 삼성전자주식회사 외부 디스플레이 장치를 제어하기 위한 전자 장치 및 그 동작 방법
WO2023248912A1 (ja) * 2022-06-23 2023-12-28 京セラドキュメントソリューションズ株式会社 電子機器及び制御方法
KR102548668B1 (ko) * 2023-02-01 2023-06-28 주식회사 디자인방위대 음료 제조 방법 및 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140093451A (ko) * 2013-01-18 2014-07-28 주식회사 엘지유플러스 단말에서의 화면 공유 방법 및 화면 공유가 가능한 단말
KR20140137642A (ko) * 2013-05-23 2014-12-03 네이버 주식회사 단말기간 화면 공유 제어 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
KR20150009103A (ko) * 2013-07-15 2015-01-26 주식회사 엘지유플러스 프라이버시 보호를 위한 단말 간 화면 공유 방법 및 그 단말
US20150061970A1 (en) * 2013-08-29 2015-03-05 Samsung Electronics Co., Ltd. Method for sharing screen and electronic device thereof
KR20160045370A (ko) * 2014-10-17 2016-04-27 삼성전자주식회사 디바이스 간에 화면 공유 방법 및 이를 이용하는 디바이스

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110085189A (ko) 2010-01-19 2011-07-27 박철 터치패널을 갖는 개인휴대단말기의 작동방법
KR20150127842A (ko) 2012-06-28 2015-11-18 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
KR101919796B1 (ko) * 2013-01-11 2018-11-19 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
JP6097679B2 (ja) 2013-02-28 2017-03-15 エルジー アプラス コーポレーション 端末間機能共有方法及びその端末
KR102345610B1 (ko) 2015-02-27 2021-12-30 삼성전자주식회사 스크린 미러링 서비스 제공장치 및 방법
KR20170071347A (ko) * 2015-12-15 2017-06-23 엘지전자 주식회사 이동단말기 및 그 제어방법
KR102412283B1 (ko) * 2016-02-17 2022-06-23 삼성전자 주식회사 전자 장치 및 전자 장치의 영상 공유 제어 방법
KR20180095399A (ko) 2017-02-17 2018-08-27 삼성전자주식회사 화면을 공유하기 위한 전자 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140093451A (ko) * 2013-01-18 2014-07-28 주식회사 엘지유플러스 단말에서의 화면 공유 방법 및 화면 공유가 가능한 단말
KR20140137642A (ko) * 2013-05-23 2014-12-03 네이버 주식회사 단말기간 화면 공유 제어 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
KR20150009103A (ko) * 2013-07-15 2015-01-26 주식회사 엘지유플러스 프라이버시 보호를 위한 단말 간 화면 공유 방법 및 그 단말
US20150061970A1 (en) * 2013-08-29 2015-03-05 Samsung Electronics Co., Ltd. Method for sharing screen and electronic device thereof
KR20160045370A (ko) * 2014-10-17 2016-04-27 삼성전자주식회사 디바이스 간에 화면 공유 방법 및 이를 이용하는 디바이스

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3582098A4 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2019283975A9 (en) * 2019-01-04 2020-11-12 Apple Inc. Predictive media routing
AU2019283975B2 (en) * 2019-01-04 2021-05-06 Apple Inc. Predictive media routing
US11234051B2 (en) 2019-01-04 2022-01-25 Apple Inc. Predictive media routing
US11729470B2 (en) 2019-01-04 2023-08-15 Apple Inc. Predictive media routing based on interrupt criteria
CN112019893A (zh) * 2019-05-30 2020-12-01 北京小米移动软件有限公司 终端的投屏方法和终端的投屏装置
CN112019893B (zh) * 2019-05-30 2023-09-12 北京小米移动软件有限公司 终端的投屏方法和终端的投屏装置
JP2022502719A (ja) * 2019-08-28 2022-01-11 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co., Ltd. 画面ミラーリング方法、装置、端末及び記憶媒体
JP7114633B2 (ja) 2019-08-28 2022-08-08 北京小米移動軟件有限公司 画面ミラーリング方法、装置、端末及び記憶媒体
US11474657B2 (en) 2019-08-28 2022-10-18 Beijing Xiaomi Mobile Software Co., Ltd. Screen casting method, apparatus, terminal and storage medium

Also Published As

Publication number Publication date
US10983749B2 (en) 2021-04-20
US20210240428A1 (en) 2021-08-05
US20200057596A1 (en) 2020-02-20
KR20180095399A (ko) 2018-08-27
US11334311B2 (en) 2022-05-17
EP3582098A4 (en) 2020-01-15
EP3582098A1 (en) 2019-12-18

Similar Documents

Publication Publication Date Title
WO2018151522A1 (ko) 화면을 공유하기 위한 전자 장치 및 방법
WO2012046890A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2016111555A2 (en) Bendable user terminal device and method for displaying thereof
WO2013162200A1 (en) Method and terminal for displaying a plurality of pages, method and terminal for displaying a plurality of applications being executed on terminal, and method of executing a plurality of applications
WO2015199453A1 (en) Foldable electronic apparatus and interfacing method thereof
WO2015170894A1 (en) Wearable device and controlling method thereof
WO2015167165A1 (en) Method and electronic device for managing display objects
WO2015005734A1 (en) User terminal device for supporting user interaction and methods thereof
WO2017095040A1 (en) User terminal device and displaying method thereof
WO2015102250A1 (en) User terminal apparatus and control method thereof
WO2017014403A1 (en) Portable apparatus, display apparatus, and method for displaying photo thereof
WO2015060621A1 (en) Method and device for transmitting data, and method and device for receiving data
WO2015102284A1 (en) User terminal apparatus and control method thereof
WO2016137167A1 (en) Terminal
WO2015119484A1 (en) User terminal device and displaying method thereof
WO2016064166A1 (en) Method of performing one or more operations based on a gesture
WO2015122661A1 (en) Mobile terminal, user interface method in the mobile terminal, and cover of the mobile terminal
WO2017010803A1 (en) Method for operating electronic device, and electronic device
WO2019107832A1 (en) Method and apparatus for adaptively providing indication associated with input in vehicle
WO2017086700A1 (en) Portable device and method for controlling screen thereof
WO2016056858A2 (en) Method for sharing screen and electronic device thereof
EP3243125A2 (en) Bendable user terminal device and method for displaying thereof
WO2016167620A1 (en) Apparatus and method for providing information via portion of display
WO2017105018A1 (en) Electronic apparatus and notification displaying method for electronic apparatus
WO2021006705A1 (en) Electronic device and method for outputting audio signal

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18754308

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018754308

Country of ref document: EP

Effective date: 20190909