WO2013012104A1 - 전자기기 및 전자기기의 동작 방법 - Google Patents

전자기기 및 전자기기의 동작 방법 Download PDF

Info

Publication number
WO2013012104A1
WO2013012104A1 PCT/KR2011/005271 KR2011005271W WO2013012104A1 WO 2013012104 A1 WO2013012104 A1 WO 2013012104A1 KR 2011005271 W KR2011005271 W KR 2011005271W WO 2013012104 A1 WO2013012104 A1 WO 2013012104A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
output
sound
image
content
Prior art date
Application number
PCT/KR2011/005271
Other languages
English (en)
French (fr)
Inventor
김태형
조용원
유선진
김성진
임성민
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to PCT/KR2011/005271 priority Critical patent/WO2013012104A1/ko
Priority to US13/242,971 priority patent/US8875191B2/en
Publication of WO2013012104A1 publication Critical patent/WO2013012104A1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4852End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4854End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast

Definitions

  • the present invention relates to an electronic device and a method of operating the electronic device, and more particularly, to an electronic device and a method of operating the electronic device to more effectively output the image and sound included in the content in the N-screen implementation environment.
  • Terminals such as personal computers, laptops, mobile phones, etc.
  • multimedia devices having complex functions such as taking pictures or videos, playing music or video files, playing games, and receiving broadcasts. It is implemented in the form of (Multimedia player).
  • Terminals may be divided into mobile terminals and stationary terminals according to their mobility.
  • the mobile terminal may be further classified into a handheld terminal and a vehicle mount terminal according to whether a user can directly carry it.
  • An object of the present invention is to provide an electronic device and a method of operating the electronic device to control a sound and an image included in the content to be output from different electronic devices when a predetermined event occurs during output of the content.
  • Still another object of the present invention is to output the content by reflecting the specific sound size in the changed output device when the output device of the content is changed while outputting content including an image and sound in a specific sound size. It is to provide an electronic device for controlling and an operation method of the electronic device.
  • An electronic device includes an output unit; And a controller configured to control the output of the image and the sound to be output from the other electronic device when a predetermined event occurs while outputting the content including the image and the sound through the output unit.
  • An electronic device includes an output unit; And a controller configured to control the output device to output the content on the basis of the specific sound level when the output device of the content is changed while outputting the content to the specific sound size through the output unit.
  • An electronic device includes the steps of: outputting a content including an image and sound through an output unit; And controlling the image and sound to be output from different electronic devices when a predetermined event occurs.
  • An electronic device includes the steps of: outputting content at a specific sound level through an output unit; And when the output device of the content is changed, controlling the output device to output the content based on the specific sound volume.
  • the image and sound of the content being output are controlled to be output from different electronic devices, thereby providing an optimal user content viewing environment.
  • the second electronic device when the content output from the first electronic device at a specific sound level is controlled to be output from the second electronic device, the second electronic device also considers the specific sound level. Outputting the content, thereby providing continuity in terms of sound.
  • FIG. 1 is a block diagram of an electronic device according to an embodiment of the present invention.
  • FIG. 2 illustrates a configuration of a service network associated with FIG. 1.
  • FIG. 3 shows a conceptual diagram of a DLNA network.
  • FIG. 5 is a flowchart illustrating a method of operating an electronic device according to a first embodiment of the present invention.
  • FIG. 6 is a view for explaining a content output environment of an electronic device according to a first embodiment of the present invention.
  • FIG. 8 illustrates a user interface of a first application according to a first embodiment of the present invention.
  • FIG 9 illustrates a user interface of a second application according to the first embodiment of the present invention.
  • FIG. 10 is a flowchart illustrating a second event according to the first embodiment of the present invention.
  • FIG. 11 illustrates a user interface for querying whether to output an image and a sound from different electronic devices according to the first embodiment of the present invention.
  • FIGS. 12 and 13 are diagrams for explaining a predetermined condition according to the first embodiment of the present invention.
  • step S120 is a flowchart for explaining step S120 according to a first embodiment of the present invention in more detail.
  • 15 to 17 illustrate a control signal according to a first embodiment of the present invention.
  • step S126 is a view for explaining step S126 according to a first embodiment of the present invention in more detail.
  • FIG. 19 shows a user interface for synchronization according to the first embodiment of the present invention.
  • 20 to 22 are views for explaining an integrated event according to a first embodiment of the present invention.
  • FIG. 23 is a flowchart illustrating a method of operating an electronic device according to a second embodiment of the present invention.
  • Figure 25 shows an implementation of the second embodiment of the present invention.
  • the mobile terminal described herein may include a mobile phone, a smart phone, a laptop computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), navigation, and the like.
  • PDA personal digital assistant
  • PMP portable multimedia player
  • the configuration according to the embodiments described herein may also be applied to fixed terminals such as digital TVs, desktop computers, etc., except when applicable only to mobile terminals.
  • FIG. 1 is a block diagram of a mobile terminal according to an embodiment of the present invention.
  • the mobile terminal 100 may include a wireless communication unit 110, an A / V input unit 120, a user input unit 130, a sensing unit 140, an output unit 150, a memory unit 160,
  • the interface unit 170 may include a controller 180, a power supply unit 190, and the like.
  • the components shown in FIG. 1 are not essential, so that a mobile terminal having more or fewer components may be implemented.
  • the wireless communication unit 110 may include one or more modules that enable wireless communication between the mobile terminal 100 and the wireless communication system or between the mobile terminal 100 and a network in which the mobile terminal 100 is located.
  • the wireless communication unit 110 may include a broadcast receiving module 111, a mobile communication module 112, a wireless internet module 113, a short range communication module 114, a location information module 115, and the like. .
  • the broadcast receiving module 111 receives a broadcast signal and / or broadcast related information from an external broadcast management server through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the broadcast management server may mean a server that generates and transmits a broadcast signal and / or broadcast related information or a server that receives a previously generated broadcast signal and / or broadcast related information and transmits the same to a terminal.
  • the broadcast signal may include not only a TV broadcast signal, a radio broadcast signal, and a data broadcast signal, but also a broadcast signal having a data broadcast signal combined with a TV broadcast signal or a radio broadcast signal.
  • the broadcast related information may mean information related to a broadcast channel, a broadcast program, or a broadcast service provider.
  • the broadcast related information may also be provided through a mobile communication network. In this case, it may be received by the mobile communication module 112.
  • the broadcast related information may exist in various forms. For example, it may exist in the form of Electronic Program Guide (EPG) of Digital Multimedia Broadcasting (DMB) or Electronic Service Guide (ESG) of Digital Video BroadcastHandheld (DVBH).
  • EPG Electronic Program Guide
  • DMB Digital Multimedia Broadcasting
  • ESG Electronic Service Guide
  • DVBH Digital Video BroadcastHandheld
  • the broadcast receiving module 111 receives a broadcast signal using various broadcasting systems, and in particular, Digital Multimedia Broadcasting Terrestrial (DMBT), Digital Multimedia Broadcasting Satellite (DMBS), Media Forward Link Only (MediaFLO), and Digital Video BroadcastHandheld (DVBH). ), A digital broadcast signal can be received using a digital broadcast system such as Integrated Services Digital Broadcast Terrestrial (ISDBT).
  • ISDBT Integrated Services Digital Broadcast Terrestrial
  • the broadcast receiving module 111 may be configured to be suitable for not only the above-described digital broadcast system but also other broadcast system for providing a broadcast signal.
  • the broadcast signal and / or broadcast related information received through the broadcast receiving module 111 may be stored in the memory unit 160.
  • the mobile communication module 112 transmits and receives a wireless signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call call signal, or a text / multimedia message.
  • the wireless internet module 113 refers to a module for wireless internet access, and the wireless internet module 113 may be internal or external to the mobile terminal 100.
  • Wireless Internet technologies may include Wireless LAN (WiFi), Wireless Broadband (Wibro), World Interoperability for Microwave Access (Wimax), High Speed Downlink Packet Access (HSDPA), and the like.
  • the short range communication module 114 refers to a module for short range communication.
  • Bluetooth Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, and the like may be used.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • the location information module 115 is a module for checking or obtaining the location of the mobile terminal.
  • a representative example of the location information module is a GPS (Global Position System) module.
  • the GPS module 115 calculates information about a distance of one point (object) away from three or more satellites, and information on a time at which the distance information is measured, and then calculates the calculated distance information.
  • the trigonometric method By applying the trigonometric method to, three-dimensional positional information according to latitude, longitude, and altitude of one point (object) at one time can be calculated.
  • a method of calculating position and time information using three satellites and correcting the error of the calculated position and time information using another satellite is also used.
  • the GPS module 115 may continuously calculate the current position in real time and use the same to calculate speed information.
  • the A / V input unit 120 is for inputting an audio signal or a video signal, and may include a camera 121 and a microphone 122.
  • the camera 121 processes image frames such as still images or moving images obtained by the image sensor in the video call mode or the photographing mode.
  • the processed image frame may be displayed on the display unit 151.
  • the image frame processed by the camera 121 may be stored in the memory unit 160 or transmitted to the outside through the wireless communication unit 110. Two or more cameras 121 may be provided according to the configuration aspect of the terminal.
  • the microphone 122 receives an external sound signal by a microphone in a call mode, a recording mode, a voice recognition mode, etc., and processes the external sound signal into electrical voice data.
  • the processed voice data may be converted into a form transmittable to the mobile communication base station through the mobile communication module 112 and output in the call mode.
  • the microphone 122 may implement various noise removing algorithms for removing noise generated in the process of receiving an external sound signal.
  • the user input unit 130 generates input data for the user to control the operation of the terminal.
  • the user input unit 130 may include a key pad dome switch, a touch pad (static pressure / capacitance), a jog wheel, a jog switch, and the like.
  • the sensing unit 140 detects a current state of the mobile terminal 100 such as an open / closed state of the mobile terminal 100, a location of the mobile terminal 100, presence or absence of a user contact, orientation of the mobile terminal, acceleration / deceleration of the mobile terminal, and the like. To generate a sensing signal for controlling the operation of the mobile terminal 100. For example, when the mobile terminal 100 is in the form of a slide phone, it may sense whether the slide phone is opened or closed. In addition, it may be responsible for sensing functions related to whether the power supply unit 190 is supplied with power, whether the interface unit 170 is coupled to an external device, and the like. Meanwhile, the sensing unit 140 may include a proximity sensor.
  • the output unit 150 is used to generate an output related to sight, hearing, or tactile sense, and includes a display unit 151, an audio output module 152, an alarm unit 153, and a haptic module 154. Can be.
  • the display unit 151 displays and outputs information processed by the mobile terminal 100. For example, when the mobile terminal is in a call mode, the mobile terminal displays a user interface (UI) or a graphic user interface (GUI) related to the call. When the mobile terminal 100 is in a video call mode or a photographing mode, the mobile terminal 100 displays photographed and / or received images, a UI, and a GUI.
  • UI user interface
  • GUI graphic user interface
  • the display unit 151 may be a liquid crystal display, a thin film transistor liquid crystal display, an organic light emitting diode, a flexible display, or a 3D display. It may include at least one.
  • Some of these displays can be configured to be transparent or light transmissive so that they can be seen from the outside. This may be referred to as a transparent display.
  • a representative example of the transparent display is a transparent LCD.
  • the rear structure of the display unit 151 may also be configured as a light transmissive structure. With this structure, the user can see the object located behind the terminal body through the area occupied by the display unit 151 of the terminal body.
  • a plurality of display units may be spaced apart or integrally disposed on one surface of the mobile terminal 100, or may be disposed on different surfaces, respectively.
  • the display unit 151 and a sensor for detecting a touch operation form a mutual layer structure (hereinafter, abbreviated as “touch screen”)
  • the display unit 151 is an output device. It can also be used as an input device.
  • the touch sensor may have, for example, a form of a touch film, a touch sheet, a touch pad, or the like.
  • the touch sensor may be configured to convert a change in pressure applied to a specific portion of the display unit 151 or capacitance generated in a specific portion of the display unit 151 into an electrical input signal.
  • the touch sensor may be configured to detect not only the position and area of the touch but also the pressure at the touch.
  • the touch controller processes the signal (s) and then transmits the corresponding data to the controller 180. As a result, the controller 180 can know which area of the display unit 151 is touched.
  • a proximity sensor may be disposed in an inner region of a mobile terminal surrounded by the touch screen or near the touch screen.
  • the proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without using mechanical force by using electromagnetic force or infrared rays.
  • Proximity sensors have a longer life and higher utilization than touch sensors.
  • the proximity sensor examples include a transmission photoelectric sensor, a direct reflection photoelectric sensor, a mirror reflection photoelectric sensor, a high frequency oscillation proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor.
  • the touch screen When the touch screen is capacitive, the touch screen is configured to detect the proximity of the pointer by the change of the electric field according to the proximity of the pointer.
  • the touch screen touch sensor
  • the touch screen may be classified as a proximity sensor.
  • the act of allowing the pointer to be recognized without being in contact with the touch screen so that the pointer is located on the touch screen is referred to as a "proximity touch", and the touch
  • the act of actually touching the pointer on the screen is called “contact touch.”
  • the position where the proximity touch is performed by the pointer on the touch screen refers to a position where the pointer is perpendicular to the touch screen when the pointer is in proximity proximity.
  • the proximity sensor detects a proximity touch and a proximity touch pattern (eg, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, and a proximity touch movement state).
  • a proximity touch and a proximity touch pattern eg, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, and a proximity touch movement state.
  • Information corresponding to the sensed proximity touch operation and proximity touch pattern may be output on the touch screen.
  • the sound output module 152 may output audio data received from the wireless communication unit 110 or stored in the memory unit 160 in a call signal reception, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, and the like.
  • the sound output module 152 outputs a sound signal related to a function (for example, a call signal reception sound and a message reception sound) performed in the mobile terminal 100.
  • the sound output module 152 may include a receiver, a speaker, a buzzer, and the like.
  • the alarm unit 153 outputs a signal for notifying occurrence of an event of the mobile terminal 100. Examples of events occurring in the mobile terminal include call signal reception, message reception, key signal input, and touch input.
  • the alarm unit 153 may output a signal for notifying occurrence of an event in a form other than a video signal or an audio signal, for example, vibration.
  • the video signal or the audio signal may also be output through the display unit 151 or the audio output module 152.
  • the haptic module 154 generates various haptic effects that a user can feel. Vibration is a representative example of the haptic effect generated by the haptic module 154.
  • the intensity and pattern of vibration generated by the haptic module 154 can be controlled. For example, different vibrations may be synthesized and output or may be sequentially output.
  • the haptic module 154 may be used for the effects of stimulation by the arrangement of pins vertically moving with respect to the contact skin surface, the effect of the jetting force of the air through the injection or inlet or the stimulation through the suction force, and the stimulation that strikes the skin surface.
  • Various tactile effects may be generated, such as effects by stimulation through contact of electrodes, effects by stimulation using electrostatic force, and effects of reproducing a sense of warmth and heat using an endothermic or heat generating element.
  • the haptic module 154 may not only deliver the haptic effect through direct contact, but also implement the haptic effect through the muscle sense of the user's finger or arm. Two or more haptic modules 154 may be provided according to a configuration aspect of the mobile terminal 100.
  • the memory unit 160 may store a program for the operation of the controller 180 and may temporarily store input / output data (for example, a phone book, a message, a still image, a video, etc.).
  • the memory unit 160 may store data regarding vibration and sound of various patterns output when a touch input on the touch screen is performed.
  • the memory unit 160 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), At least one of Random Access Memory (RAM), Static Random Access Memory (SRAM), ReadOnly Memory (ROM), Electrically Erasable Programmable ReadOnly Memory (EEPROM), Programmable ReadOnly Memory (PROM) magnetic memory, magnetic disk, and optical disk It may include a storage medium of the type.
  • the mobile terminal 100 may operate in association with a web storage that performs a storage function of the memory unit 160 on the Internet.
  • the interface unit 170 serves as a path with all external devices connected to the mobile terminal 100.
  • the interface unit 170 receives data from an external device or receives power and transmits the data to each component inside the mobile terminal 100 or transmits the data inside the mobile terminal 100 to an external device.
  • wired / wireless headset ports, external charger ports, wired / wireless data ports, memory card ports, ports for connecting devices with identification modules, audio input / output (I / O) ports, The video input / output (I / O) port, the earphone port, and the like may be included in the interface unit 170.
  • the identification module is a chip that stores various types of information for authenticating the usage rights of the mobile terminal 100, and includes a user identification module (UIM), a subscriber identify module (SIM), and a universal user authentication module ( Universal Subscriber Identity Module (USIM), and the like.
  • a device equipped with an identification module (hereinafter referred to as an 'identification device') may be manufactured in the form of a smart card. Therefore, the identification device may be connected to the terminal 100 through a port.
  • the interface unit may be a passage through which power from the cradle is supplied to the mobile terminal 100 when the mobile terminal 100 is connected to an external cradle, or various command signals input from the cradle by a user may be moved. It may be a passage that is delivered to the terminal. Various command signals or power input from the cradle may be operated as signals for recognizing that the mobile terminal is correctly mounted on the cradle.
  • the controller 180 typically controls the overall operation of the mobile terminal. For example, perform related control and processing for voice calls, data communications, video calls, and the like.
  • the controller 180 may include a multimedia module 181 for playing multimedia.
  • the multimedia module 181 may be implemented in the controller 180 or may be implemented separately from the controller 180.
  • the controller 180 may perform a pattern recognition process for recognizing a writing input or a drawing input performed on the touch screen as text and an image, respectively.
  • the power supply unit 190 receives an external power source and an internal power source under the control of the controller 180 to supply power for operation of each component.
  • Various embodiments described herein may be implemented in a recording medium readable by a computer or similar device using, for example, software, hardware or a combination thereof.
  • embodiments described herein include application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), and the like. It may be implemented using at least one of processors, controllers, microcontrollers, microprocessors, and electrical units for performing the functions. 180).
  • ASICs application specific integrated circuits
  • DSPs digital signal processors
  • DSPDs digital signal processing devices
  • PLDs programmable logic devices
  • FPGAs field programmable gate arrays
  • embodiments such as procedures or functions may be implemented with separate software modules that allow at least one function or operation to be performed.
  • the software code may be implemented by a software application written in a suitable programming language.
  • the software code may be stored in the memory unit 160 and executed by the controller 180.
  • FIG. 2 is a structural diagram illustrating a service network according to an embodiment of the present invention, which is a structural diagram illustrating a service network for sharing contents between electronic devices.
  • the mobile terminal 100 is connected to at least one external electronic device 200 having a video display function through a network, and the external electronic device 200 may display content on the external electronic device 200.
  • Content is shared with the external electronic device 200 by delivering the content to the electronic device 200 or by receiving the content from the external electronic device 200 and displaying the content on the screen.
  • the mobile terminal 100 is a mobile phone and the external electronic device 200 is a television and a laptop computer, but the present invention is not limited thereto.
  • the mobile terminal 100 and the external electronic device are a mobile phone, a television, a laptop computer, a smart phone, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), a navigation device, a desktop, and the like.
  • PDA personal digital assistant
  • PMP portable multimedia player
  • the computer may be implemented as a desktop computer, a set-top box, a personal video recorder (PVR), an electronic picture frame, or the like.
  • the mobile terminal 100 and the external electronic device 200 may be compatible with each other. It is necessary to configure a platform of the external electronic device 200.
  • the electronic devices 100 and 200 related to the embodiment of the present invention may configure a platform based on a digital living network alliance (DLNA).
  • DLNA digital living network alliance
  • IPv4 can be used as the network stack, and Ethernet, Wireless Local Network (WLAN) (802.11a / b / g), Wireless Fidelity (Wi-Fi), Bluetooth (Bluetooth),
  • WLAN Wireless Local Network
  • Wi-Fi Wireless Fidelity
  • Bluetooth Bluetooth
  • a communication method capable of IP connection can be used.
  • the discovery and control of the electronic device may be based on UPnP, in particular, UPnP AV Architecture and UPnP Device Architecture.
  • UPnP UPnP AV Architecture
  • UPnP Device Architecture UPnP Device Architecture
  • SSDP simple service discovery protocol
  • SOAP simple object access protocol
  • HTTP HyperText Transfer Protocol
  • RTP Real-Time Transport Protocol
  • JPEG Joint Photographic Experts Group
  • MPEG2 MP3, MPEG4
  • JPEG Joint Photographic Experts Group
  • DMS digital media server
  • DMP digital media player
  • DMR digital media renderer
  • DMC digital media controller
  • FIG. 3 shows a conceptual diagram of a DLNA network.
  • the DLNA is a representative name of a standardization mechanism that enables sharing of contents such as music, moving pictures, and still pictures among electronic devices through a network.
  • the DLNA is based on the Universal Plug and Play (UPnP) protocol.
  • the DLNA network 200 includes a digital media server 210 (digital media server (DMS)), a digital media player 220 (digital media player, DMP), a digital media renderer 230 (digital media renderer, DMR), and It may include a digital media controller 240 (DMC).
  • DMS digital media server
  • DMP digital media player
  • DMR digital media renderer
  • DMC digital media controller
  • the DLNA network may include one or more of the DMS 210, the DMP 220, the DMR 230, and the DMC 240, respectively.
  • the DLNA may provide a standard so that each of the devices are compatible with each other.
  • the DLNA network may provide a standard for interoperability between the DMS 210, the DMP 220, the DMR 230, and the DMC 240.
  • the DMS 210 may provide digital media content. That is, the DMS 210 may store and manage content.
  • the DMS 210 may receive various commands from the DMC 240 and perform a command. For example, when the DMS 210 receives a play command, the DMS 210 may search for content to be played and provide the content to the DMR 230.
  • the DMS 210 may include, for example, a PC, a personal video recorder (PVR), and a set top box.
  • the DMP 220 may control the content or the electronic device, and allow the content to be played back. That is, the DMP 220 may perform the functions of the DMR 230 for regeneration and the DMC 240 for control.
  • the DMP 220 may include, for example, a TV, a DTV, and a home theater.
  • the DMR 230 may play content.
  • the content provided from the DMS 210 may be played.
  • the DMR 230 may include, for example, an electron frame.
  • the DMC 240 may provide a control function.
  • the DMC 240 may include, for example, a mobile phone and a PDA.
  • the DLNA network may consist of the DMS 210, the DMR 230, and the DMC 240, or the DMP 220 and the DMR 230.
  • the DMS 210, the DMP 220, the DMR 230, and the DMC 240 may be terms that functionally distinguish electronic devices.
  • the mobile phone may correspond to the DMP 220.
  • the DMP 220 may be used as well as the DMP 220. FIG. It may also correspond to).
  • the functional component according to the DLNA includes a media formats layer, a media transport layer, a device discovery & control and media management layer, a network stack layer, a network It may include a network connectivity layer.
  • the network connection layer may include a physical layer and a link layer of the network.
  • the network connection layer may include Ethernet, Wi-Fi, and Bluetooth.
  • a communication medium capable of IP connection can be used.
  • the network stack layer can use the IPv4 protocol.
  • Device discovery and control and media management layer may be based on UPnP, in particular UPnP AV Architecture and UPnP Device Architecture.
  • UPnP AV Architecture UPnP Device Architecture
  • SOAP simple object access protocol
  • the media transport layer may use HTTP 1.0 / 1.1. For streaming playback.
  • HTTP real-time transport protocol
  • RTP real-time transport protocol
  • the media format layer may use images, audio, AV media, and XHTML (Extensible Hypertext Markup Language) documents.
  • FIG. 5 is a flowchart illustrating a method of operating an electronic device according to a first embodiment of the present invention.
  • the image of the content is displayed in the second electronic device ( 200, and the voice of the content may be output through the first electronic device 100. That is, the image and the sound are separated and output from different electronic devices.
  • an electronic device having better display characteristics than the first electronic device 100 that previously outputs the content may output an image. Accordingly, the user can listen to the voice through the earphone of the first electronic device 100 and view the image through the second electronic device 200, thereby increasing content immersion.
  • the method may include outputting content including an image and a sound from the first electronic device [S100], and generating a predetermined event [S110].
  • each step will be described in detail.
  • the first electronic device 100 may output content including an image and a sound [S100].
  • Content according to an embodiment of the present invention may vary.
  • the content may include broadcast content, content stored in the first electronic device 100, and content stored in an external server.
  • the property of the content may vary, such as movies, images, web pages, multimedia data.
  • the content stored in the external server may refer to content included in a DLNA network for implementing the N-screen described with reference to FIGS. 3 and 4.
  • N-screen may refer to a user-oriented service that can share and execute multiple contents anytime and anywhere through a more advanced smart system and can seamlessly connect.
  • DLNA for N-screen implementation is just one example, and various protocols such as Apple's Bonjour may be used to implement N-screen.
  • the first electronic device 100 may receive content stored in an electronic device other than the first electronic device 100 and output the received content.
  • the user may control the first electronic device 100 to output content in various ways.
  • the user may control the first electronic device 100 to output content using a remote controller, voice recognition, gesture, or the like.
  • the first electronic device 100 receives content from the third electronic device 300, which is a content providing server, and displays an image of the streamed content. It is assumed that the sound of the content output through the 151 and streamed is output through the sound output unit 152 (earphone). Therefore, the user can move while viewing the content through the first electronic device 100 as shown.
  • the third electronic device 300 which is a content providing server
  • the first electronic device 100 may detect that a predetermined event has occurred [S110].
  • the predetermined event may include any case in which the first electronic device 100 requests that the first electronic device 100 separate the image and the sound of the content being output and output each of them from different electronic devices.
  • the predetermined event is when the user requests that the image and sound are output from different electronic devices (hereinafter, the first event), and when the user requests to output the output content from another electronic device (hereinafter, the second event). If a predetermined condition is met, it may include a (third event).
  • a predetermined condition it may include a (third event).
  • FIG. 7 illustrates an application according to the first embodiment of the present invention
  • FIG. 8 illustrates a user interface of the first application according to the first embodiment of the present invention.
  • a user of the first electronic device 100 may execute the first application illustrated in FIG. 7 through interaction with the first electronic device 100.
  • the first application is an application that can command to separate the image and sound output.
  • the user interface shown in FIG. 8 may be output.
  • a window W1 for selecting an electronic device for outputting an image and a window W2 for selecting an electronic device for outputting sound are shown.
  • the electronic devices displayed on W1 and W2 may be electronic devices recognized by the first electronic device 100 according to a predetermined protocol.
  • the predetermined protocol may be, for example, a simple service discovery protocol (SSDP).
  • the user may select an electronic device to output an image through the W1 window, and select an electronic device to output a sound through the W2 window.
  • the user may select the DTV having a higher resolution than the display of the smartphone outputting the content in step S100 of the electronic device to output the image according to the taste of the user.
  • the second electronic device 200 (DTV) is selected as the electronic device to output the image
  • the first electronic device 100 (smartphone) is selected as the electronic device to output the sound. I will assume the case.
  • the first electronic device 100 determines that the first event is the first event.
  • FIG. 9 illustrates a user interface of a second application according to a first embodiment of the present invention
  • FIG. 10 illustrates a flowchart for describing a second event according to the first embodiment of the present invention
  • FIG. 11 illustrates the present invention.
  • FIG. 12 and FIG. 13 are diagrams for explaining a predetermined condition according to the first embodiment of the present invention. Referring to FIG. .
  • the first event occurs through a first application that selects an electronic device for outputting the image and the sound, respectively, while the second event occurs through a second application that outputs the output content from another electronic device. It differs in that point.
  • a user may execute a second application through interaction with the first electronic device 100.
  • the second application is an application for selecting an electronic device to output content.
  • the first electronic device 100 may output a user interface as shown in FIG. 9.
  • a user may designate which electronic device outputs content through a user interface according to execution of a second application.
  • the content may be output from the selected electronic device.
  • the first electronic device 100 may determine the user's intention and determine whether the user's intention is to separate the image and the sound from each other and output from different electronic devices. . This will be described in more detail with reference to FIG. 10.
  • the first electronic device 100 may determine whether a predetermined condition is met [S112].
  • the predetermined condition may include any situation in which an image and a sound are separated and output from different electronic devices in accordance with a user's intention.
  • the user 1 may have a need to enjoy content with the second electronic device 200 having a larger screen size than the screen of the first electronic device 100.
  • the user 2 is sleeping in the room 1, outputting content through the second electronic device 200 may interfere with the sleep of the user 2.
  • the user 3 is talking loudly in the room 2, the content may be disturbed when the user views the content through the second electronic device 200.
  • the first electronic device 100 when the first electronic device 100 enters a predetermined zone, it may be appropriate to separate the image and the sound and output them from different electronic devices according to the user's intention.
  • the first electronic device 100 may determine whether the predetermined electronic device enters the predetermined zone in various ways. For example, the first electronic device 100 may determine whether the first electronic device 100 enters a predetermined zone through NFC, camera recognition, current location information, and the like.
  • the first electronic device 100 Determining whether or not to enter the predetermined zone through the NFC, by tagging with the NFC tag installed in the predetermined zone through the NFC module (not shown) included in the first electronic device 100, the first electronic device 100 It is determined that has entered the predetermined zone.
  • the tag installed in the predetermined zone may refer to an electronic key, for example.
  • the camera module installed in the predetermined zone is the first electronic device
  • the camera module installed in the predetermined zone is the first electronic device
  • the determination of whether the user enters the predetermined zone through the current location information may be performed by determining whether the current location of the first electronic device 100 is in the predetermined zone.
  • the predetermined condition may vary in addition to entering the predetermined zone.
  • the predetermined condition corresponds to a predetermined position
  • the description of the case corresponding to the predetermined location corresponds to the case of entering the predetermined zone, and thus description thereof will be omitted.
  • the ambient noise which is an example of the predetermined condition
  • the content is output only from the second electronic device 200 in consideration of the fact that the content sound may interfere with the surroundings. That is, in this case, as described above, the image is output from the second electronic device 200 and the sound is preferably output through the earphone of the first electronic device 100.
  • the content is output only from the second electronic device 200 even when the ambient noise is higher than the predetermined second criterion, considering that the ambient noise may interfere with content viewing.
  • the case of outputting sound through the earphone which is an example of the predetermined condition will be described.
  • the first electronic device 100 When the first electronic device 100 is outputting the content sound through the wired / wireless earphones, the user's intention is likely to continuously listen to the sound through the first electronic device 100. Therefore, when the first electronic device 100 outputs the content sound through the earphone, it may be regarded as a case in which it meets a predetermined condition.
  • a specific time zone as an example of the predetermined condition will be described. Outputting content to external speakers can be disturbing, especially in the early morning and / or late night hours. Therefore, it may be regarded as a case of meeting a predetermined condition when it corresponds to a specific time zone.
  • the first electronic device 100 may output the user interface shown in FIG. 9 [S114]. Accordingly, the user may control the content being output from the first electronic device 100 to be output from another electronic device. In this case, the first electronic device 100 determines that it does not correspond to a predetermined event.
  • the first electronic device 100 may determine whether to output an image and a sound from different electronic devices [S116].
  • the first electronic device 100 may output a user interface as shown in FIG. 11 to more clearly identify the user intention.
  • the first electronic device 100 may receive a selection of an electronic device to output content by outputting the user interface shown in FIG. 9. have.
  • the first electronic device 100 since the first electronic device 100 only controls the content to be output from the selected electronic device, the first electronic device 100 does not determine it as a predetermined event.
  • the first electronic device 100 receives a selection corresponding to Yse through the user interface illustrated in FIG. 11, even when the user executes the second application, the image and sound of the content being output are displayed.
  • Each can be separated and output from different electronic devices. This is because the user's intention is to separate the image of the content and the sound of the content and output them from different electronic devices.
  • the first electronic device 100 may receive a selection of an electronic device for outputting the image and the sound by outputting the user interface illustrated in FIG. 8 (S118).
  • the first electronic device 100 determines this as the second event.
  • the third event may be different from each other when the user meets a predetermined condition even if the user does not execute the specific application. It is different in that it is selected to be output from the device.
  • the predetermined condition is as described above. That is, the predetermined condition is that when the first electronic device 100 enters the predetermined zone, when the first electronic device 100 corresponds to a specific position, the ambient noise is greater than or equal to the first predetermined reference value. When the ambient noise is less than the second predetermined reference value, when the sound is output through the earphone, it may include at least one of the case of a specific time.
  • the first electronic device 100 may output a user interface for inquiring whether to output the image and the sound from another electronic device (see the user interface illustrated in FIG. 11).
  • the first electronic device 100 outputs a user interface for selecting the electronic device for outputting the image and the electronic device for outputting the sound (see the user interface of FIG. 8) when the predetermined condition is met. can do.
  • the first electronic device 100 is a user for selecting an electronic device for outputting the image and the electronic device for outputting the sound when the user selects to output the image and the sound from the other electronic device, respectively Output the interface.
  • the user may select an electronic device to output the image and the sound, respectively.
  • the first electronic device 100 determines this as the third event.
  • the first electronic device 100 receives an electronic device for outputting the image and an electronic device for outputting the sound, respectively, from the user.
  • the electronic device to output the sound and the electronic device to output the sound may be automatically selected according to a predetermined algorithm, or may be a user-specified electronic device.
  • the first electronic device 100 may control an image and a sound to be output from different electronic devices [S120].
  • step S120 will be described in more detail.
  • step S120 is a flowchart for explaining step S120 according to a first embodiment of the present invention in more detail.
  • the first electronic device 100 may generate a control signal so that the image and the sound of the content are output from different electronic devices, and the electronic device may output the image and the sound according to the generated control signal.
  • the first electronic device 100 may generate a control signal such that the image and the sound are output from different electronic devices [S122].
  • the control signal controls the image of the content to be output from the second electronic device 200 and the sound of the content to be output from the first electronic device 100.
  • the first electronic device 100 may transmit the generated control signal to the corresponding electronic device [S124].
  • the image may be output from the second electronic device 200 and the sound may be output from the first electronic device 100 according to the control signal [S126].
  • Step S124 may be implemented in various ways depending on how to provide the image and sound to each electronic device that outputs the image and sound.
  • step S124 In order to describe step S124 in detail, reference is made to FIGS. 15 to 17.
  • 15 to 17 illustrate a control signal according to a first embodiment of the present invention.
  • the first electronic device 100 may transmit the generated control signal to the third electronic device 300 which is a content providing server.
  • the third electronic device 300 receiving the control signal may stream only the sound of the content to the first electronic device 100 according to the control signal, and the image of the content may be streamed to the second electronic device 200.
  • the first electronic device 100 may output sound
  • the second electronic device 200 may output an image.
  • the first electronic device 100 may receive content from the third electronic device 300 and stream an image of the content to the second electronic device 200 according to the generated control signal.
  • the second electronic device 200 may output an image
  • the first electronic device 100 may output sound.
  • the first electronic device 100 may transmit the generated control signal to the third electronic device 300.
  • the third electronic device 300 receiving the control signal may transmit the content to the second electronic device 200 according to the control signal.
  • the third electronic device 300 may instruct the second electronic device 200 to separately output the image and the sound.
  • the second electronic device 200 may stream the content sound to the first electronic device 100.
  • the second electronic device 200 may output an image, and the first electronic device 100 may output sound.
  • step S126 will be described in more detail with reference to FIG. 18.
  • step S126 is a view for explaining step S126 according to a first embodiment of the present invention in more detail.
  • the second electronic device 200 may not be ready for outputting the content image.
  • the second electronic device 200 may be in an off state.
  • the first electronic device 100 may transmit an image output request signal, that is, a control signal, to the second electronic device 200.
  • the second electronic device 200 may enter a power on state.
  • the second electronic device 200 may enter only a module required for power saving, for example, an image processing module and a communication module. Meanwhile, since the second electronic device 200 is in the off state, the first electronic device 100 continuously outputs the image and sound even after the time t1 when the user requests the image and sound separation. When the module activation is terminated, the second electronic device 200 may transmit an activation completion notification signal to the first electronic device 100 (at a time t2). When the first electronic device 100 receives the activation completion notification signal from the second electronic device 200, only the sound is output from the image and the sound, and the second electronic device 200 may output the image. In addition, when only the sound is output, the first electronic device 100 may perform a display power saving mode, for example, dimming, in order to reduce power required by the display unit.
  • a display power saving mode for example, dimming
  • the first electronic device 100 waits until the second electronic device 200 prepares to output an image, and then the second electronic device 200 outputs an image after the preparation of the image output is completed. You can do that.
  • the user may avoid the inconvenience of not only hearing the sound from the first electronic device 100 and viewing the image from the second electronic device 200 between the time points t1 to t2 shown in FIG. 15.
  • the image and the sound need to be synchronized. This is because synchronization of the image and the sound may be out of order due to different hardware environments of the first electronic device 100 and the second electronic device 200.
  • At least one of the first electronic device 100 and the first electronic device 100 may perform a control for synchronizing the image and the sound. More specifically, at least one of the first electronic device 100 and the second electronic device 200 may provide a user interface for synchronization. For example, as illustrated in FIG. 19, the first electronic device 100 may provide a user interface for setting an output timing of sound. As a result, synchronization between the output sound of the first electronic device 100 and the output image of the second electronic device 200 may be achieved.
  • the first electronic device 100 and the second electronic device 200 may transmit and receive a synchronization signal to each other.
  • the first electronic device 100 may obtain time information of the sound being output and transmit it to the second electronic device 200.
  • the second electronic device 200 may determine the degree of synchronization of the image and the sound by comparing the received time information with time information of the image currently being output. For more accurate determination, the second electronic device 200 may further consider a transmission time of time information received from the first electronic device 100.
  • the second electronic device 200 may control the image output timing or request the sound output timing control from the first electronic device 100.
  • the output sound of the first electronic device 100 and the output image of the second electronic device 200 may be synchronized.
  • the image and sound may be output again from the same electronic device [S130].
  • the integrated event may include various situations in which the sound and the image are output from one electronic device to meet the user's intention.
  • the integrated event may include at least one of a case where the first electronic device 100 moves more than a predetermined distance and is requested through a user interface.
  • a case where the first electronic device 100 moves more than a predetermined distance and is requested through a user interface.
  • the image is preferably output from the first electronic device 100 outputting sound.
  • Whether the first electronic device 100 has moved more than the predetermined distance may be calculated and obtained by the first electronic device 100 through an acceleration sensor built in the first electronic device 100. It is also possible to use a camera sensor. For example, if a user disappears while recognizing a user in a camera mounted on the second electronic device 200, this may be regarded as an integrated event occurrence. For another example, when NFC tagging is performed at another place after the first electronic device 100 moves, the first electronic device 100 may determine that the user has moved more than a predetermined distance and consider this as an integrated event occurrence. Can be.
  • the user interface which is another example of the integrated event, may refer to a case in which the user requests that the image being output from the second electronic device 200 be output from the first electronic device 100 through the first electronic device 100.
  • 20 to 22 are views for explaining an integrated event according to a first embodiment of the present invention.
  • the first electronic device 100 receives sound streaming from the third electronic device 300 to output sound, and the second electronic device 200 performs image streaming from the third electronic device 300. It is in the state of receiving the video output. That is, this corresponds to the embodiment described with reference to FIG. 15.
  • the third electronic device 300 may stop the video streaming to the second electronic device 200 and provide not only sound but also video streaming to the first electronic device 100.
  • the first electronic device 100 outputs the image and the sound together, and the second electronic device 200 stops the output of the image.
  • the first electronic device 100 receives an image and a sound from the third electronic device 300, and the image is streamed to the second electronic device 200.
  • the sound is output and the second electronic device 200 is in a state of outputting an image. That is, this corresponds to the embodiment described with reference to FIG. 16.
  • the first electronic device 100 may transmit a control signal for requesting to stop the output of the image to the second electronic device 200 according to the integrated event.
  • the second electronic device 200 may stop the image output in response to receiving the control signal.
  • the first electronic device 100 may output the image and the sound together.
  • the second electronic device 200 receives an image and sound stream from the third electronic device 300.
  • the second electronic device 200 may stream the sound of the streamed video sound to the first electronic device 100.
  • the first electronic device 100 outputs sound
  • the second electronic device 200 outputs an image. That is, this corresponds to the embodiment described with reference to FIG. 17.
  • the first electronic device 100 may generate a control signal according to the integrated event generation and transmit the generated control signal to the second electronic device 200.
  • the second electronic device 200 may stream the content to the first electronic device 100.
  • the second electronic device 200 may stop the image output.
  • the first electronic device 100 may output an image and a sound together through content streaming received from the second electronic device 200.
  • the first electronic device 100 may receive content directly from the third electronic device 300 by transmitting a control signal to the third electronic device 300.
  • the second electronic device 200 has been described on the premise that the output of the image, but even if the first electronic device 100 outputs the image and sound together, the second electronic device 200 continues to display the image. You can of course output.
  • FIGS. 20 to 22 are for convenience of description and the embodiments of the present invention are not limited. That is, embodiments of the present invention may be implemented regardless of the order shown in FIGS. 20 to 22.
  • the user of the first electronic device 100 is walking on the road while watching the content arrives at the home, which is an example of a predetermined zone at 11:00 PM, a specific time.
  • the image of the content being viewed by the user of the first electronic device 100 is output from the second electronic device 200 and the sound is output through the earphone of the first electronic device 100. Therefore, the user may view the image through the second electronic device 200 having a larger screen than the first electronic device 100, and hear the sound through the earphone of the first electronic device 100, thus disturbing the sleep of the family. Will not.
  • FIG. 23 is a flowchart illustrating a method of operating an electronic device according to a second embodiment of the present invention.
  • the second electronic device 200 is the first electronic device 100.
  • the implementation method of the second embodiment of the present invention will be described.
  • the first electronic device 100 may output content at a specific sound level [S200].
  • the first electronic device 100 may output various contents as in step S100 described above with reference to FIG. 5.
  • the first electronic device 100 may output content with a specific sound level.
  • the first electronic device 100 may be requested to output the content from another electronic device during the output of the content [S210].
  • the first electronic device 100 may be selected to select another electronic device to output the content through the second application (see FIGS. 7 and 9) described in the first embodiment.
  • the second electronic device 200 is selected as another electronic device to output the content.
  • the first electronic device 100 When the first electronic device 100 is requested to output the output content from another electronic device, the first electronic device 100 may generate a control signal for controlling the content to be output from the second electronic device 200 [S220].
  • control signal may include a command code and a payload.
  • the command code may include a command value for outputting specific content.
  • the command value may include source information of the content being output by the first electronic device 100, for example, an IP address. This is for the second electronic device 200 to directly stream the content.
  • the source information may be optional information.
  • the payload may include information about a sound level of the content output from the first electronic device 100. Based on the information included in the payload, the second electronic device 200 may control the sound level when the content is output to correspond to the sound level in the first electronic device 100.
  • the first electronic device 100 may transmit the generated control signal to the second electronic device 200.
  • the second electronic device 200 may output the content at the specific sound level according to the received control signal [S230].
  • the second electronic device 200 may prepare to output the content. For example, the second electronic device 200 may enter a module for outputting content into an on state.
  • the second electronic device 200 may output content being output from the first electronic device 100 based on the source information. You can receive streaming.
  • the second electronic device 200 may control the sound volume of the content based on the payload. That is, the second electronic device 200 may control the sound volume of the content so as to correspond to the sound volume of the first electronic device 100.
  • the user can keep the content sound volume constant even when the output device of the content is changed.
  • Figure 25 shows an implementation of the second embodiment of the present invention.
  • the first electronic device 100 is outputting content at the volume 10 and the set volume of the second electronic device 200 is 0 (mute).
  • the second electronic device 200 may not be set to volume 0, but may be output from the first electronic device 100.
  • the content is output at the content output volume of 10.
  • the second electronic device 200 may output the content in a mute state, of course.
  • the second embodiment of the present invention provides a continuous content viewing environment even when the content output device is changed.
  • the case in which the content output device is changed from the first electronic device 100 to the second electronic device 200 has been described.
  • the content output device is changed to the first electronic device 100.
  • the sound size of the second electronic device 200 may be controlled to correspond to the sound size of the first electronic device 100.
  • the medium may include, for example, a program code, a data file, a data structure, etc. alone or in combination to implement an embodiment of the present invention.
  • Examples of such media store and carry out program instructions such as magnetic media, optical recording media such as CDs and DVDs, ROM, RAM, flash memory, and the like. And media configured to do so.
  • Examples of program code may include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
  • the present invention relates to an electronic device and a method of operating the electronic device.
  • a predetermined event occurs while the content is being output, the image and sound of the content are controlled to be output from different electronic devices, thereby providing the user's content. It provides an electronic device and an operation method of the electronic device to improve the viewing environment.

Abstract

본 발명은 전자기기 및 전자기기의 동작 방법에 관한 것으로서, 콘텐츠를 출력 중인 상태에서 미리 정해진 이벤트가 발생하는 경우, 상기 콘텐츠의 영상과 음향이 각각 서로 다른 전자기기에서 출력되도록 제어함으로써, 사용자의 콘텐츠 감상 환경을 개선시키는 전자기기 및 전자기기의 동작 방법을 제공한다.

Description

전자기기 및 전자기기의 동작 방법
본 발명은 전자기기 및 전자기기의 동작 방법에 관한 것으로서, 보다 구체적으로는 N-screen 구현 환경 내에서 콘텐츠에 포함된 영상 및 음향을 보다 효과적으로 출력하는 전자기기 및 전자기기의 동작 방법에 관한 것이다.
개인용 컴퓨터, 노트북, 휴대폰 등과 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다.
단말기는 이동 가능 여부에 따라 이동 단말기(mobile terminal) 및 고정 단말기(stationary terminal)로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.
단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및/또는 소프트웨어적인 부분을 개량하는 것이 고려되고 있다.
최근 이동 단말기를 포함한 다양한 단말기들은 복합적이고 다양한 기능들을 제공함에 따라 메뉴 구조 또한 복잡해지는 추세이다. 또한 이동 단말기로 웹페이지를 포함하는 각종 디지털문서를 디스플레이할 수 있는 기능이 추가되고 있다.
본 발명의 일 과제는, 콘텐츠 출력 중에 미리 정해진 이벤트가 발생하는 경우, 상기 콘텐츠에 포함된 음향과 영상이 각기 다른 전자기기에서 출력되도록 제어하는 전자기기 및 전자기기의 동작 방법을 제공하는 것이다.
본 발명의 또 다른 과제는, 영상 및 음향을 포함하는 콘텐츠를 특정 음향 크기로 출력하던 중 상기 콘텐츠의 출력 기기가 변경되는 경우, 상기 변경된 출력 기기에서 상기 특정 음향 크기를 반영하여 상기 콘텐츠를 출력하도록 제어하는 전자기기 및 전자기기의 동작 방법을 제공하는 것이다.
본 발명이 이루고자 하는 기술적 과제들은 상기 과제에 제한되지 않으며, 본 발명이 이루고자 하는 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 제1 양상에 따른 전자기기는, 출력부; 및 영상 및 음향을 포함하는 콘텐츠를 상기 출력부를 통하여 출력하던 중, 미리 정해진 이벤트가 발생하는 경우, 상기 영상 및 상기 음향이 각각 다른 전자기기에서 출력되도록 제어하는 제어부를 포함하여 이루어진다.
본 발명의 제2 양상에 따른 전자기기는, 출력부; 및 상기 출력부를 통하여 콘텐츠를 특정 음향 크기로 출력하던 중, 상기 콘텐츠의 출력 기기가 변경되는 경우, 상기 변경된 출력 기기에서 상기 특정 음향 크기에 기초하여 상기 콘텐츠를 출력하도록 제어하는 제어부를 포함하여 이루어진다.
본 발명의 제3 양상에 따른 전자기기는, 영상 및 음향을 포함하는 콘텐츠를 출력부를 통하여 출력하는 단계; 및 미리 정해진 이벤트가 발생하는 경우 상기 영상 및 음향이 각각 다른 전자기기에서 출력되도록 제어하는 단계;를 포함하여 이루어진다.
본 발명의 제4 양상에 따른 전자기기는, 출력부를 통하여 콘텐츠를 특정 음향 크기로 출력하는 단계; 및 상기 콘텐츠의 출력 기기가 변경되는 경우, 상기 변경된 출력 기기에서 상기 특정 음향 크기에 기초하여 상기 콘텐츠를 출력하도록 제어하는 단계;를 포함하여 이루어진다.
본 발명에 따른 전자기기 및 전자기기의 동작 방법에 따르면, 미리 정해진 이벤트가 발생하는 경우 출력 중이던 콘텐츠의 영상 및 음향이 각기 다른 전자기기에서 출력되도록 제어함으로써, 최적의 사용자 콘텐츠 감상 환경을 제공한다.
본 발명에 따른 전자기기 및 전자기기의 동작 방법에 따르면, 제1 전자기기에서 특정 음향 크기로 출력되던 콘텐츠가 제2 전자기기에서 출력되도록 제어되는 경우, 제2 전자기기도 상기 특정 음향 크기를 고려하여 콘텐츠를 출력함으로써, 음향 관점에서 연속성을 제공한다.
도 1은 본 발명의 일 실시예에 따른 전자기기의 블록 구성도를 도시한다.
도 2는 도 1으 ㅣ전자기기와 관련된 서비스 네트워크의 구성을 도시한다.
도 3은 DLNA 네트워크의 개념도를 도시한다.
도 4는 DLNA의 기능에 따른 레이어를 도시한다.
도 5는 본 발명의 제1 실시예에 따른 전자기기의 동작 방법을 설명하기 위한 순서도이다.
도 6은 본 발명의 제1 실시예에 따른 전자기기의 콘텐츠 출력 환경을 설명하기 위한 도면이다.
도 7은 본 발명의 제1 실시예에 따른 어플리케이션을 도시한다.
도 8은 본 발명의 제1 실시예에 따른 제1 어플리케이션의 사용자 인터페이스를 도시한다.
도 9는 본 발명의 제1 실시예에 따른 제2 어플리케이션의 사용자 인터페이스를 도시한다.
도 10은 본 발명의 제1 실시예에 따른 제2 이벤트를 설명하기 위한 흐름도를 도시한다.
도 11은 본 발명의 제1 실시예에 따른 영상 및 음향을 각각 다른 전자기기에서 출력할지를 질의하는 사용자 인터페이스를 도시한다.
도 12 및 도 13은 본 발명의 제1 실시예에 따른 미리 정해진 조건을 설명하기 위한 도면이다.
도 14는 본 발명의 제1 실시예에 따른 단계 S120를 보다 구체적으로 설명하기 위한 흐름도이다.
도 15 내지 도 17을 본 발명의 제1 실시예에 따른 제어신호를 설명하기 위한 도면이다.
도 18은 본 발명의 제1 실시예에 따른 단계 S126을 보다 구체적으로 설명하기 위한 도면이다.
도 19는 본 발명의 제1 실시예에 따른 동기화를 위한 사용자 인터페이스를 도시한다.
도 20 내지 도 22는 본 발명의 제1 실시예에 따른 통합 이벤트를 설명하기 위한 도면이다.
도 23은 본 발명의 제2 실시예에 따른 전자기기의 동작 방법을 설명하기 위한 흐름도이다.
도 24는 본 발명의 제2 실시예에 따른 제어신호의 메시지 포맷을 도시한다.
도 25는 본 발명의 제2 실시예의 구현예를 도시한다.
본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련된 다음의 상세한 설명을 통해 보다 분명해질 것이다. 다만, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예들을 가질 수 있는 바, 이하에서는 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 원칙적으로 동일한 구성요소들을 나타낸다. 또한, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제1, 제2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다
이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 명세서에서 설명되는 이동 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 포함될 수 있다. 그러나, 본 명세서에 기재된 실시예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.
도 1은 본 발명의 일 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.
상기 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리부(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기를 구현될 수도 있다.
이하, 상기 구성요소들에 대해 차례로 살펴본다.
무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.
방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다.
상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.
상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.
상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVBH(Digital Video BroadcastHandheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.
상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMBT(Digital Multimedia BroadcastingTerrestrial), DMBS(Digital Multimedia BroadcastingSatellite), MediaFLO(Media Forward Link Only), DVBH(Digital Video BroadcastHandheld), ISDBT(Integrated Services Digital BroadcastTerrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 다른 방송 시스템에 적합하도록 구성될 수도 있다.
방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리부(160)에 저장될 수 있다.
이동통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(113)은 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(WiFi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.
근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.
위치정보 모듈(115)은 이동 단말기의 위치를 확인하거나 얻기 위한 모듈이다. 상기 위치정보 모듈의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 GPS모듈(115)은, 일 지점(개체)이 3개 이상의 위성으로부터 떨어진 거리에 관한 정보와, 상기 거리 정보가 측정된 시간에 관한 정보를 산출한 다음 상기 산출된 거리 정보에 삼각법을 적용함으로써, 일 시간에 일 지점(개체)에 대한 위도, 경도, 및 고도에 따른 3차원의 위치 정보를 산출할 수 있다. 나아가, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또 다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법 또한 사용되고 있다. GPS 모듈(115)은 현 위치를 실시간으로 계속 산출하고 그를 이용하여 속도 정보를 산출하기도 한다.
도 1을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.
카메라(121)에서 처리된 화상 프레임은 메모리부(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.
마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.
센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당할 수도 있다. 한편, 상기 센싱부(140)는 근접센서를 포함할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 및 햅틱 모듈(154) 등이 포함될 수 있다.
디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시 출력한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.
디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistorliquid crystal display), 유기 발광 다이오드(organic lightemitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 투명 LCD 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.
이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.
디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 약칭함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.
터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.
터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.
도 1을 참조하면, 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 근접센서가 배치될 수 있다. 상기 근접센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.
상기 근접센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접센서, 정전용량형 근접센서, 자기형 근접센서, 적외선 근접센서 등이 있다.
상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접센서로 분류될 수도 있다.
이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 칭한다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미한다.
상기 근접센서는, 근접 터치 및 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다.
음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리부(160)에 저장된 오디오 데이터를 출력할 수도 있다. 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 비디오 신호나 오디오 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.
햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.
햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열에 의한 자극에 의한 효과, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력을 통한 자극에 의한 효과, 피부 표면을 스치는 자극에 의한 효과, 전극(eletrode)의 접촉을 통한 자극에 의한 효과, 정전기력을 이용한 자극에 의한 효과, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.
햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자의 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 휴대 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.
메모리부(160)는 제어부(180)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 상기 메모리부(160)는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리부(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리부(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.
식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다.
상기 인터페이스부는 이동 단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.
제어부(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.
상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(microcontrollers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다.
소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리부(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.
도 2는 본 발명의 실시 예와 관련된 서비스 망을 도시한 구조도로서, 전자 기기 간에 컨텐츠를 공유하기 위한 서비스 망을 도시한 구조도이다.
도 2를 참조하면, 이동 단말기(100)는 영상 표시 기능이 구현된 하나 이상의 외부 전자 기기(200)와 네트워크를 통해 연결되며, 외부 전자 기기(200)에서 컨텐츠가 표시되도록 외부 전자 기기(200)로 컨텐츠를 전달하거나, 외부 전자 기기(200)로부터 컨텐츠를 수신하여 화면에 표시함으로써 외부 전자 기기(200)와 컨텐츠를 공유한다.
도 2에서는 이동 단말기(100)가 휴대폰이고, 외부 전자 기기(200)가 텔레비전(television) 및 노트북 컴퓨터(laptop computer)인 경우를 예로 들어 설명하나, 본 발명은 이에 한정되지 않는다. 본 발명에 따르면, 이동 단말기(100) 및 외부 전자 기기는 휴대폰, 텔레비전, 노트북 컴퓨터, 스마트 폰(smart phone), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이션, 데스크탑 컴퓨터(desktop computer), 셋탑 박스(set-top box), PVR(Personal Video Recorder), 전자 액자 등으로 구현될 수 있다.
다시, 도 2를 보면, 이동 단말기(100)가 외부 전자 기기(200)와 컨텐츠를 공유하기 위해서는, 이동 단말기(100)와 외부 전자 기기(200) 간의 상호 호환이 가능하도록 이동 단말기(100) 및 외부 전자 기기(200)의 플랫폼을 구성할 필요가 있다. 이를 위해, 본 발명의 실시 예와 관련된 전자 기기들(100, 200)은 DLNA(Digital Living Network Alliance)에 기반하여 플랫폼을 구성할 수 있다.
DLNA에 따르면, 네트워크 스택으로 IPv4를 사용할 수 있으며, 네트워크 연결을 위해 이더넷(Ethernet), WLAN(Wireless Local Network)(802.11a/b/g), Wi-Fi(Wireless Fidelity), 블루투스(Bluetooth), 그 외 IP 접속이 가능한 통신 방식을 사용할 수 있다.
또한, DLNA에 따르면, 전자 기기의 발견 및 제어를 위해 UPnP 특히, UPnP AV Architecture 및 UPnP Device Architecture를 기반으로 할 수 있다. 예를 들어 전자 기기의 발견을 위해 SSDP(simple service discovery protocol)을 사용할 수 있다. 또한, 전자 기기의 제어를 위해 SOAP(simple object access protocol)을 사용할 수 있다.
또한, DLNA에 따르면, 미디어 전송을 위해 HTTP, RTP 등을 사용할 수 있으며, 미디어 포멧(media format)으로 JPEG, LPCM, MPEG2, MP3, MPEG4 등을 사용할 수 있다.
또한, DLNA에 따르면, 디지털 미디어 서버(digital media server, DMS), 디지털 미디어 플레이어(digital media player, DMP), 디지털 미디어 렌더러(digital media renderer, DMR) 및 디지털 미디어 컨트롤러(digital media controller, DMC) 유형의 전자 기기를 지원할 수 있다.
도 3은 DLNA 네트워크의 개념도를 도시한다.
상기 DLNA는, 네트워크로 전자기기 사이의 음악, 동화상, 정지화상 등의 콘텐츠를 상호 공유할 수 있도록 하는 표준화 기구의 대표명칭이다.
상기 DLNA는 UPnP (Universal Plug and Play) 프로토콜을 기반으로 한다.
상기 DLNA 네트워크(200)는 디지털 미디어 서버(210)(digital media server, DMS), 디지털 미디어 플레이어(220)(digital media player, DMP), 디지털 미디어 렌더러(230)(digital media renderer, DMR), 및 디지털 미디어 컨트롤러(240)(digital media controller, DMC)를 포함할 수 있다.
상기 DLNA 네트워크는 상기 DMS(210), DMP(220), DMR(230), 및 DMC(240)를 각각 하나이상 포함할 수 있다. 이때, 상기 DLNA는 각각의 상기 기기들이 상호호환할 수 있도록 규격을 제공할 수 있다. 또한, 상기 DLNA 네트워크는 DMS(210), DMP(220), DMR(230), 및 DMC(240)간의 상호호환을 위한 규격을 제공할 수 있다.
상기 DMS(210)는 디지털 미디어 콘텐츠를 제공할 수 있다. 즉 상기 DMS(210)는 콘텐츠를 저장하고 관리할 수 있다. 상기 DMS(210)는 상기 DMC(240)로부터 각종 명령을 받고, 명령을 수행할 수 있다. 예를 들어, 상기 DMS(210)는 플레이 명령(play command)을 수신한 경우, 재생할 콘텐츠를 찾고(search), 콘텐츠를 상기 DMR(230)에 제공할 수 있다. 상기 DMS(210)는 예를 들어, PC, PVR(personal video recorder), 셋톱 박스를 포함할 수 있다.
상기 DMP(220)는 콘텐츠나 전자기기를 제어할 수 있고, 콘텐츠가 재생되도록 할 수 있다. 즉, 상기 DMP(220)는 재생을 위한 상기 DMR(230) 및 제어를 위한 상기 DMC(240)의 기능을 수행할 수 있다. 상기 DMP(220)는, 예를 들어, TV, DTV, 홈시어터(home theater)를 포함할 수 있다.
상기 DMR(230)은 콘텐츠를 재생할 수 있다. 상기 상기 DMS(210)로부터 제공받은 콘텐츠를 재생할 수 있다. 상기 DMR(230)은, 예를 들어, 전자액자를 포함할 수 있다.
상기 DMC(240)는 제어 기능을 제공할 수 있다. 상기 DMC(240)는 예를 들어, 휴대폰, 및 PDA를 포함할 수 있다.
또한, 상기 DLNA 네트워크는 상기 DMS(210), DMR(230), 및 DMC(240)으로 이루어지거나 상기 DMP(220) 및 DMR(230)으로 이루어질 수 있다
또한, 상기 DMS(210), DMP(220), DMR(230), 및 DMC(240)는 전자기기를 기능적으로 구분하는 용어일 수 있다. 예를 들어, 휴대폰이 제어기능 뿐만 아니라 재생 기능을 가지는 경우에는 상기 DMP(220)에 해당할 수 있고, 상기 DTV(100)가 콘텐츠를 관리하는 경우에는 상기 DMP(220) 뿐만 아니라 상기 DMS(210)에 해당할 수도 있다.
도 4는 DLNA에 따른 기능 컴포넌트를 도시한다.
상기 DLNA에 따른 기능 컴포넌트는 미디어 포맷(media formats)층, 미디어 전송(media transport) 층, 기기 디스커버리 및 제어 그리고 미디어 관리(device discovery & control And media management) 층, 네트워크 스택(network stack) 층, 네트워크 연결(network connectivity)층을 포함할 수 있다.
네트워크 연결층은 네트워크의 물리층, 링크층을 포함할 수 있다. 네트워크 연결층은 이더넷(ethernet), 와이파이(Wi-Fi), 및 블루투스를 포함할 수 있다. 그 외에도, IP접속이 가능한 통신 매체를 사용할 수 있다.
네트워크 스택층은, IPv4 프로토콜을 사용할 수 있다.
기기 디스커버리 및 제어 그리고 미디어 관리층은 UPnP 특히, UPnP AV Architecture 및 UPnP Device Architecture를 기반으로 할 수 있다. 예를 들어 기기 디스커버리를 위하여 SSDP(simple service discovery protocol)를 사용할 수 있다. 또한 제어를 위하여 SOAP(simple object access protocol)를 사용할 수 있다.
미디어 전송층은 스트리밍 재생을 위하여 HTTP 1.0/1.1.을 사용할 수 있다. 또는 RTP(real-time transport protocol)을 사용할 수 있다.
미디어 포맷층은 이미지, 오디오, AV 미디어, XHTML(Extensible Hypertext Markup Language) 문서를 사용할 수 있다.
도 5는 본 발명의 제1 실시예에 따른 전자기기의 동작 방법을 설명하기 위한 순서도이다.
본 발명의 제1 실시예에 따른 구현예에 의하면, 사용자가 제1 전자기기(100)(휴대 단말)를 통하여 콘텐츠를 감상하다가 미리 정해진 이벤트가 발생하는 경우, 콘텐츠의 영상은 제2 전자기기(200)(DTV)에서 출력하고 콘텐츠의 음성은 제1 전자기기(100)을 통하여 출력할 수 있다. 즉, 영상과 음향이 각기 다른 전자기기에서 분리되어 출력된다. 이때, 기존에 콘텐츠를 출력하던 제1 전자기기(100) 보다 디스플레이 특성이 우수한 전자기기가 영상을 출력하게 할 수 있다. 이에 따라, 사용자는 제1 전자기기(100)의 이어폰을 통하여 음성을 감상하고 제2 전자기기(200)를 통하여 영상을 볼 수 있으므로 콘텐츠 몰입도가 증대된다.
이는 일 구현예를 말하는 것이므로 구체적인 구현예는 보다 다양할 수 있다. 이하 도 5에 도시된 순서도를 참고하여 구체적인 구현 방법을 살펴보기로 한다.
도 5를 참고하면 본 발명의 제1 실시예에 따른 전자기기의 동작 방법은 제1 전자기기에서 영상 및 음향을 포함하는 콘텐츠를 출력하는 단계[S100], 미리 정해진 이벤트가 발생하는 단계[S110], 상기 미리 정해진 이벤트 발생시 영상 및 음향이 각기 다른 전자기기에서 출력되도록 제어하는 단계[S120], 분리된 영상 및 음향의 통합 이벤트 발생시 영상 및 음향이 동일 전자기기에서 출력되도록 제어하는 단계[S130] 중 적어도 하나를 포함하여 이루어진다. 이하 각 단계에 대하여 구체적으로 설명하기로 한다.
제1 전자기기(100)는 영상 및 음향을 포함하는 콘텐츠를 출력할 수 있다[S100].
본 발명의 일 실시예에 따른 콘텐츠는 다양할 수 있다. 예를 들어, 콘텐츠는 방송 콘텐츠, 제1 전자기기(100)에 저장된 콘텐츠, 외부 서버에 저장된 콘텐츠를 포함할 수 있다. 이 때, 콘텐츠의 속성은 영화, 이미지, 웹 페이지, 멀티미디어 데이터 등 다양할 수 있다.
한편, 상기 외부 서버에 저장된 콘텐츠는 앞서 도 3 및 도 4를 참고하여 설명한 N-screen 구현을 위한 DLNA 네트워크에 포함된 콘텐츠를 말할 수 있다.
여기서 N-screen이라 함은, 보다 진보된 스마트 체계를 통해 언제 어디서나 다중 콘텐츠를 공유하고 실행할 수 있으며 끊김없는 이어보기가 가능한 사용자 중심적인 서비스를 의미할 수 있다. N-screen 구현을 위한 DLNA는 일 예일 뿐이며, N-screen의 구현을 위하여 애플의 봉쥬르(Bonjour) 등 다양한 프로토콜이 사용될 수 있다.
이 경우, 제1 전자기기(100)는 제1 전자기기(100) 외의 다른 전자기기에 저장된 콘텐츠를 제공받고, 제공받은 콘텐츠를 출력할 수 있다.
사용자는 다양한 방법으로 제1 전자기기(100)가 콘텐츠를 출력하도록 제어할 수 있다. 예를 들어, 사용자는 리모콘, 음성 인식, 제스쳐 등을 이용하여 제1 전자기기(100)가 콘텐츠를 출력하도록 제어할 수 있다.
이하에서는 설명의 편의를 위하여 도 6에 도시된 바와 같이, 제1 전자기기(100)가 콘텐츠 제공 서버인 제3 전자기기(300)로부터 콘텐츠를 스트리밍(streaming)받고, 스트리밍 받은 콘텐츠의 영상을 디스플레이(151)를 통하여 출력하고 스트리밍 받은 콘텐츠의 음향을 음향 출력부(152)(이어폰)를 통하여 출력하는 것으로 상정한다. 따라서 사용자는 도시된 바와 같이 제1 전자기기(100)를 통하여 콘텐츠를 감상하면서 이동할 수 있다.
제1 전자기기(100)는 미리 정해진 이벤트가 발생하였음을 감지할 수 있다[S110].
상기 미리 정해진 이벤트는 상기 제1 전자기기(100)가 출력 중인 콘텐츠의 영상과 음향을 분리하여 각각 서로 다른 전자기기에서 출력되도록 요청하는 어떠한 경우도 다 포함할 수 있다.
상기 미리 정해진 이벤트는 사용자가 영상과 음향이 각기 다른 전자기기에서 출력될 것을 요청하는 경우 (이하 제1 이벤트), 상기 출력 중인 콘텐츠를 다른 전자기기에서 출력할 것을 요청하는 경우 (이하 제2 이벤트), 미리 정해진 조건에 부합하는 경우 (제3 이벤트)를 포함할 수 있다. 이하 각 이벤트에 대하여 상세하게 설명하기로 한다.
상기 제1 이벤트를 설명하기 위하여 도 7 및 도 8을 참조하기로 한다.
도 7은 본 발명의 제1 실시예에 따른 어플리케이션을 도시하고, 도 8은 본 발명의 제1 실시예에 따른 제1 어플리케이션의 사용자 인터페이스를 도시한다.
제1 전자기기(100)의 사용자는 제1 전자기기(100)와의 인터렉션(interaction)을 통하여 도 7에 도시된 제1 어플리케이션을 실행할 수 있다. 상기 제1 어플리케이션은 영상 및 음향을 분리하여 출력할 것을 명령할 수 있는 어플리케이션이다.
상기 제1 어플리케이션이 실행되는 경우, 도 8에 도시된 사용자 인터페이스가 출력될 수 있다. 도 8을 참고하면, 영상을 출력하기 위한 전자기기를 선택하는 창(W1)과 음향을 출력하기 위한 전자기기를 선택하는 창(W2)dl 도시되어 있다. W1 및 W2에 표시되는 전자기기는 제1 전자기기(100)가 미리 정해진 프로토콜에 따라 인식한 전자기기들일 수 있다. 이때, 미리 정해진 프로토콜은 예를 들어, SSDP(Simple Service Discovery Protocol)일 수 있다.
사용자는 W1 창을 통하여 영상을 출력할 전자기기를 선택하고, W2 창을 통하여 음향을 출력할 전자기기를 선택할 수 있다. 이 때, 사용자는 자신의 취향에 따라 영상을 출력할 전자기기는 S100 단계에서 콘텐츠를 출력 중인 스마트 폰의 디스플레이보다 해상도가 우수한 DTV를 선택할 수 있다. 본 실시예에서는 설명의 편의를 위하여 영상을 출력할 전자기기로서 제2 전자기기(200)(DTV)가 선택되고, 음향을 출력할 전자기기로서 제1 전자기기(100)(스마트폰)가 선택된 경우를 상정하기로 한다.
이와 같이, 제1 전자기기(100)는 제1 어플리케이션을 통하여 영상과 음향을 출력할 전자기기를 각각 선택받은 경우, 이를 제1 이벤트로 판단한다.
이하 도 7 및 도 9 내지 도 13을 참고하여 제2 이벤트에 대하여 설명한다.
도 9는 본 발명의 제1 실시예에 따른 제2 어플리케이션의 사용자 인터페이스를 도시하고 도 10은 본 발명의 제1 실시예에 따른 제2 이벤트를 설명하기 위한 흐름도를 도시하고, 도 11은 본 발명의 제1 실시예에 따른 영상 및 음향을 각각 다른 전자기기에서 출력할지를 질의하는 사용자 인터페이스를 도시하고, 도 12 및 도 13은 본 발명의 제1 실시예에 따른 미리 정해진 조건을 설명하기 위한 도면이다.
제1 이벤트는 상기 영상과 상기 음향을 각각 출력하기 위한 전자기기를 선택하는 제1 어플리케이션을 통하여 발생하는 반면, 제2 이벤트는 상기 출력 중인 콘텐츠를 다른 전자기기에서 출력하기 위한 2 어플리케이션을 통하여 발생한다는 점에서 상이하다.
도 7을 참고하면, 사용자는 제1 전자기기(100)와의 인터렉션을 통하여 제2 어플리케이션을 실행할 수 있다. 상기 제2 어플리케이션은 콘텐츠를 출력할 전자기기를 선택하기 위한 어플리케이션이다.
상기 제2 어플리케이션이 실행되는 경우, 제1 전자기기(100)는 도 9에 도시된 바와 같이 사용자 인터페이스를 출력할 수 있다. 도 9를 참고하면, 사용자는 제2 어플리케이션의 실행에 따른 사용자 인터페이스를 통하여 콘텐츠를 어느 전자기기에서 출력할지를 지정할 수 있다. 상기 제2 어플리케이션을 통하여 사용자가 특정 전자기기를 선택한 경우, 선택된 전자기기에서 콘텐츠가 출력될 수 있는 것이다.
이때, 제1 전자기기(100)는 사용자가 제2 어플리케이션을 실행시킨 경우에 사용자의 의도를 파악하여 사용자의 의도가 영상과 음향을 각각 분리하여 서로 다른 전자기기에서 출력하고자 하는 것인지 판단할 수 있다. 도 10을 참고하여 보다 구체적으로 설명하기로 한다.
도 10을 참고하면, 제1 전자기기(100)는 제2 어플리케이션이 실행된 경우, 미리 정해진 조건에 부합하는지 판단할 수 있다[S112].
상기 미리 정해진 조건은 영상과 음향을 분리하여 각기 다른 전자기기에서 출력하는 것이 사용자의 의도에 부합하는 어떠한 상황도 포함할 수 있다.
예를 들어, 도 11에 도시된 바와 같이, 사용자1이 이동 중에 콘텐츠를 감상하다가 미리 정해진 존 예를 들어, 홈으로 진입하는 경우를 상정해보자. 사용자1은 홈에 진입한 경우, 제1 전자기기(100)의 화면보다 화면 크기가 큰 제2 전자기기(200)로 콘텐츠를 감상하고자 하는 니드를 가질 수 있다. 그러나 도시된 데로, 룸1에서 사용자2가 자고 있다면 제2 전자기기(200)를 통하여 콘텐츠를 출력하는 것은 사용자2의 수면에 방해가 될 수 있다. 또한, 룸2에서 사용자3이 큰 소리로 대화 중인 경우 제2 전자기기(200)를 통하여 콘텐츠 감상시 방해가 될 수 있다.
이와 같은 경우, 도 13에 도시된 바와 같이, 콘텐츠의 영상만 제2 전자기기(200)에서 출력되고 콘텐츠의 음성은 제1 전자기기(100)을 통하여 이어폰 출력된다면, 사용자1은 사용자2의 수면을 방해하지 않으면서 또한 사용자3의 대화에 방해받지 않고 콘텐츠를 감상할 수 있게 된다.
이와 같이, 제1 전자기기(100)가 미리 정해진 존에 진입하는 경우는 영상과 음향을 분리하여 각기 다른 전자기기에서 출력하는 것이 사용자 의도에 부합할 수 있다.
이때, 제1 전자기기(100)는 다양한 방식으로 미리 정해진 존에 진입하였는지를 판단할 수 있다. 예를 들어, NFC, 카메라 인식, 현재 위치 정보 등을 통하여 제1 전자기기(100)는 미리 정해진 존에 진입하였는지를 판단할 수 있다.
NFC를 통하여 미리 정해진 존에 진입하였는지를 판단한다 함은, 제1 전자기기(100)에 포함된 NFC 모듈(미도시)를 통하여 미리 정해진 존에 설치된 NFC 태그와 태깅함으로써, 제1 전자기기(100)가 미리 정해진 존에 진입하였음을 판단하는 것이다. 이때, 미리 정해진 존에 설치된 태그는 예를 들어, 전자 열쇠를 말할 수 있다.
카메라 인식을 통하여 미리 정해진 존에 진입하였는지를 판단함은, 제1 전자기기(100)의 카메라 모듈을 통하여 미리 정해진 존에 진입하였음을 판단하는 방법 외에, 미리 정해진 존에 설치된 카메라 모듈이 제1 전자기기(100) 또는 제1 전자기기(100)의 사용자를 인식함으로써, 제1 전자기기(100)이 미리 정해진 존에 진입하였음을 판단하고, 관련된 제어신호를 제1 전자기기(100)로 송신하는 방법을 포함할 수 있다.
현재 위치 정보를 통하여 미리 정해진 존에 진입하였는지를 판단함은, 제1 전자기기(100)의 현 위치가 미리 정해진 존 내에 있는지를 판단함으로써 이루어질 수 있다.
또한, 상기 미리 정해진 조건은 미리 정해진 존에 진입하는 경우 외에도 다양할 수 있다. 예를 들어, 상기 미리 정해진 조건은 미리 정해진 위치에 해당하는 경우, 주변 소음이 미리 정해진 제1 기준보다 작거나 미리 정해진 제2 기준 보다 높은 경우, 이어폰을 통하여 음향을 출력하는 경우, 특정 시간 대인 경우 중 적어도 하나를 포함할 수 있다.
상기 미리 정해진 조건의 일 예인 미리 정해진 위치에 해당하는 경우에 대한 설명은 상기 미리 정해진 존에 진입하는 경우와 대응하므로 설명을 생략하기로 한다.
다음, 상기 미리 정해진 조건의 일 예인 주변 소음이 미리 정해진 제1 기준보다 작은 경우에 대하여 살펴본다. 주변 소음이 미리 정해진 제1 기준보다 작은데도 콘텐츠가 제2 전자기기(200)에서만 출력되는 것은, 콘텐츠 음향이 주변에 방해가 될 수 있음을 고려한 것이다. 즉, 이 경우에는 앞서 설명한 바와 마찬가지로 영상은 제2 전자기기(200)에서 출력되고 음향은 제1 전자기기(100)의 이어폰을 통하여 출력되는 것이 바람직하다. 또한, 주변 소음이 미리 정해진 제2 기준보다 높은 상황데도 콘텐츠가 제2 전자기기(200)에서만 출력되는 것은, 주변 소음이 콘텐츠 감상에 방해가 될 수 있음을 고려한 것이다.
상기 미리 정해진 조건의 일 예인 이어폰을 통하여 음향을 출력하는 경우에 대하여 살펴본다. 제1 전자기기(100)가 유/무선 이어폰을 통하여 콘텐츠 음향을 출력 중이던 경우에는 사용자의 의도가 음향을 제1 전자기기(100)을 통하여 계속적으로 감상하는데 있을 가능성이 높다. 따라서 제1 전자기기(100)가 이어폰을 통하여 콘텐츠 음향을 출력하는 경우 이를 미리 정해진 조건에 부합하는 경우로 볼 수 있다.
또한, 상기 미리 정해진 조건의 일 예인 특정 시간 대에 대하여 살펴본다. 외부 스피커로 콘텐츠를 출력하는 것은 특히 아침 이른 시간 대 및/또는 밤 늦은 시간 대에 주변에 방해가 될 수 있다. 따라서, 특정 시간 대에 해당하는 경우 이를 미리 정해진 조건에 부합하는 경우로 볼 수 있다.
이상 미리 정해진 조건의 일 예들에 대하여 설명하였다.
제1 전자기기(100)는 상기 미리 정해진 조건에 부합하지 않는다고 판단한 경우, 도 9에 도시된 사용자 인터페이스를 출력할 수 있다[S114]. 이에 따라, 사용자는 제1 전자기기(100)에서 출력 중인 콘텐츠가 다른 전자기기에서 출력되도록 제어할 수 있다. 이 경우 제1 전자기기(100)는 미리 정해진 이벤트에 해당하지 않는다고 판단하는 것이다.
제1 전자기기(100)는 상기 미리 정해진 조건에 부합한다고 판단한 경우, 영상과 음향을 각각 다른 전자기기에서 출력할지를 판단할 수 있다[S116].
이때, 제1 전자기기(100)는 사용자 의도를 보다 분명하게 파악하기 위하여, 도 11에 도시된 바와 같이 사용자 인터페이스를 출력할 수 있다. 제1 전자기기(100)는 도 11에 도시된 사용자 인터페이스를 통하여 거절(No)에 상응하는 선택을 받은 경우, 도 9에 도시된 사용자 인터페이스를 출력함으로써, 콘텐츠를 출력할 전자기기를 선택받을 수 있다. 이 경우 제1 전자기기(100)는 선택된 전자기기에서 콘텐츠가 출력되도록 제어할 뿐이므로 미리 정해진 이벤트로 판단하지 않는다.
한편, 제1 전자기기(100)는 도 11에 도시된 사용자 인터페이스를 통하여 승낙(Yse)에 상응하는 선택을 받은 경우, 사용자가 제2 어플리케이션을 실행한 경우라 하더라도 출력 중인 콘텐츠의 영상과 음향이 각각 분리되어 서로 다른 전자기기에서 출력되도록 할 수 있다. 이는 사용자 의도가 콘텐츠의 영상과 콘텐츠의 음향을 분리하여 서로 다른 전자기기에서 출력하는데 있는 것이 분명하기 때문이다.
제1 전자기기(100)는 도 8에 도시된 사용자 인터페이스를 출력함으로써, 상기 영상과 상기 음향을 각각 출력할 전자기기를 선택받을 수 있다[S118].
이와 같이, 제1 전자기기(100)는 제2 어플리케이션을 통하여 영상과 음향을 출력할 전자기기를 각각 선택받은 경우, 이를 제2 이벤트로 판단한다.
이하 제3 이벤트에 대하여 설명하기로 한다.
상기 제1 및 제2 이벤트는 사용자가 특정 어플리케이션을 실행시켜야 발생하는 것임에 반해, 상기 제3 이벤트는 사용자가 특정 어플리케이션을 실행시키지 않더라도 미리 정해진 조건에 부합하는 경우 상기 영상과 상기 음향이 각각 다른 전자기기에서 출력되도록 선택받는 점에서 상이하다.
상기 미리 정해진 조건은 앞서 설명한 바와 같다. 즉, 상기 미리 정해진 조건은 제1 전자기기(100)가 미리 정해진 존으로 진입하는 경우, 제1 전자기기(100)가 특정 위치에 해당하는 경우, 주변 소음이 미리 정해진 제1 기준 값 보다 크거나 주변 소음이 미리 정해진 제2 기준 값보다 작은 경우, 이어폰을 통하여 음향을 출력한 경우, 특정 시간 대인 경우 중 적어도 하나를 포함할 수 있다.
제1 전자기기(100)는 미리 정해진 조건에 부합하는 경우, 상기 영상과 상기 음향을 각각 다른 전자기기에서 출력할지를 질의하는 사용자 인터페이스를 출력할 수 있다(도 11에 도시된 사용자 인터페이스 참조).
또한, 제1 전자기기(100)는 미리 정해진 조건에 부합하는 경우 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기를 선택하기 위한 사용자 인터페이스(도 8의 사용자 인터페이스 참조)를 출력할 수 있다. 특히, 제1 전자기기(100)는 사용자가 상기 영상과 상기 음향을 각각 다른 전자기기에서 출력한다고 선택한 경우에 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기를 선택하기 위한 사용자 인터페이스를 출력할 수 있다.
이로써, 사용자는 상기 영상과 상기 음향을 각각 출력할 전자기기를 선택할 수 있다.
이와 같이, 제1 전자기기(100)는 미리 정해진 조건에 부합하는 경우 영상과 음향을 출력할 전자기기를 각각 선택받는 경우, 이를 제3 이벤트로 판단한다.
한편, 상기 제1 내지 제3 이벤트를 설명함에 있어서, 제1 전자기기(100)가 사용자로부터 상기 영상을 출력할 전자기기와 상기 음향을 출력할 전자기기를 각각 선택받는다고 설명하였지만, 상기 영상을 출력할 전자기기와 상기 음향을 출력할 전자기기는 미리 정해진 알고리즘에 따라 자동으로 선택될 수도 있고 사용자가 미리 지정한 전자기기일 수 있다.
이상 미리 정해진 이벤트의 일 예인 제1 이벤트, 제2 이벤트, 제3 이벤트 각각에 대하여 설명하였다.
다시 도 5를 참고하면, 제1 전자기기(100)는 상기 미리 정해진 이벤트 발생시 영상 및 음향이 각각 다른 전자기기에서 출력되도록 제어할 수 있다[S120].
도 14를 참고하여 단계 S120을 보다 구체적으로 설명하기로 한다.
도 14는 본 발명의 제1 실시예에 따른 단계 S120를 보다 구체적으로 설명하기 위한 흐름도이다.
제1 전자기기(100)는 콘텐츠의 영상과 음향이 서로 다른 전자기기에서 출력되도록 하기 위하여 제어신호를 생성하고 생성된 제어신호에 따라 영상과 음향을 각각 출력하는 전자기기가 다르게 할 수 있다.
제1 전자기기(100)는 영상 및 음향이 각각 다른 전자기기에서 출력되도록 제어신호를 생성할 수 있다[S122].
앞서 상정한 바와 같이, 제1 전자기기(100)에서 출력되던 콘텐츠는 미리 정해진 이벤트가 발생함에 따라 콘텐츠의 영상은 제2 전자기기(200)에서 출력되고 콘텐츠의 음향은 제1 전자기기(100)에서 출력되어야 한다. 따라서, 제어신호는 콘텐츠의 영상이 제2 전자기기(200)에서 출력되도록 제어하고 콘텐츠의 음향이 제1 전자기기(100)에서 출력되도록 제어한다.
제1 전자기기(100)는 생성된 제어신호를 해당 전자기기로 전송할 수 있다[S124]. 또한, 상기 제어신호에 따라 영상은 제2 전자기기(200)에서 출력되고 음향은 제1 전자기기(100)에서 출력될 수 있다[S126].
단계 S124는 영상 및 음향을 출력하는 각각의 전자기기에 어떻게 영상과 음향을 제공할지에 따라 다양하게 구현될 수 있다.
단계 S124를 구체적으로 설명하기 위하여 도 15 내지 도 17을 참고하기로 한다.
도 15 내지 도 17을 본 발명의 제1 실시예에 따른 제어신호를 설명하기 위한 도면이다.
도 15를 참고하면, 제1 전자기기(100)는 생성된 제어신호를 콘텐츠 제공 서버인 제3 전자기기(300)로 전송할 수 있다. 제어신호를 수신한 제3 전자기기(300)는 제어신호에 따라 콘텐츠의 음향만 제1 전자기기(100)로 스트리밍하고, 콘텐츠의 영상은 제2 전자기기(200)로 스트리밍할 수 있다. 이로써, 제1 전자기기(100)는 음향을 출력하고 제2 전자기기(200)는 영상을 출력할 수 있게 된다.
도 16을 참고하면, 제1 전자기기(100)는 제3 전자기기(300)로부터 콘텐츠를 스트리밍 받고, 생성된 제어신호에 따라 콘텐츠의 영상을 제2 전자기기(200)로 스트리밍할 수 있다. 이로써, 제2 전자기기(200)는 영상을 출력하고, 제1 전자기기(100)는 음향을 출력할 수 있다.
도 17을 참고하면, 제1 전자기기(100)는 생성된 제어신호를 제3 전자기기(300)에 전송할 수 있다. 제어신호를 수신한 제3 전자기기(300)는 제어신호에 따라 콘텐츠를 제2 전자기기(200)로 전송할 수 있다. 이때, 제3 전자기기(300)는 제2 전자기기(200)에 영상과 음향의 분리 출력을 함께 지시할 수 있다. 이에 따라 제2 전자기기(200)는 콘텐츠 음향을 제1 전자기기(100)로 스트리밍 할 수 있다. 따라서, 제2 전자기기(200)는 영상을 출력하고 제1 전자기기(100)는 음향을 출력할 수 있게 된다.
이하에서는 도 18을 참고하여 단계 S126를 보다 구체적으로 설명하기로 한다.
도 18은 본 발명의 제1 실시예에 따른 단계 S126을 보다 구체적으로 설명하기 위한 도면이다.
제1 전자기기(100)가 콘텐츠의 영상을 제2 전자기기(200)에서 출력하고자 하는 경우, 제2 전자기기(200)는 콘텐츠 영상 출력을 위한 준비가 되지 않은 상황일 수 있다. 예를 들어, 제2 전자기기(200)는 오프 상태일 수 있다.
따라서, 제1 전자기기(100)는 영상 및 음향을 분리하여 출력하여야 하는 경우(t1 시점) 제2 전자기기(200)로 영상 출력 요청 신호 즉 제어신호를 전송할 수 있다. 제2 전자기기(200)는 영상 출력 요청 신호를 수신한 경우, 파워 온 상태로 진입할 수 있다.
이때, 제2 전자기기(200)는 전력 절감을 위하여 필요한 모듈 예를 들어, 영상 처리 모듈 및 통신 모듈만 온 상태로 진입할 수 있다. 한편, 제1 전자기기(100)는 제2 전자기기(200)가 오프 상태이므로 사용자가 영상 및 음향 분리를 요청한 t1 시점 이후에도 지속적으로 영상 및 음향을 출력한다. 제2 전자기기(200)는 모듈 활성화가 종료된 경우 제1 전자기기(100)에 활성화 완료 알림 신호를 전송할 수 있다(t2 시점). 제1 전자기기(100)는 제2 전자기기(200)로부터 활성화 완료 알림 신호를 수신한 경우, 영상 및 음향 중에서 음향만 출력하고, 제2 전자기기(200)가 영상을 출력할 수 있도록 한다. 또한, 제1 전자기기(100)는 음향만 출력하는 경우 디스플레이부에서 소요되는 전력을 절감하기 위하여 디스플레이 절전 모드 예를 들어 디밍을 수행할 수 있다.
도 18을 참고하여 설명한 방법에 따라서, 제1 전자기기(100)는 제2 전자기기(200)가 영상 출력 준비 시점까지 기다렸다가 영상 출력 준비가 완료된 이후부터 제2 전자기기(200)가 영상을 출력하도록 할 수 있다.
이로써, 사용자는 도 15에 도시된 t1 부터 t2 시점 사이에 제1 전자기기(100)으로부터 음향만 듣고 제2 전자기기(200)로부터 영상을 감상할 수 없는 불편함을 피할 수 있다.
또한, 도 18에 도시된 t2 시점 이후부터 영상은 제2 전자기기(200)에서 출력되고 음향은 제1 전자기기(100)에서 출력됨에 있어서, 영상과 음향의 동기화가 필요하다. 제1 전자기기(100)와 제2 전자기기(200)의 하드웨어 환경이 상이함으로 인하여 영상과 음향의 동기화가 어긋날 수도 있기 때문이다.
이를 해소하기 위하여, 제1 전자기기(100) 및 제1 전자기기(100) 중 적어도 하나는 상기영상 및 상기 음향의 동기화를 위한 제어를 수행할 수 있다. 보다 구체적으로 제1 전자기기(100) 및 제2 전자기기(200) 중 적어도 하나는 동기화를 위한 사용자 인터페이스를 제공할 수 있다. 예를 들어, 제1 전자기기(100)는 도 19에 도시된 바와 같이 음향의 출력 타이밍을 설정할 수 있는 사용자 인터페이스를 제공할 수 있다. 이로써, 제1 전자기기(100) 출력 음향과 제2 전자기기(200) 출력 영상 간에 동기화가 이루어질 수 있다.
또한, 이와 달리 제1 전자기기(100)와 제2 전자기기(200)는 서로 동기 신호를 주고 받을 수 있다. 예를 들어, 제1 전자기기(100)는 출력 중인 음향의 타임 정보를 획득하여 이를 제2 전자기기(200)로 전송할 수 있다. 제2 전자기기(200)는 수신한 타임 정보와 현재 출력 중인 영상의 타임 정보를 비교함으로써 영상과 음향의 싱크 정도를 판단할 수 있다. 보다 정확한 판단을 위하여 제2 전자기기(200)는 제1 전자기기(100)로부터 수신한 타임 정보의 전송 시간을 더 고려할 수 있다. 제2 전자기기(200)는 싱크가 어긋난다고 판단한 경우, 영상 출력 타이밍을 제어하거나 제1 전자기기(100)에게 음향 출력 타이밍 제어를 요청할 수 있다. 이로써, 제1 전자기기(100)의 출력 음향과 제2 전자기기(200)의 출력 영상은 동기화될 수 있다.
다시 도 5를 참고하면, 각각 다른 전자기기에서 출력 중인 영상 및 음향의 통합 이벤트 발생시 영상 및 음향이 다시 동일 전자기기에서 출력되도록 제어할 수 있다[S130].
단계 S130은 제1 전자기기(100)가 음향을 출력하고 제2 전자기기(200)가 영상을 출력하는 중에 통합 이벤트가 발생하면 음향과 영상이 다시 하나의 전자기기 예를 들어 제1 전자기기(100)에서 출력되도록 하기 위함이다.
상기 통합 이벤트는 음향과 영상이 하나의 전자기기에서 출력되는 것이 사용자 의도에 부합하는 다양한 상황을 포함할 수 있다.
예를 들어, 상기 통합 이벤트는 제1 전자기기(100)가 미리 정해진 거리 이상을 이동하는 경우, 사용자 인터페이스를 통하여 요청된 경우 중 적어도 하나를 포함할 수 있다. 이하 각 케이스에 대하여 구체적으로 설명한다.
상기 통합 이벤트의 일 예인 상기 미리 정해진 거리 이상을 이동하는 경우는 방1에서 제2 전자기기(200)를 통하여 영상을 감상하던 중 제1 전자기기(100)를 가지고 방2로 이동하는 경우를 말할 수 있다. 이 경우, 사용자는 제2 전자기기(200)를 통하여 영상을 감상할 수 없으므로 영상이 음향을 출력 중인 제1 전자기기(100)에서 출력되는 것이 바람직하다.
제1 전자기기(100)가 상기 미리 정해진 거리 이상을 이동하였는지 여부는 제1 전자기기(100)에 내장된 가속도 센서를 통하여 제1 전자기기(100)가 산출 획득할 수 있다. 또한, 카메라 센서를 이용할 수도 있다. 예를 들어, 제2 전자기기(200)에 장착된 카메라에서 사용자를 인식하다가 사용자가 사라지게 되면, 이를 통합 이벤트 발생으로 간주할 수 있다. 또 다른 예를 들어, 제1 전자기기(100)가 이동 후에 다른 장소에서 NFC 태깅을 하는 경우 제1 전자기기(100)는 사용자가 미리 정해진 거리 이상을 이동하였다고 판단하고 이를 통합 이벤트 발생으로 간주할 수 있다.
상기 통합 이벤트의 다른 예인 사용자 인터페이스는 사용자가 제1 전자기기(100)을 통하여 제2 전자기기(200)에서 출력 중인 영상이 제1 전자기기(100)에서 출력되도록 요청하는 경우를 말할 수 있다.
이하 영상 및 음향이 다시 제1 전자기기(100)에서 출력되도록 구현하는 방법에 대하여 설명하기로 한다. 제2 전자기기(200)에서 영상 및 음향이 함께 출력되도록 구현하는 방법은 대응되는 설명이므로 생략하기로 한다.
도 20 내지 도 22는 본 발명의 제1 실시예에 따른 통합 이벤트를 설명하기 위한 도면이다.
도 20을 참고하면, 제1 전자기기(100)는 제3 전자기기(300)로부터 음향 스트리밍을 제공받아 음향을 출력하고 제2 전자기기(200)는 제3 전자기기(300)로부터 영상 스트리밍을 제공받아 영상을 출력하는 상태이다. 즉, 이는 도 15를 참고하여 설명한 실시예에 대응한다.
이때, 상기 설명한 통합 이벤트가 발생하게 되면, 제1 전자기기(100) 및 제2 전자기기(200) 중 적어도 하나는 통합 이벤트 발생에 따른 제어신호를 생성하여 생성된 제어신호를 상기 제3 전자기기(300)로 전송할 수 있다.
상기 제3 전자기기(300)는 상기 제어신호를 수신함에 따라 제2 전자기기(200)로의 영상 스트리밍을 중단하고 제1 전자기기(100)로 음향뿐 만 아니라 영상 스트리밍을 제공할 수 있다.
이에 따라, 제1 전자기기(100)는 영상 및 음향을 함께 출력하게 되고, 제2 전자기기(200)는 영상 출력을 중단하게 된다.
도 21을 참고하면, 제1 전자기기(100)는 제3 전자기기(300)로부터 영상 및 음향을 스트리밍 받고, 영상은 제2 전자기기(200)로 스트리밍함에 따라 제1 전자기기(100)는 음향을 출력하고 제2 전자기기(200)는 영상을 출력하는 상태이다. 즉, 이는 도 16을 참고하여 설명한 실시예에 대응한다.
이때, 상기 설명한 통합 이벤트가 발생하게 되면, 제1 전자기기(100)는 통합 이벤트 발생에 따라 제2 전자기기(200)에 영상 출력 중단을 요청하는 제어신호를 전송할 수 있다.
제2 전자기기(200)는 상기 제어신호를 수신함에 따라 영상 출력을 중단할 수 있다.
이에 따라, 제1 전자기기(100)는 영상 및 음향을 함께 출력할 수 있다.
도 22를 참고하면, 제2 전자기기(200)는 제3 전자기기(300)로부터 영상 및 음향을 스트리밍 받는다. 제2 전자기기(200)은 스트리밍 받은 영상 음향 중 음향을 제1 전자기기(100)로 스트리밍할 수 있다. 이로써, 제1 전자기기(100)는 음향을 출력하고, 제2 전자기기(200)는 영상을 출력하는 상태이다. 즉, 이는 도 17을 참고하여 설명한 실시예에 대응한다.
이때, 상기 설명한 통합 이벤트가 발생하게 되면, 제1 전자기기(100)는 통합 이벤트 발생에 따라 제어신호를 생성하여 생성된 제어신호를 제2 전자기기(200)로 전송할 수 있다.
제2 전자기기(200)는 제어신호를 수신함에 따라 제1 전자기기(100)로 콘텐츠를 스트리밍할 수 있다. 또한, 제2 전자기기(200)는 영상 출력을 중단할 수 있다.
제1 전자기기(100)는 제2 전자기기(200)로부터 수신한 콘텐츠 스트리밍을 통하여 영상 및 음향을 함께 출력할 수 있다.
한편, 제1 전자기기(100)는 통합 이벤트가 발생하는 경우, 제어신호를 상기 제3 전자기기(300)로 전송함으로써, 상기 제3 전자기기(300)로부터 직접 콘텐츠를 스트리밍 받을 수 있다.
이상 영상 및 음향이 다시 제1 전자기기(100)에서 출력되는 방법에 대하여 설명하였다.
상기 설명에 있어서, 제2 전자기기(200)가 영상 출력을 중단하는 것을 전제로 설명하였지만 제1 전자기기(100)가 영상 및 음향을 함께 출력하더라도 제2 전자기기(200)는 지속적으로 영상을 출력할 수 있음은 물론이다.
또한, 도 20 내지 도 22에 도시된 순서의 표기는 설명의 편의를 위한 것일 뿐 본 발명의 실시예가 제한되는 것은 아니다. 즉, 도 20 내지 도 22에 도시된 순서에 구애받지 않고 본 발명의 실시예가 구현될 수 있다.
이상 본 발명의 제1 실시예에 따른 전자기기의 동작 방법에 대하여 설명하였다. 본 발명의 제1 실시예에 따른 전자기기의 동작 방법에 의하여 사용자 콘텐츠 몰입도는 크게 향상된다.
구체적인 예를 살펴보면, 제1 전자기기(100)의 사용자는 길을 걸어가면서 콘텐츠를 감상하다가 특정 시간 대인 11:00PM에 미리 정해진 존의 일 예인 집에 도착하게 된다. 이 경우, 제1 전자기기(100)의 사용자가 감상 중인 콘텐츠의 영상은 제2 전자기기(200)에서 출력되고 음향은 제1 전자기기(100)의 이어폰을 통하여 출력된다. 따라서, 사용자는 제1 전자기기(100)보다 화면이 큰 제2 전자기기(200)를 통하여 영상을 감상할 수 있고, 제1 전자기기(100)의 이어폰으로 음향을 듣게 되므로 가족의 수면에 방해를 하지 않게 된다.
이하에서는 도 23을 참고하여, 본 발명의 제2 실시예에 따른 전자기기의 동작 방법에 대하여 설명하기로 한다.
도 23은 본 발명의 제2 실시예에 따른 전자기기의 동작 방법을 설명하기 위한 흐름도이다.
본 발명의 제2 실시예에 따르면, 제1 전자기기(100)가 콘텐츠를 출력하던 중 제2 전자기기(200)가 관여하게 된 경우에도 제2 전자기기(200)는 제1 전자기기(100)와 동일한 콘텐츠 감상 환경을 제공할 수 있다. 예를 들어, 제1 전자기기(100)에서 특정 음향 크기로 콘텐츠가 출력되다가 제2 전자기기(200)도 콘텐츠를 출력하게 되는 경우, 상기 특정 음향 크기를 반영하여 콘텐츠를 출력하게 된다. 따라서, 사용자는 seamless한 콘텐츠 감상 환경을 제공받는다. 이하 본 발명의 제2 실시예의 구현 방법에 대하여 설명하기로 한다.
본 발명의 제2 실시예를 설명함에 있어서, 제1 실시예와 대응되는 부분은 설명을 생략하기로 한다.
도 23을 참고하면, 제1 전자기기(100)는 특정 음향 크기로 콘텐츠를 출력할 수 있다[S200].
제1 전자기기(100)는 앞서 도 5를 참고하여 설명한 단계 S100과 같이 다양한 콘텐츠를 출력할 수 있다. 이때, 제1 전자기기(100)는 특정 음향 크기로 콘텐츠를 출력할 수 있다.
제1 전자기기(100)는 상기 콘텐츠 출력 중에 상기 콘텐츠를 다른 전자기기에서 출력할 것을 요청받을 수 있다[S210].
예를 들어, 제1 전자기기(100)는 제1 실시예에서 설명한 제2 어플리케이션(도 7 및 도 9 참조)을 통하여 상기 콘텐츠를 출력할 다른 전자기기를 선택받을 수 있다. 설명의 편의를 위하여 제2 전자기기(200)가 상기 콘텐츠를 출력할 다른 전자기기로 선택된 경우를 상정하기로 한다.
제1 전자기기(100)는 상기 출력 중인 콘텐츠를 다른 전자기기에서 출력할 것을 요청받음에 따라 제2 전자기기(200)에서 상기 콘텐츠가 출력되도록 제어하는 제어신호를 생성할 수 있다[S220].
도 24는 본 발명의 제2 실시예에 따른 제어신호의 메시지 포맷을 도시한다.
도 24에 도시된 바와 같이, 제어신호는 명령 코드 및 페이로드를 포함할 수 있다.
상기 명령 코드는 특정 콘텐츠를 출력하라는 명령 값을 포함할 수 있다. 이때, 명령 값은 제1 전자기기(100)가 출력 중인 콘텐츠의 소스 정보 예를 들어, IP 주소를 포함할 수 있다. 이는 제2 전자기기(200)가 직접 콘텐츠를 스트리밍 받기 위함이다. 반면에 제1 전자기기(100)가 직접 제2 전자기기(200)로 콘텐츠를 스트리밍하는 경우에는 상기 소스 정보는 선택적인 정보일 수 있다.
또한, 상기 페이로드는 제1 전자기기(100)에서 출력한 콘텐츠의 음향 크기에 대한 정보를 포함할 수 있다. 상기 페이로드에 포함된 정보에 기초하여 제2 전자기기(200)는 콘텐츠 출력 시의 음향 크기를 제1 전자기기(100)에서의 음향 크기와 상응하도록 제어할 수 있다.
제1 전자기기(100)는 생성된 제어신호를 제2 전자기기(200)로 전송할 수 있다.
제2 전자기기(200)는 수신한 제어신호에 따라 상기 특정 음향 크기로 상기 콘텐츠를 출력할 수 있다[S230].
보다 구체적으로, 제2 전자기기(200)는 상기 제어신호에 포함된 상기 명령 코드를 수신하는 경우, 콘텐츠 출력 준비를 수행할 수 있다. 예를 들어, 제2 전자기기(200)는 콘텐츠 출력에 필요한 모듈을 온 상태로 진입시킬 수 있다. 또한, 제2 전자기기(200)는 제1 전자기기(100)로부터 직접 스트리밍 받거나 상기 명령 코드에 소스 정보가 포함된 경우, 상기 소스 정보에 기초하여 제1 전자기기(100)에서 출력 중인 콘텐츠를 스트리밍 받을 수 있다.
제2 전자기기(200)는 콘텐츠를 스트리밍 받는 경우, 상기 페이로드에 기초하여 상기 콘텐츠의 음향 크기를 제어할 수 있다. 즉, 제2 전자기기(200)는 제1 전자기기(100)에서의 음향 크기에 대응되도록 콘텐츠의 음향 크기를 제어할 수 있는 것이다.
이로써, 사용자는 콘텐츠의 출력 기기가 변경되는 경우에도 콘텐츠 음향 크기를 일정하게 유지할 수 있다.
도 25는 본 발명의 제2 실시예의 구현예를 도시한다.
도 25에 도시된 바와 같이, 제1 전자기기(100)는 볼륨 10으로 콘텐츠를 출력 중이고 제2 전자기기(200)의 설정된 볼륨은 0(mute) 인 상태이다. 이때, 제1 전자기기(100)에서 출력 중인 콘텐츠가 제2 전자기기(200)에서 출력되도록 요청되는 경우, 제2 전자기기(200)는 설정된 볼륨 0이 아니라 제1 전자기기(100)에서의 콘텐츠 출력 볼륨인 10으로 콘텐츠를 출력하는 것이다.
물론, 제1 전자기기(100)에서 mute 상태로 콘텐츠 출력 중에 제2 전자기기(200)에서 콘텐츠를 출력하게 된 경우, 제2 전자기기(200)에 설정된 볼륨이 mute가 아니더라도 제2 전자기기(200)는 mute 상태로 콘텐츠를 출력할 수 있음은 물론이다.
따라서, 본 발명의 제2 실시예는 콘텐츠 출력 기기 변경시에도 연속적인 콘텐츠 감상 환경을 제공한다.
한편, 제2 실시예를 설명함에 있어서, 콘텐츠 출력 기기가 제1 전자기기(100)에서 제2 전자기기(200)로 변경되는 경우를 설명하였지만, 콘텐츠 출력 기기가 제1 전자기기(100)에 제2 전자기기(200)가 추가되는 경우에도 제2 전자기기(200)의 음향 크기가 제1 전자기기(100)의 음향 크기와 상응하도록 제어할 수 있음은 물론이다.
본 문서에서 개시한 다양한 실시예들은 서로 개별적으로 또는 조합되어 실시될 수 있다. 또한 각 실시예를 구성하는 단계들은 다른 실시예를 구성하는 단계들과 서로 조합되어 실시될 수 있다.
본 발명의 다양한 실시예는 컴퓨터로 읽을 수 있는 매체(media)에 의하여 구현될 수 있다. 상기 매체는 예를 들어, 본 발명의 실시예를 구현하기 위한 프로그램 코드, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 이러한 매체의 예에는 자기 매체(magnetic media), CD 및 DVD와 같은 광기록 매체(optical recording media), 롬(ROM), 램(RAM), 플래시 메모리(flash memory) 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 매체가 포함될 수 있다. 프로그램 코드의 예에는 컴파일러에 의해 만들어지는 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해 실행될 수 있는 고급 언어 코드를 포함할 수 있다.
이상에서 설명한 본 발명의 다양한 실시예들은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경할 수 있으므로 본 발명의 권리범위가 전술한 실시예 및 첨부한 도면에 의하여 한정되는 것은 아니다. 또한 본 문서에서 설명한 다양한 실시예들은 한정되어 적용될 수 있는 것이 아니라, 다양한 변형이 이루어져 실시될 수 있으며, 이러한 변형 실시예들도 본 발명의 권리범위에 속한다고 할 것이다.
본 발명은 전자기기 및 전자기기의 동작 방법에 관한 것으로서, 콘텐츠를 출력 중인 상태에서 미리 정해진 이벤트가 발생하는 경우, 상기 콘텐츠의 영상과 음향이 각각 서로 다른 전자기기에서 출력되도록 제어함으로써, 사용자의 콘텐츠 감상 환경을 개선시키는 전자기기 및 전자기기의 동작 방법을 제공한다.

Claims (20)

  1. 출력부; 및
    영상 및 음향을 포함하는 콘텐츠를 상기 출력부를 통하여 출력하던 중, 미리 정해진 이벤트가 발생하는 경우, 상기 영상 및 상기 음향이 각각 서로 다른 전자기기에서 출력되도록 제어하는 제어부를 포함하는
    전자기기.
  2. 제1 항에 있어서,
    상기 미리 정해진 이벤트는 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기를 선택하기 위한 제1 어플리케이션이 실행됨에 따라 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기가 선택된 경우인
    전자기기.
  3. 제2 항에 있어서,
    상기 제어부는 상기 제1 어플리케이션이 실행되는 경우, 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기를 선택하기 위한 사용자 인터페이스를 출력하는
    전자기기.
  4. 제1 항에 있어서,
    상기 미리 정해진 이벤트는, 상기 출력 중인 콘텐츠를 다른 전자기기에서 출력하기 위한 제2 어플리케이션이 실행됨에 따라 상기 영상을 출력할 전자기기와 상기 음향을 출력할 전자기기가 선택된 경우인
    전자기기.
  5. 제4 항에 있어서,
    상기 제어부는, 상기 제2 어플리케이션 실행 시 미리 정해진 조건에 부합하는 경우 상기 영상과 상기 음향을 각각 다른 전자기기에서 출력할지를 질의하는 제1 사용자 인터페이스를 출력하는
    전자기기.
  6. 제4 항에 있어서,
    상기 제어부는 상기 제2 어플리케이션 실행 시 미리 정해진 조건에 부합하는 경우 상기 영상을 출력하기 위한 전자기기와 상기 음향을 출력하기 위한 전자기기를 선택받기 위한 제2 사용자 인터페이스를 출력하는
    전자기기.
  7. 제1 항에 있어서,
    상기 미리 정해진 이벤트는 미리 정해진 조건에 부합함에 따라 상기 영상을 출력할 전자기기와 상기 음향을 출력할 전자기기가 선택된 경우인
    전자기기.
  8. 제5 항 또는 제7 항에 있어서,
    상기 미리 정해진 조건은 상기 전자기기가 미리 정해진 존에 진입하는 경우, 상기 전자기기가 미리 정해진 위치에 해당하는 경우, 주변 소음이 미리 정해진 제1 기준 값보다 작거나 주변 소음이 미리 정해진 제2 기준 값보다 높은 경우, 상기 음향을 이어폰을 통하여 출력중인 경우, 특정 시간 대인 해당하는 경우 중 적어도 하나를 포함하는
    전자기기.
  9. 제7 항에 있어서,
    상기 제어부는, 상기 미리 정해진 조건에 부합하는 경우, 상기 출력부를 통하여 상기 영상과 상기 음향을 각각 다른 전자기기에서 출력할지를 질의하는 제1 사용자 인터페이스를 출력하는
    전자기기.
  10. 제8 항에 있어서,
    상기 제어부는 상기 제1 사용자 인터페이스를 통하여 상기 영상과 상기 음향을 각각 다른 전자기기에서 출력할 것을 요청받은 경우, 상기 영상과 상기 음향을 각각 출력할 전자기기를 선택받기 위한 제2 사용자 인터페이스를 상기 출력부를 통하여 출력하는
    전자기기.
  11. 제1 항에 있어서,
    상기 제어부는, 상기 미리 정해진 이벤트가 발생한 이후 상기 영상을 출력하게 된 전자기기가 영상 출력 준비를 완료하는 시점까지 상기 콘텐츠를 상기 출력부를 통하여 출력하고, 상기 영상 출력 준비가 완료된 이후에 상기 영상과 상기 음향이 각각 다른 전자기기에서 출력되도록 제어하는
    전자기기.
  12. 제1 항에 있어서,
    상기 제어부는, 상기 미리 정해진 이벤트 발생시 상기 영상을 출력하게 된 전자기기가 오프 상태인 경우, 상기 영상을 출력하게 된 전자기기가 영상 출력에 필요한 모듈을 선택적으로 온 상태로 진입하도록 제어하는
    전자기기.
  13. 제1 항에 있어서,
    상기 제어부는, 상기 영상과 상기 음향이 서로 다른 전자기기에서 동기화되어 출력되도록 제어하는
    전자기기.
  14. 제1 항에 있어서,
    상기 음향 및 영상 중 하나를 출력하게 된 전자기기는 출력 타이밍을 제어하기 위한 사용자 인터페이스를 제공하는
    전자기기.
  15. 제1 항에 있어서,
    상기 제어부는 상기 미리 정해진 이벤트 발생 이후, 상기 전자기기가 상기 음향을 출력하게 된 경우, 상기 콘텐츠의 영상을 출력하던 디스플레이를 절전 모드로 제어하는
    전자기기.
  16. 제1 항에 있어서,
    상기 제어부는 상기 영상 및 상기 음향이 각각 다른 전자기기에서 출력되던 중, 미리 정해진 통합 이벤트가 발생하는 경우, 상기 영상 및 상기 음향이 동일 전자기기에서 출력되도록 제어하는
    전자기기.
  17. 제16 항에 있어서,
    상기 미리 정해진 통합 이벤트는 상기 전자기기가 미리 정해진 거리 이상 이동한 경우 및 사용자 요청이 있는 경우 중 적어도 하나를 포함하는
    전자기기.
  18. 출력부; 및
    상기 출력부를 통하여 콘텐츠를 특정 음향 크기로 출력하던 중, 상기 콘텐츠의 출력에 다른 전자기기가 관여하게 된 경우, 상기 다른 전자기기에서 상기 특정 음향 크기에 기초하여 상기 콘텐츠를 출력하도록 제어하는 제어부를 포함하는
    전자기기.
  19. 영상 및 음향을 포함하는 콘텐츠를 출력부를 통하여 출력하는 단계; 및
    미리 정해진 이벤트가 발생하는 경우 상기 영상 및 음향이 각각 다른 전자기기에서 출력되도록 제어하는 단계;를 포함하는
    전자기기의 동작 방법.
  20. 출력부를 통하여 콘텐츠를 특정 음향 크기로 출력하는 단계; 및
    상기 콘텐츠의 출력 기기가 변경되는 경우, 상기 변경된 출력 기기에서 상기 특정 음향 크기에 기초하여 상기 콘텐츠를 출력하도록 제어하는 단계;를 포함하는
    전자기기의 동작 방법.
PCT/KR2011/005271 2011-07-18 2011-07-18 전자기기 및 전자기기의 동작 방법 WO2013012104A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2011/005271 WO2013012104A1 (ko) 2011-07-18 2011-07-18 전자기기 및 전자기기의 동작 방법
US13/242,971 US8875191B2 (en) 2011-07-18 2011-09-23 Device for reproducing content and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2011/005271 WO2013012104A1 (ko) 2011-07-18 2011-07-18 전자기기 및 전자기기의 동작 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/242,971 Continuation US8875191B2 (en) 2011-07-18 2011-09-23 Device for reproducing content and method thereof

Publications (1)

Publication Number Publication Date
WO2013012104A1 true WO2013012104A1 (ko) 2013-01-24

Family

ID=47555538

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/005271 WO2013012104A1 (ko) 2011-07-18 2011-07-18 전자기기 및 전자기기의 동작 방법

Country Status (2)

Country Link
US (1) US8875191B2 (ko)
WO (1) WO2013012104A1 (ko)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8689255B1 (en) 2011-09-07 2014-04-01 Imdb.Com, Inc. Synchronizing video content with extrinsic data
US9442687B2 (en) * 2012-07-23 2016-09-13 Korea Advanced Institute Of Science And Technology Method and apparatus for moving web object based on intent
US9113128B1 (en) 2012-08-31 2015-08-18 Amazon Technologies, Inc. Timeline interface for video content
US8955021B1 (en) 2012-08-31 2015-02-10 Amazon Technologies, Inc. Providing extrinsic data for video content
US9389745B1 (en) 2012-12-10 2016-07-12 Amazon Technologies, Inc. Providing content via multiple display devices
US9413821B2 (en) * 2013-02-11 2016-08-09 Qualcomm Connected Experiences, Inc. Method for allowing devices to interact with each other in a user-determined manner
US10424009B1 (en) 2013-02-27 2019-09-24 Amazon Technologies, Inc. Shopping experience using multiple computing devices
US9781487B2 (en) * 2013-05-28 2017-10-03 Cellco Partnership Streaming multicast content to a television via a mobile device
US11019300B1 (en) 2013-06-26 2021-05-25 Amazon Technologies, Inc. Providing soundtrack information during playback of video content
US10194189B1 (en) * 2013-09-23 2019-01-29 Amazon Technologies, Inc. Playback of content using multiple devices
JP2015069331A (ja) * 2013-09-27 2015-04-13 株式会社東芝 電子機器及び表示方法
TWI651329B (zh) 2013-12-13 2019-02-21 美商維泰克斯製藥公司 作為鈉通道調節劑之吡啶酮醯胺之前藥
US8782121B1 (en) 2014-01-17 2014-07-15 Maximilian A. Chang Peer-to-peer electronic device handling of social network activity
US8782122B1 (en) 2014-01-17 2014-07-15 Maximilian A. Chang Automated collaboration for peer-to-peer electronic devices
US9838740B1 (en) 2014-03-18 2017-12-05 Amazon Technologies, Inc. Enhancing video content with personalized extrinsic data
US20160059146A1 (en) * 2014-08-29 2016-03-03 Google, Inc. Media Enhanced Pop-Up Book
KR102300435B1 (ko) 2015-01-09 2021-09-09 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
US9928656B2 (en) * 2015-09-11 2018-03-27 Futurewei Technologies, Inc. Markerless multi-user, multi-object augmented reality on mobile devices
CN105224848B (zh) * 2015-10-15 2019-06-21 京东方科技集团股份有限公司 一种设备认证方法、装置及系统
CN105657498B (zh) * 2016-02-17 2018-11-06 腾讯科技(深圳)有限公司 移动终端的视频录制方法和装置
CN107239253B (zh) * 2016-03-29 2020-05-12 扬智科技股份有限公司 同步播放速度的无线局域网播放器、系统及其方法
CN107948668B (zh) * 2017-12-08 2020-06-30 广州酷狗计算机科技有限公司 直播视频的录制方法、装置及计算机存储介质
CN109361890A (zh) * 2018-12-12 2019-02-19 达州市志向科技外包服务有限公司 一种视频通话系统
CN112584083B (zh) * 2020-11-02 2022-05-27 广州视源电子科技股份有限公司 视频播放方法、系统、电子设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110039672A (ko) * 2009-10-12 2011-04-20 삼성전자주식회사 휴대용 단말기의 디엘엔에이 네트워크를 이용한 컨텐츠 재생 장치 및 방법
KR20110063200A (ko) * 2009-12-04 2011-06-10 엘지전자 주식회사 홈 네트워크를 통한 미디어 브라우징 장치 및 방법
KR20110064635A (ko) * 2009-12-08 2011-06-15 엘지전자 주식회사 이동 통신 단말기를 이용한 멀티미디어 파일 재생 방법 및 이를 적용한 이동 통신 단말기
KR20110070612A (ko) * 2009-12-18 2011-06-24 주식회사 케이티 Dlna 기반의 콘텐츠 통합 관리 장치

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6807367B1 (en) * 1999-01-02 2004-10-19 David Durlach Display system enabling dynamic specification of a movie's temporal evolution
US7020697B1 (en) * 1999-10-01 2006-03-28 Accenture Llp Architectures for netcentric computing systems
KR100739727B1 (ko) * 2005-08-31 2007-07-13 삼성전자주식회사 착탈식 비디오 유니트를 갖는 휴대용 av 재생장치
US8181110B2 (en) * 2008-10-14 2012-05-15 I-Fax.Com Inc. DOM based media viewer
US20110046761A1 (en) * 2009-08-19 2011-02-24 Paul Frederick Titchener Recorded Media Enhancement Method
US10048921B2 (en) * 2010-03-02 2018-08-14 Qualcomm Incorporated Controlling a multimedia device in remote display mode
US8611559B2 (en) * 2010-08-31 2013-12-17 Apple Inc. Dynamic adjustment of master and individual volume controls
JP5460530B2 (ja) * 2010-09-06 2014-04-02 日立コンシューマエレクトロニクス株式会社 表示システム、表示装置、及び中継装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110039672A (ko) * 2009-10-12 2011-04-20 삼성전자주식회사 휴대용 단말기의 디엘엔에이 네트워크를 이용한 컨텐츠 재생 장치 및 방법
KR20110063200A (ko) * 2009-12-04 2011-06-10 엘지전자 주식회사 홈 네트워크를 통한 미디어 브라우징 장치 및 방법
KR20110064635A (ko) * 2009-12-08 2011-06-15 엘지전자 주식회사 이동 통신 단말기를 이용한 멀티미디어 파일 재생 방법 및 이를 적용한 이동 통신 단말기
KR20110070612A (ko) * 2009-12-18 2011-06-24 주식회사 케이티 Dlna 기반의 콘텐츠 통합 관리 장치

Also Published As

Publication number Publication date
US8875191B2 (en) 2014-10-28
US20130021535A1 (en) 2013-01-24

Similar Documents

Publication Publication Date Title
WO2013012104A1 (ko) 전자기기 및 전자기기의 동작 방법
WO2012020863A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2012020864A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2013133480A1 (en) Electronic device and method of controlling the same
WO2014104744A1 (en) Terminal device and method for controlling thereof
WO2013027908A1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
WO2015065125A1 (ko) 전자 기기 및 전자 기기의 제어 방법
WO2012099378A2 (ko) 콘텐트 송수신 제어 방법 및 장치
WO2017048076A1 (en) Display apparatus and method for controlling display of display apparatus
WO2013035952A1 (en) Mobile terminal, image display device mounted on vehicle and data processing method using the same
WO2013151374A1 (en) Method and system for transfering data between plurality of devices
WO2017052143A1 (en) Image display device and method of operating the same
WO2017105021A1 (en) Display apparatus and method for controlling display apparatus
WO2013058423A1 (ko) 전자기기 및 전자기기의 동작 방법
WO2013042804A1 (en) Mobile terminal, method for controlling of the mobile terminal and system
WO2015093637A1 (ko) 컨텐츠 공유를 위한 서버 장치, 클라이언트 장치 및 그 컨텐츠 공유 방법
WO2014092469A1 (en) Content playing apparatus, method for providing ui of content playing apparatus, network server, and method for controlling by network server
WO2013151397A1 (en) Method and system for reproducing contents, and computer-readable recording medium thereof
WO2017105015A1 (en) Electronic device and method of operating the same
WO2018124334A1 (ko) 전자장치
WO2014163279A1 (en) Image display device and control method thereof
WO2015057013A1 (ko) 휴대용 장치가 웨어러블 장치를 통하여 정보를 표시하는 방법 및 그 장치
WO2014104656A1 (en) Method and system for communication between devices
WO2018090822A1 (zh) 基于智能手表的移动终端相机控制方法及控制系统
WO2016080700A1 (en) Display apparatus and display method

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11869659

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11869659

Country of ref document: EP

Kind code of ref document: A1