WO2017003007A1 - 영상표시장치 및 이동 단말기 - Google Patents

영상표시장치 및 이동 단말기 Download PDF

Info

Publication number
WO2017003007A1
WO2017003007A1 PCT/KR2015/007547 KR2015007547W WO2017003007A1 WO 2017003007 A1 WO2017003007 A1 WO 2017003007A1 KR 2015007547 W KR2015007547 W KR 2015007547W WO 2017003007 A1 WO2017003007 A1 WO 2017003007A1
Authority
WO
WIPO (PCT)
Prior art keywords
mirroring
application
mobile terminal
item
image
Prior art date
Application number
PCT/KR2015/007547
Other languages
English (en)
French (fr)
Inventor
이은정
이재경
허승현
안오봉
김민기
선가현
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020150094883A external-priority patent/KR102403338B1/ko
Priority claimed from KR1020150094881A external-priority patent/KR102444150B1/ko
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US15/741,439 priority Critical patent/US11134294B2/en
Priority to CN201580082861.1A priority patent/CN107925791B/zh
Priority to EP15897229.9A priority patent/EP3319326B1/en
Publication of WO2017003007A1 publication Critical patent/WO2017003007A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G06F3/1462—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay with means for detecting differences between the image stored in the host and the images displayed on the remote displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Definitions

  • the present invention relates to a video display device and a mobile terminal, and more particularly, to a video display device and a mobile terminal that can easily install and display the mirroring application items from the mobile terminal.
  • the image display device is a device having a function of providing an image that a user can watch.
  • the user can watch the broadcast through the image display device.
  • the image display device provides a broadcast selected by a user among broadcast signals transmitted from a broadcasting station, and the broadcast image is displayed on a display.
  • broadcasting is shifting from analog broadcasting to digital broadcasting worldwide.
  • Digital broadcasting refers to broadcasting for transmitting digital video and audio signals. Digital broadcasting is more resistant to external noise than analog broadcasting, so it has less data loss, is advantageous for error correction, has a higher resolution, and provides a clearer picture. In addition, unlike analog broadcasting, digital broadcasting is capable of bidirectional services.
  • An object of the present invention is to provide an image display apparatus that can easily install and display a mirroring application item from a mobile terminal.
  • Another object of the present invention is to provide an image display apparatus which can easily perform mirroring between a mobile terminal and an image display apparatus.
  • an image display apparatus includes a display, an interface unit for exchanging data with a mobile terminal, and content related to mirroring related server information or server information based on a user input. And a control unit configured to control to display a mirroring related menu that is included, and to receive a mirroring application item from a mobile terminal through an interface unit and to display the received mirroring application item in a mirroring related menu.
  • the image display apparatus for achieving the above object, the display, an interface unit for exchanging data with the mobile terminal, and controls to display a mirroring-related menu based on a user input, When the first mirroring application item or the first user item in the mirroring-related menu is selected, control to transmit a pairing request signal to the mobile terminal, and control the first mirroring application image through the interface unit to the mobile terminal or the first user mobile terminal. And a control unit for controlling to display the received first mirroring application image.
  • the mobile terminal for achieving the above object, the display unit, the communication unit for exchanging data with the image display apparatus or server, the mirroring-related server information output from the image display apparatus, Controlling to connect to the server based on the recognized server information, receiving and executing the mirroring setting application from the server, and controlling to transmit information related to the selected mirroring application item to the image display apparatus through the executed mirroring setting application. It includes a control unit.
  • the mobile terminal for achieving the above object, a display unit, a communication unit for exchanging data with the image display apparatus or server, and receives a pairing request signal from the image display apparatus, When the pairing response signal is transmitted to the video display device based on the pairing request signal, and the first mirroring application execution request information is received while maintaining the connection with the video display device, the first mirroring application is executed. And a controller configured to control to transmit the first mirroring application image to the image display apparatus.
  • an image display apparatus includes a display, an interface unit for exchanging data with a mobile terminal, and a mirroring related menu including mirroring related server information or content related to server information based on a user input.
  • a control unit for controlling display, receiving a mirroring application item from the mobile terminal through the interface unit, and controlling to display the received mirroring application item in a mirroring related menu, thereby easily installing the mirroring application item from the mobile terminal. And can be displayed.
  • the first mirroring application execution image is received from the mobile terminal through the network interface unit and received.
  • the first mirroring application execution image By displaying the first mirroring application execution image on the display, mirroring between the mobile terminal and the image display device can be easily performed.
  • the image display device the display, the interface unit for exchanging data with the mobile terminal, and controls to display a mirroring-related menu based on a user input, the first display in the mirroring-related menu
  • the control unit controls to transmit a pairing request signal to the mobile terminal, and receiving, through the interface unit, the first mirroring application image from the mobile terminal and controlling to display the received first mirroring application image.
  • an image display apparatus includes a display, an interface unit for exchanging data with a mobile terminal, and a control menu to display a mirroring related menu or a mirroring item based on a user input, When the first user item in the mirroring item is selected, controls to transmit a pairing request signal to the mobile terminal corresponding to the first user, and receives, through the interface unit, the first mirroring application image from the first user mobile terminal; And, by including a control unit for controlling to display the received first mirroring application image, it is possible to easily perform mirroring between the mobile terminal and the image display device.
  • a mobile terminal recognizes a display, a communication unit exchanging data with an image display apparatus or a server, mirroring related server information output from the image display apparatus, and based on the recognized server information. And a controller configured to control access to a server, to receive and execute a mirroring setting application from the server, and to transmit information related to the selected mirroring application item to the image display apparatus through the executed mirroring setting application.
  • the display makes it easy to install and display mirroring application items.
  • the first mirroring application execution request information is received from the video display device, the first mirroring application is executed and the first mirroring application image to be executed is transmitted to the video display device, whereby between the mobile terminal and the video display device. Mirroring can be done easily.
  • the mobile terminal the display, the communication unit for exchanging data with the image display apparatus or server, and receives a pairing request signal from the image display apparatus, based on the received pairing request signal
  • the pairing response signal is transmitted to the video display device and the first mirroring application execution request information is received while maintaining the connection with the video display device
  • the first mirroring application image is executed and the first mirroring application image is executed.
  • the mirroring application item can be easily installed and displayed on the video display device.
  • the notification setting, the password setting, or the user setting may be performed based on the mirroring setting application screen, and information on the set notification setting, the password setting, or the user setting may be easily transmitted to the image display apparatus. Therefore, it is possible to perform various operations during mirroring.
  • FIG. 1 is a diagram illustrating an image display system for mirroring according to an embodiment of the present invention.
  • FIG. 2 is an example of an internal block diagram of the image display device of FIG. 1.
  • FIG. 3 is an example of an internal block diagram of the controller of FIG. 2.
  • 4A is a diagram illustrating a control method of the remote controller of FIG. 2.
  • 4B is an internal block diagram of the remote control device of FIG. 2.
  • FIG. 5 is an internal block diagram of the mobile terminal of FIG. 1.
  • FIG. 6 is a flowchart illustrating an example of an operating method of an image display apparatus and a mobile terminal according to an exemplary embodiment of the present invention.
  • FIG. 7A to 11C are views referred to for describing the operating method of FIG. 6.
  • FIG. 12 is a flowchart illustrating an example of an operating method of an image display apparatus and a mobile terminal according to another embodiment of the present invention.
  • 13A to 14E are views referred to for describing the operating method of FIG. 12.
  • 15 is a flowchart illustrating an example of an operating method of an image display apparatus and a mobile terminal according to another embodiment of the present invention.
  • 16A to 20F are views referred to for describing the operating method of FIG. 15.
  • module and “unit” for components used in the following description are merely given in consideration of ease of preparation of the present specification, and do not impart any particular meaning or role by themselves. Therefore, the “module” and “unit” may be used interchangeably.
  • FIG. 1 is a diagram illustrating an image display system for mirroring according to an embodiment of the present invention.
  • the image display system 10 for mirroring may include an image display apparatus 100, a mobile terminal 600, and a server 500.
  • the image display apparatus 100 and the mobile terminal 600 may perform mirroring.
  • the mirroring application item from the mobile terminal 600 is easily installed and displayed on the video display device 100. Suggest ways to do it.
  • the image display apparatus 100 may display a mirroring related menu including mirroring related server information or content related to server information based on a user input.
  • the mirroring related server information or the content related to the server information may be information provided by the manufacturer of the image display apparatus 100.
  • the mobile terminal 600 may receive mirroring related server information or content related to server information displayed on a mirroring related menu, and access the server 500 based on the received information.
  • the mobile terminal 600 may receive the mirroring related application from the server 500, install the mirroring related application in the mobile terminal 600, and execute the mirroring related application.
  • the mobile terminal 600 may transmit the selected mirroring application item to the image display apparatus.
  • the image display apparatus 100 may receive a mirroring application item from the mobile terminal 600 through the interface unit 130 or 135, and display the received mirroring application item in a mirroring related menu. .
  • the mirroring application item can be easily installed and displayed on the video display device 100.
  • the first mirroring application execution image is easily made. It suggests a method that is mirrored and displayed.
  • the image display apparatus 100 transmits pairing information or first mirroring application execution request information to the mobile terminal 600 when the first mirroring application item is selected from the mirroring application items displayed in the mirroring related menu.
  • the first mirroring application execution image may be received from the mobile terminal 600 through the network interface unit 130 or 135, and the received first mirroring application execution image may be displayed on the display 180.
  • the radio signal Saib for the gallery image 840a for the gallery application executed in the mobile terminal 600 is The gallery image 840b transmitted to the image display apparatus 100 and enlarged in response to the gallery application is displayed on the image display apparatus 100.
  • the user can view the enlarged image through mirroring. .
  • the image display apparatus 100 wirelessly transmits a pairing signal to the mobile terminal 600,
  • the mobile terminal 600 and the video display device 100 may be connected to each other by transmitting a pairing response signal in response to the pairing signal 600.
  • the pairing signal and the pairing response signal may be Bluetooth based Low Energy (BLE) signals.
  • BLE Bluetooth based Low Energy
  • the image display apparatus 100 may further transmit device information including a device ID to the mobile terminal 600 in addition to the pairing signal.
  • the mobile terminal 600 when the mirroring mode is selected in the mobile terminal 600, the mobile terminal 600 wirelessly transmits a pairing signal to the image display apparatus 100, and the image display apparatus ( The mobile terminal 600 and the image display apparatus 100 may be connected to each other by transmitting a pairing response signal in response to the pairing signal.
  • the mobile terminal 600 may wirelessly transmit the application image related to the mirroring being executed to the image display apparatus 100.
  • an application image may be wirelessly transmitted to the video display device 100 through Wi-Fi.
  • the mirroring mode is performed based on the image display apparatus 100 for the user's convenience.
  • the video display device 100 of FIG. 1 may be a monitor, a TV, a tablet PC, or the like.
  • FIG. 2 is an example of an internal block diagram of the image display device of FIG. 1.
  • the video display device 100 includes a broadcast receiving unit 105, an external device interface unit 130, a storage unit 140, a user input interface unit 150, It may include a sensor unit (not shown), a controller 170, a display 180, and an audio output unit 185.
  • the broadcast receiver 105 may include a tuner 110, a demodulator 120, a network interface 130, and an external device interface 135.
  • the broadcast receiving unit 105 may include only the tuner 110, the demodulator 120, and the external device interface 135. That is, the network interface unit 130 may not be included.
  • the tuner 110 selects an RF broadcast signal corresponding to a channel selected by a user or all pre-stored channels among RF (Radio Frequency) broadcast signals received through an antenna (not shown).
  • the selected RF broadcast signal is converted into an intermediate frequency signal or a baseband video or audio signal.
  • the tuner 110 may process a digital broadcast signal or an analog broadcast signal.
  • the analog baseband video or audio signal CVBS / SIF output from the tuner 110 may be directly input to the controller 170.
  • the tuner unit 110 sequentially selects RF broadcast signals of all broadcast channels stored through a channel memory function among RF broadcast signals received through an antenna in the present invention, and converts them to intermediate frequency signals or baseband video or audio signals. Can be converted to
  • the tuner unit 110 may be provided with a plurality of tuners in order to receive broadcast signals of a plurality of channels.
  • a single tuner may be used to receive broadcast signals of multiple channels simultaneously.
  • the demodulator 120 receives the digital IF signal DIF converted by the tuner 110 and performs a demodulation operation.
  • the demodulator 120 may output a stream signal TS after performing demodulation and channel decoding.
  • the stream signal may be a signal multiplexed with a video signal, an audio signal, or a data signal.
  • the stream signal output from the demodulator 120 may be input to the controller 170.
  • the controller 170 After performing demultiplexing, image / audio signal processing, and the like, the controller 170 outputs an image to the display 180 and outputs audio to the audio output unit 185.
  • the external device interface unit 130 may transmit or receive data to and from the connected external device (not shown), for example, the set top box 50. To this end, the external device interface unit 130 may include an A / V input / output unit (not shown).
  • the external device interface unit 130 may be connected to an external device such as a DVD (Digital Versatile Disk), Blu-ray (Blu ray), a game device, a camera, a camcorder, a computer (laptop), a set top box, or the like by wire / wireless. It may also perform input / output operations with external devices.
  • an external device such as a DVD (Digital Versatile Disk), Blu-ray (Blu ray), a game device, a camera, a camcorder, a computer (laptop), a set top box, or the like by wire / wireless. It may also perform input / output operations with external devices.
  • the A / V input / output unit may receive a video and audio signal of an external device. Meanwhile, the wireless communication unit (not shown) may perform near field communication with another electronic device.
  • the external device interface unit 130 may exchange data with an adjacent mobile terminal 600.
  • the external device interface unit 130 may receive device information, application information to be executed, application image, and the like from the mobile terminal 600.
  • the network interface unit 135 provides an interface for connecting the image display apparatus 100 to a wired / wireless network including an internet network.
  • the network interface unit 135 may receive content or data provided by the Internet or a content provider or a network operator through a network.
  • the network interface unit 135 may include a wireless communication unit (not shown).
  • the storage 140 may store a program for processing and controlling each signal in the controller 170, or may store a signal-processed video, audio, or data signal.
  • the storage unit 140 may perform a function for temporarily storing an image, audio, or data signal input to the external device interface unit 130.
  • the storage 140 may store information on a predetermined broadcast channel through a channel storage function such as a channel map.
  • FIG. 2 illustrates an embodiment in which the storage unit 140 of FIG. 2 is provided separately from the control unit 170, the scope of the present invention is not limited thereto.
  • the storage 140 may be included in the controller 170.
  • the user input interface unit 150 transmits a signal input by the user to the controller 170 or transmits a signal from the controller 170 to the user.
  • the remote controller 200 transmits / receives a user input signal such as power on / off, channel selection, screen setting, or a local key (not shown) such as a power key, a channel key, a volume key, or a set value. Transmits a user input signal input from the control unit 170, or transmits a user input signal input from the sensor unit (not shown) for sensing the user's gesture to the control unit 170, or the signal from the control unit 170 It can transmit to a sensor unit (not shown).
  • a user input signal such as power on / off, channel selection, screen setting, or a local key (not shown) such as a power key, a channel key, a volume key, or a set value.
  • the controller 170 demultiplexes the input stream or processes the demultiplexed signals through the tuner 110, the demodulator 120, the network interface 135, or the external device interface 130. Can generate and output a signal for video or audio output.
  • the image signal processed by the controller 170 may be input to the display 180 and displayed as an image corresponding to the image signal.
  • the image signal processed by the controller 170 may be input to the external output device through the external device interface unit 130.
  • the voice signal processed by the controller 170 may be sound output to the audio output unit 185.
  • the voice signal processed by the controller 170 may be input to the external output device through the external device interface unit 130.
  • the controller 170 may include a demultiplexer, an image processor, and the like. This will be described later with reference to FIG. 3.
  • controller 170 may control overall operations of the image display apparatus 100.
  • the controller 170 may control the tuner 110 to control the tuner 110 to select an RF broadcast corresponding to a channel selected by a user or a pre-stored channel.
  • controller 170 may control the image display apparatus 100 by a user command or an internal program input through the user input interface unit 150.
  • the controller 170 may control the display 180 to display an image.
  • the image displayed on the display 180 may be a still image or a video, and may be a 2D image or a 3D image.
  • the controller 170 may display a predetermined 2D object in an image displayed on the display 180.
  • the object may be at least one of a connected web screen (newspaper, magazine, etc.), an EPG (Electronic Program Guide), various menus, widgets, icons, still images, videos, and text.
  • EPG Electronic Program Guide
  • the controller 170 may recognize a location of a user based on an image photographed by a photographing unit (not shown). For example, the distance (z-axis coordinate) between the user and the image display apparatus 100 may be determined. In addition, the x-axis coordinates and the y-axis coordinates in the display 180 corresponding to the user position may be determined.
  • the display 180 converts an image signal, a data signal, an OSD signal, a control signal, or an image signal, a data signal, a control signal received from the external device interface unit 130 processed by the controller 170, and generates a driving signal.
  • the display 180 may be a PDP, an LCD, an OLED, a flexible display, or a 3D display.
  • the 3D display 180 may be classified into a glasses-free method and a glasses method.
  • the display 180 may be configured as a touch screen and used as an input device in addition to the output device.
  • the audio output unit 185 receives a signal processed by the controller 170 and outputs the audio signal.
  • the photographing unit photographs the user.
  • the photographing unit (not shown) may be implemented by one camera, but is not limited thereto and may be implemented by a plurality of cameras. Meanwhile, the photographing unit (not shown) may be embedded in the image display device 100 on the display 180 or disposed separately. Image information photographed by a photographing unit (not shown) may be input to the controller 170.
  • the controller 170 may detect a user's gesture based on each of the images captured by the photographing unit (not shown) or the sensed signal from the sensor unit (not shown) or a combination thereof.
  • the power supply unit 190 supplies the corresponding power throughout the image display apparatus 100.
  • power may be supplied to the controller 170, which may be implemented in the form of a System On Chip (SOC), a display 180 for displaying an image, and an audio output unit 185 for audio output.
  • SOC System On Chip
  • the power supply unit 190 may include a converter for converting an AC power source to a DC power source, and a dc / dc converter for converting a level of the DC source power.
  • the remote control apparatus 200 transmits the user input to the user input interface unit 150.
  • the remote control device 200 may use Bluetooth, RF (Radio Frequency) communication, infrared (IR) communication, UWB (Ultra Wideband), ZigBee (ZigBee) method and the like.
  • the remote control apparatus 200 may receive an image, an audio or a data signal output from the user input interface unit 150, and display or output the audio from the remote control apparatus 200.
  • the above-described image display apparatus 100 may be a digital broadcast receiver capable of receiving fixed or mobile digital broadcasting.
  • a block diagram of the image display device 100 shown in FIG. 2 is a block diagram for an embodiment of the present invention.
  • Each component of the block diagram may be integrated, added, or omitted according to the specifications of the image display apparatus 100 that is actually implemented. That is, two or more components may be combined into one component as needed, or one component may be divided into two or more components.
  • the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
  • FIG. 3 is an example of an internal block diagram of the controller of FIG. 2.
  • control unit 170 according to an embodiment of the present invention, the demultiplexer 310, the image processor 320, the processor 330, the OSD generator 340, the mixer 345 , Frame rate converter 350, and formatter 360.
  • the audio processing unit (not shown) and the data processing unit (not shown) may be further included.
  • the demultiplexer 310 demultiplexes an input stream. For example, when an MPEG-2 TS is input, it may be demultiplexed and separated into video, audio, and data signals, respectively.
  • the stream signal input to the demultiplexer 310 may be a stream signal output from the tuner 110, the demodulator 120, or the external device interface 130.
  • the image processor 320 may perform image processing of the demultiplexed image signal. To this end, the image processor 320 may include an image decoder 325 and a scaler 335.
  • the image decoder 325 decodes the demultiplexed video signal, and the scaler 335 performs scaling to output the resolution of the decoded video signal on the display 180.
  • the video decoder 325 may include decoders of various standards. For example, an MPEG-2, H, 264 decoder, a 3D image decoder for a color image and a depth image, a decoder for a multi-view image, and the like may be provided.
  • the processor 330 may control overall operations in the image display apparatus 100 or the controller 170. For example, the processor 330 may control the tuner 110 to control tuning of an RF broadcast corresponding to a channel selected by a user or a previously stored channel.
  • the processor 330 may control the image display apparatus 100 by a user command or an internal program input through the user input interface unit 150.
  • the processor 330 may perform data transmission control with the network interface unit 135 or the external device interface unit 130.
  • the processor 330 may control operations of the demultiplexer 310, the image processor 320, the OSD generator 340, and the like in the controller 170.
  • the OSD generator 340 generates an OSD signal according to a user input or itself. For example, a signal for displaying various types of information on a screen of the display 180 as a graphic or text may be generated based on a user input signal.
  • the generated OSD signal may include various data such as a user interface screen, various menu screens, widgets, and icons of the image display apparatus 100.
  • the generated OSD signal may include a 2D object or a 3D object.
  • the OSD generator 340 may generate a pointer that can be displayed on a display based on a pointing signal input from the remote controller 200.
  • a pointer may be generated by the pointing signal processor, and the OSD generator 240 may include such a pointing signal processor (not shown).
  • the pointing signal processor (not shown) may be provided separately without being provided in the OSD generator 240.
  • the mixer 345 may mix the OSD signal generated by the OSD generator 340 and the decoded image signal processed by the image processor 320.
  • the mixed video signal is provided to the frame rate converter 350.
  • the frame rate converter 350 may convert a frame rate of an input video. On the other hand, the frame rate converter 350 can output the data as it is without additional frame rate conversion.
  • the formatter 360 may arrange the left eye image frame and the right eye image frame of the frame rate-converted 3D image.
  • a synchronization signal Vsync for opening the left eye glass and the right eye glass of the 3D viewing apparatus (not shown) may be output.
  • the formatter 360 may change the format of an input video signal into a video signal for display on a display and output the converted video signal.
  • the formatter 360 may change the format of the 3D video signal. For example, among 3D formats such as Side by Side format, Top / Down format, Frame Sequential format, Interlaced format, Checker Box format, etc. You can change to either format.
  • 3D formats such as Side by Side format, Top / Down format, Frame Sequential format, Interlaced format, Checker Box format, etc. You can change to either format.
  • the formatter 360 may convert the 2D video signal into a 3D video signal.
  • an edge or selectable object may be detected within the 2D image signal according to a 3D image generation algorithm, and an object or selectable object according to the detected edge may be separated into a 3D image signal and generated.
  • the generated 3D image signal may be divided into a left eye image signal L and a right eye image signal R, as described above, and may be aligned.
  • a 3D processor for processing a 3D effect signal may be further disposed after the formatter 360.
  • the 3D processor may process brightness, tint, and color adjustment of an image signal to improve 3D effects. For example, signal processing may be performed to sharpen the near distance and blur the far distance. Meanwhile, the functions of the 3D processor may be merged into the formatter 360 or merged into the image processor 320.
  • the audio processor (not shown) in the controller 170 may perform voice processing of the demultiplexed voice signal.
  • the audio processor (not shown) may include various decoders.
  • the audio processor (not shown) in the controller 170 may process a base, a treble, a volume control, and the like.
  • the data processor (not shown) in the controller 170 may perform data processing of the demultiplexed data signal.
  • the demultiplexed data signal is an encoded data signal, it may be decoded.
  • the encoded data signal may be electronic program guide information including broadcast information such as a start time and an end time of a broadcast program broadcasted in each channel.
  • FIG. 3 a block diagram of the controller 170 shown in FIG. 3 is a block diagram for one embodiment of the present invention. Each component of the block diagram may be integrated, added, or omitted according to the specification of the controller 170 that is actually implemented.
  • the frame rate converter 350 and the formatter 360 may not be provided in the controller 170, but may be separately provided or separately provided as one module.
  • 4A is a diagram illustrating a control method of the remote controller of FIG. 2.
  • a pointer 205 corresponding to the remote controller 200 is displayed on the display 180.
  • the user may move or rotate the remote control device 200 up and down, left and right (FIG. 4A (b)), and back and forth (FIG. 4A (c)).
  • the pointer 205 displayed on the display 180 of the image display device corresponds to the movement of the remote controller 200.
  • the remote control apparatus 200 may be referred to as a spatial remote controller or a 3D pointing device because the pointer 205 is moved and displayed according to the movement in the 3D space as shown in the figure.
  • FIG. 4B illustrates that when the user moves the remote control apparatus 200 to the left side, the pointer 205 displayed on the display 180 of the image display apparatus also moves to the left side correspondingly.
  • the image display device may calculate the coordinates of the pointer 205 from the information about the movement of the remote controller 200.
  • the image display device may display the pointer 205 to correspond to the calculated coordinates.
  • FIG. 4C illustrates a case in which the user moves the remote control apparatus 200 away from the display 180 while pressing a specific button in the remote control apparatus 200.
  • the selection area in the display 180 corresponding to the pointer 205 may be zoomed in and enlarged.
  • the selection area in the display 180 corresponding to the pointer 205 may be zoomed out and reduced.
  • the remote control device 200 moves away from the display 180, the selection area is zoomed out, and when the remote control device 200 approaches the display 180, the selection area may be zoomed in.
  • a specific button in the remote control device 200 can recognize the up, down, left and right movement. That is, when the remote control device 200 moves away from or near the display 180, the up, down, left and right movements are not recognized, and only the front and back movements can be recognized. In a state where a specific button in the remote controller 200 is not pressed, only the pointer 205 moves according to the up, down, left, and right movements of the remote controller 200.
  • the moving speed or the moving direction of the pointer 205 may correspond to the moving speed or the moving direction of the remote control apparatus 200.
  • 4B is an internal block diagram of the remote control device of FIG. 2.
  • the remote control device 200 includes a wireless communication unit 425, a user input unit 435, a sensor unit 440, an output unit 450, a power supply unit 460, a storage unit 470,
  • the controller 480 may be included.
  • the wireless communication unit 425 transmits and receives a signal with any one of the image display apparatus according to the embodiments of the present invention described above.
  • the image display apparatuses according to the exemplary embodiments of the present invention one image display apparatus 100 will be described as an example.
  • the remote control apparatus 200 may include an RF module 421 capable of transmitting and receiving a signal with the image display apparatus 100 according to the RF communication standard.
  • the remote control apparatus 200 may include an IR module 423 capable of transmitting and receiving a signal with the image display apparatus 100 according to the IR communication standard.
  • the remote control apparatus 200 transmits a signal containing information on the movement of the remote control apparatus 200 to the image display apparatus 100 through the RF module 421.
  • the remote control apparatus 200 may receive a signal transmitted from the image display apparatus 100 through the RF module 421. In addition, the remote control apparatus 200 may transmit a command regarding power on / off, channel change, volume change, etc. to the image display apparatus 100 through the IR module 423 as necessary.
  • the user input unit 435 may be configured as a keypad, a button, a touch pad, or a touch screen.
  • the user may input a command related to the image display apparatus 100 to the remote control apparatus 200 by manipulating the user input unit 435.
  • the user input unit 435 includes a hard key button, the user may input a command related to the image display apparatus 100 to the remote control apparatus 200 through a push operation of the hard key button.
  • the user input unit 435 includes a touch screen, a user may input a command related to the image display apparatus 100 to the remote control apparatus 200 by touching a soft key of the touch screen.
  • the user input unit 435 may include various kinds of input means that the user can operate, such as a scroll key or a jog key, and the present embodiment does not limit the scope of the present invention.
  • the sensor unit 440 may include a gyro sensor 441 or an acceleration sensor 443.
  • the gyro sensor 441 may sense information about the movement of the remote controller 200.
  • the gyro sensor 441 may sense information about an operation of the remote controller 200 based on the x, y, and z axes.
  • the acceleration sensor 443 may sense information about a moving speed of the remote controller 200.
  • a distance measuring sensor may be further provided, whereby the distance with the display 180 may be sensed.
  • the output unit 450 may output a video or audio signal corresponding to a manipulation of the user input unit 435 or corresponding to a signal transmitted from the image display apparatus 100.
  • the user may recognize whether the user input unit 435 is manipulated or whether the image display apparatus 100 is controlled through the output unit 450.
  • the output unit 450 may include a LED module 451 which is turned on when the user input unit 435 is manipulated or a signal is transmitted / received through the wireless communication unit 425, and a vibration module generating vibration. 453), a sound output module 455 for outputting sound, or a display module 457 for outputting an image.
  • the power supply unit 460 supplies power to the remote control device 200.
  • the power supply unit 460 may reduce power waste by stopping the power supply when the remote controller 200 does not move for a predetermined time.
  • the power supply unit 460 may resume power supply when a predetermined key provided in the remote control apparatus 200 is operated.
  • the storage unit 470 may store various types of programs, application data, and the like necessary for controlling or operating the remote control apparatus 200. If the remote control apparatus 200 transmits and receives a signal wirelessly through the image display apparatus 100 and the RF module 421, the remote control apparatus 200 and the image display apparatus 100 transmit signals through a predetermined frequency band. Send and receive The control unit 480 of the remote control device 200 stores information on a frequency band or the like for wirelessly transmitting and receiving signals with the image display device 100 paired with the remote control device 200 in the storage unit 470. Reference may be made.
  • the controller 480 controls various items related to the control of the remote controller 200.
  • the controller 480 transmits a signal corresponding to a predetermined key operation of the user input unit 435 or a signal corresponding to the movement of the remote controller 200 sensed by the sensor unit 440 through the wireless communication unit 425. 100 can be sent.
  • the user input interface unit 150 of the image display apparatus 100 includes a wireless communication unit 151 capable of transmitting and receiving a signal wirelessly with the remote control apparatus 200 and a pointer corresponding to the operation of the remote control apparatus 200. It may be provided with a coordinate value calculation unit 415 that can calculate the coordinate value of.
  • the user input interface unit 150 may transmit / receive a signal wirelessly with the remote control apparatus 200 through the RF module 412.
  • the IR module 413 may receive a signal transmitted by the remote control device 200 according to the IR communication standard.
  • the coordinate value calculator 415 corrects a hand shake or an error from a signal corresponding to an operation of the remote control apparatus 200 received through the wireless communication unit 151, and coordinate values of the pointer 205 to be displayed on the display 170. (x, y) can be calculated.
  • the remote control apparatus 200 transmission signal input to the image display apparatus 100 through the user input interface unit 150 is transmitted to the controller 180 of the image display apparatus 100.
  • the controller 180 may determine the information on the operation and the key operation of the remote controller 200 from the signal transmitted from the remote controller 200, and control the image display apparatus 100 correspondingly.
  • the remote control apparatus 200 may calculate a pointer coordinate value corresponding to the operation and output the pointer coordinate value to the user input interface unit 150 of the image display apparatus 100.
  • the user input interface unit 150 of the image display apparatus 100 may transmit the information about the received pointer coordinate value to the controller 180 without any additional hand shake or error correction process.
  • the coordinate value calculator 415 may be provided inside the controller 170 instead of the user input interface unit 150 unlike in the drawing.
  • FIG. 5 is an internal block diagram of the mobile terminal of FIG. 1.
  • the mobile terminal 600 includes a wireless communication unit 610, an A / V (Audio / Video) input unit 620, a user input unit 630, a sensing unit 640, an output unit 650, and a memory. 660, an interface unit 625, a control unit 670, and a power supply unit 690.
  • a / V Audio / Video
  • the wireless communication unit 610 may include a broadcast receiving module 611, a mobile communication module 613, a wireless internet module 615, an acoustic communication unit 617, a GPS module 619, and the like.
  • the broadcast receiving module 611 may receive at least one of a broadcast signal and broadcast related information from an external broadcast management server through a broadcast channel.
  • the broadcast channel may include a satellite channel, a terrestrial channel, and the like.
  • the broadcast signal and / or broadcast related information received through the broadcast receiving module 611 may be stored in the memory 660.
  • the mobile communication module 613 transmits and receives a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to voice call signal, video call signal, or text / multimedia message transmission and reception.
  • the wireless internet module 615 refers to a module for wireless internet access, and the wireless internet module 615 may be embedded or external to the mobile terminal 600.
  • the wireless internet module 615 may perform WFii based wireless communication or WiFi Direct based wireless communication.
  • the acoustic communicator 617 may perform acoustic communication.
  • the acoustic communication unit 617 may output sound by adding predetermined information data to the audio data to be output in the acoustic communication mode.
  • the acoustic communication unit 617 may extract predetermined information data from sound received from the outside.
  • Bluetooth Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • the global position system (GPS) module 619 may receive location information from a plurality of GPS satellites.
  • the A / V input unit 620 is for inputting an audio signal or a video signal, and may include a camera 621 and a microphone 623.
  • the user input unit 630 generates key input data input by the user for controlling the operation of the terminal.
  • the user input unit 630 may include a key pad, a dome switch, a touch pad (constant voltage / capacitance), and the like.
  • the touch pad forms a mutual layer structure with the display 680, this may be referred to as a touch screen.
  • the sensing unit 640 is configured to control the operation of the mobile terminal 600 by detecting a current state of the mobile terminal 600 such as an open / closed state of the mobile terminal 600, a location of the mobile terminal 600, a presence or absence of a user contact, and the like.
  • the sensing signal may be generated.
  • the sensing unit 640 may include a detection sensor 641, a pressure sensor 643, a motion sensor 645, and the like.
  • the motion sensor 645 may detect a movement or position of the mobile terminal 600 using an acceleration sensor, a gyro sensor, a gravity sensor, or the like.
  • the gyro sensor is a sensor for measuring the angular velocity, and may sense a direction (angle) returned with respect to the reference direction.
  • the output unit 650 may include a display 680, an audio output unit 653, a notification unit 655, and a haptic module 657.
  • the display 680 displays and outputs information processed by the mobile terminal 600.
  • the display 680 and the touch pad form a mutual layer structure and constitute a touch screen
  • the display 680 may also be used as an input device capable of inputting information by a user's touch in addition to the output device. Can be.
  • the audio output unit 653 outputs audio data received from the wireless communication unit 610 or stored in the memory 660.
  • the audio output unit 653 may include a speaker, a buzzer, and the like.
  • the notification unit 655 outputs a signal for notifying occurrence of an event of the mobile terminal 600.
  • the signal may be output in the form of vibration. .
  • the haptic module 657 generates various tactile effects that a user can feel.
  • a representative example of the haptic effect generated by the haptic module 657 is a vibration effect.
  • the memory 660 may store a program for processing and controlling the control unit 670, and provides a function for temporarily storing input or output data (for example, a phone book, a message, a still image, a video, etc.). It can also be done.
  • input or output data for example, a phone book, a message, a still image, a video, etc.
  • the interface unit 625 serves as an interface with all external devices connected to the mobile terminal 600.
  • the interface unit 625 may receive data or power from the external device and transmit the data to each component in the mobile terminal 600, and may transmit the data in the mobile terminal 600 to the external device. .
  • the controller 670 typically controls the operations of each unit to control the overall operation of the mobile terminal 600. For example, related control and processing for voice calls, data communications, video calls, and the like can be performed.
  • the controller 670 may include a multimedia playback module 681 for multimedia playback.
  • the multimedia playback module 681 may be configured in hardware in the controller 670 or may be configured in software separately from the controller 670.
  • the power supply unit 690 receives an external power source and an internal power source under the control of the controller 670 to supply power for operation of each component.
  • a block diagram of the mobile terminal 600 shown in FIG. 5 is a block diagram for one embodiment of the present invention.
  • Each component of the block diagram may be integrated, added, or omitted according to the specifications of the mobile terminal 600 that is actually implemented. That is, two or more components may be combined into one component as needed, or one component may be divided into two or more components.
  • the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
  • FIG. 6 is a flowchart illustrating an example of an operating method of an image display apparatus and a mobile terminal according to an exemplary embodiment of the present invention
  • FIGS. 7A to 11C are views for explaining the operating method of FIG. 6.
  • the controller 170 of the image display apparatus 100 may control to display a mirroring related menu including mirroring related server information or content related to server information based on a user input. (S610).
  • the controller 170 of the image display apparatus 100 displays a mirroring related menu including mirroring related server information or content related to server information when a specific key input is received by the remote control apparatus 200. Can be controlled.
  • the content related to the server information may include a code image including the server information. More specifically, it may include a QR code image that includes the server information.
  • content related to server information may be output as a predetermined sound.
  • the controller 670 of the mobile terminal 600 may acquire mirroring related server information or content related to server information displayed on the image display apparatus 100 (S620). Next, the controller 670 of the mobile terminal 600 may recognize mirroring related server information (S625).
  • the mobile terminal 600 may capture a code image displayed on the image display apparatus 100 through the camera 621.
  • the controller 670 of the mobile terminal 600 may extract server information from the captured code image and recognize the extracted server information.
  • the mobile terminal 600 may extract server information from the sound received through the microphone 623 and recognize the extracted server information.
  • the controller 670 of the mobile terminal 600 may control to access the corresponding server based on the recognized mirroring related server information (S623).
  • the server 500 may be connected to the mobile terminal 600 (S624).
  • the server 500 may be a server operated by a manufacturer of the image display apparatus 100, and may be a server corresponding to mirroring related server information installed at the time of manufacturing the image display apparatus 100.
  • the user of the mobile terminal 600 can easily access the server 500 through the mirroring related server information or the content related to the server information displayed on the image display apparatus 100.
  • the server 500 may transmit a mirroring related application to the mobile terminal 600 (S625).
  • control unit 670 of the mobile terminal 600 may receive the mirroring related application from the server 500 through the communication unit 610 (S626) and install the mirroring related application. . Then, the installed mirroring-related application can be executed (S628).
  • the mirroring related application can be easily installed and executed in the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 determines whether an application item to be mirrored is selected (S632), and if applicable, controls to transmit the selected application item to the image display apparatus 100. There is (S645).
  • the controller 670 of the mobile terminal 600 may select an application item to be mirrored with the image display apparatus 100 among a plurality of applications installed in the mobile terminal 600 through the mirroring related application.
  • At least one application item may be selected, and the controller 670 of the mobile terminal 600 may transmit information about the selected at least one application item to the image display apparatus 100.
  • the controller 670 of the mobile terminal 600 may transmit name information, application image information, user information, application version information, and the like, of the at least one selected application item to the video display device 100.
  • the controller 170 of the image display apparatus 100 may receive the selected mirroring application item from the mobile terminal 600 through the network interface unit 130 or 145 (S650).
  • the controller 170 of the image display apparatus 100 installs the received mirroring application item on the image display apparatus 100, and in particular, controls the received mirroring application item to be displayed in a mirroring related menu. (S660). Accordingly, the mirroring application item from the mobile terminal can be easily installed and displayed on the video display device 100.
  • the controller 170 of the video display device 100 may control the display 180 to display the broadcast video 700 based on the broadcast signal received by the broadcast receiver 105 as illustrated in FIG. 7A.
  • the control unit 170 of the video display device 100 when there is a specific key input of the remote control device 200, the control unit 170 of the video display device 100, as shown in Figure 7b, the broadcast video 701 corresponding to the broadcast signal and the application list ( 710 may be controlled to be displayed together.
  • the controller 170 of the video display device 100 may control the application list 710 to be overlapped and displayed on the broadcast video 701.
  • the application list 710 may include a mirroring item 715a, an additional view item 719, an application item, and the like.
  • FIG. 7C illustrates that a mirroring item 715b, which is different from FIG. 7B, is displayed in the application list 710.
  • the mirroring item 715b may be displayed as an object representing mirroring.
  • the controller 170 of the video display device 100 includes mirroring related server information or content 720 related to server information as shown in FIG. 7D.
  • the related menu 717 may be controlled to be displayed.
  • the mirroring related menu 717 may be displayed in a form in which the mirroring item 715a or 715b is unfolded to the right.
  • the mirroring related menu 717 may further include a return item 716 to restore the mirroring item 715a or 715b.
  • the content 720 related to the server information may include a code image including the server information.
  • the content 720 related to the server information may include a QR code image including the server information as shown in FIG. 7D.
  • the camera 621 of the mobile terminal 600 may capture the content 720 related to the server information as illustrated in FIG. 7E. Can be.
  • the controller 670 of the mobile terminal 600 may receive the captured content image 720b and recognize the captured content image 720b. In this case, the controller 670 of the mobile terminal 600 may control to display the content image 720b related to the written server information on the display 180.
  • the controller 670 of the mobile terminal 600 may extract server information from the captured content image 720b.
  • the controller 670 of the mobile terminal 600 may control the connection to the server 500 based on the extracted server information.
  • the controller 670 of the mobile terminal 600 transmits a connection request signal Sreg1 to the server 500 so as to connect to the server 500, and the server 500. It is possible to receive the connection response signal Sres1.
  • the controller 670 of the mobile terminal 600 may receive a mirroring related application from the server 500.
  • controller 670 of the mobile terminal 600 may control to display the screen 732 for downloading the mirroring app as shown in FIG. 7G (a).
  • the controller 670 of the mobile terminal 600 downloads the mirroring app, and when the download is completed, FIG. In the same manner, the download completion screen 734 may be controlled to be displayed.
  • the controller 670 of the mobile terminal 600 may install the downloaded mirroring setting application.
  • the controller 670 of the mobile terminal 600 may control the installation screen 736 to be displayed as shown in FIG. 7G (c).
  • the controller 670 of the mobile terminal 600 may control the installation completion screen 738 to be displayed as shown in FIG. 7G (d).
  • controller 670 of the mobile terminal 600 may execute the installed mirroring setting application.
  • FIG. 8A illustrates a standby screen 810 or a home screen 810 of the mobile terminal 600.
  • the idle screen 810 or the home screen 810 may be displayed on the display 680.
  • a plurality of application items may be displayed at the bottom of the screen.
  • the mirroring application item 812 is displayed among the plurality of application items.
  • the mirroring application is automatically executed when the mirroring application item 812 is selected or when the mirroring application download in FIG. 7G is completed. Can be.
  • the controller 670 of the mobile terminal 600 may control to display the mirroring setting application screen 820 when the mirroring application is executed, as shown in FIG. 8B.
  • the mirroring setting application screen 820 includes a configurable item 822, a TV selection item 824, an application registration item 826, a user information editing item 823, a horizontal and vertical view setting item 813, and a password item. 814, and the like.
  • the control unit 670 of the mobile terminal 600 includes the TV selection item 824, the application registration item 826, the user information editing item 823, and the horizontal and vertical views.
  • the setting item 813, the password item 814, and the like can be controlled to be activated and displayed as shown in Fig. 8C. Accordingly, various settings and the like can be performed.
  • the control unit 670 of the mobile terminal 600 searches for a nearby TV and, according to the end of the search, the TV list including at least one TV item as shown in FIG. 8D.
  • the screen 830 may be controlled to be displayed. In the figure, two TV items are illustrated.
  • the controller 670 of the mobile terminal 600 completes the setting for mirroring with the selected first TV item 832, and after the setting is completed, FIG. 8E. As described above, the mirroring setting application screen 820 may be controlled to be displayed again.
  • the control unit 670 of the mobile terminal 600 As shown in FIG. 8F while the mirroring setting application screen 820 is displayed, the control unit 670 of the mobile terminal 600, as shown in FIG.
  • the application list 850 including the application item installed in the control unit 600 may be displayed.
  • the control unit 670 of the mobile terminal 600 is shown in FIG. 8H.
  • the internet application item 852 and the camera application item 854 may be controlled to be highlighted.
  • the controller 670 of the mobile terminal 600 may control the mirroring setting application screen 820 to be displayed again as illustrated in FIG. 8I.
  • the application registration item 826b may include two selected application related information 827.
  • the controller 670 of the mobile terminal 600 may control to transmit the information related to the two selected application items to the video display device 100 as illustrated in FIG. 8J.
  • the controller 670 of the mobile terminal 600 may control to display two application transmission information on the display 680.
  • the image display apparatus 100 may receive information related to two application items to be mirrored through the interface unit 130 or 135.
  • the controller 170 of the image display apparatus 100 controls to install the received mirroring application item in the image display apparatus 100, and in particular, to display the mirroring application item in the mirroring related menu 717 as shown in FIG. 8K. Can be.
  • the controller 170 of the image display apparatus 100 may select a first mirroring application item among mirroring application items displayed in the mirroring related menu 717.
  • the first mirroring application item may be selected using the direction key and the confirmation key of the remote control apparatus 200.
  • a pointer may be displayed based on a pointing signal included in the RF signal of the remote control apparatus 200, and the first mirroring application item may be selected by the pointer.
  • the controller 170 of the image display apparatus 100 is the mobile terminal 600, and the pairing information or the first mirroring application is selected. Controls to transmit the execution request information, receives the first mirroring application execution image from the mobile terminal 600 through the network interface unit 130 or 135, and displays the received first mirroring application execution image (180). ) Can be displayed.
  • FIG. 9A illustrates an example in which a camera application item 712 is selected from among mirroring application items 711 and 712 displayed in the mirroring related menu 717. Accordingly, the image display device 100 is transferred from the image display device 100 to the mobile terminal 600. For example, the camera application execution request information Ssta may be transmitted.
  • the controller 680 of the mobile terminal 600 receives the camera application execution request information Ssta, the controller 680 controls the camera application to be executed as shown in FIG. 9A, and the displayed home screen or the standby screen 810 is displayed. You can control to switch to the camera application screen.
  • the controller 680 of the mobile terminal 600 enters the mirroring mode and controls to transmit the image Saib corresponding to the camera application screen 840a to the video display device 100 as shown in FIG. 9B. can do.
  • control unit 170 of the video display device 100 receives an image Saib corresponding to the camera application screen 840a through the interface unit 130 or 135 and performs signal processing such as scaling.
  • image 840b corresponding to the camera application screen 840a may be controlled to be displayed on the display 180.
  • the mirrored camera application image 840b is displayed with the application list 710, but, alternatively, as shown in FIG. 1, the application list 710 disappears and the mirrored camera application image 840b ) May be displayed on the display 180 only.
  • the controller 170 may control the communication scheme at the time of the pairing request signal to be different from the communication scheme at the time of transmitting the mirroring application image.
  • the controller 170 controls the pairing signal or pairing request signal to communicate as a Bluetooth-based BLE (Blooth Low Energy) signal, and has a wider bandwidth when transmitting a mirroring application image.
  • the Wi-Fi communication method by the miracast method can be controlled to be used.
  • 10A to 10D are other examples for installing the mirroring application to the video display device 100 using the mobile terminal 600, which is different from those of FIGS. 8F to 8I.
  • the controller 670 of the mobile terminal 600 is different from that shown in FIG. 10B.
  • the application list 950 including the application item installed in the mobile terminal 600 may be controlled to be displayed.
  • the mobile terminal 600 when a plurality of application items in the application list 950, for example, a messenger application item 952, a message application item 954, and a player item 956 for playing multimedia data are selected, the mobile terminal 600 is selected. ), The controller 670 may control the messenger application item 952, the message application item 954, and the player item 956 for playing multimedia data to be highlighted.
  • the controller 670 of the mobile terminal 600 may control the mirroring setting application screen 820 to be displayed again as illustrated in FIG. 10D.
  • the application registration item 926b may include three selected application related information 927.
  • the controller 670 of the mobile terminal 600 may control to transmit the information related to the three selected application items to the video display device 100.
  • the controller 670 of the mobile terminal 600 may control to display three application transmission information on the display 680.
  • the image display device 100 may receive information related to three application items to be mirrored through the interface unit 130 or 135.
  • the controller 170 of the image display apparatus 100 controls to install the received mirroring application item in the image display apparatus 100.
  • the controller 170 of the image display apparatus 100 is located in a mirroring-related menu in the application list 1110. , Can be controlled to display.
  • a messenger application item 1111 a message application item 1112, and a player item 1113 for playing multimedia data are illustrated as a mirroring application transmitted from the mobile terminal 600.
  • the mirroring related menu may further include a return item 1116, an application additional item 1119, and the like, for restoring to the mirroring item 715a or 715b of FIG. 7B or 7C.
  • the controller 170 of the image display apparatus 100 may select a predetermined application item from the mirroring application items displayed in the mirroring related menu, and transmit information about the selected application item to the mobile terminal 600.
  • an application image executed in the mobile terminal 600 may be received.
  • the received application image may be displayed on the display 180.
  • 11B to 11C illustrate a method of further adding a mirroring application in a state where three mirroring application items shown in FIG. 11A are displayed.
  • the controller 170 of the video display device 100 may access the mobile terminal 600.
  • the controller 680 of the mobile terminal 600 may receive the application additional information, control to execute the mirroring application as shown in FIG. 11B, and control to display the mirroring setting application screen 820.
  • the controller 680 of the mobile terminal 600 controls the mirroring application to be executed as shown in FIG. 11B when the user executes the mirroring application to add the mirroring application to the image display apparatus 100.
  • the mirroring setting application screen 820 may be controlled to be displayed.
  • the controller 680 of the mobile terminal 600 may control the image data Saib corresponding to the mirroring setting application screen 820 to be transmitted to the video display device 100 as shown in FIG. 11B.
  • an image 851 corresponding to a mirroring application execution screen is displayed on the display 180 of the image display apparatus 100.
  • control unit 670 of the mobile terminal 600 when a plurality of application items in the application list 850, for example, the Internet application item 852, the camera application item 854 is selected, the mobile terminal ( The controller 670 of the 600 may control the internet application item 852 and the camera application item 854 to be highlighted as shown in FIG. 11B.
  • the controller 670 of the mobile terminal 600 may control the image display device 100 to transmit the same, as illustrated in FIG. 11C. In this case, the controller 670 of the mobile terminal 600 may control to display two application transmission information on the display 680.
  • the image display apparatus 100 may receive information related to two application items to be mirrored through the interface unit 130 or 135.
  • the control unit 170 of the image display apparatus 100 controls to install the received mirroring application item in the image display apparatus 100, and in particular, as illustrated in FIG. 11C, a messenger application that has already been added to the mirroring related menu.
  • a messenger application that has already been added to the mirroring related menu.
  • the internet application item 711 and the camera application item 712 may be controlled to be displayed. Accordingly, it is possible to simply add the mirroring-related application in the application list of the image display apparatus 100, particularly in the mirroring-related menu.
  • FIG. 12 is a flowchart illustrating an example of an operating method of an image display apparatus and a mobile terminal according to another embodiment of the present invention
  • FIGS. 13A to 14E are views referred to for describing the operating method of FIG. 12.
  • the controller 170 of the image display apparatus 100 controls to display a mirroring related menu based on a user input in operation S1210.
  • the application list 710 may be displayed at the bottom of the screen as shown in FIG. 7B.
  • the application list may include a plurality of application items, and in particular, may include a mirroring application item 715a or 715b as illustrated in FIG. 7B or 7C.
  • the mirroring related menu 717 is expanded to the right side, similar to the pull-down menu. May be displayed.
  • the mirroring related menu 717 may include a code image 720 for installing the mirroring related application, as shown in FIG. 7D, and as shown in FIGS. 8A to 8K.
  • the display of the code image 720 may disappear, and application items related to the installed mirroring may be displayed.
  • the control unit 170 of the video display device 100 if any application item is selected in the mirroring-related menu by the pointer 205 or the like based on the pointing signal of the remote control device 200 (S1220).
  • the mobile terminal 600 transmits a pairing request signal to the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 receives a pairing request signal (S1230) and controls to transmit a pairing response signal (S1232).
  • the controller 170 of the video display device 100 receives a pairing response signal (S1234). Based on this, the controller 170 of the video display device 100 connects to the mobile terminal 600 and controls to maintain a connection with the mobile terminal 600.
  • the controller 170 of the image display apparatus 100 may further control to transmit the information about the selected application item to the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 may receive information on the selected application item and control the application to be executed in the mobile terminal 600 based on the received information about the application item. There is (S1235).
  • controller 670 of the mobile terminal 600 may control to transmit an image of the executed application to the image display apparatus 100 (S1245).
  • the controller 170 of the image display apparatus 100 receives an image of an application to be executed through the interface unit 130 or 135 (S1250), and displays an image of the received application. It may be controlled to (S1260).
  • FIG. 13A illustrates that a player application item 1113 is selected from a plurality of mirroring application items in an application list 1110 on the display 180 of the image display apparatus 100.
  • the controller 170 of the video display device 100 transmits a pairing request signal Spai to the mobile terminal 600 on which the home screen or the standby screen 810 is displayed, and from the mobile terminal 600.
  • the pairing response signal Spa may be received.
  • the controller 170 of the video display device 100 may transmit information SMX about the selected application item to the mobile terminal 600 as shown in FIG. 13B. Can be controlled.
  • the mobile terminal 600 displaying the home screen or the standby screen 810 executes the corresponding application in the mobile terminal 600 based on the received information about the application item SMX, as shown in FIG. 13B.
  • the application image to be executed may be displayed on the display 680.
  • FIG. 13B illustrates a content list screen of a player application screen.
  • the reproduced screen 1320 may be displayed on the display 680 of the mobile terminal 600.
  • an image corresponding to the screen 1320 to be reproduced is transmitted to the video display device 100, and the image corresponding to the screen to be reproduced is displayed on the display 180 of the video display device 100 ( 1320a may be displayed. Therefore, it is possible to simply perform mirroring between the image display apparatus 100 and the mobile terminal 600.
  • FIGS. 14A to 14C illustrate that a messenger application is selected and mirrored, unlike FIGS. 13A to 13C.
  • FIG 14A illustrates that a messenger application item 1111 is selected from a plurality of mirroring application items in an application list 1110 on the display 180 of the image display apparatus 100.
  • the controller 170 of the video display device 100 transmits a pairing request signal Spai to the mobile terminal 600 on which the home screen or the standby screen 810 is displayed, and from the mobile terminal 600.
  • the pairing response signal Spa may be received.
  • control unit 170 of the video display device 100 in addition to the pairing request signal (Spai), in addition, as shown in Figure 14b, can be controlled to transmit information about the selected application item to the mobile terminal 600. have.
  • Spai pairing request signal
  • the mobile terminal 600 displaying the home screen or the standby screen 810 switches the standby screen of the mobile terminal 600 to the home screen 1410 based on the received information about the application item as shown in FIG. 14B.
  • the controller may control to switch to the second home screen 1410 where the selected application item is located on the first home screen.
  • the control unit 670 of the mobile terminal 600 executes the corresponding application, as shown in FIG. 14C. 1420 may be displayed on the display 680.
  • the controller 670 of the mobile terminal 600 controls the image display apparatus 100 to transmit an image corresponding to the application image 1420 to be executed, according to the mirroring mode.
  • the image 1420a corresponding to the executed application may be displayed on the display 180 of the image display apparatus 100. Therefore, it is possible to simply perform mirroring between the image display apparatus 100 and the mobile terminal 600.
  • an application to be mirrored may be selected through an operation of the image display apparatus 100 or the mobile terminal 600.
  • the controller 680 of the mobile terminal 600 may control the display 680 so as not to enter the lock screen state for the pairing connection.
  • the controller 680 of the mobile terminal 600 may display the brightness of the display 680 to reduce power consumption until the application to be mirrored is selected in the image display apparatus 100 after pairing, as shown in FIG. 14B. And so on.
  • FIG. 14D illustrates that the screen 810b of the first luminance is displayed after the pairing at the first time before being selected by the image display apparatus 100, and at a second time thereafter, lower than the first luminance. For example, the screen 810a of the second luminance is displayed.
  • the controller 680 of the mobile terminal 600 is selected. Controls to switch to the screen 1410 as shown in FIG. 14B while changing the information on the selected application item to the screen 810 having a higher brightness than the screen 810a having a second brightness. can do.
  • control unit 680 of the mobile terminal 600 unlike the above-described, without the display of the screen 810 of the third luminance, the screen 1410, as shown in Figure 14b on the screen 810a of the second luminance, You can also control to switch to.
  • FIG. 15 is a flowchart illustrating an example of an operating method of an image display apparatus 100 and a mobile terminal according to another exemplary embodiment of the present invention
  • FIGS. 16A to 20F are reference views for explaining the operating method of FIG. 15.
  • the controller 170 of the image display apparatus 100 controls to display a mirroring related menu based on a user input in operation S1510.
  • the application list 710 may be displayed at the bottom of the screen as shown in FIG. 7B.
  • the application list may include a plurality of application items, and in particular, may include a mirroring application item 715a or 715b as illustrated in FIG. 7B or 7C.
  • the mirroring related menu 717 is expanded to the right, similarly to the pull-down menu. Can be displayed.
  • the control unit 170 of the image display apparatus 100 in the mirroring-related menu, when the first user item is selected by the pointer 205 or the like based on the pointing signal of the remote control apparatus 200 (S1520).
  • the pairing request signal is transmitted to the mobile terminal 600a corresponding to the first user.
  • the controller 670 of the mobile terminal 600a corresponding to the first user receives a pairing request signal (S1530) and controls to transmit a pairing response signal (S1532).
  • the controller 170 of the video display device 100 receives a pairing response signal (S1534). Based on this, the control unit 170 of the video display device 100 is connected to the mobile terminal 600a of the first user and controls to maintain the connection with the mobile terminal 600a of the first user.
  • the controller 170 of the image display apparatus 100 may further control to transmit the information about the selected application item to the mobile terminal 600a of the first user.
  • control unit 670 of the mobile terminal 600a of the first user receives the information about the selected application item, and based on the received information about the application item, the controller 670 transmits the corresponding application to the mobile terminal of the first user.
  • the control may be executed at operation S1535.
  • controller 670 of the mobile terminal 600a of the first user may control to transmit an image of the executed application to the image display apparatus 100 (S1545).
  • control unit 170 of the image display apparatus 100 receives an image of an application to be executed through the interface unit 130 or 135 (S1550) and displays the image of the received application. It may be controlled to (S1560).
  • FIG. 16A illustrates a case where the user information editing item 823 is selected while the mirroring setting application screen 820 is displayed on the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 may control to display the user information setting screen 1600 as shown in FIG. 16B.
  • the user information setting screen 1600 may include a profile image item 1602, a name item 1604, a genre item 1606, and the like.
  • the controller 670 of the mobile terminal 600 may activate the camera 621 to control to capture a face image of the user.
  • the screen 1610 for editing the captured image may be displayed.
  • the controller 670 of the mobile terminal 600 may control the edited user image 1615 to be located in the profile image item 1602 as shown in FIG. 16D.
  • the controller 670 of the mobile terminal 600 may control the name input window 1620 to be displayed as shown in FIG. 16E. .
  • the controller 670 of the mobile terminal 600 may control the genre setting window 1625 to be displayed as illustrated in FIG. 16F.
  • the controller 670 of the mobile terminal 600 transmits not only the set user information but also application information to be mirrored to the image display apparatus 100. Can be controlled.
  • the controller 170 of the image display apparatus 100 receives the set user information as well as application information to be mirrored through the interface unit 130 or 135, and adds a user item to the application list. Can be controlled.
  • FIG. 17A illustrates that a plurality of application items and a first user item 1705 for mirroring are displayed in the application list 1710.
  • the controller 170 of the image display apparatus 100 the user image 1707 included in the received user information is superimposed on the first user item to distinguish it from other items of the first user item 1705. Can be controlled to be displayed. Accordingly, the first user item 1705 can be intuitively recognized.
  • the controller 170 of the video display device 100 expands the first user item 1705 as shown in FIG. 17B. 1 A user related menu 1720 may be controlled to be displayed.
  • the first user related menu 1720 may include a plurality of application items 1711, 1712, 1713, a return item 1716, and an additional item 1719 set in the first user mobile terminal 600a. .
  • the controller 170 of the video display device 100 may display the mobile terminal 600a of the first user on which the home screen or the standby screen 810 is displayed. ), The pairing request signal Spai may be transmitted, and the pairing response signal Spa may be received from the mobile terminal 600.
  • the controller 170 of the video display device 100 may further provide information S about the selected application item as shown in FIG. 17C, according to the mobile terminal 600a of the first user. Can be controlled to transmit.
  • the mobile terminal 600a of the first user on which the home screen or the standby screen 810 is displayed is based on the received information S of the application item in the mobile terminal 600a of the first user. As shown in FIG. 17C, the executed application image 1740a may be displayed on the display 680.
  • FIG. 17C illustrates the content list screen 1740a of the player application screen.
  • the reproduced screen 1750 may be displayed on the display 680 of the mobile terminal 600a of the first user.
  • an image corresponding to the screen 1750 to be reproduced is transmitted to the video display device 100, and the image corresponding to the screen to be reproduced is displayed on the display 180 of the video display device 100 ( 1750a may be displayed. Therefore, it is possible to simply perform mirroring between the image display apparatus 100 and the mobile terminal 600.
  • FIG. 18A illustrates that the additional setting item 818 is selected on the mirroring setting application screen 820 displayed on the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 may control the TV notification item 819 to be displayed as shown in FIG. 18B.
  • a screen 1810 including the notification setting item 817 may be displayed.
  • the notification setting item 817 is selected, as shown in FIG. 18D. Notification setup may be completed.
  • control unit 670 of the mobile terminal 600 in the mirroring application installed in the mobile terminal, if the notification message is received from an external server, it may be controlled to deliver it to the image display device (100).
  • the messenger application receives a notification message from the mobile terminal 600 to the video display device 100, and accordingly, the controller 170 of the video display device 100 displays the mirroring.
  • the notification message 1111a may be additionally displayed on the application item 1111. Accordingly, the image display apparatus 100 may check the notification message at any time.
  • FIG. 19A illustrates that the horizontal and vertical view setting item 813 is selected on the mirroring setting application screen 820 displayed on the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 may control the horizontal and vertical view setting window 1820 to be displayed as shown in FIG. 19B.
  • the horizontal and vertical view setting window 1820 may include an automatic rotation item 1822, a vertical view item 1824, a horizontal view item 1826, and the like. As a result, the image is displayed on the image display apparatus 100 according to the set method.
  • the controller 170 of the video display device 100 receives the horizontal view item setting information. Accordingly, as illustrated in FIG. 19C, the mobile terminal ( The vertical screen 1900 of 600 may be controlled to be set and displayed on the horizontal screen 1900a in the video display device 100.
  • FIG. 20A illustrates that the password item 814 is selected on the mirroring setting application screen 820 displayed on the mobile terminal 600.
  • the controller 670 of the mobile terminal 600 may control to display the password setting window 1830 and the numeric input window 1836 as shown in FIG. 20B.
  • the controller 670 of the mobile terminal 600 may control the mirror setting application screen 820 to be displayed again as shown in FIG. 20D.
  • the password item 814 may include password setting completion information 814a.
  • the controller 670 of the mobile terminal 600 controls to transmit the set password information to the video display device 100, and the video display device 100 may receive the set password information.
  • such password information may be utilized when selecting a first user item under a mirroring related menu, or when selecting a specific mirroring application item.
  • the controller 170 of the image display apparatus 100 does not immediately display a mirroring application item corresponding to the first user item.
  • the password input window 2010 may be controlled to be displayed.
  • the password input window 2010 may include a display window 2013 and a numeric input window 2016.
  • the control unit 170 of the video display device 100 includes additional items such as a plurality of mirroring application items 1111, 1112, 1113, and the like under the mirroring menu as shown in FIG. 20F. 1119 may be controlled to be displayed. As a result, it is possible to provide a mirroring mode only for a specific user.
  • the password setting may be applied only to a specific application item, and even in this case, it is possible to eventually provide a mirroring mode for a specific application.
  • the operating method of the image display device or the mobile terminal of the present invention it is possible to implement as a processor-readable code on a processor-readable recording medium provided in the image display device or the mobile terminal.
  • the processor-readable recording medium includes all kinds of recording devices that store data that can be read by the processor. Examples of the processor-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet. .
  • the processor-readable recording medium can also be distributed over network coupled computer systems so that the processor-readable code is stored and executed in a distributed fashion.
  • the present invention is applicable to an image display apparatus or a mobile terminal, and in particular, to an image display apparatus or a mobile terminal for easily installing and displaying a mirroring application item from a mobile terminal.

Abstract

본 발명은 영상표시장치 및 이동 단말기에 관한 것이다. 본 발명의 일 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어하고, 이동 단말기로부터 미러링 애플리케이션 항목을, 인터페이스부를 통해, 수신하고, 수신된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시하도록 제어하는 제어부를 포함한다. 이에 의해, 이동 단말기로부터의 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있게 된다.

Description

영상표시장치 및 이동 단말기
본 발명은 영상표시장치 및 이동 단말기에 관한 것이며, 더욱 상세하게는 이동 단말기로부터의 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있는 영상표시장치 및 이동 단말기에 관한 것이다.
영상표시장치는 사용자가 시청할 수 있는 영상을 제공하는 기능을 갖춘 장치이다. 사용자는 영상표시장치를 통하여 방송을 시청할 수 있다. 영상표시장치는 방송국에서 송출되는 방송신호 중 사용자가 선택한 방송을 제공하며, 이러한 방송 영상은 디스플레이에 표시된다. 현재 방송은 전세계적으로 아날로그 방송에서 디지털 방송으로 전환하고 있는 추세이다.
디지털 방송은 디지털 영상 및 음성 신호를 송출하는 방송을 의미한다. 디지털 방송은 아날로그 방송에 비해, 외부 잡음에 강해 데이터 손실이 작으며, 에러 정정에 유리하며, 해상도가 높고, 선명한 화면을 제공한다. 또한, 디지털 방송은 아날로그 방송과 달리 양방향 서비스가 가능하다.
본 발명의 목적은, 이동 단말기로부터의 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있는 영상표시장치를 제공함에 있다.
본 발명의 다른 목적은, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있는 영상표시장치를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어하고, 이동 단말기로부터 미러링 애플리케이션 항목을, 인터페이스부를 통해, 수신하고, 수신된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시하도록 제어하는 제어부를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명의 다른 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 메뉴를 표시하도록 제어하고, 미러링 관련 메뉴 내의 제1 미러링 애플리케이션 항목 또는 제1 사용자 항목이 선택되는 경우, 이동 단말기로 페어링 요청 신호를 전송하도록 제어하고, 인터페이스부를 통해, 제1 미러링 애플리케이션 이미지를, 이동 단말기 또는 제1 사용자 이동 단말기로부터, 수신하며, 수신되는 제1 미러링 애플리케이션 이미지를 표시하도록 제어하는 제어부를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 이동 단말기는, 디스플레이와, 영상표시장치 또는 서버와 데이터를 교환하는 통신부와, 영상표시장치에서 출력되는 미러링 관련 서버 정보를 인식하고, 인식된 서버 정보에 기초하여 서버에 접속하도록 제어하며, 서버로부터 미러링 설정 애플리케이션을 수신하여 실행하고, 실행되는 미러링 설정 애플리케이션을 통해, 선택되는 미러링 애플리케이션 항목과 관련된 정보를 영상표시장치로 전송하도록 제어하는 제어부를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명의 다른 실시예에 따른 이동 단말기는, 디스플레이와, 영상표시장치 또는 서버와 데이터를 교환하는 통신부와, 영상표시장치로부터, 페어링 요청 신호를 수신하고, 수신되는 페어링 요청 신호에 기초하여, 영상표시장치로 페어링 응답 신호를 전송하며, 영상표시장치와의 접속 유지 상태에서, 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 제1 미러링 애플리케이션을 실행하고, 실행되는 제1 미러링 애플리케이션 이미지를 영상표시장치로 전송하도록 제어하는 제어부를 포함한다.
본 발명의 일 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어하고, 이동 단말기로부터 미러링 애플리케이션 항목을, 인터페이스부를 통해, 수신하고, 수신된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시하도록 제어하는 제어부를 포함함으로써, 이동 단말기로부터의 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있게 된다.
특히, 서버 정보와 관련한 컨텐츠로서, 서버 정보가 포함되는 코드 이미지를 표시함으로써, 이동 단말기를 통해, 간편하게, 서버로의 접속을 수행하도록 유도할 수 있게 된다.
한편, 미러링 관련 메뉴 내에 표시되는 미러링 애플리케이션 항목 중 제1 미러링 애플리케이션 항목이 선택되는 경우, 이동 단말기와의 페어링 이후, 이동 단말기로부터, 제1 미러링 애플리케이션 실행 이미지를, 네트워크 인터페이스부를 통해, 수신하고, 수신되는 제1 미러링 애플리케이션 실행 이미지를 디스플레이에 표시함으로써, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있게 된다.
한편, 본 발명의 다른 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 메뉴를 표시하도록 제어하고, 미러링 관련 메뉴 내의 제1 미러링 애플리케이션 항목이 선택되는 경우, 이동 단말기로 페어링 요청 신호를 전송하도록 제어하고, 인터페이스부를 통해, 제1 미러링 애플리케이션 이미지를, 이동 단말기로부터, 수신하며, 수신되는 제1 미러링 애플리케이션 이미지를 표시하도록 제어하는 제어부를 포함함으로써, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있게 된다.
본 발명의 또 다른 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 사용자 입력에 기초하여, 미러링 관련 메뉴 또는 미러링 항목을 표시하도록 제어하고, 미러링 관련 메뉴 또는 미러링 항목 내의 제1 사용자 항목이 선택되는 경우, 제1 사용자에 대응하는 이동 단말기로 페어링 요청 신호를 전송하도록 제어하고, 인터페이스부를 통해, 제1 미러링 애플리케이션 이미지를, 제1 사용자 이동 단말기로부터, 수신하며, 수신되는 제1 미러링 애플리케이션 이미지를 표시하도록 제어하는 제어부를 포함함으로써, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있게 된다.
한편, 본 발명의 일 실시예에 따른 이동 단말기는, 디스플레이와, 영상표시장치 또는 서버와 데이터를 교환하는 통신부와, 영상표시장치에서 출력되는 미러링 관련 서버 정보를 인식하고, 인식된 서버 정보에 기초하여 서버에 접속하도록 제어하며, 서버로부터 미러링 설정 애플리케이션을 수신하여 실행하고, 실행되는 미러링 설정 애플리케이션을 통해, 선택되는 미러링 애플리케이션 항목과 관련된 정보를 영상표시장치로 전송하도록 제어하는 제어부를 포함함으로써, 영상표시장치로 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있게 된다.
특히, 영상표시장치에, 서버 정보가 포함되는 코드 이미지가 표시된 경우, 카메라를 통해 캡쳐된 이미지에 기초하여, 미러링 관련 서버 정보를 추출함으로써, 간편하게, 서버에 접속하여, 미러링 설정 애플리케이션을 수신할 수 있게 된다.
한편, 영상표시장치로부터, 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 제1 미러링 애플리케이션을 실행하고, 실행되는 제1 미러링 애플리케이션 이미지를 영상표시장치로 전송함으로써, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있게 된다.
한편, 본 발명의 다른 실시예에 따른 이동 단말기는, 디스플레이와, 영상표시장치 또는 서버와 데이터를 교환하는 통신부와, 영상표시장치로부터, 페어링 요청 신호를 수신하고, 수신되는 페어링 요청 신호에 기초하여, 영상표시장치로 페어링 응답 신호를 전송하며, 영상표시장치와의 접속 유지 상태에서, 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 제1 미러링 애플리케이션을 실행하고, 실행되는 제1 미러링 애플리케이션 이미지를 영상표시장치로 전송하도록 제어하는 제어부를 포함함으로써, 이동 단말기와 영상표시장치 사이의 미러링을 간편하게 수행할 수 있게 된다.
특히, 미러링 설정 애플리케이션 화면에 기초하여, 선택된 적어도 하나의 애플리케이션 항목과 관련된 정보를, 영상표시장치로 전송함으로써, 간편하게, 영상표시장치로 미러링 애플리케이션 항목을 간편하게 설치 및 표시할 수 있게 된다.
한편, 미러링 설정 애플리케이션 화면에 기초하여, 알림 설정, 비밀 번호 설정 또는 사용자 설정을 수행할 수 있으며, 설정된 알림 설정, 비밀 번호 설정 또는 사용자 설정에 관한 정보를, 간편하게 영상표시장치로 전송할 수 있게 된다. 따라서, 미러링시의 다양한 동작 수행 등이 가능하게 된다.
도 1은 본 발명의 일 실시예에 따른 미러링을 위한 영상표시 시스템을 도시한 도면이다.
도 2는 도 1의 영상표시장치의 내부 블록도의 일예이다.
도 3은 도 2의 제어부의 내부 블록도의 일예이다.
도 4a는 도 2의 원격제어장치의 제어 방법을 도시한 도면이다.
도 4b는 도 2의 원격제어장치의 내부 블록도이다.
도 5는 도 1의 이동 단말기의 내부 블록도이다.
도 6은 본 발명의 실시예에 따른 영상표시장치와 이동 단말기의 동작방법의 일예를 보여주는 순서도이다.
도 7a 내지 도 11c는 도 6의 동작방법을 설명하기 위해 참조되는 도면이다.
도 12는 본 발명의 다른 실시예에 따른 영상표시장치와 이동 단말기의 동작방법의 일예를 보여주는 순서도이다.
도 13a 내지 도 14e는 도 12의 동작방법을 설명하기 위해 참조되는 도면이다.
도 15는 본 발명의 다른 실시예에 따른 영상표시장치와 이동 단말기의 동작방법의 일예를 보여주는 순서도이다.
도 16a 내지 도 20f는 도 15의 동작방법을 설명하기 위해 참조되는 도면이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
도 1은 본 발명의 일 실시예에 따른 미러링을 위한 영상표시 시스템을 도시한 도면이다.
도면을 참조하면, 미러링을 위한 영상표시 시스템(10)은, 영상표시장치(100), 이동 단말기(600), 서버(500)를 포함할 수 있다.
이 중 영상표시장치(100)와, 이동 단말기(600)는, 미러링(mirrorring)을 수행할 수 있다.
본 발명에서는, 영상표시장치(100)와, 이동 단말기(600) 사이의 미러링의 편의를 위해, 이동 단말기로(600)부터의 미러링 애플리케이션 항목을, 영상표시장치(100)에, 간편하게 설치 및 표시할 수 있는 방안을 제시한다.
이를 위해, 영상표시장치(100)는, 사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시할 수 있다.
이때의, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠는, 영상표시장치(100) 제조사가 제공하는 정보일 수 있다.
그리고, 이동 단말기(600)는, 미러링 관련 메뉴에 표시되는, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 수신하고, 이에 기초하여, 서버(500)에 접속할 수 있다.
그리고, 이동 단말기(600)는, 서버(500)로부터, 미러링 관련 애플리케이션을 수신하고, 이동 단말기(600) 내에, 미러링 관련 애플리케이션을 설치하여, 실행할 수 있다.
그리고, 이동 단말기(600)는, 실행된 미러링 관련 애플리케이션을 통해, 미러링할 애플리케이션 항목이 선택되는 경우, 선택된 미러링 애플리케이션 항목을 영상표시장치로 전송할 수 있다.
그리고, 영상표시장치(100)는, 이동 단말기(600)로부터, 미러링 애플리케이션 항목을, 인터페이스부(130 또는 135)를 통해, 수신하고, 수신된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시할 수 있다.
이에 따라, 영상표시장치(100)에, 미러링 애플리케이션 항목을, 간편하게 설치 및 표시할 수 있게 된다.
또한, 본 발명에서는, 영상표시장치(100)에, 이동 단말기로(600)부터의 미러링 애플리케이션 항목이 설치 및 표시된 상태에서, 제1 미러링 애플리케이션 항목이 선택되는 경우, 제1 미러링 애플리케이션 실행 이미지가 간편하게 미러링되어 표시되는 방안을 제시한다.
이를 위해, 영상표시장치(100)는, 미러링 관련 메뉴 내에 표시되는 미러링 애플리케이션 항목 중 제1 미러링 애플리케이션 항목이 선택되는 경우, 이동 단말기(600)로, 페어링 정보 또는 제1 미러링 애플리케이션 실행 요청 정보를 전송하고, 이동 단말기(600)로부터, 제1 미러링 애플리케이션 실행 이미지를, 네트워크 인터페이스부(130 또는 135)를 통해, 수신하고, 수신되는 제1 미러링 애플리케이션 실행 이미지를 디스플레이(180)에 표시할 수 있다.
한편, 도면에서는, 영상표시장치(100)와 이동 단말기(600)와의 미러링에 의;해, 이동 단말기(600)에서 실행되는 갤러리 애플리케이션에 대한 갤러리 이미지(840a)에 대한 무선 신호(Saib)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 갤러리 애플리케이션에 대응하여 확대된 갤러리 이미지(840b)가 표시되는 것을 예시한다.
이동 단말기(600)의 디스플레이(도 5의 680)의 크기 보다, 영상표시장치(100)의 디스플레이(180)의 크기가 훨씬 크므로, 사용자는, 미러링을 통해, 확대된 이미지를 시청할 수 있게 된다.
이러한 미러링 수행 방법의 일예로, 영상표시장치(100)에서, 미러링 모드가 선택되는 경우, 영상표시장치(100)가 이동 단말기(600)에 무선으로 페어링 신호(pairing signal)를 전송하고, 이동 단말기(600)가 페어링 신호에 대응하여, 페어링 응답 신호(pairing response signal)를 전송함으로써, 이동 단말기(600)와 영상표시장치(100)가 서로 접속할 수 있다.
이때의 페어링 신호(pairing signal)와 페어링 응답 신호(pairing response signal)는, 블루투스 기반의 BLE(Blooth Low Energy) 신호일 수 있다.
이때, 영상표시장치(100)는, 페어링 신호 외에, 디바이스 아이디(device ID)를 포함하는 디바이스 정보(device inforamtion)를, 이동 단말기(600)로 더 전송할 할 수 있다.
이러한 미러링 수행 방법의 다른 예로, 이동 단말기(600)에서 미러링 모드가 선택되는 경우, 이동 단말기(600)가 영상표시장치(100)에 무선으로 페어링 신호(pairing signal)를 전송하고, 영상표시장치(100)가 페어링 신호에 대응하여, 페어링 응답 신호(pairing response signal)를 전송함으로써, 이동 단말기(600)와 영상표시장치(100)가 서로 접속할 수 있다.
접속 이후, 이동 단말기(600)는, 실행 중인 미러링과 관련된 애플리케이션 이미지를 무선으로 영상표시장치(100)로 전송할 수 있다. 예를 들어, 미라캐스트(miracast) 방식에 따라, Wi-Fi를 통해, 애플리케이션 이미지를 무선으로 영상표시장치(100)로 전송할 수 있다.
한편, 본 발명에서는, 사용자의 이용 편의를 위해, 영상표시장치(100)를 중심으로, 미러링 모드가 수행되도록 한다.
상술한 영상표시장치(100) 및 이동 단말기(600)의 다양한 동작방법에 대해서는, 도 6 이하를 참조하여 보다 상세히 기술한다.
한편, 도 1의 영상표시장치(100)는, 모니터, TV, 태블릿 PC 등이 가능하다.
도 2는 도 1의 영상표시장치의 내부 블록도의 일예이다.
도 2를 참조하면, 본 발명의 일실시예에 의한 영상표시장치(100)는, 방송 수신부(105), 외부장치 인터페이스부(130), 저장부(140), 사용자입력 인터페이스부(150), 센서부(미도시), 제어부(170), 디스플레이(180), 오디오 출력부(185)를 포함할 수 있다.
방송 수신부(105)는, 튜너부(110), 복조부(120), 네트워크 인터페이스부(130), 외부장치 인터페이스부(135)를 포함할 수 있다.
한편, 방송 수신부(105)는, 도면과 달리, 튜너부(110), 복조부(120)와, 외부장치 인터페이스부(135)만을 포함하는 것도 가능하다. 즉, 네트워크 인터페이스부(130)를 포함하지 않을 수도 있다.
튜너부(110)는, 안테나(미도시)를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 또한, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다.
예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너부(110)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. 튜너부(110)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(170)로 직접 입력될 수 있다.
한편, 튜너부(110)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.
한편, 튜너부(110)는, 복수 채널의 방송 신호를 수신하기 위해, 복수의 튜너를 구비하는 것이 가능하다. 또는, 복수 채널의 방송 신호를 동시에 수신하는 단일 튜너도 가능하다.
복조부(120)는 튜너부(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.
복조부(120)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다.
복조부(120)에서 출력한 스트림 신호는 제어부(170)로 입력될 수 있다. 제어부(170)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(180)에 영상을 출력하고, 오디오 출력부(185)로 음성을 출력한다.
외부장치 인터페이스부(130)는, 접속된 외부 장치(미도시), 예를 들어, 셋탑 박스(50)와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(130)는, A/V 입출력부(미도시)를 포함할 수 있다.
외부장치 인터페이스부(130)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), 셋탑 박스 등과 같은 외부 장치와 유/무선으로 접속될 수 있으며, 외부 장치와 입력/출력 동작을 수행할 수도 있다.
A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 입력받을 수 있다. 한편, 무선 통신부(미도시)는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다.
이러한 무선 통신부(미도시)를 통해, 외부장치 인터페이스부(130)는, 인접하는 이동 단말기(600)와 데이터를 교환할 수 있다. 특히, 외부장치 인터페이스부(130)는, 미러링 모드에서, 이동 단말기(600)로부터 디바이스 정보, 실행되는 애플리케이션 정보, 애플리케이션 이미지 등을 수신할 수 있다.
네트워크 인터페이스부(135)는, 영상표시장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 예를 들어, 네트워크 인터페이스부(135)는, 네트워크를 통해, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다.
한편, 네트워크 인터페이스부(135)는, 무선 통신부(미도시)를 포함할 수 있다.
저장부(140)는, 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.
또한, 저장부(140)는 외부장치 인터페이스부(130)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(140)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.
도 2의 저장부(140)가 제어부(170)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(140)는 제어부(170) 내에 포함될 수 있다.
사용자입력 인터페이스부(150)는, 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달한다.
예를 들어, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 송신/수신하거나, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 사용자의 제스처를 센싱하는 센서부(미도시)로부터 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 제어부(170)로부터의 신호를 센서부(미도시)로 송신할 수 있다.
제어부(170)는, 튜너부(110) 또는 복조부(120) 또는 네트워크 인터페이스부(135) 또는 외부장치 인터페이스부(130)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이(180)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(130)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 음향 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(130)를 통하여 외부 출력장치로 입력될 수 있다.
도 2에는 도시되어 있지 않으나, 제어부(170)는 역다중화부, 영상처리부 등을 포함할 수 있다. 이에 대해서는 도 3을 참조하여 후술한다.
그 외, 제어부(170)는, 영상표시장치(100) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(170)는 튜너부(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다.
한편, 제어부(170)는, 영상을 표시하도록 디스플레이(180)를 제어할 수 있다. 이때, 디스플레이(180)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
한편, 제어부(170)는 디스플레이(180)에 표시되는 영상 내에, 소정 2D 오브젝트가 표시되도록 할 수 있다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다.
한편, 제어부(170)는, 촬영부(미도시)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식할 수 있다. 예를 들어, 사용자와 영상표시장치(100) 간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이(180) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.
디스플레이(180)는, 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(130)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다.
디스플레이(180)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 또한, 3차원 디스플레이(3D display)가 가능할 수도 있다. 3차원 디스플레이(180)는, 무안경 방식과 안경 방식으로 구분될 수 있다.
한편, 디스플레이(180)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.
오디오 출력부(185)는, 제어부(170)에서 음성 처리된 신호를 입력 받아 음성으로 출력한다.
촬영부(미도시)는 사용자를 촬영한다. 촬영부(미도시)는 1 개의 카메라로 구현되는 것이 가능하나, 이에 한정되지 않으며, 복수 개의 카메라로 구현되는 것도 가능하다. 한편, 촬영부(미도시)는 디스플레이(180) 상부에 영상표시장치(100)에 매립되거나 또는 별도로 배치될 수 있다. 촬영부(미도시)에서 촬영된 영상 정보는 제어부(170)에 입력될 수 있다.
제어부(170)는, 촬영부(미도시)로부터 촬영된 영상, 또는 센서부(미도시)로부터의 감지된 신호 각각 또는 그 조합에 기초하여 사용자의 제스처를 감지할 수 있다.
전원 공급부(190)는, 영상표시장치(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip,SOC)의 형태로 구현될 수 있는 제어부(170)와, 영상 표시를 위한 디스플레이(180), 및 오디오 출력을 위한 오디오 출력부(185) 등에 전원을 공급할 수 있다.
구체적으로, 전원 공급부(190)는, 교류 전원을 직류 전원으로 변환하는 컨버터와, 직류 전원의 레벨을 변환하는 dc/dc 컨버터를 구비할 수 있다.
원격제어장치(200)는, 사용자 입력을 사용자입력 인터페이스부(150)로 송신한다. 이를 위해, 원격제어장치(200)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(200)는, 사용자입력 인터페이스부(150)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(200)에서 표시하거나 음성 출력할 수 있다.
한편, 상술한 영상표시장치(100)는, 고정형 또는 이동형 디지털 방송 수신 가능한 디지털 방송 수신기일 수 있다.
한편, 도 2에 도시된 영상표시장치(100)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 영상표시장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 3은 도 2의 제어부의 내부 블록도의 일예이다.
도면을 참조하여 설명하면, 본 발명의 일실시예에 의한 제어부(170)는, 역다중화부(310), 영상 처리부(320), 프로세서(330), OSD 생성부(340), 믹서(345), 프레임 레이트 변환부(350), 및 포맷터(360)를 포함할 수 있다. 그 외 오디오 처리부(미도시), 데이터 처리부(미도시)를 더 포함할 수 있다.
역다중화부(310)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다. 여기서, 역다중화부(310)에 입력되는 스트림 신호는, 튜너부(110) 또는 복조부(120) 또는 외부장치 인터페이스부(130)에서 출력되는 스트림 신호일 수 있다.
영상 처리부(320)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(320)는, 영상 디코더(325), 및 스케일러(335)를 구비할 수 있다.
영상 디코더(325)는, 역다중화된 영상신호를 복호화하며, 스케일러(335)는, 복호화된 영상신호의 해상도를 디스플레이(180)에서 출력 가능하도록 스케일링(scaling)을 수행한다.
영상 디코더(325)는 다양한 규격의 디코더를 구비하는 것이 가능하다. 예를 들어, MPEG-2, H,264 디코더, 색차 영상(color image) 및 깊이 영상(depth image)에 대한 3D 영상 디코더, 복수 시점 영상에 대한 디코더 등을 구비할 수 있다.
프로세서(330)는, 영상표시장치(100) 내 또는 제어부(170) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 프로세서(330)는 튜너(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.
또한, 프로세서(330)는, 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다.
또한, 프로세서(330)는, 네트워크 인터페이스부(135) 또는 외부장치 인터페이스부(130)와의 데이터 전송 제어를 수행할 수 있다.
또한, 프로세서(330)는, 제어부(170) 내의 역다중화부(310), 영상 처리부(320), OSD 생성부(340) 등의 동작을 제어할 수 있다.
OSD 생성부(340)는, 사용자 입력에 따라 또는 자체적으로 OSD 신호를 생성한다. 예를 들어, 사용자 입력 신호에 기초하여, 디스플레이(180)의 화면에 각종 정보를 그래픽(Graphic)이나 텍스트(Text)로 표시하기 위한 신호를 생성할 수 있다. 생성되는 OSD 신호는, 영상표시장치(100)의 사용자 인터페이스 화면, 다양한 메뉴 화면, 위젯, 아이콘 등의 다양한 데이터를 포함할 수 있다. 또한, 생성되는 OSD 신호는, 2D 오브젝트 또는 3D 오브젝트를 포함할 수 있다.
또한, OSD 생성부(340)는, 원격제어장치(200)로부터 입력되는 포인팅 신호에 기초하여, 디스플레이에 표시 가능한, 포인터를 생성할 수 있다. 특히, 이러한 포인터는, 포인팅 신호 처리부에서 생성될 수 있으며, OSD 생성부(240)는, 이러한 포인팅 신호 처리부(미도시)를 포함할 수 있다. 물론, 포인팅 신호 처리부(미도시)가 OSD 생성부(240) 내에 구비되지 않고 별도로 마련되는 것도 가능하다.
믹서(345)는, OSD 생성부(340)에서 생성된 OSD 신호와 영상 처리부(320)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. 믹싱된 영상 신호는 프레임 레이트 변환부(350)에 제공된다.
프레임 레이트 변환부(Frame Rate Conveter, FRC)(350)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 한편, 프레임 레이트 변환부(350)는, 별도의 프레임 레이트 변환 없이, 그대로 출력하는 것도 가능하다.
포맷터(360)는, 프레임 레이트 변환된 3D 영상의 좌안 영상 프레임과 우안 영상 프레임을 배열할 수 있다. 그리고, 3D 시청 장치(미도시)의 좌안 글래스와 우안 글래스의 개방을 위한 동기 신호(Vsync)를 출력할 수 있다.
한편, 포맷터(Formatter)(360)는, 입력되는 영상 신호의 포맷을, 디스플레이에 표시하기 위한 영상 신호로 변화시켜 출력할 수 있다.
또한, 포맷터(360)는, 3D 영상 신호의 포맷을 변경할 수 있다. 예를 들어, 사이드 바이 사이드(Side by Side) 포맷, 탑 다운(Top / Down) 포맷, 프레임 시퀀셜(Frame Sequential) 포맷, 인터레이스 (Interlaced) 포맷, 체커 박스(Checker Box) 포맷 등의 다양한 3D 포맷 중 어느 하나의 포맷으로 변경할 수 있다.
한편, 포맷터(360)는, 2D 영상 신호를 3D 영상 신호로 전환할 수도 있다. 예를 들어, 3D 영상 생성 알고리즘에 따라, 2D 영상 신호 내에서 에지(edge) 또는 선택 가능한 오브젝트를 검출하고, 검출된 에지(edge)에 따른 오브젝트 또는 선택 가능한 오브젝트를 3D 영상 신호로 분리하여 생성할 수 있다. 이때, 생성된 3D 영상 신호는, 상술한 바와 같이, 좌안 영상 신호(L)와 우안 영상 신호(R)로 분리되어 정렬될 수 있다.
한편, 도면에서는 도시하지 않았지만, 포맷터(360) 이후에, 3D 효과(3-dimensional effect) 신호 처리를 위한 3D 프로세서(미도시)가 더 배치되는 것도 가능하다. 이러한 3D 프로세서(미도시)는, 3D 효과의 개선을 위해, 영상 신호의 밝기(brightness), 틴트(Tint) 및 색조(Color) 조절 등을 처리할 수 있다. 예를 들어, 근거리는 선명하게, 원거리는 흐리게 만드는 신호 처리 등을 수행할 수 있다. 한편, 이러한 3D 프로세서의 기능은, 포맷터(360)에 병합되거나 영상처리부(320) 내에 병합될 수 있다.
한편, 제어부(170) 내의 오디오 처리부(미도시)는, 역다중화된 음성 신호의 음성 처리를 수행할 수 있다. 이를 위해 오디오 처리부(미도시)는 다양한 디코더를 구비할 수 있다.
또한, 제어부(170) 내의 오디오 처리부(미도시)는, 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다.
제어부(170) 내의 데이터 처리부(미도시)는, 역다중화된 데이터 신호의 데이터 처리를 수행할 수 있다. 예를 들어, 역다중화된 데이터 신호가 부호화된 데이터 신호인 경우, 이를 복호화할 수 있다. 부호화된 데이터 신호는, 각 채널에서 방영되는 방송프로그램의 시작시간, 종료시간 등의 방송정보를 포함하는 전자 프로그램 가이드 정보(Electronic Program Guide) 정보일 수 있다.
한편, 도 3에 도시된 제어부(170)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 제어부(170)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
특히, 프레임 레이트 변환부(350), 및 포맷터(360)는 제어부(170) 내에 마련되지 않고, 각각 별도로 구비되거나, 하나의 모듈로서 별도로 구비될 수도 있다.
도 4a는 도 2의 원격제어장치의 제어 방법을 도시한 도면이다.
도 4a의 (a)에 도시된 바와 같이, 디스플레이(180)에 원격제어장치(200)에 대응하는 포인터(205)가 표시되는 것을 예시한다.
사용자는 원격제어장치(200)를 상하, 좌우(도 4a의 (b)), 앞뒤(도 4a의 (c))로 움직이거나 회전할 수 있다. 영상표시장치의 디스플레이(180)에 표시된 포인터(205)는 원격제어장치(200)의 움직임에 대응한다. 이러한 원격제어장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘 또는 3D 포인팅 장치라 명명할 수 있다.
도 4a의 (b)는 사용자가 원격제어장치(200)를 왼쪽으로 이동하면, 영상표시장치의 디스플레이(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.
원격제어장치(200)의 센서를 통하여 감지된 원격제어장치(200)의 움직임에 관한 정보는 영상표시장치로 전송된다. 영상표시장치는 원격제어장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 영상표시장치는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.
도 4a의 (c)는, 원격제어장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격제어장치(200)를 디스플레이(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다. 이와 반대로, 사용자가 원격제어장치(200)를 디스플레이(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다. 한편, 원격제어장치(200)가 디스플레이(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격제어장치(200)가 디스플레이(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.
한편, 원격제어장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격제어장치(200)가 디스플레이(180)에서 멀어지거나 접근하도록 이동하는 경우, 상,하,좌,우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격제어장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격제어장치(200)의 상,하, 좌,우 이동에 따라 포인터(205)만 이동하게 된다.
한편, 포인터(205)의 이동속도나 이동방향은 원격제어장치(200)의 이동속도나 이동방향에 대응할 수 있다.
도 4b는 도 2의 원격제어장치의 내부 블록도이다.
도면을 참조하여 설명하면, 원격제어장치(200)는 무선통신부(425), 사용자 입력부(435), 센서부(440), 출력부(450), 전원공급부(460), 저장부(470), 제어부(480)를 포함할 수 있다.
무선통신부(425)는 전술하여 설명한 본 발명의 실시예들에 따른 영상표시장치 중 임의의 어느 하나와 신호를 송수신한다. 본 발명의 실시예들에 따른 영상표시장치들 중에서, 하나의 영상표시장치(100)를 일예로 설명하도록 하겠다.
본 실시예에서, 원격제어장치(200)는 RF 통신규격에 따라 영상표시장치(100)와 신호를 송수신할 수 있는 RF 모듈(421)을 구비할 수 있다. 또한 원격제어장치(200)는 IR 통신규격에 따라 영상표시장치(100)와 신호를 송수신할 수 있는 IR 모듈(423)을 구비할 수 있다.
본 실시예에서, 원격제어장치(200)는 영상표시장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(421)을 통하여 전송한다.
또한, 원격제어장치(200)는 영상표시장치(100)가 전송한 신호를 RF 모듈(421)을 통하여 수신할 수 있다. 또한, 원격제어장치(200)는 필요에 따라 IR 모듈(423)을 통하여 영상표시장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
*사용자 입력부(435)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(435)를 조작하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(435)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(435)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(435)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시예는 본 발명의 권리범위를 제한하지 아니한다.
센서부(440)는 자이로 센서(441) 또는 가속도 센서(443)를 구비할 수 있다. 자이로 센서(441)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.
일예로, 자이로 센서(441)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있다. 가속도 센서(443)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 디스플레이(180)와의 거리를 센싱할 수 있다.
출력부(450)는 사용자 입력부(435)의 조작에 대응하거나 영상표시장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(450)를 통하여 사용자는 사용자 입력부(435)의 조작 여부 또는 영상표시장치(100)의 제어 여부를 인지할 수 있다.
일예로, 출력부(450)는 사용자 입력부(435)가 조작되거나 무선 통신부(425)을 통하여 영상표시장치(100)와 신호가 송수신되면 점등되는 LED 모듈(451), 진동을 발생하는 진동 모듈(453), 음향을 출력하는 음향 출력 모듈(455), 또는 영상을 출력하는 디스플레이 모듈(457)을 구비할 수 있다.
전원공급부(460)는 원격제어장치(200)로 전원을 공급한다. 전원공급부(460)는 원격제어장치(200)이 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로서 전원 낭비를 줄일 수 있다. 전원공급부(460)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
저장부(470)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 영상표시장치(100)와 RF 모듈(421)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)와 영상표시장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다. 원격제어장치(200)의 제어부(480)는 원격제어장치(200)와 페어링된 영상표시장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(470)에 저장하고 참조할 수 있다.
제어부(480)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(480)는 사용자 입력부(435)의 소정 키 조작에 대응하는 신호 또는 센서부(440)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(425)를 통하여 영상표시장치(100)로 전송할 수 있다.
영상표시장치(100)의 사용자 입력 인터페이스부(150)는, 원격제어장치(200)와 무선으로 신호를 송수신할 수 있는 무선통신부(151)와, 원격제어장치(200)의 동작에 대응하는 포인터의 좌표값을 산출할 수 있는 좌표값 산출부(415)를 구비할 수 있다.
사용자 입력 인터페이스부(150)는, RF 모듈(412)을 통하여 원격제어장치(200)와 무선으로 신호를 송수신할 수 있다. 또한 IR 모듈(413)을 통하여 원격제어장치(200)이 IR 통신 규격에 따라 전송한 신호를 수신할 수 있다.
좌표값 산출부(415)는 무선통신부(151)를 통하여 수신된 원격제어장치(200)의 동작에 대응하는 신호로부터 손떨림이나 오차를 수정하여 디스플레이(170)에 표시할 포인터(205)의 좌표값(x,y)을 산출할 수 있다.
사용자 입력 인터페이스부(150)를 통하여 영상표시장치(100)로 입력된 원격제어장치(200) 전송 신호는 영상표시장치(100)의 제어부(180)로 전송된다. 제어부(180)는 원격제어장치(200)에서 전송한 신호로부터 원격제어장치(200)의 동작 및 키 조작에 관한 정보를 판별하고, 그에 대응하여 영상표시장치(100)를 제어할 수 있다.
또 다른 예로, 원격제어장치(200)는, 그 동작에 대응하는 포인터 좌표값을 산출하여 영상표시장치(100)의 사용자 입력 인터페이스부(150)로 출력할 수 있다. 이 경우, 영상표시장치(100)의 사용자 입력 인터페이스부(150)는 별도의 손떨림이나 오차 보정 과정 없이 수신된 포인터 좌표값에 관한 정보를 제어부(180)로 전송할 수 있다.
또한, 다른 예로, 좌표값 산출부(415)가, 도면과 달리 사용자 입력 인터페이스부(150)가 아닌, 제어부(170) 내부에 구비되는 것도 가능하다.
도 5는 도 1의 이동 단말기의 내부 블록도이다.
도면을 참조하면, 이동 단말기(600)는, 무선 통신부(610), A/V(Audio/Video) 입력부(620), 사용자 입력부(630), 센싱부(640), 출력부(650), 메모리(660), 인터페이스부(625), 제어부(670), 및 전원 공급부(690)를 포함할 수 있다.
한편, 무선 통신부(610)는, 방송수신 모듈(611), 이동통신 모듈(613), 무선 인터넷 모듈(615), 음향 통신부(617), 및 GPS 모듈(619) 등을 포함할 수 있다.
방송수신 모듈(611)은 방송 채널을 통하여 외부의 방송관리 서버로부터 방송 신호 및 방송관련 정보 중 적어도 하나를 수신할 수 있다. 이때, 방송 채널은 위성 채널, 지상파 채널 등을 포함할 수 있다.
방송수신 모듈(611)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(660)에 저장될 수 있다.
이동통신 모듈(613)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(615)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(615)은 이동 단말기(600)에 내장되거나 외장될 수 있다. 예를 들어, 무선 인터넷 모듈(615)은, WFii 기반의 무선 통신 또는 WiFi Direct 기반의 무선 통신을 수행할 수 있다.
음향 통신부(617)는 음향 통신을 수행할 수 있다. 음향 통신부(617)는, 음향 통신 모드에서, 출력할 오디오 데이터에, 소정의 정보 데이터를 부가하여, 사운드를 출력할 수 있다. 또한, 음향 통신부(617)는, 음향 통신 모드에서, 외부로부터 수신되는 사운드로부터 소정의 정보 데이터를 추출할 수 있다.
그 외, 근거리 통신 기술로서, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등이 이용될 수 있다.
GPS(Global Position System) 모듈(619)은 복수 개의 GPS 인공위성으로부터 위치 정보를 수신할 수 있다.
A/V(Audio/Video) 입력부(620)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(621)와 마이크(623) 등이 포함될 수 있다.
사용자 입력부(630)는 사용자가 단말기의 동작 제어를 위하여 입력하는 키 입력 데이터를 발생시킨다. 이를 위해, 사용자 입력부(630)는, 키 패드(key pad), 돔 스위치(dome switch), 터치 패드(정압/정전) 등으로 구성될 수 있다. 특히, 터치 패드가 디스플레이(680)와 상호 레이어 구조를 이룰 경우, 이를 터치스크린(touch screen)이라 부를 수 있다.
센싱부(640)는 이동 단말기(600)의 개폐 상태, 이동 단말기(600)의 위치, 사용자 접촉 유무 등과 같이 이동 단말기(600)의 현 상태를 감지하여 이동 단말기(600)의 동작을 제어하기 위한 센싱 신호를 발생시킬 수 있다.
센싱부(640)는, 감지센서(641), 압력센서(643), 및 모션 센서(645) 등을 포함할 수 있다. 모션 센서(645)는 가속도 센서, 자이로 센서, 중력 센서 등을 이용하여 이동 단말기(600)의 움직임이나 위치 등을 감지할 수 있다. 특히, 자이로 센서는 각속도를 측정하는 센서로서, 기준 방향에 대해 돌아간 방향(각도)을 감지할 수 있다.
출력부(650)는 디스플레이(680), 오디오 출력부(653), 알림부(655), 및 햅틱 모듈(657) 등을 포함할 수 있다.
디스플레이(680)는 이동 단말기(600)에서 처리되는 정보를 표시 출력한다.
한편, 전술한 바와 같이, 디스플레이(680)와 터치패드가 상호 레이어 구조를 이루어 터치스크린으로 구성되는 경우, 디스플레이(680)는 출력 장치 이외에 사용자의 터치에 의한 정보의 입력이 가능한 입력 장치로도 사용될 수 있다.
오디오 출력부(653)는 무선 통신부(610)로부터 수신되거나 메모리(660)에 저장된 오디오 데이터를 출력한다. 이러한 오디오 출력부(653)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알림부(655)는 이동 단말기(600)의 이벤트 발생을 알리기 위한 신호를 출력한다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. .
햅틱 모듈(haptic module)(657)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(657)이 발생시키는 촉각 효과의 대표적인 예로는 진동 효과가 있다.
메모리(660)는 제어부(670)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.
인터페이스부(625)는 이동 단말기(600)에 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 인터페이스부(625)는 이러한 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 이동 단말기(600) 내부의 각 구성 요소에 전달할 수 있고, 이동 단말기(600) 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.
제어부(670)는 통상적으로 상기 각부의 동작을 제어하여 이동 단말기(600)의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행할 수 있다. 또한, 제어부(670)는 멀티 미디어 재생을 위한 멀티미디어 재생 모듈(681)을 구비할 수도 있다. 멀티미디어 재생 모듈(681)은 제어부(670) 내에 하드웨어로 구성될 수도 있고, 제어부(670)와 별도로 소프트웨어로 구성될 수도 있다.
전원 공급부(690)는, 제어부(670)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
한편, 도 5에 도시된 이동 단말기(600)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 이동 단말기(600)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 6은 본 발명의 실시예에 따른 영상표시장치와 이동 단말기의 동작방법의 일예를 보여주는 순서도이고, 도 7a 내지 도 11c는 도 6의 동작방법을 설명하기 위해 참조되는 도면이다.
먼저, 도 6을 참조하면, 영상표시장치(100)의 제어부(170)는, 사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어할 수 있다(S610).
예를 들어, 영상표시장치(100)의 제어부(170)는, 원격제어장치(200)의, 특정 키 입력이 있는 경우, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어할 수 있다.
예를 들어, 서버 정보와 관련한 컨텐츠는, 서버 정보가 포함되는 코드 이미지를 포함할 수 있다. 보다 구체적으로, 서버 정보가 포함되는 QR 코드 이미지를 포함할 수 있다.
다른 예로, 서버 정보와 관련한 컨텐츠는, 소정 사운드로서 출력될 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 영상표시장치(100)에 표시되는, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 획득할 수 있다(S620). 그리고, 다음, 이동 단말기(600)의 제어부(670)는, 미러링 관련 서버 정보를 인식할 수 있다(S625).
예를 들어, 이동 단말기(600)는 카메라(621)를 통해, 영상표시장치(100)에 표시되는 코드 이미지를 캡쳐할 수 있다. 그리고, 이동 단말기(600)의 제어부(670)는, 캡쳐된 코드 이미지로부터, 서버 정보를 추출하고, 추출된 서버 정보를 인식 수 있다.
다른 예로, 이동 단말기(600)는, 마이크(623)를 통해 수신되는 사운드로부터, 서버 정보를 추출하고, 추출된 서버 정보를 인식 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 인식된 미러링 관련 서버 정보에 기초하여, 해당 서버에 접속하도록 제어할 수 있다(S623). 이에 대응하여, 서버(500)는, 이동 단말기(600)와 접속할 수 있다(S624).
예를 들어, 서버(500)는, 영상표시장치(100)의 제조사가 운영하는 서버로서, 영상표시장치(100)의 제조시에, 설치된, 미러링 관련 서버 정보에 대응하는 서버일 수 있다.
이와 같이, 이동 단말기(600) 사용자는, 영상표시장치(100)에 표시되는 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 통해, 간단하게, 서버(500)에 접속할 수 있게 된다.
한편, 서버(500)는, 이동 단말기(600) 접속시, 이동 단말기(600)로, 미러링 관련 애플리케이션을 전송할 수 있다(S625).
이에 대응하여, 이동 단말기(600)의 제어부(670)는, 서버(500)로부터의, 미러링 관련 애플리케이션을, 통신부(610) 등을 통해, 수신하고(S626), 미러링 관련 애플리케이션을, 설치할 수 있다. 그리고, 설치된 미러링 관련 애플리케이션을, 실행할 수 있다(S628).
이에 따라, 간편하게, 미러링 관련 애플리케이션을, 이동 단말기(600)에 설치 및 실행할 수 있게 된다.
다음, 이동 단말기(600)의 제어부(670)는, 미러링할 애플리케이션 항목이 선택되는 지 여부를 판단하고(S632), 해당하는 경우, 선택된 애플리케이션 항목을 영상표시장치(100)로 전송하도록 제어할 수 있다(S645).
예를 들어, 이동 단말기(600)의 제어부(670)는, 미러링 관련 애플리케이션을 통해, 이동 단말기(600)에 설치된 복수의 애플리케이션들 중 영상표시장치(100)와 미러링할 애플리케이션 항목을 선택할 수 있다.
적어도 하나의 애플리케이션 항목이 선택될 수 있으며, 이동 단말기(600)의 제어부(670)는, 선택된 적어도 하나의 애플리케이션 항목에 대한 정보를, 영상표시장치(100)로 전송할 수 있다.
특히, 이동 단말기(600)의 제어부(670)는, 선택된 적어도 하나의 애플리케이션 항목의 명칭 정보, 애플리케이션 이미지 정보, 유저 정보, 애플리케이션 버젼 정보 등을, 영상표시장치(100)로 전송하도록 할 수 있다.
다음, 영상표시장치(100)의 제어부(170)는, 네트워크 인터페이스부(130 또는 145)를 통해, 이동 단말기(600)로부터, 선택된 미러링 애플리케이션 항목을, 수신할 수 있다(S650).
그리고, 영상표시장치(100)의 제어부(170)는, 수신된 미러링 애플리케이션 항목을, 영상표시장치(100)에 설치하며, 특히, 수신된 선택된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시되도록 제어한다(S660). 이에 따라, 이동 단말기로부터의 미러링 애플리케이션 항목을, 영상표시장치(100)에, 간편하게 설치 및 표시할 수 있게 된다.
이하에서는, 도 6의 동작 방법을 도 7a 내지 도 11c를 참조하여 기술한다.
영상표시장치(100)의 제어부(170)는, 방송 수신부(105)에서 수신되는 방송 신호에 기초한 방송 영상(700)을, 도 7a와 같이, 디스플레이(180)에 표시하도록 제어할 수 있다.
이때, 원격제어장치(200)의, 특정 키 입력이 있는 경우, 영상표시장치(100)의 제어부(170)는, 도 7b와 같이, 방송 신호에 대응하는 방송 영상(701)과, 애플리케이션 리스트(710)를 함께 표시하도록 제어할 수 있다.
영상표시장치(100)의 제어부(170)는, 도 7b와 같이, 방송 영상(701) 상에, 애플리케이션 리스트(710)가 중첩되어 표시되도록 제어할 수 있다.
한편, 애플리케이션 리스트(710)는, 미러링 항목(715a), 추가 보기 항목(719), 또는 애플리케이션 항목 등을 구비할 수 있다.
한편, 도 7c는, 도 7b와 다른, 미러링 항목(715b)가 애플리케이션 리스트(710) 내에 표시되는 것을 예시한다. 사용자의 인식 편의를 위해, 미러링 항목(715b)은, 미러링을 나타내는 오브젝트로서 표시될 수 있다.
한편, 미러링 항목(715a 또는 715b))이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 도 7d와 같이, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠(720)를 포함하는 미러링 관련 메뉴(717)를 표시하도록 제어할 수 있다.
미러링 관련 메뉴(717)는, 미러링 항목(715a 또는 715b)의 선택에 따라, 우측으로 펼쳐지는 형태로 표시될 수 있다.
한편, 미러링 관련 메뉴(717)는, 미러링 항목(715a 또는 715b)으로의 복원을 위해, 복귀 항목(716)을 더 포함할 수 있다.
한편, 서버 정보와 관련한 컨텐츠(720)는, 서버 정보가 포함되는 코드 이미지를 포함할 수 있다. 예를 들어, 서버 정보와 관련한 컨텐츠(720)는, 도 7d와 같이, 서버 정보가 포함되는 QR 코드 이미지를 포함할 수 있다.
한편, 서버 정보와 관련한 컨텐츠(720)가 영상표시장치(100)에 표시된 상태에서, 이동 단말기(600)의 카메라(621)는, 도 7e와 같이, 서버 정보와 관련한 컨텐츠(720)를 캡쳐할 수 있다.
그리고, 이동 단말기(600)의 제어부(670)는, 캡쳐된 컨텐츠 이미지(720b)를 수신하고, 이를 인식할 수 있다. 이때, 이동 단말기(600)의 제어부(670)는, 쳐된 서버 정보와 관련한 컨텐츠 이미지(720b)를 디스플레이(180)에 표시하도록 제어할 수도 있다.
이동 단말기(600)의 제어부(670)는, 캡쳐된 컨텐츠 이미지(720b)로부터, 서버 정보를 추출할 수 있다.
그리고, 이동 단말기(600)의 제어부(670)는, 추출된 서버 정보에 기초하여, 해당 서버(500)로 접속하도록 제어할 수 있다.
예를 들어, 이동 단말기(600)의 제어부(670)는, 도 7f와 같이, 해당 서버(500)로 접속을 위해, 접속 요청 신호(Sreg1)를 서버(500)로 전송하고, 서버(500)로부터 접속 응답 신호(Sres1)를 수신할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 도 7g와 같이, 서버(500)로부터, 미러링 관련 애플리케이션을 수신할 수 있다.
보다 구체적으로 설명하면, 이동 단말기(600)의 제어부(670)는, 도 7g의 (a)와 같이, 미러링 앱 다운로드를 위한 화면(732)이 표시되도록 제어할 수 있다.
이때, 사용자의 터치 입력 등에 의해, 다운로드 항목(732)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 미러링 앱을 다운로드하고, 다운로드가 완료되는 경우, 도 7g의 (b)와 같이, 다운로드 완료 화면(734)이 표시되도록 제어할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 다운로드된 미러링 설정 애플리케이션을 설치할 수 있다. 이때, 이동 단말기(600)의 제어부(670)는, 도 7g의 (c)와 같이, 설치 화면(736)이 표시되도록 제어할 수 있다.
그리고, 설치가 완료되는 경우, 이동 단말기(600)의 제어부(670)는, 도 7g의 (d)와 같이, 설치 완료 화면(738)이 표시되도록 제어할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 설치 완료된 미러링 설정 애플리케이션을 실행할 수 있다.
이에 대해서는, 도 8a 내지 도 8i를 참조하여 기술한다.
먼저, 도 8a는, 이동 단말기(600)의 대기 화면(810) 또는 홈 화면(810)을 예시한다. 대기 화면(810) 또는 홈 화면(810)은, 디스플레이(680)에 표시될 수 있다. 한편, 화면 하단에, 복수의 애플리케이션 항목이 표시될 수 있다. 도면에서는, 복수의 애플리케이션 항목들 중 미러링 애플리케이션 항목(812)이 표시되는 것을 예시한다.
도 8a에서의 이동 단말기(600)의 대기 화면(810) 또는 홈 화면(810)에서, 미러링 애플리케이션 항목(812)이 선택되거나, 도 7g에서의 미러링 애플리케이션 다운로드가 완료된 경우 자동으로, 미러링 애플리케이션이 실행될 수 있다.
이동 단말기(600)의 제어부(670)는, 미러링 애플리케이션 실행시, 미러링 설정 애플리케이션 화면(820)을, 도 8b와 같이, 표시하도록 제어할 수 있다.
미러링 설정 애플리케이션 화면(820)은, 설정 가능 항목(822), TV 선택 항목(824), 애플리케이션 등록 항목(826), 사용자 정보 편집 항목(823), 가로 세로 보기 설정 항목(813), 비밀 번호 항목(814) 등을 포함할 수 있다.
설정 가능 항목(822)이 선택되어 활성화되는 경우, 이동 단말기(600)의 제어부(670)는, TV 선택 항목(824), 애플리케이션 등록 항목(826), 사용자 정보 편집 항목(823), 가로 세로 보기 설정 항목(813), 비밀 번호 항목(814) 등이, 도 8c와 같이, 활성화 표시되도록 제어할 수 있다. 이에 따라, 각 종 설정 등을 수행할 수 있게 된다.
TV 선택 항목(824)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 주변의 TV를 탐색하고, 탐색 종료에 따라, 도 8d와 같이, 적어도 하나의 TV 항목을 포함하는 TV 리스트 화면(830)이 표시되도록 제어할 수 있다. 도면에서는, 2개의 TV 항목이 예시된다.
이 중 제1 TV 항목(832)가 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 선택된 제1 TV 항목(832)과의 미러링을 위한 설정을 완료하고, 설정 완료 이후, 도 8e와 같이, 미러링 설정 애플리케이션 화면(820)이 다시 표시되도록 제어할 수 있다.
다음, 미러링 설정 애플리케이션 화면(820)이 표시된 상태에서, 도 8f와 같이, 애플리케이션 등록 항목(826)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 8g와 같이, 이동 단말기(600)에 설치된 애플리케이션 항목을 포함하는 애플리케이션 리스트(850)를 표시하도록 제어할 수 있다.
한편, 애플리케이션 리스트(850) 내의 복수의 애플리케이션 항목, 예를 들어, 인터넷 애플리케이션 항목(852), 카메라 애플리케이션 항목(854)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 8h와 같이, 인터넷 애플리케이션 항목(852), 카메라 애플리케이션 항목(854)이 하이라이트 표시되도록 제어할 수 있다.
그리고, 이동 단말기(600)의 제어부(670)는, 저장 항목 등이 선택되는 경우, 도 8i와 같이, 미러링 설정 애플리케이션 화면(820)이 다시 표시되도록 제어할 수 있다. 이때, 애플리케이션 등록 항목(826b)은, 선택된 2개의 애플리케이션 관련 정보(827)를 포함할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 선택된 2개의 애플리케이션 항목과 관련된 정보를, 도 8j와 같이, 영상표시장치(100)로, 전송하도록 제어할 수 있다. 이때, 이동 단말기(600)의 제어부(670)는, 2개의 애플리케이션 전송 정보를, 디스플레이(680)에 표시하도록 제어할 수 있다.
영상표시장치(100)는, 인터페이스부(130 또는 135)를 통해, 2개의 미러링할 애플리케이션 항목과 관련된 정보를, 수신할 수 있다.
영상표시장치(100)의 제어부(170)는, 수신된 미러링 애플리케이션 항목을, 영상표시장치(100) 내에 설치하도록 제어하며, 특히, 도 8k와 같이, 미러링 관련 메뉴(717) 내에 표시하도록 제어할 수 있다.
영상표시장치(100)의 제어부(170)는, 미러링 관련 메뉴(717) 내에 표시되는 미러링 애플리케이션 항목 중 제1 미러링 애플리케이션 항목을 선택할 수 있다.
예를 들어, 원격제어장치(200)의 방향키, 및 확인키를 이용하여, 제1 미러링 애플리케이션 항목을 선택할 수 있다.
다른 예로, 원격제어장치(200)의 RF 신호 내에 포함되는 포인팅 신호에 기초하여, 포인터가 표시되고, 포인터에 의해, 제1 미러링 애플리케이션 항목을 선택할 수 있다.
영상표시장치(100)의 제어부(170)는, 미러링 관련 메뉴(717) 내에 표시되는 미러링 애플리케이션 항목 중 제1 미러링 애플리케이션 항목이 선택되는 경우, 이동 단말기(600)로, 페어링 정보 또는 제1 미러링 애플리케이션 실행 요청 정보를 전송하도록 제어하며, 이동 단말기(600)로부터, 제1 미러링 애플리케이션 실행 이미지를, 네트워크 인터페이스부(130 또는 135)를 통해, 수신하고, 수신되는 제1 미러링 애플리케이션 실행 이미지를 디스플레이(180)에 표시하도록 제어할 수 있다.
도 9a는, 미러링 관련 메뉴(717) 내에 표시되는 미러링 애플리케이션 항목(711,712) 중 카메라 애플리케이션 항목(712)이 선택되는 경우를 예시하며, 이에 따라, 영상표시장치(100)에서 이동 단말기(600)로, 카메라 애플리케이션 실행 요청 정보(Ssta)가 전송되는 것을 예시한다.
이동 단말기(600)의 제어부(680)는, 카메라 애플리케이션 실행 요청 정보(Ssta)를 수신하는 경우, 도 9a와 같이, 카메라 애플리케이션이 실행되도록 제어하며, 표시되는 홈 화면, 또는 대기 화면(810)이, 카메라 애플리케이션 화면으로 전환되도록 제어할 수 있다.
그리고, 이동 단말기(600)의 제어부(680)는, 미러링 모드로 진입하여, 카메라 애플리케이션 화면(840a)에 대응하는 이미지(Saib)를, 도 9b와 같이, 영상표시장치(100)로 전송하도록 제어할 수 있다.
이에 따라, 영상표시장치(100)의 제어부(170)는, 인터페이스부(130 또는 135)를 통해, 카메라 애플리케이션 화면(840a)에 대응하는 이미지(Saib)를, 수신하고, 스케일링 등의 신호 처리를 수행하여, 카메라 애플리케이션 화면(840a)에 대응하는 이미지(840b)가 디스플레이(180)에 표시되도록 제어할 수 있다.
도 9b에서는, 미러링된 카메라 애플리케이션 이미지(840b)가, 애플리케이션 리스트(710)과 함께 표시되는 것을 예시하나, 이와 달리, 도 1과 같이, 애플리케이션 리스트(710)가 사라지고, 미러링된 카메라 애플리케이션 이미지(840b)만 디스플레이(180)에 표시되는 것도 가능하다.
한편, 제어부(170)는, 페어링 요청 신호시의 통신 방식과, 미러링 애플리케이션 이미지 전송시의 통신 방식이 서로 다르도록 제어할 수 있다.
예를 들어, 제어부(170)는, 페어링 신호(pairing signal) 또는 페어링 요청 신호를, 블루투스 기반의 BLE(Blooth Low Energy) 신호로서, 통신하도록 제어하고, 미러링 애플리케이션 이미지 전송시에는 대역폭이 보다 넓은, 미라캐스트(miracast) 방식에 의한, Wi-Fi 통신 방식이 사용되도록 제어할 수 있다.
한편, 도 10a 내지 도 10d는, 도 8f 내지 도 8i와 다른, 이동 단말기(600)를 이용하여, 미러링 애플리케이션을 영상표시장치(100)에 설치하기 위한 다른 예이다.
이동 단말기(600)에, 미러링 설정 애플리케이션 화면(820)이 표시된 상태에서, 도 10a와 같이, 애플리케이션 등록 항목(826)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 10b와 같이, 이동 단말기(600)에 설치된 애플리케이션 항목을 포함하는 애플리케이션 리스트(950)를 표시하도록 제어할 수 있다.
한편, 애플리케이션 리스트(950) 내의 복수의 애플리케이션 항목, 예를 들어, 메신저 애플리케이션 항목(952), 메시지 애플리케이션 항목(954), 멀티미디어 데이터 재생을 위한 플레이어 항목(956)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 10c와 같이, 메신저 애플리케이션 항목(952), 메시지 애플리케이션 항목(954), 멀티미디어 데이터 재생을 위한 플레이어 항목(956)이 하이라이트 표시되도록 제어할 수 있다.
그리고, 이동 단말기(600)의 제어부(670)는, 저장 항목 등이 선택되는 경우, 도 10d와 같이, 미러링 설정 애플리케이션 화면(820)이 다시 표시되도록 제어할 수 있다. 이때, 애플리케이션 등록 항목(926b)은, 선택된 3개의 애플리케이션 관련 정보(927)를 포함할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 선택된 3개의 애플리케이션 항목과 관련된 정보를, 영상표시장치(100)로, 전송하도록 제어할 수 있다. 이때, 이동 단말기(600)의 제어부(670)는, 3개의 애플리케이션 전송 정보를, 디스플레이(680)에 표시하도록 제어할 수 있다.
영상표시장치(100)는, 인터페이스부(130 또는 135)를 통해, 3개의 미러링할 애플리케이션 항목과 관련된 정보를, 수신할 수 있다.
영상표시장치(100)의 제어부(170)는, 수신된 미러링 애플리케이션 항목을, 영상표시장치(100) 내에 설치하도록 제어하며, 특히, 도 11a와 같이, 애플리케이션 리스트(1110) 내의, 미러링 관련 메뉴 내에, 표시하도록 제어할 수 있다.
도 11a에서는, 이동 단말기(600)로부터 전송된 미러링 애플리케이션으로서, 메신저 애플리케이션 항목(1111), 메시지 애플리케이션 항목(1112), 멀티미디어 데이터 재생을 위한 플레이어 항목(1113)을 예시한다.
한편, 미러링 관련 메뉴는, 도 7b 또는 도 7c의 미러링 항목(715a 또는 715b)으로의 복원을 위해, 복귀 항목(1116), 애플리케이션 추가 항목(1119) 등을 더 포함할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 미러링 관련 메뉴 내에 표시되는 미러링 애플리케이션 항목 중 소정 애플리케이션 항목을 선택할 수 있으며, 선택되는 애플리케이션 항목에 대한 정보를, 이동 단말기(600)로 전송하도록 제어하고, 이에 따라, 이동 단말기(600)에서 실행되는 애플리케이션 이미지를 수신할 수 있다. 그리고, 미러링 모드로서, 수신되는 애플리케이션 이미지를 디스플레이(180)에 표시할 수 있다.
한편, 도 11b 내지 도 11c는, 도 11a에서 도시된 3개의 미러링 애플리케이션 항목이 표시된 상태에서, 미러링 애플리케이션을 더 추가하는 방안을 예시한다.
예를 들어, 도 11a의 애플리케이션 추가 항목(1119)이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)에 접속할 수 있다.
이때, 이동 단말기(600)의 제어부(680)는, 애플리케이션 추가 정보를 수신하고, 도 11b와 같이, 미러링 애플리케이션이 실행되도록 제어하고, 미러링 설정 애플리케이션 화면(820)이 표시되도록 제어할 수 있다.
다른 예로, 이동 단말기(600)의 제어부(680)는, 영상표시장치(100)에 미러링 애플리케이션 추가를 위해, 사용자가, 미러링 애플리케이션을 실행시키는 경우, 도 11b와 같이, 미러링 애플리케이션이 실행되도록 제어하고, 미러링 설정 애플리케이션 화면(820)이 표시되도록 제어할 수 있다.
한편, 이동 단말기(600)의 제어부(680)는, 도 11b와 같이, 미러링 설정 애플리케이션 화면(820)에 대응하는 이미지 데이터(Saib)가, 영상표시장치(100)로 전송되도록 제어할 수도 있다. 도면에서는, 영상표시장치(100)의 디스플레이(180)에, 미러링 애플리케이션 실행 화면에 대응하는 이미지(851)가 표시되는 것을 예시한다.
한편, 이동 단말기(600)의 제어부(670)는, 애플리케이션 리스트(850) 내의 복수의 애플리케이션 항목, 예를 들어, 인터넷 애플리케이션 항목(852), 카메라 애플리케이션 항목(854)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 11b와 같이, 인터넷 애플리케이션 항목(852), 카메라 애플리케이션 항목(854)이 하이라이트 표시되도록 제어할 수 있다.
다음, 이동 단말기(600)의 제어부(670)는, 선택된 2개의 애플리케이션 항목 에 대한 추가 입력이 있는 경우, 도 11c와 같이, 영상표시장치(100)로, 전송하도록 제어할 수 있다. 이때, 이동 단말기(600)의 제어부(670)는, 2개의 애플리케이션 전송 정보를, 디스플레이(680)에 표시하도록 제어할 수 있다.
영상표시장치(100)는, 인터페이스부(130 또는 135)를 통해, 2개의 미러링할 애플리케이션 항목과 관련된 정보를, 수신할 수 있다.
영상표시장치(100)의 제어부(170)는, 수신된 미러링 애플리케이션 항목을, 영상표시장치(100) 내에 설치하도록 제어하며, 특히, 도 11c와 같이, 미러링 관련 메뉴 내에, 이미 추가된, 메신저 애플리케이션 항목(1111), 메시지 애플리케이션 항목(1112), 멀티미디어 데이터 재생을 위한 플레이어 항목(1113)과 함께, 인터넷애플리케이션 항목(711), 카메라 애플리케이션 항목(712)이 표시되도록 제어할 수 있다. 이에 따라, 간편하게, 미러링 관련 애플리케이션을, 영상표시장치(100)의 애플리케이션 리스트내, 특히 미러링 관련 메뉴 내에 추가할 수 있게 된다.
도 12는 본 발명의 다른 실시예에 따른 영상표시장치와 이동 단말기의 동작방법의 일예를 보여주는 순서도이고 도 13a 내지 도 14e는 도 12의 동작방법을 설명하기 위해 참조되는 도면이다.
먼저, 도 12를 참조하면, 영상표시장치(100)의 제어부(170)는, 사용자 입력에 기초하여, 미러링 관련 메뉴를 표시하도록 제어한다(S1210).
예를 들어, 도 7a와 같이, 방송 영상(700)이 표시된 상태에서, 홈 키 또는 애플리케이션 실행키 등이 동작하는 경우, 도 7b와 같이, 화면 하단에, 애플리케이션 리스트(710)가 표시될 수 있다. 이때, 애플리케이션 리스트는, 복수의 애플리케이션 항목을 구비할 수 있으며, 특히, 도 7b 또는 도 7c와 같은, 미러링 애플리케이션 항목(715a 또는 715b)를 구비할 수 있다.
*원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 미러링 애플리케이션 항목(715a 또는 715b)이 선택되는 경우, 풀 다운 메뉴와 유사하게, 우측으로 펼쳐지면서, 미러링 관련 메뉴(717)가 표시될 수 있다.
미러링 관련 메뉴(717)는, 미러링과 관련된 애플리케이션이 추가되지 않은 경우에는, 도 7d와 같이, 미러링 관련 애플리케이션 설치를 위한, 코드 이미지(720)를 구비할 수 있으며, 도 8a 내지 도 8k와 같이, 미러링과 관련된 애플리케이션이 추가된 경우, 코드 이미지(720) 표시는 사라지고, 설치된 미러링과 관련된 애플리케이션 항목들이 표시될 수 있다.
이하에서는, 미러링 관련 메뉴 내에, 미러링과 관련된 애플리케이션 항목들이 설치된 것을 전제로 기술한다.
다음, 영상표시장치(100)의 제어부(170)는, 미러링 관련 메뉴 내에, 어느 하나의 애플리케이션 항목이, 원격제어장치(200)의 포인팅 신호에 기초한 포인터(205) 등에 의해, 선택되는 경우(S1220), 이동 단말기(600)로 페어링 요청 신호를 전송하도록 제어한다(S1225).
이에 대응하여, 이동 단말기(600)의 제어부(670)는, 페어링 요청 신호를 수신하고(S1230), 페어링 응답 신호를 전송하도록 제어한다(S1232).
이에 대응하여, 영상표시장치(100)의 제어부(170)는, 페어링 응답 신호를 수신한다(S1234). 이에 기초하여, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)에 접속하며, 이동 단말기(600)와의 접속을 유지하도록 제어한다.
한편, 영상표시장치(100)의 제어부(170)는, 페어링 요청 신호 외에, 추가로, 선택된 애플리케이션 항목에 대한 정보를, 이동 단말기(600)로, 전송하도록 제어할 수 있다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 선택된 애플리케이션 항목에 대한 정보를 수신하고, 수신된 애플리케이션 항목에 대한 정보에 기초하여, 해당 애플리케이션을 이동 단말기(600)에서 실행하도록 제어할 수 있다(S1235).
다음, 이동 단말기(600)의 제어부(670)는, 실행되는 애플리케이션에 대한 이미지를 영상표시장치(100)로 전송하도록 제어할 수 있다(S1245).
이에 대응하여, 영상표시장치(100)의 제어부(170)는, 인터페이스부(130 또는 135)를 통해, 실행되는 애플리케이션에 대한 이미지를 수신하고(S1250), 수신된 실행되는 애플리케이션에 대한 이미지를 표시하도록 제어할 수 있다(S1260).
도 13a는, 영상표시장치(100)의 디스플레이(180)에, 애플리케이션 리스트(1110) 내에 복수의 미러링 애플리케이션 항목 중 플레이어 애플리케이션 항목(1113)이 선택되는 것을 예시한다.
이에 따라, 영상표시장치(100)의 제어부(170)는, 홈 화면 또는 대기 화면(810)이 표시되는 이동 단말기(600)에, 페어링 요청 신호(Spai)를 전송하고, 이동 단말기(600)로부터 페어링 응답 신호(Spar)를 수신할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 페어링 요청 신호(Spai) 외에, 추가로, 도 13b와 같이, 선택된 애플리케이션 항목에 대한 정보(SMX)를 이동 단말기(600)로, 전송하도록 제어할 수 있다.
홈 화면 또는 대기 화면(810)이 표시되는 이동 단말기(600)는, 수신된 애플리케이션 항목에 대한 정보(SMX)에 기초하여, 이동 단말기(600) 내에서, 해당 애플리케이션을 실행시키며, 도 13b와 같이, 실행되는 애플리케이션 이미지를 디스플레이(680)에 표시할 수 있다.
특히, 도 13b는, 플레이어 애플리케이션 화면 중 컨텐츠 리스트 화면을 예시한다. 이 중 어느 하나의 컨텐츠가 선택되는 경우, 도 13c와 같이, 재생되는 화면(1320)이, 이동 단말기(600)의 디스플레이(680)에 표시될 수 있다.
그리고, 미러링 모드에 따라, 재생되는 화면(1320)에 대응하는 이미지가, 영상표시장치(100)로 전송되어, 영상표시장치(100)의 디스플레이(180)에, 재생되는 화면에 대응하는 이미지(1320a)가 표시될 수 있게 된다. 따라서, 간편하게, 영상표시장치(100)와 이동 단말기(600) 사이의 미러링을 수행할 수 있게 된다.
한편, 도 14a 내지 도 14c는, 도 13a 내지 도 13c와 달리, 메신저 애플리케이션이 선택되어, 미러링되는 것을 예시한다.
도 14a는, 영상표시장치(100)의 디스플레이(180)에, 애플리케이션 리스트(1110) 내에 복수의 미러링 애플리케이션 항목 중 메신저 애플리케이션 항목(1111)이 선택되는 것을 예시한다.
이에 따라, 영상표시장치(100)의 제어부(170)는, 홈 화면 또는 대기 화면(810)이 표시되는 이동 단말기(600)에, 페어링 요청 신호(Spai)를 전송하고, 이동 단말기(600)로부터 페어링 응답 신호(Spar)를 수신할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 페어링 요청 신호(Spai) 외에, 추가로, 도 14b와 같이, 선택된 애플리케이션 항목에 대한 정보를 이동 단말기(600)로, 전송하도록 제어할 수 있다.
홈 화면 또는 대기 화면(810)이 표시되는 이동 단말기(600)는, 수신된 애플리케이션 항목에 대한 정보에 기초하여, 도 14b와 같이, 이동 단말기(600)의 대기 화면을 홈 화면(1410)으로 전환하거나, 제1 홈 화면에서, 선택된 애플리케이션 항목이 위치하는 제2 홈 화면(1410)으로 전환하도록 제어할 수 있다.
다음, 도 14b의 홈 화면(1410)에서, 메신저 애플리케이션 항목(1412)가 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 해당 애플리케이션을 실행시키며, 도 14c와 같이, 실행되는 애플리케이션 이미지(1420)를 디스플레이(680)에 표시할 수 있다.
그리고, 이동 단말기(600)의 제어부(670)는, 미러링 모드에 따라, 실행되는 애플리케이션 이미지(1420)에 대응하는 이미지가, 영상표시장치(100)로 전송되도록 제어한다.
이에 따라, 영상표시장치(100)의 디스플레이(180)에, 실행되는 애플리케이션 에 대응하는 이미지(1420a)가 표시될 수 있게 된다. 따라서, 간편하게, 영상표시장치(100)와 이동 단말기(600) 사이의 미러링을 수행할 수 있게 된다.
한편, 영상표시장치(100)와 이동 단말기(600)가 페어링에 의해 접속된 상태에서는, 영상표시장치(100) 또는 이동 단말기(600)의 조작을 통해, 미러링할 애플리케이션을 선택할 수 있다.
한편, 영상표시장치(100)와 이동 단말기(600)가 페어링에 의해 접속시, 영상표시장치(100)가 먼저 페어링 신호를 전송하는 경우에는, 영상표시장치(100)에 대한 조작을 통해, 미러링할 애플리케이션이 선택될 확률이 높으므로, 이동 단말기(600)의 제어부(680)는, 페어링 접속을 위해, 잠금 화면 상태가 되지 않도록, 디스플레이(680)를 제어할 수 있다.
다만, 이동 단말기(600)의 제어부(680)는, 미러링할 애플리케이션이, 도 14b와 같이, 페어링 이후, 영상표시장치(100)에서 선택되기 전까지, 소비전력 저감을 위해, 디스플레이(680)의 휘도 등이 감소되도록 제어할 수 있다.
도 14d는, 페어링 이후, 영상표시장치(100)에서 선택되기 전의 제1 시간에, 제1 휘도의 화면(810b)이 표시되는 것을 예시하며, 그 이후 제2 시간에, 제1 휘도 보다 낮은, 제2 휘도의 화면(810a)이 표시되는 것을 예시한다.
한편, 도 14e와 같이, 원격제어장치(200)의 포인팅 신호에 기초하여 표시되는 포인터(205)를 이용하여, 메신저 애플리케이션 항목(1111)이 선택되는 경우, 이동 단말기(600)의 제어부(680)는, 선택되는 애플리케이션 항목에 대한 정보를, 수신함에 따라, 제2 휘도의 화면(810a) 보다 높은 제3 휘도의 화면(810)으로 변경하면서, 도 14b와 같은, 화면(1410)으로 전환하도록 제어할 수 있다.
한편, 이동 단말기(600)의 제어부(680)는, 상술한 바와 달리, 제3 휘도의 화면(810) 표시 없이, 바로, 제2 휘도의 화면(810a)에서 도 14b와 같은, 화면(1410)으로 전환하도록 제어할 수도 있다.
도 15는 본 발명의 다른 실시예에 따른 영상표시장치(100)와 이동 단말기의 동작방법의 일예를 보여주는 순서도이고, 도 16a 내지 도 20f는 도 15의 동작방법을 설명하기 위해 참조되는 도면이다.
먼저, 도 15를 참조하면, 영상표시장치(100)의 제어부(170)는, 사용자 입력에 기초하여, 미러링 관련 메뉴를 표시하도록 제어한다(S1510).
예를 들어, 도 7a와 같이, 방송 영상(700)이 표시된 상태에서, 홈 키 또는 애플리케이션 실행키 등이 동작하는 경우, 도 7b와 같이, 화면 하단에, 애플리케이션 리스트(710)가 표시될 수 있다. 이때, 애플리케이션 리스트는, 복수의 애플리케이션 항목을 구비할 수 있으며, 특히, 도 7b 또는 도 7c와 같은, 미러링 애플리케이션 항목(715a 또는 715b)를 구비할 수 있다.
원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 미러링 애플리케이션 항목(715a 또는 715b)이 선택되는 경우, 풀 다운 메뉴와 유사하게, 우측으로 펼쳐지면서, 미러링 관련 메뉴(717)가 표시될 수 있다.
다음, 영상표시장치(100)의 제어부(170)는, 미러링 관련 메뉴 내에, 제1 사용자 항목이, 원격제어장치(200)의 포인팅 신호에 기초한 포인터(205) 등에 의해, 선택되는 경우(S1520), 제1 사용자에 대응하는 이동 단말기(600a)로 페어링 요청 신호를 전송하도록 제어한다(S1525).
이에 대응하여, 제1 사용자에 대응하는 이동 단말기(600a)의 제어부(670)는, 페어링 요청 신호를 수신하고(S1530), 페어링 응답 신호를 전송하도록 제어한다(S1532).
이에 대응하여, 영상표시장치(100)의 제어부(170)는, 페어링 응답 신호를 수신한다(S1534). 이에 기초하여, 영상표시장치(100)의 제어부(170)는, 제1 사용자의 이동 단말기(600a)에 접속하며, 제1 사용자의 이동 단말기(600a)와의 접속을 유지하도록 제어한다.
한편, 영상표시장치(100)의 제어부(170)는, 페어링 요청 신호 외에, 추가로, 선택된 애플리케이션 항목에 대한 정보를, 제1 사용자의 이동 단말기(600a)로, 전송하도록 제어할 수 있다.
이에 따라, 제1 사용자의 이동 단말기(600a)의 제어부(670)는, 선택된 애플리케이션 항목에 대한 정보를 수신하고, 수신된 애플리케이션 항목에 대한 정보에 기초하여, 해당 애플리케이션을 제1 사용자의 이동 단말기(600a)에서 실행하도록 제어할 수 있다(S1535).
다음, 제1 사용자의 이동 단말기(600a)의 제어부(670)는, 실행되는 애플리케이션에 대한 이미지를 영상표시장치(100)로 전송하도록 제어할 수 있다(S1545).
이에 대응하여, 영상표시장치(100)의 제어부(170)는, 인터페이스부(130 또는 135)를 통해, 실행되는 애플리케이션에 대한 이미지를 수신하고(S1550), 수신된 실행되는 애플리케이션에 대한 이미지를 표시하도록 제어할 수 있다(S1560).
도 16a는, 이동 단말기(600)에, 미러링 설정 애플리케이션 화면(820)이 표시된 상태에서, 사용자 정보 편집 항목(823)이 선택되는 경우를 예시한다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 도 16b와 같이, 사용자 정보 설정 화면(1600)이 표시되도록 제어할 수 있다.
사용자 정보 설정 화면(1600)은, 프로파일 이미지 항목(1602), 이름 항목(1604), 장르 항목(1606) 등을 포함할 수 있다.
이동 단말기(600)의 제어부(670)는, 프로파일 이미지 항목(1602)이 선택되는 경우, 카메라(621)을 활성화시켜, 유저의 얼굴 이미지를 캡쳐하도록 제어할 수 있다. 그리고, 도 16c와 같이, 캡쳐된 이미지를, 편집하기 위한 화면(1610)이 표시되도록 제어할 수 있다.
편집 완료시, 이동 단말기(600)의 제어부(670)는, 도 16d와 같이, 편집된 유저 이미지(1615)를, 프로파일 이미지 항목(1602) 내에 위치하도록 제어할 수 있다.
다음, 사용자 정보 설정 화면(1600) 내의 이름 항목(1604)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 16e와 같이, 이름 입력창(1620)이 표시되도록 제어할 수 있다.
한편, 사용자 정보 설정 화면(1600) 내의 장르 항목(1606)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 16f와 같이, 장르 설정창(1625)이 표시되도록 제어할 수 있다.
이러한, 사용자 정보 설정 화면(1600)에서의 사용자 정보 설정 완료시, 이동 단말기(600)의 제어부(670)는, 설정된 사용자 정보는 물론, 미러링할 애플리케이션 정보를, 영상표시장치(100)로 전송하도록 제어할 수 있다.
이에 따라, 영상표시장치(100)의 제어부(170)는, 인터페이스부(130 또는 135)를 통해, 설정된 사용자 정보는 물론, 미러링할 애플리케이션 정보를, 수신하고, 애플리케이션 리스트 내에, 사용자 항목이 추가되도록 제어할 수 있다.
도 17a는, 애플리케이션 리스트(1710) 내에, 복수의 애플리케이션 항목과, 미러링을 위한 제1 사용자 항목(1705)이 표시되는 것을 예시한다.
한편, 영상표시장치(100)의 제어부(170)는, 제1 사용자 항목(1705)의 다른 항목과의 구별을 위해, 수신된 사용자 정보 내에 포함되는 사용자 이미지(1707)가 제1 사용자 항목에 중첩되어 표시되도록 제어할 수 있다. 이에 따라, 제1 사용자 항목(1705)을 직관적으로 인식할 수 있게 된다.
한편, 애플리케이션 리스트(1710) 내의 제1 사용자 항목(1705)이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 도 17b와 같이, 제1 사용자 항목(1705)이 펼쳐지면서, 제1 사용자 관련 메뉴(1720)가 표시되도록 제어할 수 있다.
제1 사용자 관련 메뉴(1720)는, 제1 사용자 이동 단말기(600a)에서 설정된, 복수의 애플리케이션 항목(1711,1712,1713), 복귀 항목(1716), 및 추가 항목(1719)을 포함할 수 있다.
이 중, 멀티미디어 데이터 재생을 위한 플레이어 항목(1713)이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 홈 화면 또는 대기 화면(810)이 표시되는 제1 사용자의 이동 단말기(600a)에, 페어링 요청 신호(Spai)를 전송하고, 이동 단말기(600)로부터 페어링 응답 신호(Spar)를 수신할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 페어링 요청 신호(Spai) 외에, 추가로, 도 17c와 같이, 선택된 애플리케이션 항목에 대한 정보(S)를, 제1 사용자의 이동 단말기(600a)로, 전송하도록 제어할 수 있다.
홈 화면 또는 대기 화면(810)이 표시되는 제1 사용자의 이동 단말기(600a)는, 수신된 애플리케이션 항목에 대한 정보(S)에 기초하여, 제1 사용자의 이동 단말기(600a) 내에서, 해당 애플리케이션을 실행시키며, 도 17c와 같이, 실행되는 애플리케이션 이미지(1740a)를 디스플레이(680)에 표시할 수 있다.
특히, 도 17c는, 플레이어 애플리케이션 화면 중 컨텐츠 리스트 화면(1740a)을 예시한다. 이 중 어느 하나의 컨텐츠(1742a)가 선택되는 경우, 도 17d와 같이, 재생되는 화면(1750)이, 제1 사용자의 이동 단말기(600a)의 디스플레이(680)에 표시될 수 있다.
그리고, 미러링 모드에 따라, 재생되는 화면(1750)에 대응하는 이미지가, 영상표시장치(100)로 전송되어, 영상표시장치(100)의 디스플레이(180)에, 재생되는 화면에 대응하는 이미지(1750a)가 표시될 수 있게 된다. 따라서, 간편하게, 영상표시장치(100)와 이동 단말기(600) 사이의 미러링을 수행할 수 있게 된다.
한편, 도 18a는, 이동 단말기(600)에 표시되는, 미러링 설정 애플리케이션 화면(820)에서, 추가 설정 항목(818)이 선택되는 것을 예시한다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 도 18b와 같이, TV 알림 항목(819)이 표시되도록 제어할 수 있다.
TV 알림 항목(819)이 선택되는 경우, 도 18c와 같이, 알림 설정 항목(817)을 포함하는 화면(1810)이 표시될 수 있으며, 알림 설정 항목(817)이 선택되는 경우, 도 18d와 같이, 알림 설정이 완료될 수 있다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 이동 단말기에 설치된 미러링 애플리케이션에서, 알림 메시지가 외부 서버 등으로부터 수신되는 경우, 이를, 영상표시장치(100)로 전달하도록 제어할 수 있다.
즉, 도 18e와 같이, 메신저 애플리케이션이 알림 메시지가, 이동 단말기(600)에서, 영상표시장치(100)로 수신되며, 이에 따라, 영상표시장치(100)의 제어부(170)는, 표시되는 미러링 애플리케이션 항목(1111(에, 알림 메시지(1111a)가 추가로 표시되도록 제어할 수 있다. 이에 따라, 영상표시장치(100)에서도, 알림 메시지를 수시로 확인할 수 있게 된다.
한편, 도 19a는, 이동 단말기(600)에 표시되는, 미러링 설정 애플리케이션 화면(820)에서, 가로 세로 보기 설정 항목(813)이 선택되는 것을 예시한다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 도 19b와 같이, 가로 세로 보기 설정창(1820)이 표시되도록 제어할 수 있다.
가로 세로 보기 설정창(1820)은, 자동 회전 항목(1822), 세로 보기 항목(1824), 가로 보기 항목(1826) 등을 포함할 수 있다. 이에 의해, 설정된 방식에 따라, 영상표시장치(100)에서 이미지가 표시되게 된다.
예를 들어, 가로 보기 항목(1826)이 선택되어 설정되는 경우, 영상표시장치(100)의 제어부(170)는, 가로 보기 항목 설정 정보를 수신하고, 이에 따라, 도 19c와 같이, 이동 단말기(600)의 세로 화면(1900)이, 영상표시장치(100)에서는, 가로 화면(1900a)으로 설정되어 표시되도록 제어할 수 있다.
한편, 도 20a는, 이동 단말기(600)에 표시되는, 미러링 설정 애플리케이션 화면(820)에서, 비밀 번호 항목(814)이 선택되는 것을 예시한다.
이에 따라, 이동 단말기(600)의 제어부(670)는, 도 20b와 같이, 비밀 번호 설정창(1830), 및 숫자 입력창(1836)이 표시되도록 제어할 수 있다.
이동 단말기(600)의 제어부(670)는, 도 20c와 같이, 소정 번호가 입력되어 완료되는 경우, 도 20d와 같이,미러링 설정 애플리케이션 화면(820)이 다시 표시되도록 제어할 수 있다.
이때, 비밀 번호 항목(814)은, 비밀 번호 설정 완료 정보(814a)를 포함할 수 있다.
이동 단말기(600)의 제어부(670)는, 설정된 비밀 번호 정보를, 영상표시장치(100)로 전송하도록 제어하며, 영상표시장치(100)는, 설정된 비밀 번호 정보를 수신할 수 있다.
한편, 이러한 비밀 번호 정보는, 미러링 관련 메뉴 하의, 제1 사용자 항목 선택시, 또는 특정 미러링 애플리케이션 항목 선택시에 활용될 수 있다.
예를 들어, 도 17c의 제1 사용자 항목(1705) 선택시, 영상표시장치(100)의 제어부(170)는, 바로 제1 사용자 항목에 대응하는 미러링 애플리케이션 항목이 표시되지 않고, 도 20e와 같은 비밀 번호 입력창(2010)이 표시되도록 제어할 수 있다.
한편, 비밀 번호 입력창(2010)은, 표시창(2013), 및 숫자 입력창(2016)을 포함할 수 있다.
한편, 입력된 비밀 번호가 일치하는 경우, 영상표시장치(100)의 제어부(170)는, 도 20f와 같은, 미러링 관련 메뉴 하의, 복수의 미러링 애플리케이션 항목(1111,1112,1113) 등과, 추가 항목(1119) 등이 표시되도록 제어할 수 있다. 이에 의해, 특정 사용자만을 위한 미러링 모드를 제공할 수 있게 된다.
한편, 특정 애플리케이션 항목에만 비밀 번호 설정이 적용될 수 있으며, 이러한 경우에도, 결국 특정 애플리케이션을 위한 미러링 모드를 제공할 수 있게 된다.
한편, 본 발명의 영상표시장치 또는 이동 단말기의 동작방법은, 영상표시장치 또는 이동 단말기에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
본 발명은 영상표시장치 또는 이동 단말기에 적용 가능하며, 특히, 이동 단말기로부터의 미러링 애플리케이션 항목을 간편하게 설치 및 표시하기 위한 영상표시장치 또는 이동 단말기에 적용 가능하다.

Claims (20)

  1. 디스플레이;
    이동 단말기와 데이터를 교환하는 인터페이스부; 및
    사용자 입력에 기초하여, 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어하고, 상기 이동 단말기로부터 미러링 애플리케이션 항목을, 상기 인터페이스부를 통해, 수신하고, 상기 수신된 미러링 애플리케이션 항목을, 미러링 관련 메뉴 내에 표시하도록 제어하는 제어부;를 포함하는 것을 특징으로 하는 영상표시장치.
  2. 제1항에 있어서,
    상기 서버 정보와 관련한 컨텐츠는,
    상기 서버 정보가 포함되는 코드 이미지를 포함하는 것을 특징으로 하는 영상표시장치.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 미러링 관련 메뉴 내에 표시되는 미러링 애플리케이션 항목 중 제1 미러링 애플리케이션 항목이 선택되는 경우, 상기 이동 단말기로, 페어링 정보 또는 상기 제1 미러링 애플리케이션 실행 요청 정보를 전송하도록 제어하며,
    상기 이동 단말기로부터, 제1 미러링 애플리케이션 실행 이미지를, 상기 인터페이스부를 통해, 수신하고, 수신되는 상기 제1 미러링 애플리케이션 실행 이미지를 상기 디스플레이에 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.
  4. 제1항에 있어서,
    방송 신호를 수신하는 방송 수신부;를 더 포함하고,
    상기 제어부는,
    상기 방송 신호에 대응하는 방송 영상과 애플리케이션 리스트를 표시한 상태에서, 상기 사용자 입력에 기초하여, 상기 미러링 관련 메뉴를, 상기 애플리케이션 리스트 내에 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.
  5. 제1항에 있어서,
    원격제어장치와 데이터를 교환하는 사용자 입력 인터페이스부;를 더 포함하고,
    상기 제어부는,
    상기 원격제어장치의 포인팅 신호에 기초하여, 포인터를 표시하도록 제어하고, 상기 포인터에 기초하여, 미러링 항목이 선택되는 경우, 상기 미러링 관련 서버 정보 또는 서버 정보와 관련한 컨텐츠를 포함하는 미러링 관련 메뉴를 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.
  6. 디스플레이;
    이동 단말기와 데이터를 교환하는 인터페이스부; 및
    사용자 입력에 기초하여, 미러링 관련 메뉴를 표시하도록 제어하고, 상기 미러링 관련 메뉴 내의 제1 미러링 애플리케이션 항목 또는 제1 사용자 항목이 선택되는 경우, 상기 이동 단말기로 페어링 요청 신호를 전송하도록 제어하고, 상기 인터페이스부를 통해, 상기 제1 미러링 애플리케이션 이미지를, 상기 이동 단말기 또는 제1 사용자 이동단말기로부터, 수신하며, 수신되는 상기 제1 미러링 애플리케이션 이미지를 표시하도록 제어하는 제어부;를 포함하는 것을 특징으로 하는 영상표시장치.
  7. 제6항에 있어서,
    상기 제어부는,
    상기 페어링 요청 신호에 대응하는 페어링 응답 신호를, 상기 인터페이스부를 통해, 수신하는 경우, 상기 이동 단말기와의 접속을 유지하도록 제어하는 것을 특징으로 하는 영상표시장치.
  8. 제6항에 있어서,
    상기 제어부는,
    상기 제1 미러링 애플리케이션 실행 요청 정보를 상기 이동 단말기로 전송하도록 제어하는 것을 특징으로 하는 영상표시장치.
  9. 제6항에 있어서,
    상기 제어부는,
    상기 페어링 요청 신호 전송시의 통신 방식과 상기 제1 미러링 애플리케이션 이미지 수신시의 통신 방식이 서로 다르도록 제어하는 것을 특징으로 하는 영상표시장치.
  10. 제6항에 있어서,
    방송 신호를 수신하는 방송 수신부;를 더 포함하고,
    상기 제어부는,
    상기 방송 신호에 대응하는 방송 영상과 애플리케이션 리스트를 표시한 상태에서, 상기 사용자 입력에 기초하여, 상기 미러링 관련 메뉴를, 상기 애플리케이션 리스트 내에 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.
  11. 제6항에 있어서,
    원격제어장치와 데이터를 교환하는 사용자 입력 인터페이스부;를 더 포함하고,
    상기 제어부는,
    상기 원격제어장치의 포인팅 신호에 기초하여, 포인터를 표시하도록 제어하고, 상기 포인터에 기초하여, 미러링 항목이 선택되는 경우, 상기 제1 미러링 애플리케이션 항목을 포함하는 상기 미러링 관련 메뉴를 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.
  12. 디스플레이;
    영상표시장치 또는 서버와 데이터를 교환하는 통신부; 및
    상기 영상표시장치에서 출력되는 미러링 관련 서버 정보를 인식하고, 인식된 상기 서버 정보에 기초하여 서버에 접속하도록 제어하며, 상기 서버로부터 미러링 설정 애플리케이션을 수신하여 실행하고, 실행되는 상기 미러링 설정 애플리케이션을 통해, 선택되는 미러링 애플리케이션 항목과 관련된 정보를 상기 영상표시장치로 전송하도록 제어하는 제어부;를 포함하는 것을 특징으로 하는 이동 단말기.
  13. 제12항에 있어서,
    카메라;를 더 포함하고,
    상기 제어부는, 상기 영상표시장치에, 상기 서버 정보가 포함되는 코드 이미지가 표시된 경우, 상기 카메라에서 캡쳐된 코드 이미지를 포함하는 이미지에 기초하여, 미러링 관련 서버 정보를 추출하는 것을 특징으로 하는 이동 단말기.
  14. 제12항에 있어서,
    상기 제어부는,
    상기 미러링 설정 애플리케이션 실행시, 미러링 설정 애플리케이션 화면이 표시되도록 제어하며,
    상기 미러링 설정 애플리케이션 화면은,
    설정 가능 항목, 기기 선택 항목, 애플리케이션 등록 항목, 사용자 정보 편집 항목, 가로 세로 보기 설정 항목, 비밀 번호 항목 중 적어도 하나를 포함하며,
    상기 제어부는,
    상기 애플리케이션 등록 항목이 선택되는 경우, 상기 이동 단말기에 설치된 애플리케이션 항목을 포함하는 애플리케이션 리스트를 표시하도록 제어하며,
    상기 애플리케이션 리스트 내의 소정 애플리케이션 항목이 선택되는 경우, 상기 선택된 애플리케이션에 관련된 정보를, 상기 미러링 애플리케이션 항목과 관련된 정보로서, 상기 영상표시장치로 전송되도록 제어하는 것을 특징으로 하는 이동 단말기.
  15. 제12항에 있어서,
    상기 제어부는,
    상기 영상표시장치로부터, 상기 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 상기 제1 미러링 애플리케이션을 실행하고, 상기 실행되는 제1 미러링 애플리케이션 이미지를 상기 영상표시장치로 전송하도록 제어하며,
    상기 제어부는,
    상기 영상표시장치로부터, 페어링 요청 신호를 수신하고, 수신되는 상기 페어링 요청 신호에 기초하여, 상기 영상표시장치로 페어링 응답 신호를 전송하며,
    상기 영상표시장치와의 접속 유지 상태에서, 상기 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 상기 제1 미러링 애플리케이션을 실행하고, 실행되는 상기 제1 미러링 애플리케이션 이미지를 상기 영상표시장치로 전송하도록 제어하는 것을 특징으로 하는 이동 단말기.
  16. 디스플레이;
    영상표시장치 또는 서버와 데이터를 교환하는 통신부; 및
    상기 영상표시장치로부터, 페어링 요청 신호를 수신하고, 수신되는 상기 페어링 요청 신호에 기초하여, 상기 영상표시장치로 페어링 응답 신호를 전송하며,
    상기 영상표시장치와의 접속 유지 상태에서, 제1 미러링 애플리케이션 실행 요청 정보를 수신하는 경우, 상기 제1 미러링 애플리케이션을 실행하고, 실행되는 상기 제1 미러링 애플리케이션 이미지를 상기 영상표시장치로 전송하도록 제어하는 제어부;를 포함하는 것을 특징으로 하는 이동 단말기.
  17. 제16항에 있어서,
    상기 제어부는,
    상기 미러링 설정 애플리케이션 실행시, 미러링 설정 애플리케이션 화면이 표시되도록 제어하며,
    상기 미러링 설정 애플리케이션 화면에 기초하여, 선택된 적어도 하나의 애플리케이션 항목과 관련된 정보를, 상기 영상표시장치로 전송되도록 제어하는 것을 특징으로 하는 이동 단말기.
  18. 제16항에 있어서,
    상기 제어부는,
    상기 미러링 설정 애플리케이션 실행시, 미러링 설정 애플리케이션 화면이 표시되도록 제어하며,
    상기 미러링 설정 애플리케이션 화면에 기초하여, 알림 설정이 완료되는 경우, 외부로부터 수신되는 알림 메시지를 상기 영상표시장치로 전송하도록 제어하는 것을 특징으로 하는 이동 단말기.
  19. 제16항에 있어서,
    상기 제어부는,
    상기 미러링 설정 애플리케이션 실행시, 미러링 설정 애플리케이션 화면이 표시되도록 제어하며,
    상기 미러링 설정 애플리케이션 화면에 기초하여, 비밀 번호 설정이 완료되는 경우, 설정된 비밀 번호 정보를 상기 영상표시장치로 전송하도록 제어하는 것을 특징으로 하는 이동 단말기.
  20. 제16항에 있어서,
    상기 제어부는,
    상기 영상표시장치와의 접속 이후, 상기 제1 미러링 애플리케이션 실행요청 정보 수신 전 까지, 상기 디스플레이의 휘도를 감소하도록 제어하되, 잠금 화면으로 전환되지 않도록 제어하는 것을 특징으로 하는 이동 단말기.
PCT/KR2015/007547 2015-07-02 2015-07-21 영상표시장치 및 이동 단말기 WO2017003007A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/741,439 US11134294B2 (en) 2015-07-02 2015-07-21 Image display apparatus and mobile terminal
CN201580082861.1A CN107925791B (zh) 2015-07-02 2015-07-21 图像显示设备和移动终端
EP15897229.9A EP3319326B1 (en) 2015-07-02 2015-07-21 Image display device and mobile terminal

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2015-0094883 2015-07-02
KR10-2015-0094881 2015-07-02
KR1020150094883A KR102403338B1 (ko) 2015-07-02 2015-07-02 이동 단말기
KR1020150094881A KR102444150B1 (ko) 2015-07-02 2015-07-02 영상표시장치

Publications (1)

Publication Number Publication Date
WO2017003007A1 true WO2017003007A1 (ko) 2017-01-05

Family

ID=57608322

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/007547 WO2017003007A1 (ko) 2015-07-02 2015-07-21 영상표시장치 및 이동 단말기

Country Status (4)

Country Link
US (1) US11134294B2 (ko)
EP (1) EP3319326B1 (ko)
CN (1) CN107925791B (ko)
WO (1) WO2017003007A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019164339A1 (en) * 2018-02-23 2019-08-29 Samsung Electronics Co., Ltd. Electronic device and method for sharing screen data

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
US10779051B2 (en) 2017-04-05 2020-09-15 Panasonic Avionics Corporation Screen mirroring from personal electronic devices to transportation vehicle display screens
US10838681B2 (en) * 2017-04-05 2020-11-17 Panasonic Avionics Corporation Screen mirroring from personal electronic devices to transportation vehicle display screens
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
KR102509071B1 (ko) * 2018-08-29 2023-03-10 삼성전자주식회사 전자 장치 및 이의 외부 장치를 제어하는 방법
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11438452B1 (en) 2019-08-09 2022-09-06 Apple Inc. Propagating context information in a privacy preserving manner
KR20210059177A (ko) 2019-11-15 2021-05-25 삼성전자주식회사 전자장치 및 그 제어방법
KR20210130424A (ko) * 2020-04-22 2021-11-01 엘지전자 주식회사 무선 디바이스
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
KR20220017193A (ko) * 2020-08-04 2022-02-11 삼성전자주식회사 전자 장치 및 전자 장치가 외부 장치 디스플레이 상에 어플리케이션 화면을 제공하는 방법
US20230037463A1 (en) * 2021-08-03 2023-02-09 Dell Products, L.P. Intelligent orchestration of video or image mirroring using a platform framework
CN114327338B (zh) * 2021-12-28 2024-02-09 威创集团股份有限公司 一种超高分图像显示系统及图像显示方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012044676A2 (en) * 2010-10-01 2012-04-05 Imerj, Llc Application mirroring using multiple graphics contexts
WO2012150744A1 (ko) * 2011-05-04 2012-11-08 주식회사 인프라웨어테크놀러지 어플리케이션 클론 실행 방법, 컴퓨터로 판독가능한 기록매체, 및 이를 지원하는 클론단말
US20140208205A1 (en) * 2000-11-10 2014-07-24 Trio Systems Llc System and method for creating and posting media lists for purposes of subsequent playback
WO2014189289A1 (ko) * 2013-05-21 2014-11-27 주식회사 알티캐스트 연관 서비스 제공 방법 및 장치

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007044599A1 (de) * 2007-09-19 2009-04-02 Siemens Ag Verfahren zum Bereitstellen von Bildobjekten in einem medizinischen Bildinformationssystem und medizinisches Bildinformationssystem
KR101699736B1 (ko) * 2010-06-17 2017-01-25 엘지전자 주식회사 영상표시기기 및 그 동작방법
EP2400445A3 (en) * 2010-06-28 2012-05-23 Samsung Electronics Co., Ltd. Image device, receiving method of contents, server and providing method of contents
US9490998B1 (en) * 2010-11-08 2016-11-08 Google Inc. Network-based remote control
US9323713B2 (en) * 2011-11-14 2016-04-26 Screenovate Technologies Ltd. Method for automatic establishing wireless connectivity between a mobile wireless device and a target screen for multimedia data streaming
US9026666B2 (en) 2012-02-14 2015-05-05 Avaya Inc. Communication session cloning using barcodes
KR20130106684A (ko) * 2012-03-20 2013-09-30 삼성전자주식회사 홈 스크린 공유 방법
US9632648B2 (en) * 2012-07-06 2017-04-25 Lg Electronics Inc. Mobile terminal, image display device and user interface provision method using the same
WO2014157839A1 (en) * 2013-03-26 2014-10-02 Samsung Electronics Co., Ltd. Terminal apparatus mountable in vehicle, mobile device for working with the terminal apparatus, and methods for providing service thereof
US20140325561A1 (en) * 2013-04-24 2014-10-30 Synchronoss Technologies, Inc. Effortless linking and viewing for cloud-based sharing of media on remote viewing devices and a systme thereof
RU2629562C1 (ru) * 2013-12-26 2017-08-30 Сейко Эпсон Корпорейшн Система передачи и отображения видео
KR102263481B1 (ko) * 2014-02-07 2021-06-11 삼성전자 주식회사 사용자단말기 및 그 제어방법
CN107251565B (zh) * 2014-07-11 2021-04-27 惠普发展公司，有限责任合伙企业 云服务器、控制设备、输出设备、用于配对设备的方法和包括它们的云系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140208205A1 (en) * 2000-11-10 2014-07-24 Trio Systems Llc System and method for creating and posting media lists for purposes of subsequent playback
WO2012044676A2 (en) * 2010-10-01 2012-04-05 Imerj, Llc Application mirroring using multiple graphics contexts
WO2012150744A1 (ko) * 2011-05-04 2012-11-08 주식회사 인프라웨어테크놀러지 어플리케이션 클론 실행 방법, 컴퓨터로 판독가능한 기록매체, 및 이를 지원하는 클론단말
WO2014189289A1 (ko) * 2013-05-21 2014-11-27 주식회사 알티캐스트 연관 서비스 제공 방법 및 장치

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CHOI, HO SEOP: "SAMSUNG, Published in New Remote Controller for Smart TV", BLOTER, 2 January 2014 (2014-01-02), XP009504651, Retrieved from the Internet <URL:http://www.bloter-net/archives/175856> *
LEE, SEOK WON: "From NEXUS6 To Player, What is changed?", TECHHOLIC, 7 October 2014 (2014-10-07), XP055465976, Retrieved from the Internet <URL:http://techholic.co.kr/archives/23510> *
See also references of EP3319326A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019164339A1 (en) * 2018-02-23 2019-08-29 Samsung Electronics Co., Ltd. Electronic device and method for sharing screen data
US11200018B2 (en) 2018-02-23 2021-12-14 Samsung Electronics Co., Ltd. Electronic device and method for sharing screen data

Also Published As

Publication number Publication date
EP3319326A4 (en) 2019-02-27
CN107925791A (zh) 2018-04-17
US20180205983A1 (en) 2018-07-19
EP3319326B1 (en) 2021-05-19
EP3319326A1 (en) 2018-05-09
CN107925791B (zh) 2021-12-14
US11134294B2 (en) 2021-09-28

Similar Documents

Publication Publication Date Title
WO2017003007A1 (ko) 영상표시장치 및 이동 단말기
WO2017111321A1 (ko) 영상표시장치
WO2014042445A1 (en) Display apparatus and method for controlling display apparatus thereof
WO2019168380A1 (en) Electronic device
WO2021101260A1 (en) Display device, mobile device, and screen mirroring method of display device
WO2018021885A1 (en) Remote control device and image display apparatus having the same
WO2019168383A1 (en) Electronic device
WO2016035984A1 (en) Electronic device and method for operating the same
WO2015102284A1 (en) User terminal apparatus and control method thereof
WO2018236103A1 (en) IMAGE DISPLAY APPARATUS
WO2016104952A1 (en) Display apparatus and display method
WO2017146438A1 (en) Display apparatus and method of setting operating channel of the same
WO2021132757A1 (ko) 디스플레이 장치
WO2016093510A1 (en) Display apparatus and display method
WO2017164656A2 (en) Display device and operating method thereof
WO2021117953A1 (ko) 디스플레이 장치
WO2018048098A1 (en) Portable camera and controlling method therefor
WO2018088667A1 (en) Display device
WO2023163322A1 (ko) 영상표시장치, 및 서버
WO2021137629A1 (en) Display device, mobile device, video calling method performed by the display device, and video calling method performed by the mobile device
WO2016035983A1 (ko) 영상제공장치, 및 그 동작방법
WO2016111488A1 (en) Display apparatus and display method
WO2022050785A1 (ko) 디스플레이 기기 및 그의 동작 방법
WO2021137333A1 (ko) 디스플레이 장치
WO2021117954A1 (ko) 디스플레이 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15897229

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15741439

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2015897229

Country of ref document: EP