WO2019074181A1 - 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법 - Google Patents

영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법 Download PDF

Info

Publication number
WO2019074181A1
WO2019074181A1 PCT/KR2018/005630 KR2018005630W WO2019074181A1 WO 2019074181 A1 WO2019074181 A1 WO 2019074181A1 KR 2018005630 W KR2018005630 W KR 2018005630W WO 2019074181 A1 WO2019074181 A1 WO 2019074181A1
Authority
WO
WIPO (PCT)
Prior art keywords
display device
signal
remote controller
image
image processing
Prior art date
Application number
PCT/KR2018/005630
Other languages
English (en)
French (fr)
Inventor
김동욱
김관영
윤승일
윤현규
허재명
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US16/650,531 priority Critical patent/US11011054B2/en
Publication of WO2019074181A1 publication Critical patent/WO2019074181A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C23/00—Non-electrical signal transmission systems, e.g. optical systems
    • G08C23/04—Non-electrical signal transmission systems, e.g. optical systems using light waves, e.g. infrared
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/411—Peripherals receiving signals from specially adapted client devices having similar hardware or software capabilities as the client device itself, e.g. a first STB connected to a second STB
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221—Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42225—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details characterized by types of remote control, e.g. universal remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42226—Reprogrammable remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/92—Universal remote control

Definitions

  • the present invention relates to an image processing apparatus that processes an image received from a video source and provides the processed image to a display apparatus, a display apparatus including the same, and a control method thereof.
  • an external device such as a set-top box or an image processing device enters a room
  • an infrared (IR) receiver is blocked, and the user can not control the external device with the IR remote controller.
  • a display device which is always exposed to the outside receives a signal of a remote controller and transmits a signal to various external devices.
  • the display device can not normally transmit the signal of the remote controller to the external device, and the remote controller is not operated according to the movement of the external device, .
  • the present invention has been made in view of the above-mentioned needs, and it is an object of the present invention to appropriately convert a mode of a remote controller so that a user can conveniently control a display device and external devices regardless of various positional movements of external devices.
  • a display system including a display device and an image processing apparatus, the display system including a display unit for displaying a control signal for controlling an external video source device corresponding to a signal received from a remote controller, And an image processing device for processing the image received from the image source device and transmitting the processed image to the display device and transmitting the control signal received from the display device to the image source device, ,
  • the image processing apparatus identifies a state change of the display device in response to the transmission of the control signal and transmits a signal for changing the operation mode of the remote controller to the display device if a change is not recognized, The operation mode of the remote controller And transmits the received signal to the remote controller when the signal for changing is received.
  • the operation mode of the remote controller includes a first operation mode for transmitting a BT signal and a second operation mode for transmitting an IR signal
  • the control signal is transmitted from the remote controller operating in the first operation mode to the display device
  • the control signal is a control signal corresponding to the received BT signal
  • the image processing apparatus transmits a signal for changing the remote controller to the second operation mode if the state change of the display device is not identified corresponding to the transmission of the control signal To the display device.
  • control signal transmitted from the image processing apparatus to the image source apparatus includes an IR signal.
  • the image processing apparatus when the remote controller is operated in the second operation mode, the image processing apparatus, at least, of the image source apparatus and the image processing apparatus, Provides a UI that guides you to change one location.
  • the image processing apparatus further comprises a control code storage unit for storing control code set information of the image source device, and for generating a control signal corresponding to a signal received from the remote controller based on the stored information, Lt; / RTI >
  • the image processing apparatus may further include at least one of a channel information area, a broadcasting company logo area, a mute state and a volume control area generated when a channel is changed, To identify a change in state of the display device.
  • An image processing apparatus processes an image received from a video source apparatus and transmits the processed image to a display apparatus and receives a control signal for controlling the image source apparatus from the communication unit and the display apparatus, Wherein the processor identifies a change in state of the display device in response to the transmission of the control signal and if the change is not identified, And transmits a signal for changing the mode to the display device.
  • the operation mode of the remote controller includes a first operation mode for transmitting a BT signal and a second operation mode for transmitting an IR signal, and the control signal is transmitted from the remote controller, which operates in the first operation mode,
  • the controller is configured to control the display to display a signal for changing the remote controller to the second operation mode if the status change of the display device is not identified corresponding to the control signal transmission, Lt; / RTI >
  • control signal transmitted to the image source device through the communication unit includes an IR signal.
  • the processor according to another embodiment of the present invention provides a UI for guiding the change of the position of at least one of the image source apparatus and the image processing apparatus when the state change of the display apparatus is not identified.
  • a method for controlling a video source apparatus comprising: a storage unit for storing control code set information of the image source apparatus; And controls the communication unit to transmit to the image source device.
  • the processor is configured to display, on the basis of at least one of a channel information area of a video output to the display device, a broadcasting company logo area, a mute state generated upon channel change, And identifies a state change of the display device.
  • a method of controlling an image processing apparatus that processes an image received from an image source apparatus and transmits the processed image to a display apparatus includes receiving a control signal for controlling the image source apparatus from the display apparatus, Transmitting a control signal to the image source device; identifying a change in state of the display device in response to the control signal transmission; and, if a change is not identified, Lt; / RTI >
  • the user can control the display device and the external device continuously without any additional operation even if the position of the external device changes, thereby improving convenience for the user.
  • FIG. 1 illustrates a display system according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the configuration of an image processing apparatus according to an embodiment of the present invention.
  • FIG. 3 is a view for explaining system operation according to a change of position of external devices according to an embodiment of the present invention.
  • FIG. 4 is a block diagram illustrating an example of a detailed configuration of an image processing apparatus according to an embodiment of the present invention.
  • FIG. 5 is a view for explaining an image processing apparatus according to an embodiment of the present invention.
  • FIG. 6 is a block diagram showing the configuration of a display apparatus and an image processing apparatus according to an embodiment of the present invention.
  • FIG. 7 is a view for explaining an image source apparatus 300 according to an embodiment of the present invention.
  • FIG. 8 is a view for explaining a UI for guiding the change of the position of at least one of the image processing apparatus and the image source apparatus according to the embodiment of the present invention.
  • FIG. 9 is a flowchart illustrating a method of controlling an image processing apparatus according to an embodiment of the present invention.
  • FIG. 10 is a view for explaining the operation of the display system when the remote controller according to the embodiment of the present invention initially operates in the first operation mode.
  • 11 is a view for explaining the operation of the display system when the remote controller according to the embodiment of the present invention initially operates in the second operation mode.
  • FIG. 1 is a schematic diagram showing a configuration of a display system according to an embodiment of the present invention.
  • a display system 1000 includes a display device 100, an image processing device 200, an image source device 300, and a remote controller 400. As shown in FIG.
  • the display device 100 can be implemented so as to be controllable by the image processing apparatus 200 using the remote control signal of the remote controller 400.
  • the display device 100 may be implemented as a TV. However, it has a display function such as a large format display (LFD), a digital signage (digital signboard), a DID (Digital Information Display), a video wall, a projector display, And may be implemented in various types of electronic devices that are controllable by the computer 200.
  • LFD large format display
  • DID Digital Information Display
  • video wall a projector display
  • the image processing apparatus 200 may be configured to process the image received from the image source apparatus 300 and provide the processed image to the display apparatus 100. At this time, the image processing apparatus 200 can perform communication with the display apparatus 100 using wired / wireless communication. For example, if wired communication is used, communication may be performed using a transparent optical cable for a clean appearance.
  • the image processing apparatus 200 can perform communication with the image source apparatus 300 using wired / wireless communication.
  • the image processing apparatus 200 can perform communication with the image source apparatus 300 using infrared (IR) communication.
  • IR infrared
  • the image processing apparatus 200 processes various types of contents such as terrestrial waves, cable, and satellite broadcast contents, web contents, VOD contents, and the like, provided from the image source apparatus 300 and displays them on the display device 100 can do.
  • the image source apparatus 300 provides the image to the image processing apparatus 200.
  • the image source device 300 may be a variety of external devices capable of providing image data such as a set top box, a set top PC, a DVD player, a Blu ray player, a USB, a solid state drive (SSD) . ≪ / RTI >
  • the video source apparatus 300 can be implemented in a form that can be operated through various remote control devices such as a remote controller dedicated to a video source apparatus, an integrated remote controller, and the like.
  • the remote controller 400 may include control command codes for a plurality of control target devices on one remote controller, and control the target devices individually or simultaneously.
  • the remote controller 400 can control various devices through wired / wireless connection.
  • the wireless connection method can be implemented in various forms such as BT (BlueTooth), IR (Infrared), WI-FI (Wireless Fidelity), Zigbee, Beacon and NFC (near field communication).
  • the remote controller 400 may be implemented to perform various wired / wireless communication with the display device 100, the image processing device 200, and the image source device 300.
  • the display apparatus 100 may be exposed to the outside, and the image processing apparatus 200 and the image source apparatus 300 may be hidden in furniture or the like.
  • the remote controller 400 can operate in a mode (hereinafter referred to as a first operation mode) in which a remote control signal is transmitted as a BT (Bluetooth) signal.
  • a mode hereinafter referred to as a first operation mode
  • the first operation mode may be a mode initially set by the manufacturer, but the operation mode may be changed according to a user command or an external command.
  • the remote controller 400 transmits the corresponding remote controller BT signal to the display device 100 and the display device 100 transmits the remote controller BT signal to the image processing apparatus 200.
  • the image processing apparatus 200 may transmit the control command corresponding to the control signal to the image source apparatus 300 so that the user can control the image source apparatus 300 have.
  • the display apparatus 100 and the image source apparatus 300 may be exposed to the outside, and the image processing apparatus 200 may be hidden in furniture or the like.
  • the remote controller 400 can operate in a mode (hereinafter referred to as a second operation mode) in which a remote control signal including a control command corresponding to the control code set of the video source apparatus 300 is transmitted as an IR have.
  • a second operation mode a mode in which a remote control signal including a control command corresponding to the control code set of the video source apparatus 300 is transmitted as an IR have.
  • the remote controller 400 can be switched to the second operation mode according to a predetermined event during operation in the first operation mode, and a detailed description thereof will be described later.
  • the remote controller 400 when the user operates the remote controller 400, the remote controller 400 directly transmits a control signal corresponding to the control code set stored in the video source device 300 to the video source device 300,
  • the video source apparatus 300 can be directly controlled according to the control command corresponding to the signal.
  • the display apparatus 100 and the image processing apparatus 200 transmit signals transmitted from the remote controller 400 through a communication unit (not shown) Can be detected.
  • IR sniffing is performed to detect that there is an abnormality in the remote control signal transmission when the remote controller 400 transmits a remote controller signal for changing the channel to the image source apparatus 300 but the channel can not be changed .
  • the inter-device communication method of the present invention is not limited to BT or IR communication. Similar to the BT communication method such as BT and the IR communication, similar communication in which the transmission quality decreases when there is an obstacle in the signal transmission interval Method.
  • FIG. 2 is a block diagram showing the configuration of an image processing apparatus according to an embodiment of the present invention.
  • the image processing apparatus 200 includes a communication unit 210, a processor 220, and a storage unit 230.
  • the communication unit 210 performs communication with the display device 100, the video source device 300, and the remote controller 400.
  • the communication unit 210 may be a communication unit such as a Bluetooth (BlueTooth), an Infrared (IR), a Wireless Fidelity (WI-FI), a Zigbee, a Beacon, a near field communication (NFC), a WAN, , USB, MHL, AES / EBU, optical, coaxial, and the like.
  • the processor 220 controls the overall operation of the image processing apparatus 200.
  • the processor 220 may be implemented as a digital signal processor (DSP), a microprocessor, or a TCON (Time Controller) for processing digital signals, but is not limited thereto
  • DSP digital signal processor
  • MCU microcontroller unit
  • MPU micro processing unit
  • AP application processor
  • AP communication processor
  • ARM processor or may be defined in terms of the term.
  • the processor 140 may be implemented as a system on chip (SoC) or a large scale integration (LSI) with a built-in processing algorithm Or may be implemented as a field programmable gate array (FPGA).
  • SoC system on chip
  • LSI large scale integration
  • FPGA field programmable gate array
  • the processor 220 controls the display device 100 to display an image using the image data provided from the image source device 300.
  • the video data may be embodied by various types of video data such as terrestrial broadcasting, cable broadcasting, satellite broadcast video, web content video, and VOD content video.
  • the processor 220 When the display device 100 receives a remote control signal for controlling the video source device 300 from the remote controller 400, the processor 220 generates a remote control signal for controlling the video source device from the display device 100 And transmits the received control signal to the image source apparatus 300.
  • the image source apparatus 300 receives the control signal from the image source apparatus 300, At this time, the remote controller 400 operates in the first operation mode.
  • the control signal may include at least one of a signal including a control code included in the received remote control signal and identification information for identifying a control code included in the remote control signal.
  • the processor 220 when the processor 220 receives the BT signal from the remote controller 400 operating in the first operation mode, the processor 220 transmits a control signal (e.g., an IR signal) corresponding to the BT signal to the image source apparatus 300, Lt; / RTI > This is because the BT signal can be received only by the display apparatus 100 and the image source apparatus 300 can not receive the BT signal.
  • a control signal e.g., an IR signal
  • the processor 220 when the processor 220 receives the IR signal from the remote controller 400 operating in the second operation mode, the processor 220 may not transmit the corresponding signal to the image source apparatus 300. This is because when the image source apparatus 300 receives the IR signal, the image source apparatus 300 can duplicate and control the same remote control signal.
  • the processor 220 may identify a state change of the display device 100 corresponding to the received control signal. If the state change of the display device 100 is not identified, the processor 220 may transmit a signal to the display device 100 to change the operation mode of the remote controller 400 that transmitted the remote control signal. Thereafter, when a signal for changing the operation mode of the remote controller 400 is received, the display device 100 can transmit the received signal to the remote controller 400.
  • the state change of the display device 100 may include at least one of a video output state change and a voice output state change.
  • the processor 220 may generate at least one of a channel information area of the image output to the display device 100, a broadcasting company logo area, a mute state generated upon channel change, a volume control area, It is possible to identify a change in the output state of the video or audio of the display device 100 based on one.
  • the display device 100 receives the channel change remote control signal from the remote controller 400 and transmits it to the processor 220.
  • the processor 220 transmits a control signal for changing the channel to the image source apparatus 300.
  • the processor 220 captures and acquires an image of the display device 100 to confirm whether the display device 100 displays a channel-changed image from the image source device 300.
  • the processor 220 also captures and acquires an image displayed on the display device 100 before receiving the channel change remote control signal and transmitting the control signal to the image display device 300. Accordingly, it is possible to confirm whether or not the output image has been changed before and after the display apparatus 100 receives the remote control signal.
  • only a part of the image output from the display device 100 may be captured, and all images may be captured.
  • the processor 220 can identify whether the image output before and after the display apparatus 100 receives the remote control signal is an image of the same channel based on the image processing job.
  • the image output to the display device 100 should include an area including channel information according to the channel change .
  • the processor 220 can check whether the channel is normally changed based on an image or text that can identify the channel information, such as a channel information area and a broadcasting company logo area in one acquired image area. For example, whether the MBC logo displayed on one side of the screen has been changed to the KBS logo, whether the channel number is changed from channel number 11 to channel number 12, or whether the program name is changed from "Infinite Challenge" to the program name "1 night 2 days” And so on.
  • various information that can identify the channel may be used in addition to the broadcasting company logo, the channel number, and the program title.
  • An image or text capable of identifying channel information such as a channel information area and a broadcaster logo area can be used to recognize an outline of the area, recognize the color of the area, or perform various known image processing operations such as text recognition (OCR) Can be performed.
  • OCR text recognition
  • the processor 220 may identify whether or not the channel is changed based on whether or not the sound output from the display device 100 is muted. This is because, for example, there is a video mute interval or a sound mute interval according to a frequency tuning time when a broadcast channel is changed.
  • the processor 220 continuously captures images before and after transmitting the remote control signal to the image processing apparatus 300, and identifies the occurrence of the video mute interval, thereby identifying whether the channel change is normally performed.
  • the processor 220 may analyze the audio signal transmitted from the display device 100 to identify an audio mute interval appearing for a short time, and then identify whether the channel change is normally performed.
  • the remote controller 400 may include a microphone.
  • the remote controller 400 may time-tag the sound including the sound mute output from the display device 100 in real time and transmit the sound to the processor 220 , It is possible to identify whether the sound mute occurs before or after the time when the processor 200 receives the remote control signal.
  • the processor 220 can receive the control signal It can be identified as being absent.
  • the processor 220 determines whether the output image obtained from the display device 100 includes a volume control area using various known image processing methods, and identifies whether the output volume is changed based on the determined volume control area .
  • the processor 220 can identify whether the volume is changed by checking whether there is a change in a volume control bar included in the volume control area, a number indicating a volume size, or the like. In some cases, if the image processing apparatus 200 includes a microphone, the processor 220 may identify whether the volume is changed based on the size of the audio received through the microphone.
  • the processor 220 may perform the IR sniffing and not transmit the control command to the video source apparatus 300. [ The specific operation will be described later with reference to FIG.
  • FIG 3 is a view for explaining a system operation according to a location change of external devices according to an embodiment of the present invention.
  • the initial operation mode of the remote controller 400 is a first operation mode.
  • concealment refers to a situation where short-range communication such as IR signals is restricted from one side to the other by a physical obstacle or the like.
  • the remote control signal by the remote controller 400 operating in the first operation mode can be transmitted to the display device 100 even if the external devices are hidden.
  • the display apparatus 100 can transmit a control signal corresponding to a remote control signal to the image processing apparatus 200 by wire, and the image processing apparatus 200 transmits a control command corresponding to the control signal IR signal or the like to the image source apparatus 300. Since the image processing apparatus 200 and the image source apparatus 300 are hidden in one space, it is possible to communicate not only by wire communication but also by short-range wireless communication such as IR and NFC.
  • the display device 100 can be connected to the image processing apparatus 200 through a transparent optical cable, so that the wiring does not seem complicated.
  • the image processing apparatus 200 and the image source apparatus 300 can not perform the IR communication, and the processor 220 can not perform the IR communication with the image source apparatus 300, Can not be controlled.
  • 3B shows a state in which the image source apparatus 300 is located in a space separated from the image processing apparatus 200 when the user cleans the storage space. That is, the image processing apparatus 200 is located inside the storage unit and is hidden, and the image source apparatus 300 is located outside the storage unit and is not hidden.
  • the display apparatus 100 can transmit the control signal corresponding to the remote control signal to the image processing apparatus 200 by wire, but the image processing apparatus 200 and the image source apparatus 300 can perform a short-
  • the image processing apparatus 200 can not transmit a control command corresponding to the control signal to the image source apparatus 300 due to a physical obstacle or the like. Accordingly, the user can not perform the same control operation through the remote controller 400 when the video source apparatus 300 is located outside.
  • the image processing apparatus 200 is configured to transmit the remote control signal to the image source apparatus 300 without sending the remote control signal to the display apparatus 100,
  • the control mode of the remote controller 400 may be changed to the second operation mode, and a detailed method of changing the control mode will be described later with reference to FIG.
  • the remote controller may initially operate in one of the first operation mode and the second operation mode, and the image processing apparatus 200 may be in a concealed state or a non-concealed state,
  • the device 300 may also be in the hidden state or in the non-hidden state, so that a total of eight cases can be generated.
  • FIG. 3 (a) shows the number of cases in which the initial remote controller has the first operation mode and operates normally when the image processing apparatus 200 and the image source apparatus 300 are concealed
  • Fig. 3 (b) shows a case where the initial remote controller has the first operation mode, the image processing apparatus 200 is hidden, and the image source apparatus 300 is not hidden, so that the operation mode of the remote controller 400 changes Represents the number of cases.
  • the remote controller initially operates in the first operation mode and the image processing apparatus 200 and the image source apparatus 300 are not concealed.
  • the image processing apparatus 200 and the image source apparatus 300 are capable of short-distance communication such as IR, the state of the display apparatus 100 is changed according to the user's input, The remote controller 400 is kept in the first operation mode without generating a signal for changing the operation mode of the remote controller 400.
  • the remote controller initially has the second operation mode and the image processing apparatus 200 and the image source apparatus 300 are not concealed.
  • the image processing apparatus 200 and the image source apparatus 300 are capable of short-range communication such as IR, the state of the display apparatus 100 is changed according to the user's input, and the image processing apparatus 200 includes the remote controller 400
  • the remote controller 400 can be kept in the second operation mode without generating a signal for changing the operation mode of the remote controller 400.
  • the display apparatus 100 and the image processing apparatus 200 may sniff the remote control IR signal. However, the image processing apparatus 200 may not provide the control command corresponding to the remote control IR signal to the image source apparatus 300 Do not.
  • the remote controller initially has the second operation mode, the image processing apparatus 200 is hidden, and the image source apparatus 300 may not be hidden.
  • the image source apparatus 300 transmits the changed image data to the image processing apparatus 200,
  • the state of the display device 100 is changed.
  • the image processing apparatus 200 can identify that the state of the display apparatus 100 has been changed as the remote controller IR signal is transmitted. That is, it is possible to identify that the state of the display device 100 has changed according to the user command inputted to the remote controller 400 operating in the second operation mode. Therefore, the image processing apparatus 200 does not generate a signal for changing the operation mode of the remote controller 400, and the remote controller 400 can be maintained in the second operation mode.
  • the remote controller may initially have the first operation mode, the image processing apparatus 200 may not be hidden, and the image source apparatus 300 may be hidden.
  • the remote controller 400 can not control the image source apparatus 300 in any operation mode.
  • the remote control BT signal is transmitted to the image processing apparatus 200 via the display device 100.
  • the image processing apparatus 200 and the image source apparatus 300 are communicated by a short distance communication method such as IR or NFC, the image processing apparatus 200 transmits a control command corresponding to the control signal to the image source apparatus 300 ). ≪ / RTI > Accordingly, the image source apparatus 300 can not provide the changed image data corresponding to the remote control BT signal. Thereafter, the image processing apparatus 200 identifies that the state change of the display device 100 has not occurred even though the remote control BT signal is inputted.
  • the image processing apparatus 200 determines whether the image processing apparatus 200 is hidden And judges whether or not it is self-determined. That is, if the image processing apparatus 200 transmits a predetermined probe request to the remote controller 400 and the remote controller 400 transmits a probe response corresponding to the probe request to the image processing apparatus 200, Can be judged as not being concealed. In this way, in this embodiment, it is determined that the image processing apparatus 200 is not hidden.
  • the remote controller 400 When the remote controller 400 operates in the first operation mode and the image processing apparatus 200 is not hidden and the state of the display device 100 is not changed, Mode, there is no way to control the image source device 300 according to the input of the user because the state of the display device 100 does not change.
  • the reason why the state of the display device 100 does not change even when the remote controller 400 operates in the second operation mode is that the image processing device 200 and the image source device 300 are located at positions where IR communication, Because it was settled.
  • the image processing apparatus 200 receives the control signal corresponding to the remote control BT signal from the remote controller 400, the image processing apparatus 200 is not hidden, and the image processing apparatus 200 receives the control signal corresponding to the remote controller BT signal from the display apparatus 100 To the display device 100, a UI for guiding the user to change the position of at least one of the image processing apparatus 200 and the image source apparatus 300.
  • a UI for guiding the user to change the position of at least one of the image processing apparatus 200 and the image source apparatus 300.
  • the guide UI can be displayed on the display device 100 as shown in FIG.
  • the remote controller initially has the second operation mode, the image processing apparatus 200 is not hidden, and the image source apparatus 300 may be hidden.
  • the remote controller 400 can not control the image source apparatus 300 in any operation mode.
  • the user can control the image source device 300 according to the input of the user There is no way.
  • a UI that guides the user to change the position of at least one of the image processing apparatus 200 and the image source apparatus 300 is provided to the display apparatus 100.
  • the guide UI can be displayed on the display device 100 as shown in FIG.
  • the remote controller initially has the second operation mode and the image processing apparatus 200 and the image source apparatus 300 are concealed.
  • the display apparatus 100 may provide a control command to the image processing apparatus 200 based on the sniffed IR signal (IR sniffing).
  • the control command includes an instruction that the remote controller 400 operating in the second operation mode, together with the information that the remote controller 400 has transmitted the remote control IR signal, does not provide the control operation input by the user to the image source apparatus 300.
  • the image processing apparatus 200 can detect that the remote controller 400 operating in the second operation mode has not transmitted the remote control IR signal and there is no state change displayed on the display apparatus 100 . Accordingly, the image processing apparatus 200 generates a signal for changing the operation mode of the remote controller 400, and transmits the signal to the remote controller 400 through the display device 100. Based on the signal for changing the received operation mode, the remote controller 400 changes the operation mode to the first control mode.
  • the image processing apparatus 200 may change the operation mode of the remote controller 400 so as to reduce the inconvenience experienced by the user as the positions of the image processing apparatus 200 and the image source apparatus 300 are changed , And a UI can be provided.
  • FIG. 4 is a block diagram illustrating an example of a detailed configuration of an image processing apparatus according to an embodiment of the present invention.
  • the image processing apparatus 200 includes a communication unit 210, a processor 220, a storage unit 230, and an external interface 240.
  • a communication unit 210 for communicating with a communication apparatus.
  • the processor 220 includes a CPU 221, a ROM (or non-volatile memory) storing a control program for controlling the display system 1000, and a display system 1000 that stores data input from outside the display system 1000 (RAM, or volatile memory) used as a storage area corresponding to various operations performed in the storage system 1000,
  • the processor 220 may execute an OS (Operating System), a program, and various applications stored in the storage unit 230 when a preset event occurs.
  • the processor 220 may include single core, dual core, triple core, quad core, and cores thereof.
  • the CPU 221 accesses the storage unit 230 and performs booting using the O / S stored in the storage unit 230. [ Various operations are performed using various programs, contents, data, and the like stored in the storage unit 230 and the external interface 240.
  • the storage unit 230 may store various data, programs, or applications for driving / controlling the display system 1000.
  • the storage unit 230 may store a control program for controlling the display system 1000 and the processor 220, applications, databases, or related data originally provided or downloaded from a manufacturer.
  • the storage unit 230 may provide a UI according to various embodiments of the present invention, and may store a program for performing an operation related to the UI.
  • the storage unit 230 may be implemented as an internal memory such as a ROM or a RAM included in the processor 220 or may be implemented as a separate memory from the processor 220.
  • the storage unit 230 may be implemented as a memory embedded in the display device 100, or a memory removably attached to the display device 100, depending on the purpose of data storage.
  • data for driving the display device 100 may be stored in a memory embedded in the display device 100, and data for an extension function of the display device 100 may be detached and attached to the display device 100 It can be stored in a possible memory.
  • the memory embedded in the display device 100 may be implemented in the form of a nonvolatile memory, a volatile memory, a hard disk drive (HDD), or a solid state drive (SSD).
  • the storage unit 230 includes a control code set for controlling the video source device 300 and information about a control command corresponding to each control code included in the control code set May be stored. Accordingly, the control signal corresponding to the signal received from the remote controller 400 can be transmitted to the video source apparatus 300 based on the stored control code set information.
  • the processor 220 may communicate with the external interface 240.
  • the external interface 240 may be a wired interface or an air interface.
  • a wired interface such as a USB (Universal Serial Bus) or an air interface such as Bluetooth.
  • FIG. 5 is a view for explaining an image processing apparatus according to an embodiment of the present invention.
  • the image processing apparatus 200 may include various external terminals 211 to 214 and an IR transceiver 215.
  • Various types of information such as an external interface, image data, voice data, and text data can be received through the various external terminals 211 to 214.
  • the external terminal 211 may be connected to the display device 100 through a transparent optical cable
  • the external terminal 212 may be connected to an HDMI cable for receiving image data
  • a USB memory including an external interface may be connected from the device 300 and an external terminal 214 may be connected to the SSD to acquire image data stored in the SSD.
  • the IR transmitting and receiving unit 215 can perform IR communication with various external devices.
  • IR communication with the IR transmitter / receiver of the image source apparatus 300 can be performed.
  • the image processing apparatus 200 may generate a control command in the processor 220 and transmit a control signal corresponding to the control command to the image source apparatus 300 through the IR transmission and reception unit 215 using the IR communication.
  • the IR transmitting / receiving unit 215 can IR-sniff the remote control IR signal of the remote controller 400 operating in the second operation mode.
  • the control command corresponding to the IR sniffed signal is not provided to the image source apparatus 300. If the image processing apparatus 200 provides a control command corresponding to the remote control IR signal to the image source apparatus 300, the image source apparatus 300 transmits the same control command as the remote control IR signal received by the image source apparatus 300 itself This is because it can be performed twice and inconvenience to the user. Meanwhile, it is possible to identify that the remote controller 400 has transmitted the remote control IR signal in response to the user input through the IR sniffing. If the state change of the display device 100 is not identified even though the remote control IR signal has been transmitted, the processor 220 may generate an instruction to change the operation mode of the remote controller 400. [
  • FIG. 6 is a block diagram showing the configuration of a display apparatus and an image processing apparatus according to an embodiment of the present invention.
  • the display device 100 may include a communication unit 110, a processor 120, a display unit 130, and a storage unit (not shown).
  • the communication unit 110 is configured to perform wireless or wire communication with various external devices.
  • the communication unit 110 includes an input / output port for wired connection with an external device such as the image processing device 200, and various wireless communication chips such as a Wi-Fi chip, a Bluetooth chip, an NFC chip, .
  • the communication unit 110 can communicate with the image processing apparatus 200 and can receive image data from the image communication apparatus 200.
  • the communication unit 110 may receive a remote control signal of the remote controller 400 and may transmit a control signal corresponding to the remote control signal to the image processing apparatus 200 to control the image source apparatus 300.
  • the remote controller 400 transmits a remote controller IR signal to be transmitted directly to the image source apparatus 300
  • the image processing apparatus 200 can identify whether the image source apparatus 300 performs an operation corresponding to the remote control IR signal by the IR transmitting unit 110 including the transmitting and receiving unit.
  • the processor 120 is a configuration for controlling the overall operation of the display apparatus 100.
  • the processor 120 may include a CPU, a RAM, a ROM, and a system bus.
  • the ROM is a configuration in which a command set for booting the system is stored.
  • the CPU copies the operating system stored in the storage unit of the display device 100 to the RAM according to the command stored in the ROM, executes the O / .
  • the CPU can copy various applications stored in the storage unit to the RAM, execute it, and perform various operations.
  • the processor 120 has been described as including only one CPU in the above description, the processor 120 may be implemented by a plurality of CPUs (DSP, SoC, etc.).
  • the processor 120 communicates with the display apparatus 100 in accordance with a predefined communication method by the remote controller 400 operating in the first operation mode, State.
  • the interlocking may mean all the states in which the communication between the display device 100 and the remote controller 400 is initiated, such as an operation of initializing communication, an operation of forming a network, an operation of performing device pairing, and the like.
  • a peripheral device is searched through a DLNA (Digital Living Network Alliance) technology, and the device is paired with the searched device, have.
  • DLNA Digital Living Network Alliance
  • the processor 120 may generate control commands according to the different control modes of the remote controller 400.
  • the processor 120 transmits the image source apparatus 300 to the image processing apparatus 200 based on the remote controller IR signal It is possible to generate a control command that does not control.
  • the image processing apparatus 200 transmits a control command corresponding to the stored remote control IR signal to the image source apparatus 300
  • the image source apparatus 300 transmits the same control command as the remote control IR signal received by the image source apparatus 300 itself Because it gives the user a discomfort.
  • the display apparatus 100 transmits to the image processing apparatus 200 information indicating that a remote control IR signal for controlling the image source apparatus 300 has been received, and the image processing apparatus 200 transmits the information to the display apparatus 100, It is possible to identify that the video source apparatus 300 is hidden if there is no change in the output state.
  • the display device 100 may store a control code set corresponding to the video source device 300 in a storage unit and may store control information on a control command corresponding to the control code set in a storage unit ). ≪ / RTI > Accordingly, it is possible to identify the control command corresponding to the remote control IR signal based on the stored control information, and to identify that the received remote control signal is not the signal for the display device 100 but the remote control IR signal for the image source device 300 can do.
  • the display unit 130 may display various screens under the control of the processor 120.
  • the display unit 130 may include a liquid crystal display (LCD), an organic light-emitting diode (OLED), a liquid crystal on silicon (LCoS), a digital light processing (DLP), a quantum dot (QD) (Projector) or the like.
  • the display unit 130 may be implemented as a touch screen capable of sensing a user's touch operation.
  • the display unit 130 may display an image transmitted from the image processing apparatus 200. [ In addition, the display unit 130 may display various UI screens that are stored.
  • the display apparatus 100 can communicate with the communication unit 210 of the image processing apparatus 200 through the communication unit 110.
  • the communication unit 210 may transmit the image data acquired by the image processing apparatus 200 from the image source apparatus 300 to the communication unit 110 via wire communication.
  • the wired / wireless communication can be implemented in various forms as described above.
  • FIG. 7 is a view for explaining an image source apparatus 300 according to an embodiment of the present invention.
  • the image source apparatus 300 may include an IR transmitter /
  • the IR transmitting / receiving unit 311 may perform IR communication with the IR transmitting / receiving unit 215 of the image processing apparatus 200 to transmit / receive various control commands.
  • the IR transmitting and receiving unit 311 may receive a remote control signal for the image source device 300 or a remote control signal for the remote control 400 to perform a control operation corresponding to the remote control signal.
  • the image source apparatus 300 may include various external terminals 312, The video source apparatus 300 can transmit video data to the video processing apparatus 200 by connecting an HDMI cable to the external terminal 312 and connect a LAN cable to the external terminal 313 to transmit video from the online video provider Can be provided.
  • the present invention is not limited to these embodiments, and includes various embodiments that can provide images to the display device 100 or the image processing device 200 by receiving images.
  • FIG. 8 is a view for explaining a UI for guiding the change of the position of at least one of the image processing apparatus and the image source apparatus according to the embodiment of the present invention.
  • a situation may occur in which the image source apparatus 300 can not be controlled in the first operation mode and the second operation mode of the remote controller 400.
  • the remote source 400 can not control the image source apparatus 300.
  • the display device 100 may display a UI for guiding the display device 100 to pop up. Accordingly, even though the remote controller 400 is operated in the first operation mode and the second operation mode via the display device 100 and the remote controller signal is received through the display device 100, the display device 100 , It is possible to control the display device 100 to display the guide UI.
  • the present invention is not limited to the image and the phrase as shown in Fig. 8, and guides the image processing apparatus 200 and the image source apparatus 300 to the transmission / reception range of the communication method used for IR communication and mutual communication It can include any type of UI.
  • FIG. 9 is a flowchart illustrating a method of controlling an image processing apparatus according to an embodiment of the present invention.
  • the image processing apparatus 200 receives a control signal for controlling the image source apparatus 300 from the display apparatus 100 (S910).
  • the remote controller 400 operates in a first operation mode or a second operation mode and can transmit a remote control signal including a control signal. Thereafter, the image processing apparatus 200 transmits the received control signal to the image source apparatus 300 (S920). Thereafter, in response to the control signal transmission, the state change of the display device 100 is identified, and if the change is not identified, a signal for changing the operation mode of the remote controller 400 is transmitted to the display device 100 (S930) . Accordingly, the display device 100 transmits a signal for changing the operation mode to the remote controller 400 so that the operation mode of the remote controller 400 is changed.
  • FIG. 10 is a view for explaining the operation of the display system when the remote controller according to the embodiment of the present invention initially operates in the first operation mode.
  • the image processing apparatus 200 is hidden as shown in FIG. 3 (b), and in a state where the image source apparatus 300 is not hidden, a process of changing the operation mode of the remote controller 400 .
  • the remote controller 400 receives a user command (S1010). For example, commands such as channel up and volume down can be used. At this time, the remote controller 400 operates in the first operation mode. In response to the input user command, the remote controller 400 transmits the remote control BT signal to the display device 100 (S1011).
  • a user command For example, commands such as channel up and volume down can be used.
  • the remote controller 400 operates in the first operation mode.
  • the remote controller 400 transmits the remote control BT signal to the display device 100 (S1011).
  • the display apparatus 100 generates a control signal including a control command corresponding to the remote control BT signal (S1012).
  • the control command corresponds to a command of the user, and may be, for example, a command such as channel up or volume down to be transmitted to the video source apparatus 300.
  • the display apparatus 100 transmits the generated control signal to the image processing apparatus 200 (S1013).
  • the image processing apparatus attempts to transmit the control command included in the received control signal to the image source apparatus 300. [ Then, the state change of the display device 100 corresponding to the control signal is identified (S1014), thereby identifying whether the video source device 300 has received the control command corresponding to the control signal.
  • the image processing apparatus 200 is hidden, and if the image source apparatus 300 is not hidden, there is no change in the state of the display apparatus. This is because the video processing apparatus 200 and the video source apparatus 300 perform near-field communication such as IR or the like, so that the transmission quality is reduced due to an obstacle in the communication section.
  • the remote controller 400 After identifying that there is no state change of the display device 100, the remote controller 400 generates a signal for changing to the second operation mode of transmitting the IR signal (S1015).
  • the image processing apparatus 200 transmits a change signal to the display apparatus 100 in step S1016 and the display apparatus 100 transmits the change signal to the remote controller 400 in step S1017. Accordingly, the operation mode of the remote controller is changed to the second operation mode in which the IR signal is transmitted based on the control command included in the received change signal (S1018).
  • the remote controller 400 transmits the IR signal to the image source device 300 (S1019)
  • the image source device transmits the channel-up image signal or the volume-down image signal through the HDMI cable to the external control device
  • the display device 100 can display an image corresponding to the user command.
  • 11 is a view for explaining the operation of the display system when the remote controller according to the embodiment of the present invention initially operates in the second operation mode.
  • the remote controller 400 receives a user command (S1110). For example, commands such as channel up and volume down can be used. At this time, the remote controller 400 operates in the second operation mode. In response to the inputted user command, the remote controller 400 transmits the remote controller IR signal to the display device 100 (S1111). In general, when the remote controller 400 operates in the second operation mode, the IR transmitter transmits the IR signal to the image source device 300. However, since the display device 100 may include the IR receiver, IR signals can be received via IR sniffing.
  • the display apparatus 100 generates a control signal including a control command corresponding to the remote control IR signal (S1012).
  • the display device 100 transmits the generated control signal to the image processing apparatus 200 (S1113).
  • the control signal S1112 generated by the display device sends a control command indicating that the IR signal exclusively for the image source device has been received by the display device 100.
  • the image processing apparatus 200 does not send a control command such as channel up or volume down to the image source apparatus 300.
  • the remote controller 400 After identifying that there is no state change of the display apparatus 100, the remote controller 400 generates a signal for changing to the first operation mode in which the BT signal is transmitted (S1115).
  • the image processing apparatus 200 transmits the change signal to the display apparatus 100 in step S1016 and the display apparatus 100 transmits the change signal to the remote controller 400 in step S1117. Accordingly, the operation mode of the remote controller 400 is changed to the first operation mode in which the BT signal is transmitted based on the control command included in the received change signal (S1118).
  • the remote controller 400 transmits the BT signal to the display device 100 (S1119), a control command corresponding to the remote control BT signal is transmitted to the image source device (not shown) via the display device 100 and the image processing device 200 300).
  • the user can control the video source apparatus 300 without any additional setting even if the position of the video processing apparatus 200 or the video source apparatus 300 is changed, thereby enhancing user convenience .
  • the various embodiments described above can be implemented in a recording medium that can be read by a computer or a similar device using software, hardware, or a combination thereof.
  • the embodiments described herein may be implemented by the processor itself.
  • embodiments such as the procedures and functions described herein may be implemented with separate software modules. Each of the software modules may perform one or more of the functions and operations described herein.
  • the computer instructions for performing the processing operations according to various embodiments of the present disclosure described above may be stored in a non-transitory computer-readable medium.
  • Computer instructions stored on such non-volatile computer-readable media may cause a particular device to perform processing operations according to various embodiments described above when executed by a processor.
  • Non-transitory computer readable media is a medium that stores data for a short period of time, such as a register, cache, memory, etc., but semi-permanently stores data and is readable by the device.
  • Specific examples of non-transitory computer readable media include CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM, and the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Details Of Television Systems (AREA)

Abstract

디스플레이 시스템이 개시된다. 본 시스템은, 디스플레이 장치 및 영상 처리 장치를 포함하며, 리모콘으로부터 수신된 신호에 대응하여 외부의 영상 소스 장치를 제어하기 위한 제어신호를 영상 처리 장치로 전송하는 디스플레이 장치 및 영상 소스 장치로부터 수신된 영상을 처리하여 디스플레이 장치로 전송하고, 디스플레이 장치로부터 수신된 제어 신호를 영상 소스 장치로 전송하는 영상 처리 장치를 포함하며, 영상 처리 장치는 제어 신호 전송에 대응하여 디스플레이 장치의 상태 변화를 식별하고, 변화가 식별되지 않으면 리모콘의 동작 모드를 변경하기 위한 신호를 디스플레이 장치로 전송하며, 디스플레이 장치는 리모콘의 동작 모드를 변경하기 위한 신호가 수신되면, 수신된 신호를 리모콘으로 전송한다.

Description

영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
본 발명은 영상 소스로부터 수신된 영상을 처리하여 디스플레이 장치로 제공하는 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법에 관한 것이다.
전자 기술이 발달함에 따라, 셋탑 박스(set-top box), DVD, 오디오 등의 컨텐츠를 제공하는 다양한 외부 장치가 디스플레이 장치에 연결되어 사용되는 방안이 개발되고 있었다. 또한, 디스플레이 장치가 점차 얇아지면서 주요 프로세서 및 부품들은 외부 영상 처리 장치로 분리되어 외부 장치화가 이루어지고 있었다. 이러한 디스플레이 장치에 연결된 다양한 외부 장치는 가정 또는 업소의 인테리어를 해치는 문제가 있었다. 이에 따라 깔끔한 외관을 원하는 사용자들은 셋탑 박스 또는 디스플레이의 외부 영상 처리 장치 등의 외부 기기를 가구 내에 숨겨 외관상 디스플레이 장치만 보이는 상태를 선호하게 되었다.
그러나, 셋탑 박스 또는 영상 처리 장치 등의 외부 기기들이 가구 내에 들어가면 IR(Infrared) 수신부가 가려져 사용자가 IR을 이용한 리모콘으로 외부 기기를 제어할 수 없는 상황에 이르렀다. 이러한 문제를 해결하기 위해서 외부로 항상 노출되어 있는 디스플레이 장치가 리모콘의 신호를 받아 다양한 외부기기로 신호를 전송하기에 이르렀다.
하지만, 외부 기기의 위치가 다양하게 변하게 되면 디스플레이 장치가 리모콘의 신호를 정상적으로 외부기기에 전송할 수 없는 상황이 발생하여 외부 기기의 위치 이동에 따라 리모콘이 작동하지 않아 사용자가 불편함을 겪는 문제점이 있었다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은, 리모콘의 모드를 적절히 변환하여 외부 기기들의 다양한 위치 이동에 불구하고 사용자가 편리하게 디스플레이 장치 및 외부 기기들을 제어함에 있다.
상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 디스플레이 시스템은, 디스플레이 장치 및 영상 처리 장치를 포함하며, 리모콘으로부터 수신된 신호에 대응하여 외부의 영상 소스 장치를 제어하기 위한 제어신호를 상기 영상 처리 장치로 전송하는 디스플레이 장치 및 상기 영상 소스 장치로부터 수신된 영상을 처리하여 상기 디스플레이 장치로 전송하고, 상기 디스플레이 장치로부터 수신된 상기 제어 신호를 상기 영상 소스 장치로 전송하는 영상 처리 장치를 포함하며, 상기 영상 처리 장치는, 상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 변화가 식별되지 않으면 상기 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송하며, 상기 디스플레이 장치는, 상기 리모콘의 동작 모드를 변경하기 위한 신호가 수신되면, 상기 수신된 신호를 상기 리모콘으로 전송한다.
이 때, 상기 리모콘의 동작 모드는 BT 신호를 전송하는 제1 동작 모드 및 IR 신호를 전송하는 제2 동작 모드를 포함하며, 상기 제어 신호는 제1 동작 모드로 동작하는 상기 리모콘으로부터 상기 디스플레이 장치로 수신된 BT 신호에 대응하는 제어 신호이며, 상기 영상 처리 장치는, 상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 리모콘을 상기 제2 동작 모드로 변경하기 위한 신호를 상기 디스플레이 장치로 전송한다.
이 때, 상기 영상 처리 장치로부터 상기 영상 소스 장치로 전송되는 상기 제어 신호는 IR 신호를 포함한다.
본 발명의 다른 실시 예에 따른, 상기 리모콘이 상기 제2 동작 모드로 동작하는 경우, 상기 영상 처리장치는, 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 영상 소스장치 및 상기 영상 처리 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 제공한다.
본 발명의 또 다른 실시 예에 따른, 상기 영상 처리 장치는, 상기 영상 소스 장치의 제어 코드 셋 정보를 저장하며, 상기 저장된 정보에 기초하여 상기 리모콘으로부터 수신된 신호에 대응하는 제어 신호를 상기 영상 소스 장치로 전송한다.
본 발명의 또 다른 실시 예에 따른, 상기 영상 처리 장치는, 상기 디스플레이 장치에 출력된 영상의 채널 정보 영역, 방송사 로고 영역, 채널 변경 시 발생되는 뮤트(mute) 상태 및 볼륨 제어 영역 중 적어도 어느 하나에 기초하여 상기 디스플레이 장치의 상태 변화를 식별한다.
본 발명의 일 실시 예에 따른 영상 처리 장치는 영상 소스 장치로부터 수신된 영상을 처리하여 디스플레이 장치로 전송하며, 통신부 및 상기 디스플레이 장치로부터 상기 영상 소스 장치를 제어하기 위한 제어 신호를 수신하고, 상기 수신된 제어 신호를 상기 영상 소스 장치로 전송하도록 상기 통신부를 제어하는 프로세서를 포함하고, 상기 프로세서는, 상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 변화가 식별되지 않으면 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송한다.
이 때, 상기 리모콘의 동작 모드는, BT 신호를 전송하는 제1 동작 모드 및 IR 신호를 전송하는 제2 동작 모드를 포함하며, 상기 제어 신호는 제1 동작 모드로 동작하는 상기 리모콘으로부터 상기 디스플레이 장치로 수신된 BT 신호에 대응하는 제어 신호이며, 상기 프로세서는, 상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 리모콘을 상기 제2 동작 모드로 변경하기 위한 신호를 상기 디스플레이 장치로 전송한다.
이 때, 상기 통신부를 통하여 상기 영상 소스 장치로 전송되는 상기 제어 신호는 IR 신호를 포함한다.
본 발명의 다른 실시 예에 따른 상기 프로세서는, 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 영상 소스 장치 및 상기 영상 처리 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 제공한다.
본 발명의 또 다른 실시 예에 따르면 상기 영상 소스 장치의 제어 코드 셋 정보를 저장하는 저장부를 더 포함하며, 상기 프로세서는, 상기 저장된 정보에 기초하여 상기 리모콘으로부터 수신된 신호에 대응하는 제어 신호를 상기 영상 소스 장치로 전송하도록 상기 통신부를 제어한다.
본 발명의 또 다른 실시 예에 따르면 상기 프로세서는, 상기 디스플레이 장치에 출력된 영상의 채널 정보 영역, 방송사 로고 영역, 채널 변경 시 발생되는 뮤트(mute) 상태 및 볼륨 제어 영역 중 적어도 어느 하나에 기초하여 상기 디스플레이 장치의 상태 변화를 식별한다.
본 발명의 일 실시 예에 따른 영상 소스 장치로부터 수신된 영상을 처리하여 디스플레이 장치로 전송하는 영상 처리 장치의 제어 방법은, 상기 디스플레이 장치로부터 상기 영상 소스 장치를 제어하기 위한 제어 신호를 수신하는 단계, 상기 수신된 제어 신호를 상기 영상 소스 장치로 전송하는 단계 및 상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 변화가 식별되지 않으면 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송하는 단계를 포함한다.
상술한 바와 같이 본 발명의 다양한 실시 예에 따르면 외부 기기의 위치가 변하더라도 사용자는 별도의 조작 없이 계속적으로 디스플레이 장치 및 외부기기를 제어할 수 있으므로 사용자의 편의성이 향상된다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 시스템을 나타내는 도면이다.
도 2는 본 발명의 일 실시 예에 따른 영상 처리 장치의 구성을 나타내는 블럭도이다.
도 3은 본 발명의 일 실시 예에 따른 외부 장치들의 위치 변경에 따른 시스템 동작을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 영상 처리 장치의 세부 구성의 일 예를 나타내는 블럭도이다.
도 5는 본 발명의 일 실시 예에 따른 영상 처리 장치를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 디스플레이 장치와 영상 처리 장치의 구성을 나타내는 블럭도이다.
도 7은 본 발명의 일 실시 예에 따른 영상 소스 장치(300)를 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 영상 처리 장치 및 영상 소스 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 영상 처리 장치를 제어하는 방법을 설명하기 위한 흐름도이다.
도 10은 본 발명의 일 실시 예에 따른 리모콘이 초기에 제1 동작 모드로 동작할 때 디스플레이 시스템의 동작을 설명하기 위한 도면이다.
도 11은 본 발명의 일 실시 예에 따른 리모콘이 초기에 제2 동작 모드로 동작할 때 디스플레이 시스템의 동작을 설명하기 위한 도면이다.
이하에서는 도면을 참조하여 본 개시에 대해 상세히 설명하도록 한다. 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다. 덧붙여, 하기 실시 예는 여러 가지 다른 형태로 변형될 수 있으며, 본 개시의 기술적 사상의 범위가 하기 실시 예에 한정되는 것은 아니다. 오히려, 이들 실시 예는 본 개시를 더욱 충실하고 완전하게 하고, 당업자에게 본 개시의 기술적 사상을 완전하게 전달하기 위하여 제공되는 것이다.
또한, 어떤 구성요소를 '포함'한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다. 나아가, 도면에서의 다양한 요소와 영역은 개략적으로 그려진 것이다. 따라서, 본 개시의 기술적 사상은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되지 않는다.
이하, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 시스템의 구성을 나타내는 모식도이다.
도 1에 따르면, 본 발명의 일 실시 예에 따른 디스플레이 시스템(1000)은 디스플레이 장치(100), 영상 처리 장치(200), 영상 소스 장치(300) 및 리모콘(400)을 포함한다.
디스플레이 장치(100)는 리모콘(400)의 원격 제어 신호를 이용하여 영상 처리 장치(200)에 의해 제어 가능하도록 구현될 수 있다. 예를 들어, 디스플레이 장치(100)는 TV로 구현될 수 있다. 다만, LFD(large format display), Digital Signage(디지털 간판), DID(Digital Information Display), 비디오 월(video wall), 프로젝터 디스플레이 등과 같은 디스플레이 기능을 구비하며, 리모콘(400)을 이용하여 영상 처리 장치(200)에 의해 제어 가능한 다양한 유형의 전자 장치로 구현될 수 있다.
영상 처리 장치(200)는 영상 소스 장치(300)로부터 수신된 영상을 처리하여 디스플레이 장치(100)로 제공하도록 구현될 수 있다. 이 때, 영상 처리 장치(200)는 유무선 통신을 사용하여 디스플레이 장치(100)와 통신을 수행할 수 있다. 예를 들어, 유선 통신을 이용하는 경우 깔끔한 외관을 위해 투명 광케이블을 이용해 통신을 수행할 수도 있다.
영상 처리 장치(200)는 유무선 통신을 사용하여 영상 소스 장치(300)와 통신을 수행할 수 있다. 예를 들어, 영상 처리 장치(200)는 영상 소스 장치(300)와 IR(Infrared) 통신을 이용하여 통신을 수행할 수 있다.
한편, 영상 처리 장치(200)는 영상 소스 장치(300)로부터 제공되는 지상파, 케이블, 위성 등의 다양한 방송 컨텐츠, 웹 컨텐츠, VOD 컨텐츠 등 다양한 타입의 컨텐츠를 영상 처리하여 디스플레이 장치(100)에 표시할 수 있다.
영상 소스 장치(300)는 영상 처리 장치(200)에 영상을 제공한다. 영상 소스 장치(300)는 셋탑 박스, 셋탑 PC, DVD 플레이어, 블루레이(blu ray) 플레이어, USB, SSD(solid state drive), HDD(hard disk drive) 등 영상 데이터를 제공할 수 있는 다양한 외부 장치를 포함할 수 있다. 영상 소스 장치(300)는 영상 소스 장치 전용 리모콘, 통합 리모콘 등 다양한 원격 제어 장치를 통해 조작 가능한 형태로 구현될 수 있다.
본 발명의 일 실시 예에 따르면, 리모콘(400)은 하나의 리모컨에 다수의 제어 대상 기기에 대한 제어 명령 코드들을 구비하여 각각 또는 동시에 대상 기기들을 제어할 수 있다. 리모콘(400)은 유무선 연결 방식을 통해 다양한 기기를 제어할 수 있다. 특히, 무선 연결방식은 BT(BlueTooth), IR(Infrared), WI-FI(Wireless Fidelity), Zigbee, 비콘(Beacon), NFC(near field communication) 등 다양한 형태로 구현될 수 있다. 또한, 리모콘(400)은 디스플레이 장치(100), 영상 처리 장치(200) 및 영상 소스 장치(300)와 상기와 같은 다양한 유무선 통신을 수행하도록 구현될 수 있다.
본 발명의 일 실시 예에 따르면, 디스플레이 장치(100)는 외부에 노출되어 있고, 영상 처리 장치(200) 및 영상 소스 장치(300)는 가구 등에 은닉되어 있는 상태일 수 있다.
이 경우, 리모콘(400)은 리모콘 신호를 BT(Bluetooth) 신호로 전송하는 모드(이하, 제1 동작 모드)로 동작할 수 있다. 예를 들어, 제1 동작 모드는 제작 업체에서 초기에 설정한 모드일 수 있으나, 사용자 명령 또는 외부 명령에 따라 동작 모드는 변경될 수 있다.
해당 실시 예에서, 사용자가 리모콘(400)을 조작하면 리모콘(400)은 디스플레이 장치(100)로 대응되는 리모콘 BT 신호를 전송하고, 디스플레이 장치(100)는 영상 처리 장치(200)로 리모콘 BT 신호에 대응되는 제어 신호를 전송하며, 영상 처리 장치(200)는 제어 신호에 대응되는 제어 명령을 영상 소스 장치(300)에 전송하여, 사용자가 영상 소스 장치(300)를 제어할 수 있도록 구현될 수 있다.
본 발명의 다른 실시 예에 따르면, 디스플레이 장치(100) 및 영상 소스 장치(300)는 외부에 노출되어 있고, 영상 처리 장치(200)는 가구 등에 은닉되어 있는 상태일 수 있다.
이 경우, 리모콘(400)은 영상 소스 장치(300)의 제어 코드셋에 대응되는 제어 명령을 포함하는 리모콘 신호를 IR(Infrared) 신호로 전송하는 모드(이하, 제2 동작 모드)로 동작할 수 있다. 예를 들어 본 발명의 일 실시 예에 따르면, 리모콘(400)이 제1 동작 모드로 동작 중에 기설정된 이벤트에 따라 제2 동작 모드로 전환될 수 있는데, 이에 대한 자세한 설명은 후술하도록 한다.
해당 실시 예에서, 사용자가 리모콘(400)을 조작하면 리모콘(400)은 영상 소스 장치(300)에 저장된 제어 코드 세트에 대응되는 제어 신호를 영상 소스 장치(300)로 직접 전송하여, 사용자는 제어 신호에 대응되는 제어 명령에 따라 영상 소스 장치(300)를 직접 제어할 수 있다.
한편, 리모콘(400)이 제2 동작모드로 동작함에 따라 IR 신호를 전송하는 경우, 디스플레이 장치(100)와 영상 처리 장치(200)는 리모콘(400)이 보내는 신호를 통신부(미도시)를 통해 감지할 수 있다. 이를 IR 스니핑(IR sniffing)이라고 한다. IR 스니핑(IR sniffing)을 하는 이유는 리모콘(400)이 영상 소스 장치(300)에 채널을 변경하는 리모콘 신호를 전송하였음에도 채널 변경이 되지 않는 경우, 리모콘 신호 전달에 이상이 있음을 감지하기 위함이다.
한편, 본원의 기기 간 통신 방식은 BT 또는 IR 통신에 한정되지 않으며, BT와 같이 연동 상태에서 통신하는 무선 통신 방식과 IR통신과 유사하게 신호 전송 구간에 장애물이 있는 경우 전송 품질이 감소하는 유사한 통신 방식을 포함한다.
도 2는 본 발명의 일 실시 예에 따른 영상 처리 장치의 구성을 나타내는 블럭도이다.
도 2에 따르면, 영상 처리 장치(200)는 통신부(210), 프로세서(220), 저장부(230)를 포함한다.
통신부(210)는 디스플레이 장치(100), 영상 소스 장치(300), 리모콘(400)과 통신을 수행한다. 여기서, 통신부(210)는 BT(BlueTooth), IR(Infrared), WI-FI(Wireless Fidelity), Zigbee, 비콘(Beacon), NFC(near field communication), WAN, 이더넷(Ethernet), IEEE 1394, HDMI, USB, MHL, AES/EBU, 옵티컬(Optical), 코액셜(Coaxial) 등과 같은 다양한 통신 방식을 통해 통신을 수행할 수도 있다.
프로세서(220)는 영상 처리 장치(200)의 전반적인 동작을 제어한다.
일 실시 예에 따라 프로세서(220)는 디지털 신호를 처리하는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), TCON(Time controller)으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)), ARM 프로세서 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(140)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다.
프로세서(220)는 영상 소스 장치(300)로부터 제공받은 영상 데이터를 이용하여 디스플레이 장치(100)에 영상이 표시되도록 제어한다. 영상 데이터는 지상파, 케이블, 위성 등의 공중파 방송 영상, 웹 컨텐츠 영상, VOD 컨텐츠 영상 등 다양한 타입의 영상 데이터로 구현될 수 있다.
프로세서(220)는, 리모콘(400)으로부터 영상 소스 장치(300)를 제어하기 위한 리모콘 신호를 디스플레이 장치(100)가 수신하면, 디스플레이 장치(100)로부터 영상 소스 장치를 제어하기 위한 리모콘 신호와 대응되는 제어 신호를 수신하고, 수신된 제어 신호를 영상 소스 장치(300)로 전송한다. 이 때, 리모콘(400)은 제1 동작 모드로 동작한다. 여기서, 제어 신호는 수신된 리모콘 신호에 포함된 제어 코드를 포함하는 신호 및 리모콘 신호에 포함된 제어 코드를 식별하기 위한 식별 정보 중 적어도 하나를 포함할 수 있다.
예를 들어, 프로세서(220)는 제1 동작 모드로 동작하는 리모콘(400)으로부터 BT 신호를 수신한 경우, BT 신호에 대응되는 제어 신호(예를 들어, IR 신호)를 영상 소스 장치(300)로 전송한다. 이는, BT 신호를 디스플레이 장치(100) 만이 수신할 수 있고, 영상 소스 장치(300)는 수신할 수 없도록 구현되어 있기 때문이다.
다만, 다른 실시 예에 따라 프로세서(220)는 제2 동작 모드로 동작하는 리모콘(400)로부터 IR 신호를 수신한 경우, 해당 신호를 영상 소스 장치(300)로 전송하지 않을 수 있다. 이는 영상 소스 장치(300)가 IR 신호를 수신한 경우 영상 소스 장치(300)에서 동일한 리모콘 신호에 대해 중복하여 제어 동작이 이루어질 수 있기 때문이다.
한편, 프로세서(220)는 디스플레이 장치(100)로부터 제어 신호가 수신되면 수신된 제어 신호에 대응되는 디스플레이 장치(100)의 상태 변화를 식별할 수 있다. 디스플레이 장치(100)의 상태 변화가 식별되지 않으면, 프로세서(220)는 리모콘 신호를 전송한 리모콘(400)의 동작 모드를 변경하기 위한 신호를 디스플레이 장치(100)로 전송할 수 있다. 이 후, 디스플레이 장치(100)는 리모콘(400)의 동작 모드를 변경하기 위한 신호가 수신되면, 수신된 신호를 리모콘(400)으로 전송할 수 있다.
여기서, 디스플레이 장치(100)의 상태 변화는 영상 출력 상태 변화 및 음성 출력 상태 변화 중 적어도 하나를 포함할 수 있다.
일 실시 예에 따라 프로세서(220)는 디스플레이 장치(100)에 출력된 영상의 채널 정보 영역, 방송사 로고 영역 및 채널 변경 시 발생되는 뮤트(mute) 상태, 볼륨 제어 영역 및 출력 음성의 크기 중 적어도 어느 하나에 기초하여 디스플레이 장치(100)의 영상 또는 음성의 출력 상태 변화를 식별할 수 있다.
구체적으로, 디스플레이 장치(100)는 리모콘(400)으로부터 채널 변경 리모콘 신호를 수신하여 프로세서(220)로 전송한다. 프로세서(220)는 채널을 변경하기 위한 제어 신호를 영상 소스 장치(300)로 전송한다. 이 때, 디스플레이 장치(100)가 영상 소스 장치(300)로부터 채널 변경된 영상을 표시하는지 확인하기 위해, 프로세서(220)는 디스플레이 장치(100)의 영상을 캡처하여 획득한다.
한편, 프로세서(220)는 채널 변경 리모콘 신호를 수신하여 영상 표시 장치(300)로 제어 신호를 전송하기 전의 디스플레이 장치(100)에 표시되는 영상 또한 캡처하여 획득한다. 이에 따라, 디스플레이 장치(100)가 리모콘 신호를 수신하기 전과 후에 출력 영상이 변경되었는지 여부를 확인할 수 있다.
한편, 본 발명의 일 실시 예에 따르면, 디스플레이 장치(100)에서 출력되는 영상은 일부분만 캡처될 수도 있으며, 전부 캡처될 수 있다.
이 후, 프로세서(220)는 디스플레이 장치(100)가 리모콘 신호를 수신하기 전과 후에 출력된 영상을, 영상 처리 작업을 기반으로 동일한 채널의 영상인지 식별할 수 있다.
일 예로, 사용자가 리모콘(400)에 채널 변경 명령을 입력한 경우, 일련의 제어 동작이 정상적으로 수행된다면 디스플레이 장치(100)에 출력되는 영상에는 채널 변경에 따른 채널 정보를 포함하는 영역이 포함되어야 한다. 이 때, 프로세서(220)는 획득한 영상 일 영역에 있는 채널 정보 영역, 방송사 로고 영역과 같이 채널 정보를 식별할 수 있는 이미지 또는 텍스트를 기초로 채널이 정상적으로 변경되었는지 여부를 확인할 수 있다. 일 예로, 화면 일측에 표시되는 MBC 로고에서 KBS 로고로 변경되었는지 여부, 채널번호 11에서 채널번호 12로 변경되었는지 여부, 또는 프로그램 명 “무한도전”에서 프로그램 명 “1박2일”로 변경되었는지 여부 등을 확인할 수 있다. 한편, 방송사 로고, 채널 번호, 프로그램 제목 이외에 해당 채널임을 식별할 수 있는 다양한 정보를 이용할 수 있음은 자명하다.
채널 정보 영역 및 방송사 로고 영역과 같이 채널 정보를 식별할 수 있는 이미지 또는 텍스트는 해당 영역의 아웃라인을 인식하거나, 해당 영역의 색채를 인식하거나, 텍스트 인식(OCR)과 같은 공지된 다양한 영상 처리 작업이 수행될 수 있다.
또 다른 예로, 프로세서(220)는 디스플레이 장치(100)에서 출력되는 사운드가 뮤트(mute)되는 구간이 있는지 여부에 기초하여 채널 변경 여부를 식별할 수 있다. 이는 예를 들어, 방송 채널 변경시 주파수 튜닝 시간에 따른 비디오 뮤트 구간 또는 사운드 뮤트 구간이 존재하기 때문이다.
이 때, 프로세서(220)는 리모콘 신호를 영상 처리 장치(300)로 전송하기 전과 후의 영상을 연속적으로 캡처하여 비디오 뮤트 구간이 발생하는 것을 식별하여 채널 변경이 정상적으로 이루어졌는지 식별할 수 있다. 또한, 프로세서(220)는 디스플레이 장치(100) 전송하는 오디오 신호를 분석하여 짧은 시간 나타나는 오디오 뮤트 구간을 식별한 후 채널 변경이 정상적으로 이루어졌는지 식별할 수 있다.
이 밖에, 리모콘(400)에 마이크가 포함될 수 있으며, 리모콘(400)이 디스플레이 장치(100)에서 출력되는 사운드 뮤트가 포함된 사운드를 실시간으로 타임태깅하여 녹음한 후, 프로세서(220)로 전송하여, 프로세서(200)가 리모콘 신호를 전송받은 시점 전후로 사운드 뮤트가 일어났는지 식별할 수도 있다.
한편, 프로세서(220)는 리모콘(400)으로부터 볼륨 변경 명령에 대응되는 리모콘 신호가 수신되었음에도, 디스플레이 장치(100)의 출력 볼륨이 변경되지 않는 경우 영상 소스 장치(300)가 제어 신호를 수신할 수 없는 상태인 것으로 식별할 수 있다.
일 예로, 프로세서(220)는 디스플레이 장치(100)로부터 획득된 출력 영상을 공지된 다양한 영상 처리방식을 이용하여 볼륨 조절 영역을 포함하는지 여부를 판단하고, 이에 기초하여 출력 볼륨의 변경 여부를 식별할 수 있다.
또한, 프로세서(220)는 볼륨 조절 영역에 포함된 볼륨 조절 바(bar), 볼륨 크기를 나타내는 숫자 등의 변화가 있는지 여부로 볼륨 변경 여부를 식별할 수 있다. 경우에 따라 영상 처리 장치(200)가 마이크를 구비한 경우, 프로세서(220)는 마이크를 통해 수신된 오디오의 크기에 기초하여 볼륨 변경 여부를 식별할 수 있음은 물론이다.
한편, 프로세서(220)는 IR 스니핑을 수행하여 영상 소스 장치(300)로 제어 명령을 전송하지 않을 수 있다. 이에 따른 구체적인 동작은 도 5에서 후술한다.
한편, 도 3은 본 발명의 일 실시 예에 따른 외부 장치들의 위치 변경에 따른 시스템 동작을 설명하기 위한 도면이다.
도 3(a)는 디스플레이 장치 주변의 외관을 해치지 않기 위해 디스플레이 장치(100) 외에 영상 처리 장치(200) 및 영상 소스 장치(300)는 보이지 않는 곳에 은닉시켜놓은 상태를 나타낸다. 또한 리모콘(400)의 초기 동작 모드는 제1 동작 모드인 상태를 나타낸다. 여기서 은닉이란, 물리적인 장애물 등에 의하여 일방에서 타방으로 IR 신호 등 근거리 통신이 제한되는 상황을 말한다. 외부 기기들이 은닉되어 있더라도 제1 동작 모드로 동작하는 리모콘(400)에 의한 리모콘 신호는 디스플레이 장치(100)에 전송될 수 있다.
도 3(a)에 따르면, 디스플레이 장치(100)는 영상 처리 장치(200)로 리모콘 신호에 대응되는 제어 신호를 유선으로 전송할 수 있으며, 영상 처리 장치(200)는 제어 신호에 대응되는 제어 명령을 IR 신호 등을 이용해 영상 소스 장치(300)로 전송할 수 있다. 영상 처리 장치(200)와 영상 소스 장치(300)는 하나의 공간에 은닉되어 있기 때문에 유선 통신뿐만 아니라 IR, NFC 등과 같은 근거리 무선 통신에 의해서도 통신이 가능하다.
한편, 디스플레이 장치(100)는 영상 처리 장치(200)와 투명 광 케이블로 연결될 수 있으며, 외관상 배선을 복잡하게 보이지 않게 하기 위함이다.
본 발명의 일 실시 예에 따르면, 도 3(b)와 같이, 영상 처리 장치(200)와 영상 소스 장치(300)가 IR 통신을 수행할 수 없어, 프로세서(220)가 영상 소스 장치(300)를 제어할 수 없는 상황이 발생할 수 있다.
도 3(b)는 사용자가 수납장을 청소하는 등의 경우 영상 소스 장치(300)를 영상 처리 장치(200)와 분리된 공간에 위치시키는 상태를 나타낸다. 즉, 영상 처리 장치(200)는 수납장 내부에 위치하여 은닉된 상태이며, 영상 소스 장치(300)는 수납장 외부에 위치하여 은닉되지 않은 상태를 나타낸다.
이와 같은 상황에서는, 도 3(a)와 같은 제어를 수행할 수 없는 상황이 발생할 수 있다. 즉, 디스플레이 장치(100)는 영상 처리 장치(200)로 리모콘 신호에 대응되는 제어 신호를 유선으로 전송할 수 있으나, 영상 처리 장치(200)와 영상 소스 장치(300)가 IR, NFC와 같은 근거리 통신 방법에 의해 통신되는 경우, 물리적인 장애물 등에 의해, 영상 처리 장치(200)는 제어 신호에 대응되는 제어 명령을 영상 소스 장치(300)로 전송할 수 없다. 따라서, 사용자는 영상 소스 장치(300)를 외부로 위치시키는 경우 리모콘(400)을 통해 기존과 같은 제어 동작을 수행할 수 없다.
도 3(b)에 따르면 상술한 문제점을 해결하기 위하여, 리모콘(400)이 디스플레이 장치(100)로 리모콘 신호를 보내지 않고 영상 소스 장치(300)로 리모콘 신호를 보낼 수 있도록 영상 처리 장치(200)가 리모콘(400)의 제어 모드를 제2 동작 모드로 변경하도록 제어할 수 있으며, 제어 모드를 변경하는 자세한 방법은 도 10에서 후술하도록 한다.
이에 따라, 도 3(a) 및 도 3(b)에 따르면, 사용자는 영상 소스 장치(300)의 위치가 변경되더라도 별도로 리모콘(400)의 세팅을 변경하지 않고도 영상 소스 장치(300)를 제어할 수 있게 되어 사용자 편의성을 높일 수 있다.
한편, 본 발명의 실시 예에 따르면, 초기에 리모콘은 제1 동작 모드 및 제2 동작 모드 중 하나로 동작할 수 있고, 영상 처리 장치(200)는 은닉 상태 또는 비은닉 상태가 될 수 있으며, 영상 소스 장치(300)도 은닉 상태 또는 비은닉 상태가 될 수 있으므로, 총 8가지의 경우의 수가 발생할 수 있다.
따라서, 상술한 도 3(a)는 초기 리모콘이 제1 동작 모드를 가지며, 영상 처리 장치(200) 및 영상 소스 장치(300)가 은닉된 경우 정상 작동하는 하나의 경우의 수를 나타내며, 도 3(b)는 초기 리모콘이 제1 동작 모드를 가지며, 영상 처리 장치(200)는 은닉되고, 영상 소스 장치(300)는 은닉되지 않은 경우 채널 변화가 없으므로 리모콘(400)의 동작 모드가 변하는 하나의 경우의 수를 나타낸다.
본 발명의 다른 실시 예에 따르면, 초기에 리모콘이 제1 동작 모드로 동작하고, 영상 처리 장치(200) 및 영상 소스 장치(300)가 은닉되지 않은 경우가 있을 수 있다.
이 경우, 영상 처리 장치(200) 및 영상 소스 장치(300)는 IR 등 근거리 통신이 가능하기 때문에 사용자 입력에 따른 디스플레이 장치(100)의 상태 변화가 이루어지며, 영상 처리 장치(200)는 리모콘(400)의 동작 모드 변경을 위한 신호를 생성하지 않고, 리모콘(400)은 제1 동작 모드로 유지된다.
본 발명의 또 다른 실시 예에 따르면, 초기에 리모콘이 제2 동작 모드를 갖고, 영상 처리 장치(200) 및 영상 소스 장치(300)가 은닉되지 않은 경우가 있을 수 있다.
마찬가지로, 영상 처리 장치(200) 및 영상 소스 장치(300)는 IR 등 근거리 통신이 가능하기 때문에 사용자 입력에 따른 디스플레이 장치(100)의 상태 변화가 이루어지며, 영상 처리 장치(200)는 리모콘(400)의 동작 모드 변경을 위한 신호를 생성하지 않고, 리모콘(400)은 제2 동작 모드로 유지될 수 있다.
한편, 이때 디스플레이 장치(100) 및 영상 처리 장치(200)가 리모콘 IR 신호를 스니핑할 수 있지만, 영상 처리 장치(200)는 영상 소스 장치(300)로 리모콘 IR 신호에 대응되는 제어 명령을 제공하지는 않는다.
본 발명의 또 다른 실시 예에 따르면, 초기에 리모콘이 제2 동작 모드를 갖고, 영상 처리 장치(200)는 은닉되어 있고, 영상 소스 장치(300)는 은닉되지 않은 경우가 있을 수 있다.
이 경우, 상술한 도 3(b)의 경우와 같이 리모콘(400)이 리모콘 IR 신호를영상 소스 장치(300)에 제공하면, 영상 소스 장치(300)는 변경된 영상 데이터를 영상 처리 장치(200)에 제공함으로써 디스플레이 장치(100)의 상태 변화가 이루어진다. 이 때, 디스플레이 장치(100)가 수행한 IR 스니핑에 기초하여 영상 처리 장치(200)는 리모콘 IR 신호가 전송됨에 따라 디스플레이 장치(100)의 상태 변화가 이루어졌음을 식별할 수 있다. 즉, 제2 동작 모드로 동작하는 리모콘(400)에 입력한 사용자 명령에 따라서 디스플레이 장치(100)의 상태가 변화하였음을 식별할 수 있다. 따라서, 영상 처리 장치(200)는 리모콘(400)의 동작 모드 변경을 위한 신호를 생성하지 않고, 리모콘(400)은 제2 동작 모드로 유지될 수 있다.
본 발명의 또 다른 실시 예에 따르면, 초기에 리모콘이 제1 동작 모드를 가지며, 영상 처리 장치(200)는 은닉되어 있지 않고, 영상 소스 장치(300)는 은닉되어 있는 경우가 있을 수 있다.
이 경우, 결과적으로 리모콘(400)이 어떠한 동작모드로도 영상 소스 장치(300)를 제어할 수 없다.
구체적으로, 리모콘(400)이 제1 동작 모드로 동작하는 경우, 리모콘 BT 신호는 디스플레이 장치(100)를 거쳐 영상 처리 장치(200)로 전송된다. 그러나, 영상 처리 장치(200)와 영상 소스 장치(300)가 IR, NFC와 같은 근거리 통신 방법에 의해 통신되는 경우, 영상 처리 장치(200)는 제어 신호에 대응되는 제어 명령을 영상 소스 장치(300)로 전송할 수 없다. 따라서, 영상 소스 장치(300)는 리모콘 BT 신호에 대응되는 변경된 영상 데이터를 제공할 수 없다. 이 후, 영상 처리 장치(200)는 리모콘 BT 신호가 입력되었음에도 디스플레이 장치(100)의 상태 변화가 일어나지 않았음을 식별한다.
한편, 영상 처리 장치(200)는 리모콘 BT 신호에 대응되는 제어 신호가 디스플레이 장치(100)로부터 수신되고, 디스플레이 장치(100)의 상태 변화가 일어나지 않는 경우, 영상 처리 장치(200)가 은닉되어 있는지 여부를 자체적으로 판단한다. 즉, 영상 처리 장치(200)가 기 설정된 프로브 요청을 리모콘(400)으로 전송하여, 리모콘(400)이 프로브 요청에 대응되는 프로브 응답을 영상 처리 장치(200)로 전송한다면 영상 처리 장치(200)는 은닉되지 않은 것으로 판단할 수 있다. 이와 같은 방법으로, 해당 실시 예 에서는 영상 처리 장치(200)가 은닉되지 않은 것으로 판단한다.
이와 같이, 리모콘(400)이 제1 동작 모드로 동작하고, 영상 처리 장치(200)는 은닉되어 있지 않으며, 디스플레이 장치(100)의 상태 변화가 일어나지 않는 경우에는, 리모콘(400)이 제2 동작 모드로 동작하더라도 디스플레이 장치(100)의 상태 변화가 일어나지 않기 때문에 더 이상 사용자의 입력에 따라 영상 소스 장치(300)를 제어할 수 있는 방법이 없다. 리모콘(400)이 제2 동작 모드로 동작하더라도 디스플레이 장치(100)의 상태 변화가 일어나지 않는 이유는, 영상 처리 장치(200) 및 영상 소스 장치(300)가 IR, NFC 등 근거리 통신이 불가능한 위치에 놓였기 때문이다.
이에 따라, 영상 처리 장치(200)가 리모콘(400)으로부터 리모콘 BT 신호에 대응되는 제어 신호를 수신하고, 영상 처리 장치(200)는 은닉되어 있지 않으며, 영상 처리 장치(200)가 디스플레이 장치(100)의 상태 변화가 일어나지 않았음을 식별한 경우에는, 사용자가 영상 처리 장치(200) 및 영상 소스 장치(300) 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 디스플레이 장치(100)에 제공한다.
가이드 UI는 도 8과 같이 디스플레이 장치(100)에 표시될 수 있다.
본 발명의 또 다른 실시 예에 따르면, 초기에 리모콘이 제2 동작 모드를 갖고, 영상 처리 장치(200)는 은닉되어 있지 않고, 영상 소스 장치(300)는 은닉되어 있는 경우가 있을 수 있다.
마찬가지로, 리모콘(400)은 어떠한 동작 모드로도 영상 소스 장치(300)를 제어할 수 없다.
이 경우, 상술한 바와 같이, 리모콘(400)이 제1 동작 모드로 변경되더라도 디스플레이 장치(100)의 상태 변화가 일어나지 않기 때문에, 더 이상 사용자의 입력에 따라 영상 소스 장치(300)를 제어할 수 있는 방법이 없다.
이에 따라, 영상 처리 장치(200)가 리모콘(400)으로부터 리모콘 IR 신호에 대응되는 제어 신호를 수신하고, 자신이 은닉되어 있지 않으며, 디스플레이 장치(100)의 상태 변화가 일어나지 않았음을 식별한 경우에는, 사용자가 영상 처리 장치(200) 및 영상 소스 장치(300) 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 디스플레이 장치(100)에 제공한다. 가이드 UI는 도 8과 같이 디스플레이 장치(100)에 표시될 수 있다.
본 발명의 또 다른 실시 예에 따르면, 초기에 리모콘이 제2 동작 모드를 갖고, 영상 처리 장치(200) 및 영상 소스 장치(300)가 은닉되어 있는 경우가 있을 수 있다.
이 경우, 디스플레이 장치(100)는 스니핑한 IR 신호(IR sniffing)를 기초로 영상 처리 장치(200)에 제어 명령을 제공할 수 있다. 여기서 제어 명령은, 제2 동작 모드로 작동하는 리모콘(400)이 리모콘 IR 신호를 전송하였다는 정보와 함께 사용자가 입력한 제어 동작을 영상 소스 장치(300)로 제공하지 않는다는 명령을 포함한다.
이에 따라, 영상 처리 장치(200)는 제2 동작 모드로 작동하는 리모콘(400)이 리모콘 IR 신호를 전송하였음을 식별한 뒤, 디스플레이 장치(100)에 표시되는 상태 변화가 없다는 것을 감지할 수 있다. 따라서, 영상 처리 장치(200)는 리모콘(400)의 동작 모드 변경을 위한 신호를 생성하여 디스플레이 장치(100)를 거쳐 리모콘(400)으로 전송한다. 수신한 동작 모드 변경을 위한 신호에 기초하여, 리모콘(400)은 제1 제어 모드로 동작 모드를 변경하게 된다.
상술한 바와 같이 영상 처리 장치(200)는 영상 처리 장치(200) 및 영상 소스 장치(300)의 위치가 변경됨에 따라 사용자가 느끼는 불편을 감소시킬 수 있도록 리모콘(400)의 동작 모드를 변경시키거나, UI를 제공할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 영상 처리 장치의 세부 구성의 일 예를 나타내는 블럭도이다.
도 4에 따르면, 영상 처리 장치(200)은 통신부(210), 프로세서(220), 저장부(230) 및 외부 인터페이스(240)을 포함한다. 도 4에 도시된 구성 중, 도 2에 도시된 구성과 중복되는 구성에 대해서는 자세한 설명을 생략하도록 한다.
프로세서(220)는 CPU(221), 디스플레이 시스템(1000)의 제어를 위한 제어 프로그램이 저장된 롬(ROM, 또는 비 휘발성 메모리) 및 디스플레이 시스템(1000)의 외부에서부터 입력되는 데이터를 저장하거나 디스플레이 시스템(1000)에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램(RAM, 또는 휘발성 메모리)을 포함할 수 있다.
프로세서(220)는 기설정된 이벤트가 발생되면 저장부(230)에 저장된 OS(Operating System), 프로그램 및 다양한 어플리케이션을 실행할 수 있다. 프로세서(220)는 싱글 코어, 듀얼 코어, 트리플 코어, 쿼드 코어 및 그 배수의 코어를 포함할 수 있다.
CPU(221)는 저장부(230)에 액세스하여, 저장부(230)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(230) 및 외부 인터페이스(240)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
저장부(230)는 디스플레이 시스템(1000)를 구동/제어하기 위한 다양한 데이터, 프로그램 또는 어플리케이션을 저장할 수 있다. 저장부(230)는 디스플레이 시스템(1000) 및 프로세서(220)의 제어를 위한 제어 프로그램, 제조사에서 최초 제공되거나 외부에서부터 다운로드 받은 어플리케이션, 데이터베이스들 또는 관련 데이터들을 저장할 수 있다. 예를 들어, 저장부(230)는 본 발명의 다양한 실시 예에 따른 UI를 제공하고, UI 와 관련된 동작을 수행하기 위한 프로그램을 저장할 수 있다.
여기서, 저장부(230)는 프로세서(220)에 포함된 롬(ROM), 램(RAM) 등의 내부 메모리로 구현되거나, 프로세서(220)와 별도의 메모리로 구현될 수도 있다. 이 경우, 저장부(230)는 데이터 저장 용도에 따라 디스플레이 장치(100)에 임베디드된 메모리 형태로 구현되거나, 디스플레이 장치(100)에 탈부착이 가능한 메모리 형태로 구현될 수도 있다. 예를 들어, 디스플레이 장치(100)의 구동을 위한 데이터의 경우 디스플레이 장치(100)에 임베디드된 메모리에 저장되고, 디스플레이 장치(100)의 확장 기능을 위한 데이터의 경우 디스플레이 장치(100)에 탈부착이 가능한 메모리에 저장될 수 있다. 한편, 디스플레이 장치(100)에 임베디드된 메모리의 경우 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등과 같은 형태로 구현될 수 있다.
본 발명의 일 실시 예에 따른 저장부(230)는 리모콘(400)이 영상 소스 장치(300)를 제어하기 위한 제어 코드 셋 및 제어 코드 셋에 포함된 각 제어 코드에 대응되는 제어 명령에 대한 정보를 기 저장하고 있을 수 있다. 이에 따라, 저장된 제어 코드 셋 정보에 기초하여 리모콘(400)으로부터 수신된 신호에 대응하는 제어 신호를 영상 소스 장치(300)로 전송할 수 있다.
프로세서(220)는 외부 인터페이스(240)와 통신을 수행할 수 있다. 외부 인터페이스(240)는 유선 인터페이스이거나 무선 인터페이스일 수 있다. 예를 들어 USB(Universal Serial Bus)와 같은 유선 인터페이스이거나 블루투스(Bluetooth)와 같은 무선 인터페이스일 수 있다.
도 5는 본 발명의 일 실시 예에 따른 영상 처리 장치를 설명하기 위한 도면이다.
도 5에 따르면 영상 처리 장치(200)는 다양한 외부 단자(211 내지 214)와 IR 송수신부(215)를 포함할 수 있다. 다양한 외부 단자(211 내지 214)를 통해 외부 인터페이스, 영상 데이터, 음성 데이터, 텍스트 데이터 등 다양한 형태의 정보를 수신할 수 있다. 일 예로, 외부 단자(211)는 디스플레이 장치(100)와 투명 광 케이블로 연결될 수 있고, 외부 단자(212)는 영상 데이터를 입력받기 위한 HDMI 케이블을 연결할 수 있으며, 외부 단자(213)는 영상 소스 장치(300)로부터 외부 인터페이스가 포함된 USB 메모리를 연결할 수 있고, 외부 단자(214)은 SSD를 연결하여 SSD에 기 저장된 영상 데이터를 획득할 수 있다.
도 5에 따르면 IR 송수신부(215)는 다양한 외부 기기와 IR 통신을 수행할 수 있다.
일 예로, 영상 소스 장치(300)의 IR 송수신부와 IR 통신을 수행할 수 있다. 영상 처리 장치(200)는 프로세서(220)에서 제어 명령을 생성하여 IR 송수신부(215)를 통해 영상 소스 장치(300)로 IR 통신을 이용하여 제어 명령에 대응되는 제어 신호를 전송할 수 있다.
또 다른 예로, IR 송수신부(215)는 제2 동작 모드로 동작하는 리모콘(400)의 리모콘 IR 신호를 IR 스니핑할 수 있다. IR 스니핑한 신호에 대응되는 제어 명령은 영상 소스 장치(300)로 제공하지 않는다. 리모콘 IR 신호에 대응되는 제어 명령을 영상 처리 장치(200)가 영상 소스 장치(300)에 제공한다면, 영상 소스 장치(300)는 영상 소스 장치(300) 자신이 받은 리모콘 IR 신호와 동일한 제어 명령을 두 번 수행하여 사용자에게 불편함을 줄 수 있기 때문이다. 한편, IR 스니핑을 통해 사용자 입력에 대응하여 리모콘(400)이 리모콘 IR 신호를 전송하였음을 식별할 수 있다. 리모콘 IR 신호가 전송되었음에도 디스플레이 장치(100)의 상태 변화가 식별되지 않는다면 프로세서(220)는 리모콘(400)의 동작 모드를 변경하는 명령을 생성할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 디스플레이 장치와 영상 처리 장치의 구성을 나타내는 블럭도이다.
도 6에 따르면 디스플레이 장치(100)는 통신부(110), 프로세서(120), 디스플레이부(130) 및 저장부(미도시)를 포함할 수 있다.
통신부(110)는 각종 외부 장치와 무선 또는 유선 통신을 수행하기 위한 구성이다. 구체적으로 통신부(110)는 영상 처리 장치(200)등의 외부 장치와 유선 연결을 위한 입출력 포트와, 무선 통신 수행을 위한 와이파이 칩, 블루투스 칩, NFC칩, 무선 통신 칩 등과 같은 다양한 무선 통신 칩을 포함할 수 있다.
통신부(110)는 영상 처리 장치(200)와 통신하여, 영상 통신 장치(200)로부터 영상 데이터를 수신할 수 있다. 또한, 통신부(110)는 리모콘(400)의 리모콘 신호를 수신하여 영상 소스 장치(300)를 제어하기 위해 영상 처리 장치(200)로 리모콘 신호에 대응되는 제어 신호를 전송할 수 있다. 또 다른 실시 예에 따르면, 영상 소스 장치(300)가 리모콘(400)의 IR 신호를 받을 수 없도록 은닉된 경우, 리모콘(400)이 영상 소스 장치(300)로 직접 보내고자 하는 리모콘 IR 신호를 IR 송수신부를 포함하는 통신부(110)가 IR 스니핑하여 영상 소스 장치(300)가 리모콘 IR 신호에 대응되는 동작을 수행하는지 여부를 영상 처리 장치(200)가 식별할 수 있다.
프로세서(120)는 디스플레이 장치(100)의 전반적인 동작을 제어하기 위한 구성이다.
예를 들어, 프로세서(120)는 CPU, 램(RAM), 롬(ROM), 시스템 버스를 포함할 수 있다. 여기서, 롬은 시스템 부팅을 위한 명령어 세트가 저장되는 구성이고, CPU는 롬에 저장된 명령어에 따라 디스플레이 장치(100)의 저장부에 저장된 운영체제를 램에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU는 저장부에 저장된 각종 애플리케이션을 램에 복사하고, 실행시켜 각종 동작을 수행할 수 있다. 이상에서는 프로세서(120)가 하나의 CPU만을 포함하는 것으로 설명하였지만, 구현시에는 복수의 CPU(또는 DSP, SoC 등)으로 구현될 수 있다.
본 발명의 일 실시 예에 따르면, 프로세서(120)는 기설정된 이벤트가 발생한 경우 디스플레이 장치(100)와 제1 동작 모드로 동작하는 리모콘(400)이 기 정의된 통신 방식에 따라 통신을 수행하여 연동 상태가 될 수 있다. 여기서, 연동은 디스플레이 장치(100)와 리모콘(400) 간에 통신이 초기화되는 동작, 네트워크가 형성되는 동작, 기기 페어링이 수행되는 동작 등 통신이 가능한 상태가 되는 모든 상태를 의미할 수 있다. 예를 들어, 디스플레이 장치(100) 또는 리모콘(400)에서 기설정된 이벤트가 발생하면, DLNA(Digital Living Network Alliance) 기술을 통해 주변 기기를 탐색하고 탐색된 기기와 페어링을 수행하여 연동 상태가 될 수 있다.
프로세서(120)는 리모콘(400)의 서로 다른 제어모드에 따라 제어 명령을 생성할 수 있다.
일 예로, 제1 동작 모드로 동작하는 리모콘(400)으로부터 리모콘 BT 신호를 수신하는 경우, 프로세서(120)는 리모콘 BT 신호에 기초하여 영상 처리 장치(200)에 영상 소스 장치(300)를 제어하기 위한 제어 명령을 포함하는 제어 신호를 생성할 수 있다.
또 다른 예로, 제2 동작 모드로 동작하는 리모콘(400)으로부터 리모콘 IR 신호를 IR 스니핑한 경우, 프로세서(120)는 리모콘 IR 신호에 기초하여 영상 처리 장치(200)에 영상 소스 장치(300)를 제어하지 않도록 하는 제어 명령을 생성할 수 있다.
저장된 리모콘 IR 신호에 대응되는 제어 명령을 영상 처리 장치(200)가 영상 소스 장치(300)에 전송한다면, 영상 소스 장치(300)는 영상 소스 장치(300) 자신이 받은 리모콘 IR 신호와 동일한 제어 명령을 두 번 수행하여 사용자에게 불편함을 주기 때문이다.
다만, 이 경우 디스플레이 장치(100)는 영상 처리 장치(200)에 영상 소스 장치(300)를 제어하기 위한 리모콘 IR 신호가 수신되었다는 정보는 전송하여, 영상 처리 장치(200)가 디스플레이 장치(100)의 영상 변화 여부를 식별한 후, 출력 상태의 변화가 없다면 영상 소스 장치(300)가 은닉되어 있음을 식별할 수 있다.
한편, 디스플레이 장치(100)는 영상 소스 장치(300)에 대응되는 제어 코드 셋을 저장부(미도시)에 저장할 수 있으며, 제어 코드 셋에 대응되는 제어 명령에 대한 제어 정보를 저장부(미도시)에 저장할 수 있다. 따라서, 저장된 제어 정보에 기초하여 리모콘 IR 신호에 대응되는 제어 명령을 식별할 수 있으며, 수신한 리모콘 신호가 디스플레이 장치(100)에 대한 신호가 아닌 영상 소스 장치(300)에 대한 리모콘 IR 신호임을 식별할 수 있다.
디스플레이부(130)는 프로세서(120)의 제어에 따라 다양한 화면을 디스플레이할 수 있다.
디스플레이부(130)는 예건대, LCD(liquid crystal display), OLED(organic light-emitting diode), LCoS(Liquid Crystal on Silicon), DLP(Digital Light Processing), QD(quantum dot) 디스플레이 패널, 디스플레이 프로젝터(Projector) 등 다양한 형태로 구현될 수 있다. 또한 디스플레이부(130)는 사용자의 터치 조작을 감지할 수 있는 터치스크린 형태로 구현될 수 있다.
디스플레이부(130)는 영상 처리 장치(200)로부터 전송받은 영상을 표시할 수 있다. 또한, 디스플레이부(130)는 기 저장되어 있는 다양한 UI 화면을 표시할 수 있다.
도 6에 따르면, 디스플레이 장치(100)는 통신부(110)를 통해 영상 처리 장치(200)의 통신부(210)와 통신을 수행할 수 있다. 일 예로, 통신부(210)는 영상 소스 장치(300)로부터 영상 처리 장치(200)가 획득한 영상 데이터를 유선 통신을 통해 통신부(110)로 전송할 수 있으며, 통신부(110)는 영상 처리 장치(200)의 통신부(210)와 제어 명령을 송수신 하기 위한 유무선 통신을 수행할 수 있다. 유무선 통신은 상술한 바와 같이 다양한 형태로 구현될 수 있다.
도 7은 본 발명의 일 실시 예에 따른 영상 소스 장치(300)를 설명하기 위한 도면이다.
도 7에 도시된 구성 중, 도 1 및 도 5에서 설명한 구성 및 동작에 대해서는 자세한 설명을 생략하도록 한다.
본 발명의 일 실시 예에 따르면, 영상 소스 장치(300)는 IR 송수신부(311)를 포함할 수 있다. IR 송수신부(311)는 영상 처리 장치(200)의 IR 송수신부(215)와 IR 통신을 수행하여 다양한 제어 명령을 송수신할 수 있다. 또한 IR 송수신부(311)는 영상 소스 장치(300) 전용 리모콘(미도시) 또는 리모콘(400)의 리모콘 신호를 수신하여 리모콘 신호에 대응되는 제어 동작을 수행할 수 있다.
본 발명의 일 실시 예에 따르면, 영상 소스 장치(300)는 다양한 외부 단자(312, 313)을 포함할 수 있다. 영상 소스 장치(300)는 외부 단자(312)에 HDMI 케이블을 연결하여 영상 처리 장치(200)로 영상 데이터를 전송할 수 있으며, 외부 단자(313)에 LAN 케이블을 연결하여 온라인 영상 제공업체로부터 영상을 제공받을 수 있다. 다만, 이러한 실시예에 국한되지 않으며 영상을 제공받아 디스플레이 장치(100) 또는 영상 처리 장치(200)에 영상을 제공할 수 있는 다양한 실시 형태를 포함한다.
도 8은 본 발명의 일 실시 예에 따른 영상 처리 장치 및 영상 소스 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 설명하기 위한 도면이다.
본 발명의 일 실시 예에 따르면, 리모콘(400)의 제1 동작 모드 및 제2 동작 모드로 영상 소스 장치(300)를 제어할 수 없는 상황이 발생할 수 있다. 일 예로, 영상 처리 장치(200) 및 영상 소스 장치(300) 중 하나만 은닉되어 위치된 상태에서는 리모콘(400)으로 영상 소스 장치(300)를 제어할 수 없다.
이 경우, 영상 처리 장치(200)와 영상 소스 장치(300)가 물리적으로 이격되어 있기 때문에 발생한 문제이므로 사용자에게 영상 처리 장치(200)와 영상 소스 장치(300)가 적어도 IR 통신이 가능한 범위 내에 위치시키도록 가이드하는 UI를 디스플레이 장치(100)에 팝업시킬 수 있다. 따라서, 영상 처리 장치(200)는 디스플레이 장치(100)를 거쳐 제1 동작 모드 및 제2 동작 모드로 동작하는 리모콘(400)으로부터 디스플레이 장치(100)를 통해 리모콘 신호를 전송받았음에도 디스플레이 장치(100)의 상태 변화가 식별되지 않는 경우, 가이드 UI를 표시하도록 디스플레이 장치(100)를 제어할 수 있다.
한편, 도 8에 도시된 바와 같은 이미지 및 문구에 국한되지 않으며, 영상 처리 장치(200)와 영상 소스 장치(300)를 IR 통신 및 상호간 통신에 사용되는 통신 방법의 송수신 범위에 위치시키도록 가이드하는 모든 형태의 UI를 포함할 수 있다.
도 9는 본 발명의 일 실시 예에 따른 영상 처리 장치를 제어하는 방법을 설명하기 위한 흐름도이다.
도 9에 따르면, 영상 처리 장치(200)는 디스플레이 장치(100)로부터 영상 소스 장치(300)를 제어하기 위한 제어 신호를 수신한다(S910). 리모콘(400)은 제1 동작 모드 또는 제2 동작 모드로 동작하며, 제어 신호를 포함하는 리모콘 신호를 전송할 수 있다. 이 후, 영상 처리 장치(200)는 수신된 제어 신호를 영상 소스 장치(300)로 전송한다(S920). 이 후, 제어 신호 전송에 대응하여 디스플레이 장치(100)의 상태 변화를 식별하고, 변화가 식별되지 않으면 리모콘(400)의 동작 모드를 변경하기 위한 신호를 디스플레이 장치(100)로 전송한다(S930). 이에 따라 디스플레이 장치(100)가 리모콘(400)으로 동작 모드를 변경하기 위한 신호를 전송하여 리모콘(400)의 동작 모드가 변환된다.
도 10은 본 발명의 일 실시 예에 따른 리모콘이 초기에 제1 동작 모드로 동작할 때 디스플레이 시스템의 동작을 설명하기 위한 도면이다.
도 10에 따르면, 도 3(b)의 상태와 같이 영상 처리 장치(200)는 은닉되어 있고, 영상 소스 장치(300)는 은닉되어 있지 않은 상태에서, 리모콘(400)의 동작 모드를 변경시키는 과정을 설명한다.
도 10에 따르면 리모콘(400)은 사용자의 명령을 수신한다(S1010). 예를 들어, 채널 업, 볼륨 다운과 같은 명령이 될 수 있다. 이 때, 리모콘(400)은 제1 동작모드로 동작한다. 입력된 사용자 명령에 따라 리모콘(400)은 리모콘 BT 신호를 디스플레이 장치(100)로 전송한다(S1011).
이 후, 디스플레이 장치(100)는 리모콘 BT 신호에 대응되는 제어 명령을 포함하는 제어 신호를 생성한다(S1012). 제어 명령은 사용자의 명령에 대응되며, 예를 들어, 영상 소스 장치(300)에 전송할 채널 업, 볼륨 다운과 같은 명령이 될 수 있다.
디스플레이 장치(100)는 생성된 제어 신호를 영상 처리 장치(200)로 전송한다(S1013). 영상 처리 장치는 수신된 제어 신호에 포함된 제어 명령을 영상 소스 장치(300)에 전송을 시도한다. 그리고, 제어 신호에 대응되는 디스플레이 장치(100)의 상태 변화를 식별(S1014)함으로써, 영상 소스 장치(300)가 제어 신호에 대응되는 제어 명령을 수신하였는지 식별한다. 영상 처리 장치(200)는 은닉되어 있고, 영상 소스 장치(300)는 은닉되지 않았다면, 디스플레이 장치의 상태 변화가 없게 된다. 영상 처리 장치(200)와 영상 소스 장치(300)는 IR 등과 같은 근거리 통신을 수행하기 때문에, 통신 구간에 장애물로 인하여 전송 품질이 감소하기 때문이다.
따라서, 디스플레이 장치(100)의 상태 변화가 없음을 식별한 후, 리모콘(400)이 IR 신호를 전송하는 제2 동작 모드로 변경되기 위한 신호를 생성(S1015)한다. 영상 처리 장치(200)는 변경 신호를 디스플레이 장치(100)로 전송(S1016)하고, 디스플레이 장치(100)는 변경 신호를 리모콘(400)으로 전송(S1017)한다. 이에 따라, 리모콘의 동작 모드는 수신된 변경 신호에 포함된 제어 명령을 기초로 IR 신호를 전송하는 제2 동작 모드로 변경된다(S1018).
이 후, 리모콘(400)이 IR 신호를 영상 소스 장치(300)에 전송(S1019)하면, 영상 소스 장치는 HDMI 케이블을 통해 채널 업된 영상 신호 또는 볼륨 다운된 영상 신호를 외부 제어 장치로 전송하여, 사용자 명령에 대응되는 영상을 디스플레이 장치(100)에 표시할 수 있다.
도 11은 본 발명의 일 실시 예에 따른 리모콘이 초기에 제2 동작 모드로 동작할 때 디스플레이 시스템의 동작을 설명하기 위한 도면이다.
도 11에 따르면, 영상 처리 장치(200) 및 영상 소스 장치(300)는 은닉되어 있는 상태에서, 리모콘(400)의 동작 모드를 변경시키는 과정을 설명한다.
도 11에 따르면 리모콘(400)은 사용자의 명령을 수신한다(S1110). 예를 들어, 채널 업, 볼륨 다운과 같은 명령이 될 수 있다. 이 때, 리모콘(400)은 제2 동작모드로 동작한다. 입력된 사용자 명령에 따라 리모콘(400)은 리모콘 IR 신호를 디스플레이 장치(100)로 전송한다(S1111). 리모콘(400)이 제2 동작 모드로 동작하는 경우 영상 소스 장치(300)로 IR 신호를 전송하는 것이 일반적이나, 디스플레이 장치(100)는 IR 수신부를 포함할 수 있기 때문에, 디스플레이 장치(100)는 IR 스니핑을 통해 IR 신호를 수신할 수 있다.
이 후, 디스플레이 장치(100)는 리모콘 IR 신호에 대응되는 제어 명령을 포함하는 제어 신호를 생성한다(S1012). 디스플레이 장치(100)는 생성된 제어 신호를 영상 처리 장치(200)로 전송한다(S1113). 이 때, 영상 소스 장치(300)가 은닉되어 있지 않다면, 디스플레이 장치(100)가 영상 처리 장치(200)를 통해 영상 소스 장치(300)로 제어 명령을 전송하여 영상 소스 장치(300)가 두 번의 중복된 사용자 명령을 수행할 수 있다. 따라서, 이러한 부작용을 방지하기 위하여, 디스플레이 장치가 생성한 제어 신호(S1112)는 디스플레이 장치(100)로 영상 소스 장치 전용 IR 신호가 수신되었음을 의미하는 제어 명령을 보낸다. 즉, 영상 처리 장치(200)가 영상 소스 장치(300)에 채널 업이나 볼륨 다운과 같은 제어 명령을 보내지 않도록 한다.
그리고, 제어 신호에 대응되는 디스플레이 장치(100)의 상태 변화를 식별(S1114)함으로써, 영상 소스 장치(300)가 리모콘 IR 신호를 직접 수신하였는지 식별한다. 영상 처리 장치(200) 및 영상 소스 장치(300)가 은닉되어 있다면 영상 소스 장치(300)는 리모콘 IR 신호를 수신할 수 없기 때문에, 디스플레이 장치의 상태 변화가 없게 된다. 따라서 디스플레이 장치(100)의 상태 변화가 없음을 식별한 후, 리모콘(400)이 BT 신호를 전송하는 제1 동작 모드로 변경되기 위한 신호를 생성(S1115)한다.
영상 처리 장치(200)는 변경 신호를 디스플레이 장치(100)로 전송(S1016)하고, 디스플레이 장치(100)는 변경 신호를 리모콘(400)으로 전송(S1117)한다. 이에 따라, 리모콘(400)의 동작 모드는 수신된 변경 신호에 포함된 제어 명령을 기초로 BT 신호를 전송하는 제1 동작 모드로 변경된다(S1118).
이 후, 리모콘(400)이 BT 신호를 디스플레이 장치(100)에 전송(S1119)하면, 디스플레이 장치(100) 및 영상 처리 장치(200)를 거쳐 리모콘 BT 신호에 대응되는 제어 명령이 영상 소스 장치(300)로 전송될 수 있다.
이와 같이 도 10 및 도 11에 따르면, 사용자는 영상 처리 장치(200) 또는 영상 소스 장치(300)의 위치가 변경되더라도 별도의 세팅없이 영상 소스 장치(300)를 제어할 수 있게되어 사용자 편의성을 높일 수 있다.
한편, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 일부 경우에 있어 본 명세서에서 설명되는 실시 예들이 프로세서 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다.
한편, 상술한 본 개시의 다양한 실시 예들에 따른 처리 동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 처리 동작을 특정 기기가 수행하도록 할 수 있다.
비일시적 컴퓨터 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 비일시적 컴퓨터 판독 가능 매체의 구체적인 예로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 있을 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (13)

  1. 디스플레이 장치 및 영상 처리 장치를 포함하는 디스플레이 시스템에 있어서,
    리모콘으로부터 수신된 신호에 대응하여 외부의 영상 소스 장치를 제어하기 위한 제어신호를 상기 영상 처리 장치로 전송하는 디스플레이 장치; 및
    상기 영상 소스 장치로부터 수신된 영상을 처리하여 상기 디스플레이 장치로 전송하고, 상기 디스플레이 장치로부터 수신된 상기 제어 신호를 상기 영상 소스 장치로 전송하는 영상 처리 장치;를 포함하며,
    상기 영상 처리 장치는,
    상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 상기 상태 변화가 식별되지 않으면 상기 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송하며,
    상기 디스플레이 장치는,
    상기 리모콘의 동작 모드를 변경하기 위한 신호가 수신되면, 상기 수신된 신호를 상기 리모콘으로 전송하는, 디스플레이 시스템.
  2. 제1항에 있어서,
    상기 리모콘의 동작 모드는 BT 신호를 전송하는 제1 동작 모드 및 IR 신호를 전송하는 제2 동작 모드를 포함하며,
    상기 제어 신호는 제1 동작 모드로 동작하는 상기 리모콘으로부터 상기 디스플레이 장치로 수신된 BT 신호에 대응하는 제어 신호이며,
    상기 영상 처리 장치는,
    상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 리모콘을 상기 제2 동작 모드로 변경하기 위한 신호를 상기 디스플레이 장치로 전송하는, 디스플레이 시스템.
  3. 제1항에 있어서,
    상기 영상 처리 장치로부터 상기 영상 소스 장치로 전송되는 상기 제어 신호는 IR 신호인, 디스플레이 시스템.
  4. 제2항에 있어서,
    상기 리모콘이 상기 제2 동작 모드로 동작하는 경우,
    상기 영상 처리장치는,
    상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 영상 소스장치 및 상기 영상 처리 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 제공하는, 디스플레이 시스템.
  5. 제1항에 있어서,
    상기 영상 처리 장치는, 상기 영상 소스 장치의 제어 코드 셋 정보를 저장하며, 상기 저장된 정보에 기초하여 상기 리모콘으로부터 수신된 신호에 대응하는 제어 신호를 상기 영상 소스 장치로 전송하는, 디스플레이 시스템.
  6. 제1항에 있어서,
    상기 영상 처리 장치는, 상기 디스플레이 장치에 출력된 영상의 채널 정보 영역, 방송사 로고 영역, 채널 변경 시 발생되는 뮤트(mute) 상태 및 볼륨 제어 영역 중 적어도 어느 하나에 기초하여 상기 디스플레이 장치의 상태 변화를 식별하는, 디스플레이 시스템.
  7. 영상 소스 장치로부터 수신된 영상을 처리하여 디스플레이 장치로 전송하는 영상 처리 장치에 있어서,
    통신부; 및
    상기 디스플레이 장치로부터 상기 영상 소스 장치를 제어하기 위한 제어 신호를 수신하고, 상기 수신된 제어 신호를 상기 영상 소스 장치로 전송하도록 상기 통신부를 제어하는 프로세서;를 포함하고,
    상기 프로세서는,
    상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 상기 상태 변화가 식별되지 않으면 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송하는, 영상 처리 장치.
  8. 제7항에 있어서,
    상기 리모콘의 동작 모드는,
    BT 신호를 전송하는 제1 동작 모드 및 IR 신호를 전송하는 제2 동작 모드를 포함하며,
    상기 제어 신호는 제1 동작 모드로 동작하는 상기 리모콘으로부터 상기 디스플레이 장치로 수신된 BT 신호에 대응하는 제어 신호이며,
    상기 프로세서는,
    상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 리모콘을 상기 제2 동작 모드로 변경하기 위한 신호를 상기 디스플레이 장치로 전송하는, 영상 처리 장치.
  9. 제8항에 있어서,
    상기 통신부를 통하여 상기 영상 소스 장치로 전송되는 상기 제어 신호는 IR 신호인, 영상 처리 장치.
  10. 제8항에 있어서,
    상기 프로세서는,
    상기 디스플레이 장치의 상태 변화가 식별되지 않으면, 상기 영상 소스 장치 및 상기 영상 처리 장치 중 적어도 하나의 위치를 변경하도록 가이드하는 UI를 제공하는, 영상 처리 장치.
  11. 제8항에 있어서,
    상기 영상 소스 장치의 제어 코드 셋 정보를 저장하는 저장부;를 더 포함하며,
    상기 프로세서는,
    상기 저장된 정보에 기초하여 상기 리모콘으로부터 수신된 신호에 대응하는 제어 신호를 상기 영상 소스 장치로 전송하도록 상기 통신부를 제어하는, 영상 처리 장치.
  12. 제7항에 있어서,
    상기 프로세서는, 상기 디스플레이 장치에 출력된 영상의 채널 정보 영역, 방송사 로고 영역, 채널 변경 시 발생되는 뮤트(mute) 상태 및 볼륨 제어 영역 중 적어도 어느 하나에 기초하여 상기 디스플레이 장치의 상태 변화를 식별하는, 영상 처리 장치.
  13. 영상 소스 장치로부터 수신된 영상을 처리하여 디스플레이 장치로 전송하는 영상 처리 장치의 제어 방법에 있어서,
    상기 디스플레이 장치로부터 상기 영상 소스 장치를 제어하기 위한 제어 신호를 수신하는 단계;
    상기 수신된 제어 신호를 상기 영상 소스 장치로 전송하는 단계; 및
    상기 제어 신호 전송에 대응하여 상기 디스플레이 장치의 상태 변화를 식별하고, 상기 상태 변화가 식별되지 않으면 리모콘의 동작 모드를 변경하기 위한 신호를 상기 디스플레이 장치로 전송하는 단계;를 포함하는 제어 방법.
PCT/KR2018/005630 2017-10-12 2018-05-16 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법 WO2019074181A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/650,531 US11011054B2 (en) 2017-10-12 2018-05-16 Image processing device and display device including same, and control method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170132051A KR102369121B1 (ko) 2017-10-12 2017-10-12 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
KR10-2017-0132051 2017-10-12

Publications (1)

Publication Number Publication Date
WO2019074181A1 true WO2019074181A1 (ko) 2019-04-18

Family

ID=66100833

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/005630 WO2019074181A1 (ko) 2017-10-12 2018-05-16 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법

Country Status (3)

Country Link
US (1) US11011054B2 (ko)
KR (1) KR102369121B1 (ko)
WO (1) WO2019074181A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022118990A1 (ko) * 2020-12-01 2022-06-09 엘지전자 주식회사 원격 제어 장치, 원격 제어 방법 및 시스템
WO2024063306A1 (ko) * 2022-09-21 2024-03-28 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001169368A (ja) * 1999-12-07 2001-06-22 Kenwood Corp リモートコントローラ及び送信制御方法
US20050122438A1 (en) * 2000-04-20 2005-06-09 Canon Kabushiki Kaisha Control apparatus and control method
KR20100012523A (ko) * 2008-07-29 2010-02-08 삼성전자주식회사 영상처리시스템 및 그 제어방법
KR20130051153A (ko) * 2011-11-09 2013-05-20 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR20150071944A (ko) * 2013-12-19 2015-06-29 삼성전자주식회사 디스플레이 장치, 이의 통합 리모컨 설정 방법, 통합 리모컨 및 이의 설정 방법

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292992A1 (en) * 2004-04-08 2009-11-26 Micro-Star International Co., Ltd computer system and a switching method for the same
US7924167B2 (en) 2004-06-22 2011-04-12 Agere Systems Inc. Remote control code filtering used for relaying of remote control codes
JP2009519659A (ja) * 2005-12-15 2009-05-14 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Ｒｆプロトコルで遠隔制御を行う電子システム、遠隔制御装置、電子装置及び方法
CN201029238Y (zh) 2007-03-06 2008-02-27 江苏银河电子股份有限公司 一种机顶盒
JP4766023B2 (ja) * 2007-09-28 2011-09-07 ソニー株式会社 Ｄｌｎａ対応機器、ｄｌｎａ接続設定方法およびプログラム
US20100026512A1 (en) * 2008-08-01 2010-02-04 Chen-Leh Wang Remote controller of electronic apparatus
US8350744B2 (en) * 2008-12-03 2013-01-08 At&T Intellectual Property I, L.P. Virtual universal remote control
KR20100075257A (ko) 2008-12-24 2010-07-02 삼성전자주식회사 복수의 전자기기를 제어하는 통합리모컨장치, 통합리모컨시스템 및 그 제어방법
JP5391911B2 (ja) * 2009-08-05 2014-01-15 ソニー株式会社 電子機器
US9082297B2 (en) * 2009-08-11 2015-07-14 Cisco Technology, Inc. System and method for verifying parameters in an audiovisual environment
JP5589383B2 (ja) * 2009-12-28 2014-09-17 ソニー株式会社 機器制御装置、機器制御方法及びコンピュータプログラム
JP5463915B2 (ja) * 2010-01-04 2014-04-09 ソニー株式会社 機器制御装置、機器制御方法及びコンピュータプログラム
JP5458894B2 (ja) * 2010-01-04 2014-04-02 ソニー株式会社 機器制御装置、機器制御方法及びプログラム
US8886127B2 (en) * 2010-04-02 2014-11-11 Echostar Technologies L.L.C. Systems, methods and devices for providing feedback about a quality of communication between a device and a remote control
JP2012029070A (ja) * 2010-07-23 2012-02-09 Sony Corp リピータ機器及び制御方法
KR101763426B1 (ko) 2010-08-20 2017-07-31 삼성전자주식회사 외부기기 제어장치 및 방법
CN103098108B (zh) * 2010-11-25 2017-09-08 松下电器（美国）知识产权公司 通信设备
KR20120139475A (ko) * 2011-06-17 2012-12-27 삼성전자주식회사 원격 제어 장치의 세팅을 위한 디스플레이 장치 및 디스플레이 방법
DE102012212514A1 (de) * 2011-07-18 2013-02-21 Logitech Europe S.A. Fernbedienungs-Benutzerschnittstelle für Handgerät
JP5101742B1 (ja) * 2011-08-23 2012-12-19 シャープ株式会社 通信装置、通信システム、通信方法、制御プログラム、記録媒体、およびテレビジョン受像システム
JP2013051532A (ja) * 2011-08-30 2013-03-14 Sony Corp 機器制御装置、機器制御方法およびプログラム
JP2013051533A (ja) * 2011-08-30 2013-03-14 Sony Corp 機器制御装置、機器制御方法およびプログラム
US9215394B2 (en) * 2011-10-28 2015-12-15 Universal Electronics Inc. System and method for optimized appliance control
KR101333429B1 (ko) 2012-04-05 2013-11-26 김영기 전원 및 광신호 전송장치
US20130330084A1 (en) * 2012-04-12 2013-12-12 O2Micro Inc. Systems and Methods for Remotely Controlling Electronic Devices
KR101489810B1 (ko) 2012-09-11 2015-02-04 유한회사 셋토퍼 셋톱박스 리피터 및 이를 포함하는 셋톱박스 시스템
JP2015076837A (ja) * 2013-10-11 2015-04-20 ソニー株式会社 機器制御装置および機器制御方法
KR102216451B1 (ko) * 2014-10-01 2021-02-17 삼성전자주식회사 디스플레이 장치, 디스플레이 장치의 제어 시스템 및 제어 방법
US20160119741A1 (en) * 2014-10-22 2016-04-28 Grand Mate Co., Ltd. Remote control system and signal converter of the same
KR20160071784A (ko) * 2014-12-12 2016-06-22 삼성전자주식회사 셋톱박스의 채널 전환 방법 및 이를 위한 장치
KR20160087649A (ko) * 2015-01-14 2016-07-22 삼성전자주식회사 사용자 단말 장치, 시스템 및 그 제어 방법
KR20160126452A (ko) * 2015-04-23 2016-11-02 엘지전자 주식회사 복수의 디바이스에 대한 원격제어를 수행할 수 있는 원격제어장치
KR102444075B1 (ko) * 2015-06-09 2022-09-16 삼성전자주식회사 전자 장치, 주변 기기 및 그 제어 방법
KR101739976B1 (ko) 2015-07-02 2017-05-26 주식회사 스마트올웨이즈온 Ir 신호를 학습하여 종속 전자 장치를 제어하거나 종속 전자 장치의 제어를 지원하기 위한 방법 및 장치
CN205029807U (zh) 2015-08-11 2016-02-10 四川长虹电器股份有限公司 电视机红外遥控信号转发装置
KR102411611B1 (ko) * 2016-01-05 2022-06-21 삼성전자주식회사 디스플레이 장치 및 그의 제어방법
KR102407127B1 (ko) * 2016-01-05 2022-06-10 삼성전자주식회사 디스플레이 시스템, 디스플레이 장치 및 그의 제어 방법
KR102406380B1 (ko) * 2016-01-05 2022-06-08 삼성전자주식회사 디스플레이 시스템, 디스플레이 장치 및 그의 제어 방법
KR102415036B1 (ko) * 2016-07-05 2022-07-01 삼성전자주식회사 전자 장치 및 그 제어 방법
KR101739554B1 (ko) * 2016-07-19 2017-05-24 리모트솔루션주식회사 Edid를 활용한 리모컨 설정 방법
KR102476228B1 (ko) * 2016-08-29 2022-12-12 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어방법
KR20180033681A (ko) * 2016-09-26 2018-04-04 삼성전자주식회사 디스플레이 장치 및 그 파워 제어 방법
KR102519165B1 (ko) * 2016-11-24 2023-04-07 삼성전자주식회사 원격 제어 장치, 디스플레이 장치 및 그들의 제어 방법
KR20180079885A (ko) * 2017-01-03 2018-07-11 삼성전자주식회사 전자 장치 및 이의 제어 방법
US10536739B2 (en) * 2017-01-04 2020-01-14 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US20180197501A1 (en) * 2017-01-06 2018-07-12 Intel Corporation Display connection switching
JP6763352B2 (ja) * 2017-07-05 2020-09-30 Smk株式会社 機器制御装置、プログラム及びリモートコントロールシステム
US10560654B2 (en) * 2017-09-20 2020-02-11 Lg Electronics Inc. Display device
KR102393917B1 (ko) * 2017-10-13 2022-05-04 삼성전자주식회사 원격 제어 장치, 디스플레이 장치, 시스템 및 그 제어 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001169368A (ja) * 1999-12-07 2001-06-22 Kenwood Corp リモートコントローラ及び送信制御方法
US20050122438A1 (en) * 2000-04-20 2005-06-09 Canon Kabushiki Kaisha Control apparatus and control method
KR20100012523A (ko) * 2008-07-29 2010-02-08 삼성전자주식회사 영상처리시스템 및 그 제어방법
KR20130051153A (ko) * 2011-11-09 2013-05-20 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR20150071944A (ko) * 2013-12-19 2015-06-29 삼성전자주식회사 디스플레이 장치, 이의 통합 리모컨 설정 방법, 통합 리모컨 및 이의 설정 방법

Also Published As

Publication number Publication date
US20200273323A1 (en) 2020-08-27
KR102369121B1 (ko) 2022-03-03
US11011054B2 (en) 2021-05-18
KR20190041067A (ko) 2019-04-22

Similar Documents

Publication Publication Date Title
WO2019074260A1 (en) REMOTE CONTROL, DISPLAY APPARATUS, SYSTEM AND METHOD FOR CONTROLLING THE SAME
WO2017119683A1 (en) Display system, display apparatus, and controlling method thereof
WO2018008823A1 (en) Electronic apparatus and controlling method thereof
WO2018066841A1 (en) Display apparatus, electronic apparatus connectable to display apparatus, and method for controlling the same
WO2020145552A1 (en) Image display device and operation method thereof
WO2017034130A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2015119389A1 (en) User terminal and control method thereof
WO2020096288A1 (en) Display apparatus and control method thereof
WO2021101327A1 (en) Display device and operating method thereof
WO2019074243A1 (en) DISPLAY DEVICE, USER TERMINAL DEVICE, DISPLAY SYSTEM COMPRISING THE SAME, AND ASSOCIATED COMAND METHOD
WO2019074181A1 (ko) 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
WO2017146518A1 (en) Server, image display apparatus, and method of operating the image display apparatus
WO2022124752A1 (ko) 전자 장치 및 전자 장치의 제어 방법
WO2020071870A1 (en) Image display device and method of providing broadcast program information
WO2016035950A1 (ko) 디지털 디바이스 및 그 제어 방법
WO2018110956A1 (en) Display apparatus presenting status of external electronic apparatus and controlling method thereof
WO2022060023A1 (ko) 전자 장치 및 그 제어 방법
WO2019112332A1 (en) Electronic apparatus and control method thereof
WO2022092535A1 (ko) 전자 장치 및 그 제어 방법
WO2022177073A1 (en) Display device for managing external device connected thereto through bluetooth communication and method for managing bluetooth-connected external device
WO2017047985A1 (en) Display apparatus and method for controlling the same
WO2019035617A1 (en) DISPLAY APPARATUS AND METHOD FOR PROVIDING CONTENT THEREFOR
WO2017065522A1 (en) Display apparatus and the controlling method thereof
WO2020222389A1 (ko) 디스플레이 장치
WO2019088471A1 (ko) 전자 장치 및 이를 제어하는 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18865643

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18865643

Country of ref document: EP

Kind code of ref document: A1