KR20150114810A - Display apparatus, control method thereof, and display system - Google Patents

Display apparatus, control method thereof, and display system Download PDF

Info

Publication number
KR20150114810A
KR20150114810A KR1020140039471A KR20140039471A KR20150114810A KR 20150114810 A KR20150114810 A KR 20150114810A KR 1020140039471 A KR1020140039471 A KR 1020140039471A KR 20140039471 A KR20140039471 A KR 20140039471A KR 20150114810 A KR20150114810 A KR 20150114810A
Authority
KR
South Korea
Prior art keywords
image
display
display devices
displayed
display device
Prior art date
Application number
KR1020140039471A
Other languages
Korean (ko)
Inventor
김정대
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140039471A priority Critical patent/KR20150114810A/en
Publication of KR20150114810A publication Critical patent/KR20150114810A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4108Peripherals receiving signals from specially adapted client devices characterised by an identification number or address, e.g. local network address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

The present invention relates to a display device and a control method thereof. The display device according to an embodiment of the present invention comprises: a display; a signal processing unit processing an image signal into an image which can be displayed on the display; one or more external display devices; a communication interface communicating with a camera for photographing the display device and one or more external display devices; and a control unit receiving the photographed images from the camera while predetermined identification images are displayed respectively on the display and one or more external display devices to control operation of image processing for at least one among the signal processing unit and one or more external display devices, based on a display state of each identification image shown in the photographed image, thereby correcting a non-matching state between the images shown respectively on the display and one or more external display devices.

Description

디스플레이장치 및 그 제어방법과, 디스플레이 시스템 {DISPLAY APPARATUS, CONTROL METHOD THEREOF, AND DISPLAY SYSTEM}DISPLAY DEVICE AND CONTROL METHOD THEREOF, DISPLAY APPARATUS, CONTROL METHOD THEREOF, AND DISPLAY SYSTEM,

본 발명은 외부로부터 수신되는 영상신호를 처리하여 영상으로 표시 가능한 디스플레이장치 및 그 제어방법과, 복수 개의 이러한 디스플레이장치를 포함하는 디스플레이 시스템에 관한 것으로서, 상세하게는 복수의 디스플레이장치에서 각각 표시되는 영상들 사이에 정합성(coherence)을 가지고 각 영상이 표시되도록 제공하는 구조의 디스플레이장치 및 그 제어방법과, 디스플레이 시스템에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to a display device capable of displaying an image signal received from the outside and displaying the image, and a display system including a plurality of such display devices, And a method of controlling the same, and a display system.

디스플레이장치는 외부로부터 입력되거나 내부에 저장되어 있는 영상신호/영상데이터를 다양한 프로세스에 의해 처리하여 디스플레이 패널(panel) 또는 스크린(screen) 상에 영상으로 표시하는 장치로서, 그 방식에 따라서 TV, 모니터, 휴대용 미디어 플레이어 등 다양하게 구현된다.A display device is a device that processes video signals / video data input from the outside or stored in the inside by various processes and displays the video signal / video data on a display panel or a screen as an image, , A portable media player, and the like.

공공장소 또는 야외에서와 같이 먼 곳에 있는 사용자들도 영상을 볼 수 있도록 하기 위한 사용환경에서는 대화면이 요구되므로, 이를 위하여 패널의 크기가 큰 디스플레이장치가 적용될 수 있다. 그러나, 하나의 패널로 대화면을 구현하는 것이 기술, 비용, 환경 등 다양한 요인 때문에 곤란할 수도 있는 바, 이 경우에는 복수의 디스플레이장치를 여러 가지 형태로 배치함으로써 하나의 디스플레이 시스템을 구현하는 방법도 가능하다. 이러한 디스플레이 시스템의 일반적인 예로는, 복수의 디스플레이장치 또는 디스플레이 패널을 매트릭스(matrix) 형태로 배치한 비디오 월(video wall)이 있다.Since a large screen is required in a use environment in which a user at a remote location, such as a public place or an outdoor place, can view an image, a display device having a large panel size can be applied. However, it may be difficult to implement a large screen with one panel due to various factors such as technology, cost, environment, etc. In this case, a method of implementing a single display system by arranging a plurality of display devices in various forms is also possible . A typical example of such a display system is a video wall in which a plurality of display devices or display panels are arranged in a matrix form.

그런데, 비디오 월은 단순히 매트릭스 형태 뿐만 아니라, 사선으로 각 디스플레이장치를 배치하는 등의 다양한 비 매트릭스 형태로 구성할 수 있으며, 또한 서로 다른 크기의 화면을 가지는 복수의 디스플레이장치로 구성할 수도 있다. 이와 같이 불규칙한 형태의 비디오 월에 의한 전체 화면 상에 사용자가 자연스럽게 인식할 수 있는 영상을 표시할 때에는 각 디스플레이장치 사이의 거리 또는 상대적인 배치관계에 따라서 적절히 각 디스플레이장치에 표시되는 영상이 조정될 필요가 있는 바, 비디오 월에는 이와 관련된 구성이 제공되어야 한다.However, the video wall may be configured not only in a matrix form, but also in various non-matrix forms such as arranging each display apparatus by an oblique line, or may be composed of a plurality of display apparatuses having screens of different sizes. When an image that can be recognized naturally by the user on the entire screen by the irregularly shaped video wall is displayed, it is necessary to appropriately adjust the image displayed on each display device in accordance with the distance between the display devices or the relative arrangement relationship The bars and videowars shall be provided with a related configuration.

본 발명의 실시예에 따른 디스플레이장치는, 디스플레이와; 영상신호를 상기 디스플레이 상에 영상으로 표시되게 처리하는 신호처리부와; 하나 이상의 외부 디스플레이장치와, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치를 촬영하는 카메라와 통신하는 통신 인터페이스와; 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각기 기 설정된 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하면, 상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 신호처리부 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정함으로써 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.A display device according to an embodiment of the present invention includes: a display; A signal processor for processing the video signal to display the video signal on the display; A communication interface for communicating with the at least one external display device, the camera capturing the display device and the at least one external display device; And a controller for controlling the signal processing unit and the image processing unit based on a display state of each of the identification images displayed in the captured image when the taken image photographed while the predetermined identification image is displayed on the display and the one or more external display devices is received from the camera, And a controller for controlling an adjustment of an unmatched state between images displayed on the display and the one or more external display devices by adjusting an image processing operation of at least one of the one or more external display devices .

여기서, 상기 비정합 상태는 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각기 표시되는 복수의 영상 중에서 제1영상 및 제2영상 사이의 공간적 비정합일 수 있다.Here, the unmatched state may be a spatial incoherence between the first image and the second image among a plurality of images displayed on the display and the one or more external display devices, respectively.

여기서, 상기 제어부는, 상기 신호처리부 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나에 의한 영상 스케일링 동작을 제어함으로써 상기 공간적 비정합을 교정할 수 있다.Here, the controller may correct the spatial mismatch by controlling an image scaling operation by at least one of the signal processing unit and the one or more external display devices.

여기서, 상기 제어부는, 상기 촬영영상 내에서 상기 제1영상 및 상기 제2영상 사이의 물리적 간격을 산출하며, 상기 산출된 물리적 간격에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 제1영상이 표시된 제1장치 또는 상기 제2영상이 표시된 제2장치에 의한 영상 스케일링 동작을 제어할 수 있다.Here, the control unit may calculate a physical distance between the first image and the second image in the photographed image, and calculate, based on the calculated physical interval, the physical distance between the first display and the second display, The image scaling operation by the first device displaying the image or the second device displaying the second image can be controlled.

여기서, 상기 제1영상 및 상기 제2영상 사이의 물리적 간격은, 상기 제1장치의 베젤 폭과, 상기 제2장치의 베젤 폭과, 상기 제1장치 및 상기 제2장치 사이의 간격의 총합일 수 있다.Here, the physical distance between the first image and the second image is a sum of the bezel width of the first device, the bezel width of the second device, and the interval between the first device and the second device .

또한, 상기 비정합 상태는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 적어도 어느 하나의 장치에 표시되는 영상 및 나머지 장치에 표시되는 영상 사이의 동기 불일치를 포함할 수 있다.The unmatched state may include a sync mismatch between an image displayed on at least one of the display device and the one or more external display devices, and an image displayed on the remaining device.

여기서, 상기 제어부는, 상기 디스플레이 및 상기 외부 디스플레이장치 각각에 동일한 상기 식별영상이 표시되게 제어할 수 있다.Here, the control unit may control to display the same identification image on the display and the external display device, respectively.

여기서, 상기 제어부는, 기 설정된 시간 동안에 촬영된 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화에 따라서, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 나머지 장치와 동기가 불일치하는 제3장치를 판별할 수 있다.Here, the controller may further include a third device, which is inconsistent in synchronization with the remaining device among the display device and the one or more external display devices, according to a change of each of the identification images, Can be determined.

여기서, 상기 제어부는, 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화 시점에 기초하여 상기 제3장치에 의한 영상표시 타이밍의 어긋나는 시간값을 산출하고, 상기 산출된 시간값에 대응하는 지연값으로 상기 제3장치에 표시되는 영상의 타이밍을 조정할 수 있다.Here, the control unit may calculate a time value deviating from the video display timing by the third device based on the change time point of each of the identification images displayed in the captured image, and calculate a delay value corresponding to the calculated time value The timing of the video displayed on the third device can be adjusted.

또한, 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각각 표시되는 상기 식별영상은 상호간에 상이한 영상을 포함하며, 상기 제어부는, 상기 촬영영상 내에서의 상기 식별영상의 내용에 기초하여 상기 디스플레이장치 및 상기 외부 디스플레이장치 사이의 상대적인 위치를 판단할 수 있다.Also, the identification images displayed on the display and the one or more external display devices may include mutually different images, and the controller may control the display device and the display device based on the content of the identification image in the captured image, It is possible to determine the relative position between the external display devices.

또한, 본 발명의 실시예에 따른 디스플레이장치의 제어방법은, 하나 이상의 외부 디스플레이장치와, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치를 촬영하는 카메라와 통신하는 단계와; 기 설정된 식별영상을 표시하는 단계와; 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각각 상기 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하는 단계와; 상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정하도록 제어함으로써 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하는 단계를 포함하는 것을 특징으로 한다.Further, a method of controlling a display device according to an embodiment of the present invention includes: communicating with at least one external display device, a camera that photographs the display device and the at least one external display device; Displaying a predetermined identification image; Receiving from the camera a photographed image photographed while the identification image is displayed on the display and the one or more external display devices, respectively; And controlling the image processing operation of at least one of the display device and the one or more external display devices based on a display state of each of the identification images displayed in the captured image, And correcting an unmatched state between the images displayed on the display unit.

여기서, 상기 비정합 상태는 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치에 각기 표시되는 복수의 영상 중에서 제1영상 및 제2영상 사이의 공간적 비정합일 수 있다.Here, the unmatched state may be a spatial incoherence between the first image and the second image among a plurality of images displayed on the display device and the one or more external display devices, respectively.

여기서, 상기 교정 단계는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나에 의한 영상 스케일링 동작을 제어함으로써 상기 공간적 비정합을 교정하는 단계를 포함할 수 있다.Here, the calibration step may include correcting the spatial mismatch by controlling an image scaling operation by at least one of the display device and the at least one external display device.

여기서, 상기 공간적 비정합의 교정 단계는, 상기 촬영영상 내에서 상기 제1영상 및 상기 제2영상 사이의 물리적 간격을 산출하는 단계와; 상기 산출된 물리적 간격에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 제1영상이 표시된 제1장치 또는 상기 제2영상이 표시된 제2장치에 의한 영상 스케일링 동작을 제어하는 단계를 포함할 수 있다.The step of calibrating the spatial non-coincidence may include calculating a physical interval between the first image and the second image in the captured image; And controlling the image scaling operation by the first device displaying the first image or the second device displaying the second image among the display device and the one or more external display devices based on the calculated physical interval .

여기서, 상기 제1영상 및 상기 제2영상 사이의 물리적 간격은, 상기 제1장치의 베젤 폭과, 상기 제2장치의 베젤 폭과, 상기 제1장치 및 상기 제2장치 사이의 간격의 총합일 수 있다.Here, the physical distance between the first image and the second image is a sum of the bezel width of the first device, the bezel width of the second device, and the interval between the first device and the second device .

또한, 상기 비정합 상태는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 적어도 어느 하나의 장치에 표시되는 영상 및 나머지 장치에 표시되는 영상 사이의 동기 불일치를 포함할 수 있다.The unmatched state may include a sync mismatch between an image displayed on at least one of the display device and the one or more external display devices, and an image displayed on the remaining device.

여기서, 상기 식별영상의 표시 단계는, 상기 디스플레이장치 및 상기 외부 디스플레이장치 각각에 동일한 상기 식별영상이 표시되게 제어하는 단계를 포함할 수 있다.Here, the displaying of the identification image may include controlling the same identification image to be displayed on each of the display device and the external display device.

여기서, 상기 교정 단계는, 기 설정된 시간 동안에 촬영된 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화에 따라서, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 나머지 장치와 동기가 불일치하는 제3장치를 판별하는 단계를 포함할 수 있다.Here, the calibration step may include a third step of synchronizing the display device and the at least one external display device with the remaining device in accordance with a change of each of the identification images, And determining the device.

여기서, 상기 교정 단계는, 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화 시점에 기초하여 상기 제3장치에 의한 영상표시 타이밍의 어긋나는 시간값을 산출하는 단계와; 상기 산출된 시간값에 대응하는 지연값으로 상기 제3장치에 표시되는 영상의 타이밍을 조정하는 단계를 포함할 수 있다.Here, the calibration step may include calculating a time value at which the third device deviates the image display timing based on the change time point of each of the identification images displayed in the captured image; And adjusting a timing of an image displayed on the third device with a delay value corresponding to the calculated time value.

또한, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치에 각각 표시되는 상기 식별영상은 상호간에 상이한 영상을 포함하며, 상기 촬영영상 내에서의 상기 식별영상의 내용에 기초하여 상기 디스플레이장치 및 상기 외부 디스플레이장치 사이의 상대적인 위치를 판단하는 단계를 더 포함할 수 있다.In addition, the identification images displayed on the display device and the one or more external display devices may include mutually different images, and the display device and the external display device And determining a relative position between the first and second regions.

또한, 본 발명의 실시예에 따른 디스플레이 시스템은, 영상을 표시 가능한 복수의 디스플레이장치와; 상기 복수의 디스플레이장치를 촬영하는 카메라와; 상기 복수의 디스플레이장치 사이의 상대적 위치에 기초하여 상기 복수의 디스플레이장치 각각에 상기 영상이 표시되도록 제어하는 호스트장치를 포함하며, 상기 호스트장치는, 상기 복수의 디스플레이장치 및 상기 카메라와 통신하는 통신부와; 상기 복수의 디스플레이장치에 각기 기 설정된 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하면, 상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 복수의 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정함으로써 상기 복수의 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a display system including: a plurality of display devices capable of displaying images; A camera for photographing the plurality of display devices; And a host device for controlling the display of the image on each of the plurality of display devices based on a relative position between the plurality of display devices, wherein the host device comprises: a communication unit communicating with the plurality of display devices and the camera; ; Wherein at least one of the plurality of display devices is displayed on the display device based on the display state of each of the identification images displayed in the captured image when the taken images photographed while the predetermined identification images are displayed on the plurality of display devices are received from the camera And a controller for controlling the adjustment of the unconformity between images displayed on each of the plurality of display devices by adjusting one image processing operation.

도 1은 본 발명의 제1실시예에 따른 디스플레이 시스템의 예시도,
도 2는 도 1과 상이한 형태로 복수의 디스플레이장치를 배치한 구조의 디스플레이 시스템의 예시도,
도 3은 도 1의 디스플레이 시스템 중 두 디스플레이장치에서 각기 분할된 영상을 표시하는 모습을 나타내는 예시도,
도 4는 도 1의 디스플레이 시스템의 구성 블록도,
도 5 및 도 6은 도 1의 디스플레이 시스템에서 각 디스플레이장치 사이의 상대 위치를 판단하도록 각 디스플레이장치에 표시되는 영상의 예시도,
도 7은 도 1의 디스플레이 시스템에서 호스트장치의 제어방법을 나타내는 플로우차트,
도 8은 본 발명의 제2실시예에서 단위시간 별로 각 디스플레이장치에 표시되는 영상의 일례를 나타내는 예시도,
도 9는 본 발명의 제2실시예에 따라서 각 디스플레이장치의 영상표시 타이밍의 동기 시간차를 판단하도록 각 디스플레이장치에 표시되는 영상의 예시도,
도 10은 본 발명의 제2실시예에 따른 호스트장치의 제어방법을 나타내는 플로우차트이다.
1 is an exemplary view of a display system according to a first embodiment of the present invention,
FIG. 2 is an exemplary view of a display system having a structure in which a plurality of display devices are arranged in a form different from FIG. 1;
FIG. 3 is a diagram illustrating an example of displaying divided images in two display devices of the display system of FIG. 1;
Figure 4 is a block diagram of the configuration of the display system of Figure 1;
FIG. 5 and FIG. 6 are exemplary views of images displayed on each display device to determine relative positions between the display devices in the display system of FIG. 1,
FIG. 7 is a flowchart showing a control method of the host apparatus in the display system of FIG. 1;
8 is an exemplary view showing an example of an image displayed on each display device per unit time in the second embodiment of the present invention;
FIG. 9 is an exemplary view of an image displayed on each display device so as to determine a synchronous time difference of video display timing of each display device according to a second embodiment of the present invention;
10 is a flowchart showing a control method of the host apparatus according to the second embodiment of the present invention.

이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다. 이하 실시예에서는 본 발명의 사상과 직접적인 관련이 있는 구성들에 관해서만 설명하며, 그 외의 구성에 관해서는 설명을 생략한다. 그러나, 본 발명의 사상이 적용된 장치 또는 시스템을 구현함에 있어서, 이와 같이 설명이 생략된 구성이 불필요함을 의미하는 것이 아님을 밝힌다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings. In the following embodiments, only configurations directly related to the concept of the present invention will be described, and description of other configurations will be omitted. However, it is to be understood that, in the implementation of the apparatus or system to which the spirit of the present invention is applied, it is not meant that the configuration omitted from the description is unnecessary.

도 1은 본 발명의 제1실시예에 따른 디스플레이 시스템(1)의 예시도이다.1 is an exemplary diagram of a display system 1 according to a first embodiment of the present invention.

도 1에 도시된 바와 같이, 본 실시예에 따른 디스플레이 시스템(1)은 복수의 디스플레이장치(210, 220, 230, 240)와, 각 디스플레이장치(210, 220, 230, 240)에 유선/무선으로 영상신호를 제공하는 호스트장치(100)를 포함한다. 본 발명의 사상이 적용되는 디스플레이 시스템(1)의 구현 방식은 이와 같은 실시예에 한정되지 않으며 다양한 방식이 적용될 수 있는 바, 예를 들면 별도의 호스트장치(100) 대신에 복수의 디스플레이장치(210, 220, 230, 240) 중에서 어느 하나가 호스트장치(100)의 역할을 수행할 수도 있다.1, the display system 1 according to the present embodiment includes a plurality of display devices 210, 220, 230, and 240, and wired / wireless devices 210, 220, 230, And a host device 100 for providing a video signal to the host device 100. The embodiment of the display system 1 to which the concept of the present invention is applied is not limited to this embodiment, and various methods can be applied. For example, instead of the separate host device 100, a plurality of display devices 210 , 220, 230, and 240 may serve as the host apparatus 100.

복수의 디스플레이장치(210, 220, 230, 240)는 본 실시예에 따르면 비디오 월(video-wall)을 구성한다. 소정의 영상을 대화면으로 구현하는 방법은 여러 가지가 있을 수 있는데, 예를 들면 대화면의 패널을 구비한 하나의 디스플레이장치(210, 220, 230, 240)로 영상을 표시하는 구조가 가능하다. 그러나, 이 경우에는 기술상 구현 가능한 패널 크기 이상의 화면을 표시하는 것이 곤란하며, 패널 크기가 커지게 되면 패널 상에 영상을 표시하는 과정에서 지연이 발생할 수도 있다.The plurality of display devices 210, 220, 230 and 240 constitute a video-wall according to the present embodiment. There are various methods of implementing a predetermined image on a large screen. For example, a structure for displaying an image on one display device 210, 220, 230, 240 having a large screen panel is possible. However, in this case, it is difficult to display a screen larger than the panel size that can be realized in the technology. If the panel size becomes larger, a delay may occur in displaying the image on the panel.

비디오 월은 하나의 디스플레이장치(210, 220, 230, 240)가 아닌, 복수의 디스플레이장치(210, 220, 230, 240)를 연계시켜 영상을 표시하는 구조의 시스템이다. 예를 들어 하나의 영상프레임은 복수의 디스플레이장치(210, 220, 230, 240)에 대응하도록 영역 별로 분할되며, 각 디스플레이장치(210, 220, 230, 240)는 영상프레임의 각 분할영역을 개별적으로 표시한다. 이로써, 디스플레이 시스템(1)은 최종적으로 하나의 영상프레임을 대화면으로 표시할 수 있다.The video wall is a system for displaying an image by linking a plurality of display devices 210, 220, 230, 240 rather than one display device 210, 220, 230, 240. For example, one image frame is divided into regions corresponding to the plurality of display devices 210, 220, 230, and 240, and each of the display devices 210, 220, 230, . In this way, the display system 1 can finally display one image frame on a large screen.

복수의 디스플레이장치(210, 220, 230, 240)는 대화면의 스크린을 구현하기 위해, 벽면을 따라서 또는 지면 상에 기립하여 상호 평행하게 배치된다. 예를 들면, 본 도면에서는 동일한 모델인 4개의 디스플레이장치(210, 220, 230, 240)가 매트릭스 방식에 따라서 2x2 행렬 배치되어 있는 형태를 나타내고 있으나 이는 하나의 예시에 불과하며, 디스플레이장치(210, 220, 230, 240)의 수량과 배치 방식은 다양하게 변경 적용될 수 있는 사항인 바, 본 발명의 사상을 한정하지 않는다.The plurality of display devices 210, 220, 230, and 240 are disposed parallel to each other along the wall surface or standing on the ground to realize a screen of a large screen. For example, in this figure, four display devices 210, 220, 230, and 240, which are the same model, are arranged in a 2x2 matrix according to a matrix method, but this is only an example, and the display devices 210, 220, 230, and 240 may be variously modified, and thus the present invention is not limited thereto.

2x2 행렬 배치된 복수의 디스플레이장치(210, 220, 230, 240)에 대해, 호스트장치(100)는 영상신호를 각각에 출력한다. 영상신호의 영상프레임이 디스플레이장치(210, 220, 230, 240)의 배치에 대응하여 2x2로 분할되고 영상프레임의 각 분할영역이 각 디스플레이장치(210, 220, 230, 240)에 표시됨으로써 전체 영상프레임이 표시되거나, 복수의 디스플레이장치(210, 220, 230, 240) 중에서 일부 디스플레이장치(210, 220, 230, 240)에만 특정 영상이 표시될 수도 있다. 이러한 동작은, 복수의 디스플레이장치(210, 220, 230, 240)가 각기 2x2 행렬 배치 내에서 자신의 위치를 판단하거나 또는 호스트장치(100)가 2x2 행렬 배치 내에서 각 디스플레이장치(210, 220, 230, 240)의 위치를 판단함으로써 가능하다.For a plurality of display devices 210, 220, 230, and 240 arranged in a 2x2 matrix, the host device 100 outputs video signals to the display devices 210, 220, 230, and 240, respectively. The video frame of the video signal is divided into 2x2 corresponding to the arrangement of the display devices 210, 220, 230 and 240 and each divided area of the video frame is displayed on each of the display devices 210, 220, 230 and 240, A frame may be displayed or a specific image may be displayed only on some of the display devices 210, 220, 230, and 240 among the plurality of display devices 210, 220, 230, This operation may be performed by a plurality of display devices 210, 220, 230, 240 each determining their position within a 2x2 matrix arrangement, or the host device 100 may determine each display device 210, 220, 230, and 240, respectively.

그런데, 본 발명의 사상은 동일한 모델의 디스플레이장치(210, 220, 230, 240)를 행렬 방식으로 배치한 구조의 시스템에만 적용하는 것이 아니다.However, the idea of the present invention is not applied to a system in which the display devices 210, 220, 230, and 240 of the same model are arranged in a matrix manner.

도 2는 도 1과 상이한 형태로 복수의 디스플레이장치(310, 320, 330, 340, 350)를 배치한 구조의 디스플레이 시스템(2)의 예시도이다.FIG. 2 is an exemplary view of a display system 2 having a structure in which a plurality of display devices 310, 320, 330, 340, and 350 are arranged in a form different from FIG.

도 2에 도시된 바와 같이, 디스플레이 시스템(2)은 서로 상이한 모델의 복수의 디스플레이장치(310, 320, 330, 340, 350)가 비 매트릭스 방식으로 배치될 수도 있다.As shown in FIG. 2, the display system 2 may have a plurality of display devices 310, 320, 330, 340, 350 of different models arranged in a non-matrix manner.

비 매트릭스 방식에서 각 디스플레이장치(310, 320, 330, 340, 350)는 서로 상이한 크기 또는 해상도를 가질 수 있으며, 또한 상호간에 행렬이 맞는 상태가 아닌 비정규적인 상태로 배치될 수 있다. 호스트장치(미도시)가 이러한 형태로 배치된 복수의 디스플레이장치(310, 320, 330, 340, 350)에 영상을 표시하기 위해서는, 호스트장치(미도시)는 각 디스플레이장치(310, 320, 330, 340, 350)의 크기 및 해상도와, 각 디스플레이장치(310, 320, 330, 340, 350) 사이의 배치 관계에 관한 설치형태 정보를 사전에 알고 있어야 한다. 호스트장치(미도시)는 이러한 설치형태 정보에 기초하여 각 디스플레이장치(310, 320, 330, 340, 350)에 적절히 영상이 표시되도록 제어한다.In the non-matrix system, each of the display devices 310, 320, 330, 340, and 350 may have different sizes or resolutions, and may be arranged in an irregular state other than a matrix matched state. In order to display an image on a plurality of display devices 310, 320, 330, 340 and 350 in which a host device (not shown) is arranged in this manner, a host device (not shown) 320, 330, 340, and 350, and the installation type information about the layout relationship between the display devices 310, 320, 330, 340, and 350, in advance. The host device (not shown) controls the display devices 310, 320, 330, 340, and 350 to appropriately display images based on the installation type information.

특히, 복수의 디스플레이장치(310, 320, 330, 340, 350)에서 표시되는 영상이 전체적으로 사용자에게 자연스럽게 인식되도록 하기 위해서는, 설치형태 정보는 각 디스플레이장치(310, 320, 330, 340, 350)에 표시되는 영상들 사이의 간격을 포함하여야 한다.In particular, in order to allow the user to recognize the images displayed on the plurality of display devices 310, 320, 330, 340, and 350 as a whole, the installation type information is displayed on the display devices 310, 320, 330, 340, It should include the spacing between displayed images.

도 3은 두 디스플레이장치(210, 220)에서 각기 분할된 영상(M1, M2)을 표시하는 모습을 나타내는 예시도이다.FIG. 3 is a diagram illustrating an example of displaying divided images M1 and M2 in the two display devices 210 and 220. Referring to FIG.

도 3에 도시된 바와 같이, 삼각형의 일부를 나타내는 전체 영상이 분할되며, 각 분할 영상(M1, M2)이 두 디스플레이장치(210, 220)에 각기 표시되어 있다.As shown in FIG. 3, the entire image representing a part of the triangle is divided, and the divided images M1 and M2 are displayed on the two display devices 210 and 220, respectively.

그런데, 비디오 월의 구조에서 이들 두 영상(M1, M2)은 물리적으로 간격이 0이 될 수가 없다. 기본적으로 디스플레이장치(210, 220)는 영상을 표시하는 디스플레이(213, 223)만 가지는 것이 아니라, 디스플레이(213, 223)의 상하좌우 4방향 모서리를 지지하는 프레임인 베젤(216, 226)을 가진다. 두 베젤(213, 223)를 접촉시키는 형태로 두 디스플레이장치(210, 220)를 설치한다고 하더라도, 기본적으로 베젤(216, 226) 자체의 폭으로 인해 두 영상(M1, M2) 사이에는 물리적인 간격이 발생한다.However, in the structure of the video wall, these two images M1 and M2 can not physically have an interval of zero. Basically, the display devices 210 and 220 have not only the displays 213 and 223 for displaying images, but also bezels 216 and 226, which are frames that support the upper, lower, left, and right four corners of the displays 213 and 223 . Even if the two display devices 210 and 220 are installed in such a manner that the two bezels 213 and 223 are brought into contact with each other, a physical interval between the two images M1 and M2 is basically caused by the width of the bezels 216 and 226 themselves Lt; / RTI >

또한, 디스플레이장치(210, 220)의 설치 형태에 따라서 두 베젤(216, 226) 사이에 물리적 간격이 발생할 수 있으며, 이 경우에는 두 베젤(216, 226)에 폭과 베젤(216, 226) 사이의 간격의 합만큼 두 영상(M1, M2) 사이에 물리적인 간격이 발생한다.In addition, a physical spacing may occur between the two bezels 216 and 226 depending on the installation of the display devices 210 and 220. In this case, the widths of the two bezels 216 and 226 and the widths of the bezels 216 and 226 A physical gap is generated between the two images M1 and M2 by the sum of the distances of the two images M1 and M2.

따라서, 두 디스플레이장치(210, 220)에서 특정한 스케일링 처리 없이 각기 영상(M1, M2)을 그대로 표시한다면, 이들 영상(M1, M2)은 전체적으로 사용자에게 자연스럽지 못하게 인식될 수 있다.Therefore, if the two display devices 210 and 220 directly display the images M1 and M2 without specific scaling processing, the images M1 and M2 can be perceived to be unnatural to the user as a whole.

본 도면에서 위 영상(M1)의 좌측 모서리를 연장하면 아래 디스플레이장치(220)의 디스플레이(222)의 점 P2에 도달하지만, 아래 영상(M2)의 좌측 모서리는 실제로 점 P1로부터 시작된다. 즉, 두 영상(M1, M2)은 사용자에게 있어서 표시 상태가 상호간에 공간적인 정합이 어긋난 상태로 인지된다. 만일 두 영상(M1, M2)이 사용자에게 전체적으로 자연스럽게 인지되게 위해서는 아래 영상(M2)의 좌측 모서리가 점 P2로부터 연장되는 형태로 영상(M2)이 표시되어야 한다.In this figure, when the left edge of the upper image M1 is extended, the point P2 of the display 222 of the lower display device 220 is reached, but the left edge of the lower image M2 actually starts from the point P1. That is, the two images M1 and M2 are recognized by the user as a state in which the display states are misaligned with respect to each other. In order for the two images M1 and M2 to be perceived as a whole by the user, the image M2 should be displayed in such a manner that the left edge of the lower image M2 extends from the point P2.

이를 위해서, 호스트장치(100)는 두 영상(M1, M2) 사이의 물리적 간격에 기초하여 두 영상(M1, M2)을 상호간에 정합이 맞도록 각 영상(M1, M2)에 대한 스케일링 처리를 제어한다. 여기서, 두 영상(M1, M2) 사이의 물리적 간격은 제1디스플레이장치(210)의 베젤(216)의 폭 W1과, 제2디스플레이장치(220)의 베젤(226)의 폭 W2와, 제1디스플레이장치(210) 및 제2디스플레이장치(220) 사이의 간격 W3의 총합인 W1+W2+W3을 의미한다.To this end, the host apparatus 100 controls the scaling process for each of the images M1 and M2 so that the two images M1 and M2 match with each other based on the physical distance between the two images M1 and M2 do. Here, the physical distance between the two images M1 and M2 is determined by the width W1 of the bezel 216 of the first display device 210, the width W2 of the bezel 226 of the second display device 220, W1 + W2 + W3, which is the total of the interval W3 between the display device 210 and the second display device 220. [

두 영상(M1, M2) 사이의 물리적 간격에 기초하여 두 영상(M1, M2)을 상호간에 정합을 맞추는 동작은 다양한 방법이 적용될 수 있다. 예를 들면, 호스트장치(100)는 영상프레임의 전체영역에서 두 영상(M1, M2) 사이의 물리적 간격에 의해 표시되지 않는 영역을 결정하고, 이 결정된 영역을 제외한 나머지 영역을 각 영상(M1, M2)으로 분할할 수 있다. 또는, 호스트장치(100)는 영상프레임의 전체영역에서 일 영상(M1)을 특정하고, 특정된 영상(M1)을 기준으로 두 영상(M1, M2) 사이의 물리적 간격에 의해 표시되지 않는 영역을 제외한 이후에 나머지 영역을 영상(M2)으로 특정할 수도 있다.Various methods can be applied to the operation of matching the two images M1 and M2 based on the physical distance between the two images M1 and M2. For example, the host apparatus 100 determines an area that is not displayed by the physical distance between the two images M1 and M2 in the entire area of the image frame, and stores the remaining area excluding the determined area as the image M1, M2. ≪ / RTI > Alternatively, the host apparatus 100 specifies one image M1 in the entire area of the image frame, and displays an area not represented by the physical distance between the two images M1 and M2 on the basis of the specified image M1 The remaining area may be specified as the image M2.

이하, 호스트장치(100) 및 어느 한 디스플레이장치(210)의 구성에 관해 도 4를 참조하여 설명한다. 여기서, 디스플레이장치(210, 220, 230, 240)의 구성은 도 2 및 도 3의 디스플레이장치(210, 220, 230, 240, 310, 320, 330, 340) 중 어느 하나에 관해서만 설명하며, 나머지 디스플레이장치에 관한 구성은 디스플레이장치(210)의 경우를 응용하여 적용할 수 있으므로 그 설명을 생략한다.Hereinafter, the configuration of the host apparatus 100 and the display apparatus 210 will be described with reference to Fig. Here, the configuration of the display devices 210, 220, 230, and 240 is described only for one of the display devices 210, 220, 230, 240, 310, 320, 330, and 340 shown in FIGS. The remaining configuration of the display device can be applied to the display device 210, and the description thereof will be omitted.

도 4는 디스플레이 시스템(1)의 구성 블록도이다.Fig. 4 is a block diagram of the configuration of the display system 1. Fig.

도 4에 도시된 바와 같이, 디스플레이 시스템(1)은 호스트장치(100)와, 디스플레이장치(210)와 카메라(400)를 포함한다. 여기서, 카메라(400)는 호스트장치(100)와 별도의 장치로 구현되지만, 호스트장치(100)에 설치되는 경우도 가능하다.4, the display system 1 includes a host device 100, a display device 210, and a camera 400. [ Here, although the camera 400 is implemented as a separate apparatus from the host apparatus 100, it may be installed in the host apparatus 100. [

호스트장치(100)는 영상신호를 기 설정된 프로세스에 따라서 처리하는 호스트 신호처리부(host processor)(110)와, 호스트 신호처리부(110)에서 처리되는 영상신호를 출력하는 호스트 통신 인터페이스(host communication interface)(120)와, 데이터/정보가 저장되는 호스트 저장부(host storage)(130)와, 호스트장치(100)의 동작을 제어하는 호스트 제어부(host controller)(140)를 포함한다.The host apparatus 100 includes a host processor 110 for processing a video signal according to a predetermined process, a host communication interface for outputting a video signal processed by the host signal processor 110, A host storage 130 in which data / information is stored, and a host controller 140 for controlling the operation of the host device 100. [

호스트 신호처리부(110)는 호스트 저장부(130)에 기 저장되거나 또는 호스트 통신 인터페이스(120)를 통해 외부로부터 수신되는 영상신호를 영상처리 프로세스에 따라서 처리한다. 호스트 신호처리부(110)가 수행하는 영상처리 프로세스의 종류는 한정되지 않는 바, 예를 들면 소정 신호를 각 특성별 신호로 분배하는 디멀티플렉싱(de-multiplexing), 영상신호의 영상 포맷에 대응하는 디코딩(decoding), 인터레이스(interlace) 방식의 영상신호를 프로그레시브(progressive) 방식으로 변환하는 디인터레이싱(de-interlacing), 영상신호를 기 설정된 해상도로 조정하는 스케일링(scaling), 영상 화질 개선을 위한 노이즈 감소(noise reduction), 디테일 강화(detail enhancement), 프레임 리프레시 레이트(frame refresh rate) 변환 등을 포함할 수 있다.The host signal processing unit 110 processes image signals stored in the host storage unit 130 or received from the outside through the host communication interface 120 according to an image processing process. The type of the image processing process performed by the host signal processing unit 110 is not limited. For example, the host signal processing unit 110 may perform de-multiplexing for distributing a predetermined signal to each characteristic signal, de-interlacing to convert interlaced video signals to progressive ones, scaling to adjust video signals to predetermined resolutions, noise reduction for improving image quality, noise reduction, detail enhancement, frame refresh rate conversion, and the like.

호스트 신호처리부(110)는 이러한 프로세스를 수행하기 위한 칩셋(미도시), 메모리(미도시), 전자부품(미도시), 배선(미도시) 등의 회로 구성이 인쇄회로기판(미도시) 상에 실장된 영상처리보드(미도시)로 구현된다.The host signal processing unit 110 is connected to a printed circuit board (not shown) such as a chip set (not shown), memory (not shown), electronic components (not shown), wiring And an image processing board (not shown).

호스트 통신 인터페이스(120)는 다양한 유선/무선 통신 프로토콜에 따라서 외부와의 양방향 통신을 수행한다. 호스트 통신 인터페이스(120)는 외부로부터 수신되는 신호를 호스트 신호처리부(110) 또는 호스트 제어부(140)에 전달하며, 반면 호스트 신호처리부(110) 또는 호스트 제어부(140)에 의해 처리되는 신호를 외부로 전송할 수 있다. 예를 들면, 호스트 통신 인터페이스(120)는 호스트 신호처리부(110)에 의해 처리되는 영상신호를 디스플레이장치(210)로 전송한다.The host communication interface 120 performs bi-directional communication with the outside according to various wired / wireless communication protocols. The host communication interface 120 transmits a signal received from the outside to the host signal processing unit 110 or the host control unit 140 while the signal processed by the host signal processing unit 110 or the host control unit 140 is transmitted to the outside Lt; / RTI > For example, the host communication interface 120 transmits the video signal processed by the host signal processing unit 110 to the display device 210. [

호스트 저장부(130)는 플래시메모리(flash-memory), 하드디스크 드라이브(hard-disc drive)와 같은 비휘발성 메모리로 구현되며, 다양한 데이터 및 정보가 저장된다. 호스트 저장부(130)는 호스트 제어부(140)에 의해 억세스됨으로써 데이터의 독취, 기록, 수정, 삭제, 갱신 등이 수행된다.The host storage unit 130 is implemented as a non-volatile memory such as a flash memory or a hard-disc drive, and stores various data and information. The host storage unit 130 is accessed by the host control unit 140 to read, write, modify, delete, and update data.

호스트 제어부(140)는 CPU를 포함하며, 호스트장치(100)에서 수행되는 제반 동작의 중심적인 연산 및 제어의 중추를 담당한다. 예를 들면, 호스트 제어부(140)는 호스트 저장부(130)에 기 저장된 설정정보나 호스트 통신 인터페이스(120)를 통해 수신되는 다양한 피드백 정보를 참조하여, 호스트 신호처리부(110)에 의한 영상신호 처리 동작 또는 호스트 통신 인터페이스(120)를 통한 영상신호의 출력 동작 등을 제어한다.The host control unit 140 includes a central processing unit (CPU), and plays a central role in the central operation and control of all operations performed in the host apparatus 100. For example, the host control unit 140 refers to the preset information stored in the host storage unit 130 or various feedback information received through the host communication interface 120, and performs a video signal processing by the host signal processing unit 110 Operation or output operation of a video signal through the host communication interface 120, and the like.

디스플레이장치(210)는 호스트장치(100)로부터 출력되는 영상신호를 수신하는 통신 인터페이스(211)와, 통신 인터페이스(211)에 수신되는 영상신호를 처리하는 신호처리부(212)와, 신호처리부(212)에 의해 처리되는 영상신호를 영상으로 표시하는 디스플레이(213)와, 데이터/정보가 저장되는 저장부(214)와, 디스플레이장치(210)의 동작을 제어하는 제어부(215)를 포함한다.The display device 210 includes a communication interface 211 for receiving a video signal output from the host device 100, a signal processing unit 212 for processing a video signal received through the communication interface 211, a signal processing unit 212 A display 213 for displaying an image signal processed by the display unit 210 as an image, a storage unit 214 for storing data / information, and a control unit 215 for controlling the operation of the display device 210.

본 실시예에서의 디스플레이장치(210)는 호스트장치(100)로부터 출력되는 영상신호를 표시하는 구성으로서, 디스플레이(213) 이외의 구성에 관해서는 기본적으로 호스트장치(100)에 대응하도록 마련된다.The display device 210 in this embodiment is configured to display a video signal output from the host device 100 and is basically provided so as to correspond to the host device 100 with respect to the configuration other than the display 213. [

통신 인터페이스(211)는 호스트장치(100)로부터 출력되는 영상신호를 유선/무선 통신 프로토콜에 따라서 수신하여 신호처리부(212)로 전달한다. 또한, 통신 인터페이스(211)는 디스플레이장치(210)에서 발생한 다양한 이벤트 등에 관한 정보를 호스트장치(100)에 전달할 수 있다.The communication interface 211 receives a video signal output from the host apparatus 100 according to a wired / wireless communication protocol and transmits the received video signal to the signal processing unit 212. In addition, the communication interface 211 can transmit information on various events and the like generated in the display device 210 to the host device 100.

신호처리부(212)는 통신 인터페이스(211)로부터 전달되는 영상신호를 영상처리 프로세스에 따라서 처리하여 디스플레이(213)로 출력한다. 신호처리부(212)는 호스트 신호처리부(110)에서 실행되는 영상처리 프로세스를 고려하여 영상신호를 처리할 수 있는 바, 예를 들면 신호처리부(212)는 호스트장치(100)로부터 이미 디코딩된 영상신호가 출력되는 경우에 해당 영상신호에 대한 스케일링 처리만을 수행하여 디스플레이(213)로 출력할 수 있다.The signal processing unit 212 processes the video signal transmitted from the communication interface 211 according to an image processing process and outputs the processed signal to the display 213. The signal processing unit 212 may process the video signal in consideration of the video processing process executed in the host signal processing unit 110. For example, the signal processing unit 212 may process the video signal that has already been decoded from the host device 100, The video signal can be scaled and output to the display 213.

디스플레이(213)는 신호처리부(212)로부터 출력되는 영상신호를 영상으로 표시한다. 디스플레이(213)의 구현 방식은 한정되지 않는 바, 액정(liquid crystal), 플라즈마(plasma), 발광 다이오드(light-emitting diode), 유기발광 다이오드(organic light-emitting diode), 면전도 전자총(surface-conduction electron-emitter), 탄소 나노 튜브(carbon nano-tube), 나노 크리스탈(nano-crystal) 등의 다양한 디스플레이 방식이 적용됨으로써 구현될 수 있다.The display 213 displays a video signal output from the signal processing unit 212 as an image. The implementation of the display 213 is not limited, and may include liquid crystal, plasma, light-emitting diodes, organic light-emitting diodes, surface- a carbon nano-tube, a nano-crystal, or the like can be applied to the display device.

디스플레이(213)는 그 구현 방식에 따라서 부가적인 구성을 추가적으로 포함할 수 있다. 예를 들면, 디스플레이(213)가 비발광소자인 액정 방식의 디스플레이 패널(미도시)로 구현되는 경우에, 디스플레이(213)는 패널(미도시)에 광을 공급하는 백라이트유닛(미도시)과, 패널(미도시)을 구동시키는 패널구동기판(미도시)을 포함한다.The display 213 may additionally include an additional configuration depending on the implementation. For example, when the display 213 is implemented as a liquid crystal display panel (not shown) as a non-light emitting device, the display 213 includes a backlight unit (not shown) for supplying light to a panel And a panel drive substrate (not shown) for driving a panel (not shown).

저장부(214)는 플래시메모리, 하드디스크 드라이브와 같은 비휘발성 메모리로 구현되며, 다양한 데이터 및 정보가 저장된다. 저장부(214)는 제어부(215)에 의해 억세스됨으로써 데이터의 독취, 기록, 수정, 삭제, 갱신 등이 수행된다.The storage unit 214 is implemented as a nonvolatile memory such as a flash memory or a hard disk drive, and stores various data and information. The storage unit 214 is accessed by the control unit 215 to read, write, modify, delete, and update data.

제어부(215)는 CPU를 포함하며, 디스플레이장치(210)에서 수행되는 제반 동작의 중심적인 연산 및 제어의 중추를 담당한다. 본 실시예에서, 제어부(215)는 호스트장치(100)로부터 제공되는 정보에 따라서 영상신호가 처리되도록 신호처리부(212)의 동작을 제어할 수 있는 바, 예를 들면 제어부(215)는 호스트장치(100)로부터 전체 영상프레임에서 어느 영역을 스케일링할 것인지에 관한 처리 정보를 수신하면 해당 처리 정보에 기초하여 영상신호가 스케일링되도록 신호처리부(212)를 제어한다.The control unit 215 includes a CPU and plays a central role in the central operation and control of all operations performed in the display apparatus 210. [ In this embodiment, the control unit 215 can control the operation of the signal processing unit 212 so that the video signal is processed according to the information provided from the host apparatus 100. For example, And controls the signal processing unit 212 so that the video signal is scaled based on the processing information when the processing information on which area is to be scaled in the entire video frame is received from the video processing unit 100.

이와 같은 구조 하에서, 호스트장치(100)는 복수의 디스플레이장치(210, 220, 230, 240) 사이의 설치 관계를 나타내는 설치형태 정보에 기초하여 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상 사이의 정합이 맞도록 각 영상에 대한 스케일링의 조정을 제어한다. 영상에 대한 스케일링의 조정은 호스트장치(100)에서 수행됨으로써 각 디스플레이장치(210, 220, 230, 240)에 대해 개별적으로 스케일링 처리된 영상신호가 출력될 수 있고, 또는 호스트장치(100)가 각 디스플레이장치(210, 220, 230, 240)에서 개별적으로 스케일링 조정이 수행되도록 각 디스플레이장치(210, 220, 230, 240)에 대해 호스트장치(100)로부터 스케일링 정보가 전달될 수도 있다.Under such a structure, the host apparatus 100 displays on each of the display devices 210, 220, 230, and 240 based on the installation type information indicating the installation relationship between the plurality of display devices 210, 220, 230, And controls the adjustment of the scaling for each image so that the matching between the images is matched. Adjustment of scaling for an image may be performed in the host apparatus 100 so that an image signal scaled individually for each of the display apparatuses 210, 220, 230, and 240 may be output, Scaling information may be delivered from the host device 100 to each display device 210, 220, 230, 240 so that scaling adjustments may be performed separately on the display devices 210, 220, 230, 240.

이러한 설치형태 정보를 취득하기 위해, 다음과 같은 과정이 진행된다.In order to obtain such installation type information, the following process is performed.

도 5 및 도 6은 각 디스플레이장치(210, 220, 230, 240) 사이의 상대 위치를 판단하도록 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상의 예시도이다.5 and 6 are views illustrating images displayed on the respective display devices 210, 220, 230, and 240 to determine the relative positions between the display devices 210, 220, 230, and 240.

도 5에 도시된 바와 같이, 호스트장치(100)는 복수의 디스플레이장치(210, 220, 230, 240) 각각에 상호 상이한 영상(411, 412, 413, 414)을 표시하도록 제어한다. 이들 영상(411, 412, 413, 414)은 해당 영상(411, 412, 413, 414)이 표시된 각 디스플레이장치(210, 220, 230, 240)를 구별하기 위한 것으로서, 복수의 디스플레이장치(210, 220, 230, 240)를 구별할 수 있는 내용이라면 그 구현 방식이 한정되지 않는다.5, the host apparatus 100 controls to display images 411, 412, 413, and 414, which are different from each other, on a plurality of display devices 210, 220, 230, and 240. The images 411, 412, 413 and 414 are used to distinguish the display devices 210, 220, 230 and 240 displayed with the images 411, 412, 413 and 414, 220, 230, and 240 can be distinguished from each other.

예를 들면, 각 영상(411, 412, 413, 414)은 서로 상이한 컬러를 포함할 수 있다.For example, each image 411, 412, 413, and 414 may include different colors.

또는, 도 6에 도시된 바와 같이, 각 영상(421, 422, 423, 424)은 서로 상이한 숫자를 포함할 수 있다.Alternatively, as shown in FIG. 6, each of the images 421, 422, 423, and 424 may include a different number.

이와 같은 상태에서, 카메라(400)는 복수의 디스플레이장치(210, 220, 230, 240) 및 각 디스플레이장치(210, 220, 230, 240)에 표시된 영상(411, 412, 413, 414)을 촬영하고, 촬영된 결과를 호스트장치(100)에 전송한다.In this state, the camera 400 photographs the images 411, 412, 413, and 414 displayed on the plurality of display devices 210, 220, 230, and 240 and the display devices 210, 220, And transmits the photographed result to the host apparatus 100.

카메라(400)의 설치 위치에 따라서 호스트장치(100)에 전송되는 촬영영상이 왜곡된 경우에, 호스트장치(100)는 분석이 정확하도록 촬영영상을 먼저 보정할 수 있다. 예를 들면 촬영영상 내에서 각 디스플레이장치(210, 220, 230, 240)의 네 꼭지점 영역이 90도가 아닌 경우, 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240)의 네 꼭지점 영역이 90도가 되도록 보정한 이후에 촬영영상에 대한 분석을 수행한다.When the photographed image transmitted to the host apparatus 100 is distorted according to the installation position of the camera 400, the host apparatus 100 can correct the photographed image first so that the analysis is accurate. For example, when the four vertexes of the display devices 210, 220, 230 and 240 are not 90 degrees in the captured image, the host device 100 displays four vertexes of each of the display devices 210, 220, 230, After the area is corrected to be 90 degrees, analysis of the photographed image is performed.

호스트장치(100)는 촬영된 결과에 기초하여 각 디스플레이장치(210, 220, 230, 240) 사이의 상대적인 배치 관계 또는 각 디스플레이장치(210, 220, 230, 240) 사이의 상대적인 위치를 판단한다. 구체적으로, 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240)로부터 해당 디스플레이장치(210, 220, 230, 240)의 MAC 어드레스와 같은 식별 정보와 크기, 해상도 정보를 취득할 수 있다. 호스트장치(100)는 카메라(400)에 촬영된 촬영영상을 분석하여 각 영상(421, 422, 423, 424)이 표시된 디스플레이장치(210, 220, 230, 240)를 특정함으로써, 각 디스플레이장치(210, 220, 230, 240) 사이의 상대적인 위치를 판단한다.The host apparatus 100 determines a relative placement relationship between the display devices 210, 220, 230, and 240 or a relative position between the display devices 210, 220, 230, and 240 based on the photographed result. Specifically, the host apparatus 100 can acquire identification information, size and resolution information such as the MAC addresses of the display devices 210, 220, 230 and 240 from the respective display devices 210, 220, 230 and 240 have. The host apparatus 100 analyzes the photographed image photographed by the camera 400 and specifies the display devices 210, 220, 230 and 240 on which the images 421, 422, 423 and 424 are displayed, 210, 220, 230, and 240. In this case,

호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240) 사이의 상대적인 위치를 판단하면, 촬영영상 내에서 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상(411, 412, 413, 414) 사이의 간격을 산출한다. 영상(411, 412, 413, 414) 사이의 간격은 영상(411, 412, 413, 414)이 표시되는 디스플레이장치(210, 220, 230, 240)의 각 디스플레이 사이의 간격을 의미하는 바, 구체적으로는 앞서 도 3에 관련하여 설명한 바와 같다.When the host device 100 determines the relative position between the display devices 210, 220, 230 and 240, the host device 100 displays the images 411 and 412 displayed on the display devices 210, 220, 230, , 413, and 414 is calculated. The interval between the images 411, 412, 413 and 414 indicates the interval between the displays of the display devices 210, 220, 230 and 240 on which the images 411, 412, 413 and 414 are displayed, As described with reference to Fig. 3 above.

이러한 과정에 따라서, 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240) 사이의 상대적인 위치 정보 및 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상(411, 412, 413, 414) 사이의 간격 정보를 포함하는 설치형태 정보를 도출 및 저장한다.The host device 100 displays relative position information between the display devices 210, 220, 230 and 240 and images 411, 412, and 440 displayed on the display devices 210, 220, 230, and 240, 413, and 414, and stores and stores the installation type information.

호스트장치(100)는 설치형태 정보에 기초하여, 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상의 스케일링 팩터(scaling factor) 정보를 도출한다. 스케일링 팩터 정보는 영상프레임의 전체 영역에서 각 디스플레이장치(210, 220, 230, 240)가 표시하는 분할영역의 정보와, 해당 분할영역의 해상도 및 크기 정보를 포함한다. 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240) 별로 산출한 스케일링 팩터 정보를 각 디스플레이장치(210, 220, 230, 240)에 대해 전달한다.The host apparatus 100 derives scaling factor information of an image displayed on each of the display devices 210, 220, 230, and 240 based on the installation type information. The scaling factor information includes information of a divided area displayed by each of the display devices 210, 220, 230, and 240 in the entire area of the image frame, and resolution and size information of the corresponding divided area. The host device 100 transmits the scaling factor information calculated for each display device 210, 220, 230, 240 to each of the display devices 210, 220, 230, 240.

각 디스플레이장치(210, 220, 230, 240)는 호스트장치(100)로부터 수신된 스케일링 팩터 정보를 저장하며, 각기 저장된 스케일링 팩터 정보에 기초하여 호스트장치(100)로부터 수신되는 영상신호를 처리 및 표시한다.Each of the display devices 210, 220, 230, and 240 stores the scaling factor information received from the host device 100, processes and displays the video signal received from the host device 100 based on the scaling factor information stored therein do.

이로써, 디스플레이 시스템(1)은 복수의 디스플레이장치(210, 220, 230, 240) 각각에 표시되는 분할영상들 사이의 정합을 맞추도록 각 디스플레이장치(210, 220, 230, 240) 별로 영상의 스케일링을 조정함으로써, 분할영상들이 조합된 전체영상을 사용자가 자연스럽게 인식할 수 있도록 제공할 수 있다.Thus, the display system 1 scales the image for each of the display devices 210, 220, 230, 240 so as to match the matching between the divided images displayed on each of the plurality of display devices 210, 220, 230, So that the user can naturally recognize the entire image in which the divided images are combined.

이하, 본 실시예에 따른 호스트장치(100)의 제어방법에 관해 도 7을 참조하여 설명한다.Hereinafter, a control method of the host apparatus 100 according to the present embodiment will be described with reference to FIG.

도 7은 호스트장치(100)의 제어방법을 나타내는 플로우차트이다.FIG. 7 is a flowchart showing a control method of the host apparatus 100. FIG.

도 7에 도시된 바와 같이, S100 단계에서 호스트장치(100)는 복수의 디스플레이장치(210, 220, 230, 240) 각각에 서로 상이한 내용의 판별용 영상이 표시되도록 제어한다. S110 단계에서 호스트장치(100)는 카메라(400)에 의해 복수의 디스플레이장치(210, 220, 230, 240) 및 각 디스플레이장치(210, 220, 230, 240)에 표시된 판별용 영상을 촬영한 촬영영상을 수신한다.7, in step S100, the host apparatus 100 controls each of the plurality of display devices 210, 220, 230, and 240 to display different images for identification. In step S110, the host device 100 captures the image for discrimination displayed on the plurality of display devices 210, 220, 230, and 240 and the display devices 210, 220, 230, and 240 by the camera 400 And receives an image.

S120 단계에서 호스트장치(100)는 촬영영상 내의 판별용 영상의 내용에 기초하여 각 디스플레이장치(210, 220, 230, 240)의 상대적 위치를 판단한다. S130 단계에서 호스트장치(100)는 촬영영상을 분석하여 각 판별용 영상 사이의 실제 물리적 간격을 산출한다.In step S120, the host apparatus 100 determines the relative positions of the display devices 210, 220, 230, and 240 based on the contents of the image for discrimination in the shot image. In step S130, the host apparatus 100 analyzes the photographed image and calculates the actual physical distance between each discriminating image.

S140 단계에서 호스트장치(100)는 산출된 물리적 간격에 기초하여 각 영상의 스케일링을 조정하도록 제어한다.In step S140, the host apparatus 100 controls to adjust the scaling of each image based on the calculated physical interval.

이로써, 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상들 사이의 공간적 정합이 맞도록 표시할 수 있다.Thus, the host apparatus 100 can display the spatial matching between the images displayed on the respective display devices 210, 220, 230, and 240 to match with each other.

이상 설명한 바와 같은 제1실시예는 각 디스플레이장치(210, 220, 230, 240)에 표시되는 각 영상들 사이의 공간적인 정합을 맞추기 위한 조정 방법에 관한 것이다. 그러나, 각 영상들 사이에 발생할 수 있는 비정합은 공간적인 경우뿐만 아니라 시간적인 경우에도 있을 수 있다.As described above, the first embodiment relates to an adjustment method for adjusting spatial matching between images displayed on each of the display devices 210, 220, 230, and 240. However, the incoherence that may occur between images can be temporal as well as spatial.

도 8은 단위시간 별로 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상의 일례를 나타내는 예시도이다.8 is an exemplary view showing an example of an image displayed on each of the display devices 210, 220, 230, and 240 by unit time.

도 8에 도시된 바와 같이, 시점이 t, t+1, t+2, t+3로 경과함에 따라서 4개의 디스플레이장치(210, 220, 230, 240)가 표시하는 전체 영상은 일 영상에서 다른 영상으로 바뀐다. 시점 t에서 4개의 디스플레이장치(210, 220, 230, 240)가 표시하는 영상은 삼각형이고, 시점 t+3에서 4개의 디스플레이장치(210, 220, 230, 240)가 표시하는 영상은 원이다. 사용자가 전체 영상을 자연스럽게 인식하도록 하기 위해서는, 삼각형을 나타내는 영상이 원을 나타내는 영상으로 바뀔 때에 4개의 디스플레이장치(210, 220, 230, 240)는 서로 동기를 맞추어 동일한 타이밍에 영상을 전환 표시해야 한다.8, the entire image displayed by the four display devices 210, 220, 230, and 240 is displayed in a different image from the other image as the viewpoint passes t, t + 1, t + It turns into a video. The images displayed by the four display devices 210, 220, 230, and 240 at the time point t are triangles, and the images displayed by the four display devices 210, 220, 230, and 240 at the time point t + 3 are circles. In order to allow the user to recognize the entire image naturally, when the image representing the triangle is changed to the image representing the circle, the four display devices 210, 220, 230, and 240 must display the images at the same timing in synchronization with each other .

그런데, 시간 경과에 따라서 시점 t에서 시점 t+1로 변화하면, 4개의 디스플레이장치(210, 220, 230, 240) 중에서 좌측 하단의 디스플레이장치(230)만이 원을 나타내는 영상을 먼저 표시하고 있다. 시점 t+2일 때에도 3개의 디스플레이장치(210, 220, 240)가 삼각형을 나타내는 영상을 표시하고 있는 것에 비해, 일 디스플레이장치(230)만이 원을 나타내는 영상을 표시하고 있다. 시점 t+3이 되면, 그때에서야 나머지 3개의 디스플레이장치(210, 220, 240)도 원을 나타내는 영상을 표시하게 된다. However, when the time t changes from the time point t to the time point t + 1, only the display device 230 on the lower left of the four display devices 210, 220, 230, and 240 displays the image representing the circle first. The three display devices 210, 220 and 240 display an image representing a triangle even at the time point t + 2, only one display device 230 displays an image representing a circle. At time point t + 3, only the remaining three display devices 210, 220, and 240 display an image representing a circle.

이와 같이, 복수의 디스플레이장치(210, 220, 230, 240)의 각각에 표시되는 영상의 비정합은 앞선 제1실시예의 공간적인 비정합 뿐만 아니라, 영상을 표시하는 타이밍의 동기가 각 디스플레이장치(210, 220, 230, 240) 사이에 맞기 않기 때문에 발생하는 시간적인 비정합일 수도 있다. 따라서, 이러한 시간적인 비정합을 조정하기 위해서는, 나머지 디스플레이장치(210, 220, 240)와 동기가 맞지 않는 디스플레이장치(230)의 영상표시 타이밍에 지연값을 반영함으로써 디스플레이장치(230)의 영상표시 타이밍을 나머지 디스플레이장치(210, 220, 240)와 동일하게 맞추면 된다.As described above, the mismatching of the images displayed on each of the plurality of display devices 210, 220, 230, and 240 is not limited to the spatial mismatching of the first embodiment described above, 210, 220, 230, and 240, respectively. Accordingly, in order to adjust the temporal mismatching, the delay value is reflected at the video display timing of the display device 230 whose synchronization with the remaining display devices 210, 220, and 240 is not synchronized, The timing may be the same as that of the remaining display devices 210, 220, and 240.

본 실시예의 경우라면, 디스플레이장치(230)의 영상표시 타이밍이 나머지 디스플레이장치(210, 220, 240)보다 -2의 단위시간만큼 빠르므로, 해당 디스플레이장치(230)의 영상표시 타이밍에 +2의 단위시간만큼의 표시 지연값을 반영하면 된다. 이 경우에, 시간 t+3의 시점에서 모든 디스플레이장치(210, 220, 230, 240)에서 삼각형의 영상이 원의 영상으로 동시에 변환될 수 있다.Since the display timing of the display device 230 is faster than the remaining display devices 210, 220 and 240 by a unit time of -2 in the present embodiment, the display timing of the display device 230 is +2 The display delay value corresponding to the unit time may be reflected. In this case, at time t + 3, the images of the triangles in all the display devices 210, 220, 230, and 240 can be simultaneously converted into the original image.

도 9는 본 발명의 제2실시예에 따라서 각 디스플레이장치(210, 220, 230, 240)의 영상표시 타이밍의 동기 시간차를 판단하도록 각 디스플레이장치(210, 220, 230, 240)에 표시되는 영상(431, 432, 433, 444)의 예시도이다.FIG. 9 is a block diagram illustrating a configuration of a display device 210, 220, 230, and 240 for displaying images displayed on each of the display devices 210, 220, 230, and 240 to determine a synchronization time difference of video display timings of the display devices 210, 220, 230, and 240 according to a second embodiment of the present invention. (431, 432, 433, 444).

본 실시예에서는 호스트장치(100)가 각 디스플레이장치(210, 220, 230, 240)의 상대적인 위치를 알고 있는 상태를 초기상태로 한다. 따라서, 만일 복수의 디스플레이장치(210, 220, 230, 240)의 상대적인 위치가 판별되지 않은 상태라면, 앞선 제1실시예에서 도 7의 S100 단계 내지 S120 단계의 방법 또는 그 외에 복수의 디스플레이장치(210, 220, 230, 240)의 상대적인 위치를 판단하기 위한 다양한 방법이 본 실시예보다 먼저 실시될 수 있다.In the present embodiment, the host device 100 sets a state in which the relative positions of the display devices 210, 220, 230, and 240 are known, to an initial state. Therefore, if the relative positions of the plurality of display devices 210, 220, 230, and 240 are not determined, the method of steps S100 through S120 of FIG. 7 or the plurality of display devices 210, 220, 230, and 240 may be performed before the present embodiment.

도 9에 도시된 바와 같이, 호스트장치(100)는 복수의 디스플레이장치(210, 220, 230, 240) 각각에 동일한 영상(431, 432, 433, 444)을 표시하도록 제어한다. 이들 영상(431, 432, 433, 444)은 앞선 제1실시예의 경우와 달리, 각 디스플레이장치(210, 220, 230, 240)를 구별하기 위한 것이 아니며, 동일한 내용을 가지는 컨텐츠 영상을 포함하거나 또는 동일한 컬러를 포함할 수 있다. 또한, 이들 영상(431, 432, 433, 444)은 각 디스플레이장치(210, 220, 230, 240) 사이의 동기화 여부를 판단하기 위한 것이므로, 시간의 경과에 따라서 그 내용이 변화하여야 한다.9, the host apparatus 100 controls to display the same images 431, 432, 433, and 444 on the plurality of display devices 210, 220, 230, and 240, respectively. Unlike the first embodiment, the images 431, 432, 433, and 444 do not distinguish the display devices 210, 220, 230, and 240 and include content images having the same contents, And may include the same color. Since the images 431, 432, 433, and 444 are used to determine whether or not the display devices 210, 220, 230, and 240 are synchronized with each other, their contents must change over time.

호스트장치(100)는 기 설정된 시간동안 복수의 디스플레이장치(210, 220, 230, 240)에 각 영상(431, 432, 433, 444)이 재생 표시되도록 한다. 여기서, 기 설정된 시간은 구체적인 수치가 한정되지는 않지만, 적어도 한 번 이상 해당 영상(431, 432, 433, 444)의 내용이 호스트장치(100)가 식별 가능하게 변화하는 시간을 의미한다.The host device 100 displays the images 431, 432, 433, and 444 on the plurality of display devices 210, 220, 230, and 240 for a predetermined time. Here, the predetermined time is not limited to a specific value, but refers to a time at which the contents of the images 431, 432, 433, and 444 are identifiably changed by the host apparatus 100 at least once.

이와 같은 상태에서, 카메라(400)는 복수의 디스플레이장치(210, 220, 230, 240) 및 각 디스플레이장치(210, 220, 230, 240)에 재생되는 영상(431, 432, 433, 444)을 기 설정된 시간동안 촬영하고, 촬영한 결과를 호스트장치(100)에 전송한다.In this state, the camera 400 displays the images 431, 432, 433, and 444 reproduced by the plurality of display devices 210, 220, 230, and 240 and the display devices 210, 220, And transmits the photographed result to the host apparatus 100. The host apparatus 100 transmits the photographed result to the host apparatus 100. [

호스트장치(100)는 촬영영상을 분석함으로써 복수의 디스플레이장치(210, 220, 230, 240) 중에서 동기가 안맞는 디스플레이장치(210, 220, 230, 240)을 특정하고, 특정된 디스플레이장치(210, 220, 230, 240)의 영상표시 타이밍의 어긋나는 시간값을 산출한다. 호스트장치(100)는 산출된 시간값에 대응하는 지연값을 산출한다.The host device 100 specifies the display devices 210, 220, 230, and 240 that are out of synchronization among the plurality of display devices 210, 220, 230, and 240 by analyzing the captured image, 220, 230, and 240 are calculated. The host apparatus 100 calculates a delay value corresponding to the calculated time value.

호스트장치(100)는 산출된 지연값을 반영하여 호스트장치(100)로부터 특정된 해당 디스플레이장치(210, 220, 230, 240)에 대한 영상신호의 출력을 제어한다. 이 경우에, 해당 디스플레이장치(210, 220, 230, 240)는 영상표시 타이밍을 조정하지 않으며, 대신 영상신호의 수신 타이밍이 조정됨으로써 모든 디스플레이장치(210, 220, 230, 240)의 영상표시 타이밍을 맞출 수 있다.The host device 100 controls the output of video signals to the display devices 210, 220, 230, and 240 specified by the host device 100 by reflecting the calculated delay value. In this case, the display devices 210, 220, 230, and 240 do not adjust the display timing of the video, and instead, the timing of receiving the video signal is adjusted so that the video display timing of all the display devices 210, 220, 230, .

또는, 호스트장치(100)는 산출된 지연값을 특정된 해당 디스플레이장치(210, 220, 230, 240)에 전송함으로써, 해당 디스플레이장치(210, 220, 230, 240)에서 지연값을 반영하여 영상표시 타이밍을 조정하도록 할 수도 있다.Alternatively, the host device 100 may transmit the calculated delay value to the specified display device 210, 220, 230, 240 so that the display device 210, 220, 230, The display timing may be adjusted.

이와 같은 방법에 따라서, 복수의 디스플레이장치(210, 220, 230, 240) 각각에 표시되는 영상 사이의 시간적 정합을 맞출 수 있다.According to this method, temporal matching between images displayed on each of the plurality of display devices 210, 220, 230, and 240 can be matched.

도 10은 본 실시예에 따른 호스트장치(100)의 제어방법을 나타내는 플로우차트이다.10 is a flowchart showing a control method of the host apparatus 100 according to the present embodiment.

도 10에 도시된 바와 같이, S200 단계에서 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240)에 상호 동일한 영상을 표시하도록 제어한다. S210 단계에서 호스트장치(100)는 각 디스플레이장치(210, 220, 230, 240)에서 해당 영상을 재생시킨다.As shown in FIG. 10, in step S200, the host device 100 controls the display devices 210, 220, 230, and 240 to display identical images. In step S210, the host device 100 reproduces the corresponding image on each of the display devices 210, 220, 230, and 240.

영상이 재생되는 기 설정된 시간 동안 카메라(400)는 각 디스플레이장치(210, 220, 230, 240)에서 재생되는 영상을 촬영한다. S220 단계에서 호스트장치(100)는 카메라(400)로부터 촬영영상을 수신한다.The camera 400 photographs an image reproduced on each of the display devices 210, 220, 230, and 240 for a preset time period during which the image is reproduced. In step S220, the host apparatus 100 receives the photographed image from the camera 400. [

S230 단계에서 호스트장치(100)는 촬영영상을 통해 나머지 디스플레이장치(210, 220, 230, 240)와 동기가 안맞는 디스플레이장치(210, 220, 230, 240)가 있는지 판단한다.In step S230, the host apparatus 100 determines whether the display devices 210, 220, 230, and 240 are out of synchronization with the remaining display devices 210, 220, 230, and 240 through the captured image.

동기가 안맞는 디스플레이장치(210, 220, 230, 240)가 있으면, S240 단계에서 호스트장치(100)는 촬영영상에 기초하여 해당 디스플레이장치(210, 220, 230, 240)의 동기 시간차를 산출한다. S250 단계에서 호스트장치(100)는 산출된 동기 시간차에 대응하는 지연값을 산출한다.If there are display devices 210, 220, 230, and 240 that are not synchronized, the host device 100 calculates the synchronization time difference of the display devices 210, 220, 230, and 240 based on the captured images in step S240. In step S250, the host apparatus 100 calculates a delay value corresponding to the calculated synchronization time difference.

S260 단계에서 호스트장치(100)는 산출된 지연값에 기초하여 해당 디스플레이장치(210, 220, 230, 240)의 영상표시 타이밍을 조정한다.In step S260, the host device 100 adjusts the video display timing of the display devices 210, 220, 230, and 240 based on the calculated delay value.

이와 같이, 호스트장치(100)는, 복수의 디스플레이장치(210, 220, 230, 240)에 각기 기 설정된 식별영상이 표시되는 동안에 촬영된 촬영영상을 카메라(400)로부터 수신하면, 촬영영상 내에 나타난 각각의 식별영상의 표시상태에 기초하여 복수의 디스플레이장치(210, 220, 230, 240) 중 적어도 어느 하나의 영상처리 동작을 조정함으로써 복수의 디스플레이장치(210, 220, 230, 240) 각각에 표시되는 영상들 사이의 비정합 상태를 교정한다.As described above, when the host device 100 receives the photographed images photographed while the predetermined identification images are displayed on the plurality of display devices 210, 220, 230, and 240 from the camera 400, 220, 230, and 240 by adjusting image processing operations of at least one of the plurality of display devices 210, 220, 230, and 240 based on the display states of the respective identification images And corrects the unconformity between the images.

이상 설명한 실시예들에 따라서, 디스플레이 시스템(1)은 복수의 디스플레이장치(210, 220, 230, 240)에 각기 표시되는 영상 사이의 시간적 비정합 또는 공간적 비정합을 교정할 수 있다.According to the embodiments described above, the display system 1 can correct the temporal mismatch or spatial mismatch between images displayed on the plurality of display devices 210, 220, 230, and 240, respectively.

이상 설명한 실시예들에서는 디스플레이 시스템(1)이 호스트장치(100)를 포함하는 것으로 표현하였지만, 복수의 디스플레이장치(210, 220, 230, 240) 중 어느 하나가 호스트장치(100)의 역할을 대신 수행할 수도 있다.Although the display system 1 has been described as including the host device 100 in the above-described embodiments, any one of the plurality of display devices 210, 220, 230, and 240 may replace the host device 100 .

상기한 실시예는 예시적인 것에 불과한 것으로, 당해 기술 분야의 통상의 지식을 가진 자라면 다양한 변형 및 균등한 타 실시예가 가능하다. 따라서, 본 발명의 진정한 기술적 보호범위는 하기의 특허청구범위에 기재된 발명의 기술적 사상에 의해 정해져야 할 것이다.The above-described embodiments are merely illustrative, and various modifications and equivalents may be made by those skilled in the art. Accordingly, the true scope of protection of the present invention should be determined by the technical idea of the invention described in the following claims.

1 : 디스플레이 시스템
100 : 호스트장치
210, 220, 230, 240 : 디스플레이장치
400 : 카메라
1: Display system
100: Host device
210, 220, 230, 240: display device
400: camera

Claims (21)

디스플레이장치에 있어서,
디스플레이와;
영상신호를 상기 디스플레이 상에 영상으로 표시되게 처리하는 신호처리부와;
하나 이상의 외부 디스플레이장치와, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치를 촬영하는 카메라와 통신하는 통신 인터페이스와;
상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각기 기 설정된 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하면, 상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 신호처리부 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정함으로써 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치.
In the display device,
A display;
A signal processor for processing the video signal to display the video signal on the display;
A communication interface for communicating with the at least one external display device, the camera capturing the display device and the at least one external display device;
And a controller for controlling the signal processing unit and the image processing unit based on a display state of each of the identification images displayed in the captured image when the taken image photographed while the predetermined identification image is displayed on the display and the one or more external display devices is received from the camera, And a control unit for controlling to correct an unmatching state between images displayed on the display and each of the one or more external display devices by adjusting an image processing operation of at least one of the one or more external display devices Display device.
제1항에 있어서,
상기 비정합 상태는 상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각기 표시되는 복수의 영상 중에서 제1영상 및 제2영상 사이의 공간적 비정합인 것을 특징으로 하는 디스플레이장치.
The method according to claim 1,
Wherein the unmatched state is a spatial mismatch between the first image and the second image among a plurality of images respectively displayed on the display and the one or more external display devices.
제2항에 있어서,
상기 제어부는, 상기 신호처리부 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나에 의한 영상 스케일링 동작을 제어함으로써 상기 공간적 비정합을 교정하는 것을 특징으로 하는 디스플레이장치.
3. The method of claim 2,
Wherein the controller corrects the spatial misregistration by controlling an image scaling operation by at least one of the signal processing unit and the one or more external display devices.
제3항에 있어서,
상기 제어부는, 상기 촬영영상 내에서 상기 제1영상 및 상기 제2영상 사이의 물리적 간격을 산출하며, 상기 산출된 물리적 간격에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 제1영상이 표시된 제1장치 또는 상기 제2영상이 표시된 제2장치에 의한 영상 스케일링 동작을 제어하는 것을 특징으로 하는 디스플레이장치.
The method of claim 3,
Wherein the control unit calculates a physical distance between the first image and the second image in the captured image and determines that the first image among the display device and the one or more external display devices And controls the image scaling operation by the first device displayed or the second device displaying the second image.
제4항에 있어서,
상기 제1영상 및 상기 제2영상 사이의 물리적 간격은, 상기 제1장치의 베젤 폭과, 상기 제2장치의 베젤 폭과, 상기 제1장치 및 상기 제2장치 사이의 간격의 총합인 것을 특징으로 하는 디스플레이장치.
5. The method of claim 4,
Wherein the physical distance between the first image and the second image is a sum of the width of the bezel of the first device, the width of the bezel of the second device, and the interval between the first device and the second device .
제1항에 있어서,
상기 비정합 상태는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 적어도 어느 하나의 장치에 표시되는 영상 및 나머지 장치에 표시되는 영상 사이의 동기 불일치를 포함하는 것을 특징으로 하는 디스플레이장치.
The method according to claim 1,
Wherein the unmatched state includes a sync mismatch between an image displayed on at least one of the display device and the one or more external display devices and an image displayed on the remaining device.
제6항에 있어서,
상기 제어부는, 상기 디스플레이 및 상기 외부 디스플레이장치 각각에 동일한 상기 식별영상이 표시되게 제어하는 것을 특징으로 하는 디스플레이장치.
The method according to claim 6,
Wherein the control unit controls to display the same identification image on the display and the external display device, respectively.
제7항에 있어서,
상기 제어부는, 기 설정된 시간 동안에 촬영된 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화에 따라서, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 나머지 장치와 동기가 불일치하는 제3장치를 판별하는 것을 특징으로 하는 디스플레이장치.
8. The method of claim 7,
Wherein the control unit determines a third device whose synchronization does not coincide with the remaining device among the display device and the one or more external display devices in accordance with a change of each of the identification images taken in the photographed image photographed within a predetermined time And the display device.
제8항에 있어서,
상기 제어부는, 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화 시점에 기초하여 상기 제3장치에 의한 영상표시 타이밍의 어긋나는 시간값을 산출하고, 상기 산출된 시간값에 대응하는 지연값으로 상기 제3장치에 표시되는 영상의 타이밍을 조정하는 것을 특징으로 하는 디스플레이장치.
9. The method of claim 8,
Wherein the control unit calculates a time value at which the third device deviates the video display timing based on a change time point of each of the identification images appearing in the captured image and outputs the delay value corresponding to the calculated time value And adjusts the timing of an image displayed on the third device.
제1항에 있어서,
상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각각 표시되는 상기 식별영상은 상호간에 상이한 영상을 포함하며,
상기 제어부는, 상기 촬영영상 내에서의 상기 식별영상의 내용에 기초하여 상기 디스플레이장치 및 상기 외부 디스플레이장치 사이의 상대적인 위치를 판단하는 것을 특징으로 하는 디스플레이장치.
The method according to claim 1,
Wherein the identification images displayed on the display and the one or more external display devices include mutually different images,
Wherein the control unit determines a relative position between the display device and the external display device based on the content of the identification image in the captured image.
디스플레이장치의 제어방법에 있어서,
하나 이상의 외부 디스플레이장치와, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치를 촬영하는 카메라와 통신하는 단계와;
기 설정된 식별영상을 표시하는 단계와;
상기 디스플레이 및 상기 하나 이상의 외부 디스플레이장치에 각각 상기 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하는 단계와;
상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정하도록 제어함으로써 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
A method of controlling a display device,
Communicating with the at least one external display device, the camera capturing the display device and the at least one external display device;
Displaying a predetermined identification image;
Receiving from the camera a photographed image photographed while the identification image is displayed on the display and the one or more external display devices, respectively;
And controlling the image processing operation of at least one of the display device and the one or more external display devices based on a display state of each of the identification images displayed in the captured image, And correcting an unconformity state between the images displayed on the display unit.
제11항에 있어서,
상기 비정합 상태는 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치에 각기 표시되는 복수의 영상 중에서 제1영상 및 제2영상 사이의 공간적 비정합인 것을 특징으로 하는 디스플레이장치의 제어방법.
12. The method of claim 11,
Wherein the unmatched state is a spatial mismatch between a first image and a second image among a plurality of images displayed on the display device and the one or more external display devices, respectively.
제12항에 있어서,
상기 교정 단계는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중 적어도 어느 하나에 의한 영상 스케일링 동작을 제어함으로써 상기 공간적 비정합을 교정하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
13. The method of claim 12,
Wherein the correcting step includes correcting the spatial misalignment by controlling an image scaling operation by at least one of the display device and the one or more external display devices.
제13항에 있어서,
상기 공간적 비정합의 교정 단계는,
상기 촬영영상 내에서 상기 제1영상 및 상기 제2영상 사이의 물리적 간격을 산출하는 단계와;
상기 산출된 물리적 간격에 기초하여 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 제1영상이 표시된 제1장치 또는 상기 제2영상이 표시된 제2장치에 의한 영상 스케일링 동작을 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
14. The method of claim 13,
Wherein the step of calibrating the spatial non-
Calculating a physical distance between the first image and the second image in the captured image;
And controlling an image scaling operation by a first device displaying the first image or a second device displaying the second image among the display device and the one or more external display devices based on the calculated physical interval And a control unit for controlling the display unit.
제14항에 있어서,
상기 제1영상 및 상기 제2영상 사이의 물리적 간격은, 상기 제1장치의 베젤 폭과, 상기 제2장치의 베젤 폭과, 상기 제1장치 및 상기 제2장치 사이의 간격의 총합인 것을 특징으로 하는 디스플레이장치의 제어방법.
15. The method of claim 14,
Wherein the physical distance between the first image and the second image is a sum of the width of the bezel of the first device, the width of the bezel of the second device, and the interval between the first device and the second device Of the display device.
제11항에 있어서,
상기 비정합 상태는, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 적어도 어느 하나의 장치에 표시되는 영상 및 나머지 장치에 표시되는 영상 사이의 동기 불일치를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
12. The method of claim 11,
Wherein the unmatched state includes a synchronization inconsistency between an image displayed on at least one of the display apparatus and the one or more external display apparatuses and an image displayed on the remaining apparatuses.
제16항에 있어서,
상기 식별영상의 표시 단계는, 상기 디스플레이장치 및 상기 외부 디스플레이장치 각각에 동일한 상기 식별영상이 표시되게 제어하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
17. The method of claim 16,
Wherein the step of displaying the identification image includes the step of controlling the display device and the external display device to display the same identification image, respectively.
제17항에 있어서,
상기 교정 단계는, 기 설정된 시간 동안에 촬영된 상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화에 따라서, 상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치 중에서 상기 나머지 장치와 동기가 불일치하는 제3장치를 판별하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
18. The method of claim 17,
Wherein the calibration step includes a third device that is out of synchronization with the remaining device among the display device and the one or more external display devices in accordance with a change of each of the identification images taken in the photographed image taken during a predetermined time And a step of judging whether or not the display device is in a standby state.
제18항에 있어서,
상기 교정 단계는,
상기 촬영영상 내에서 나타난 각각의 상기 식별영상의 변화 시점에 기초하여 상기 제3장치에 의한 영상표시 타이밍의 어긋나는 시간값을 산출하는 단계와;
상기 산출된 시간값에 대응하는 지연값으로 상기 제3장치에 표시되는 영상의 타이밍을 조정하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
19. The method of claim 18,
The calibration step may include:
Calculating an offset time value of the image display timing by the third device based on a change time point of each of the identification images in the captured image;
And adjusting a timing of an image displayed on the third device with a delay value corresponding to the calculated time value.
제11항에 있어서,
상기 디스플레이장치 및 상기 하나 이상의 외부 디스플레이장치에 각각 표시되는 상기 식별영상은 상호간에 상이한 영상을 포함하며,
상기 촬영영상 내에서의 상기 식별영상의 내용에 기초하여 상기 디스플레이장치 및 상기 외부 디스플레이장치 사이의 상대적인 위치를 판단하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 제어방법.
12. The method of claim 11,
Wherein the identification images displayed on the display device and the one or more external display devices respectively include different images,
Further comprising the step of determining a relative position between the display device and the external display device based on the content of the identification image in the captured image.
디스플레이 시스템에 있어서,
영상을 표시 가능한 복수의 디스플레이장치와;
상기 복수의 디스플레이장치를 촬영하는 카메라와;
상기 복수의 디스플레이장치 사이의 상대적 위치에 기초하여 상기 복수의 디스플레이장치 각각에 상기 영상이 표시되도록 제어하는 호스트장치를 포함하며,
상기 호스트장치는,
상기 복수의 디스플레이장치 및 상기 카메라와 통신하는 통신부와;
상기 복수의 디스플레이장치에 각기 기 설정된 식별영상이 표시되는 동안에 촬영된 촬영영상을 상기 카메라로부터 수신하면, 상기 촬영영상 내에 나타난 각각의 상기 식별영상의 표시상태에 기초하여 상기 복수의 디스플레이장치 중 적어도 어느 하나의 영상처리 동작을 조정함으로써 상기 복수의 디스플레이장치 각각에 표시되는 영상들 사이의 비정합 상태를 교정하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이 시스템.
In a display system,
A plurality of display devices capable of displaying images;
A camera for photographing the plurality of display devices;
And a host device controlling each of the plurality of display devices to display the image on the basis of a relative position between the plurality of display devices,
The host apparatus includes:
A communication unit for communicating with the plurality of display devices and the camera;
Wherein at least one of the plurality of display devices is displayed on the display device based on the display state of each of the identification images displayed in the captured image when the taken images photographed while the predetermined identification images are displayed on the plurality of display devices are received from the camera And a control unit for controlling to correct an unmatching state between images displayed on each of the plurality of display devices by adjusting one image processing operation.
KR1020140039471A 2014-04-02 2014-04-02 Display apparatus, control method thereof, and display system KR20150114810A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140039471A KR20150114810A (en) 2014-04-02 2014-04-02 Display apparatus, control method thereof, and display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140039471A KR20150114810A (en) 2014-04-02 2014-04-02 Display apparatus, control method thereof, and display system

Publications (1)

Publication Number Publication Date
KR20150114810A true KR20150114810A (en) 2015-10-13

Family

ID=54348224

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140039471A KR20150114810A (en) 2014-04-02 2014-04-02 Display apparatus, control method thereof, and display system

Country Status (1)

Country Link
KR (1) KR20150114810A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019093676A1 (en) * 2017-11-09 2019-05-16 삼성전자주식회사 Electronic device, and method for setting display device, and multivision
KR20200121636A (en) * 2019-04-16 2020-10-26 엘지전자 주식회사 Method and system for outputting image with plurality of image displaying devices

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019093676A1 (en) * 2017-11-09 2019-05-16 삼성전자주식회사 Electronic device, and method for setting display device, and multivision
US11163516B2 (en) 2017-11-09 2021-11-02 Samsung Electronics Co., Ltd. Electronic apparatus, display apparatus, and multivision setting method
KR20200121636A (en) * 2019-04-16 2020-10-26 엘지전자 주식회사 Method and system for outputting image with plurality of image displaying devices

Similar Documents

Publication Publication Date Title
CN106251800B (en) Display system for enhancing visibility and method thereof
US9830884B2 (en) Multi-display device, display system including the same and display method thereof
US7483031B2 (en) Method for synchronizing graphics processing units
US20150138038A1 (en) Multi-screen display system and image signal correcting method for the same
CN1928700B (en) Projection type display device and method for controlling the same
WO2014103158A1 (en) Video display method
US20140111530A1 (en) Apparatus and method for buffering signal delay between display device in multi-display environment
US7120816B2 (en) Method for testing synchronization and connection status of a graphics processing unit module
TW201440515A (en) Video wall
KR20140109473A (en) Energy conserving display
CN110999284B (en) Wireless content delivery for tiled LED displays
US7068278B1 (en) Synchronized graphics processing units
EP2993900A1 (en) Ultra-high definition three-dimensional conversion device and ultra-high definition three-dimensional display system
KR20150114810A (en) Display apparatus, control method thereof, and display system
KR20120005270A (en) Image output device and method for outputting image using the same
JP2003308041A (en) Plasma display device
JP2006235233A (en) Video display method for large screen, video display device, and large-screen display device
TW202215395A (en) Display device and image correction method
JP2007304261A (en) Device for adjusting display position of projector
EP2442578A2 (en) Device and method for displaying a three-dimensional image
US20150287386A1 (en) Image display apparatus and operation method thereof
WO2012111121A1 (en) Projector and minute information generating method
JP2002006804A (en) Multiple screen display device
US9933987B2 (en) Multi-display system
JP6834042B2 (en) Display device

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid