KR20160068053A - System and method for detecting abnormality of display device - Google Patents

System and method for detecting abnormality of display device Download PDF

Info

Publication number
KR20160068053A
KR20160068053A KR1020140172865A KR20140172865A KR20160068053A KR 20160068053 A KR20160068053 A KR 20160068053A KR 1020140172865 A KR1020140172865 A KR 1020140172865A KR 20140172865 A KR20140172865 A KR 20140172865A KR 20160068053 A KR20160068053 A KR 20160068053A
Authority
KR
South Korea
Prior art keywords
frame
partial
display devices
frames
composite
Prior art date
Application number
KR1020140172865A
Other languages
Korean (ko)
Other versions
KR101646847B1 (en
Inventor
김경일
가성현
Original Assignee
삼성에스디에스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성에스디에스 주식회사 filed Critical 삼성에스디에스 주식회사
Priority to KR1020140172865A priority Critical patent/KR101646847B1/en
Publication of KR20160068053A publication Critical patent/KR20160068053A/en
Application granted granted Critical
Publication of KR101646847B1 publication Critical patent/KR101646847B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/04Diagnosis, testing or measuring for television systems or their details for receivers

Abstract

Provided are a system and a method for detecting the abnormality of a display device. The system for detecting the abnormality of a display device according to an embodiment of the present invention includes a photographing part which photographs an image outputted from display devices; and a determining part which obtains partial flames related to display devices from an image frame photographed by the photographing part and determines whether there is an error in each of the display devices according to whether the partial frames are matched to each other. So, the abnormality of the display device can be automatically detected in the environment same as a user viewing environment.

Description

디스플레이 장치의 이상 검출 시스템 및 방법{SYSTEM AND METHOD FOR DETECTING ABNORMALITY OF DISPLAY DEVICE}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a system and a method for detecting an abnormality of a display device,

본 발명의 실시예들은 디스플레이 장치의 화면 이상 현상을 자동으로 검출하기 위한 기술과 관련된다.
Embodiments of the present invention relate to a technique for automatically detecting a screen anomaly of a display device.

종래 텔레비전 등의 디스플레이 장치의 화면 이상 현상을 검출하는 방법으로서, 사람이 디스플레이 장치를 직접 모니터링하는 방법, MSE(Mean Square Error), PSNR(Peak Signal to Noise Ratio) 등을 통해 영상의 화질을 측정하는 방법, 영상 왜곡 테스트용 컨텐츠(시퀀스)를 이용한 테스트 방법 등이 있었다. 그러나, 사람이 디스플레이 장치를 직접 모니터링하는 방법의 경우, 24시간 이상의 연속적인 모니터링이 불가능하며, 모니터링 결과에 대한 객관성이 결여되며, 두 대 이상의 디스플레이 장치에 대한 모니터링이 불가능한 문제점이 있었다. 또한, 영상의 화질을 측정함으로써 디스플레이 장치의 이상 유무를 검출하는 방법의 경우, 영상의 디지털 값을 이용(예를 들어, 픽셀값 비교, 픽셀들의 패턴 일치)한다는 점에서 영상의 이상 현상(영상의 깜빡임 현상, 영상의 간헐적 꺼짐 현상, 외부 제어가 없는 상태에서 디스플레이 장치의 메뉴 또는 설정창이 뜨는 현상, 노이즈 발생 현상 등)과 디스플레이 장치를 통해 영상이 출력되는 과정에서 발생하는 자연적 영상 변형(예를 들어, 디스플레이 장치의 화면 크기로 인한 영상의 크기 또는 위치 변화 등)을 구별할 수 없는 문제점이 있었다. 또한, 영상 왜곡 테스트용 컨텐츠(시퀀스)를 이용한 실시간 테스트 방법의 경우, 테스트 대상이 되는 컨텐츠에 워터마크 신호의 삽입이 필요하므로, 실시간으로 수신되는 방송 영상에 대해 실시간 테스트가 불가능한 문제점이 있었다. 또한, 테스트 컨텐츠의 경우 사용자가 시청하는 컨텐츠(영상)를 재가공함으로써 생성된다는 점에서, 사용자가 시청하는 컨텐츠(영상)의 화면 왜곡과 차이가 있을 수 있다.
As a method for detecting a screen abnormal phenomenon of a display device such as a conventional television, there is a method of directly monitoring a display device, measuring the image quality through a mean square error (MSE), a peak signal to noise ratio (PSNR) And a test method using content (sequence) for image distortion test. However, in the case of a method of directly monitoring a display device by a person, there is a problem that continuous monitoring over 24 hours is impossible, lack of objectivity of monitoring results, and monitoring of two or more display devices is impossible. In the case of detecting the presence or absence of an abnormality in the display device by measuring the image quality of the image, in the case of using the digital value of the image (for example, pixel value comparison, pattern matching of pixels) Flicker phenomenon, intermittent turn-off of the image, phenomenon of the display of the menu or setting window of the display device in the absence of external control, noise occurrence phenomenon) and natural image deformation (for example, , A change in size or position of an image due to the screen size of the display device, etc.). In addition, in the case of a real-time test method using a content (sequence) for image distortion test, since it is necessary to insert a watermark signal into a test target content, there is a problem that real-time testing can not be performed on a broadcast image received in real time. In addition, in the case of the test contents, there may be a difference from the screen distortion of the contents (images) viewed by the user in that the contents are generated by reprocessing the contents (images) viewed by the user.

한국공개특허공보 제10-2011-0046824호(2011.05.06)Korean Patent Publication No. 10-2011-0046824 (May 25, 2011)

본 발명의 실시예들은 사용자 시청 환경과 동일한 환경에서 디스플레이 장치의 화면 이상 현상을 자동으로 검출하기 위한 것이다.
Embodiments of the present invention are for automatically detecting a screen abnormal phenomenon of a display device in the same environment as a user viewing environment.

예시적인 실시예에 따르면, 복수 개의 디스플레이 장치에서 출력되는 영상을 촬영하는 촬영부; 및 상기 촬영부에 의해 촬영된 영상 프레임으로부터 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 획득하고, 상기 복수 개의 부분 프레임간의 일치 여부에 따라 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 판단부를 포함하는, 디스플레이 장치의 이상 검출 시스템이 제공된다.According to an exemplary embodiment, there is provided an image display apparatus including: a photographing unit photographing an image output from a plurality of display devices; And a plurality of partial frames associated with the plurality of display devices from an image frame photographed by the photographing unit And a determination unit for determining whether or not an abnormality exists in each of the plurality of display apparatuses in accordance with whether or not the plurality of partial frames coincide with each other.

상기 판단부는, 상기 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임의 부분 프레임을 획득하고, 상기 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교할 수 있다.Wherein if the at least one of the plurality of partial frames does not coincide with the remaining partial frames, the determination unit obtains a partial frame of one or more contiguous frames contiguous with the video frame, Can be compared.

상기 판단부는, 상기 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 상기 인접 프레임을 합성하여 합성 프레임을 획득하며, 상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단할 수 있다.Wherein the determination unit synthesizes the image frame and the adjacent frame to obtain a composite frame when the partial frame of the adjacent frame does not coincide with the remaining partial frame, The presence or absence of abnormality of each of the devices can be determined.

상기 판단부는, 상기 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교할 수 있다.The determination unit may compare the partial frame of the composite frame and the remaining partial frames.

상기 판단부는, 상기 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하며, 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단할 수 있다.Wherein if the partial frame of the composite frame does not coincide with the remaining partial frame, the determination unit obtains a partial composite frame by synthesizing a portion of the video frame and a portion of the adjacent frame, The presence or absence of an abnormality in each of the plurality of display devices can be determined.

상기 판단부는, 상기 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교할 수 있다.The determination unit may compare a plurality of partial frames associated with the plurality of display devices in the composite frame.

상기 판단부는, 상기 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하며, 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단할 수 있다.Wherein the determination unit obtains a partial composite frame by synthesizing a portion of the video frame and a portion of the adjacent frame when the plurality of partial frames in the composite frame do not coincide with each other, Thereby determining whether there is an abnormality in each of the plurality of display devices.

상기 판단부는, 상기 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하고, 상기 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단할 수 있다.Wherein the determination unit compares the partial frame of the partial composite frame with the remaining partial frame and if the partial frame of the partial composite frame does not match the remaining partial frame It can be determined that there is an error in the display device associated with the partial frame that does not coincide with the remaining partial frame.

상기 판단부는, 상기 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하고, 상기 부분 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단할 수 있다.Wherein the determination unit compares a plurality of partial frames associated with the plurality of display devices in the partial composite frame to each other, and when the plurality of partial frames in the partial composite frame do not coincide with each other, It can be determined that there is an error in the display device associated with the partial frame.

다른 예시적인 실시예에 따르면, 복수 개의 디스플레이 장치에서 출력되는 영상을 촬영하는 단계; 상기 촬영된 영상 프레임으로부터 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 획득하는 단계; 및 상기 복수 개의 부분 프레임간의 일치 여부에 따라 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 포함하는, 디스플레이 장치의 이상 검출 방법이 제공된다.According to another exemplary embodiment, there is provided an image processing method including: capturing an image output from a plurality of display devices; A plurality of partial frames associated with the plurality of display devices from the photographed image frame, Obtaining; And determining whether there is an abnormality in each of the plurality of display devices according to whether or not the plurality of partial frames coincide with each other.

상기 디스플레이 장치의 이상 검출 방법은, 상기 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임의 부분 프레임을 획득하는 단계; 및 상기 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는 단계를 더 포함할 수 있다.The method of detecting an anomaly of the display device includes the steps of acquiring a partial frame of one or more contiguous frames contiguous with the video frame when at least one of the plurality of partial frames does not coincide with the remaining partial frames; And comparing the partial frame of the adjacent frame with the remaining partial frame.

상기 디스플레이 장치의 이상 검출 방법은, 상기 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 상기 인접 프레임을 합성하여 합성 프레임을 획득하는 단계; 및 상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 포함할 수 있다.The method of detecting an anomaly of the display device includes the steps of: when a partial frame of the adjacent frame does not coincide with the remaining partial frame, combining the video frame and the adjacent frame to obtain a composite frame; And determining whether each of the plurality of display devices is abnormal using the partial frame of the composite frame.

상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계는, 상기 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교할 수 있다.The step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the composite frame may compare the partial frame of the composite frame and the remaining partial frames.

상기 디스플레이 장치의 이상 검출 방법은, 상기 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하는 단계; 및 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 더 포함할 수 있다.The method further comprising the steps of: if a partial frame of the composite frame does not coincide with the remaining partial frame, combining a part of the video frame and a part of the adjacent frame to obtain a partial composite frame; And determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the partial composite frame.

상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계는, 상기 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교할 수 있다.The step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the composite frame may compare a plurality of partial frames associated with the plurality of display devices in the composite frame.

상기 디스플레이 장치의 이상 검출 방법은, 상기 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하는 단계; 및 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 더 포함할 수 있다.The method may further include a step of synthesizing a part of the image frame and a part of the adjacent frame to obtain a partial composite frame when the plurality of partial frames in the combined frame do not coincide with each other. And determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the partial composite frame.

상기 디스플레이 장치의 이상 검출 방법은, 상기 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는 단계; 및 상기 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는 단계를 더 포함할 수 있다.The method of detecting an anomaly of the display device may further include: comparing a partial frame of the partial composite frame and the remaining partial frame; And when the partial frame of the partial composite frame does not coincide with the remaining partial frame And determining that there is an error in the display device associated with the partial frame that does not coincide with the remaining partial frame.

상기 디스플레이 장치의 이상 검출 방법은, 상기 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하는 단계; 및 상기 부분 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는 단계를 더 포함할 수 있다.
The method may further include comparing a plurality of partial frames associated with the plurality of display devices in the partial composite frame; And determining that there is an error in the display device associated with the partial frame that does not coincide with the remaining partial frame when the plurality of partial frames in the partial combined frame do not coincide with each other.

본 발명의 실시예들에 따르면, 복수 개의 디스플레이 장치에서 출력되는 영상을 촬영하여 획득한 영상 프레임으로부터 디스플레이 장치의 이상 유무를 검출한다는 점에서, 사용자의 시청 환경과 동일한 환경에서 디스플레이 장치의 이상 유무를 검출할 수 있다. According to the embodiments of the present invention, it is possible to detect an abnormality of the display device from an image frame acquired by capturing an image output from a plurality of display devices, Can be detected.

또한, 본 발명의 실시예들에 따르면, 인접 프레임, 합성 프레임, 부분 합성 프레임 등을 이용하여 디스플레이 장치의 이상 유무를 단계적으로 판단함으로써, 화면의 이상 현상과 디스플레이 장치를 통해 영상이 출력되는 과정에서 발생하는 자연적 영상 변형을 구별할 수 있으며, 디스플레이 장치의 이상 유무 판단에 대한 오경보율(false alarm rate)을 최소화할 수 있다.
In addition, according to embodiments of the present invention, it is possible to use a neighboring frame, a synthesized frame, a partial synthesized frame, or the like to determine the abnormality of the display device step by step, It is possible to distinguish the natural image deformation that occurs and to minimize the false alarm rate for judging the abnormality of the display device.

도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 이상 검출 시스템을 설명하기 위한 블록도
도 2는 본 발명의 일 실시예에 따른 판단부의 상세 구성을 나타내는 블록도
도 3은 본 발명의 일 실시예에 따른 제 1 판단부가 디스플레이 장치의 이상 유무를 1차적으로 판단하는 과정을 설명하기 위한 예시도
도 4는 본 발명의 일 실시예에 따른 제 2 판단부가 디스플레이 장치의 이상 유무를 2차적으로 판단하는 과정을 설명하기 위한 예시도
도 5는 본 발명의 일 실시예에 따른 제 3 판단부가 디스플레이 장치의 이상 유무를 3차적으로 판단하는 과정을 설명하기 위한 예시도
도 6은 본 발명의 일 실시예에 따른 제 3 판단부가 디스플레이 장치의 이상 유무를 3차적으로 판단하는 과정을 설명하기 위한 다른 예시도
도 7은 본 발명의 일 실시예에 따른 제 4 판단부가 디스플레이 장치의 이상 유무를 4차적으로 판단하는 과정을 설명하기 위한 예시도
도 8은 본 발명의 일 실시예에 따른 제 4 판단부가 디스플레이 장치의 이상 유무를 4차적으로 판단하는 과정을 설명하기 위한 다른 예시도
도 9는 본 발명의 일 실시예에 따른 디스플레이 장치의 이상 유무 검출 방법을 설명하기 위한 흐름도
1 is a block diagram for explaining an anomaly detection system of a display device according to an embodiment of the present invention;
2 is a block diagram showing a detailed configuration of a determination unit according to an embodiment of the present invention;
3 is an exemplary diagram for explaining a process in which a first determination unit primarily determines an abnormality of a display device according to an exemplary embodiment of the present invention
4 is an exemplary diagram for explaining a process of secondarily determining whether or not the second determination unit is abnormal in the display apparatus according to an embodiment of the present invention
5 is an exemplary diagram for explaining a process of thirdarily determining whether a third determination unit is abnormal in the display apparatus according to an embodiment of the present invention
6 is a diagram illustrating another example of a process of thirdarily determining whether a third determination unit is abnormal according to an exemplary embodiment of the present invention.
7 is an exemplary diagram for explaining a process of fourtharily determining whether a fourth determination unit is abnormal in the display device according to an embodiment of the present invention
8 is a diagram illustrating another example of a process of fourtharily determining whether an abnormality has occurred in a display device according to an embodiment of the present invention.
9 is a flowchart for explaining an abnormality detection method of a display apparatus according to an embodiment of the present invention.

이하, 도면을 참조하여 본 발명의 구체적인 실시예를 설명하기로 한다. 그러나 이는 예시적 실시예에 불과하며 본 발명은 이에 한정되지 않는다.Hereinafter, specific embodiments of the present invention will be described with reference to the drawings. However, this is an exemplary embodiment only and the present invention is not limited thereto.

본 발명을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In the following description, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. The following terms are defined in consideration of the functions of the present invention, and may be changed according to the intention or custom of the user, the operator, and the like. Therefore, the definition should be based on the contents throughout this specification.

본 발명의 기술적 사상은 청구범위에 의해 결정되며, 이하 실시예는 진보적인 본 발명의 기술적 사상을 본 발명이 속하는 기술분야에서 통상의 지식을 가진자에게 효율적으로 설명하기 위한 일 수단일 뿐이다.
The technical idea of the present invention is determined by the claims, and the following embodiments are merely a means for efficiently describing the technical idea of the present invention to a person having ordinary skill in the art to which the present invention belongs.

도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 이상 검출 시스템(100)을 설명하기 위한 블록도이다. 도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 디스플레이 장치의 이상 검출 시스템(100)은 촬영부(130) 및 판단부(140)를 포함한다.1 is a block diagram for explaining an anomaly detection system 100 of a display device according to an embodiment of the present invention. 1, an anomaly detection system 100 of a display apparatus according to an exemplary embodiment of the present invention includes an image capturing unit 130 and a determination unit 140. As shown in FIG.

촬영부(130)는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 촬영한다. 여기서, 디스플레이 장치(120-1, 120-2, 120-3)는 영상 송신 장치(110)로부터 영상을 수신하여 이를 출력하기 위한 장치로서, 예를 들어 텔레비전, 컴퓨터의 모니터 등이 될 수 있다. 도 1에서는, 설명의 편의상 디스플레이 장치(120-1, 120-2, 120-3)가 3개인 것으로 도시하였으나 디스플레이 장치(120-1, 120-2, 120-3)는 복수이면 족하며, 특정 개수로 한정되는 것은 아니다. 디스플레이 장치(120-1, 120-2, 120-3) 각각은 영상 송신 장치(110)로부터 동일한 영상을 수신하며, 이를 실시간으로 출력할 수 있다.The photographing unit 130 photographs images output from the plurality of display devices 120-1, 120-2, and 120-3. Here, the display devices 120-1, 120-2, and 120-3 are devices for receiving images from the image transmitting device 110 and outputting the images, and may be, for example, a television, a computer monitor, or the like. Although FIG. 1 shows that three display devices 120-1, 120-2, and 120-3 are provided for convenience of explanation, a plurality of display devices 120-1, 120-2, and 120-3 may be sufficient, But the number is not limited thereto. Each of the display devices 120-1, 120-2, and 120-3 receives the same image from the image transmitting apparatus 110 and can output it in real time.

촬영부(130)는 촬영 수단, 예를 들어 카메라, 캠코더 등을 이용하여 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 실시간으로 촬영할 수 있다. 촬영 수단은 디스플레이 장치(120-1, 120-2, 120-3)의 근처(예를 들어, 반경 5미터 이내)에 배치될 수 있다. 여기서, 디스플레이 장치(120-1, 120-2, 120-3)의 근처에 배치되는 촬영 수단은 하나일 수 있으나, 촬영 수단의 개수가 이에 한정되는 것은 아니다. 예를 들어, 복수 개의 촬영 수단을 이용하여 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 각각 촬영할 수도 있다. 이하에서는, 설명의 편의상 촬영부(130)가 하나의 촬영 수단을 이용하여 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 촬영하는 것으로 가정한다. The photographing unit 130 can photograph images output from the plurality of display devices 120-1, 120-2, and 120-3 in real time using photographing means, such as a camera, a camcorder, or the like. The photographing means may be disposed in the vicinity of the display devices 120-1, 120-2, and 120-3 (e.g., within a radius of 5 meters). Here, although there may be one photographing means disposed near the display devices 120-1, 120-2, and 120-3, the number of photographing means is not limited thereto. For example, the image output from the plurality of display devices 120-1, 120-2, and 120-3 may be photographed using a plurality of image capturing means. Hereinafter, for the convenience of explanation, it is assumed that the photographing section 130 photographs an image output from a plurality of display devices 120-1, 120-2, and 120-3 using one photographing means.

판단부(140)는 촬영부(130)에 의해 촬영된 영상으로부터 영상 프레임을 획득하고, 영상 프레임으로부터 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 획득한다. 여기서, 부분 프레임은 영상 프레임 내의 특정 영역으로서, 예를 들어 특정 오브젝트(object)의 형태(예를 들어, 사람 또는 건물의 형태)가 포함된 영역일 수 있다. 하나의 영상 프레임에는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3) 각각과 연관되는 복수 개의 부분 프레임이 포함될 수 있다. 만약, 복수 개의 촬영 수단을 이용하여 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 촬영하는 경우, 판단부(140)는 각 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상에 대한 복수 개의 영상 프레임을 획득할 수 있으며, 영상 프레임 각각에는 해당 디스플레이 장치(120-1, 120-2, 또는 120-3)와 연관되는 부분 프레임이 포함될 수 있다.The determination unit 140 acquires an image frame from the image photographed by the photographing unit 130 and extracts a plurality of partial frames related to the plurality of display devices 120-1, 120-2, and 120-3 from the image frame, . Here, the partial frame may be a specific area within an image frame, for example, an area including a form of a specific object (for example, a person or a building). One image frame may include a plurality of partial frames associated with each of the plurality of display devices 120-1, 120-2, and 120-3. When the image output from the plurality of display devices 120-1, 120-2 and 120-3 is photographed by using a plurality of photographing means, the judging unit 140 judges whether each of the display devices 120-1, 120-2, -2, and 120-3, and each of the image frames may include a partial frame associated with the corresponding display device 120-1, 120-2, or 120-3, .

판단부(140)는 영상 프레임에 포함된 복수 개의 부분 프레임간의 일치 여부에 따라 복수 개의 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다. The determination unit 140 may determine whether there is an abnormality in each of the plurality of display devices 120-1, 120-2, and 120-3 according to whether the plurality of partial frames included in the video frame coincide with each other.

여기서, 디스플레이 장치(120-1, 120-2, 120-3)의 이상이란 예를 들어, 화면의 깜빡임 현상, 화면의 간헐적 꺼짐 현상, 외부 제어가 없는 상태에서 디스플레이 장치의 메뉴 또는 설정창이 뜨는 현상, 노이즈 발생 현상 등이 될 수 있으며, 이는 디스플레이 장치(120-1, 120-2, 120-3)를 통해 영상이 출력되는 과정에서 발생하는 자연적 영상 변형(예를 들어, 디스플레이 장치의 화면 크기로 인한 영상의 크기 또는 위치 변화 등)과는 구별된다. 이하에서는 판단부(140)의 상세 구성에 대해 구체적으로 살펴보기로 한다.
The abnormality of the display devices 120-1, 120-2, and 120-3 is a phenomenon in which, for example, a phenomenon of flickering of the screen, intermittent shutdown of the screen, A noise generation phenomenon and the like. This is a natural image distortion (for example, a screen size of a display device) generated in the process of outputting an image through the display devices 120-1, 120-2, and 120-3 A change in the size or position of the image caused by the image). Hereinafter, the detailed configuration of the determination unit 140 will be described in detail.

도 2는 본 발명의 일 실시예에 따른 판단부(140)의 상세 구성을 나타내는 블록도이다. 도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 판단부(140)는 제 1 판단부(210), 제 2 판단부(220), 제 3 판단부(230) 및 제 4 판단부(240)를 포함한다.2 is a block diagram showing a detailed configuration of a determination unit 140 according to an embodiment of the present invention. 2, the determination unit 140 may include a first determination unit 210, a second determination unit 220, a third determination unit 230, and a fourth determination unit 230. The first determination unit 210, the second determination unit 220, (240).

제 1 판단부(210)는 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 1차적으로 판단한다. 이를 위해, 제 1 판단부(210)는 촬영부(130)에 의해 촬영된 영상 프레임으로부터 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 획득하고, 복수 개의 부분 프레임을 상호 비교하여 이들의 일치 여부를 판단한다. 예를 들어, 제 1 판단부(210)는 영상 프레임에 포함된 특정 건물들의 형태가 상호 일치하는지 여부를 판단할 수 있다. 이하에서는, 복수 개의 부분 프레임간의 일치 정도(또는 매칭률)가 설정된 임계치 이상인 경우 이들이 "일치"하는 것으로 표현하기로 한다.The first determination unit 210 primarily determines whether there is an abnormality in each of the display devices 120-1, 120-2, and 120-3. To this end, the first determination unit 210 acquires a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 from the image frames photographed by the photographing unit 130 , And a plurality of partial frames are compared with each other to judge whether or not they are matched. For example, the first determination unit 210 may determine whether the shapes of the specific buildings included in the image frame coincide with each other. Hereinafter, when the degree of coincidence (or the matching rate) between a plurality of partial frames is equal to or larger than the set threshold value, they are expressed as "coincident ".

제 1 판단부(210)는 부분 프레임간의 일치 정도가 설정된 임계치 이상인 경우 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. The first determination unit 210 may determine that the display devices 120-1, 120-2, and 120-3 are normal when the degree of coincidence between partial frames is equal to or greater than a preset threshold value.

만약, 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 제 2 판단부(220)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 2차적으로 판단할 수 있다. If at least one of the plurality of partial frames does not coincide with the remaining partial frames, the second determination unit 220 determines whether there is an abnormality in each of the display devices 120-1, 120-2, and 120-3, It can be judged.

일반적으로, 각 디스플레이 장치(120-1, 120-2, 120-3) 간에 동기화가 되어 있지 않거나, 또는 각 디스플레이 장치(120-1, 120-2, 120-3)의 사양 차이로 인해 프레임별 화면 전환 시점이 다른 경우, 각 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상의 픽셀값이 달라지게 된다. 이 경우, 각 디스플레이 장치(120-1, 120-2, 120-3)의 이상이 없음에도 불구하고, 종래 기술은 픽셀값이 다른 디스플레이 장치에 이상이 있는 것으로 판단하였다. 이러한 문제점을 해결하기 위해, 본 발명의 실시예들은 촬영된 영상 프레임의 부분 프레임을 이용하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 뿐 아니라, 영상 프레임의 인접 프레임, 영상 프레임과 인접 프레임을 합성한 합성 프레임 및 영상 프레임의 일부분과 인접 프레임의 일부분을 합성한 부분 합성 프레임을 추가적으로 고려하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있도록 하였다.In general, since the display devices 120-1, 120-2, and 120-3 are not synchronized with each other or due to differences in specifications of the display devices 120-1, 120-2, and 120-3, When the screen switching points are different, the pixel values of the images output from the display devices 120-1, 120-2, and 120-3 are different. In this case, even though there is no abnormality in each of the display devices 120-1, 120-2, and 120-3, the prior art has determined that the pixel values are different from each other in the display device. In order to solve such a problem, embodiments of the present invention not only determine the abnormality of each of the display devices 120-1, 120-2, and 120-3 using a partial frame of a captured image frame, A composite frame obtained by combining an image frame and an adjacent frame, and a partial composite frame obtained by synthesizing a part of the image frame and a part of the adjacent frame are additionally considered, and the display devices 120-1, 120-2, and 120-3 In order to determine whether there is an abnormality.

이를 구체적으로 살펴보면, 먼저 제 2 판단부(220)는 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임을 획득하고, 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교할 수 있다. 여기서, 인접 프레임이란 촬영부(130)에서 연속적으로 획득하는 복수 개의 영상 프레임들을 순차적으로 나열하였을 때 특정 영상 프레임으로부터 설정된 범위 이내에 속하는 영상 프레임들을 의미한다. 예를 들어, 촬영부(130)에서 제 1 영상 프레임 내지 제 7 영상 프레임을 연속적으로 획득하는 경우, 제 5 영상 프레임에 대한 인접 프레임은 제 3 영상 프레임, 제 4 영상 프레임, 제 6 영상 프레임 및 제 7 영상 프레임이 될 수 있다. 다만, 특정 영상 프레임에 대한 인접 프레임의 범위가 특별히 한정되는 것은 아니다. 예를 들어, 특정 영상 프레임의 바로 이전 영상 프레임 및 바로 다음 영상 프레임만이 인접 프레임이 될 수도 있다. Specifically, the second determination unit 220 may acquire one or more contiguous frames contiguous with the video frame, and may compare the partial frame of the adjacent frame with the remaining partial frame. Here, the adjacent frame means image frames falling within a predetermined range from a specific image frame when a plurality of image frames successively acquired by the photographing unit 130 are sequentially arranged. For example, when the first image frame to the seventh image frame are successively acquired by the photographing unit 130, the neighboring frames for the fifth image frame may include a third image frame, a fourth image frame, a sixth image frame, And a seventh image frame. However, the range of adjacent frames for a specific image frame is not particularly limited. For example, only a previous image frame and a next image frame of a specific image frame may be adjacent frames.

만약, 인접 프레임의 부분 프레임 중 하나 이상이 상기 나머지 부분 프레임과 일치하는 경우, 제 2 판단부(220)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If at least one of the partial frames of the adjacent frame matches the remaining partial frames, the second determination unit 220 may determine that each of the display devices 120-1, 120-2, and 120-3 is normal have.

만약, 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 제 3 판단부(230)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 3차적으로 판단할 수 있다. If the partial frame of the adjacent frame does not coincide with the remaining partial frame, the third judgment unit 230 judges the abnormality of each of the display apparatuses 120-1, 120-2 and 120-3 in a tertiary manner can do.

제 3 판단부(230)는 상기 영상 프레임과 상기 인접 프레임을 합성(blend)하여 합성 프레임을 획득하고, 합성 프레임의 부분 프레임을 이용하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다. 여기서, 합성이란 복수 개의 프레임을 서로 겹쳐 보이게 하는 것을 의미한다.The third determination unit 230 obtains a composite frame by blending the image frame and the adjacent frame, and outputs the synthesized frame to the display devices 120-1, 120-2, and 120-3 using a partial frame of the composite frame. The presence or absence of each abnormality can be judged. Here, synthesis means that a plurality of frames overlap each other.

일 실시예로서, 제 3 판단부(230)는 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하고, 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하는 경우 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. In one embodiment, the third determination unit 230 compares the partial frame of the composite frame with the remaining partial frame, and when the partial frame of the composite frame matches the remaining partial frame, the display device 120-1, 120- 2, and 120-3 are normal.

다른 실시예로서, 제 3 판단부(230)는 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 상호 비교하고, 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하는 경우 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수도 있다. As another example, the third determination unit 230 may compare a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the combined frame, When the plurality of partial frames associated with the display devices 120-1, 120-2, and 120-3 coincide with each other, the display devices 120-1, 120-2, and 120-3 may determine that they are normal .

만약, 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않거나, 또는 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 4차적으로 판단할 수 있다. If the partial frame of the composite frame does not coincide with the remaining partial frame or a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the composite frame do not coincide with each other , The fourth determiner 240 may determine the abnormality of each of the display devices 120-1, 120-2, and 120-3 in a quadratic manner.

제 4 판단부(240)는 상기 영상 프레임과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하고, 부분 합성 프레임의 부분 프레임을 이용하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다.The fourth determination unit 240 obtains a partial composite frame by combining the video frame and a portion of the adjacent frame, and outputs the partial composite frame to the display devices 120-1, 120-2, and 120-3 ) Can be determined.

일 실시예로서, 제 4 판단부(240)는 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하고, 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치(예를 들어, 제 2 디스플레이 장치(120-2))에 이상이 있는 것으로 판단할 수 있다. 만약, 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하는 경우, 제 4 판단부(240)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다.In one embodiment, the fourth determination unit 240 compares the partial frame of the partial composite frame with the remaining partial frame, and if the partial frame of the partial composite frame does not coincide with the remaining partial frame, (For example, the second display device 120-2) associated with the partial frame that does not include the partial frame. If the partial frame of the partial composite frame matches the remaining partial frame, the fourth determination unit 240 may determine that the display devices 120-1, 120-2, and 120-3 are normal.

다른 실시예로서, 제 4 판단부(240)는 부분 합성 프레임 내 복수 개의 디스플레(120-1, 120-2, 120-3)이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하고, 부분 합성 프레임 내 복수 개의 디스플레(120-1, 120-2, 120-3)이 장치와 연관되는 복수 개의 부분 프레임이 상호 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치(예를 들어, 제 2 디스플레이 장치(120-2))에 이상이 있는 것으로 판단할 수 있다. 만약, 부분 합성 프레임 내 복수 개의 디스플레(120-1, 120-2, 120-3)이 장치와 연관되는 복수 개의 부분 프레임이 상호 일치하는 경우, 제 4 판단부(240)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다.In another embodiment, the fourth determination unit 240 compares a plurality of partial frames associated with the apparatus with a plurality of displays 120-1, 120-2, and 120-3 in the partial synthetic frame, If a plurality of partial frames associated with the device are not coincident with each other, the plurality of displays 120-1, 120-2, and 120-3 are associated with a partial frame that does not coincide with the remaining partial frames It can be determined that there is an abnormality in the second display device 120-2. If a plurality of partial frames associated with the apparatus are matched with each other, the fourth determination unit 240 determines that the display apparatuses 120- 1, 120-2, and 120-3 are normal.

이하에서는, 제 1 판단부(210) 내지 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3)를 통해 디스플레이되는 영상의 이상 유무를 판단하는 과정을 도 3 내지 도 8을 참조하여 구체적으로 살펴보기로 한다.
Hereinafter, a process in which the first to fourth determination units 210 to 240 determine whether there is an abnormality in a displayed image through the display devices 120-1, 120-2, and 120-3 will be described with reference to FIGS. A detailed description will be given with reference to FIG.

도 3은 본 발명의 일 실시예에 따른 제 1 판단부(210)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 1차적으로 판단하는 과정을 설명하기 위한 예시도이다.3 is an exemplary diagram for explaining a process in which the first determination unit 210 primarily determines whether there is an abnormality in the display devices 120-1, 120-2, and 120-3 according to an exemplary embodiment of the present invention. to be.

도 3에 도시된 바와 같이, 복수 개의 디스플레이 장치(120-1, 120-2, 120-3) 각각은 실시간으로 영상을 출력하며, 촬영부(130)는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 촬영하여 하나의 영상 프레임을 획득할 수 있다. 상기 영상 프레임에는 제 1 디스플레이 장치(120-1)와 연관되는 부분 프레임 1, 제 2 디스플레이 장치(120-2)와 연관되는 부분 프레임 2 및 제 3 디스플레이 장치(120-3)와 연관되는 부분 프레임 3이 포함될 수 있다. 제 1 판단부(210)는 부분 프레임 1, 부분 프레임 2 및 부분 프레임 3을 상호 비교함으로써 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 1차적으로 판단할 수 있다. 상술한 바와 같이, 부분 프레임은 예를 들어, 영상 프레임 내 특정 오브젝트의 형태에 관한 정보를 포함할 수 있다.3, each of the plurality of display devices 120-1, 120-2, and 120-3 outputs an image in real time, and the photographing unit 130 includes a plurality of display devices 120-1, 120-2, -2, and 120-3, and acquires one image frame. The image frame includes a partial frame 1 associated with the first display device 120-1, a partial frame 2 associated with the second display device 120-2, and a partial frame 2 associated with the third display device 120-3. 3 may be included. The first determination unit 210 can primarily determine whether or not the display devices 120-1, 120-2, and 120-3 are abnormal by comparing the partial frame 1, the partial frame 2, and the partial frame 3 with each other . As described above, the partial frame may include information, for example, regarding the type of a specific object in an image frame.

만약, 부분 프레임 1, 부분 프레임 2 및 부분 프레임 3 간의 일치 정도가 설정된 임계치 이상인 경우, 제 1 판단부(210)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If the degree of coincidence between the partial frame 1, the partial frame 2, and the partial frame 3 is equal to or greater than the preset threshold value, the first determination unit 210 determines that each of the display devices 120-1, 120-2, can do.

만약, 부분 프레임 1, 부분 프레임 2 및 부분 프레임 3 중 어느 하나가 나머지 부분 프레임과 일치하지 않는 경우(즉, 부분 프레임간의 일치 정도가 설정된 임계치 미만인 경우), 제 2 판단부(220)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 2차적으로 판단하게 된다.
If any one of the partial frame 1, the partial frame 2, and the partial frame 3 does not coincide with the remaining partial frames (i.e., the degree of coincidence between partial frames is less than the set threshold value), the second determination unit 220 determines (120-1, 120-2, and 120-3).

도 4는 본 발명의 일 실시예에 따른 제 2 판단부(220)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 2차적으로 판단하는 과정을 설명하기 위한 예시도이다.4 is an exemplary diagram for explaining a process of secondarily determining whether or not an abnormality of the display devices 120-1, 120-2, and 120-3 is caused by the second determination unit 220 according to an embodiment of the present invention. to be.

제 1 판단부(210)에서, 예를 들어 부분 프레임 2가 부분 프레임 1 및 부분 프레임 3과 일치하지 않는 것으로 판단되는 경우, 제 2 판단부(220)는 제 2 디스플레이 장치(120-2)에서 출력되는 영상에 대한 영상 프레임과 연속하는 인접 프레임 1 및 인접 프레임 2의 부분 프레임, 예를 들어 부분 프레임 2a 및 부분 프레임 2b를 획득하고, 부분 프레임 2a 및 부분 프레임 2b와 부분 프레임 1 및 부분 프레임 3을 상호 비교할 수 있다. If the first determination unit 210 determines that the partial frame 2 does not coincide with the partial frame 1 and the partial frame 3, for example, the second determination unit 220 determines A partial frame 2a and a partial frame 2b of a contiguous frame 1 and a contiguous frame 2 successive to an image frame for an output image, and acquires a partial frame 2a and a partial frame 2b and a partial frame 1 and a partial frame 3 Can be compared with each other.

만약, 부분 프레임 2a 및 부분 프레임 2b 중 하나 이상이 부분 프레임 1 및 부분 프레임 3과 일치하는 경우, 제 2 판단부(220)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다.If at least one of the partial frame 2a and the partial frame 2b coincides with the partial frame 1 and the partial frame 3, the second determination unit 220 determines whether each of the display devices 120-1, 120-2, It can be judged to be normal.

만약, 부분 프레임 2a 및 부분 프레임 2b가 부분 프레임 1 및 부분 프레임 3과 일치하지 않는 경우, 제 3 판단부(230)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 3차적으로 판단하게 된다.
If the partial frame 2a and the partial frame 2b do not coincide with the partial frame 1 and the partial frame 3, the third determination unit 230 determines whether or not each of the display devices 120-1, 120-2, As shown in FIG.

도 5는 본 발명의 일 실시예에 따른 제 3 판단부(230)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 3차적으로 판단하는 과정을 설명하기 위한 예시도이다.5 is an exemplary diagram for explaining a process of thirdarily determining whether or not an abnormality of the display devices 120-1, 120-2, and 120-3 is caused by the third determination unit 230 according to an embodiment of the present invention. to be.

제 2 판단부(220)에서, 부분 프레임 2a 및 부분 프레임 2b가 부분 프레임 1 및 부분 프레임 3과 일치하지 않는 것으로 판단되는 경우, 제 3 판단부(230)는 인접 프레임 1, 영상 프레임, 인접 프레임 2를 합성하여 합성 프레임을 획득하며, 합성 프레임의 부분 프레임, 예를 들어 부분 프레임 M2와 부분 프레임 1 및 부분 프레임 3을 상호 비교할 수 있다. If it is determined in the second determination unit 220 that the partial frame 2a and the partial frame 2b do not coincide with the partial frame 1 and the partial frame 3, the third determination unit 230 determines that the adjacent frame 1, 2 to obtain a composite frame, and a partial frame of the composite frame, for example, the partial frame M2 and the partial frame 1 and the partial frame 3 can be compared with each other.

만약, 부분 프레임 M2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하는 경우, 제 3 판단부(230)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If the partial frame M2, partial frame 1, and partial frame 3 coincide with each other, the third determination unit 230 may determine that the display devices 120-1, 120-2, and 120-3 are normal .

만약, 부분 프레임 M2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하지 않는 경우, 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 4차적으로 판단하게 된다.
If the partial frame M2 and the partial frame 1 and the partial frame 3 do not coincide with each other, the fourth judging unit 240 judges whether the abnormality of each of the display devices 120-1, 120-2 and 120-3 is quadratic .

도 6은 본 발명의 일 실시예에 따른 제 3 판단부(230)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 3차적으로 판단하는 과정을 설명하기 위한 다른 예시도이다.6 is a flowchart illustrating a process of thirdarily determining whether an abnormality has occurred in the display devices 120-1, 120-2, and 120-3 according to another embodiment of the present invention. .

제 2 판단부(220)에서, 부분 프레임 2a 및 부분 프레임 2b가 부분 프레임 1 및 부분 프레임 3과 일치하지 않는 것으로 판단되는 경우, 제 3 판단부(230)는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)로부터 출력되는 영상에 대한 합성 프레임(연속되는 N개의 영상 프레임이 합성된 영상 프레임)으로부터 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3를 획득할 수 있다. 이후, 제 3 판단부(230)는 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3를 상호 비교함으로써 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다. If it is determined in the second determination unit 220 that the partial frame 2a and the partial frame 2b do not match the partial frame 1 and the partial frame 3, the third determination unit 230 determines that the plurality of display devices 120-1, Partial frames M 2 and M 3 from a composite frame (an image frame obtained by combining N consecutive image frames) for an image outputted from the partial frames M 1, M 2, M 2, and M 3. Then, the third determination unit 230 can determine whether or not each of the display devices 120-1, 120-2, and 120-3 is abnormal by comparing the partial frame M1, the partial frame M2, and the partial frame M3 with each other.

만약, 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3가 상호 일치하는 경우, 제 3 판단부(230)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If the partial frame M1, the partial frame M2, and the partial frame M3 coincide with each other, the third determination unit 230 may determine that the display devices 120-1, 120-2, and 120-3 are normal .

만약, 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3 중 어느 하나가 나머지 부분 프레임과 일치하지 않는 경우, 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 4차적으로 판단하게 된다.
If any one of the partial frame M1, the partial frame M2 and the partial frame M3 does not coincide with the remaining partial frames, the fourth determination unit 240 determines whether or not each of the display devices 120-1, 120-2, Of the total number of users.

도 7은 본 발명의 일 실시예에 따른 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 4차적으로 판단하는 과정을 설명하기 위한 예시도이다.7 is an exemplary diagram for explaining a process of fourtharily determining whether or not an abnormality of the display devices 120-1, 120-2, and 120-3 is caused by the fourth determination unit 240 according to an embodiment of the present invention. to be.

도 5의 제 3 판단부(230)에서, 부분 프레임 M2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하지 않는 것으로 판단되거나, 또는 도 6의 제 3 판단부(230)에서, 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3 중 어느 하나가 나머지 부분 프레임과 일치하지 않는 것으로 판단되는 경우, 제 4 판단부(240)는 인접 프레임 1의 일부분, 영상 프레임의 일부분 및 인접 프레임 2의 일부분을 합성하여 부분 합성 프레임을 획득할 수 있다. 예를 들어, 제 4 판단부(240)는 인접 프레임 1, 영상 프레임 및 인접 프레임 2 각각을 수평 방향으로 3등분한 후, 상측 부분에 대해서는 인접 프레임 1 및 인접 프레임 2의 합성 이미지로 구성하고 나머지 부분에 대해서는 영상 프레임의 원래 이미지로 구성함으로써 부분 합성 프레임을 획득할 수 있다. 이후, 제 4 판단부(240)는 부분 합성 프레임의 부분 프레임 m2와 부분 프레임 1 및 부분 프레임 3을 비교하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다. If it is determined in the third determination unit 230 of FIG. 5 that the partial frame M2, the partial frame 1, and the partial frame 3 do not coincide with each other, or in the third determination unit 230 of FIG. 6, If it is determined that either the frame M2 or the partial frame M3 does not coincide with the remaining partial frames, the fourth determiner 240 synthesizes a portion of the adjacent frame 1, a portion of the video frame, and a portion of the adjacent frame 2, A composite frame can be obtained. For example, the fourth determination unit 240 divides each of the adjacent frame 1, the video frame, and the adjacent frame 2 into three in the horizontal direction and then composes the upper portion of the composite image of the adjacent frame 1 and the adjacent frame 2, The partial composite frame can be obtained by constructing the partial image as an original image of the video frame. Then, the fourth determination unit 240 compares the partial frame m2 of the partial composite frame with the partial frame 1 and the partial frame 3 to determine whether or not each of the display devices 120-1, 120-2, and 120-3 is abnormal .

만약, 부분 프레임 m2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하는 경우, 제 4 판단부(240)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If the partial frame m2, the partial frame 1, and the partial frame 3 coincide with each other, the fourth determination unit 240 may determine that the display devices 120-1, 120-2, and 120-3 are normal .

만약, 부분 프레임 m2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하지 않는 경우, 제 4 판단부(240)는 상기 나머지 부분 프레임(부분 프레임 1 및 부분 프레임 3)과 일치하지 않는 부분 프레임(부분 프레임 2)과 연관되는 디스플레이 장치, 즉 제 2 디스플레이 장치(120-2)에 이상이 있는 것으로 판단할 수 있다.
If the partial frame m2, the partial frame 1, and the partial frame 3 do not coincide with each other, the fourth determination unit 240 determines that the partial frame (partial frame 1 and partial frame 3) 2), that is, the second display device 120-2, is abnormal.

도 8은 본 발명의 일 실시예에 따른 제 4 판단부(240)가 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무를 4차적으로 판단하는 과정을 설명하기 위한 다른 예시도이다.8 is a flowchart illustrating a process of fourtharily determining whether there is an abnormality in the display apparatuses 120-1, 120-2, and 120-3 according to another exemplary embodiment of the present invention. .

도 5의 제 3 판단부(230)에서, 부분 프레임 M2와 부분 프레임 1 및 부분 프레임 3이 상호 일치하지 않는 것으로 판단되거나, 또는 도 6의 제 3 판단부(230)에서, 부분 프레임 M1, 부분 프레임 M2 및 부분 프레임 M3 중 어느 하나가 나머지 부분 프레임과 일치하지 않는 것으로 판단되는 경우, 제 4 판단부(240)는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)로부터 출력되는 영상에 대한 부분 합성 프레임(연속되는 N개의 영상 프레임 각각의 일부분을 합성한 영상 프레임)으로부터 부분 프레임 m1, 부분 프레임 m2 및 부분 프레임 m3를 획득할 수 있다. 이후, 제 3 판단부(230)는 부분 프레임 m1, 부분 프레임 m2 및 부분 프레임 m3를 상호 비교함으로써 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 판단할 수 있다. If it is determined in the third determination unit 230 of FIG. 5 that the partial frame M2, the partial frame 1, and the partial frame 3 do not coincide with each other, or in the third determination unit 230 of FIG. 6, When it is determined that any one of the frame M2 and the partial frame M3 does not coincide with the remaining partial frames, the fourth determination unit 240 determines whether any one of the plurality of display devices 120-1, 120-2, A partial frame m1, a partial frame m2, and a partial frame m3 from a partial composite frame for an image (an image frame obtained by synthesizing a part of each of N consecutive image frames). Then, the third determination unit 230 can determine whether or not each of the display devices 120-1, 120-2, and 120-3 is abnormal by comparing the partial frame m1, the partial frame m2, and the partial frame m3 with each other.

만약, 부분 프레임 m1, 부분 프레임 m2 및 부분 프레임 m3가 상호 일치하는 경우, 제 4 판단부(240)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다. If the partial frame m1, the partial frame m2, and the partial frame m3 coincide with each other, the fourth determination unit 240 may determine that the display devices 120-1, 120-2, and 120-3 are normal .

만약, 부분 프레임 m1, 부분 프레임 m2 및 부분 프레임 m3 중 어느 하나가 나머지 부분 프레임과 일치하지 않는 경우, 제 4 판단부(240)는 상기 나머지 부분 프레임(부분 프레임 1 및 부분 프레임 3)과 일치하지 않는 부분 프레임(부분 프레임 2)과 연관되는 디스플레이 장치, 즉 제 2 디스플레이 장치(120-2)에 이상이 있는 것으로 판단할 수 있다.If any one of the partial frame m1, the partial frame m2, and the partial frame m3 does not match the remaining partial frames, the fourth determiner 240 does not match the remaining partial frames (partial frame 1 and partial frame 3) It can be determined that there is an abnormality in the display device associated with the partial frame (partial frame 2), that is, the second display device 120-2.

이와 같이, 본 발명의 실시예들에 따르면, 사용자의 시청 환경과 동일한 환경에서 획득한 아날로그 부분 프레임을 이용하여 디스플레이 장치(120-1, 120-2, 120-3) 각각의 이상 유무를 단계적으로 판단할 수 있으며, 특히 디스플레이 장치(120-1, 120-2, 120-3)의 이상 현상(화면의 깜빡임 현상, 화면의 간헐적 꺼짐 현상, 외부 제어가 없는 상태에서 디스플레이 장치의 메뉴 또는 설정창이 뜨는 현상, 노이즈 발생 현상 등)과 디스플레이 장치를 통해 영상이 출력되는 과정에서 발생하는 자연적 영상 변형(예를 들어, 디스플레이 장치의 화면 크기로 인한 영상의 크기 또는 위치 변화 등)을 구별할 수 있으며, 디스플레이 장치(120-1, 120-2, 120-3)의 이상 유무 판단에 대한 오경보율(false alarm rate)을 최소화할 수 있다.
As described above, according to the embodiments of the present invention, the presence or absence of abnormality of each of the display devices 120-1, 120-2, and 120-3 is detected step by step using the analog partial frames obtained in the same environment as the viewing environment of the user In particular, it is possible to judge whether or not an abnormality of the display devices 120-1, 120-2 and 120-3 (blinking of the screen, intermittent switching of the screen, (For example, a change in size or position of an image due to a screen size of a display device) generated during a process of outputting an image through a display device, It is possible to minimize the false alarm rate for judging the abnormality of the devices 120-1, 120-2, and 120-3.

도 9는 본 발명의 일 실시예에 따른 영상의 이상 유무 검출 방법을 설명하기 위한 흐름도이다.9 is a flowchart illustrating a method of detecting an anomaly according to an exemplary embodiment of the present invention.

먼저, 촬영부(130)는 촬영 수단을 통해 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)에서 출력되는 영상을 촬영한다(S902). 촬영 수단은 디스플레이 장치(120-1, 120-2, 120-3)의 근처(예를 들어, 반경 5미터 이내)에 배치될 수 있다.First, the photographing unit 130 photographs images output from the plurality of display devices 120-1, 120-2, and 120-3 through the photographing means (S902). The photographing means may be disposed in the vicinity of the display devices 120-1, 120-2, and 120-3 (e.g., within a radius of 5 meters).

다음으로, 판단부(140)는 촬영부(130)에 의해 촬영된 영상 프레임으로부터 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 획득한다(S904). 여기서, 부분 프레임은 영상 프레임 내의 특정 영역으로서, 예를 들어 특정 오브젝트(object)의 형태(예를 들어, 사람 또는 건물의 형태)가 포함된 영역일 수 있다. 하나의 영상 프레임에는 복수 개의 디스플레이 장치(120-1, 120-2, 120-3) 각각과 연관되는 복수 개의 부분 프레임이 포함될 수 있다.Next, the determination unit 140 acquires a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 from the image frames photographed by the photographing unit 130 (S904 ). Here, the partial frame may be a specific area within an image frame, for example, an area including a form of a specific object (for example, a person or a building). One image frame may include a plurality of partial frames associated with each of the plurality of display devices 120-1, 120-2, and 120-3.

다음으로, 판단부(140)는 복수 개의 부분 프레임을 상호 비교하여 부분 프레임간의 일치 여부를 판단한다(S906). 예를 들어, 판단부(140)는 프레임에 포함된 복수 개의 특정 건물들의 형태가 상호 일치하는지 여부를 판단할 수 있다. Next, the determination unit 140 compares the plurality of partial frames with each other to determine whether the partial frames match (S906). For example, the determination unit 140 may determine whether the shapes of the plurality of specific buildings included in the frame coincide with each other.

만약, 부분 프레임간의 일치 정도가 설정된 임계치 이상인 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단한다(S908).If the degree of coincidence between partial frames is equal to or greater than the preset threshold, the determination unit 140 determines that the display devices 120-1, 120-2, and 120-3 are normal (S908).

만약, 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 판단부(140)는 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임의 부분 프레임을 획득한다(S910). 여기서, 인접 프레임이란 촬영부(130)에서 연속적으로 획득하는 복수 개의 영상 프레임들을 순차적으로 나열하였을 때 특정 영상 프레임으로부터 설정된 범위 이내에 속하는 영상 프레임들을 의미한다. 예를 들어, 촬영부(130)에서 제 1 영상 프레임 내지 제 7 영상 프레임을 연속적으로 획득하는 경우, 제 5 영상 프레임에 대한 인접 프레임은 제 3 영상 프레임, 제 4 영상 프레임, 제 6 영상 프레임 및 제 7 영상 프레임이 될 수 있다. If at least one of the plurality of partial frames does not coincide with the remaining partial frames, the determination unit 140 acquires partial frames of one or more contiguous frames contiguous with the video frame (S910). Here, the adjacent frame means image frames falling within a predetermined range from a specific image frame when a plurality of image frames successively acquired by the photographing unit 130 are sequentially arranged. For example, when the first image frame to the seventh image frame are successively acquired by the photographing unit 130, the neighboring frames for the fifth image frame may include a third image frame, a fourth image frame, a sixth image frame, And a seventh image frame.

다음으로, 판단부(140)는 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하여 이들의 일치 여부를 판단한다(S912).Next, the determination unit 140 compares the partial frame of the adjacent frame with the remaining partial frame and determines whether they match (S912).

만약, 인접 프레임의 부분 프레임 중 하나 이상이 상기 나머지 부분 프레임과 일치하는 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단한다(S908).If at least one of the partial frames of the adjacent frame matches the remaining partial frames, the determination unit 140 determines that each of the display devices 120-1, 120-2, and 120-3 is normal (S908) .

만약, 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 판단부(140)는 상기 영상 프레임과 인접 프레임을 합성하여 합성 프레임을 획득한다(S914). 여기서, 합성이란 복수 개의 프레임을 서로 겹쳐 보이게 하는 것을 의미한다. If the partial frame of the adjacent frame does not coincide with the remaining partial frame, the determination unit 140 obtains a composite frame by combining the video frame and the adjacent frame (S914). Here, synthesis means that a plurality of frames overlap each other.

다음으로, 판단부(140)는 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하여 이들의 일치 여부를 판단한다(S916). Next, the determination unit 140 compares the partial frame of the combined frame with the remaining partial frames and determines whether they are matched (S916).

만약, 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하는 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다(S908).If the partial frame of the combined frame matches the remaining partial frame, the determination unit 140 may determine that each of the display devices 120-1, 120-2, and 120-3 is normal (S908).

또한, 판단부(140)는 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 상호 비교하여 이들의 일치 여부를 판단할 수도 있다. 만약, 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하는 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다(S908).In addition, the determination unit 140 may compare the plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the combined frame to determine whether they match. If the plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the combined frame coincide with each other, the determination unit 140 determines that the display devices 120-1 and 120- 2, and 120-3 are normal (S908).

만약, 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않거나, 또는 합성 프레임 내 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 판단부(140)는 상기 영상 프레임의 일부분과 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득한다(S918).If the partial frame of the composite frame does not coincide with the remaining partial frame or a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the composite frame do not coincide with each other In operation S918, the determination unit 140 obtains a partial composite frame by combining a portion of the video frame and a portion of the adjacent frame.

다음으로, 판단부(140)는 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하여 이들의 일치 여부를 판단한다(S920). 만약, 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하는 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다(S908).Next, the determination unit 140 compares the partial frames of the partial composite frame with the remaining partial frames and determines whether they match (S920). If the partial frame of the partial composite frame matches the remaining partial frame, the determination unit 140 may determine that each of the display devices 120-1, 120-2, and 120-3 is normal (S908) .

또한, 판단부(140)는 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임을 상호 비교하여 이들의 일치 여부를 판단할 수도 있다. 만약, 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하는 경우, 판단부(140)는 디스플레이 장치(120-1, 120-2, 120-3) 각각이 정상인 것으로 판단할 수 있다(S908).In addition, the determination unit 140 may compare a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the partial synthesis frame to determine whether they are matched . If the plurality of partial frames associated with the plurality of display devices 120-1, 120-2, and 120-3 in the partial composite frame coincide with each other, the determination unit 140 determines that the display devices 120-1, 120-2, and 120-3 are normal (S908).

만약, 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않거나, 또는 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치(120-1, 120-2, 120-3)와 연관되는 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 판단부(104)는 상기 나머지 부분 프레임을 제외한 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단할 수 있다(S922).
If a partial frame of the partial composite frame does not coincide with the remaining partial frame or a plurality of partial frames associated with the plurality of display devices 120-1, 120-2, If they do not match, the determination unit 104 may determine that there is an error in the display device associated with the partial frame excluding the remaining partial frames (S922).

이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 전술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, I will understand. Therefore, the scope of the present invention should not be limited to the above-described embodiments, but should be determined by equivalents to the appended claims, as well as the appended claims.

100 : 영상의 이상 현상 검출 시스템
110 : 영상 송신 장치
120-1, 120-2, 120-3 : 디스플레이 장치
130 : 촬영부
140 : 판단부
210 : 제 1 판단부
220 : 제 2 판단부
230 : 제 3 판단부
240 : 제 4 판단부
100: Image anomaly detection system
110:
120-1, 120-2, and 120-3:
130:
140:
210:
220: second judgment unit
230: third judgment unit
240: fourth judgment unit

Claims (18)

복수 개의 디스플레이 장치에서 출력되는 영상을 촬영하는 촬영부; 및
상기 촬영부에 의해 촬영된 영상 프레임으로부터 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 획득하고, 상기 복수 개의 부분 프레임간의 일치 여부에 따라 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 판단부를 포함하는, 디스플레이 장치의 이상 검출 시스템.
A photographing unit photographing an image output from a plurality of display devices; And
A plurality of partial frames associated with the plurality of display devices from an image frame photographed by the photographing unit And determining whether there is an abnormality in each of the plurality of display apparatuses according to whether or not the plurality of partial frames coincide with each other.
청구항 1에 있어서,
상기 판단부는, 상기 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임의 부분 프레임을 획득하고, 상기 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는, 디스플레이 장치의 이상 검출 시스템.
The method according to claim 1,
Wherein if the at least one of the plurality of partial frames does not coincide with the remaining partial frames, the determination unit obtains a partial frame of one or more contiguous frames contiguous with the video frame, To the display device.
청구항 2에 있어서,
상기 판단부는, 상기 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 상기 인접 프레임을 합성하여 합성 프레임을 획득하며, 상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는, 디스플레이 장치의 이상 검출 시스템.
The method of claim 2,
Wherein the determination unit synthesizes the image frame and the adjacent frame to obtain a composite frame when the partial frame of the adjacent frame does not match the remaining partial frame, And determining whether or not each of the devices is abnormal.
청구항 3에 있어서,
상기 판단부는, 상기 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는, 디스플레이 장치의 이상 검출 시스템.
The method of claim 3,
Wherein the determination unit compares the partial frame of the composite frame with the remaining partial frame.
청구항 4에 있어서,
상기 판단부는, 상기 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하며, 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는, 디스플레이 장치의 이상 검출 시스템.
The method of claim 4,
Wherein if the partial frame of the composite frame does not coincide with the remaining partial frame, the determination unit obtains a partial composite frame by synthesizing a portion of the video frame and a portion of the adjacent frame, And determines whether or not an abnormality has occurred in each of the plurality of display apparatuses.
청구항 3에 있어서,
상기 판단부는, 상기 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하는, 디스플레이 장치의 이상 검출 시스템.
The method of claim 3,
Wherein the determination unit compares a plurality of partial frames associated with the plurality of display devices in the composite frame with each other.
청구항 6에 있어서,
상기 판단부는, 상기 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하며, 상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는, 디스플레이 장치의 이상 검출 시스템.
The method of claim 6,
Wherein the determination unit obtains a partial composite frame by synthesizing a portion of the video frame and a portion of the adjacent frame when the plurality of partial frames in the composite frame do not coincide with each other, And determines whether there is an abnormality in each of the plurality of display apparatuses.
청구항 5 또는 7에 있어서,
상기 판단부는, 상기 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하고, 상기 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는, 디스플레이 장치의 이상 검출 시스템.
The method according to claim 5 or 7,
Wherein the determination unit compares the partial frame of the partial composite frame with the remaining partial frame and if the partial frame of the partial composite frame does not match the remaining partial frame Failure detecting system of the display device determines that there is at least a display device associated with the frame part does not match the rest of the frame.
청구항 5 또는 7에 있어서,
상기 판단부는, 상기 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하고, 상기 부분 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는, 디스플레이 장치의 이상 검출 시스템.
The method according to claim 5 or 7,
Wherein the determination unit compares a plurality of partial frames associated with the plurality of display devices in the partial composite frame to each other, and when the plurality of partial frames in the partial composite frame do not coincide with each other, And judges that there is an abnormality in the display device associated with the partial frame.
복수 개의 디스플레이 장치에서 출력되는 영상을 촬영하는 단계;
상기 촬영된 영상 프레임으로부터 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 획득하는 단계; 및
상기 복수 개의 부분 프레임간의 일치 여부에 따라 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 포함하는, 디스플레이 장치의 이상 검출 방법.
A step of photographing an image output from a plurality of display devices;
A plurality of partial frames associated with the plurality of display devices from the photographed image frame, Obtaining; And
Determining whether there is an abnormality in each of the plurality of display devices according to whether or not the plurality of partial frames coincide with each other.
청구항 10에 있어서,
상기 복수 개의 부분 프레임 중 하나 이상이 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 연속되는 하나 이상의 인접 프레임의 부분 프레임을 획득하는 단계; 및
상기 인접 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는 단계를 더 포함하는, 디스플레이 장치의 이상 검출 방법.
The method of claim 10,
Obtaining a partial frame of one or more contiguous frames contiguous with the video frame if one or more of the plurality of partial frames do not match the remaining partial frames; And
Further comprising comparing the partial frame of the adjacent frame with the remaining partial frame.
청구항 11에 있어서,
상기 인접 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임과 상기 인접 프레임을 합성하여 합성 프레임을 획득하는 단계; 및
상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 포함하는, 디스플레이 장치의 이상 검출 방법.
The method of claim 11,
If the partial frame of the adjacent frame does not coincide with the remaining partial frame, combining the video frame and the adjacent frame to obtain a composite frame; And
And determining whether or not an abnormality exists in each of the plurality of display devices using the partial frame of the composite frame.
청구항 12에 있어서,
상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계는, 상기 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는, 디스플레이 장치의 이상 검출 방법.
The method of claim 12,
Wherein the step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the composite frame compares the partial frame of the composite frame with the remaining partial frame.
청구항 13에 있어서,
상기 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하는 단계; 및
상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 더 포함하는, 디스플레이 장치의 이상 검출 방법.
14. The method of claim 13,
If the partial frame of the composite frame does not coincide with the remaining partial frame, synthesizing a portion of the video frame and a portion of the adjacent frame to obtain a partial composite frame; And
Further comprising the step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the partial composite frame.
청구항 12에 있어서,
상기 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계는, 상기 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하는, 디스플레이 장치의 이상 검출 방법.
The method of claim 12,
Wherein the step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the composite frame comprises the steps of comparing a plurality of partial frames associated with the plurality of display devices in the composite frame, Way.
청구항 15에 있어서,
상기 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우, 상기 영상 프레임의 일부분과 상기 인접 프레임의 일부분을 합성하여 부분 합성 프레임을 획득하는 단계; 및
상기 부분 합성 프레임의 부분 프레임을 이용하여 상기 복수 개의 디스플레이 장치 각각의 이상 유무를 판단하는 단계를 더 포함하는, 디스플레이 장치의 이상 검출 방법.
16. The method of claim 15,
Obtaining a partial composite frame by synthesizing a portion of the image frame and a portion of the adjacent frame when the plurality of partial frames in the composite frame do not coincide with each other; And
Further comprising the step of determining the presence or absence of an abnormality in each of the plurality of display devices using the partial frame of the partial composite frame.
청구항 14 또는 16에 있어서,
상기 부분 합성 프레임의 부분 프레임과 상기 나머지 부분 프레임을 비교하는 단계; 및
상기 부분 합성 프레임의 부분 프레임이 상기 나머지 부분 프레임과 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는 단계를 더 포함하는, 디스플레이 장치의 이상 검출 방법.
15. The method according to claim 14 or 16,
Comparing the partial frame of the partial composite frame with the remaining partial frame; And
If the partial frame of the partial composite frame does not coincide with the remaining partial frame Anomaly detection method of a display device, further comprising the step of determining that there is at least a display device associated with the frame part does not match the rest of the frame.
청구항 14 또는 16에 있어서,
상기 부분 합성 프레임 내 상기 복수 개의 디스플레이 장치와 연관되는 복수 개의 부분 프레임을 상호 비교하는 단계; 및
상기 부분 합성 프레임 내 상기 복수 개의 부분 프레임이 상호 일치하지 않는 경우 상기 나머지 부분 프레임과 일치하지 않는 부분 프레임과 연관되는 디스플레이 장치에 이상이 있는 것으로 판단하는 단계를 더 포함하는, 디스플레이 장치의 이상 검출 방법.
15. The method according to claim 14 or 16,
Comparing the plurality of partial frames associated with the plurality of display devices in the partial composite frame; And
And determining that there is an abnormality in the display device associated with the partial frame that does not coincide with the remaining partial frame when the plurality of partial frames in the partial composite frame do not coincide with each other .
KR1020140172865A 2014-12-04 2014-12-04 System and method for detecting abnormality of display device KR101646847B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140172865A KR101646847B1 (en) 2014-12-04 2014-12-04 System and method for detecting abnormality of display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140172865A KR101646847B1 (en) 2014-12-04 2014-12-04 System and method for detecting abnormality of display device

Publications (2)

Publication Number Publication Date
KR20160068053A true KR20160068053A (en) 2016-06-15
KR101646847B1 KR101646847B1 (en) 2016-08-09

Family

ID=56134814

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140172865A KR101646847B1 (en) 2014-12-04 2014-12-04 System and method for detecting abnormality of display device

Country Status (1)

Country Link
KR (1) KR101646847B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888912A (en) * 2017-11-22 2018-04-06 深圳创维-Rgb电子有限公司 The abnormal recognition methods of display screen display and system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102369615B1 (en) 2022-01-10 2022-03-03 주식회사 서경산업 Video pre-fault detection system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06225345A (en) * 1992-10-22 1994-08-12 Sharp Corp Automatic characteristic inspecting and adjusting device for color receiver
JP2005020176A (en) * 2003-06-24 2005-01-20 Fuji Photo Film Co Ltd Method for evaluating immutability of display apparatus
KR20050078034A (en) * 2004-01-30 2005-08-04 Samsung Electronics Co Ltd A inspecting apparatus and inspecting method of display panel
KR20080048294A (en) * 2006-11-28 2008-06-02 삼성전자주식회사 Screen inspection system and method thereof
KR20110046824A (en) 2009-10-29 2011-05-06 에스케이 텔레콤주식회사 Video encoding error detecting system and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06225345A (en) * 1992-10-22 1994-08-12 Sharp Corp Automatic characteristic inspecting and adjusting device for color receiver
JP2005020176A (en) * 2003-06-24 2005-01-20 Fuji Photo Film Co Ltd Method for evaluating immutability of display apparatus
KR20050078034A (en) * 2004-01-30 2005-08-04 Samsung Electronics Co Ltd A inspecting apparatus and inspecting method of display panel
KR20080048294A (en) * 2006-11-28 2008-06-02 삼성전자주식회사 Screen inspection system and method thereof
KR20110046824A (en) 2009-10-29 2011-05-06 에스케이 텔레콤주식회사 Video encoding error detecting system and method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107888912A (en) * 2017-11-22 2018-04-06 深圳创维-Rgb电子有限公司 The abnormal recognition methods of display screen display and system

Also Published As

Publication number Publication date
KR101646847B1 (en) 2016-08-09

Similar Documents

Publication Publication Date Title
US9049384B2 (en) Video processing apparatus, camera apparatus, video processing method, and program
JP5896617B2 (en) Test measurement system, test measurement instrument, and measurement view synchronization method thereof
US9516297B2 (en) Method and device for monitoring phase shifting between stereoscopic cameras
JP2006352644A (en) Image abnormality detecting device of surveillance camera
US20150341569A1 (en) Image switching apparatus, image switching system, and image switching method
KR101646847B1 (en) System and method for detecting abnormality of display device
JP2007194741A (en) Flicker video detection apparatus, flicker video detection program, video display apparatus, number of improper luminance pixel calculation method, and flicker detection method
KR101546850B1 (en) Picture quality assessment method and picture quality assessment apparatus for display device
US10861188B2 (en) Image processing apparatus, medium, and method
KR100556247B1 (en) Picture Quality Evaluation Device And Controlling Method Thereof
US10154240B2 (en) Video processing method and apparatus for use with a sequence of stereoscopic images
TW201606707A (en) Method and device for detecting grayscale image
KR101874588B1 (en) method for display of multi-channel region of interest using high-resolution cameras
CN113408479A (en) Flame detection method and device, computer equipment and storage medium
JP6526696B2 (en) System and method for transmitting camera based parameters without using dedicated back channel
JP2017139559A (en) Monitoring system and display method for monitoring system
KR20090128035A (en) Method for monitoring and sensing broadcasting error using image processing techniques
TWI414182B (en) Multimedia device and play mode detection method of the same
JP6664078B2 (en) Three-dimensional intrusion detection system and three-dimensional intrusion detection method
JP6930880B2 (en) Video display device and video production support method
KR20150014717A (en) Image stain detection method for camera module defect determination
CN112907540A (en) Splicing abnormity detection method, device, equipment and medium
KR101576223B1 (en) Apparatus for Monitering of Brodcasting Signal and Method thereof
JP2000295599A (en) Monitor system
CN112740091A (en) Observation device and observation method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190701

Year of fee payment: 4