KR20150057026A - Method for Detecting a Logo in Moving Image In Real Time basis - Google Patents
Method for Detecting a Logo in Moving Image In Real Time basis Download PDFInfo
- Publication number
- KR20150057026A KR20150057026A KR1020130139810A KR20130139810A KR20150057026A KR 20150057026 A KR20150057026 A KR 20150057026A KR 1020130139810 A KR1020130139810 A KR 1020130139810A KR 20130139810 A KR20130139810 A KR 20130139810A KR 20150057026 A KR20150057026 A KR 20150057026A
- Authority
- KR
- South Korea
- Prior art keywords
- edge
- data
- pixel
- pixels
- logo
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
- H04H60/48—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising items expressed in broadcast information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/20—Contour coding, e.g. using detection of edges
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/27—Arrangements for recording or accumulating broadcast information or broadcast-related information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/56—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
- H04H60/59—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/4448—Receiver circuitry for the reception of television signals according to analogue transmission standards for frame-grabbing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H2201/00—Aspects of broadcast communication
- H04H2201/90—Aspects of broadcast communication characterised by the use of signatures
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
Description
본 발명은 동영상의 실시간 로고 검출방법에 관한 것이다.
The present invention relates to a real-time logo detection method for moving images.
텔레비전 신호는 방송국 식별 또는 방송 프로그램 안내를 위해서 동영상의 프레임에 일정 영역에 로고를 표시한다. 하지만 시청자들에게는 이러한 로고가 영상을 시청하는데에 방해되고 불편할 뿐이다. 특히, 이러한 로고는 고휘도로 표현되는 것이 일반적이기 때문에, 로고가 위치하는 영역의 특정 화소들의 열화 문제를 야기하기도 한다.A television signal displays a logo on a frame of a moving image in order to identify the broadcasting station or guide the broadcasting program. However, for viewers, these logos are disturbing and inconvenient for viewing video. Particularly, since such a logo is generally expressed at a high luminance, it also causes a problem of deterioration of certain pixels in a region where the logo is located.
이러한 문제점을 개선하기 위한 방안으로 영상에서 로고를 검출하여 제거하는 방법들이 제안되고 있다. 예컨대, 미국특허 5,668,917호는 불투명한 로고들의 반복적인 특성에 근거하여 로고를 검출한다. 그리고 국내공개특허 제10-2005-0034538호에 공개된 '디지털 비디오 신호 내에서 불투명한 로고 검출 장치 및 방법'은 장면 변화를 갖는 키 프레임들을 비교하여 로고를 검출하는 기술을 개시하고 있다. In order to solve these problems, methods of detecting and removing a logo from a video image have been proposed. For example, U.S. Patent No. 5,668,917 detects logos based on the repetitive nature of opaque logos. And, an opaque logo detection apparatus and method in a digital video signal disclosed in Korean Patent Publication No. 10-2005-0034538 discloses a technique of detecting a logo by comparing key frames having a scene change.
이와 같은 선행기술들은 로고 검출을 위한 기본적인 방법을 영상프레임들 간의 화소 데이터를 비교하는 것을 기본으로 하고 있다. 즉, 종래의 로고 검출 방법을 실시하기 위해서는 비교 대상인 영상프레임들을 저장하기 위해서 적어도 두 개 이상의 프레임 메모리가 필요하다. 즉, 방법을 실시하기 위해서 소요되는 비용이 증가할 수밖에 없고, 프레임메모리를 이용하기 위해서 구성이 복잡해 질 수밖에 없다. These prior arts are based on comparing pixel data between image frames as a basic method for detecting a logo. That is, in order to implement the conventional logo detection method, at least two frame memories are required to store image frames to be compared. That is, the cost required to implement the method increases, and the configuration becomes complex to use the frame memory.
또한 선행기술들은 영상프레임들 간의 비교를 통해서 로고를 검출하기 때문에, 매 순간 로고 검출을 위한 시간이 많이 소요되는 단점이 있다.
Also, since the prior art detects the logo through a comparison between image frames, there is a disadvantage that it takes a lot of time for logo detection at every moment.
본 발명은 구성을 간단히 하면서, 로고 검출 시간을 줄일 수 있는 동영상의 실시간 로고 검출방법을 제공하는 데에 그 목적이 있다.
It is an object of the present invention to provide a real-time logotype detection method of a moving image which can reduce a logo detection time while simplifying the configuration.
본 발명에 의한 동영상의 로고 검출방법은 동영상을 표현하기 위한 복수 개의 연속적인 영상프레임에서 각각의 상기 영상프레임에 존재하는 에지 화소를 검출하고, 상기 영상프레임들의 화소들에 대해서 다른 화소들과 구분되는 에지데이터를 부여하는 제1 단계, 각각의 상기 영상프레임들의 에지데이터를 동일한 화소 위치별로 순차적으로 누적함으로써 각각의 화소들에 대해서 누적된 에지데이터인 합산데이터를 산출하고, 상기 영상프레임들의 모든 화소들에 대한 상기 합산데이터를 포함하는 에지맵을 생성하는 제2 단계 및 상기 에지맵에서 상기 합산데이터가 임계치를 초과할 경우에, 상기 임계치를 초과하는 합산데이터를 갖는 화소를 로고 영역이라고 판단하는 제3 단계를 포함한다.
A method of detecting a logo of a moving image according to the present invention is a method for detecting an edge pixel existing in each image frame in a plurality of consecutive image frames for representing a moving image and separating the pixels of the image frames from other pixels The edge data of each of the image frames is sequentially accumulated for each of the same pixel positions to calculate summation data which is accumulated edge data for each of the pixels, A second step of generating an edge map including the summation data for the edge area, and a third step of, when the summation data exceeds the threshold in the edge map, .
본 발명에 의한 동영상의 로고 검출방법은 실시간으로 제공받는 영상프레임들의 에지를 이용하여 로고를 검출하고 검출된 영상의 로고 영역에 대해서 영상을 보정한다. 즉, 본 발명은 최초 프레임에서 기준시간에 해당하는 시간 이후에는 각각의 단일 영상프레임에 대해서 영사 보정을 수행할 수 있기 때문에 실시간 영상 보정이 가능하다. The method of detecting a moving image according to the present invention detects a logo using edges of image frames received in real time and corrects the image with respect to a logo area of the detected image. That is, since the present invention can perform projection correction for each single image frame after the time corresponding to the reference time in the first frame, real-time image correction is possible.
또한, 본 발명에 의한 동영상의 로고 검출방법에 의하면 영상프레임들을 저장하기 위해서 두 개 이상의 프레임메모리를 요구하지 않고, 하나의 프레임메모리와 라인 메모리를 이용하기 때문에 발명을 실시하기 위한 비용을 절약하며 구성을 간단히 할 수 있다.
In addition, according to the method of detecting a logo of a moving picture according to the present invention, since one frame memory and a line memory are used instead of requiring two or more frame memories for storing image frames, Can be simplified.
도 1은 본 발명에 의한 동영상의 로고 검출장치의 구성을 나타내는 블록도.
도 2는 본 발명에 의한 동영상의 로고 검출방법을 나타내는 순서도.
도 3 내지 도 9는 본 발명에 의한 동영상의 로고 검출방법의 실시 예를 나타내는 도면들.1 is a block diagram showing a configuration of a moving image logo detection device according to the present invention;
2 is a flowchart showing a method of detecting a logo of moving images according to the present invention;
3 to 9 are views showing an embodiment of a method of detecting a logo of moving images according to the present invention.
이하 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예들을 상세히 설명한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 실질적으로 동일한 구성요소들을 의미한다. 이하의 설명에서, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명을 생략한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the preferred embodiments of the present invention, examples of which are illustrated in the accompanying drawings. Like reference numerals throughout the specification denote substantially identical components. In the following description, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.
본 발명에 의한 로고 검출장치는 디스플레이장치에 표시되는 동영상의 화면에서 로고를 검출하기 위한 것이다. 동영상은 복수의 영상프레임을 디스플레이장치에 연속적으로 표시하는 것을 기반으로 움직임을 표현하는 것으로서, 방송국에서 전송되는 방송신호를 기반으로 재생되거나 저장매체에 압축되어 저장된 영상파일이 디스플레이장치에 재생되는 것일 수 있다. 로고는 동영상에서 표시되는 해당 영상의 제목 또는 해당 영상의 제작자나 배포자와 같이, 영상의 일정한 위치에서 일정시간 이상 지속적으로 표시되는 것이다. A logo detection apparatus according to the present invention is for detecting a logo on a screen of a moving picture displayed on a display device. A moving picture represents motion based on continuously displaying a plurality of video frames on a display device, and the moving picture may be reproduced on the basis of a broadcasting signal transmitted from a broadcasting station, or a video file stored in a storage medium have. The logo is continuously displayed for a predetermined time or longer at a predetermined position of the image, such as the title of the corresponding image displayed in the moving image or the producer or distributor of the corresponding image.
본 발명에 의한 로고 검출장치는 동영상에서 로고를 표시하는 화소를 검출하여 해당 화소의 휘도를 보정하기 위한 것으로서, 디스플레이장치의 티-콘(T-con)에 포함될 수도 있고, 별도의 구성으로 구현될 수도 있다. 본 발명은 패널에서 특정 화소의 열화로 인한 화질저하를 방지하기 위한 것으로서 유기발광 다이오드 표시장치(Organic Light Emitting Display, OLED)에 적용될 수 있지만, 로고로 인한 시청자의 영상시청의 불편함을 개선하기 위해서는 액정표시소자(Liquid Crystal Display, LCD), 전계방출 표시소자(Field Emission Display : FED), 플라즈마 디스플레이 패널(Plasma Display Panel, PDP) 및 전기영동 표시소자(Electrophoresis, EPD) 등의 디스플레이장치에도 적용될 수 있음은 자명하다.The logo detection apparatus according to the present invention detects a pixel for displaying a logo in a moving image and corrects the brightness of the corresponding pixel. The logo detection apparatus may be included in a T-con of the display apparatus, It is possible. The present invention can be applied to an OLED (Organic Light Emitting Display) for preventing deterioration of image quality due to deterioration of a specific pixel in a panel. However, in order to improve the inconvenience of viewing a video image of a viewer due to a logo And can also be applied to a display device such as a liquid crystal display (LCD), a field emission display (FED), a plasma display panel (PDP), and an electrophoresis (EPD) It is self-evident.
도 1은 본 발명에 의한 로고 검출장치(100)의 구성을 나타내는 블록도이다. 1 is a block diagram showing a configuration of a
도 1을 참조하면, 본 발명에 의한 로고 검출장치(100)는 에지 검출부(110), 에지데이터 합산부(120), 노이즈 검출부(130), 로고 검출부(140) 및 영상 보정부(150)를 구비한다. 1, a
에지 검출부(110)는 동영상을 표현하기 위한 복수의 영상프레임들을 연속적으로 제공받으며, 각각의 영상프레임에 포함되는 에지 화소를 검출한다 그리고 에지 검출부(110)는 각각의 화소들에 대해서 에지 화소인지 여부를 구분하기 위한 에지데이터를 부가한다. The
에지 검출부(110)는 에지 화소를 검출하기 위한 방법으로 화소 간의 휘도차이에 근거하여 임의의 화소가 에지 화소인지 여부를 판단할 수 있다. 이를 위해서 에지 검출부(110)는 에지 마스크(112)를 이용하여 모든 화소들에 대해서 인접하는 화소와의 휘도 차이를 계산한다. 그리고 에지 검출부(110)는 화소 간의 휘도 차이가 휘도변화 임계치 이상인지 여부를 판단한다. 만약 임의의 화소의 휘도가 인접하는 화소의 휘도와 휘도기준치 이상의 휘도 차이가 있으면, 에지 검출부(110)는 해당 화소에 '1'의 에지데이터를 부여한다. 또는 임의의 화소의 휘도가 인접하는 화소의 휘도와 휘도변화 임계치 미만의 휘도 차이가 있으면, 에지 검출부(110)는 해당 화소에 '0'의 에지데이터를 부여한다. The
이러한 과정에서 에지데이터를 구분하기 위한 휘도변화 임계치는 인접하는 화소 간의 휘도 차이가 서로 다른 객체인지를 구분할 수 있는 기준이 될 수 있는 수치로 설정될 수 있다. 예컨대, 휘도변화 임계치는 영상의 휘도를 256휘도로 표현할 경우에 '20'으로 설정할 수 있다. In this process, the luminance change threshold for discriminating the edge data may be set to a value that can be used as a criterion for distinguishing whether the luminance difference between adjacent pixels is different from each other. For example, the luminance variation threshold may be set to '20' when the luminance of an image is represented by 256 luminance.
그리고 이러한 에지 검출부(110)가 이용하는 마스크는 '3×3 마스크'가 될 수 있다. 에지 검출부(110)는 '5×5 마스크' 또는 '10×10 마스크'를 이용하여도 무방하지만 라인 메모리의 절감을 위하여 '3×3 마스크'를 이용할 수 있다. The mask used by the
실질적인 구현 예로서, 본 발명의 에지 검출부(110)는 라인 메모리를 이용할 수 있다. 따라서 본 발명에 의한 에지 검출방법은 프레임 메모리를 절감하여 발명의 실시를 위한 비용을 줄일 수 있다.As a practical implementation, the
에지데이터 합산부(120)는 에지 검출부(110)에서 획득한 에지데이터를 프레임메모리(10)에 누적하여 저장함으로써, 누적된 에지데이터인 합산데이터를 포함하는 에지맵을 생성한다. 이때, 에지데이터 합산부(120)는 '1'의 에지데이터를 누적한 횟수를 카운트한다.The edge
에지맵을 생성하기 위해서, 에지데이터 합산부(120)는 에지 검출부(110)에서 획득한 최초 프레임의 제1 에지데이터를 바탕으로 제1 에지맵을 생성한다. 그리고 에지데이터 합산부(120)는 제1 에지맵의 각 화소들의 제1 에지데이터에 제2 프레임에서 획득한 각 화소들의 제2 에지데이터를 합산함으로써, 전체 화소들에 대한 합산데이터를 포함하는 제2 에지맵을 생성한다. In order to generate the edge map, the edge
이때 에지데이터 합산부(120) 각 화소들의 에지데이터를 합산하는 과정은 '1'인 에지데이터만을 이전 프레임까지의 합산데이터에 합산하고, '0'의 에지데이터를 갖는 화소에 대해서는 이전 프레임까지의 합산데이터를 초기화한다. 예컨대, P0의 화소에 대해서, 제(i-1) 프레임까지의 합산데이터가 'k'라고 할 때 제i 프레임의 에지데이터가 '1'이면, 에지데이터 합산부(120)는 제i 에지맵의 합산데이터를 'k+1'로 부여한다. 만약 이때, 제i 프레임의 에지데이터가 '0'이면, 에지데이터 합산부(120)는 제i 에지맵의 합산데이터를 '0'으로 초기화한다.At this time, in the process of summing edge data of each pixel of the edge
이러한 방법을 통해서 에지데이터 합산부(120)는 최초 프레임에서 n번째 프레임에 대한 제n 에지맵을 생성할 수 있다. In this way, the edge
또한 에지데이터 합산부(120)는 '1'의 에지데이터가 합산되는 횟수를 카운트하면서, 합산데이터가 임계치를 초과하는지 여부를 확인한다. 에지데이터 합산부(120)가 합산데이터의 임계치 초과 여부를 확인하는 과정은 추정 로고 화소인지를 판단하기 위한 것이다. 즉, 합산데이터가 클수록 해당 화소에서 일정크기 이상의 에지가 지속적으로 나타난 것을 의미하고, 이는 해당 화소가 로고 영역일 가능성이 큰 추정 로고 화소가 되기 때문이다. 임계치는 합산데이터를 비교하기 위한 것으로, 연속적인 프레임 수와 연관된다. 즉, 임계치는 영상에서 로고를 추정하기 위한 기준시간과 밀접한 연관이 있다. 따라서, 영상에서 로고가 지속되는 시간을 고려하여 설정된다. 만약 기준시간이 적다면 로고 이외에 영상패턴에 의해서도 추정 로고 화소가 검출될 가능성이 클 수 있고, 기준시간이 길다면 최초 로고를 검출하는 데에 소요되는 시간이 길어질 수 있다. 따라서 기준시간은 로고 검출의 소요시간이 길지 않아지는 범위 내에서 로고 검출 확률을 높일 수 있는 범위 내에서 설정될 수 있다. 예컨대 기준시간은 2분 내외로 설정될 수 있다. 따라서, 1초당 60프레임을 갖는 영상에서 임계치는 60×120(초) = 7200(프레임)을 기준을 바탕으로 설정될 수 있다. 즉, 에지데이터 합산부(120)는 합산데이터가 7200 내외, 예컨대 6000~8400 범위에서 설정된 임계치를 초과하는 것을 감지하여 추정 로고 화소를 검출할 수 있다.The edge
노이즈 검출부(130)는 에지데이터 합산부(120)에서 생성한 에지맵에서 노이즈를 검출하여 제거한다. The
노이즈 검출부(130)가 노이즈를 검출하는 동작은 에지 검출부(110)가 추정 로고 화소를 확인한 것을 바탕으로 수행된다. 즉, 에지 검출부(110)가 추정 로고 화소를 검출할 경우에, 노이즈 검출부(130)는 해당 추정 로고 화소가 노이즈인지 로고 영역인지를 판별한다. The operation in which the
노이즈 검출부(130)는 추정 로고 화소들이 연속적으로 정렬된 크기를 바탕으로 노이즈인지 여부를 판별할 수 있다. 영상에서 로고는 시청자에게 가시적으로 표시하기 위한 것이기 때문에 수 개의 화소들인 임펄스성 잡음(Impluse Noise)과는 확연히 구분된다. 따라서, 노이즈 검출부(130)는 수 개 또는 수십 개의 화소들로 구성되는 추정 로고 화소를 노이즈로 간주하여 제거하며, 이를 위해서 미디언 필터(Median Filter)를 이용할 수 있다. The
로고 검출부(140)는 노이즈 검출부(130)를 통해서 노이즈가 제거된 추정 로고 화소들을 바탕으로 실질적인 로고 화소들을 검출한다. 추정 로고 화소는 에지데이터들을 합산한 것을 바탕으로 검출한 것이다. 결국 추정 로고 화소는 에지, 즉 객체의 경계선만을 검출한 결과이다. 따라서, 로고 검출부(140)는 경계선들의 내부를 포함하는 실질적인 로고 영역을 검출한다. 이를 위해서 로고 검출부(140)는 스캔-라인 알고리즘을 이용할 수 있다. The
영상 보정부(150)는 로고 검출부(140)에서 검출한 로고 영역에 포함되는 로고 화소들의 데이터에 영상 보정을 수행한다. 로고 검출부(140)에서 검출한 로고 데이터는 지속적으로 높은 휘도를 갖는 화소 데이터이고, 이를 보상하기 위해서 영상 보정부(150)는 로고 데이터의 휘도를 낮추는 절차를 수행한다. 이때, 로고 화소들의 휘도를 지나치게 낮추게 되면 영상에서 암영으로 표시되기 때문에 표시품질의 저하를 초래할 수 있고, 휘도를 너무 조금 낮추면 패널의 소자 열화 현상을 개선하는 데에 불충분할 수 있다. 따라서, 로고 검출부(140)는 로고 영역의 데이터를 인가받는 데이터에서 40~60% 휘도를 낮추는 영상 보정을 수행한다.The
위와 같은 로고 검출장치를 이용하여 본 발명에 의한 로고 검출방법을 도 2의 순서도를 참조하여 살펴보면 다음과 같다. A method of detecting a logo according to the present invention using the above-described logotype detecting apparatus will be described with reference to the flowchart of FIG.
< 에지 검출을 통한 에지데이터 획득 : S201 >≪ Edge data acquisition through edge detection: S201 >
로고 검출을 위해서 에지 검출부(110)는 동영상을 표시하기 위한 영상프레임을 순차적으로 제공받는다. 그리고 에지 검출부(110)는 순차적으로 제공받는 영상프레임에서 에지 화소를 검출하고 에지데이터를 부가한다.In order to detect the logo, the
도 3은 'OCN'이라는 문자 로고가 표시되는 영상프레임의 일부를 나타내는 도면이다. 만약 밝은 로고(L)가 어두운 배경(scenery)에서 표현되고 있을 경우에 로고(L)를 검출하는 방법을 'A' 영역을 중심으로 살펴보면 다음과 같다3 is a diagram showing a part of an image frame in which a character logo 'OCN' is displayed. A method of detecting the logo L when the bright logo L is expressed in a dark scenery will be described with reference to the 'A' region as follows
도 4는 도 3에 도시된 'A'영역의 확대도 및 [j+1] 행에 속한 화소들의 휘도를 나타내는 모식도이다. 4 is an enlarged view of the area 'A' shown in FIG. 3 and a schematic diagram showing the brightness of pixels belonging to the [j + 1] th row.
에지 화소를 검출하기 위해서, 에지 검출부(110)는 에지마스크(112)를 이용하여 인접하는 행 또는 인접하는 열 간의 휘도 차이가 일정한 크기 이상일 경우에 중심 화소를 에지로서 판명한다. 예컨대 에지마스크(112)는 좌측열에서 우측열까지 순차적으로 이동하면서 각 행의 에지 화소를 검출한다. 그리고, 하나의 행에 대해서 에지 화소 검출을 마치면, 그 다음 행에 대한 에지 화소 검출을 수행함으로써 영상프레임의 모든 화소들에 대해서 에지 검출을 할 수 있다.In order to detect an edge pixel, the
각각의 화소들이 에지 화소인지를 확인하기 위해서, 에지마스크(112)는 오른쪽 인접화소와 에지마스크(112)의 중심화소(Cij) 간의 휘도 차이를 계산한다. 그리고 에지마스크(112)는 계산된 휘도 차이가 휘도기준치 이상일 경우에, 에지마스크(112)의 중심화소를 에지 화소로 검출할 수 있다. 예컨대, 에지마스크(112)의 중심화소(Cij)가 'P9'화소에 위치할 경우에 'P9'화소와 우측 인접 화소인 (j+1,K+1)의 화소와의 휘도차이(d)가 임계치를 초과하기 때문에, 에지마스크(112)는 'P9'의 화소를 에지 화소로 검출할 수 있다. 이와 마찬가지로, 'P10'화소 내지 "16'화소 역시 우측 인접 화소와의 휘도차이(d)가 휘도기준치 이상으로 판별되어 에지로 검출된다. To confirm that each pixel is an edge pixel, the
유사하게, 에지마스크(112)의 중심화소(Cij)가 'P1'화소에 위치할 경우에, 아래의 인접 화소인 (j+1,K+1)의 화소는 로고(L)에 속한 화소로서 휘도가 높은 화소이다. 이에 따라서, 에지마스크(112)는 'P1'화소를 에지 화소로 검출할 수 있다. 이와 마찬가지로, 'P2'화소 내지 'P8'화소 역시 아래측 인접 화소와의 휘도차이가 휘도기준치 이상으로 판별되어 에지로 검출된다.Similarly, when the center pixel C ij of the
그리고 에지 검출부(110)는 이처럼 에지로 검출된 화소들(P1~P16)에 에지데이터를 '1'로 부가한다. 또한, 에지 검출부(110)는 에지로 검출되지 않은 화소들에 대해서는 '0'의 에지데이터를 부가한다. 이때, '0'과 '1'의 에지데이터는 에지화소인지 여부를 구분하기 위한 것이기 때문에, 각각 다른 크기의 에지데이터가 부가될 수도 있다.The
< 에지데이터의 누적을 통해서 에지맵 생성 : S203 ><Edge map generation through accumulation of edge data: S203>
에지데이터 합산부(120)는 에지 검출부(110)에서 획득한 에지데이터를 프레임메모리(10)에 누적하여 저장함으로써 에지맵을 생성한다. The edge
예컨대, 도 4에 도시된 제1 프레임(F1)이 최초 영상프레임일 경우에, 에지데이터 합산부(120)는 에지로 검출된 화소들(P1~P16)에 부가된 '1'의 에지데이터를 프레임메모리(10)에 저장한다. For example, when the first frame F1 shown in FIG. 4 is the first image frame, the edge data adder 120 adds edge data of '1' added to the pixels P1 to P16 detected as edges And stores it in the
도 5는 도 4와 같은 제1 프레임(F1)의 'A'영역에 대한 에지맵을 나타내는 도면이다. 즉, 제1 에지맵(M1)에서 'A'영역은 'P1' 내지 'P16' 화소들만 '1'의 데이터를 갖고, 나머지 화소들 영역은 '0'의 데이터를 갖는다.5 is a diagram showing an edge map of the 'A' region of the first frame F1 shown in FIG. That is, in the first edge map M1, only the pixels 'P1' to 'P16' in the 'A' region have data of '1', and the remaining pixels have the data of '0'.
이와같이, 에지데이터 합산부(120)는 제1 프레임(P1)에서 에지로 검출된 화소들에 대해서 '1'의 에지데이터를 프레임메모리(10)에 저장함으로써 제1 에지맵을 생성한다. In this way, the edge
그리고, 제1 에지맵의 에지데이터는 제1 합산데이터로 간주된다. The edge data of the first edge map is regarded as the first sum data.
이어서 에지데이터 합산부(120)는 제2 프레임의 에지데이터를 제1 에지데이터에 합산하여 합산데이터를 생성함으로써, 합산데이터를 포함하는 제2 에지맵을 생성한다. 즉, 제1 프레임(F1)에 이어지는 제2 프레임의 'A'영역이 도 4에 도시된 제1 프레임(F1)의 'A'영역과 같다면, 에지데이터 합산부(120)는 에지가 검출된 화소들(P1~P16)에 부가된 '1'의 에지데이터를 제1 에지맵의 에지데이터에 합산한다. 따라서, 제2 프레임까지의 'A'영역의 제2 에지맵(M2)은 도 6과 같이 나타난다.Next, the edge
이러한 방법으로 에지데이터 합산부(120)는 제2 프레임까지의 에지데이터를 합산하여 제2 합산데이터를 생성함으로써, 제2 합산데이터를 포함하는 제2 에지맵(M2)을 생성한다. In this way, the edge
그리고 에지데이터 합산부(120)는 임의의 프레임에서 '0'의 에지데이터를 갖는 화소들에 대해서는 그 이전까지의 합산데이터를 '0'으로 초기화한다. 예컨대 도 7에서와 같이, 제3 프레임(F3)에서 로고(30)가 사라져서 'P1' 내지 'P16'의 화소들이 에지로 검출되지 않을 경우에, 에지데이터 합산부(120)는 'P1' 내지 'P16'의 화소들에 대해서는 제2 에지맵에 포함된 '2'의 합산데이터를 '0'으로 초기화시킨다. 따라서, 제3 프레임(F3)까지의 합산데이터를 포함하는 제3 에지맵(M3)의 'A'영역은 도 8과 같이 나타난다.Then, the edge
< 합산데이터를 카운트하여 추정 로고 화소 검출 : S205, S207 ><Estimated logo pixel detection by counting the sum data: S205 and S207>
에지데이터 합산부(120)는 S203 단계에서와 같이 에지데이터를 누적하는 동시에 프레임메모리(10)에 저장되는 화소들의 합산데이터를 임계치와 비교한다. 실시 예와 같이, 에지 화소에 대한 에지데이터가 '1'로 부여될 경우에, 에지데이터 합산부(120)는 순차적으로 누적하는 '1'의 에지데이터를 카운트함으로써 합산데이터의 크기를 산출할 수 있다.The edge
합산데이터와 임계치를 비교한 결과 합산데이터가 임계치를 초과할 경우에, 해당 화소는 추정 로고 화소로 간주된다.When the sum data exceeds the threshold value as a result of the comparison between the sum data and the threshold value, the corresponding pixel is regarded as the estimated logo pixel.
그리고 만약, 합산데이터가 임계치 이하일 경우에, 에지데이터 합산부(120)는 S201 및 S203 단계를 반복한다. If the sum data is less than or equal to the threshold value, the edge
< 노이즈 검출 및 제거 : S209 ><Noise detection and removal: S209>
S205 단계에서 에지데이터 합산부(120)가 카운트한 합산데이터가 임계치를 초과하였다고 판별할 경우에, 노이즈 검출부(130)는 추정 로고 화소가 노이즈 인지 여부를 확인하고, 확인된 노이즈를 제거한다. 이를 위해서 노이즈 검출부(130)는 합산데이터를 포함하는 에지맵을 미디언 필터를 이용하여 필터링함으로써, 수 개 또는 수십 개의 연속적인 화소들을 임펄스성 잡음으로 간주하여 제거할 수 있다.When it is determined in step S205 that the sum data counted by the edge
< 로고 검출 : S211 ><Logo detection: S211>
S207 단계에서 노이즈가 제거된 추정 로고 화소들은 로고의 에지라고 간주된다. 이후에 로고 검출부(140)는 경계 영역 내의 실질적인 로고 영역을 검출한다. 이를 위해서 로고 검출부(140)는 스캔-라인 폴리곤 필 알고리즘(Scan-Line Polygon Fill Algorithm)을 이용할 수 있다. In step S207, the estimated logo pixels from which the noise has been removed are regarded as the edges of the logo. Then, the
도 9은 로고 검출부(140)의 실시 예를 모식화한 도면으로서, 'k' 스캔라인까지의 로고 검출을 수행한 것을 나타내는 도면이다. 이와 같이, 로고 검출부(140)는 스캔라인이 화소들을 지나칠 때, 로고의 에지 화소들과 교차하는 지점을 검출하고, 에지 화소들 간의 내부를 채우는 과정을 반복한다. 이러한 방법으로 로고 검출부(140)는 에지 화소 간의 내부 영역에 해당하는 화소들을 채움으로써 로고(30)를 검출한다.FIG. 9 is a diagram illustrating an embodiment of the
< 영상 보정 : S213 >≪ Image correction: S213 >
S209 단계를 거쳐서 실질적인 로고 영역이 검출되면, 영상 보정부(150)는 영상프레임에서 해당 로고 영역에 포함되는 화소들의 휘도를 낮추는 보정을 수행한다. 즉, S207 단계에서 노이즈를 제거하고 S209 단계에서 로고 영역을 검출하는 과정은 에지맵을 이용하여 수행되지만, 영상 보정부(150)는 에지 검출부(110)가 전송받는 영상프레임에 대하여 영상 보정을 수행한다.If a substantial logo region is detected in step S209, the
예컨대, 에지 검출부(110)가 제공받은 제i 프레임의 에지데이터를 누적한 결과의 제i 합산데이터가 임계치를 초과하여 S207 및 S209 단계가 진행되었다면, 영상 보정부(150)는 제i 프레임에 대해서 로고 영역 화소 내의 영상을 보정한다. For example, if the i-th accumulated data of the edge data of the i-th frame provided by the
이때 영상 보정부(150)는 로고 영역 화소 내의 휘도를 낮추는 영상 보정을 할 수 있다.At this time, the
이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허 청구의 범위에 의해 정하여져야만 할 것이다.
It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification, but should be defined by the claims.
30 : 로고 112 : 에지마스크30: Logo 112: edge mask
Claims (9)
각각의 상기 영상프레임들의 에지데이터를 동일한 화소 위치별로 순차적으로 누적함으로써 각각의 화소들에 대해서 누적된 에지데이터인 합산데이터를 산출하고, 상기 영상프레임들의 모든 화소들에 대한 상기 합산데이터를 포함하는 에지맵을 생성하는 제2 단계; 및
상기 에지맵에서 상기 합산데이터가 임계치를 초과할 경우에, 상기 임계치를 초과하는 합산데이터를 갖는 화소를 로고 영역이라고 판단하는 제3 단계;를 포함하는 동영상의 실시간 로고 검출방법.
A first step of detecting an edge pixel existing in each of the plurality of continuous image frames for representing a moving image and giving edge data distinguished from other pixels to pixels of the image frames;
Wherein the edge data of each of the image frames is sequentially accumulated for each of the same pixel positions to calculate summation data which is accumulated edge data for each of the pixels and an edge including the summation data for all pixels of the image frames A second step of generating a map; And
And determining that the pixel having the summation data exceeding the threshold is a logo region when the sum data exceeds the threshold value in the edge map.
상기 제1 단계는,
에지마스크를 이용하여 상기 영상프레임 내의 모든 화소들을 순차적으로 이동하면서 에지를 검출하되, 상기 에지마스크의 중심 화소의 휘도가 인접하는 화소의 휘도와 휘도기준치 이상일 경우에는 상기 에지마스크 중심 화소를 에지 화소로 검출하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법.
The method according to claim 1,
In the first step,
Wherein when the luminance of the center pixel of the edge mask is equal to or greater than the luminance of the adjacent pixel and the luminance reference value, the edge pixel center pixel is determined as an edge pixel Wherein the detecting step detects the presence of the real-time logo.
상기 제2 단계는 연속적으로 제공받는 제1 내지 제n 영상프레임에 대한 에지맵을 생성하기 위해서,
상기 제1 영상프레임의 각 화소들의 에지데이터를 제1 합산데이터로 간주하여 제1 에지맵을 생성하는 단계;
상기 제1 에지맵에 상기 제2 영상프레임의 에지데이터를 합산하여 제2 합산데이터를 포함하는 제2 에지맵을 생성하는 단계; 및
제(n-1) 에지맵에 상기 제n 영상프레임의 에지데이터를 합산하여 제n 에지맵을 생성하는 단계;를 포함하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법(이때, n은 3 이상의 자연수).
The method according to claim 1,
The second step is to generate edge maps for the first to n < th > image frames continuously provided,
Generating a first edge map by considering edge data of each pixel of the first image frame as first sum data;
Summing edge data of the second image frame to the first edge map to generate a second edge map including second sum data; And
And generating an n-th edge map by summing edge data of the n-th image frame in an (n-1) -th edge map, wherein n is a natural number of 3 or more ).
상기 제2 단계는
상기 제i 에지맵의 임의의 화소의 에지데이터가 '1'일 경우에는, 상기 제(i-1) 에지맵의 해당 화소의 합산데이터에 에지데이터를 합산하고,
상기 제i 에지맵의 임의의 화소의 에지데이터가 '0'일 경우에는, 상기 제(i-1) 에지맵의 해당 화소의 합산데이터를 '0'으로 초기화하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법(이때, i는 2 이상의 자연수).
The method of claim 3,
The second step
Edge data is added to the sum data of the corresponding pixels of the (i-1) -th edge map when the edge data of any pixel of the i-th edge map is '1'
And when the edge data of a certain pixel of the i-th edge map is '0', the sum data of the corresponding pixel of the (i-1) -th edge map is initialized to '0' Detection method (i is a natural number of 2 or more).
상기 제3 단계는
상기 제i 에지맵에서 임의의 화소의 제i 합산데이터가 6000~8400 범위에서 설정되는 상기 임계치를 초과할 경우에, 해당 화소를 로고 영역이라고 판단하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법(이때, i는 2 이상의 자연수).
The method of claim 3,
In the third step,
And when the i-th sum data of an arbitrary pixel in the i-th edge map exceeds the threshold value set in a range of 6000 to 8400, the pixel is judged to be a logo region. , i is a natural number of 2 or more).
상기 제3 단계 이후에,
상기 로고 영역이라고 판단한 화소들 중에서 노이즈 화소를 검출하는 제4 단계;를 더 포함하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법.
6. The method according to any one of claims 1 to 5,
After the third step,
And a fourth step of detecting a noise pixel among the pixels determined to be the logo region.
상기 제4 단계 이후에,
상기 노이즈 화소로 검출된 화소에 대해서, 상기 노이즈 화소의 합산데이터를 '0'으로 초기화하는 제5 단계;를 더 포함하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법.
7. The method of claim 6,
After the fourth step,
Further comprising a fifth step of initializing the sum data of the noise pixels to '0' for the pixel detected as the noise pixel.
상기 제4 단계 이후에,
상기 로고 영역이라고 판단된 화소들에 대한 영상을 보정하는 제5 단계;를 더 포함하는 것을 특징으로 하는 동영상의 실시간 로고 검출방법.
7. The method of claim 6,
After the fourth step,
And a fifth step of correcting the image of the pixels determined to be the logo area.
상기 제5 단계는
상기 에지맵에서 검출한 상기 로고 영역의 화소들의 휘도를 40~60% 낮추는 것을 특징으로 하는 동영상의 실시간 로고 검출방법.
9. The method of claim 8,
The fifth step
And the brightness of pixels of the logo area detected in the edge map is reduced by 40 to 60%.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130139810A KR102153393B1 (en) | 2013-11-18 | 2013-11-18 | Method for Detecting a Logo in Moving Image In Real Time basis |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130139810A KR102153393B1 (en) | 2013-11-18 | 2013-11-18 | Method for Detecting a Logo in Moving Image In Real Time basis |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150057026A true KR20150057026A (en) | 2015-05-28 |
KR102153393B1 KR102153393B1 (en) | 2020-09-08 |
Family
ID=53391977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020130139810A KR102153393B1 (en) | 2013-11-18 | 2013-11-18 | Method for Detecting a Logo in Moving Image In Real Time basis |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102153393B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170037783A (en) * | 2015-09-25 | 2017-04-05 | 엘지디스플레이 주식회사 | Method for logo detection and display device using thereof |
WO2021060572A1 (en) * | 2019-09-24 | 2021-04-01 | 엘지전자 주식회사 | Display device and afterimage compensation method thereof |
US11922600B2 (en) | 2018-08-31 | 2024-03-05 | Samsung Display Co., Ltd. | Afterimage compensator, display device having the same, and method for driving display device |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070076337A (en) * | 2006-01-18 | 2007-07-24 | 삼성전자주식회사 | Edge area determining apparatus and edge area determining method |
KR101051459B1 (en) * | 2010-05-31 | 2011-07-22 | 한양대학교 산학협력단 | Apparatus and method for extracting edges of an image |
KR20110093280A (en) * | 2010-02-12 | 2011-08-18 | 숭실대학교산학협력단 | The method and system for an episode auto segmentation of the tv gag program |
JP2011203790A (en) * | 2010-03-24 | 2011-10-13 | Kddi Corp | Image verification device |
-
2013
- 2013-11-18 KR KR1020130139810A patent/KR102153393B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070076337A (en) * | 2006-01-18 | 2007-07-24 | 삼성전자주식회사 | Edge area determining apparatus and edge area determining method |
KR20110093280A (en) * | 2010-02-12 | 2011-08-18 | 숭실대학교산학협력단 | The method and system for an episode auto segmentation of the tv gag program |
JP2011203790A (en) * | 2010-03-24 | 2011-10-13 | Kddi Corp | Image verification device |
KR101051459B1 (en) * | 2010-05-31 | 2011-07-22 | 한양대학교 산학협력단 | Apparatus and method for extracting edges of an image |
Non-Patent Citations (1)
Title |
---|
이동물체 변위평가를 위한 에지맵 생성, 한국정보기술학회논문지 7(2), 2009.04.* * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170037783A (en) * | 2015-09-25 | 2017-04-05 | 엘지디스플레이 주식회사 | Method for logo detection and display device using thereof |
US11922600B2 (en) | 2018-08-31 | 2024-03-05 | Samsung Display Co., Ltd. | Afterimage compensator, display device having the same, and method for driving display device |
WO2021060572A1 (en) * | 2019-09-24 | 2021-04-01 | 엘지전자 주식회사 | Display device and afterimage compensation method thereof |
EP4036902A4 (en) * | 2019-09-24 | 2023-05-10 | LG Electronics Inc. | Display device and afterimage compensation method thereof |
Also Published As
Publication number | Publication date |
---|---|
KR102153393B1 (en) | 2020-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9253373B2 (en) | Flare detection and mitigation in panoramic images | |
US7570833B2 (en) | Removal of poisson false color noise in low-light images usng time-domain mean and variance measurements | |
US8830257B2 (en) | Image displaying apparatus | |
JP5047344B2 (en) | Image processing apparatus and image processing method | |
US10033962B2 (en) | Method and device for inverse tone mapping | |
US7466340B1 (en) | Method and apparatus for protection against pixel burn-in | |
US20210358088A1 (en) | Video compression stream | |
US20150097976A1 (en) | Image processing device and image processing method | |
KR102153393B1 (en) | Method for Detecting a Logo in Moving Image In Real Time basis | |
CN111741290B (en) | Image stroboscopic detection method and device, storage medium and terminal | |
KR20170037783A (en) | Method for logo detection and display device using thereof | |
JP4580347B2 (en) | Flicker video conversion device, program and method thereof, and video display device | |
KR100400375B1 (en) | Display Apparatus with the pseudo-contour noise detector using skin-color filter and Method of processing an image Thereof | |
CN107666560B (en) | Video de-interlacing method and device | |
KR20110088884A (en) | Photographing method and apparatus and recording medium thereof | |
US20110273449A1 (en) | Video processing apparatus and video display apparatus | |
US20060221244A1 (en) | Image-quality adjusting apparatus, image-quality adjusting method, and display apparatus | |
KR20080041581A (en) | Image processing apparatus, image processing method, electro-optical device and electronic device | |
KR20040063567A (en) | Method for preventing image sticking on a image display device using pdp module | |
KR100792455B1 (en) | False contour noise reducing apparatus and method thereof | |
KR100671838B1 (en) | Afterimage preventing apparatus and method for plasma display pannel | |
CN111757182A (en) | Image screen-splash detection method, device, computer device and readable storage medium | |
KR100747286B1 (en) | Plasma Display Apparatus and Image Processing Method thereof | |
US20230360595A1 (en) | Organic light emitting diode (oled) burn-in prevention based on stationary pixel and luminance reduction | |
EP2509045B1 (en) | Method of, and apparatus for, detecting image boundaries in video data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |